Python 爬虫 面试题

 爬虫遵循的协议：robot协议

爬虫分类

通用爬虫工作流程

一些反爬及其应对措施

介绍搜索引擎

 介绍HTTP

URL

Cookie和Session

hashlib密码加密

关于response.text乱码问题

代理

JSON数据

正则表达式