人类有史以来最强悍的爬虫视频，尹成大魔不出，谁与争锋
清华学霸尹成大哥的Python爬虫视频，近期免费公开，可以找客服475318423索要视频源码。
爬虫基础
1.爬虫的定义与作用
2.截取http协议-Fiddler实战
get与post差别
3.如何有效抓取网页
python2
—urllib2详解
—request详解
—Selenium +PhantomJS
—Selenium + Chrome
—Selenium +Firefox
—如何解决动态页面与静态页面
python3
—urllib.request代码升级
4.如何有效提取数据
正则表达式
xpath
beautifulsoup4
pyquery
jsonpath
5.如何模拟网页操作
6.爬虫强化
多协程爬虫
多线程爬虫
多进程爬虫
分布式爬虫
分布式+多进程+多线程+多协程综合爬虫
7.验证码
机器视觉如何识别验证码
机器视觉如何训练验证码
机器视觉如何有效识别任何验证码
验证码图像处理
8.网页模拟登陆实战
实现百度，阿里，淘宝，京东的自动登录
9.爬虫高级技术
模拟浏览器头
换ip自动拨号
服务器代理
重定向
https加密处理
cookie复用
手机网页抓取
模拟手机浏览器
爬虫网站的深度遍历与广度遍历
如何下载优酷，爱奇艺，网易公开课，腾讯视频，搜狐视频，新浪视频，百度视频，酷狗音乐，酷我音乐等等知名视频网站的视频
洋葱浏览器与深网ip实现解除ip封锁
破解路由器密码与wifi密码
阶段性轻量级爬虫实战
网页邮箱无限挖掘
抓取智联招聘
抓取51job
抓取中华英才网
模拟登录人人网
模拟登录cms系统
分布式百度贴吧数据检索模拟登录
分布式百度百科数据提取
深度遍历与广度遍历百度贴吧
抓取阿里巴巴百度腾讯招聘
抓取脚本之家
暴力破解网站密码
暴力破解路由器密码
抓取QQ空间
登录抓取京东
实现自动投票
实现淘宝自动领金币
抓取网页代理
模拟登录自动下载工具
自动登录知乎并破解知乎汉字倒立验证码
微博自动登录抓取
阳光问政数据抓取
抓取CSDN讲师
抓取51CTO讲师
抓取卡通图片
抓取双色球
抓取起点中文
实现自动翻译
爬虫实现任意验证码识别调用云打码
爬虫部署亚马逊云
10.爬虫框架scrapy与pyspider
scrapy深度遍历 广度遍历
scrapy抓取单页数据与多页数据
scrapy抓取百度百科
scrapy抓取百度贴吧
scrapy抓取51CTO讲师
scrapy抓取CSDN讲师
scrapy抓取百度邮箱
scrapy+cookie模拟登录人人网
scrapy+cookie模拟登录淘宝网
scrapy+request模拟登录抓取人人网
scrapy+selenium模拟登录京东网
scrapy+selenium模拟登录淘宝网
scrapy抓取阳光问政
scrapy抓取斗鱼直播
scrapy抓取CSDN博客
scrapy抓取51CTO博客
scrapyXML，CSV，SiteMap类型抓取
scrapy-splash抓取静态页面
scrapyd云端部署与管理控制
scrapy日志分析
pyspider-抓取51CTO讲师
pyspider-抓取豆瓣信息
pyspider-抓取ajax数据
11.爬虫框架scray-redis
redis数据实战
scrapy-redis布隆过滤器
scrapy-redis分布式抓取邮箱
scrapy-redis分布式抓取腾讯招聘
scrapy-redis分布式抓取新浪
scrapy-redis分布式抓取百度贴吧
scrapy-redis分布式抓取百度百科
scrapy-redis分布式抓取CSDN讲师
scrapy-redis分布式抓取51CTO讲师
scrapy-redis分布式抓取财经数据
scrapy-redis分布式抓取股票数据
scrapy-redis抓取QQ阅读
scrapy-redis抓取创业邦
12.爬虫数据抓取处理
词云绘图
数据排序-根据妹子的身高年龄综合排序
pyecharts实现绘图
绘制股票趋势图
绘图热点热力图
绘制地图人数分析
matplotlib实现数据绘图
柱状图，表格图，折线图等等167种图
抓取人人社交信息实现图状数据绘图
13在线读取doc,docx.,xls,pdf,xlsx,ppt,pptx,txt,html等等多种文件处理
14.深度学习训练验证码识别验证码
爬虫项目实战-实战大公司网站，全方位锻炼爬虫技术
1.根据深网的搜索引擎检索犯罪信息，挖掘onuion 色情识别 暴恐识别
2.淘宝–selenium
登录淘宝，挖掘所有订单,统计出来
登录淘宝，抓取商品销售排名
登录淘宝，例如输入 iphone或者移动硬盘，检索销量最高的前100个人的用户评价，情感分析
3.京东
登录京东，挖掘所有订单
登录京东，抓取商品销售排名
登录京东，例如输入 iphone，检索销量最高的前100个人的用户评价
4.微博-数据统计
登录微博，检索个人信息，头像，信息词云。
实现维度叠加，每个人有很多个好友，
5.58 selenium+requests
定时抓取信息 房产，二手房，租房，二手车，宠物，电子产品， 定时挖掘均价最低的10个
6.赶集
定时抓取信息 房产，二手房，租房，二手车，宠物，电子产品， 定时挖掘均价最低的10个
7.招聘分析 python,
15job,zhaopin,lagou, liepin岗位信息，输入关键词，定制岗位数量
8.实时抓取东方财富3000多股票名称，并将股票名字在百度搜索，搜索前10000条数据进行情感分析。
增加http://www.jrj.com.cn/的评论与情感分析 评论观点抽取 情感倾向分析
9.抓取百度百科，进行情感分析。
10.抓取世纪佳缘，珍爱网的男女信息，照片进行相似度检索，进行数据统计,颜值分析，年龄分析。
11.天猫
登录天猫，挖掘所有订单
登录天猫，抓取商品销售排名
登录天猫，例如输入 iphone，检索销量最高的前100个人的用户评价，情感分析
12dangdang
登录dangdang，挖掘所有订单
登录dangdang，抓取商品销售排名
登录dangdang，例如输入 iphone，检索销量最高的前100个人的用户评价，情感分析
13.登录知乎
抓取前三名的问答，挖掘所有问答
14.1688
登录1688，挖掘所有订单
登录1688g，抓取商品销售排名
登录1688，例如输入 iphone，检索销量最高的前100个人的用户评价
15.抓取易车网
登录易车网
抓取所有二手车信息
16.抓取爱奇艺，优酷，土豆其中之一
实现视频整站下载
视频内容分析 视频封面选图 视频比对检索 视频内容审核
17.https://www.bilibili.com/抓取分类信息
18 抓取开源中国，所有开源项目信息 http://www.oschina.net/进行热度分析
19抓取创业邦投资人，创业者，公司。做出投资行业报告
20.微博头像，人人网头像，婚恋网站头像，美女，寻找初恋，整合人脸识别技术。
21 12306.登陆抓取订单信息
