爬虫小工具文件下载小助手爬虫实战笔趣味阅读小说下载VIP视频下载百度文库文章下载_rev1百度文库文章下载_rev2《帅啊》网帅哥图片下载建设代理IP池《火影忍者》漫画下载财报下载小助手一小时入门网络爬虫App视频下载_rev1?App视频下载_rev2???App视频下载_rev3GEETEST验证码破解12306抢票助手百万英雄答题助手系统网易云音乐批量下载B站视频弹幕批量下载其他爬虫小工具downloader.py:文件下载助手,一款可以下载图片、视频、文件的小工具，有下载进度显示功能。稍微修改一下就可以添加到自己的爬虫中。动态图：爬虫实战1、biqukan.py：《笔趣看》盗版小说网站、爬小说工具第三方依赖库安装：pip3installbeautifulsoup4使用方法：pythonbiqukan.py2、video_downloader：爱奇艺等主流视频网站VIP视频破解助手（暂时只支持PC和手机在线观看VIP视频！）感谢Python3二维码生成器作者：https://github.com/sylnsfar/qrcode编译软件下载链接：https://pan.baidu.com/s/1bqSTNJL密码：p8bs解压密码：cuijiahua.com不需要Python3环境，Windows下，解压后立即使用！您可以使用video_downloader查看软件的源代码。运行源码需要搭建Python3环境，安装对应的第三方依赖库：在video_downloader文件夹下，安装第三方依赖库：pip3install-rrequirements.txt使用方法：pythonmovie_downloader.py运行环境:Windows,Python3Linux,Python3Mac,Python33,baiduwenku.py:百度文库word文章爬取原理说明：http://blog.csdn.net/c406495762/article/details/72331737代码不完善，未打包，不通用，纯属娱乐，后续会完善。4.shuaia.py：抓取《帅啊》网站，帅哥图片《帅啊》网站网址：http://www.shuaia.net/index.html原理说明：http://blog.csdn.net/c406495762/article/details/72597755第三方依赖库安装：pip3installrequestsbeautifulsoup45、daili.py：搭建代理IP池原理详解：http://blog.csdn.net/c406495762/article/details/727934806，卡顿:用Scrapy爬取《火影忍者》漫画代码，可以爬取整个《火影忍者》漫画所有章节的内容并保存到本地。换地址爬取其他漫画。保存地址可以在settings.py中修改。动漫网站：http://comic.kukudm.com/原理说明：http://blog.csdn.net/c406495762/article/details/728589837,hero.py:《王者荣耀》推荐装查询助手网络爬虫已经知道了，有没有想过爬取手机APP里的内容？原理解释：http://blog.csdn.net/c406495762/article/details/768508438，financial.py：财务报表下载助手爬取的数据会存入数据库吗？《跟股神巴菲特学习炒股之财务报表入库(MySQL)》可能会给你一些想法。原理说明：http://blog.csdn.net/c406495762/article/details/77801899动态示意图：9.one_hour_spider：Python3网络爬虫一小时入门。原理讲解：知乎：https://zhuanlan.zhihu.com/p/29809609CSDN：http://blog.csdn.net/c406495762/article/details/78123502本次实战内容包括：网络小说下载（静态网站）-biqukan美女壁纸下载（动态网站）-unsplash爱奇艺VIP视频下载10.douyin.py：抖音App视频下载抖音App视频下载是普通的App爬取。原理解释：个人网站：http://cuijiahua.com/blog/2018/03/spider-5.html11，抖音_pro：抖音App视频下载（升级版）?App视频下载，添加视频分析网站，支持无水印视频下载，使用第三方平台解析。原理解释：个人网站：http://cuijiahua.com/blog/2018/03/spider-5.html12，douyin_pro_2：抖音App视频下载（升级版2）抖音App视频下载，添加视频解析网站支持无水印视频下载，通过url解析，无需第三方平台。原理解释：个人网站：http://cuijiahua.com/blog/2018/03/spider-5.html动态图：13.geetest.py：GEETEST验证码破解什么是爬虫***的天敌之一？没错，就是验证码！极测作为提供验证码服务的专家，拥有很高的市场占有率。如何破解极测提供的滑动验证码？授人以鱼不如授人以渔。接下来，小编就为大家呈现本教程的精彩内容。原理说明：http://www.cuijiahua.com/blog/2017/11/spider_2_geetest.html动态示意图：14、12306.py：使用Python抢火车票简单的代码可以自己慢慢丰富，挺简单的，用爬虫基础非常容易操作，不做原理讲解。15.baiwan：百万大侠辅助答题效果图：原理说明：http://cuijiahua.com/blog/2018/01/spider_3.html功能介绍：服务器端，使用Python抓包得到（baiwan.py）的接口获取答案数据，解析后通过百度知乎接口匹配答案，并将最终匹配结果写入文件（file.txt）。不懂手机抓包的朋友，可以看看我早期的手机APP抓包教程。Node.js（app.js）每隔1s读取一次file.txt文件，并将读取结果通过socket.io推送给客户端（index.html）。亲测回答延迟3s左右。免责声明：我从来没有做过后端和前端。花了一天的时间学习和炫耀。现在也可以看到和使用JavaScript。百度的程序只是调试。可能有很多地方使用率比较低。如果用法有误，请不要见怪。如果你有兴趣，你可以自己改进它。16、网易：根据歌单下载网易云音乐：功能介绍：根据music_list.txt文件中的歌单信息下载网易云音乐，批量下载自己喜欢的音乐。17、bilibili：bilibili视频和弹幕批量下载使用说明：pythonbilibili.py-dcat-kcat-p10三个参数：-d视频保存的文件夹名称-kB站搜索关键词-p之前多少页下载搜索结果
