[1]-微信公众号爬虫。基于搜狗微信搜索的微信公众号爬虫接口可以扩展为基于搜狗搜索的爬虫。返回的结果是一个列表，每一项都是公众号具体信息的字典。 [1]：

[2]-豆瓣阅读爬虫。你可以爬取豆瓣阅读标签下的所有书籍，按评分排序存储，并存储在Excel中，这样更方便大家筛选和搜索，比如过滤1000条以上评论的高分书籍； Excel中可以根据不同的主题存储在不同的Sheet中。 ，使用User Agent冒充浏览器进行爬行，并添加随机延迟，以更好地模仿浏览器行为，避免爬虫被拦截。 [2]：

[3]-知乎爬虫。本项目的功能是爬取知乎用户信息和人际拓扑关系，利用爬虫框架和数据存储。 [3]：

-user[4]- 用户爬虫。数据总数：，抓取字段：用户id、昵称、性别、头像、等级、经验值、粉丝数、生日、地址、注册时间、签名、等级和经验值等。爬取后，生成一条用户数据B站报道[4]：

[5]- 新浪微博爬虫。主要抓取新浪微博用户的个人信息、微博信息、粉丝和关注者。从新浪微博获取验证码进行登录，可以使用多个账号登录，防止新浪反盗版。主要使用爬虫框架。 [5]：

[6]-小说下载分布式爬虫。使用redis实现的分布式网络爬虫，底层存储集群使用redis分布式，使用redis实现爬虫状态显示，主要针对某小说网站。 [6]：

[7]-CNKI爬虫。设置搜索条件后，执行src/.py捕获数据。捕获的数据存储在/data目录中。每个数据文件的第一行是字段名称。 [7]：

[8]-链家爬虫。爬取链家历年北京二手房交易记录。涵盖了链家爬虫文章中的所有代码，包括链家模拟登录代码。 [8]：

[9]-京东爬虫。基于京东网站爬虫，保存格式为csv。 [9]：

QQ--[10]-群爬虫。批量抓取群组信息，包括群组名称、群组编号、群组编号、群

组所有者、群组简介等，最终生成XLS(X)/CSV结果文件。 [10]：

[11] - 乌云爬行者。暗云暴露了漏洞、知识库爬虫和搜索。所有公开的漏洞列表以及每个漏洞的文本内容均存在，约2G内容；如果把整个网站全部文字、图片爬取作为离线查询，大约需要10G空间，2小时左右（10M电信带宽）；爬取整个知识库，总共约500M空间。漏洞搜索使用 Flask 作为 Web 和前端。 [11]：

2016.9.11 补充：

[12]-去哪儿爬虫。网络爬虫使用代理登录：爬取去哪儿网站，使用模拟浏览器登录，获取翻页操作。代理可以保存到文件中，程序可以读取和使用该文件。支持多进程爬取。 [12]：

[13]- 机票爬虫（去哪儿、携程）。是一款基于机票的爬虫，目前整合了国内两大机票网站（去哪儿+携程）。 [13]：

[14] - 基于网易客户端内容爬虫，。 [14]：

[15]- 豆瓣电影、书籍、群、相册、东西等爬虫合集。 [15]：

[16]-QQ空间爬虫，包括日志、谈话、个人信息等，一天可爬取400万条数据。 [16]：

baidu-music-[17]- 百度mp3全站爬虫，使用redis支持断点续传下载。 [17]：

[18]- 淘宝、天猫爬虫可以根据搜索关键词和商品ID抓取页面信息，并将数据存储在[18]:

[19]- 一个股票数据（沪深）爬虫及选股策略测试框架。根据选定的日期范围捕获所有上海和深圳股票市场的市场数据。支持使用表达式定义选股策略。支持多线程。将数据保存到 JSON 文件或 CSV 文件。 [19]

--------------------------

本项目包含各种网络爬虫实用开源代码，并将长期更新。欢迎补充。

# 优化电脑网站设计工具  # 泉州专业制作网站推广  # 石家庄seo公司  # 东营企业推广营销  # 湘西州品牌网站建设  # 青海矩阵seo哪家好  # 新建区seo服务费  # 武侯网站制作建设  # 自助网站建设制作推广  # 抖音搜索关键词排名布局  # 郑州抖音搜索关键词排名推荐  # 两大  # 闵行区网站推广价格  # 揭幕关键词排名首页  # 冰山模型网站建设文案  # 赣州展示型网站建设制作  # 小米网站seo分析报告 书  # 园区网站建设方案ppt  # 宜昌商品网站推广公司  # 网站建设的感言  # 抖音营销推广类广告关闭  # 搜狗  # 群组  # 新浪  # 链家  # 去哪儿  # 数据存储  # 并将  # 经验值  # 可以根据  # 个人信息  # WechatSogou微信公众号爬虫、DouBanSpider豆瓣读书爬虫与zhihu_spider  # 携程  # 选股  # 都是  # 是一个  # 京东  # 离线  # 注册时间  # 你可以  # 多个 

相关文章： 给顾客的早安问候语四篇，传递温暖与祝福 长沙seo运营  贴吧引流转化日赚500的玩法介绍！  青岛市市北区台东街道开展抖音创业主题培训活动 矩阵seo怎么合作赚钱  抖音电商 618 提前启动，多项优惠及政策助力年中购物 海珠区网站推广  可以实现流量暴涨的6大引流方法！  app推广过程中常见的41个专业名词解释，速速收藏！  网站引流怎么做？网站引流的十大常见方法渠道  天降福利？揭露最新网络刷单骗局的套路，一网友被骗47万！  在广告联盟上拿到产品后如何进行有效的引流转化？  新手如何开启网络销售之路？这些技巧建议请收好   广告和cpl广告的主流推广方法解析！  问卷调查赚钱怎么做？做问卷调查赚佣金的知识和技巧分享！  想要通过微信公众号进行引流，首先你得做好公众号运营！  在推广项目的时候使用短链有什么好处？  企业微信2025最新电脑版：强大办公功能，助力企业高效运转 聊城网站建设主要内容  教你在QQ上这5种傻瓜式引流技巧，引流不再难！  app推广配合新媒体推广的渠道和玩法介绍，精准引流必选！  公司网站建设作用大，可提升形象、提高宣传效果 呼和浩特网站推广电话  app推广软文主要有哪些类型，应该怎么写？  网络兼职靠谱吗？正规的网络兼职赚钱渠道有哪些？  网上接单哪个平台比较靠谱呢？网上接单赚钱的平台哪个好？  7月13日企业微信与德邦快递战略合作，打通智慧物流闭环 网站建设免费工具  5大国外广告联盟赚美金项目，诱人的美金在向你招手！  引流方法大全！100种引流思路方法全在这了！  玩抖音怎么赚钱？掌握这两点，利用庞大客户数据获利   适合新手利用联盟平台上面的广告来赚钱的3个方法！  如何鼓励联盟营销的伙伴来推广我们的商品以及服务？  知乎引流应该怎么做？有什么需要注意的呢？  高佣金联盟和淘宝联盟有什么区别？哪个比较好？  抖音上面的广告推广价格大约是多少？  国外广告联盟很赚钱，为什么却很少人做？  8个网站引流的基础操作和增加流量的技巧  教你如何从seo优化的角度提升网站流量，值得借鉴！  为什么要做引流推广？引流的本质就是获取客户！  南宁恒易达科技：生鲜超市小程序开发定制，商机无限 独立网站建设常见问题  广告投放渠道有哪些？网站推广和线上平台广告推广有何区别？  app引流难？分享几个最有效的app推广渠道和方法！  网赚大神利用猪八戒月入过万的经验分享！  怎么做才能每天自动引流50人？释放价值才是引流的核心！  【联盟基础】制作静默包推广赚钱是什么意思？  2021年网上赚钱方法有哪些？这四个最值得做！  app推广拉新之通过产品策略来实现用户拉新的四个方法！  移动互联网下手机广告联盟​营销存在着哪些问题？  网站上线之初网站运营的四个基础步骤！  建一个企业网站要花多少钱？价格差距大的原因分析 黑帽seo黑酷科技  app推广做好这五个方面，快速提高app留存度！  【分享】仿应用商店引流模板源码  如何利用身边的资源赚钱？这五个最好做，轻松赚钱！  广告联盟不断提速app商业化之路，用户流量不再是问题！  免广告电影网站结合微信公众号引流赚钱项目介绍 

相关栏目： 【 广告资讯90366 】 【 广告推广18483 】 【 广告优化154267 】 【 广告营销46464 】