官方定制大数据服务:数据采集、数据清洗、数据标注、机器学习等
通用Discuz论坛采集爬虫
爬虫
  •  自动接入代理IP
  •  Robots协议

爬虫来源于用户发布,如有侵犯您的隐私或版权,请联系我们

版本:v2.5.7(17)
上架时间:2017-04-13
人气:5005
更新时间:2018-10-15
套餐限制: 个人专业版  
当前套餐: 未登录
套餐限制:个人专业版

(获取该应用即可免费试用爬取10条数据)

获取爬虫
分享到
应用详情
版本信息
爬取数据示例
自定义项
  要爬取的Discuz论坛首页url,如“http://www.dehuaca.com/forum.php”、“http://www.mt-bbs.com/forum.php”等
  要爬取的帖子回复
应用介绍

dz_common_crawler.jpg


最新版本:v2.5.7(17)更新日期:2018-10-15
更新内容
1. 修复爬虫有时采集不到数据的问题。
历史版本
版本号:v2.5.6(16)更新日期:2018-03-22
更新内容
1. 兼容Discuz网站,包括“http://www.mt-bbs.com/forum.php”等
版本号:v2.5.5(13)更新日期:2018-03-14
更新内容
1. 兼容Discuz网站,包括“http://www.ym6.com/forum.php”和“https://www.jsmrth.com/”等
版本号:v2.5.4(11)更新日期:2017-12-29
更新内容
1. 修复部分论坛帖子的发布时间未正确处理的问题
版本号:v2.5.3(10)更新日期:2017-12-27
更新内容
1. 修复部分Discuz论坛版块爬取不到的问题
版本号:v2.5.2(9)更新日期:2017-11-27
更新内容
1. 修复部分Discuz论坛版块爬取不到的问题
常见问题

* 什么是爬虫?

爬虫可以实时、批量、自动化地抓取网页上的数据,有助于快速获取大量数据和信息。

* 如何使用?查看更详细的教程

注册神箭手账号,登录
获取爬虫(收费爬虫可免费试用爬取十条数据)
管理爬虫,启停爬虫、发布和导出数据等

* 如何收费?

您首次获取该爬虫,可以免费试用爬取十条数据。
您试用后没问题,请升级至个人专业版或以上套餐(查看套餐介绍),在套餐有限期内都可以无限制完整使用了哦!

* 爬取的数据如何导出?

爬取的数据会存在神箭手上,您可以:
1、导出到本地文件;
2、自动或者手动发布到您的数据库/网站/微信公众号/邮箱等;
3、设置Webhook推送给您的服务器;
4、通过GraphQL请求数据
导出方式多样,具体请查阅详细教程哦~

* 售后服务

个人版套餐客户:请通过 控制台的工单系统 提交问题;
企业版套餐客户:请通过 控制台的工单系统 OR 在线客服 提交问题。
为什么选择神箭手

购买神箭手的服务支出<< 技术人员(8000元/月) + 服务器费(500元/月) +...

关注公众号
手机也能控制爬虫
新手指南
业务咨询
返回顶部