网页数据采集软件哪个比较好？

参与评论

评论

登录后参与评论

全部评论(7条)

• 

  ffjtmyq 2018-07-17 00:00:00

  火车头吧: 功能全，历史悠久，配置插件丰富，功能众多易掌握，特别全面，是通用采集软件，简单的页面什么都可以采集。 网络矿工: 推出时间不长，不够稳定。。狂人、三人行，未用过，但据说采集其他类型的数据和稍微复杂点的数据就不行了。 gooseeker：好像是提供在线采集的，它们的网站看不懂。。 八爪鱼，真的特别容易卡，稍微大点的数据采集就卡个不停。

  赞(13)

  回复(0)

  评论

  评论

  登录后参与评论

• 

  锹核定忠 2018-07-11 00:00:00

  一、火车头 作为采集界的老前辈，火车头是一款互联网数据抓取、处理、分析，挖掘软件，可以抓取网页上散乱分布的数据信息，并通过一系列的分析处理，准确挖掘出所需数据。它的用户定位主要是拥有一定代码基础的人群，适合编程老手。 1采集功能完善且不限网页与内容，任意文件格式都可下载 2具有智能多识别系统以及可选的验证方式保护安全 3支持PHP和C#插件扩展，方便修改处理数据 4具有同义，近义词替换、参数替换，伪原创必备技能 5采集难度大，对没有编程基础的用户来说存在困难 Conclusion:火车头适用于编程能手，规则编写比较复杂，软件的定位比较专业而且jing准化。 二、八爪鱼 一款可视化免编程的网页采集软件，可以从不同网站中快速提取规范化数据，帮助用户实现数据的自动化采集、编辑以及规范化，降低工作成本。云采集是它的一大特色，相比其他采集软件，云采集能够做到更加jing准、GX和大规模。 1可视化操作，无需编写代码，制作规则采集，适用于零编程基础的用户 2即将发布的7.0版本智能化，内置智能算法和既定采集规则，用户设置相应参数就能实现网站、APP的自动采集。 3云采集是其主要功能，支持关机采集，并实现自动定时采集 4支持多IP动态分配与验证码破解，避免IP封锁 5采集数据表格化，支持多种导出方式和导入网站 Conclusion:八爪鱼是一款适合小白用户尝试的采集软件，云功能强大，当然爬虫老手也能开拓它的高级功能。 三、集搜客 一款简单易用的网页信息抓取软件，能够抓取网页文字、图表、超链接等多种网页元素。同样可通过简单可视化流程进行采集，服务于任何对数据有采集需求的人群。 1可视化流程操作，与八爪鱼不同，集搜客的流程重在定义所抓取的数据和爬虫路线，八爪鱼的规则流程十分明确，由用户决定软件的每一步操作 2支持抓取在指数图表上悬浮显示的数据，还可以抓取手机网站上的数据 3会员可以互助抓取，提升采集效率，同时还有模板资源可以套用 Conclusion:集搜客操作较简单，适用于初级用户，功能方面没有太大的特色，后续付费要求比较多。 四、神箭手云爬虫 一款新颖的云端在线智能爬虫/采集器，基于神箭手分布式云爬虫框架，帮助用户快速获取大量规范化的网页数据。 1直接接入代理IP，避免IP封锁 2自动登录验证码识别，网站自动完成验证码输入 3可在线生成图标，采集结果以丰富表格化形式展现 4本地化隐私保护，云端采集，可隐藏用户IP Conclusion: 神箭手类似一个爬虫系统框架，具体采集还需用户自写爬虫，需要代码基础。 五、狂人采集器 一套专业的网站内容采集软件，支持各类论坛的帖子和回复采集，网站和博客文章内容抓取，分论坛采集器、CMS采集器和博客采集器三类。 1支持对文章内容中的文字、链接批量替换和过滤 2可以同时向网站或论坛的多个版块一起批量发贴 3具备采集或发帖任务完成后自动关机功能 Conclusion: 专注论坛、博客文本内容的抓取，对于全网数据的采集通用性不高。 我在公司是做采集的，我个人建议用神箭手或八爪鱼，功能很不错，都有免费版和收费版，但神箭手更加的细化，它又分为个人版和企业版；如果用收费的，神箭手更划算些；二者的教程都很完整，易上手。

  赞(6)

  回复(0)

  评论

  评论

  登录后参与评论

• 

  勝島优子无悔 2018-03-21 00:00:00

  例如采集规则一样 就好像友价t5采集互站网数据一样的形式，可以继续追问

  赞(10)

  回复(0)

  评论

  评论

  登录后参与评论

• 

  我的大三大四 2016-05-19 00:00:00

  推荐使用神箭手云爬虫。在云端采集数据，速度快，不需要任何专业知识。任何网站都可以采。

  赞(16)

  回复(0)

  评论

  评论

  登录后参与评论

• 

  Nan亚甜 2017-05-05 00:00:00

  可以看看多米诺云爬虫。只要提供你的需求，就可以采。

  赞(12)

  回复(0)

  评论

  评论

  登录后参与评论

• 

  长脸先生不带V 2013-10-17 00:00:00

  也有免费的，但功能都有限制，基本没什么大的用处。 火车头: 功能全，历史悠久，但配置太过复杂，且功能众多很难掌握，但确实功能很全面，是通用采集软件，简单的页面什么都可以采集。我是个搞技术的，但我也用不来说车头的功能，太复杂。 网络矿工: 推出时间不长，略微不够稳定，但其提供的数据采集和数据加工何为一体的功能很不错。有讯软件：实际上它并不是提供软件，而是提供采集服务。你只要告诉他们要采集哪里的数据，和要采集的具体内容，其它什么都不需要懂，也不需要做，他们就会把采集到的数据提供给你们，而且还可以满足你的任何数据处理要求。网络神采，同样也是一款历史悠久的软件，采集方面也很强大，其他方面没有太深的影响。狂人、三人行，未用过，但据说采集论坛和博客是很强悍的，采集其他类型的数据和稍微复杂点的数据就不行了。 gooseeker：好像是提供在线采集的，没用过，它们的网站看不懂。但据说也还不错。 个人觉得：如果你是采集纯静态页面，且数据结构不是很复杂的那种，也懂点技术的，那就用火车头吧。

  赞(8)

  回复(0)

  评论

  评论

  登录后参与评论

• 

  靳薪善 2016-01-27 00:00:00

  目前行业内主流的网页数据采集软件也就那么几家做的好的 综合对比下来还是觉得八爪鱼采集器不错。 八爪鱼的有专门的新手模式，鉴于很多人不懂技术，小白只需要照着操作就可以搞定主流的网页列表以及详情采集，谁用谁知道。 规则可视化，直接拖拽就可以完成一个规则，相比别的采集器要简单很多，八爪鱼还独有定时自动云采集功能，对于大数据也毫无压力，你可以了解一下。

  赞(12)

  回复(0)

  评论

  评论

  登录后参与评论