红叶文章采集器是一款超级强大的网站文章采集器,英文名称Fast_Spider,属于蜘蛛爬虫类程序,用于从指定网站采集海量精华文章,将直接丢弃其中的垃圾网页信息,仅保存具备阅读价值和浏览价值的精华文章,自动执行HTM-TXT转换,有需要的赶紧来下载使用吧。战七国手机游戏下载-战七国游戏(王国之战2)4.1.5 最新版
红叶文章采集器软件特色
(1)本软件采用北大天网MD5指纹排重算法,对于相似相同的网页信息,不再重复保存。
(2)采集信息含义:[[HT]]表示网页标题,[[HA]]表示文章标题,[[HC]]表示10个权重关键字,[[UR]]表示网页中的图片链接,[[TXT]]之后为正文。
(3)蜘蛛性能:本软件开启300个线程来保证采集效率。通过采集100万精华文章来执行压力测试,以普通网民的联网计算机为参考标准,单台计算机可以在一天内遍历200万网页、采集20万精华文章,100万精华文章仅需5天就可采集完毕。
(4)正式版与免费版的区别在于:正式版允许将采集的精华文章数据自动保存为ACCESS数据库。
红叶文章采集器使用注意
1、抓取深度:填写0表示不限制抓取深度;填写3表示抓到第3层。
2、通用蜘蛛模式与分类蜘蛛模式的区别:假定网址入口为“http://youxi.baidu.com/”,若选择通用蜘蛛模式,将遍历“baidu.com”里面的每一个网页;若选择分类蜘蛛模式,则只遍历“youxi.baidu.com”里面的每一个网页。
3、按钮“从MDB导入”:网址入口从TASK.MDB中批量导入。
4、本软件采集的原则是不越站,例如给的入口是“http://youxi.baidu.com/”,就只在百度站点内部抓取。
5、本软件采集过程中,偶尔会弹出一个或数个“错误对话框”,请不予理会,倘若关闭“错误对话框”,采集软件就会挂掉。如果软件挂掉,之前已采集的信息,不会丢失。当再次启动软件执行采集,对于以前已采集的信息不会重新采集,可实现良好的增量采集。
6、使用者如何选择采集题材:例如你若想采集“股票类”文章,只需把那些“股票类”站点作为网址入口即可。

展开

嗒嗒配货软件下载-嗒嗒配货app01.01.0013 安卓官网版
富甲萌国永久0.1折版下载-富甲萌国(三国争霸0.1折)3.1.0.00090005 送五星英雄
芝麻鲸选下载-芝麻鲸选app1.0.1 最新版
广发证券至强版下载-广发证券至强版7.51 官方最新版
从下雪的庭院中脱出中文版-Yukihuruniwa(从下雪的庭院中脱出汉化版)0.1安卓最新版
超异域公主连结台服安装包下载-超异域公主连结台服版3.4.10繁中版
笑容的炼金术师中文版下载-笑顔の錬金術師汉化版1.0.1修改版
指尖封神1.0 手机版
天朝小将免费版下载-天朝小将安卓版(天朝小将免费版)3.8 最新版
杏田医学app下载-杏田医学app1.0.0 安卓版
麦游捕鱼红包版最新版下载-麦游捕鱼兑微信红包1.22 安卓版
神指笔记app下载-神指笔记app1.3.5安卓版
手机抢茅台神器-茅台抢购助手(手机抢茅台app)1.0 稳定安全版
蚁讯app(安全协作平台)2018111621 最新版
维基百科中文版2.8 官网最新版
视频爱剪辑下载-视频爱剪辑软件3.5.3 安卓免费版
拯救光棍手游-Save Jomblo(拯救光棍游戏)1.0.1 官方版
ISS订阅器app下载-气泡星球(ISS订阅器app官方下载安装)v2.0.1最新版
癫狂的动物园游戏下载-癫狂的动物园1.0.0 最新版
小三角大英雄手机版下载-小三角大英雄双人模式1.0.5 安卓版