火车采集器/多任务多线程

来自站长百科
跳转至: 导航、​ 搜索

火车采集器 | 安装 | 主程序 | 子程序 | 应用拓展 | 模块开发 | FAQ

  • 多任务:火车采集器可以同时运行多个任务,采集不同的网站或同一站点下的不同的栏目。可以在任务列表树里同时选中运行多个任务或是设置自动运行,有计划的调度多个任务。同一站点下建议一次运行一到两个任务,以防止网址数据库操作频繁而锁死。
  • 多线程:火车采集器单个任务在采集内容和发布内容时可以使用多线程。具体的设置可以打开任务编辑窗口,第四步设置
Locoy DRWDXC.jpg

线程的设置多少以不影响采集网站的运行为准(过于频繁的访问可能会造成一些小站点无法访问)。

建议一般使用默认值即可。


参考来源[ ]

火车采集器使用手册导航

安装

系统安装

主程序

主程序|主菜单|命令行启动|随机文件夹保存数据|正则匹配模式采集数据|采集记录筛选|代理服务器采集数据|POST方式获得网址|拓展插件|分页采集|多页采集|数据导出|多任务多线程|手动链接格式设置|循环匹配采集|网站登陆采集|列表缩略图及标签采集|html标签排除|全局词语替换|首图缩略|FTP文件上传|附件上传|本地数据编辑|下载导出|图片下载|Flash文件下载|任意格式文件下载|采集数据导入数据库|任务定时自动更新|任务运行日志|自动中文分词|自动摘要和拼音|前后截取模式|采集任务新建

子程序

源代码获取与模拟|Web在线发布模块编辑器|Web在线发布配置管理|数据库发布模块编辑器|数据库发布配置管理|工具箱|编程插件管理|翻译测试|中文分词测试|自动运行管理器 任务队列管理器|自动升级程序

应用拓展

数据库发布模块编辑器制作|外部编程插件开发

模块开发

DedeCMS文章模块|PHPWind论坛模块|Discuz论坛模块

FAQ

使用前常见问题|编辑任务中常见问题|发布失败常见问题|使用中常见问题|VIP版本常见问题