火车采集器/代理服务器采集数据

来自站长百科
跳转至: 导航、​ 搜索

火车采集器 | 安装 | 主程序 | 子程序 | 应用拓展 | 模块开发 | FAQ

某些网站有访问检测功能,如果检测有异常访问,则会以禁止访问。如果用采集器采集时出现这种状况,除了将访问频率改小一些,还可以通过设置代理服务器,进行访问。

点击选项菜单,点击采集代理设置即可以打开设置面板。代理服务器的设置如下。

Locoy Proxoy.jpg

请先选启用代理服务器,然后填写具体的参数即可。需要注意的是目前只支持http代理。

如果需要实现随机换代理的功能,可以考虑新建一个二级代理,在采集器里设置二级代理的参数。然后在代理程序里设置随机换代理。推荐使用代理超人程序。


参考来源[ ]

火车采集器使用手册导航

安装

系统安装

主程序

主程序|主菜单|命令行启动|随机文件夹保存数据|正则匹配模式采集数据|采集记录筛选|代理服务器采集数据|POST方式获得网址|拓展插件|分页采集|多页采集|数据导出|多任务多线程|手动链接格式设置|循环匹配采集|网站登陆采集|列表缩略图及标签采集|html标签排除|全局词语替换|首图缩略|FTP文件上传|附件上传|本地数据编辑|下载导出|图片下载|Flash文件下载|任意格式文件下载|采集数据导入数据库|任务定时自动更新|任务运行日志|自动中文分词|自动摘要和拼音|前后截取模式|采集任务新建

子程序

源代码获取与模拟|Web在线发布模块编辑器|Web在线发布配置管理|数据库发布模块编辑器|数据库发布配置管理|工具箱|编程插件管理|翻译测试|中文分词测试|自动运行管理器 任务队列管理器|自动升级程序

应用拓展

数据库发布模块编辑器制作|外部编程插件开发

模块开发

DedeCMS文章模块|PHPWind论坛模块|Discuz论坛模块

FAQ

使用前常见问题|编辑任务中常见问题|发布失败常见问题|使用中常见问题|VIP版本常见问题