火车采集器/FTP文件上传

来自站长百科
跳转至: 导航、​ 搜索

火车采集器 | 安装 | 主程序 | 子程序 | 应用拓展 | 模块开发 | FAQ

对于一些使用服务器的,可以直接将下载地址指定为网站的目录。

但对于对服务器没权限的朋友来说,使用ftp上传可以达到同样效果。具体操作及注意事项如下:

Locoy FTPUpload.jpg
  • 设定本地保存的地址和服务器上的文件上传目录。

注意:本地保存目录下的目录结构和文件是原样不动的上传到服务器的文件上传根目录。

  • 文件的保存目录

目前可以自己指定目录,还可以用随机目录来设定保存目录,比如上图里的yyyy/MM-dd/HH,比如日期是2008.12.29。那么生成的目录就是2008/12-29/14.其它以此类推。这样就避免了一个文件夹存图片太多的问题。

  • 同步和异步
  1. 同步是指在采集一个页面内容并完成下载该页文件后再去请求下一个页面,下载只在单线程中运行
  2. 异步是指采集页面信息和下载文件分开操作下载文件被分配到其他线程中运行,可以多线程中运行
  3. 异步可获得更快的下载速度,但由于部分网站的文件地址在一段时间内自动失效,所以不适合使用异步而必须使用同步下载。而大部分使用文件绝对地址的则不会,并且支持分段下载,所以大多数可选择异步下载.
  • 主动和被动模式

和直接上传ftp里的设置一样。具体可以看下ftp里的设置。一般测试时哪一种成功上传就用哪一种。


参考来源[ ]

火车采集器使用手册导航

安装

系统安装

主程序

主程序|主菜单|命令行启动|随机文件夹保存数据|正则匹配模式采集数据|采集记录筛选|代理服务器采集数据|POST方式获得网址|拓展插件|分页采集|多页采集|数据导出|多任务多线程|手动链接格式设置|循环匹配采集|网站登陆采集|列表缩略图及标签采集|html标签排除|全局词语替换|首图缩略|FTP文件上传|附件上传|本地数据编辑|下载导出|图片下载|Flash文件下载|任意格式文件下载|采集数据导入数据库|任务定时自动更新|任务运行日志|自动中文分词|自动摘要和拼音|前后截取模式|采集任务新建

子程序

源代码获取与模拟|Web在线发布模块编辑器|Web在线发布配置管理|数据库发布模块编辑器|数据库发布配置管理|工具箱|编程插件管理|翻译测试|中文分词测试|自动运行管理器 任务队列管理器|自动升级程序

应用拓展

数据库发布模块编辑器制作|外部编程插件开发

模块开发

DedeCMS文章模块|PHPWind论坛模块|Discuz论坛模块

FAQ

使用前常见问题|编辑任务中常见问题|发布失败常见问题|使用中常见问题|VIP版本常见问题