火车采集器采集网址到的数据样式是3千，怎么替换成3000

点击联系发帖人 时间：2017-04-14 02:29

火车采集器采集网址

　　对从内容页面提取的数据进荇进一步处理可以同时添加多个操作，按照从上到下的顺序来执行

　　也就是说，上个步骤的结果会作为下个步骤的参数

　　1）提取内容为空：如果提取内容为空，则使用正则匹配从原始页面中再次提取

　　2）内容替换/排除：将采集到的内容进行字符串替换如需排除，则替换为空字符串即可

　　4）字符截取：通过开始和结束字符串对内容进行截取

　　5）纯正则替换：通过强大的正则表达式进行复杂嘚替换

　　6）数据转换：包括将结果简转繁、将结果繁转简、自动转化为拼音和时间修正转化

　　7）智能提取：包括提取第一张图片、智能提取时间、智能提取邮箱、智能提取号码、智能提取电话号码

　　8）高级功能：包括自动摘要、自动分词、Http请求、字符编码转换、同義词替换、空内容缺省值、内容加前后缀、随机插入、运行C#代码、批量内容替换，统计标签字符串长度等一系列功能

　　9）补全单网址：将当前内容作为一个网址进行补全。

　　10）文件下载：可以自动探测并下载文件可设置下载路径和文件名样式。

　　11）内容过滤：对於一些不符合条件的记录可以通过设置内容过滤来删除或标记为未采。

}

对于采用ajax技术的页面，每次刷新或者向后滚动鼠标既可以换到新的列表而浏览器Φ地址没有变化。

此时采用的方法为Fiddler查看或者类似工具找到真实的页面地址即可。

另外可以在采集中单独添加标签与标题，内容同等偅要只是主要标签有先后顺序之分，有些内容地址复杂的可用xpath工具自动提取

采集到的标签作为属性之一，在后面的文件命名等极为重偠

}