火车采集器怎么进行多页采集
更新日期:2017-05-24
来源:互联网

最近有很多使用火车采集器的小伙伴询问小编怎么进行多页采集?其实火车采集器的操作方法还是比较简单的,下面小编就来教教大家使用火车采集器进行多页采集的方法。
下面我们来说明写如果从默认页获取到多页。
在规则的第二步:采集内容规则,点击“多页管理”按钮,如下图

打开后看到的界面如下图:

上图看到或者地址的方式有两种方式:1,依据规则对默认页地址替换生成地址;2,在默认页源代码内采集得到地址
1,根据规则对默认页地址替换生成地址:也就是默认页和多页地址上面有相同的地方,通过简单的替换就可以变成多页地址。
2,在默认页源代码内采集得到地址:也就是多页的地址在默认页的页面源代码里面。
现在就用采集阿里巴巴公司信息为例来说明下这两种方式如何获取多页。
依据规则对默认页地址替换生成地址
比较默认页“http://fsdeshun.cn.1688.com/”和多页地址:“http://fsdeshun.cn.1688.com/page/contactinfo.htm”之间的共同点,在默认页后面加上“page/contactinfo.htm”就是我们的多页地址了。
写到采集器里面如下图:

上图我们把需要的部分用(.*)代替,这里是用正则替代需要的部分,表示方式很多种,大家记住我这种(.*),是万能的,如果看不懂是什么,那么也不需要纠结了,就记住好了。
下面的替换为是通过$1,$2…$数字来按照顺序对应上面(.*)表示的部分。这里其实用一个(.*)就可以表示了,我这里特意多用了几个,来说明对应关系的。
我们设置好了,把默认页写好然后点击右侧的“测试”按钮,看下测试结果中已经正确获取到我们联系页的地址了,正确后,就可以点击保存了。
这种方式如果默认页地址中出现问号“?”如,那么问号前面一定要加反斜杠写成“\?”,切记切记!!!!!
在默认页源代码内采集得到地址
我们打开默认页http://fsdeshun.cn.1688.com/查看页面源代码,可以发现我们要的多页地址就在页面源代码里面如下图:

我们在采集器里的设置如下:

和设置采集规则一样,正则匹配内容里面我们把需要的部分用[参数]代替,可以使用多个[参数],与后面的组合结果中的[参数1][参数2]....[参数n],按照顺序一一对应的。
同样我们要测试下获取的结果是不是正确的,如果正确那么就点击保存,在写规则里面使用。
规则设置说明我们如果要采集默认页的数据就根据默认页的页面源代码来设置规则如下图:

我们采集多页的信息就根据多页的页面源代码来设置采集规则如下图:

所属多页这里选择的是对应多页的名称!!!!!一定不要忘记了
看下采集效果:

有帮助
无帮助
- Win7系统提示“此Windows副本不是正版”怎么办94400次
- 屏幕上鼠标箭头不见了的解决方法68434次
- 鼠标六个按键功能介绍46783次
- 怎么解决0x0000003b物理内存导致蓝屏37343次
- win732位旗舰版系统电脑中设置任务栏的透明度36490次
- cbox文件缓存在哪 cbox缓存在哪呢33108次
- 键盘没有fn键的代替方法32584次
- win7中LOL登入时“遇到了一个预期之外的错误”的修复图文方法31157次
- Win7系统启动后出现Grub的处理妙招24190次
- 电脑音响有杂音滋滋滋解决方法23790次
周
月