如何填写 通用电商店铺信息采集爬虫 的设置项

通用电商商品信息采集爬虫获取地址:http://www.shenjian.io/index.php?r=market/product&product_id=501179

该爬虫的功能很强大可以自动识别主流电商的 店铺搜索页链接

以天猫国际为例,如果想要采集 女装 搜索出来的店铺,就在爬虫的设置,填写:https://list.tmall.hk/search_product.htm?spm=a220m.1000858.1000724.7.70351897nN7YJK&cat=52792006&q=%C5%AE%D7%B0&sort=s&style=w&auction_tag=71682;&from=..pc_1_searchbutton&tmhkmain=1#J_Filter

tim%e6%88%aa%e5%9b%be20190131102751

上面的那个链接是如何获取到的呢?请往下看:

第一步:在浏览器里访问天猫国际首页

tim%e6%88%aa%e5%9b%be20190117124657

第二步:搜索女装,点击店铺,然后获取浏览器地址栏里的搜索链接(https://list.tmall.hk/search_product.htm?spm=a220m.1000858.1000724.7.70351897GhWMDQ&cat=52792006&q=%C5%AE%D7%B0&sort=s&style=w&auction_tag=71682;&from=..pc_1_searchbutton&tmhkmain=1#J_Filter)

tim%e6%88%aa%e5%9b%be20190131103238

第三步:打开 通用电商店铺信息采集爬虫,并且在应用设置页面把获取到的搜索链接设置进去:

tim%e6%88%aa%e5%9b%be20190131102751

分享至微信朋友圈 ×
打开微信,点击底部的“发现”,
使用“扫一扫”即可将网页分享至朋友圈。