快捷导航
因为每层的数量也都不一样试了好多次都没抓明,求大佬傻瓜式教学:https://www.amazon.com/Best-Sellers/zgbs/ref=zg_bs_unv_petsupplies_0_2975241011_2
只抓出所有的分类以及链接就行
在深层一点的就是先抓去每个分类和分类的URL然后分类里面的所有产品

9dc42b4cf52b3bd7e6dd319899e93dd.png (860.84 KB, 下载次数: 0)

9dc42b4cf52b3bd7e6dd319899e93dd.png

6ba9b17af0a6f902ce3adae97a460f4.png (736.59 KB, 下载次数: 0)

6ba9b17af0a6f902ce3adae97a460f4.png

7d1a256995b686aa053e3af48234c13.png (263.34 KB, 下载次数: 0)

7d1a256995b686aa053e3af48234c13.png
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 5 天前

沙发
maomao 金牌会员 发表于 5 天前 | 只看该作者
按你上面的截图,实际上是个四层的层级大香蕉综合伊人网,对于前两级,网页左侧的分类框就是列表,要大香蕉综合伊人网每一项的链接,对应于下面两个截图。第三级对应于最上面的截图,要抓网页上每个商品的链接。第四级就是到每个商品的页面去抓详情。(如果不抓商品详情,不需要第四级)
举报 使用道具
板凳
Fuller 管理员 发表于 5 天前 | 只看该作者
把你做的规则名发出来,管理员可以帮你诊断一下。发出来第一级的规则名就行
举报 使用道具
地板
Charless 初级会员 发表于 5 天前 | 只看该作者
maomao 发表于 2020-5-17 11:09
按你上面的截图,实际上是个四层的层级大香蕉综合伊人网,对于前两级,网页左侧的分类框就是列表,要大香蕉综合伊人网每一项的链接, ...

我现在先不抓商品详情 先抓列表的话有些子分类可能有五六层
举报 使用道具
5#
Charless 初级会员 发表于 5 天前 | 只看该作者
Fuller 发表于 2020-5-17 11:16
把你做的规则名发出来,管理员可以帮你诊断一下。发出来第一级的规则名就行 ...

自己没设置明白规则 我试了好几次都没搞明白,抓出来的都不是那么回事  看的别的教学也都不一样就没看懂,比如: https://www.gooseeker.com/doc/article-343-1.html
举报 使用道具
6#
Charless 初级会员 发表于 5 天前 | 只看该作者
Fuller 发表于 2020-5-17 11:16
把你做的规则名发出来,管理员可以帮你诊断一下。发出来第一级的规则名就行 ...

第一规则我就映射了一个分类然后映射了这个分类URL
举报 使用道具
7#
maomao 金牌会员 发表于 5 天前 | 只看该作者
Charless 发表于 2020-5-17 11:32
第一规则我就映射了一个分类然后映射了这个分类URL

如果,你最后只是为了抓商品的链接,不用分那么细,直接在第一级网页上抓商品链接,可能会有很多页,设置翻页大香蕉综合伊人网。
举报 使用道具
8#
Charless 初级会员 发表于 5 天前 | 只看该作者
maomao 发表于 2020-5-17 11:53
如果,你最后只是为了抓商品的链接,不用分那么细,直接在第一级网页上抓商品链接,可能会有很多页,设置 ...

嗯嗯 单个分类里面的商品内容我都能抓出来  现在就是这个列表和所有的子分类的链接抓不出来
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 如何使用集搜客分词平台做社会网络图分析?
  • 关于食品安全的美国联邦法规文件的网络爬虫
  • 怎样更有效率地搜索互联网和整理知识—使用
  • 阿里巴巴外包询价网站用集搜客网络爬虫能采
  • 在限定论域的时候,为什么“任何一个”表示

热门用户

GMT+8, 2020-5-22 04:03

友情链接: 4sf49.space    110ny.space