爬虫有没有分PC虫和WAP虫的啊

yifanFX · 发表于 2021-8-8 02:02:38

只做移动端

wwwfu80com · 发表于 2021-8-8 02:03:25

头像真是人才

test1234a · 发表于 2021-8-8 02:04:12

如果PC跟wap的页面规则不同就要分，如果一样那就不分，ua最好也改成手机的

苦涩咖啡 · 发表于 2021-8-8 02:04:58

不一定看被采集网站的页面规则的

乄有點の拽ヤ · 发表于 2021-8-8 02:05:45

专业搞爬虫的告诉你。。不分就一个请求而已除非你有单独做awp页面才能访问比如某海鲜鱼

洁白的希望 · 发表于 2021-8-8 02:06:32

搜索引擎也会收录 WAP 手机版网页，我就经常遇到搜索结果打开后特么是个手机版网页，看起来好难受~

火山赤子 · 发表于 2021-8-8 02:07:19