文章詳情頁
python - 抓取天貓詳情頁里面的月銷量,反爬非常厲害
瀏覽:103日期:2022-08-17 13:11:56
問題描述
現在需要抓取天貓詳情頁里面的月銷量如https://detail.tmall.com/item...已分析得到是異步js返回的數據,接口如下https://mdskip.taobao.com/cor...
這個地址訪問幾次就需要登錄,登錄之后多訪問幾次就需要輸入驗證碼用代理換IP也一樣各位大神有啥好辦法
問題解答
回答1:不登陸,直接換代理
切換代理不要保持會話
回答2:獲取入口可以選擇移動端入口,例如:入口
數據直接就在頁面上,獲取數據就很容易了,關鍵字'sellCount'。
回答3:瀏覽器訪問多少次都不會要求登錄,用代碼調瀏覽器插件訪問htmlunit
用postman刷了50次也不會讓我登錄或者出現驗證碼,自己下個post試試,淘寶的反爬還是一般般。https://www.endclothing.com用的反爬才真的見鬼
回答4:有沒有大神有過經驗?
排行榜
