大神们，请教一下，抓包地址无法请求的问题

wojshiwo

大神们，抓包到一个地址，可以看到所需要的数据，但浏览器打不开，提示请求失败  {"status":"failed","code":10}   用JAVA工具也请求失败是怎么回事，或用什么工具，请教大神帮解答一下

知心

有反爬策略吧，注意一下请求带的参数

hill_king

协议头，cookie

wojshiwo

https://a1.go2yd.com/Website/channel/news-list-for-channel?searchentry=channel_navibar&reqid=jlo0d2ys_1587132253039_3488&every_day_history=false&switch_local=false&cstart=0&androidId=503f852dcf848aa489dda5df7143277d&apiv=025100&cend=30&version=025100&ad_version=010972&group_fromid=g181&signature=F1sGOv9Ti6x8P91yr4VQpGo9JFPEOGBlp9vY66pW7nY_ijp2XI-Vi9XBdAwMsDPlL6x2Qys0Z-q7OzSooV7FmbHWw_yLb2nbPKM2dHnFRRp3INb-0rjEeBDNNya72qzX0GXa5fFQH7G55UUwo6hoRb8widAg9rdVKfE8ivNgEiE&eventid=1185249494d45ab97d-d3db-4cc7-b08c-d66258185a97&personalRec=1&infinite=true&distribution=app.hicloud.com&refresh=1&appid=yidian&os=23&platform=1&cv=5.3.5.2&apk_meta_channel=app.hicloud.com&fields=docid&fields=date&fields=image&fields=image_urls&fields=like&fields=source&fields=title&fields=url&fields=comment_count&fields=up&fields=down&brand=Huawei&channel_id=54393929302&cpv=1.118&net=wifi
这样的地址，抓包工具得到的地址  可以看到数据，但浏览器打不开，一般抓包的地址只要有数据，都可以请求到的，弄不明白

wojshiwo

wojshiwo 发表于 2020-4-18 18:15
https://a1.go2yd.com/Website/channel/news-list-for-channel?searchentry=channel_navibar&reqid=jlo0d2y ...

参数太多了，

demon_lin

纯粹发请求地址内容是看不出什么的，你需要将完整的 curl 发出来，看完你也自然知道你请求失败的原因了。

wojshiwo

demon_lin 发表于 2020-4-19 01:03
纯粹发请求地址内容是看不出什么的，你需要将完整的 curl 发出来，看完你也自然知道你请求失败的原因了。

完整的是哪个地址，上面抓到的就是这个地址，内容全在这个地址里

demon_lin

wojshiwo 发表于 2020-4-19 13:05
完整的是哪个地址，上面抓到的就是这个地址，内容全在这个地址里

比如，进入msdn后随意选中一项分类，会产生一条请求，在浏览器开发者工具中， network 中的 xmr分类里可以看到相关请求，右键 ccopy as curl 即可 获取一下格式的数据：

[PowerShell] 纯文本查看 复制代码

curl 'https://msdn.itellyou.cn/Category/Index' -H 'Connection: keep-alive' -H 'Pragma: no-cache' -H 'Cache-Control: no-cache' -H 'Accept: */*' -H 'Sec-Fetch-Dest: empty' -H 'X-Requested-With: XMLHttpRequest' -H 'User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36' -H 'Content-Type: application/x-www-form-urlencoded; charset=UTF-8' -H 'Origin: [url]https://msdn.itellyou.cn[/url]' -H 'Sec-Fetch-Site: same-origin' -H 'Sec-Fetch-Mode: cors' -H 'Referer: [url]https://msdn.itellyou.cn/'[/url] -H 'Accept-Language: zh-CN,zh;q=0.9' --data 'id=fcf12b78-0662-4dd4-9a82-72040db91c9e' --compressed