python 爬虫反爬求助

KeleZander · 发表于 2021-5-29 23:02

最近用爬虫模拟请求时请求参数和 app 手动请求一样为什么模拟请求返回的是错误数据（请求头也完全一样）这是什么反爬机制求救大佬这种怎么应对啊

KeleZander · 发表于 2021-6-1 20:53

本帖最后由 KeleZander 于 2021-6-1 20:55 编辑

研究了几天发现是请求之前要先请求会话权限 ck 才有权限获取返回正确结果

IIce_ · 发表于 2021-5-30 00:10

抓包看了吗，确定啥都一样？app呢，啥都没有，问了个寂寞

pwp · 发表于 2021-5-30 00:22

放屁屁出来啊，不然怎么摸索

kafei000 · 发表于 2021-5-30 00:45

提问的艺术

neoyoung · 发表于 2021-5-30 00:52

说清楚你的测试环境和错误提示信息~

nanaqilin · 发表于 2021-5-30 08:09

抓包看一下啊，我觉得肯定还是有不一样的地方，或者接口调用的不对

xiaovssha · 发表于 2021-5-30 09:07

header 都对了吗

KeleZander · 发表于 2021-5-30 09:23

IIce_ 发表于 2021-5-30 00:10
抓包看了吗，确定啥都一样？app呢，啥都没有，问了个寂寞

抓包看了 header 顺序 post 数据也是一样的

KeleZander · 发表于 2021-5-30 09:24

xiaovssha 发表于 2021-5-30 09:07
header 都对了吗

header 一样的顺序都保持一样了

KeleZander · 发表于 2021-5-30 09:26

nanaqilin 发表于 2021-5-30 08:09
抓包看一下啊，我觉得肯定还是有不一样的地方，或者接口调用的不对

请求抓包对比了一样的知道有什么其他反爬机制吗

帐号		自动登录	找回密码
密码			注册[Register]

[求助] python 爬虫反爬求助