小鹅通爬虫实操

打开 F12, 勾选保留日志,进行手动登录,找到请求方法为 POST 的信息,这就是登录时向服务器发送的请求,找到 cookie 的信息并记录。

点击负载可以找到发起登录请求时传入的参数信息

  • ticket:验证码票据(用来校验你输入的验证码)

  • randstr:随机字符串(防重放攻击)

  • verification_type:验证类型(1 通常代表密码登录)

  • session_id:当前会话 ID

  • phone:你的登录手机号(明文)

  • password:你的密码(这里看起来是部分掩码显示,实际传输时大概率是加密或脱敏后的)

  • keep_login:是否记住登录状态(false 代表不记住)

  • nation_login:国家 / 地区登录标识(1 通常代表国内)

播放视频时产生一系列 Session 会话,这些视频相关行都是客户端向服务器请求的视频分片 TS分片的会话,类型时 video/mp2t,也就是 HLS 流媒体切片文件,第四第五列分别是目标服务器域名以及请求的视频分片 url 路径,但是知识 ts 切片,需要找到完整的 m3u8 文件

ctrl+f 搜索 m3u8 的session会话

请求头中包含 url 信息,需要加上 host 域名前缀

评论