java爬虫

源码客栈网 2024年04月16日 10:03 论文问答 1

java爬虫爬取网页信息模拟登录，刚开始以为登录之后获取cookie然后通过cookie就可以了，但是爬取的网站并没有cookie，好像是通过localstorage进行验证的，我用的是webmagic，想问一下怎么解决这个登录问题

回复

共1条回复我来回复

源码码头网
这个人很懒，什么都没有留下～
评论

是的，现在很多网站不适用 cookie了，使用的是 LocalStorage 或者 SessionStorage，这种情况下，都是将 token放到 header 或者直接放到 url里，你查看一下网站使用的是 header 还是 url 携带 token就行了。

0条评论

发表回复

登录后才能评论