关于抓取的百度搜索内容和实际浏览器打开的搜索内容不一样的问题

时间:2022-05-22 17:10:59
就是我用java抓取了某个词的百度搜索的源码,但获取到的html代码=-=和浏览器访问某个词的百度搜索内容,不一样。
这是为什么=-=
比如我搜索关键词“搜索”:
我用java获取到的页面: 关于抓取的百度搜索内容和实际浏览器打开的搜索内容不一样的问题

但我用浏览器实际打开的页面是: 关于抓取的百度搜索内容和实际浏览器打开的搜索内容不一样的问题

怎么才能2个页面一样呢=-=

1 个解决方案

#1


你可以使用Http抓包工具查看提交到参数,都写到你的代码中应该就相同了,另外注意看浏览器是否使用了ajax查询了某些数据,
其实浏览器也是程序写的

#1


你可以使用Http抓包工具查看提交到参数,都写到你的代码中应该就相同了,另外注意看浏览器是否使用了ajax查询了某些数据,
其实浏览器也是程序写的