文件名称：实验报告5 http协议.doc
文件大小：1.21MB
文件格式：DOC
更新时间：2023-06-14 03:11:40
爬虫
进入一个学校的新闻首页，分析各不同新闻网页url之间的区别和联系，并根据得到的规律通过程序生成所要请求的网页的url（前30个页面）。 使用requests库通过http协议的get方法向web server 请求30个页面的数据，要求：（1）30个请求分别由5个线程实现，每个线程负责6个url页面的请求；（2）每个线程中的不同页面请求的时间间隔是3秒；（3）当线程中成功获取某一个新闻网页数据后，需要在屏幕上输出相应的状态信息（如。。。网页请求成功） 对于每个获取的网页数据，分别将其写入到本地相应的html文件中，要求本地网页数据文件的文件名为pageXXX（XXX为请求页面的编号） 对生成的文件进行验证，如果出现中文乱码的问题，请对可能的原因进行分析，并给出可行的解决方案。