期刊文献+
共找到1篇文章
< 1 >
每页显示 20 50 100
基于Python的爬虫技术的网站设计与实现 被引量:7
1
作者 肖新凤 张绛丽 《现代信息科技》 2020年第14期73-75,78,共4页
随着爬虫技术的不断完善,其功能越来越强大,也导致数据窃取问题越来越严重。很多网站都采用了反爬虫技术,因此为了正常获取数据,需要一些反爬虫策略。文章设计和实现面向定向网站的网络爬虫程序,使其能满足不同的性能要求,并阐述了定向... 随着爬虫技术的不断完善,其功能越来越强大,也导致数据窃取问题越来越严重。很多网站都采用了反爬虫技术,因此为了正常获取数据,需要一些反爬虫策略。文章设计和实现面向定向网站的网络爬虫程序,使其能满足不同的性能要求,并阐述了定向网站爬虫的细节和应用环节。爬虫可以针对不同的主题网站分析构造URL并去重,多线程技术让爬虫具备更强大的抓取能力。 展开更多
关键词 PYTHON 爬虫 数据 豆瓣读书网
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部