发帖子
发文章
|
开发者社区
话题
技术文章
成就云
发表
登录
3700字!爬虫数据清洗已经不重要了,我这样的爬虫架构,如履薄冰
在毕业设计中,用Java写下了第一个爬虫。2019年工作之后,从Python的requests原生爬虫库,学到分布式爬虫框架Scrapy,写了60个左右爬虫。然后写了十几篇有关于爬虫的文章。但大多都是围绕着程序设计、功能模块的角度写的,今天就从数据的角度出发,来看看爬虫程序是如何开发的。
成就云
发布于 2024-08-07 14:09:49
爬虫
scrapy
python爬虫
request
数据清洗
没有更多内容~