Python 实战：用 Scrapyd 打造个人化的爬虫部署管理控制台
韦世东，资深爬虫工程师、开源项目 ScrapydArt 作者、开源项目 Gerapy 开发小组核心成员、公众号【进击的 Coder】运营者之一，5 年 IT 从业经验，具有丰富的爬虫项目设计及分布式海量数据爬取经验，擅长反爬虫的绕过技巧， 独立完成爬虫调度管理平台的技术研发，在数据分析及可视化方面具备一定的实战经验。
你会学到什么？
- Scrapy 项目打包部署的正确姿势以及 Scrapyd 鲜为人知的技巧；
- 源码阅读的能力，并且可以通过调试代码的方式快速地熟悉项目；
- Scrapyd-client 的使用以及爬虫项目打包；
- 能够从源码的与功能设计的角度去思考，为什么这部分代码会这么写，它的应用场景有哪些；
- 学会将逻辑和思路转化为实际的代码；
- 通过大量的实战和代码积累能力，最终能够随心所欲地对 Scrapyd 进行扩展。
适宜人群
- 希望提升自身技术竞争力的爬虫工程师
- Scrapy 爬虫框架使用者
- 爬虫爱好者或正在学习爬虫技术的在校学生
- 想要打造爬虫部署管理平台的工程师
- 需要掌握 Python 开发基础，了解 HTML 基本知识
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。