正在寻找最好的网页抓取课程，却不知道从哪里开始？
我们精选了一份在线最佳课程清单。从 Python 库到 JavaScript 框架，这些全面的课程涵盖了各种工具和技术，助你掌握网页抓取。
无论你是初学者还是经验丰富的程序员，都能找到适合自己需求的课程。
学习网页抓取的 7 门顶级在线课程
每个人的学习方式都不同，因此我纳入了采用不同教学方法的课程。
所以，如果你想进一步了解 Python 库、如何使用 Node.js 抓取数据，或者测试自己的抓取技能，请继续阅读，找到适合你的课程。
1. Python 网页抓取实践入门（Real Python）
对于更喜欢阅读教程的人来说，Real Python 的这门课程再合适不过了。从构建网页抓取工具、安装 Python 库，到通过实践练习检验所学内容，课程十分实用，是提升编程技能的快速入门指南。
主要特色：
- 可下载的源代码。
- 易于阅读，设计友好。
- 循序渐进地讲解如何使用 Beautiful Soup 解析 HTML。
最大亮点：教程简单明了，每行代码前后都有清晰的讲解。
最大缺点：提供的示例是很好的新手入门内容，但需要更新。
目标受众：初学者——无需抓取经验。
时长：阅读需要 10-15 分钟。
2. 使用 Python 访问网络数据（Coursera）
如果你有一些使用 Python 进行网页抓取的经验，并希望挑战更高难度，这门 Coursera 付费课程或许正合你意。建议先掌握 XML、HTML 和 JSON，以免跟不上课程内容。
主要特色：
- Coursera 认证。
- 课程期间共有 5 项作业。
- 涵盖多个 Python 模块：ET、BeautifulSoup、JSON、XML。
最大亮点：具有挑战性的作业能帮助你磨炼 Python 编程技能。课程难度较高，能促使你运用迄今为止所学的一切。
最大缺点：作业可能很难，有些人认为其难度超出了课程所教的内容。
目标受众：具备 Python 知识的中级抓取人员和程序员。
时长：共 6 个模块，时长 18 小时。
3. Python 网页抓取：Selenium、Scrapy + ChatGPT Prize 2024（Udemy）
通过 Udemy 这门内容全面的付费课程，学习如何使用 Python 抓取数据。你将学习三种最受欢迎的 Python 工具：从 BeautifulSoup 开始，接着学习 Selenium，最后学习 Scrapy，并在过程中完成一些项目。
此外，你还将学习如何使用 ChatGPT 进行网页抓取。
主要特色：
- 课程期间完成 4 个抓取项目。
- 主要侧重于 Scrapy。
- XPath 部分涵盖函数、语法和运算符。
最大亮点：互动性强，讲解到位，并提供多个真实案例，便于理解。
最大缺点：音量不稳定，每段视频都需要重新调整音量。大多数讲解都比较基础。
目标受众：初学者（从未进行过抓取），以及具备 Python 基础知识的程序员。
时长：课程包含 10.5 小时的视频和 17 篇文章。
4. freeCodeCamp 的 Scrapy 课程（YouTube）
如果你想开始使用高效的抓取框架 Scrapy，freeCodeCamp 提供的这门免费在线课程会很有帮助。最棒的是，课程不只讲基础知识，还会教你如何使用 Scrapyd 将抓取工具部署到云端，并安排其定期运行。
主要特色：
- 创建 Scrapy 爬虫的基础知识。
- 提供 Github 上的代码。
- 还附有文字版教程指南。
- 详细讲解如何集成代理。
最大亮点：教程易于跟学，非常适合想要了解 Scrapy 结构的初学者。
最大缺点：缺少关于 CSS 和 XPath 选择器的讲解。
目标受众：初学者（从未进行过抓取），以及希望深入学习 Scrapy 的抓取人员。
时长：YouTube 上的单个视频，时长 4.5 小时。
2. 使用 Node.js 和 JavaScript 进行网页抓取（Udemy）
如果你更偏好 JavaScript，这门 Udemy 付费课程将帮助你学习如何使用主流 JavaScript 运行环境 Node.js 抓取网站。课程深入讲解了 Request、Cheerio、Puppeteer 和 Nightmare.js 等不同库，内容清晰简洁。总的来说，讲师让课程学起来很有趣。
主要特色：
- 以 Craigslist 和 Facebook 等网站为例进行实践。
- 介绍 CSS 选择器和一些抓取工具。
- 提供避免被封禁的实用技巧。
- 额外介绍 GraphQL。
最大亮点：直入主题，并提供抓取时节省时间的技巧和建议。
最大缺点：部分示例已经过时，因此有些人可能难以复现讲师的操作。
目标受众：初学者——无需抓取经验。
时长：课程包含 11.5 小时的视频和 7 篇文章。
6. 使用 Python 抓取并分析数据分析师职位要求（Coursera Project Network）
这门以项目为基础的课程非常适合练习 Python 网页抓取技能。课程时间较短，只有四个步骤，你可以借此检验自己对变量、函数以及职位信息搜集相关网页抓取技术的掌握程度。
主要特色：
- 无需下载或安装其他程序。
- 可添加到简历中的工作样本。
- 提供网页抓取实践经验。
最大亮点：有助于学习如何解决你作为数据分析师可能遇到的实际问题。
最大缺点：需要具备技术背景以及数据清理和网页抓取经验才能完成课程。
目标受众：中级抓取人员——掌握网页抓取知识。
时长：8 小时。
7. Python 网页抓取：工具、技术与合法性，由 Real Python 主讲（YouTube）
虽然严格来说它并非课程，而是一档播客，但它是 Python 学习的绝佳补充。内容涵盖了一些课程中不常涉及的方面，例如网页抓取合法性的变化和最佳实践。由于它更像是一场谈话，你可以开车时或躺在床上时收听，直接获取专家的抓取经验和建议。
主要特色：
- 网页抓取入门工具。
- 数据清理和格式处理技巧。
- 关于动态网站和 selenium 的建议。
最大亮点：通过有趣而引人入胜的对谈涵盖了广泛主题，还提供了如何在浏览器中检查元素、适合练习的网站等实用技巧。
最大缺点：由于只是对谈，没有配图辅助理解专家的讲解。
目标受众：初学者——对网页抓取有一些了解。
时长：50 分钟。
结论：牢记你的最终目标
大多数新手都觉得网页抓取是一项不可能完成的挑战，我刚入门时也这么认为。想知道我做了什么吗？我直接开始了！
看看我列出的课程吧，因为我特意涵盖了多种形式。从视频到文字教程，从 Python 库到 Javascript，内容有长有短。
动力和坚持是关键，但只有明确目标，才能完成培训。上课程、读文章、听取专家意见、勤加练习、解决疑问，但不要停下脚步。