Python 的網路爬蟲 - BeautifulSoup、Selenium 和 Scrapy + ChatGPT 2024

2024 年更新 | 4 個使用 Beautiful Soup、Selenium 和 Scrapy 的專案 | 用於網頁抓取的 ChatGPT

從這 10.5 小時的課程，你會學到

學習使用 Beautiful Soup 從頭開始抓取網站資訊
在學習網路爬蟲之前先了解所需的基本知識（Python、HTML、XPath）
如何使用 ChatGPT 進行網頁抓取
4 個網頁抓取專案（從初學者到進階專案）
使用任何抓取工具處理分頁
學習使用 Selenium 和 Scrapy-Splash 來抓取 JavaScript 網站
將提取的資料儲存在 MongoDb 和 SQLite3 中
抓取滑不完的網站
使用 Selenium 和 Scrapy 登入網站

要求

Python是基礎知識
網際網路

課程說明

你有沒有想過資料在我們的日常生活中有多重要？

無論你是資料科學家、資料分析師或程式設計師，取得所需資料都很重要！這就是為什麼 Walmart、Target 和 CNN 等一些財富 500 強公司使用網頁抓取來保持資料領先地位。可以說，這是他們最好的秘密武器之一。

歡迎使用 BeautiuflSoup、Selenium 和 Scrapy 在 Python 進行網頁抓取！

最完整且以專案為導向的課程。在本課程中，我們將學習網路爬蟲解決很酷的專案，這將幫助我們從一些最著名的網站上抓取資料。僅舉幾例：

Amazon Audible
Twitter
Google
足球統計
世界測量儀( Worldometers )
電影頁面

這是最完整的 Python 網路爬蟲課程，分為 3 個部分：BeautiuflSoup、Selenium 和 Scrapy。我的目標是讓你成為網頁抓取的專家。這就是為什麼本課程只有 10% 的內容專注於 Beautiful Soup，而 40% 致力於 Selenium，50% 致力於 Scrapy。

為什麼我要建構這樣的課程？

Beautiful Soup 有很多限制，但對於簡單介紹網頁抓取仍然很有用。相反，如果你學習 Selenium，你將能夠抓取任何網站。如果你將 Scrapy 新增到你你的工具包中，你將能夠比任何其他網頁抓取程式庫更快地抓取任何網站。在整個課程中，你將看到每個 Python 程式庫進行網頁抓取的強大功能。

這門課程與其他課程有何不同？為什麼你應該報名？

這是最新、最完整的 Python 網頁抓取課程。你將使用 Python 3.7、Scrapy 2.4、Selenium 3.141.0 和 BS4
這是你會發現的最基於專案的課程。我們將抓取許多最知名的網站
你將獲得有關如何成為專業網頁抓取工具的深入逐步指南。
你將學習如何使用 Selenium、Scrapy 和 Splash 來抓取 JavaScript 驅動程式的網站。你不會找到任何教程來教如何像我在本課程中那樣使用這些網頁抓取工具。
你將學習如何使用 ChatGPT 進行網頁抓取
Udemy 提供 30 天退款保證

在課程結束時，你將了解如何建立自己的網頁抓取工具來獲取新資料，學習網路爬蟲的最佳技術等等。

現在就加入我，讓我們一起開始抓取網頁吧！