使用免費的 Databricks 社群為初學者提供 Capstone (總整)專案，掌握 Python 中的 Apache Spark 程式設計（PySpark）
從這 14 小時的課程，你會學到
- Apache Spark 基金會和 Spark 架構
- Spark 中的資料工程與資料處理
- 使用資料來源和接收器( sinks )
- 使用資料幀和 Spark SQL
- 使用 PyCharm IDE 進行 Spark 開發與除錯
- 單元測試、管理應用程式日誌和叢集部署
要求
- 使用 Python 程式語言的程式設計知識
- 一台配備 8 GB RAM 的 64 位元 Windows/Mac/Linux 計算機
課程說明
本課程無需任何 Apache Spark 或 Hadoop 知識。我們已詳細解說了 Spark 架構和基本概念，幫助您快速掌握課程內容。
關於課程
我正在創建「PySpark – Apache Spark Python 程式設計」初學者課程，旨在幫助您理解 Spark 程式，並運用這些知識建立資料工程解決方案。本課程以範例為導向，採用類似工作坊的教學方式。我們將採用即時程式設計的方式，並在整個過程中講解所有必要的概念。
誰該參加本課程？
我為願意使用 Apache Spark 開發資料工程管道和應用程式的軟體工程師設計了本課程。我還為負責設計和建構組織以資料為中心的基礎架構的資料架構師和資料工程師設計了本課程。另一類人群是管理人員和架構師，他們不直接參與 Spark 的實施，但他們與在底層實施 Apache Spark 的人員一起工作。
課程中使用的 Spark 版本
本課程使用 Apache Spark 3.5。我已經在 Databricks 環境中的 Apache Spark 3.5 上測試了本課程中使用的所有原始程式碼和範例。
目標受眾
- 願意使用 Apache Spark 設計和開發大數據工程專案的軟體工程師和架構師
- 渴望學習和發展使用 Apache Spark 進行資料工程的程式設計師和開發人員
講師簡介
Prashant Kumar Pandey 建築師、作家、培訓師、ScholarNest.com 創辦人
Prashant Kumar Pandey 熱衷於幫助人們學習和職業發展，彌合他們現有技能與必備技能之間的差距。為了實現這一使命，他撰寫書籍、發表技術文章並製作培訓視頻，以幫助 IT 專業人士和學生在行業中取得成功。
他擁有超過 25 年的 IT 經驗，曾擔任開發人員、架構師、顧問、培訓師和導師，並與國際軟體服務機構合作進行各種以資料為中心、大數據和人工智慧的專案。
Prashant 堅信終身持續學習和技能發展。為了推廣這一理念，他開始在自己的 YouTube 頻道上發布免費培訓視頻，並萌生了創建“學習日誌” (Learning Journal) 來記錄自己的學習成果的想法。
他是 ScholarNest 入口網站的創始人、主要作者和主編，該網站自 2018 年初以來提供各種技能發展課程、培訓和技術文章。
Learning Journal 線上培訓公司
Learning Journal 是一個由熱衷於幫助他人學習和職業發展的小團隊，致力於彌合現有技能與必備技能之間的差距。為了實現這一使命，我們撰寫書籍、發表技術文章並製作培訓視頻，以幫助 IT 專業人士和學生在行業中取得成功。
我們作為開發人員、架構師、顧問、培訓師和導師，在 IT 領域擁有超過 40 年的經驗。我們曾與國際軟體服務機構合作進行各種以資料為中心和大數據的專案。
Learning Journal 是一個堅信終身持續學習和技能發展的團隊。為了普及終身持續學習的重要性，我們開始在 YouTube 頻道上發布免費培訓影片。我們概念化了持續學習的概念，並在 Learning Journal 旗下創建了我們的學習日誌。
自 2018 年初以來，我們撰寫了各種技能發展課程、培訓和技術文章。
字幕：簡中、英文
- 想要了解如何將英文字幕自動翻譯成中文? 請參考這篇 How-To
- Udemy 永久擁有課程 課程特價中 約 NT350 (點擊連結看更多)
- ✨年訂閱每月 NT350 🌈 悠遊 Udemy 的 26000+ 門課，最大化學習 ( 原價 NT635/月 )
- Udemy 現在越來越多課程有中文字幕，請參考 Soft & Share 中文線上課程
- 手機上點選優惠連結看到的價格比電腦上看到的貴
- ＄代表當地貨幣, 如在台灣為 NT
- 點選”報名參加課程”有可能因瀏覽器 cookies 轉久一點或回報錯誤而無法連上，請稍等刷新或重新點選就會出現
報名參加課程
也許你會有興趣
- Apache Spark 相關線上課程
- ★英語學習地圖 – 練好英文是最大的學習槓桿
- 如何找工作學習地圖 – 找工作不要靠運氣！
- 從 Soft & Share 各種社團頻道挑選你喜歡的加入
發表迴響