了解有效資料工程的原理。培養您在高需求的資料工程領域的技能,並了解如何透過應用開發資料系統的一組核心原則和策略來提供真正的商業價值。
關於此專業課程
DeepLearning.AI 資料工程專業證書是一個全面的線上課程,適合希望開始或發展職業生涯的資料工程師和從業者。
各種規模、各行業的組織都在以越來越快的速度擷取和產生資料。在這些組織中,每個團隊,從高階主管、銷售和行銷、財務和營運、產品和工程到客戶服務,都可以從組織數據中獲得見解和價值。無論最終用例是資料科學、機器學習還是分析,資料工程都可以將原始資料轉換為商業價值。這就是為什麼資料工程師的角色是當今科技業需求最高的工作之一。
在整個專業系列課程中,您將學習資料工程的基礎知識,同時獲得使用 AWS 和開源工具設計和實施資料架構的實務經驗。
該證書由行業專家、《資料工程基礎》的合著者 Joe Reis 授課,為您提供在高需求領域脫穎而出的技能和知識,重點是攝取、處理、轉換、存儲資料以及為資料利益相關者提供數據推動組織和商業目標。這些實用實驗室是與 AWS 和 Factored.AI 合作開發的,旨在為您提供在雲端上建置資料系統的真實體驗。
有了這個證書,您將擁有進一步發展資料工程職業生涯的工具。
到官方網站了解本課程與上課
應用的學習專案
您將在這課程中
- 將利害關係人的需求轉化為系統需求,並選擇合適的工具來建構系統。
- 在 AWS 上為產品推薦系統建構端對端批次和流處理管道。
- 應用良好資料架構的原則來評估 AWS 上資料系統的安全性、效能、可靠性和可擴展性。
- 探索各種類型的來源系統並解決常見的連接問題。
- 使用基礎設施和管道作為程式碼工具來編排、自動化和監控資料管道。
- 為各種用例設計資料湖和資料湖庫儲存架構。
- 探索資料儲存選擇對查詢效能和成本的影響。
- 對分析和機器學習用例的資料進行建模和轉換,並將 Pandas 等集中式處理框架與 Spark 等分散式處理框架進行比較。
- 將您的資料提供給下游資料利害關係人以進行商業分析和機器學習用例。
你將學到的內容有
- 為整個資料工程領域開發一個心理模型,包括資料工程生命週期及其暗流。
- 了解用於處理您所從事的任何資料工程專案的框架,以便您可以有效地利用資料創造商業價值。
- 在資料工程生命週期的五個階段培養您的技能;包括產生、攝取、儲存、轉換和服務資料。
- 了解良好資料架構的原則,並應用它們在 AWS 雲端上建置資料系統。
你將獲得的技能:
| 資料管理 | DataOps | 資料倉儲 |
| 資料建模 | 資料管理平台 | 資料架構 |
| 資料轉換 | 資料工程 | 資料編排 |
字幕
英文
製作方
DeepLearning.AI
DeepLearning.AI 是一家教育科技公司,致力於開發全球人工智慧人才社群。 DeepLearning.AI 專家主導的教育體驗為人工智慧從業者和非技術專業人士提供了從基礎知識到高級應用的必要工具,使他們能夠建立人工智慧驅動的未來。
自 2006 年以來,亞馬遜網路服務一直是世界上最全面、應用最廣泛的雲端平台。 AWS 透過44 個可用區提供90 多種功能齊全的服務,涉及運算、儲存、網路、資料庫、分析、應用程式服務、部署、管理、開發人員、行動、物聯網(IoT)、人工智慧、安全、混合和企業應用程式跨越 16 個地理區域。 AWS 服務受到全球數百萬活躍客戶(包括成長最快的新創公司、最大的企業和領先的政府機構)的信賴,可以為他們的基礎設施提供支持,使其更加敏捷並降低成本。 Coursera 和 AWS 自 2017 年以來一直是合作夥伴,為全球學習者和企業提供成功所需的技能。 Coursera 基於 AWS 伺服器構建,可根據學生需求進行擴展,對容量和彈性充滿信心,並與 AWS 合作。 2019 年,Coursera 獲得了高級合作夥伴地位,並進一步擴大了與 AWS Educate、AWS EdStart 和 AWS Academy 的合作夥伴關係。 Coursera 已經能夠透過 Coursera 平台上由頂級主題專家授課的 8 門 AWS 課程讓雲端技能變得更容易獲得,而且課程組合還在不斷增長。要了解有關 AWS 的更多信息,請訪問 https://aws.amazon.com。
第 1 門課程 資料工程導論
你將學到什麼 :
- 全面了解資料工程生命週期及其暗流
- 收集利害關係人的需求並將其轉化為系統需求
- 在 AWS 上設計和實作批次和流資料管道
你將獲得的技能:
| 資料管理 | DataOps | 資料倉儲 |
| 資料建模 | 資料管理平台 | 資料架構 |
| 資料轉換 | 資料工程 | 資料編排 |
第 2 門課程 來源系統、資料攝取和管道
你將學到什麼 :
- 收集利害關係人的需求並將其轉化為系統需求。
- 在 AWS 上實施批次和串流攝取流程,以從各種來源系統攝取資料。
- 將安全性、資料管理、資料營運和編排等面向整合到您建置的資料系統中。
你將獲得的技能:
| 雲端網路 | DataOps | 批量和串流式攝取 |
| 資料編排 | 基礎設施即程式碼 Infrastructure as Code (IaC) |
第 3 門課程 資料儲存與查詢
你將學到什麼 :
- 為各種用例設計儲存架構,並選擇適當的技術來實現這些架構
- 練習常見的查詢模式並確定提高查詢效能和增強資料系統價值的方法
你將獲得的技能:
| 進階 SQL | 資料倉儲/資料湖/資料湖屋架構 | 資料儲存基礎知識 |
| 使用 Apache Flink 進行串流查詢 |
第 4 門課程 資料建模、轉換和服務
你將學到什麼 :
- 根據利害關係人的需求建模和轉換資料以提供商業價值
- 為您的架構設計選擇合適的資料處理工具
- 使用分散式和非分散式處理框架處理資料以進行批量分析和機器學習資料管道
你將獲得的技能:
| 資料建模 | 特徵工程 | 資料轉換 |
| Spark 和 PySpark |
到官方網站了解本課程與上課

你可能會有興趣
- Coursera 訂閱 : 無限制訪問 7,000 多項世界一流的課程、實踐專案和工作準備證書計劃 – 只需支付一次全包式訂閱費用
- ★想要加強英文能力嗎?– 練好英文是最大的學習槓桿
- 如何找工作學習地圖 – 找工作不要靠運氣!
- 從 Soft & Share 各種社團頻道挑選你喜歡的加入

發表迴響