使用 GCP 和 Azure Cloud 的大數據工程訓練營

使用 Hadoop、Spark、Kafka 和 Cloud 掌握大數據 | 從頭開始建立真實世界的專案和可擴展的資料管道

從這 74 小時的課程，你會學到

從頭開始學習 Hadoop、Spark 和 Kafka，以了解 3V（Volume、Velocity、Variety）及其實際應用。
掌握使用 Apache Spark、Airflow、Kafka 和分散式系統的 ETL 工作流程、資料擷取、轉換和儲存。
在 Azure 和 GCP 上部署和管理大數據解決方案
致力於現實世界的大數據專案，使用產業工具實現可擴展的架構、資料管道和分析。

要求

基本電腦知識－不需要大數據方面的經驗，但熟悉使用電腦和基本軟體會有所幫助。
基本 Python 或 SQL（可選）—雖然不是強制性的，但對 Python 或 SQL 有基本的了解可以使學習資料處理變得更容易。
學習意願－探索大數據技術和使用大規模資料解決方案的強烈動機至關重要。
可上網的筆記型電腦－建議使用任何至少 8GB RAM 的系統（Windows/Mac/Linux）在本機或雲端運行大數據工具。

課程說明

課程描述

在當今數據驅動的世界中，組織每秒都要處理大量產生的數據。大數據技術對於有效處理、儲存和分析這些數據以推動業務洞察至關重要。無論您是初學者、新人還是希望轉型到大數據工程領域的經驗豐富的專業人士，本課程旨在透過真實的端到端專案將您從零提升到專家水平。

這個全面的大數據訓練營將幫助您掌握最受歡迎的技術，例如 Hadoop、Apache Spark、Kafka、Flink，以及 AWS、Azure 和 GCP 等雲端平台。您將學習如何建立可擴展的資料管道、執行批量和即時資料處理以及如何使用分散式計算框架。

我們將從基礎開始，解釋大數據及其生態系統的基本概念，然後逐步轉向高級主題，確保您透過實際專案獲得實務經驗。

您將學到什麼？

大數據基礎 -了解 3V（容量、速度、多樣性）以及大數據技術如何解決現實世界的問題。
資料工程與管道 -了解如何設計 ETL 工作流程、從多個來源提取資料、轉換資料並有效率地儲存資料。
大數據處理 – 獲得使用 Apache Spark 進行批次處理以及使用 Kafka 和 Flink 進行即時串流的專業知識。
基於雲端的大數據解決方案 – 使用服務在 Azure 和 GCP 上部署和管理大數據解決方案
端到端專案 – 致力於與產業相關的專案，實施可擴展的架構、資料管道和分析。
效能優化 -了解優化大數據工作流程以提高效率和可擴展性的最佳實踐。

本課程適合哪些人？

初學者和新人 – 無需經驗。從零開始您的大數據工程之旅。
軟體開發人員 – 將您的技能擴展到 Hadoop、Spark 和 Kafka 等大數據技術。
資料分析師和科學家 – 處理大型資料集、ETL 管道和即時處理。
雲端和 DevOps 工程師 – 了解如何在雲端環境中部署和管理大數據應用程式。
IT 專業人員 – 透過實務經驗和產業相關專案轉型為大數據工程。

先決條件

基本電腦知識 – 無需大數據經驗。
Python 或 SQL(可選) – 有幫助，但不是強制性的。
配備 8GB RAM 和網路存取的筆記型電腦 – 用於在本地或雲端運行大數據工具。

完成本課程後，您將做好就業準備，具備實用技能，並有信心使用全球頂級公司使用的大數據技術。

立即註冊並利用大數據將您的職業生涯提升到一個新的水平。

目標受眾

初學者和新人 – 任何想要在資料工程、資料科學或雲端運算領域開始職業生涯的大數據新手。
軟體開發人員 – 希望將自己的技能擴展到 Hadoop、Spark 和 Kafka 等大數據框架，以實現可擴展應用程式的開發人員。
資料分析師和資料科學家 – 希望在大數據環境中處理大型資料集、ETL 管道和即時處理的專業人士。
雲端和 DevOps 工程師 – 想要學習如何在 Azure 和 GCP 上部署和管理大數據解決方案的工程師。
經驗豐富的專業人士 – 希望轉型進入大數據工程領域並使用尖端工具從事實際專案的 IT 專業人士。

講師簡介

Krish Naik 首席 AI 工程師

我是 iNeuron 的前聯合創始人和首席人工智慧工程師，我在機器學習、深度學習和電腦視覺、生成人工智慧方面擁有開創性的經驗，是一名教育家和導師，在該行業擁有超過 15 年的經驗。這些是我的 Udemy 課程，我透過許多現實世界的問題場景講解了機器學習、深度學習和人工智慧的各種主題。我在各種聚會、技術機構和社區組織的論壇上就資料科學、機器學習和人工智慧發表了 30 多次技術演講。我的主要目標是讓每個人都熟悉 ML 和 AI。

Mayank Aggarwal 教育家

我是 Mayank Aggarwal，是一位資深機器學習工程師，擅長軟體開發、人工智慧、大數據、機器學習和系統設計。我有機會與高盛、OYO 和 iNeuron 等頂級公司合作，為開發實際應用中的人工智慧驅動的解決方案和可擴展數據系統做出了貢獻。

憑藉多年的行業經驗，我熱衷於教學和指導。我設計並在 Udemy 和 YouTube 等平台上提供實作課程，涵蓋超過 50,000 名學生。我的教學方法著重於分解資料科學、機器學習和大數據中的複雜主題，使每個人都能理解並採取行動。

我的目標是透過專注於解決現實世界的問題，幫助學習者獲得實用的、行業適用的技能，使人工智慧、DSA 和大數據易於理解和實施。

KRISHAI Technologies Private Limited 人工智慧和機器學習工程師

Krish AI Technologies 在數據科學、機器學習、生成式人工智慧、深度學習和相關技術領域的教育方面處於領先地位。我們的使命是讓學習者掌握在快速發展的技術領域中脫穎而出所需的技能和知識，該學院由行業資深人士 Krish Naik 創立，Krish Naik 在資料分析行業擁有超過 13 年的經驗，並擁有超過 7 年的教學經驗。

我們的專業知識：在 Krish AI Technologies，我們專注於人工智慧和資料科學領域的全面學科，包括：

資料科學：從基礎概念到進階技術，我們涵蓋資料分析、統計建模和資料視覺化的所有方面。

機器學習：我們的課程涵蓋了機器學習演算法的全部範圍，包括監督學習和無監督學習、聚類技術和高級預測模型。

生成式 AI：我們提供最新的生成式 AI 模型和技術的深入培訓，幫助學生理解和實施尖端技術。

深度學習：我們的課程深入探討深度學習的數學直覺和實際應用，涵蓋神經網路、CNN、RNN 等。

自然語言處理 (NLP)：我們提供全面的 NLP 培訓，包括文字預處理、情緒分析、語言建模和各種 NLP 專案。