課程簡介

介紹

Apache Spark 功能和體系結構概述

  • Apache Spark 模組:Spark SQL、Spark Streaming、MLlib、GraphX
  • RDD、數據幀、驅動器工作線程、DAG 等。

在 .NET 上設置 Apache Spark

  • 準備 Java VM
  • 使用 .NET Core 運行 .NET for Apache Spark

開始

  • 創建示例 .NET 控制台應用程式
  • 添加 Spark 驅動程式
  • 初始化 SparkSession
  • 執行應用程式

準備數據

  • 構建數據準備管道
  • 執行 ETL(提取、轉換與載入)

Machine Learning

  • 構建機器學習模型
  • 準備數據
  • 訓練模型

實時處理

  • 即時處理流數據
  • 案例研究:監控感測器數據

互動式查詢

  • 使用 Spark SQL
  • 分析結構化數據

可視化結果

  • 繪製結果
  • 使用第三方工具可視化結果

故障排除

總結和結論

最低要求

  • 使用 C# 或 F# 的 .NET 程式設計經驗

觀眾

  • 開發人員
 21 時間:

人數



每位參與者的報價

客戶評論 (11)

相關課程

課程分類