課程簡介
NiFi 基礎與數據流概念
- 傳輸中數據與靜態數據：概念與挑戰
- NiFi 架構：核心、流程控制器、溯源文件與公告
- 關鍵組件：處理器、連線、控制器及溯源
大數據情境與整合
- NiFi 在大數據生態系中的角色（Hadoop, Kafka, 雲端儲存）
- HDFS, MapReduce 及現代替代方案的概覽
- 使用案例：串流攝取、日誌傳輸、事件管線
安裝、配置與叢集設定
- 在單一節點與叢集模式下安裝 NiFi
- 叢集配置：節點角色、Zookeeper 及負載平衡
- NiFi 部署的協調：使用 Ansible, Docker 或 Helm
數據流的設計與管理
- 路由、過濾、拆分與合併流程
- 處理器配置（InvokeHTTP, QueryRecord, PutDatabaseRecord 等）
- 處理結構、豐富化及轉換作業
- 錯誤處理、重試關係與背壓機制
整合情境
- 連接資料庫、訊息系統、REST API
- 串流至分析系統：Kafka, Elasticsearch 或雲端儲存
- 與 Splunk, Prometheus 或日誌管線整合
監控、復原與溯源
- 使用 NiFi UI, 指標及溯源視覺化工具
- 設計自主復原與優雅故障處理
- 備份、流程版本控制與應變管理
效能調整與優化
- 調整 JVM, heap, 執行緒池及叢集參數
- 優化流程設計以降低瓶頸
- 資源隔離、流程優先級控制及吞吐量管理
最佳實踐與治理
- 流程文件、命名標準及模組化設計
- 安全性：TLS, 身份驗證、存取控制及數據加密
- 變更控制、版本控制、角色權限管理及稽核紀錄
問題排除與事件響應
- 常見問題：死結、記憶體洩漏及處理器錯誤
- 日誌分析、錯誤診斷與根本原因調查
- 復原策略及流程回滾
實作演練：真實數據管線實現
- 建立端到端流程：攝取、轉換、交付
- 實施錯誤處理、背壓機制及擴展性
- 效能測試並調整管線
總結與後續步驟
最低要求
- 具備 Linux 指令列操作經驗。
- 對網路與數據系統有基本了解。
- 曾接觸數據串流或 ETL 概念。
對象
- 系統管理員
- 數據工程師
- 開發人員
- DevOps 專業人員
客戶評論 (7)
實踐練習。課程本應爲5天，但3天的學習幫助我解決了在使用NiFi時遇到的許多問題。
James - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
我認爲講師的節奏很好。他的教學方法確保沒有學生掉隊。他對我們這些新手非常支持，我們可能在職業生涯中沒有擔任過系統管理員或基礎設施相關的角色，或者需要重新拾起之前職業生涯中的技能。
Pamdrea Ivory - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
我喜歡實踐環節。通過完成提供的練習，我更好地記住了信息。此外，培訓師與整個班級的互動能力讓我感到自在，敢於提出我不確定的問題。
Leila - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
使用案例，構建NiFi數據流的示例。我們專注於解決常見問題和陷阱。
Nelson - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
我喜歡這個課程結構。第一天，我們深入學習了Nifi的基礎知識、概念和用例等。第二天，我們將第一天的知識付諸實踐，通過構建流程來滿足場景需求。第三天，我們瞭解了Nifi Registry和版本控制、多租戶功能，並進行了問答環節。
Adam - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
我喜歡他能夠詳細闡述Nifi及其強大功能的方式。你可以將其用於任何基礎設施，並支持多種計算機語言。此外，我很高興我們能夠解決Nifi證書更新時遇到的Truststore問題。
Joachim Martin - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
關於培訓所提供工具的一般知識和可能性。
Nalfis Tobar - BHG Financial
課程 - Apache NiFi for Administrators
機器翻譯
