感謝您提交詢問!我們的一位團隊成員將在短時間內與您聯繫。
感謝您提交預訂!我們的一位團隊成員將在短時間內與您聯繫。
課程時長 14 時間:
課程簡介
Vertex AI 中的多模態 LLM 簡介
- Vertex AI 多模態功能概述
- Gemini 模型及支援的模態
- 企業與研究領域的用例
設定開發環境
- 為多模態工作流配置 Vertex AI
- 處理跨模態的資料集
- 實作實驗室:環境設定與資料集準備
長上下文窗口與進階推理
- 理解長上下文工作流
- 規劃與決策中的應用案例
- 實作實驗室:實作長上下文分析
跨模態工作流設計
- 結合文字、音訊與影像分析
- 在管線中鏈接多模態步驟
- 實作實驗室:設計多模態管線
使用 Gemini API 參數
- 配置多模態輸入與輸出
- 最佳化推論與效率
- 實作實驗室:調整 Gemini API 參數
進階應用與整合
- 互動式多模態代理與助理
- 整合外部 API 與工具
- 實作實驗室:建構多模態應用程式
評估與迭代
- 測試多模態效能
- 準確性、對齊度及漂移指標
- 實作實驗室:評估多模態工作流
總結與後續步驟
最低要求
- 熟練 Python 編程
- 具備機器學習模型開發經驗
- 熟悉多模態資料(文字、音訊、影像)
目標受眾
- AI 研究者
- 進階開發人員
- ML 科學家