感謝您提交詢問!我們的一位團隊成員將在短時間內與您聯繫。
感謝您提交預訂!我們的一位團隊成員將在短時間內與您聯繫。
課程時長 14 時間:
課程簡介
Vertex AI 中的多模態 LLM 介紹
- Vertex AI 多模態功能概覽
- Gemini 模型與支援的模態
- 企業與研究領域的應用場景
設定開發環境
- 為多模態工作流配置 Vertex AI
- 處理跨模態數據集
- 上機實作:環境設定與數據集準備
長上下文窗口與進階推理
- 理解長上下文工作流
- 規劃與決策中的應用場景
- 上機實作:實施長上下文分析
跨模態工作流設計
- 結合文字、音訊和圖像分析
- 在管線中串接多模態步驟
- 上機實作:設計多模態管線
操作 Gemini API 參數
- 配置多模態輸入與輸出
- 最佳化推理與效率
- 上機實作:調整 Gemini API 參數
進階應用與整合
- 互動式多模態代理與助手
- 整合外部 API 與工具
- 上機實作:構建多模態應用
評估與迭代
- 測試多模態效能
- 準確性、對齊性與漂移的指標
- 上機實作:評估多模態工作流
總結與後續步驟
最低要求
- 熟練 Python 程式設計
- 具備機器學習模型開發經驗
- 熟悉多模態數據(文字、音訊、圖像)
目標受眾
- AI 研究人員
- 進階開發人員
- ML 科學家