聯繫我們

課程簡介

Vertex AI 中的多模態大型語言模型介紹

  • Vertex AI 中多模態功能的概覽
  • Gemini 模型及其支援的模態
  • 企業與研究領域的使用案例

開發環境設定

  • 為多模態工作流程配置 Vertex AI
  • 跨模態處理資料集
  • 實作實驗室:環境設定與資料集準備

長上下文視窗與進階推理

  • 理解長上下文工作流程
  • 規劃與決策的使用案例
  • 實作實驗室:實施長上下文分析

跨模態工作流程設計

  • 結合文字、音訊和影像分析
  • 在工作流程中串聯多模態步驟
  • 實作實驗室:設計多模態工作流程

使用 Gemini API 參數

  • 配置多模態輸入與輸出
  • 最佳化推論效能與效率
  • 實作實驗室:調整 Gemini API 參數

進階應用程式與整合

  • 互動式多模態代理程式與助手
  • 整合外部 API 與工具
  • 實作實驗室:構建多模態應用程式

評估與迭代

  • 測試多模態效能
  • 準確度、對齊程度與漂移的指標
  • 實作實驗室:評估多模態工作流程

總結與後續步驟

最低要求

  • 具備 Python 程式設計能力
  • 擁有機器學習模型開發經驗
  • 熟悉多模態資料(文字、音訊、影像)

目標受眾

  • AI 研究人員
  • 資深開發者
  • 機器學習科學家
 14 小時

人數


每位參與者的報價

即將到來的課程

課程分類