聯繫我們
 課程時長 14 時間:

課程簡介

Vertex AI 中的多模態 LLM 介紹

  • Vertex AI 多模態功能概覽
  • Gemini 模型與支援的模態
  • 企業與研究領域的應用場景

設定開發環境

  • 為多模態工作流配置 Vertex AI
  • 處理跨模態數據集
  • 上機實作:環境設定與數據集準備

長上下文窗口與進階推理

  • 理解長上下文工作流
  • 規劃與決策中的應用場景
  • 上機實作:實施長上下文分析

跨模態工作流設計

  • 結合文字、音訊和圖像分析
  • 在管線中串接多模態步驟
  • 上機實作:設計多模態管線

操作 Gemini API 參數

  • 配置多模態輸入與輸出
  • 最佳化推理與效率
  • 上機實作:調整 Gemini API 參數

進階應用與整合

  • 互動式多模態代理與助手
  • 整合外部 API 與工具
  • 上機實作:構建多模態應用

評估與迭代

  • 測試多模態效能
  • 準確性、對齊性與漂移的指標
  • 上機實作:評估多模態工作流

總結與後續步驟

最低要求

  • 熟練 Python 程式設計
  • 具備機器學習模型開發經驗
  • 熟悉多模態數據(文字、音訊、圖像)

目標受眾

  • AI 研究人員
  • 進階開發人員
  • ML 科學家

人數


每位參與者的報價

即將到來的課程

課程分類