新竹現場GPU培訓

Huawei Ascend 是一系列专为高性能推理和训练设计的AI处理器。

本课程为讲师指导的培训（线上或线下），面向中级AI工程师和数据科学家，旨在帮助他们使用华为的Ascend平台和CANN工具包开发和优化神经网络模型。

在本培训结束时，参与者将能够：

• 设置和配置CANN开发环境。
• 使用MindSpore和CloudMatrix工作流开发AI应用。
• 使用自定义运算符和分块优化Ascend NPU的性能。
• 将模型部署到边缘或云环境。

课程形式

• 互动讲座和讨论。
• 在示例应用中动手使用Huawei Ascend和CANN工具包。
• 专注于模型构建、训练和部署的指导练习。

课程定制选项

• 如需根据您的基础设施或数据集定制本课程，请联系我们安排。

這種由講師指導的現場培訓新竹（在線或遠端）面向希望使用 OpenACC 對異構設備進行程式設計並利用其並行性的初級到中級開發人員。

在培訓結束時，參與者將能夠：

• 設置一個開發環境，其中包含 OpenACC SDK、支援 OpenACC 的設備和 Visual Studio 代碼。
• 創建一個基本的 OpenACC 程式，用於在設備上執行向量加法並從設備記憶體中檢索結果。
• 使用 OpenACC 指令和子句對代碼進行註釋，並指定並行區域、數據移動和優化選項。
• 使用 OpenACC API 查詢裝置資訊、設置設備編號、處理錯誤和同步事件。
• 使用 OpenACC 庫和互操作性功能將 OpenACC 與其他程式設計模型（如 CUDA、OpenMP 和 MPI）集成。
• 使用 OpenACC 工具分析和調試 OpenACC 程式，並確定性能瓶頸和機會。
• 使用數據局部性、迴圈融合、內核融合和自動調優等技術優化 OpenACC 程式。

CANN SDK（Neural Networks 的计算架构）为计算机视觉和自然语言处理（NLP）中的实时AI应用提供了强大的部署和优化工具，特别是在Huawei Ascend硬件上。

本课程为讲师指导的培训（线上或线下），面向中级AI从业者，旨在帮助他们使用CANN SDK构建、部署和优化视觉与语言模型，以应对实际生产用例。

培训结束后，学员将能够：

• 使用CANN和AscendCL部署和优化CV与NLP模型。
• 使用CANN工具转换模型并将其集成到实时管道中。
• 优化检测、分类和情感分析等任务的推理性能。
• 为边缘或云端部署场景构建实时CV/NLP管道。

课程形式

• 互动讲座与演示。
• 动手实验：模型部署与性能分析。
• 使用真实CV和NLP用例设计实时管道。

课程定制选项

• 如需为本课程定制培训，请联系我们进行安排。

這種以講師為主導的新竹現場現場培訓針對的是希望學習GPU程式設計基礎知識以及開發GPU應用程式的主要框架和工具的初級到中級開發人員。

• 在培訓結束時，參與者將能夠：
  瞭解 CPU 和 GPU 計算之間的區別以及 GPU 程式設計的好處和挑戰。
• 為他們的 GPU 應用程式選擇正確的框架和工具。
• 創建一個基本的 GPU 程式，該程式使用一個或多個框架和工具執行向量加法。
• 使用相應的 API、語言和庫來查詢設備資訊、分配和解除分配設備記憶體、在主機和設備之間複製數據、啟動內核以及同步線程。
• 使用相應的記憶體空間（如全域、本地、常量和專用）來優化數據傳輸和記憶體訪問。
• 使用相應的執行模型（如工作項、工作組、線程、塊和網格）來控制並行度。
• 使用 CodeXL 、 CUDA-GDB 、 CUDA-MEMCHECK 和 NVIDIA Nsight 等工具調試和測試 GPU 程式。
• 使用合併、緩存、預取和分析等技術優化 GPU 程式。

CANN TIK (Tensor Instruction Kernel) 和 Apache TVM 能够为 Huawei Ascend 硬件实现 AI 模型算子的高级优化和定制。

这门由讲师指导的培训（线上或线下）面向希望使用 CANN 的 TIK 编程模型和 TVM 编译器集成来构建、部署和调优 AI 模型自定义算子的高级系统开发者。

培训结束后，参与者将能够：

• 使用 TIK DSL 为 Ascend 处理器编写和测试自定义 AI 算子。
• 将自定义算子集成到 CANN 运行时和执行图中。
• 使用 TVM 进行算子调度、自动调优和基准测试。
• 调试和优化自定义计算模式的指令级性能。

课程形式

• 互动讲座和演示。
• 使用 TIK 和 TVM 管道进行算子编码实践。
• 在 Ascend 硬件或模拟器上进行测试和调优。

课程定制选项

• 如需为此课程定制培训，请联系我们安排。

本課程為講師指導的新竹（線上或線下）培訓，旨在幫助初級到中級開發者學習如何使用不同框架進行GPU編程，並比較其功能、性能和兼容性。

培訓結束後，學員將能夠：

• 設置開發環境，包括OpenCL SDK、CUDA Toolkit、ROCm Platform、支持OpenCL、CUDA或ROCm的設備，以及Visual Studio Code。
• 使用OpenCL、CUDA和ROCm創建一個基本的GPU程序來執行向量加法，並比較每個框架的語法、結構和執行方式。
• 使用各自的API查詢設備信息，分配和釋放設備內存，在主機和設備之間複製數據，啟動內核並同步線程。
• 使用各自的語言編寫在設備上執行並操作數據的內核。
• 使用各自的內置函數、變量和庫來執行常見任務和操作。
• 使用各自的內存空間（如全局、本地、常量和私有）來優化數據傳輸和內存訪問。
• 使用各自的執行模型來控制定義並行性的線程、塊和網格。
• 使用CodeXL、CUDA-GDB、CUDA-MEMCHECK和NVIDIA Nsight等工具調試和測試GPU程序。
• 使用合併、緩存、預取和分析等技術優化GPU程序。

CloudMatrix 是華為統一的 AI 開發和部署平台，旨在支持可擴展的生產級推理管道。

這項由講師指導的培訓（線上或線下）面向希望使用 CloudMatrix 平台（整合 CANN 和 MindSpore）部署和監控 AI 模型的初級到中級 AI 專業人士。

培訓結束後，參與者將能夠：

• 使用 CloudMatrix 進行模型封裝、部署和服務。
• 為 Ascend 芯片組轉換和優化模型。
• 為即時和批量推理任務設置管道。
• 在生產環境中監控部署並調整性能。

課程形式

• 互動式講座和討論。
• 使用 CloudMatrix 進行實際部署場景的實操。
• 專注於轉換、優化和擴展的指導練習。

課程定制選項

• 如需根據您的 AI 基礎設施或雲環境定制此課程，請聯繫我們安排。

華為的Ascend CANN工具包能夠在邊緣設備（如Ascend 310）上實現強大的AI推理。CANN提供了在計算和內存受限的環境中編譯、優化和部署模型的必要工具。

這項由講師指導的培訓（線上或線下）針對希望使用CANN工具鏈在Ascend邊緣設備上部署和優化模型的中級AI開發者和集成商。

在培訓結束時，參與者將能夠：

• 使用CANN工具為Ascend 310準備和轉換AI模型。
• 使用MindSpore Lite和AscendCL構建輕量級推理管道。
• 在計算和內存有限的環境中優化模型性能。
• 在實際邊緣用例中部署和監控AI應用程序。

課程形式

• 互動式講座和演示。
• 針對邊緣特定模型和場景的動手實驗。
• 在虛擬或物理邊緣硬件上的即時部署示例。

課程定制選項

• 如需為本課程定制培訓，請聯繫我們進行安排。

這種以講師為主導的新竹現場現場培訓面向希望在Windows上安裝和使用ROCm以程式設計AMD GPU並利用其並行性的初級到中級開發人員。

在培訓結束時，參與者將能夠：

• 在 Windows 上設置包含 ROCm 平臺、AMD GPU 和 Visual Studio 代碼的開發環境。
• 創建一個基本的 ROCm 程式，該程式對 GPU 執行向量加法並從 GPU 記憶體中檢索結果。
• 使用 ROCm API 查詢設備資訊、分配和釋放裝置記憶體、在主機和設備之間複製數據、啟動內核和同步線程。
• 使用 HIP 語言編寫在 GPU 上執行的內核並操作數據。
• 使用 HIP 內置函數、變數和庫來執行常見任務和操作。
• 使用 ROCm 和 HIP 記憶體空間（如全域、共用、常量和本地）來優化數據傳輸和記憶體訪問。
• 使用 ROCm 和 HIP 執行模型來控制定義並行度的線程、塊和網格。
• 使用 ROCm Debugger 和 ROCm Profiler 等工具調試和測試 ROCm 和 HIP 程式。
• 使用合併、緩存、預取和分析等技術優化 ROCm 和 HIP 程式。

這種以講師為主導的新竹現場現場培訓面向希望使用ROCm和HIP對AMD GPU進行程式設計並利用其並行性的初級到中級開發人員。

在培訓結束時，參與者將能夠：

• 設置包含 ROCm 平臺、AMD GPU 和 Visual Studio 代碼的開發環境。
• 創建一個基本的 ROCm 程式，該程式對 GPU 執行向量加法並從 GPU 記憶體中檢索結果。
• 使用 ROCm API 查詢設備資訊、分配和釋放裝置記憶體、在主機和設備之間複製數據、啟動內核和同步線程。
• 使用 HIP 語言編寫在 GPU 上執行的內核並操作數據。
• 使用 HIP 內置函數、變數和庫來執行常見任務和操作。
• 使用 ROCm 和 HIP 記憶體空間（如全域、共用、常量和本地）來優化數據傳輸和記憶體訪問。
• 使用 ROCm 和 HIP 執行模型來控制定義並行度的線程、塊和網格。
• 使用 ROCm Debugger 和 ROCm Profiler 等工具調試和測試 ROCm 和 HIP 程式。
• 使用合併、緩存、預取和分析等技術優化 ROCm 和 HIP 程式。

Ascend、Biren 和 Cambricon 是中國領先的 AI 硬體平台，各自提供獨特的加速和性能分析工具，用於生產規模的 AI 工作負載。

這項由講師指導的培訓（線上或線下）針對高級 AI 基礎設施和性能工程師，旨在優化跨多個中國 AI 晶片平台的模型推理和訓練工作流程。

在培訓結束時，參與者將能夠：

• 在 Ascend、Biren 和 Cambricon 平台上進行模型基準測試。
• 識別系統瓶頸和記憶體/計算效率低下的問題。
• 應用圖層級、核心層級和操作層級的優化。
• 調整部署管道以提高吞吐量和減少延遲。

課程形式

• 互動式講座和討論。
• 在每個平台上實際使用性能分析和優化工具。
• 專注於實際調整情境的指導練習。

課程定制選項

• 如需根據您的性能環境或模型類型定制此課程，請聯繫我們安排。

CANN SDK（Neural Networks 的計算架構）是華為的 AI 計算基礎，允許開發者在 Ascend AI 處理器上微調和優化已部署的神經網絡性能。

這是一個由講師主導的培訓（線上或線下），旨在針對高級 AI 開發者和系統工程師，他們希望使用 CANN 的先進工具集（包括 Graph Engine、TIK 和自定義算子開發）來優化推理性能。

培訓結束時，參與者將能夠：

• 了解 CANN 的運行時架構和性能生命周期。
• 使用性能分析工具和 Graph Engine 進行性能分析和優化。
• 使用 TIK 和 TVM 創建和優化自定義算子。
• 解決內存瓶頸並提高模型吞吐量。

課程形式

• 互動式講座和討論。
• 實時性能分析和算子調優的實踐實驗室。
• 使用邊緣案例部署示例的優化練習。

課程定制選項

• 如需為此課程請求定制培訓，請聯繫我們進行安排。

中國的GPU架構，如Huawei Ascend、Biren和Cambricon MLU，提供了專為本地AI和HPC市場量身定制的CUDA替代方案。

這項由講師指導的培訓（線上或線下）旨在為高級GPU程式設計師和基礎設施專家提供遷移和優化現有CUDA應用程序，以便在中國硬件平台上部署的能力。

培訓結束後，參與者將能夠：

• 評估現有CUDA工作負載與中國芯片替代方案的兼容性。
• 將CUDA代碼庫移植到華為CANN、Biren SDK和Cambricon BANGPy環境中。
• 比較性能並識別跨平台的優化點。
• 解決跨架構支持和部署中的實際挑戰。

課程形式

• 互動式講座和討論。
• 實踐代碼翻譯和性能比較實驗。
• 專注於多GPU適應策略的指導練習。

課程定制選項

• 如需根據您的平台或CUDA項目定制培訓，請聯繫我們安排。

這個由 講師指導的 新竹 現場現場培訓（在線或現場）面向希望使用 CUDA 對 NVIDIA GPU 進行程式設計並利用其並行性的初級到中級開發人員。

在本次培訓結束時，參與者將能夠：

• 設置一個開發環境，其中包括 CUDA 工具包、NVIDIA GPU 和 Visual Studio 代碼。
• 創建一個基本的 CUDA 程式，該程式在 GPU 上執行向量加法並從 GPU 記憶體中檢索結果。
• 使用 CUDA API 查詢設備資訊、分配和釋放設備記憶體、在主機和設備之間複製數據、啟動內核和同步線程。
• 使用 CUDA C/C++ 語言編寫在 GPU 上執行並操作數據的內核。
• 使用 CUDA 內建函數、變數和庫來執行常見任務和操作。
• 使用 CUDA 記憶體空間（例如全域、共用、常量和本地）來優化數據傳輸和記憶體訪問。
• 使用 CUDA 執行模型來控制定義並行度的線程、塊和網格。
• 使用 CUDA-GDB、CUDA-MEMCHECK 和 NVIDIA Nsight 等工具調試和測試 CUDA 程式。
• 使用合併、緩存、預取和分析等技術優化 CUDA 程式。

97% de clients satisfaits. 

CANN（面向Neural Networks的计算架构）是华为的AI计算堆栈，用于在昇腾AI处理器上部署和优化AI模型。

本课程为讲师指导的培训（线上或线下），面向中级AI开发者和工程师，旨在帮助他们使用CANN工具包及MindSpore、TensorFlow或PyTorch等工具，将训练好的AI模型高效部署到Huawei Ascend硬件上。

通过本课程，学员将能够：

• 了解CANN架构及其在AI部署流程中的作用。
• 将模型从流行框架转换并适配为昇腾兼容格式。
• 使用ATC、OM模型转换和MindSpore等工具进行边缘和云端推理。
• 诊断部署问题并优化昇腾硬件的性能。

课程形式

• 互动式讲座与演示。
• 使用CANN工具和昇腾模拟器或设备进行实操练习。
• 基于真实AI模型的实用部署场景。

课程定制选项

• 如需为本课程定制培训，请联系我们安排。

Biren AI Accelerators are high-performance GPUs designed for AI and HPC workloads with support for large-scale training and inference.

This instructor-led, live training (online or onsite) is aimed at intermediate-level to advanced-level developers who wish to program and optimize applications using Biren’s proprietary GPU stack, with practical comparisons to CUDA-based environments.

By the end of this training, participants will be able to:

• Understand Biren GPU architecture and memory hierarchy.
• Set up the development environment and use Biren’s programming model.
• Translate and optimize CUDA-style code for Biren platforms.
• Apply performance tuning and debugging techniques.

Format of the Course

• Interactive lecture and discussion.
• Hands-on use of Biren SDK in sample GPU workloads.
• Guided exercises focused on porting and performance tuning.

Course Customization Options

• To request a customized training for this course based on your application stack or integration needs, please contact us to arrange.

Cambricon MLUs (Machine Learning 单元) 是专为边缘和数据中心场景中的推理和训练优化的AI芯片。

本次由讲师指导的培训（线上或线下）面向中级开发者，旨在帮助他们使用BANGPy框架和Neuware SDK在Cambricon MLU硬件上构建和部署AI模型。

通过本次培训，参与者将能够：

• 设置和配置BANGPy和Neuware开发环境。
• 开发和优化基于Python和C++的模型，适用于Cambricon MLUs。
• 将模型部署到运行Neuware运行时的边缘和数据中心设备。
• 将ML工作流与MLU特定的加速功能集成。

课程形式

• 互动式讲座和讨论。
• 动手实践，使用BANGPy和Neuware进行开发和部署。
• 指导练习，专注于优化、集成和测试。

课程定制选项

• 如需根据您的Cambricon设备型号或使用场景定制本次培训，请联系我们安排。

這種由講師指導的現場培訓 新竹（在線或遠端）面向希望安裝、配置、管理和排除 CUDA 環境故障的初級系統管理員和 IT 專業人員。

在培訓結束時，參與者將能夠：

• 瞭解 CUDA 的架構、元件和功能。
• 安裝和配置 CUDA 環境。
• 管理和優化 CUDA 資源。
• 調試和排查常見的 CUDA 問題。

本次由讲师指导的新竹（线上或线下）培训，面向希望使用OpenCL编程异构设备并利用其并行性的初级到中级开发者。

培训结束后，参与者将能够：

• 设置包含OpenCL SDK、支持OpenCL的设备和Visual Studio Code的开发环境。
• 创建一个基本的OpenCL程序，在设备上执行向量加法并从设备内存中检索结果。
• 使用OpenCL API查询设备信息，创建上下文、命令队列、缓冲区、内核和事件。
• 使用OpenCL C语言编写在设备上执行并操作数据的内核。
• 使用OpenCL内置函数、扩展和库执行常见任务和操作。
• 使用OpenCL主机和设备内存模型优化数据传输和内存访问。
• 使用OpenCL执行模型控制工作项、工作组和ND范围。
• 使用CodeXL、Intel VTune和NVIDIA Nsight等工具调试和测试OpenCL程序。
• 使用向量化、循环展开、本地内存和性能分析等技术优化OpenCL程序。

這是一個由講師指導的，在新竹（線上或線下）進行的培訓，針對希望使用CUDA來構建在NVIDIA GPU上並行運行的Python應用程式的中級開發者。

在培訓結束時，參與者將能夠：

• 使用Numba編譯器來加速在NVIDIA GPU上運行的Python應用程式。
• 創建、編譯並啟動自定義的CUDA核心。
• 管理GPU的記憶體。
• 將基於CPU的應用程式轉換為GPU加速的應用程式。

這個由講師指導的 新竹 現場培訓課程涵蓋了如何為並行計算程式設計 GPU、 如何使用各種平臺、如何使用 CUDA 平臺及其功能，以及如何使用 CUDA 執行各種優化技術。其中一些應用包括深度學習、分析、圖像處理和工程應用。