AI Inference and Deployment with CloudMatrix Training Course
- Използват КлудMatrix за пакетиране, развертане и предоставяне на модели.
- Конвертират и оптимизират модели за чипсетове Ascend.
- Настрояват пиплайни за задачи с инференс в реално време и в пакети.
- Мониторират развертане и настройват производителност в производствени условия.
- Интерактивни лекции и дискусии.
- Практическо използване на КлудMatrix с реални сценарии за развертане.
- Упътващи упражнения, фокусирани върху конвертиране, оптимизация и масштабируемост.
- За да поискате персонализирано обучение за този курс, базирано на вашата AI инфраструктура или облачна среда, моля свържете се с нас, за да организираме.
План на курса
Въведение в Huawei CloudMatrix
- Екосистема на CloudMatrix и поток на развертане
- Поддържани модели, формати и режими на развертане
- Типични случаи на използване и поддържани чипове
Подготовка на модели за развертане
- Експорт на модели от инструменти за обучение (MindSpore, TensorFlow, PyTorch)
- Използване на ATC (Ascend Tensor Compiler) за конверсия на формат
- Статични vs динамични модели на формата
Развертане в CloudMatrix
- Създаване на услуги и регистрация на модели
- Развертане на услуги за извличане на заключения чрез UI или CLI
- Маршрутизиране, аутентификация и контрол на достъп
Обработка на заявки за извличане на заключения
- Потокове за извличане на заключения в пакет vs в реално време
- Пиплайни за предобработка и постобработка на данни
- Извикване на услуги на CloudMatrix от външни приложения
Мониторинг и оптимизация на производителността
- Логове на развертане и следене на заявки
- Мащабиране на ресурси и балансиране на натоварване
- Оптимизация на забавянето и оптимизация на пропускната способност
Интеграция с корпоративни инструменти
- Свързване на CloudMatrix с OBS и ModelArts
- Използване на работни процеси и версииране на модели
- CI/CD за развертане и откат на модели
Потребителски пиплайн за извличане на заключения
- Развертане на комплектен пиплайн за класификация на изображения
- Бенчмарк и валидация на точността
- Симулиране на отказване и системни алерти
Резюме и следващи стъпки
Изисквания
- Разбиране в процеса на обучение на модели на изкуствен интелект
- Опит с базирани на Python ML рамки
- Основно познаване на концепции за развертане в облака
Целева аудитория
- Екипи за управление на AI
- Инженери на машинно обучение
- Специалисти за развертане в облака, работащи с инфраструктура на Huawei
Отворените курсове за обучение изискват 5+ участници.
AI Inference and Deployment with CloudMatrix Training Course - Booking
AI Inference and Deployment with CloudMatrix Training Course - Enquiry
AI Inference and Deployment with CloudMatrix - Консултантско запитване
Консултантско запитване
Oтзиви от потребители (1)
Стъпка по стъпка обучение с много упражнения. Бяха като работилница и съм много доволен от това.
Ireneusz - Inter Cars S.A.
Курс - Intelligent Applications Fundamentals
Машинен превод
Предстоящи Курсове
Свързани Kурсове
Developing AI Applications with Huawei Ascend and CANN
21 Часа- Настроят и конфигурират средата за разработка на CANN.
- Разработват AI приложения, използвайки MindSpore и CloudMatrix работни процеси.
- Оптимизират производителността на Ascend NPU, използвайки персонализирани оператори и тилинг.
- Разпределят модели в периферни или облачни среди.
- Интерактивна лекция и дискусия.
- Практическо използване на Huawei Ascend и инструменталния комплект CANN в примерни приложения.
- Упътвания за упражнения, фокусирани върху изграждането, обучението и разпределението на модели.
- За да поставите запрос за персонализирано обучение за този курс, базиран на вашата инфраструктура или данни, моля свържете се с нас за уредение.
Deploying AI Models with CANN and Ascend AI Processors
14 ЧасаCANN (Compute Architecture for Neural Networks) is Huawei’s AI compute stack for deploying and optimizing AI models on Ascend AI processors.
This instructor-led, live training (online or onsite) is aimed at intermediate-level AI developers and engineers who wish to deploy trained AI models efficiently to Huawei Ascend hardware using the CANN toolkit and tools such as MindSpore, TensorFlow, or PyTorch.
By the end of this training, participants will be able to:
- Understand the CANN architecture and its role in the AI deployment pipeline.
- Convert and adapt models from popular frameworks to Ascend-compatible formats.
- Use tools like ATC, OM model conversion, and MindSpore for edge and cloud inference.
- Diagnose deployment issues and optimize performance on Ascend hardware.
Format of the Course
- Interactive lecture and demonstration.
- Hands-on lab work using CANN tools and Ascend simulators or devices.
- Practical deployment scenarios based on real-world AI models.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
Основи на ИИ инженерството
14 ЧасаТова водено от инструктор обучение на живо в България (онлайн или на място) е насочено към начинаещи до средно ниво ИИ инженери и разработчици на софтуер, които желаят да придобият основно разбиране на ИИ инженерните принципи и практики.
До края на това обучение участниците ще могат:
- Разберете основните концепции и технологии зад AI и машинното обучение.
- Приложете основни модели за машинно обучение, като използвате TensorFlow и PyTorch.
- Прилагайте AI техники за решаване на практически проблеми в разработката на софтуер.
- Управлявайте и поддържайте AI проекти, като използвате най-добрите практики в инженерството на AI.
- Признаване на етичните последици и отговорности, включени в разработването на AI системи.
GPU Programming on Biren AI Accelerators
21 ЧасаBuilding Intelligent Applications with AI and ML
28 ЧасаТова водено от инструктор обучение на живо в България (онлайн или на място) е насочено към професионалисти в ИИ от средно до напреднало ниво и
разработчици на софтуер, които желаят да създават интелигентни приложения, използвайки AI и ML.
До края на това обучение участниците ще могат:
- Разберете усъвършенстваните концепции и технологии зад AI и ML.
- Анализирайте и визуализирайте данни, за да информирате за разработването на AI/ML модели.
- Изграждайте, обучавайте и внедрявайте ефективно AI/ML модели.
- Създавайте интелигентни приложения, които могат да решават проблеми от реалния свят.
- Оценявайте етичните последици от приложенията на ИИ в различни индустрии.
Introduction to CANN for AI Framework Developers
7 ЧасаCANN (Compute Architecture for Neural Networks) is Huawei’s AI computing toolkit used to compile, optimize, and deploy AI models on Ascend AI processors.
This instructor-led, live training (online or onsite) is aimed at beginner-level AI developers who wish to understand how CANN fits into the model lifecycle from training to deployment, and how it works with frameworks like MindSpore, TensorFlow, and PyTorch.
By the end of this training, participants will be able to:
- Understand the purpose and architecture of the CANN toolkit.
- Set up a development environment with CANN and MindSpore.
- Convert and deploy a simple AI model to Ascend hardware.
- Gain foundational knowledge for future CANN optimization or integration projects.
Format of the Course
- Interactive lecture and discussion.
- Hands-on labs with simple model deployment.
- Step-by-step walkthrough of the CANN toolchain and integration points.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
CANN for Edge AI Deployment
14 ЧасаHuawei's Ascend CANN toolkit enables powerful AI inference on edge devices such as the Ascend 310. CANN provides essential tools for compiling, optimizing, and deploying models where compute and memory are constrained.
This instructor-led, live training (online or onsite) is aimed at intermediate-level AI developers and integrators who wish to deploy and optimize models on Ascend edge devices using the CANN toolchain.
By the end of this training, participants will be able to:
- Prepare and convert AI models for Ascend 310 using CANN tools.
- Build lightweight inference pipelines using MindSpore Lite and AscendCL.
- Optimize model performance for limited compute and memory environments.
- Deploy and monitor AI applications in real-world edge use cases.
Format of the Course
- Interactive lecture and demonstration.
- Hands-on lab work with edge-specific models and scenarios.
- Live deployment examples on virtual or physical edge hardware.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
Understanding Huawei’s AI Compute Stack: From CANN to MindSpore
14 ЧасаHuawei’s AI stack — from the low-level CANN SDK to the high-level MindSpore framework — offers a tightly integrated AI development and deployment environment optimized for Ascend hardware.
This instructor-led, live training (online or onsite) is aimed at beginner-level to intermediate-level technical professionals who wish to understand how the CANN and MindSpore components work together to support AI lifecycle management and infrastructure decisions.
By the end of this training, participants will be able to:
- Understand the layered architecture of Huawei’s AI compute stack.
- Identify how CANN supports model optimization and hardware-level deployment.
- Evaluate the MindSpore framework and toolchain in relation to industry alternatives.
- Position Huawei's AI stack within enterprise or cloud/on-prem environments.
Format of the Course
- Interactive lecture and discussion.
- Live system demos and case-based walkthroughs.
- Optional guided labs on model flow from MindSpore to CANN.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
Optimizing Neural Network Performance with CANN SDK
14 ЧасаCANN SDK (Compute Architecture for Neural Networks) is Huawei’s AI compute foundation that allows developers to fine-tune and optimize the performance of deployed neural networks on Ascend AI processors.
This instructor-led, live training (online or onsite) is aimed at advanced-level AI developers and system engineers who wish to optimize inference performance using CANN’s advanced toolset, including the Graph Engine, TIK, and custom operator development.
By the end of this training, participants will be able to:
- Understand CANN's runtime architecture and performance lifecycle.
- Use profiling tools and Graph Engine for performance analysis and optimization.
- Create and optimize custom operators using TIK and TVM.
- Resolve memory bottlenecks and improve model throughput.
Format of the Course
- Interactive lecture and discussion.
- Hands-on labs with real-time profiling and operator tuning.
- Optimization exercises using edge-case deployment examples.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
CANN SDK for Computer Vision and NLP Pipelines
14 ЧасаThe CANN SDK (Compute Architecture for Neural Networks) provides powerful deployment and optimization tools for real-time AI applications in computer vision and NLP, especially on Huawei Ascend hardware.
This instructor-led, live training (online or onsite) is aimed at intermediate-level AI practitioners who wish to build, deploy, and optimize vision and language models using the CANN SDK for production use cases.
By the end of this training, participants will be able to:
- Deploy and optimize CV and NLP models using CANN and AscendCL.
- Use CANN tools to convert models and integrate them into live pipelines.
- Optimize inference performance for tasks like detection, classification, and sentiment analysis.
- Build real-time CV/NLP pipelines for edge or cloud-based deployment scenarios.
Format of the Course
- Interactive lecture and demonstration.
- Hands-on lab with model deployment and performance profiling.
- Live pipeline design using real CV and NLP use cases.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
Building Custom AI Operators with CANN TIK and TVM
14 ЧасаCANN TIK (Tensor Instruction Kernel) and Apache TVM enable advanced optimization and customization of AI model operators for Huawei Ascend hardware.
This instructor-led, live training (online or onsite) is aimed at advanced-level system developers who wish to build, deploy, and tune custom operators for AI models using CANN’s TIK programming model and TVM compiler integration.
By the end of this training, participants will be able to:
- Write and test custom AI operators using the TIK DSL for Ascend processors.
- Integrate custom ops into the CANN runtime and execution graph.
- Use TVM for operator scheduling, auto-tuning, and benchmarking.
- Debug and optimize instruction-level performance for custom computation patterns.
Format of the Course
- Interactive lecture and demonstration.
- Hands-on coding of operators using TIK and TVM pipelines.
- Testing and tuning on Ascend hardware or simulators.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
Migrating CUDA Applications to Chinese GPU Architectures
21 ЧасаКитайски GPU архитектури като Huawei Ascend, Biren и Cambricon MLU предлагат алтернативи на CUDA, насочени към местните пазари на изкуствен интелект и HPC.
Този обучение с инструктор (онлайн или на място) е насочено към напреднали GPU програмисти и специалисти по инфраструктура, които искат да мигрират и оптимизират съществуващи CUDA приложения за разгръзване на китайски хардуерни платформи.
Към края на това обучение участниците ще бъдат способни да:
- Оценяват съвместимостта на съществуващите CUDA натоварвания с китайски алтернативи на чиповете.
- Преместят CUDA бази на кодове в средите Huawei CANN, Biren SDK и Cambricon BANGPy.
- Сравняват производителността и идентифицират точки за оптимизация между платформите.
- Решават практичните проблеми при поддръжката и разгръзването на многоархитектурни решения.
Формат на курса
- Интерактивни лекции и дискусии.
- Практическа работа по превод на код и сравнение на производителността.
- Упътващи упражнения, фокусирани върху стратегии за адаптация на много-GPU решения.
Опции за персонализация на курса
- За запитане на персонализиран обучаващ курс за този курс, основан на вашата платформа или проект с CUDA, моля свържете се с нас за уреждане.
Intelligent Applications Fundamentals
14 ЧасаТова водено от инструктор обучение на живо в България (онлайн или на място) е насочено към ИТ професионалисти на ниво начинаещи, които желаят да придобият основно разбиране за интелигентните приложения и как могат да бъдат приложени в различни индустрии.
До края на това обучение участниците ще могат:
- Разберете историята, принципите и въздействието на изкуствения интелект.
- Идентифицирайте и прилагайте различни алгоритми за машинно обучение.
- Управлявайте и анализирайте данните ефективно за AI приложения.
- Разпознаване на практическите приложения и ограниченията на AI в различни сектори.
- Обсъдете етичните съображения и социалните последици от AI технологията.
Intelligent Applications Advanced
21 ЧасаТова водено от инструктор обучение на живо в България (онлайн или на място) е насочено към специалисти по данни от средно до напреднало ниво, инженери и AI практици, които желаят да овладеят тънкостите на интелигентните приложения и да ги използват за решаване на сложни, проблеми от реалния свят.
До края на това обучение участниците ще могат:
- Внедряване и анализиране на архитектури за дълбоко обучение.
- Приложете машинно обучение в мащаб в разпределена изчислителна среда.
- Проектиране и изпълнение на модели за обучение за укрепване за вземане на решения.
- Разработете сложни НЛП системи за разбиране на езика.
- Използвайте техники за компютърно зрение за анализ на изображения и видео.
- Обърнете внимание на етичните съображения при разработването и внедряването на AI системи.
Performance Optimization on Ascend, Biren, and Cambricon
21 ЧасаAscend, Biren и Cambricon са водят AI хардуерни платформи в Китай, всеки от които предлага уникални ускоряващи и профилиращи инструменти за AI задачи на производствен мащаб.
Това обучение с преподавател (онлайн или на място) е направено за напреднали AI инфраструктурни и производителностни инженери, които желаят да оптимизират работите за извличане на предсказания и обучение на модели по различни китайски AI чип платформи.
До края на това обучение участващите ще могат да:
- Бенчмаркват модели на платформите Ascend, Biren и Cambricon.
- Идентифицират системни бутилки и неикономичност на паметта и изчисленията.
- Прилагат оптимизации на ниво граф, ядро и оператор.
- Настройват каналите за развертяване, за да подобрят пропускателната способност и закъснението.
Формат на курса
- Интерактивна лекция и дискусия.
- Практически използване на профилиращи и оптимизиращи инструменти на всяка платформа.
- Упътващи упражнения със фокус върху практическо настройване.
Опции за персонализация на курса
- За заявка за персонализирано обучение по този курс, в зависимост от вашата среда за производителност или тип модели, моля свържете се с нас за уреждане.