Свържете се с нас

Съдържание и теми, включени в курса

Въведение в мултимодалния AI и Ollama

  • Преглед на мултимодалното обучение
  • Ключови предизвикателства при интеграцията на зрение и език
  • Възможности и архитектура на Ollama

Настройка на средата на Ollama

  • Инсталиране и конфигуриране на Ollama
  • Работа с локално внедряване на модели
  • Интегриране на Ollama с Python и Jupyter

Работа с мултимодални входове

  • Интеграция на текст и изображения
  • Включване на аудио и структурирани данни
  • Проектиране на потоци за предварителна обработка

Приложения за разбиране на документи

  • Извличане на структурирана информация от PDF и изображения
  • Комбиниране на OCR с езикови модели
  • Изграждане на интелигентни работни потоци за анализ на документи

Визуален въпрос-отговор (VQA)

  • Настройка на VQA набори от данни и критерии за оценка
  • Обучение и оценка на мултимодални модели
  • Изграждане на интерактивни приложения за визуален въпрос-отговор

Проектиране на мултимодални агенти

  • Принципи на проектиране на агенти с мултимодално разсъждение
  • Комбиниране на възприятие, език и действие
  • Внедряване на агенти за случаи от реалния свят

Разширена интеграция и оптимизация

  • Фина настройка на мултимодални модели с Ollama
  • Оптимизиране на производителността при изводи
  • Съображения за мащабируемост и внедряване

Обобщение и следващи стъпки

Изисквания

  • Силно разбиране на концепциите за машинно обучение
  • Опит с рамки за дълбоко обучение като PyTorch или TensorFlow
  • Запознатост с обработката на естествен език и компютърното зрение

Аудитория

  • Инженери по машинно обучение
  • Изследователи в областта на изкуствения интелект
  • Продуктови разработчици, интегриращи работни потоци за зрение и текст
 21 Часа

Брой участници


Цена за участник

Предстоящи Курсове

Свързани Kатегории