Moondream2 + GigaChat API: Помогаем LLM видеть

Описание

В этом туториале в тандеме с GigaChat мы используем модель Moondream2, которая принимает на вход не только текст, но и картинки. Модель Moondream2 не дружит с русским языком, поэтому будем использовать GigaChat в качестве переводчика. Для организации интерфейса сделаем ТГ-бот.

Ссылка на модель: https://github.com/vikhyat/moondream

Ссылка на Ollama: https://ollama.com/

Документация по Ollama в LangChain: https://python.langchain.com/v0.2/docs/integrations/chat/ollama/

Код из видео, как всегда, есть в репозитории: https://github.com/trashchenkov/gigachat_tutorials

Мой канал в Telegram: https://t.me/gigatrash