Телеграм

Михаил Омельченко | AI&IT

@django_school IT и нейросети
РКН: проверяем Не иноагент
ИИ в работе, разработка, веб. Агенты, автоматизация, инструменты. Веду я, Михаил Омельченко, внешний технический директор по ИИ и ментор.

Менторство, реклама и сотрудничество: djwoms.ru
Telegram - @DJWOMS
YouTube - https://www.youtube.com/c/DjangoSchool

Статистика обновлена 16.11.2026 в 05:47 · 4 просмотра страницы · Хотите больше просмотров?

Подписчики5 268 +1 за 2 дня
Охват поста1 079 20% от подписчиков
ERR за месяц20,48%
ERR за 24 часа10,88%

Динамика за 30 дней

Рекламные публикации

Рекламных публикаций не найденоЗа последнее время мы не нашли на площадке ни одного рекламного поста.

Последние публикации

Все посты канала →
Михаил Омельченко | AI&IT tg5.3 тыс. подписчиков
Открыть пост ↗
Третий пост серии о том, как я делаю AI агента. Этот про модель, которая разбирает видеоряд, и про то, как я запускал её на Windows.

В прошлом посте агент разбирал статистику канала и ролики конкурентов. Ролик он тогда понимал по транскрипту.

Ещё агент мог сделать скриншоты кадров. Меня бесило, что видео он понимал только по тексту и скриншотам, а это дольше, чем отдать видео модели.

Я подключил к агенту модель Marlin-2B. Она работает локально, у меня RTX 3060 Ti. Marlin описывает сцены и события в кадре с таймкодами и по описанию находит события, где в видео оно происходит.

Теперь агент получает описание того, что происходит в кадре, и может подсказать, подходят ли кадры, хорош ли визуал, что добавить и что убрать.

Сразу запустить Marlin на Windows не получилось.

1) С PyPI по умолчанию ставится torch без CUDA и модель на нём не запускается. Нужна сборка с pytorch.org под версию драйвера

2) torchcodec это библиотека для чтения видео, на Windows грузит DLL от FFmpeg. У меня стоял статический ffmpeg для v_editor, моего редактора видео, а в нём этих DLL нет

3) shared сборка FFmpeg из master тоже не подошла: библиотеки в ней указаны под версию новее релиза, и torchcodec их не находит. Заработало на версии 7.1

4) Не было torchvision. Marlin сделана на основе Qwen, и этот пакет нужен классу Qwen3VL из transformers, который готовит кадры для модели

5) Не было accelerate, без него модель не работает на видеокарте

FFmpeg теперь стоит в двух сборках: статическая для v_editor и shared для модели. Если shared сборка лежит в C:\ffmpeg-shared, скрипт сам добавляет папку с DLL в пути поиска, другое место задаётся переменной FFMPEG_SHARED_DIR.

Веса модели лежат в закрытом репозитории на Hugging Face, скачать их можно после запроса доступа и входа в аккаунт. Я их скачал, а позже скрипт стал падать с ошибкой 401.

Оказалось, transformers во время работы запрашивает из этого репозитория файл chat_template.json. Без входа в Hugging Face сервер отвечает 401, хотя веса лежат на диске.

Поэтому скрипт сам включает офлайн-режим Hugging Face и transformers переменными HF_HUB_OFFLINE и TRANSFORMERS_OFFLINE. Если переменная уже выставлена руками, скрипт её не меняет. Так на новой машине первую загрузку весов можно запустить с токеном и выключенным офлайн-режимом.

Порядок установки агент записал в инструкцию, а ошибку 401 ещё и в справочник ошибок проекта.

В июле в журнале агента стояла запись "Marlin-2B не установлен", хотя модель была установлена. Как агент помнит задачи между сессиями и откуда взялась эта запись, расскажу в одном из следующих постов.

#ytagent
👁 573 👍 5🔥 2 💬 2 ↻ 4 12 ноября
Михаил Омельченко | AI&IT tg5.3 тыс. подписчиков
Открыть пост ↗
Второй пост серии о том, как я делаю AI агента. Этот про то, как агент разбирал статистику канала и ролики конкурентов.

В прошлом посте агент собрал профиль канала aisferaic по моим ответам. Дальше нужны были цифры.

Я подключил к агенту YouTube Data API и YouTube Analytics API. Агент запускает скрипт, тот выгружает статистику канала: просмотры, источники трафика, демографию. Агент читает выгрузку и делает выводы.

В июне агент сделал первую выгрузку, за последние 28 дней. Тогда у канала был 191 подписчик и 161 ролик, все shorts. За это время канал набрал 29 400 просмотров, из них 26 404 из ленты Shorts и 1 598 из поиска. Средняя длительность просмотра 19 секунд. Мужчин среди зрителей 96%, это по тем, кто смотрел, войдя в аккаунт.

Потом агент разобрал ролики конкурентов. Запросы он составил по темам канала: превью, карточки для маркетплейсов, генерация картинок, тексты и письма. По каждому запросу скрипт брал самые просматриваемые ролики за последние 60 дней. Нашли около ста роликов с 77 каналов, среди них и мой.

Если взять 56 самых просматриваемых, у длинных медиана 6 146 просмотров, у shorts 1 465. Больше всех набрал длинный ролик, 105 495 просмотров, с названием "Новая Бесплатная Нейросеть".

Shorts скрипт отличал по длине, до минуты, поэтому ролик с пометкой #Shorts на 71 секунду попал в длинные. Брал он только верхушку выдачи, вся ниша больше.

Конкуренты в основном обзорщики с подборками инструментов. В названиях повторяются одни и те же приёмы: "бесплатно", "Хватит платить", топ-3, слова капсом. Агент прочитал расшифровку длинного ролика про карточки товара. Ролик начинается с результата: "Давайте я покажу, как я делаю вот такие вот премиальные карточки товара".

Спрос агент проверил по автоподсказкам поиска YouTube. На запрос "нейросеть для" первыми подсказками идут "создания видео", "создания картинок" и "презентаций". Из тем канала в первой тройке только картинки.

Агент написал, что по темам канала туториал и подборку ищут осознанно, и больше всего просмотров там набирают длинные ролики. У канала только shorts, поэтому этот трафик проходит мимо моего канала.

Ещё агент советовал не ставить в названия "бесплатно". Платформа aisferaic.ru платная, а такое название приводит тех, кто платить не собирается. Это его рассуждение, замера не было.

Длинные ролики я начал снимать, но намного позже. Сначала проверял на shorts, можно ли пробить потолок в 1 500 просмотров на ролик.

#ytagent
👁 958 👍 4🔥 3😁 2 ↻ 2 5 ноября
Михаил Омельченко | AI&IT tg5.3 тыс. подписчиков
Открыть пост ↗
OpenAI выпустила Images 2.6, и теперь ChatGPT умеет создавать GIF-анимации

Кроме того, появилась поддержка референсных изображений, благодаря которым можно сохранять внешность персонажей и единый стиль при генерации новых картинок.

Саму генерацию ускорили на 50%, а для разработчиков готовят две новые модели, которые появятся в API.

Кстати, анонс вышел в довольно необычное время и практически без предупреждения. Есть предположение, что OpenAI таким образом освобождает сегодняшний день и пятницу для куда более крупных релизов.

Кажется, самое интересное ещё впереди
👁 882 🔥 5❤‍🔥 2😁 1 💬 1 ↻ 10 5 ноября