Телеграм

Статистика и R в науке и аналитике

@stats_for_science IT и нейросети
РКН: проверяем Не иноагент
Всем привет!
Подробнее о канале со списком самого интересного: https://t.me/stats_for_science/108
Чат канала: https://t.me/chat_stats_for_science
По всем вопросам - @lena_astr

Статистика обновлена 18.11.2026 в 21:58 · 4 просмотра страницы · Хотите больше просмотров?

Подписчики5 628 -3 за 2 дня
Охват поста1 467 26% от подписчиков
ERR за месяц26,07%
ERR за 24 часа11,85%

Динамика за 30 дней

Рекламные публикации

Рекламных публикаций не найденоЗа последнее время мы не нашли на площадке ни одного рекламного поста.

Последние публикации

Все посты канала →
Открыть пост ↗
Ловушка A/B

Заметила, что несколько сайтов, которыми я пользуюсь, сделали редизайн из интерфейса “нулевых” на модный современный. Причем когда я говорю про интерфейс нулевых, это прям реально так, в комменты закину пример. Однако новые модные интерфейсы в обоих сайтах работают плохо, например не открывается новая вкладка, не работает отмена заказа, выполненные заказы одновременно висят в отмененных и не только.

Я не знаю, как у них проходило A/B тестирование новых интерфейсов и проходило ли, но по опыту могу предположить, что тут есть сразу две ловушки.

Ловушка #1. Дата-дривен подход всегда

Масштабный редизайн почти всегда приводит к падению метрик в моменте, как минимум из-за эффекта новизны. Пользователи уже смирились с интерфейсом нулевых, как-то этим пользуются, он работает. В новом дизайне кнопки могут быть расположены чуть по другому, их сложнее найти (они стали круглыми 🤓), в результате конверсии в моменте могут упасть.
В таком случае следуя data-driven подходу раскатывать на всех новый дизайн никто не будет, в результате мы все еще живем со старыми дизайнами. Самый яркий пример – Amazon, его дизайн очень перегружен, на мой взгляд смотрится плохо. Скорее всего при этом он очень конверсионный и имеет некоторый локальный оптимум, из-за чего все другие изменения конвертят хуже, A/B тесты на редизайн проигрывают. Только так я могу объяснить настолько тяжелый дизайн карточки товара на амазоне.

Однако нужно учитывать, что чаще всего старый дизайн это жуткий легаси код, на старых фреймворках, даже возможно на языке Perl, что в любом случае сложно поддерживать, а новый дизайн избавляет от техдолга. Из этого следует вторая ловушка.

Ловушка #2. Раскатить A/B на всех, несмотря на падение метрик

В какой-то момент на уровне всего продукта может быть принято решение все равно раскатывать новый интерфейс, потому что он производительнее, поддерживаемее, даже несмотря на падение метрик по A/B.
И с одной стороны да, так как иначе можно застрять в локальном оптимуме старого интерфейса и только по данным никогда оттуда не выбраться, но с другой стороны нужно быть очень осторожным. Потому что эффект новизны и производительный код это прекрасно, но на самом деле в новом интерфейсе могут скрываться баги и другие объективные причины, которые и привели к падению конверсий.

Мой опыт как пользователя: я арендую VDS, где сайт был как раз с интерфейсом нулевых. В течение последнего месяца сделали модный редизайн, в результате я не могла сегодня оплатить несколькими способами, еще и висит старый сервер, за который деньги не списывались, но он оплачен 😎 (в комментах).
В остальном все работает, хотя от интерфейса есть очень клодовый вайб с этими скругленными окошечками. Но это ладно, проблемы с оплатой могли быть не связаны с редизайном, а остальные свои задачи я в общем-то решила.

Куда хуже оказался другой сайт, где я не могла нормально записаться к врачу, так как не работал функционал открытия в новой вкладке. Именно в принципе не было возможности открыть, даже если нажать правой кнопкой. В итоге пришлось открыть самостоятельно несколько копий сайта и создать вкладки вручную. Вот тут мне кажется уже продуктовую задачу очень сильно усложнили и потребовалось вдвое больше сил, чтобы все-таки сравнить разные варианты и выбрать оптимальный.

Не знаю, катили ли в обоих случаях редизайн интерфейса через A/B, потому что если да, то я почти уверена, что падение метрик было, но все равно решили избавляться от техдолга.

А что делать?

Мораль у меня такая: всего нужно в меру, не стоит упарываться в дата-дривен и закрывать глаза на продуктовый подход, однако совсем игнорировать данные и катить тесты с падением метрик во имя избавления от техдолга тоже не вариант.
Чтобы не попасть в ловушку номер 2 неплохо проанализировать детально, почему метрики упали, и сделать следующую итерацию с исправлением найденных проблем. Чтобы не попасть в ловушку номер 1 достаточно простого советского... не быть амазоном, потому что у нас я нигде не видела такого подхода.

Ну если серьезно, есть способы минимизировать эффект новизны при анализе A/B, поэтому необязательно все же раскатывать против данных, веря в эффект новизны и только чтобы избежать судьбы амазона)

А вы сталкивались с подобным? Как думаете, это эффект A/B или дело просто в скорости и срочности раскаток?

#analytics #AB_tests
👁 753 🔥 15❤ 4✍ 2 💬 34 ↻ 9 17 ноября
Открыть пост ↗
Как выйти за пределы разговоров с чатом и взять от ИИ максимум?

🤖16 ноября у коллег из @blastim стартует курс «ИИ в научной работе».

Преподаватели систематизируют знания с акцентом на автоматизацию исследований, поделятся лучшими приложениями под разные запросы и покажут, за чем реально стоит следить в области.

На практике вы узнаете, как превращать статьи в интерактивные сайты, генерировать графические абстракты, без кода строить графики для отчетов, делать умных ботов, присылающих вам подборки публикаций, а также где искать модели под свои нужды и как обходить лимиты подписок и блокировки.

🤖 Базовый модуль (9 занятий)

• обзор моделей и ИИ-сервисов
• поиск, саммаризация литературы и анализ данных
• RAG, вайбкодинг и собственные ИИ-агенты
• презентации, отчеты, создание аудио и видео
• модели в биологии: от лабораторной работы до биоинформатики
• защита своих проектов

🤖 Продвинутый модуль (3 занятия)

• Claude Code, Codex, OpenClaw, MCP, Skills, Subagents, Swarms

При успешном прохождении обучения выдается удостоверение гособразца
📎 Подробнее о программе: https://blastim.ru/scientist_of_the_future

Оставайтесь в тренде современной науки вместе с ИИ и Бластим
👁 696 ❤ 13🔥 7🙏 4 💬 10 ↻ 4 15 ноября
Открыть пост ↗
О правиле красной королевы или о скорости прогресса

Всем привет, я вернулась. Была очень занята — ничего не делала навайбкодила несколько нишевых телеграм ботов, это было далеко от статистики, поэтому не писала. По своему опыту заметила, что наиболее хорошо пишутся посты на тему, которая занимает сейчас, а не которую необходимо написать. К тому же я сама чуть раньше писала про перегруз информацией и хочу у себя повысить концентрацию хорошего контента.

Тут я хотела бы поговорить, насколько сейчас нейронки быстро развиваются и обесценивается навык писать код в широком смысле.
Например, еще в начале 25го года при работе с телеграм ботом приходилось самостоятельно проверять логику, не все получалось с первого раза, токены тратились только так. В то время как сейчас уже автоматически пишутся тесты и проблемы что бот упал и сломался в общем-то и нет. Допускаю, что может сказываться повышение навыка работы с нейросетями, но мне кажется, что они сами развились куда быстрее, чем развился мой навык) Тем более в последних разработках это было буквально “сделай красиво”, то есть не какая-то сложная работа со скиллами и промптами.

Для контекста: с 2022 года с другом разрабатывали бот для игры в верю-не верю на кубах, называется смешным словом Перудо, это игра из пиратов Карибского моря. Совсем недавно с помощью клода довела до продакшна, можно играть с ботами, друзьями и по сети. Начиналась разработка еще до нейросетей, чисто 12 вложенных циклов на питоне 😎

Месяц назад в ЧГК команде, с которой мы тренируем вопросы в группе с помощью телеграм бота, возникла мысль, что база вопросов в боте устарела и не обновляется. Я сразу как увидела, предложила создать своего бота на новых вопросах, и между этой идеей и возможностью применить прошло меньше, чем полдня.
Самого бота поднять несложно, основная хитрость была в парсинге вопросов с сайта без апи. Но для нейронки это оказалось совсем не проблемой и уже в тот же день был собран рабочий прототип, который хорошо себя показал и старый бот был заменен. Текущая версия очень неплохая, удалось избавиться от некоторых проблем предыдущей версии (но автору старого бота большой респект, это все еще было написано по принципу дед сам писал, что очень круто).

Промтп был примерно следующим: скриншот работы бота сейчас и просьба “сделай такое же, только на новых вопросах”. Самостоятельно я бы никогда такое не сделала или это бы заняло несколько лет. Дальнейшая работа требовала скорее продуктовых улучшений, в код я даже не заглядывала, единственное понадобилось вручную вписать секреты на сервере для деплоя через github actions, в остальном можно побыть менеджером, который только говорит, что делать.

Так что заглядывайте, вот ссылка @perudo_game_bot и @chgk_training_bot, но я предупредила, что развлечение немного нишевое.

Также еще чисто для себя сделала лоадер музыки и бот для изучения языков, понадобилось чисто описание желаемого результата и арендованный VDS.

И вот на примере пет-проекта с игрой наглядно видно, насколько такая задача упростилась относительно того как было раньше.

Если первую версию перудо бота закодила в веб версии бесплатной чатгпт, и для меня полным шоком было, что это работает с первой попытки (в начале 25 года), то сейчас уже нет проблемы, что код не работает, и поэтому можно больше сосредоточиться на верхнеуровневой сути. Поэтому осторожно скажу, что навык писать код как будто сейчас не настолько ценный, возможно более важно иметь архитектурное и продуктовое мышление.

А вообще в плане использования нейронок у меня есть чувство FOMO в том смысле, что все очень быстро развивается и нужно очень быстро бежать, чтобы просто остаться на месте (в эволюционной биологии это называлось правило красной королевы, из Льюиса Кэролла). Вроде бы стараюсь не отставать, но все равно есть тревожность, хотя я против алармизма и не хочу нагнетать и пугать подписчиков. Могу порекомендовать делать то, что интересно, использовать разные инструменты, а если не хочется, то не переживать на эту тему.

В комментариях предлагаю делиться своими пет-проектами и размышлениями.

#ai_in_life
👁 1 тыс. 🔥 23❤ 11👍 3 💬 19 ↻ 8 12 ноября