#метрики

7 постов
пост №1836

Тормозит приложение.

На днях написала топ-менеджер одной ритейл-сети. Тормозит мобильное приложение. Медленно работает поиск, добавление в корзину, оформление заказа. Нажимаешь на кнопку и ждешь…

В ритейле каждая доля секунды задержки — это люди, которые не купили товары, прямые потери. Мобильные разработчики не исправляют ситуацию. Переводят стрелки на бэкендеров, мол это бэкенд тормозит. Как разобраться, на чьей стороне сломалось и починить проблему?

Хорошие разработчики собирают аналитику по производительности своих приложений — какое время занимают ключевые действия типа «открытие главной», «поиск», «добавление в корзину», «оплата». Это называется Real User Monitoring.

Дальше мы кладем эту информацию на график: на оси Х — время, которое занимает действие, на оси Y — количество пользователей. Столбики слева — хорошо. Длинный хвост справа — это несчастные, у них, например, экран оплаты грузится минуту! Эти люди поменяют приложение, если у них будет выбор!

Но это средние значения. Что, если приложение хорошо работает 23 часа в сутки, а по вечерам, в час-пик, в самое важное время, начинает тормозить?

Тут поможет другой классический график: на оси Х — время (вчера, сегодня в течении дня, завтра), на оси Y — время ответа (задержка, latency). Три черты — среднее время, медиана и 95 персентиль. То есть за сколько миллисекунд происходит оплата в среднем, у медианы и за какое время происходит оплата у 95% быстрых пользователей? Он помогает отследить, нет ли тормозов в определенное время суток или в день недели.

Составляем эти два графика для ключевых функций и видим, тормозит наше приложение или нет. По числам оцениваем, стало оно быстрее или медленнее.

Итак, шаг первый — замерить экраны и действия.

Теперь можно переходить к поиску первопричины. Приложение может тормозить само по себе или из-за медленного бэкенда.

Тут мы опираемся на те же два графика, но уже смотрим скорость ответа бэкенда.

Качественно настроить сбор данных и дэшборды — это дополнительная работа, но она с лихвой окупается при расследовании проблем.

Хотите заказать классную разработку или аудит? Обращайтесь! @samatg https://fansdev.ru

пост №1741

В околотехнической тусовке уже несколько лет обсуждают, что качество Гугл-поиска снизилось: постоянно натыкаешься на SEO-оптимизированный спам вместо нормальный статей и сайтов.

Я к этому приспособился так: добавляю в поисковую строку reddit.com или stackoverflow.com, чтобы читать живых людей и спрашиваю chatGPT, чтобы не продираться через рекламу. Федя вон вообще, как и многие технари, перешел на модный платный поисковик (!) Kagi (5-10$ в месяц).

Внутренняя переписка Гугла о том, как меняется поиск из-за денег, ставшая доступной благодаря антимонопольному судебному процессу — документ эпохи.

Три главных действующих лица:

1. Сундар Пичай: ныне CEO Гугла, а в прошлом — консультант МакКинзи.

2. Прабхакар Рагхаван: в прошлом — крупный ученый в области поиска, написал фундаментальные книги в этой области; после академии дозакопал поиск Yahoo (принял с 30% рынка, через 5 лет Yahoo отказался от своего поискового движка и лицензировал Bing) и отвечал за рекламу в Гугле, до того, как начать отвечать за поиск.

3. Бен Гомес: инженер, который больше 20 лет работал над поисковым движком Гугла, недолгое время (сейчас поймете почему недолгое) был «царем поиска» в компании.

(Переписка происходит на жестком корпоративном жаргоне, для удобства читателя дается перевод)

- «У нас падает рекламная выручка, а еще падает число поисковых запросов, нужно срочно повысить эти показатели!»
- «Так давайте сделаем поиск хуже, люди будут больше искать!»
- «Вы что, ебнулись?»
- «Давай, досвиданья, ничего не понимаешь в менеджменте».

Статья называется «Человек, который убил гугл».

Мне кажется, что проблема всё-таки не в конкретном менеджере гугла, а в культуре, в которой краткосрочные улучшения метрик ставятся впереди реальной пользы людям. Просто гугл закончил превращение из стартапа в «классическую американскую корпорацию».

(продолжение) Самое удивительное то, что можно назвать дату, когда появилась эта корпоративная культура и даже людей, которые её создали. В 1981 году Джек Велч стал главой General Electric. GE, основанная ещё в 19 веке, была тогда одним из главных технологических гигантов. Она связана с возникновением телевидения, электрификацией США и созданием современной микроэлектроники.

Путем невиданных ранее сокращений (сортируем сотрудников «по ценности» и каждый год увольняем нижние 10%), жесткого аутсорсинга и других «эффективных мер», Велч в кратчайшие сроки в разы повысил прибыльность, сделав GE одной из самых «успешных» компаний в мире и абсолютной любимицей Wall Street. Все инвесторы захотели в свои компании директора из учеников Велча!

Долгосрочный результат немного другой — GE развалилась и доживает производством авиационных двигателей и некоторого другого специализированного оборудования. Это всё ещё очень крупная компания, но она — только тень гиганта прошлого. Эта эпическая история рассказана во множестве книг. Вот в этой, Велчу приписывают разрушение даже не компании, а капитализма в целом.

Удивительно, как важны идеи и цели, которые мы перед собой ставим, дальше всё раскладывается как по полочкам.

пост №1016

Помните, как ФБ накручивал статистику просмотров видео на 150-900%?

Тогда многие решили, что нужно делать видео именно для фейсбука. Наняли людей, раздули продакшн. Когда обман раскрылся, было довольно больно - целые компании закрылись, люди потеряли работу.

Рекламные компании подали на ФБ суд. Сегодня стали известны условия соглашения, по которым ФБ предлагает выплатить компенсацию в 40 миллионов долларов. Для перспективы, это 0.18% процента их годовой прибыли.

Соразмерность наказания, чтобы в следущий раз неповадно было? Справедливость? Не, не слышали.


Спасибо Серёже Сурганову за наводку.

пост №919

О, 10 тысяч подписчиков, очень приятно! Спасибо, что читаете.

Кстати, если вдруг пропустили: в телеграме наконец-то появилась возможность сложить чаты и каналы в папочку. Достаточно потянуть пункт из списка налево (свайп).

Папочка называется архив, но подписки никуда не денутся, просто перестанут смешиваться с перепиской.

Единственная моя UX-претензия к телеграму была в упрощении компульсивного потребления новостей. Заходишь ответить на важное сообщение, а в результате цепляешься глазом за «ёбкий заголовок» и проваливаешься в чтение классных каналов. Я понимаю про силу воли, но мы ведь не держим бутылочку виски на прикроватной тумбочке на всякий случай, правда?

Очень интересно, какая доля пользователей телеграма воспользуется этой функцией и как она повлияет на метрики вовлечения: количество минут, которые мы тратим на чтение каналов, количество просмотров, которые получают каналы. Последнюю метрику можно получить даже не работая в телеграме - достаточно внимательно изучить публичные метрики, используя АПИ. Если вдруг увидите такой анализ или захотите его провести - напишите, пожалуйста.

Если бы телеграм зарабатывал деньги на рекламе - понижение этих метрик было бы проблемой. А так мы можем только гадать, какие у Павла Дурова планы. Интересно!

P.S. Павел очень любит хвастаться, что вотсап у телеграма все тырит, а вот «архив» у вотсапа появился сильно раньше. Ну и пусть, главное, чтобы пользоваться было удобно.

пост №800

«Retention» - удержание людей, чтобы они не перестали пользоваться сервисом. Вот хороший немецкий онлайн-банк N26 прислал мне 10 евро, чтобы я не портил им показатели перед инвесторами 🤷 безумный мир

пост №763

Очередная жуткая статья от The Atlantic о детском ютубе (они все жуткие). На этот раз, рассказанная через историю успеха индийского ChuChu TV. Чуваки начали с того, что сделали флеш-ролик для своей дочки и увидели, как сильно она залипает. Выложили его на ютуб и мгновенно получили 300 тысяч просмотров. Сделали ещё пару роликов, к ним пришел ютуб и сказал «ну вы блин даёте» и после этого они основали компанию. Сейчас у их основного канала больше 20 миллионов подписчиков, а у видео — больше 20 миллиардов (да, миллиардов) просмотров.

Меня в статье задело очень точное замечание, что принимать решения на основе цифр — способ сделать вид, что не принимаешь решения; это было сказано в контексте того, что сейчас ChuChu делают и приличные ролики тоже, но ютуб продолжает рекомендовать ранний треш на основе «метрик».

Не хочу цитировать статью (она достойна прочтения), а просто оставлю здесь ссылку на видео колыбельных ChuChu продолжительностью час, у которого полмиллиарда просмотров.

Минутка разгрузки: эта же колыбельная в исполнении, от которого не тошнит. А вот оригинальная музыка Моцарта, которую переделали для колыбельной, хорошая!