Про исследования и проектирование умных человекоцентричных систем

Позднее Ctrl + ↑

Исследование как продукт

Продакт в команде тех-ресерчеров Спотифай размышляет как объединить понятийный аппарат продуктовых команд и хардкорных ученых. Оба в процессе формулируют гипотезы и проводят эксперименты, но фокусируются на разном.

Предлагается построить мостик от тех.ресерча (research scientists) к продуктовым командам и обратно.

В этой первой статье описана ментальная модель для ресерчеров: исследование — это продукт учёных, продуктовая команда — это клиенты.

В такой картине мира:

research is a product with Product teams as customers and users.

А отталкиваясь от этой идеи можно начать задавать правильные вопросы с точки зрения полезности проводимой работы (адаптированный список из книги Inspired)

Looking through the lens of the Product team being the customer, we can reformulate the risks as follows:
Value Risk: Will customers Product teams find the product research valuable enough to buy or use?
Usability Risk: Can users Product teams easily understand and interact with the product research?
Feasibility Risk: Can the product research be done with available resources?
Business Viability Risk: Does the product research align with the company’s overall business strategy and goals?

Источник: Bridging the Product & Research gap — Part I: Demystifying Product for Researchers

P.S.
Жду вторую часть материала про то, на что продактам следует обращать внимание при работе с учеными.

График от QuantUX-ресерчера, который повлиял на стратегию YouTube

История из бородатого 2010 года, в которой общими мазками описывают как взяли кучу данных поведения пользователей на сайте, систематизировали их и отобразили визуально. И этот визуал стал настолько виральным внутри компании, что с ним печатали футболки и никому в YouTube не удалось увернуться от выводов, которые прилагались к графику.

Герой этой истории был первым квант-ресерчером, затем переквалифицировался в dataviz-инженера и вернулся обратно в ресерч. Попутно родился вот такой чудесный темплейт для рисования sunburst-диаграмм.

https://observablehq.com/@kerryrodden/sequences-sunburst

Я таких историй прочитал много, но что важно:

  • персонализированные продукты генерируют большой объем разнообразных паттернов
  • с каждый годом персонализации в продуктах все больше и больше
  • чтобы емко и понятно отобразить результаты исследования их надо не только систематизировать и упростить, но и эффективно отобразить.

Поэтому подчеркиваю важность dataviz-скиллов и в целом навыки презентации своей работы. Современные персонализированные продукты, которые оперируют в разных странах, на разных платформах и для разных сегментов аудитории почти невозможно объяснить «простыми, понятными» и неэффективными инструментыми коммуникации.

Тренд на усложнение инструментов аналитики виден и в других частях продуктовой работы.
Вспомним, как постепенно индустрия отходит от воронок и чаще начинает оперировать траекториями путей пользователя, а линейные деревья метрик уступают места каузальным графам со сложными неявными связями между метриками. А это требует новых методов обработки информации (напр. сетевой анализ) и их отображения (напр. знания по укладки графов или изучение/создание новых моделей визуализаций).

Подкаст «Это считается»

Этот выпуск будет полезен не только аналитикам, но и маркетологам, продактам и вообще всем, кто связан с исследованиями. Можно сказать, что наш новый эпизод — аудио-чек-лист по ресерчу.
Мы расскажем, с чего начать исследование, как не зарыться в детали и вовремя обновить прошлые результаты.

https://podcast.ru/e/4dWETzJPtu5

И для разбора этой хардовой темы мы позвали в гости Антона Марцена, аналитика с 10-летним опытом работы. Сейчас он руководит аналитикой в Яндекс Музыке и ведет телеграм-канал Product Science — https://t.me/product_science.

Тайм-коды:

00:00 Начало подкаста

01:04 Гость подкаста — Антон Марцен

03:26 Классификация исследований

05:46 Все о личном опыте CustDev

07:19 CustDev — пацанское название или нет?

08:19 Обсуждаем подходы к исследованиям

09:53 С чего начать ресерч, если нет данных

12:19 Антипаттерны в анализе спроса на продукт

16:24 Теория красных и голубых океанов

17:42 Вспомнить всех: кто занимается исследованиями?

20:09 Должен ли аналитик разбираться в UX

24:44 Работа с отзывами

26:24 Особенности продуктовой аналитики

28:32 Фил о сложностях при проведении исследований

30:23 Как понять, что пора перепровести ресерч

32:02 Тревожные руководители и как с ними работать

34:23 Доменная экспертиза: опыт Антона в Flo

36:30 Материалы для прокачки навыков ресерча

41:23 Способы развить насмотренность

43:20 Рубрика «Перефразируй профессионально»

44:59 Как не зарыться в исследования

47:50 Подводим итоги

Фича родилась: как создаются продукты

Это PLUS CAMP 2023 — встреча для техлидов и тимлидов от Яндекса. Здесь спикеры и гости обсудили работу в командах, управление проектами, тонкости экосистем и эксперименты с нейросетями. Ну и факапы, конечно.

Это Светлана Ивахненко и Антон Марцен. Ребята рассказали, как создаются фичи и какую роль в этом процессе занимают аналитики и исследователи.

Запись с мероприятия от 23 января 2024:

UX-помехи как инструмент сбора сигнала для алгоритмов

Ключевые идеи из статьи Using Friction As A Feature In Machine Learning Algorithms, дополненные небольшими фатками автора из личного опыта.

NB! Слово «friction» в переводе с английского означает «трение» или «разногласие», что не совсем подходит в контексте пользовательского опыта. Поэтому далее по тексту я буду переводить «friction» как «помеху», т. к. счел это более подходящим вариантом. Теперь про идеи из статьи...

1. Иногда нужно локально усложнять пользовательский опыт, чтобы упростить его в целом

Популярные цифровые продукты оттачивают ключевые сценарии до состояния «действий в один клик (или вообще без него)». Есть даже известная в дизайн-сообществе книга на тему. Но как и любая механика бездумно доведенная до крайности, она может привести к нежеланным для бизнеса и/или пользователя последствиям.

Поэтому иногда проектироващики осознанно вставляют юзерам палки в колеса:

  1. Заставлять настраивать и/или собирать доп.инфу перед начало использования приложения (ох уж эти любимые N экранов в первой сессии, которые большинство людей пролистывают не глядя...)
  2. Подталкивать к определенным действиям при помощи механик из поведенческой экономики (интересующиеся могут поискать Nudge Theory)
  3. «Защита от дурака» при критический действиях (напр., удаление данных)
Модальное окно, которое заставляет задуматься и напрячься, чтобы реально удалить учетную запись

2. UX-помехи позволяют отделять «сигнал» от «шума» и повышать качество рекомендаций

Для работы рекомендательных алгоритмов, продукт должен собирать сигналы от пользователя, обрабатывать их, а результат обратно отображать у пользователя. Думаю, если вы пришли в этот блог, то знаете это и без меня. Но на всякий случай прикладываю схему, которую сделал автор оригинального поста:

Цикл обратной связи типичного сервиса с движком рекомендаций

В свое время Tinder ввел дизайн карточек, который фокусирует человека на одном профиле за раз и механику свайпов, которая явным образом собирала оценку от пользователя.

TikTok взял эту механику на вооружение и довел до совершенства для своих целей — быстрее подстроиться под вкусы пользователя и затянуть в продукт. Но как это сработало?

TikTok не стал использовать «традиционный» дизайн в виде витрины контента, который:

  • позволяет широким взглядом охватить имеющийся каталог, но...
  • мешает алгоритму недвусмысленно понимать что захватывает внимание пользователя, а что нет

Получается, что эта механика ухудшила один аспект опыта (человек видит меньше контента за раз), но позволила быстрее подстраивать ленту и улучшить опыт взаимодействия с сервисом в целом.

А еще, у TikTok в первой сессии нет привычного онбординга из нескольких экранов, где можно настроить приложение. Настройка происходит по мере скролла ленты, что сокращает время до получения ценности от продукта.

В марте 2023 музыкальный сервис Spotify выкатил редизайн своего продукта, в котором показал ленту а-ля TikTok. Верховный продуктолог и по совместительству глав.инженер сервиса, обстоятельно объяснил в интервью почему они радикально меняют интерфейс.

“Секрет того, почему некоторые из продуктов так хороши в рекомендациях, на самом деле заключается не в том, что у них лучшие алгоритмы. Это те же самые алгоритмы с более эффективным пользовательским интерфейсом”.
— Густав Седерстрем в статье The Verge “Почему Spotify хочет выглядеть как TikTok”

Интересно, что их редизайн собирает хейт по интернету. Например, Mashable назвал новый интерфейс Spotify одним из худших обновлений 2023 года. Но руководство музыкального сервиса готово мириться с критикой, т. к. в долгосроке верит в правильность своего решения.

So What?

В статье есть еще несколько рассуждений про потенциальное использование этой механики в будущем и в других ML-продуктах. Не обошлось и без упоминания модных нынче языковых моделей. И есть несколько советов как искать «полезные помехи», но они как-будто слишком абстрактные.

В целом, метериал годный и содержит ряд полезных релевантных ссылок. Не зря потратил 15 минут на чтение. Можно ссылаться на него при рабочей необходимости.

Пользователи чаще ищут немейнстримные новости, если видят «линию партии»

Вот что нам говорит свежая заметка из журнала Nature:

People, not search-engine algorithms, choose unreliable or partisan news. Analysis of people’s web searches & visited websites suggests that it is more likely that they are choosing to engage with partisan or unreliable news than that they are being unduly exposed to it by search-engine algorithms.

So What?
Стоит задуматься: а так ли силен эффект «пузыря фильтров» в новостных рекомендациях?

Полный текст научной работы: Users choose to engage with more partisan news than they are exposed to on Google Search.

Рекомендации в разных странах и культурах

Информация воспринимается и интерпретируется человекам исходя из убеждений, ценностей и поведения. Эти характеристики формируются в личности под влиянием культуры в которой она растет и развивается.

Культура — это коллективное программирование сознания, которое отличает членов одной группы или типа людей от других
Герт Хофстеде, нидерландский социолог

Исследователи находят корреляции в восприятии информации в зависимости от страны и культуры. Вот несколько исследований в контексте рекомендаций:

So What?
Изучение культурных особенностей поможет выдвинуть гипотезы для проверок. Например, можно решить вопросы онбординга в приложении и проблему холодного старта в алгоритмах рекомендаций.
Не стоит пренебрегать индивидуальными характеристиками человека. Это более важный фактор, с который нужно брать с бОльшим весом.

Подход к исследованию в зависимости от ситуации

Jeanette Fuccella составила фрейморк для приоритизация исследований. Схема на картинке довольно говорящая, но вот две статьи для погружения:

  1. How to choose the right research methods for your discovery process
  2. A Tried and True Framework for Prioritizing User Research
  3. Building a framework for prioritizing user research

Организация знаний

Данные — это необработанные наблюдения пользователей.
«Находки» отражают закономерности между точками данных.
Аналитика (инсайты) — это практические рекомендаии, основанные на исследованиях и бизнес-целях.

https://www.nngroup.com/articles/data-findings-insights-differences/

Информационная иерархия знаний DIKW (data, information, knowledge, wisdom)

https://ru.wikipedia.org/wiki/DIKW

Atomic Research

https://tsharon.medium.com/foundations-of-atomic-research-a937d5da5fbb

Ранее Ctrl + ↓