LLM в продуктовой работе. Part 1 Последний месяц изучал большие языковые модели (или LLM; на них работают GPT) и их практическое применение в продуктовой работе. Меня конкретно интересовал их потенциал, ограничения и эффективность использования как инструмента в процессах дискавери и деливери. Поделюсь первыми выводами, которые для себя вывел. Важно понимать, будь то GPT 3.5 или Llama-2-70b, все модели обучены и работают на объеме данных, датированном какой-то устаревшей датой. Т.е. их анализ и условный прогноз будет всегда слегка outdated. Однако, учитывая возможность анализировать и пересекать огромные массивы информации, от них можно ожидать нетривиальные подходы или как минимум выход за рамки. Это может быть полезно, когда замылился глаз и нужны свежие идеи. Я опробовал некоторые промты и вывел правила, при которых LLM с большей вероятностью сможет нагенирировать релевантные продуктовые идеи и гипотезы. Вопросы на которые необходимо ответить и скормить моделе: 💬 Какая ваша роль и сфера компании? 💬 Идея нужна для нового на рынке продукта или для существующего? 💬 [если существующий] Что это за продукт, какие в нем уже есть фичи? 💬 Какая цель? (например, повлиять на какую-то метрику) 💬 Кто целевая аудитория [или сегмент]? 💬 Какая текущая модель монетизации? 💬 Какие есть ограничения? (технические или человеческие ресурсы, правила в законодательстве и пр.) При таком последовательном и подробно описанном подходе результат действительно интересный. Скажем я получил парочку интересных идей, которые действительно не лишены смысла и могут потенциально задрайвить ключевые метрики после глубокой проработки. Для чего еще помимо генерации идей может быть полезна LLM на этапе дискавери. Я бы выделил следующие вещи: 1. Анализ рынка и конкурентов 2. Анализ потенциальных рисков 3. Анализ культурных и национальных особенностей Скорее всего это будет валидно только если это неизведанный для Вас рынок, страна или регион, хотя при погружении в какую-то новую доменную область тоже может быть полезно. Приведу конкретный пример. Вы хотите запустить аналог Tinder где-то в Латинской Америке: 💬 What are the current market trends related to dating apps? 💬 Have there been similar products to Tinder launched in the past in Latin America? How did they perform? 💬 What is the projected market size for the dating app market? 💬 What risks might be associated with launching new dating app in Latin America? 💬 Are there cultural considerations for launching new dating app in Latin America? Западные LLM обучались и обладают полнотой по иностранным текстам, рекомендую использовать английский как основной язык при общении с ними.