Зачем сотрудники Amazon жгут токены впустую? Помните, в апреле я писал про китайских водителей, которые возвращаются и добивают сбитых пешеходов — потому что покалечить дороже, чем убить насмерть? Классическая иллюстрация моего любимого 1го принципа экономики: «стимулы работают». Так вот, похоже в Amazon происходит нечто схожее. Что именно произошло? 1) Amazon поставил KPI: более 80% разработчиков должны юзать AI еженедельно 2) Сделали внутренние лидерборды по потреблению токенов, видимые менеджерам 3) Официально заявили — «это не учитывается при performance review». Но, как заметил один сотрудник, менеджеры все равно обращают на это внимание. 4) Разработчики предсказуемо адаптировались: стали гонять MeshClaw (их внутреннюю агентскую платформу) на бессмысленных задачах, лишь бы попасть в топ —> эдакий tokenmaxxing. Жаль, примеров задач нет, было бы интересно узнать :) 5) Amazon после публикации ограничил доступ к командной статистике использования: только сам сотрудник и его руководитель теперь видят ее. Как гласит классический закон: «чем больше количественный показатель используется для принятия решений, тем сильнее он подвержен коррупционному давлению» К чему я это? Недавно у меня был разговор с руководителем команды разработки и он беспокоился, что менеджмент может взять какую-нибудь подобную метрику - а ля количество pull request-ов напару с AI или количество потраченных токенов - и принимать на их основе кадровые (поощряем токенмаксеров) или управленческие (у нас хорошо идет внедрение AI) или маркетинговые (смотрите, насколько мы AI native) решения. Как бы нам этого не допустить? Какую метрику, по вашему мнению, надо трекать, чтобы оценивать внедрение AI? Или вообще это - внедрить AI - неверная формулировка?
Зачем сотрудники Amazon жгут токены впустую? Помните, в апреле я писал про…
Из этого канала
- #1761Отрывок из 1й встречи нового потока AI Personal OS - надеюсь, будет полезно:…
Отрывок из 1й встречи нового потока AI Personal OS - надеюсь, будет полезно: https://www.youtube.com/watch?v=Not4KkuwLU
- #1762"Ловим ошибки в эксельках Волею судеб тут погрузился в то, какие ошибки обычно…
"Ловим ошибки в эксельках Волею судеб тут погрузился в то, какие ошибки обычно делают люди в excel-ях, прочитал пару интересных исследований - например, вот…
- #1763в пятницу 12го июня поговорим про TeamOS и поделимся уроками внедрения AI в…
в пятницу 12го июня поговорим про TeamOS и поделимся уроками внедрения AI в командах: https://luma.com/klz3i3qa
- #1758"Заметки с полей - 3: Про доверие и контроль (продолжение постов 1 и 2) В…
"Заметки с полей - 3: Про доверие и контроль (продолжение постов 1 и 2) В недавнем отчете Anthropic была такая странная картинка (см аттач): что AI…
- #1756Запись вебинара AGI Economics: https://www.youtube.com/watch?v=Jp4PC7POf98
Запись вебинара AGI Economics: https://www.youtube.com/watch?v=Jp4PC7POf98