"Интересная картина, не правда ли? Ни на что не намекаю, и не пытаюсь подробно анализировать, но сколько в этой нише прямо таки успешных B2C чатиков? Ну видимо ноль 😏 Все решения B2B вроде интеркома и прочего были еще до LLM и это не наш случай. Весь сегодняшний грубый подсчет интересен тем чтобы посмотреть как очень линейно-уверенно могут расти цены на вроде бы дешевые модели. Конечно, 5RPS чатик это и правда очень сказочный случай, во-первых такого стабильного трафика никогда не будет, во вторых... такого трафика наверное вообще в подобном продукте не будет, у нас уже есть ChatGPT, Claude, Geminit – всем кому нужны ""чатики"" для general purposes, и не только – пользуется топовыми решениями, с этим уже понятно. Но для LLM штука годная, применима не только для чатиков, поэтому про стоимость токенов надо всегда думать с самого начала и как можно точнее ее предсказать для нашего сценария. А, кстати, такой же 5RPS чатик на GPT-4.1 будет стоить уже почти 30к долларов в месяц! Может уже проще Deepseek или Qwen свой захостить? 🤔 Ну, даже не знаю... Зато знаю что кешировать можно и нужно больше, если требований к данным в реальном времени у нас нет. Все это дисклеймер к статье которую я процентов на 85% уже написал 🙂"
"Интересная картина, не правда ли? Ни на что не намекаю, и не пытаюсь подробно…
154 viewsОткрыть в Telegram →
Из этого канала
- #367"Меня всегда умиляет, когда люди вспоминают Бритву Оккама в контексте уже…
"Меня всегда умиляет, когда люди вспоминают Бритву Оккама в контексте уже принятых решений – мол, вот, пора отсекать лишнее! Умиляет, потому что это очевидное…
- #368Вольный перевод треда чуть меньше чем месячной давности (давно не breaking, I…
Вольный перевод треда чуть меньше чем месячной давности (давно не breaking, I have told you long before 😄) MIT только что завершил первое исследование мозга…
- #369Вы пишете что-то, нажимаете “сохранить”, и ваш мозг уже это забыл, потому что…
Вы пишете что-то, нажимаете “сохранить”, и ваш мозг уже это забыл, потому что ChatGPT думал за вас.
- #365На сколько на самом деле могут быть дороги AI системки? Ну, если мы решаем…
На сколько на самом деле могут быть дороги AI системки? Ну, если мы решаем реальную проблему и с толком подошли к процессу – переворачиваем туда сюда большие…
- #364"Привет друзья! На днях я сел написать мыслишки за последнее время, про…
"Привет друзья! На днях я сел написать мыслишки за последнее время, про новости, и просто порефлексировать коротеньким постом в телеграм.