Всем привет. Сейчас работаю связкой ChatGPT + WORK + Codex, а под After Effects собрал свой MCP. Он не делает анимацию одной кнопкой, а даёт Codex видеть композиции, слои, свойства и тайминг, проверять проект, выполнять согласованные изменения и запускать рендер.
🧩🧩🧩🧩🧩🧩🧩
Эмодзи выше — один из сегодняшних результатов: анимированный шаблон со сменными текстом и шрифтом, который можно вывести и как Telegram Emoji, и как стикер.
"Платишь кредитами по прозрачному тарифу"
Кредиты это, конечно, максимально прозрачно. Чтоб понять цену за токены в деньгах нужно самому пропорцию составить.
Для кого это разводилово и зачем?
Успешность модели не делает её прозрачной ))
Вполне понимаю её для какого-нибудь сервиса.
А тут по сути товар.
128 кредитов за млн. токенов выглядит как 128 кредитов за килограмм огурцов...
Окэй, но сомнительно. Я лучше в соседней лавке возьму, где всё понятно сразу
При этом основной смысл продукта в более низкой цене токенов. Прям в заголовке написано "без переплат".
Ну так ты покажи это явно, а не заставляй юзера самого считать.
Люди зарабатывают как могут) просто ты не ЦА, тебе не зашел оффер, по-любому будут те, кто купят) Мой Ловарус тоже инструмент не для всех и не убийца клода, он просто займет свою нишу и найдет своего пользователя. Но это не делает продукт плохим, у него просто своя ЦА)
Померил 17 моделей на честность вызова инструментов. Не «отвечает ли модель», а соблюдает ли она контракт tools — потому что ломается именно он, и ломается молча.
Десять проверок на модель: возврат истории, параллельные вызовы, поток вместе с параллельными, вызов без аргументов, очень длинный аргумент, юникод в аргументах, tool_choice=required, tool_choice=named, 25 инструментов сразу, обрыв по лимиту токенов.
Главное нашлось не в моделях, а в маршрутизации. Если брать доступ через реселлера, часть каналов молча выкидывает поле tools — и модель вместо вызова функции сочиняет правдоподобный ответ. На запросе погоды с обязательным tool_choice один такой канал шесть раз из шести вернул выдуманную погоду. По HTTP это 200 OK, по метрикам провайдера — успех, по факту агент сломан, и вы об этом не узнаете.
Второе, на чём легко потерять день: у части каналов arguments приходят склеенными, вида {}{"city":"Paris"}. Обычный json.loads падает ровно там, где агент должен был вызвать инструмент.
Третье, самое неприятное: ответ 200 с идеально оформленным потоком, где finish_reason=stop, есть usage, есть [DONE] — и ни одного символа содержимого. Клиенту не на что ругаться, он просто ничего не показывает. Если у вас агент иногда «думает и молчит» — скорее всего это оно.
Итог по моделям: 162 проверки из 170, без единого замечания 14 из 17. Аутсайдеры — grok-4.5 (6 из 10) и glm-5.2 (7 из 10, tool_choice не соблюдается вообще).
Как проверить у себя, если пользуетесь любым шлюзом: ставьте tool_choice=required и убеждайтесь, что в ответе реально пришёл tool_calls, а не текст. По содержанию текста не отличить — сломанный канал отвечает правдоподобно.
Полная таблица с разбором каждого провала и методикой: llmass.arbitron.dev/tool-calls
Это данные моего шлюза, замер идёт каждый час.
Возьму задачи(проекты) по бэкенду, сайтам и автоматизациям:
- Веб-сервисы и сайты
- Интеграции с нейросетями
- Telegram-боты любой сложности
- Парсеры и скрипты под сбор данных
ЛС: @ave93
Я просто когда писал статью например эту https://habr.com/ru/articles/1042880/ сделал сотни запусков и полностью с нуля написал без харнессов готовых плейграунд
Не знаю ))
Разве он помогает узнать цену в центах (или хотя бы рублях) за млн. токенов, как у большинства крупных и мелких провайдеров и быстро увидеть, что вы дешевле конкурентов?
Сейчас для этого нужен калькулятор или даже бумажка. Я прикинул, получилось, что дороже. Ну и всё. А может я ошибся?
Я, конечно, не ценный клиент и, наверно, не ЦА, но человек принимает решение примерно за первые 8 секунд. За это время невозможно перевести 49 р. ща 1000 кредитов в Х центов за млн. токенов.
Ну и "прозрачно" применительно к кредитам прям триггерит.
Так, может, и хороший продукт. Только как это узнать, если на входе встречает математический барьер по конвертации кредитов в деньги за млн. токенов из 4-5 действий?
Ну и кто тогда ЦА, если не пользователи Опенрутера и прочих агрегаторов у всех из которых цены, а не кредиты?
Если расчёт на совсем кто не в теме, то им токены зачем вообще? Им в Ловарус надо.
Все верно. Те кто шарит и хочет экономию поставит себе какой-нить локальный агент и подключится к левому прокси, кто не шарит, тот в ловарус, у которого цены в рублях и инфра из коробки готовая)