BlockBeats News, 18 августа, согласно MaxForAI, сегодня AI-проект J-Space Cognition Suite, ставший вирусным на платформе X, подвергся сомнению со стороны сообщества, поскольку его продвигаемые результаты тестирования DeepSeek V4 оказались невоспроизводимыми. Ранее проект заявлял, что V4 Flash в сочетании с J-Space может сравниться с GLM-5.3, а V4 Pro может превзойти Fable 5 в нескольких бенчмарках для агентов (Agent Benchmarks), обеспечивая увеличение скорости в 2,53 раза и повышение эффективности использования Токенов в 2,21 раза.

Пользователь GitHub GoForceX использовал 87 вопросов из Terminal Bench 2.1 для повторного тестирования при высокой нагрузке и подтвердил загрузку модулей, связанных с J-Space. Результаты показали, что после интеграции J-Space производительность в бенчмарке немного снизилась, а использование Токенов и затраты увеличились, что противоречит заявлениям проекта об улучшении производительности, скорости и эффективности использования Токенов.

Впоследствии сообщество потребовало от проекта публично раскрыть полные конфигурации оценки, результаты по каждому вопросу, логи выполнения, необработанные данные о времени выполнения и потреблении Токенов. В настоящее время проект опубликовал в основном обобщенные результаты и не предоставил полных оригинальных экспериментальных записей, достаточно существенных для проверки вышеупомянутых точных данных. Примечательно, что в ответ на скептицизм авторы проекта признали, что соответствующие данные были действительно «преувеличены», заявив, что фактические улучшения составляют примерно от 1,6x до 3x. На данный момент авторы не дали официального ответа на вопросы сообщества, а некоторые соответствующие скептические Issues были удалены.