- Андрей Карпати оценил модель Gemini 3 Pro от Google, отметив её сильные стороны и некоторые недостатки.
- В одном из диалогов модель ошибочно отрицала факт наступления 2025 года, обвиняя пользователя в подделке доказательств.
- Даже с включённым поиском в интернете Gemini 3 Pro порой смешивает актуальную информацию с устаревшими данными, создавая ошибочные ответы.
Андрей Карпати, признанный эксперт в области искусственного интеллекта, поделился своим мнением о последней языковой модели Google — Gemini 3 Pro. В своём посте в социальной сети X специалист отметил, что, несмотря на общее положительное впечатление от модели, он с определённой долей скепсиса относится к результатам стандартных бенчмарков, так как многие разработчики подгоняют модели под красивые цифры тестов. Вместо этого Карпати призывает пользователей самостоятельно экспериментировать с моделями и оценивать их эффективность на собственных задачах, а также придерживаться «LLM-цикла», то есть последовательно использовать несколько моделей для сравнения их возможностей.
В ходе личного тестирования Gemini 3 Pro специалист положительно оценил способности модели в области написания текстов, программирования, коммуникации и генерации шуток. Вместе с тем Андрей обнаружил забавный, но симптоматичный баг: в одной из бесед модель не могла поверить, что наступил конец 2025 года. Gemini 3 Pro упорно настаивала, что сейчас 2024 год, и, несмотря на предоставленные Карпати скриншоты и результаты поиска Google с датами 2025 года, начала обвинять его в использовании фейковых изображений, созданных ИИ — классический пример «газлайтинга». После того как Карпати включил у модели функцию интернет-поиска, она смогла получить свежие данные, признала свою ошибку и извинилась за недоразумение.
Однако включение поиска полностью не устраняет проблему ошибочных ответов. Так, журналист из Android Authority в своём обзоре отметил, что при создании презентации о судебном процессе между Google и Epic Gemini 3 Pro фигурно сгенерировала дизайн, но совмещала актуальную информацию с устаревшими данными, хранящимися в её внутренней базе с ограничением до конца 2024 года. Аналогичные случаи обсуждаются и в сообществах X и Reddit: модель осуществляет поиск свежих фактов, но затем смешивает их с устаревшими знаниями, что приводит к странным и порой неточным выводам.
На текущий момент экспертам и пользователям рекомендуется проявлять осторожность и внимательно проверять ответы Gemini 3 Pro, особенно если модель использовала поиск в интернете. Такой подход поможет избежать ошибок и более эффективно использовать её возможности в рабочих и творческих задачах.
