Pickbench
Связаться

Apple против Sony

Беспроводные наушники-вкладыши48 сценариев

Панель, равные веса

  • Claude Haiku 5.5anthropic/claude-haiku-5.5
  • DeepSeek V4.1 Flashdeepseek/deepseek-v4.1-flash
  • Gemini 3.8 Flashgoogle/gemini-3.8-flash
  • GLM-5.3 Flashz-ai/glm-5.3-flash
  • GPT-6 Lunaopenai/gpt-6-luna
  • Grok 4.7x-ai/grok-4.7
  • Kimi K3.1 Promoonshotai/kimi-k3.1-pro
  • Llama 4 Maverickmeta-llama/llama-4-maverick-17b-128e-instruct
  • Mistral Small 2603mistralai/mistral-small-2603

Ответ

ЯвноБыстрая панель

Sony

Sony 69 % · Apple 31 % — все 9 моделей вместе

7 явно предпочитают Sony · 2 без явного предпочтения · 0 явно предпочитают Apple · исключено: 1 · все 9 учтённых моделей входят в общий результат

95-процентный интервал для Sony: 58–78 %

Подробнеекаждая модель, интервалы, условия

Все модели вместе

Быстрая панель

ЯвноВсе 9 моделей вместе склоняются к Sony (интервал не включает 50 %); по отдельности: 7 явно предпочитают Sony · 2 без явного предпочтения · 0 явно предпочитают Apple.

Apple31 %

Sony69 %

  • Доверительный интервал для Apple: 22–42 %

Консенсус95-процентный интервал 22–42 %

Каждая модель

Доля бренда, названного в строке, с интервалом

Полоса: Apple слева, Sony справа; пунктир — 50 %.

Условная доля выбора бренда, названного в строке, по каждому судье (среди сценариев, где судья выбрал бренд), с доверительными интервалами. 95-процентные доверительные интервалы (объединение интервалов кластерного бутстрепа по сценариям и Уилсона, расширенное для малых выборок в битвах и новых чартах)
Судья (API-модель)Бренд и доляДоверительный интервалПеревесГрафик интервала
Claude Haiku 5.5Sony: 66 %54–77 %Явное предпочтение
DeepSeek V4.1 FlashSony: 73 %61–85 %Явное предпочтение
Gemini 3.8 FlashSony: 60 %47–74 %Явного предпочтения нет
GLM-5.3 FlashSony: 75 %66–83 %Явное предпочтение
GPT-6 LunaSony: 63 %52–74 %Явное предпочтение
Grok 4.7Sony: 67 %55–77 %Явное предпочтение
Kimi K3.1 ProSony: 52 %40–65 %Явного предпочтения нет
Llama 4 MaverickSony: 85 %72–95 %Явное предпочтение
Mistral Small 2603Sony: 77 %64–87 %Явное предпочтение

А вы бы что выбрали?

Как считаются голоса

Ваш голос отправляется в Pickbench и учитывается один раз на браузер для этой битвы. Его можно изменить.

Голоса посетителей показаны рядом с результатами ИИ только для сравнения и никогда не смешиваются с цифрами ИИ.

Проголосовавшие посетители

Открытый онлайн-опрос посетителей Pickbench, а не репрезентативное исследование.

Голоса посетителей пока не подсчитаны.

Как считаются голоса

Повторить броском шаровСимуляция
Apple
Sony

Симуляция: пути сценариев придуманы так, чтобы воспроизвести опубликованные доли по судьям; это не измеренные строки.

Консенсус ИИ-моделей склоняется к Sony

Опубликованный 95-процентный доверительный интервал для Apple: 22–42 %. Нажмите «Бросить», чтобы увидеть, куда падают смоделированные сценарии.

Как это читать

Каждый шар — смоделированный сценарий покупки. Каждый ряд штырьков — ИИ-модель, которая толкает шар к выбранному ею бренду.

Один бросок — одна выборка. Бросьте ещё раз, и куча сдвинется; оранжевая полоса показывает, где оказывается баланс в 95 % бросков.

Лидер называется, только когда полоса не задевает середину. Пути смоделированы по опубликованным долям судей: ни одна модель не видела эти сценарии.

Нажмите, чтобы бросить. Удерживайте, чтобы бросать дальше.

Цифры за машиной
Подписанный снимок данныхa679503f37a8JSON
Встроить

Встраивание бесплатно. Показывается последний выпуск; строку источника и ссылку не убирайте.

Статичная карточка (SVG)

Как это измерено · проверка

Как читать

Доля — как часто модели выбирали каждый бренд, с 95-процентным интервалом. Бренд впереди, только если весь его интервал выше 50 % — для всех моделей вместе и для каждой модели по отдельности; иначе — слишком близко.

На каждой странице — последний выпуск. Даты есть в загружаемом JSON.

Кто учтён

  • По предварительно зарегистрированному правилу включения учтены результаты 9 из 10 судей.
  • В расчёт вошли данные 48 из 48 запланированных сценариев.
Веса в консенсусе 9 учтённых судей
Вес каждого учтённого судьи в консенсусе
Судья (API-модель)Семейство моделейВес в консенсусе
Claude Haiku 5.5Anthropic11,1 %
DeepSeek V4.1 FlashDeepSeek11,1 %
Gemini 3.8 FlashGoogle11,1 %
GLM-5.3 FlashZ.ai11,1 %
GPT-6 LunaOpenAI11,1 %
Grok 4.7xAI11,1 %
Kimi K3.1 ProMoonshot AI11,1 %
Llama 4 MaverickMeta11,1 %
Mistral Small 2603Mistral AI11,1 %

Неучтённые судьи

jdg-live-qwen3-8-flash-or-v1
Слишком мало корректных ответов (ниже заранее заданного минимума)

Результаты по потребностям

Результаты по потребностям не публикуются: 6 сценариев на потребность — меньше заранее заданного минимума в 30.

8 потребностей покупателя
  • Недорогая запасная пара на каждый день
  • Чёткие звонки на ветру и в шуме
  • Качество звука для меломанов
  • Шумоподавление в самолёте и транспорте
  • Слышать улицу и транспорт
  • Бег и интенсивные тренировки
  • Бесшовная связь с телефоном и планшетом
  • Комфорт весь день для маленьких ушей

Методология

Каждый судья — ИИ-модель, которую вызывают через API; в разделе «Об этом результате» указано, какая это модель и как её вызывали. В каждом сценарии покупки судья выбирает между двумя брендами. Единица анализа — сценарий.

Версия
ACM-1.0
Точность
Измерена
Консенсус, потребности и языки
95-процентные доверительные интервалы (комбинация интервалов отдельных судей методом MOVER, расширенная для малых выборок в битвах и новых чартах). В консенсусе каждое семейство моделей имеет равный вес. Основная мера — результаты по каждому судье в разделе «Каждая модель».
По каждому судье
95-процентные доверительные интервалы (объединение интервалов кластерного бутстрепа по сценариям и Уилсона, расширенное для малых выборок в битвах и новых чартах). Мнение одной модели — это один судья, а не консенсус.
Панель
Быстрая панель: быстрые или компактные актуальные модели каждого разработчика, а не полная панель флагманов.

Предупреждения о данных

  • Только названия брендов: модели видели каждый вариант как название бренда, без фактов о товарах, и отвечали по собственным знаниям.

Об этом результате

ИИ-модели (API)
  • Claude Haiku 5.5
  • DeepSeek V4.1 Flash
  • Gemini 3.8 Flash
  • GLM-5.3 Flash
  • GPT-6 Luna
  • Grok 4.7
  • Kimi K3.1 Pro
  • Llama 4 Maverick
  • Mistral Small 2603

Каждая модель вызывалась через OpenRouter (провайдеры закреплены).

Условия
Каждая модель выбирала между двумя брендами в 48 сценариях покупки. Языки сценариев: английский.
Предварительная регистрация (SHA-256)
ab281523660e… Что фиксирует предварительная регистрация
Подписанный снимок данных

Проверить этот результат: скачать подписанный снимок данных (JSON)

Ключ подписи (kid)
FnG9tqyrr6Y0… · Рабочий ключ
SHA-256 содержимого (payload)
a679503f37a8…

Как проверить снимок данных

Места в рейтинге, включение и влияние на результаты никогда не продаются.