Источник A
GPT-4o System Card
openai.com
https://openai.com/index/gpt-4o-system-card/
Сравнение
Победитель: Источник B выглядит менее манипулятивным
Источник B выглядит менее манипулятивным, чем источник A, в рамках этого нарратива.
Источник B
Introducing Claude 3.5 Sonnet
anthropic.com
https://www.anthropic.com/news/claude-3-5-sonnet
Темы
Мгновенный вердикт
Менее предвзятый источник: Источник B
Более эмоциональная подача: Источник A
Более односторонняя подача: Источник A
Более слабая доказательная база: Источник A
Более манипулятивная подача: Источник A
Конфликт нарративов
Основной нарратив источника A
Источник связывает развитие событий с экономическими ограничениями и ресурсными интересами.
Основной нарратив источника B
Источник подаёт событие через призму политических решений и распределения ответственности.
Ключевое различие
Контраст позиций: акцент на экономических факторах против акцента на политических решениях.
Позиция источника A
Источник связывает развитие событий с экономическими ограничениями и ресурсными интересами.
Уверенность позиции: 75%
Позиция источника B
Источник подаёт событие через призму политических решений и распределения ответственности.
Уверенность позиции: 66%
Центральный конфликт позиций
Контраст позиций: акцент на экономических факторах против акцента на политических решениях.
Почему эта пара подходит для сравнения
- Тип кандидата: Близкая похожая публикация
- Качество пары для сравнения: 42%
- Оценка совпадения сюжета: 7%
- Оценка контраста: 73%
- Сила контраста: Слабое, но валидное сравнение
- Сила контраста позиций: Высокая
- Совпадение сюжета: Связь по событию слабая. Совпадение основано на общих контекстных сигналах.
- Сигнал контраста: Контраст в интерпретации заметен, но связь по событию умеренная: сравнение стоит проверять через первоисточники.
- Почему контраст ограничен: Контраст частично заметен, но связь по конкретному событию слабая: это скорее смежный ракурс, чем сильный battle.
- Подсказка для более сильного сравнения: Прямая пара получилась слабой: откройте conflict-поиск похожих, чтобы выбрать более контрастный ракурс.
- Использовать усиленный вариант
Ключевые утверждения и доказательства
Ключевые утверждения в источнике A
- JEvaluations in this section were run on a fixed, randomly sampled subset of examples, and these scores should not be compared with publicly reported benchmarks on the same task.
- BSpanning self-reported domains of expertise including: Cognitive Science, Chemistry, Biology, Physics, Computer Science, Steganography, Political Science, Psychology, Persuasion, Economics, Anthropology, Sociology, HCI…
- Schmidt, “Ai will transform science.” https://www.technologyreview.com/2023/07/05/1075865/eric-schmidt-ai-will-transform-science/(opens in a new window), 2023.
- The model should only produce audio in that voice.
Ключевые утверждения в источнике B
- It’s just the beginning of a broader vision for Claude.ai, which will soon expand to support team collaboration.
- In the near future, teams—and eventually entire organizations—will be able to securely centralize their knowledge, documents, and ongoing work in one shared space, with Claude serving as an on-demand teammate.
- Our team is also exploring features like Memory, which will enable Claude to remember a user’s preferences and interaction history as specified, making their experience even more personalized and efficient.
- The UK AISI completed tests of 3.5 Sonnet and shared their results with the US AI Safety Institute (US AISI) as part of a Memorandum of Understanding, made possible by the partnership between the US and UK AISIs announc…
Текстовые доказательства
Доказательства из источника A
-
ключевое утверждение
Schmidt, “Ai will transform science.” https://www.technologyreview.com/2023/07/05/1075865/eric-schmidt-ai-will-transform-science/(opens in a new window), 2023.
Ключевое утверждение, на котором строится подача материала.
-
ключевое утверждение
JEvaluations in this section were run on a fixed, randomly sampled subset of examples, and these scores should not be compared with publicly reported benchmarks on the same task.
Ключевое утверждение, на котором строится подача материала.
-
эмоциональная лексика
https://openai.com/policies/usage-policies 21OpenAI, “Building an early warning system for llm-aided bio-logical threat creation", 2024.
Эмоционально окрашенная лексика, вероятно усиливающая реакцию аудитории.
-
оценочная маркировка
Sedova, “Truth, lies, and automation: How language models could change disinformation,” May 2021.
Оценочная маркировка, которая подталкивает к нормативной интерпретации.
-
выборочный акцент
The model should only produce audio in that voice.
Возможное выборочное акцентирование отдельных аспектов истории.
Доказательства из источника B
-
ключевое утверждение
The UK AISI completed tests of 3.5 Sonnet and shared their results with the US AI Safety Institute (US AISI) as part of a Memorandum of Understanding, made possible by the partnership betwe…
Ключевое утверждение, на котором строится подача материала.
-
ключевое утверждение
It’s just the beginning of a broader vision for Claude.ai, which will soon expand to support team collaboration.
Ключевое утверждение, на котором строится подача материала.
Доказательства паттернов искажения
-
Источник A · Апелляция к страху
https://openai.com/policies/usage-policies 21OpenAI, “Building an early warning system for llm-aided bio-logical threat creation", 2024.
Возможная апелляция к страху: акцент на угрозах может усиливать нужный вывод без сопоставимого расширения доказательств.
Как формируются сигналы оценок
Сигнал оценки искажений
Итоговый сигнал учитывает фрейминг, эмоционально нагруженные формулировки, выборочный акцент и паттерны односторонней подачи.
Сигнал эмоциональности
Эмоциональность повышается, когда в доказательствах чаще встречаются эмоциональная лексика и оценочные маркировки.
Сигнал односторонности
Односторонность повышается при доминировании одного фрейма и слабом присутствии альтернативных интерпретаций.
Сигнал доказательности
Доказательность растёт при наличии конкретных утверждений, атрибутированных цитат и проверяемых контекстных деталей.
Источник A
39%
эмоциональность: 41 · односторонность: 35
Найдено в источнике A
Апелляция к страху
Источник B
29%
эмоциональность: 35 · односторонность: 30
Найдено в источнике B
Эффект фрейминга
Метрики
Различия во фрейминге
- Эмоциональность источника A: 41/100, источника B: 35/100
- Односторонность источника A: 35/100, источника B: 30/100
- Контраст позиций: акцент на экономических факторах против акцента на политических решениях.
Возможные упущения контекста
- Проверьте, какие экономические и политические факторы каждый источник оставляет вне фокуса.
- Сопоставьте, признаются ли альтернативные объяснения события.