Попарное сравнение: как работает метод, с разобранным примером

Обновлено 31 октября 2026 г.

Попарное сравнение (метод попарного сравнения) — это способ ранжировать набор вариантов, сравнивая их по два и каждый раз выбирая, какой из двух предпочтительнее. Каждое отдельное решение простое, а когда сравнено достаточно пар, из результатов складывается полный рейтинг от первого места до последнего.

Метод также называют методом парных сравнений, по-английски — pairwise comparison или paired comparison. Психологи применяют его с 1920-х годов, чтобы измерять предпочтения, которые люди не могут напрямую выразить числом. Сегодня он встречается при приоритизации продуктовых бэклогов, в подборе персонала, в опросах и исследованиях, а также в самых обычных личных решениях. На этой странице вы узнаете, как работает метод, разберёте полный пример с матрицей попарных сравнений, посмотрите, сколько сравнений нужно, и познакомитесь с основными разновидностями. Если хотите сразу попробовать, бесплатный инструмент попарного сравнения ранжирует ваш список прямо в браузере, без регистрации.

Зачем сравнивать попарно?

Расставить по порядку сразу десять пунктов трудно. Приходится держать в голове все десять, постоянно их переставлять, а середине списка обычно достаётся меньше внимания, чем очевидному лидеру и очевидному аутсайдеру. Если же оценивать каждый вариант по шкале от 1 до 10, возникает другая проблема: почти всё получает 7 или 8, и шкала не заставляет делать выбор.

Попарное сравнение задаёт гораздо более простой вопрос: какой из этих двух вариантов важнее? На него люди отвечают быстро и довольно последовательно, даже если не смогли бы поставить оценку ни одному из вариантов. Повторите это для достаточного числа пар, и общий порядок сложится из ваших собственных решений. Никому не нужно с самого начала отстаивать готовый рейтинг.

Как работает попарное сравнение: пошагово

  1. Составьте список. Запишите все варианты, которые нужно ранжировать, по одному в строке. Следите, чтобы уровень детализации был похожим: «Улучшить онбординг» и «Поменять цвет кнопки на третьем шаге» плохо сравниваются между собой.
  2. Зафиксируйте вопрос. Выберите один вопрос для всех пар, например «Что принесёт клиентам больше пользы?» или «Чем мне больше хочется заняться этим летом?». Если поменять вопрос посередине, получится смесь двух разных рейтингов.
  3. Сравнивайте пары. Покажите два варианта и выберите один. В полном круговом сравнении (round-robin) каждый вариант встречается с каждым другим один раз. В адаптивном подходе алгоритм сортировки выбирает следующую пару по вашим предыдущим ответам, поэтому сравнений нужно меньше.
  4. Записывайте результаты. Каждый раз, когда вариант выбран, он получает победу. Если два варианта действительно равноценны, отметьте ничью (обычно она считается за половину победы).
  5. Превратите победы в рейтинг. Отсортируйте варианты по числу побед (при адаптивной сортировке достаточно прочитать итоговый порядок). Вариант с наибольшим числом побед — первый.
  6. Проверьте результат. Посмотрите на итоговый порядок. Если что-то кажется неверным, вернитесь к конкретным парам, которые поставили вариант на это место, вместо того чтобы переставлять список вручную.

Инструмент попарного сравнения берёт шаги 3–5 на себя: вставьте список, ответьте на вопросы о парах, и появится рейтинг с числом побед и процентом побед каждого варианта.

Разобранный пример: ранжируем пять функций продукта

Небольшая команда разработчиков может в следующем квартале сделать одну крупную функцию и хочет расставить по приоритету пять кандидатов:

  • Поиск: полнотекстовый поиск по всем проектам
  • Тёмная тема: тёмное оформление интерфейса
  • Экспорт в CSV: выгрузка любой таблицы в файл
  • Мобильное приложение: нативное приложение для телефона
  • SSO: единый вход через корпоративные аккаунты

Вопрос для каждой пары: «Что будет важнее для наших клиентов в следующем квартале?» Для пяти вариантов полное круговое сравнение требует 5 × 4 ÷ 2 = 10 сравнений. Вот ответы команды:

№ Пара Победитель
1Поиск — Тёмная темаПоиск
2Поиск — Экспорт в CSVПоиск
3Поиск — Мобильное приложениеМобильное приложение
4Поиск — SSOПоиск
5Тёмная тема — Экспорт в CSVЭкспорт в CSV
6Тёмная тема — Мобильное приложениеМобильное приложение
7Тёмная тема — SSOSSO
8Экспорт в CSV — Мобильное приложениеМобильное приложение
9Экспорт в CSV — SSOSSO
10Мобильное приложение — SSOМобильное приложение

Матрица попарных сравнений

Те же ответы можно записать в матрицу попарных сравнений. Каждая строка — вариант, каждый столбец — соперник. 1 означает, что вариант в строке победил вариант в столбце, 0 — что проиграл. Диагональ пустая, потому что вариант не сравнивается сам с собой. Каждой единице соответствует ноль в зеркальной клетке по другую сторону диагонали.

Строка побеждает столбец → Поиск Тёмная тема Экспорт в CSV Мобильное приложение SSO Победы
Поиск—11013
Тёмная тема0—0000
Экспорт в CSV01—001
Мобильное приложение111—14
SSO0110—2

Суммы по строкам — это счёт побед. Для проверки: 4 + 3 + 2 + 1 + 0 = 10, ровно одна победа на каждое сравнение.

От счёта побед к рейтингу

Каждый вариант участвовал в 4 сравнениях, поэтому процент побед равен победам ÷ 4:

Место Функция Победы Процент побед
1Мобильное приложение4100%
2Поиск375%
3SSO250%
4Экспорт в CSV125%
5Тёмная тема00%

Теперь у команды есть чёткий порядок, и каждое место можно объяснить. Поиск стоит выше SSO, потому что команда выбрала его в прямом сравнении, а мобильное приложение первое, потому что выиграло все свои сравнения. Если кто-то спросит: «Почему тёмная тема так низко?», ответ есть в матрице: она проиграла все четыре сравнения.

Этот пример получился идеально согласованным: по одному варианту на каждое возможное число побед. В реальных сессиях всё бывает запутаннее; что делать в таких случаях, описано ниже в разделе о типичных ошибках.

Сколько сравнений нужно для попарного сравнения?

Если сравнивать каждый вариант с каждым, понадобится n × (n − 1) ÷ 2 сравнений, где n — число вариантов. Это число быстро растёт:

Вариантов (n) Полное сравнение n(n−1)/2 Адаптивная сортировка слиянием ≈ n·log₂(n)
510~10
1045~25
15105~45
20190~70
30435~115

Сокращение в правом столбце даёт сортировка слиянием (merge sort). Когда алгоритм объединяет две уже упорядоченные группы, он сравнивает только первые элементы каждой из них, и каждый ответ благодаря транзитивности определяет сразу несколько позиций: если A побеждает B, а уже известно, что B стоит выше C, спрашивать про A и C не нужно. Точное число зависит от ваших ответов, поэтому значения в столбце — типичные, а не фиксированные.

На практике это значит: полное сравнение вполне подходит примерно до 8 вариантов, а для более длинных списков адаптивный подход экономит большую часть работы. Больше таблиц и расчётов — в англоязычной статье How many pairwise comparisons do you need.

Разновидности метода попарного сравнения

«Попарное сравнение» — общее название для целого семейства методов. Базовый вопрос у них один (A или B?), а различаются они тем, какие пары задаются и как ответы превращаются в рейтинг или числовую оценку.

Полное круговое сравнение со счётом побед

Каждая пара сравнивается один раз, варианты сортируются по числу побед, как в примере выше. Это просто, прозрачно и легко проверить, а для каждого варианта получается полная статистика побед. Цена — квадратичный рост числа сравнений, поэтому способ удобен в основном для коротких списков или для опросов, где множество людей оценивают по несколько пар.

Адаптивная сортировка (сортировка слиянием и похожие алгоритмы)

Алгоритм сортировки выбирает следующую пару с учётом того, что уже известно, и вы отвечаете только на те сравнения, которые нужны для определения порядка. Так работает инструмент PairwisePro: он использует стратегию сортировки слиянием, которой нужно примерно n × log₂(n) сравнений, поддерживает ничьи и отмену хода, а в конце показывает число побед и процент побед каждого варианта. Компромисс в том, что вы получаете надёжный порядок, но не полную статистику по каждой паре. Подробнее о таком ранжировании в формате «это или то» — в англоязычном руководстве по head-to-head ранжированию.

Рейтинг Эло и модель Брэдли — Терри

Когда сравнения неполные, противоречивые или поступают от множества разных людей, статистические модели оценивают силу каждого варианта по общей картине побед и поражений.

  • Модель Брэдли — Терри присваивает каждому варианту силу p и предполагает, что вариант i побеждает вариант j с вероятностью pᵢ ÷ (pᵢ + pⱼ). Силы подбираются сразу по всем наблюдаемым сравнениям, поэтому модель справляется с пропущенными парами и с разногласиями между голосующими.
  • Рейтинг Эло, известный по шахматам, обновляет оценки двух вариантов после каждого отдельного сравнения: победитель получает очки, проигравший теряет, и чем неожиданнее результат, тем сильнее изменение. Эло удобен для непрерывного массового голосования, где сравнения фактически не заканчиваются.

Оба подхода дают не только порядок, но и числовую оценку, что полезно, если нужно понять, насколько далеко варианты отстоят друг от друга. Однако им нужно гораздо больше суждений, чем готов сделать один человек, поэтому они лучше подходят для масштабных голосований, чем для личной приоритизации.

Метод анализа иерархий (МАИ, AHP)

Метод анализа иерархий, разработанный Томасом Саати, спрашивает, насколько один вариант важнее другого, по шкале от 1 до 9:

  • 1: одинаково важны
  • 3: умеренное превосходство
  • 5: существенное превосходство
  • 7: значительное превосходство
  • 9: абсолютное превосходство
  • 2, 4, 6, 8: промежуточные значения

Если A получает 3 по сравнению с B, то B автоматически получает 1/3 по сравнению с A, то есть матрица обратносимметричная. Веса приоритетов находят через главный собственный вектор матрицы (распространённое ручное приближение — нормировать каждый столбец и усреднить значения по строкам). МАИ также рассчитывает отношение согласованности; значение выше примерно 0,10 обычно считается сигналом, что суждения противоречат друг другу и их стоит пересмотреть.

МАИ часто применяют, чтобы получить веса критериев для более крупного решения. Он выразительнее простого «победил или проиграл», но требует больше усилий от того, кто сравнивает, и обычно используется для менее чем десяти элементов на каждом уровне иерархии.

Попарное сравнение, ранжирование или оценивание?

Есть три распространённых способа упорядочить список, и каждый подходит для своих ситуаций.

Подход Что вы делаете Плюсы Минусы
Прямое ранжированиеРасставляете весь список по порядкуБыстро для коротких списковНенадёжно после 6–7 пунктов; середина списка — догадки
Оценивание балламиСтавите каждому варианту оценку (1–5, 1–10)Каждый вариант оценивается отдельно; быстро собиратьОценки сбиваются в кучу; нет вынужденного выбора; каждый понимает шкалу по-своему
Попарное сравнениеРаз за разом выбираете лучший из двухПростые суждения; вынуждает выбирать; полный порядок, который можно проследитьБольше шагов, чем при одном ранжировании; нужен один чёткий вопрос

Похожий выбор — между попарным сравнением и взвешенной матрицей решений. Матрица оценивает каждый вариант по нескольким явным критериям (стоимость, трудозатраты, эффект) и умножает оценки на веса; она лучше всего работает для небольшого числа вариантов с измеримыми критериями. Попарное сравнение сильнее на длинных списках, которые оцениваются по общей ценности или интуитивному предпочтению. Когда что выбрать, разбирается в англоязычной статье Decision matrix vs pairwise comparison, а если вашей задаче лучше подходит матрица, постройте её в калькуляторе взвешенной матрицы решений (на английском).

Где применяется попарное сравнение

  • Функции продукта и бэклоги. Команды ранжируют запросы на функции, баги или темы дорожной карты по вопросу вроде «что сильнее сдвинет нашу главную метрику?». В итоге получается порядок, который команда может обосновать на планировании.
  • Подбор персонала и оценка. Если сравнивать кандидатов попарно по одним и тем же требованиям к должности, меньше сказывается дрейф оценок, когда собеседования разнесены на несколько дней. Тот же принцип подходит для грантовых заявок, дизайн-концепций и шорт-листов премий.
  • Личные решения. Куда поехать в отпуск, какое предложение о работе принять, какой пет-проект начать, что читать дальше. Попарное сравнение помогает понять, чего вы на самом деле хотите, когда все варианты кажутся одинаково привлекательными.
  • Исследования и опросы. Метод парных сравнений давно используется в психологии, маркетинговых исследованиях и сенсорном анализе, потому что респондентам проще ответить «какой из двух?», чем работать со шкалой оценок. Сервисы опросов часто показывают каждому участнику лишь часть пар и объединяют ответы с помощью модели вроде Брэдли — Терри.
  • Согласование в команде. Когда команда расходится во мнениях о приоритетах, попарное ранжирование списка показывает, в каких именно компромиссах люди не согласны.

Общее введение с акцентом на приоритизацию — в статье Что такое попарная приоритизация. Если выбираете программу, англоязычный обзор Pairwise ranking tools compared сравнивает варианты бок о бок.

Типичные ошибки и как с ними справиться

Нетранзитивные циклы

Иногда ответы замыкаются в круг: A побеждает B, B побеждает C, а C побеждает A. В круговом подсчёте у этих трёх вариантов оказывается одинаковое число побед друг над другом. Обычно это значит, что варианты очень близки или что вы незаметно переключились между двумя критериями (например, сравнивали A и B по стоимости, а B и C по эффекту). Переформулируйте вопрос, посмотрите на все три пары вместе и решите заново. Если цикл сохраняется и после повторной проверки, варианты действительно примерно равноценны, и их порядок важен меньше, чем кажется.

Ничьи

Возможность объявить ничью избавляет от необходимости придумывать предпочтение, которого нет. В подсчёте ничья обычно даёт каждому варианту по половине победы. Но пользуйтесь ею умеренно: если ничьих много, вопрос, скорее всего, слишком расплывчатый. Варианты с одинаковым числом побед можно развести по результату их личной встречи.

Усталость

Качество ответов падает, когда за один раз нужно ответить на слишком много пар: ответы становятся быстрее и случайнее. Чтобы сессии оставались посильными:

  • Сократите список заранее: уберите то, что явно не подходит, и объедините почти одинаковые пункты.
  • Для списков больше примерно 10 вариантов используйте адаптивный метод вместо полного сравнения.
  • Делайте перерывы в длинных сессиях. Инструмент PairwisePro сохраняет незавершённую сессию в браузере, так что можно продолжить с того же места.

Расплывчатый или меняющийся вопрос

«Что лучше?» позволяет каждому подставить своё определение. Запишите вопрос до начала и держите его перед глазами всю сессию.

Варианты разного масштаба

Сравнение «Переписать систему биллинга» с «Исправить опечатку на странице цен» даёт однобокие пары, из которых ничего не узнаешь. Группируйте варианты похожего масштаба или сначала ранжируйте крупные темы, а их детали — отдельно.

Частые вопросы

Что такое метод попарного сравнения простыми словами?

Вы берёте список вариантов, смотрите на них по два и в каждой паре выбираете тот, который предпочитаете. Посчитайте, сколько раз победил каждый вариант (или доверьте упорядочивание алгоритму сортировки), и рейтинг готов. Одно трудное решение заменяется множеством простых.

Что такое матрица попарных сравнений?

Это квадратная таблица, в строках и столбцах которой стоят одни и те же варианты. В каждой клетке записан результат сравнения варианта из строки с вариантом из столбца: 1 за победу и 0 за поражение в простом подсчёте или значение интенсивности от 1 до 9 и обратная ему величина в МАИ. Сумма по строке даёт итоговый балл варианта.

Сколько сравнений нужно для 10 вариантов?

Полное круговое сравнение требует 10 × 9 ÷ 2 = 45 сравнений. Адаптивной сортировке слиянием обычно хватает около 25, потому что каждый ответ делает ненужными несколько других пар. Значения для других размеров списка — в статье о числе сравнений (на английском).

Метод парных сравнений и попарное сравнение — это одно и то же?

Да. «Метод парных сравнений», «попарное сравнение» и «метод попарного сравнения» обозначают одну и ту же технику оценки вариантов по два. В разных областях предпочитают разные термины (в психологии и сенсорном анализе чаще говорят о парных сравнениях, в теории принятия решений и управлении продуктом — о попарном сравнении), но метод один и тот же.

Есть ли бесплатный калькулятор попарного сравнения?

Да. Инструмент PairwisePro бесплатный, работает в браузере и не требует аккаунта. Введите до 100 вариантов, отвечайте на вопросы о парах мышью или с клавиатуры (можно объявить ничью и отменить ход) и получите упорядоченный список с числом и процентом побед. Результатом можно поделиться по ссылке или экспортировать его в текст, CSV или JSON.

Ранжируйте свой список

Быстрее всего понять попарное сравнение — провести его самому. Вставьте список из пяти–пятнадцати пунктов, которые давно хотели расставить по приоритету, например функции, идеи, задачи или места для поездки, и ответьте на один и тот же вопрос для каждой пары. Через несколько минут у вас будет порядок, который вы сможете объяснить.

Начать попарное сравнение бесплатно — без регистрации и установки.

Применяйте на практике

Попробуйте бесплатные инструменты — регистрация не нужна.

Начать бесплатно