Дополнительное профессиональное образование Лицензия
№Л035-01298-77/00273901 (№034268) от 25.10.2013
Версия для слабовидящих
MBA

Повышение квалификации

Профессиональная переподготовка

Ближайшие семинары

Все семинары
21 октября
Лигай Анастасия Эдуардовна
12 ноября
Лигай Анастасия Эдуардовна
Остались вопросы?

Заполните заявку — мы перезвоним и расскажем все детально

✓
✓
У меня номер другой страны

* — обязательное поле

Прецизионность и воспроизводимость: что означают показатели и как их правильно оценивать

Изображение от Freepik
Прецизионность и воспроизводимость: что означают показатели и как их правильно оценивать фото
Содержание

Лаборатория трижды исследует одну пробу и получает почти одинаковые результаты. На первый взгляд метод работает отлично. Затем ту же пробу передают в другую лабораторию – результат заметно отличается. Возникает закономерный вопрос: каким данным доверять?

Именно для таких ситуаций существуют понятия прецизионности, повторяемости и воспроизводимости. Они позволяют оценить не субъективное впечатление от измерений, а способность метода давать согласованные результаты в заданных условиях.

Эти характеристики важны в химическом анализе, фармацевтическом производстве, пищевой промышленности, нефтехимии, экологическом контроле, медицине, метрологии и практически в любой области, где решение принимают на основании измерений. Ошибка в терминологии здесь способна превратиться в ошибку контроля качества: серия продукции будет забракована, исправный метод сочтут ненадежным или две лаборатории не смогут объяснить расхождение результатов.

Что такое прецизионность

Прецизионность – степень близости результатов повторных измерений друг к другу при определенных условиях.

Именно такое понимание закреплено в ГОСТ Р ИСО 5725-1-2002, который в России остается действующим. Стандарт прямо указывает, что прецизионность зависит от случайных погрешностей и не связана непосредственно с истинным или установленным значением измеряемой величины.

Последняя оговорка особенно важна.

Допустим, лаборатория пять раз измеряет содержание некоторого компонента и каждый раз получает практически одинаковый результат. Разброс минимален. Это говорит о высокой прецизионности.

Если при этом измерительная система имеет устойчивое смещение, все пять результатов могут находиться далеко от принятого опорного значения. Тогда измерения будут хорошо согласованы между собой, однако их правильность окажется неудовлетворительной.

Иными словами, прецизионность отвечает прежде всего на вопрос: «Насколько близкие результаты мы получаем при повторении измерений в заданных условиях?»

Она не отвечает самостоятельно на другой вопрос: «Насколько результат близок к принятому опорному значению?»

Для этого оценивают правильность.

Прецизионность, правильность и точность: почему их важно различать

В бытовой речи слова «точный» и «правильный» часто используются как взаимозаменяемые. В метрологии подобное упрощение способно привести к ошибочной оценке метода.

ГОСТ Р ИСО 5725 рассматривает точность через две характеристики – правильность и прецизионность. Правильность связана с близостью среднего результата к принятому опорному значению, прецизионность – с близостью отдельных независимых результатов друг к другу.

Характеристика

Что показывает

С чем преимущественно связана

Пример проблемы

Прецизионность

Насколько результаты согласуются между собой

Случайная изменчивость

Повторные измерения заметно разбросаны

Правильность

Насколько средний результат близок к принятому опорному значению

Систематическое смещение

Результаты стабильно завышены

Повторяемость

Прецизионность при практически неизменных условиях

Внутрисерийная изменчивость

Один специалист получает большой разброс в короткой серии

Воспроизводимость

Прецизионность при изменении лаборатории, исполнителя и оборудования

Внутри- и межлабораторная изменчивость

Разные лаборатории получают существенно разные результаты

Промежуточная прецизионность

Изменчивость внутри одной лаборатории при изменении отдельных факторов

Время, исполнитель, оборудование

Метод стабилен утром у одного сотрудника, результаты сильнее расходятся между сменами

Какие условия прецизионности существуют

Результат измерения зависит не только от метода. На него способны влиять исполнитель, прибор, партия реактивов, температура помещения, подготовка образца, время проведения работы и множество других факторов.

Поэтому выражение «метод обладает хорошей прецизионностью» само по себе неполно. Необходимо понимать, в каких условиях она была определена.

ГОСТ Р ИСО 5725 выделяет два крайних случая: условия повторяемости и условия воспроизводимости. Между ними находятся промежуточные условия прецизионности.

Повторяемость

Повторяемость – прецизионность результатов, полученных при максимально постоянных условиях.

Для классических условий повторяемости используются:

  • один и тот же метод;
  • идентичные объекты испытаний;
  • одна лаборатория;
  • один исполнитель;
  • одно оборудование;
  • короткий промежуток времени.

Представим лабораторный анализ, который специалист выполняет пять раз подряд на одном приборе из одной подготовленной пробы. Изменчивость такой серии показывает, насколько хорошо метод работает при сохранении основных факторов.

В российской нормативной документации наряду со словом «повторяемость» используется термин «сходимость». ГОСТ Р ИСО 5725-1 прямо указывает на такое параллельное употребление.

Чем меньше разброс результатов в этих условиях, тем выше повторяемость.

Воспроизводимость

Воспроизводимость – прецизионность в условиях воспроизводимости.

По ГОСТ Р ИСО 5725-1 речь идет об условиях, при которых один метод применяется к идентичным объектам испытаний в разных лабораториях, разными исполнителями и с использованием различного оборудования.

Это значительно более жесткая проверка метода.

В одной лаборатории сотрудники пользуются едиными инструкциями, работают на знакомом оборудовании, используют общую систему подготовки реактивов и находятся под влиянием одних и тех же внутренних правил. Межлабораторное исследование разрушает эту «защитную оболочку».

Если результаты остаются достаточно близкими после смены лаборатории, исполнителя и оборудования, метод действительно способен давать сопоставимые данные в более широких условиях.

Промежуточная прецизионность

Между повторяемостью и воспроизводимостью существует важная практическая область — промежуточная прецизионность.

Предположим, измерения выполняются в одной лаборатории, однако в разные дни. Или меняется сотрудник. Или используется другой экземпляр оборудования той же лаборатории.

Условия уже не являются условиями строгой повторяемости, поскольку часть факторов изменилась. Одновременно это еще не полноценная межлабораторная воспроизводимость.

Промежуточная прецизионность особенно полезна для повседневного контроля. Метод может прекрасно выглядеть в серии из десяти повторов, выполненных опытным специалистом за один час, и значительно хуже работать в течение месяца у разных сотрудников. Именно промежуточная оценка позволяет увидеть такую проблему.

Чем повторяемость отличается от воспроизводимости

Разницу удобно представить как постепенное расширение условий эксперимента.

Условие

Повторяемость

Промежуточная прецизионность

Воспроизводимость

Лаборатория

Та же

Та же

Разные

Метод

Тот же

Тот же

Тот же

Объект испытаний

Идентичный

Идентичный

Идентичный

Исполнитель

Тот же

Может меняться

Разные

Оборудование

То же

Может меняться

Различное

Время

Короткий период

Может меняться

Не является фиксированным

Основная задача

Оценить минимальную случайную изменчивость

Проверить устойчивость внутри лаборатории

Проверить сопоставимость результатов между лабораториями

ГОСТ Р ИСО 5725 характеризует повторяемость и воспроизводимость как два крайних случая прецизионности. В условиях повторяемости основные факторы сохраняются постоянными. В условиях воспроизводимости они изменяются, поэтому разброс результатов обычно оказывается больше.

По этой причине значение стандартного отклонения воспроизводимости обычно не меньше стандартного отклонения повторяемости.

Если ситуация обратная, это повод проверить схему эксперимента, объем данных, наличие необычных результатов и корректность статистической обработки.

Как прецизионность оценивают количественно

Фраза «результаты находятся близко друг к другу» полезна для объяснения термина, для технического заключения ее недостаточно. Степень рассеяния необходимо выразить числом.

Одной из основных характеристик является стандартное отклонение.

Если получено несколько результатов измерений, сначала определяют их среднее арифметическое. Затем оценивают отклонение каждого значения от среднего и рассчитывают меру общего разброса.

Чем меньше стандартное отклонение, тем плотнее результаты расположены около среднего значения и тем выше прецизионность при данных условиях.

Здесь возникает терминологическая особенность, которая сначала кажется нелогичной: высокая прецизионность соответствует малому значению показателя рассеяния.

Именно поэтому в нормативных текстах подчеркивается, что прецизионность часто выражают через показатель непрецизионности – например, стандартное отклонение, дисперсию или коэффициент вариации. Такой подход применяется и в современных российских стандартах для лабораторных измерений.

Стандартное отклонение повторяемости

Если эксперимент выполнен в условиях повторяемости, рассчитывают стандартное отклонение повторяемости.

Оно характеризует рассеяние, которое можно ожидать, когда лаборатория максимально сохраняет условия измерений неизменными.

Небольшое значение показывает, что метод дает хорошо согласованные результаты внутри серии.

Стандартное отклонение воспроизводимости

При межлабораторном исследовании определяют стандартное отклонение воспроизводимости.

В него входит не только случайная изменчивость, проявляющаяся внутри отдельных лабораторий. Добавляется влияние различий между лабораториями.

Именно поэтому анализ воспроизводимости способен обнаружить проблемы, невидимые при простой серии повторных измерений.

Одна лаборатория может стабильно получать результаты немного выше остальных, другая — немного ниже. Внутренняя повторяемость каждой из них будет хорошей. Межлабораторная воспроизводимость при существенном различии средних значений ухудшится.

Что такое предел повторяемости

На практике специалисту часто требуется не стандартное отклонение само по себе, а ответ на более прикладной вопрос:

какое расхождение между двумя результатами еще можно считать ожидаемым для данного метода?

Для этого используют предел повторяемости.

Предел повторяемости – значение, которое при установленном уровне вероятности не должна превышать абсолютная разность между двумя результатами, полученными в условиях повторяемости.

Для подхода, принятого в ГОСТ Р ИСО 5725, рассматривается уровень вероятности 95 %. При выполнении принятых в стандарте статистических предположений предел повторяемости рассчитывается как приблизительно 2,8 стандартного отклонения повторяемости:

r = 2,8 × sᵣ

где r – предел повторяемости, sᵣ – стандартное отклонение повторяемости.

Аналогично для воспроизводимости:

R = 2,8 × sᴿ

где R – предел воспроизводимости, sᴿ – стандартное отклонение воспроизводимости.

Такое соотношение прямо приводится в ГОСТ Р ИСО 5725-6-2002.

Важно понимать смысл этих величин. Они не устанавливают абсолютную «границу качества» для любого измерения. Пределы относятся к конкретному методу, конкретному диапазону измерений и условиям, при которых показатели прецизионности были установлены.

Откуда появляется плохая повторяемость

Если результаты одной и той же серии сильно разбросаны, источник проблемы часто находится непосредственно в процедуре измерения.

Причинами могут быть нестабильность прибора, недостаточная однородность образца, ошибки дозирования, различия в подготовке отдельных проб, недостаточно четкое описание методики, колебания условий окружающей среды или особенности ручных операций.

Задача специалиста состоит не в том, чтобы объявить все отличающиеся значения «случайной ошибкой». Необходимо понять механизм появления рассеяния.

Допустим, при определении массовой доли вещества результат сильно зависит от времени выдержки. Если методика указывает «выдержать несколько минут», два сотрудника могут понимать эту формулировку по-разному. Техническая неопределенность инструкции превращается в дополнительный источник изменчивости.

Уточнение процедуры способно улучшить прецизионность без замены оборудования.

Почему воспроизводимость может быть хуже повторяемости

Такой результат закономерен.

При повторяемости действует сравнительно небольшое число изменяющихся факторов. При воспроизводимости добавляются различия в персонале, оборудовании, лабораторных условиях, подготовке реактивов и реализации отдельных операций.

Каждый фактор способен внести собственную составляющую в общий разброс.

Хороший стандартный метод должен быть описан так, чтобы допустимые различия в его реализации не разрушали сопоставимость результатов. Именно поэтому межлабораторные исследования играют важную роль при установлении характеристик метода.

ГОСТ Р ИСО 5725-2 устанавливает основной подход к экспериментальному определению повторяемости и воспроизводимости стандартного метода измерений. Серия стандартов предназначена для метрологии, испытаний, стандартизации методов контроля и оценки работы лабораторий.

Как проводят оценку воспроизводимости

Надежная оценка требует заранее подготовленного эксперимента.

Несколько лабораторий получают образцы, которые должны быть достаточно однородными для поставленной задачи. Участники работают одним установленным методом и выполняют предусмотренное число измерений.

Далее результаты анализируют статистически.

Исследователей интересуют два уровня изменчивости: рассеяние результатов внутри каждой лаборатории и различия между лабораториями.

Если одна лаборатория получает результаты с большим внутренним разбросом, причина может быть связана с реализацией метода непосредственно у этого участника.

Если каждая лаборатория работает стабильно внутри своей серии, при этом средние значения существенно различаются, внимание переключается на межлабораторные факторы: настройку оборудования, градуировку, подготовку образцов, реактивы, интерпретацию методики.

Так воспроизводимость превращается из абстрактного статистического показателя в диагностический инструмент.

Что делать с необычными результатами

При оценке прецизионности нельзя автоматически удалять значение только потому, что оно заметно отличается от остальных.

Необычный результат может появиться из-за ошибки записи, неисправности оборудования, нарушения методики, загрязнения образца или реальной статистической изменчивости.

Перед исключением данных необходимо установить основание и применить предусмотренную процедуру статистической проверки.

ГОСТ Р ИСО 5725-2 рассматривает статистические способы исследования результатов межлабораторного эксперимента, включая анализ выбросов.

Особенно опасна практика «очищать» результаты до тех пор, пока показатели не станут красивыми. Так можно искусственно улучшить оценку метода и скрыть именно ту проблему, которую эксперимент должен был обнаружить.

Почему одного хорошего результата недостаточно

Допустим, контрольный образец исследовали один раз и получили значение почти в центре допустимого диапазона. С точки зрения конкретного выпуска продукции ситуация выглядит благополучно.

С метрологической точки зрения информации мало.

Один результат практически ничего не говорит о повторяемости. Для оценки изменчивости требуется серия независимых измерений.

Еще меньше одиночное значение говорит о воспроизводимости. Чтобы понять, будет ли тот же метод давать сопоставимые результаты у другого исполнителя или в другой лаборатории, условия необходимо целенаправленно изменить.

Поэтому подтверждение пригодности метода строится не вокруг одного «удачного попадания», а вокруг системы экспериментальных данных.

Где особенно важны прецизионность и воспроизводимость

Эти показатели востребованы практически везде, где результаты лабораторных или инструментальных исследований становятся основанием для решения.

В производственной лаборатории по результатам анализа принимают или бракуют сырье. В пищевой отрасли оценивают состав и безопасность продукции. В экологическом контроле измеряют содержание загрязняющих веществ. В нефтяной и химической промышленности лабораторные данные используются для характеристики сырья и технологических потоков. В медицинских лабораториях от стабильности измерительной процедуры зависит интерпретация результатов исследования.

Российский ГОСТ ISO/IEC 17025-2019 устанавливает общие требования к компетентности и стабильному функционированию испытательных и калибровочных лабораторий и применяется независимо от их численности или конкретного вида лабораторной деятельности. Стандарт действует в России с 2019 года.

Поэтому понимание прецизионности требуется не только специалисту, который рассчитывает стандартное отклонение. Оно необходимо всей системе лабораторного контроля.

Как улучшить прецизионность измерений

Начинать следует не с попытки уменьшить разброс любой ценой, а с поиска основных источников изменчивости.

Полезно последовательно проверить:

  • насколько подробно описана процедура;
  • одинаково ли сотрудники понимают критические операции;
  • контролируются ли условия окружающей среды;
  • подтверждена ли работоспособность оборудования;
  • достаточно ли однороден исследуемый материал;
  • одинаково ли проводится подготовка проб;
  • не изменяется ли результат во времени;
  • соответствует ли квалификация сотрудников выполняемым операциям.

Если проблема проявляется только между лабораториями, внутренней проверки одной серии недостаточно. Необходимо сопоставить реализацию метода у разных участников.

Иногда источник расхождений скрывается в деталях процедуры: способе фильтрации, продолжительности подготовки образца, порядке его выдержки или правилах округления. Такие различия могут казаться несущественными, однако в измерительной практике они способны заметно повлиять на результат.

Прецизионность при разных уровнях измеряемой величины

Еще одна распространенная ошибка – считать, что для метода существует одно универсальное значение прецизионности.

На практике разброс часто зависит от уровня измеряемой величины.

Метод способен показывать очень хорошие характеристики в средней части диапазона и заметно более слабые около нижней границы определения. Поэтому нормативные документы могут задавать показатели прецизионности отдельно для разных диапазонов или уровней.

ГОСТ Р ИСО 5725-1 предусматривает возможность представлять стандартные отклонения повторяемости и воспроизводимости по отдельным уровням, если прецизионность зависит от величины измеряемого показателя.

Из этого следует практическое правило: нельзя механически переносить характеристику, полученную для одной концентрации, на весь диапазон методики без соответствующего обоснования.

Что показывает коэффициент вариации

Когда требуется сопоставить относительный разброс результатов, используют коэффициент вариации. Он представляет собой отношение стандартного отклонения к среднему значению, выраженное обычно в процентах.

Этот показатель удобен, когда абсолютный размер разброса закономерно увеличивается вместе с уровнем измеряемой величины.

Например, стандартное отклонение 1 единица имеет совершенно разный практический смысл при среднем результате 5 и при среднем результате 1000.

Коэффициент вариации помогает привести такое рассеяние к относительной форме.

Применять его следует осмысленно. При среднем значении, близком к нулю, относительный показатель становится нестабильным или теряет содержательный смысл.

Кому точно стоит изучать прецизионность и воспроизводимость?

Понимание этих характеристик требуется специалистам, которые выполняют измерения, разрабатывают методики, оценивают качество лабораторной работы или принимают решения на основании полученных данных.

Особенно полезно пройти курс повышения квалификации по метрологии, обеспечению единства измерений, оценке точности методов или лабораторному контролю следующим категориям специалистов.

Сотрудникам испытательных лабораторий

Лаборанту, инженеру или аналитику недостаточно уметь технически выполнить процедуру. Необходимо понимать, почему два результата отличаются, какое расхождение допустимо и когда требуется повторное исследование.

Повышение квалификации помогает работать с показателями повторяемости, промежуточной прецизионности и воспроизводимости без механического применения формул.

Руководителям лабораторий

Руководитель отвечает не только за организацию работы персонала. Ему необходимо оценивать стабильность результатов, планировать внутренний контроль, разбирать причины несоответствий и анализировать результаты межлабораторных сравнений.

Без понимания статистической природы прецизионности появляется риск принимать административные решения по единичным отклонениям или, наоборот, пропускать системные проблемы.

Метрологам предприятий

Для метролога различие между правильностью, повторяемостью и воспроизводимостью является частью профессиональной основы.

Особенно важны эти знания при разработке и аттестации методик измерений, оценке метрологических характеристик, организации внутреннего контроля и анализе пригодности измерительных процедур.

Специалистам по качеству

Сотрудник службы качества регулярно сталкивается с протоколами испытаний, критериями приемки и расследованием несоответствий.

Если две лаборатории получили разные значения, формулировка «кто-то измерил неправильно» еще ничего не доказывает. Сначала необходимо определить условия измерения, ожидаемый предел воспроизводимости и статистическую значимость расхождения.

Специалистам производственного и экологического контроля

Результаты измерений в этих сферах могут влиять на выпуск продукции, настройку технологического процесса, выполнение обязательных требований и оценку воздействия предприятия.

Курс повышения квалификации помогает понимать границы применимости лабораторных данных и не приписывать отдельному числу больше достоверности, чем позволяет метод.

Разработчикам и специалистам по подтверждению пригодности методик

При создании или внедрении метода необходимо доказать, что он работает не только в руках автора.

Хорошая повторяемость показывает лишь часть картины. Для реального применения важна устойчивость результата при изменении исполнителя, времени, оборудования и, когда это необходимо, лаборатории.

Именно здесь знания о разных условиях прецизионности становятся практическим инструментом разработки.

Что должен дать курс повышения квалификации

Качественная программа обучения не должна ограничиваться определениями из стандарта. Специалисту важно научиться применять их к реальным данным.

После обучения слушатель должен понимать:

  • различия между точностью, правильностью и прецизионностью;
  • условия повторяемости и воспроизводимости;
  • назначение промежуточной прецизионности;
  • смысл стандартного отклонения и коэффициента вариации;
  • порядок интерпретации пределов повторяемости и воспроизводимости;
  • логику межлабораторных исследований;
  • причины появления выбросов и правила работы с ними;
  • влияние объема выборки на надежность оценки;
  • связь характеристик метода с внутренним контролем качества.

Особенно ценна работа с практическими примерами. Формула запоминается быстро. Гораздо сложнее определить, какую именно характеристику следует рассчитывать в конкретной производственной ситуации.

Почему воспроизводимость превращает метод из «рабочего» в действительно надежный

Метод, который стабильно работает у одного опытного специалиста на одном приборе, еще нельзя автоматически считать устойчивым.

Для практического применения требуется понять, что произойдет завтра, в другую смену, на другом экземпляре оборудования или в другой компетентной лаборатории.

Именно здесь проявляется значение прецизионности. Повторяемость показывает внутреннюю устойчивость процедуры. Промежуточная прецизионность проверяет ее в реальной жизни одной лаборатории. Воспроизводимость переносит проверку на более широкий уровень.

Чем важнее решение, основанное на результате измерения, тем меньше оснований довольствоваться фразой «мы несколько раз получили почти одно и то же число». Требуется знать, в каких условиях получены данные, каким разбросом характеризуется метод и насколько сопоставимыми останутся результаты при изменении условий.

Поэтому прецизионность и воспроизводимость — не формальная статистика для раздела методики. Это показатели, которые позволяют определить, можно ли доверять процедуре повторно, передать ее другому исполнителю и получить результат, сохраняющий технический смысл.

Остались вопросы?

Заполните заявку — мы перезвоним и расскажем все детально

✓
✓
У меня номер другой страны

* — обязательное поле

Вопрос-Ответ (FAQ)

  1. Нет. Прецизионность является более широким понятием. Воспроизводимость представляет собой прецизионность, оцененную в условиях, когда измерения выполняются разными лабораториями, исполнителями и на различном оборудовании одним и тем же методом.
  2. При повторяемости основные условия максимально сохраняются: одна лаборатория, один исполнитель, одно оборудование и короткий промежуток времени. При воспроизводимости лаборатории, исполнители и оборудование различаются. Поэтому воспроизводимость отражает более широкий набор источников изменчивости.
  3. Да. Каждая лаборатория способна получать очень стабильные результаты внутри собственных серий, при этом средние результаты разных лабораторий могут заметно расходиться. Такая ситуация указывает на влияние межлабораторных факторов.
  4. Прецизионность характеризует согласованность результатов друг с другом. Правильность связана с близостью среднего результата к принятому опорному значению. Метод может быть прецизионным и одновременно иметь систематическое смещение.
  5. Обе характеристики важны и отвечают на разные вопросы. Повторяемость показывает стабильность метода при почти неизменных условиях. Воспроизводимость показывает, сохраняется ли сопоставимость результатов после существенного изменения условий измерения.
Возврат к списку