Что такое коэффициент значимости

Уровень значимости в статистике

Уровень значимости в статистике является важным показателем, отражающим степень уверенности в точности, истинности полученных (прогнозируемых) данных. Понятие широко применяется в различных сферах: от проведения социологических исследований, до статистического тестирования научных гипотез.

Определение

Уровень статистической значимости (или статистически значимый результат) показывает, какова вероятность случайного возникновения исследуемых показателей. Общая статистическая значимость явления выражается коэффициентом р-value (p-уровень). В любом эксперименте или наблюдении существует вероятность, что полученные данные возникли из-за ошибок выборки. Особенно это актуально для социологии.

То есть статистически значимой является величина, чья вероятность случайного возникновения крайне мала либо стремится к крайности. Крайностью в этом контексте считают степень отклонения статистики от нуль-гипотезы (гипотезы, которую проверяют на согласованность с полученными выборочными данными). В научной практике уровень значимости выбирается перед сбором данных и, как правило, его коэффициент составляет 0,05 (5 %). Для систем, где крайне важны точные значения, этот показатель может составлять 0,01 (1 %) и менее.

История вопроса

Понятие уровня значимости было введено британским статистиком и генетиком Рональдом Фишером в 1925 году, когда он разрабатывал методику проверки статистических гипотез. При анализе какого-либо процесса существует определенная вероятность тех либо иных явлений. Трудности возникают при работе с небольшими (либо не очевидными) процентами вероятностей, подпадающими под понятие «погрешность измерений».

При работе со статистическими данными, недостаточно конкретными, чтобы их проверить, ученые сталкивались с проблемой нулевой гипотезы, которая «мешает» оперировать малыми величинами. Фишер предложил для таких систем определить вероятность событий в 5 % (0,05) в качестве удобного выборочного среза, позволяющего отклонить нуль-гипотезу при расчетах.

Введение фиксированного коэффициента

В 1933 году ученые Ежи Нейман и Эгон Пирсон в своих работах рекомендовали заранее (до сбора данных) устанавливать определенный уровень значимости. Примеры использования этих правил хорошо видны во время проведения выборов. Предположим, есть два кандидата, один из которых очень популярен, а второй – малоизвестен. Очевидно, что первый кандидат выборы выиграет, а шансы второго стремятся к нулю. Стремятся – но не равны: всегда есть вероятность форс-мажорных обстоятельств, сенсационной информации, неожиданных решений, которые могут изменить прогнозируемые результаты выборов.

Нейман и Пирсон согласились, что предложенный Фишером уровень значимости 0,05 (обозначаемый символом α) наиболее удобен. Однако сам Фишер в 1956 году выступил против фиксации этого значения. Он считал, что уровень α должен устанавливаться в соответствии с конкретными обстоятельствами. Например, в физике частиц он составляет 0,01.

Значение p-уровня

Термин р-value впервые использован в работах Браунли в 1960 году. P-уровень (p-значение) является показателем, находящимся в обратной зависимости от истинности результатов. Наивысший коэффициент р-value соответствует наименьшему уровню доверия к произведенной выборке зависимости между переменными.

Данное значение отражает вероятность ошибок, связанных с интерпретацией результатов. Предположим, p-уровень = 0,05 (1/20). Он показывает пятипроцентную вероятность того, что найденная в выборке связь между переменными – всего лишь случайная особенность проведенной выборки. То есть, если эта зависимость отсутствует, то при многократных подобных экспериментах в среднем в каждом двадцатом исследовании можно ожидать такую ​​же либо большую зависимость между переменными. Часто p-уровень рассматривается в качестве «допустимой границы» уровня ошибок.

Кстати, р-value может не отражать реальную зависимость между переменными, а лишь показывает некое среднее значение в пределах допущений. В частности, окончательный анализ данных будет также зависеть от выбранных значений данного коэффициента. При p-уровне = 0,05 будут одни результаты, а при коэффициенте, равном 0,01, другие.

Проверка статистических гипотез

Уровень статистической значимости особенно важен при проверке выдвигаемых гипотез. Например, при расчетах двустороннего теста область отторжения разделяют поровну на обоих концах выборочного распределения (относительно нулевой координаты) и высчитывают истинность полученных данных.

Предположим, при мониторинге некоего процесса (явления) выяснилось, что новая статистическая информация свидетельствует о небольших изменениях относительно предыдущих значений. При этом расхождения в результатах малы, не очевидны, но важны для исследования. Перед специалистом встает дилемма: изменения реально происходят или это ошибки выборки (неточность измерений)?

Эффективность

Необходимо учитывать, что коэффициенты α и р-value не являются точными характеристиками. Каким бы ни был уровень значимости в статистике исследуемого явления, он не является безусловным основанием для принятия гипотезы. Например, чем меньше значение α, тем больше шанс, что устанавливаемая гипотеза значима. Однако существует риск ошибиться, что уменьшает статистическую мощность (значимость) исследования.

Исследователи, которые зацикливаются исключительно на статистически значимых результатах, могут получить ошибочные выводы. При этом перепроверить их работу затруднительно, так как ими применяются допущения (коими фактически и являются значения α и р-value). Поэтому рекомендуется всегда, наряду с вычислением статистической значимости, определять другой показатель – величину статистического эффекта. Величина эффекта – это количественная мера силы эффекта.

Источник

Статистическая значимость

Статистическая значимость часто применяется в маркетинге. С ее помощью определяют правильность выдвинутых предположений и вероятность их результатов. Она позволяет сделать выбор среди представленных теорий, что приводит к получению отличных результатов на практике.

Что такое статистическая значимость

Суть статистической значимости состоит в определении того, существует ли реальное основание в разнице между выбранными для исследования показателями, или это случайность? С данным понятием тесно связаны «нулевая» и «альтернативная» гипотезы.

Для лучшего понимания термина «статистическая значимость» необходимо понять, что такое «проверка гипотез». Эти два термина тесно взаимосвязаны.

Гипотеза иначе называется теорией. После окончания ее разработки требуется установить порядок по сбору достаточного количества доказательств этой теории и собрать их. Существует два типа гипотез: нулевая и альтернативная.

Нулевая гипотеза представляет собой теорию, которая гласит, что внесение коррективов ничего не поменяет, то есть сравниваемые объекты равнозначны в своих свойствах и нет смысла что-либо менять. Суть исследования заключается в опровержении гипотезы.

Альтернативная (исследовательская) гипотеза подразумевает сравнение, в результате которого один объект показывает себя эффективнее, чем другой.

Статистическая значимость как количественный показатель требует оценки. Оценка проходит поэтапно.

Постановка эксперимента

Все начинается с формулировки гипотезы. При этом должно быть выдвижение и нулевой, и альтернативной гипотезы. Придется сравнивать два набора данных для выяснения схожести и отличий. Эти утверждения требуют подтверждения с помощью экспериментальных данных.

Данный уровень представляет собой порог статистической значимости, который каждый устанавливает сам. Этот уровень носит название displaystyle \alpha >\alpha – уровня. Чаще всего, устанавливают значение в 0,05. Вероятность найти разницу составляет 5%. Чем выше уровень, тем достовернее результаты.

Когда нужна максимальная достоверность, стоит снизить значение с 0,05 до 0,01. Чаще всего, такие показатели применяют в производстве для выявления брака. Однако для большинства экспериментов достаточно значения в 0,05.

Решение об используемом критерии

После установки уровня требуется определить, какой критерий использовать: одно- или двусторонний. Здесь стоит опираться на t-критерии Стьюдента. Они показывают, насколько нормально распределены данные. Графически они представлены в виде колоколообразной кривой. Большее количество результатов расположено в середине.

Критерий Стьюдента позволяет математически проверить расположены ли данные в установленных пределах или же выпадают из нормального распределения.

Двусторонний критерий нужен, когда нет уверенности в том, что показатели находятся выше или ниже установленной нормы распределения.

Когда есть точная уверенность, в каком направлении может наблюдаться выход за пределы нормы, нужно использовать односторонний критерий.

Определение объема выборки

Здесь потребуется статистическая мощность. Она представляет собой вероятность, что при выбранном объеме будет получен ожидаемый результат. Распространенный порог — 80%. Для анализа можно использовать специальные онлайн-калькуляторы. Это позволит определить оптимальный объем выборки.

Часто проводят пробное исследование, которое позволяет получить данные для анализа и установить объем выборки. Когда такой возможности нет, стоит поискать в тематической литературе усредненные значения.

Вычисление стандартного отклонения

Стандартное отклонение показывает величину разброса данных. Оно позволяет сделать выбор о близости или отдаленности данных. Их вычисляют по следующей формуле: s = √∑((xi – µ)2/(N – 1)).

s — стандартное отклонение;

∑ указывает на необходимость суммировать полученные данные по выборке;

xi соответствует значению i, то есть отдельному полученному результату;

µ — это среднее значение для данной группы;

N — общее число данных в выборке.

Теперь потребуется отыскать среднее значение для каждой группы. Для этого суммируют средние значения каждой группы и делят на объем выборки.

Далее необходимо определить разницу (xi – µ). Для этого следует вычесть из найденной средней величины каждое полученное значение.

Теперь каждую полученную величину умножают на саму себя или возводят во вторую степень и суммируют величины. После этой операции не должно остаться отрицательных значений.

Следующий шаг — деление объема минус один. Делят полученную в предыдущем шаге сумму на величину, полученную от вычитания единицы. После этого извлекают квадратный корень из величины. Это и будет нужная величина стандартного отклонения.

Определение значимости

Для определения значимости потребуется взять две группы данных. Для последней вычисляют стандартное отклонение, после чего вычисляют дисперсию между обеими группами по формуле:

sd — дисперсия между двумя группами;

s1 — стандартное отклонение в группе 1, N1 — объем выборки в группе 1;

s2 — стандартное отклонение в группе 2, N2 — объем выборки в группе 2.

Необходимо определить t-оценку показателей для перевода полученных данных в стандартизированную форму, которая позволить провести сравнение с другими данными. Эта оценка делает возможным проверку t-критерия, а также выяснение величины отличия одной группы от другой. Для определения t-оценки применяют формулу: t = (µ1 – µ2)/sd:

µ1 — среднее значение для первой группы;

µ2 — среднее значение для второй группы;

sd — дисперсия между двумя выборками.

Совет: первым используют большее среднее значение, чтобы итоговая величина не была отрицательной.

Далее требуется определить степень свободы выборки. Для этого вычисляют объем: суммируют объемы двух выборок и вычитают 2. Полученная величина станет окончательной. Ее оценивают по таблице значений критерия Стьюдента (t-критерия). Таблица представлена ниже.

Пользоваться представленной таблицей просто: находите строку в соответствии с полученной степенью свободы и определяете соответствующее t-оценке Р-значение.

Например, при степени свободы 8 и t-оценке 2,61 Р-значение для одностороннего критерия попадает между 0,01 и 0,025. При выбранном показателе в 0,05 эти данные попадают в категорию «статистически значимые». Это помогает сделать выбор в пользу альтернативной гипотезы и отказаться от нулевой.

Заключение

Определение статистической значимости помогает решать маркетинговые задачи и минимизировать риски. Такие расчеты часто проводятся при A/B тестированиях и помогают узнать, как будет вести себя клиент в будущем, окупится ли товар и т.д.

Источник

Что такое коэффициент значимости

Об актуальных изменениях в КС узнаете, став участником программы, разработанной совместно с АО «Сбербанк-АСТ». Слушателям, успешно освоившим программу выдаются удостоверения установленного образца.

Программа разработана совместно с АО «Сбербанк-АСТ». Слушателям, успешно освоившим программу, выдаются удостоверения установленного образца.

Обзор документа

Письмо Федеральной антимонопольной службы от 19 октября 2015 г. № АЦ/57532/15 О порядке оценки заявок, который устанавливается заказчиком в документации о закупке

Согласно пункту 9 части 1 статьи 50, пункту 7 части 6 статьи 83 Закона № 44-ФЗ документация о закупке должна содержать критерии оценки заявок (предложений) на участие в закупке, величины значимости этих критериев, порядок рассмотрения и оценки таких заявок (предложений).

В соответствии с пунктом 4 Правил для оценки заявок (предложений) заказчик устанавливает в документации о закупке стоимостные критерии оценки (в том числе, цена контракта), а также нестоимостные критерии оценки (качественные, функциональные и экологические характеристики объекта закупки, а также квалификация участников закупки). При этом пунктом 10 Правил установлено, что в документации о закупке в отношении нестоимостных критериев оценки могут быть предусмотрены показатели, раскрывающие содержание нестоимостных критериев оценки и учитывающие особенности оценки закупаемых товаров, работ, услуг по нестоимостным критериям оценки.

В соответствии с положениями пункта 8 Правил для оценки заявок (предложений) заказчик устанавливает в документации о закупке не менее двух критериев оценки, одним из которых должен быть критерий «цена контракта». Следовательно, заказчик для оценки заявок (предложений) на участие в закупке вправе установить в документации о закупке как один из нестоимостных критериев, так и оба нестоимостных критерия.

1. Ha основании изложенного, в целях выявления лучшего условия исполнения контракта, порядок оценки заявок, устанавливаемый заказчиком в документации о закупке, должен содержать:

1) предмет оценки, позволяющий определить исчерпывающий перечень сведений, подлежащих оценке комиссией заказчика по осуществлению закупок и соответственно подлежащих представлению участниками закупки в своих заявках для получения оценки по нестоимостным критериям;

2) инструкцию по заполнению заявки, позволяющую определить, какие именно сведения подлежат описанию и представлению участниками закупки для оценки комиссией заказчика по осуществлению закупок;

3) зависимость (формула расчета количества баллов, предусмотренная Правилами, или шкала оценки) между количеством присваиваемых баллов и представляемыми сведениями по критерию «качественные, функциональные и экологические характеристики объекта закупки» (показателям критерия);

4) зависимость (формула расчета количества баллов, предусмотренная Правилами или шкала оценки, предусматривающая пропорциональное выставление баллов*) между количеством присваиваемых баллов и представляемыми сведениями по критерию «квалификация участников закупки» (показателям критерия), учитывая, что в отношении сведений, представляемых по указанному критерию, возможна количественная оценка.

По мнению ФАС России, выявлению лучшего предложения об исполнении контракта в наибольшей степени способствует установление в порядке оценки заявок на участие в закупке формулы расчета количества баллов, предусмотренную Правилами, в случае если предметом оценки по нестоимостному критерию (показателю) является количество качественной, квалификационной характеристики (например, количество исполненных участником закупки контрактов).

2. В соответствии с пунктом 11 Правил для оценки заявок (предложений) по каждому критерию оценки используется 100-балльная шкала оценки. Если в соответствии с пунктом 10 Правил в отношении критерия оценки в документации о закупке заказчиком предусматриваются показатели, то для каждого показателя устанавливается его значимость, в соответствии с которой будет производиться оценка, и формула расчета количества баллов, присуждаемых по таким показателям, или шкала предельных величин значимости показателей оценки, устанавливающая интервалы их изменений, или порядок их определения. Для оценки заявок (предложений) по нестоимостным критериям оценки (показателям) заказчик вправе устанавливать предельно необходимое минимальное или максимальное количественное значение качественных, функциональных, экологических и квалификационных характеристик, которые подлежат оценке в рамках указанных критериев. В этом случае при оценке заявок (предложений) по таким критериям (показателям) участникам закупки, сделавшим предложение, соответствующее такому значению, или лучшее предложение, присваивается 100 баллов. Сумма величин значимости показателей критерия оценки должна составлять 100 процентов.

На основании изложенного, при наличии в документации о закупке показателей нестоимостного критерия, порядок оценки должен содержать:

1) значимость в отношении каждого показателя, которая в соответствии с пунктом 3 Правил является выраженным в процентах весом показателя;

2) сумму величин значимости показателей критерия оценки в размере 100 процентов;

3) формулу расчета или шкалу количества баллов, предусматривающую присвоение по каждому показателю от 0 до 100 баллов (для дальнейшего умножения на коэффициент значимости показателя).

Соблюдение вышеуказанных положений в совокупности позволит обеспечить применение предусмотренной пунктом 11 Правил 100-балльной шкалы по критерию (обеспечивается возможность присвоить лучшему предложению по критерию оценку в 100 баллов).

В приложении приведен пример порядка оценки заявок, содержащего показатели нестоимостного критерия оценки заявок.

3. В случае установления в документации о закупке показателя «опыт участника по успешной поставке товара, выполнению работ, оказанию услуг сопоставимого характера и объема» критерия «квалификация участников закупки» заказчик раскрывает содержание, определяющее сопоставимость имеющегося у участников закупки опыта по поставке товара, выполнению работ, оказанию услуг с предметом осуществляемой закупки, в том числе указывает единицу измерения объема.

4. При установлении порядка оценки заявок на участие в закупке на выполнение строительных работ необходимо руководствоваться следующим.

В соответствии с пунктом 11 Правил в случае осуществления закупки, по результатам которой заключается контракт, предусматривающий выполнение строительных работ, заказчик обязан установить показатель «опыт участника по успешной поставке товара, выполнению работ, оказанию услуг сопоставимого характера и объема» критерия «квалификация участников закупки», за исключением случая, предусмотренного пунктом 30 Правил. При этом значимость показателя должна составлять не менее 50 процентов значимости всех нестоимостных критериев оценки.

Классификация строительных работ иерархическим методом и методом последовательного кодирования представлена в 45 коде Общероссийского классификатора продукции по видам экономической деятельности (ОКПД) ОК 034-2007.

Таким образом, заказчик при осуществлении закупки на выполнение любых работ, включенных в код 45 ОКПД (за исключением случая, предусмотренного пунктом 30 Правил), устанавливает показатель «опыт участника по успешной поставке товара, выполнению работ, оказанию услуг сопоставимого характера и объема» критерия «квалификация участников закупки» со значимостью не менее 50 процентов значимости всех нестоимостных критериев оценки.

Приложение: таблица на 1 л. в 1 экз.

* Пропорциональными называются две величины, если отношение их значений остаётся неизменным.

Пример порядка оценки заявок

1. Таблица № 1: Оценка по критериям оценки:

Критерий оценки	Максимальная оценка в баллах по критерию*(1)	Значимость критерия*(2)	Коэффициент значимости	Максимальный рейтинг по критерию	Максимальный итоговый рейтинг
Критерий № 1 (стоимостной)	100 баллов	60%	0,6	60 баллов	100 баллов
Критерий № 2 (нестоимостной)	100 баллов*(3)	40%	0,4	40 баллов

2. Таблица № 2: Оценка по показателям Критерия № 2:

Показатели Критерия № 2	Максимальная оценка в баллах по показателю*(4)	Значимость показателя*(5)	Коэффициент значимости	Максимальная оценка с учетом значимости показателя
1	2	3	4	5
Показатель № 1	100 баллов	70%	0,7	70 баллов
Показатель № 2	100 баллов	30%	0,3	30 баллов

3. Оценка по Показателям № 1 и № 2 Критерия № 2 осуществляется либо по шкале, либо по формуле, установленной в пунктах 20-24 Правил, например:

*(1) В соответствии с пунктом 11 Правил по каждому критерию используется 100-балльная шкала оценки.

*(2) Значимость устанавливается в соответствии с Приложением к Правилам. В соответствии с пунктом 9 Правил сумма величин значимости критериев оценки составляет 100%.

*(4) В соответствии с пунктом 11 Правил участнику закупки, сделавшему лучшее предложение, присваивается 100 баллов.

*(5) В соответствии с пунктом 11 Правил устанавливается значимость для каждого показателя, сумма величин значимости показателей составляет 100%.

Обзор документа

Рассмотрен вопрос об установлении заказчиком в документации о закупке порядка оценки заявок по нестоимостным критериям.

Так, ФАС России считает, что для выявления лучшего предложения об исполнении контракта в порядке оценки заявок следует установить формулу расчета количества баллов, если предметом оценки по нестоимостному критерию (показателю) является количество качественной, квалификационной характеристики (например, количество исполненных участником закупки контрактов).

По каждому критерию оценки используется 100-балльная шкала.

Для оценки заявок (предложений) по нестоимостным критериям оценки (показателям) заказчик вправе устанавливать предельно необходимое минимальное или максимальное количественное значение качественных, функциональных, экологических и квалификационных характеристик. Участникам закупки, сделавшим предложение, соответствующее такому значению или лучшее, присваивается 100 баллов. Сумма величин значимости показателей критерия оценки должна составлять 100%.

При установлении показателя «опыт участника по успешной поставке товара, выполнению работ, оказанию услуг сопоставимого характера и объема» критерия «квалификация участников закупки» заказчик раскрывает содержание, определяющее сопоставимость имеющегося у участников опыта по поставке товара, выполнению работ, оказанию услуг с предметом закупки, в т. ч. указывает единицу измерения объема.

Разъяснены особенности установления порядка оценки заявок на участие в закупке на выполнение строительных работ.

Источник

Коэффициент значимости

9. Коэффициент значимости

Цифровое выражение степени влияния коррозионного разрушения на функциональные свойства материала или покрытия детали

Смотреть что такое «Коэффициент значимости» в других словарях:

коэффициент весомости показателя качества продукции — Количественная характеристика значимости данного показателя качества продукции среди других показателей ее качества. Пояснения Коэффициенты весомости могут определяться социологическим или экспертным методами, а также на основе анализа влияния… … Справочник технического переводчика

Коэффициент весомости показателя качества продукции — – количественная характеристика значимости данного показателя качества продукции среди других показателей ее качества. [ГОСТ 15467 79] Рубрика термина: Общие, качество Рубрики энциклопедии: Абразивное оборудование, Абразивы, Автодороги … Энциклопедия терминов, определений и пояснений строительных материалов

Коэффициент корреляции — (Correlation coefficient) Коэффициент корреляции это статистический показатель зависимости двух случайных величин Определение коэффициента корреляции, виды коэффициентов корреляции, свойства коэффициента корреляции, вычисление и применение… … Энциклопедия инвестора

Коэффициент весомости показателя качества продукции — 15. Коэффициент весомости показателя качества продукции Количественная характеристика значимости данного показателя качества продукции среди других показателей ее качества Источник: ГОСТ 15467 79: Управление качеством продукции. Основные понятия … Словарь-справочник терминов нормативно-технической документации

Коэффициент детонации — Детонация в акустике искажения звука в результате частотной модуляции посторонним сигналом с частотой 0,2 200 Гц, например, порождаемым колебаниями скорости протяжки магнитной ленты. Содержание 1 Восприятие человеком 2 Природа искажений … Википедия

Оценка значимости статистических показателей — один из основных способов статистической проверки гипотез. Статистические гипотезы чаще всего выдвигаются либо относительно вида распределения некоторого признака в генеральной совокупности (например, гипотеза о нормальном распределении… … Социологический справочник

ПРОВЕРКА ЗНАЧИМОСТИ — (significance test) (Статистика) тест, разработанный для оценки возможности случайного происхождения наблюдаемого (числового) результата, который выражен как статистический (например, коэффициент t, коэффициент F). Его можно оценить с различным… … Большой толковый социологический словарь

СТО Газпром 2-1.12-064-2006: Методика оценки технико-коммерческих предложений на поставку материально-технических ресурсов, работ и услуг — Терминология СТО Газпром 2 1.12 064 2006: Методика оценки технико коммерческих предложений на поставку материально технических ресурсов, работ и услуг: 4.2.2 Взаимосвязь обобщенных (сложных) и простых критериев. Для оценки отдельно технической,… … Словарь-справочник терминов нормативно-технической документации

Итоговая оценка — 3.4.2 Итоговая оценка технико коммерческих предложений и построение ранжированного по предпочтительности списка лотовых заявок проводится отдельно для каждого лота. Договоры на поставку товаров (выполнение работ, оказание услуг) заключаются для… … Словарь-справочник терминов нормативно-технической документации

Источник