WikiDer > Медиана

Нахождение медианы в наборах данных с нечетным и четным числом значений

В статистика и теория вероятности, а медиана это значение, отделяющее верхнюю половину от нижней половины образец данных, а численность населения или распределение вероятностей. Для набор данных, его можно рассматривать как «среднее» значение. Основное преимущество медианы в описании данных по сравнению с иметь в виду (часто описываемый просто как «средний») заключается в том, что это не перекошенный так сильно на небольшую долю чрезвычайно больших или малых значений, и поэтому это может дать лучшее представление о «типичном» значении. Например, при понимании таких статистических данных, как доход или активы домохозяйства, которые сильно различаются, среднее значение может быть искажено небольшим количеством чрезвычайно высоких или низких значений. Средний доход, например, может быть лучшим способом предположить, что такое "типичный" доход. Из-за этого медиана имеет центральное значение в надежная статистика, так как это самый стойкая статистика, иметь точка разрушения 50%: пока не более половины данных загрязнены, медиана не даст произвольно большого или малого результата.

Конечный набор данных чисел

Медиана конечного списка чисел - это «среднее» число, когда эти числа перечислены в порядке от наименьшего к наибольшему.

Если количество наблюдений нечетное, выбирается среднее. Например, рассмотрим список чисел

1, 3, 3, 6, 7, 8, 9

В этом списке семь номеров. Медиана - четвертая из них, она равна 6.

Если имеется четное количество наблюдений, то единого среднего значения не существует; тогда медиана обычно определяется как иметь в виду двух средних значений.^[1][2] Например, в наборе данных

1, 2, 3, 4, 5, 6, 8, 9

медиана - это среднее значение двух средних чисел: это ${displaystyle (4 + 5) / 2}$, который ${displaystyle 4.5}$. (В более технических терминах это интерпретирует медианное значение как полностью обрезанный средний диапазон). При таком соглашении медиана может быть описана в виде без дела формула, как показано ниже:

${displaystyle mathrm {median} (x) = {frac {1} {2}} (x_ {lfloor (n + 1) / 2floor} + x_ {lceil (n + 1) / 2ceil})}$

куда ${displaystyle x}$ упорядоченный список ${displaystyle n}$ числа и ${displaystyle lfloor cdot floor}$ и ${displaystyle lceil cdot ceil}$ обозначить функции пола и потолка, соответственно.

Сравнение общих средние значений [1, 2, 2, 3, 4, 7, 9]

Тип	Описание	Пример	Результат
Среднее арифметическое	Сумма значений набора данных, деленная на количество значений: ${displaystyle scriptstyle {ar {x}} = {frac {1} {n}} sum _ {i = 1} ^ {n} x_ {i}}$	(1 + 2 + 2 + 3 + 4 + 7 + 9) / 7	4
Медиана	Среднее значение, разделяющее большую и меньшую половины набора данных	1, 2, 2, 3, 4, 7, 9	3
Режим	Наиболее частое значение в наборе данных	1, 2, 2, 3, 4, 7, 9	2

Формальное определение

Формально медиана численность населения - любое значение, при котором не более половины населения меньше предлагаемой медианы, а не более половины больше предлагаемой медианы. Как видно выше, медианы не могут быть уникальными. Если каждый набор содержит менее половины генеральной совокупности, то некоторая часть совокупности точно равна уникальной медиане.

Медиана хорошо определена для любого упорядоченный (одномерные) данные и не зависят от каких-либо метрика расстояния. Таким образом, медиана может применяться к классам, которые ранжируются, но не числовыми (например, вычисление средней оценки, когда учащиеся оцениваются от A до F), хотя результат может быть посередине между классами, если имеется четное количество случаев.

А геометрическая медиана, с другой стороны, определяется в любом количестве измерений. Связанная концепция, в которой результат вынужден соответствовать члену выборки, - это медоид.

Общепринятого стандартного обозначения медианы не существует, но некоторые авторы представляют медианное значение переменной. Икс либо как Икс или как μ_1/2^[1] иногда также M.^[3][4] В любом из этих случаев использование тех или иных символов для медианы должно быть явно определено при их введении.

Медиана - это частный случай других способы обобщения типичных значений, связанных со статистическим распределением: это 2-й квартиль, 5-я дециль, и 50-е процентиль.

Использует

Медиану можно использовать как меру место расположения когда придают меньшее значение экстремальным значениям, обычно потому, что распределение перекошенный, экстремальные значения неизвестны, или выбросы ненадежны, т. е. могут быть ошибки измерения / транскрипции.

Например, рассмотрим мультимножество

1, 2, 2, 2, 3, 14.

В этом случае медиана равна 2 (как и Режим), и это можно было бы рассматривать как лучшее указание на центр чем среднее арифметическое 4, что больше, чем все значения, кроме одного. Однако широко цитируемое эмпирическое соотношение, согласно которому среднее смещается «дальше в хвост» распределения, чем медиана, в целом неверно. В лучшем случае можно сказать, что эти две статистики не могут быть «слишком далеко» друг от друга; видеть § Неравенство в отношении средних и средних значений ниже.^[5]

Поскольку медиана основана на средних данных в наборе, нет необходимости знать значение крайних результатов для ее вычисления. Например, в психологическом тесте, изучающем время, необходимое для решения проблемы, если небольшое количество людей вообще не смогли решить проблему за заданное время, можно вычислить медианное значение.^[6]

Поскольку медиана проста для понимания и расчета, а также является надежным приближением к иметь в виду, медиана - популярный сводная статистика в описательная статистика. В этом контексте есть несколько вариантов измерения изменчивость: the классифицировать, то межквартильный размах, то среднее абсолютное отклонение, а среднее абсолютное отклонение.

Для практических целей различные меры местоположения и дисперсии часто сравниваются на основе того, насколько хорошо соответствующие значения совокупности могут быть оценены на основе выборки данных. Медиана, рассчитанная с использованием медианы выборки, имеет в этом отношении хорошие свойства. Хотя обычно предполагается, что данное распределение населения не является оптимальным, его свойства всегда достаточно хорошие. Например, сравнение эффективность кандидатов в оценщики показывает, что выборочное среднее более статистически эффективно когда - и только когда - данные не загрязнены данными из распределений с тяжелым хвостом или из смесей распределений.^{[нужна цитата]} Даже в этом случае медиана имеет эффективность 64% по сравнению со средним значением с минимальной дисперсией (для больших нормальных выборок), то есть дисперсия медианы будет на ~ 50% больше, чем дисперсия среднего.^[7][8]

Распределения вероятностей

Геометрическая визуализация режима, медианы и среднего значения произвольной функции плотности вероятности^[9]

Для любого настоящий-значен распределение вероятностей с кумулятивная функция распределения F, медиана определяется как любое действительное числом что удовлетворяет неравенствам

${displaystyle int _ {(- infty, m]} dF (x) geq {frac {1} {2}} {ext {and}} int _ {[m, infty)} dF (x) geq {frac {1 } {2}}}$.

В эквивалентной фразе используется случайная величина Икс распределен согласно F:

${displaystyle operatorname {P} (Xleq m) geq {frac {1} {2}} {ext {and}} operatorname {P} (Xgeq m) geq {frac {1} {2}}}$

Обратите внимание, что это определение не требует Икс иметь абсолютно непрерывное распределение (который имеет функция плотности вероятности ƒ), и не требует дискретный. В первом случае неравенства могут быть увеличены до равенства: медиана удовлетворяет

${displaystyle operatorname {P} (Xleq m) = int _ {- infty} ^ {m} {f (x), dx} = {frac {1} {2}} = int _ {m} ^ {infty} { f (x), dx} = имя оператора {P} (Xgeq m)}$.

Любой распределение вероятностей на р имеет хотя бы одну медиану, но в патологических случаях может быть более одной медианы: если F постоянна 1/2 на интервале (так что ƒ= 0), то любое значение этого интервала является медианой.

Медианы отдельных распределений

Медианы некоторых типов распределений могут быть легко вычислены по их параметрам; более того, они существуют даже для некоторых дистрибутивов, не имеющих четко определенного среднего значения, таких как Распределение Коши:

• Медиана симметричного одномодальное распределение совпадает с режимом.
• Медиана симметричное распределение который обладает средним μ также принимает значение μ.
  • Медиана нормальное распределение со средним μ и дисперсия σ² есть μ. Фактически, для нормального распределения среднее значение = медиана = мода.
  • Медиана равномерное распределение в интервале [а, б] является (а + б) / 2, которое также является средним.
• Медиана Распределение Коши с параметром местоположения Икс₀ и масштабный параметр у являетсяИкс₀, параметр местоположения.
• Медиана распределение по степенному закону Икс^−а, с показателем а > 1 равно 2^{1/(а − 1)}Икс_мин, куда Икс_мин - минимальное значение, при котором выполняется степенной закон^[10]
• Медиана экспоненциальное распределение с параметр скорости λ - натуральный логарифм 2, деленный на параметр скорости: λ⁻¹пер 2.
• Медиана Распределение Вейбулла с параметром формы k и масштабный параметр λ являетсяλ(пер. 2)^1/k.

Населения

Свойство оптимальности

В средняя абсолютная ошибка реальной переменной c с уважением к случайная переменная Икс является

${displaystyle E (left | X-cight |),}$

При условии, что распределение вероятностей Икс такова, что указанное выше ожидание существует, то м является средним значением Икс если и только если м является минимизатором средней абсолютной ошибки относительно Икс.^[11] Особенно, м является выборочной медианой тогда и только тогда, когда м минимизирует среднее арифметическое абсолютных отклонений.^[12]

В более общем смысле медиана определяется как минимум

${displaystyle E (| X-c | - | X |),}$

как описано ниже в разделе о многомерные медианы (в частности, пространственная медиана).

Это основанное на оптимизации определение медианы полезно при статистическом анализе данных, например, в kкластеризация медианы.

Неравенство в отношении средних и медиан

Сравнение иметь в виду, медиана и Режим из двух логнормальные распределения с разными перекос

Если распределение имеет конечную дисперсию, то расстояние между медианными ${displaystyle {ilde {X}}}$ и среднее ${displaystyle {ar {X}}}$ ограничен одним стандартное отклонение.

Эта оценка была доказана Мэллоусом,^[13] кто использовал Неравенство Дженсена дважды, следующим образом. Использование | · | для абсолютная величина, у нас есть

${displaystyle {egin {align} | mu -m | = | operatorname {E} (Xm) | & leq operatorname {E} (| Xm |) & leq operatorname {E} (| X-mu |) & leq {sqrt { имя оператора {E} left ((X-mu) ^ {2} ight)}} = сигма .end {выровнено}}}$

Первое и третье неравенства происходят из неравенства Дженсена, примененного к функции абсолютного значения и функции квадрата, каждая из которых является выпуклой. Второе неравенство возникает из-за того, что медиана минимизирует абсолютное отклонение функция ${displaystyle amapsto operatorname {E} (| X-a |)}$.

Доказательство Маллоуса можно обобщить для получения многомерной версии неравенства^[14] просто заменив абсолютное значение на норма:

${displaystyle | mu -m | leq {sqrt {operatorname {E} left (| X-mu | ^ {2} ight)}} = {sqrt {operatorname {trace} left (operatorname {var} (X) ight)} }}$

куда м это пространственная медиана, то есть минимизатор функции ${displaystyle amapsto operatorname {E} (| X-a |).,}$ Пространственная медиана уникальна, если размерность набора данных равна двум или более.^[15][16]

Альтернативное доказательство использует одностороннее неравенство Чебышева; это появляется в неравенство по локационным и масштабным параметрам. Эта формула также непосредственно следует из Неравенство Кантелли.^[17]

Унимодальные распределения

В случае одномодальный распределений, можно получить более точную оценку расстояния между медианой и средним значением:

${displaystyle left | {ilde {X}} - {ar {X}} ight | leq left ({frac {3} {5}} ight) ^ {frac {1} {2}} сигма примерно 0,7746 сигма}$.^[18]

Аналогичная связь существует между медианой и модой:

${displaystyle left | {ilde {X}} - mathrm {mode} ight | leq 3 ^ {frac {1} {2}} сигма примерно 1,732 сигма.}$

Неравенство Дженсена для медиан

Неравенство Дженсена утверждает, что для любой случайной величины Икс с конечным ожиданием E[Икс] и для любой выпуклой функции ж

${displaystyle f [E (x)] leq E [f (x)]}$

Это неравенство распространяется и на медианное значение. Мы говорим функцию f: ℝ → ℝ это Функция C если для любого т,

${displaystyle f ^ {- 1} left (, (- infty, t], ight) = {xin mathbb {R} mid f (x) leq t}}$

это закрытый интервал (с учетом вырожденных случаев единственная точка или пустой набор). Каждая функция C выпукла, но обратное неверно. Если ж является C-функцией, то

${displaystyle f (OperatorName {Median} [X]) leq operatorname {Median} [f (X)]}$

Если медианы не уникальны, утверждение верно для соответствующей супремы.^[19]

Медианы для образцов

Медиана выборки

Эффективное вычисление медианы выборки

Хотя сравнение-сортировка п предметы требует Ω(п бревно п) операции, алгоритмы выбора может вычислить kth-самый маленький из п Предметы только с Θ (п) операции. Сюда входит медиана, которая является п/2статистика-го порядка (или для четного числа выборок среднее арифметическое двух статистик среднего порядка).^[20]

У алгоритмов выбора есть обратная сторона: Ω (п) память, то есть они должны иметь полную выборку (или ее часть линейного размера) в памяти. Поскольку это, а также требование линейного времени может быть недопустимым, было разработано несколько процедур оценки медианы. Простое правило - это правило трех элементов, которое оценивает медиану как медиану трехэлементной подвыборки; это обычно используется как подпрограмма в быстрая сортировка алгоритм сортировки, который использует оценку медианы входных данных. Более того робастная оценка является Tukeyс девятый, которая является медианной из трех правил, применяемых с ограниченной рекурсией:^[21] если А образец выложен как множество, и

med3 (А) = медиана (А[1], А[п/2], А[п]),

тогда

девятый (А) = med3 (med3 (А[1 ... 1/3п]), med3 (А[1/3п ... 2/3п]), med3 (А[2/3п ... п]))

В средство - это средство оценки медианы, которое требует линейного времени, но сублинейной памяти, работающей за один проход по выборке.^[22]

Выборочное распределение

Распределение как среднего по выборке, так и медианы по выборке определялось Лаплас.^[23] Распределение медианы выборки из совокупности с функцией плотности ${displaystyle f (x)}$ асимптотически нормально со средним ${displaystyle m}$ и дисперсия^[24]

${displaystyle {frac {1} {4nf (m) ^ {2}}}}$

куда ${displaystyle m}$ это медиана ${displaystyle f (x)}$ и ${displaystyle n}$ размер выборки. Современное доказательство следует ниже. Результат Лапласа теперь понимается как частный случай асимптотическое распределение произвольных квантилей.

Для нормальных образцов плотность составляет ${displaystyle f (m) = 1 / {sqrt {2pi sigma ^ {2}}}}$, таким образом, для больших выборок дисперсия медианы равна ${displaystyle ({pi} / {2}) cdot (sigma ^ {2} / n).}$^[7] (См. Также раздел #Эффективность ниже.)

Вывод асимптотического распределения.

Мы принимаем размер выборки за нечетное число ${displaystyle N = 2n + 1}$ и предположим, что наша переменная непрерывна; формула для случая дискретных переменных приведена ниже в § Эмпирическая локальная плотность. Выборку можно резюмировать как «ниже медианы», «на медиане» и «выше медианы», что соответствует трехчленному распределению с вероятностями. ${displaystyle F (v-1)}$, ${displaystyle f (v)}$ и ${displaystyle 1-F (v)}$. Для непрерывной переменной вероятность того, что несколько значений выборки будут точно равны медиане, равна 0, поэтому можно вычислить плотность в точке ${displaystyle v}$ непосредственно из трехчленного распределения:

${displaystyle Pr [OperatorName {Median} = v], dv = {frac {(2n + 1)!} {n! n!}} F (v) ^ {n} (1-F (v)) ^ {n } f (v), dv}$.

Теперь мы вводим бета-функцию. Для целочисленных аргументов ${displaystyle alpha}$ и ${displaystyle eta}$, это можно выразить как ${displaystyle mathrm {B} (alpha, eta) = {frac {(alpha -1)! (eta -1)!} {(alpha + eta -1)!}}}$. Напомним также, что ${displaystyle f (v), dv = dF (v)}$. Используя эти отношения и устанавливая оба ${displaystyle alpha}$ и ${displaystyle eta}$ равно ${displaystyle n + 1}$ позволяет записать последнее выражение как

${displaystyle {frac {F (v) ^ {n} (1-F (v)) ^ {n}} {mathrm {B} (n + 1, n + 1)}}, dF (v)}$

Следовательно, функция плотности медианы представляет собой симметричное бета-распределение толкнул вперед к ${displaystyle F}$. Его среднее значение, как и следовало ожидать, составляет 0,5, а его дисперсия составляет ${displaystyle 1 / (4 (N + 2))}$. Посредством Правило цепи, соответствующая дисперсия медианы выборки равна

${displaystyle {frac {1} {4 (N + 2) f (m) ^ {2}}}}$.

Дополнительные 2 незначительны в пределе.

Эмпирическая локальная плотность

На практике функции ${displaystyle f}$ и ${displaystyle F}$ часто не известны или не предполагаются. Однако их можно оценить по наблюдаемому частотному распределению. В этом разделе мы приводим пример. Рассмотрим следующую таблицу, представляющую выборку из 3800 (дискретных) наблюдений:

Поскольку наблюдения имеют дискретные значения, построение точного распределения медианы не является немедленным переводом приведенного выше выражения для ${displaystyle Pr (operatorname {Median} = v)}$; можно (и обычно имеет) несколько экземпляров медианы в одной выборке. Итак, мы должны суммировать все эти возможности:

${displaystyle Pr (operatorname {Median} = v) = sum _ {i = 0} ^ {n} sum _ {k = 0} ^ {n} {frac {N!} {i! (Nik)! k!} } F (v-1) ^ {i} (1-F (v)) ^ {k} f (v) ^ {Nik}}$

Здесь, я количество точек строго меньше медианы и k число строго больше.

Используя эти предварительные сведения, можно исследовать влияние размера выборки на стандартные ошибки среднего и медианы. Наблюдаемое среднее значение составляет 3,16, наблюдаемая необработанная медиана - 3, а наблюдаемая интерполированная медиана - 3,174. Следующая таблица дает некоторую статистику сравнения.

Ожидаемое значение медианы немного уменьшается по мере увеличения размера выборки, в то время как, как и следовало ожидать, стандартные ошибки медианы и среднего пропорциональны обратному квадратному корню из размера выборки. Асимптотическое приближение проявляет осторожность из-за переоценки стандартной ошибки.

Оценка отклонения от выборочных данных

Значение ${displaystyle (2f (x)) ^ {- 2}}$- асимптотическое значение ${displaystyle n ^ {- {гидроразрыв {1} {2}}} (u -m)}$ куда ${displaystyle u}$ медиана населения - изучалась несколькими авторами. Стандартный "удалить один" складной нож метод производит непоследовательный полученные результаты.^[25] Альтернатива - метод «удалить k» - где ${displaystyle k}$ растет с размером выборки, асимптотически согласована.^[26] Этот метод может быть дорогостоящим для больших наборов данных. Известно, что оценка бутстрапа непротиворечива,^[27] но сходится очень медленно (порядок из ${displaystyle n ^ {- {гидроразрыв {1} {4}}}}$).^[28] Были предложены другие методы, но их поведение может отличаться для больших и малых выборок.^[29]

Эффективность

В эффективность медианы выборки, измеряемой как отношение дисперсии среднего к дисперсии медианы, зависит от размера выборки и основного распределения населения. За образец размера ${displaystyle N = 2n + 1}$ от нормальное распределение, эффективность при больших N равна

${displaystyle {frac {2} {pi}} {frac {N + 2} {N}}}$

Эффективность стремится к ${displaystyle {frac {2} {pi}}}$ в качестве ${displaystyle N}$ стремится к бесконечности.

Другими словами, относительная дисперсия медианы будет ${displaystyle pi / 2approx 1,57}$, или на 57% больше дисперсии среднего - относительного стандартная ошибка медианы будет ${displaystyle (pi / 2) ^ {frac {1} {2}} примерно 1,25}$, или на 25% больше, чем стандартная ошибка среднего, ${displaystyle sigma / {sqrt {n}}}$ (см. также раздел #Выборочное распределение над.).^[30]

Другие оценщики

Для одномерных распределений, которые симметричный около одной медианы, Оценка Ходжеса – Лемана это крепкий и очень эффективный оценщик медианы населения.^[31]

Если данные представлены статистическая модель с указанием конкретной семьи распределения вероятностей, то оценки медианы могут быть получены путем подгонки этого семейства распределений вероятностей к данным и вычисления теоретической медианы подобранного распределения.^{[нужна цитата]} Интерполяция Парето это приложение, когда предполагается, что у населения есть Распределение Парето.

Многомерная медиана

Ранее в этой статье обсуждалась одномерная медиана, когда выборка или совокупность были одномерными. Когда размерность равна двум или выше, существует несколько концепций, расширяющих определение одномерной медианы; каждая такая многомерная медиана согласуется с одномерной медианной, когда размерность ровно одна.^{[31][32][33][34]}

Маргинальная медиана

Маргинальная медиана определяется для векторов, определенных относительно фиксированного набора координат. Маргинальная медиана определяется как вектор, компоненты которого являются одномерными медианами. Маргинальную медиану легко вычислить, и ее свойства были изучены Пури и Сеном.^[31][35]

Геометрическая медиана

В геометрическая медиана дискретного набора точек выборки ${displaystyle x_ {1}, ldots x_ {N}}$ в евклидовом пространстве^[а] точка, минимизирующая сумму расстояний до точек выборки.

${displaystyle {hat {mu}} = {underset {mu in mathbb {R} ^ {m}} {operatorname {arg, min}}} сумма _ {n = 1} ^ {N} left | mu -x_ {n } ight | _ {2}}$

В отличие от маргинальной медианы геометрическая медиана равна эквивариантный относительно евклидова преобразования подобия Такие как переводы и вращения.

Центральная точка

Альтернативным обобщением медианы в более высоких измерениях является Центральная точка.

Другие концепции, относящиеся к медиане

Интерполированная медиана

При работе с дискретной переменной иногда полезно рассматривать наблюдаемые значения как средние точки лежащих в основе непрерывных интервалов. Примером этого является шкала Лайкерта, по которой мнения или предпочтения выражаются по шкале с заданным количеством возможных ответов. Если шкала состоит из положительных целых чисел, наблюдение 3 можно рассматривать как интервал от 2,50 до 3,50.Можно оценить медианное значение базовой переменной. Если, скажем, 22% наблюдений имеют значение 2 или ниже и 55,0% имеют значение 3 или ниже (поэтому 33% имеют значение 3), то медиана ${displaystyle m}$ равно 3, так как медиана - это наименьшее значение ${displaystyle x}$ для которого ${displaystyle F (x)}$ больше половины. Но интерполированная медиана находится где-то между 2,50 и 3,50. Сначала добавляем половину ширины интервала ${displaystyle w}$ к медиане, чтобы получить верхнюю границу медианного интервала. Затем мы вычитаем ту долю ширины интервала, которая равна доле 33%, лежащих выше отметки 50%. Другими словами, мы делим ширину интервала пропорционально количеству наблюдений. В этом случае 33% делятся на 28% ниже медианы и 5% выше нее, поэтому мы вычитаем 5/33 ширины интервала из верхней границы 3,50, чтобы получить интерполированное медианное значение 3,35. Более формально, если значения ${displaystyle f (x)}$ известны, интерполированная медиана может быть вычислена из

${displaystyle m_ {ext {int}} = m + wleft [{frac {1} {2}} - {frac {F (m) - {frac {1} {2}}} {f (m)}} полет ].}$

В качестве альтернативы, если в наблюдаемом образце есть ${displaystyle k}$ баллы выше средней категории, ${displaystyle j}$ оценки в нем и ${displaystyle i}$ баллов ниже этого значения, то интерполированная медиана равна

${displaystyle m_ {ext {int}} = m- {frac {w} {2}} left [{frac {k-i} {j}} ight].}$

Псевдо-медиана

Для одномерных распределений, которые симметричный около одной медианы, Оценка Ходжеса – Лемана является надежным и высокоэффективным средством оценки медианы населения; для несимметричных распределений оценка Ходжеса – Лемана является надежной и высокоэффективной оценкой совокупности псевдо-медиана, которое является медианой симметризованного распределения и близко к медиане совокупности.^[37] Оценка Ходжеса – Лемана была обобщена на многомерные распределения.^[38]

Варианты регресса

В Оценка Тейла – Сена это метод для крепкий линейная регрессия на основе определения медиан склоны.^[39]

Медианный фильтр

В контексте обработка изображений из монохромный растровые изображения есть тип шума, известный как соль и перец шум, когда каждый пиксель независимо становится черным (с некоторой малой вероятностью) или белым (с некоторой малой вероятностью), и не изменяется в противном случае (с вероятностью, близкой к 1). Изображение, построенное из средних значений окрестностей (например, квадрат 3 × 3), может эффективно снизить уровень шума в этом случае.^{[нужна цитата]}

Кластерный анализ

В кластерный анализ, то k-medians кластеризация Алгоритм обеспечивает способ определения кластеров, в котором критерий максимизации расстояния между кластерными средствами, который используется в k-означает кластеризацию, заменяется максимальным расстоянием между медианными кластерами.

Срединно-срединная линия

Это метод надежной регрессии. Идея восходит к Вальд в 1940 году, который предложил разделить набор двумерных данных на две половины в зависимости от значения независимого параметра ${displaystyle x}$: левая половина со значениями меньше медианы и правая половина со значениями больше медианы.^[40] Он предложил воспользоваться средствами зависимых ${displaystyle y}$ и независимый ${displaystyle x}$ переменные левой и правой половин и оценка наклона линии, соединяющей эти две точки. Затем линию можно было бы скорректировать, чтобы она соответствовала большинству точек в наборе данных.

Наир и Шривастава в 1942 г. предложили аналогичную идею, но вместо этого выступили за разделение выборки на три равные части перед вычислением средних значений подвыборок.^[41] Браун и Муд в 1951 году предложили идею использования медиан двух подвыборок, а не средних.^[42] Тьюки объединил эти идеи и рекомендовал разделить выборку на три подвыборки равного размера и оценить линию на основе медиан подвыборок.^[43]

Средне-несмещенные оценки

Любой иметь в видуобъективная оценка сводит к минимуму рисковать (ожидаемый убыток) относительно квадрата ошибки функция потерь, как заметил Гаусс. А медианаобъективная оценка сводит к минимуму риск в отношении абсолютное отклонение функция потерь, как наблюдается Лаплас. Другой функции потерь используются в статистическая теория, особенно в надежная статистика.

Теория медиан-несмещенных оценок была возрождена Джордж У. Браун в 1947 г .:^[44]

Оценка одномерного параметра θ будет называться несмещенной по медиане, если для фиксированного θ медиана распределения оценки находится на значении θ; т.е. оценка занижается так же часто, как и завышается. Для большинства целей это требование выполняет столько же, сколько и требование несмещенного среднего, и обладает дополнительным свойством, состоящим в том, что оно инвариантно относительно однозначного преобразования.

— стр. 584

Сообщалось о других свойствах средне-несмещенных оценок.^{[45][46][47][48]} Несмещенные по медиане оценки инвариантны относительно однозначные преобразования.

Существуют методы построения оптимальных оценок без смещения по медиане (в некотором смысле аналогичные свойству минимальной дисперсии для оценок с несмещенным средним). Такие конструкции существуют для вероятностных распределений, имеющих монотонные функции правдоподобия.^[49][50] Одна такая процедура является аналогом Процедура Рао – Блэквелла для оценок со средним несмещением: процедура выполняется для меньшего класса распределений вероятностей, чем процедура Рао-Блэквелла, но для большего класса функции потерь.^[51]

История

Научные исследователи на древнем Ближнем Востоке, похоже, не использовали сводную статистику в целом, вместо этого выбирая значения, которые предлагали максимальную согласованность с более широкой теорией, объединяющей широкий спектр явлений.^[52] В рамках средиземноморского (а затем и европейского) научного сообщества статистика, такая как среднее значение, по сути, является развитием средневековья и раннего Нового времени. (История медианы за пределами Европы и ее предшественников остается относительно неизученной.)

Идея медианы возникла в XIII веке в Талмуд, чтобы справедливо проанализировать расходящиеся оценки.^[53][54] Однако эта концепция не распространилась на более широкое научное сообщество.

Вместо этого ближайшим предком современной медианы является средний диапазон, изобретенный Аль-Бируни.^[55]:31[56] Передача работ Аль-Бируни более поздним ученым неясна. Аль-Бируни применил свою технику к анализ металлов, но после того, как он опубликовал свою работу, большинство аналитиков по-прежнему принимали самые неблагоприятные значения своих результатов, чтобы они не казались изменять.^[55]:35–8 Однако усиление судоходства в море во время Эпоха открытий означало, что судоводителям все чаще приходилось пытаться определять широту в неблагоприятную погоду против враждебных берегов, что привело к возобновлению интереса к сводной статистике. Независимо от того, открыт ли он заново или изобретен независимо, он рекомендован морским мореплавателям в «Инструкциях к путешествию Рэли в Гвиану 1595 года».^[55]:45–8

Идея медианы, возможно, впервые появилась в Эдвард Райткнига 1599 года Определенные ошибки в навигации в разделе о компас навигация. Райт не хотел отказываться от измеренных значений и, возможно, чувствовал, что медиана, включающая большую часть набора данных, чем средний диапазон - был более правым. Однако Райт не привел примеров использования своей техники, что затрудняет проверку того, что он описал современное понятие медианы.^[52][56][b] Медиана (в контексте вероятности) определенно фигурирует в соответствии Кристиан Гюйгенс, но как пример статистики, не подходящей для актуарная практика.^[52]

Самая ранняя рекомендация медианы датируется 1757 годом, когда Роджер Джозеф Боскович разработал метод регрессии на основе L¹ норма и, следовательно, неявно на медиане.^[52][57] В 1774 г. Лаплас сделал это желание явным: он предложил использовать медиану в качестве стандартной оценки значения апостериорной PDF. Конкретный критерий заключался в минимизации ожидаемой величины ошибки; ${displaystyle | альфа -альфа ^ {*} |}$ куда ${displaystyle alpha ^ {*}}$ оценка и ${displaystyle alpha}$ истинное значение. С этой целью Лаплас определил распределения как выборочного среднего, так и выборочного медианного в начале 1800-х годов.^[23][58] Однако десять лет спустя Гаусс и Legendre разработал наименьших квадратов метод, который минимизирует ${displaystyle (альфа-альфа ^ {*}) ^ {2}}$ чтобы получить среднее значение. В контексте регрессии инновация Гаусса и Лежандра предлагает гораздо более простые вычисления. Следовательно, предложение Лапласа обычно отклонялось до тех пор, пока вычислительные устройства 150 лет спустя (и это все еще относительно необычный алгоритм).^[59]

Антуан Огюстен Курно в 1843 г. был первый^[60] использовать термин медиана (Валер Медиан) для значения, которое делит распределение вероятностей на две равные половины. Густав Теодор Фехнер использовали медианное значение (Centralwerth) в социологических и психологических явлениях.^[61] Ранее он использовался только в астрономии и смежных областях. Густав Фехнер популяризировал медиану в формальном анализе данных, хотя ранее она использовалась Лапласом,^[61] а медиана появилась в учебнике Ф. Я. Эджворт.^[62] Фрэнсис Гальтон использовал английский термин медиана в 1881 г.,^[63][64] использовав ранее термины среднее значение в 1869 г., а средний в 1880 г.^[65][66]

Статистики активно поощряли использование медиан на протяжении всего XIX века из-за их интуитивной ясности и простоты вычислений вручную. Однако понятие медианы не поддается теории высших моментов, а также теории высших моментов. среднее арифметическое делает, и его гораздо труднее вычислить на компьютере. В результате в течение 20 века медиана неуклонно вытеснялась как понятие общего среднего средним арифметическим.^[52][56]

Смотрите также

• Медоиды которые являются обобщением медианы в более высоких измерениях
• Основная тенденция
  • Иметь в виду
  • Режим
• Абсолютное отклонение
• Смещение оценщика
• Концентрация меры за Липшицевы функции
• Медиана (геометрия)
• Медианный график
• Медианный поиск
• Средний наклон
• Теория медианного избирателя
• Взвешенная медиана

Примечания

Рекомендации

внешняя ссылка

• «Медиана (в статистике)», Энциклопедия математики, EMS Press, 2001 [1994]
• Медиана как средневзвешенное арифметическое всех наблюдений выборки
• Он-лайн калькулятор
• Расчет медианы
• Проблема, связанная со средним значением, медианой и модой.
• Вайсштейн, Эрик В. «Статистическая медиана». MathWorld.
• Скрипт Python для вычислений медианы и показатели неравенства доходов
• Быстрое вычисление медианы путем последовательного биннинга
• "Среднее, медиана, мода и асимметрия", Учебное пособие, разработанное для студентов первого курса психологии Оксфордского университета на основе рабочего примера.
• Сложная задача по SAT-математике, которую даже совет колледжа ошибся: Эндрю Дэниэлс в Популярная механика

В этой статье используется материал из Median по распределению на PlanetMath, который находится под лицензией Лицензия Creative Commons Attribution / Share-Alike.