Скользящее среднее

Тип статистической меры по подмножествам набора данных

Сглаживание зашумленного синуса (синяя кривая) с помощью скользящего среднего (красная кривая).

В статистике скользящее среднее ( скользящее среднее или скользящее среднее ) — это расчет для анализа точек данных путем создания серии средних значений из различных выборок полного набора данных. Его также называют скользящим средним ( MM ) ^[1] или скользящим средним и представляют собой тип фильтра с конечной импульсной характеристикой . Варианты включают: простые, накопительные или взвешенные формы (описанные ниже).

Фильтр скользящего среднего иногда называют коробчатым фильтром, особенно если за ним следует прореживание .

Учитывая серию чисел и фиксированный размер подмножества, первый элемент скользящего среднего получается путем взятия среднего значения исходного фиксированного подмножества числового ряда. Затем подмножество модифицируется путем «сдвига вперед»; то есть исключая первый номер серии и включая следующее значение в подмножестве.

Скользящее среднее обычно используется с данными временных рядов , чтобы сгладить краткосрочные колебания и выделить долгосрочные тенденции или циклы. Порог между краткосрочным и долгосрочным зависит от приложения, и параметры скользящего среднего будут установлены соответствующим образом. Он также используется в экономике для изучения валового внутреннего продукта, занятости или других макроэкономических временных рядов. С математической точки зрения скользящее среднее представляет собой тип свертки , поэтому его можно рассматривать как пример фильтра нижних частот , используемого при обработке сигналов . При использовании с данными, не являющимися временными рядами, скользящее среднее фильтрует высокочастотные компоненты без какой-либо конкретной связи со временем, хотя обычно подразумевается некоторый вид упорядочения. Упрощенно это можно рассматривать как сглаживание данных.

Простая скользящая средняя

В финансовых приложениях простая скользящая средняя ( SMA ) представляет собой невзвешенное среднее предыдущих точек данных. Однако в науке и технике среднее значение обычно берется из равного количества данных по обе стороны от центрального значения. Это гарантирует, что изменения среднего значения совпадают с изменениями данных, а не смещаются во времени. ${\displaystyle k}$Примером простого равновзвешенного скользящего среднего является среднее значение по последним записям набора данных, содержащего записи. Пусть эти точки данных будут . Это могут быть цены закрытия акции. Среднее значение по последним точкам данных (дням в этом примере) обозначается и рассчитывается как: ${\displaystyle k}$ ${\displaystyle n}$ ${\displaystyle p_{1},p_{2},\dots ,p_{n}}$ ${\displaystyle k}$ ${\displaystyle {\textit {SMA}}_{k}}$

$${\displaystyle {\begin{aligned}{\textit {SMA}}_{k}&={\frac {p_{n-k+1}+p_{n-k+2}+\cdots +p_{n}}{k}}\\&={\frac {1}{k}}\sum _{i=n-k+1}^{n}p_{i}\end{aligned}}}$$

При вычислении следующего среднего значения с той же шириной выборки учитывается диапазон от до . В сумму попадает новое значение , а самое старое значение выпадает. Это упрощает расчеты за счет повторного использования предыдущего среднего значения . ${\displaystyle {\textit {SMA}}_{k,{\text{next}}}}$ ${\displaystyle k}$ ${\displaystyle n-k+2}$ ${\displaystyle n+1}$ ${\displaystyle p_{n+1}}$ ${\displaystyle p_{n-k+1}}$ ${\displaystyle {\textit {SMA}}_{k,{\text{prev}}}}$

$${\displaystyle {\begin{aligned}{\textit {SMA}}_{k,{\text{next}}}&={\frac {1}{k}}\sum _{i=n-k+2}^{n+1}p_{i}\\&={\frac {1}{k}}{\Big (}\underbrace {p_{n-k+2}+p_{n-k+3}+\dots +p_{n}+p_{n+1}} _{\sum _{i=n-k+2}^{n+1}p_{i}}+\underbrace {p_{n-k+1}-p_{n-k+1}} _{=0}{\Big )}\\&=\underbrace {{\frac {1}{k}}{\Big (}p_{n-k+1}+p_{n-k+2}+\dots +p_{n}{\Big )}} _{={\textit {SMA}}_{k,{\text{prev}}}}-{\frac {p_{n-k+1}}{k}}+{\frac {p_{n+1}}{k}}\\&={\textit {SMA}}_{k,{\text{prev}}}+{\frac {1}{k}}{\Big (}p_{n+1}-p_{n-k+1}{\Big )}\end{aligned}}}$$

циклического буфера

Таким образом, во время первоначального заполнения FIFO/циклического буфера окно выборки равно размеру набора данных, и расчет среднего значения выполняется как кумулятивное скользящее среднее. ${\displaystyle k=n}$

Выбранный период ( ) зависит от типа интересующего движения, например краткосрочного, промежуточного или долгосрочного. ${\displaystyle k}$

Если используемые данные не сосредоточены вокруг среднего значения, простое скользящее среднее отстает от последних данных на половину ширины выборки. На SMA также может непропорционально влиять выпадение старых данных или поступление новых данных. Одной из характеристик SMA является то, что если данные имеют периодические колебания, то применение SMA этого периода устранит это изменение (среднее значение всегда содержит один полный цикл). Но идеально регулярный цикл встречается редко. ^[2]

Для ряда приложений выгодно избегать сдвига, вызванного использованием только «прошлых» данных. Следовательно, центральное скользящее среднее можно вычислить, используя данные, равномерно расположенные по обе стороны от точки в ряду, где рассчитывается среднее значение. ^[3] Для этого необходимо использовать нечетное количество точек в окне выборки.

Основным недостатком SMA является то, что он пропускает значительный объем сигнала, длина которого меньше длины окна. Хуже того, он фактически переворачивает его. ^{[ нужна цитация ]} Это может привести к неожиданным артефактам, таким как пики в сглаженном результате, появляющиеся там, где в данных были провалы. Это также приводит к тому, что результат оказывается менее плавным, чем ожидалось, поскольку некоторые из более высоких частот не удаляются должным образом.

Его частотная характеристика представляет собой тип фильтра нижних частот, называемый синхрочастотой .

Совокупное среднее значение

При кумулятивном среднем ( CA ) данные поступают в упорядоченном потоке данных, и пользователь хотел бы получить среднее значение всех данных до текущих данных. Например, инвестору может потребоваться средняя цена всех сделок с акциями по конкретной акции до текущего момента. При возникновении каждой новой транзакции средняя цена на момент транзакции может быть рассчитана для всех транзакций до этого момента с использованием совокупного среднего значения, обычно равновзвешенного среднего значения последовательности из n значений до текущего момента: ${\displaystyle x_{1}.\ldots ,x_{n}}$

$${\displaystyle {\textit {CA}}_{n}={{x_{1}+\cdots +x_{n}} \over n}\,.}$$

Метод грубой силы для расчета этого состоит в том, чтобы сохранить все данные, вычислить сумму и разделить ее на количество точек каждый раз, когда поступают новые данные. Однако можно просто обновить совокупное среднее значение, как только оно станет доступным, используя формулу ${\displaystyle x_{n+1}}$

$${\displaystyle {\textit {CA}}_{n+1}={{x_{n+1}+n\cdot {\textit {CA}}_{n}} \over {n+1}}.}$$

Таким образом, текущее совокупное среднее для нового значения равно предыдущему совокупному среднему, умноженному на n , плюс последнее значение, разделенное на количество полученных на данный момент баллов, n +1. Когда все данные поступят ( n = N ), совокупное среднее будет равно итоговому среднему. Также возможно сохранить промежуточную сумму данных, а также количество точек и разделить сумму на количество точек, чтобы получить СА каждый раз при поступлении новых данных.

Вывод формулы кумулятивного среднего значения прост. С использованием

$${\displaystyle x_{1}+\cdots +x_{n}=n\cdot {\textit {CA}}_{n}}$$

n + 1

$${\displaystyle x_{n+1}=(x_{1}+\cdots +x_{n+1})-(x_{1}+\cdots +x_{n})}$$

$${\displaystyle x_{n+1}=(n+1)\cdot {\textit {CA}}_{n+1}-n\cdot {\textit {CA}}_{n}}$$

Решение этого уравнения для результатов ${\displaystyle {\textit {CA}}_{n+1}}$

$${\displaystyle {\begin{aligned}{\textit {CA}}_{n+1}&={x_{n+1}+n\cdot {\textit {CA}}_{n} \over {n+1}}\\[6pt]&={x_{n+1}+(n+1-1)\cdot {\textit {CA}}_{n} \over {n+1}}\\[6pt]&={(n+1)\cdot {\textit {CA}}_{n}+x_{n+1}-{\textit {CA}}_{n} \over {n+1}}\\[6pt]&={{\textit {CA}}_{n}}+{{x_{n+1}-{\textit {CA}}_{n}} \over {n+1}}\end{aligned}}}$$

Взвешенное скользящее среднее

Средневзвешенное значение — это среднее значение, которое имеет умножающие коэффициенты, позволяющие придать разный вес данным в разных позициях окна выборки. Математически взвешенное скользящее среднее представляет собой свертку данных с фиксированной весовой функцией. Одно из приложений удаляет пикселизацию из цифрового графического изображения. ^{[ нужна цитата ]}

В финансовой сфере, а точнее, при анализе финансовых данных, взвешенное скользящее среднее (WMA) имеет особое значение весов, которые уменьшаются в арифметической прогрессии. ^[4] В n -дневном WMA последний день имеет вес n , второй по времени и т. д., вплоть до единицы. ${\displaystyle n-1}$

$${\displaystyle {\text{WMA}}_{M}={np_{M}+(n-1)p_{M-1}+\cdots +2p_{((M-n)+2)}+p_{((M-n)+1)} \over n+(n-1)+\cdots +2+1}}$$

Веса WMA n = 15

Знаменатель представляет собой треугольник, равный числу. В более общем случае знаменатель всегда будет суммой отдельных весов. ${\textstyle {\frac {n(n+1)}{2}}.}$

При вычислении WMA для последовательных значений разница между числителями и равна . Если обозначить сумму через , то ${\displaystyle {\text{WMA}}_{M+1}}$ ${\displaystyle {\text{WMA}}_{M}}$ ${\displaystyle np_{M+1}-p_{M}-\dots -p_{M-n+1}}$ ${\displaystyle p_{M}+\dots +p_{M-n+1}}$ ${\displaystyle {\text{Total}}_{M}}$

$${\displaystyle {\begin{aligned}{\text{Total}}_{M+1}&={\text{Total}}_{M}+p_{M+1}-p_{M-n+1}\\[3pt]{\text{Numerator}}_{M+1}&={\text{Numerator}}_{M}+np_{M+1}-{\text{Total}}_{M}\\[3pt]{\text{WMA}}_{M+1}&={{\text{Numerator}}_{M+1} \over n+(n-1)+\cdots +2+1}\end{aligned}}}$$

График справа показывает, как веса уменьшаются от максимального веса для самых последних данных до нуля. Его можно сравнить с весами в следующей экспоненциальной скользящей средней.

Экспоненциальная скользящая средняя

Экспоненциальное скользящее среднее (EMA) , также известное как экспоненциально взвешенное скользящее среднее (EWMA) [ ^5] — это фильтр первого порядка с бесконечной импульсной характеристикой , который применяет весовые коэффициенты, которые уменьшаются экспоненциально . Вес для каждого более старого элемента данных уменьшается экспоненциально, никогда не достигая нуля. Эта формулировка соответствует Хантеру (1986). ^[6]

Другие веса

Другие системы взвешивания используются время от времени – например, при торговле акциями взвешивание по объему будет учитывать каждый период времени пропорционально объему торгов.

Еще одним методом взвешивания, используемым актуариями, является 15-пунктовая скользящая средняя Спенсера ^[7] (центральная скользящая средняя). Его симметричные весовые коэффициенты равны [−3, −6, −5, 3, 21, 46, 67, 74, 67, 46, 21, 3, −5, −6, −3], что составляет[1, 1, 1, 1] × [1, 1, 1, 1] × [1, 1, 1, 1, 1] × [−3, 3, 4, 3, −3]/320и оставляет выборки любого квадратичного или кубического полинома неизменными. ^{[8] [9]}

За пределами мира финансов взвешенные средства бега имеют множество форм и применений. Каждая весовая функция или «ядро» имеет свои особенности. В технике и науке частотная и фазовая характеристика фильтра часто имеют первостепенное значение для понимания желаемых и нежелательных искажений, которые конкретный фильтр будет применять к данным.

Среднее значение не просто «сглаживает» данные. Среднее значение — это разновидность фильтра нижних частот. Чтобы сделать правильный выбор, следует понимать влияние конкретного используемого фильтра. По этому поводу во французской версии этой статьи обсуждаются спектральные эффекты трех видов средних (кумулятивных, экспоненциальных и гауссовских).

Движущаяся медиана

С статистической точки зрения скользящее среднее, когда оно используется для оценки основного тренда во временном ряду, подвержено редким событиям, таким как быстрые потрясения или другие аномалии. Более надежная оценка тренда — это простая скользящая медиана за n моментов времени:

$${\displaystyle {\widetilde {p}}_{\text{SM}}={\text{Median}}(p_{M},p_{M-1},\ldots ,p_{M-n+1})}$$

медианаnиндексируемого списка пропуска^[10]

Статистически скользящее среднее является оптимальным для восстановления основного тренда временного ряда, когда колебания тренда нормально распределены . Однако нормальное распределение не придает высокой вероятности очень большие отклонения от тренда, что объясняет, почему такие отклонения будут иметь непропорционально большое влияние на оценку тренда. Можно показать, что если вместо этого предположить, что флуктуации распределены по Лапласу , то скользящая медиана является статистически оптимальной. ^[11] Для заданной дисперсии распределение Лапласа придает более высокую вероятность редким событиям, чем нормальное, что объясняет, почему скользящая медиана переносит потрясения лучше, чем скользящее среднее.

Когда простая скользящая медиана, описанная выше, является центральной, сглаживание идентично медианному фильтру , который применяется, например, при обработке сигналов изображений. Скользящая медиана является более надежной альтернативой скользящей средней, когда дело доходит до оценки основного тренда во временном ряду. Хотя скользящее среднее является оптимальным для восстановления тренда, если колебания вокруг тренда нормально распределены, оно подвержено влиянию редких событий, таких как быстрые потрясения или аномалии. Напротив, скользящая медиана, которая находится путем сортировки значений внутри временного окна и нахождения значения в середине, более устойчива к влиянию таких редких событий. Это связано с тем, что для данной дисперсии распределение Лапласа, которое предполагает скользящая медиана, придает более высокую вероятность редким событиям, чем нормальное распределение, которое предполагает скользящее среднее. В результате скользящая медиана обеспечивает более надежную и стабильную оценку основного тренда, даже если на временной ряд влияют большие отклонения от тренда. Кроме того, сглаживание скользящей медианы идентично медианному фильтру, который имеет различные применения при обработке сигналов изображений.

Модель регрессии скользящего среднего

В модели регрессии скользящего среднего предполагается, что интересующая переменная представляет собой взвешенное скользящее среднее ненаблюдаемых независимых членов ошибки; веса в скользящем среднем являются параметрами, которые необходимо оценить.

Эти две концепции часто путают из-за их названия, но, хотя они имеют много общего, они представляют собой разные методы и используются в очень разных контекстах.

Смотрите также

• Экспоненциальное сглаживание
• Локальная регрессия (LOESS и LOWESS)
• Сглаживание ядра
• Индикатор схождения/расхождения скользящих средних
• Мартингейл (теория вероятностей)
• Пересечение скользящих средних
• Перемещение по методу наименьших квадратов
• Растущая скользящая средняя
• Роллинг хеша
• Промежуточная сумма
• Фильтр Савицкого – Голея
• Функция окна
• Экспоненциальная скользящая средняя с нулевой задержкой

Рекомендации

1. Гидрологическая изменчивость поймы реки Косумнес (Бут и др., Наука об устье и водоразделе Сан-Франциско, том 4, выпуск 2, 2006 г.)
2. Статистический анализ , Я-Лунь Чоу, Holt International, 1975, ISBN  0-03-089422-0 , раздел 17.9.
3. Вывод и свойства простого центрального скользящего среднего полностью приведены в фильтре Савицкого – Голея .
4. «Взвешенные скользящие средние: основы». Инвестопедия.
5. «РАБОТА С ШУМОМ ИЗМЕРЕНИЙ — Усредняющий фильтр» . Архивировано из оригинала 29 марта 2010 г. Проверено 26 октября 2010 г.
6. Электронный справочник NIST/SEMATECH по статистическим методам: одиночное экспоненциальное сглаживание в Национальном институте стандартов и технологий
7. 15-пунктовая скользящая средняя Спенсера — из Wolfram MathWorld
8. Роб Дж. Гайндман. «Скользящие средние». 08.11.2009. Доступ 20 августа 2020 г.
9. Адитья Гунтубойина. «Статистика 153 (временной ряд): третья лекция». 24 января 2012 г. Доступ осуществлен 7 января 2024 г.
10. «Эффективная промежуточная медиана с использованием индексируемого списка пропусков «Рецепты Python «Код ActiveState»».
11. GR Arce, «Нелинейная обработка сигналов: статистический подход», Wiley: Нью-Джерси, США, 2005.

Внешние ссылки

• Настроено, программно использует пересечения скользящих средних