stringtranslate.com

Распределение произведения двух случайных величин

Распределение продукта — это распределение вероятностей , построенное как распределение произведения случайных величин , имеющих два других известных распределения. Учитывая две статистически независимые случайные величины X и Y , распределение случайной величины Z , которая формируется как продукт, является распределением продукта .

Распределение продукта представляет собой PDF-файл произведения выборочных значений. Это не то же самое, что продукт их PDF-файлов, однако эти концепции часто неоднозначно называют «продуктом гауссиан».

Алгебра случайных величин

Продукт представляет собой один из типов алгебры для случайных величин: с распределением продукта связаны распределение отношений , распределение суммы (см. Список сверток распределений вероятностей ) и распределение разностей. В более общем смысле можно говорить о комбинациях сумм, разностей, произведений и отношений.

Многие из этих распределений описаны в книге Мелвина Д. Спрингера 1979 года « Алгебра случайных величин» . [1]

Вывод для независимых случайных величин

Если и являются двумя независимыми, непрерывными случайными величинами, описываемыми функциями плотности вероятности , то функция плотности вероятности равна [ 2]

Доказательство

Сначала напишем кумулятивную функцию распределения , начиная с ее определения

Мы находим искомую функцию плотности вероятности, взяв производную обеих частей по . Поскольку в правой части появляется только в пределах интегрирования, производная легко вычисляется с использованием фундаментальной теоремы исчисления и правила цепочки . (Обратите внимание на отрицательный знак, который необходим, когда переменная попадает в нижний предел интегрирования.)

где абсолютное значение используется для удобного объединения двух терминов. [3]

Альтернативное доказательство

Более быстрое и компактное доказательство начинается с того же этапа записи кумулятивного распределения, начиная с его определения:

где – ступенчатая функция Хевисайда и служит для ограничения области интегрирования значениями и удовлетворяющими .

Мы находим искомую функцию плотности вероятности, взяв производную обеих частей по .

где мы используем свойства перевода и масштабирования дельта-функции Дирака .

Более интуитивное описание процедуры показано на рисунке ниже. PDF-файл соединения существует в плоскости - , а дуга постоянного значения показана заштрихованной линией. Чтобы найти предельную вероятность на этой дуге, проинтегрируйте приращения площади на этом контуре.

Диаграмма, иллюстрирующая распределение продуктов двух переменных.

Начиная с , у нас есть . Таким образом, приращение вероятности равно . Поскольку подразумевается , мы можем связать приращение вероятности с -приращением , а именно . Тогда интегрирование окончено , дает .

Байесовская интерпретация

Пусть — случайная выборка, полученная из распределения вероятностей . Масштабирование генерирует выборку из масштабированного распределения , которое можно записать как условное распределение .

Пусть это случайная величина с PDF , распределение масштабированной выборки становится, и при интегрировании мы получаем , что оно получено из этого распределения . Однако, подставив определение, мы также получим то, что имеет ту же форму, что и распределение продукта выше. Таким образом, байесовское апостериорное распределение представляет собой распределение произведения двух независимых случайных выборок и .

Для случая, когда одна переменная является дискретной, пусть вероятность находится на уровнях с . Условная плотность . Поэтому .

Ожидание произведения случайных величин

Когда две случайные величины статистически независимы, математическое ожидание их продукта является продуктом их ожиданий . Это можно доказать с помощью закона полного ожидания :

Во внутреннем выражении Y является константой. Следовательно:

Это верно, даже если X и Y статистически зависимы, и в этом случае они являются функцией Y . В особом случае, когда X и Y статистически независимы, это константа, независимая от Y. Следовательно:

Дисперсия произведения независимых случайных величин

Пусть – некоррелированные случайные величины со средними значениями и дисперсиями . Если, кроме того, случайные величины и некоррелированы, то дисперсия произведения XY равна [4]

В случае произведения более двух переменных, если они статистически независимы, то [5] дисперсия их произведения равна

Характеристическая функция произведения случайных величин

Предположим, что X , Y — независимые случайные величины. Характеристическая функция X равна , а распределение Y известно. Тогда из закона полного ожидания имеем [6]

Если характеристические функции и распределения как X , так и Y известны, то альтернативный вариант также имеет место.

Преобразование Меллина

Преобразование Меллина распределения с поддержкой только на случайной выборке :

Обратное преобразование

если это две независимые случайные выборки из разных распределений, то преобразование Меллина их произведения равно произведению их преобразований Меллина:

Если s ограничено целочисленными значениями, более простой результат:

Таким образом, моменты случайного произведения являются произведением соответствующих моментов , и это распространяется на нецелые моменты, например

PDF функции можно восстановить по ее моментам, используя метод аппроксимации седловой точки .

Дальнейший результат состоит в том, что для независимых X , Y

Пример гамма-распределения Чтобы проиллюстрировать, как произведение моментов дает гораздо более простой результат, чем нахождение моментов распределения продукта, давайте выберем из двух гамма-распределений с параметрами , моменты которых равны

Умножение соответствующих моментов дает результат преобразования Меллина.

Независимо от этого известно, что произведение двух независимых выборок с гамма-распределением (~Gamma(α,1) и Gamma(β,1)) имеет K-распределение :

Чтобы найти моменты этого, сделайте замену переменной , упрощая подобные интегралы до:

таким образом

Определенный интеграл

хорошо документирован, и мы, наконец, получили

который, после некоторых затруднений, согласился с приведенным выше результатом продукта.

Если X , Y нарисованы независимо от гамма-распределений с параметрами формы, то

Этот тип результата является универсальным, поскольку для двумерных независимых переменных таким образом

или, что то же самое, ясно, что это независимые переменные.

Особые случаи

Логнормальные распределения

Распределение произведения двух случайных величин, имеющих логнормальное распределение, снова является логнормальным. Это сам по себе частный случай более общего набора результатов, где логарифм произведения можно записать как сумму логарифмов. Таким образом, в тех случаях, когда простой результат можно найти в списке сверток вероятностных распределений , где свертываемые распределения представляют собой распределения логарифмов компонентов продукта, результат может быть преобразован для получения распределения продукта . Однако этот подход полезен только в том случае, если логарифмы компонентов произведения находятся в некоторых стандартных семействах распределений.

Равномерно распределенные независимые случайные величины

Пусть — произведение двух независимых переменных, каждая из которых равномерно распределена на интервале [0,1], возможно, результат преобразования копулы . Как отмечалось выше в разделе «Логнормальные распределения», операции свертки PDF в домене журнала соответствуют произведению выборочных значений в исходном домене. Таким образом, делая преобразование , такое , что каждая переменная распределяется независимо от u как

.

а свертка двух распределений - это автосвертка

Затем повторно преобразуйте переменную, чтобы получить распределение.

на интервале [0,1]

Для произведения нескольких (> 2) независимых выборок маршрут характеристической функции является благоприятным. Если мы определим, то выше это гамма-распределение формы 1 и масштабного коэффициента 1, , а его известный CF равен . Обратите внимание, что якобиан преобразования равен единице.

Таким образом, свертка независимых выборок имеет CF , который, как известно, является CF гамма-распределения формы :

.

Выполните обратное преобразование , чтобы извлечь PDF-файл произведения n образцов :

Следующий, более традиционный вывод из Stackexchange [7] согласуется с этим результатом. Прежде всего, позволить его CDF

Плотность

Умножение на третью независимую выборку дает функцию распределения

Получение производной доходности

Автор заметки предполагает, что в целом

Геометрия распределения произведений двух случайных величин в единичном квадрате.

Рисунок иллюстрирует природу приведенных выше интегралов. Область выделения внутри единичного квадрата и ниже линии z = xy представляет собой CDF z. Это делится на две части. Первый — для 0 < x < z, где приращение площади в вертикальной щели просто равно dx . Вторая часть находится ниже линии xy , имеет высоту y z/x и дополнительную площадь dx z/x .

Независимые центрально-нормальные распределения

Произведение двух независимых нормальных выборок соответствует модифицированной функции Бесселя . Пусть это независимые выборки из нормального (0,1) распределения и . Затем


Дисперсия этого распределения в принципе может быть определена с помощью определенного интеграла Градшейна и Рыжика [8]

таким образом

Гораздо более простой результат, изложенный в разделе выше, заключается в том, что дисперсия произведения независимых выборок с нулевым средним равна произведению их дисперсий. Поскольку дисперсия каждого нормального образца равна единице, дисперсия произведения также равна единице.

Произведение двух гауссовых выборок часто путают с произведением двух гауссовских PDF-файлов. Последнее просто приводит к двумерному распределению Гаусса.

Коррелированные центрально-нормальные распределения

Случай с продуктом коррелированных нормальных выборок недавно рассматривался Надараджахой и Погани. [9] Пусть среднее значение равно нулю, единичная дисперсия, нормально распределенная, зависит от коэффициента корреляции.

Затем

Среднее значение и дисперсия : среднее значение мы получаем из определения коэффициента корреляции. Дисперсия может быть найдена путем преобразования двух единичных дисперсий в нулевое среднее некоррелированных переменных U, V. Позволять

Тогда X, Y — переменные единичной дисперсии с коэффициентом корреляции и

Удалив члены нечетной степени, математические ожидания которых заведомо равны нулю, мы получаем

Поскольку у нас есть

Асимптота высокой корреляции . В случае высокой корреляции произведение сходится на квадрате одной выборки. В этом случае асимптота равна и

которое представляет собой распределение хи-квадрат с одной степенью свободы.

Множественные коррелированные выборки . Надараджаха и др. далее покажите, что если случайные величины iid выбраны из и являются их средним значением, то

где W — функция Уиттекера, а .

Используя идентификатор , см., например, компиляцию DLMF. eqn(13.13.9), [10] это выражение можно несколько упростить до

В формате PDF дано предельное распределение выборочной двумерной нормальной ковариации, результат также показан в статье «Распределение Уишарта». Примерное распределение коэффициента корреляции можно найти с помощью преобразования Фишера .

Множественные нецентрально коррелированные выборки . Распределение продукта коррелированных нецентральных нормальных выборок было получено Cui et al. [11] и принимает вид бесконечной серии модифицированных функций Бесселя первого рода.

Моменты произведения коррелированных центральных нормальных выборок

Для центрального нормального распределения N(0,1) моменты равны

где обозначает двойной факториал .

Если - центральные коррелированные переменные, простейший двумерный случай многомерной проблемы нормальных моментов, описанной Каном, [12], тогда

где

– коэффициент корреляции и

[нужно проверить]

Коррелированные нецентральные нормальные распределения

Распределение продукта нецентрально коррелированных нормальных образцов было получено Cui et al. [11] и принимает вид бесконечного ряда.

Эти дистрибутивы продуктов в чем-то сравнимы с дистрибутивом Wishart . Последний представляет собой совместное распределение четырех элементов (на самом деле только трех независимых элементов) выборочной ковариационной матрицы. Если это выборки из двумерного временного ряда, то это матрица Уишарта с K степенями свободы. Распределения продуктов, приведенные выше, представляют собой безусловное распределение совокупности K > 1 образцов .

Независимые комплекснозначные центрально-нормальные распределения

Пусть это независимые выборки из нормального (0,1) распределения. Установкой являются независимые комплексные нормальные выборки с нулевым средним и круговой симметрией. Их комплексные дисперсии

Функции плотности

являются распределениями Рэлея , определяемыми как:

Переменная явно представляет собой хи-квадрат с двумя степенями свободы и имеет PDF

Уэллс и др. [13] показывают, что функция плотности равна

а кумулятивная функция распределения равна

Таким образом, полярное представление произведения двух некоррелированных комплексных гауссовых выборок равно

.

Первый и второй моменты этого распределения можно найти из интеграла в разделе «Нормальные распределения» выше.

Таким образом, его дисперсия равна .

Кроме того, плотность соответствует произведению двух независимых образцов Хи-квадрат, каждый с двумя степенями свободы. Записав их в виде масштабированных гамма-распределений , тогда из приведенных ниже гамма-продуктов плотность продукта будет равна

Независимые комплексные нецентральные нормальные распределения

Произведение нецентральных независимых комплексных гауссианов описано О'Донохью и Мурой [14] и образует двойную бесконечную серию модифицированных функций Бесселя первого и второго типов.

Гамма-распределения

Произведение двух независимых гамма-выборок, определяющее , имеет вид [15]

Бета-дистрибутивы

Нагар и др. [16] определяют коррелированное двумерное бета-распределение.

где

Тогда PDF-файл Z = XY определяется выражением

где – гипергеометрическая функция Гаусса, определяемая интегралом Эйлера

Обратите внимание, что многомерные распределения, как правило, не уникальны, за исключением случая Гаусса, и могут быть альтернативы.

Равномерное и гамма-распределения

Распределение произведения случайной величины, имеющей равномерное распределение по (0,1), на случайную величину, имеющую гамма-распределение с параметром формы, равным 2, является экспоненциальным распределением . [17] Более общий случай касается распределения произведения случайной величины, имеющей бета-распределение, на случайную величину, имеющую гамма-распределение : для некоторых случаев, когда параметры двух компонентных распределений связаны определенным образом, результатом снова является гамма-распределение, но с измененным параметром формы. [17]

K -распределение является примером нестандартного распределения, которое можно определить как распределение продукта (где оба компонента имеют гамма-распределение).

Гамма-распределения и распределения Парето

Произведение независимых выборок n Gamma и m Парето было получено Надараджей. [18]

Смотрите также

Примечания

  1. ^ Спрингер, Мелвин Дейл (1979). Алгебра случайных величин . Уайли . ISBN 978-0-471-01406-5. Проверено 24 сентября 2012 г.
  2. ^ Рохатги, ВК (1976). Введение в теорию вероятностей и математическую статистику . Ряд Уайли по вероятности и статистике. Нью-Йорк: Уайли. дои : 10.1002/9781118165676. ISBN 978-0-19-853185-2.
  3. ^ Гриммет, Греция; Стирзакер, Д.Р. (2001). Вероятность и случайные процессы. Оксфорд: Издательство Оксфордского университета. ISBN 978-0-19-857222-0. Проверено 4 октября 2015 г.
  4. ^ Гудман, Лео А. (1960). «О точном отклонении продуктов». Журнал Американской статистической ассоциации . 55 (292): 708–713. дои : 10.2307/2281592. JSTOR  2281592.
  5. Сарвате, Дилип (9 марта 2013 г.). «Дисперсия произведения нескольких случайных величин». Обмен стеками .
  6. ^ «Как найти характеристическую функцию произведения случайных величин» . Обмен стеками . 3 января 2013 г.
  7. ^ heropup (1 февраля 2014 г.). «распределение продукта из двух равномерных распределений, а как насчет 3 или более». Обмен стеками .
  8. ^ Градшейн, И.С.; Рыжик, И. М. (1980). Таблицы интегралов, рядов и произведений . Академическая пресса. стр. раздел 6.561.
  9. ^ Надараджа, Саралис; Погани, Тибор (2015). «О распределении произведения коррелированных нормальных случайных величин». Comptes Rendus de l'Académie des Sciences, Série I. 354 (2): 201–204. дои : 10.1016/j.crma.2015.10.019 .
  10. ^ уравнение (13.18.9). «Цифровая библиотека математических функций». NIST: Национальный институт стандартов и технологий .{{cite web}}: CS1 maint: numeric names: authors list (link)
  11. ^ Аб Цуй, Гуолун (2016). «Точное распределение произведения двух коррелирующих гауссовских случайных величин». Письма об обработке сигналов IEEE . 23 (11): 1662–1666. Бибкод : 2016ISPL...23.1662C. дои :10.1109/ЛСП.2016.2614539. S2CID  15721509.
  12. ^ Кан, Раймонд (2008). «От моментов суммы к моментам произведения». Журнал многомерного анализа . 99 (3): 542–554. дои : 10.1016/j.jmva.2007.01.013 .
  13. ^ Уэллс, RT; Андерсон, РЛ; Клетка, JW (1962). «Распределение произведения двух центральных или нецентральных переменных хи-квадрат». Анналы математической статистики . 33 (3): 1016–1020. дои : 10.1214/aoms/1177704469 .
  14. ^ О'Донохью, Н.; Моура, JMF (март 2012 г.). «О произведении независимых комплексных гауссианов». Транзакции IEEE по обработке сигналов . 60 (3): 1050–1063. Бибкод : 2012ITSP...60.1050O. дои :10.1109/TSP.2011.2177264. S2CID  1069298.
  15. ^ Волки (август 2017 г.). «PDF произведения двух независимых гамма-случайных величин». стекобмен .
  16. ^ Нагар, ДК; Ороско-Кастаньеда, JM; Гупта, АК (2009). «Произведение и частное коррелирующих бета-переменных». Письма по прикладной математике . 22 : 105–109. дои : 10.1016/j.aml.2008.02.014 .
  17. ^ Аб Джонсон, Норман Л.; Коц, Сэмюэл; Балакришнан, Н. (1995). Непрерывные одномерные распределения, том 2, второе издание. Уайли. п. 306. ИСБН 978-0-471-58494-0. Проверено 24 сентября 2012 г.
  18. ^ Надараджа, Саралис (июнь 2011 г.). «Точное распределение произведения n гамма- и m случайных величин Парето». Журнал вычислительной и прикладной математики . 235 (15): 4496–4512. дои : 10.1016/j.cam.2011.04.018 .

Рекомендации