Аннотация:
Информационное уклонение Кульбака–Лейблера
I[Q∣P]I[Q∣P] распределения вероятностей QQ от PP рассматривается
в качестве несимметричного аналога половины квадрата расстояния
между «точками» QQ и PP. В качестве nn-мерных «плоскостей»
рассматриваются экспонентные семейства. Доказывается несимметричный
аналог теоремы Пифагора, взятой в формулировке:
«квадрат длины наклонной равен сумме квадрата длины перпендикуляра
и квадрата длины проекции наклонной», а также
аналог теоремы косинусов и т. п. Библ. 9 назв.
Образец цитирования:
Н. Н. Ченцов, “Несимметричное расстояние между распределениями вероятностей, энтропия и теорема Пифагора”, Матем. заметки, 4:3 (1968), 323–332; Math. Notes, 4:3 (1968), 686–691
Hiroshi Matsuzoe, “Half a century of information geometry, part 1”, Info. Geo., 7:S1 (2024), 3
Wael Alghamdi, Shahab Asoodeh, Hao Wang, Flavio P. Calmon, Dennis Wei, Karthikeyan Natesan Ramamurthy, 2020 IEEE International Symposium on Information Theory (ISIT), 2020, 2711
В. В. Веденяпин, С. З. Аджиев, В. В. Казанцева, “Энтропия по Больцману и Пуанкаре, экстремали Больцмана и метод Гамильтона–Якоби в негамильтоновой ситуации”, Дифференциальные и функционально-дифференциальные уравнения, СМФН, 64, № 1, Российский университет дружбы народов, М., 2018, 37–59
М. Ковачевич, И. Станоевич, В. Шенк, “Информационно-геометрическая эквивалентность транспортных многогранников”, Пробл. передачи информ., 51:2 (2015), 20–26; M. Kovačević, I. Stanojević, V. Šenk, “Information-geometric equivalence of transportation polytopes”, Problems Inform. Transmission, 51:2 (2015), 103–109
Belavkin R.V., “Asymmetric Topologies on Statistical Manifolds”, Geometric Science of Information, Lecture Notes in Computer Science, 9389, ed. Nielsen F. Barbaresco F., Springer Int Publishing Ag, 2015, 203–210
В. В. Веденяпин, С. З. Аджиев, “Энтропия по Больцману и Пуанкаре”, УМН, 69:6(420) (2014), 45–80; V. V. Vedenyapin, S. Z. Adzhiev, “Entropy in the sense of Boltzmann and Poincaré”, Russian Math. Surveys, 69:6 (2014), 995–1029
С. З. Аджиев, В. В. Веденяпин, “Временны́е средние и экстремали Больцмана для марковских цепей, дискретного уравнения Лиувилля и круговой модели Каца”, Ж. вычисл. матем. и матем. физ., 51:11 (2011), 2063–2074; S. Z. Adzhiev, V. V. Vedenyapin, “Time averages and Boltzmann extremals for Markov chains, discrete Liouville equations, and the Kac circular model”, Comput. Math. Math. Phys., 51:11 (2011), 1942–1952
O. A. Glonti, P. Harremöes, Z. Khechinashvili, F. Topsøe, “Nash equilibrium in a game of calibration”, Теория вероятн. и ее примен., 51:3 (2006), 537–551; Theory Probab. Appl., 51:3 (2007), 415–426