最小フィッシャー情報量

情報理論で使用される原理

情報理論において、最小フィッシャー情報量原理(MFI)は変分原理であり、経験的に既知の期待値を再現するために必要な適切な制約を適用することで、システムを特徴付ける最良の確率分布を決定します。(フィッシャー情報量も参照。)

情報の尺度

情報測度(IM)は情報理論における最も重要なツールです。IMは、観察者が関心のある任意のシステムに関して有する正の情報量、あるいは「欠落」情報量のいずれかを測定します。最も有名なIMは、いわゆるシャノンエントロピー (1948)です。これは、観察者が与えられたシステムSに関する利用可能なすべての知識を得るために、そのシステムの適切な要素について定義された確率密度関数(PDF)しか持っていない場合に、さらにどれだけの情報量が必要かを決定します。これは「欠落」情報測度です。IMはPDFのみの関数です。観察者がそのようなPDFを持っておらず、経験的に決定されたシステムの平均値の有限集合しか持っていない場合、最大エントロピー MaxEnt)と呼ばれる基本的な科学的原理は、「最良の」PDFとは、既知の期待値を再現し、そうでなければシャノンのIMを最大化するPDFであると主張します。

フィッシャーの情報量

ロナルド・フィッシャー(1925) にちなんで名付けられたフィッシャー情報量(FIM)は、 2つの点で別の種類の尺度である。

1) 観察者の (正の) 情報量を反映する、
2) PD だけでなくその 1 次導関数にも依存し、それが局所量となる特性を持つ (シャノンの導関数はグローバル量である)。

MaxEntに対応するものはFIM最小化です。これは、フィッシャー測度が増大するとシャノン測度が増大し、その逆もまた同様であるためです。ここで言及する最小化(MFI)は、物理学をはじめとする様々な分野において重要な理論的ツールです。ある意味では、MFIはMaxEntよりも明らかに優れています。なぜなら、後者の手順では常に指数関数的なPDが解として得られるのに対し、MFIの解はPDの 微分方程式であり、より柔軟で汎用性が高いからです。

MFIの応用

熱力学

フィッシャーの情報測度には多大な努力が払われ、多様な物理的応用に光を当ててきた。[1] [2 ] [3] [4] [5] [6 ] [7] [8] [9] [10] [11] [12] [13] [14] [15] [引用過剰]小さなサンプルではあるが、熱力学の全分野平衡および非平衡の両方)がMFIアプローチから導出できることが示される。[16]ここで、FIMは並進族、すなわち並進変換によって形が変化しない分布関数の特殊だが重要なケースに特化されている。この場合、フィッシャー測度はシフト不変になる。このようにフィッシャー測度を最小化すると、確率振幅に関するシュレーディンガーのような方程式が得られ、基底状態は平衡物理を記述し、励起状態は非平衡状況を説明する。[17]

スケール不変現象

さらに最近では、尺度不変性がMFIの変分解として現れることが示され、この規則性が第一原理から初めて説明されました[18]また、MFIは並進不変性の代わりにスケール不変に基づく熱力学を定式化するために使用できることも示されており、これにより、理想気体のスケール不変等価物であるスケールフリー理想気体の定義が可能になります[19]

参考文献

  1. ^ フリーデン, BR (2004). 『フィッシャー情報からの科学:統合』ケンブリッジ大学出版局, イギリス. ISBN 978-0-521-00911-9. OCLC  53325064。
  2. ^ Frieden, B. Roy (1989). 「シュレーディンガー波動方程式の基礎としてのフィッシャー情報量」. American Journal of Physics . 57 (11). American Association of Physics Teachers (AAPT): 1004– 1008. Bibcode :1989AmJPh..57.1​​004F. doi :10.1119/1.15810. ISSN  0002-9505.
  3. ^ Frieden, B.Roy (1992). 「フィッシャー情報量と不確実性相補性」. Physics Letters A. 169 ( 3). Elsevier BV: 123– 130. Bibcode :1992PhLA..169..123F. doi :10.1016/0375-9601(92)90581-6. ISSN  0375-9601.
  4. ^ BR Frieden、「Advances in Imaging and Electron Physics」、PW Hawkes編、Academic、ニューヨーク、1994年、第90巻、pp. 123-204。
  5. ^ Frieden, B.Roy (1993). 「極限化された物理情報の原理による分布則および物理法則の推定」. Physica A: 統計力学とその応用. 198 ( 1–2 ). Elsevier BV: 262– 338. Bibcode :1993PhyA..198..262F. doi :10.1016/0378-4371(93)90194-9. ISSN  0378-4371.
  6. ^ Frieden, B. Roy; Hughes, Roy J. (1994-04-01). 「極限物理情報から導かれるスペクトル1/fノイズ」. Physical Review E. 49 ( 4). American Physical Society (APS): 2644– 2649. Bibcode :1994PhRvE..49.2644F. doi :10.1103/physreve.49.2644. ISSN  1063-651X. PMID  9961526.
  7. ^ Nikolov, B.; Frieden, B. Roy (1994-06-01). 「フィッシャー情報によるエントロピー増加の限界」. Physical Review E. 49 ( 6). American Physical Society (APS): 4815– 4820. Bibcode :1994PhRvE..49.4815N. doi :10.1103/physreve.49.4815. ISSN  1063-651X. PMID  9961798.
  8. ^ Frieden, B. Roy (1990-04-01). 「フィッシャー情報量、無秩序性、そして物理学の平衡分布」. Physical Review A. 41 ( 8). American Physical Society (APS): 4265– 4276. Bibcode :1990PhRvA..41.4265F. doi :10.1103/physreva.41.4265. ISSN  1050-2947. PMID  9903619.
  9. ^ Frieden, B. Roy; Soffer, Bernard H. (1995-09-01). 「物理学のラグランジアンとフィッシャー情報伝達ゲーム」. Physical Review E. 52 ( 3). American Physical Society (APS): 2274– 2286. Bibcode :1995PhRvE..52.2274F. doi :10.1103/physreve.52.2274. ISSN  1063-651X. PMID  9963668.
  10. ^ Frieden, B. Roy (1991). 「フィッシャー情報量とシュレーディンガー波動方程式の複素性質」. Foundations of Physics . 21 (7). Springer Nature: 757–771 . Bibcode :1991FoPh...21..757F. doi :10.1007/bf00733343. ISSN  0015-9018.
  11. ^ RN Silver、ET Jaynes: Physics and Probability、WT Grandy, Jr. と PW Milonni、ケンブリッジ大学出版局、ケンブリッジ、イギリス、1992年。
  12. ^ Plastino, A.; Plastino, AR; Miller, HG; Khanna, FC (1996). 「フィッシャーの情報量の下限値」. Physics Letters A. 221 ( 1–2 ) . Elsevier BV: 29– 33. Bibcode :1996PhLA..221...29P. doi :10.1016/0375-9601(96)00560-9. ISSN  0375-9601.
  13. ^ Plastino, AR; Plastino, A. (1996-10-01). 「フォッカー・プランク方程式の対称性とフィッシャー・フリーデンの時間矢」. Physical Review E. 54 ( 4). American Physical Society (APS): 4423– 4426. Bibcode :1996PhRvE..54.4423P. doi :10.1103/physreve.54.4423. ISSN  1063-651X.
  14. ^ R. Plastino, A.; Miller, HG; Plastino, A. (1997-10-01). 「フォッカー・プランク方程式への最小カルバックエントロピーアプローチ」. Physical Review E. 56 ( 4). American Physical Society (APS): 3927– 3934. Bibcode :1997PhRvE..56.3927R. doi :10.1103/physreve.56.3927. ISSN  1063-651X.
  15. ^ Plastino, A.; Plastino, AR; Miller, HG (1997). 「Fisher-Frieden-Sofferの時間矢とボルツマンおよびカルバックエントロピーの挙動との関係について」. Physics Letters A. 235 ( 2). Elsevier BV: 129– 134. Bibcode :1997PhLA..235..129P. doi :10.1016/s0375-9601(97)00634-8. ISSN  0375-9601.
  16. ^ Frieden, BR; Plastino, A.; Plastino, AR; Soffer, BH (1999-07-01). 「フィッシャーに基づく熱力学:そのルジャンドル変換と凹面性特性」. Physical Review E. 60 ( 1). American Physical Society (APS): 48– 53. Bibcode :1999PhRvE..60...48F. doi :10.1103/physreve.60.48. ISSN  1063-651X. PMID  11969735.
  17. ^ Frieden, BR; Plastino, A.; Plastino, AR; Soffer, BH (2002-10-22). 「非平衡熱力学とフィッシャー情報間のシュレーディンガー的関係」. Physical Review E. 66 ( 4) 046128. American Physical Society (APS). arXiv : cond-mat/0206107 . Bibcode :2002PhRvE..66d6128F. doi :10.1103/physreve.66.046128. ISSN  1063-651X. PMID  12443280.
  18. ^ ヘルナンド、A.;プチドメネク、D.ヴィルエンダス、D.ヴェスペリナス、C.プラスティーノ、A. (2009)。 「フィッシャー変分原理からのジップの法則」。物理学の文字 A374 (1)。エルゼビアBV: 18 ~ 21。arXiv : 0908.0501Bibcode :2009PhLA..374...18H。土井:10.1016/j.physleta.2009.10.027。ISSN  0375-9601。
  19. ^ Hernando, A.; Vesperinas, C.; Plastino, A. (2010). 「フィッシャー情報量とスケール不変系の熱力学」. Physica A: 統計力学とその応用. 389 (3): 490. arXiv : 0908.0504 . Bibcode :2010PhyA..389..490H. doi :10.1016/j.physa.2009.09.054.
「https://en.wikipedia.org/w/index.php?title=Minimum_Fisher_information&oldid=1313924633」より取得