異端の統計学 ベイズ

著者 : シャロン・バーチュマグレイン 冨永星

• 草思社 (2013年10月23日発売)

作品紹介・あらすじ

現在、IT やリスクマネジメント、経済学、意志決定理論の各分野で非常に重要な役割を果たしているベイズ統計。しかし、その250 年あまりの歴史のほとんどにおいて、統計学界では異端視され、冷遇されてきた。それはなぜなのか？　またそれにもかかわらず、死に絶えることなく生き残り、現在、広く利用されているのはなぜなのか？　今まで語られることのなかったベイズ統計の数奇な遍歴。

感想・レビュー・書評

[okadataさんの感想 · 2014年7月13日]

ベイズ統計の手法については概念的にはわかりやすい。事前の予想に対して新たに得られたデーターを反映させ予想を修正する。実験であるパラメーターを変化させて得られた結果からパラメーターの最適値を推測するというのは自然科学でも社会科学でも違和感はないだろう。しかしこれを確率としてとらえ、式にあてはめると少し分かりにくい。18世紀の聖職者トーマス・ベイズが発見した後打ち捨てられ、数十年後に偉大な数学者ラプラスが独自に再発見し完成させたベイズ統計の式は次のように表される。

まずべイズ統計の原理だがこれだ。
P(C/E)=P(E/C)/ΣP(E/C’) Pは確率、Cは原因、Eは結果として
P(C/E):Eという得られて結果に対して原因がCである確率
P(E/C)：原因がCの場合に結果がEとなる確率
ΣP(E/C’)：原因C１、C２・・・に対しそれぞれ結果がEとなる確率の合計

例えばサイコロを何回か振って合計が５の場合に２回ふった確率は？
P(E/C)は4/36
ΣP(E/C’)は1/6＋4/36＋6/216＋4/1296＋1/7776
P(C/E)＝36％　手計算だが合ってるのか？（笑）

ラプラスが完成させた一般式はこうなる。
P(C/E)=P(E/C)xP”（C）/ΣP(E/C’)xP”（C’）
このときに P”（C）は事前に見積もった原因Cが正しい確率（事前確率）としている。
これだけ見ても何のことやらなのだが実際の使用例を挙げると少し雰囲気が分かる。

マンモグラフの乳がん検査の確率が補遺にある。
P(C/E)：マンモグラフ検査が陽性の際の乳がんの確率
P(E/C)：がん患者のマンモグラフが陽性になる確率＝80％
P”（C）：乳がんの確率＝約0.4％
ΣP(E/C’)xP”（C’）：（理由はどうあれ）マンモグラフが陽性の確率　
偽陽性の確率が10％あるため　99.6％x10％＋0.4％x80％＝10.28％
P(C/E)＝80％x0.4％／10.28％＝3.1％
マンモグラフは80％と比較的信頼性の高い検査なのだが、偽陽性も10％と高く出てしまうことと、元々乳がんの確率が0.4％と低いこともありマンモグラフを受けて陽性の場合に実際に乳がんである確率はわずか3％でしかなく、アメリカ政府の「乳がんスクリーニングに関する特別チーム」は2009年に40代の女性の大部分は１年に１回のマンモグラフは受けない方が良いと助言した。

ベイズの手法は実際には事前確率がはっきりしない場合にも適用されている。乳がんとは違い事前確率として有用なデーターがない場合には主観的な数字を入れて後から観測結果を元にデーターを更新するのがベイズ派のやり方だ。伝統的な頻度主義者（観測数／母数）の場合これまでに起こったことのない事故の確率を計算しろといわれてもお手上げだがベイズ派は例えばチャレンジャー号の事故について1/35という非常に高い事故確立を見積もっていた。エニグマの暗号解読にはじまり、保険業界が料率の決定にこの手法を取り入れ、資源保護、グーグルの機械翻訳などΣP(E/C’)のところの計算が非常に煩雑なため昔は役に立たなかった領域でもコンピューターの能力が上がりベイズ推定の使われる範囲はどんどん拡がっていった。

頻度主義であれば一定量のデーターがなければ統計的には信頼性が低いとするところをベイズの手法は漸近的な解を出すので意思決定をする際に少ないデーターで決断しなければならない場合に適用しやすい。例えばうなぎが減った原因は色々考えられるが稚魚の乱獲の確率をだし、漁獲量を制限した場合にどれだけ資源量が回復するかとか、原発の下の断層でこの先30年以内に大地震が起こる確率だとか。難しいのはその場合に事前確率をどう置くかで計算結果が変わってしまうところだ。反対派からはデーターを恣意的に選んでいるとの批判が出ることは簡単に予想できる。

1968年にアメリカの攻撃型原潜スコーピオン号が姿を消した際にはベイズの手法が力を発揮した。スコーピオン失踪の直前にある聴音装置が極めて深い海中でピンという不思議な音を観測していた。そこで海底の地形図、海流なども組み合わせ音の発生源をスタートにスコーピオン号がランダムに航行したというシミュレーションを繰り返して１万個の予想地点をプロットすると地図上の方眼に明らかに有望な場所とそうではない場所があらわれたのだ。当初探索が行われた場所からはなれた場所に不思議な金属片が見つかっており、このシミュレーションを元に探索結果を更新していくと発見予想地点はだんだんとこの金属片の場所に近づいていった。最終的にはシミュレーションの高確率セルと発見点は260ヤード離れていたが160平方マイルの探索域の中での260ヤードは上出来だ。このときに使われたランダム化手法のモンテカルロ法はコンピューター将棋などにも使われている。

人間は無意識にベイズのアプローチを使っているようだ。例えばパットの練習で全く同じ打ち方（といっても誤差がある）をしてホールからどれだけ離れているかを計算し方向と強さを合わせるという様なことは普通はしない。得られた結果を元に少しずつ方向と強さを調整し修正していっているはずでこれはベイズのアプローチと言える。方程式は理解していなくてもこのやり方が役に立つのはわかる。この本では正統的な統計学からは相手にされなかったベイズ統計が色々な現場で採用されていき、今では主流と言えるまでに拡がった様子が描かれている。

[suwakotaroさんの感想 · 2019年3月1日]

①この本を読んでわかること
・頻度主義とベイズの違い
・ベイズだと何が嬉しいか
・ベイズの道具がどう生まれたか
②この本を読んでもわからないこと
・ベイズの理論的側面
・具体的なモデリングの方法

わかることわからないことあるわけですが、①が理解できることで見通しがよくなり②を理解しやすくなるところもあるかと思うので、ベイズ統計を勉強する早い段階で読むのはアリだと思いました。

[koishi-2018さんの感想 · 2019年1月12日]

昨今話題になっているベイズ統計学。
新しい理論かと思いきや　その歴史は古いのだと知り、この本を読んでみようと思った。
最初の部分を読んだら、おもしろかったのだけれど　肝心のベイズ統計学の本を読むほうが優先度が高い。
今回は途中で中止。

2016/08/09 　予約　8/24　借りて読み始める。10/7　途中で中止。

内容　：
現在、多分野で注目を集めるベイズ統計。
実は、その250年余の歴史の大半において、学界では異端視されてきた。
異端の理論はいかにして、先端の理論となったのか? 　ベイズ統計の数奇な遍歴を物語る。

著者　：
アメリカのサイエンスライター。
スワースモア・カレッジを卒業後、新聞記者を経て、社会問題と科学の進歩の関係を中心に執筆。
著書に「お母さん、ノーベル賞をもらう」など。
　

[kohamatkさんの感想 · 2017年12月6日]

内容はベイズ統計学の歴史。読みどころは最後の2つの章だったが、ベイズ統計自体を理解してから読むべき本だった。

ベイズ自身は棚上げし、プライスは世に問うが無視され、独自に発見したラプラスは結局は頻度主義を好むようになり、軍はこの理論を隠し続けた。

20世紀前半から半ばにかけて、最初の確率を相対頻度に応じて決める経験ベイズが使われるようになった。また、計算が複雑になる関数の積分を漸近近似を利用して計算しやすくした。

リンドレーらが複雑な過程を階層と呼ぶ段階に分割してモデルを展開する手法を紹介すると、後に大変便利なツールとして重宝されることになった。1989年には、マルコフ連鎖モンテカルロ法がほぼすべての統計の問題に応用できることが示され、現実に即した事前確率や尤度関数を計算すること、事後確率を求めるために必要な計算をすることができるようになった。

[pctrさんの感想 · 2017年9月18日]

ベイズ統計を巡る歴史。
理論、定理の内容よりも、それを巡る多くの人の功績、主張に焦点を当て、現代にどれほど活用されているかに至る。

思想、哲学としての学問、それ故の対立、それでも実用され発展していく流れ、コンピュータの発達による手段を経て、多分野での展開が一気に進む。
人類の営みの積み重ねを感じる。

[kiyotakeさんの感想 · 2017年1月1日]

2016年度best1

[kenkenyanjaさんの感想 · 2016年7月31日]

これを読んでようやくベイズと頻度論の違いがわかった。
でも、大きな疑問点が残っていると思う。ベイズに対する一番の批判点である事前確率の恣意性について、頻度論者がどう折り合いをつけたかだ。本書では主に以下の点が挙げられている。
- 観測によって事前確率は徐々に客観的な確率になるので、それほど問題ない
- 繰り返しの試行ができない事象について頻度論は無力でベイズを使うしかない
- コンピュータの発達により多くの分野でベイズが応用されている
ただ、これらの反論は数学とは真に客観的な分野であるべきという数学者一般の信念に対して直接答えていないと思う。特に20世紀の数学は公理化による厳密化を推し進めてきただけに、客観性は重要視されている。結局数学に主観を持ち込んでいいのか、持ち込んだ統計はもはや純粋数学たり得ないのかーーーこれらに対する考察が欲しかった。

[zhimeiさんの感想 · 2016年4月14日]

病気の治療法を計れることが、個人的に好きな部分。日本がこれを扱えないのが残念。がん検診やワクチン禍についてまともな評価が出せるはずなのに…

[valleysideさんの感想 · 2015年10月30日]

ベイズ(確率)に関係する歴史についてがメインの書籍でした。　

これから起きる可能性が過去の経験値からわからなくても、とりあえず、適当な値を設定して、事が起きた事実を使って、計算を繰り返すことで、答えに近づく手法。例としては、正方形のテーブルとボールの例が書かれており、その一投目がどこに落ちたか皆目見当がつかないけど、あるところだと仮定して、二投目からは一投目より右なのか左なのかを確認しながら繰り返すことで、だんだん一投目が落ちたところを狭めていくと。

「このような考え方では、決して正解にはたどり着かない。ただ、ある具体的な領域に落ちた可能性が最も高いといえるようになる。」

一投目の適当なことを言っちゃうところが科学的ではないということで、理論派（？頻度確率派）からいろいろ言われるも、最初から起きる可能性がわかっていない事象に対しては、ベイズの手法の方が実際効果が出てるという事例が多数紹介。
暗号解読、保険数理、たばこと肺がんの関係、核兵器事故、著者判別、大統領選、原発事故、潜水艦探索、金融市場予測、スパムメール除去等。

計算量が多くなることと、実際のデータを集めて何度も繰り返す処理がコンピューター向きで、かつ、新しいことを始めるにあたって、最初に主観データを設定して実データで確からしさを上げていくのは、走りながら考える必要があるビジネスの現場では、マッチするのだなと。
凄いアルゴリズムの発見からのブレークスルーではなく、ちょっとした計算を繰り返すことで、結果として意外なことをしちゃっているところが、凄い。

ただ、事例にあるようなことを具体的にどうやってやっているのか？他にももっといい手法などがあるのではないか？等々、本の文章量が多かっただけにもう少し深く書かれていて欲しかった。

ちなみに、Wikiでベイズ確率を探すと、この本で用語名は出てくるものの詳細が書かれていない物については、確認できる。　

この領域は、もっと勉強が必要。。。

[takemannさんの感想 · 2015年9月5日]

科学であっても、その時代背景によっては受け入れられないことがある。ガリレオだけではない。そして技術の進歩により、その有用性が初めて理解される場合もある。そんな流れが詳細に記述される好著。

[takinaiさんの感想 · 2015年6月9日]

ベイズ推しがひどく、客観的でない

[k_ominamiさんの感想 · 2015年4月29日]

ベイズ統計の歩みが頻度主義統計との論争を軸に語られる。数式はほとんど出てこず、その歴史をテンポよく知ることができる。これを読めばベイズ統計に興味が深まることは確実だ。(この本を手に取っている時点で興味は持っているのだろうが)
ベイズ統計とは何かを知らなくても読み進むことは可能。
ただ頻度主義をけなす傾向があり、必要以上にその価値を小さく描いているのはフェアではない。現在のベイズ的手法もその知見を利用していることを頭の隅に置いておくべきだ。

[城西大学水田記念図書館さんの感想 · 2015年4月6日]

配架場所 開架図書(3階) 請求記号 417.02//Ma15

[別府さんの感想 · 2015年1月16日]

原題：The Theory That Would Not Die: How Bayes' Rule Cracked the Enigma Code, Hunted Down Russian Submarines, and Emerged Triumphant from Two Centuries of Controversy,
著者：Sharon Bertsch McGrayne
翻訳：冨永星

・出版社リンク
　＜http://www.soshisha.com/book_search/detail/1_2001.html＞

【簡易目次】
第1部　黎明期の毀誉褒貶
　第01章　発見者に見棄てられた大発見　
　第02章　「ベイズの法則」を完成させた　男　
　第03章　ベイズの法則への激しい批判　
第2部　第二次大戦時代
　第04章　ベイズ、戦争の英雄となる　
　第05章　再び忌むべき存在となる　
第3部　ベイズ再興を志した人々　
　第06章　保険数理士の世界からはじまった反撃
　第07章　ベイズを体系化し哲学とした三人
　第08章　ベイズ、肺がんの原因を発見する　
　第09章　冷戦下の未知のリスクをはかる　
　第10章　ベイズ派の巻き返しと論争の激化
第4部　ベイズが実力を発揮しはじめる　
　第11章　意志決定にベイズを使う　
　第12章　フェデラリスト・ペーパーズを書いたのは誰か
　第13章　大統領選の速報を支えたベイズ　
　第14章　スリーマイル島原発事故を予見　
　第15章　海に消えた水爆や潜水艦を探す　
第5部　何がベイズに勝利をもたらしたか　
　第16章　決定的なブレークスルー　
　第17章　世界を変えつつあるベイズ統計学　

[chlochroさんの感想 · 2014年10月20日]

中身もさることながら装丁がいいですね。

[nekosukeさんの感想 · 2014年9月2日]

統計の勉強の傍ら、そもそも統計学のイメージが自分にはないことに気づき読んでみました。

題名からベイズの歴史に焦点は当てているものの、それに対する頻度統計の反対となる論理も詳しく書かれています。
物事を学ぶには歴史を知るのも大まかなイメージを掴む上で、重要なことなのを再認識しました。

ストーリーとしても非常に面白かったです。
特にドイツの暗号エニグマに関しては、「暗号解読」も前に読んだことがあったので、違った視点で同じことを見ると全然違うように見えました。

[kenzo50さんの感想 · 2014年8月8日]

今更ながら機械学習に興味持ってチョコチョコ調べてたら、やたらと出てくるベイズベイズ。いったいベイズってなんすか？いうことで読んでみました。

無限回サイコロ振ったら出る目の確率は1/6に近づくという、一般的に良く知られている確率との対比で捉えられることの多いベイズ。わたくしフィルタの解釈やと、

・まず、発生すると考えられる各事象に対して、確率(初期値)をそれっぽく割り振る
・得られた情報を元に、発生確率を更新していく
・フィードバックを繰り返して、どの事象が一番確からしいかを検証する

初期値の決定方法が独特なので「主観が入るなんてケシカラン(#ﾟДﾟ)」とほんの50年ほど前まで、アカデミーの世界では異端視する学者さんが多かったらしい。ただ、実際発生していない事象に関しても考察できるので、暗号解析、Uボートの探索、リスク分析等、実務では第二次大戦時代から使われてたとのこと。

そして、多くの仮説を立てるぶん、計算が複雑になる弱点があったんやけど、コンピューターの発展とともにベイズも花盛り。経営の意思決定、画像解析、スパムフィルタ、人工知能、Googleの中の人、などなど実はそこらじゅうベイズであふれてますよ、というお話。

いや～、不勉強ながらベイズ舐めてた。。。ぜひもうちょっと深堀りしたい、と思わせてくれる一冊(-_-)

[dannerさんの感想 · 2014年7月14日]

創始者たちの思考プロセスが辿れるので理解が深まる部分はあるが、中盤以降の「ベイズ手法でこんな凄い事が出来ました」の羅列は、数式が無さ過ぎてフラストレーションが溜まる。
事例は非常に興味深いので、ケーススタディの解説書が無いものだろうか。

[headshrinkさんの感想 · 2014年6月22日]

ベイズ統計学の歴史について。
ベイズ統計学がどういうものか、具体的な数式は全く出てこない。
事前確率は主観によるものでありしかも事前確率の見込みによって結果が左右されるということに対してごく最近までフィッシャーに始まる頻度主義の立場からの強い反対が続いていた。
実際問題としてもコンピューターによる計算能力が一般的に使われるようになるまでは積分（ここでいう統計というのは確率分布の計算なんだという）の計算が大変で、なかなか実用には至らなかった。確実なデータが入手できるのであれば頻度主義でもベイズでも同じような結論に達するが、計算などは頻度主義の方が楽だ。

カルマンフィルタなどの発明により、新しい情報が加わった場合、確率の計算を一から始めなくてもできるようになった。
コンピュータが発達し、マルコフ連鎖モンテカルロ法（MCMC)が使われるようになってからは現実的な問題、特に地震や航空機事故などのようにあまり起こらないような出来事ではベイズが必須になっている。

[nyankoteacherさんの感想 · 2014年6月7日]

１４０６０７　中央図書館
もういちど、ゆっくりと読まなくてはならない。