intuitive-understandind-of-bayes-rules-and-learn-from-experience.html

<!DOCTYPE html>
<!--[if lt IE 9 ]><html class="no-js oldie" lang="zh-hant-tw"> <![endif]-->
<!--[if IE 9 ]><html class="no-js oldie ie9" lang="zh-hant-tw"> <![endif]-->
<!--[if (gte IE 9)|!(IE)]><!-->
<html class="no-js" lang="zh-hant-tw">
<!--<![endif]-->

<head>

    <!--- basic page needs
    ================================================== -->
    <meta http-equiv="Content-Type" content="text/html; charset=UTF-8">
    <meta name="author" content="Lee Meng" />
<title>LeeMeng - 從經驗中學習 - 直觀理解貝氏定理及其應用</title>
    <!--- article-specific meta data
    ================================================== -->
        <meta name="description" content="貝氏定理（Bayes' theorem）是機率論中，一個概念簡單卻非常強大的定理。有了機率論的存在，人們才能理性且合理地評估未知事物發生的可能性（例：今天的下雨機率有多少？我中樂透的可能性有多高？），並透過貝氏定理搭配經驗法則來不斷地改善目前的認知，協助我們做更好的決策。這篇將利用生活上我們（或人工智慧）常需要考慮的事情當作引子，如今天的下雨機率是多少？來直觀地了解貝氏定理是怎麼被應用在各式各樣的地方。我們甚至可以效仿貝氏定理的精神，讓自己能更理性地評估未知並從經驗中學習。" />
        <meta name="keywords" content="貝氏定理, 機率, 機器學習" />
        <meta name="tags" content="貝氏定理" />
        <meta name="tags" content="機率" />
        <meta name="tags" content="機器學習" />


    <!--- Open Graph Object metas
    ================================================== -->
        <meta property="og:image" content="https://leemeng.tw/theme/images/background/alex-chambers-394779-unsplash.jpg" />
        <meta property="og:type" content="article" />
        <meta property="og:url" content="https://leemeng.tw/intuitive-understandind-of-bayes-rules-and-learn-from-experience.html" />
        <meta property="og:title" content="從經驗中學習 - 直觀理解貝氏定理及其應用" />
        <meta property="og:description" content="貝氏定理（Bayes' theorem）是機率論中，一個概念簡單卻非常強大的定理。有了機率論的存在，人們才能理性且合理地評估未知事物發生的可能性（例：今天的下雨機率有多少？我中樂透的可能性有多高？），並透過貝氏定理搭配經驗法則來不斷地改善目前的認知，協助我們做更好的決策。這篇將利用生活上我們（或人工智慧）常需要考慮的事情當作引子，如今天的下雨機率是多少？來直觀地了解貝氏定理是怎麼被應用在各式各樣的地方。我們甚至可以效仿貝氏定理的精神，讓自己能更理性地評估未知並從經驗中學習。" />

    <!-- mobile specific metas
    ================================================== -->
    <meta name="viewport" content="width=device-width, initial-scale=1">

    <!-- CSS
    ================================================== -->
    <!--for customized css in individual page-->
        <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/bootstrap.min.css">

    <!--for showing toc navigation which slide in from left-->
        <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/toc-nav.css">

    <!--for responsive embed youtube video-->
        <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/embed_youtube.css">

    <!--for prettify dark-mode result-->
        <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/darkmode.css">

    <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/base.css">
    <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/vendor.css">
    <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/main.css">
    <link rel="stylesheet" type="text/css" href="https://leemeng.tw/theme/css/ipython.css">
    <link rel="stylesheet" type="text/css" href='https://leemeng.tw/theme/css/progress-bar.css' />


    <!--TiqueSearch-->
    <link href="https://fonts.googleapis.com/css?family=Roboto:100,300,400">
    <link rel="stylesheet" href="https://leemeng.tw/theme/tipuesearch/css/normalize.css">
    <link rel="stylesheet" href="https://leemeng.tw/theme/tipuesearch/css/tipuesearch.css">

    <!-- script
    ================================================== -->
    <script src="https://leemeng.tw/theme/js/modernizr.js"></script>
    <script src="https://leemeng.tw/theme/js/pace.min.js"></script>


    <!-- favicons
    ================================================== -->
    <link rel="shortcut icon" href="../theme/images/favicon.ico" type="image/x-icon"/>
    <link rel="icon" href="../theme/images/favicon.ico" type="image/x-icon"/>

<!-- Global Site Tag (gtag.js) - Google Analytics -->
<script async src="https://www.googletagmanager.com/gtag/js?id=UA-106559980-1"></script>
<script>
  window.dataLayer = window.dataLayer || [];
  function gtag(){dataLayer.push(arguments)};
  gtag('js', new Date());

  gtag('config', 'UA-106559980-1');
</script>


</head>


<body id="top">

    <!-- header
    ================================================== -->
    <header class="s-header">

        <div class="header-logo">
            <a class="site-logo" href="../index.html"><img src="https://leemeng.tw/theme/images/logo.png" alt="Homepage"></a>
        </div>
<!--navigation bar ref: http://jinja.pocoo.org/docs/2.10/tricks/-->


<nav class="header-nav-wrap">
    <ul class="header-nav">
        <li>
            <a href="../index.html#home">Home</a>
        </li>
        <li>
            <a href="../index.html#about">About</a>
        </li>
        <li>
            <a href="../index.html#projects">Projects</a>
        </li>
        <li class="current">
            <a href="../blog.html">Blog</a>
        </li>
        <li>
            <a href="https://demo.leemeng.tw">Demo</a>
        </li>
        <li>
            <a href="../books.html">Books</a>
        </li>
        <li>
            <a href="../index.html#contact">Contact</a>
        </li>

    </ul>

    <!--<div class="search-container">-->
        <!--<form action="../search.html">-->
            <!--<input type="text" placeholder="Search.." name="search">-->
            <!--<button type="submit"><i class="im im-magnifier" aria-hidden="true"></i></button>-->
        <!--</form>-->
    <!--</div>-->

</nav>
        <a class="header-menu-toggle" href="#0"><span>Menu</span></a>

    </header> <!-- end s-header -->


    <!--TOC navigation displayed when clicked from left-navigation button-->
    <div id="tocNav" class="overlay" onclick="closeTocNav()">
      <div class="overlay-content">
        <div id="toc"><ul><li><a class="toc-href" href="#" title="從經驗中學習 - 直觀理解貝氏定理及其應用">從經驗中學習 - 直觀理解貝氏定理及其應用</a><ul><li><a class="toc-href" href="#今天會下雨嗎？" title="今天會下雨嗎？">今天會下雨嗎？</a></li><li><a class="toc-href" href="#讓我們帶點數字進去" title="讓我們帶點數字進去">讓我們帶點數字進去</a></li><li><a class="toc-href" href="#貝氏定理初顯鋒芒" title="貝氏定理初顯鋒芒">貝氏定理初顯鋒芒</a></li><li><a class="toc-href" href="#大雄不死心：單純貝式" title="大雄不死心：單純貝式">大雄不死心：單純貝式</a></li><li><a class="toc-href" href="#動動腦時間" title="動動腦時間">動動腦時間</a></li><li><a class="toc-href" href="#從人腦到電腦：讓機器幫我們做判斷" title="從人腦到電腦：讓機器幫我們做判斷">從人腦到電腦：讓機器幫我們做判斷</a></li><li><a class="toc-href" href="#小心！你的經驗可靠嗎？" title="小心！你的經驗可靠嗎？">小心！你的經驗可靠嗎？</a></li><li><a class="toc-href" href="#總結" title="總結">總結</a></li></ul></li></ul></div>
      </div>
    </div>

    <!--custom images with icon shown on left nav-->
    <!--the details are set in `pelicanconf.py` as `LEFT_NAV_IMAGES`-->

    <article class="blog-single">

        <!-- page header/blog hero, use custom cover image if available
        ================================================== -->
            <div class="page-header page-header--single page-hero" style="background-image:url(https://leemeng.tw/theme/images/background/alex-chambers-394779-unsplash.jpg)">

            <div class="row page-header__content narrow">
                <article class="col-full">
                    <div class="page-header__info">
                        <div class="page-header__cat">
                            <a href="https://leemeng.tw/tag/bei-shi-ding-li.html" rel="tag">貝氏定理</a>
                            <a href="https://leemeng.tw/tag/ji-lu.html" rel="tag">機率</a>
                            <a href="https://leemeng.tw/tag/ji-qi-xue-xi.html" rel="tag">機器學習</a>
                        </div>
                    </div>
                    <h1 class="page-header__title">
                        <a href="https://leemeng.tw/intuitive-understandind-of-bayes-rules-and-learn-from-experience.html" title="">
                            從經驗中學習 - 直觀理解貝氏定理及其應用
                        </a>
                    </h1>
                    <ul class="page-header__meta">
                        <li class="date">2018-05-25 (Fri)</li>
                        <li class="page-view">
                            35,750 views
                        </li>
                    </ul>

                </article>
            </div>

        </div> <!-- end page-header -->

        <div class="KW_progressContainer">
            <div class="KW_progressBar"></div>
        </div>

        <div class="row blog-content" style="position: relative">
<div id="left-navigation">

    <div id="search-wrap">
        <i class="im im-magnifier" aria-hidden="true"></i>
        <div id="search">
            <form action="../search.html">
            <div class="tipue_search_right"><input type="text" name="q" id="tipue_search_input" pattern=".{2,}" title="想搜尋什麼呢？（請至少輸入兩個字）" required></div>
            </form>
        </div>
    </div>

    <div id="toc-wrap">
        <a title="顯示/隱藏 文章章節">
            <i class="im im-menu" aria-hidden="true" onclick="toggleTocNav()"></i>
        </a>
    </div>

    <div id="social-wrap" style="cursor: pointer">
        <a class="open-popup" title="訂閱最新文章">
            <i class="im im-newspaper-o" aria-hidden="true"></i>
        </a>
    </div>
    <div id="social-wrap">
        <a href="https://www.facebook.com/sharer/sharer.php?u=https%3A//leemeng.tw/intuitive-understandind-of-bayes-rules-and-learn-from-experience.html" target="_blank" title="分享到 Facebook">
            <i class="im im-facebook" aria-hidden="true"></i>
        </a>
    </div>
    <div id="social-wrap">
        <a href="https://www.linkedin.com/shareArticle?mini=true&url=https%3A//leemeng.tw/intuitive-understandind-of-bayes-rules-and-learn-from-experience.html&title=%E5%BE%9E%E7%B6%93%E9%A9%97%E4%B8%AD%E5%AD%B8%E7%BF%92%20-%20%E7%9B%B4%E8%A7%80%E7%90%86%E8%A7%A3%E8%B2%9D%E6%B0%8F%E5%AE%9A%E7%90%86%E5%8F%8A%E5%85%B6%E6%87%89%E7%94%A8&summary=%E8%B2%9D%E6%B0%8F%E5%AE%9A%E7%90%86%EF%BC%88Bayes%27%20theorem%EF%BC%89%E6%98%AF%E6%A9%9F%E7%8E%87%E8%AB%96%E4%B8%AD%EF%BC%8C%E4%B8%80%E5%80%8B%E6%A6%82%E5%BF%B5%E7%B0%A1%E5%96%AE%E5%8D%BB%E9%9D%9E%E5%B8%B8%E5%BC%B7%E5%A4%A7%E7%9A%84%E5%AE%9A%E7%90%86%E3%80%82%E6%9C%89%E4%BA%86%E6%A9%9F%E7%8E%87%E8%AB%96%E7%9A%84%E5%AD%98%E5%9C%A8%EF%BC%8C%E4%BA%BA%E5%80%91%E6%89%8D%E8%83%BD%E7%90%86%E6%80%A7%E4%B8%94%E5%90%88%E7%90%86%E5%9C%B0%E8%A9%95%E4%BC%B0%E6%9C%AA%E7%9F%A5%E4%BA%8B%E7%89%A9%E7%99%BC%E7%94%9F%E7%9A%84%E5%8F%AF%E8%83%BD%E6%80%A7%EF%BC%88%E4%BE%8B%EF%BC%9A%E4%BB%8A%E5%A4%A9%E7%9A%84%E4%B8%8B%E9%9B%A8%E6%A9%9F%E7%8E%87%E6%9C%89%E5%A4%9A%E5%B0%91%EF%BC%9F%E6%88%91%E4%B8%AD%E6%A8%82%E9%80%8F%E7%9A%84%E5%8F%AF%E8%83%BD%E6%80%A7%E6%9C%89%E5%A4%9A%E9%AB%98%EF%BC%9F%EF%BC%89%EF%BC%8C%E4%B8%A6%E9%80%8F%E9%81%8E%E8%B2%9D%E6%B0%8F%E5%AE%9A%E7%90%86%E6%90%AD%E9%85%8D%E7%B6%93%E9%A9%97%E6%B3%95%E5%89%87%E4%BE%86%E4%B8%8D%E6%96%B7%E5%9C%B0%E6%94%B9%E5%96%84%E7%9B%AE%E5%89%8D%E7%9A%84%E8%AA%8D%E7%9F%A5%EF%BC%8C%E5%8D%94%E5%8A%A9%E6%88%91%E5%80%91%E5%81%9A%E6%9B%B4%E5%A5%BD%E7%9A%84%E6%B1%BA%E7%AD%96%E3%80%82%E9%80%99%E7%AF%87%E5%B0%87%E5%88%A9%E7%94%A8%E7%94%9F%E6%B4%BB%E4%B8%8A%E6%88%91%E5%80%91%EF%BC%88%E6%88%96%E4%BA%BA%E5%B7%A5%E6%99%BA%E6%85%A7%EF%BC%89%E5%B8%B8%E9%9C%80%E8%A6%81%E8%80%83%E6%85%AE%E7%9A%84%E4%BA%8B%E6%83%85%E7%95%B6%E4%BD%9C%E5%BC%95%E5%AD%90%EF%BC%8C%E5%A6%82%E4%BB%8A%E5%A4%A9%E7%9A%84%E4%B8%8B%E9%9B%A8%E6%A9%9F%E7%8E%87%E6%98%AF%E5%A4%9A%E5%B0%91%EF%BC%9F%E4%BE%86%E7%9B%B4%E8%A7%80%E5%9C%B0%E4%BA%86%E8%A7%A3%E8%B2%9D%E6%B0%8F%E5%AE%9A%E7%90%86%E6%98%AF%E6%80%8E%E9%BA%BC%E8%A2%AB%E6%87%89%E7%94%A8%E5%9C%A8%E5%90%84%E5%BC%8F%E5%90%84%E6%A8%A3%E7%9A%84%E5%9C%B0%E6%96%B9%E3%80%82%E6%88%91%E5%80%91%E7%94%9A%E8%87%B3%E5%8F%AF%E4%BB%A5%E6%95%88%E4%BB%BF%E8%B2%9D%E6%B0%8F%E5%AE%9A%E7%90%86%E7%9A%84%E7%B2%BE%E7%A5%9E%EF%BC%8C%E8%AE%93%E8%87%AA%E5%B7%B1%E8%83%BD%E6%9B%B4%E7%90%86%E6%80%A7%E5%9C%B0%E8%A9%95%E4%BC%B0%E6%9C%AA%E7%9F%A5%E4%B8%A6%E5%BE%9E%E7%B6%93%E9%A9%97%E4%B8%AD%E5%AD%B8%E7%BF%92%E3%80%82&source=https%3A//leemeng.tw/intuitive-understandind-of-bayes-rules-and-learn-from-experience.html" target="_blank" title="分享到 LinkedIn">
            <i class="im im-linkedin" aria-hidden="true"></i>
        </a>
    </div>
    <div id="social-wrap">
        <a href="https://twitter.com/intent/tweet?text=%E5%BE%9E%E7%B6%93%E9%A9%97%E4%B8%AD%E5%AD%B8%E7%BF%92%20-%20%E7%9B%B4%E8%A7%80%E7%90%86%E8%A7%A3%E8%B2%9D%E6%B0%8F%E5%AE%9A%E7%90%86%E5%8F%8A%E5%85%B6%E6%87%89%E7%94%A8&url=https%3A//leemeng.tw/intuitive-understandind-of-bayes-rules-and-learn-from-experience.html&hashtags=bei-shi-ding-li,ji-lu,ji-qi-xue-xi" target="_blank" title="分享到 Twitter">
            <i class="im im-twitter" aria-hidden="true"></i>
        </a>
    </div>


    <!--custom images with icon shown on left nav-->

</div>

            <div class="col-full blog-content__main">

                <div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p><a href="https://zh.wikipedia.org/wiki/%E8%B4%9D%E5%8F%B6%E6%96%AF%E5%AE%9A%E7%90%86">貝氏定理（Bayes' theorem）</a>是機率論中，一個概念簡單卻非常強大的定理。有了機率論的存在，人們才能理性且合理地評估未知事物發生的可能性（例：今天的下雨機率有多少？我中樂透的可能性有多高？），並透過貝氏定理搭配經驗法則來不斷地改善目前的認知，協助我們做更好的決策。</p>
<p>英國數學家<a href="https://zh.wikipedia.org/wiki/%E5%93%88%E7%BD%97%E5%BE%B7%C2%B7%E6%9D%B0%E5%BC%97%E9%87%8C%E6%96%AF">哈羅德&middot;傑弗里斯</a>甚至<a href="https://en.wikipedia.org/wiki/Bayes%27_theorem#cite_note-1">說過</a>：</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<blockquote>
<p>
                        貝氏定理之於機率論，就像是畢氏定理之於幾何學。
                        <br/>
<br/>
</p>
</blockquote>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>因為其簡單且強大的特性，被廣泛應用在醫療診斷以及機器學習等領域。網路並不缺貝氏定理的教學文章，但多數以<a href="https://zh.wikipedia.org/wiki/%E8%B4%9D%E5%8F%B6%E6%96%AF%E5%AE%9A%E7%90%86">機率公式</a>出發，不夠直觀（至少以我個人來說），就算理解了也不易內化成自己的知識。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<center>
<img src="https://leemeng.tw/images/bayes/Bayes_Theorem_MMB_01.jpg"/>
</center>
<center>
                        https://commons.wikimedia.org/w/index.php?curid=14658489
                        （<a href="貝氏定理公式。感覺到數學的力量了嗎？" target="_blank">圖片來源</a>）
                        
                        <br/>
<br/>
</center>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>因此這篇將利用生活上我們（或<a href="https://zh.wikipedia.org/wiki/%E4%BA%BA%E5%B7%A5%E6%99%BA%E8%83%BD">人工智慧</a>）常需要考慮的事情當作引子，如：</p>
<ul>
<li>今天的下雨機率是多少？</li>
<li>這封 email 是垃圾郵件的可能性有多高？</li>
<li>醫生說我得癌症了，這可靠度有多高？（好吧，或許這沒那麼常發生）</li>
</ul>
<p>來直觀地了解貝氏定理是怎麼被應用在各式各樣的地方。我們甚至可以效仿貝氏定理的精神，讓自己能更理性地評估未知並從經驗中學習。</p>
<p>廢話不多說，讓我們開始吧！</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="今天會下雨嗎？">今天會下雨嗎？<a class="anchor-link" href="#今天會下雨嗎？">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>在實際說明貝氏定理的公式把你嚇跑之前，讓我們先做個簡單的假想實驗來說明貝氏定理的精神。</p>
<p>假設大雄一早準備出門跟靜香見面，正在考慮要不要帶傘出門。</p>
<p>起床的時候他想：</p>
<p>「這地區不太會下雨，不需要帶傘吧！」</p>
<p>往窗外一看，大雄眉頭一皺，發現烏雲密佈。</p>
<p>「痾有烏雲，感覺下雨機率上升了，但好懶得帶傘 .. 先吃完早餐再說吧。」</p>
<p>走到廚房，發現餐桌上一大堆螞蟻在開趴。</p>
<p>「依據老媽的智慧，螞蟻往屋內跑代表<a href="http://news.ltn.com.tw/news/local/paper/715319">下雨機率又提升了</a>。真的不得不帶傘了嗎 .. 不不不！我不要帶好麻煩！」</p>
<p>想著想著，這時候靜香打電話過來了：</p>
<p>「胖虎說他也要去喔！」「蛤你說什麼！？」</p>
<p>胖虎是有名的雨男，每次跟他出遊都會下雨。依照這個經驗以及前面看到的幾個現象，最後大雄放棄掙扎，帶著雨傘出門了。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<img src="https://leemeng.tw/images/bayes/andy-grizzell-543812-unsplash.jpg"/>
<br/>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>在上面的例子中，大雄觀察到三個現象：</p>
<ul>
<li>烏雲密佈</li>
<li>螞蟻開趴</li>
<li>胖虎出沒</li>
</ul>
<p>依據他過往的經驗，這些現象都會使得降雨的機率提升，讓他逐漸改變剛起床的時候「今天不太會下雨」的想法，最後決定帶傘出門。</p>
<p>這個決策的轉變過程，其實就是貝氏定理的精神：</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<blockquote>
<p>
                        針對眼前發生的現象以及獲得的新資訊，搭配過往經驗，來修正一開始的想法。
                        <br/>
<br/>
</p>
</blockquote>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>實際上，大雄已經在腦海中進行了多次貝氏定理的運算而不自知（我家大雄哪有那麼聰明）。現在讓我們用比較數學的方式來重現大雄腦海中的運算。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="讓我們帶點數字進去">讓我們帶點數字進去<a class="anchor-link" href="#讓我們帶點數字進去">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>在了解貝氏定理的目的以後，讓我們以<a href="https://zh.wikipedia.org/wiki/%E5%8F%91%E7%94%9F%E6%AF%94">發生比（odds）</a>的方式來闡述定理。發生比很簡單，就只是列出兩個（或以上）的事件分別（可能）發生的次數。</p>
<p>使用發生比的好處是可以很容易地比較不同事件發生的相對次數。後面會看到，我們也能把發生比轉成機率。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>假設依據過往氣象紀錄，大雄住的地區一年 365 天中有 270 天放晴，下雨的天數為 365 - 270 = 95 天。則下雨的發生比為：</p>
<div class="highlight"><pre><span></span>雨天數：晴天數 = 95：270
</pre></div>
<p>你可以把發生比想像成是一種相對關係，上面這個發生比代表，在大雄所住的地區，每觀測到 95 個雨天的日子，我們同時會觀測到 270 個晴天。晴天約是雨天的三倍之多（270 / 95）。</p>
<p>轉換成機率來看的話，就是把雨天的天數，去除以所有天數：</p>
<div class="highlight"><pre><span></span>95 / (95 + 270) = 0.26 = 26%
</pre></div>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>一年也就只有 26% 的降雨機會，這也是為何大雄一開始在還沒觀察到新現象（烏雲、螞蟻及胖虎）的時候，合理認為今天「應該」不會下雨的原因。</p>
<p>我們再繼續假設，依據大雄的過往經驗，他發現：</p>
<ul>
<li>雨天時，早上烏雲密佈的頻率是晴天時出現烏雲的 9 倍</li>
</ul>
<p>這個 9 倍是怎麼來的呢？</p>
<p>這其實是所謂的<a href="https://en.wikipedia.org/wiki/Likelihood_ratios_in_diagnostic_testing">概度比（likelihood ratio）</a>。分別計算雨天及晴天發生的情況下，出現「烏雲密佈」現象的機率以後，再將兩者相除：</p>
<div class="highlight"><pre><span></span>雨天時烏雲密佈的機率 = P(烏雲|雨天）
-------------------------------
晴天時烏雲密佈的機率 = P(烏雲|晴天）
</pre></div>
<p>這兩個機率又被稱為<a href="https://zh.wikipedia.org/wiki/%E6%9D%A1%E4%BB%B6%E6%A6%82%E7%8E%87">條件機率（conditional probability）</a>。一般 <code>P(A|B)</code> 代表在事件 B 發生的情況下，事件 A 發生的機率。</p>
<p>假設平均來看，在 10 個雨天裡頭，早上烏雲密佈的天數為 9 天（也就是說平均有 1 天的雨天是早上沒有烏雲密佈的），則我們可以說，「給定雨天的條件下，烏雲密佈」的機率是：</p>
<div class="highlight"><pre><span></span>P(烏雲|雨天） = 9 / 10
</pre></div>
<p>另外在 10 個晴天裡頭，早上烏雲密佈的天數平均為 1 天（也就是說早上雖然烏雲密佈，但最後並沒有下雨的天數），則「給定晴天的條件下，烏雲密佈」的機率是：</p>
<div class="highlight"><pre><span></span>P(烏雲|晴天） = 1 / 10
</pre></div>
<p>則烏雲密佈的概度比即為：</p>
<div class="highlight"><pre><span></span>P(烏雲|雨天）    9 / 10
-----------  = --------- = 9
P(烏雲|晴天）    1 / 10
</pre></div>
<p>雖然「概度比」一詞很饒舌，但它就是一個比例，也就是「幾分之幾」的概念。 9 就是「一分之九」＝ 9 倍，而因為分母是「晴天」，你可以解讀這個 9 為</p>
<ul>
<li>「在烏雲密佈發生的情況下，每觀測到 1 個晴天，就會同時觀測到 9 個雨天」。</li>
</ul>
<p>也可以像是大雄觀察到的：</p>
<ul>
<li>「雨天時，早上烏雲密佈的頻率是晴天時出現烏雲的 9 倍」。</li>
</ul>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<center>
<img src="https://leemeng.tw/images/bayes/cloudy-field-2.jpg"/>
</center>
<center>
                        經驗告訴我們，早上烏雲密佈的情況下，該天是雨天的機率就隨著上升
                        <br/>
<br/>
</center>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="貝氏定理初顯鋒芒">貝氏定理初顯鋒芒<a class="anchor-link" href="#貝氏定理初顯鋒芒">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>所以有了這個倍數可以做什麼？直覺及經驗告訴我們，在觀測到烏雲密佈的前提下，下雨機率理論上會有所提升。</p>
<p>換句話說，在烏雲密佈，且觀測到的晴天數不變的情況下，觀測到的雨天數應該要有所上升，這樣下雨的天數在所有天數裡頭的比例才會上升。</p>
<p>而其上升的倍數就是前面的概度比（ 9 倍）。因此在烏雲密佈發生的情況下，新的下雨發生比（odds）可以寫成：</p>
<div class="highlight"><pre><span></span>新雨天數：晴天數 = 原雨天數 * 概度比：晴天數
　　　　　　　　 =   95   *   9   ： 270
　　　　　　　　 =       855      ： 270
</pre></div>
<p>新的下雨發生比是我們利用觀測到的現象重新計算的，因此一般稱為「事後發生比」（posterior odds）；而一開始的發生比則被稱為「事前發生比」（prior odds）。</p>
<p>事後發生比告訴我們，在烏雲密佈的情況下，每觀測 855 個雨天，就會同時觀測到 270 個晴天。跟事前發生比相反，現在雨天數反而超過晴天的三倍（855 /　270）。</p>
<p>要計算新的下雨機率，我們一樣把雨天數去除以所有天數：</p>
<div class="highlight"><pre><span></span>855 / (855 + 270) = 0.76 = 76%
</pre></div>
<p>跟一開始的 26% 相比，在觀測到烏雲密佈這個現象以後，下雨的機率足足上升了 50 個百分點，現在我們有更充分的理由請大雄帶把傘了。</p>
<p>實際上，透過上面的計算，我們已經套用貝氏定理的公式了（<a href="https://betterexplained.com/articles/understanding-bayes-theorem-with-ratios/">發生比版本</a>）：</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<blockquote>
<p>
                        事後發生比 = 概度比 * 事前發生比
                        <br/>
<br/>
</p>
</blockquote>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>如同大雄的例子，一般應用貝氏定理的情境如下：</p>
<ol>
<li>對一件未知事物有初步的猜測（事前發生比）</li>
<li>觀測到跟該事物相關的現象</li>
<li>利用先前跟該現象有關的經驗計算出概度比</li>
<li>利用概度比修正該猜測，得到修正後結果（事後發生比）</li>
<li>重新評估、做決策</li>
<li>又觀察到新現象，重複步驟 3 到 5 </li>
</ol>
<p>透過貝氏定理，我們可以很快速地利用過去的經驗改善自己的想法，並產生更好的決策。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="大雄不死心：單純貝式">大雄不死心：單純貝式<a class="anchor-link" href="#大雄不死心：單純貝式">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>雖然觀察到了烏雲密佈，且利用過往經驗修正下雨的機率到了 76%，懶惰的大雄一開始還是不想帶傘出去。但為何最後還是帶傘出門了呢？那是因為除了烏雲密佈以外，他還觀察到了其他兩個影響下雨機率的現象：</p>
<ul>
<li>螞蟻開趴</li>
<li>胖虎出沒</li>
</ul>
<p>貝氏定理本身雖然強大，但其中一個使它被廣泛利用的是<a href="https://zh.wikipedia.org/wiki/%E6%9C%B4%E7%B4%A0%E8%B4%9D%E5%8F%B6%E6%96%AF%E5%88%86%E7%B1%BB%E5%99%A8">單純貝式（Naive Bayes）</a>的概念：假設不同現象之間出現的機率為<a href="https://zh.wikipedia.org/wiki/%E7%8B%AC%E7%AB%8B_(%E6%A6%82%E7%8E%87%E8%AE%BA">獨立</a>)。</p>
<p>設成獨立有什麼好處？事情變得很簡單，我們不用考慮現象 A 跟現象 B 之間的關聯性，能針對每個現象，分別去計算概度比，修正從「前面」的現象得到的結果，持續改善我們的認知。也就是上一節提到的貝氏定理的應用步驟 6。</p>
<p>如法炮製，讓我們假設大雄針對其他兩個現象的經驗是：</p>
<ul>
<li>雨天時，螞蟻出現在室內的天數是晴天的 2 倍</li>
<li>雨天時，胖虎出遊的次數是晴天的 3 倍</li>
</ul>
<p>讓我們再次套用貝氏定理，但這次不是套用在一開始什麼都不知道的事前發生比：</p>
<div class="highlight"><pre><span></span>雨天數：晴天數 = 95：270
</pre></div>
<p>而是在觀察到烏雲密佈後的事後發生比：</p>
<div class="highlight"><pre><span></span>烏雲密佈下的雨天數：晴天數 = 855：270
</pre></div>
<p>首先，讓我們套用跟螞蟻相關的經驗：</p>
<ul>
<li>雨天時螞蟻出現在室內的天數是晴天的 2 倍</li>
</ul>
<p>概度比已經算好，所以依照貝氏定理的公式：</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<blockquote>
<p>
                        事後發生比 = 概度比 * 事前發生比
                        <br/>
<br/>
</p>
</blockquote>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>新的（螞蟻）事後發生比為：</p>
<div class="highlight"><pre><span></span>新雨天數：晴天數 = 原雨天數 * 概度比：晴天數
　　　　　　　　 =   855  *   2   ： 270
　　　　　　　　 =      1710      ： 270
</pre></div>
<p>下雨的機率則提升為：</p>
<div class="highlight"><pre><span></span>1710 / (1710 + 270) = 0.86 = 86%
</pre></div>
<p>比起只有烏雲密佈，在螞蟻也出現的情況下，降雨機率又提升了接近 10%。大雄是一個降雨機率不大於 90% 就不帶傘的傢伙，讓我們看看胖虎出沒能不能使他改變心意。</p>
<p>同樣，再次套用定理到上一個（螞蟻的）發生比，則新的（胖虎）事後發生比為：</p>
<div class="highlight"><pre><span></span>新雨天數：晴天數 = 原雨天數 * 概度比：晴天數
　　　　　　　　 =  1710  *   3   ： 270
　　　　　　　　 =      5130      ： 270
</pre></div>
<p>在轉換成機率之前，我們發現新的雨天數是晴天數的 10 倍以上，因此可以想像新的機率至少是 90% 以上。而實際計算下雨的機率：</p>
<div class="highlight"><pre><span></span>5130 / (5130 + 270) = 0.95 = 95%
</pre></div>
<p>在觀察到烏雲密佈、螞蟻以及胖虎出沒以後，大雄預估降雨機率上升至 95%，這下不得不帶傘出門了。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<center>
<img src="https://leemeng.tw/images/bayes/eddy-klaus-33079-unsplash.jpg"/>
</center>
<center>
                        重複套用貝氏定理以修正想法的過程就像是在創作：把眼前所有所見（顏料）一個一個納入考量，做出最後的判斷（作品）
                        <br/>
<br/>
</center>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="動動腦時間">動動腦時間<a class="anchor-link" href="#動動腦時間">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>到了這邊，我相信你現在應該已經可以在腦中直觀地運用貝氏定理：針對眼前發生的現象，運用過去相關的經驗（計算概度比），來理性地評估某事件可能發生的機率。</p>
<p>事實上在你繼續讀下去之前，我建議先停一停，思考幾個可以實際在生活中運用（或者已經在用）此定理的現象，以幫助你內化（internalize）這些概念。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<img src="https://leemeng.tw/images/bayes/neonbrand-618322-unsplash.jpg"/>
<br/>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>如果你一時想不到點子，這邊提供幾個例子：</p>
<ul>
<li>email 內文裡頭出現「週年慶」時，該郵件為垃圾信的機率</li>
<li>新聞內文出現「柯文哲」時，文章主題為政治的機率</li>
<li><a href="https://zh.wikipedia.org/wiki/%E8%B4%9D%E5%8F%B6%E6%96%AF%E5%AE%9A%E7%90%86">醫生說你得胰腺癌</a>時，你真的得病的機率</li>
<li>玩<a href="https://zh.wikipedia.org/wiki/%E8%8B%B1%E9%9B%84%E8%81%94%E7%9B%9F">英雄聯盟</a>時，<a href="https://baike.baidu.com/item/kDa/20623453">KDA</a> 超過 4 的對手排位是鑽石以上的機率</li>
<li>在東京藥妝店血拼，旁邊講中文的人是台灣人的機率</li>
</ul>
<p>如果你有其他有趣的例子，歡迎留言跟大家分享。（現在留言不用登入了！）</p>
<p>如同上述，貝氏定理有非常多應用。不過這邊想深入探討第一個 email 的案例：給定一封電子郵件的內文，你要怎麼判斷該信是不是垃圾信件？</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="從人腦到電腦：讓機器幫我們做判斷">從人腦到電腦：讓機器幫我們做判斷<a class="anchor-link" href="#從人腦到電腦：讓機器幫我們做判斷">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<center>
<img src="https://leemeng.tw/images/bayes/spam.png" style="mix-blend-mode: initial;width:70%;"/>
</center>
<center>
                        一個典型的垃圾郵件內文
                        <br/>
<br/>
</center>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>你說沒有什麼事情難得了我們人腦。依照過往經驗：</p>
<ul>
<li>垃圾信件裡頭出現「週年慶」一詞的機會是一般信件的 20 倍</li>
<li>垃圾信件裡頭出現「折扣」一詞的機會是一般信件的 10 倍</li>
</ul>
<p>在假設所有信件裡頭一半是垃圾信件（發生比 1：1）的前提下，依照單純貝氏的公式，這封信是垃圾信件的可能性上升 200 倍（20 * 10），我們可以放心把這封信丟入垃圾信分類。</p>
<p>但是沒有人會想要在腦中對每封信做這個運算。人類是懶惰的，能自動化的東西就請電腦幫我們解決就好了。</p>
<p>另外你也不可能記得每一個詞的倍數，實際上也沒有必要。只要讓電腦幫我們記住每個詞分別在垃圾郵件以及一般信件出現的次數，就能計算所有詞彙的概度比（odds）。</p>
<p>等到一封新的信件來以後，找出裡頭的字對應的倍數做相乘以後，電腦就能自動分類郵件了。事實上這就是<a href="https://zh.wikipedia.org/wiki/%E6%9C%BA%E5%99%A8%E5%AD%A6%E4%B9%A0">機器學習</a>中<a href="https://zh.wikipedia.org/wiki/%E6%9C%B4%E7%B4%A0%E8%B4%9D%E5%8F%B6%E6%96%AF%E5%88%86%E7%B1%BB%E5%99%A8">單純貝氏分類器（Naive Bayes Classifier）</a>在做的事情。</p>
<p>讓機器取代人腦自動判斷，有幾個顯而易見的好處：</p>
<ul>
<li>判斷速度倍增</li>
<li>記憶能力超強</li>
<li>（可以把分類郵件空出的時間拿去看貓咪影片）</li>
</ul>
<p>唷呼！垃圾郵件自動變不見！小鎮村又變得更美好了。</p>
<p>當然你想自己實作單純貝氏分類器的話，Python 可以使用 <a href="http://scikit-learn.org/stable/modules/naive_bayes.html">scikit-learn</a> 來實作。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="小心！你的經驗可靠嗎？">小心！你的經驗可靠嗎？<a class="anchor-link" href="#小心！你的經驗可靠嗎？">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>我們花了很長的篇幅講了幾個貝氏定理/單純貝氏的應用，也看到它既簡單又強大的特性。但在你摩拳擦掌並實際應用此定理的時候，有幾點需要注意：</p>
<ul>
<li>不同現象/事件真的獨立嗎？</li>
<li>一開始的猜測以及經驗可靠嗎？</li>
</ul>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>很多現象不一定是完全獨立而是相關的。不過一個常見的解決方法是想辦法增加更多的現象/事件/特徵值（features）來讓做出來的貝氏分類器比較可靠。貝氏定理當然不完美，但正如統計學家<a href="https://www.google.co.jp/search?q=George+E.+P.+Box&amp;rlz=1C5CHFA_enJP695JP700&amp;oq=George+E.+P.+Box&amp;aqs=chrome..69i57j69i60&amp;sourceid=chrome&amp;ie=UTF-8">喬治&middot;E&middot;P&middot;博克斯</a><a href="https://en.wikipedia.org/wiki/All_models_are_wrong">所說</a>：</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<blockquote>
<p>
                        所有模型（models）都是錯的；但有些是有用的。
                        <br/>
<br/>
</p>
</blockquote>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>儘管「獨立」這個假設在某些情況下不合常理，但在如垃圾郵件分類等問題上，貝氏分類器有不錯的表現。而且重點是它實作簡單，可以拿來當作 baseline。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>而一開始的猜測跟經驗可不可靠這個問題，英國數學家<a href="https://zh.wikipedia.org/wiki/%E5%8D%A1%E5%B0%94%C2%B7%E7%9A%AE%E5%B0%94%E9%80%8A">卡爾&middot;皮爾森</a>，針對貝氏定理則給出一個我很愛的<a href="https://en.wikipedia.org/wiki/Talk%3ABayesian">名言</a>：</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<blockquote>
<p>
                        一個信奉貝氏定理的人常常做這樣的事情：模糊地期待著馬的出現，瞥見驢子的蹤影，強烈地相信他是見到了一匹駝子。
                        <br/>
<br/>
</p>
</blockquote>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>「先入為主」大概是應用貝氏定理最忌諱的點了。下次再套用定理時，記得先思考自己一開始的假設以及經驗是否值得信任或者有什麼盲點。需不需要搜集更多資料來修正一開始的想法。</p>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<center>
<img src="https://leemeng.tw/images/bayes/tim-mossholder-603227-unsplash.jpg"/>
</center>
<center>
                        我真的是驢子不是駝子啊！（豆知識：駝是馬跟驢生下的動物）
                        <br/>
<br/>
</center>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<h2 id="總結">總結<a class="anchor-link" href="#總結">&para;</a></h2>
</div>
</div>
</div>
<div class="cell border-box-sizing text_cell rendered"><div class="inner_cell">
<div class="text_cell_render border-box-sizing rendered_html">
<p>我們在這篇開頭首先用「大雄評估下雨」的例子來直觀地理解貝氏定理背後的精神，接著透過簡單的數學概念、發生比（odds）以及概度比（likelihood ratio）來推出基本的貝氏定理公式。</p>
<p>接著進一步延伸至單純貝氏（naive bayes）的概念，讓機器透過過去累積的資訊，為我們自動分類垃圾郵件。</p>
<p>最後我們提到一些應用貝氏定理需要注意的事情。</p>
<p>即使基本的貝氏定理不難，延伸的領域非常的廣。這篇沒辦法包含所有範圍，但希望透過這篇基礎介紹，能讓讀者能利用貝氏定理的概念，更理性地評估未知並從經驗中學習（或者是建立自己的貝氏分類器）。</p>
<p>另外如果你有其他有趣的例子可以應用在貝氏定理，歡迎留言跟大家分享。（現在留言不用登入了！）</p>
</div>
</div>
</div>
<script type="text/javascript">if (!document.getElementById('mathjaxscript_pelican_#%@#$@#')) {
    var mathjaxscript = document.createElement('script');
    mathjaxscript.id = 'mathjaxscript_pelican_#%@#$@#';
    mathjaxscript.type = 'text/javascript';
    mathjaxscript.src = '//cdnjs.cloudflare.com/ajax/libs/mathjax/2.7.1/MathJax.js?config=TeX-AMS-MML_HTMLorMML';
    mathjaxscript[(window.opera ? "innerHTML" : "text")] =
        "MathJax.Hub.Config({" +
        "    config: ['MMLorHTML.js']," +
        "    TeX: { extensions: ['AMSmath.js','AMSsymbols.js','noErrors.js','noUndefined.js'], equationNumbers: { autoNumber: 'AMS' } }," +
        "    jax: ['input/TeX','input/MathML','output/HTML-CSS']," +
        "    extensions: ['tex2jax.js','mml2jax.js','MathMenu.js','MathZoom.js']," +
        "    displayAlign: 'center'," +
        "    displayIndent: '0em'," +
        "    showMathMenu: true," +
        "    tex2jax: { " +
        "        inlineMath: [ ['$','$'] ], " +
        "        displayMath: [ ['$$','$$'] ]," +
        "        processEscapes: true," +
        "        preview: 'TeX'," +
        "    }, " +
        "    'HTML-CSS': { " +
        " linebreaks: { automatic: true, width: '95% container' }, " +
        "        styles: { '.MathJax_Display, .MathJax .mo, .MathJax .mi, .MathJax .mn': {color: 'black ! important'} }" +
        "    } " +
        "}); ";
    (document.body || document.getElementsByTagName('head')[0]).appendChild(mathjaxscript);
}
</script>


                <!-- Tags -->
                <p class="blog-content__tags">
                    <span>Post Tags</span>

                    <span class="blog-content__tag-list">
                        <a href="https://leemeng.tw/tag/bei-shi-ding-li.html" rel="tag">貝氏定理</a>
                        <a href="https://leemeng.tw/tag/ji-lu.html" rel="tag">機率</a>
                        <a href="https://leemeng.tw/tag/ji-qi-xue-xi.html" rel="tag">機器學習</a>
                    </span>

                </p>


                <!-- end Tags -->


                <!-- Mail-list-subscribe -->
                <div id="article-inner-subscribe" class="blog-content__pagenav">
                    <div class="blog-content__nav">
                        <div class="blog-content__prev">
                            <a class="open-popup" rel="subscribe">
                                <span>Get Latest Arrivals</span>
                                訂閱最新文章
                            </a>
                        </div>
                        <div class="blog-content__next">
                            <p>
                                跟資料科學相關的最新文章直接送到家。</br>
                                只要加入訂閱名單，當新文章出爐時，</br>
                                你將能馬上收到通知 <i class="im im-newspaper-o" aria-hidden="true"></i>
                            </p>
                        </div>
                    </div>
                    <div class="blog-content__all">
                        <a class="open-popup btn btn--primary ">&nbsp;&nbsp;Subscribe&nbsp;&nbsp;&nbsp;</a>
                    </div>
                </div>
                <!-- end Mail-list-subscribe -->

                <!--Pagination-->
                <div id="article-inner-neighbor-pages" class="blog-content__pagenav">
                    <div class="blog-content__nav">
                        <div class="blog-content__prev">
                            <a href="https://leemeng.tw/some-thought-on-learning-from-machine-learning.html" rel="prev">
                                <span>Previous Post</span>
                                從彼此學習 - 淺談機器學習以及人類學習
                            </a>
                        </div>
                        <div class="blog-content__next">
                            <a href="https://leemeng.tw/demystify-the-hype-of-data-science-and-its-value.html" rel="next">
                                <span>Next Post</span>
                                揭開資料科學的神秘面紗
                            </a>
                        </div>
                    </div>

                    <div class="blog-content__all">
                        <a href="blog.html" class="btn btn--primary">
                            View All Post
                        </a>
                    </div>
                </div>
                <!-- end Pagination-->

            </div><!-- end blog-content__main -->


        </div>
        </div> <!-- end blog-content -->

    </article>

<div class="comments-wrap">
    <div id="comments" class="row">
        <div class="col-full">
            <div id="disqus_thread"></div>
        </div>
    </div>
</div>

<script type="text/javascript">
var disqus_shortname = 'leemengtaiwan';
var disqus_title = '從經驗中學習 - 直觀理解貝氏定理及其應用';

(function() {
    var dsq = document.createElement('script'); dsq.type = 'text/javascript'; dsq.async = true;
    dsq.src = 'https://' + disqus_shortname + '.disqus.com/embed.js';
    (document.getElementsByTagName('head')[0] || document.getElementsByTagName('body')[0]).appendChild(dsq);
})();
</script>
<noscript>Please enable JavaScript to view the <a href="http://disqus.com/?ref_noscript">comments powered by Disqus.</a></noscript>


<!-- footer
================================================== -->
<footer style="background:#0a0809">
    <div class="row">
        <div class="col-full">

            <div class="footer-logo">
                <a class="footer-site-logo" href="#0"><img src="https://leemeng.tw/theme/images/logo.png" alt="Homepage"></a>
            </div>

            <ul class="footer-social">
<li><a href="https://github.com/leemengtaiwan" target="_blank">
    <i class="im im-github" aria-hidden="true"></i>
    <span>Github</span>
</a></li>
<li><a href="https://www.facebook.com/LeeMengTaiwan" target="_blank">
    <i class="im im-facebook" aria-hidden="true"></i>
    <span>Facebook</span>
</a></li>
<li><a href="https://www.instagram.com/leemengtaiwan/" target="_blank">
    <i class="im im-instagram" aria-hidden="true"></i>
    <span>Instagram</span>
</a></li>
<li><a href="https://www.linkedin.com/in/leemeng1990/" target="_blank">
    <i class="im im-linkedin" aria-hidden="true"></i>
    <span>LinkedIn</span>
</a></li>            </ul>
        </div>
    </div>
    <div class="row footer-bottom">
        <div class="col-twelve">
            <div class="go-top">
            <a class="smoothscroll" title="Back to Top" href="#top"><i class="im im-arrow-up" aria-hidden="true"></i></a>
            </div>
        </div>
    </div> <!-- end footer-bottom -->
</footer> <!-- end footer -->


        <!-- Javascript
    ================================================== -->
    <script src="https://leemeng.tw/theme/js/jquery-3.2.1.min.js"></script>
    <script src="https://leemeng.tw/theme/js/plugins.js"></script>
    <script src="https://leemeng.tw/theme/js/main_raw.js"></script>
    <script type='text/javascript' src='https://leemeng.tw/theme/js/scroll-detect.js'></script>

    <!--https://instant.page/-->
    <script src="//instant.page/1.0.0" type="module" integrity="sha384-6w2SekMzCkuMQ9sEbq0cLviD/yR2HfA/+ekmKiBnFlsoSvb/VmQFSi/umVShadQI"></script>


    <script type='text/javascript' src='https://leemeng.tw/theme/js/progress-bar.js'></script>
    <script type='text/javascript' src='https://leemeng.tw/theme/js/scroll-detect.js'></script>

    <!--show and hide left navigation by scrolling-->
    <script>
    $(document).scroll(function() {
        var y = $(this).scrollTop();
      if ( $(window).width() > 980 ) {
        if (y > 600) {
          $('#left-navigation').fadeIn(300);
        } else {
          $('#left-navigation').fadeOut(300);
        }
      }
    });
    </script>

<!--reference: https://gist.github.com/scottmagdalein/259d878ad46ed6f2cdce-->
<script type="text/javascript" src="//downloads.mailchimp.com/js/signup-forms/popup/embed.js" data-dojo-config="usePlainJson: true, isDebug: false">
</script>

<script type="text/javascript">
  function showMailingPopUp() {
    require(["mojo/signup-forms/Loader"], function(L) { L.start({"baseUrl":"mc.us18.list-manage.com","uuid":"151cb59f2de814c499c76b77a","lid":"dd1d78cc5e"})})
    document.cookie = "MCPopupClosed=; expires=Thu, 01 Jan 1970 00:00:00 UTC";
    document.cookie = "MCPopupSubscribed=; expires=Thu, 01 Jan 1970 00:00:00 UTC";
  };

  $(function() {
    $(".open-popup").on('click', function() {
      showMailingPopUp();
    });
  });
</script><!--https://darkmodejs.learn.uno/-->
<script src="https://cdn.jsdelivr.net/npm/darkmode-js@1.4.0/lib/darkmode-js.min.js"></script>
<script>
var options = {
  bottom: '32px', // default: '32px'
  right: 'unset', // default: '32px'
  left: '32px', // default: 'unset'
  time: '0.2s', // default: '0.3s'
  mixColor: '#fff', // default: '#fff'
  backgroundColor: '#fff',  // default: '#fff'
  buttonColorDark: '#100f2c',  // default: '#100f2c'
  buttonColorLight: '#fff', // default: '#fff'
  saveInCookies: true, // default: true,
  label: '🌓', // default: ''
  autoMatchOsTheme: true // default: true
}

const darkmode = new Darkmode(options);
darkmode.showWidget();
</script>
<!--reference: https://www.w3schools.com/howto/tryit.asp?filename=tryhow_js_overlay-->
<script>
function openTocNav() {
    document.getElementById("tocNav").style.width = "100%";
}

function closeTocNav() {
    document.getElementById("tocNav").style.width = "0%";
}

function toggleTocNav() {
    var current_width = document.getElementById("tocNav").style.width;
    if (current_width == "100%") {
        document.getElementById("tocNav").style.width = "0%";
    } else {
        document.getElementById("tocNav").style.width = "100%";
    }
}

function closeLeftNavImage(elementId) {
    document.getElementById(elementId).style.width = "0%";
}

function toggleLeftNavImage(elementId) {
    var current_width = document.getElementById(elementId).style.width;
    if (current_width == "100%") {
        document.getElementById(elementId).style.width = "0%";
    } else {
        document.getElementById(elementId).style.width = "100%";
    }
}

</script>


</body>
</html>