起首，你曉得本身想要猜測(cè)或檢測(cè)甚么嗎？你有足夠的數(shù)據(jù)停止剖析以樹(shù)立猜測(cè)模子嗎？你有界說(shuō)模子和練習(xí)模子所需的人員和對(duì)象嗎？你曾經(jīng)有了統(tǒng)計(jì)或物理模子來(lái)作為一個(gè)猜測(cè)基準(zhǔn)嗎？

　　這篇文章對(duì)你的人工智能和機(jī)械進(jìn)修項(xiàng)目停止分化，評(píng)論辯論其各個(gè)部門(mén)所帶來(lái)的影響，從而贊助你肯定公司能否真正預(yù)備須要應(yīng)用機(jī)械進(jìn)修、深度進(jìn)修某人工智能。

　　你具有年夜量的數(shù)據(jù)

　　足夠的相干數(shù)據(jù)是猜測(cè)和特點(diǎn)辨認(rèn)的需要前提。有了它，你能夠會(huì)勝利；沒(méi)有它，則注定掉敗。那末你須要若干數(shù)據(jù)呢？你測(cè)驗(yàn)考試歸入模子的身分越多，所須要的數(shù)據(jù)就越多，不管你是在做通俗的統(tǒng)計(jì)猜測(cè)、機(jī)械進(jìn)修照樣深度進(jìn)修。

　　以發(fā)賣猜測(cè)中罕見(jiàn)的成績(jī)?yōu)槔帽龋瑸榱瞬谎舆t交貨，且不會(huì)占用太多金錢(qián)和現(xiàn)貨貨排擠間，那末你下個(gè)月將在邁阿密出售若干水師藍(lán)短袖襯衫？和你須要在邁阿密店和亞特蘭年夜倉(cāng)庫(kù)中貯備若干存活？批發(fā)是強(qiáng)季候性行業(yè)，所以你須要從多年的汗青數(shù)據(jù)中總結(jié)出有統(tǒng)計(jì)學(xué)意義的月度數(shù)據(jù)，從而修改月度銷量動(dòng)搖，并樹(shù)立一個(gè)年化趨向——這還只是一個(gè)尺度的時(shí)光序列剖析。機(jī)械進(jìn)修比統(tǒng)計(jì)模子須要更多的數(shù)據(jù)，而深度進(jìn)修模子是它的好幾倍。

　　統(tǒng)計(jì)模子會(huì)剖析你的全國(guó)連鎖店在 5+ 年間的襯衫月銷量，并應(yīng)用這一數(shù)據(jù)來(lái)猜測(cè)下個(gè)月的襯衫銷量，能夠有幾十萬(wàn)（假定是 30 萬(wàn)）。然后你可以猜測(cè)邁阿密的襯衫銷量占全國(guó)銷量的百分比（假定是 3%），并零丁猜測(cè)出藍(lán)色短袖上衣銷量所占襯衫性銷量的百分比（假定是 1%）。該模子會(huì)指出，下個(gè)月藍(lán)色短袖襯衫總銷量的 90% 閣下將售于邁阿密。你可以經(jīng)由過(guò)程比較分歧產(chǎn)物的年度同店銷量來(lái)核實(shí)猜測(cè)成果，同時(shí)剖析它們之間的差別水平。

　　如今，假定你想要斟酌一些內(nèi)部身分，好比氣象和風(fēng)行趨向。短袖襯衫在熱天或好天時(shí)是否是比陰雨地利賣的更好？能夠如斯。你可以將汗青氣候數(shù)據(jù)歸入到你的模子中來(lái)做猜測(cè)，固然如許做有點(diǎn)愚笨，由于你須要做一個(gè)時(shí)光序列的統(tǒng)計(jì)模子，所以你能夠會(huì)決議應(yīng)用回歸叢林，趁便再嘗嘗其它 7 種回歸機(jī)械進(jìn)修模子，然后將每一個(gè)模子測(cè)得的「cost」（一個(gè)歸一化誤差函數(shù)）與客歲的現(xiàn)實(shí)成果比擬較，從而找到最好模子。

　　比擬于客歲同時(shí)段的水師藍(lán)襯衫銷量，下個(gè)月會(huì)更好照樣更差？你可以看看水師藍(lán)服裝網(wǎng)www.vhao.net一切的月度銷量，并猜測(cè)出年度風(fēng)行趨向，然后將其歸入到你的機(jī)械進(jìn)修模子中。或許你能夠須要來(lái)自時(shí)髦媒體方面的信息對(duì)模子停止手動(dòng)校訂。（「為以防萬(wàn)一，假定下月銷量會(huì)進(jìn)步 20%。」）

　　或許你想樹(shù)立一個(gè)深度神經(jīng)收集來(lái)完美這個(gè)模子。你能夠會(huì)發(fā)明，每添加一個(gè)隱蔽層，便可以將回歸誤差進(jìn)步幾個(gè)百分點(diǎn)，直到某一時(shí)辰，再添加隱蔽層也杯水車薪，爾后收益遞加。這類情形能夠是由于形式中沒(méi)有更多的特點(diǎn)可供辨認(rèn)，或許更能夠的緣由是，曾經(jīng)沒(méi)有足夠多的數(shù)據(jù)來(lái)支撐模子的深刻改良。

　　你有足夠的數(shù)據(jù)迷信家

　　能夠你曾經(jīng)留意到，單小我須要單獨(dú)樹(shù)立下面評(píng)論辯論的一切模子。其實(shí)不是如許，建模子不只僅是把數(shù)據(jù)倒在漏斗中然后按個(gè)按鈕這么簡(jiǎn)略。不論你應(yīng)用哪一種對(duì)象——雖然供給商能夠?qū)Υ藭?huì)有請(qǐng)求，它須要經(jīng)歷、直覺(jué)、編程才能和優(yōu)越的統(tǒng)計(jì)學(xué)配景，如許能力輕松駕御機(jī)械進(jìn)修，從而完成你的設(shè)法主意。

　　特別是某些廠商常常宣稱，「任何人」或「任何營(yíng)業(yè)腳色」都可使用商家事后練習(xí)過(guò)、可運(yùn)用的機(jī)械進(jìn)修模子。假如該模子正好可以處理手頭的成績(jī)，這話不假，好比將正式的魁北克法語(yǔ)文本翻譯為英語(yǔ)，但更罕見(jiàn)的情形是，現(xiàn)有的練習(xí)過(guò)的機(jī)械進(jìn)修模子其實(shí)不實(shí)用于你的數(shù)據(jù)。既然你曾經(jīng)練習(xí)了模子，你就須要數(shù)據(jù)剖析師和數(shù)據(jù)迷信家來(lái)指點(diǎn)練習(xí)，這更像是一門(mén)藝術(shù)，而非工程或迷信。

　　在雇用數(shù)據(jù)迷信家時(shí)，最奇異的工作之一就是對(duì)任務(wù)崗?fù)さ恼?qǐng)求，特別是與受聘者的現(xiàn)實(shí)技巧比擬。告白上常常說(shuō)「雇用：數(shù)據(jù)迷信家。STEM 博士。20 年經(jīng)歷。」第一個(gè)怪事是，該范疇的成長(zhǎng)過(guò)程還未足 20 年。第二件怪事是，公司雇傭 26 歲的碩士卒業(yè)生——也即除學(xué)術(shù)界外沒(méi)有任何任務(wù)經(jīng)歷，與 20 年經(jīng)歷的請(qǐng)求相去甚遠(yuǎn)——偏好那些曾經(jīng)有相干經(jīng)歷的人，由于他們擔(dān)憂高等人員太貴，雖然他們的請(qǐng)求是 20 年任務(wù)經(jīng)歷。是的，這很虛假，且十之八九長(zhǎng)短法的年紀(jì)輕視，但實(shí)際情形就是這個(gè)模樣。

　　你跟蹤或取得那些主要的身分

　　即便你有年夜量的數(shù)據(jù)和許多數(shù)據(jù)迷信家，你也能夠沒(méi)法具有包括一切相干變量的數(shù)據(jù)。以數(shù)據(jù)庫(kù)術(shù)語(yǔ)的話說(shuō)，你能夠有年夜量的行，但缺乏一些列。統(tǒng)計(jì)學(xué)下去說(shuō)就是，你能夠有沒(méi)有法說(shuō)明的方差。

　　一些自力變量的丈量（好比氣象不雅測(cè)）很輕易取得并被歸并到數(shù)據(jù)集中，乃至可在過(guò)后被歸并。其它一些變量的丈量或獲得進(jìn)程能夠較為艱苦，好比不實(shí)在際或本錢(qián)昂揚(yáng)，即便你曉得這些變量是甚么。

　　舉一個(gè)化學(xué)范疇的例子。當(dāng)你在銅上鍍鉛時(shí)，你可以丈量氟硼酸鍍液的溫度和濃度，并記載陽(yáng)極電壓，但假如溶中沒(méi)有合適數(shù)目的肽鏈，那末你就不會(huì)獲得很好的成果。假如你沒(méi)有稱量放入溶液中的肽鏈，就沒(méi)法曉得這類癥結(jié)催化劑的劑量，那末你將沒(méi)法應(yīng)用其它變量來(lái)說(shuō)明電鍍質(zhì)量的變更。

　　你有清算和轉(zhuǎn)換數(shù)據(jù)的辦法

　　數(shù)據(jù)簡(jiǎn)直老是那末喧鬧。丈量進(jìn)程能夠會(huì)喪失一個(gè)或多個(gè)值；單個(gè)值能夠會(huì)超越規(guī)模，或與統(tǒng)一計(jì)量進(jìn)程中的其它值不相當(dāng)；電子丈量能夠因?yàn)殡娫肼暥兊媒^確；答復(fù)成績(jī)的人能夠其實(shí)不懂得成績(jī)自己，或是假造謎底；諸如斯類。

　　在任何剖析進(jìn)程中，數(shù)據(jù)過(guò)濾步調(diào)平日須要消費(fèi)最多設(shè)置時(shí)光——是依據(jù)我的經(jīng)歷，它占到總剖析時(shí)光的 80% 到 90%。有些公司在它們的 ETL（提取、轉(zhuǎn)換和加載）進(jìn)程中清算數(shù)據(jù)，如許剖析師應(yīng)當(dāng)永久都看到不良數(shù)據(jù)點(diǎn)了，而其它公司則將數(shù)據(jù)與 ETL（和最初一步的轉(zhuǎn)換步調(diào)）進(jìn)程放在數(shù)據(jù)倉(cāng)庫(kù)或數(shù)據(jù)湖中。這意味著，即便是最輕易過(guò)濾失落的臟數(shù)據(jù)也會(huì)被保留上去，實(shí)際上，過(guò)濾器和轉(zhuǎn)換步調(diào)須要跟著時(shí)光的推移而停止改良。

　　即便是過(guò)濾后的準(zhǔn)確數(shù)據(jù)能夠也須要在剖析前做進(jìn)一步的轉(zhuǎn)換。與統(tǒng)計(jì)學(xué)辦法一樣，只要當(dāng)每種能夠的狀況都有類似的行數(shù)時(shí)，機(jī)械進(jìn)修模子的后果才最好，這意味著，那些最受迎接的狀況數(shù)能夠會(huì)因?yàn)殡S機(jī)抽樣而削減；異樣，當(dāng)一切變量的規(guī)模都被尺度化后，機(jī)械進(jìn)修模子能力到達(dá)最好后果。

　　例如在微軟的一篇博文中，微軟小娜剖析了特朗普和克林頓的競(jìng)選捐錢(qián)，解釋了預(yù)備機(jī)械進(jìn)修數(shù)據(jù)集的方法：創(chuàng)立標(biāo)簽、處置數(shù)據(jù)、設(shè)計(jì)附加功效和清洗數(shù)據(jù)。這類剖析用 SQL 和 R 說(shuō)話做了幾個(gè)轉(zhuǎn)換，以肯定與克林頓或特朗普相干的各類委員會(huì)和競(jìng)選資金，并基于捐贈(zèng)者的姓名來(lái)肯定他們的性別，和改正拼寫(xiě)毛病，并修復(fù)類之間的不屈衡性（數(shù)據(jù)集中有 94% 都是克林頓的捐錢(qián)，且年夜部門(mén)是小額捐錢(qián)）。

　　你曾經(jīng)對(duì)數(shù)據(jù)做了統(tǒng)計(jì)剖析

　　在剖析數(shù)據(jù)息爭(zhēng)決成績(jī)時(shí)，最應(yīng)當(dāng)防止的就是一個(gè)勁地往前沖。在你可以或許弄清晰產(chǎn)生的工作及其緣由之前，你須要退后一步，看一看一切的變量及其互相之間的關(guān)系。

　　摸索性的數(shù)據(jù)剖析可以疾速顯示出一切變量的規(guī)模和散布，好比變量對(duì)是趨勢(shì)于彼此依附照樣各自自力、簇位于何處，或哪些處所能夠會(huì)有離群值。當(dāng)你的變量高度相干，常常削減剖析進(jìn)程中的某個(gè)變量是很有效的，或停止一些相似于慢慢多元線性回歸的辦法來(lái)肯定最好的變量選擇。其實(shí)不是說(shuō)終究模子是線性的，然則在引入艱苦成績(jī)之前，測(cè)驗(yàn)考試一些簡(jiǎn)略的線性模子很有效；假如你的模子前提太多，那末你可以以一個(gè)超定組（overdetermined system）掃尾。

　　你測(cè)試很多辦法來(lái)找到最好模子

　　關(guān)于一個(gè)給定的數(shù)據(jù)集，找到最好形式的辦法只要一種：全體試一遍。假如你的建模對(duì)象之前曾經(jīng)有許多人做過(guò)，但仍具挑釁性，好比攝影特點(diǎn)辨認(rèn)和說(shuō)話辨認(rèn)，你能夠忍不住只想測(cè)驗(yàn)考試年夜賽中的「最好」模子，但不幸的是，那些模子常常是最為盤(pán)算密集型的深度進(jìn)修模子，好比圖象辨認(rèn)須要卷積層，語(yǔ)音辨認(rèn)須要長(zhǎng)短時(shí)間記憶層（LSTM）。假如你須要練習(xí)那些深度神經(jīng)收集，你能夠須要比平常辦公所需的更多的盤(pán)算才能。

　　你有足夠的盤(pán)算才能來(lái)練習(xí)深度進(jìn)修模子

　　你的數(shù)據(jù)集越年夜，你的深度進(jìn)修模子就須要越多的層，練習(xí)神經(jīng)收集的時(shí)光也就越多。具有年夜量的數(shù)據(jù)可以贊助你練習(xí)出一個(gè)更好的模子，層數(shù)多可以贊助你辨認(rèn)更多特點(diǎn)，但它們也會(huì)因?yàn)榫毩?xí)時(shí)光的增長(zhǎng)而對(duì)你發(fā)生晦氣的影響。你能夠等不了一年的時(shí)光來(lái)練習(xí)每個(gè)模子；一周是比擬公道的，特殊是由于你將很有能夠須要調(diào)劑幾十次模子。

　　處理練習(xí)時(shí)光成績(jī)的一個(gè)辦法是應(yīng)用通用圖形處置器（GPGPU），好比應(yīng)用英偉達(dá)公司臨盆的芯片，來(lái)做有關(guān)神經(jīng)收集層的向量和矩陣盤(pán)算（也稱為線性代數(shù)）。比擬于僅僅應(yīng)用一張 CPU，同時(shí)應(yīng)用一張 GPU 和一個(gè) CPU K80 常常可以晉升 5 到 10 倍的練習(xí)速度，假如你能將全部收集的「核（kernel）」輸出到 GPU 的當(dāng)?shù)卮鎯?chǔ)器中的話，而假如應(yīng)用一張 P100 GPU，則可以將練習(xí)速度晉升 100 倍。

　　在一張 GPU+一張 CPU 的組合以外，你還可以樹(shù)立多個(gè) CPU 和 GPU 的調(diào)和收集，以便在更短的時(shí)光內(nèi)處理更年夜的成績(jī)。除非你全年都在練習(xí)深度進(jìn)修模子，且有一個(gè)偉大的本錢(qián)預(yù)算，不然你會(huì)發(fā)明，租賃云端 GPU 的應(yīng)用時(shí)光會(huì)是性價(jià)比最高的選擇。一些深度進(jìn)修框架，包含 CNTK，MXNet 和 TensorFlow，支撐 CPU 和 GPU 的并行盤(pán)算，關(guān)于有著合適機(jī)能 GPU 的年夜型虛擬機(jī)（virtual machine，VM）收集來(lái)講，它們已被證實(shí)具有公道的縮放系數(shù)（在一個(gè)測(cè)試中年夜約為 85%）。你可以找到這些框架，而且它們正愈來(lái)愈多地被裝置到由重要云供給商上支撐的 GPU 虛擬機(jī)中。

　　你的機(jī)械進(jìn)修模子優(yōu)于你的統(tǒng)計(jì)模子

　　簡(jiǎn)略的統(tǒng)計(jì)模子為你的機(jī)械進(jìn)修和深度進(jìn)修項(xiàng)目奠基了基本。假如你不克不及晉升一個(gè)給定的模子的機(jī)能，那末你就應(yīng)當(dāng)對(duì)其停止調(diào)劑或測(cè)驗(yàn)考試分歧辦法。一旦你曉得你在做甚么，你便可以在一個(gè)超參數(shù)優(yōu)化算法的掌握下，同時(shí)為很多模子設(shè)置練習(xí)參數(shù)，然后用最好的成果指點(diǎn)你的下一步行為。

　　你可以安排猜測(cè)模子

　　終究，你將愿望及時(shí)運(yùn)用你所練習(xí)的模子。猜測(cè)模子可以運(yùn)轉(zhuǎn)在辦事器、云端、小我盤(pán)算機(jī)或德律風(fēng)上，這取決于運(yùn)用法式的分歧須要。深度進(jìn)修框架供給了各類選項(xiàng)來(lái)將模子嵌入到網(wǎng)頁(yè)和挪動(dòng)運(yùn)用法式中。亞馬遜、谷歌和微軟都是經(jīng)由過(guò)程臨盆能懂得語(yǔ)音的花費(fèi)級(jí)裝備和智妙手機(jī)運(yùn)用法式來(lái)證實(shí)其適用性。

　　你可以或許按期更新你的模子

　　假如你曾經(jīng)應(yīng)用本身的數(shù)據(jù)練習(xí)好了模子，你會(huì)發(fā)明該模子的誤差率（假陽(yáng)性和真陰性）會(huì)跟著時(shí)光的推移而增長(zhǎng)。根本上，這是由于數(shù)據(jù)會(huì)跟著時(shí)光的推移而漂移：你的發(fā)賣模子、競(jìng)爭(zhēng)敵手、作風(fēng)和經(jīng)濟(jì)都邑轉(zhuǎn)變。為了順應(yīng)這類影響，年夜多半深度進(jìn)修框架都有一個(gè)選項(xiàng)，可以在新數(shù)據(jù)上對(duì)舊模子停止再練習(xí)，并用新模子調(diào)換猜測(cè)辦事。假如你每個(gè)月都如許做，應(yīng)當(dāng)可以或許包管你不會(huì)遭到數(shù)據(jù)漂移的影響。假如你不克不及，那末你的舊模子終究將變得缺乏為靠。

　　回到本文開(kāi)首的那些成績(jī)，你曉得本身想要猜測(cè)或檢測(cè)甚么嗎？你有足夠的數(shù)據(jù)停止剖析以樹(shù)立猜測(cè)模子嗎？你有界說(shuō)模子和練習(xí)模子所需的人員和對(duì)象嗎？你曾經(jīng)有統(tǒng)計(jì)或物理模子來(lái)作為一個(gè)猜測(cè)基準(zhǔn)嗎？

　　假如已萬(wàn)事俱備，那你還在等甚么？