人工智能和機械進修比來被炒作得異常兇猛。然則這個器械不是開箱即用，須要打下堅實的基本能力運用。數據迷信參謀，前Jawbone數據副總裁及linkedIn數據迷信家Monica Rogati對此提出了各個組織運用AI的需求條理論。指出先要處理了數據素養、數據收集和基本舉措措施這些根本需求以后能力去斟酌AI這個頂層的自我完成需求。 就像成長敏捷的技巧一樣，AI也激起了年夜范圍的FOMO（畏懼錯過）、FUD（恐、惑、疑）和和睦。個中一些是應當的，也有一些不是——但這個行業正在留心。從機密的硬件始創企業到金融技巧巨子甚至于上市公司，各個團隊都在勞碌地實行本身的AI計謀。這一切都歸結到一個癥結且高風險的成績：“我們會怎樣應用AI和機械進修來讓我們做的工作變得更好？” 平日公司都還沒無為AI做好預備。或許他們雇用了本身的第一名數據迷信家但卻達不到想要的后果，或許或許數據素養其實不是他們文明的焦點。但最多見的情況是通明還沒有樹立起基本而舉措措施去實行最根本的數據迷信算法和操作，更不消說機械進修了。 作為數據迷信/AI參謀，我必需有數次地轉達這一信息，曩昔2年特別如斯。其別人也表現贊成。在年夜家都對你地點的范疇充斥著高興之情是做一個潑冷水的人是很艱苦的，特別是假如你也分享著這類高興時。還有你應當怎樣去告知那些公司，說假如沒有（或許成為）精英——也就是自我錄用的看門人的話是弗成能為AI做好預備的呢？ 這里是一個惹起年夜家最多共識的一個說明： 可以把AI看做是需求金字塔的頂端。是的，自我完成（AI）長短常棒的，但你起首須要食品、水和卵翼所（數據素養、數據收集和基本舉措措施）。 你的數據須要有堅固的基本，然后才可以高效地應用AI和機械進修。 根本需求：你能算嗎？ 金字塔的底部是數據收集。你須要甚么樣的數據？你又有甚么樣的數據？假如是面向用戶的產物，你有無記載一切相干的用戶交互？假如產物是傳感器，數據是從哪兒來的，怎樣來？記載一種還沒有物聯化的交互有多輕易？究竟，具有適合的數據集是機械進修比來能獲得停頓的癥結。 其次，要弄清晰數據流是若何流經體系的？你有無靠得住的數據流處置體系或許ETL（提取轉換加載）？數據寄存在哪里？拜訪和剖析這些數據有多輕易？Jay Kreps一向都在說（有10年的時光了）靠得住的數據流是任何數據處置方面工作的癥結。（附注：我正在尋覓這句話切實其實切出處，成果在他的碩士論文《我愛好日記》中找到了。然后我留意到他在一段話以后做出了這個馬斯洛的需求條理論的比擬，并以“值得留意的是”來作為附注。說到相干任務，后來我又看到了Hilary Mason和Chris Wiggings的出色文章，講的是數據迷信家應當做甚么工作。幾天前，Sean Taylor表露了本身的數據迷信需求金字塔，固然這跟這里的金字塔是完整分歧的。） 只要當你有了數據以后，才可以對數據停止摸索和轉換。這里的任務包含污名卓越的“數據清洗”，這是數據迷信范疇被低估的一項任務，這一塊我得另起一篇文章來談。當你發明你掉去了一年夜塊數據，你的傳感器弗成靠，某次版本變革意味著你的事宜被喪失，你對某個標記發生了誤會時——你就得回過火來確保金字塔的基本是堅固的。 當你可以靠得住地摸索和清洗數據時，你便可以停止傳統上被以為是BI或剖析方面的工作：界說要跟蹤的目標，其時令性和對分歧身分的敏理性。也須要停止一些艱難的用戶細分的任務，去看看會不會有甚么器械冒出來。但是，既然你的目的是AI，你如今要搭建的是隨后被以為是特點的器械，以供未來接收進你的機械進修模子外面。在這個階段，你還曉得了你盤算要猜測或許進修甚么，你還可以開端經由過程生成標簽（主動或許手工的方法）來預備你的練習數據。 這個階段也是你找到本身最使人高興和惹人注視的數據故事的時刻——但這也是另外一篇文章的主題了。 好了，如今我能算了。接上去呢？ 我們有了練習數據了——那是否是如今可以停止機械進修了呢？或許吧，假如你是想在外部停止客戶流掉率猜測的話；但假如成果是面向客戶的謎底就能否定的。我們須要停止A/B測試（不論是若何的原始）或許有預備好的試驗框架，如許能力慢慢安排以免災害，并在轉變影響每一個人之前對轉變的后果停止粗略的估量。這也是將異常簡略的基線安排到位的適合機會（關于推舉體系來講，基線體系可所以“最熱點”，然后是“細分用戶市場的最熱點”——這就長短常煩人但有用的“特性化之前先用老一套”）。 簡略的啟示法的難以擊敗乃至到使人驚奇的田地，它們會讓你以端到真個方法調試體系，這不須要奧秘的機械進修黑箱，在這中央要須要超參數調劑。 到了這個時刻，你可以安排一個異常簡略的機械進修算法（好比邏輯回歸或許分類等），然后斟酌能夠影響到你的成果的旌旗燈號和特點。氣象和普查數據是我的目的。還有，雖然深度進修很壯大，但它不會主動幫你做這些工作。引入新的旌旗燈號（特點樹立，不是特點工程）可以年夜幅改良你的機能。在這里花些時光是值得的，即使身為數據迷信家我們也對向長進入金字塔的更高層面覺得高興。 成長AI！ 數據有了。裝配也有了。你的ETL開端施展感化了。你的數據曾經組織好而且清洗過了。你有了儀表盤，標簽和好的特點。你在丈量適合的器械。你可以天天停止實驗。你有了一個基線算法，可以停止端到真個調試，而且在臨盆中運轉——并且你曾經對它停止了十幾回的變革。總之，你曾經預備好了。接上去從本身鋪開到應用特長于機械進修的公司，你可以持續去測驗考試最新最好的器械。你能夠可以在臨盆方面獲得偉大改良，或許或許不克不及。但最壞的情形下，你也能學到一些新的辦法，構成本身的不雅點并有了上手體驗，而且可以告知你的投資者和客戶本身在AI方面做了哪些盡力而不是給人感到像是個騙子。而在最好的情形下，你可認為用戶、客戶和公司帶來偉大的分歧——這是機械進修的一個真實的勝利故事。 等一下，MVP、迅速、精益等其他器械呢？ 數據迷信需求條理輪不是用1年的時光過度扶植脫節的基本舉措措施的托言。就像傳統的最小可行產物（MVP）的開辟套路一樣，你也要從產物小的垂直板塊開端，把它從端到端都做好了。比喻說，在Jawbone，我們先從睡眠數據開端并搭建它的金字塔：對象手腕，ETL，清洗和組織，標簽捕獲和界說，目標（年夜家美軍每晚的睡眠時光是多長？小憩呢？甚么是小憩？），跨細分市場剖析，一向到數據故事和機械進修驅動數據產物（主動睡眠檢測）。我們后來又把它延長到步數，然后食品、氣象、錘煉、社交收集和溝通——每次做一個。在端到端做完一件工作之前我們并沒有扶植一個搜羅萬象的基本舉措措施。 提出適合的成績，開辟適合的產物 這只與若何可以有關，跟應當若何有關（出于適用主義或許品德倫理的緣由）。 機械進修對象的愿望 “等一下，Amazon API或許TensorFlow等其余開源庫呢？其他在賣機械進修或許主動析取洞察和特點的對象的公司呢？” 一切這些都很精彩很有效（一些公司終究切實其實費盡心血地定制出來全部金字塔來展現本身的任務。這些人是豪杰）。但是，鑒于以后AI炒作的激烈影響力，年夜家都試圖把臟的、存在斷層、逾越了數年且格局和意思賡續轉變的數據，那些還沒有被懂得的數據，那些構造化行欠亨的數據塞出來，還期望這些對象可以或許魔術般地處置好它們。或許未來有一天會是這類情形，我對朝著這個偏向的盡力舉雙手贊同。但在此之前，為你的AI金字塔打造好一個穩固的基本是值得的。
