0
雷鋒網(wǎng) AI科技評(píng)論按：如果說(shuō)起谷歌，想必你一定不會(huì)忽略Google Brain（谷歌大腦團(tuán)隊(duì)）。谷歌大腦在2011年初由吳恩達(dá)、Jeff Dean牽頭組成，并在后來(lái)相繼有了 Greg Corrado、Quoc Le、Geoffrey Hinton等重量級(jí)大牛的加持，逐漸成長(zhǎng)為谷歌真正的“大腦”。毫無(wú)疑問，谷歌大腦是谷歌至關(guān)重要的科研核心部門，也是全球工程師夢(mèng)寐以求的烏托邦。
在回顧去年的研究歷程時(shí)，Jeff Dean曾撰文動(dòng)情地表示：
“谷歌大腦團(tuán)隊(duì)的宏愿一如既往：團(tuán)隊(duì)致力于通過多領(lǐng)域的純研究及應(yīng)用性研究，創(chuàng)造更多的智能軟件及智能系統(tǒng)，以此提升人們的生活水平。雖然這一藍(lán)圖是我們仰望星空的長(zhǎng)期愿景，但我們也需要腳踏實(shí)地。”
而近日，Jeff Dean又撰文發(fā)表了谷歌大腦團(tuán)隊(duì)的科研方針，原文如下，雷鋒網(wǎng) AI科技評(píng)論編譯整理：
大約一年前，我們團(tuán)隊(duì)第一次向大眾分享了自己的使命:“讓機(jī)器擁有智慧，改善人們的生活。”當(dāng)時(shí)，我們向大家介紹了我們的工作——將機(jī)器學(xué)習(xí)與谷歌的產(chǎn)品結(jié)合起來(lái)，賦予那些每天都有數(shù)億人使用的產(chǎn)品新的力量，例如谷歌翻譯、谷歌地圖等產(chǎn)品。
今天，我想向大家分享更多經(jīng)驗(yàn)，我們?cè)诨A(chǔ)理論的進(jìn)步、對(duì)機(jī)器學(xué)習(xí)的理解和產(chǎn)品服務(wù)的研究中，是如何接近我們的目標(biāo)的。
五年前，谷歌的同事Alfred Spector、Peter Norvig和Slav Petrov發(fā)表了一篇博客和論文，闡述了在谷歌我們的研究方法——我們的方法總是能在好奇心和應(yīng)用性驅(qū)動(dòng)的研究之間達(dá)到動(dòng)態(tài)平衡。
在機(jī)器學(xué)習(xí)中我們團(tuán)隊(duì)聚焦的最大挑戰(zhàn)是需要對(duì)新的想法進(jìn)行廣泛的探索，因此研究人員會(huì)設(shè)置自己的工作議程，大多數(shù)人關(guān)注的方向是機(jī)器學(xué)習(xí)最前沿的領(lǐng)域。在探索過程中，過去幾年間我們?cè)贜IPS, ICML和ICLR等大會(huì)上發(fā)表了數(shù)百篇論文，并且論文的接受率遠(yuǎn)遠(yuǎn)高于平均水平。
想要實(shí)現(xiàn)我們的使命，至關(guān)重要的一環(huán)是在機(jī)器學(xué)習(xí)中做出新的理論研究。為了實(shí)現(xiàn)這一目標(biāo)，我們建立了一個(gè)進(jìn)行長(zhǎng)期的、開放性研究的前沿團(tuán)隊(duì)，來(lái)推動(dòng)科學(xué)的發(fā)展。在對(duì)視覺和聽覺感知、自然語(yǔ)言理解、生成藝術(shù)和音樂、系統(tǒng)架構(gòu)和算法等領(lǐng)域進(jìn)行研究的過程中，我們也與外部機(jī)構(gòu)的研究人員有所合作。2017年我們發(fā)表的論文中，有1/3的論文擁有一個(gè)或多個(gè)跨機(jī)構(gòu)的作者。此外，我們還邀請(qǐng)來(lái)自學(xué)術(shù)機(jī)構(gòu)的研究人員來(lái)促進(jìn)我們的研究，加強(qiáng)我們與科學(xué)界的聯(lián)系。
我們也認(rèn)為向大家清楚地解釋現(xiàn)代機(jī)器學(xué)習(xí)中的概念很重要。Distill.pub是一個(gè)在線技術(shù)雜志，其中包括一個(gè)由我們團(tuán)隊(duì)成員Chris Olah和Shan Carter發(fā)起的論壇，目的是為了讓大家清楚地理解一些機(jī)器學(xué)習(xí)概念。
TensorFlow Playground是由我們團(tuán)隊(duì)的可視化專家創(chuàng)建的一個(gè)可視化實(shí)驗(yàn)平臺(tái)，可以讓人們了解到神經(jīng)網(wǎng)絡(luò)是如何解決簡(jiǎn)單問題的。由PAIR開發(fā)的deeplearn.js是一個(gè)基于硬件加速的開源JavaScript庫(kù)，用于機(jī)器學(xué)習(xí)，能在瀏覽器中運(yùn)行，不需要額外的裝置和后端。
除了與學(xué)術(shù)界和工業(yè)界的精英們合作，我們的團(tuán)隊(duì)與谷歌其他團(tuán)隊(duì)一樣，堅(jiān)信培養(yǎng)下一代科學(xué)家會(huì)很有意義。我們團(tuán)隊(duì)每年接收50多名實(shí)習(xí)生，他們的目標(biāo)是在頂級(jí)機(jī)器學(xué)習(xí)出版物上發(fā)表自己的工作成果。到2017年為止，我們團(tuán)隊(duì)發(fā)表的論文中，大約有25%的作者是實(shí)習(xí)生，而且他們通常是第一作者。
此外，2016年我們迎來(lái)了谷歌大腦培訓(xùn)項(xiàng)目（Google Brain Residency Program）的第一批實(shí)習(xí)生，這是個(gè)為期一年的項(xiàng)目，針對(duì)那些想要研究機(jī)器學(xué)習(xí)的人而開設(shè)。在其成立的第一年，項(xiàng)目的27名參加者在我們團(tuán)隊(duì)成員的指導(dǎo)下進(jìn)行了研究，并發(fā)表了超過40多篇論文被頂級(jí)研究會(huì)議接受的論文。今年7月，我們迎來(lái)了第二批實(shí)習(xí)生：36名成員在我們小組的支持下開始了為期一年的學(xué)習(xí)，他們已經(jīng)參與到各種各樣的項(xiàng)目中了。
在與其它谷歌研究部門緊密協(xié)作的過程中，谷歌大腦得以進(jìn)行機(jī)器學(xué)習(xí)的基礎(chǔ)性研究，也能夠?yàn)楫a(chǎn)品導(dǎo)向的研究做出獨(dú)到的貢獻(xiàn)。本著讓機(jī)器學(xué)習(xí)產(chǎn)生全球性的影響來(lái)說(shuō)，這兩方面的研究都至關(guān)重要。
雷鋒網(wǎng) AI科技評(píng)論
