作者丨Tina

“Peak Labs”公司近日發(fā)布了其人工智能系統(tǒng) Magi 的公眾版“ magi.com ”。通過(guò)這一搜索引擎，用戶(hù)輸入關(guān)鍵詞，即可獲取 Magi 從互聯(lián)網(wǎng)文本中自主學(xué)習(xí)到的結(jié)構(gòu)化知識(shí)和網(wǎng)頁(yè)搜索結(jié)果，每個(gè)結(jié)構(gòu)化結(jié)果后面都會(huì)附上來(lái)源鏈接和其可信度評(píng)分。

這跟我們使用的傳統(tǒng)搜索引擎不同，傳統(tǒng)搜索引擎返回的是一系列的鏈接，要解讀問(wèn)題，還需要自己去點(diǎn)擊網(wǎng)頁(yè)挖掘有用信息。

這一引擎發(fā)布后，引來(lái)大批網(wǎng)友圍觀，將它的服務(wù)器玩掛了。Magi 作者發(fā)微博做了回應(yīng)：“突然很多人關(guān)注到了我們，真的很感謝大家，其實(shí)搜索引擎真的不是我們的主業(yè)，我們自己沒(méi)做任何推廣，更沒(méi)來(lái)得及準(zhǔn)備應(yīng)對(duì)這恐怖的流量……Magi 單次搜索的計(jì)算量比一般的網(wǎng)頁(yè)搜索要重很多，請(qǐng)大家手下留情，同時(shí)再次表示抱歉！”

magi.com 的結(jié)果中，答案在搜索框的正下方，鏈接則在頁(yè)面右邊，跟主流搜索引擎的用戶(hù)界面相反。如在 magi.com 里搜索“編程語(yǔ)言”，出來(lái)的首先是各種主流編程語(yǔ)言的合集：C#、Python、Java、JavaScript…同時(shí)給予“編程語(yǔ)言”這個(gè)詞以“描述”和“屬性”解釋。紅黃綠的顏色代表 Magi 給出的可信評(píng)分級(jí)別。

在答案的右側(cè)提供了一些鏈接，用鼠標(biāo)劃過(guò)它們即可看到，答案是從哪個(gè)具體的來(lái)源學(xué)習(xí)到的：

Magi 的關(guān)注點(diǎn)在用戶(hù)搜索行為的本質(zhì)，相對(duì)傳統(tǒng)搜索引擎來(lái)說(shuō)做了一點(diǎn)小改進(jìn) ：“幫你思考”。當(dāng)輸入想了解事物或信息，傳統(tǒng)搜索引擎給出的是按照結(jié)果的權(quán)重 (Page Rank) 展現(xiàn)的鏈接信息，需要自己去歸納和判斷可信度。Magi 多做了一步，不僅收錄互聯(lián)網(wǎng)上的海量文本，還會(huì)去嘗試?yán)斫獠W(xué)習(xí)這些文本中蘊(yùn)含的知識(shí)和數(shù)據(jù)。

季逸超表示，Magi 類(lèi)似于民用版的 IBM Watson 或非學(xué)術(shù)版的 Wolfram Alpha。Wolfram Alpha 是一個(gè)讀得懂你提問(wèn)的搜索引擎，它的目標(biāo)是“計(jì)算一切” 。按照發(fā)明者 Stephen Wolfram 的說(shuō)法，它是一個(gè)計(jì)算知識(shí)引擎，而不是像百度或者谷歌那樣的搜索引擎。簡(jiǎn)單地說(shuō)來(lái)，它其實(shí)是一個(gè)繪圖計(jì)算器、參考書(shū)圖書(shū)館、以及搜尋引擎的綜合體，非常超前。

除了直接給出計(jì)算結(jié)果，Wolfram Alpha 還能夠處理基于自然語(yǔ)言的事實(shí)問(wèn)答問(wèn)題，例如：

• 如果輸入“China GDP”，出現(xiàn)的將不是一大堆網(wǎng)頁(yè)，而是直觀的數(shù)據(jù)和圖表。包括：中國(guó) GDP 最新情況，從 1970 年至今的中國(guó) GDP 增長(zhǎng)情況（圖表形式）、中國(guó)通貨膨脹率、失業(yè)人口率。

• 如果輸入“How many people in China”，你可以看到當(dāng)前中國(guó)的總?cè)丝跀?shù)、人口密度、平均每年人口增長(zhǎng)率、預(yù)期壽命和平均年齡等數(shù)據(jù)。

  

Magi 來(lái)自中國(guó)團(tuán)隊(duì) Peak Labs，創(chuàng)始人季逸超在開(kāi)發(fā)者圈子內(nèi)也小有名氣。2011 年，還在北大附中讀書(shū)期間，他就獨(dú)自完成了猛犸瀏覽器 iOS 的開(kāi)發(fā)。2012 年，季逸超創(chuàng)辦了自己的公司，繼續(xù)推動(dòng)瀏覽器和輸入法項(xiàng)目。目前，Peak Labs 主要精力都放在 Magi 項(xiàng)目上，專(zhuān)注于背后的技術(shù)，以及相關(guān)商業(yè)產(chǎn)品的開(kāi)發(fā)。

“我們真正做商業(yè)化的，是 Magi 背后的技術(shù)——基于遷移學(xué)習(xí)的開(kāi)放信息提取。”Magi 采取的遷移學(xué)習(xí) NLU 算法，具有的優(yōu)勢(shì)在于只需使用通用數(shù)據(jù)訓(xùn)練 AI 引擎，就能使 AI 引擎很好的適用專(zhuān)業(yè)垂直領(lǐng)域。Magi 首先使用互聯(lián)網(wǎng)知識(shí)和自有的數(shù)據(jù)進(jìn)行預(yù)訓(xùn)練，而專(zhuān)業(yè)垂直領(lǐng)域的任務(wù)僅需極少量人工數(shù)據(jù)標(biāo)注，就能達(dá)到大規(guī)模數(shù)據(jù)的訓(xùn)練效果。

季逸超在知乎上給出了詳細(xì)而全面的技術(shù)解讀

一、利用率和通用性

Magi 不再依賴(lài)于預(yù)設(shè)的規(guī)則和領(lǐng)域，“不帶著問(wèn)題” 地去學(xué)習(xí)和理解互聯(lián)網(wǎng)上的文本信息，同時(shí)盡可能找出全部信息 (exhaustive) 而非挑選唯一最佳 (most promising)。Magi 通過(guò)一系列預(yù)訓(xùn)練任務(wù)淡化了具體實(shí)體或領(lǐng)域相關(guān)的概念，轉(zhuǎn)而學(xué)習(xí) “人們可能會(huì)關(guān)注內(nèi)容中的哪些信息？”。為 Magi 設(shè)計(jì)了專(zhuān)門(mén)的特征表達(dá)、網(wǎng)絡(luò)模型、訓(xùn)練任務(wù)、系統(tǒng)平臺(tái)（下面都會(huì)講到），并投入大量精力逐漸構(gòu)建了 proprietary 的專(zhuān)用訓(xùn)練 / 預(yù)訓(xùn)練數(shù)據(jù)。Magi 通過(guò)終身學(xué)習(xí)持續(xù)聚合和糾錯(cuò)，為人類(lèi)用戶(hù)和其他人工智能提供可解析、可檢索、可溯源的知識(shí)體系。

配合自家 web 搜索引擎以評(píng)估來(lái)源質(zhì)量，信息源和領(lǐng)域不設(shè)白名單，綜合 Clarity（清晰度）、Credibility（可信度）、Catholicity（普適性）三個(gè) Magi 權(quán)衡知識(shí)工程的規(guī)?；蜏?zhǔn)確性難題的量化標(biāo)準(zhǔn)來(lái)進(jìn)行來(lái)源質(zhì)量評(píng)估。且注重時(shí)效性，時(shí)效性體現(xiàn)在上文提到的對(duì)既有知識(shí)的時(shí)間線(xiàn)追蹤，做到不再周期性觸發(fā) batch 更新，整個(gè)系統(tǒng)持續(xù)在線(xiàn)上學(xué)習(xí)、聚合、更新、糾錯(cuò)。

沒(méi)有前置 NER 和 dependency parsing 等環(huán)節(jié)，減少母文本信息的損失。為 Magi 的提取模型設(shè)計(jì)了專(zhuān)用的 Attention 網(wǎng)絡(luò)結(jié)構(gòu)以及數(shù)個(gè)配套的預(yù)訓(xùn)練任務(wù)。技術(shù)棧完全 language-independent，可以實(shí)現(xiàn)低資源和跨語(yǔ)言 transfer。

Magi 官網(wǎng)和季逸超自己也坦承還存在一些不足，比如消歧義、工程性，以及規(guī)模化和準(zhǔn)確度等。對(duì)于搜索慢的問(wèn)題，季逸超在微博中說(shuō)，這是由于單次搜索的計(jì)算量比一般的網(wǎng)頁(yè)搜索要重很多。Magi 搜索結(jié)果目前還不夠好，但這也不妨礙它成為一個(gè)未來(lái)的搜索引擎方向，給用戶(hù)提供一個(gè)可信任的和理解學(xué)習(xí)之后的知識(shí)。特別是發(fā)展在這個(gè) AI 時(shí)代，搜索引擎的結(jié)果更應(yīng)該貼近用戶(hù)的需求。

現(xiàn)在的主流搜索引擎依靠機(jī)器抓取，建立在超鏈分析基礎(chǔ)上的網(wǎng)頁(yè)搜索，采用搜索爬蟲(chóng)和排序算法的組合，以關(guān)鍵詞為核心自動(dòng)檢索，實(shí)現(xiàn)海量信息的自動(dòng)獲取與重要性排序。作為獲取信息的入口，它直接關(guān)系到我們獲取的信息的質(zhì)量，也成就了早期的互聯(lián)網(wǎng)公司。

但現(xiàn)在搜索引擎的過(guò)度商業(yè)化操作已經(jīng)引起了用戶(hù)的反感。Magi 的優(yōu)勢(shì)在于去除了商業(yè)化的元素，篩除了廣告，使搜索到的信息更純粹，更有價(jià)值，節(jié)省用戶(hù)的時(shí)間。

季逸超在他的微博里說(shuō)道：“現(xiàn)在的 Magi 飽含一個(gè)工程師樸素的初心，既不想拿廣告惡心你，也對(duì)你的隱私毫無(wú)興趣。”

Magi 引擎的“火”，說(shuō)明了搜索引擎在向更好的方向發(fā)展。

【轉(zhuǎn)載說(shuō)明】   若上述素材出現(xiàn)侵權(quán)，請(qǐng)及時(shí)聯(lián)系我們刪除及進(jìn)行處理：[email protected]