Facebook Inc.希望幫助開發(fā)人員更輕松地構(gòu)建和部署基于人工智能的自然語言處理系統(tǒng)。

為此，今天它開放了一個新的名為PyText的NLP建?？蚣艿牟少?，該框架據(jù)說有助于彌合嘗試使用此類系統(tǒng)與使其在生產(chǎn)中投入使用之間的差距。

Facebook的開發(fā)團(tuán)隊在博客中表示，PyText很有用，因為構(gòu)建NLP系統(tǒng)所需的神經(jīng)網(wǎng)絡(luò)在傳統(tǒng)上一直讓人頭疼。這是因為它說的是在針對實(shí)驗優(yōu)化的框架和針對生產(chǎn)優(yōu)化的框架之間進(jìn)行權(quán)衡。

構(gòu)建NLP系統(tǒng)通常需要對數(shù)十種AI模型進(jìn)行廣泛的培訓(xùn)和測試。大部分的培訓(xùn)和測試都是在“研究型框架”上完成的，F(xiàn)acebook表示這非常有用，因為它們提供了一個簡單的界面，可以加快這些模型的創(chuàng)建速度。

但是研究框架不太適合在生產(chǎn)環(huán)境中運(yùn)行NLP系統(tǒng)，因為這些系統(tǒng)使用的模型會增加等待時間和內(nèi)存使用。Facebook說，現(xiàn)有的生產(chǎn)框架可以解決這些問題，但是顯然它們使創(chuàng)建文本序列的動態(tài)表示變得困難，這對于任何可靠的NLP系統(tǒng)都是必要的。

這就是為什么Facebook決定創(chuàng)建和開源PyText，PyText是基于其開源PyTorch深度學(xué)習(xí)框架構(gòu)建的軟件庫。

Facebook表示，PyText是為滿足NLP建模的特定需求而構(gòu)建的，它通過提供簡化的工作流程來實(shí)現(xiàn)更快的實(shí)驗，從而滿足了這一要求。它還提供對各種預(yù)建模型體系結(jié)構(gòu)的訪問，以及用于文本處理和詞匯管理的工具。最后，它還可以訪問更廣泛的PyTorch生態(tài)系統(tǒng)，該生態(tài)系統(tǒng)具有用于NLP系統(tǒng)的自己的工具和模型。

該公司表示，PyText使得既可以嘗試NLP系統(tǒng)，又可以將其部署到生產(chǎn)環(huán)境中，以完成諸如文檔分類，多任務(wù)建模，語義解析和序列標(biāo)記之類的任務(wù)。

“在Facebook，我們已經(jīng)使用此框架在短短幾天內(nèi)(而不是數(shù)周或數(shù)月)將NLP模型從構(gòu)思轉(zhuǎn)變?yōu)槿鎸?shí)施，并部署了依賴多任務(wù)學(xué)習(xí)的復(fù)雜模型，” Facebook的工程團(tuán)隊寫道。

Constellation Research Inc.的分析師Holger Mueller表示，很高興看到與此類框架的更多競爭，因為自然語言處理對于下一代軟件應(yīng)用至關(guān)重要。

Mueller說：“新UI的聲音只有在使用NLP模型時才有機(jī)會，而跨框架的競爭對于促進(jìn)功能的進(jìn)步以及為CxOs提供如何為下一代應(yīng)用程序構(gòu)建AI模型提供選擇至關(guān)重要。” “與所有新產(chǎn)品一樣，謹(jǐn)慎和驗證是生命的頭幾個月的關(guān)鍵建議，但是開源框架將使人們對代碼有更早的了解，并且視情況而定，有助于建立起對代碼的信心?？蚣堋?rdquo;

Facebook已經(jīng)在內(nèi)部使用PyText來改進(jìn)其某些產(chǎn)品的NLP功能，包括Messenger中的M建議功能和其新的Portal視頻通話設(shè)備。

該團(tuán)隊寫道：“借助Portal，Messenger和許多其他用例，我們需要實(shí)時運(yùn)行模型以提供快速響應(yīng)。” “我們還需要能夠大規(guī)模有效運(yùn)行的NLP系統(tǒng)。PyText使Facebook工程師更容易在數(shù)十億說多種不同語言的人所使用的系統(tǒng)中部署高級實(shí)時NLP。”