金磊 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI

家人們，百度文心一言的插件，現(xiàn)在可以聯(lián)動著用了——

只要幾十秒，立馬給你生成一個專業(yè)廣告大片！

話不多說，直接先來看一下成品：

不信？

沒關(guān)系，我們現(xiàn)在就來手把手地實操演示一下。

首先就是要把要用到的文心一言的相關(guān)原生插件“火力全開”：

• 百度搜索：也就是大家常說的“聯(lián)網(wǎng)”，可以保證大模型的時效性和準(zhǔn)確性（默認(rèn)開啟）；

• 說圖解畫：把圖片丟進(jìn)去，就可以根據(jù)它寫故事、文案、回答問題等；

• 一鏡流影：根據(jù)主題詞、語句或段落，一鍵創(chuàng)作生成視頻（依托文心跨模態(tài)大模型，突破了不同模態(tài)之間語義對齊等技術(shù)難題，創(chuàng)新融合文本、視覺、語音、跨模態(tài)等一系列技術(shù)能力）。

然后我們將一張可愛的奶牛照片丟進(jìn)去：

讓文心一言先做一個理解：

從解析的結(jié)果上來看，文心一言精準(zhǔn)無誤地做到了“看圖說話”：

一頭黑白相間的奶牛，站在藍(lán)天下，正凝視著鏡頭。它似乎有些好奇或驚訝，又或許在思考著自己的存在和命運。它的耳朵豎立，眼睛炯炯有神，仿佛在尋找什么重要信息。它是一只充滿生命力的動物，充滿了活力與好奇心，讓人不禁想要靠近觀察它的世界。

接下來，我們讓文心一言幫忙取一個品牌名稱：

在給出的品牌名稱的風(fēng)格之上，我們再讓文心一言寫一段廣告語：

最后，只需要求文心一言根據(jù)以上內(nèi)容生成一個視頻，“啪的一下”，數(shù)十秒時間，廣告視頻就誕生了！

或許有朋友要說了，職場人拍個廣告片，前期可是要做大量的調(diào)研工作才能保證視頻內(nèi)容的真實性與精準(zhǔn)度。

確實如此，不過現(xiàn)在，借助文心一言多個插件的聯(lián)動，這項工作也會變得異常輕松容易：

• 覽卷文檔：根據(jù)給定的文檔，可以完成摘要、問答和創(chuàng)作等任務(wù)；

• E 言易圖：僅需簡單的數(shù)據(jù)圖表需求，或輸入待生成圖表的數(shù)據(jù)內(nèi)容，即可生成可交互圖表，已支持7類圖表的生成，包括數(shù)據(jù)圖、餅狀圖、折線圖、雷達(dá)圖、漏斗圖、思維導(dǎo)圖、散點圖。

在將文檔“喂”給文心一言之后，不論是對內(nèi)容的總結(jié)亦或是對數(shù)據(jù)的分析，都變成了一句話的事了：

如此一來，原本要消耗數(shù)天甚至數(shù)周的工作，直接壓縮到了幾分鐘的時間里。

網(wǎng)友們在看到這般效果之后，也是紛紛驚呼“泰酷辣”、“給工作帶來了很多幫助”。

為了能夠打造更多的插件，文心一言還發(fā)布了大模型插件統(tǒng)一開發(fā)范式及工具集，邀請第三方為文心一言開發(fā)插件。感興趣的小伙伴可以去嘗鮮了（鏈接見文末）。

（注：除百度搜索外，目前可最多聯(lián)動3個插件。）

而以文心一言為代表的大語言模型，也意味著跨入了一個新的臺階，正如百度首席技術(shù)官王海峰在大會中首次對外所表示的那般：

人工智能具有多種典型能力，理解、生成、邏輯、記憶是其中的核心基礎(chǔ)能力。這四項能力越強，越接近通用人工智能，而大語言模型具備了這四項能力，為通用人工智能帶來曙光。

升級后的文心大模型，還能做什么？

作為開發(fā)者大會，定然是少不了代碼場景下的能力升級。

百度集團(tuán)副總裁吳甜在現(xiàn)場便拋出了一個讓很多程序員頭疼的問題——接手代碼：

“前人”留下的代碼太難懂、太晦澀了。

現(xiàn)在，程序員們再遇到這樣的問題就不用愁了，一個“復(fù)制粘貼”的動作，把煩惱統(tǒng)統(tǒng)交給文心一言來解決。

它會逐行地對代碼的功能做出解釋，并且在結(jié)尾處會總結(jié)整個代碼的作用：

這個函數(shù)的功能是計算給定文本中單詞的頻率，并按照頻率對結(jié)果進(jìn)行排序。

若是依舊不是很好理解，也只需讓文心一言對代碼做一個改寫：

當(dāng)然，我們還可以讓它寫一個測試用例，并給出運行結(jié)果。

至于在代碼輸出能力，吳甜在現(xiàn)場也演示了生成展示詞云的代碼，并將它實時運行了出來：

可見文心一言已經(jīng)具備了很強的代碼解釋、代碼改寫、代碼注釋、代碼生成等能力。程序員防禿頭，就用文心一言呀。

WAVE SUMMIT大會上百度為開發(fā)者提供的福利可不止這個。大模型社區(qū)“星河”上線了！

在星河大模型社區(qū)，開發(fā)者可以獲得一體化大模型開發(fā)體驗。飛槳+文心貫通全開發(fā)流程，與開發(fā)者持續(xù)共創(chuàng)大模型項目和應(yīng)用。

它的前身其實很多小伙伴都已經(jīng)比較熟悉了，正是飛槳的AI Studio（星河社區(qū)），專門為大模型增設(shè)了一塊新的“專區(qū)”。

據(jù)了解，星河大模型社區(qū)目前已經(jīng)有300多個大模型創(chuàng)意應(yīng)用，還有創(chuàng)意配方可以分享和使用，同時也提供了穩(wěn)定的應(yīng)用部署環(huán)境（登錄AI Studio訪問“社區(qū)”欄目，能玩兒上好一陣）。

不過剛才提到的種種新能力，也還只是文心一言升級表現(xiàn)的一隅。

工作生產(chǎn)力方面，百度智能工作平臺“如流”也得到了相應(yīng)加持——重磅發(fā)布超級助理，不僅是工具那么簡單，而是會更懂你、專業(yè)、實時陪伴的那種。

例如，百度集團(tuán)副總裁、百度集團(tuán)首席信息官李瑩和同事在現(xiàn)場演示了一句話完成請假：

下周五我要休一天假，去參加社區(qū)公益活動。

更復(fù)雜的，如申請差旅，也是可以一句話搞定了：

我后天上午去上海研發(fā)中心開會，當(dāng)天返回北京，請幫我規(guī)劃行程。

不僅為已有日程讓出時間，就連機酒組合也一并奉上，還不用操心報銷問題，秒級完成操作。

另外，找文檔、學(xué)知識、查文獻(xiàn)，在文心一言的加持下，現(xiàn)在也都簡化成了一句話搞定：

除此之外，聚焦到開發(fā)者，百度程序員都在用的編程助手Comate，也基于文心一言來了個大升級——發(fā)布X版本，覆蓋研發(fā)全生命周期、全場景，全面幫助工程師“想”“寫”“改”代碼，已支持30+語言，十多種IDE。

同樣是一句話，李瑩和同事現(xiàn)場一分鐘便開發(fā)出了邀測激活碼功能代碼：

用Java寫一個方法，來生成唯一的激活碼。

同樣的，在Comate X中也可以繼續(xù)追問，例如“解釋這段代碼”、“生成注釋”、“生成測試”等。

不僅如此，這屆WAVE SUMMIT還推出了開發(fā)套件Comate Stack，讓更多、更大的開發(fā)項目變得越發(fā)容易。

例如若是想在超級助理里開發(fā)一個休假政策的插件，那么現(xiàn)在只需兩個步驟即可：第一步對Prompt做評估，第二步用iPlayground少量配置即可完成。

一套操作下來之后，也是讓網(wǎng)友們驚嘆于開發(fā)的簡易與高效：

那么在縱覽這波技術(shù)“肌肉秀”之后，隨即而來的一個問題便是：

怎么做到的？

左手文心大模型，右手飛槳，這便是此次能力升級背后的秘笈。

正如剛才王海峰所述，現(xiàn)在文心產(chǎn)業(yè)級知識增強大模型已經(jīng)具備了理解、生成、邏輯、記憶四項能力。

至于它們的獲得方式，我們不妨以文心一言為例來窺知一二。

文心一言首先從數(shù)萬億數(shù)據(jù)和數(shù)千億知識中融合學(xué)習(xí)得到預(yù)訓(xùn)練大模型。

在此基礎(chǔ)上采用有監(jiān)督精調(diào)、人類反饋的強化學(xué)習(xí)和提示等技術(shù)，并具備知識增強、檢索增強和對話增強等技術(shù)優(yōu)勢。

進(jìn)一步地，通過多種策略優(yōu)化數(shù)據(jù)源及數(shù)據(jù)分布、基礎(chǔ)模型長文建模、多類型多階段有監(jiān)督精調(diào)、多任務(wù)自適應(yīng)有監(jiān)督精調(diào)、多層次多粒度獎勵模型等技術(shù)創(chuàng)新，全面提升基礎(chǔ)通用能力。

在檢索增強和知識增強的基礎(chǔ)上，通過知識點增強，提升對世界知識的掌握和運用；通過大規(guī)模邏輯數(shù)據(jù)構(gòu)建、邏輯知識建模、多粒度語義知識組合以及符號神經(jīng)網(wǎng)絡(luò)，提升邏輯能力；通過構(gòu)建數(shù)據(jù)、內(nèi)容、模型和系統(tǒng)安全的全面安全體系，保障大模型的安全性。

也正因如此，文心一言自3月份開放測試以來的短短5個月，技術(shù)和應(yīng)用效果都在大幅提升。

吳甜在此次大會中也公布了一組數(shù)據(jù)：

過去5個月“文心一言”成長迅速，現(xiàn)在已經(jīng)熟練掌握的創(chuàng)作體裁超過了200個。內(nèi)容豐富度是發(fā)布初期的1.6倍，給用戶提供了更加豐富、言之有物的文案書寫。大語言模型非常讓人欣喜的一個能力是它的邏輯思考能力，通過思維鏈長度的提升，今天的“文心一言”思維鏈長度已經(jīng)是發(fā)布初期的2.1倍，思維鏈長度使得“文心一言”思考的過程具備了更好的深度。同時通過知識點覆蓋的加強，使得“文心一言”在給大家提供幫助的時候有更廣闊的思維，如今知識點覆蓋達(dá)到了發(fā)布初期的8.3倍。

而大模型效率的提升，也離不開飛槳的加持，例如在訓(xùn)練方面，百度對此總結(jié)了自己的一套打法：

• 第一，與硬件集群協(xié)同優(yōu)化，提升有效訓(xùn)練時間占比。對于長時間、高負(fù)荷的大模型訓(xùn)練而言，降低訓(xùn)練集群的故障率和訓(xùn)練恢復(fù)成本無疑是至關(guān)重要的。

• 第二，與芯片/存儲/網(wǎng)絡(luò)協(xié)同優(yōu)化，提升訓(xùn)練吞吐速度。這也是飛槳一直以來持續(xù)優(yōu)化的方向。

• 第三，與模型算法協(xié)同優(yōu)化，提高收斂效率。特別是在大模型訓(xùn)練中，優(yōu)化收斂效率和穩(wěn)定性，可大幅度減少訓(xùn)練時間，達(dá)到事半功倍的效果。

在推理方面，飛槳則是從模型壓縮、推理引擎、服務(wù)部署三個關(guān)鍵環(huán)節(jié)進(jìn)行協(xié)同優(yōu)化。

例如采取了自適應(yīng)Shift-SmoothQuant壓縮算法、結(jié)合場景的混合量化推理方案、動態(tài)插入批處理技術(shù)等，飛槳持續(xù)結(jié)合算子融合加速、變長輸入處理加速等。

除此之外，為了更好的支撐大模型生產(chǎn)與應(yīng)用，飛槳的大模型套件圍繞大模型開發(fā)、訓(xùn)練、精調(diào)、壓縮、推理、部署的六個階段全流程進(jìn)行了升級，持續(xù)降低大模型開發(fā)和應(yīng)用成本。

整體而言，通過飛槳端到端自適應(yīng)混合并行訓(xùn)練技術(shù)以及壓縮、推理、服務(wù)部署的協(xié)同優(yōu)化，文心大模型訓(xùn)練速度達(dá)到了原來的3倍，推理速度則達(dá)到了原來的30多倍。

至于飛槳開源框架自身，也升級到了最新的2.5版本：

• 基礎(chǔ)框架持續(xù)升級：微分功能更完善，性能優(yōu)化更通用。

• 更好支持AI for Science：正式發(fā)布飛槳科學(xué)計算工具組件賽槳PaddleScience v1.0；螺旋槳PaddleHelix發(fā)布HelixDock蛋白-化合物構(gòu)象親和力預(yù)測大模型。

當(dāng)然，生態(tài)依舊是非常關(guān)鍵的因素之一。

正如百度AI技術(shù)生態(tài)總經(jīng)理馬艷軍在大會中所述：

在研發(fā)的過程當(dāng)中我們也發(fā)現(xiàn)，軟硬件的互聯(lián)互通標(biāo)準(zhǔn)非常關(guān)鍵，所以我們也積極參與到這個標(biāo)準(zhǔn)的研制當(dāng)中，由中國電子技術(shù)標(biāo)準(zhǔn)化研究院牽頭，包括百度等其他廠商一起起草了國家標(biāo)準(zhǔn)《人工智能 深度學(xué)習(xí)框架多硬件平臺適配技術(shù)規(guī)范》。

據(jù)了解，基于這個技術(shù)規(guī)范，飛槳已經(jīng)跟30多家硬件廠商開展聯(lián)合適配；目前已經(jīng)跟12家硬件伙伴開展文心大模型的適配。

技術(shù)兩手抓，生態(tài)亦兼顧，也就不難理解為什么百度可以做到了。

百度飛槳+文心大模型，落地勢能在加速度

最后，縱觀整場大會，或許給人最為直觀的感受便是“加速度”了。

不僅是技術(shù)的發(fā)展的加速度，更是落地勢能的加速度。

技術(shù)層面上的加速度顯而易見，例如上述的各項能力的大幅提升，便是非常好的印證。

而落地勢能的加速度，也并非是一蹴而就的信號，而是貫穿每一屆WAVE SUMMIT的那種。

早在2019年，王海峰就提到：

深度學(xué)習(xí)正在推動人工智能進(jìn)入工業(yè)大生產(chǎn)階段。

王海峰當(dāng)時認(rèn)為，正因深度學(xué)習(xí)具備通用性，以及深度學(xué)習(xí)平臺在不斷發(fā)展，所以它們正在推動AI步入一種新的模式。

這種模式可以歸結(jié)為“三化”，即標(biāo)準(zhǔn)化、自動化和規(guī)?；?，這也就意味著人工智能在進(jìn)入工業(yè)大生產(chǎn)階段。

要做人工智能時代下的普及，就需要先讓框架、大模型在企業(yè)，尤其是龍頭企業(yè)加速鋪展開來；而后通過反饋和優(yōu)化，逐層向下更深入的應(yīng)用起來。

除此之外，生態(tài)，生態(tài)，還是生態(tài)。

正如蘋果、安卓在移動時代下的生態(tài)大戰(zhàn)一般，得生態(tài)者為王；人工智能時代下，亦是如此。

百度可以說是幸運的，早早的布局，讓它立于現(xiàn)在這個時間節(jié)點上，已然顯現(xiàn)出了“先發(fā)優(yōu)勢”——

以飛槳生態(tài)為例，可以說是愈加繁榮，已凝聚800萬開發(fā)者，服務(wù)22萬家企事業(yè)單位，基于飛槳創(chuàng)建了80萬個模型。

而本屆大會中，百度在落地勢能加速度上又發(fā)出了一個新信號——AI原生。

這正是得益于大模型在全球的火爆發(fā)展，諸如企業(yè)辦公等產(chǎn)業(yè)領(lǐng)域所迎來的新機遇、新范式。

不是簡單的調(diào)入接口等操作，而是從開發(fā)到應(yīng)用，自下而上將AI原生貫穿的那種。

就目前來看，百度在這方面也是搶占了先機，尤其是在產(chǎn)業(yè)領(lǐng)域展開了布局，并發(fā)布“生態(tài)號召令”，以共創(chuàng)的方式再提速。

至于如此“百度速度”何時能夠完全引爆智能時代的生產(chǎn)力，我們拭目以待。

文心一言的插件能力正式啟動邀測，歡迎開發(fā)者加入：
yiyan.baidu.com/developer

— 完 —

「中國仿生機器人產(chǎn)業(yè)全景報告 · 量子位智庫」下載

AGI 的火熱發(fā)展為仿生機器人的實現(xiàn)補全了最后一塊拼圖，仿?機器?將在技術(shù)創(chuàng)新和商業(yè)模式上迎來新周期。量子位智庫發(fā)布《中國仿生機器人產(chǎn)業(yè)全景報告》，掃描下方二維碼即可查看并下載完整報告。

9月6日，我們將在北京舉辦仿生機器人行業(yè)沙龍，歡迎感興趣的企業(yè)聯(lián)系活動負(fù)責(zé)人王琳玉，聯(lián)系方式見下方。

點這里??關(guān)注我，記得標(biāo)星哦～文章來源地址http://www.zghlxwxcb.cn/news/detail-673709.html