国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

介紹Phi-3:微軟重新定義小型語言模型(SLM)的可能性

這篇具有很好參考價(jià)值的文章主要介紹了介紹Phi-3:微軟重新定義小型語言模型(SLM)的可能性。希望對(duì)大家有所幫助。如果存在錯(cuò)誤或未考慮完全的地方,請(qǐng)大家不吝賜教,您也可以點(diǎn)擊"舉報(bào)違法"按鈕提交疑問。

??每周跟蹤AI熱點(diǎn)新聞動(dòng)向和震撼發(fā)展 想要探索生成式人工智能的前沿進(jìn)展嗎?訂閱我們的簡(jiǎn)報(bào),深入解析最新的技術(shù)突破、實(shí)際應(yīng)用案例和未來的趨勢(shì)。與全球數(shù)同行一同,從行業(yè)內(nèi)部的深度分析和實(shí)用指南中受益。不要錯(cuò)過這個(gè)機(jī)會(huì),成為AI領(lǐng)域的領(lǐng)跑者。點(diǎn)擊訂閱,與未來同行! 訂閱:https://rengongzhineng.io/

介紹Phi-3:微軟重新定義小型語言模型(SLM)的可能性,人工智能

微軟最近推出了名為Phi-3的開放式AI模型家族,這是一系列最具性價(jià)比的小型語言模型(SLM)。Phi-3模型在各種語言、推理、編碼和數(shù)學(xué)基準(zhǔn)測(cè)試中的表現(xiàn)超越了同等大小甚至更大型號(hào)的模型。此次發(fā)布擴(kuò)展了為客戶提供高質(zhì)量模型的選擇,使他們?cè)跇?gòu)建和開發(fā)生成式AI應(yīng)用程序時(shí)有更多的實(shí)用選擇。

從今天開始,3.8億參數(shù)的Phi-3-mini模型已在微軟Azure AI Studio、Hugging Face和Ollama平臺(tái)上提供。https://huggingface.co/collections/microsoft/phi-3-6626e15e9585a200d2d761e3

Phi-3-mini提供兩種上下文長(zhǎng)度變體——4K和128K令牌。它是首個(gè)支持高達(dá)128K令牌上下文窗口的同類模型,且對(duì)質(zhì)量的影響很小。它經(jīng)過指令調(diào)優(yōu),訓(xùn)練以遵循反映人們正常溝通的各種指令類型,確保模型開箱即用。它在Azure AI上可用,利用部署-評(píng)估-微調(diào)工具鏈,并在Ollama上可供開發(fā)者在本地筆記本電腦上運(yùn)行。它針對(duì)ONNX運(yùn)行時(shí)進(jìn)行了優(yōu)化,支持Windows DirectML,并具有跨平臺(tái)支持,包括圖形處理單元(GPU)、CPU甚至移動(dòng)硬件。它還作為NVIDIA NIM微服務(wù)提供,帶有標(biāo)準(zhǔn)API接口,可以在任何地方部署,并已針對(duì)NVIDIA GPU進(jìn)行了優(yōu)化。

在接下來的幾周內(nèi),將向Phi-3家族添加更多模型,為客戶在質(zhì)量-成本曲線上提供更多靈活性。Phi-3-small(70億)和Phi-3-medium(140億)將很快在Azure AI模型目錄和其他模型園中提供。

微軟持續(xù)提供在質(zhì)量-成本曲線上最佳的模型,今天的Phi-3發(fā)布擴(kuò)大了具有最先進(jìn)小型模型的選擇。Phi-3模型顯著超越了同等大小和更大大小的語言模型在關(guān)鍵基準(zhǔn)測(cè)試上的表現(xiàn)。例如,Phi-3-mini的表現(xiàn)優(yōu)于其兩倍大的模型,而Phi-3-small和Phi-3-medium則超越了包括GPT-3.5T在內(nèi)的更大型號(hào)。

所有報(bào)告的數(shù)字都是使用相同的流程產(chǎn)生的,以確保數(shù)字之間的可比性。因此,由于評(píng)估方法的輕微差異,這些數(shù)字可能與其他公布的數(shù)字不同。我們的技術(shù)論文提供了更多關(guān)于基準(zhǔn)測(cè)試的詳細(xì)信息。

介紹Phi-3:微軟重新定義小型語言模型(SLM)的可能性,人工智能

Phi-3模型按照微軟的負(fù)責(zé)任AI標(biāo)準(zhǔn)開發(fā),該標(biāo)準(zhǔn)是一套公司范圍內(nèi)基于責(zé)任、透明度、公平性、可靠性與安全、隱私與安全以及包容性的六大原則的要求。Phi-3模型經(jīng)過嚴(yán)格的安全測(cè)量和評(píng)估、紅隊(duì)測(cè)試、敏感用途審查以及遵守安全指南,以幫助確保這些模型按照微軟的標(biāo)準(zhǔn)和最佳實(shí)踐負(fù)責(zé)任地開發(fā)、測(cè)試和部署。

微軟利用Azure AI推出助手產(chǎn)品并使客戶能夠通過生成式AI轉(zhuǎn)型其業(yè)務(wù),這突顯了對(duì)不同大小模型的需求。小型語言模型,如Phi-3,特別適用于資源受限環(huán)境、響應(yīng)時(shí)間要求快的場(chǎng)景以及成本受限的用例。

Phi-3-mini特別適用于設(shè)備上使用,尤其是在與ONNX運(yùn)行時(shí)進(jìn)一步優(yōu)化后,可以跨平臺(tái)使用。Phi-3模型的較小大小也使得微調(diào)或定制更加容易和經(jīng)濟(jì)。此外,它們較低的計(jì)算需求使得它們是一個(gè)成本更低、延遲更低的選擇。較長(zhǎng)的上下文窗口使得它們能夠接收和推理大量文本內(nèi)容——文檔、網(wǎng)頁、代碼等。Phi-3-mini展示了強(qiáng)大的推理和邏輯能力,使其成為分析任務(wù)的理想選擇。

客戶已經(jīng)在使用Phi-3構(gòu)建解決方案。例如,在農(nóng)業(yè)領(lǐng)域,Phi-3已經(jīng)展現(xiàn)了其價(jià)值,尤其是在互聯(lián)網(wǎng)可能不易獲得的地方。如此強(qiáng)大的小型模型連同微軟的助手模板,可在需要時(shí)為農(nóng)民提供,且運(yùn)行成本更低,使AI技術(shù)更加普及。

印度的領(lǐng)先商業(yè)集團(tuán)ITC正在利用Phi-3作為其與微軟在Krishi Mitra農(nóng)民應(yīng)用助手上持續(xù)合作的一部分。ITCMAARS技術(shù)總監(jiān)Saif Naik表示:“我們與Krishi Mitra助手的目標(biāo)是在保持大型語言模型的準(zhǔn)確性的同時(shí)提高效率。我們很高興能與微軟合作使用經(jīng)過精細(xì)調(diào)整的Phi-3來實(shí)現(xiàn)我們的目標(biāo)——效率和準(zhǔn)確性!”文章來源地址http://www.zghlxwxcb.cn/news/detail-861075.html

到了這里,關(guān)于介紹Phi-3:微軟重新定義小型語言模型(SLM)的可能性的文章就介紹完了。如果您還想了解更多內(nèi)容,請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點(diǎn)僅代表作者本人,不代表本站立場(chǎng)。本站僅提供信息存儲(chǔ)空間服務(wù),不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。如若轉(zhuǎn)載,請(qǐng)注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實(shí)不符,請(qǐng)點(diǎn)擊違法舉報(bào)進(jìn)行投訴反饋,一經(jīng)查實(shí),立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費(fèi)用

相關(guān)文章

  • “Copilot”:微軟下一代人工智能,重新定義你的工作

    人類是天生具有夢(mèng)想、創(chuàng)造和創(chuàng)新的本能。我們渴望做能夠?qū)崿F(xiàn)我們目標(biāo)的工作——寫出偉大的小說、做出驚人的發(fā)現(xiàn)、建立強(qiáng)大的社區(qū),照顧病人等等。與工作本質(zhì)的聯(lián)系是我們內(nèi)心深處的渴望。但是今天,我們花費(fèi)太多時(shí)間在枯燥乏味的任務(wù)上,這些任務(wù)耗費(fèi)了我們的時(shí)

    2024年02月13日
    瀏覽(97)
  • 微軟 Build 2023:人工智能重新定義軟件開發(fā)與工作的未來

    微軟 Build 2023:人工智能重新定義軟件開發(fā)與工作的未來

    2023年5月23日,美國(guó)華盛頓州西雅圖 ?—— 微軟年度開發(fā)者大會(huì)Build 2023在西雅圖開幕,面對(duì)當(dāng)今由AI引領(lǐng)的技術(shù)趨勢(shì),微軟向超過20萬名注冊(cè)參會(huì)的開發(fā)者集中展示人工智能如何給軟件開發(fā)的對(duì)象、過程和工具帶來巨大變革,并重新定義工作方式的未來。微軟將發(fā)布超過50項(xiàng)新

    2024年02月06日
    瀏覽(94)
  • 微軟等開源評(píng)估ChatGPT、Phi、Llma等,統(tǒng)一測(cè)試平臺(tái)

    微軟等開源評(píng)估ChatGPT、Phi、Llma等,統(tǒng)一測(cè)試平臺(tái)

    微軟亞洲研究院、中國(guó)科學(xué)院自動(dòng)化研究所、中國(guó)科學(xué)技術(shù)大學(xué)和卡內(nèi)基梅隆大學(xué)聯(lián)合開源了,用于評(píng)估、分析大語言模型的統(tǒng)一測(cè)試平臺(tái)——PromptBench。 Prompt Bench支持目前主流的開源、閉源大語言模型,例如,ChatGPT、GPT-4、Phi、Llma1/2、Gemini、Baichuan、Yi 等。 PromptBench內(nèi)置了

    2024年01月21日
    瀏覽(19)
  • 只有27億參數(shù),性能卻高25倍!微軟發(fā)布Phi-2

    只有27億參數(shù),性能卻高25倍!微軟發(fā)布Phi-2

    12月13日,微軟在官方網(wǎng)站正式發(fā)布了,27億參數(shù)的大語言模型—Phi-2。 Phi-2是基于微軟的Phi-1.5開發(fā)而成,可自動(dòng)生成文本/代碼、總結(jié)文本、數(shù)學(xué)推理等功能。 雖然Phi-2的參數(shù)很小,性能卻優(yōu)于130億參數(shù)的Llama-2和70億參數(shù)的Mistral,以及谷歌最新發(fā)布的Gemini Nano 2。 值得一提的是

    2024年02月04日
    瀏覽(16)
  • Phi-2小語言模型QLoRA微調(diào)教程

    Phi-2小語言模型QLoRA微調(diào)教程

    就在不久前,微軟正式發(fā)布了一個(gè) 27 億參數(shù)的語言模型——Phi-2。這是一種文本到文本的人工智能程序,具有出色的推理和語言理解能力。同時(shí),微軟研究院也在官方 X 平臺(tái)上聲稱:“Phi-2 的性能優(yōu)于其他現(xiàn)有的小型語言模型,但它足夠小,可以在筆記本電腦或者移動(dòng)設(shè)備上

    2024年01月16日
    瀏覽(24)
  • 卷起來!Dr. LLaMA:通過生成數(shù)據(jù)增強(qiáng)改進(jìn)特定領(lǐng)域 QA 中的小型語言模型,重點(diǎn)關(guān)注醫(yī)學(xué)問答任務(wù)...

    卷起來!Dr. LLaMA:通過生成數(shù)據(jù)增強(qiáng)改進(jìn)特定領(lǐng)域 QA 中的小型語言模型,重點(diǎn)關(guān)注醫(yī)學(xué)問答任務(wù)...

    大家好,最近突然發(fā)現(xiàn)了一篇在專門應(yīng)用于醫(yī)學(xué)領(lǐng)域的LLaMA,名為Dr.LLaMA(太卷了太卷了),就此來分享下該語言模型的構(gòu)建方法和最終的性能情況。 論文 :Dr. LLaMA: Improving Small Language Models in Domain-Specific QA via Generative Data Augmentation 地址 :https://arxiv.org/pdf/2305.07804.pdf 代碼 :

    2024年02月11日
    瀏覽(17)
  • 高性能小模型SLM最新優(yōu)化方案和熱門應(yīng)用盤點(diǎn),附配套模型和開源代碼

    高性能小模型SLM最新優(yōu)化方案和熱門應(yīng)用盤點(diǎn),附配套模型和開源代碼

    當(dāng)大多數(shù)人都還在卷誰的大模型參數(shù)規(guī)模大的時(shí)候,聰明人已經(jīng)開始搞“小模型”了(doge)。 這里的小模型指的小型語言模型(Small Language Model,簡(jiǎn)稱SLM),通常用于解決資源受限或?qū)崟r(shí)性要求較高的場(chǎng)景,比如一些邊緣設(shè)備(智能手機(jī)、物聯(lián)網(wǎng)設(shè)備和嵌入式系統(tǒng)等),大模

    2024年01月16日
    瀏覽(28)
  • 微軟 | 把local小模型當(dāng)作大語言模型的插件?

    微軟 | 把local小模型當(dāng)作大語言模型的插件?

    一、概述 title:Small Models are Valuable Plug-ins for Large Language Models 論文地址:https://arxiv.org/abs/2305.08848 代碼:https://github.com/JetRunner/SuperICL 1.1 Motivation 大語言模型想GPT-3和GPT-4權(quán)重沒有開放出來,他們的參數(shù)量級(jí)太大沒法部署到通用的硬件上面,導(dǎo)致在大規(guī)模的監(jiān)督數(shù)據(jù)上做tunin

    2024年02月05日
    瀏覽(20)
  • 果然來了!GPT-4.5貴有貴的道理?微軟Phi-2精準(zhǔn)超越谷歌;LLM怪誕心理學(xué);斯坦福創(chuàng)業(yè)課精華筆記;新手LLM訓(xùn)練系統(tǒng)指南 |ShowMeAI日?qǐng)?bào)

    果然來了!GPT-4.5貴有貴的道理?微軟Phi-2精準(zhǔn)超越谷歌;LLM怪誕心理學(xué);斯坦福創(chuàng)業(yè)課精華筆記;新手LLM訓(xùn)練系統(tǒng)指南 |ShowMeAI日?qǐng)?bào)

    ?? 日?qǐng)?bào)周刊合集 | ?? 生產(chǎn)力工具與行業(yè)應(yīng)用大全 | ?? 點(diǎn)贊關(guān)注評(píng)論拜托啦! https://www.reddit.com/r/OpenAI/comments/18i5n29/anyone_hear_of_gpt45_drop_today 12月14日,美國(guó) Reddit 論壇用戶貼出了一張截圖,顯示的是 OpenAI GPT-4.5 定價(jià)信息,疑似遭到了提前「泄露」。 從這張截圖看, GPT-4.5 具

    2024年02月03日
    瀏覽(32)
  • 微軟D365 入門文章匯總以及各項(xiàng)認(rèn)證介紹(持續(xù)跟新.....) 自定義Dynamics 365實(shí)施和發(fā)布業(yè)務(wù)解決方案 (9章)

    希望入門D365的同學(xué)們,需要具備的知識(shí)點(diǎn),涉及C#,WebApi,前端知識(shí),Power Platform等知識(shí),以及Azure的知識(shí)點(diǎn)等,需要有了解。 實(shí)施Microsoft Dynamics 365 CE-1. Dynamics 365 CE簡(jiǎn)介,提供了有關(guān)Dynamics 365客戶參與度的基本詳細(xì)信息_Martin-Mei的博客-CSDN博客 實(shí)施Microsoft Dynamics 365 CE-2. 實(shí)施

    2024年02月09日
    瀏覽(22)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請(qǐng)作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包