1、零(ling)一萬物上(shang)線Yi-34B-Chat微調模型及(ji)量(liang)化版

2、中科聞歌雅意大模型(xing)2.0將(jiang)于12月15日發布(bu)

3、優刻得智(zhi)算平臺“孔明”上(shang)線

4、OpenAI就ChatGPT錯誤率(lv)升高開展調查(cha)

5、微軟(ruan)CTO發布備忘錄(lu):將繼續支持OpenAI

6、Adobe收購(gou)印度AI視頻(pin)創企Rephrase.ai

7、Meta新注意力機(ji)制:將LLM用作自然語(yu)言(yan)推理(li)器

8、F1賽(sai)車試用AI解決(jue)賽(sai)道限(xian)制違規(gui)問題(ti)

1、零一萬物上線Yi-34B-Chat微調模型及量化版

據(ju)零(ling)一(yi)萬(wan)物微信公眾號發文,11月24日,零(ling)一(yi)萬(wan)物Yi-34B-Chat、Yi-6B-Chat微調模型已經在(zai)Hugging Face、ModelScope魔搭社區等開源社區平臺(tai)正(zheng)式發布上線。同(tong)時,零(ling)一(yi)萬(wan)物還為開發者提供了4bit、8bit量(liang)化版(ban)模型,可以直接(jie)在(zai)消費(fei)級顯卡(ka)(如RTX3090)上使用。

模型地址:

//huggingface.co/01-ai/

//www.modelscope.cn/organization/01ai

2、中科聞歌雅意大模型2.0將于12月15日發布

據(ju)(ju)(ju)中(zhong)科聞歌(ge)公(gong)眾號今日發文,12月15日,中(zhong)科聞歌(ge)將(jiang)在北京(jing)舉辦雅意2.0發布(bu)會,發布(bu)政企安全可靠大模型(xing)(xing),專注于政府智能、商業(ye)智能。據(ju)(ju)(ju)介紹,該模型(xing)(xing)從零(ling)開(kai)始預訓(xun)練、模型(xing)(xing)架(jia)構自(zi)主研發,支持百億(yi)/千億(yi)多參數(shu)規格,兼容國(guo)產算力,支持企業(ye)級(ji)部署,覆(fu)蓋10+種主流(liu)語種,并(bing)將(jiang)開(kai)源開(kai)放數(shu)據(ju)(ju)(ju)、模型(xing)(xing)、應用。

3、優刻得智算平臺“孔明”上線

據優(you)刻得(de)云計算(suan)公眾(zhong)號(hao)昨日發(fa)文,近日,優(you)刻得(de)推(tui)(tui)出了智能(neng)算(suan)力平(ping)臺“孔明”,面向(xiang)行(xing)業(ye)用(yong)戶提(ti)(ti)供一站式管(guan)理的算(suan)力資源(yuan)和運營服(fu)務(wu)。據介紹,該平(ping)臺能(neng)夠勝任在AI領(ling)域(yu)內(nei)的大(da)部分(fen)業(ye)務(wu),幫(bang)助大(da)模(mo)型(xing)(xing)公司提(ti)(ti)高訓(xun)練(lian)效(xiao)率(lv)、優(you)化模(mo)型(xing)(xing)性(xing)能(neng)、降低開發(fa)成本,進一步推(tui)(tui)動(dong)AI大(da)模(mo)型(xing)(xing)在各行(xing)業(ye)領(ling)域(yu)的發(fa)展和應用(yong)。“孔明”智算(suan)平(ping)臺支持(chi)同(tong)構和多種異構卡型(xing)(xing)的接入,包(bao)括(kuo)但(dan)不限于英偉達、AMD、英特(te)爾(er)等品牌,甚(shen)至是各類國產(chan)GPU卡型(xing)(xing),同(tong)時(shi)支持(chi)訓(xun)練(lian)集群的統一調度和管(guan)理,并為(wei)大(da)語(yu)言模(mo)型(xing)(xing)提(ti)(ti)供分(fen)布(bu)式訓(xun)練(lian)和斷點續訓(xun)的能(neng)力。

4、OpenAI就ChatGPT錯誤率升高開展調查

當地時間11月23日上午,OpenAI更新運行情況說明稱(cheng),ChatGPT的錯誤率升高,正在開(kai)展(zhan)調查(cha)。隨后官方表示問題已被識別并已實施修復,正在繼續監測影響。

5、微軟CTO發布備忘錄:將繼續支持OpenAI

據外(wai)媒The Verge昨(zuo)日報(bao)道,微(wei)軟(ruan)CTO兼AI執(zhi)行(xing)副(fu)總裁Kevin Scott近日發(fa)(fa)布(bu)備忘錄,談(tan)論OpenAI動蕩一事,并(bing)稱將繼續(xu)支(zhi)持OpenAI,并(bing)總結了過去(qu)一周取得的三項AI進展(zhan):Azure部(bu)署了新的AI計算、新成立(li)的微(wei)軟(ruan)AI Frontiers發(fa)(fa)布(bu)新研究Orca 2大模型(xing),ChatGPT發(fa)(fa)布(bu)新語音功能。

6、Adobe收購印度AI視頻創企Rephrase.ai

據外媒ETtech昨日(ri)報道,Adobe已(yi)收購印度AI文生視(shi)頻(pin)(pin)創(chuang)企Rephrase.ai。通過(guo)此次收購,Adobe尋求把Rephrase的技術堆棧(zhan)和(he)生成式AI視(shi)頻(pin)(pin)功能與(yu)其(qi)內(nei)部視(shi)頻(pin)(pin)編輯(ji)平臺Creative Cloud集成,并增(zeng)強其(qi)產品。知情人士稱,作為交易的一(yi)部分,Rephrase團隊的大多數成員將加入Adobe。

7、Meta新注意力機制:將LLM用作自然語言推理器

據機(ji)器(qi)之心報道,11月20日,Meta研究者發布論(lun)文,指(zhi)出大型語言模型(LLM)因(yin)不(bu)相關上下文或者輸入提示(shi)中固有(you)的(de)(de)偏好做出錯誤判斷的(de)(de)現象,其(qi)(qi)根本問(wen)題在(zai)于(yu)Transformer本身(shen)固有(you)的(de)(de)構建(jian)方(fang)式,尤其(qi)(qi)是(shi)其(qi)(qi)注(zhu)意(yi)(yi)力機(ji)制(zhi)。因(yin)此,研究者提出了一(yi)種完全不(bu)同(tong)的(de)(de)注(zhu)意(yi)(yi)力機(ji)制(zhi)方(fang)法,通(tong)過(guo)將(jiang)LLM用作一(yi)個自然(ran)語言推(tui)理(li)器(qi)來執行注(zhu)意(yi)(yi)力。具體(ti)來講(jiang),他們利(li)用LLM遵循指(zhi)令的(de)(de)能力,提示(shi)它(ta)們生成(cheng)應該注(zhu)意(yi)(yi)的(de)(de)上下文,從而(er)使它(ta)們只包(bao)含不(bu)會扭(niu)曲(qu)自身(shen)推(tui)理(li)的(de)(de)相關資(zi)料。研究者將(jiang)這一(yi)過(guo)程稱為 System 2 Attention(S2A),將(jiang)底(di)層Transformer及(ji)其(qi)(qi)注(zhu)意(yi)(yi)力機(ji)制(zhi)視為類似于(yu)人類System 1推(tui)理(li)的(de)(de)自動(dong)操作。

論文地址:

//arxiv.org/pdf/2311.11829.pdf

8、F1賽車試用AI解決賽道限制違規問題

據路透社今(jin)日報道(dao)(dao),一級方程式(F1)賽車管理機(ji)構正在(zai)本(ben)周末舉行的阿布扎比(bi)大獎賽上試用AI來解決違反賽道(dao)(dao)限制(zhi)的問題。總部設在(zai)巴黎的國際汽聯(FIA)表(biao)示,該機(ji)構將使用“計算機(ji)視覺”技術(shu),通過形狀(zhuang)分析來計算超出賽道(dao)(dao)邊緣的像素數量。AI將對駕駛(shi)員四(si)個車輪都越過賽道(dao)(dao)邊緣白線(xian)的真正違規行為(wei)進行分類,從(cong)而減少國際汽聯遠程操作(zuo)中心(ROC)的工作(zuo)量,加快反應速(su)度。