
智東西(公眾號:zhidxcom)
作者 | ZeR0
編輯 | 漠影
智東西8月20日報道,今日,字節跳動旗下PICO推出首款混合現實(MR)一體機PICO 4 Ultra。
12GB+256GB消費級售價4299元,今日(ri)開啟預訂,9月2日(ri)10點正式開售(shou)。
兩個全新PICO體感追蹤器,售價399元。
老用戶以舊換新,全套最低只要2679元!
比起256GB存儲(chu)容(rong)量、售價29999元的蘋果Vision Pro國行版,這個價格過于良心。
面向已購機用戶,PICO推出首個XR行業以舊換新活動,用戶最高可獲得300元現金補貼。
企業版頭顯售價7499元起,9月3日開售,為醫(yi)療(liao)、教育、LBE娛樂等領域量身(shen)定制。
PICO 4 Ultra采用高通第二代驍龍XR2芯片、12GB內存、雙目(mu)3200萬像素彩色透視攝(she)像頭(tou)、雙目(mu)4K+超視感屏,支持Wi-Fi 7,搭配全新無環手柄(bing),支持手柄(bing)、手勢、鍵鼠(shu)交互操作,還引入了行業(ye)首個生成式AI虛擬場(chang)景。
這款全新頭顯設備不(bu)僅(jin)能互聯電腦(nao),支持同時(shi)打開(kai)20個應用窗(chuang)口(kou),窗(chuang)口(kou)最大尺(chi)寸達(da)280英寸,而且首(shou)次實現手機投屏操作,可以一邊(bian)大屏打游戲,一邊(bian)同時(shi)打開(kai)B站、抖音(yin)、小紅書等(deng)App。
而(er)且PICO 4 Ultra能播放(fang)用蘋果(guo)iPhone或Vision Pro拍攝的(de)空間(jian)視頻,編輯也很方便,還支持(chi)一鍵(jian)上傳到抖音。抖音2D轉3D視頻功能將在晚些時候上線。
此外(wai),PICO公布了一部MR互動劇《達芬(fen)奇:狂(kuang)想之翼》,并現場展(zhan)示了《三體:遠征》VR游戲(xi)畫(hua)面。
企業版PICO 4 Ultra除了在性能顯示和交互方(fang)面(mian)有很大(da)提升外,還提供各種(zhong)企業解(jie)決(jue)方(fang)案。硬件(jian)層(ceng)面(mian)有多種(zhong)產品,軟件(jian)層(ceng)面(mian)有一站(zhan)式工具(ju)平臺、客制化(hua)操作系(xi)統、企業套件(jian),可以幫助企業客戶(hu)打造定(ding)制化(hua)大(da)空間解(jie)決(jue)方(fang)案,并向合(he)作伙伴提供全周期支持。
一、硬件設計:定制精密傳感器,雙目4K+超視感屏,渲染分辨率提升62%
據PICO OS產品負責人馬杰思分享,PICO 4 Ultra采用全新硬件設計,專門新增了為MR打造的3類精密傳感器,包括4顆環境追蹤攝像頭、雙目3200萬像素彩色透視攝像頭、1顆iToF深度感知攝像頭。
PICO 4 Ultra彩色透視模式下,畫質為800萬像素,由3200萬像素攝像頭獲取的初始畫面四合一而成,是其他家產品的兩倍,還(huan)實現了攝像頭幀率(lv)和屏幕(mu)幀率(lv)的(de)對(dui)齊(qi),避免了畫(hua)面(mian)撕裂問(wen)題,馬杰(jie)思說這是其他家服務產品所沒(mei)有的(de)。
PICO研發團隊很大程度上解決了透視畸(ji)變和扭(niu)曲問題,現(xian)場(chang)播放的(de)視頻顯示(shi)整體畫面非(fei)常穩定。
PICO 4 Ultra有一個iToF深度感知攝像頭,最遠測量范圍達3米,最大測量角度60°,深度精度達厘米級。
在此基礎上,PICO自研了一整套環境感知算法,包含實時創建3D地圖、環境語義理解、長期記憶虛擬物體固定位置等功能。
PICO SDK在技術棧上(shang)的支持也比較全面,支持Unity、Unreal、WebXR及OpenXR多(duo)種開發方式。
還有一個重磅更新是Spatial ML機器學習框架。開(kai)(kai)發(fa)者可(ke)以把自己開(kai)(kai)發(fa)的(de)(de)模型部署到PICO 4 Ultra上,并可(ke)同時調(diao)用透視(shi)攝像頭+端側模型,實現一些有趣的(de)(de)效果。
PICO 4 Ultra整機重量約580克,前端主體重量305克(含泡棉),后側整體重量276克(含頂部綁帶、雙側綁帶、電(dian)池(chi)倉(cang)體、頭墊)。這種(zhong)符(fu)合人體工程學的前后平(ping)衡設(she)計,會讓佩戴更加持(chi)久舒適。
手柄做了全新無燈環設計,高度約60毫米,比上一代高度降低50%、輕了約15克,重心偏手心位置,手感更舒適,還融合了光學+視覺多模態追蹤算法。
PICO與高通長期深度合作。PICO 4 Ultra搭載高通第二代驍龍XR2平臺,GPU性能提升2.5倍、AI性能提升8倍。內容提升到12GB,據馬杰思分享(xiang),其他頭部產(chan)品(pin)內存只有8GB。
芯(xin)片升(sheng)級后,6款游(you)戲(xi)大(da)作(zuo)有了更(geng)多性能空間(jian),畫面(mian)表(biao)現力大(da)幅提升(sheng)。
顯示上,該頭顯搭載雙目4K+超視感屏,雙目分辦率為4320 x 2160,每塊屏出廠都會做精準色彩校準,屏幕亮度比PICO 4提升25%,系統默認刷新率也從72Hz提升到90Hz,顯示更加絲(si)滑,同(tong)時(shi)(shi)每一塊屏幕都(dou)在出廠時(shi)(shi)做(zuo)了色彩校準。
顯示清晰度進步很大,渲染分辨率提升到1920 x 1920,比PICO 4提升超過62%。
二、操作系統:360°全景屏,280英寸巨幕,可跨端互聯電腦和手機
新版PICO操作系統主要圍繞「更加高效、更多場景」的目標展開,一個重磅更新是全景屏工作臺。
以前(qian)PICO 4主要被用來玩(wan)VR游戲,全景屏工作臺將使用場景進一步擴展,使得(de)用戶在(zai)虛(xu)擬空間擁(yong)有(you)更(geng)多(duo)像電腦、手(shou)機一樣的(de)功能體驗。
在PICO 4 Ultra中打開部分原生應用或手機應用,多個應用窗口可在360°環(huan)形區域(yu)內(nei)擺放排(pai)列(lie)。
PICO 4 Ultra提供桌面級多窗口體驗,最多可打開20個應用窗口。馬杰(jie)思補充說,其他家產品只能打開6個應用窗口(kou)。
應用窗口的最大尺寸可達280英寸,合約6.3米 x 3.5米。
PICO 4 Ultra提供了多模態交互選擇,支持手柄、手勢、鍵盤鼠標操作。鍵鼠會在今年(nian)Q4更新,效(xiao)果就像(xiang)用電(dian)腦。
該頭顯全面兼容安卓生態,可以使用多種主流(liu)聊天、視頻(pin)、游戲等(deng)App。
比如(ru)用戶(hu)可(ke)以同時打(da)開B站(zhan)(zhan)、抖音、小紅書,B站(zhan)(zhan)還(huan)是(shi)一個(ge)巨幕效果(guo)。
用戶還(huan)可以(yi)一(yi)邊用巨幕玩手(shou)游,一(yi)邊查看游戲媒體,同時(shi)看B站攻(gong)略(lve)視頻(pin)。
這種多任務能力搭配上巨大的顯示空間,為使用場景(jing)帶來更(geng)多的可能性(xing)。
同時,PICO 4 Ultra支持沉浸/透視模式一鍵切換。
PICO還更新了沉浸模式下的虛擬場景,以春夏秋冬為主題,制作了4個高精度虛擬場景。
考慮到個性化審美需求,PICO 4 Ultra引入行業首個生成式AI虛擬場景。用戶可(ke)通(tong)過文字框(kuang)生成(cheng)獨(du)特的(de)360度虛擬場(chang)景,效果就像照片一樣。
PICO此前已實現Windows/Mac雙兼容的桌面互聯,支持多桌面同時顯示,并(bing)支持設定任意分(fen)辨率比例的虛擬屏幕。
PICO 4 Ultra不僅可以互聯電腦,還能互聯手機,首次支持鏡像顯示和操作手機,而且是對iPhone與安卓手機雙兼容。
游戲串流方面也有很多升級,支持雙路6K游戲串流,Wi-Fi 7無線串流傳輸延時低至5ms,有限串流有行業領先的1000Mbps碼率,并推出全新AV1編解碼,可(ke)在低端PC顯卡上運行更高的碼率。
空間視頻能捕捉到現(xian)實(shi)世界(jie)的(de)深度信(xin)息,拍(pai)攝出帶有3D立體感的(de)畫(hua)面,比(bi)傳統影(ying)像(xiang)更能還原現(xian)實(shi)世界(jie)。
馬杰思(si)說,PICO 4 Ultra的(de)(de)各(ge)項參數(shu)都(dou)擁有“行業領(ling)先的(de)(de)最高(gao)規格”,希望它可以成為(wei)“市面(mian)上(shang)最親(qin)民、高(gao)品(pin)質的(de)(de)空間視頻(pin)拍(pai)攝(she)設(she)備”。
其空間影像功能支持空間視頻、空間照片的拍攝和觀看。
PICO 4 Ultra擁有4096×1536的空間視頻雙目分辨率,首度支持60fps幀率拍攝(she)空間視(shi)頻。馬杰思(si)說,其他家產品目前只能(neng)做到30fps。
該頭顯還率先至支持6DoF,空(kong)間音頻錄制功能將于后續OTA推送更新。
值得一提的是,PICO 4 Ultra能播放iPhone和Vision Pro拍攝的空間視頻和照片。
用(yong)戶可(ke)以用(yong)iPhone拍攝空(kong)間視頻,然后通過PICO手機App將拍攝的空(kong)間視頻和照片導入PICO 4 Ultra相冊,把它相當(dang)于一(yi)個空(kong)間視頻記錄中(zhong)心。
空間視頻的編輯也十分方便,有專門的3D空間特效、抖音美顏算法、豐富配樂,還能一鍵發布到抖音。
PICO視頻推出的完(wan)整版3D空間特效功(gong)能(neng),將于后續OTA推送更新。
三、PICO應用商店:向所有開發者無門檻開放,今年下半年逐步完成
PICO應用商店負責人姚帥宣布,今年更開放的PICO即將到來,PICO進入全新開放生態階段,PICO應用商店的開放將于2024年下半年內逐步完成。
PICO應(ying)用商店向(xiang)所有開發者無門檻(jian)開放。只要通過平臺測試(shi)、符合法規,就能上架。
目前PICO提供超過50款MR應用、超過900款VR應用,覆蓋(gai)游戲、娛樂(le)、音樂(le)、工(gong)作生產力等(deng)多種(zhong)場景。
例如玩治愈的《拼圖巡(xun)游》游戲,自由(you)走(zou)動和點選抓握,完(wan)成3D拼圖挑戰。
還有經典的《憤怒的小鳥》,在3D游戲(xi)場景中用手勢(shi)操控彈弓射(she)擊。
更復雜的(de)沙盤戰(zhan)略游戲《Demeo地城奇(qi)譚》也能(neng)通過MR實現,支持(chi)多人(ren)聯機。
在(zai)MR環境(jing)中(zhong),《Spatial OPS》等動作游戲能帶(dai)給玩家更加身臨(lin)其境(jing)的體驗。
姚帥還分享了PICO視(shi)頻MR之(zhi)路。只要戴(dai)上頭顯(xian)設備,用戶就(jiu)能擁有(you)自己的電影院(yuan)、俱樂部或多(duo)人客廳。
此外,PICO和佳能共同發起空間視頻創作者計劃,推動(dong)空間視(shi)頻的內容生態發展。
姚帥宣布,PICO推出一部MR互動劇《達芬奇:狂想之翼》,展現一場穿(chuan)越的旅行探險。
除了MR互動外,PICO自研AI技(ji)術可(ke)將2D視(shi)頻轉制(zhi)成具有景深效果的3D空間視(shi)頻,并通過全景視(shi)頻流進(jin)行(xing)分(fen)發。
PICO還公布了三(san)體VR游戲《三(san)體:遠征》,不過沒(mei)透露具體上(shang)線(xian)日期(qi)。
四、PICO體感追蹤器:“馬卡龍”造型,重量比雞蛋還輕,續航超過25小時
到One more thing環節,PICO產品經(jing)理唐貞展示了PICO體感追蹤器。該(gai)追蹤器與PICO頭顯無縫協作,只(zhi)要將兩個追蹤器佩(pei)戴在腳踝上,就能實現(xian)全身追蹤。
PICO體感追蹤器擁有“馬卡龍”造型,主體高度約1.52厘米(mi),直徑約3.85厘米(mi),很輕便(bian)。
它采(cai)用人(ren)體工學弧度設計和親膚軟墊,舒適貼合。
追蹤器的主體與底座重量只有27克,比雞蛋還輕;續航長達25小時。如果每天只用1小(xiao)時,則(ze)至(zhi)少能連續使(shi)用3周。
開機即可自動配對,在體感追蹤器App進入校準模式后,佩戴頭顯低頭看向腿部追蹤器,大約5秒就能完成校準。
PICO體感追蹤器與PICO頭(tou)顯無縫協作,使用(yong)紅外光幫助糾正長時間(jian)VR使用(yong)期間(jian)發生的漂(piao)移。
該追蹤器搭載了多模態融合追蹤方案,可實現高精度、低延(yan)時的(de)全身動作捕捉。
其(qi)底座(zuo)和主(zhu)體(ti)共(gong)分布12顆(ke)紅外(wai)傳感器,主(zhu)題裝有1顆(ke)9軸IMU傳感器,追蹤(zong)時(shi)以(yi)200Hz頻率(lv)追蹤(zong)并傳輸動作數據。
體感追蹤器加上手柄和頭顯,一共可輸出全身24個骨骼節點6DoF數據。
全身動捕模式下,PICO體感追蹤器對身體動作捕捉延時約20毫秒,平均位置誤差5厘米,腳踏動作判定及還原準確度不低于98%。
PICO體感追蹤器已接入VRChat,一體機版本(ben)(ben)和(he)PC串流版本(ben)(ben)均可兼容。
有了全(quan)身追蹤功能后,用戶可以暢玩XR舞蹈(dao)、踢足球、節奏音游(you),或者體驗(yan)燃脂(zhi)健身運動。
PICO體感追(zhui)蹤器共支持超過20款游戲,覆蓋節奏(zou)音樂(le)、運動健(jian)身、社交等不同(tong)領域。
PICO今(jin)年還與英特爾合作(zuo)舉辦了一場VR運動(dong)會。
這個小“馬卡龍”可以被安裝在家里的任何真實物體上,將真實物體代入虛擬環境。其獨立追蹤模式正式開(kai)放適配,開(kai)發者及企業用戶可以探索更(geng)多新玩(wan)法(fa)。
結語:國內電商總銷額第一,應用數量已超900個
PICO總裁周宏偉對PICO的戰績進行了階段性總結:PICO在國內京東和天貓兩大電商平臺的總銷售額一直排名第一,PICO 4在21個國家和地區銷售。
PICO企業服務覆蓋全球2600多所學(xue)校(xiao),為20多萬名學生提供使用VR進行學習的支持,在醫療領域與合作伙伴一起為超過54萬名患者提供輔助治療。
截至目前,PICO應用商店上的應用數量超過900個,長期合作的開發者數量超過500個,覆蓋超過60個國家和地區。
周宏偉相信(xin),新推出(chu)的(de)(de)PICO 4 Ultra,會給用戶(hu)帶來前所未有(you)的(de)(de)獨特體驗。