華為釋出會殺瘋了:盤古大模型跳級釋出,程式設計語言倉颉首次亮相
量子位
2024-06-22 10:23釋出于北京量子位官方賬号
明敏 發自 HDC2024
量子位 | 公衆号 QbitAI
華為自研盤古大模型,跳級疊代!
HDC 2024上,沒有4.0,直接釋出5.0。
最新系列覆寫十億、百億、千億、萬億四種規模,分别針對當下大模型領域的不同應用需求。
同時還強調了多模态和強思維兩方面屬性。
具體能力有多強?
華為直接現場示範搭載了盤古大模型的人形機器人。
它能從多個物體中找到可以喝的那一個,遞給口渴的人類。
據介紹,盤古大模型能讓機器人完成10步以上的複雜任務規劃。
而且盤古大模型還能生成機器人需要的訓練視訊,讓它更快學習各種複雜場景。
同樣的思路還被用在了自動駕駛領域。
盤古大模型能夠了解并遵循實體規律,生成視覺上逼真、車輛行為、環境互動真實的訓練視訊。
比如讓它生成在傍晚下雨行車場景,它在學習過程中自動了解到了“開車燈”這個行為,并在生成視訊中模拟出了這個細節。
鴻蒙系統也用上了最新盤古。華為智慧助手小藝的多模态能力,就得益于盤古。
除了能力展示外,在現場,華為還直接揭秘盤古背後技術細節。從資料到訓練方法,都做了更進一步說明。
當然還有原生鴻蒙的一系列最新進展,從架構到生态,這次都可謂是“有史最大更新”。
普通使用者(P70、Mate60等)最早今年8月就能體驗到Beta版了。
盤古5.0三大更新
盤古5.0主要包含4種參數規格:
十億級的Pangu E系列:支撐手機、PC等端側的智能應用;
百億級的Pangu P系列:适用于低延遲時間、低成本的推理場景;
千億級的Pangu U系列:适用于處理複雜任務,可以成為企業通用大模型的底座;
萬億級的Pangu S系列:處理跨領域多任務的超級大模型。
強調的兩大能力為:
多模态
強思維
多模态方面,盤古大模型5.0能夠更好更精準地了解實體世界,包括文本、圖檔、視訊、雷達、紅外、遙感等更多模态。
比如,它能從清明上河圖中精準找到“趙太丞家有幾口人”。在原畫中,這部分的占比不到1/200.
在生成方面,盤古5.0,可以生成符合實體世界規律的多模态内容,讓創新随心所欲。
得益于可控時空生成技術(STCG),模型有了對實體規律的了解能力。
在自動駕駛方面,盤古大模型可以生成六攝像頭視角視訊,而且對細節的把控很好,讓自動駕駛系統可以直接擷取到全方位、高仿真度的訓練素材。
例如,車輛在不同攝像頭視角間的平滑過渡,以及在不同天氣和光照條件下行駛的自然表現,都顯示了模型對空間和時間次元精準把握的能力。
強思維方面,複雜邏輯推理是大模型成為行業助手的關鍵。盤古大模型5.0将思維鍊技術 與政策搜尋技術深度結合,極大提升了數學能力、複雜任務規劃能力。
比如在具身智能領域,盤古大模型和樂聚人形機器人合作,讓誇父機器人可以識别物品、問答互動、擊掌、遞水。
通過模仿學習政策,華為雲與樂聚公司顯著提升了人形機器人的雙臂操作能力,實作了軟硬體層面的協同優化,不僅增強了機器人綜合性能,還克服了小樣本資料訓練的局限性,推動了泛化操作能力的邊界。
多模态和強思維結合,讓盤古大模型在行業中的應用更加廣泛。
比如在工業設計領域,盤古大模型能夠被用于汽車造型設計、工裝設計、模具設計;在建築設計領域,基于盤古大模型的可控生成能力,隻需輸入設計的黑白草圖,即可生成彩色并帶有紋理的建築群360°實景視訊;基于盤古3D重建能力,還可以建構出高真實感的建築3D模型,将複雜建築群的概念設計周期從數周縮短到數十分鐘。
除了實際應用,華為對盤古背後的技術也進行了更深入揭秘。
包括資料科學、新型架構π以及如何訓練萬億稠密大模型,都做了更進一步說明。
鴻蒙沖刺、倉颉亮相
除了一系列大模型成果亮相,這屆HDC上的另一件大事,就是HarmonyOS NEXT了。
這被稱為是“有史以來最大一次更新”。
HarmonyOS NEXT現在已正式開啟面向開發者和先鋒使用者的beta更新。
在公布的計劃中,今年8月P70、Mate60等機型也将能開始beta更新。
餘承東也在現場宣布,鴻蒙原生應用已進入全面沖刺階段, 5000多個常用應用已全部啟動開發,其中超過1500家已完成上架。
據介紹,HarmonyOS NEXT采用端雲垂直整合的全新系統架構,從作業系統核心、檔案系統,到程式設計語言、編譯器/運作時、程式設計架構,再到設計系統、內建開發環境,以及AI架構和大模型等,全面煥新。
鴻蒙核心完整替代傳統核心,性能提升10%;華為研發EROFS檔案系統,随機讀性能對比EXT4提升3倍,為使用者節省2GB以上存儲空間;ArkData全新分布式智能資料底座,把華為高斯資料庫帶到了端側,擁有多模态、更智能、高性能等特性。
在系統架構上,華為也進行了軟硬芯雲的深度整合,HarmonyOS NEXT的整機性能相比HarmonyOS 4提升30%。
值得一提的是,華為自研倉颉程式設計語言正式亮相,意味着鴻蒙生态補齊了“最後一環”。
2020年,華為被曝出正在自研程式設計語言倉颉,華為還在當年8月申請注冊了“倉颉語言”商标。
在官方介紹中,倉颉程式設計語言面向全場景應用開發。它是一門多範式程式設計語言,支援函數式、指令式和面向對象等多種範式,包括值類型、類和接口、泛型、代數資料類型、模式比對、以及高階函數等特性。
目前,HarmonyOS NEXT倉颉語言開發者預覽版Beta招募也已開啟。
釋出中,餘承東表示原生鴻蒙正在全力沖刺,加入鴻蒙正當時。
鴻蒙實作了作業系統技術的全面突破,實作中國自主可控!
我們用10年做完了歐美30年才完成的事。
這番激動人心的發言也再次把老餘送上熱搜。
盡管有人發現,“小而美”似乎還沒有被展示在鴻蒙生态裡……但可以确定的是,今年鴻蒙系統一定還有驚喜可看。
檢視原圖 422K