【小熊線上訊】6月27日，以“AI達百業，視之所向”為主題的2024 ECDC螢石雲開發者大會在杭州舉辦。十一年錘煉，螢石成長為了全球領先的視覺物聯網雲平台，實作從視訊到視覺的躍進，并通過建構多資料中心+就近服務點的方式服務于全球客戶。截至2023年底，螢石雲平台已擁有超過31萬名開發者客戶，場景涵蓋了零售連鎖、畜牧養殖、教育教學等音視訊應用普及的千行百業。
專注于音視訊場景應用探索的螢石，在本次大會上呈現了智慧物聯與視覺雲的最新動向，揭曉了垂直大模型在家庭及商業服務中的價值展現，助力開發者解鎖更多AI應用場景。同時，全棧開放的螢石雲服務也迎來了前沿技術的引領更新，螢石對PaaS平台的新元件和新工具進行了場景化更新，引入大模型能力，持續構築視覺雲平台的行業領先地位。
攜手ISV客戶，迎接AI新時代
現實世界的每一分每一秒都在發生着海量的資訊交換，在龐大的資訊資料中，音視訊内容具備更全面的通信要素，成為現代社會各類場景使用的重要資訊載體。含“資訊”量更高的音視訊資料，也在更廣泛的行業獲得了應用。
螢石網絡政企業務部總經理薄法強先生首先帶來了“攜手ISV客戶，迎接AI新時代”的主題演講。音視訊應用行業覆寫廣，開發潛力大，螢石雲整體業績穩健增長，在智能家居、連鎖商貿、智慧工地與透明家裝、醫療養老、娛樂競技等諸多領域均擁有優秀的開發者合作夥伴，共同落地了豐富的視覺應用。2024年，螢石雲更新為全球領先的視覺物聯網雲平台，立足雙主業聚”視”向前行。
聚焦音視訊領域，同時與千行百業開發者共同深入場景的螢石雲業務，正在通過行業需求的不斷錘煉，疊代平台開發能力。有音視訊技術覆寫的地方，必然催生通過音視訊帶來管理效率提升亦或是業務方案創新的需求，AI技術正在成為螢石過去沉澱驗證的海量基礎能力的催化劑，讓開發者與行業客戶看到了不同行業前行的新路标。
螢石藍海大模型：自研垂直物聯場景的具身智能大模型
螢石在音視訊領域持續引領，以雲服務為依托，驅動智能家居行業以及以零售連鎖為代表的更多行業實作視覺智能應用更新，幫助企業客戶進一步降本增效。對于大模型的場景化應用，智慧物聯和視覺能力見長的螢石，有了新的解讀。
螢石智能算法總經理程戰戰分享了螢石的AI技術政策，螢石聚焦于空間級的具身智能，螢石的AI是與實體世界互動的具身AI。程博士指出，通用的大模型技術屬于網際網路大模型，天生缺少與裝置的互動，不具備具身記憶，端雲協同能力也存在明顯短闆。為此，螢石自主研發了面向物聯網場景的“藍海大模型”。藍海寓意為地球上的生命最初誕生在藍色的海洋中，進而催生出不同智能等級的物種，螢石期待在高度複雜的物聯資料海洋中，藍海大模型能夠奔向通用人工智能。
螢石藍海大模型是面向物聯場景的具身智能大模型，具備開發開放、基礎互動及具身代理三大體系化AI能力，覆寫從裝置感覺到裝置執行全鍊路，接入的裝置多種多樣，能夠感覺世界空間資訊，處理多模态資料，進行精确識别與了解，最終規劃指導裝置做出響應。
螢石積累的海量AI能力，除了應用在自身智能家居行業，也将進一步開放給行業開發者，如對于原子算法，螢石提供了29大類，93子類的能力，這些算法是AI開發者“行走江湖”或“居家必備”的基礎能力，覆寫從基礎的資料治理工具到模型部署等AI工具，可以直接進行調用與使用。
螢石提供的端雲協同算法能力，包含了73種基礎感覺算法，覆寫文本、音頻、圖像及視訊，如人臉識别、人形檢測、OCR等，可以被直接調用與使用，供開發者做出對應的AI解決方案。
而對于互動或生成式類算法，螢石也提供了26種能力，覆寫語言互動、圖像生成、多模态互動，及多種具身代理服務。螢石深知AI技術應用也可能伴随風險，十分注重AI技術研發與應用過程中的安全防控，這也是螢石的強項，螢石正在依照法律法規要求履行相關算法的安全測評、備案等手續。
螢石HomePlay OS：以AI 為核心的新一代架構
大模型帶來了準确率的提升，可以應對更複雜的任務，但也讓企業面臨新的挑戰，如AI應用開發變得複雜，運作大模型帶來的巨大的成本支出。
為此，螢石雲系統架構負責人明旭提出了以AI為核心的新一代架構—螢石HomePlay OS，一個圍繞人、家、商業，以提升使用者的生活及工作體驗為目的，通過提供智能代理及以視覺為主的AI能力，讓開發者可以快速、靈活、低成本的方式開發自身智能場景或應用的平台。
HomePlay OS—“Home”意指圍繞人、家、商業，“Play”則代表提升使用者的生活及工作體驗，通過提供智能代理的方式釋放人的生産力，将人從相對繁瑣、沒有樂趣的事務中解放出來。“OS” 表示螢石并不希望所有業務都由自身完成，而是将這些能力開放給開發者，建立與開發者共同完成的使命。
螢石HomePlay OS 具備AI核心、代理封裝、雲邊協同、隐私保護、全面開放等五大特性。展開來說，基于HomePlay OS不僅可以有效實作以AI為核心的感覺、計算和執行，還能将大模型與服務、工具緊密融合實作代理封裝，解決開發者大模型應用門檻的問題。另外，HomePlay OS基于有效的端雲協同，可靈活配置設定端和雲的算力實作成本最優化，該架構還保持了計算資源、模型、模型組合、代理等多層的全棧開放性。注重資料安全與隐私保護一直都是螢石的主張，在HomePlay OS架構的演進過程中，螢石采用了使用者控制下的端到端内容加密，盡可能采用邊緣計算或近場去隐私化的計算方式。
通過HomePlay OS的創新實踐，螢石正積極探索大模型時代下企業如何更好地定位自身在AI戰略中的角色。一方面，螢石敏銳地洞察到大模型給企業帶來的新挑戰，另一方面，又提出了切實可行的架構解決方案，緻力于讓開發者更加高效、低成本地開發AI應用，并保障使用者隐私安全。這既展現了螢石對行業發展趨勢的前瞻性思考，也凸顯了其作為行業技術引領者的責任擔當。
螢石開放平台：視覺雲推動AI場景化應用躍升
作為一個全面開放的物聯平台，螢石開放平台不僅為裝置制造商提供南向的雲接入能力，還為行業開發者提供基于雲的音視訊和AI能力，以輔助開發者打造個性化的行業解決方案。截至目前，螢石開放平台已累計釋出了超過1000個開放接口，涵蓋接入、直播、通話、存儲、AI、信令和使用者連接配接7個類别，31組原子能力，以及20多款aPaaS低代碼元件，為海量開發者提供了有力的技術支撐。
螢石開放平台是螢石與開發者攜手深入行業的前沿陣地，每時每刻，開發者都在螢石雲上調用能力，并據此不斷完善适用于各行各業的解決方案。螢石開放平台産品負責人邵佩先生表示，2024年螢石開放平台依舊持續往開放化、智能化、場景化方向發展。
以當下火熱的自助消費場景為例，螢石雲服務能力及大模型技術，将為行業智能化變革帶來新的思路。如自助撞球室，正在追求低人工投入成本，全智能化控制，24小時不間斷營業的營運政策，要實作這樣的物聯系統，需要具備三個關鍵能力：遠端化的巡檢能力，能夠及時響應的連線服務能力，以及低成本的運維能力。
為滿足這些需求，螢石推出了更優的開發者內建方案，包括智能視覺巡檢元件、智能視訊客服元件，以及遠端排障專家工具，幫助企業快速更新智能化能力，保障項目盡快上線。
新元件的應用，為開發者呈現了完善的音視訊開發服務。其中，結合螢石藍海大模型更新的智能視覺巡檢元件适用于自助門店、收銀防飛單、餐飲規範治理和無人服務防糾紛等各種行業的遠端巡檢場景。智能視訊客服元件主要用于提供遠端視訊連線服務，提供了數字分身複刻能力，融合螢石藍海大模型，可以實作全天候的音視訊連線服務，幫助開發者打造專屬的個性化智能服務，目前已在零售、銀行、醫院、景區等自助化場景中廣泛落地，幫助衆多企業提升了服務的半徑和深度。
這些能力都能适配專有化模式，可以協助我們的開發者為需要私有化部署的中大型企業客戶提供服務支撐。後續，螢石也将攜手開發者，将全新能力應用于更多場景，助力多行業創新。
視覺應用行業落地，AI價值長線釋放
音視訊應用深刻改變着行業管理效率與模式創新，使用方式各有特色，呈現效果百花齊放。本次開發者大會，以連鎖經營為代表的兩家位合作夥伴帶來了行業落地應用的全新方案。
KO撞球是自助撞球開創者，已在全國布局300多個城市，超過5000家門店，覆寫使用者超800萬人，KO撞球輕裝上陣，利用視覺能力，讓監控、營運、營銷等重人力環節高效釋放，持續為業務擴張提供動力。北京新守心城科技有限公司（KO撞球）副總經理兼CMO許海波先生表示，基于螢石雲服務能力，創新打造了視訊内容生産和使用者直播功能，通過自動擷取精彩瞬間、低延時直播等方式，進一步放大撞球在短視訊時代的社交屬性。雙方在AI 應用上合作精進，已上線AI短視訊剪輯、AI視覺追蹤算法清台、AI電子裁判及AI資料化營運等豐富的營運、管理方案。
酷店掌是專注于連鎖門店的數字化營運服務商，合作終端店鋪超150,000家，對傳統門店智能化更新具備豐富的實踐經驗。會議現場，杭州酷店掌科技有限公司客戶總監習軒昂先生分享了基于螢石雲物聯底座的數字化門店營運變革方案，新一代門店管理已全面啟用數字華、可視化和AI 智能化，涵蓋線上線下巡店、人員管理、營運管理、業務教育訓練、經營分析等次元，不斷優化門店降本增效。2024年，酷店掌還進一步引入了螢石物聯專有雲服務，建構專屬的視訊AIoT平台，為自身業務不斷上漲的智能裝置管理持續保駕護航。
通過螢石藍海大模型、HomePlay OS的全新釋出，以及雲開放業務的能力更新，在共同面對的已知場景和未知領域，螢石相信，視覺服務将邁入新的價值釋放階段，新一輪方案構思也已快步走來，新服務必将帶來新的增長點。