螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

文章圖片

螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

文章圖片

螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

文章圖片

螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

文章圖片

螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

文章圖片

螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型

文章圖片


智東西
作者 | 李水青
編輯 | 心緣
智東西6月26日杭州報道 , 今日 , 智能家居上市公司螢石網絡推出螢石藍海大模型2.0版本 。 2.0版本實現感知、理解、記憶等算法能力升級 , 并全新上線垂直場景混合大模型 , 覆蓋長輩看護、入戶安全、兒童保育等多個領域 。
同時 , 螢石升級了其新一代AI核心架構EZVIZ HomePlay OS , 涉及了場景化智能體、螢石設備開放和螢石App開放等多個層面 , 并完成端云協同與技能協調升級、系統安全與隱私保護升級 。 此外 , 螢石還分享了AI養老、無人自助等多垂直場景落地成果 。
螢石公布了一組最新數據:過去一年 , 藍海大模型L0-L3算法能力新增升級達48個 , 云端服務能力上線達101種 , 月均算法服務調用量達2.52億次 , 并推進了混合算力推理中心、模型訓練平臺等基礎建設 。

一、螢石藍海大模型2.0:算法能力增強+垂直場景混合大模型 【螢石藍海大模型2.0來了:感知理解記憶能力增強,首推垂直場景混合大模型】螢石藍海大模型2.0實現了架構全面升級:一方面是算法能力實現增強 , 包括多維融合、模態擴展和專項記憶;另一方面是垂直場景賦能 , 包括專項能力、定向優化和精準賦能 。
首先在算力能力升級方面 , 藍海大模型2.0實現了感知能力升級 , 實現高精感知一體化 , 推出了消費類萬物模型、千鳥識別算法、危險動物識別等多種算法 。
同時 , 藍海大模型2.0實現了理解能力升級 , 支持多模態、多維度的理解 , 包括視頻級的直接理解、聲音理解能力全面升級 , 以及支持多維度混合理解模型 。
此外 , 藍海大模型2.0還實現了記憶能力升級 , 支持精準畫像存儲 , 構建了用戶、設備和目標三個畫像 , 從而實現精準畫像存儲 , 提供定制化服務 。
除了上述算法能力的升級 , 藍海大模型2.0還新推出垂直場景混合大模型 。
比如在消費類智能家居領域 , 螢石推出了長輩看護混合大模型、入戶安全混合大模型、會議記錄混合大模型、兒童保育混合大模型、商鋪零售混合大模型、餐飲監管混合大模型等多個混合大模型 。
以長輩看護混合大模型為例 , 在以下演示視頻中 , 該模型可以實現長時間未出現警告、久坐提醒、健康日報等功能 。
長輩看護混合大模型演示
以入戶安全混合大模型為例 , 在以下演示視頻中 , 該模型可以實現走廊環境安全、可疑人員報警、物品看護等功能 。
入戶安全混合大模型演示

二、AI核心架構升級:場景化智能體、螢石設備開放和App開放螢石于2024年推出了EZVIZ HomePlay OS , 這是一個圍繞人、家、商業 , 以提升用戶的生活及工作體驗為目的 , 通過提供智能代理及以視覺為主的AI能力 , 讓開發者可以快速、靈活、低成本地搭建開發自己智能場景或應用的平臺 。
EZVIZ HomePlay OS主要包括五個組成部分:AI核心、端云協同、智能體封裝、全棧開放和隱私保護 。 今年 , 該平臺主要針對碎片化AI場景進行了升級 , 涉及挑戰包括需求分散、解決問題分散、理解和決策分散 , 以及感知、執行、交互、端算法分散等多個方面 , 對應推出了場景化智能體、螢石設備開放和螢石App開放 。
1、場景化智能體:消費和行業兩手抓
螢石研發的場景化智能體包括消費類智能體和行業類智能體 。
在消費類智能體方面 , 螢石主要推出了星藍-基礎智能體、長輩看護智能體和智能入戶智能體 。
以長輩看護智能體為例 , 螢石通過人體特征代替人臉來保證長輩是別的準確性 , 通過端-云融合大小模型融合的方式精準識別跌倒 , 結合長輩垂直場景大模型進行行為、健康狀況等識別 。
在行業智能體方面 , 螢石一方面實現了物聯感知和智能體融合 , 一方面實現了設備互動與智能體融合 。
2、螢石設備開放:開發從5個月縮短到3周
當下 , 標準品已經無法滿足場景化創新的需求 , 而設備定制周期長、成本高 。 硬件定制與碎片化場景的矛盾 , 通用性AI與場景化AI的割裂 , 算法模型與硬件芯片的沖突 , 成為攔路虎 。
對此 , 螢石提出不做場景的定義者 , 而是為開發者提供更開放的設備 。 螢石設備開放的產品架構如下圖所示 , 覆蓋設備原子能力開放、算法訓練開放開放 。 據悉 , 設備開放通過一體化+AI定義設備 , 能促進應用開發周期大大縮短 。
以 4S 店話術分析場景為例 , 傳統方案需經歷設備定制、設備上云、平臺對接、算法訓練、業務串聯 5 大環節 , 耗時至少 5 個月 , 而基于螢石設備開放能力 , 開發者工期可以縮短至3周 。
相關負責人稱 , 螢石設備開放平臺具備效率高、品質硬、流量大和迭代快四大特點 , 底層由藍海大模型和EZVIZ HomePlay OS提供支持 , 在商業方面有36萬B端開發者、1.9億C端用戶和3億設備(2.5億視頻設備)支持 。
3、螢石App開放:流量、技術和商業三級引擎保障
小微企業的數字化轉型面臨需求錯位、供給錯位和連接錯位三重困境 , 如何破局?答案或許藏在螢石App里 。 螢石宣布支持開發者以小程序開發方式 , 輕量級入駐螢石App進行開發 。 螢石App開放提供流量引擎、技術引擎和商業引擎三級引擎保障 , 助力開發者形成有活力的應用 。
在產品架構方面 , 螢石App核心提供用戶模塊、設備模塊、音視頻模塊、消息模塊、AI模塊五大模塊 , 以此實現各種場景功能 。
在端云協同與技能協調升級方面 , 螢石推出了超10項協同算法 , 每日數百萬次使用 , 攔截超99%+端側算法誤報 , 相對于純云端檢測成本降低超90%;在技能協作方面 , 其支持數十項協同技能 , 內置智能控制、內容檢索等技能 , 外部覆蓋天氣、股票等應用 。
在全棧開放下的系統安全與隱私保護方面 , EZVIZ HomePlay OS在APP開放安全、模型安全、設備開放安全和技能協調、端云協同安全都實現了升級 。

結語:一手技術一手場景 , 打造物聯網垂直大模型應用平臺在大模型快速迭代背景下 , 螢石藍海大模型的策略是一方面夯實技術基礎 , 豐富算法組件和增強算法能力 , 另一方面利用物聯優勢 , 深耕垂直領域 , 搭載專屬大模型 。
智能家居是大模型落地的最佳現場之一 。 螢石一手抓技術 , 一手抓場景 , 提前布局物聯網垂直大模型應用平臺 , 有望在新的全屋智能競賽中搶占先機 。

    推薦閱讀