中新網(wǎng)上海新聞6月30日電(記者 許婧)今年最熱科技風(fēng)口與最火投資賽道的人工智能大模型,經(jīng)歷了“技術(shù)狂飆”后,技術(shù)迭代日新月異,行業(yè)趨勢(shì)不斷變化。
專注于音視頻場(chǎng)景應(yīng)用探索的螢石網(wǎng)絡(luò)近日發(fā)布了自主研發(fā)的垂直大模型——“藍(lán)海大模型”。螢石智能算法總經(jīng)理程戰(zhàn)戰(zhàn)分享了螢石的AI技術(shù)策略,螢石聚焦于空間級(jí)的具身智能,螢石的AI是與物理世界交互的具身AI。他指出,通用的大模型技術(shù)屬于互聯(lián)網(wǎng)大模型,天生缺少與設(shè)備的交互,不具備具身記憶,端云協(xié)同能力也存在明顯短板。為此,螢石自主研發(fā)了面向物聯(lián)網(wǎng)場(chǎng)景的“藍(lán)海大模型”。
據(jù)介紹,螢石藍(lán)海大模型是面向物聯(lián)場(chǎng)景的具身智能大模型,具備開發(fā)開放、基礎(chǔ)交互及具身代理三大體系化AI能力,覆蓋從設(shè)備感知到設(shè)備執(zhí)行全鏈路,接入的設(shè)備多種多樣,能夠感知世界空間信息,處理多模態(tài)數(shù)據(jù),進(jìn)行精確識(shí)別與理解,最終規(guī)劃指導(dǎo)設(shè)備做出響應(yīng)。
螢石積累的海量AI能力,除了應(yīng)用在自身智能家居行業(yè),也將進(jìn)一步開放給行業(yè)開發(fā)者,如對(duì)于原子算法,螢石提供了29大類,93子類的能力,這些算法是AI開發(fā)者“行走江湖”或“居家必備”的基礎(chǔ)能力,覆蓋從基礎(chǔ)的數(shù)據(jù)治理工具到模型部署等AI工具,可以直接進(jìn)行調(diào)用與使用。
螢石提供的端云協(xié)同算法能力,包含了73種基礎(chǔ)感知算法,覆蓋文本、音頻、圖像及視頻,如人臉識(shí)別、人形檢測(cè)、OCR等,可以被直接調(diào)用與使用,供開發(fā)者做出對(duì)應(yīng)的AI解決方案。
而對(duì)于交互或生成式類算法,螢石也提供了26種能力,覆蓋語(yǔ)言交互、圖像生成、多模態(tài)交互,及多種具身代理服務(wù)。螢石深知AI技術(shù)應(yīng)用也可能伴隨風(fēng)險(xiǎn),十分注重AI技術(shù)研發(fā)與應(yīng)用過程中的安全防控,這也是螢石的強(qiáng)項(xiàng),螢石正在依照法律法規(guī)要求履行相關(guān)算法的安全測(cè)評(píng)、備案等手續(xù)。
十一年錘煉,螢石成長(zhǎng)為了全球領(lǐng)先的視覺物聯(lián)網(wǎng)云平臺(tái),實(shí)現(xiàn)從視頻到視覺的躍進(jìn),并通過構(gòu)建多數(shù)據(jù)中心+就近服務(wù)點(diǎn)的方式服務(wù)于全球客戶。截至2023年底,螢石云平臺(tái)已擁有超過31萬(wàn)名開發(fā)者客戶,場(chǎng)景涵蓋了零售連鎖、畜牧養(yǎng)殖、教育教學(xué)等音視頻應(yīng)用普及的千行百業(yè)。
同時(shí),全棧開放的螢石云服務(wù)也迎來了前沿技術(shù)的引領(lǐng)升級(jí),螢石對(duì)PaaS平臺(tái)的新組件和新工具進(jìn)行了場(chǎng)景化更新,引入大模型能力,持續(xù)構(gòu)筑視覺云平臺(tái)的行業(yè)領(lǐng)先地位。
螢石網(wǎng)絡(luò)政企業(yè)務(wù)部總經(jīng)理薄法強(qiáng)說,音視頻應(yīng)用行業(yè)覆蓋廣,開發(fā)潛力大,螢石云整體業(yè)績(jī)穩(wěn)健增長(zhǎng),在智能家居、連鎖商貿(mào)、智慧工地與透明家裝、醫(yī)療養(yǎng)老、娛樂競(jìng)技等諸多領(lǐng)域均擁有優(yōu)秀的開發(fā)者合作伙伴,共同落地了豐富的視覺應(yīng)用。2024年,螢石云升級(jí)為全球領(lǐng)先的視覺物聯(lián)網(wǎng)云平臺(tái),立足雙主業(yè)聚”視”向前行。
聚焦音視頻領(lǐng)域,同時(shí)與千行百業(yè)開發(fā)者共同深入場(chǎng)景的螢石云業(yè)務(wù),正在通過行業(yè)需求的不斷錘煉,迭代平臺(tái)開發(fā)能力。有音視頻技術(shù)覆蓋的地方,必然催生通過音視頻帶來管理效率提升亦或是業(yè)務(wù)方案創(chuàng)新的需求,AI技術(shù)正在成為螢石過去沉淀驗(yàn)證的海量基礎(chǔ)能力的催化劑,讓開發(fā)者與行業(yè)客戶看到了不同行業(yè)前行的新路標(biāo)。
大模型帶來了準(zhǔn)確率的提升,可以應(yīng)對(duì)更復(fù)雜的任務(wù),但也讓企業(yè)面臨新的挑戰(zhàn),如AI應(yīng)用開發(fā)變得復(fù)雜,運(yùn)行大模型帶來的巨大的成本支出。
為此,螢石云系統(tǒng)架構(gòu)負(fù)責(zé)人明旭提出了以AI為核心的新一代架構(gòu)—螢石HomePlay OS,一個(gè)圍繞人、家、商業(yè),以提升用戶的生活及工作體驗(yàn)為目的,通過提供智能代理及以視覺為主的AI能力,讓開發(fā)者可以快速、靈活、低成本的方式開發(fā)自身智能場(chǎng)景或應(yīng)用的平臺(tái)。
螢石HomePlay OS 具備AI核心、代理封裝、云邊協(xié)同、隱私保護(hù)、全面開放等五大特性。展開來說,基于HomePlay OS不僅可以有效實(shí)現(xiàn)以AI為核心的感知、計(jì)算和執(zhí)行,還能將大模型與服務(wù)、工具緊密融合實(shí)現(xiàn)代理封裝,解決開發(fā)者大模型應(yīng)用門檻的問題。另外,HomePlay OS基于有效的端云協(xié)同,可靈活分配端和云的算力實(shí)現(xiàn)成本最優(yōu)化,該架構(gòu)還保持了計(jì)算資源、模型、模型組合、代理等多層的全棧開放性。注重?cái)?shù)據(jù)安全與隱私保護(hù)一直都是螢石的主張,在HomePlay OS架構(gòu)的演進(jìn)過程中,螢石采用了用戶控制下的端到端內(nèi)容加密,盡可能采用邊緣計(jì)算或近場(chǎng)去隱私化的計(jì)算方式。
通過HomePlay OS的創(chuàng)新實(shí)踐,螢石正積極探索大模型時(shí)代下企業(yè)如何更好地定位自身在AI戰(zhàn)略中的角色。一方面,螢石敏銳地洞察到大模型給企業(yè)帶來的新挑戰(zhàn),另一方面,又提出了切實(shí)可行的架構(gòu)解決方案,致力于讓開發(fā)者更加高效、低成本地開發(fā)AI應(yīng)用,并保障用戶隱私安全。這既體現(xiàn)了螢石對(duì)行業(yè)發(fā)展趨勢(shì)的前瞻性思考,也凸顯了其作為行業(yè)技術(shù)引領(lǐng)者的責(zé)任擔(dān)當(dāng)。
作為一個(gè)全面開放的物聯(lián)平臺(tái),螢石開放平臺(tái)不僅為設(shè)備制造商提供南向的云接入能力,還為行業(yè)開發(fā)者提供基于云的音視頻和AI能力,以輔助開發(fā)者打造個(gè)性化的行業(yè)解決方案。截至目前,螢石開放平臺(tái)已累計(jì)發(fā)布了超過1000個(gè)開放接口,涵蓋接入、直播、通話、存儲(chǔ)、AI、信令和用戶連接7個(gè)類別,31組原子能力,以及20多款aPaaS低代碼組件,為海量開發(fā)者提供了有力的技術(shù)支撐。
螢石開放平臺(tái)是螢石與開發(fā)者攜手深入行業(yè)的前沿陣地,每時(shí)每刻,開發(fā)者都在螢石云上調(diào)用能力,并據(jù)此不斷完善適用于各行各業(yè)的解決方案。螢石開放平臺(tái)產(chǎn)品負(fù)責(zé)人邵佩先生表示,2024年螢石開放平臺(tái)依舊持續(xù)往開放化、智能化、場(chǎng)景化方向發(fā)展。
以當(dāng)下火熱的自助消費(fèi)場(chǎng)景為例,螢石云服務(wù)能力及大模型技術(shù),將為行業(yè)智能化變革帶來新的思路。如自助臺(tái)球室,正在追求低人工投入成本,全智能化控制,24小時(shí)不間斷營(yíng)業(yè)的運(yùn)營(yíng)策略,要實(shí)現(xiàn)這樣的物聯(lián)系統(tǒng),需要具備三個(gè)關(guān)鍵能力:遠(yuǎn)程化的巡檢能力,能夠及時(shí)響應(yīng)的連線服務(wù)能力,以及低成本的運(yùn)維能力。
為滿足這些需求,螢石推出了更優(yōu)的開發(fā)者集成方案,包括智能視覺巡檢組件、智能視頻客服組件,以及遠(yuǎn)程排障專家工具,幫助企業(yè)快速升級(jí)智能化能力,保障項(xiàng)目盡快上線。
新組件的應(yīng)用,為開發(fā)者呈現(xiàn)了完善的音視頻開發(fā)服務(wù)。其中,結(jié)合螢石藍(lán)海大模型升級(jí)的智能視覺巡檢組件適用于自助門店、收銀防飛單、餐飲規(guī)范治理和無人服務(wù)防糾紛等各種行業(yè)的遠(yuǎn)程巡檢場(chǎng)景。智能視頻客服組件主要用于提供遠(yuǎn)程視頻連線服務(wù),提供了數(shù)字分身復(fù)刻能力,融合螢石藍(lán)海大模型,可以實(shí)現(xiàn)全天候的音視頻連線服務(wù),幫助開發(fā)者打造專屬的個(gè)性化智能服務(wù),目前已在零售、銀行、醫(yī)院、景區(qū)等自助化場(chǎng)景中廣泛落地,幫助眾多企業(yè)提升了服務(wù)的半徑和深度。(完)
注:請(qǐng)?jiān)谵D(zhuǎn)載文章內(nèi)容時(shí)務(wù)必注明出處!
編輯:許婧