2024萤石云开发者大会：大模型解锁更多AI场景

6月27日，萤石云开以“AI达百业，大会大模多视之所向”为主题的型解2024 ECDC萤石云开发者大会在杭州举办。

6月27日，锁更以“AI达百业，萤石云开视之所向”为主题的大会大模多2024 ECDC萤石云开发者大会在杭州举办。萤石已打造全球领先的型解视觉物联网云平台，实现从视频到视觉的锁更跃进，截至2023年底，萤石云开萤石云平台已拥有超过31万名开发者客户，大会大模多场景涵盖了零售连锁、型解畜牧养殖、锁更教育教学等音视频应用普及的萤石云开千行百业。

在本次大会上，萤石呈现了智慧物联与视觉云的型解最新动向，揭晓了垂直大模型在家庭及商业服务中的价值体现，助力开发者解锁更多AI应用场景。同时，全栈开放的萤石云服务也迎来了前沿技术的引领升级，引入大模型能力，持续构筑视觉云平台的行业领先地位。

携手ISV客户，迎接AI新时代

音视频内容具备更全面的通信要素，成为现代社会各类场景使用的重要信息载体。含“信息”量更高的音视频数据，也在更广泛的行业获得了应用。

萤石网络政企业务部总经理薄法强先生称，音视频应用行业覆盖广，萤石云在智能家居、连锁商贸、智慧工地与透明家装、医疗养老、娱乐竞技等诸多领域，与开发者合作伙伴共同落地了丰富的视觉应用。

而AI技术正在成为萤石过去沉淀验证的海量基础能力的催化剂，让开发者与行业客户看到了不同行业前行的新路标，也能不断满足开发者日益增加的不同新需求。

萤石蓝海大模型：自研垂直物联场景的具身智能大模型

AI大模型作为当下的业界风口，有着广阔的应用场景。萤石以云服务为依托，驱动智能家居行业以及以零售连锁为代表的更多行业实现视觉智能应用升级，帮助企业客户进一步降本增效。对于大模型的场景化应用，同样有了新的解读。

萤石智能算法总经理程战战分享了萤石的AI技术策略，程博士指出，通用的大模型技术属于互联网大模型，天生缺少与设备的交互，不具备具身记忆，端云协同能力也存在明显短板。为此，萤石自主研发了面向物联网场景的“蓝海大模型”。

萤石蓝海大模型是面向物联场景的具身智能大模型，具备开发开放、基础交互及具身代理三大体系化AI能力，覆盖从设备感知到设备执行全链路，接入的设备多种多样，能够感知世界空间信息，处理多模态数据，进行精确识别与理解。

萤石积累的海量AI能力，在原子算法上就提供了29大类，93子类的能力，覆盖从基础的数据治理工具到模型部署等AI工具；端云协同算法包含了73种基础感知算法，覆盖文本、音频、图像及视频，如人脸识别、人形检测、OCR等。萤石将这部分能力进行了开放，开发者可以直接进行调用与使用。

而对于交互或生成式类算法，萤石也提供了26种能力，覆盖语言交互、图像生成、多模态交互，及多种具身代理服务。萤石深知AI技术应用也可能伴随风险，十分注重AI技术研发与应用过程中的安全防控，正在依照法律法规要求履行相关算法的安全测评、备案等手续。

萤石HomePlay OS：以AI 为核心的新一代架构

大模型带来了准确率的提升，但也让企业面临新的挑战，如AI应用开发变得复杂，运行大模型带来的巨大的成本支出。为此，萤石提出了以AI为核心的新一代架构—萤石HomePlay OS，通过提供智能代理及以视觉为主的AI能力，让开发者可以快速、灵活、低成本的方式开发自身智能场景或应用的平台。

萤石HomePlay OS 具备AI核心、代理封装、云边协同、隐私保护、全面开放等五大特性。不仅可以有效实现以AI为核心的感知、计算和执行，还能将大模型与服务、工具紧密融合实现代理封装，解决开发者大模型应用门槛的问题。可灵活分配端和云的算力实现成本最优化，还保持了计算资源、模型、模型组合、代理等多层的全栈开放性。采用了用户控制下的端到端内容加密，尽可能采用边缘计算或近场去隐私化的计算方式。

萤石开放平台：视觉云推动AI场景化应用跃升

萤石开放平台为设备制造商提供云接入能力，为开发者提供个性化的解决方案。截至目前，萤石开放平台已累计发布了超过1000个开放接口，涵盖接入、直播、通话、存储、AI、信令和用户连接7个类别，31组原子能力，以及20多款aPaaS低代码组件。

以当下火热的自助消费场景为例，萤石云服务能力及大模型技术，提供了远程化的巡检能力，能够及时响应的连线服务能力，以及低成本的运维能力；为商家提供智能视觉巡检组件、智能视频客服组件，以及远程排障专家工具，最终让自助台球室实现低人工投入成本，全智能化控制，24小时不间断营业的运营策略。

结合萤石蓝海大模型升级的智能视觉巡检组件适用于自助门店、收银防飞单、餐饮规范治理和无人服务防纠纷等各种行业的远程巡检场景。智能视频客服组件主要用于提供远程视频连线服务，提供了数字分身复刻能力，融合萤石蓝海大模型，可以实现全天候的音视频连线服务，帮助开发者打造专属的个性化智能服务，目前已在零售、银行、医院、景区等自助化场景中广泛落地，帮助众多企业提升了服务的半径和深度。

这些能力都能适配专有化模式，萤石也将携手开发者，将全新能力应用于更多场景，助力多行业创新。

视觉应用行业落地，AI价值长线释放

本次开发者大会，以连锁经营为代表的两家合作伙伴带来了行业落地应用的全新方案。

KO台球是自助台球开创者，已在全国布局300多个城市，超过5000家门店，覆盖用户超800万人。其基于萤石云服务能力，创新打造了视频内容生产和用户直播功能，通过自动获取精彩瞬间、低延时直播等方式，进一步放大台球在短视频时代的社交属性。还实现了AI短视频剪辑、AI视觉追踪算法清台、AI电子裁判及AI数据化运营等丰富的运营、管理方案。

酷店掌也分享了基于萤石云物联底座的数字化门店运营变革方案，称新一代门店管理已全面启用数字华、可视化和AI 智能化，涵盖线上线下巡店、人员管理、运营管理、业务培训、经营分析等维度，不断优化门店降本增效。

通过萤石蓝海大模型、HomePlay OS的全新发布，以及云开放业务的能力升级，在共同面对的已知场景和未知领域，萤石相信，视觉服务将迈入新的价值释放阶段，新一轮方案构思也已快步走来，新服务必将带来新的增长点。