2024ECDC萤石云开发者大会观察：物联蓝海 AI达百业

近年，无论是从国内到国际，从规模到产值，物联网行业市场包括智慧生活、智慧产业和智慧城市等都保持了较快增长。为顺应市场，也为解决更多消费者用户和行业客户的更高阶需求，萤石云作为全球领先的视频物联网平台，以音视频能力为核心，为全球开发者提供不断完善的组件和平台服务，助力打造面向多行业的应用方案。ECDC萤石云开发者大会作为萤石网络的重要活动，已成为连接技术开发者、行业用户、合作伙伴的重要桥梁，展示其技术实力、推动行业发展的重要平台。

近年来，萤石云开发者大会已经成功举办多届，每届大会都吸引了众多来自全球各地的开发者、行业用户、合作伙伴等参与。在大会上，与会者可以聆听来自业界的专家演讲、参观最新的技术展示、参与深入的交流讨论等。截至2023年底，萤石云平台已拥有超过31万名开发者客户，场景涵盖了零售连锁、畜牧养殖、教育教学等音视频应用普及的千行百业。

6月27日，2024 ECDC萤石云开发者大会在杭州成功举办，大会以“AI达百业，视之所向”为主题，展示了萤石云在智慧物联与视觉云方面的最新动向和垂直大模型在家庭及商业服务中的价值体现。同时，大会还发布了全新的HomePlay OS系统架构和一系列智能化工具与组件，为开发者提供了更加灵活、高效、低成本的AI应用开发平台。这些举措不仅推动了技术创新与发展，也进一步巩固了萤石云在智能物联网领域的领先地位。

自研“蓝海大模型”揭开面纱

近些年，人工智能步入爆发的时代，在各个领域取得惊人成就，但在视觉内容理解、思考上存在了明显的智力短板。

随着 ChatGPT的横空出世，仅一年时间，AI大模型的发展和应用达到了新的高度，成为推动行业变革的重要力量，而继“大模型”之后，具身智能被业界认为将掀起人工智能领域的下一个浪潮。具身智能是实现思考、感知、行动三者有机智能融合的机器或系统，既具有人机交互与自然语言理解的能力，同时又可以通过感知、认知、决策与时变环境及对象进行实时校准互动，协助人完成相应的决策与行动任务，促使 AI 从被动式走向主动式，从第三视角走向第一视角。

萤石作为全球领先的视觉物联网云平台，身处智能物联赛道，天然对交互有极强的需求，这些交互包括设备与人的交互、设备与设备的交互，实现与物理世界的全方位交互。为此，在2024 ECDC萤石云开发者大会上重磅发布了面向物联网场景的“蓝海大模型”，它具备开发开放、基础交互及具身代理三大体系化AI能力，覆盖从设备感知到设备执行全链路，接入的设备多种多样，能够感知世界空间信息，处理多模态数据，进行精确识别与理解，最终规划指导设备做出响应。据了解，蓝海寓意为地球上的生命最初诞生在蓝色的海洋中，进而催生出不同智能等级的物种，可见，萤石期待在高度复杂的物联数据海洋中，蓝海大模型能够奔向通用人工智能。

萤石积累的海量AI能力，除了应用在自身智能家居行业,也将进一步开放给行业开发者，如对于原子算法，萤石提供了29大类，93子类的能力，这些算法覆盖从基础的数据治理工具到模型部署等AI工具，可以直接进行调用与使用。萤石提供的端云协同算法能力，包含了73种基础感知算法,覆盖文本、音频、图像及视频，如人脸识别、人形检测、OCR等，可以被直接调用与使用，供开发者做出对应的AI解决方案。而对于交互或生成式类算法，萤石也提供了26种能力，覆盖语言交互、图像生成、多模态交互，及多种具身代理服务。而且萤石十分注重AI技术研发与应用过程中的安全防控，正在依照法律法规要求履行相关算法的安全测评、备案等手续。

具身化是机器智能的最终归宿，对于更聚焦的、需要飞轮迭代的物联场景，萤石“蓝海大模型”必将大显神通，从而促成 AI 平民化。

新一代架构萤石HomePlay OS发布

大模型带来了准确率的提升，可以应对更复杂的任务，但也让企业面临新的挑战，如AI应用开发变得复杂，运行大模型带来的巨大的成本支出。为此，萤石云提出了以AI为核心的新一代架构—萤石HomePlay OS，相较于旧架构在多个方面展现出了显著的特点和强大的能力：

AI核心

萤石HomePlay OS以AI为核心，这是其与传统架构的根本区别。它不仅仅是一个操作系统或平台，更是一个融合了先进AI技术的智能化系统。这种以AI为核心的架构，使得HomePlay OS在处理复杂任务、提供智能化服务方面具有得天独厚的优势。

代理封装

HomePlay OS通过智能代理的方式，将AI能力封装成易于理解和使用的接口，供开发者调用，大大降低了开发者使用AI技术的门槛，使得他们能够快速、灵活地开发出各种智能场景或应用。

端云协同

HomePlay OS采用了端云协同的架构设计，通过云端强大的计算能力和边缘设备的高效执行，实现了资源的优化配置和成本的有效降低，使得HomePlay OS在处理大规模数据、提供实时响应等方面具有显著的优势。

隐私保护

在数据安全和隐私保护方面，HomePlay OS同样表现出色。它采用了多种安全措施和技术手段，确保用户数据的安全性和隐私性，这也是赢得用户信任和认可重要筹码。

全面开放

HomePlay OS是一个全面开放的架构，它不仅仅为设备制造商提供云接入能力，还为行业开发者提供基于云的音视频和AI能力。这种全面开放的策略，使得HomePlay OS能够吸引更多的开发者加入其中，共同推动智能家居和物联网行业的发展。

通过HomePlay OS的创新实践，萤石正积极探索大模型时代下企业如何更好地定位自身在AI战略中的角色。萤石不仅洞察到大模型给企业带来的新挑战，又提出了切实可行的架构解决方案，既展示出萤石对行业发展趋势的前瞻性思考，也凸显了其作为行业技术引领者的责任担当。

萤石服务开发者的新思考

随着物联网和人工智能技术的快速发展，音视频内容成为了现代社会各类场景使用的重要信息载体。

萤石开放平台是萤石与开发者携手深入行业的前沿阵地，每时每刻，开发者都在萤石云上调用能力，并据此不断完善适用于各行各业的解决方案。作为一个全栈开放的物联平台，截至目前，已累计发布了超过1000个开放接口，包含接入、直播、通话、存储、AI、信令和用户连接7个类别，共计31组原子能力，百余种算法，以及20多款aPaaS低代码组件。萤石云平台为超过31万开发者提供了有力的视觉技术支撑，场景涵盖了零售连锁、畜牧养殖、教育教学等音视频应用普及的千行百业。

面对海量的信息数据和复杂的场景需求，萤石服务开发者意识到，必须引入新的组件和工具，以提升服务能力和用户体验。此次开发者大会上，萤石推出了更优的开发者集成方案，包括智能视觉巡检组件、智能视频客服组件，以及远程排障专家工具，帮助企业快速升级智能化能力，保障项目尽快上线。

智能视觉巡检组件

结合萤石蓝海大模型进行全面升级，实现看/巡/记/检一体化智能巡检。

它采用端云一体化设计，支持Web、微信原生小程序轻量化集成。性能和灵活性大幅提升，有效解决了过往误报率高、训练成本高、场景泛化能力弱的问题，适用于自助门店、收银防损防飞单、餐饮规范管理、无人服务存证防纠纷等多种远程巡检场景。

智能视频客服组件

主要用于远程视频连线服务，通过数字分身复刻能力和大语言模型能力，实现全天候不间断的智能数字人连线服务。

结合萤石蓝海大模型，开发者可以自行维护营销和服务语料，打造专属个性化服务。专为有屏幕的硬件进行了原生适配，保障系统性能和呈现效果。目前在零售、银行、医院、景区等场景中广泛应用，帮助企业提升服务半径和深度。

远程排障专家工具

旨在帮助企业获得低成本的运维能力，即使需要上门服务，现场也无需专业技术人员，仅需少量专家远程指导即可。提高了运作效率，降低了对专业技术人员的依赖。适用于多种场景，帮助企业快速响应和解决问题。

这些新组件和工具不仅提升了服务的智能化水平，也为企业提供了更加便捷、高效、低成本的解决方案，助力企业实现数字化转型和升级。同时，这些新组件和工具也体现了萤石在AI技术、物联网技术等方面的深厚积累和持续创新的能力。

最后

随着科技的飞速进步，数字化转型不仅提升了企业的运营效率，还为用户带来了更便捷、更智能的服务体验，各行各业纷纷拥抱数字化，通过引入新技术、新工具，推动业务创新和升级。

年轻的萤石网络，作为行业内的佼佼者，以视觉技术为核心，打磨经得住时间和业务考验的产品、云服务解决方案，吸纳更多的伙伴，助力千行百业实现数字化转型，共同塑造更加智能、高效的未来。

责任编辑：超级管理员