“横看成岭侧成峰,,,远近高低各不同。。。”这两句诗形象地概括了移步换形、、、、造化万千的庐山风景,,庐山的一峰一岭一丘壑,,,,游人所处的位置不同,,,看到的景物也各不相同。。。人类视觉感知的一个关键点是将视觉场景解析为物体,,,,并进一步解析为物体的各个局部,,从而形成部分 - 整体层次结构。。。。结构化视觉作为人们容易理解的神经网络语言,,,对于大脑的推理决策活动提供着基础支撑。。
场景的结构化,,通俗理解就是将我们所看到的一草一木,,,,一楼一隅进行抽丝剥茧,,,,叠层解刨分析。。。场景结构化描述是对场景的语义化理解,,,,场景分割可以完成场景图像中视觉要素的识别、、、、检测和分割,,通过部分 - 整体层级结构诱导出丰富的语义概念和关系,,,,从而在解释和组织视觉信息方面,,,以及视觉感知和推理的泛化方面发挥着重要作用。。。。
医募医药场景理解引擎,,依托于星辰人工智能中台,,,,基于深度学习算法构建了多层神经网络,,,模仿人脑的机制来分析和理解图像,,,,可以从大规模数据中学习逐渐抽象的层次化特征,,,从而建立场景图像到语义类别的映射,,,,使计算机能够充分理解场景内容进行推理活动。。。
场景理解引擎具有预训练、、、轻量级、、、时序性特点。。。。
预训练
利用大规模无监督数据进行训练的预训练模型有着非常好的泛化性,,只需在小规模标注数据上进行微调,,,就可以在相应任务上有所提高。。。。场景理解引擎依托于AI底层基座星辰人工智能中台,,,,涵盖图像应用各类场景模型,,,,囊括医募医药底层算法,,,支持可视化的模型效果评估,,,,海量GPU资源分布式训练,,预置模型调参及作业建模方式、、自研高精度模型,,,不必从头开始构建,,,可以节省用户大量时间和成本。。。
轻量级
为了达到高精度的视觉感知,,目前市场上的场景算法倾向于使用较大较深的神经网络结构,,,导致计算复杂度高、、、、场景分割速度慢、、限制了智能引擎在自动驾驶、、视频监控、、、、移动平台等场景中的应用。。场景理解引擎基于快速和轻量级智能引擎,,,可以有效解决碎片设备之间的差异,,,不同训练框架的差异,,实现快速的在端侧部署运行。。。
时序性
面对非静态的场景图像,,视频中的物体由于拍摄角度、、快速运动和部分遮挡等原因常常表现得模糊和多样,,这使得对视频结构化分析难度较大。。场景理解引擎利用多维循环神经网络、、、概率图模型和注意力机制等算法,,,,可以通过挖掘时序上下文信息中的时序连续性提升场景分析精度,,,以云边协同视频结构化分析方法,,,在突发事件预警、、、、上报、、响应、、、指挥等各个环节实现及时有效的可视化指挥,,,满足突发事件现场实时图像传送和视频会商的快速响应需求。。。。
场景理解引擎在泛安防、、、、金融、、、医疗、、工业、、政务等领域得到广泛应用。。。。
在医疗领域,,,一方面,,,根据医学检测图识别肿瘤、、、、皮肤、、心脏以及眼科等疾病,,辅助医生高效完成诊断,,提升基层医疗机构诊断水平。。另一方面,,通过使用细粒度场景识别理解模型,,计算机视觉、、、、传感器和视频流让很多安全性应用在临床和居家环境中变为可能,,,,为医护工作者扩展了监测病人的能力,,,包括ICU中的患者监测、、诊所中的行为监测、、异常事件监控等。。。
在交通领域,,针对目标模态多变、、类型多样、、、、动静混存的复杂场景,,,,场景理解引擎通过对视频/图像资源进行深度学习分析,,,,形成抽象、、、归纳、、、、分析的结果,,,,对人、、、、车、、、物、、、、行为等进行智能判断。。。
医募医药承建的长沙市交通运输局TOCC项目,,,,通过“视频+AI”形成了一套强大的交通视觉感知系统,,,,基于结构化交通场景理解,,,,对公交、、、出租、、、轨道、、公路和水运等全行业状况进行实时监测,,,以标准化和规范化的管理体系为保障,,,服务于交通综合业务辅助与决策、、、行业监测与预警、、、应急指挥与调度、、、、综合服务协调与管理等工作。。。交通运输局依托TOCC全面实时监测的功能,,,可进行现场调度指挥,,,,30分钟内可召开全市交通系统的连线会议,,实现了看得见、、、、听得到、、、、指挥得动的功能。。。智慧信控系统“站岗”路口,,,红绿灯会思考,,视频AI获取实时车流和人流信息,,,综合平衡车辆通行和行人过街需求进而智能研判,,再也不用空等红灯。。此项目获评“新型智慧城市十大典型应用案例”,,,获得行业专家的高度认可。。。。
在城市数字化应用中,,,,纷繁复杂的口岸现场,,实现异常旅客监控、、、高温旅客监控、、、安检图像监控、、应急与可视化。。。。至关紧要的安防场景,,实现行李物品智能审图,,智能安检系统能够对已部署的X光安检机具获取的百余类图像进行实时动态分析,,,并对限制携带物品进行实时动态预警和数据推送。。。。
医募医药场景理解引擎,,,,正在解锁更多场景,,,,为机器与人之间的交互方式提供更多可能。。未来,,,医募医药将继续深化“AI+”的应用,,以星辰人工智能中台为创新载体,,,深入赋能场景,,不断增强数字化与智能化能力,,,,打造可视、、可感、、可分析、、、、可决策的新型城市智能体。。。。





湘ICP备20003263号-1