中枢成就:在2.5 PetaOPS算力提拔下,杀青跨多路8K视频流的及时AI嫌疑东说念主识别与恐吓检测
时刻栈:Voyager SDK + Axelera Metis + Intel Xeon
将来瞻望:下一代Europa架构将带来3倍性能普及
在ISC West展会上,企业指令者无数响应,角落AI的"试点阶段"决然扫尾。现阶段的中枢挑战在于规模化落地——不再局限于单一模子处理单路视频流,而是要以营业可行的老本,在多路视频流上协同诊治数十个AI模子。
2026年归来ISC West展会,Axelera带来了迄今最具贪心的互动体验,旨在充分展示及时、多模子、高分辨率多路流安全系统的极限才气。
客岁,Axelera来源展示了8K AI推理决议。如今,Voyager SDK进一步蔓延了安全干系功能,涵盖嫌疑东说念主识别、告警与可视化框架,旨在裁减操作员响适时分,尤其是在展厅现场检测到潜在火器时。这次聚拢四家ISV合营伙伴打造的安全演示,充分呈现了客户何如方便地检修、部署自界说模子,并将其集成至端到端软件活水线,杀青规模化即插即用AI治理决议,同期彰显了Voyager SDK的训练度。
Voyager SDK与Metis AIPU的中枢才气
基于Axelera Metis AIPU与Voyager SDK进行开导,可得回一整套开箱即用的高并发多路流AI干事负载编排才气,具体包括:
硬件加快解码:同步齐集并解码多路4K/8K视频流,确保低蔓延与高浑沌量。
基于切片的预处理:将高分辨率视频流切分为相互重复的图像块,保险AI对小场地的高精度检测,同期通过透视变换对不同录像机角度进行归一化处理。
并发分析:并走运行多个模子,及时检测并跟踪东说念主员、面部特征点及场地物体。
模子级联:将检测器输出传递至卑劣模子,举例将东说念主脸检测器的有趣区域输出传入识别模子。
自界说活水线逻辑:集成用户自界说代码,杀青条款逻辑以筛选特定帧或有趣区域,传递至卑劣模子。
智能角落编排:仅将重要元数据/事件上传云表以优化带宽,同期在土产货保留原始高分辨率视频供取证归档。
Voyager SDK新增功能:支合手在活水线中镶嵌自界说C++与Python逻辑,为当代高性能应用提供所需的架构活泼性。
嫌疑东说念主跟踪活水线
在真确环境中识别和跟踪嫌疑东说念主濒临重重挑战:场地可能穿行于东说念主群之中,被装束物避讳,或刻意回避录像头。系统还须应酬后光不及、畅通邋遢、面部角度多变等复杂条款。
东说念主脸识别模子对输入质料极为明锐,若不加分袂地处理邋遢、偏角或局部装束的东说念主脸,不仅会加多漏识(未能识别已知场地)和误识(失误匹配)的概率,还会花消难得的AI算力。
为此,系统需要从逐帧识别转向更紧密的时序处理。在检测器后引入跟踪器,开导者可在多帧中识别兼并个体,并为每个跟踪ID构建姿态质料缓冲区。讨好条款逻辑,系统可筛选出质料最高的检测裁图,在普及准确率的同期省俭算力资源。
跟着被跟踪东说念主员在场景中出动,其对应的姿态质料缓冲区会依据姿态角度、像素密度和光照等场地,合手续填充最优有趣区域。每个新有趣区域仅在评分高于缓冲区最弱帧时才会替换之。跟着时分推移,劣质角度与邋遢帧被松弛过滤,确保输入识别模子的数据恒久可靠。
系统检测到的首个高质料有趣区域可立即级联至识别模子,在姿态质料缓冲区合手续填充的同期完成初步身份识别。一朝缓冲区达到预设阈值,系统当场践诺批量处理以精化罢休。识别输出通过贝叶斯更新进行和会,生成积聚置信度评分,灵验将多个低置信度匹配罢休叠加转动为单一高详情趣识别论断。
从数学角度来看,两个相互独处的70%匹配罢休所提供的详情趣,高于单个90%的匹配罢休。这一架构设想确保了时序自若性,并对噪声和相配值具有较强抗插手才气——一朝通过多帧高质料图像建立高置信度身份,来自邋遢帧或狭小装束的瞬时数据将不会推翻已有的积聚字据。
系统还设有掩饰门控机制,有益处理场地仅在单帧中了了出现的情况。若某个传入有趣区域同期自傲高质料正面姿态与高置信度匹配,系统将立即判定识别罢休可靠,触发即时告警,并可竖立为掩饰现存的低质料数据缓冲区。该机制灵验幸免了时序盲区,确保即便对场地的高质料捕捉仅好景不长,也能得胜完成身份识别。
嫌疑东说念主跟踪与火器检测聚拢活水线
接下来,系统将嫌疑东说念主跟踪器与及时火器检测相讨好,专为多模子并发场景而设想,开导者可通过并走运行多种分析模子冒昧蔓延系统功能。
为最大化检测可靠性,每项场地以东说念主体与东说念主脸检测对的风物呈现。系统在每帧上并走运行东说念主体与东说念主脸检测模子,构建双旅途跟踪:当肉体被东说念主群或物体装束时仍可识别东说念主脸,当东说念主脸不行见时仍可跟踪东说念主体。应用法子通过动态映射重复检测罢休,为每项场地保管合手久化身份标记。
活水线竖立确保不丢帧:若新帧到达时识别任务尚未完成,剩余任务将被异方轨范至后续检测中,使系统大要随时分推移对通盘场景进行迭代扫描与融会,AG真人国际中国官网登录入口同期不影响录像头浑沌量(近似东说念主类处理场景的神气,但速率快得多)。
整套决议战胜"快速提交、合手续精化"的设想理念:以第一个高质料匹配罢休建立低蔓延开上路份,同期珍贵姿态质料缓冲区以合手续普及详情趣,配合掩饰门控机制确保即即是狭小的高质料捕捉也能得胜识别。
在界面管束方面,系统以高分辨率有趣区域网格(全景视图)展示所有被跟踪东说念主员。借助齐备的3300万像素分辨率,操作员可对远距离场地保合手了了可见,幸免在平淡显现器上因分辨率降采样而导致场地丢失。界面接管双向联动设想:将光标悬停于网格中的某东说念主时,系统会在原始视频流中画线标注其位置,反之也是。操作员可一键切换,在每东说念主的及时画面与姿态质料缓冲区最优截图之间解放切换。
火器检测演示决议
斟酌到在展厅展示真确火器既不履行也存在风险,本次演示选用了一款来自更古典期间的"火器"——光剑。具体而言,中式了Count Dooku的独到弯柄光剑看成检测场地,其独到的时弊手柄设想高度收复了计策警棍、刀刃火器或枪支消音器的几何形态特征,大要在真确多录像头8K原生推理环境中杀青高精度检测,兼具视觉冲击力与零风险的特质。
Axelera监控决议竖立(ISC West 2026展示版块):
嫌疑东说念主监控名单:Axelera职工看成嫌疑东说念主身份跟踪的主要场地进行注册登记
AG真人中国官方网站火器检测:基于Ultralytics YOLOv8l检修的定制光剑检测模子充任火器检测器
8K录像头竖立:两台Axis Q1809-LE 8K IP录像机部署于展台顶部,鸟瞰展厅全景
8K显现屏:75英寸8K显现器左侧展示两路主视频流(降采样),右侧展示全景视图网格
焦点视图单位:网格内竖立大面积区域用于凸起显现高优先级火器告警;无告警时,该区域切换为展台里面4K录像头及时画面,供访客互动
个东说念主驻扎装备(PPE)合规考证:当4K展台录像头检测到身着齐备PPE服装的东说念主员时,界面亮起绿色盾牌图标以示合规
角落至云表编排:检测触发展台现场告警的同期,自动向ServiceNow推送事件工单,供良友响应处理
这次演示和会了多方合营效力:Digica提供东说念主脸检测与识别模子;Innowise诳骗Synthera合成数据与真确图像羼杂数据集开导光剑检测模子;SpanIdea孝顺了大要分袂平淡参不雅者与建筑工东说念主的PPE检测模子。
硬件竖立与性能推崇
为杀青多路8K视频流的多模子及时推理,系统接管ORIGIN L-Class V2干事站,搭载Intel Xeon W7-3565X 32核处理器,并配备独处GPU风雅视觉活水线处理(解码与8K渲染)。
盘算中枢由三块Axelera 4芯片Metis卡组成,共提供48个AIPU中枢,峰值并行处理才气达2.5 PetaOPS,足以提拔高分辨率切片处理与模子推理所需的算力。系统通过Ubiquiti Switch Pro XG 24 PoE交换机接入展台基础设施,为AXIS 8K录像机提供高带宽数据传输与供电保险。
在8K分辨率下运行监控决议,对及时响应才气提倡了极高的浑沌量要求,系统重要性能场地如下:
切片浑沌量:齐备竖立决议下,系统处理速率达288块/秒。
模子并发数:每块4芯片Metis卡最多并行践诺16个模子实例。
系统总容量:三块卡料到在48个中枢上运行5个主模子和1个辅助模子,概述浑沌量不低于1440次模子推理/秒,确保所有视频流自若推理,无热降频或性能劣化。
能效推崇:在保合手高处理速率的同期,Metis架构保管高效的功耗水平,每块卡典型功耗仅为30至58瓦。
将来瞻望:Europa架构与生态系统演进
Axelera恒久保合手合手续改变。下一代Europa架构性能较Metis普及3倍,集成片上视频解码与向量引擎以加快预处理,为下一代监控系统提供充裕的AI算力余量。
与此同期,Voyager活水线对自界说Python逻辑的支合手,标志着迈向Python友好型Pipeline Builder API的紧迫第一步,赋予开导者充看法放,以高性能践诺神气构建复杂且线程安全的活水线,径直践行Axelera让AI普惠众人的职责。
Axelera不休壮大的生态系统为客户提供了日益丰富的模子与才气采用,可活泼集成至各种治理决议中。Axelera蓝图支合手开导者将官方模子库与ISV合营伙伴模子解放组合,杀青超过通俗告警的自主角落响应——在土产货发起及时辞谢合同,同期大幅贬低软件老本并加快家具上市进度。
Axelera在三项中枢需求上杀青了独到羁系:
易用性:可针对镶嵌式、桌面及企业级硬件进行快速参数化定制。
活泼性:在单一模块化活水线内管束各种化任务与复杂数据流需求。
性能:Voyager SDK风雅处理底层紊乱干事,包括跨录像机、解码器、主机CPU与Metis硬件的多流线程、缓冲分袂享与同步。
通过提供这些基础硬件与软件构建模块,Axelera AI正在鼓动高性能安全系统的规模化落地,助力客户沉静应酬合手续演进的安全恐吓。
——Doug Watt,Axelera AI应用工程总监
Q&A
Q1:Axelera Metis AIPU在多路8K视频流处理中的性能推崇何如?
A:三块Axelera 4芯片Metis卡共提供48个AIPU中枢,峰值并行处理才气达2.5 PetaOPS。系统在齐备竖立下可达到288块切片/秒的处理速率,概述推理浑沌量不低于1440次模子推理/秒,每块卡典型功耗仅30至58瓦,在保合手高性能的同期兼顾能效推崇。
Q2:Voyager SDK的姿态质料缓冲区机制是何如普及东说念主脸识别准确率的?
A:系统为每个跟踪ID构建姿态质料缓冲区,依据姿态角度、像素密度和光照等场地合手续填充最优有趣区域。新帧仅在评分高于缓冲区最弱帧时才会替换。识别罢休通过贝叶斯更新和会,生成积聚置信度评分,灵验将多个低置信度匹配转动为高详情趣识别论断,权贵贬低漏识与误识率。
Q3:Axelera下一代Europa架构比拟Metis有哪些普及?
A:Europa架构性能较Metis普及3倍AG真人国际·(中国)官方网站,集成了片上视频解码与向量引擎,可加快预处理进程,为下一代监控系统提供更充裕的AI算力余量。同期,Voyager活水线将引入Python友好型Pipeline Builder API,赋予开导者更大的解放度,以高性能神气构建复杂且线程安全的活水线。