0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Vitis视频分析SDK构建自己的智能视频分析解决方案

XILINX开发者社区 来源:XILINX开发者社区 作者:赛灵思开发者 2021-11-08 10:35 次阅读

Vitis 视频分析 SDK构建自己的智能视频分析解决方案

Vitis 视频分析 SDK 旨在 Xilinx 目标平台或您自己的平台上构建和部署支持人工智能功能的智能视频分析解决方案的完整软件堆栈。它从 USB/MIPI 摄像头输入,通过 RTSP 从文件或数据流获取视频,并使用 Vitis AI 从像素点为各种使用案例生成深度洞察,比如了解智慧城市的交通和行人、医院的健康与安全监控、自助结账以及零售分析等,从而可检查生产设施等的组件缺陷。

核心 SDK 包含多个硬件加速器插件,该插件使用各种加速器,如视频编码器、解码器、多尺度器(用于调整大小和色彩空间转换)以及用于人工智能推断的深度学习处理单元 (DPU) 等。通过在专用加速器中执行所有计算量大的操作,它可实现视频分析应用的最高性能。

对于开发者社区,Vitis 视频还提供一个通用基础架构插件形式的框架、软件加速库和一个简化的接口,可供用户开发自己的加速库,控制自定义的硬件加速器。使用这个框架,用户可轻松将其自定义加速器/内核集成在 Vitis 视频分析 SDK 中。它建立在 Xilinx 运行时 (XRT)、Vitis 和 Vitis AI 基础之上,并抽象了这些复杂的接口,有助于开发人员更轻松地构建视频分析应用。

采用 Vitis 视频分析 SDK,应用可部署在基于 Zynq UltraScale+ MPSoC 的嵌入式平台上,如 kira SoM 和 ZCU104 或 PCIe 加速平台,其中包括 Alveo U30、U50 和 VCK 5000 等。

Vitis 视频分析 SDK 图形架构

Vitis 视频分析 SDK 是一种使用开源 GStreamer 框架构建的优化图形架构,下图是一个从输入视频到输出元数据的典型视频分析应用,所有单独的模块都是所用的各种插件,所有单独的模块都是所用的各种插件,底部是在整个应用中使用的不同硬件引擎,插件之间无内存拷贝的最佳内存管理和各种加速器的使用,可确保最高性能。

Vitis 视频分析 SDK 核心组件

定制插件

高度优化的 GStreamer 插件旨在使用 Xilinx 平台上的优化内核和 IP 提供非常具体的功能。

基础架构插件

这些是正在开发的通用基础架构 GStreamer 插件,可帮助用户将其内核集成在 GStreamer 框架中。

加速软件库

这些是为管理加速内核 /IP 的状态机而开发的优化加速软件库,可公开界面,以便将这些加速软件库连接到 VVAS 通用基础架构插件中。这些可用作开发基于 VVAS 框架的加速库的参考。

加速硬件(内核/ IP)

这些都是 Xilinx 开发的高度优化的内核。

参考平台与应用

VVAS 提供多种参考平台,以满足不同应用/解决方案的需求。

完整的软件堆栈

性能与可扩展性

在边缘、本地和云端间提供业界一流的端到端性能

灵活应变性与灵活性

不仅提供高度灵活的分析工作流程,而且还提供广泛的 AI 模型,可充分满足您的需求

生产力 & TCO

从快速原型设计到全面投产,开发工作更少,部署成本更低

最佳性能展示

来源:WP529,通过 Vitis VAS 和 Deepstream 5.0 使用 Uncanny Vision 的 ANPR 应用进行了基准测试

AI 模型:Yolov3(416x416) + 3 * Resnet18(224x224),使用 Vitis VAS 和 Deepstream 5.0 进行了基准测试

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 视频
    +关注

    关注

    6

    文章

    1944

    浏览量

    72891
  • 人工智能
    +关注

    关注

    1791

    文章

    47229

    浏览量

    238345
  • SDK
    SDK
    +关注

    关注

    3

    文章

    1036

    浏览量

    45918

原文标题:Vitis™ 视频分析 SDK,将视觉化为强大的洞察力

文章出处:【微信号:gh_2d1c7e2d540e,微信公众号:XILINX开发者社区】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    智慧交通AI监控视频分析应用方案

    随着社会的进步和科技的不断发展,互联网技术和AI视觉分析技术日益成熟,为传统交通监控领域带来了新的发展机遇。AI视觉分析技术的引入,不仅提升了交通监控的智能化和自动化水平,还显著减轻了交管部门的工作负担,增强了其监控能力。
    的头像 发表于 11-29 14:12 157次阅读
    智慧交通AI监控<b class='flag-5'>视频</b><b class='flag-5'>分析</b>应用<b class='flag-5'>方案</b>

    AI视频行为分析系统:重塑安全监控的智能化未来!

    分析+报警联动于一体的AI视频行为分析系统。这一系统通过人工智能和深度学习技术,实现了对视频内容的智能
    的头像 发表于 11-26 14:51 317次阅读
    AI<b class='flag-5'>视频</b>行为<b class='flag-5'>分析</b>系统:重塑安全监控的<b class='flag-5'>智能</b>化未来!

    高效识别,智能分析,讯维AI视频行为分析系统开启智慧监控时代!

    识别分析技术,研发出一套智能化的视频分析系统——AI视频行为分析系统。AI
    的头像 发表于 11-15 15:26 371次阅读
    高效识别,<b class='flag-5'>智能</b><b class='flag-5'>分析</b>,讯维AI<b class='flag-5'>视频</b>行为<b class='flag-5'>分析</b>系统开启智慧监控时代!

    使用NVIDIA JetPack 6.0和YOLOv8构建智能交通应用

    本文将介绍如何使用 NVIDIA JetPack 6.0 中的全新 Jetson 平台服务,来构建一个适用于边缘的端到端交通分析解决方案。该系统集成了多个功能:使用视频存储工具包 (V
    的头像 发表于 08-23 16:49 464次阅读
    使用NVIDIA JetPack 6.0和YOLOv8<b class='flag-5'>构建</b><b class='flag-5'>智能</b>交通应用

    大联大诠鼎集团推出基于联咏科技和Hailo产品的后端智能图像分析方案

    处理器模块的后端智能图像分析方案。 图示1-大联大诠鼎基于联咏科技和Hailo产品的后端智能图像分析方案
    的头像 发表于 07-11 13:53 327次阅读
    大联大诠鼎集团推出基于联咏科技和Hailo产品的后端<b class='flag-5'>智能</b>图像<b class='flag-5'>分析</b><b class='flag-5'>方案</b>

    智慧园区视频监控分析系统 YOLO

    智慧园区视频监控分析系统基本建设的持续推进,云计算技术、互联网大数据、物联网技术、人工智能技术等现代信息技术的深层次运用,智慧园区视频监控分析
    的头像 发表于 07-08 08:40 306次阅读
    智慧园区<b class='flag-5'>视频</b>监控<b class='flag-5'>分析</b>系统 YOLO

    加油站视频监控行为识别分析系统 OpenCV

    智慧加油站视频监控行为识别分析系统选用视频监控系统智能分析技术,对给油区和卸油区工作人员抽烟、通电话、用火、浓烟等异常现象开展
    的头像 发表于 07-06 10:40 263次阅读
    加油站<b class='flag-5'>视频</b>监控行为识别<b class='flag-5'>分析</b>系统 OpenCV

    智慧工厂视频监控解决方案 OpenCV

    智能工厂视频监控解决方案以地区生态环境和工厂污染物为关键监控目标。智能工厂视频监控解决方案根据线
    的头像 发表于 07-03 23:00 319次阅读
    智慧工厂<b class='flag-5'>视频</b>监控<b class='flag-5'>解决方案</b> OpenCV

    平安校园视频监控方案 YOLOv5

    平安校园视频监控方案部署一台SuiJi-AI100视频分析服务器,平安校园视频监控方案使用校园
    的头像 发表于 07-03 22:51 300次阅读
    平安校园<b class='flag-5'>视频</b>监控<b class='flag-5'>方案</b> YOLOv5

    工厂视频智能分析系统解决方案 TensorFlow

    工厂视频智能分析系统解决方案通过安装在工厂生产施工作业现场的各个监控装置,构建智能监控
    的头像 发表于 07-03 22:48 308次阅读
    工厂<b class='flag-5'>视频</b><b class='flag-5'>智能</b><b class='flag-5'>分析</b>系统<b class='flag-5'>解决方案</b> TensorFlow

    视频会议解决方案

    飞腾云XU316 7MIC无感本地扩音方案正是可以解决视频会议中音质不好的问题的有效解决方案
    的头像 发表于 06-28 15:30 504次阅读
    <b class='flag-5'>视频</b>会议<b class='flag-5'>解决方案</b>

    THS8200完整的视频后端数模转换解决方案

    电子发烧友网站提供《THS8200完整的视频后端数模转换解决方案.pdf》资料免费下载
    发表于 06-24 11:32 0次下载
    THS8200完整的<b class='flag-5'>视频</b>后端数模转换<b class='flag-5'>解决方案</b>

    定制高清视频转换器:实现无缝视频格式转换的创新解决方案

    的个性化需求,定制高清视频转换器成为了一个创新且实用的解决方案。 一、无缝视频格式转换的需求 在多媒体时代,用户经常需要将高清视频从一种格式转换为另一种格式,以适应不同的播放设备和平台
    的头像 发表于 02-22 14:28 315次阅读

    视频光纤矩阵与传统视频传输方式的比较分析

    传统视频传输方式和视频光纤矩阵进行比较分析。 传统视频传输方式 : 优势 : 成本较低 :传统的视频传输方式,如同轴电缆、双绞线等,其材料成
    的头像 发表于 02-19 14:58 534次阅读

    创通联达推出全场景智能视频会议解决方案

    近日,全球领先的物联网产品和解决方案提供商,创通联达在CES2024上重磅推出了其备受期待的全场景智能视频会议解决方案,旨在提升企业沟通与协作的体验和效率,为
    的头像 发表于 01-12 11:05 566次阅读