×

计算机视觉驱动的迪斯科开源分享

消耗积分:0 | 格式:zip | 大小:0.05 MB | 2023-06-30

吴湛

分享资料个

描述

我的目标是在检测到人或狗时触发迪斯科灯,如果检测到有人玩“活着”。如果检测到狗玩“谁让狗出去了?”

该项被设计为一个测试应用程序,用于在边缘计算/边缘 AI 环境中试用和使用预训练模型。英特尔的OpenVINO软件能够聚合来自多个来源的预训练模型 ( https://docs.OpenVINOtoolkit.org/latest/omz_models_intel_index.html) 使用凌华科技的 Vizi-AI,它具有 Intel® Movidius™ X VPU 芯片组和 Intel Atom 3940 CPU,包括凌华科技 Edge 软件视觉包。使用的模型是默认的 Vizi-AI 模型;英特尔的异议检测模型(frozen_inference_graph)。

未来的发展,使用适当的模型,用于更多的工业用途,将允许边缘计算智能相机检测一个人是否在人们不应该在的工作空间中,或者通过一些调整为农业环境中的捕食者提供基于视觉的警报。

它被定位为易于使用凌华科技边缘平台,通过管理兼容硬件的配置配置文件并利用包括帧流媒体、AI 模型管理器、培训蒸汽机、AWS 模型流媒体、OpenVINONode-RED等工具来提供构建块用于机器视觉解决方案。

系统内的两个组件是:

1. 带有网络摄像头的 Vizi AI。

2. 带继电器板、扬声器和迪斯科灯的树莓派

pYYBAGOYE9GAFa__AAB4PEvF8cs365.png
逻辑系统架构
 

摄像头捕捉场景,数据通过凌华科技的数据河(发布/订阅数据总线)发送到推理引擎(在本例中为 OpenVINO) 。然后将推理结果发布到 Data River,并由运行在 Vizi-AI 上的Node-RED实例接收(随后发生的 Node-Red 流程的更多细节如下所示)。这会处理推理引擎生成的标签,如果检测到一个人,它会向代理发送一条 MQTT 消息(主题,控制有效负载“Disco”)。

在树莓派上运行的 Relay python 应用程序订阅控制主题。当它接收到关于控制主题的消息时,它会检查负载,如果负载包含“Disco”,它会启动 Disco 灯并播放“保持活力”。音乐和灯光播放 30 秒后,灯光将关闭,音乐停止,直到检测到人或狗。

pYYBAGOYE-mANsTtAAFtFLSkqEY618.png
Node-RED 应用程序
 

节点红色流程在 Vizi-AI 上执行。延迟框每 30 秒只允许广播一条消息,并丢弃中间消息。

报告 X :此框定义要发送到 MQTT 代理的值。

disco :这是发布者,将消息发送到适当的 MQTT 代理主题。

总之

该项目是成功的,我能够检测到物体并创建播放特定类型音乐并打开灯的结果。如前所述,使用凌华科技 Vizi-AI 来配置他们的应用程序相当容易,而不是编写大量代码来提供快速解决方案。要将其应用于工业实践,很容易对其进行调整以识别不同的对象/事物并将音乐更改为录制的消息并发出警报声以提醒安全或安保。然后,通过我在这个项目中使用的配置文件生成器,使用凌华科技的设备管理在众多设备上扩展它也很容易。

 

 

 

 

 

 
 

 


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !

'+ '

'+ '

'+ ''+ '
'+ ''+ ''+ '
'+ ''+ '' ); $.get('/article/vipdownload/aid/'+webid,function(data){ if(data.code ==5){ $(pop_this).attr('href',"/login/index.html"); return false } if(data.code == 2){ //跳转到VIP升级页面 window.location.href="//m.obk20.com/vip/index?aid=" + webid return false } //是会员 if (data.code > 0) { $('body').append(htmlSetNormalDownload); var getWidth=$("#poplayer").width(); $("#poplayer").css("margin-left","-"+getWidth/2+"px"); $('#tips').html(data.msg) $('.download_confirm').click(function(){ $('#dialog').remove(); }) } else { var down_url = $('#vipdownload').attr('data-url'); isBindAnalysisForm(pop_this, down_url, 1) } }); }); //是否开通VIP $.get('/article/vipdownload/aid/'+webid,function(data){ if(data.code == 2 || data.code ==5){ //跳转到VIP升级页面 $('#vipdownload>span').text("开通VIP 免费下载") return false }else{ // 待续费 if(data.code == 3) { vipExpiredInfo.ifVipExpired = true vipExpiredInfo.vipExpiredDate = data.data.endoftime } $('#vipdownload .icon-vip-tips').remove() $('#vipdownload>span').text("VIP免积分下载") } }); }).on("click",".download_cancel",function(){ $('#dialog').remove(); }) var setWeixinShare={};//定义默认的微信分享信息,页面如果要自定义分享,直接更改此变量即可 if(window.navigator.userAgent.toLowerCase().match(/MicroMessenger/i) == 'micromessenger'){ var d={ title:'计算机视觉驱动的迪斯科开源分享',//标题 desc:$('[name=description]').attr("content"), //描述 imgUrl:'https://'+location.host+'/static/images/ele-logo.png',// 分享图标,默认是logo link:'',//链接 type:'',// 分享类型,music、video或link,不填默认为link dataUrl:'',//如果type是music或video,则要提供数据链接,默认为空 success:'', // 用户确认分享后执行的回调函数 cancel:''// 用户取消分享后执行的回调函数 } setWeixinShare=$.extend(d,setWeixinShare); $.ajax({ url:"//www.obk20.com/app/wechat/index.php?s=Home/ShareConfig/index", data:"share_url="+encodeURIComponent(location.href)+"&format=jsonp&domain=m", type:'get', dataType:'jsonp', success:function(res){ if(res.status!="successed"){ return false; } $.getScript('https://res.wx.qq.com/open/js/jweixin-1.0.0.js',function(result,status){ if(status!="success"){ return false; } var getWxCfg=res.data; wx.config({ //debug: true, // 开启调试模式,调用的所有api的返回值会在客户端alert出来,若要查看传入的参数,可以在pc端打开,参数信息会通过log打出,仅在pc端时才会打印。 appId:getWxCfg.appId, // 必填,公众号的唯一标识 timestamp:getWxCfg.timestamp, // 必填,生成签名的时间戳 nonceStr:getWxCfg.nonceStr, // 必填,生成签名的随机串 signature:getWxCfg.signature,// 必填,签名,见附录1 jsApiList:['onMenuShareTimeline','onMenuShareAppMessage','onMenuShareQQ','onMenuShareWeibo','onMenuShareQZone'] // 必填,需要使用的JS接口列表,所有JS接口列表见附录2 }); wx.ready(function(){ //获取“分享到朋友圈”按钮点击状态及自定义分享内容接口 wx.onMenuShareTimeline({ title: setWeixinShare.title, // 分享标题 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享给朋友”按钮点击状态及自定义分享内容接口 wx.onMenuShareAppMessage({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 type: setWeixinShare.type, // 分享类型,music、video或link,不填默认为link dataUrl: setWeixinShare.dataUrl, // 如果type是music或video,则要提供数据链接,默认为空 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到QQ”按钮点击状态及自定义分享内容接口 wx.onMenuShareQQ({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到腾讯微博”按钮点击状态及自定义分享内容接口 wx.onMenuShareWeibo({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到QQ空间”按钮点击状态及自定义分享内容接口 wx.onMenuShareQZone({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); }); }); } }); } function openX_ad(posterid, htmlid, width, height) { if ($(htmlid).length > 0) { var randomnumber = Math.random(); var now_url = encodeURIComponent(window.location.href); var ga = document.createElement('iframe'); ga.src = 'https://www1.elecfans.com/www/delivery/myafr.php?target=_blank&cb=' + randomnumber + '&zoneid=' + posterid+'&prefer='+now_url; ga.width = width; ga.height = height; ga.frameBorder = 0; ga.scrolling = 'no'; var s = $(htmlid).append(ga); } } openX_ad(828, '#berry-300', 300, 250);