×

带有Spresense的情感和导航可穿戴设备

消耗积分:0 | 格式:zip | 大小:0.11 MB | 2023-02-06

分享资料个

描述

描述

我是一名工程师,现在我正在完成我的硕士学位。作为我论文的一部分,我开始研究情绪,这促使我开始一个项目,骑自行车可以通过情绪来管理。

你有没有感到愤怒或悲伤?如果你骑自行车并且系统让你选择路线和目的地以改善你的感受或感受你想要的感觉怎么办?

我非常喜欢骑自行车去任何地方,去我的工作,去我的大学和我能去的任何地方,但我也非常喜欢骑车时的美景。在这里,我想到了一个自主导航系统的想法,它能够根据你想要感受的情绪改变你的路线。

例如:我住在一个有河流的城市,它让我感到快乐和动力,所以如果我感到悲伤,那么系统应该推荐我走这条路。但是,如果我开始骑行并在途中感到压力怎么办?那么系统应该会推荐我乘坐像河流一样的风景。

在这里,我检测到一个问题,如果我必须注意视野和景点,必须有一个自主导航系统。对于汽车,有很多选择,但对于自行车,可用的系统很少。因此,该项目的第一部分包括为自行车创建一个自主和解放双手的导航系统。第二部分包括创建一个 ML 系统来识别情绪并在移动设备上运行它,项目的第三部分包括将所有内容与基于谷歌地图的导航系统集成。

是的!直到这是一个大项目,我正在为我的学位论文和其他爱好完成其中的一部分。虽然我知道这是一个大项目,但是在学习和工作之间的每一分钟,我都在这个项目中工作。

过程(我做了什么)

目前我的工作分为两部分:自行车语音导航系统和 ML 情绪识别。

对于 ML 识别系统,我使用了 Empatica E4 腕带 从许多情况下获取生物信号来标记一些情绪。该理论说,可以确定 4 个象限之间的情绪矢量,作为平面中的矢量。这个模型被称为 Arousal-Valence Emotion plane,从不同的情绪中获取一些生物信号数据让我可以训练一个分类系统。

目前,我正在使用 Edge Impulse 训练我的模型以在移动设备上运行该模型,但我仍在改进训练数据的测试。所以,我期待继续上传那部分的进展。

另一方面,我正在用索尼的 Board Spresense 解放双手,为我的自行车骑行语音导航系统。我正在利用威廉希尔官方网站 板声音管理的优势来运行 ML 系统,如果你说向右、向左或停止,它就会说打开灯。

该系统是整个项目的第一部分,这是进展情况。

2)解放双手语音导航系统

第一次开始测试麦克风时,我在当地一家商店买了两个通用麦克风,但这些麦克风太糟糕了,无法正常工作。所以经过多次尝试,我不得不根据索尼的推荐购买新的麦克风。上买了两个我这么说,以防万一你想测试通用麦克风,但请记住,当地商店没有给我任何数据表或类似的东西。

另一方面,我开始训练 ML 模型来识别以下命令:“左”、“右”、“停止”以及与我想要的指令不符的所有其他命令。我按照 Edge Impulse 示例训练 ML 系统对“ok google”或“hello Siri”等短语做出反应。但我会在其他教程中发布它以缩短它。

目前,我仍在编程,等待新的麦克风并期待完成我的论文和这个项目。所以,如果我有新的进展,我会在这里发布。:D

感谢给我这次比赛的机会,我想发布一些东西来表明我已经尽我所能。但是,由于我对许多项目的目标设定太差,所以我遇到了问题,但我仍在努力解决它。不过别担心,我还在努力。

 

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !

'+ '

'+ '

'+ ''+ '
'+ ''+ ''+ '
'+ ''+ '' ); $.get('/article/vipdownload/aid/'+webid,function(data){ if(data.code ==5){ $(pop_this).attr('href',"/login/index.html"); return false } if(data.code == 2){ //跳转到VIP升级页面 window.location.href="//m.obk20.com/vip/index?aid=" + webid return false } //是会员 if (data.code > 0) { $('body').append(htmlSetNormalDownload); var getWidth=$("#poplayer").width(); $("#poplayer").css("margin-left","-"+getWidth/2+"px"); $('#tips').html(data.msg) $('.download_confirm').click(function(){ $('#dialog').remove(); }) } else { var down_url = $('#vipdownload').attr('data-url'); isBindAnalysisForm(pop_this, down_url, 1) } }); }); //是否开通VIP $.get('/article/vipdownload/aid/'+webid,function(data){ if(data.code == 2 || data.code ==5){ //跳转到VIP升级页面 $('#vipdownload>span').text("开通VIP 免费下载") return false }else{ // 待续费 if(data.code == 3) { vipExpiredInfo.ifVipExpired = true vipExpiredInfo.vipExpiredDate = data.data.endoftime } $('#vipdownload .icon-vip-tips').remove() $('#vipdownload>span').text("VIP免积分下载") } }); }).on("click",".download_cancel",function(){ $('#dialog').remove(); }) var setWeixinShare={};//定义默认的微信分享信息,页面如果要自定义分享,直接更改此变量即可 if(window.navigator.userAgent.toLowerCase().match(/MicroMessenger/i) == 'micromessenger'){ var d={ title:'带有Spresense的情感和导航可穿戴设备',//标题 desc:$('[name=description]').attr("content"), //描述 imgUrl:'https://'+location.host+'/static/images/ele-logo.png',// 分享图标,默认是logo link:'',//链接 type:'',// 分享类型,music、video或link,不填默认为link dataUrl:'',//如果type是music或video,则要提供数据链接,默认为空 success:'', // 用户确认分享后执行的回调函数 cancel:''// 用户取消分享后执行的回调函数 } setWeixinShare=$.extend(d,setWeixinShare); $.ajax({ url:"//www.obk20.com/app/wechat/index.php?s=Home/ShareConfig/index", data:"share_url="+encodeURIComponent(location.href)+"&format=jsonp&domain=m", type:'get', dataType:'jsonp', success:function(res){ if(res.status!="successed"){ return false; } $.getScript('https://res.wx.qq.com/open/js/jweixin-1.0.0.js',function(result,status){ if(status!="success"){ return false; } var getWxCfg=res.data; wx.config({ //debug: true, // 开启调试模式,调用的所有api的返回值会在客户端alert出来,若要查看传入的参数,可以在pc端打开,参数信息会通过log打出,仅在pc端时才会打印。 appId:getWxCfg.appId, // 必填,公众号的唯一标识 timestamp:getWxCfg.timestamp, // 必填,生成签名的时间戳 nonceStr:getWxCfg.nonceStr, // 必填,生成签名的随机串 signature:getWxCfg.signature,// 必填,签名,见附录1 jsApiList:['onMenuShareTimeline','onMenuShareAppMessage','onMenuShareQQ','onMenuShareWeibo','onMenuShareQZone'] // 必填,需要使用的JS接口列表,所有JS接口列表见附录2 }); wx.ready(function(){ //获取“分享到朋友圈”按钮点击状态及自定义分享内容接口 wx.onMenuShareTimeline({ title: setWeixinShare.title, // 分享标题 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享给朋友”按钮点击状态及自定义分享内容接口 wx.onMenuShareAppMessage({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 type: setWeixinShare.type, // 分享类型,music、video或link,不填默认为link dataUrl: setWeixinShare.dataUrl, // 如果type是music或video,则要提供数据链接,默认为空 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到QQ”按钮点击状态及自定义分享内容接口 wx.onMenuShareQQ({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到腾讯微博”按钮点击状态及自定义分享内容接口 wx.onMenuShareWeibo({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到QQ空间”按钮点击状态及自定义分享内容接口 wx.onMenuShareQZone({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); }); }); } }); } function openX_ad(posterid, htmlid, width, height) { if ($(htmlid).length > 0) { var randomnumber = Math.random(); var now_url = encodeURIComponent(window.location.href); var ga = document.createElement('iframe'); ga.src = 'https://www1.elecfans.com/www/delivery/myafr.php?target=_blank&cb=' + randomnumber + '&zoneid=' + posterid+'&prefer='+now_url; ga.width = width; ga.height = height; ga.frameBorder = 0; ga.scrolling = 'no'; var s = $(htmlid).append(ga); } } openX_ad(828, '#berry-300', 300, 250);