banner

盲人购物智能眼镜

icon
发布时间:2021-05-30

一、作品创意灵感

      不是所有人都拥有一对完好无缺的眼睛,而当我们拥有的时候我们也应该去帮助那些丧失了这个能力的人们。这个作品的主旨就是帮助那些看不见的盲人,让他们也能象正常人一样的生活、购物。我们创意设计和制作了《盲人购物智能眼镜》,可以通过人工智能摄像头在商场里面去自动识别商品对应的AprilTag二维码、并且通过语音播报出对应的商品名称和价格,这样盲人也可以自己在商场自主购物了,可以帮助盲人更有尊严的生活!

 

二、功能简介和项目实物图

    盲人因为视力障碍,无法知道商品的名称和价格,因此不能到超市购物。我们的装置借助于AprilTag视觉定位系统,为每种商品分配一个特定的AprilTag码;再利用Microbit主控板,结合人工智能摄像头模块,制作一个特定的盲人眼镜。盲人朋友戴上该眼睛,到特定的盲人购物商场,AI摄像头识别到AprilTag码,就播报对应的商品名称和价格。

 

projectImage

三、设备清单

硬件清单
1x
Microbit
1x
Microbit扩展板(Robotbit)
1x
KOI人工智能模块
1x
墨镜
1x
3D打印件-墨镜支架-自主设计
1x
双肩背带
6x
乐高插销

四、项目制作步骤

步骤1 3D设计和3D打印智能眼镜支架。
projectImage
projectImage
projectImage
步骤2 扩展板底座:将Microbit扩展板安装到背带肩膀上的底座。
projectImage
步骤3 将扩展板底座穿过双肩背带的肩部位置,把Microbit扩展板用乐高插销固定在底座上。
projectImage
步骤4 将KOI人工智能模块用乐高插销安装到KOI支架上,并将支架套进墨镜的一个镜腿上。
projectImage
步骤5 连接人工智能KOI模块。
projectImage
projectImage
步骤6 编写程序和系统调试。

6-A,导入Makecode中的KOI库(github.com/Kittenbot/pxt-koi)。

projectImage

6-B,编写程序测试KOI模块识别AprilTag码。

projectImage

6-C,录制音频(AprilTag码对应的编号,所代表的商品名称和价格)并存入SD卡中。

projectImage
projectImage

6-D,调试,模拟购物。

projectImage

五、硬件连线图。

projectImage

将KOI的GND和VCC分别接到扩展板。的GND和5V上,TX接P1口,RX接P2口。另外将SD卡插入KOI模块的卡槽中。

六、软件和核心程序。

6-1,录音与播放程序。

•        运行效果为按键Micro:bit按键A进入录制,

•        按下按键B播放

projectImage

6-2,盲人购物识别和播报程序。

projectImage

6-A,导入Makecode中的KOI库(github.com/Kittenbot/pxt-koi)。

七、作品展示。

projectImage
projectImage

八、总结与改进展望。

    通过人工智能等先进设备,我们顺利完成了这个项目以及帮助盲人购物的愿望。对此我们表示十分的欣喜,让我们通过自己的力量去帮助那些需要帮助的人们。并且,我们用这个眼镜让他们体会到了科技的进步与变化,也让他们了解科技无处不在。
    与此同时,我们也有需要优化的地方,例如让它的外形更加美观便捷,关键地方更多的安全保护防止破坏;以及程序上的细节:音量大小、反应速度、增加商品类别(ApriTag码和对应的商品介绍语音)、可以继续优化软件去协助盲人更好地定位AprilTag码。我们希望这个项目能得到更多人的认可和支持,因为盲人更需要社会的关爱和我们的帮助。

附件
icon 丁子航张凯心+盲人购物智能眼镜.zip 1.3MB
下载
队伍名称 春笋队 参赛组别 初中
参赛学生 丁子航 广州笋尖科技有限公司 张凯心 广州笋尖科技有限公司
指导老师
吴毅 广州笋尖科技有限公司
指导老师
吴晓佳 广州笋尖科技有限公司