基于物联网的智能儿童音乐工作站-第五届全国青少年人工智能创新挑战赛-单片机创意智造挑战赛报名入口-蘑菇云比赛项目-蘑菇云

注册 / 登录

基于物联网的智能儿童音乐工作站

发布时间：2023-07-05

一、创意灵感

我们通过观察发现学龄段儿童对音乐类玩具很感兴趣，例如卡拉OK麦克风这一玩具在淘宝上的销量就很高，通过播放儿童歌曲，帮助学龄段儿童学习音乐，提高音乐感知能力，但现有的卡拉OK麦克风玩具的问题是：

1.功能单一 2.无法录音 3.缺少亲子互动

所以我们决定利用物联网技术、人工智能技术对卡拉OK麦克风进行升级，从而制作一个包含儿歌与绘本、内置录音、且能够实现远程亲子互动功能的智能儿童音乐工作站，不仅为学龄段儿童提供娱乐性和趣味性，还能促进音乐和语言发展，增强自信心和表达能力，更能促进亲子互动与交流。

二、演示视频

三、功能简介

本作品为基于物联网的智能儿童音乐工作站，由三个部分组成，具体功能如下：

1.卡拉OK玩偶

通过行空板的板载麦克风，实现录制音频功能；

通过行空板与蓝牙音箱，点击屏幕能够播放儿童歌曲《花园里种花》《小兔子乖乖》、绘本《安徒生童话》、录制的音频；

通过模拟声音传感器制作一个模拟话筒，以便对儿童唱歌时的声音强度进行检测，将结果实时显示在行空板屏幕上；

通过按钮与彩色LED灯带，实现儿童与玩具的互动：按下黄色按钮后，麋鹿帽子上的灯带会有呼吸灯的效果，同时播放声音：“宝宝唱的真好”；

按下行空板A键时，屏幕显示歌曲剩余播放时间。

2.旋转音乐盒

通过舵机与按钮，握住麋鹿玩偶的左手，音乐盒上的圣诞老人会旋转，增加儿童玩具的趣味性。

3.亲子远程互动平台

通过EASYLOT物联网平台，家长可使用手机小程序远程查看儿童播放歌曲、绘本的时间及频率，随时随地掌握儿童的动态；

通过发送消息模块，家长可使用手机远程与儿童互动，促进亲子交流：

（1）输入play指令时，音箱播放“宝宝快来和小麋鹿一起玩呀”

（2）输入sleep指令时，音箱播放“宝宝该睡觉了”

四、制作步骤

步骤1 作品功能分析与设计

首先围绕着智能玩具主题进行讨论，归纳学龄段儿童玩具的种类，经过分析选择制作的智能玩具种类为音乐类；

接着提出现有的音乐类玩具存在的问题，根据问题确定解决方案，设计作品的功能。

步骤2 绘制结构草图与选择器材

在外观上，选择麋鹿玩偶做卡拉OK机的主要的外形，搭配音乐盒丰富作品功能；

根据产品清单，选择需要的硬件。

步骤3 设置物联网与连接蓝牙

登录EASYLOT物联网平台iot.dfrobot.com.cn，新建设备并命名：音乐工作站

由于学校的喇叭模块被借走，因此使用蓝牙音箱代替，使用MoBaxterm软件，依次输入以下指令进行连接：

1.ssh root@10.1.2.3 2.password:dfrobot 3.bluetoothctl 4.default-agent 5.power on

6.scan on 7.trust ( 蓝牙音箱MAC地址) 8.pair( 蓝牙音箱MAC地址) 9.connect( 蓝牙音箱MAC地址)

步骤4 收集音频素材与编程环境部署

1.收集素材

在网站中下载儿童歌曲与绘本的mp3音频文件儿童歌曲大全儿童歌曲大全mp3下载 - 好课件吧 (goodkejian.com)

使用Text To Speech - 在线文本转语音 (text-to-speech.cn)网站，制作互动语音，如：宝宝唱的真好等

使用在线转换音频文件 (aconvert.com)网站，转换音频格式为wav格式

下载麋鹿图片作为行空板屏幕背景和logo图标

2.编程环境部署

添加行空板、MQTT、舵机等扩展库，连接远程终端

步骤5 连接硬件与编写程序

1.连接硬件

将灯带、按钮、声音传感器等硬件与行空板相连接，将舵机、按钮与Arduino Nano主控板相连接，并记录对应的引脚；

通过焊接和接线，将2.54mm杜邦头转换为PH2.0接口，同时增加线的长度。

2.编写程序

程序分为2部分，第一部分为卡拉OK玩偶，使用的是行空板、按钮、灯带、声音传感器，在Mind+软件python模式下使用图形化模块编写，第二部分为音乐盒，使用的是Arduino Nano主控板、按钮、舵机，在Mind+软件上传模式下使用图形化模块编写

步骤6 组装音乐工作站与调试系统

1.组装音乐工作站

将行空板通过螺丝与圆形木板、方形木板固定，通过魔术贴将木板粘贴到玩偶上，布置灯带位置

2.调试系统

运行程序，通过远程桌面查看行空板的屏幕显示，测试程序功能，通过物联网平台测试远程互动功能

硬件清单

行空板

链接

按钮-黄色

链接

彩色LED灯带

链接

Lighting String LED灯带驱动模块

模拟声音传感器

三线黄色积木舵机

蓝牙音箱

Arduino Nano主控板

金属9g舵机

两头PH2.0-4P白色硅胶绞线26AWG线长20CM

杜邦线

五、软件源代码

1.图形化编程源程序文件（音乐盒部分）

附件

智能儿童音乐工作站-2 旋转音乐盒.zip 167KB

下载

2.python代码（卡拉OK玩偶部分）[注：由于图形化编程源文件为150M无法上传，故用python代码展示，图形化编程可见步骤5中的截图]

代码

#  -*- coding: UTF-8 -*-

# MindPlus
# Python
from pinpong.extension.unihiker import *
from pinpong.board import Board,Pin
from unihiker import Audio
from unihiker import GUI
import siot
import time

# 事件回调函数
def on_message_callback(client, userdata, msg):
    # 订阅到音乐工作站
    if (msg.topic == "PwgwpquVR"):
        print("dingyueok")
        if (msg.payload.decode() == "sleep"):
            # 播放宝宝该睡觉了
            u_audio.start_play("sleep.wav")
            print("sleep")
        if (msg.payload.decode() == "play"):
            # 播放快来和小麋鹿一起玩呀
            u_audio.start_play("playgame.wav")
            print("playgame")
def button_click5():
    global BoFangBiaoZhi
    if (BoFangBiaoZhi == 1):
        u_audio.stop_play()
    thread5=u_gui.start_thread(u_thread5_function)
def u_thread5_function():
    global BoFangBiaoZhi
    bofang.config(image="zanting2.png")
    song.config(text="正在播放：安徒生童话")
    u_audio.start_play("4安徒生童话.wav")
    siot.publish(topic="PwgwpquVR", data="你的孩子播放了绘本：安徒生童话")
    BoFangBiaoZhi = 1
    u_audio.record("record.wav",30)
    u_audio.stop_play()
    BoFangBiaoZhi = 0
    # 绘本播放结束，
    # 图片⏸变为▶
    bofang.config(image="kaishi2.png")
def button_click2():
    global BoFangBiaoZhi
    if (BoFangBiaoZhi == 1):
        u_audio.stop_play()
    thread2=u_gui.start_thread(u_thread2_function)
def u_thread2_function():
    global BoFangBiaoZhi
    bofang.config(image="zanting2.png")
    song.config(text="正在播放：花园里种花")
    u_audio.start_play("5花园里种花.wav")
    # 向物联网平台的音乐工作站模块发送消息
    siot.publish(topic="PwgwpquVR", data="你的孩子播放了儿歌：花园里种花")
    BoFangBiaoZhi = 1
    u_audio.record("record.wav",30)
    u_audio.stop_play()
    BoFangBiaoZhi = 0
    bofang.config(image="kaishi2.png")
def button_click1():
    global BoFangBiaoZhi
    if (BoFangBiaoZhi == 1):
        u_audio.stop_play()
    thread1=u_gui.start_thread(u_thread1_function)
def u_thread1_function():
    global BoFangBiaoZhi
    bofang.config(image="zanting2.png")
    song.config(text="正在播放：小兔子乖乖")
    u_audio.start_play("1小兔子乖乖.wav")
    siot.publish(topic="PwgwpquVR", data="你的孩子播放了儿歌：小兔子乖乖")
    BoFangBiaoZhi = 1
    u_audio.record("record.wav",30)
    u_audio.stop_play()
    BoFangBiaoZhi = 0
    bofang.config(image="kaishi2.png")
def button_click3():
    global BoFangBiaoZhi
    BoFangBiaoZhi = 1
    u_audio.start_play("record.wav")
    bofang.config(image="zanting2.png")
def button_click4():
    global BoFangBiaoZhi
    BoFangBiaoZhi = 0
    u_audio.pause_play()
    bofang.config(image="kaishi2.png")
def on_buttona_click_callback():
    # 按下A键时，显示歌曲/绘本剩余播放时间
    tip.config(text=(str((str("剩余时间：") + str(round((u_audio.play_time_remain() / 60),2)))) + str("分钟")))


u_audio = Audio()
siot.init(client_id="",server="iot.dfrobot.com.cn",port=1883,user="QnpUu1-4R",password="w7pUXJ-VRz")
u_gui=GUI()
Board().begin()
siot.set_callback(on_message_callback)
siot.connect()
siot.loop()
p_p22_analog=Pin(Pin.P22, Pin.ANALOG)
p_p24_in=Pin(Pin.P24, Pin.IN)
p_p23_pwm=Pin(Pin.P23, Pin.PWM)
u_gui.on_a_click(on_buttona_click_callback)
# 连接EASY LOT物联网平台
siot.getsubscribe(topic="PwgwpquVR")
siot.publish(topic="PwgwpquVR", data="连接成功")
BoFangBiaoZhi = 0
# 设置行空板屏幕显示：文字、图片、下划线等
bg=u_gui.draw_image(image="lu.png",x=123,y=110)
yinliang=u_gui.draw_text(text=" ",x=160,y=10,font_size=11, color="#663300")
icon=u_gui.draw_image(image="lulogo.png",x=8,y=5)
icon.config(w=20)
text=u_gui.draw_text(text="菜单",x=30,y=5,font_size=14, color="#CC0000")
l1=u_gui.draw_line(x0=2,y0=66,x1=239,y1=66,width=1,color="#663300")
l2=u_gui.draw_line(x0=2,y0=102,x1=239,y1=102,width=1,color="#663300")
l3=u_gui.draw_line(x0=2,y0=138,x1=239,y1=138,width=1,color="#663300")
huiben1=u_gui.draw_text(text="绘本：安徒生童话",x=3,y=40,font_size=14, color="#663300")
huiben1.config(onclick=button_click5)
music1=u_gui.draw_text(text="儿歌：小兔子乖乖",x=3,y=75,font_size=14, color="#663300")
music1.config(onclick=button_click1)
music2=u_gui.draw_text(text="儿歌：花园里种花",x=3,y=107,font_size=14, color="#663300")
music2.config(onclick=button_click2)
song=u_gui.draw_text(text="",x=75,y=170,font_size=10, color="#990000")
song.config(origin="center")
tip=u_gui.draw_text(text="快和小麋鹿一起玩耍吧",x=50,y=300,font_size=11, color="#990000")
bofang=u_gui.draw_image(image="kaishi2.png",x=45,y=180)
bofang.config(w=70)
PLAY=u_gui.add_button(text="播放",x=30,y=260,w=60,h=30,onclick=button_click3)
PAUSE=u_gui.add_button(text="暂停",x=150,y=260,w=60,h=30,onclick=button_click4)

while True:
    # 读取声音传感器音量
    yinliang.config(text=(str("音量：") + str(p_p22_analog.read_analog())))
    # 按下按钮
    if (p_p24_in.read_digital()==True):
        while not ((not (p_p24_in.read_digital()==True))):
            pass
        # 实现呼吸灯效果
        print("按下")
        Deng = 0
        while not ((Deng >= 255)):
            Deng = (Deng + 1)
            p_p23_pwm.write_analog(Deng)
            time.sleep(0.01)
        while not ((Deng <= 0)):
            Deng = (Deng - 1)
            p_p23_pwm.write_analog(Deng)
            time.sleep(0.01)
        # 播放：宝宝唱的真好
        u_audio.play("good.wav")

六、作品图片

参赛组别

参赛学生