学生研究探索使用人工智能翻译手语

Khanh Linh 阮 ' 25正在练习美国手语

Khanh Linh 阮 ' 25正在练习美国手语. 

25岁的Khanh Linh 阮在考虑潜在的主题时使用了不同的指导参数 本科生暑期研究奖学金(SURF)正规博彩十大网站, 一个宝贵的机会,让学生与教师导师一起研究项目.

“我想研究一些我不知道的东西,这样我就可以在这个过程中学习. 我希望我的研究能对社会产生积极的影响,阮说。, 第一代越南大学生.

她决定融合三个主题:美国手语, 生成式人工智能和机器学习(从数据中提取知识并自主学习).

副教授Vivek Pallipuram和Khanh Linh 阮 ' 25在他们的研究合作.

副教授Vivek Pallipuram和Khanh Linh 阮 ' 25在他们的研究合作.

她的目标是开发机器学习软件,使美国手语能够从手部动作翻译成书面文本.

“有一天,我随便打开YouTube,看到了一个关于聋哑人和手语社区关注的视频,”她说。. “做这个主题的研究引起了我的共鸣,所以我问了我的导师,他很喜欢这个想法.”

她正在与副教授合作 Vivek Pallipuram 作为冲浪项目的一部分. 六名学生获得个人津贴, 支付暑期住宿、研究材料和与教员合作的费用, 谁还会得到津贴.

“林在大二的时候就加入了我的学习小组,我们一起做了很多项目,帕里普兰说. “任何机器学习项目, 最艰巨的任务之一是分析和训练收集到的数据.

“她的机器学习方法就像那些手语最终将如何与程序互动. 他们将坐在摄像机前,用手进行语言交流. 她的程序将检测手,并在电脑屏幕上提取手的前景和骨架.”

阮, 谁在学习美国手语, 没有家人或朋友有听力障碍吗, 但她被他们面临的问题感动了.

她的工作将包括一篇关于研究结果的论文, 对未来学生的介绍, 他们的家人和其他人, 并与当地聋人社区分享研究成果.

“获得他们的想法和反馈是至关重要的, 特别是随着方案的实施,帕里普兰说.

阮的工作与一群电气和计算机工程专业的学生在2017年完成的一个高年级项目相吻合. 他们发明了一种特殊的手套,可以将美国手语翻译成语音.

“我是那个小组的导师, 这是一项重要的工作,至今仍令我们许多人感到自豪,帕里普兰说.

Pallipuram指导阮.

Pallipuram指导阮.

阮希望也能有类似的结果.

写作方面的帮助和指导可以使学习过程更加积极和吸引人, 但这种类型的帮助并不总是适用于听力受损的人,阮说. “我希望这个项目能产生影响.

“我们通常所说的机器学习是创造解决方案的一种方式, 人工智能也是如此. 很多人都在关注生成式人工智能,但它可以在很多方面产生积极的影响.”

其他夏季冲浪项目

静电纺丝用于角膜组织. 学生: Mackenzie Torbertga, 27岁. 教师: Elizabeth Orwin,工程与计算机科学学院院长.

回忆顺序来衡量策略的使用. 学生: 艾玛·加伯,25岁. 教师: 卡拉·默托·斯特里克兰·休斯,COP -心理学

它有音乐和舞蹈. 学生: 朱莉安娜·梅内塞斯25岁. 教师: 宇田久美子,音乐学院

地下构造对季节性地下水的影响 学生: 奥利维亚·西尔维斯特,25岁. 教师: Laura Rademacher, COP地球科学

干细胞培养动力学. 学生: 扎卡里·雷蒙德,27岁. 教师: 阿特菲·拉比,药房