具有智能交互学习能力的机械臂写字系统
DOI:
作者:
作者单位:

作者简介:

杨明浩(1977-),男,四川达州人,博士,副研究员,CCF专业会员,主要研究领域为人机融合感知与决策,交互学习认知计算理论与方法,多通道交互信息处理;潘航(1991-),男,硕士,主要研究领域为图像处理;张珂(1991-),男,硕士,主要研究领域为人机口语对话;那燊若阳(1994-),男,硕士,主要研究领域为图像处理技术;赵博程(1989-),男,硕士,主要研究领域为认知计算;湛永松(1979-),男,博士,CCF专业会员,主要研究领域为数字媒体技术,计算机图形图像技术;朱庆杰(1988-),男,硕士,主要研究领域为图像理,手势跟踪;陶建华(1971-),男,博士,研究员,博士生导师,CCF会士,主要研究领域为语音合成,语音识别,情感计算,人机对话.

通讯作者:

杨明浩,E-mail:mhyang@nlpr.ia.ac.cn

中图分类号:

基金项目:

国家重点研发项目(2017YFB1002804);国家自然科学基金(61873269,61332017);广西壮族自治区自然科学基金(2017GXNSFAA198226);广西科技计划(桂科AB17195053);广西高校图像图形智能处理重点实验室课题(GIIP201602);广西可信软件重点实验室研究课题(KX201601);广西云计算与大数据协同创新中心、广西高校云计算与复杂系统重点实验室资助项目(YD16E11);广西密码学与信息安全重点实验室研究课题(CIS201602);桂林电子科技大学研究生教育创新计划(2017YJCX55);2017年广西壮族自治区自然科学基金课题(2017JJA160182);2015年广西科技攻关课题(1598018-6)


Robotic Writing System with Intelligent Interactive Learning Ability
Author:
Affiliation:

Fund Project:

National Key Research & Development Plan of China (2017YFB1002804); National Nature Science Foundation of China (61873269, 61332017); Guangxi Zhuang Autonomous Region Natural Science Foundation of China (2017GXNSFAA198226); Guangxi Science and Technology Project (桂科AB17195053); Guangxi Colleges and Universities Key Laboratory of Intelligent Processing of Computer Images and Graphics (GIIP201602); Guangxi Key Laboratory of Trusted Software (KX201601); Guangxi Cooperative Innovation Center of Cloud Computing and Big Data and Guangxi Colleges and Universities Key Laboratory of Cloud Computing and Complex Systems (YD16E11); Guangxi Key Laboratory of Cryptography and Information Security (CIS201602); Innovation Project of GUET Graduate Education (2017YJCX55); Guangxi Zhuang Autonomous Region Natural Science Foundation of China, Project 2017 (2017JJA160182); Guangxi Science and Technology Research Project (1598018-6)

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    基于Uarm机械臂构建了一个学习人类写字顺序的机械臂智能写字系统,该系统首先具有对陌生汉字的自动笔画拆分和书写能力,然后基于语音对话和图像分析技术,能够根据用户教授的笔画和笔顺来学习汉字的正确书写方式.首先,系统根据输入的语音信息以及摄像头观察到的文字的图像信息,获得用户想要写的关键字及对话意图;然后通过对摄像头看到的图像信息进行分析,对检测到的汉字进行自动笔画拆分和笔顺提取,对于正在教授中的字,跟踪笔迹顺序,学习汉字笔顺的正确写法.通过对话管理,机械臂会以对话的形式进行书写反馈并与用户交互,学习人类书写顺序并实现正确书写.通过实验分析及测试者主观评测,该系统取得了不错的评价.

    Abstract:

    In this study, a robotic intelligence writing system is built based on the Uarm to learn Chinese character strokes. This system can finish automaticly strokes spliting and writing of unfamiliar charater. Besides, based on the dialogue technology and image processing technology, the system can learn the correct strokes from human. Firstly, the system gets the keyword which user want to write and user intention according to the input voice information and the word image information from camera. Then it analyzes the word image and splitting and extracting the strokes if the keyword is detected. If the word is being taught by human, the system would record the strokes order and learn the correct way to write the character. Through the dialogue management, the Uarm can interact with human through wrting and dialogue, learn form human, and write the characters correctly. According to the experimental analysis and subjective evaluation of the test, the system has been well recognized.

    参考文献
    相似文献
    引证文献
引用本文

杨明浩,张珂,赵博程,朱庆杰,潘航,那燊若阳,湛永松,陶建华.具有智能交互学习能力的机械臂写字系统.软件学报,2018,29(S2):54-61

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2017-06-01
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2019-08-07
  • 出版日期:
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京市海淀区中关村南四街4号,邮政编码:100190
电话:010-62562563 传真:010-62562533 Email:jos@iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号