交互智能与机器人实验室
Interactive Intelligence and Robotics Laboratory(IIRobotics Lab)


实验室介绍


    交互智能与机器人实验室,依托济南大学信息科学与工程学院,长期从事机器人感知、人机交互、服务机器人、多模态视频理解等方面的研究工作,相关成果发表在IEEE TIP、IEEE TCSVT、IEEE TNNLS、ICRA、IROS等人工智能和机器人领域Top期刊和会议。近年来团队参加多项国际机器人大赛并获取多项冠军。相关研究成果在美国宝洁、三菱、山东商业职业技术学院等企业和职业院校得到良好的应用和推广

团队成员介绍


1.陈图川(英文名:Jeffrey TAN Too Chuan)

    团队负责人,济南大学外籍教授,博士生导师,2010年于日本东京大学取得博士学位。2022年入选工信部国家级重点人才工程“启明计划”,2021年入选济南市“泉城’5150’引才倍增计划,2016年入选天津“青年千人计划”。主要研究方向为家庭服务机器人、人机交互及人机协调作业智能,拥有丰富的人工智能研发和实操经验。目前主持完成了国家自然科学基金《基于信息物理系统的人机协调作业智能学习》、外国青年学者研究基金、日本学术振兴会科研费青年研究、RoboCup、IEEE国际科研基金等课题20余项。在高水平期刊和国内外会议上发表学术论文100余篇,授权发明专利10余项,包括人工智能方面实用新型专利和美国发明专利《车辆智能操舵》。曾担任软银机器人公司首席技术顾问、马来西亚人工智能机器人学会会长、马来西亚MyEdu人工智能机器人研究中心主任等,现任RoboCup国际家庭服务机器人执委、World Robot Summit (WRS)国际机器人竞赛活动执委。近年发起设立RoboCup@Home Education,大力推广实用性服务机器人及AI教育普及活动,在世界范围内产生巨大反响,引领全球关注人工智能教育的全民普及。先后在全球14个国家或地区的44个城市,举办了20场人工智能培训班,演示宣讲42次。参加16项国际机器人大赛并获取多项冠军,包括第四届“中国·济南新动能国际高层次人才创新创业大赛” 实用性全民普及可编程机器人智能制造项目三等奖、2019ROBOCUP机器人世界杯中国赛“RoboCup家庭组-SSPL技术挑战赛”冠军等多项奖项和荣誉。

2.刘小丽

    济南大学信息科学与工程学院副教授,2022年毕业于北京邮电大学获得博士学位,2022-2025年北京邮电大学从事博士后研究工作。长期从事机器人感知、多模态视频理解、大模型应用等方面的研究工作,积累了丰富的项目经验和研究心得。近年来作为项目骨干参与国家自然科学基金、JW科技委重点项目、北京市自然科学基金等多项国家级和省部级项目。目前主持国家自然科学基金青年科学基金项目1项、国家电网有限公司科技项目1项。相关研究成果发表在 IEEE Transactions on Image Processing(中科院 1 区, JCR 1 区)、IEEE Transactions on Circuits System and Video Technology(中科院 1 区, JCR 1 区)、IEEE Transactions on Neural Networks and Learning Systems (中科院 1 区, JCR 1 区)等领域Top期刊和机器人等国内重要期刊。相关研究成果曾获得北京邮电大学研究生创新创业成果展一等奖;并受到商汤、聚力维度等企业的好评和关注; 在保洁等企业得到了良好推广与应用。

3.研究生

2024级研究生:田野、吴迪
2025级研究生:杨继博、庞梦婷、张政

出版物


SCI:


[1] Xiaoli Liu, Jianqin Yin*, Di Guo, Huaping Liu. Rich Action-semantic Consistent Knowledge for Early Action Prediction [J]. IEEE Transactions on Image Processing. 2024, 33:479 - 492. (中科院1区Top,CCF-A期刊)
[2] Xiaoli Liu, Jianqin Yin, Jin Liu, Pengxiang Ding, Jun Liu, and Huaping Liu. TrajectoryCNN: a new spatio-temporal feature learning network for human motion prediction[J]. IEEE Transactions on Circuits and Systems for Video Technology (TCSVT), 2021, 31(6): 2133 - 2146. (中科院1区Top期刊)
[3] Jianqin Yin, Xiaoli Liu, Fuchun Sun, Huaping Liu, Zhiqiang Liu, Bin Wang, Jun Liu, Yilong Yin. One-Shot SADI-EPE: A Visual Framework of Event Progress Estimation[J]. IEEE Transactions on Circuits and Systems for Video Technology. 2019, 29(6): 1659-1671. (中科院2区Top期刊)
[4] Tan Jeffrey Too Chuan, Huang Yitsao, Yoshihiro Suda, Akira Mizuno, and Munehisa Horiguchi. Active Wheelbase Design for Narrow Track Vehicle Stability[J]. International Journal of Automotive Engineering, 2015, 6(3): 91-96.
[5] Jeffrey Too Chuan Tan, Yitsao Huang, Yoshihiro Suda, and Akira Mizuno & Munehisa Horiguchi. Cornering stability improvement by gyro moment for narrow tilting vehicle[J]. Journal of Mechanical Science and Technology, 2015, 29(7): 2705-2711.
[6] Tetsunari Inamura, Jeffrey Too Chuan Tan, Yoshinobu Hagiwara, and Komei Sugiura. Framework and Base Technology of RoboCup@Home Simulation toward Long-term Large Scale Human-Robot Interaction[J]. Intelligence and Informatics,2014, 26(3):698-709
[7] Feng Duan, Jeffrey Too Chuan Tan, Ji Gang Tong, Ryu Kato, andTamio Arai. Application of the assembly skill transfer system in an actual cellular manufacturing system[J]. IEEE Transactions on Automation Science and Engineering, 2011, 9(1): 31-41.
[8] Jiajun Fu,Fuxing Yang, Yonghao Dang, Xiaoli Liu, Jianqin Yin. Learning Constrained Dynamic Correlations in Spatiotemporal Graphs for Motion Prediction[J]. IEEE Transactions on Neural Networks and Learning Systems, 2023, 35(10): 14273-14287. (中科院1区Top期刊)
[9] Chengxu Duan, Zhicheng Zhang, Xiaoli Liu, Yonghao Dang, Jianqin Yin. Physics-constrained attack against convolution-based human motion prediction[J]. Neurocomputing, 2024, 575: 127272. (中科院2区)
[10] Xiaoli Liu, Jianqin Yin, Liu Huaping, Yilong Yin. PISEP 2: pseudo-image sequence evolution-based 3D pose prediction[J]. Visual Computer, 2022, 38(7): 2603-2616.
[11] Junying Wang, Xiaoli Liu, Jianqin Yin, Pengxiang Ding. DC-net: Dual-Consistency semi-supervised learning for 3D left atrium segmentation from MRI [J]. Biomedical Signal Processing and Control, 2022, 78: 103870-103870. (中科院2区)
[12] Jianqin Yin, Hai Yao, Jiaben Lin, Yilong Yin, Ling Zhang, Xiaoli Liu, Zhiquan Feng. Coronal Mass Ejections detection using multiple features based ensemble learning[J]. Neurocomputing, 2017,244:123-130.

EI:


[1] Xiaoli Liu, Jianqin Yin, et al. Deepssm: Deep state-space model for 3d human motion prediction[C]. 2024 IEEE International Conference on Robotics and Biomimetics (ROBIO). IEEE, 2024: 1184-1189.
[2] Jeffrey Too Chuan Tan, Luca Iocchi, Amy Eguchi, and Hiroyuki Okada. Bridging robotics education between high school and university: RoboCup@ Home education[C]. 2019 IEEE AFRICON. IEEE, 2019: 1-4.
[3] Jeffrey Too Chuan Tan, and Tetsunari Inamura. Sigverse-a cloud computing architecture simulation platform for social human-robot interaction[C]. 2012 IEEE International Conference on Robotics and Automation (ICRA). IEEE, 2012: 1310-1315. (机器人领域Top会议)
[4] Jeffrey Too Chuan Tan, Feng Duan, Ye Zhang, Kei Watanabe, Ryu Kato, and Tamio Arai. Human-robot collaboration in cellular manufacturing: Design and development[C]. 2009 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS). IEEE, 2009: 29-34. (机器人领域Top会议)
[5] Jeffrey Too Chuan Tan, Feng Duan, Ye Zhang, Ryu Kato, and Tamio Arai. Task modeling approach to enhance man-machine collaboration in cell production[C]. 2009 IEEE International Conference on Robotics and Automation (ICRA). IEEE, 2009: 152-157. (机器人领域Top会议)
[6] Xiaoli Liu, Jianqin Yin. Stacked residual blocks based encoder–decoder framework for human motion prediction[J]. Cognitive Computation and Systems, 2020, 2(4): 242-246.
[7] 刘小丽, 尹建芹, 魏军, 王磊, 吴艳春. 基于大间隔最近邻的人体动作识别[J].机器人, 2018 (2): 178-187.
[8] 尹建芹, 刘小丽, 田国会, 魏军, 张玲, 徐涛. 基于关键点序列的人体动作识别[J].机器人, 2016, 38(2): 200-207.
[9] 刘志强,尹建芹,张玲,魏军,刘小丽. 基于Kinect数据主成分分析的人体动作识别[J]. 光学精密工程. 2015,23(10) :702-711.

项目


1. 国家自然科学基金青年科学基金项目,复杂自然场景下知识与数据联合驱动的动态交互行为理解与识别, 2025 - 2027,在研。
2. 国家电网有限公司科技项目,基于多专业数据融合驱动的电网设备参数化建模与动态配准技术研究,2024-2025,在研。
3. 横向课题,智慧城市工业固废管理系统,2024-2027,在研。
4. 横向课题,智能教育机器人软硬件开发,2023-2024,结题。
5. 横向课题,教育服务机器人平台开发,2023-2024,结题。

获奖


1. 2022年陈图川教授入选工信部国家级重点人才工程“启明计划”;
2. 2021年陈图川入选济南市“泉城'5150'引才倍增计划”;
3. 2016年陈图川教授入选天津市“青年千人计划”;
4. 第四届中国·济南新动能国际高层次人才创新创业大赛实用性全民普及可编程机器人智能制造项目三等奖;
5. 2019ROBOCUP机器人世界杯中国赛RoboCup家庭组-SSPL技术挑战赛冠军;
6. 2019ROBOCUP机器人世界杯中国赛RoboCup家庭组技术挑战赛冠军;
7. 2018年“软银机器人杯”2018中国机器人技能大赛Pepper机器人应用(综合组)冠军

知识产权


1. 陈图川,杨阳,包汉举. 一种教育机器人的路径规划方法,设备及介质,发明专利,ZL202311337408.3,2023/12/29.
2. 杨阳,魏辉,陈图川,一种可稳定爬坡的巡检机器人,发明专利,ZL202320405183.X,2023/06/23.
3. 陈图川,杨阳,王炫榕,智能消杀机器人,发明专利,ZL202330024367.7,2023/05/23.
4. 陈图川,杨阳,王炫榕, 一种多功能智能服务机器人,发明专利,ZL202222993614.7,2023/05/02.
5. 陈图川,杨阳,王炫榕,智能迎宾机器人,发明专利,ZL202330024477.3,2023/05/02.
6. 陈图川,杨阳,黄伟杰,一种可扩展式通用机器人开发平台,发明专利,ZL202222993785.X,2023/03/24.
7. 刘婷,陈图川,刘斐,吴炘翌,一种模块化可拓展的教育机器人, 发明专利,ZL202010833287.1,2022/03/08.
8. 刘婷,陈图川,刘斐,吴炘翌,机器人(教学型),发明专利,ZL202130400437.5,2021/12/28.
9. 刘婷,陈图川,刘斐,吴炘翌,一种计算机教学用摄像装置,发明专利, ZL202022666678.7,2021/11/30.
10. 刘婷,陈图川,刘斐,吴炘翌,教学盒,发明专利,ZL202030803018.1 2021/07/13.
11. 刘斐,刘婷,陈图川,吴炘翌,一种教育用可编程的人工智能机器人,发明专利,ZL201920759777.4,2019/05/24.

招生信息


招生方向:计算机科学与技术,计算机技术
联系方式:刘老师,ise_liuxl@ujn.edu.cn