陕西大学生网
讲大学生故事·传大学生声音
首页

无人机“进群聊” 西工大在机器交互方面取得创新进展

人民日报 2023-10-31 浏览:

image.png?x-oss-process=style/w10

在线群聊极大地方便了人们的沟通方式,能否把机器也拉进群,让它们组团商量着干活,并和人类无障碍地沟通和交流,更好地服务于生产生活?

近日,西北工业大学李学龙教授和同事们在机器交互方面取得创新进展:基于国产大模型,研发了 “群聊式”无人机控制框架,给每架无人机装上了大脑,让无人机集群在语言沟通中动态协同,实现了开放环境下“人机”和“多机”的对话交互,打破人类和机器的交互壁垒,进一步拓展了临地安防的应用场景。

团队提出“群聊式”对话交互方法,将声音、图像和无人机自身状态等多种信息,通过大模型转换为自然语言的对话形式,实现了用户与无人机,以及无人机与无人机之间自主和直观的交互方式。同时设计了任务引导的主动感知机制,提出了多传感器融合的低空搜索、动态避障和视觉定位算法。在实际任务执行中,根据感知信息和任务目标,动态调整无人机飞行路径和观测位姿,逐渐降低环境中的不确定性,实现高效的信息采集和任务执行。此外,团队还依托无人机平台设计了夹爪等末端执行器,将传统无人机拓展为具备抓取能力的“飞行机器人”,构建了异构无人机集群协同控制机制,结合环境感知反馈,实时调整无人机编队的飞行状态,使集群分工执行区域搜索、目标定位和抓取等任务。

据介绍,大模型自主无人机集群是团队将生物智能 “思维计算—实体控制—环境感知”的三元交互模式应用于自主智能体的一次成功尝试,依托大语言模型、无人机平台和多种传感器,实现对话交互、主动感知和自主控制,对安防巡检、灾害救援、空中物流等临地安防场景下的应用具有重要意义。


责任编辑:龚仕建
相关文章
三下乡西安建筑科技大学两弹一星暑期志愿宣讲实践团赴

三下乡西安建筑科技大学两弹一星暑期志愿宣讲实践团赴

8月5日,西建大两弹一星暑期志愿宣讲实践团走进延安市黄陵县梨园社区,开展暑期志愿活动。实践团8名成员与社区30余名小朋友共同参与,通过“人造太阳”科普课堂、课业辅导与趣味游戏,让孩子们的假期充实而欢乐。 科普课堂:“人造太阳”的童话式讲解 陈硕同

渭南职业技术学院“焕新非遗织艺,赋能巾帼富民”实践

渭南职业技术学院“焕新非遗织艺,赋能巾帼富民”实践

“ 焕新非遗织艺,赋能巾帼富民 ” 实践团第四天纪实 为深入了解非物质文化遗产的传承现状与产业发展潜力,助力乡村振兴,渭南职业技术学院 “ 焕新非遗织艺,赋能巾帼富民 ” 三下乡社会实践团队今日在蒲城县荆姚镇聚焦当地特色产业——玉女手织布,开展了

长安大学学子赴兰州交通大学开展学术交流

长安大学学子赴兰州交通大学开展学术交流

7月15日,长安大学“虹桥传薪金城问道”暑期社会实践队前往兰州交通大学土木工程学院代表开展学科竞赛参赛经验交流分享座谈会。兰交大土木工程学院副教授刘廷滨、鲁冠亚、刘正楠与我院副教授陈峰出席本次会议,实践队指导教师张禧龙、李明阳及全体学生参与本次座谈会。

卢建军调研西安交大一附院陆港院区

卢建军调研西安交大一附院陆港院区

4月24日,西安交通大学党委书记卢建军率队赴西安交通大学第一附属医院陆港院区(以下简称“陆港院区”)调研。卢建军先后深入急诊中心、智慧急救指挥中心、国际诊疗部、麻醉手术部等场地,详细了解陆港院区日常管理与运营情况,以及教学、科研、培训等领域所

中法合办MEI硕士学位教育项目春季宣介会在成都举行

中法合办MEI硕士学位教育项目春季宣介会在成都举行

近日,西安交通大学与法国SKEMA商学院合作举办的创业与创新(大数据与人工智能管理)硕士学位教育项目春季宣介会在成都举行。西安交通大学管理学院副院长舒成利、SKEMA商学院中国校区学术校长窦文宇、四川大学商学院MBA中心主任王涛等出席宣介会。本次活动吸