西北工业大学创新：大模型无人机集群实现智能“群聊式”交互

在线群聊已经成为人们日常生活中的一部分，但现在，西北工业大学的研究团队正在探索将机器引入群聊，实现机器之间的智能交互和与人类的无障碍沟通。最近，该校光电与智能研究院的李学龙教授和他的团队取得了一项创新进展，他们基于国产大模型，开发了一种“群聊式”无人机控制框架，使每架无人机都拥有了智能“大脑”，能够在语言沟通中动态协同工作。这一技术不仅打破了人类和机器之间的交互壁垒，还拓展了临地安防等领域的应用场景。

这项创新的核心是建立了“书生·浦语”开源大模型驱动的自主无人机“群聊式”控制框架，实现了开放环境和复杂任务中的智能交互、主动感知和自主控制。这一技术具备了类人对话交互、主动环境感知、自主实体控制等多项能力。

为了实现这一技术，团队提出了一种全新的对话交互方法，将声音、图像和无人机自身状态等多种信息，通过大模型转化为自然语言对话形式。同时，他们设计了高效的实时反馈机制，使无人机能够在任务执行的关键时刻通过对话报告自身状态，提高了任务执行的稳定性和安全性。 在任务执行中，无人机能够主动感知外部环境，实时调整任务规划，这是完成复杂任务的关键环节。为此，团队设计了任务引导的主动感知机制，采用多传感器融合的低空搜索、动态避障和视觉定位算法。这些技术使无人机能够高效地感知周围环境，逐渐降低不确定性，实现了任务执行的高效信息采集。

此外，团队还通过设计夹爪等末端执行器，将传统无人机拓展为“飞行机器人”，具备抓取能力。他们构建了异构无人机集群协同控制机制，结合环境感知反馈，使集群能够分工执行任务，如区域搜索、目标定位和抓取等。

这一创新技术的成功应用将生物智能的思维、实体控制和环境感知模式应用于自主智能体，对于临地安防巡检、灾害救援、空中物流等领域的应用具有重要意义。这一技术的发展有望进一步推动无人机技术的发展，提高其在多领域的应用水平。