Основой для этой технологии являются большие языковые модели (LLM), которые развернуты в каждом дроне. Эти модели позволяют дронам воспринимать и анализировать информацию на естественном языке, а также выражать себя в разговорной форме. Благодаря использованию специального протокола коммуникации, диалог между дронами становится согласованным и понятным.
Однако для успешного выполнения задач дронам также необходимо быть способными взаимодействовать с окружающей средой. Для этого они оснащены датчиками и алгоритмами, которые позволяют им исследовать местность, обходить препятствия и ориентироваться в пространстве. Дроны способны в реальном времени адаптироваться к изменениям и корректировать свои действия на основе полученной обратной связи.
Демонстрация возможностей этой технологии была проведена с помощью команды беспилотников, которым необходимо было найти связку ключей в парке. С самого начала эксперимента дроны использовали групповой чат для обсуждения поставленной задачи и предложения своих способностей. Три дрона начали активно искать ключи, в то время как двое других предложили взять ключи с помощью специальных механизмов у захвата. Таким образом, каждый дрон выбрал свою роль и зону для поиска ключей.
В процессе выполнения задачи дроны координировали свои движения, чтобы максимально эффективно покрыть все районы парка. Они также создали упрощенную карту местности и способны были обнаружить людей-операторов и избегать их, обеспечивая безопасные полеты. Как только ключи были найдены, дроны отправили изображения пользователю через групповой чат для подтверждения. После этого один из дронов с захватом подлетел к ключам и успешно их забрал.
Ученые отметили, что использование «групповых чатов» для коммуникации между дронами повышает стабильность и безопасность выполнения сложных задач. Кроме того, такой подход позволяет исследователям лучше понять и предсказать поведение машин. Это открывает новые возможности для применения дронов в различных сферах, где эффективное взаимодействие и координация играют важную роль.
Технология, которая позволяет дронам общаться на естественном языке, имеет множество преимуществ и перспектив. Она повышает эффективность и гибкость командной работы дронов, поскольку они могут динамически адаптироваться к различным ситуациям и задачам, координировать свои действия без предварительного программирования. Новый подход улучшает взаимодействие дронов с человеком, поскольку они могут выражать свои намерения, запросы и отчеты на понятном языке. И, наконец новая система коммуникации расширяет области применения дронов, поскольку они могут решать более сложные и творческие задачи, требующие коммуникации и сотрудничества. Например, дроны могут использоваться для исследования неизвестных территорий, поиска и спасения людей в чрезвычайных ситуациях, для создания художественных произведений и многого другого.
