플레토로보틱스(Follettorobotics co.,ltd.)
초거대 인공지능 기반 무인 드라이브 스루 로봇 카페 서비스 시스템
ULTRA-LARGE ARTIFICIAL INTELLIGENCE-BASED UNMANNED DRIVE-THROUGH ROBOT CAFE SERVICE SYSTEM
특허 요약
본 발명은 초거대 인공지능 기반 무인 드라이브 스루 로봇 카페 서비스 시스템에 관한 것으로서, 보다 구체적으로는 초거대 인공지능 기반 완전 무인 드라이브 스루 로봇 카페 서비스 시스템으로서, 무인 드라이브 스루 환경에서 음료 주문을 위해 드라이브 스루에 진입 및 이동하는 차량의 정보를 수집하는 비전 센서부; 인간 수준의 대화가 가능한 음성 프롬프트 기술을 이용하여 상기 비전 센서부로부터 수집되는 차량에 탑승한 이용자와의 음성 대화를 통한 음료 주문을 접수하는 음성 프롬프트 장치; 상기 음성 프롬프트 장치를 통해 인간의 개입 없이 음성 프롬프트 기술을 통해 주문이 접수된 음료가 미리 설정된 음료 레시피의 일련 작업 순서를 수행하는 로봇에 의해 제조되고, 차량 탑승 상태에서 이용자가 로봇으로부터 결제 및 음료를 제공받을 수 있도록 하는 로봇 카페 장치; 및 상기 비전 센서부와 음성 프롬프트 장치 및 로봇 카페 장치의 전체적인 운용 동작을 제어하는 로봇 서비스 플랫폼을 포함하는 것을 그 구성상의 특징으로 한다. 본 발명에서 제안하고 있는 초거대 인공지능 기반 무인 드라이브 스루 로봇 카페 서비스 시스템에 따르면, 무인 드라이브 스루 환경에서 음료 주문을 위해 드라이브 스루에 진입 및 이동하는 차량의 정보를 수집하는 비전 센서부와, 인간 수준의 대화가 가능한 음성 프롬프트 기술을 이용하여 비전 센서부로부...(이하생략)
청구항
번호청구항
1

초거대 인공지능 기반 완전 무인 드라이브 스루 로봇 카페 서비스 시스템(100)으로서,무인 드라이브 스루 환경에서 음료 주문을 위해 드라이브 스루에 진입 및 이동하는 차량의 정보를 수집하는 비전 센서부(110);인간 수준의 대화가 가능한 음성 프롬프트 기술을 이용하여 상기 비전 센서부(110)로부터 수집되는 차량에 탑승한 이용자와의 음성 대화를 통한 음료 주문을 접수하는 음성 프롬프트 장치(120);상기 음성 프롬프트 장치(120)를 통해 인간의 개입 없이 음성 프롬프트 기술을 통해 주문이 접수된 음료가 미리 설정된 음료 레시피의 일련 작업 순서를 수행하는 로봇에 의해 제조되고, 차량 탑승 상태에서 이용자가 로봇으로부터 결제 및 음료를 제공받을 수 있도록 하는 로봇 카페 장치(130); 및상기 비전 센서부(110)와 음성 프롬프트 장치(120) 및 로봇 카페 장치(130)의 전체적인 운용 동작을 제어하는 로봇 서비스 플랫폼(140)을 포함하되,상기 비전 센서부(110)는,무인 드라이브 스루 환경에서 음료 주문을 위해 드라이브 스루에 진입 및 이동하는 차량의 정보를 수집하되, 드라이브 스루의 입구에 진행하는 차량을 비전 인식하여 차량 번호와 차종 정보를 포함하는 차량 식별 정보를 수집하는 제1 비전 센서(111)와, 무인 드라이브 스루 환경에서 음료 주문을 위해 드라이브 스루에 진입 및 이동하는 차량의 정보를 수집하되, 드라이브 스루의 음성 프롬프트 장치(120)에서 음료를 주문하고 통과한 차량의 로봇 카페 장치(130)에 도착하기 전 이동되는 차량을 비전 인식하여 차량 식별과 차량 탑승자 공간정보(위치)를 수집하는 제2 비전 센서(112)를 포함하여 구성하고,상기 음성 프롬프트 장치(120)는,초거대 언어모델을 활용하여 인간 수준의 범용적인 대화를 통하여 정형화된 고객의 주문 정보를 추출하고, 고객의 음료 주문에 대응하는 음성 응대가 가능하도록 기능하며,상기 음성 프롬프트 장치(120)는,차량에 탑승한 이용자의 음료 주문 음성이 입력되는 마이크(121)와, 상기 마이크(121)를 통해 입력되는 차량에 탑승한 이용자의 음료 주문 음성에서 잡음을 제거하고 화자를 분리 추출하는 잡음제거 및 화자분리부(122)와, 상기 잡음제거 및 화자분리부(122)로부터 잡음이 제거되고 화자가 분리된 음료 주문 음성을 음료 주문 텍스트로 변환하여 출력하는 음성 텍스트 변환부(123)와, 상기 음성 텍스트 변환부(123)로부터 음료 주문 텍스트를 입력받아 음료 주문 내용에 맞는 주문 요청을 상기 로봇 서비스 플랫폼(140)을 통해 로봇 카페 장치(130)로 전송하고, 주문 상황의 응답 텍스트를 생성하는 주문 모델(124)과, 상기 주문 모델(124)에서 생성한 주문 상황의 응답 텍스트를 음성으로 변환하여 출력하는 텍스트 음성 변환부(125)와, 상기 텍스트 음성 변환부(125)로부터 변환된 주문 상황의 응답 음성을 이용자에게 음성 출력하는 스피커(126)를 포함하여 구성하는 것을 특징으로 하는, 초거대 인공지능 기반 완전 무인 드라이브 스루 로봇 카페 서비스 시스템.