반려로봇랩은 한 가정이 한 개 이상의 로봇을 소유하게 되는 퍼스널 로봇 시대를 준비하는 랩입니다. 즉, 사람과 함께하는 로봇을 연구하는 랩입니다. 우리의 일상생활에서 다양한 삶의 문제를 해결할 수 있는 로봇 연구를 위해 로봇공학, 강화 학습, 자연어 처리, 컴퓨터 비전 등 다양한 기술을 활용해서 시뮬레이션 기반으로 로봇을 연구하고, 추후에 실물 로봇을 제작하는 데까지 발전하고자 합니다. 최근 시즌3의 결과물은 다음 주소에서 확인할 수 있습니다. https://with-robot.github.io/with-robot-3rd/ 일상생활에 도움을 줄 수 있는 로봇을 시뮬레이션 환경에서 연구하여 일상의 다양한 임무를 수행하는 로봇을 만드는 것이 목표입니다. 이번 시즌4에서는 시즌3의 결과물에 딥러닝을 적용하여 보다 다양한 임무를 잘 수행할 수있는 로봇을 연구하는 것이 목표입니다.

시즌4는 시즌3의 결과물인 로봇에 딥러닝을 적용하여 보다 복잡한 임무 수행을 가능하도록 하는 연구를 진행합니다. 공통 - 비전 기반 제어, 언어모델 기반 제어 두 개의 팀으로 나눠서 각각 연구를 진행하고, 해당 내용을 매주 각 팀별로 연구 결과를 공유합니다. 비전 기반 제어 팀 - 목표: 로봇에 장착된 카메라 정보를 이용해서 세밀한 임무 수행 - 시즌3에서는 OpenCV를 활용해서 비전 기반으로 간단한 제어를 적용 하였습니다. - 이번 시즌은 목표를 예를 들어 설명하면, 카메라 정보를 이용해서 컵 손잡이 집기와 같은 보다 정밀한 임무를 수행하기위해 DNN을 적용하는 것 입니다. 언어모델 기반 제어 팀 - 목표: LLM을 이용하여 사람의 추상적인 명령을 로봇이 실행할 수 있도록 구체적인 임무로 변환 및 실행 - 시즌3에서는 미리 정해진 시나리오를 규칙기반으로 제어를 했습니다. - 이번 시즌은 목표를 예를 들어 설명하면, ‘컵을 정리해줘’와 같은 명령을 입력 받으면 컵을 정리하기위한 전체 시나리오를 수립하고 계별 명령을 실행하면서 최종 적으로 주어진 임무를 완수 하는 것 입니다. 위 연구가 완성되면 두 기능을 통합하여 간단한 임무 수행 시나리오 연구를 진행합니다.

1주차: 오리엔테이션

2 ~ 3주차: 시즌3 결과물 소개, 팀 분할, 로봇 시뮬레이터 스터디

4 ~ 12주차: 비전 기반 제어팀, 언어모델 기반 제어팀 팀별 연구 및 결과 공유

13 ~ 16주차: 비전 기반 제어팀 및 언어모델 기반 제어팀 연구 결과 통합

- 끈기를 가지고 끝까지 성실히 완주 할 수 있는 분 - 오픈 마인드로 함께 노력하고 성장해갈 수 있는 분 - 딥러닝과 로봇에 관심이 많으신 분 - 파이썬 등 기본적인 소프트웨어 소양을 갖추신 분 - 매주 최소 8시간 이상 연구활동을 진행하고 공유할 수 있는 분

이번 랩을 통해서 달성하고자 하는 개인적인 목표는 무엇인가요?

모든 연구원이 매주 연구에 최소 8시간 이상 투자하고 결과를 공유하는 것을 원칙으로 합니다. 이에 동의하시나요?

연구에 참여가 저조하거나 결석이 잦을 경우 랩에서 탈락할 수 있습니다. 이에 동의하시나요?