Live2D 캐릭터와 OpenAI API를 활용한 음성 기반 챗봇을 더욱 발전시키는 스터디입니다. 현재 기본적인 기능(샘플 캐릭터를 활용한 음성 대화)이 구현된 상태이며, 이를 장기적으로 고도화하는 것이 목표입니다. 먼저, 전신 Live2D 기반의 캐릭터를 제작하거나 기존 모델을 커스터마이즈하고, 립싱크 및 다양한 모션을 자연스럽게 적용하는 작업이 필요합니다. 프론트엔드는 웹에서 캐릭터와 대화 창이 자연스럽게 표출되도록 개선하며, 앱 환경까지 고려하는 것도 가능성이 있습니다. 특히, 실시간 인터랙션을 고려한 저지연 최적화가 중요한 요소입니다. 백엔드는 현재 Flask 기반이며, 클라우드 활용이나 다른 프레임워크로 변경을 검토하여 확장성과 안정성을 높이는 방향으로 발전시키려 합니다. 또한, 단일 턴 대화에서 컨텍스트를 고려한 대화 흐름을 저장 및 활용할 수 있도록 개선이 필요합니다. AI 부분에서는 OpenAI API를 기반으로 하고 있지만, STT/TTS를 분리하여 한국어에 최적화된 모델을 적용하거나 실시간성을 높일 방법을 탐구합니다. 또한, AI의 기억 구현, 지속적인 대화 유지, 실시간 반응성을 높이는 연구도 진행할 예정입니다. 각자의 관심 분야에 따라 역할을 나누어 진행하며, 모집하는 포지션은 다음과 같습니다. 각 파트별 한 명씩 담당하여 진행할 예정입니다. AI는 기본적으로 랩장이 담당하며, 한 명 더 추가하여 함께 진행할 수도 있습니다. 1. Live2D 캐릭터 커스터마이징: 캐릭터 모델링 및 모션, 립싱크 추가 2. 프론트엔드 개발: 캐릭터와 대화 창 표출, 저지연 최적화, 앱 고려 가능 3. 백엔드 개발: Flask 개선 또는 전환, 데이터 저장 및 확장성 고려 4. AI 연구: 한국어 STT/TTS 개선, 기억 구현, 실시간 대화 검토 스터디는 각자 맡은 부분을 중심으로 진행하되, 협업을 통해 통합적인 개선을 목표로 합니다. 진행하는 과정에서 조금이라도 접점이 있는 공모전이나 대회가 있으면 참가하는 것을 목표로 합니다.

모임은 격주 온라인(디스코드)과 격주 오프라인(삼성역 구글 스타트업 캠퍼스 또는 강남역 모두의 연구소) 방식으로 매주 진행합니다. 모임은 총 2시간 내외로 운영되며, 진행 방식은 다음과 같습니다. 1. 주간 진행 내용 공유: 각자 맡은 작업을 공유하고, 진행 과정에서의 문제점이나 고민을 나눕니다. 2. 대회 및 공모전 공유: 모임과 조금이라도 관련된 관심 있는 대회나 공모전이 있다면 자유롭게 공유하고 참여 여부를 논의합니다. 3. 자유로운 모각코 세션: 이후에는 자유롭게 구현을 진행하며, 필요한 경우 논의하면서 협업합니다. 이 부분은 선택사항이며, 논의 이후 남은 시간이 적을 경우(2시간 기준, 30분 이하)에는 진행하지 않고 그대로 파합니다.

1~2주차: 연구원 자기소개 및 진행 방향 논의

2~8주차: 작업 진행

최대 2개월이라는 기간을 상정하고 있으므로, 각 파트별로 어느 정도 바로 작업할 수 있는 분이 지원하면 좋을 거 같습니다.

링크드인, GitHub 등 본인을 알 수 있는 페이지를 남겨주세요.

모임 소개 기준 담당하고 싶은 파트는 어디인가요?

담당하고 싶은 파트와 관련된 기존 구현 내용이나 참여한 작업이 있으면 공유해주세요

커피챗을 진행한다면, 모집 기간 내에서 가능한 요일과 시간을 모두 적어주세요.

연락할 수 있는 수단을 알려주세요. (ex. 디스코드 아이디, 문자 등)