본문 바로가기
학교수업[프로젝트]/졸업 프로젝트

REAP 서비스 소개

by wcwdfu 2024. 10. 13.

 건국대학교 컴공 졸업프로젝트 입니다. [최종성적 : A, 우수상 수상]

 

1) REAP (Record Everything And Play) 서비스란?

(feat.시작은 이러했지만 현실과 타협하고 이렇게 되었다 ...)

 한마디로 정의하자면, "내 일상 대화데이터를 기반으로한 음성 질의응답 비서 서비스" 라고 보면 될것 같다.

 

일상 대화속에서도 많은 정보가 오고간다. 하지만 그 정보들은 쉽게 기억속에서 지워져 버려서 그 정보를 다시 알아내는데 번거로움이 발생한다. 그래서 블루투스 무선이어폰 보단 좀더 착용감이 편리한 장비등을 통해서 나를 중심으로한 모든 대화 데이터들을 수집하고, STT를 통해 텍스트 스크립트로 변환한 다음, 그 스크립트 텍스트 데이터를 기반으로 나만의 chat gpt 같은 서비스를 음성으로 질문하고 답변을 받아볼 수 있는 서비스가 있으면 좋지 않을까? 싶었다.

 

예를 들면 다음과 같이 활용 가능하다.

 1.) 며칠전에 만난 대학교 동기가 맛집이라고 추천해준 음식점이 어디야? 하고 질문하면 대답해준다

 대학교 동기한테 다시 카톡으로 물어봐서 너가 그때 추천해준 맛집이 어디였지? 하고 물어보는 대신에

 

 2.) 지난주에 회의했던 프로젝트에서 다음 회의때 만나기러 한 장소가 어디였지? 하고 질문하면 대답해준다.

 다시 노션 페이지에 들어가거나 따로 카카오톡방, 혹은 스케줄러를 보면서 장소가 어디였는지 일일히 확인하는 대신에

 

 3.)  오늘 하루 일과를 일기로 간단하게 작성해줘. 하면 간단하게 오늘하루 음성데이터를 기반으로 하여 일기를 작성해 준다.

 내가 일일히 손으로 써가는 대신에

 

 결론부터 말해, '내가 참여하지 않은 대화의 녹음은 불법' 을 해결할 방안이 우선은 뾰족히 없었다. 그래서 사용자가 넣어준 음성파일 또는 앱을 통한 자체녹음을 기반으로 하여 STT를 통해 스크립트로 변환한 다음, 그 데이터를 기반으로 하여 나만의 chat gpt 서비스를 사용하는 것으로 하였다. 즉 데이터 수집범위가 축소 되었다.

우리의 소프트웨어 아키텍처는 대략적으로 위와 같다.