Skip to content

sauruspangpang/sauruspang

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

223 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

LAMA(AI 영유아 영어 학습 앱)

image

💡 Topic

  • Lama는 영유아를 대상으로 한 영어 학습 애플리케이션으로, 객체탐지 기술(YOLO)을 활용하여 주변 물체를 실시간으로 인식하고, 해당 물체의 이름을 한국어와 영어로 제공. 또한, 발음 학습 기능을 통해 사용자가 정확한 발음을 익힘으로써 언어에 대한 올바른 활용도 개선

⭐️ Key Function

  • 텍스트 음성인식(STT, TTS)를 통한 단어 학습
  • 받아쓰기 기반의 손글씨 자동 인식 및 교정 학습
  • 사진 촬영을 활용한 액티비티 기능 제공
  • GPT API를 연동하여 제공된 카테고리 이외 다양한 물체 학습

🛠 Skills

Kotilin, JetpackCompose, Mlkt, YOLO, ROOM, flask, CameraX, MVVM, GptAPI

🧑🏻‍💻 Team

  • 앱개발 2명
  • AI 모델링 2명
  • 기획 및 디자인 2명

🤚🏻 Part

  • 앱개발 및 ROOM 데이터베이스 구현

🤔 도전해 본 것

  • MLkit을 이용한 Digital ink recognition
    • 실시간 손글씨 인식 (Mlkit Digital ink recognition)
  • ROOM을 이용한 데이터베이스 구축
    • 테이블 1 : 사용자 프로필 저장
    • 테이블 2 : 프로필 별 도감, 단계 별 학습 진행도 저장
  • MVVM 디자인 패턴 사용
    • ViewModel을 통해 view와 데이터 양방향 바인딩 구성
  • Python으로 구성된 flask 백엔드 서버 구축
    • AI 모델링 연동 시 친화적으로 동작
  • GPT API 연동을 통해 더 많은 객체 탐지
    • (앱 내 제공되지 않은 객체들에 대한) GPT API통해 학습 가능

📷 Screenshot

프로필 생성

image

학습 카테고리 선택

image

사진 촬영 및 음성인식 학습

image

GPT API를 통한 다양한 물체 학습

image

글자 연습

image

도감 및 프로필 관리 페이지

image


About

No description, website, or topics provided.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors

Languages