Viosk

폭 넓은 사용층을 고려한 AI-기반의 비전인식 키오스크

• 소개 영상
  • 이미지 출처: files/_image_reference.txt
• 시연 영상
• 발표 자료

🎉 수상 🎉

2021 서울 하드웨어 해커톤 에서 우수상을 수상했습니다.

개요

Goal

1. 코로나-19 시대 이후 비접촉 무인 시스템의 활성화로 인해 더 많아진 터치스크린 기반 키오스크의
2. 사용을 어려워하는 글자를 읽는 데에 어려움이 있으시는 분, 높이가 맞지 않아 터치가 힘드신 분, 휠체어를 타시는 분들을 위해
3. 비전 인식 AI를 활용해 더 나은 사용 환경을 제공하는 키오스크

Overall Structure

Development

Environment

STM32

• STM-B-L4S5I-IOT01A : Board
• STM32CubeMX : Development Tool
• STM32CubeAI : AI Library

Hardware

• Fusion360 : 3D modeling
• Galaxy Tab : mini-screen Kiosk

Firmware

• Rasberry Pi : 사진 촬영 및 사진 전송 (UART)

Software

• Keras (ver.2.4.0) : Convolutional Neural Network for Vision Recognition
• Kotlin : Android Application Development

Features

Age Detection

• AgeGenderDeepLearning 모델을 base로 진행
• IMDB-Wiki 로 학습

Normalize, class grouping, gray scale 변환 등의 preprocessing 진행

Training 결과, 90%의 정확도를 보임

Parameter 축소, quantization 등을 통해 여전히 높은 정확도를 보이는 lightweight 모델 생성 및 STM32 보드에 탑재

UI

초음파 센서를 이용해 키를 인지하고, 그에 맞춰 키오스크 높이를 조정

Age detection 결과에 맞춰, UI를 변경

Contributors

• 김현성(HW) - https://github.com/hyunsungkim
• 김주환(HW) - https://github.com/robotjuhwan
• 이주용(SW) - https://github.com/gimme1dollar
• 조승혁(SW) - https://github.com/seunghyukcho