오프라인 음성 녹음 및 텍스트 변환, 개인 정보 보호!

Handy는 Tauri 기반의 오픈 소스 데스크톱 애플리케이션임

Whisper 모델을 사용하여 음성을 텍스트로 변환하며, 오프라인에서 작동

개인 정보 보호를 위해 음성 데이터를 클라우드로 전송하지 않음. 확장성을 강조

Tauri를 활용한 크로스 플랫폼 아키텍처

Handy는 Tauri 프레임워크를 사용하여 Rust를 백엔드, React/TypeScript를 프론트엔드로 구성했다. 구체적으로 Rust는 시스템 통합, 오디오 처리, 머신러닝 추론을 담당하며, Tauri는 웹 기술을 네이티브 애플리케이션으로 빌드하는 역할을 한다. 따라서 크로스 플랫폼 지원 및 성능 최적화를 동시에 달성한다.

Whisper 모델을 활용한 음성 인식 기술

Handy는 OpenAI의 Whisper 모델을 사용하여 음성 인식을 수행하며, GPU 가속을 지원하여 성능을 향상시킨다. VAD(Voice Activity Detection)를 통해 무음 구간을 제거하고, 다양한 Whisper 모델(Small/Medium/Turbo/Large)을 선택할 수 있도록 지원한다. 따라서 사용자는 자신의 하드웨어 환경에 맞는 모델을 선택하여 최적의 성능을 경험할 수 있다.

오프라인 환경에서의 개인 정보 보호

Handy는 오프라인에서 모든 음성 처리를 수행하여 사용자의 개인 정보 보호를 최우선으로 한다. 구체적으로 음성 데이터가 클라우드로 전송되지 않으며, 로컬 환경에서 모든 처리가 이루어진다. 따라서 사용자는 자신의 음성 데이터를 안전하게 관리하면서 음성-텍스트 변환 기능을 사용할 수 있다.