융합인재학부 정윤재 학생, 애플 '앱개발 올림픽' 우승
우리 대학 융합인재학부 정윤재 학생이 애플(Apple)이 주최하는 글로벌 학생 개발자 경진대회 ‘Swift Student Challenge’에서 우수 수상자로 선정됐다. 전 세계 학생 개발자들이 참여하는 이번 대회는 창의성과 기술력을 겨루는 대표적인 국제 앱 개발 프로그램으로, 올해는 37개 국가 및 지역에서 선발된 350명의 수상자 가운데 단 50명만이 우수 수상자로 이름을 올렸다.
정윤재 학생은 비올라 학습을 돕는 앱 플레이그라운드 ‘LeViola’를 개발해 높은 평가를 받았다. LeViola는 실제 악기 없이도 사용자가 비올라 연주를 연습할 수 있도록 설계된 교육용 애플리케이션으로, 카메라 기반 자세 인식과 온디바이스 머신러닝 기술을 활용해 실제 연주에 가까운 경험을 제공한다.
정윤재 학생은 현재 융합인재학부에 재학 중이며 뇌인지과학과와 전산학부를 복수전공하고 있다. 그는 2026년 3월 KAIST-NYU 부전공 프로그램을 준비하던 중 아이디어를 얻었다. 그는 “KAIST 오케스트라에서 비올라를 배우고 연주하기 시작했지만, 뉴욕으로 가져가기 어려운 상황이었다”며, “뉴욕 필하모닉 공연을 관람한 뒤 다시 연주하고 싶은 마음이 커졌고, 누구나 쉽고 친근하게 현악기를 배울 수 있는 플랫폼을 만들고 싶었다”고 개발 배경을 설명했다.
특히 그는 Swift 언어가 처음이었음에도 불구하고 짧은 기간 안에 앱을 완성해 주목받았다. 그는 OpenAI Codex, Claude, Gemini 등 최신 AI 도구를 활용해 Swift와 애플 개발 환경을 학습했으며, 이후 Apple의 Create ML과 Core ML 프레임워크를 이용해 직접 머신러닝 모델을 학습·탑재했다.
LeViola는 사용자의 왼손 관절 움직임을 분석해 운지(fingering) 위치를 판별하고, 오른팔 각도를 추적해 활의 움직임까지 안내한다. 이를 통해 실제 악기 연주 경험을 디지털 환경에서 구현했다.
그는 중·고등학생 시절부터 자율주행자동차 알고리즘이나 교실 전자기기 제어 타이머를 개발하는 등 다양한 기술 프로젝트를 진행해왔다. 최근에는 미술관 관람객을 위한 AI 오디오 가이드 앱과 독거노인을 위한 AI 컴패니언 기기를 제작하는 등 기술을 기반으로 한 사회적 문제 해결에도 관심을 이어가고 있다. 이번 수상 역시 기술을 사회적 연결과 접근성 향상에 활용하고자 하는 그의 관심이 반영된 결과로 평가된다.
정윤재 학생은 “악기를 배우는 과정에는 비용과 공간 등 다양한 진입 장벽이 존재한다”며 “기술을 사람들을 이어주는 도구로 활용하고 싶고 다른 악기를 위한 앱도 만들 수 있다. 악기가 없어도 클래식 음악을 접할 수 있고, 더 많은 사람들이 악기를 배우며 오케스트라를 즐길 기회를 갖길 바란다”고 덧붙였다.
또한 “당분간 LeViola에 집중하겠지만, 예술과 기술에 대한 열정을 융합한 또 다른 앱 아이디어도 구상 중”이라며, “앞으로도 예술과 기술을 결합해 현실 세계에서 사람들을 연결할 수 있는 디지털 플랫폼을 만들고 싶다”고 포부를 밝혔다.
비올라 학습을 돕는 ‘LeViola’ 앱은 iPhone에서만 사용할 수 있으며 일반 대상 출시는 올해 하반기를 목표로 준비 중이다.
한편, Swift Student Challenge 우수 수상자들은 오는 6월 미국 캘리포니아 애플파크(Apple Park)에서 열리는 세계개발자회의(WWDC)에 초청돼 애플 엔지니어 및 개발자들과 교류하고 다양한 기술 세션에 참여할 예정이다.
※ 영어기사: 애플 뉴스룸 AI meets accessibility in this year’s Swift Student Challenge - Apple
시각장애인 위한 점자 번역 엔진 ‘K-Braille’ 개발..정확도 100% 확인
우리 대학은 융합인재학부 재활인공지능연구실(Assistive AI Lab) 가현욱 교수 연구팀이 일반 글자(묵자)를 시각장애인이 읽을 수 있는 점자로 변환하는 ‘점역(點譯, Braille translation)’기술을 고도화한 차세대 점자 번역 엔진 ‘K-Braille(케이-브레일)’을 개발하고 대규모 성능 검증을 완료했다고 13일 밝혔다.
점역은 책, 문서, 웹페이지 등 일반 문자로 작성된 정보를 점자 체계에 맞게 변환하는 과정으로 시각장애인의 정보 접근을 위해 필수적인 기술이다. 그러나 한국어 점자 규정은 띄어쓰기, 기호, 외국어 표기 등 다양한 예외 규칙이 존재해 정확한 자동 점역이 쉽지 않다.
현재 시각장애인들이 사용하는 기존 점역 프로그램들은 문자나 기호를 단순 규칙에 따라 변환하는 방식이어서, 다국어(영문 등)·한글 혼용 표현이나 복합 단위 기호, 괄호 띄어쓰기 등 복잡한 규정 처리에서 오류가 발생하는 경우가 있었다. 점자 한 칸의 오류는 시각장애인에게 단순한 오타를 넘어 정보 왜곡으로 이어질 수 있다는 점에서 정확한 점역 기술의 중요성이 꾸준히 제기돼 왔다.
연구팀이 개발한 K-Braille 엔진의 가장 큰 특징은 ‘문장을 이해하는 점역 시스템’이라는 점이다. 기존 점역 프로그램이 문자나 기호를 단순히 바꾸는 치환 방식이라면, K-Braille은 형태소 분석과 문장 구조 분석(AST, Abstract Syntax Tree)을 통해 문장의 구조와 맥락을 분석하여 의미를 이해한 뒤 점자로 변환하는 기술이다.
이를 통해 외국어와 한글이 혼용된 문장, 복잡한 기호 조합, 단위 표기 등 개정된 점자 규정의 다양한 예외 상황을 보다 정확하게 처리할 수 있다.
연구팀은 기술의 정확도를 확인하기 위해 국립국어원이 구축한 국내 최대 규모의 점자 데이터셋인 ‘묵자-점자 병렬 말뭉치(NLPAK)’를 활용했다. 이 데이터에는 일반 글자와 점자가 짝을 이루는 문장들이 함께 정리돼 있으며, 연구팀은 여기서 1만7,943개의 문장을 추출해 K-Braille의 점역 결과가 실제 점자와 얼마나 일치하는지 전수 평가를 진행했다.
그 결과 점자 규정을 실제로 얼마나 정확하게 따르는지를 나타내는 ‘실질 점역 규정 준수율(True Adjusted Accuracy) ’이 100.0%로 나타났으며, 점자 문장의 구조가 정답과 얼마나 비슷한지를 보여주는 점역 형태소 구조 유사도도 평균 99.81%**를 기록해 높은 점역 정확도를 확인했다.
또한 국립국어원의 공식 점역 프로그램 ‘점사랑 6.3.5.8’과 동일 문장 세트를 이용한 비교 검증에서도 K-Braille이 더 높은 점역 일치율을 보이며 기술적 경쟁력을 확인했다.
10일 KAIST에 ‘포용적 AI’ 인재 양성을 위해 발전기금 10억 원을 기탁한 융합인재학부 재학생(학사과정)이자 스타트업 ㈜엠피에이지(MPAG) 대표인 정인서(28) 학생의 지도교수이자 이번 연구를 이끈 선천적 중증 시각장애인 연구자인 가현욱 교수(KAIST)는 “점자는 시각장애인에게 단순한 기호가 아니라 세상을 읽는 언어”라며 “이번 성과를 기반으로 향후 수학 수식과 과학 기호, 나아가 음악 악보까지 처리할 수 있는 차세대 점역 시스템으로 기술을 발전시킬 계획”이라고 말했다.
이어 “이 기술이 시각장애인의 정보 접근성을 한층 높이고, 한국 점자 번역 인공지능 분야의 새로운 기술 기준을 제시하는 계기가 되길 기대한다”고 덧붙였다.
연구팀은 앞으로 기존 점자 파일 형식(.brf)의 한계를 넘어 새로운 점자 파일 형식을 만들고, 그 파일을 작성·읽기·공유할 수 있는 소프트웨어와 장치 환경을 함께 만드는 차세대 전자 점자 파일 포맷 ‘.brfx(Braille File eXtended)’ 생태계 구축도 추진할 계획이다.
특히 연구팀은 K-Braille 엔진을‘포용적 AI(Inclusive AI)’기술로서 사회에 전면 무상으로 환원할 계획이다. 단, 기술의 파편화를 막고 지속 가능한 생태계를 유지하기 위해 무분별한 소프트웨어 오픈소스화보다는 공공기관, 교육청, 점자 도서관, 그리고 보조기기 제조사 등‘책임 있는 기술 활용 주체’들과의 공식적인 기술 이전 및 제휴망을 구축할 예정이다.
이를 올해 이내에 추진해, 기존에 점자 환경을 구축·운영 중인 기관들이나 신규 점자 디스플레이 업체들이 어떠한 추가적인 소프트웨어 라이선스 비용 없이도 가장 완벽한 2024년형 최신 점역 모듈(API 및 시스템 커널)을 즉각적으로 통합 연동할 수 있게 함으로써, 궁극적으로 최종 단계의 시각장애인 사용자들에게 일체의 비용 전가 없이 최상의 배리어프리(Barrier-free) 정보 접근성을 선물하는 것을 핵심 가치로 삼고 있다.