Silo
AI + Sound Visualization
소리를 보지 못했던 이들에게,
모두의 언어를 만드는, Silo
새소리를 들으면 어떤 장면이 떠오르시나요?
베토벤의 운명의 멜로디에는 어떤 악기의 음색들이 들리시나요?
우리에게는 너무도 당연한, 대중의 상식이 닿지 않는 사회가 있습니다.
소리를 보지 못했던 이들에게, 모두의 언어를 만드는 Silo
그러나 여전히 이 언어에서 소외된 사람들이 존재합니다.
Silo는 이 보이지 않는 경계를 넘어,
모두가 같은 순간을 함께 경험할 수 있는 길을 엽니다.
Our Impact
음색 분석 기반
PBR 머티리얼 매핑 AI
Timbre Analysis-Based Physically
Based Rendering (PBR) Material Mapping AI
같은 음이라도 악기와 연주에 따라 다르게 들립니다. 이는 음색(timbre)이 주파수 스펙트럼, 에너지 분포 등 물리적 지표에 의해 달라지기 때문입니다.
저희 AI는 이러한 음색 특징을 추출해 Physically Based Rendering (PBR) 기법으로 표면 질감에 매핑합니다.
결과적으로 동일한 음도 금속처럼 반짝이거나 나무처럼 따뜻한 질감으로 시각화되어, 모두가 음악의 질적 차이를 직관적으로 경험할 수 있습니다.
Valence-Arousal 추정 기반
컬러 매핑 AI
Valence-Arousal
Estimation-Based Color Mapping AI
음악 감정 연구에서는 Russell의 Circumplex Model of Affect를 토대로 한 Valence–Arousal 이차원 모델이 널리 활용됩니다.
저희 AI는 멜스펙트로그램, 템포, 리듬, 크로마(chroma) 등의 특징을 분석해 곡의 Valence(쾌·불쾌)와 Arousal(긴장·활동성)을 추정합니다.
이를 색상 공간에 매핑하여, 즐거운 음악은 따뜻한 색(노랑·주황), 차분한 음악은 푸른 톤으로 변해 감정의 흐름을 눈으로 이해할 수 있습니다.
MR 기반
시각·햅틱 피드백 시스템
MR-Based
Visual and Haptic Feedback System
소리는 본래 공기의 진동으로 지각되는데, MR 환경에서는 이 진동을 빛, 색, 촉각 진동으로 변환할 수 있습니다.
저희 시스템은 음향 데이터와 실시간 시각화를 MR 기기와 햅틱 장치에 통합하여, 농인이 파동을 눈으로 보고 리듬을 몸으로 느끼도록 설계했습니다.
이는 단순한 시각화가 아니라, 농인과 비농인이 같은 공간에서 서로 다른 감각으로 동일한 소리를 공유할 수 있는 다감각적 경험을 가능하게 합니다.
Our Team
박단비 (Team Leader)
Sound & Visual Designer
사운드 기반 예술 기업 운영 (4년차)
아트코리아랩 멤버십 기업 선정
성신여자대학교 작곡과 학사
주요 프로젝트
사운드 기반 예술적 기획 및 사회적 가치 창출 프로젝트 운영
사운드 포용성 UX 연구
예술과 기술을 융합한 전시를 통해 소리 포용성의 사회적 확산에 기여
김명성
XR Interaction Engineer
KAIST 산업디자인 학사
(기계공학 부전공) 및
산업디자인 석사(WonderLab) 졸업
주요 프로젝트
인터랙션 디자인, 메카트로닉스, 소프트웨어 개발, HCI 연구 경험 보유
자연스러운 상호작용 기반 인터페이스, 제품, 설치물 기획 및 개발
최윤서
AI Engineer
서울대학교 정보문화학, 산업인력개발학 학사 졸업
서울대학교 인공지능 석사 재학
주요 프로젝트
Human-Computer Interaction (HCI)
Artificial Intelligence (AI)
Extended Reality (XR)
Ethical and Intuitive Interaction Design
서승우
AI-driven Strategic Planning
AI 소셜벤처 스타트업 대표이사 (23 ~)
중앙대학교 생성형 AI 연구실 석사 재학
주요 프로젝트
Xcorps 2023: BMS using blockchain storage system (과학기술부 장관상 수상) / 증강현실을 이용한 문화재 복원 / AVR System 자율주행 라인트레이서 설계 / FACS 기반의 AI 전처리 데이터 추출 기술 개발
Sound Visualization MVP
Sound MVP 1차 완료
제작기간 : 2025.05~07 (약 2개월)
사운드 리듬을 입자의 확산과 밀도 변화로 표현
사운드 스펙트럼을 각 대역별 형태로 변환
파동은 시간에 따라 변하는 음량과 진폭을 입체 곡선으로 보여주고,
점으로 이루어진 구체는 주파수의 분포를 직관적으로 드러냅니다.
리듬은 입자의 확산과 밀도 변화로 표현되며,
사운드 스펙트럼은 각 대역의 균형을 시각적으로 제시합니다.
이러한 시각화는 소리를 형태와 움직임으로 경험할 수 있는
가능성을 탐색하는 과정이었으며,
이후 AI 기술과의 결합으로 음색과 감정까지 확장하고자 합니다.
소리의 기본 물리적 특성을 단순화한 시각화 프레임워크 구상
보는 것과 느끼는 것을 동시에 구현하기 위해 파동·점·입자·스펙트럼 4가지 표현 방식 선정
소리를 보지 못했던 이들에게,
이제는 모두가 함께 나눌 수 있는 경험을
한 사람의 응원이 농인과 사회를 잇는 새로운 언어를 만듭니다.
지금, 당신의 지지가 더 많은 이들에게 문화를 열어줍니다.
응원 메시지를 통해, Silo와 함께해주세요!