#

sense of convergence.

[2022 arts and technology convergence support project]

–

/

/ using unity, meta oculus quest2 and bhaptics tactglove.

–

“2022 HB 주관 예술과기술융합지원 사업 – 감각의 전이”

–

[ SENSE Of CONVERGENCE SHOWCASE ] ( 2022.11.9 19:00~12:00 )

장소 : 한국과학기술원 문화기술대학원 XR 스튜디오.

– Universal Render Pipeline, Oculus Quest2로 VR환경 구축.
– 비햅틱스 회사로부터 출시 전 장갑을 지원받아 프로젝트 개발.

–

“감각의 전이” 프로젝트 : VR 내에서 감각의 전이에 대한 AI 실험 데이터 수집.

– 주요 연출 : 관객은 주변으로부터 감각이 데이터로 변환되는 감각의 소실을 경험.

– 메인 컨텐츠 : 가상현실공간 내에서 청각의 시각화, 촉각의 시각화, 시각의 청각화, 촉각의 청각화, 시각의 촉각화, 청각의 촉각화를 실험 및 데이터 수집.

–

“2022 HB 주관 예술과기술융합지원 사업 – 감각의 전이” 개발 로그

[

[클라이언트 개발 및 쉐이더 개발]

– lobby scene1
– lobby scene2
– visual room
– hearing room, touch room
– interaction hand
– experimental data
– reward objects
– interaction development

–

[VR 개발]

– Oculus Qeust2의 HandTracking, Htpk Physics Engine.

–

[햅틱 개발]

– bhaptics 장갑을 이용하여 촉각 컨텐츠 구현.

–

[매트릭스 이팩트 개발]

– 실제 유니티 내 매트릭스 이팩트.
– 건물들 드로우콜 최적화, 매트릭스 이팩트 쉐이더 개발.

–

[그리드 이팩트 개발]

– 그리드 이팩트 (텍스처를 사용하지 않은 특수 UV 메쉬).
– 그리드 이팩트 쉐이더 개발 (알파와 알파테스트를 사용하지 않는 최적화 제작).

–

[아이템 박스 개발]

– 실제 유니티 내 박스아이템 이팩트.
– 아이템박스 시뮬레이션 개발.
– 아이템박스 시뮬레이션 및 이팩트를 위한 특수 UV.
– 아이템박스 시뮬레이션 및 이팩트 쉐이더 개발.

–

[실시간 노말 생성 엔진 제작]

– 촉각 데이터 수집을 위한 실시간 노말 엔진.
– 파라미터로 다양한 노말 제작.
– 노말텍스처를 사용하지 않고 실시간 노말 생성 쉐이더 개발.

–

[크레딧]

[ SENSE Of CONVERGENCE SHOWCASE ] ( 2022.11.9 19:00~12:00 )

장소 : 한국과학기술원 문화기술대학원 XR 스튜디오.

기획/작가 | 배준형, 황유진

개발자 | 주한기

모델링 | 문수훈

음악 | QCCF

주최 및 주관 | HB

후원 | 한국문화예술위원회 예술과기술융합지원