Search
Duplicate
🪧

미디어아트 전시 기획

최종 업데이트
6/25/2022, 6:58:00 AM
Tags
2022
일시
Empty
작성자
소준섭
포스팅 종류
Empty
✅ main

기획

콘텐츠 진흥원 및 모두연에서 전시를 진행하기 위한 기획입니다.
사람들이 직접 녹음을 한 목소리에서 Text를 추출하여, 해당 Text 기반 이미지와 사운드를 생성하는 전시 기획
Sound의 경우 기존 Sample의 tag들을 이용할 예정이며, 사운드 스케이프에 가까운 사운드가 될 예정
음악적인 요소는 있을듯?
Max4Live ⇒ 각 감정마다 Session view 재생

파트

1.
Disco Diffusion Model 포팅 → Text 입력 후 이미지 생성하도록 코드 수정
a.
참여자 : 창준
b.
현재 Colab Notebook 형태로 제공되어 로컬로 사용시 포팅이 필요함
c.
py 파일 형태로
2.
음성인식 한국어 음성을 받아서 명사화 시킨 후 영어로 번역해 Text 데이터 사용
a.
참여자 : 중선, 성휴
3.
Text 기반 감정분석 후 Loop Sample 중 비슷한 감성의 샘플 선택해 재생 (ableton의 m4l로 재생)
a.
참여자 : 영운, 창준, 다해
PM - 소준섭
매 주차별로 진행해야되는 부분들 정리해서 공유할 예정

Github 생성

Repo

1주차

2주차

3주차

4주차

5 주차

6주차

7주차

전시작품 시나리오

1.
사용자가 전시작품 앞에 도착
2.
질문지 등장
a.
질문 영상 외주 ⇒ 외주 작업 진행
3.
답변
a.
녹음이 진행되어서 음성을 txt로 변환해서 저장
4.
txt를 기반으로 이미지, 사운드 매칭
a.
이미지와 사운드 출력 → 페이드 인
b.
iMAC을 사용할 건데, 가능하다면, 빔프로젝터나 음향장비를 추가할 수도?
5.
일정 시간 후 페이드 아웃으로 종료
a.
이미지랑 사운드를 받아갈 수 있도록 도전(옵션)

Appendix

Table
Search
이름
태그
링크 바로가기
Nvidia tutorial
Open
기타자료
Kospeech(korean speech recognition)
Open
깃헙
Kospeech(korean speech recognition)
Open
논문
한국어 음성 데이터셋 모음집
Open
데이터셋
한국어 감정 분석 데이터셋
Open
데이터셋
음악적인 감정 분류 논문 서치
Open
논문
감정 분류 방식 정리
Open
기타자료