[음악과 인공지능] BitRate프로젝트: 머신러닝 그리고 음악

'BitRate'라는 새로운 프로젝트가 '구글 마젠타 인공지능팀'과 실리콘밸리의 비영리 단체인 'Gray Area'에 의해 시작되었습니다.

아래는 BitRate 프로젝트에 대한 설명입니다.

 

머신러닝은 최근 몇년간 새로운 예술적 가능성을 앞세와 창의력이 필요한 작업영역에 진출했습니다. 시청각 처리영역과 음악의 작곡 도구 영역부터 음악 정보 검색 및 음악 추천 시스템까지, 인공지능은 우리의 현대 음악과 이미지 분야에 대대적인 영향을 주는 곡들, 재생목록들, 그리고 시각분야를 생성하는데 사용되고 있습니다.

 

Google Research의 Magenta 및 Gray Area는 한 달 동안 무료 원격 워크샵, 강의 및 커뮤니티 참여 통해 머신러닝과 음악과 예술의 창의적인 통합이 새로운 소프트웨어 어플리케이션으로 탄생할 수 있도록 협력하고 있습니다. 창의적인 작품을 제출하는 시리즈 참가자는 현금 및 Google 하드웨어 상을 받을 수도 있습니다.

 

음악, 소프트웨어 및 예술을 통해 멀리서 연결하는 새로운 방법을 탐색하십시오.
BitRate : 원격으로 진행되는 머신러닝 및 음악 시리즈는 모든 사람에게 열려 있으며 사전 지식이 필요하지 않습니다.

 

 

무엇을 배울 수 있으며 배워야 할까요?

Google Magenta, p5.js 그리고 ml5.js 를 배워야 합니다.

아래의 워크샵을 통해 배울 수 있습니다.

워크샵에서는 웹기반의 AI악기와 예술작품만들기, 그리고 구글 마젠타와 Tone.js를 이용한 실험을 어떻게 만들어나가는지 배웁니다.

Javascript를 사용하여 웹브라우저에서 소리를 만들고 멜로디와 리듬을 마젠타 AI를 통해 생성하고 인터렉티브 UI를 만들어 씌웁니다.

자세한 사항은 아래를 참고하세요.

In this workshop you'll learn how to build your own web-based interactive AI-powered musical instruments, artworks, and experiments using Google Magenta and Tone.js.
We'll start from the basics of making sounds in the web browser using JavaScript, and then proceed to generating melodies and rhythms using Magenta's AI models, and making interactive UIs on top of them.

• Introduction to Tone.js
• Making sounds with Tone.js synths
• Loading and playing samples with Tone.js
• Introduction to the Magenta.js Music library
• Generating a melody with a Magenta model and playing it
• Making a drum loops with a Magenta model and playing them
• Generating new sounds with GANSynth
• Overview of other Magenta Music features: VAE models, and customising a VAE with MIDI Me.

이렇게 배워서 ML+Music+Art 가 결합된 결과물을 제출하는것으로 프로젝트가 마무리 됩니다.

 

심사분야는 다음과 같습니다.

• 프로젝트의 창의성
  • 프로젝트가 예상치 못한 방식으로 AI와 음악의 잠재력을 탐구합니까?
• 사회적 가치
  • 창작 과정과 최종 어플리케이션에는 어떤 종류의 사회적 가치가 내재되어 있습니까? 소프트웨어 애플리케이션은 어떻게 딥 러닝, 음악 및 창의력을 사용하여 세상을 조금 더 좋게 만들까요?
• 기술적 복잡성
  • 애플리케이션이 많은 수의 구성 요소를 통합합니까? 널리 유용하고 확장 가능합니까?

 

해카톤 규모는 현재 744명이 참가하였습니다.

상금은 총 합쳐서 300만원 규모로 그리 매력적이지 않지만, 이 프로젝트를 위한 오피스아워를 따로 운영하기 때문에 내가 만들고 싶은것을 하다가 막히는것이 있을 때, 전문가들의 즉각적인 지원을 받을 수 있다는것이 이 기간의 가장 큰 매력입니다.

마치며

음악과 인공지능이 결합되어 세상을 어떻게 바꿀수 있는지 가늠할수 있는 가장 최신의 프로젝트 진행현황을 알아보았습니다. 8월말에 프로젝트가 종료 되면, 어떤 결과물들이 등록되어 있을지 너무나 기대됩니다. 그때 한번 더 소식 전하도록 하겠습니다.

 

 

출처: https://bitrate.devpost.com/

BitRate: Machine Learning & Music Series