모창 AI, diff-svc가 무엇일까?

https://youtu.be/JMCxsc-kJ24

어느 날, 신기한 영상을 보게 되었습니다. Diff-SVC라는 이 AI는 사람 발성의 특징을 캐치해 모창을 할 수 있도록 만들어주는 모델이더라고 하더라고요.

이를 응용해서 Plastic love를 rickrolling으로 유명한 rick astley 모델이 부르게 하면 이렇게 나옵니다.

https://youtu.be/Yzjngz7nug8

여기서 개선하여 ddsp-svc가 나왔다고 하는데요.

https://twitter.com/Faics_rst/status/1645829186471460865?s=20

앞으로 어떤 AI가 선보여질지 궁금하게 되는 요즘입니다.