텍스트를 랩(rap)으로 바꿔주는 AI Rap TTS(우버덕: Uberduck) 사용해보기 : 클리앙

<초간단 샘플 영상>

먼저 제가 간략히 만든 샘플 영상(12초) 보시겠습니다. 참고로,텍스트를랩rap으로바꿔주는AIRapTTS우버덕Uberduck사용해보기클리앙 Uberduck은 영어 전문입니다. 혹시 한국어 랩 TTS도 있으면 댓글에 알려주세요.

Don't worry about the future, it's gonna be alright,

Even in tough times, you're your own light.

Every step you take brings you closer to your dreams,

Trust in yourself, you'll soar high in the skies.

(해석)

미래를 걱정하지 마세요. 괜찮을 거예요

힘든 시기에도 당신은 스스로의 빛입니다.

한 걸음 한 걸음 걸을 때마다 꿈에 가까워집니다

자신을 믿으세요. 하늘 높이 날아오를 거예요.



<제작 방법>

기계가 텍스트를 읽어 주는 것을 TTS(Text to Speech)라고 합니다. 파파고나 구글번역에도 TTS가 붙어있어 번역시킨 후 하단에 있는 스피커 버튼을 누르면 번역된 내용을 해당 언어로 읽어줍니다. AI의 발전과 함께 TTS도 눈부시게 발전하고 있는데(elevenlabs, play.ht, lovo.ai 등), 단순히 읽는 것을 넘어 이제 AI가 랩(rap)도 하는 시대가 왔습니다. Uberduck은 ai rap tts 중 하나입니다.


Step 1. 랩 가사 쓰기

먼저 Uberduck에게 줄 랩 가사가 필요한데, GPT에게 '걱정하지 마, 괜찮을 거야(Don't worry. It's gonna be alright.)'를 주제로 4줄짜리 랩 가사를 써달라고 했습니다. 4줄로 시킨 이유는 우버덕(Uberduck)이 무료 회원은 4줄까지 변환할 수 있어서입니다. (^,.^;;)


GPT Prompt(GPT에게 하는 요청)는 아래와 같이 썼습니다. 이거보다 더 대충 써도 됩니다. 

Could you write four lines of rap lyrics about "Don't worry, everything will be alright"? I'd like to share them with a friend of mine who lacks confidence and is often anxious about the future.


영어 prompt에 자신 없는 분들은 제가 예전에 올린 아래 포스팅 참조하실 수 있습니다.

▶ 누구나 할 수 있는 ChatGPT Prompt 잘 만드는 법; 프롬프트를 이용한 영어학습 


GPT가 아래와 같은 가사를 써줬습니다. GPT와 같은 생성형 AI는 동일한 prompt로 물어도 답변은 그때그때 다르므로 여러분의 가사는 저와 다를 수 있습니다. 내용은 괜찮은데 가사가 너무 어렵다 싶으면 In simple English, please.와 같이 쉬운 영어로 해달라고 요청할 수 있고, 내용 자체가 좀 그러면 Write another one, please.와 같이 다시 한번 써보라고 할 수 있습니다.

Don't worry about the future, it's gonna be alright,

Even in tough times, you're your own light.

Every step you take brings you closer to your dreams,

Trust in yourself, you'll soar high in the skies.


Step 2-1.우버덕(uberduck)을 이용하여 텍스트를 랩으로 변환하기

https://app.uberduck.ai/rap#beat 

스크린샷 2024-05-03 01.06.20.png

순서대로 Beat 고르고, Lyrics 입력하고, Voice 고른 후 Generate 버튼 누르면 됩니다. UI가 직관적이어서 여기서 자세한 설명은 생략합니다.

저는 beat는 Series A (Hip Hop) 골랐고, Lyrics는 [use custom lyrics]를 누른 후 입력했고, Voice는 Quack Master 골랐습니다. 유료의 경우 자기 목소리 파일을 업로드하고 training시키면 자신의 목소리로 랩을 하게 할 수도 있다고 하네요. 한 줄에 너무 많은 단어가 들어가면 랩이 너무 빨라지고 단어도 누락될 수 있으므로 한 줄에 8~10단어 정도가 적당한 것 같습니다. 문장 길이 바꿔가면서 테스트해보시기 바랍니다. 그리고 앞서 언급했지만, 무료 회원은 4줄이 max입니다. ^^


Step 2-2. 우버덕(uberduck) 산출물 다운로드하기

Vocals는 배경 비트 없는 순수 랩 목소리이고, Mix는 배경 비트 포함, Video는 왼쪽에 보이는 쇼츠 타입 영상입니다. 랩이 나오기까지 간주가 상당히 긴데(보통 10초 남짓), 저는 Mix를 다운로드 받은 후 랩 나오는 부분만 잘라 상단의 샘플 영상을 만들었습니다.

uberduck.png


Step 3. (옵션) 우버덕 산출물 간단히 가공해보기

3-1. 음원 자르기

PC에 오디오 편집 프로그램이 없는 경우 구글에서 online audio cutter로 검색해서 웹에서 바로 자를 수 있습니다. Uberduck Mix 파일에서 랩 부분만 잘라 저장해줍니다. 


3-2. 음원을 영상으로 변경하기 (화면은 그냥 단색 배경)

구글에서 online audio video converter로 검색한 후 하나 사용하시면 되는데, 저는 아래 사이트 이용하였습니다. 사이트에 들어가서 audio 업로드하고 convert 누르면 mp4로 만들어줍니다. 다만, 영상 화면에 자신이 만든 이미지를 넣고 싶은 경우, Background를 None에서 Image File로 바꾼 후 이미지를 업로드해야 합니다.

https://www.onlineconverter.com/audio-to-video


3-3. 영상 배경 이미지(어두운 바탕에 랩 가사 넣기) 만들기

저는 미리캔버스(miricanvas.com )를 이용했는데, 아주 간단하게 만들 거면 윈도우 그림판으로 만들 수 있습니다. 단색으로 캔버스 칠한 후 Text 삽입하면 됩니다(상단 A버튼). 파워포인트로도 물론 만들 수 있습니다.



<이런 랩송을 어디에 쓸 수 있을까요?>

영어 선생님이라면 학생들이 공감가는 내용(예, 공부하기 싫어: I don't want to study. ^^)을 랩송으로 만들어 가끔 교실에 활력을 넣을 수 있고, 자기 자신 or 와이프/남편/아이를 응원하는 랩송(주제: You can do it. / You're the best. / Be yourself.)을 만들어 선물로 줄 수도 있는 것 같습니다. 원수라면 '넌 안돼 (You won't make it!)'를 주제로... ^^


아래는 학교 공부 따라가느라 애쓰는 딸을 위해 랩송을 만들고 싶을 때 쓸 수 있는 GPT prompt 예시인데, 참조하실 수 있습니다.

I want to create a rap song to encourage my daughter who is struggling with schoolwork. Can you write four simple lines of rap lyrics that will uplift and motivate her? I'd like to dedicate the rap song to her.




AI의 발전은 정말 빠르네요. 머지않아 가사하고 악보 주면 노래까지 해주는 TTS 나올 수도 있는 것 같습니다.

현재 노래부르는 AI가 있긴 한데(예, 국내기업 수퍼톤), 아직은 자기 혼자 부르는 건 아니고, 원래 가수의 노래와 이를 가상으로 부를 사람의 목소리를 학습시킨 후 가상의 목소리로 원곡을 부르게 하는 방식을 취하고 있습니다. 아래는 한 예인데, 아마 많은 분들이 이미 보셨을 것 같습니다.


그럼 모두 하루 잘 마무리하시기 바랍니다.

사진게시판