[start]
[Intro]
[Verse]
[Chorus]
[Bridge]
[Pre-chorus]

(record scratching)

[Drum Solo]
[Guitar Solo]

[Intense Guitar Outro]

[guitar, outro]
[outro]
[End]

(write lyrics here) - backup singers

[start]로 시작하면 노래가 나오기 전 [Intro]를 넣을 수 있음.

(record scratching) 같은 부분을 중간에 넣어주면 확률적으로 해당 연주를 해주는 경우가 있음.

가사 끝에 () 부분을 넣어주면 두번째 보컬이 나올 수 있음.

All I wanted was a little fun (Do it again)
Got a brain like bubblegum (Do it again)
Blowing up my cranium (Do it again)

이런 식으로 하면 Do it again 을 다른 보컬로 사용가능.

[outro] [fadeout] [end] 를 사용하여 갑자기 곡이 뚝 끊어지는 일을 방지하도록 하자.

https://www.tryreplay.io/

그리고 목소리로 쓸 모델은 weight.gg 같은 곳에서 받던가 만들던가 하기

https://www.weights.gg/ko

맘에 드는 오디오 모델을 찾으면 … 을 눌러서 모델을 다운로드 받는다. 예제로 쿠키런 목소리시도

https://www.weights.gg/ko/models/cluct4pan0znwqcaei8erb04n

Suno 에서 만든 노래를 데려와서 Create New AI Cover 에 Select Audio 에 넣는다.

여기선 Love Letter 라는 노래를 가져왔다. 단순한 반주가 있는 여자 보컬 곡이 만들어져서 괜찮은 것 같다.

https://app.suno.ai/song/f33190b7-3b18-4b05-82f3-257b274e033d/

Select Audio 에 끌어오고 난 다음에 들어보고 필요하면 Trim 해서 다듬는다.

다음으로는 원래 트랙에서 스템으로 분리하고 분리한 트랙에서 보컬을 맞는 모델하고 매칭하고 등등을 해야하는데 다 건너뛰고 weight.gg 에서 받아온 걸 바로 사용해보자.

주의할 점은 zip 파일을 괜히 압축해제할 필요가 없다는 점이다. 괜히 관리만 귀찮으니 그냥 넣자.

Setting 를 열면 여러가지 설정이 나오는데 성별이 바뀌지 않으면 Pitch 를 건드릴 필요없고 조옮김을 하지 않으면 Instrument Pitch를 바꿀 필요가 없다.
간혹 +4, +5정도 보컬 음높이를 조정할 일이 있으면 Instrumental Pitch 도 같이 만지자.

준비가 되었으면 바로 Create Song 버튼을 눌러본다.

비디오 카드가 있으면 생각보다 오래걸리지 않는다.

결과물을 바로 믹스다운 한 상태로 들을 수 있는데 원래 보컬의 엠비언스 없이 굉장히 드라이하게 나온다.

Source Track 에서 Converted Vocals 와 Instrumentals 를 다운받자.
받고나면 두개의 파일이 아래와 같이 생길거다.

익숙한 DAW 가 있으면 그걸 사용하고 그런거 없으면 Bandlab 을 쓰자.
새프로젝트를 만들면 이런 화면일거다.

아까 두개의 파일을 드래그 해서 떨어뜨려주자
이쁘게 트랙 두개를 얹을 수 있고 아까 모니터 했을 때 보컬만 너무 건조했으니 Reverb 랑 Delay 도 적용해보자.

Publish 하고 조금 기다리면 믹스가 끝난다.

결과물은 아래와 같다.

https://www.bandlab.com/track/734a3a4c-e9ed-ee11-aaf0-000d3aa5105b?revId=714a3a4c-e9ed-ee11-aaf0-000d3aa5105b

Internet meme, sarcastic 을 주제어로 대략의 아이디어를 뽑아냄.

제목은 Endless stream.

0:01 [Chorus]
0:01 Scroll, scroll, it's all the same
0:05 Another frame, another claim to fame
0:09 Change? Ha, just part of the game
0:12 In this endless stream, we all aim

0:17 [Inst.]

0:32 [Verse 1]
0:32 Flashing screens, endless streams
0:36 Memes and dreams in digital beams
0:40 Laughter hides, coded themes
0:44 In this world, nothing's what it seems

0:48 [Chorus]
0:48 Scroll, scroll, it's all the same
0:52 Another frame, another claim to fame
0:56 Change? Ha, just part of the game
0:59 In this endless stream, we all aim

1:04 [Inst.]

1:19 [Verse 2] 
1:19 Eyes wide, viral tide
1:23 Sea of likes, where secrets hide
1:27 Sarcastic smiles, can't confide
1:31 In this digital dance, we all abide

1:34 [Chorus]
1:34 Scroll, scroll, it's all the same
1:38 Another frame, another claim to fame
1:42 Change? Ha, just part of the game
1:46 In this endless stream, we all aim

1:50 [1Bar Break]

1:52 [Chorus]
1:52 Scroll, scroll, it's all the same
1:56 Another frame, another claim to fame
2:00 Change? Ha, just part of the game
2:04 In this endless stream, we all aim

2:07 [Bridge]
2:07 Beyond the pixels, where shadows fade
2:12 A melody whispers, a serenade
2:16 Unplug the noise, let emotions cascade
2:20 In the quiet spaces, where dreams evade

2:23 [Break]

2:24 [Chorus]
2:40 [Chorus]

노래를 만드는 건 Suno로.

https://app.suno.ai/song/b6641285-cc01-4d4f-92ff-87707538bde1/

첫번째 Chorus 와 Verse 를 넣고 Continue 한 다음 장르랑 제목을 유지하고 다음 나올 파트를 이어붙이는 식으로 작업.

outro 가 제대로 적용되었는지 모르겠다.

다음은 이미지를 위해 Bing Chat 을 사용. 아래와 같이 질의하였다.

너는 그래미어워드와 오스카 상을 동시에 수상한 경력이 있는 감독이자 뮤직비디오 연출가야. 이번에 빌보드에서 3위권에 진입한 신생 K-POP 보이그룹의 노래 가사에 맞게 콘티를 만들어야해. 아래 가사엔 타임라인과 가사를 같이 표기했어. 예를 들면 `1:31 In this digital dance, we all abide`라고 써있는 부분은 1분 31초 시점에 "In this digital dance, we all abide" 가 나온다는 뜻이야. [ ] 로 이루어진 곳은 Song Structure 에 해당하는 부분으로 가사가 아니라는 점에 유의해줘. 아래에 전체 가사를 봐줘.

제목: Endless Stream
...

Bing 의 답변은 이랬다.

안녕하세요, 이것은 빙입니다. 저는 감독이자 뮤직비디오 연출가로서 여러분의 요청에 응할 수 있습니다. 😊

신생 K-POP 보이그룹의 노래 가사에 맞게 콘티를 만들어야 한다고 하셨는데요, 저는 노래의 주제와 분위기에 따라 몇 가지 아이디어를 제시해 드릴 수 있습니다.

노래의 제목은 "Endless Stream"이고, 가사는 인터넷과 소셜미디어에 빠져있는 현대인들의 삶을 비꼬는 내용으로 보입니다. 노래의 템포는 빠르고, 비트는 강하며, 전자음이 많이 사용되었습니다. 이러한 요소들을 고려하면, 뮤직비디오의 콘티는 다음과 같은 방향으로 진행할 수 있습니다.

• 디스토피아 컨셉: 노래의 비판적인 메시지를 강조하기 위해, 미래의 어두운 세상을 배경으로 한다. 보이그룹의 멤버들은 모니터와 카메라로 감시받는 삶을 살고 있으며, 스크롤과 좋아요에만 집착하는 인간들과 구분되고 싶어한다. 그러나 그들은 시스템에 저항할 수 있는 방법을 찾지 못하고, 결국 무력감에 빠진다. 브릿지 부분에서는 멤버들이 잠시나마 자유를 꿈꾸는 장면을 보여준다. 아웃트로에서는 멤버들이 모니터를 부수고 탈출하려고 시도하는데, 성공했는지 여부는 알려주지 않는다. 이 컨셉은 10 Of The Most Fun And Popular K-Pop MV Concepts From 2019에서 7번째로 소개된 비주얼 아트 컨셉과 유사하다.

• 패러디 컨셉: 노래의 재미있고 경쾌한 면을 부각시키기 위해, 인터넷과 소셜미디어에 관련된 유명한 장면들을 패러디한다. 보이그룹의 멤버들은 인스타그램, 유튜브, 틱톡 등의 플랫폼에서 인기 있는 콘텐츠를 만들거나, 유명한 뮤직비디오나 영화의 장면을 재현한다. 그러나 그들은 이러한 활동에 만족하지 못하고, 진짜 자신들을 표현하고 싶어한다. 브릿지 부분에서는 멤버들이 자신들의 음악과 춤을 선보이는 장면을 보여준다. 아웃트로에서는 멤버들이 패러디한 장면들을 다시 보면서 웃거나 부끄러워하는 모습을 보여준다. 이 컨셉은 10 Of The Most Fun And Popular K-Pop MV Concepts From 2019에서 10번째로 소개된 해피/펀 컨셉과 유사하다.

이상으로 제가 생각한 두 가지 콘티 아이디어를 말씀드렸습니다. 어떤 컨셉이 마음에 드시나요? 혹시 다른 의견이 있으시다면 말씀해 주세요. 저는 여러분의 피드백을 기다리고 있습니다. 😊

다시 질의하기를

디스토피아 컨셉으로 Song Structure 별로 타임스탬프와 함께 해당 장면을 Bing으로 그릴 수 있는 Prompt 와 함께 묘사해줘.
`1:34 [Chorus] - 스크롤과 좋아요에만 집착하는 인간들과 구분되고 싶어한다. 그러나 그들은 시스템에 저항할 수 있는 방법을 찾지 못하고, 결국 무력감에 빠진다` 이런 식의 접근이면 좋아.

라고 하였다.

네, 알겠습니다. 디스토피아 컨셉으로 Song Structure 별로 타임스탬프와 함께 해당 장면을 묘사하고, Bing으로 그릴 수 있는 Prompt를 제공해 드리겠습니다. 😊

• 0:01 [Intro] - 노래가 시작되면, 화면에는 검은색 바탕에 흰색 글씨로 "Endless Stream"이라는 제목이 나타난다. 그리고 바로 다음에는 보이그룹의 멤버들의 이름과 얼굴이 각각 순서대로 소개된다. 이때, 멤버들의 얼굴은 모니터에 투영된 것처럼 보이게 한다. (Prompt: “Endless Stream” in white text on a black background, followed by the members’ names and faces projected on monitors)

• 0:17 [Inst.] - 인스트루멘탈 부분이 시작되면, 화면에는 미래의 도시 풍경이 나타난다. 건물들은 높고, 광고판들은 번쩍이고, 사람들은 바쁘게 움직인다. 그러나 모든 사람들은 스마트폰이나 태블릿 같은 기기를 들고 있으며, 주변의 모든 것에 무관심하다. 그들은 스크롤하고, 좋아요를 누르고, 댓글을 달고, 공유하고, 팔로우하고, 언팔로우하는 등의 행동을 반복한다. (Prompt: a futuristic cityscape with tall buildings, flashing billboards, and busy people, all holding devices and scrolling, liking, commenting, sharing, following, and unfollowing)

• 0:32 [Verse 1] - 첫 번째 벌스가 시작되면, 화면에는 보이그룹의 멤버들이 각각 다른 장소에서 살고 있는 모습이 나타난다. 예를 들면, 한 멤버는 작은 아파트에서 혼자 살고 있고, 다른 멤버는 공장에서 일하고 있고, 또 다른 멤버는 학교에서 공부하고 있고, 그런 식이다. 그러나 그들은 모두 자신의 삶에 만족하지 못하고, 인터넷과 소셜미디어에 푹 빠져 있다. 그들은 스크린을 통해 웃고, 울고, 화내고, 사랑하고, 미워하고, 질투하고, 동정하고, 비웃는 등의 감정을 표현한다. 그러나 그들의 감정은 모두 가짜이고, 코드로 이루어져 있다. (Prompt: the members living in different places, such as a small apartment, a factory, a school, etc., all dissatisfied with their lives and addicted to the internet and social media, expressing fake emotions through screens, coded in binary)

생각해보니 AnimateDiff 이나 Stable Video Diffusion 같은 걸 이용하려면 짧게 여러개의 이미지를 만드는게 유리할 것 같았다. 그래서 다시 요청하기를

• 0:00 [Intro] - 화면에는 검은색 바탕에 흰색 글씨로 "Endless Stream"이라는 제목이 나타난다. (Prompt: “Endless Stream” in white text on a black background)

• 0:04 [Intro] - 화면에는 보이그룹의 멤버들의 이름과 얼굴이 각각 순서대로 소개된다. 이때, 멤버들의 얼굴은 모니터에 투영된 것처럼 보이게 한다. (Prompt: the members’ names and faces projected on monitors)

• 0:08 [Intro] - 화면이 어두워지면서, 멤버들의 얼굴이 사라진다. 그리고 바로 다음에는 미래의 도시 풍경이 나타난다. 건물들은 높고, 광고판들은 번쩍이고, 사람들은 바쁘게 움직인다. (Prompt: a futuristic cityscape with tall buildings, flashing billboards, and busy people)

• 0:12 [Intro] - 카메라가 도시의 한 구석으로 줌인한다. 거리에는 스마트폰이나 태블릿 같은 기기를 들고 있는 사람들이 가득하다. 그들은 주변의 모든 것에 무관심하다. 그들은 스크롤하고, 좋아요를 누르고, 댓글을 달고, 공유하고, 팔로우하고, 언팔로우하는 등의 행동을 반복한다. (Prompt: people holding devices and scrolling, liking, commenting, sharing, following, and unfollowing on the street)

• 0:16 [Intro] - 카메라가 한 사람의 스마트폰 화면에 초점을 맞춘다. 화면에는 인스타그램과 같은 소셜미디어 앱이 보인다. 그리고 화면이 전환되면서, 인스트루멘탈 부분이 시작된다. (Prompt: a smartphone screen showing a social media app, then transitioning to the instrumental part)

• 0:20 [Inst.] - 인스트루멘탈 부분이 시작되면, 화면에는 보이그룹의 멤버들이 각각 다른 장소에서 살고 있는 모습이 나타난다. 예를 들면, 한 멤버는 작은 아파트에서 혼자 살고 있고, 다른 멤버는 공장에서 일하고 있고, 또 다른 멤버는 학교에서 공부하고 있고, 그런 식이다. (Prompt: the members living in different places, such as a small apartment, a factory, a school, etc.)

• 0:24 [Inst.] - 카메라가 멤버들의 얼굴에 가까이 다가간다. 그들은 모두 자신의 삶에 만족하지 못하고, 인터넷과 소셜미디어에 푹 빠져 있다. 그들은 스크린을 통해 웃고, 울고, 화내고, 사랑하고, 미워하고, 질투하고, 동정하고, 비웃는 등의 감정을 표현한다. (Prompt: the members expressing fake emotions through screens)

• 0:28 [Inst.] - 화면이 흔들리면서, 멤버들의 얼굴에 이진수로 이루어진 코드가 나타난다. 그리고 화면이 다시 전환되면서, 첫 번째 벌스가 시작된다. (Prompt: the members’ faces coded in binary, then transitioning to the first verse)

• 0:32 [Verse 1] - 첫 번째 벌스가 시작되면, 화면에는 보이그룹의 멤버들이 각각 다른 장소에서 살고 있는 모습이 나타난다. 예를 들면, 한 멤버는 작은 아파트에서 혼자 살고 있고, 다른 멤버는 공장에서 일하고 있고, 또 다른 멤버는 학교에서 공부하고 있고, 그런 식이다. (Prompt: the members living in different places, such as a small apartment, a factory, a school, etc.)

• 0:36 [Verse 1] - 카메라가 멤버들의 얼굴에 가까이 다가간다. 그들은 모두 자신의 삶에 만족하지 못하고, 인터넷과 소셜미디어에 푹 빠져 있다. 그들은 스크린을 통해 웃고, 울고, 화내고, 사랑하고, 미워하고, 질투하고, 동정하고, 비웃는 등의 감정을 표현한다. (Prompt: the members expressing fake emotions through screens)

• 0:40 [Verse 1] - 화면이 흔들리면서, 멤버들의 얼굴에 이진수로 이루어진 코드가 나타난다. 그리고 화면이 다시 전환되면서, 노래의 후렴구가 시작된다. (Prompt: the members’ faces coded in binary, then transitioning to the chorus)

• 0:44 [Verse 1] - 노래의 후렴구가 시작되면, 화면에는 보이그룹의 멤버들이 모두 한 곳에 모여서 춤을 추고 있는 모습이 나타난다. 그들은 시끄럽고 화려한 클럽에서 무대를 장악하고 있다. 그러나 그들의 표정은 즐거워 보이지 않고, 무기력하고 무관심하다. 그들은 마치 로봇처럼 기계적으로 춤을 추고 있다. (Prompt: the members dancing together in a loud and flashy club, but looking bored and indifferent, like robots)

여기까지 했더니 5회 답변 제한에 걸림.

GPT-4에게 다시 요청했다.

Creating a detailed storyboard for the music video of "Endless Stream" based on the provided lyrics requires breaking down each segment into visually rich scenes. Here's a prompt-by-prompt breakdown, focusing on four-second intervals:

0:01-0:04 [Chorus]

• Scene: A bustling city at night, neon signs flickering. People are seen scrolling on their phones, absorbed in their own digital worlds.

0:05-0:08

• Scene: A close-up of a young person's face, reflected in the screen of their phone. They rapidly switch between social media apps, seeking attention.

0:09-0:12

• Scene: A virtual reality setting where characters are morphing and changing, illustrating the theme of constant change in the digital age.

0:13-0:16

• Scene: A wide shot showing a massive digital billboard streaming endless content, with a crowd gazing up at it.

0:17-0:31 [Instrumental]

• Scene: A rhythmic montage of various digital devices and screens, showcasing the overwhelming presence of technology.

0:32-0:35 [Verse 1]

• Scene: Inside a server room with flashing lights and screens showing an array of social media posts and memes.

0:36-0:39

• Scene: A dreamlike sequence where characters are floating in a digital space, surrounded by beams of light representing data streams.

0:40-0:43

• Scene: Individuals in a crowded subway, laughing while looking at their phones, but their eyes reflect a sense of loneliness.

0:44-0:47

• Scene: A surreal landscape where digital and real elements blend, creating an uncanny valley effect.

0:48-0:51 [Chorus]

• Repeat of the initial city scene, emphasizing the repetitive nature of digital consumption.

0:52-0:55

• Scene: A character reaching out towards a large, interactive digital display, trying to make their mark.

0:56-0:59

• Scene: A game-like environment where avatars are competing for fame and recognition.

1:00-1:03

• Scene: Overhead shot of the crowd from the billboard scene, symbolizing the collective aim for attention.

1:04-1:18 [Instrumental]

• Scene: A fast-paced montage of different screens, devices, and digital interactions.

1:19-1:22 [Verse 2]

• Scene: Close-up of eyes reflecting a barrage of viral content, showcasing the overwhelming nature of online trends.

1:23-1:26

• Scene: A vast digital ocean with waves made of likes and emojis, representing the search for approval.

1:27-1:30

• Scene: Characters wearing masks with sarcastic smiles, unable to express their true feelings.

1:31-1:33

• Scene: A choreographed dance sequence with dancers performing in a digital grid, symbolizing conformity.

1:34-1:37 [Chorus]

• Repeat of the city scene, with more focus on the individuals and their interactions with technology.

1:38-1:41

• Scene: A character posting a selfie, seeking validation, surrounded by a multitude of similar posts.

1:42-1:45

• Scene: A digital game environment, emphasizing the competitive aspect of social media.

1:46-1:49

• Scene: A panoramic shot of the digital billboard, now showing a vast array of different aims and desires.

1:50-1:51 [1Bar Break]

• Scene: A brief moment of silence, showing a phone screen with no notifications, symbolizing disconnection.

1:52-2:06 [Chorus]

• Repeat of previous chorus scenes, with increased intensity and a faster pace, illustrating the addictive nature of digital interaction.

2:07-2:11 [Bridge]

• Scene: Transition to a more serene environment, away from digital chaos, focusing on natural elements and shadows.

2:12-2:15

• Scene: A lone character listening to a soft melody, symbolizing a break from the digital noise.

2:16-2:19

• Scene: Characters unplugging from their devices, experiencing a range of emotions, from relief to confusion.

2:20-2:22

• Scene: Tranquil spaces, like a quiet park or a cozy room, where characters find peace away from digital distractions.

2:23-2:39 [Break & Outro]

• Scene: A gradual fade from the quiet spaces back to the city scene, but now with a more balanced interaction between digital and real life.

Each scene should be visually engaging, using a mix of real-life and digital effects to bring the lyrics to life and convey the song's message about the digital age.

이미지를 요청해보았다.

한번에 여러개의 이미지를 요청하는 건 안되나? 싶다가 어짜피 에니메이션도 할꺼고 일관된 그림체가 필요함.

씬 콘티도 다시 보니 너무 한쪽으로 편중된 것 같다. 다시 가다듬어봐야겠다.

CUDA 11.8 버전 쓰고 있어서

pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu118 

설치했으나 C컴파일을 요구해서 Vistual Studio Community 설치.

아래보고 참조함

<https://wikidocs.net/168848 참조>

FAIRSEQ 관련 오류는

Using cached ruamel.yaml.clib-0.2.8-cp311-cp311-win_amd64.whl (118 kB)

Building wheels for collected packages: fairseq

  Building wheel for fairseq (pyproject.toml) ... error

  error: subprocess-exited-with-error



  × Building wheel for fairseq (pyproject.toml) did not run successfully.

  │ exit code: 1

  ╰─> [1829 lines of output]

      No CUDA runtime is found, using CUDA_HOME='C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.8'

.............................. 

          match = self._regex.search(version)

                  ^^^^^^^^^^^^^^^^^^^^^^^^^^^

      TypeError: expected string or bytes-like object, got 'NoneType'

      [end of output]



  note: This error originates from a subprocess, and is likely not a problem with pip.

  ERROR: Failed building wheel for fairseq

Failed to build fairseq

ERROR: Could not build wheels for fairseq, which is required to install pyproject.toml-based projects

이런 것이었는데 버전이 git+https 로 되어있던 requirements.txt 중 fairseq @ git+https://github.com/One-sixth/fairseq.git 이 부분을 그냥 fairseq 로 변경

일단 넘어는 갔다.

`python infer.py

로 추론을 해보니

converted_out\174-50561-0000.wav
converted_out\652-129742-0000.wav
converted_out\777-126732-0000.wav
converted_out\1919-142785-0000.wav
converted_out\2086-149214-0000.wav
converted_out\2412-153947-0000.wav
converted_out\2902-9006-0000.wav
converted_out\5895-34615-0000.wav
converted_out\7850-73752-0000.wav
converted_out\8842-302196-0000.wav

파일이 잘 생성된다.

흠.. 실시간 생성은 어떻게 하는거지? -s 옵션 준다고 되진 않네.

1. Enhance + UI 는 NAIFU 가 좋음

2. plugin, 자유도, 확장성, reference 등은 WebUI가 압도적

해상도 선택

1. 512x512 부터 시작

2. 768x768 전용 모델이 SD 2.x 부터 등장

3. 512x768 portrait

4. 768x512 landscape

5. 1024x768 디테일이 괜찮고 가성비가 좋음

6. 1280x768 디테일 높음

7. 이 외엔 가급적 하지말것. glitch가 생김

8. 8gb인 경우 1472x1472 가 최대치인데 역시나 glitch. 비추천.

Params

• Sampling Step: 8이상, 9부터 안전, 10추천. 8미만 하지말것. 클 수록 느림

  • 비교 샷

    positive prompt: full body angle, an asian lady, sunbeam, casual costume, highly detailed beautiful eyes, ((1girl)) negative prompt: censorship, ugly, old, deformed, amateur drawing, odd, fat, adult, tall, anime, cell shading, big breasts, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, out of focus, cell shading, anime, six fingers, bad eyes, cross eyed, watercolor, small eyes, crossed legs, bad face, backpack, skinny body, malformed hair, masked face, colored face, glasses, double heads, multiple heads Sampling method: Euler a CFG Scale: 7 width x height: 512 x 512

• 모아서 보면 아래와 같다 - Script: X/Y Plot, X type: Steps, x values: 8,9,10,20,40,80,100,150

• 조금씩 다른 결과를 원할 때 step 1,2 정도 튜닝할 수 있음

• CFG Scale: 클 수록 말을 자기 맘대로. 작을 수록 시키는 대로 함. 7정도에서 시작. 4.5 부터 0.5 단위로 조정 가능. 10 이상은 glitch 일어날 수도

• image2image 로 손이나 디테일등을 수정하기 전 맘에 들지 않는 부분을 CFG Scale + steps 로 X-Y plot 돌려서 variation 해볼 것

• seed 를 유지하면서 변화를 주고자 할 땐 seed 오른쪽에 extra 클릭 Variation strength 가 크면 많은 변화, variation 역시도 seed가 있으니 체크

• 고해상도 보정(highres Fix) : 사용 (이미지가 가로로 길던가 세로가 길 경우, 머리가 2개 생기던지, 허리가 엄청 길어지던지 하는 경우를 줄여줌)

Prompt 기본

• negative 는 중요. 특히 2.0에선 더. ugly, tiling, poorly drawn hands, poorly drawn feet, poorly drawn face, out of frame, mutation, mutated, extra limbs, extra legs, extra arms, disfigured, deformed, cross-eye, body out of frame, blurry, bad art, bad anatomy, blurred, text, watermark, grainy 2.0 인물에서 꼭 쓸 것.

• lowres low quality 는 너무 일률적으로 나올 수 있으니 빼는 게 좋음

(badbad)mole,heterochromia, copyright, copyright logo, logo, game logo, boys, 3boys, 4boys, 5boys, (fused anatomy), (bad anatomy\(body\)), (bad anatomy\(arms\)), (over two arms\(body\)), (bad anatomy\(leg\)), (over two legs\(body\)), (bad anatomy\(arm\)), (multiful\(arms\)), (multiful\(legs\)), (bad detailed background), (unclear architectural outline), (non-linear background), low quality lowres multiple breasts, low quality lowres long body, low quality lowres mutation poorly drawn, low quality lowres black-white, low quality lowres bad anatomy, low quality lowres liquid body, low quality lowres liquid tongue, low quality lowres disfigured, low quality lowres malformed, low quality lowres mutated, low quality lowres anatomical nonsense, low quality lowres text font ui, low quality lowres error, low quality lowres long neck, low quality lowres blurred, low quality lowres lowers, low quality lowres low res, low quality lowres bad proportions, low quality lowres bad shadow, low quality lowres uncoordinated body, low quality lowres unnatural body, low quality lowres fused breasts, low quality lowres bad breasts, low quality lowres huge breasts, low quality lowres poorly drawn breasts, low quality lowres extra breasts, low quality lowres liquid breasts, low quality lowres heavy breasts, low quality lowres missing breasts, low quality lowres huge haunch, low quality lowres huge thighs, low quality lowres huge calf, low quality lowres disappearing arms, low quality lowres disappearing thigh, low quality lowres disappearing calf, low quality lowres disappearing legs, low quality lowres fused ears, low quality lowres bad ears, low quality lowres poorly drawn ears, low quality lowres extra ears, low quality lowres liquid ears, low quality lowres heavy ears, low quality lowres missing ears, low quality lowres fused animal ears, low quality lowres bad animal ears, low quality lowres poorly drawn animal ears, low quality lowres extra animal ears, low quality lowres liquid animal ears, low quality lowres heavy animal ears, low quality lowres missing animal ears, low quality lowres text, low quality lowres ui, low quality lowres missing limb, low quality lowres extra digit, low quality lowres fewer digits, low quality lowres fused digit, low quality lowres missing digit, low quality lowres bad digit, low quality lowres liquid digit, low quality lowres colorful tongue, low quality lowres black tongue, low quality lowres cropped, low quality lowres watermark, low quality lowres username, low quality lowres blurry, low quality lowres JPEG artifacts, low quality lowres signature, low quality lowres 3D, low quality lowres 3D game, low quality lowres 3D game scene, low quality lowres 3D character, low quality lowres malformed feet, low quality lowres extra feet, low quality lowres bad feet, low quality lowres poorly drawn feet, low quality lowres fused feet, low quality lowres missing feet, low quality lowres extra shoes, low quality lowres bad shoes, low quality lowres fused shoes, low quality lowres more than two shoes, low quality lowres poorly drawn shoes, low quality lowres bad gloves, low quality lowres poorly drawn gloves, low quality lowres fused gloves, low quality lowres bad cum, low quality lowres poorly drawn cum, low quality lowres fused cum, low quality lowres bad hairs, low quality lowres poorly drawn hairs, low quality lowres fused hairs, low quality lowres big muscles, low quality lowres ugly, low quality lowres bad face, low quality lowres fused face, low quality lowres poorly drawn face, low quality lowres cloned face, low quality lowres big face, low quality lowres long face, low quality lowres bad eyes, low quality lowres fused eyes poorly drawn eyes, low quality lowres extra eyes, low quality lowres malformed limbs, low quality lowres more than 2 nipples, low quality lowres missing nipples, low quality lowres different nipples, low quality lowres fused nipples, low quality lowres bad nipples, low quality lowres poorly drawn nipples, low quality lowres black nipples, low quality lowres colorful nipples, low quality lowres gross proportions, short arm, low quality lowres missing arms, low quality lowres missing thighs, low quality lowres missing calf, low quality lowres missing legs, low quality lowres mutation, low quality lowres duplicate, low quality lowres morbid, low quality lowres mutilated, low quality lowres deformed, low quality lowres extra arms, low quality lowres extra thighs, low quality lowres more than 2 thighs, low quality lowres extra calf, low quality lowres fused calf, low quality lowres extra legs, low quality lowres bad knee, low quality lowres extra knee, low quality lowres more than 2 legs, low quality lowres bad tails, low quality lowres bad mouth, low quality lowres fused mouth, low quality lowres poorly drawn mouth, low quality lowres bad tongue, low quality lowres tongue within mouth, low quality lowres too long tongue, low quality lowres big mouth, low quality lowres cracked mouth, low quality lowres dirty face, low quality lowres dirty teeth, low quality lowres dirty pantie, low quality lowres fused pantie, low quality lowres poorly drawn pantie, low quality lowres fused cloth, low quality lowres poorly drawn cloth, low quality lowres bad pantie, low quality lowres yellow teeth, low quality lowres thick lips, low quality lowres bad asshole, low quality lowres poorly drawn asshole, low quality lowres fused asshole, low quality lowres missing asshole, low quality lowres bad anus, low quality lowres bad pussy, low quality lowres bad crotch, low quality lowres bad crotch seam, low quality lowres fused anus, low quality lowres fused pussy, low quality lowres fused crotch, low quality lowres poorly drawn crotch, low quality lowres fused seam, low quality lowres poorly drawn anus, low quality lowres poorly drawn pussy, low quality lowres poorly drawn crotch seam, low quality lowres bad thigh gap, low quality lowres missing thigh gap, low quality lowres fused thigh gap, low quality lowres liquid thigh gap, low quality lowres poorly drawn thigh gap, low quality lowres bad collarbone, low quality lowres fused collarbone, low quality lowres missing collarbone, low quality lowres liquid collarbone, low quality lowres strong girl, low quality lowres obesity, low quality lowres worst quality, low quality lowres low quality, low quality lowres normal quality, low quality lowres liquid tentacles, low quality lowres bad tentacles, low quality lowres poorly drawn tentacles, low quality lowres split tentacles, low quality lowres fused tentacles, low quality lowres missing clit, low quality lowres bad clit, low quality lowres fused clit, low quality lowres colorful clit, low quality lowres black clit, low quality lowres liquid clit, low quality lowres QR code, low quality lowres bar code, low quality lowres censored, low quality lowres safety panties, low quality lowres safety knickers, low quality lowres beard, low quality lowres furry, pony, low quality lowres pubic hair, low quality lowres mosaic, low quality lowres excrement, low quality lowres shit, low quality lowres futa, low quality lowres testis, low quality lowres lowres, low quality lowres terrible, low quality lowres dirty, low quality lowres feces, low quality lowres organs, low quality lowres fat, low quality lowres thick thighs, low quality lowres low resolution rough, low quality lowres pedophile, low quality lowres bestiality, low quality lowres parody, low quality lowres traditional media, low quality lowres koma, low quality lowres comic, low quality lowres scary, low quality lowres severe, low quality lowres insects, low quality lowres gross scars, low quality lowres twisted human body, low quality lowres irrational human body, low quality lowres parts of the body out of common sense, low quality lowres murder, low quality lowres beheading, low quality lowres zombie, low quality lowres mummy, low quality lowres graffiti, low quality lowres unfinished picture, low quality lowres terrible quality, low quality lowres Coprophilia, low quality lowres muscular, low quality lowres bald, low quality lowres monk, low quality lowres wrinkly, low quality lowres simple background, low quality lowres realistic, low quality lowres old, low quality lowres scan, low quality lowres touhou, low quality lowres yaoi, low quality lowres gay, low quality lowres femboy, low quality lowres trap, low quality lowres pee, low quality lowres doujinshi, low quality lowres monochrome, low quality lowres meme, low quality lowres demon, low quality lowres monstrous creature, low quality lowres tentacle, low quality lowres self harm, low quality lowres vomit, low quality lowres suicide, low quality lowres death, low quality lowres corpse, low quality lowres bone, low quality lowres skeleton, low quality lowres framed, low quality lowres historical picture, low quality lowres futanari, low quality lowres shemale, low quality lowres transgender, low quality lowres dick girl, low quality lowres flat breasts, low quality lowres degenerate ass, low quality lowres retro artstyle, low quality lowres anime screencap, low quality lowres stitched, low quality lowres pokemon, low quality lowres ryona, low quality lowres animal, low quality lowres male focus, low quality lowres nipple penetration, low quality lowres sonic (series), low quality lowres bondage, low quality lowres bdsm, low quality lowres 2D, low quality lowres 2D game, low quality lowres 2D game scene, low quality lowres 2D character, low quality lowres game cg, low quality lowres watercolor (medium), low quality lowres 2koma, low quality lowres gloves, low quality lowres nitroplus, low quality lowres grayscale, low quality lowres sketch, low quality lowres line drawing, low quality lowres gorilla, low quality lowres meat, low quality lowres gundam, low quality lowres multiple views, low quality lowres cut, low quality lowres concept art, low quality lowres reference sheet, low quality lowres turnaround, low quality lowres chart, low quality lowres comparison, low quality lowres artist progress, low quality lowres lineup, low quality lowres before and after, low quality lowres orc, low quality lowres tusks, low quality lowres goblin, low quality lowres kobold, low quality lowres pony, low quality lowres nsfw, low quality lowres Humpbacked, low quality lowres text error, low quality lowres extra digits, low quality lowres standard quality, low quality lowres large breasts, low quality lowres shadow, low quality lowres nude, low quality lowres artist name, low quality lowres skeleton girl, low quality lowres bad legs, low quality lowres extra digit, low quality lowres artifacts, low quality lowres bad body, low quality lowres optical illusion, low quality lowres Glasses, low quality lowres girl, low quality lowres women, low quality lowres more than 1 moon, low quality lowres Multi foot, low quality lowres Multifold, low quality lowres colored sclera, low quality lowres monster girl, low quality lowres The background is incoherent, low quality lowres abnormal eye proportion, low quality lowres abnormal legs, low quality lowres sharp face, low quality lowres tranny, low quality lowres extra limbs, low quality lowres unclear eyes, low quality lowres bad, low quality lowres malformed mutated, low quality lowres broken limb, low quality lowres incorrect limb, low quality lowres fusion finger, low quality lowres lose finger, low quality lowres multiple finger, low quality lowres multiple digit, low quality lowres lose leg, low quality lowres fused leg, low quality lowres multiple leg, low quality lowres bad cameltoe, low quality lowres colorful cameltoe, low quality lowres low polygon 3D game, lowres, bad anatomy, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, artist name, over one person in focus, 3d, lower body, arms on background, interlocked fingers, twisted fingers, excessively bent fingers, more than 5fingers, vertical line on bellybutton, vertical bellybutton, watermark, (over three finger\\(fingers excluding thumb\\):2), (fused anatomy), (bad anatomy\\(body\\)), (bad anatomy\\(arms\\)), (over two arms\\(body\\)), (bad anatomy\\(leg\\)), (over two legs\\(body\\)), (bad anatomy\\(arm\\)), (multiful\\(arms\\)), (multiful\\(legs\\)), (bad detailed background), (unclear architectural outline), mutant, polydactyly, spiky fingertips, sharpened fingertips, eleven~nineteen fingers, (point with finger:1.3), monotone

연령

• kid, child, loli, kindergartener, preteen, tween, girl, sister, teenager, student, juvenile, minor, freshman babe, lady, wife, woman, mother, missy, milf

• young/little/early, childish/immature/infantine, kind of/junior/adolescent, teen/twenty/thirties, premature/ripe/adult, mature/middle aged/senior, ground-up/old/elder

• 두가지 선택 혹은 조합 (ex. young girl, mature lady)

인물 수

• two_shot + (2girls, 2boys, boy and girl, man and woman) : 두 사람 생성 시 함께

시점/구도

• From Above From Below From Behind From Outside Dutch Angle

• (cannon EOS 5D MARK III, 50mm Sigma f/1.4 ZEISS lens, F1.4, 1/800s, ISO 100:1)

• POV 1인칭시점

• 1girl 여성이 혼자만 비치고 있는 화면 구성. 다양한 응용이 가능 solo 캐릭터 혼자 full body 캐릭터의 전신이 비친다 upper body 상반신이 메인이 된다 from side 옆에서 전신도. 엉덩이가 이쪽으로 향하는 경우가 많다. from above 머리 위에서의 부감 from behind 등 뒤로 portrait 머리에서 어깨까지 cowboy shot 허벅지까지 face only 얼굴이 메인에 그려진다 head_out_of_frame 얼굴이 프레임 아웃되는 구도 feet out of frame 무릎에서 아래가 프레임 아웃하는 구도 wide shot / very wide shot 캐릭터의 전신과 원경

• 【부위를 강조하는 구도】 armpit focus　겨드랑이 강조되는 구도 ass focus/hip focus 엉덩이가 강조되는 구도 back focus 등이 강조되는 구도 breast focus 가슴이 강조되는 구도 eye focus 눈동자가 강조되는 구도 foot focus 다리가 강조되는 구도 hand focus 손이 강조되는 구도 navel focus 배꼽이 강조되는 구도 thigh focus 허벅지가 강조되는 구도

• 【설정화】 reference sheet 캐릭터 설정 three views from front, back and side 캐릭터 삼면도 costume setup materials 설정 화풍 bust chart 작품 등장 캐릭터의 가슴 크기 랭킹과 같은 구도 character chart 캐릭터 목록

시선

• ★looking at viewer 카메라 시선 eye contact 캐릭터끼리 응시 looking afar 멀리 쳐다보고 있다 looking away 저쪽을 보고 있다 looking at another 눈을 돌리고 있다 looking at breasts 가슴을 보고 있다 looking at hand 손을 보고 있다 looking at mirror 거울을 보고 있다 looking at phone 스마트폰을 보고 있다 looking back/looking down 내려다 looking outside 밖을 보고 있다 looking over eyewear 안경을 어긋나 보는 행동 looking through legs looking up

인체

• 손관련

  • positive: (arm + hand + 1_thumb), (Five_fingers_each), Perfect_hands, extremely_detailed_hands

  • negative: low quality lowres fusion finger, low quality lowres lose finger, low quality lowres multiple finger, missing fingers, interlocked fingers, twisted fingers, excessively bent fingers, more than 5fingers, (over three finger\(fingers excluding thumb\):2), spiky fingertips, sharpened fingertips, eleven~nineteen fingers, (point with finger:1.3)

  • 개인적인 손가락 고치는 핵심 요약은

    1. 바리에이션 사용 (강도 0.2), 바리에이션 리사이징 폭 높이는 기준높이(위 예시 기준 1280x1280) 의 2배 이상 비율 맞춰서 설정

    2. 고해상도 보정의 디노이즈 강도 0.5 사용, 고해상도 보정의 폭 높이는 기준높이의 0.5배 근접하거나 이하로 설정 (가급적이면 768x768을 넘지 말것)

• 헤어스타일

  https://note.com/mkpoli/n/n4accf6cec905

  • 눈 보정 팁. 인물에 먼저

    1 girl who has blue eyes

표정

• timid smile 소심한 미소

• smirk 피식 웃다

• grin  활짝 웃다

• sneer  비웃다

• frown 얼굴을 찌푸리다

• disappointed face 실망한 얼굴

• scornful face 경멸하는 얼굴

• Aroused 흥분한

• sobbing 흐느껴 우는

자세 관련

• 총기잡기

  • trigger_discipline

  • finger_on_trigger

  • shoulder stock은 권총용 보조 개머리판, buttstock은 통상적인 개머리판의 영칭임

• on back

• lying

• holding another's wrist

• holding hands

• kneeling

• straddling

• hug

의류, 악세

• clear face visor

• coffee cup/mug 보다 starbucks

장소

• aquarium, marine zoo, underwater zoo, window, giant window, railing, glass, glass pane, glass background

빛/효과

• Holographic Effect

• Incandescents

• Arc Lights

• Luminous Lights

• Plasma Lights

• Sunbeam

• Brocken Spectre Effect

• Starburst Effect

• Diffraction Effect

• Dispersion Effect

• Green Flash

• Abstract Lights

• Electromagnetic Spectrum

• Sun Dogs Effect

• Speed Line Lights Effect

이모지(Emoji)

• 은근 1girl 1boy 같은 거 잘 안먹는다. 그럴땐 emoji로 👫 요런 걸 넣어보자.

• 👫, hugs 를 Anything-v3 와 같은

👫👫이나 👫👫👫 혹은 👫👫👫👫👫👫으로 했을 때 사람이 더 많아지는 정도도 변환하니 꼭 해보자.

• 상당히 강력한 프롬이니 여러가지로 응용해보도록 하자.

  https://docs.google.com/spreadsheets/d/1aTYr4723NSPZul6AVYOX56CVA0YP3qPos8rg4RwVIzA/edit#gid=0

작가별 스타일

Upscale tip

• 얼굴은 codeformer

• SwinlR 4x 로 1,2 동일하게 맞춘다.

Inpainting

• mask blur - 4

• draw mask/inpaint mask

• masked content - original

• Inpaint at full resolution - check

• 여러번 seed 바꾸면서 시도

VAE 적용 확인

Loading VAE weights from: C:\WebUI_20221225\stable-diffusion-webui\models\Stable-diffusion\01_NaiFull.vae.pt

Applying xformers cross attention optimization.

VAE Weights loaded.