AI DJ 와 stem separation — 2024년에 시작된 「AI 가 DJ 를 하는 시대」

2024년 — AI DJ 의 실용화

2024년, DJ 계에 큰 기술 전환이 일어났다:

• rekordbox 7.0 이 stem separation 을 실장
• djay Pro AI (Algoriddim) 가 본격적인 AI DJ 기능을 탑재
• Serato Sample 3.0 이 AI 악곡 분석
• Denon Engine DJ Prime OS 가 AI stem 대응
• Deep Learning 음원 분리가 현실적인 속도로 동작

이것으로 「AI 가 DJ 플레이를 assist 하는 시대」 가 실용 단계로. 일부의 DJ 계에서는 「AI 가 DJ 를 대체한다」 라는 논의도 시작되었다.

Stem Separation 이란

Stem separation 은, 완성된 악곡을 원래의 요소 (stem) 로 분해하는 기술:

분리되는 4 stem

• Vocals (목소리) — 메인 보컬 · 랩 · 중얼거림
• Drums (타악기) — kick · snare · hi-hat · cymbal
• Bass (저음) — bass line · sub-bass
• Other (그 밖) — synth · guitar · piano · pad

종래

• DJ 가 사용할 수 있는 것은 「완성된 악곡」 — 4 stem 이 섞인 상태
• 「voice 만 빼고 싶다」 고 생각해도 불가능
• Producer 가 stem export 한 다중 음원이 필요

AI stem separation 의 실현

• Deep learning 으로 완성된 악곡에서 stem 을 추정 분리
• 정도 80-95% (2024년 시점)
• 리얼 타임 동작이 가능하게 (2023-2024년으로 급속히 개선)

이것은 DJ 플레이의 기술적인 범위를 근본에서 확장한다.

실용 예 — AI stem separation 에 의한 DJ 플레이

예 1: Voice + 다른 곡의 Instrumental

• 곡 A 의 voice 만 뺀다
• 곡 B 의 instrumental 만 흐르게 한다
• A 의 voice + B 의 instrumental 로 새로운 매쉬업

예 2: Drum swap

• 곡 A 의 drums 를 뺀다
• 곡 B 의 drums 로 치환한다
• A 의 melody + B 의 drums 로 새로운 groove

예 3: Bass shift

• 곡 A 의 bass 를 뺀다
• 클럽의 sound system 에서 강조하고 싶은 bass 를 리얼 타임으로 강조

이들은 1990-2000년대의 DJ 플레이에서는 불가능했다. 종래는 producer 가 사전에 mash-up 을 만들 필요가 있었다. 현재는 DJ 플레이 중에 즉흥으로 가능.

rekordbox 7.0 (2024) 의 AI 기능

Pioneer / Alpha Theta 의 rekordbox 7.0:

AI stem separation

• PC 상에서의 악곡 분석 시에 자동으로 4 stem 을 계산
• CDJ-3000 / OPUS-QUAD 측에서 리얼 타임으로 stem 을 분리
• subscription plan (Advanced) 이 필요 (월액 $30)

AI 악곡 분석

• 더 정확한 BPM 검출
• key 검출 (musical key)
• energy level 분석 — 곡의 고조도를 차트화
• Mood 분석 — happy / dark / energetic 등의 감정 라벨

보조적 features

• Compatible track suggestions — 「이 곡의 다음에 어울리는 곡」 을 AI 가 제안
• Playlist auto-generation — 테마를 지정하면 AI 가 playlist 를 작성
• Set flow prediction — DJ 플레이의 흐름을 AI 가 예측

djay Pro AI — iPad 로 AI DJ

Algoriddim 의 djay Pro AI (2020년경부터) 는, iPad / iPhone / Mac 에서 동작하는 AI DJ 앱:

djay Pro AI 의 특색

• iPad 단체로 DJ 플레이 가능
• AI Automix — 완전 자동으로 곡을 잇는다
• Neural Mix (stem separation 의 djay 판)
• Spotify · Apple Music 과 직접 통합
• 월액 $6-13 (rekordbox 보다 저가)

djay Pro AI 의 사용법

• iPad 에 헤드폰과 스피커를 접속
• Automix 버튼을 누르면 AI 가 선곡 · mix
• 인간 개입 없이 수 시간의 DJ 플레이가 가능

이것은 「DJ 불필요」 의 음악 재생 시스템이라고도 할 수 있다. BGM 용도에서는 완전히 인간 DJ 를 대체할 수 있는 레벨.

AI DJ 의 실제 — Marshmello · Sound Machines Radio

AI DJ 의 응용 예:

Marshmello 의 AI collaboration (2023)

• EDM DJ Marshmello 가 AI 악곡 제작과 protokoll
• 스튜디오 세션에서 AI 가 melody · drum 을 생성
• Marshmello 는 그것을 DJ 세트에서 사용

Sound Machines Radio (2024)

• Spotify · YouTube 에서 24/7 AI-only radio
• 인간 DJ 부재, AI 가 완전히 자동 선곡
• 수천 명의 동시 시청자
• 「hire-a-human-DJ」 의 하나의 대체로서

Beatport LINK 의 AI recommendations

• Beatport streaming 에서 「당신에게 어울리는 곡」 을 AI 가 추천
• DJ 가 모르는 신곡을 발견하기 쉬워진다
• AI 가 DJ 의 source diggers 기능을 대체

인간 DJ vs AI DJ — 기술적 비교

현재 (2024) 의 AI DJ vs 인간 DJ:

요소	AI DJ	인간 DJ
BPM matching	완벽 (수학적)	거의 완벽 (숙련)
Beat mixing	완벽	숙련자는 잘한다
Song selection	데이터베이스에서의 choice	감각 · 관객 판단
Emotional flow	프로그래밍된 flow	회장의 분위기를 읽는다
Improvisation	제한 있음	특기
Stem separation	리얼 타임으로 가능	사전 준비 필요
Cost	$10-30/월 subscription	1 세트 $500-100,000+
Physical presence	없음	회장에 있다

AI DJ = 효율 · 기술 · 저비용, 인간 DJ = 감정 · 관객 대응 · 독자성. 2020년대 중반은 구별 사용의 단계.

AI DJ 가 잘하는 장면

1. BGM 용도

• 레스토랑 · cafe · bar 의 BGM
• 수 시간의 평균적 dance music
• 인간 DJ 의 5만엔 비용이 불필요
• 일부의 점포에서는 이미 AI DJ + streaming 으로 운영

2. Fitness / gym

• workout playlist 의 자동화
• 사용자의 BPM · 심박수에 맞춰서 악곡 선택
• 완전 자동화된 퍼스널 DJ

3. Personal streaming

• Alexa · Google Home 에서 「party music」 이라고 지시 → AI DJ 가 자동 플레이
• 가정용 DJ 가 AI 로

AI DJ 가 잘하지 못하는 장면

1. 클럽 · 페스티벌의 main set

• 관객의 반응을 읽어내는 능력이 AI 에게는 아직 없다
• 「지금, 무엇을 틀어야 하는가」 의 판단이 어렵다
• 시대의 공기를 읽을 수 없다

2. 예술적 DJ 플레이

• 의외성 · 놀라움을 낳는 선곡
• 클래식 곡의 의외의 mix
• B-boy 가 기대하는 break 의 전환

3. 커뮤니티를 만드는 장

• Berghain · Bushbaby · DJ Nobu 의 세트와 같은, 문화적 의의를 가지는 DJ 플레이
• 음악 이상의 사회 현상을 만든다

이들은 AI 가 2020년대 중반의 단계에서 잘하지 못하는 영역. 하지만 2028-2030년경에는 많은 것이 가능해질 가능성.

AI DJ 의 윤리 문제

AI DJ 의 등장에 따르는 윤리적 문제:

1. 아티스트의 권리

• AI 가 「Deadmau5 의 style 로 mix 한다」 는 것은 가능한가
• 누구의 style 을 빌려도 되는가
• 저작권 · personality rights 의 복잡화

2. 노동 문제

• BGM DJ · cafe DJ 가 AI 로 대체된다
• 소규모 venue 의 DJ 수입 감소
• Wedding DJ · Corporate event DJ 의 대체 리스크

3. 음악의 균질화

• AI 가 학습하는 것은 기존의 음원
• 새로운 음악 · style 이 태어나기 어려워질 가능성
• AI 전제가 아닌 DJ 플레이의 가치 (=인간 DJ 의 희소성)

현대 DJ 의 대응

현대의 프로 DJ 의 AI 대응:

적극적인 채택파

• Deadmau5: 조기부터 AI 악곡 제작을 도입
• Skrillex: AI stem separation 을 live 에서 사용
• Marshmello: AI 를 「creative partner」 로서 활용
• Nina Kraviz: AI 가 제너레이트한 음원을 stem 소재로서 활용

신중파

• Peggy Gou: 「AI 는 보조 도구, 중심은 인간의 귀」
• Ricardo Villalobos: 「인간의 즉흥성을 중요시」
• DJ Nobu: 「AI 에 의존하면 개성이 사라진다」

현대 DJ 계는 AI 를 「사용해 낸다 vs 거리를 둔다」 의 2극화. 완전 부정파도 완전 의존파도 소수, 많은 것은 「보조 도구」 로서의 중간적 입장.

Ableton Live 와의 융합

AI DJ 에 더해, Live production 의 융합도 진행된다:

Ableton Live 의 DJ 사용

• Ableton Link 로 CDJ 와 동기
• Live 의 loop · sample · effect 를 DJ 플레이에 도입
• CDJ + Ableton = 하이브리드 DJ

대표 DJ

• Deadmau5: Ableton Live 에서의 live performance
• Richie Hawtin: Ableton Live + CDJ 의 DJ 세트
• Amelie Lens: Live + AI 로 새로운 표현

이것은 「DJ = 곡을 선택하는 사람」 에서 「DJ = 곡을 만드는 사람」 으로의 융합. Producer 와 DJ 의 경계가 사라지고 있다.

2030년경의 DJ 의 모습 — 예측

DJ 의 6년 후의 예측 (2030년경):

1. AI 가 「기본 기능」 으로

• 모든 DJ 소프트웨어에서 stem separation 이 표준
• BPM matching · key mixing 은 완전 자동화
• 인간의 역할은 선곡 · 분위기 읽기 · 연출

2. Hybrid AI + Human DJ

• Peggy Gou · Amelie Lens 레벨의 top DJ 는 인간 주도 + AI 보조
• 대중 BGM 은 AI-only
• 중간의 DJ (중규모 venue) 는 AI + human 의 혼합

3. VR / AR DJ

• VRChat 과 같은 메타버스 클럽
• 세계 각지의 관객이 VR 공간에서 DJ 플레이를 체험
• AR 안경으로 DJ 세트의 정보를 실 클럽에 겹친다

4. Streaming subscribers 가 주요 revenue

• 월액 subscription 경유의 DJ 음악 수입
• Beatport LINK · TIDAL 등이 주류화
• 음원 구입 모델은 소수파로

AI DJ 에 대한 철학적 물음

AI DJ 시대의 철학적 물음:

「DJ 란 누구인가?」

• 1935년: 라디오에서 말하는 사람
• 1970년대: 클럽에서 춤추게 하는 사람
• 1980년대: 악기를 연주하는 사람
• 2000년대: 음악을 발견 · 큐레이션하는 사람
• 2020년대: 관객과 일체화하는 공간을 만드는 사람
• 2030년대?: AI 와 공작하는 music curator?

「AI DJ 에게 부족한 것」

• 공감 (empathy) — 관객의 마음을 느낀다
• 우연성 (serendipity) — 예상 밖의 선곡
• 개성 (uniqueness) — 「그 DJ 이기 때문에」 의 이유
• 이야기성 (narrative) — 하룻밤의 long set 를 통한 이야기

이들은 AI 에게 완전히 대체될 수 없는 가능성이 있다. 하지만 AI 가 「대체할 수 없다」 고 증명하는 것도, 아직 실험의 단계.

100년의 DJ 계보와 AI

DJ 100년사 (1920s 라디오 → 2020s AI) 를 통해:

시대	기술	음악	장
1920-1960s	라디오 · 레코드	재즈 · 로큰롤	가정
1970s	Turntable × 2	Disco	클럽
1980s	Roland 909/303	House · Techno	거대 클럽
1990s	CDJ 계	House · Techno · Trance	메가 클럽
2000s	rekordbox · PC	EDM	페스티벌
2010s	Streaming · SNS	Multi-genre	Boiler Room
2020s	AI · stem	Genre-fluid	Hybrid

기술은 계속 변했지만, 음악으로 사람을 움직인다는 핵심은 변하지 않았다. AI 시대에도, 인간의 귀 · 감정 · 분위기 읽기가 DJ 의 중심에 있을 것 — 이 것이 2024-2026년의 DJ 계의 소원.

이 글에서 다음 글로 (최종 글로)

100년의 DJ 계보를 따라왔지만, 일본의 DJ 문화의 이야기에 접할 기회가 적었다. dj 시리즈의 최종 글로서, 도쿄 club scene 의 30년 (1990-2024) 을 따라간다. WOMB · ageHa · Vent · Contact 등 도쿄 클럽사, 이시노 다쿠큐 · DJ Nobu · Wata Igarashi 등 일본인 DJ 의 국제적 활약, 그리고 「일본만의 DJ 문화」 를 고찰한다.