Partial Generation Demo (Full)

MGE-LDM: Simultaneous Music Generation and Extraction via Joint Latent Modeling

Home Total Generation (Full) Source Extraction (Full)

Partial Generation Samples (Full)

Brass Imputation

Given Mixture Ground Truth Generated (MGE-LDM)
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel

Gen: generated brass
Mix: given mixture + generated brass

Chromatic percussion Imputation

Given Mixture Ground Truth Generated (MGE-LDM)
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel

Gen: generated chromatic_percussion
Mix: given mixture + generated chromatic_percussion

Organ Imputation

Given Mixture Ground Truth Generated (MGE-LDM)
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel

Gen: generated organ
Mix: given mixture + generated organ

Pipe Imputation

Given Mixture Ground Truth Generated (MGE-LDM)
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel

Gen: generated pipe
Mix: given mixture + generated pipe

Strings Imputation

Given Mixture Ground Truth Generated (MGE-LDM)
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel

Gen: generated strings
Mix: given mixture + generated strings

Synth lead Imputation

Given Mixture Ground Truth Generated (MGE-LDM)
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel
Mel Src GT Mel Gen Mel
Mix GT Mix Mel Gen Mix Mel

Gen: generated synth_lead
Mix: given mixture + generated synth_lead