Jag har sett filmen tre gånger nu, och det förklaras aldrig (i filmen).
Det förklaras inte riktigt varför människor lämnar det fjärde riket i första hand.
Men enligt Disney Wikia ,
she [Ginger] got tangled up with The Regent of the Land of Sweets, The Sugar Plum Fairy, and was tricked into carrying out her nefarious deeds. Sugar Plum pinned all of these deeds upon Mother Ginger, convincing Marie to remove her from The Regent's council.