Din tolkning är korrekt
Enligt Jeremy Crawford :
Dispel magic is cast on a creature, an object, or another phenomenon that is under the effect of a spell. You don't cast it on that spell's caster. To dispel a spell like banishment, you'd have to somehow cast dispel magic on the banished target.
Eftersom Banishment är en koncentrationsstavling finns det naturligtvis alternativ som du kan vidta för att försöka sluta stava om du är i samma plan som spellcasteren men inte som målet (som att casta Magic Missile vid den person som koncentrerar sig på det). Och som du sa, om du på något sätt kunde hamna i samma plan som den förvirrade varelsen, kunde du skingra förbanningsförklaringen där. Men ja, specifikt skulle Dispel Magic stavning inte fungera om inte kastas på målet för Banishment spell .