Det kan inte ha varit ett enda övergripande hot mot de fria människorna med Sauron borttagen, men det är inte att säga att det inte fanns några hot. Det hade fortfarande varit otaliga orker att hantera, vem skulle ha varit en fara även utan att deras överherrare skulle kontrollera dem.
Det hade också varit stora grupper av män som var allierade med Morgoth i den första åldern, som till exempel Ulfangs hus. Uldor, den förföljda, Ulfangs son, som var djup i Morgoths råd, förrådde Feanors son Maedhros i Nírnaeth Arnoediad (Slaget vid Unnumbered Tears) i Beleriand.
Dragons var också mycket mer förekommande i första ålder än de var i efterföljande åldrar. Glaurungs ättlingar som överlevde vid slutet av första åldern skulle ha varit så farliga och lika grymma som någonsin.
Den naturliga och logiska efterträdaren till Sauron skulle ha varit Angmarens häxkung, men han och den andra Nazgul visade sig inte förrän mycket mycket senare när Sauron lurade älvorna i smidda ringarna och gav nio av hans ringar till män under hans sväng. Några av dessa män sägs vara svarta numenoreaner, som tillbedde Sauron när han stod till makten i Numenor i andra åldern. Utan Sauron skulle det naturligtvis inte ha ägt rum.