Die Einöde Ummersberg liegt 4,8 km Luftlinie 275,7 ° westlich von Ebensfeld entfernt. Die Einöde oder der Gutshof liegt umgeben von alten Baumbeständen westlich von Ebensfeld auf einem Höhenzug zwischen den Maintal und dem Itzgrund. Die Kreisstraße zwischen Birkach und Busendorf (Lkr. Coburg) führt nördlich an dem Ort vorbei. Folgende Straßen führen in der Nähe von Ummersberg vorbei oder direkt dort hin: LIF 25.