Částí Velkého Vrbna byla osada Adamov, v roce 1953 byly obě lokality připojeny ke Starému Městu. Katastr o rozloze 1031 hektarů je vyplněn Travenskou hornatinou (Travná hora na státní hranici s Polskem dosahuje 1120 m). Vesnice je rozložena v jeho jihozápadní části a táhne se podél jedné ze zdrojnic Vrbenského potoka ve střední nadmořské výšce 772 m. Údolím potoka vede do Velkého Vrbna silnice ze Starého Města. Ve východní části katastru, oddělena zalesněným Adamovským hřbetem, je při potoce Telčavě osada Adamov.