Jimramov leží na soutoku řek Svratka a Fryšávka v CHKO Žďárské vrchy a současně v přírodním parku Svratecká hormatina.
Městečko si dodnes zachovalo starobylý ráz. Střed města tvoří úzké dlouhé náměstí s barokními a klasicistními domy, které jsou přízemní nebo patrové. Řada pěkných historických domů se ukrývá i v přilehlých ulicích, můžete tu vidět částečně roubený dům ze 17. století. Ve středu náměstí je klasicistní budova staré školy pocházející z let 1800 až 1804. Budova radnice je patrová a dnešní klasicistní podoba je z roku 1804 až 1806. Na okraji náměstí stojí zámek s nádvořím. Součástí zámku je i krytá nadzemní chodba spojující zámek s nedalekým katolickým kostelem. V současné době je zámek veřejnosti nepřístupný a je chráněn jako kulturní památka. Historická část města je městskou památkovou zónou.
Zdejší krajina je velice půvabná, skýtá mnoho přírodních útvarů, krásných výhledů a nabízí řadu možností pěší turistiku, cykloturistiku i zimní sporty. Od okraje města se zvedají zalesněné stráně kopců. Nejvýše položeným místem nad městečkem je západním směrem
vrchol Prosíčka, který je i významným vyhlídkovým bodem. Z vrcholu skaliska je výhled východním a jižním směrem do údolí Svratky, směrem k západu do údolí půvabné říčky Fryšávky. K severu bývá za příznivého počasí výhled až na horské hřebeny Orlických hor a Jeseníků. Západním směrem se nachází také
přírodní památka Štarkov, kterou tvoří zajímavý skalní útvar v lesním porostu. Součástí přírodní památky je zřícenina hradu Štarkov, nazývaného také Skály. Do současnosti se z hradu zachovaly pozůstatky okrouhlé věže a část hradeb. Zřícenina je volně přístupná a je chráněna jako kulturní památka. Výborné podmínky jsou tady také pro vodní turistiku, kterou můžete provozovat na řece Svratce za příznivého stavu vody. Pokud budete v Jimramově v letních měsích máte možnost se vykoupat v Novém rybníce nebo v čisté vodě řeky Svratky. Pro sportovce je k dispozici nová sportovní hala, pro tenisty a volejbalisty kurty.
V zimě lyžaři mohou využít
dva lyžařské areály. Západním směrem od městečka u obce zvané Nový Jimramov najdete lyžařský areál Jimramov. Další sjezdovka s lyžařským vlekem je severním směrem z Jimramova u obce Sedliště, na jihozápadním svahu vrcholku Na Kopci. Pro běžkaře je rolbou prohrnována rozsáhlá síť běžkařských tratí.