En hyggelig lille by midt i den store natur. Det bakkede istidslandskab går fra byens centrum til den unikke Skeldal videre ud i Dollerup Bakker. Det ender ved Hald Sø som også kan ses flere steder fra Skelhøje. Området byder på flere enestående gå- og cykelture udover Den Sorte Sti, Hærvejen, Kalk Kaminoen, Alhedestien samt MTB stierne i Stendal Plantage.
I byen er der børnehave og vuggestue samt en overvægt af børnefamilier. Der er en socialøkonomisk Købmand, som er ejet og drevet af byens mange frivillige, en cafe og et velbesøgt Kulturhus. Byen er meget aktiv og har udover forskellige hobbyklubber ofte arrangementer, koncerter, foredrag, Landsbyfest mv., der trækker interesserede gæster fra hele lokalområdet. Skelhøje ligger 14km fra Viborg by, og der kører både bus til Viborg og Herning.
