Posta in un avvallamento naturale denominato "Conca del Re", a circa 360 metri d'altitudine sul livello medio del mare, Castrovillari è circondata dagli Appennini calabresi, ed è il centro più grande del Parco Nazionale del Pollino. Monte Pollino, nei pressi della cittadina, è la seconda vetta più alta degli Appennini meridionali dopo Serra Dolcedorme.

Il Mar Ionio dista poco più di 30 km (lungo la SS 106); il Mar Tirreno tra i 50 e i 110 km. Il clima prevalente è di tipo mediterraneo nella stagione estiva, e da media montagna appenninica d'inverno; non mancano occasionali nevicate.

La festa più importante della città è probabilmente il Carnevale del Pollino (nel 2006 ribattezzato "Carnevale di Castrovillari"), organizzato dalla locale Pro Loco, che si tiene a febbraio fin dal 1959 e nel corso del quale sfilano carri allegorici e gruppi folkloristici provenienti da tutto il mondo.

Un'ulteriore occasione di riunione e di spettacolo per i gruppi folkloristici internazionali è costituito dal "Festival Internazionale del Folklore e del Parco del Pollino", nato nel 1986 e che si svolge ogni anno tra agosto e settembre. Altre feste molto sentite sono le "Focarine di San Giuseppe" (in cui gli abitanti scendono per strada e accendono falò) e la "Festa della Pietà" (15 e 16 agosto).