Fyrir ferðamenn og útivistarfólk er margt skemmtilegt að skoða og gera á Ólafsfirði.
Á veturna er staðurinn skíðaparadís og draumur útivistarmannsins. Hægt er að fara á svigskíði, gönguskíði, skauta, þeytast um á snjósleða eða dorga í Ólafsfjarðarvatni.
Á sumrin eru það fjöllin, vatnið og svört sandfjaran sem heilla. Í stórbrotnu landslagi Ólafsfjarðar má finna fjölbreyttar gönguleiðir um fjöll og dali og njóta einstaks útsýnis í kyrrð og ró.
Afþreyingarmöguleikar eru nánast ótæmandi. Á Ólafsfirði er boðið upp á sjóstöng og auk þess er hægt að veiða á stöng í Ólafsfjarðará og Ólafsfjarðarvatni. Svo má ekki gleyma því að hægt er að veiða á bryggju bæjarins. Á Ólafsfirði er 9 holu golfvöllur, sundlaug og glæsilegt náttúrugripasafn með fjölda uppstoppaðra fugla.