Oldřichov je typicky horská obec se zástavbou částečně soustředěnou podél silnic a částečně rozesetou po stráních údolí. Údolím protéká říčka Jeřice. Kopce a vrchy v okolí se zelenají souvislým lesním porostem.