Od kilku lat w Okszowie obowiązuje nazewnictwo ulic.
W Okszowie znajduje się murowana kapliczka z 1919 z figurą św. Antoniego Padewskiego oraz 6 domów z okresu międzywojennego.
Najważniejszym obiektem zabytkowym Okszowa jest dawny zespół podworski, wykorzystywany przez szkołę rolniczą. Pierwsze informacje o dworze w Okszowie pochodzą z XVIII w. Na jego bazie wzniesiono w kolejnych stuleciach następne obiekty. Obecnie w dawnym budynku podworskim funkcjonują warsztaty szkolne. Powstały w XIX w. park posiada powierzchnię 9,3 ha i jest gęsto zabudowany obiektami szkolnymi. Znajduje się w nim ok. 1400 drzew i krzewów. Do najczęściej występujących gatunków należą: klon zwyczajny, klon jesionolistny, lipa drobnolistna, topola biała, jesion wyniosły, topola osika, grab pospolity, świerk srebrzysty, świerk pospolity, żywotnik zachodni i modrzew europejski.