W miejscowości domki letnie posiadała liczna grupa lwowian m.in. prof. Tadeusz Ostrowski oraz gen. Tadeusz Rozwadowski. W Jastrzębiej Górze gen. T.Rozwadowski ukończył swe wspomnienia z czasów I wojny światowejGenerał broni Tadeusz Jordan Rozwadowski, Wspomnienia Wielkiej Wojny, Warszawa 2015, ..
W czasie II wojny światowej osada nosiła niemiecką nazwę Habichtsberg, od niemieckiej nazwy Góry Jastrzębskiej (Habicht – jastrząb, Berg – góra).
Jastrzębia Góra uzyskała 22 maja 1963 r. prawa osiedla, a w 1973 r. została włączona w granice Władysławowa(§ 3.) Rozporządzenie Prezesa Rady Ministrów z dnia 30 listopada 1972 r. ()..
1 stycznia 2015 r. gmina Władysławowo zmieniła rodzaj z miejskiego na miejsko-wiejski. W praktyce oznaczało to wyłączenie poza administrację miasta obszarów miejscowości Chałupy, Chłapowo, Jastrzębia Góra, Karwia, Rozewie, Tupadły i Ostrowo, nadając im status wsi.
Zabytki i obiekty historyczne W miejscowości nie ma obiektów zabytkowych wpisanych do rejestru zabytków województwa pomorskiego. Według gminnej ewidencji zabytków przyjętej 7 kwietnia 2014 r.