Z okazji małżeństwa otrzymał od ojca tytuł księcia Segowii. Małżeństwo księcia nie było jednak udane. Opowiadano wówczas straszne historie o podróży poślubnej nowożeńców. Apetyty seksualne don Jaima miały tak przestraszyć świeżo upieczoną małżonkę, że zamknęła się w swoich apartamentach i wzywała pomocy przez telefonJosé-Luis de Vilallonga, Le roi, Fixot 1993. Po narodzinach dwóch synów para faktycznie żyła w separacji, ale małżonkowie mieszkali w jednym domu i księżna Segowii opuściła go dopiero w 1946. Rok później uzyskał rozwód w Bukareszcie, nie uznany w Hiszpanii i przez francuskich legitymistów.
Po śmierci ojca w 1941 został legitymistycznym pretendentem do tronu Francji pod imieniem Jakuba II lub Jakuba-Henryka VI. 28 marca 1946 przyjął tytuł księcia Andegawenii. 3 sierpnia 1949 w Innsbrucku poślubił Charlotte Luise Auguste Tiedemann (ur. 2 stycznia 1919, zm. 3 lipca 1979), córkę Ottona Tiedemanna. Małżeństwo to nie zostało uznane przez Kościół, Hiszpanię i legitymistów. Pozostało ono bezdzietne.