Mati Frana Robleka, Marija, je bila iz družine Žuža. Med drugim se je njena starejša sestra Barbara poročila z Ernestom Širco, tako sta bila Josip in Friderik Širca prava bratranca Frana Robleka po materah. Njun oče Franc Žuža je bil posestnik in žalski pivovar.