Die angebliche Abstammung aus einem alten elsässischen Adelsgeschlecht gilt mittlerweile als überholt, vielmehr stammte sein Vater Ferdinand Amadeus v. H. (1664–1722) aus Neubronn bei Abtsgmünd/D und war der Sohn eines evangelischen Pfarrers. F. Ph. ergriff eine militärische Laufbahn, wurde ab den 1750er Jahren jedoch von Maria Theresia für diplomatische Missionen eingesetzt; für die Klärung der seit 250 Jahren bestehenden Grenzstreitigkeiten mit Venedig ernannte ihn die Regentin 1754 zum Feldzeugmeister, Generalkommissär und Landeshauptmann von Görz und Friaul. Nachdem sich H. im Siebenjährigen Krieg ausgezeichnet hatte (ab 1761 als General-Prodirektor des Geniewesens), wurde er 1772 zum Gouverneur von Österreichisch-Schlesien (Schlesien) ernannt. H., der selbst ein begeisterteter Flötist war (Dilettant), unterhielt in Wien und auf seinen Gütern – u. a. dem Schloss Margarethen am Moos – eine aus 24 Musikern (meist Diener mit Zusatzverpflichtung) bestehende Adelskapelle, die täglich drei Stunden konzertierte (oft wurden Virtuosen als Gäste zur Mitwirkung eingeladen).