Joseph was de zoon van Karel Philips en Mietje van Gelder. Joseph was getrouwd met Charlotte Philips-Meijerheim (Massow 03/03/1883 - Auschwitz 5 november 1942). Ze hadden een dochter Nelli Nathalie Philips (Elberfeld 26/04/1912 - Auschwitz 19 februari 1943), getrouwd met Isaak-Hans Goldwerth uit Niebylow. Joseph had samen met zijn zwager Paul de leiding over een vleesexportzaak. In 1938 is het gezin Philips uit Duitsland naar Nederland gekomen en woonde ze in een boerderijtje te Harfsen.