Isaak is de zoon van Abraham van Goor en Saartje van Goor. Hij was eerst getrouwd met Marianna Swart en daarna met Betsie Brenner.