John Simon, Subotica'da (bugünkü Sırbistan) Macar asıllı Joseph ve Margaret (kızlık soyadı Reves) Simmon'un çocuğu olarak dünyaya geldi. Soyadını bir noktada "Simon" olarak değiştirmiştir. Belgrad'da büyüdükten sonra 1941 yılında, 16 yaşındayken turist vizesiyle ailesinin yanına Amerika Birleşik Devletleri'ne göç etti. Blogunda "Ivan" soyadının daha sonra babası tarafından farklılık katmak için göbek adı olarak eklendiğini yazmıştır.