Natacska Xai İsveç'in Stockholm kentinde doğdu. Annesi İsveç hükümetinde Dışişleri Bakanlığı'nda büyükelçiydi. Babası ise bir anestezi uzmanıydı. Yedi aylıkken ailesiyle birlikte Kenya'ya taşındı. Kenya açıklarında, arabaların olmadığı Lamu Adası'nda büyüdü. Babası ABD'de Niagara Şelalesi, New York'ta doğmuştur. 1868'de St. Barts'ın valisi ve mürebbiyesi ile akrabadır. Büyükbabası bir şarkıcıydı. 1925 yılında şarkı söylemek için bir gemiyle Avrupa'dan New York'a sekiz günlük bir Atlantik yolculuğu yapmıştır.