जेव्हा तो चार वर्षांचा होता तेव्हा त्याचे कुटुंब व्हिएन्ना येथे गेले आणि जरी त्याने अनेकदा दावा केला की तो शहराचा तिरस्कार करतो, 1938 मध्ये जर्मनीच्या ताब्यात येईपर्यंत तो तेथेच राहिला. फ्रायडची कौटुंबिक पार्श्वभूमी ज्यू होती, जरी त्याचे वडील फ्रीथिंकर होते आणि फ्रायड स्वतः जाहीर नास्तिक.