Ailesi İrlanda'nın Cork kentinden geldikten sonra Güney Londra'da Peckham'da doğdu, Leo Street School, Peckham'da ve ardından Walworth Central'da eğitim gördü. 15 yaşında okulu bıraktı ve bir demiryolu vagonu tamir firmasında ofis elemanı oldu, bir yıl sonra Bishopsgate'de bir iş adamları kulübünde steward oldu, bir barmaid ile tartıştığında ve yüzüne soda fışkırttığında aniden sona erdi, ailesine söyleyemeyecek kadar korktu ve Brighton'a kaçtı, ancak kıştan hemen sonra iş yoktu ve Cheapside'da bir ipek deposunda çalışmak için eve dönmek zorunda kaldı. 17 yaşında evden ayrıldı ve New Cross'ta bir pansiyona yerleşti, İlk kez sinemaya ve tiyatroya gitmeye başladı ve bunu heyecan verici bularak yerel bir grupla amatör tiyatroya başladı ve 1937'de RADA'ya burs kazandığı Morley College'a gitti, Sonunda, aslında şarkıcı olmak için eğitim alan bir aktris olan Barbara ile tanıştı ve evlendi ve Jacob ve Harriet ile Kelly ve Louisa adında, hepsi de müziğe yatkın iki ikizleri oldu. Alfred, Public Eye adlı TV dizisinde özel dedektif Frank Marker'ı canlandırdığında tanındı,