Savaş sırasında evleri bombalandıktan sonra aile Dorset'teki Swanage'a tahliye edildi ve Nosher burada Swanage Gramer Okulu'na devam etti. Londra'ya döndüğünde boksa başladı ve Joe Louis, daha sonra Sugar Ray Robinson ve Muhammed Ali'nin ara sıra idman partneri oldu. Kraliyet Ordusu Sağlık Birlikleri'ndeki ulusal hizmeti sırasında boks yapmaya devam etti ve terhis olduktan sonra profesyonel oldu. 1960 yılında 51'i profesyonel olmak üzere 78 maça çıkıp sadece 9 mağlubiyet alarak emekli oldu ama hiç nakavt olmadı. Filmlerde oynamaya ilk kez 1944 yılında Laurence Olivier'in V. Henry (1944) filminde dublörlük yaparak başladı. Boks çalışmaları arasında dublörlük yapmaya devam etti ve David Lean'in Izdırap Çocuğu (1948) ve Cosh Boy (1953) gibi filmlerinde küçük roller aldı. 1963 yılında Sean Connery'nin Rusya'dan Sevgilerle (1963) filminde dublörü olarak çalışmaya başladı ve uzun yıllar devam etti. Dublörlük dışında eşiyle birlikte Wimbledon tazı stadyumunun yakınında bir pub işletti.