Cresciuto in una famiglia di musicisti, Hudson lavorò dapprima come dentista ma già a 14 anni iniziò ad apprendere da musicisti come Don Drummond, portando il suo trombone alle sessioni presso lo Studio One di Coxsone Dodd a Brentfoard Road, a Kingston.