Det var i 1947, da det lykkedes den irsk-amerikanske bokser at få en kamp mod Sugar Ray Robinson, verdensmesteren i weltervægt. Det skal nævnes, at der er folk som mig, der betragter Sugar Ray Robinson som en af de ti bedste boksere gennem tiderne. Hvis du får mulighed for det, så se det KO-højdepunktsholder, som jeg har indlejret i dette indlæg. Når Sugar Ray lukkede sig om dig, udløste han en nådesløs stenhård byge af slag, der bare tog folk fra hinanden.
Den 25. september 1947, under en kamp mod Sugar Ray, var Doyle bagud i alle de første seks runder og formåede at lamme Sugar Ray i syvende og ottende runde. Et solidt venstre hook i den næste runde satte Doyle ud af spillet. Han var bevidstløs i omklædningsrummet og blev bragt til St Vincent’s Charity Hospital i Cleveland. Han kom aldrig til bevidsthed igen. Han havde i øvrigt tidligere fået hovedtraumer i tidligere kampe. Wil Haygood , Robinsons biograf bemærkede, at Doyle forsøgte at “købe et hus til sin mor, og efter Doyles død i 1947 gav Robinson indtjeningen fra sine næste fire kampe til Doyles mor, så hun kunne købe det hus.”