Billy Baxter cominciò a scommettere ai 14 anni. In sale da biliardo fece conoscenza del poker gratis. Su richiesta di sua madre, Billy andò al Collegio di Augusta ma lo abbandonò all'anno e mezzo, dopo provò vendendo enciclopedie di porta in porta e finì lasciandolo per dedicarsi tempo completo alle scommesse e sì che fu una decisione azzeccata. Nel primo anno aveva guadagnato 40000 dollari.

Tutti i guadagni che lui aveva generato dedicandosi alle scommesse li versò sul'acquisto di un casinò illegale: il “Paisley Club”, ma pochi anni dopo ha dovuto chiudere per ordine della polizia. Questo lo motivò ad aprire un altro casinò nella periferia della città che diventò molto popolare durante il “Masters Golf Tournament”. A metà del campionato di 1975 l'Ufficio d’Investigazione della Georgia fece un’irruzione nel negozio di Baxter capitandoli una permanenza di nove mesi nell'Istituto Correttivo di Richmond County. Lì passava il tempo giocando al poker con un limite di 1 dollaro.

La sua permanenza in prigione lo fece decidere trasferirsi a Las Vegas, l'unico luogo dove poteva dedicarsi alle scommesse di forma legale. “Era il paradiso, a volte i piatti erano di un milione di dollari e c'erano molti padroni di grandi hotel e casinò che adoravano giocare, ma non lo facevano molto bene, ho guadagnato tanto denaro che mi sento colpevole per questo”, disse Baxter.

Billy Baxter ha giocato sempre lo stesso stile di poker ed ebbe lo stesso successo nei tornei come nelle gare per denaro. Il suo primo braccialetto di oro lo ottenne nell'evento “Deuce-to-seven Draw” di 1000 dollari nelle World Series of Poker di 1975 e dopo sommò altri sei.