Den slovenske backen Bostjan Cesar glidtacklade bort sig och Landon Donovan fick en stor gratisyta fram till mål. Den möjligheten gjorde mittfältaren något speciellt med.
Målvakten Samir Handanovic kramade stolpen när Donovan trycke upp bollen i nättaket från snäv vinkel. Det målet kom i den 48:e minuten.
Det målet innebar reducering till 1-2 - och var starten på en amerikansk tokoffensiv.
Efter flera halvchanser var det förbundskaptenens son, Michael Bradley, som stod för kvitteringen. Jozy Altidore nickade ner ett inlägg som Bradley med ett tillslag ordnade 2-2 på.
Med fyra minuter kvar att spela gjorde sedan Edu 3-2 till USA - men målet dömdes bort av den maliske domaren Koman Coulibaly.
-Det var ett regelrätt mål, sånt kan man inte döma bort. Det får inte hända i ett VM, säger Landon Donovan.
-Det var hans första VM och han var kanske nervös men det här får verkligen inte hända. Vi fick inte ens någon förklaring.
Men 2-2-målet innebar ändå att USA inte bara var tillbaka i matchen - de var tillbaka i VM-slutspelet i Sydafrika.
-Vi lever fortfarande och nu satsar vi på matchen mot Algeriet, säger Donovan.
Dessförinnan hade USA visat upp ett naivt och positionssvagt spel.
Slovenien agerade smart och utnyttjade USA:s svagheter gång på gång. Valter Birsas 1-0 var ett sådant tillfälle.
Mittfältaren tassade in mellan USA:s mittfält och försvar. Lite extra yta gav honom lite extra tid och från 30 meter satte han sedan läckert 1-0 till höger om Tim Howard.
2-0 kom också efter att Slovenien utnyttjade USA:s svaghet. I en spelvändning låg USA:s mittbackar Jay DeMerit och Oguchi Onyewu helt fel i positionsspelet. Milivoje Novakovic stack in bollen till Zlatan Ljubijankic, som inte gjorde något misstag i friläget med Howard.
-Jag tror inte att det är många lag som kan repa sig och hämta upp ett 0-2-underläge, säger Landon Donovan.