Za jego sprawą Austria przeżyła boom skoków narciarskich na początku lat 90.
W 1993 i 1996 r. był wybierany "Sportowcem roku" w Austrii.
17. marca 1994 r., w Planicy, jako pierwszy zawodnik w historii, przekroczył granicę 200 m, jednak upadł przy lądowaniu. Dlatego pierwszy oficjalny rekord poza granicę 200 m należy do Toni Nieminena, został ustanowiony tego samego dnia i wynosi 203 m.
W 1997 r. Goldberger przyznał się do brania kokainy, za co został zawieszony na sześć miesięcy przez Austriacki Związek Narciarski. W tym czasie zastanawiał się nad zmianą drużyny m. in. na Serbię, jednak ostatecznie pozostał w drużynie austriackiej.
Od sezonu 2005/06 analizuje konkursy skoków w austriackiej telewizji.
W 2006 r. wziął udział w telewizyjnym tanecznym show i zajął drugie miejsce wśród dziesięciu par.