Varga holte seine ersten Titel im Alter von 18 Jahren als Teil der ersten Mannschaft des ASKÖ Linde Linz. Mit den Oberösterreichern konnte der Rückraumspieler 1995/96 ein weiteres Mal das Double aus Meisterschaften und Cup gewinnen.[1] Für die Linzer war er, mit einer Unterbrechung in Klagenfurt, bis zur Saison 1999/00 aktiv.[2] Anschließend nahm ihn der Alpla HC Hard unter Vertrag.[3] 2002 beendete der gebürtige Stahlstädter frühzeitig seine Anstellung bei den Vorarlbergern, um seinem ehemaligen Trainer Zoltan Cordas zum TV Suhr zu folgen.[4] Nach nur einer Saison bei den Schweizern wechselte er zurück in die HLA zu Bregenz Handball.[5] In seiner Zeit bei den Bregenzern konnte er jedes Jahr den Meistertitel und einmal das Double feiern. Außerdem nahm die Mannschaft wiederholt an der EHF Champions League teil und erreichte dabei mehrmals die Gruppenphase. 2010 verlängerten die Landeshauptstädter seinen Vertrag aufgrund einer geplanten Verjüngung des Teams nicht. Kurz darauf wurde er erneut vom HC Hard engagiert.[6] Seine letzte Spielzeit bei den Hardern krönte Varga erneut mit dem Österreichischen Staatsmeistertitel, damit konnte er während seiner aktiven Karriere zehnmal diesen Titel gewinnen.