A három nyelvből felsőfokú nyevvizsgával rendelkező Szilvásy a Marx Károly Közgazdaságtudományi Egyetem nemzetközi kapcsolatok szakán végzett 1982-ben, 1989-1990-ben a Minisztertanács Hivatalában miniszterhelyettes, majd pedig 1990 és 1995 között a Miniszterelnöki Hivatalban volt a gazdasági ügyek, az informatika és a nemzetközi kapcsolatok területeinek helyettes államtitkára. Ezután három évig a Környezetvédelmi és Területfejlesztési Minisztérium közigazgatási államtitkára, 1998 és 2000 között az Altus Rt. igazgatója, majd pedig a Perfekt Rt. vezérigazgatója.