Báger Gusztáv az MTI-nek felidézte, hogy már középiskolás korában is rendszeresen foglalkozott irodalommal annak köszönhetően, hogy Szombathelyen, ahol középiskolába járt, olyan országosan ismert költő kezdett vele foglalkozni, mint Káldi János. Az volt a szokása, hogy amikor megmutattam neki a verseimet, akkor ő nagyon szépen körülírta, javaslatokkal, észrevételekkel látta el azokat – beszélt a kezdetekről a költő. 
    
Amikor Budapestre került a Közgazdasági Egyetemre, akkor kezdett költői estekre járni és ott ismerkedett meg Simon István Kossuth-díjas költővel, aki a szárnyai alá vette. Rajta keresztül ismerte meg Juhász Ferencet és a Kossuth- és József Attila-díjas Nagy Lászlót. Báger Gusztáv akkoriban egy ifjú költőcsapatnak is a tagja volt, ahol olyan ismert költők voltak, mint például Kalász Márton. "Így kezdődött az irodalmi tevékenységem, utána viszont 30-35 évig közgazdászként dolgoztam, persze közben írtam is, de nem siettem sehová" – tette hozzá. 
    
Aztán – ahogy Báger Gusztáv fogalmazott - egy csoda folytán megismerkedett Géher István irodalomtudóssal, költővel. "Átnézte a verseim jelentős részét és úgy döntött, hogy ezeket célszerű volna kiadni, így lett Géher István az első verseskötetem szerkesztője és inspirátora, ami 1996-ban jelent meg" – mondta el Báger Gusztáv. 
    
Nem sokkal később egy másik "csoda" is történt az író életében: amikor megjelent a második kötete és a munkahelyén dolgozó takarítónő meglátta az asztalán, megkérdezte, hogy elviheti a könyvet a Kossuth-díjas költőhöz, Tandori Dezsőhöz, mert ő ott a bejárónő. "Így került a kötetem Tandori Dezsőhöz, aki azonnal írt egy csodálatos kritikát a könyvről a Bárka című folyóiratban és egy nekem ajánlott verset" – jegyezte meg. 
    
Báger Gusztávnak 1996-tól számítva 15 magyar nyelvű verseskötete jelent meg, a legutolsó alig pár napja. A 15. kötetem különös címet visel: 75. "Ez tulajdonképpen egy költői breviárium, kiemelések vannak benne korábbi verseimből, filozofikus jellegű rövid felvillanások és természetesen tartalmaz új verseket is. Számomra azért volt fontos, hogy összeállítsam ezt a kötetet, mert ezzel akartam meghálálni a versolvasóimnak azt a figyelmet amit az én tevékenységem felé fordítottak" – vallott a kötetről az alkotó. 
    
A 15 magyar nyelvű kötet mellett eddig négy idegen nyelvű kiadása is megjelent a költőnek. Hozzátette: kettő német, egy francia és egy angol nyelvű válogatott kötete jelent meg. 
    
Báger Gusztáv azt tervezi, hogy a jövőben is évente minimum egy könyvel fog jelentkezni. Hozzátette: tele van tervekkel, a jövő évi könyvhétre is megjelenik egy kötete, amely inkább közéleti verseket fog tartalmazni.