V svet Banke Slovenije je bil imenovan leta 2003, tako da bi svoj redni mandat zaključil septembra prihodnje leto. V času svojega mandata se je med drugim neuspešno potegoval za mesto guvernerja slovenske centralne banke, vendar se je takratni predsednik države Janez Drnovšek odločil, da med dvema predlogoma izbere za svojega kandidata Mitjo Gasparija. Slednji, kot je znano, sicer v parlamentu ni dobil zadostne podpore, del zaslug za to so takrat pripisovali tudi lobiranju Jazbeca pri parlamentarni desnici, ki je kljub prvotni obljubi o podpori (med drugim takratnega premierja Janeza Janše) na glasovanju svoje glasove odtegnila Gaspariju.

Tudi s sedanjim guvernerjem Markom Kranjcem naj bi si Jazbec pri različnih strokovnih vprašanjih večkrat prišel navzkriž, zato ne preseneča, da si je, še posebno zadnje čase, iskal nove izzive. Tako se je med drugim dogovarjal, da bi prevzel mesto člana uprave Nove Kreditne banke Maribor, saj, kot je znano, nadzorni svet te banke preučuje možnost širitve oziroma sprememb v upravi naše druge največje banke. Zaradi omahljivosti nadzornega sveta glede sprememb pa se je Jazbec očitno naveličal in je ocenil, da v tem trenutku v Sloveniji zanj ni možnosti, da bi si našel primerno službo.