Špeciálna základná škola v Žarnovici bola zriadená ako Osobitná škola v Novej Bani 01.09.1975 vtedajším Okresným národným výborom, odborom školstva v Žiari nad Hronom. OŠ bola umiestnená v starom, na asanáciu pripravenom rodinnom dome. Túto budovu, aj keď bola hygienikmi zatvorená, si prví žiaci OŠ v Novej Bani pod vedením učiteľky pripravili k tomu, aby im mohla slúžiť na vzdelávanie.

      V školskom roku 1975/76 sa otvorili dve triedy OŠ, ale v priebehu roka sa znížil počet žiakov a jedna trieda sa zatvorila. Spočiatku slúžila OŠ v Novej Bani len pre žiakov od 1.-5. ročníka. Do vyšších ročníkov dochádzali žiaci do OŠ v  Žiari nad Hronom alebo OŠI v Kremnici. V tom čase mali možnosť absolventi OŠ pokračovať v štúdiu POU v Novej Bani, kde po vyučení získali výučný list. Za pôsobenia OŠ v Novej Bani, škola dosiahla veľa úspechov v oblasti detskej tvorivosti, zabezpečili sa mnohé družobné kontakty s okolitými OŠ, s patronátnymi závodmi.

     V rokoch 1981-1990 dosiahla OŠ v Novej Bani najväčší rozmach. V r. 1981 sa zriadili dve alokované triedy v Žarnovici. Riaditeľstvo OŠ zostávalo vždy v Novej Bani, kde boli dve triedy 5. a 7.ročníka OŠ. V r. 1984 vznikla ďalšia alokovaná trieda v Hodruši – Hámroch, časť Dolné Hámre. V r. 1985 bola pri OŠ v Novej Bani zriadená ŠKD s jedným oddelením, s počtom žiakov 12-14. ŠKD mala samostatnú miestnosť, ktorá bola vybavená pracovnými stolmi, televízorom, váľandou a kobercom. OŠ pripravovala mnohé podujatia. V športových podujatiach sa žiaci OŠ niekoľkokrát za sebou umiestnili na prvých miestach v rámci celého okresu a získali putovný pohár a mnohé vecné ceny. 70% žiakov OŠ bola rómskeho pôvodu. Pre týchto žiakov sa každoročne pripravovali počas letných prázdnin letné tábory pre rómske deti. OŠ navštevovali žiaci s poruchami reči, zraku, ale aj tažkovychovávateľní žiaci a žiaci, ktorí potrebovali psychiatrické preliečenie. Najväčším problémom žiakov OŠ bolo, aj je záškoláctvo.

     Na OŠ v Novej Bani sa počas jej existencie vymenilo mnoho učiteľov, väčšinou nekvalifikovaných. Tým, ktorým sa práca v OŠ stala zaujímavou, rozhodli sa zotrvať a doplnili si vzdelanie o špeciálnu pedagogiku. Riaditeľstvo OŠ zostalo v Novej Bani, v bývalej materskej škôlke pri cintoríne. V Novej Bani boli triedy OŠ, v druhej budove OŠ v Dolných Hámroch, ktorá bola vzdialená 18 km, boli ďalšie triedy a  školský klub detí.      

     K 1. septembru v roku 1999 bola presťahovaná celá škola do jednej budovy do Žarnovice, bývalej materskej škôlky. Časť budovy bola postavená v roku 1967 a celá stavba budovy bola dokončená v roku 1976.  Začiatky v  nových priestoroch boli veľmi ťažké a zložité. Potrebné bolo vyriešiť množstvo problémov: zariadenie a vybavenie školy, rešpektovať požiadavky zo strany ZŠ Andreja Kmeťa (cirkevná škola) z dôvodu spoločného vchodu, využívanie športového ihriska a školského dvora (majetok cirkvi). Boli uskutočnené stavebné práce a úpravy. Prebudovali sa triedy, osadili sa dvere, ktoré školu spájali s cirkevnou ZŠ, prebudoval sa zadný vchod, ktorý slúži ako hlavný vchod, ale i únikový východ pre školu. Sťahovanie a zariaďovanie prebiehalo väčšinou svojpomocne – za pomoci rodičov, žiakov a zamestnancov. Priestory boli vcelku vyhovujúce. Vybudovali sa priečky, čím sa získali navyše učebne. ŠZŠ má cvičnú kuchynku. V budove nie je telocvičňa. Na vyučovanie telesnej výchovy sa využívajú športové areály ZŠ a ihriská. Presťahovaním sa do nových priestorov pribudli aj noví žiaci. Dodnes je škola plnoorganizovaná.

     V súčasnosti v ŠZŠ je šesť tried, kde  pracuje trinásť pedagógov, z toho dve vychovávateľky ŠKD a dve asistentky, jeden pedagóg na dohodu a pán riaditeľ. Nepedagogické pracovníčky sú dve, jedna, ktorá vykonáva funkciu administratívno – hospodárskej pracovníčky a jedna upratovačka.