Inspektori i ovlašćeni službenici imaju odgovornosti za povrede radne dužnosti kao i drugi službenici — utvrđene propisima o državnim službenicima (odnosno o službenicima AP i JLS) i dele se na lakše i teže. Pored toga, ZIN utvrđuje posebne, dodatne odgovornosti.
Prema ZIN-u, inspektor i ovlašćeni službenik posebno je odgovoran u četiri slučaja: ako u vršenju nadzora ne preduzme, ne predloži ili ne odredi mere ili radnje za koje je ovlašćen; ako ne predloži ili ne pokrene postupak utvrđen ZIN-om a bio je dužan; ako prekorači granice svog ovlašćenja; i ako obavlja privredne ili druge delatnosti za sebe ili drugog poslodavca iz oblasti u kojoj vrši nadzor, učestvuje u radu tela nadziranih subjekata ili obavlja poslove suprotne položaju i ulozi inspektora i štetne po njegovu samostalnost.
Ove posebne odgovornosti imaju za cilj da obezbede savesno, potpuno i nepristrasno vršenje nadzora i da spreče sukob interesa.