Památník národního písemnictví získal v roce 2010 převodem z Ministerstva obrany ČR prostory (bývalá kasárna v Litoměřicích) za účelem vybudování Centrálního depozitáře. V letech 2011–2012 byl vytvořen projekt a rekonstrukce I. etapy proběhla v letech 2014–2015. Počátkem roku 2016 došlo ke stěhování sbírek do objektu č. 1 (depozitář literárního archivu) z pronajatých prostor ve Starých Hradech a na zámku Duchcov. Závěrem roku 2019 byla zkolaudována i druhá budova depozitáře pro Oddělení uměleckých sbírek. V Centrálním depozitáři v Litoměřicích se nacházejí moderní depozitní technologie, kompaktní regály a specializované místnosti pro uložení nestabilních materiálů (fotoarchiv, audio-video archiv a další magnetické záznamy). V objektu jsou dále vyčleněny prostory pro pořádání velkých archivních celků, digitalizační a restaurátorské pracoviště, servisní pracoviště a badatelna.

Budovy, původně areál dělostřeleckých kasáren, byly postaveny před rokem 1914 a jako kasárna sloužila i v době první republiky. V letech 1944–1945 zde byli internováni vězni pracující v prostorách nedalekého podzemního továrního komplexu Richard. Po válce zde působila Československá lidová armáda a poté Armáda České republiky, která je jako kasárna užívala až do konce devadesátých let 20. století.