Bruunhåbs papfabrik blev opført i 1821, som klædefabrik af fabrikant Bertel Bruun, hvis sønner Peter Daniel Bruun og Mads Pagh Bruun overtog fabrikken. Den sidstnævnte anlagde I 1852 en aflægger af virksomheden I form af klædefabrikken ny Bruunshåbs ved Aarhus, hvor han blev en meget fremtrædende borger og fik M.P. Bruuns gade opkaldt efter sig.
Efter en stor brand på klædefabrikken I Bruunshåb blev der I 1909 opført en ny hovedbygning, tegnet af arkitekten søren vig-nielsen. Indtil 1919 fungerede fabrikken som klædefabrik. Men I 1916 var den overtaget af a/s j. Smiths papfabrik, som indrettede den til papproduktion, der startede I 1920.
Bygningerne har været fredet siden 1999.