V roce 1771 bylo započato se stavbou fary u zámku a nového farního kostela sv. Josefa, protože kostel Povýšení sv. Kříže byl kostelem kláštěrním. Byla však postavena pouze fara v barokním slohu s taškovou mansardovou střechou. Na pilířích při vjezdu byly pískovcové rokokové vázy. Byla vysvědcena v roce 1773. Vedle fary na pozemku zahrady, naproti zámku měl stát kostel, ale z finančních důvodů z této stavby sešlo. Na farské zahradě, západně od fary zůstaly pod zemí stopy započatých základů.
Knihovna byla založena v r. 1957 a umístěna v horním patře budovy staré fary. Takto fungovala do roku 1970. Počátkem 70. let byla přestěhována do přízemí a rozdělena na dvě oddělení – pro dospělé a pro mládež. V této době již byla pobočkou Okresní knihovny v Mladé Boleslavi a byla vybavena novým zařízením. V roce 1985 se prováděla oprava celé budovy a v roce 1997 byla převedena do majetku města Kosmonosy.
Městská knihovna Kosmonosy dnes sídlí v Debřské ulici čp. 223.
