黄岩区图书馆历史悠久。清朝同治八年（1869年），黄岩县令孙熹在九峰寺建立九峰书院，藏经史百家古籍三万余卷，供学人士子阅读，为台州较早建立的私办公有图书馆，迄今已有一百四十多年的历史。民国元年（1912年），九峰书院改称为黄岩县立图书馆。1956年6月15日，成立黄岩县图书馆，是中华人民共和国成立后全省首批新建县、市公共图书馆之一。

黄岩图书馆几度搬迁。现今的黄岩区图书馆位于黄岩孔庙西侧，西邻直下街，建于1990年，馆舍面积1100平方米，有阅览座席100个，藏书16.9万册（古籍4.9万册，其中善本144种1560册，国家珍贵古籍5部，省级珍贵古籍3部）。在职职工20人（其中编外员工2人）。图书馆设办公室（宣传推广）、采编与网数部（采编室、科技阅览室）、古籍与地方文献部（古籍室、地方文献室）、流通部（外借室、报刊阅览室、少儿借阅室）四个业务部门。外借实行全开架借阅，报刊阅览室、少儿阅览室、科技阅览室、地方文献室免费为读者提供服务。科技阅览室、少儿阅览室共配备电脑20台，数码复印机1台；开通中国知网“学术期刊全文数据库”和智联“超点考试数据库”，读者通过文化共享工程黄岩支中心网站上网浏览、下载资料。为方便读者借阅，黄岩区图书馆2013年开始每周开放时间56小时，周六、周日正常开放（少儿阅览室全周开放）。

黄岩图书馆曾于1989年被省文化厅授予“文明图书馆”称号。1994、1999、2013年相继被文化部评为“国家二级图书馆”。2001年被黄岩区委、区政府评为“文明单位”。2013年被浙江省人民政府评为“省级重点古籍保护单位”。