孔庙始建于北宋元丰六年（1083年），这是黄岩唯一的有详细修建年代的古建筑。将近十个世纪中，有记载的修建有28次之多，历经风、火、兵之灾，至今仍巍然屹立于闹市之中。黄岩孔庙存大成殿、大成门、两庑、衣亭、神祠、奎星阁等建筑37间，系清代中期重建重修，为浙江现存较为完整的文庙建筑群。1989年12月，列为省级重点文物保护单位。大成殿五楹，重檐歇山项。正脊砌“天开文运”四个大字砖刻，两旁并饰两组飞龙舞凤砖雕，是黄岩孔庙特色。重檐八角，均以飞椽出檐，翘角高昂，黄瓦明丽，具江南庑殿式建筑风格。大殿明间抬梁式结构。倚墙檐柱均为石柱以防潮和防蛀，可见当年设计者匠心。大柱均为合抱柏木，柱础刻花繁缛，有两龙抢球、凤戏牡丹、喜鹊衔梅和宝相花、缠枝花等装饰。副价卷棚式结构。前檐柱柱头饰龙、狮、凤透雕，为黄岩清代中期雕刻工艺佳作。
大成门又称戟门，古代设仪仗，所谓列戟之地。泮池又称半月池，也是孔庙特有建筑。古代中秀才，可以进入孔庙，称入泮。东偏还有奎星阁，《孝经》说奎星主文章。老戏庆寿时演“奎星点中”，扮一黑面独脚跳的奎星一手执笔，一手执斗舞于台上。
孔园是在古代孔庙的明伦堂、崇圣祠、尊经阁旧址上新建的公园。园虽新建，却多古树名木奇花异石，伴以长廊、假山、亭轩、曲沼也是孔庙一景。千年古樟历经沧桑依然屹立街旁，老树新枝四季常青；古杏树是活化石，几经坎坷如今也昂首园林；罗汉松是妙智寺数百年老树，寺废而树存；千年老勿大黄杨树是同仁堂三百年旧栽，迁至新居后，千枝竞秀。南天竹椅墙而茂，山杜鹃临街烂漫，金桂曲径飘香；蟠桦如伞，榴花似火，还有名花紫薇，更把孔园装点得古色古香了。
过去，孔庙只在春秋两祭时开门，让文人学士特别是有功名的官员进来，所以门虽设而常关，庙内荒草没胫。1989年孔庙、孔园再一次修建，迎来纷至的游。有人作联曰：古庙接长街，看江天一色；新亭邻闹市，赏灯火万家。
