曹氏宗祠始建于明，清代重修。据《富阳曹氏宗谱》记录，乾隆三十年（1765）起筹措资金，至乾隆五十七年阳月（1792年农历十月）建成。

建筑坐西北朝东南，砖木结构，硬山顶，由前厅、正厅、后堂、天井、厢楼组成，占地面积832平方米。宗祠外观气派，青石砌壁，八字门，有龙骨椽卷棚廊。廊梁架雕以人物、龙凤、花卉图案。前厅面阔五间，后期搭建戏台。台柱牛腿为狮子图案，雀替装饰人物图案。天井呈长方形，两边设厢楼。厢楼看台栏板浮雕人物花鸟等图案。檐下有垂莲柱，垂莲柱顶部有装饰撑拱。正厅面阔五间，三合地，五架梁，方石柱。檐柱牛腿圆雕狮子图案。斗拱花俏。正厅屏门后设鱼池和后厢房。后堂高于正厅。堂前用青石砌成走廊，用木板隔墙。

曹氏宗祠建筑气势宏大，用料考究，木雕雕工精美古朴，具有较高的文物价值。