清嘉庆《瑞安县志》载，曹姓于五代自福建长溪迁来。据传，五代十国时期的后晋年间(936-947年)，福建的闽国发生了内乱，曹霭、曹雷、曹昌裔兄弟为躲避战乱，带着家人从福建长溪迁居到这里，经过200多年的繁衍，曹家发展成为当地第一家族，从此许峰就改叫曹村。传说昔时曹村有“十里长街”“七车八碓”。车(gī)即油车，旧时榨油作坊碓:水碓，利用水位落差为动力，旧时碾米磨粉作坊。

曹姓始居以姓名村

一条条古道逶迤于青山绿水之间，越过山岭通向集市码头。曹村有民谚“舻艚头两根黄鱼，曹村有一根份”，意为曹村街占了渔码头一半的市场份额，可见经济之繁荣。曹村老街的店堂门老旧而歪歪斜斜，窗在横风斜雨之下露出原木的本色。挑梁上刻有瑞兽与花鸟，表达了祈福纳吉的企盼，对富裕安康生活的向往。曾经繁荣的老街，温暖如井水的街坊生活，长久地停留在老人的记忆之中，挂在老人的嘴上。

史载，曹氏始祖曹霭与兄弟曹雷、曹昌裔，从福建之长溪迁到安固之曹村庄，他们为人正直，乐于施舍，死后，老百姓建庙供人祭祀。宝庆三年(1227年)，诏封霭顺佑广福昭德王，封霅顺应广惠昭泽王，封昌裔顺济广宁昭显王，敕赐祠额为孚泽庙。“孚泽庙”匾额敕赐于南宋宝庆二年(1226年)，有近八百年的历史了。乎泽庙仍在，位于现在曹南村，人称曹三王祠堂。