桥始建年代不详，南宋咸淳三年（1267年）重建。桥为五孔梁式石桥，南北走向，现河道已淤积。长24.6米，宽1.7米。中孔左右桥墩石砌，上下游均砌分水尖。南北首桥墩每缝则以三根方柱并列，上横帽梁石。中孔石梁一侧刻有“宋咸淳三年丁卯良月重建”题记。

　　该桥保存完整，造型古朴，有确凿的纪年，是研究古代桥梁的重要资料。2006年赤溪五洞桥作为宋代的古建筑，被国务院列入第六批全国重点文物保护单位。