老楼建于明朝万历十三年，坐西北向东南，为“二堂四横一围龙”布局的围龙屋，正堂刻有“於萬斯秊”横匾。拥有独特“走马墙”，大门形似明朝“官帽”。据载，作为古村历史最悠久的古民居，老楼先主姓杨，当年本地潘氏始祖铭德公，初来仙塘经营鱼种买卖，借居杨府。发家致富后，就在老楼的斜对面建造了新楼，潘氏家族由始发展壮大，后杨氏也将老楼出售给潘氏家族，迁徒他乡。至此，老楼就成为仙塘潘氏家族的开基地。潘氏后人为铭记铭德公祖德，在祖祠大门常贴一对联：莲塘鲤化，蝶岭花明。