建筑为群体组合形式，杨家园柱式为科林斯柱式，凹槽廊柱挺拔，压条钢花雕饰线条流畅明快，前窗选形别致，有圆拱和尖拱，窗楣雕塑各不相同，建筑内不装修豪华别致，建筑群的副楼与主楼风格吻合，浑然一体。建筑群环境优美。

建筑主人杨忠权，祖籍龙溪，儿时赴苏随伯父做生意，创办“铁业公司”。1913年回鼓浪屿建此楼。杨过世后，后人将楼房改称“忠权楼”，以示对先人的纪念。