不过当时规模不大，约为现在庙宇的的六分之一。

永安寺建筑雄伟壮观，分上、中、下三大殿，下殿是一座八角翘檐式楼房，中殿和上殿是整个寺院的主体，式样古朴典雅。中殿为宋式建筑。总共有大小神像百余尊。还有大小钟鼓若干。钟最大的口径约1.1米，鼓最大的直径约1.2米。永安寺的工艺美术非常精湛，工艺主要分为三大类，即木雕、石雕、泥塑。

下殿檐下嵌有很多菱形木格，木格上镶有很多花。高八尺许的灵官菩萨（木雕）挥舞钢鞭，怒目圆睁，其余神像分列两旁。中殿的三尊大佛屈膝而坐，为释迦牟尼佛、地藏佛和弥勒佛。每尊臀围约3.5米，由若干快木料镶嵌而成，其形象夺人神魂。

永安寺的石雕、石刻非常精湛。上殿有四根廊柱，其柱础是石狮石象各两头，形象逼真。石象矫健憨厚，石狮威武顽皮。那雄狮左前脚着地，右前脚玩着绣球。雌狮右前脚着地，左前脚抚摸着一头幼狮，粗犷中显出母爱。其余石浮雕、石刻同样令人叹其技艺。永安寺的菩萨有不少是泥塑。众多的菩萨形态各异、栩栩如生。缠绕在井口柱上的两条金龙，更是活灵活现。

永安寺尝扩葺数次。明万历年间（1573-1619），母俊主持维修，其规模仍旧。清康熙四十年（1701年），母从圣主持扩建，增修中殿。清乾隆三十五年（1771），寺住持王道人动庙产而葺新。嘉庆年间（1796-1820），母命庆等主持修补破败，塑像百尊。此间，亦有母元豪、母元海等倡修下殿（戏楼）。民国二十四年（1935），母正玺（字玉超）倡将已倾塌之上殿拆除重修。二十八年（1939），母光尧等创立笔阵小学（今云安小学前身），建校于中、下殿间两廊。至此，寺校一体，三级联体二天井。