北安故城遗址在安城村东，1956年第一次文物普查定为省级重点文物保护单位。遗址处在山间平地，是两面临沟的长方形高台地，俗称“东台子”。遗址南北长134米，东西宽75米，总面积12000平方米。从四周断崖可见，文化层深约5～7米不等，暴露有灰坑、窑坑及红灰陶、夹沙陶片、兽骨、鹿角、蚌壳等少量磨製石器等遗物。1960年代初，在遗址西南曾出土过一批完整的青铜器、灰类沙陶罐等物。2002年，在遗址北边沿出土了一罐秦、汉时期的钱币。文化层上限为商代早期，下限为汉代，是商周到汉代的邑城遗址。据《续山东考古录》载：汉北安故城“在县东十里，今安城铺”。《汉书.淮南衡山济北王传》：“济北王宽，自刎死，国除。为北安县，后併入卢。卢，西汉为卢县，在今长清，济北国除，为北安县，则王宽所都。”又曰：“汉文帝前元元年，于卢县西南筑城，为济北国治。国除后为北安县城。”据上所述，此处是汉时的北安县故城遗址。

济北故国故城位于乡政府西侧。古遗址在周为卢，“齐公子採食于卢”。汉文帝三年（前177年），匈奴侵入代地，文帝亲临抗匈。6月，刘章、刘兴居在济北起兵反叛，文帝放弃攻打匈奴，率军十万在荥阳攻破叛军。自此，济北国除，改为济北郡。十三年后，立悼惠王子刘志为济北王，复为国。汉武帝秦初元年(前104年)，泰山封禅时，济北国改为郡。后为北安县，又改卢县。