人们还猜测，或者那一夜缘起楼的人根本就没有离开，而是那缘起楼的女子本身就是鬼魅化身而成，然后专门吸引男人阳气，当时不知哪根经抽错出来差池销声匿迹，等过段时间便又继续出来作祟。
当然，这份传言是无奈当初夫君或者是儿孙迷恋那鬼楼的妇人女子所言，窑客们想的缘起楼那一夜必定出现了不为人知的事情，那些缘起楼的女子随同曾经被誉为西南道第一美人的简窈一同死在了里面，只是后来死后心怀怨气然后成了厉鬼在缘起楼盘旋着。
可无论怎么猜测，人们再就没谁敢去调查那一夜到底发生了什么事情，便是官府对这件事也是缄默不言，本地的人更是不敢提及，所以当时未曾警告那帮外乡人也是在于此。
渐渐的，鬼楼坐镇安山城，谁也动不得，也不敢动，连接近都有些忌讳，那爹娘有时教训不听话调皮的小孩都骂:“再惹事让你在鬼楼外面站一晚上。”
这样的威胁无往而不利。
不过现在就有两人一大一小站在了鬼楼面前，官府在离着门槛还有一丈远的地方树起了两块牌子，其中一块上面写着“凶宅，不得靠近。”，另外一块写着奇奇怪怪的符文，是道家镇鬼符，听说是当时的云州令尹亲自从西南大山中请出了位深解道法