安仁古镇上的名人宅院有刘氏庄园、刘文辉故居，还有刘湘公馆。这三个人的关系，刘文彩和刘文辉是亲兄弟，文彩行五文辉行六，文辉担任川军旅长驻扎宜宾时，文彩先后担任宜宾烟酒分局局长、叙南船捐局长、川南护商处长、川南禁烟查缉总处长、川南捐税总局总办、叙南清乡中将司令等职务。凭借这些财权与军权，刘文彩横征暴敛，让川南人民饱受其害，还曾镇压工农运动，屠杀共产党人，犯下了累累罪恶。而这个刘文辉，字自乾法号玉猷，与刘文彩同为刘湘的堂叔，长期担任民国二十四军军长，势力最盛时接受过老蒋亲颁的四川省长委任状。后为争夺川省霸权，与堂侄儿刘湘在一九三二年反目成仇大打出手，最终刘湘大胜后说过：我幺爸腰杆不能硬，硬就要出事。我不是要搞垮他，主要是压压他的气焰。一笔写不出两个刘字，总是一家人嘛。我还是让他保留部分军队，以待西康建省由他任省主席。刘文辉自此偏安西康，于一九四九年十二月率部通电起义加入革命阵营，并把他的安仁旧居交还给人民手中。