但是刘曜对后方的氐羌势力总是放心不下，过年后又率领大军征讨氐族酋长杨难敌。但行军途中开始流行传染病，刘曜自己也得了重病，就派遣使者和杨难敌讲和，准备回兵。
半路上秦州刺史陈安请求拜见刘曜，刘曜以病重为理推辞不见。陈安以为刘曜已经死，就率部下造反，突袭刘曜的军队。当时刘曜已经先走，断后的部将呼延寔被陈安抓获。陈安将呼延寔斩首，又命令弟弟陈集率领骑兵三万追击刘曜。半路上被刘曜部将卫将军呼延瑜拼死拦截。陈集杀死呼延瑜后，刘曜已逃到长安了。陈安就自称大都督、大将军，反叛前赵。
第二年，陈安进攻攻驻守南安的刘曜部将刘贡，这时少数民族首领休屠王石武派兵袭击陈安的后方。陈安转身反击石武。石武不敌陈安的部队，往后败退，这时刘贡又从背后进攻陈安的后军，消灭了一万多人。陈安只好又回头解围。哪想石武一看陈安停止攻击了，又粘糊上来，大败陈安的部队，陈安只有八千人逃到了陇城。(惭愧，我也不知道这是哪里:-<估计是天水一带)刘曜刘曜亲自包围陇城，并派遣部将平先围剿陈安在外地的余党。陈安还想逃出陇城寻找增援。就率领五百骑兵半夜突围。平先也率领数千骑兵在后面追击，杀死了四百多人。把陈安和十多名亲兵包围在一条峡谷里。
陈安左手拿着七尺大刀，右手使丈八蛇矛，(看来丈八蛇矛并不是张飞的专利)单人独骑堵住峡谷口，连续杀死五六名骑兵，这时天空下起了暴雨，在电闪雷鸣下，其余人都被陈安的神勇吓住不敢进攻。平先正好过来看战况，就亲自纵马过来和陈安交战。只三个回合就把陈安的蛇矛给抢了过来。陈安只好狼狈逃跑。
天色已晚。陈安的坐骑叫做聂骢，是西域产的宝马，平先等人根本追不上。但到了半夜下大雨看不清楚山路，聂骢马竟然坠落山谷。陈安只好步行逃跑。平先命令部队把山围起来搜。终于活捉陈安将其斩首。
陈安平时对老百姓挺不错，和将士的关系也很好，陈安死后百姓都很怀念他。有人写了一首《壮士之歌》来怀念他。歌词为“陇上壮士有陈安，驱干虽小腹中宽，爱养将士同心肝。聂骢父马铁瑕鞍，七尺大刀奋如湍，丈八蛇矛左右盘，十荡十决无当前。战始三交失蛇矛，弃我聂骢窜严幽，为我外援而悬头。西流之水东流河，一去不还奈子何！”刘曜听了以后非常感伤，命令众军传唱这首歌。又任命亲前赵的匈奴人姚弋仲为平西将军镇守陇西。