西汉陇西上邽(今甘肃天水市)人，字少叔。少时任羽林期门郎，有材力，颇为武帝赏识，迁未央厩令。后为侍中、太仆。武帝临终，受封为左将军、安阳侯，与大将军霍光等受遗诏辅佐少主。昭帝即位，其子安之女立为皇后。安为骠骑将军，封桑乐侯。后父子与霍光争权结怨，遂结交燕王旦和盖长公主等谋诛光、废昭帝。元凤元年(前80)事发，族诛。