Devant la rareté des écrits, l'histoire des Kel-Ajjer est tributaire des sources orales. Celles que H. Duveyrier à recueillies en 1864 évoquent la domination, au XVIIe siècle, dans la région, d'un clan de chorfas, les Imenan (littéralement les diseurs), originaire de la Saguia el-hamra, l'actuel Sahara occidental, depuis longtemps fournisseurs de missionnaires et de prédicateurs musulmans pour le Maghreb et le Sahara, les Imenan, qui se disaient descendants du Prophète, se mariaient à des femmes de l'aristocratie targuie, ce qui permettait à leurs descendants d'hériter des biens et du pouvoir, qui se transmettaient, en pays touareg, par les femmes. Les sources rapportent également que les Kel-Ajjer n'ont pas supporté la domination des Imenan, des clans se sont enfuis, d'autres se sont révoltés contre eux. Le clan des Uraghen notamment parvient, au milieu du XVIIe siècle à tuer le chef des Imenan, Goma, qui s'était réfugié dans les environs de Djanet. Les Uraghen tueront également son successeur, qui s'était retiré à Ghat, aujourd'hui en Libye, et remportent la victoire contre le clan rival des Imanghasaten. Par la suite les Imenan et les Imanghasaten reviennent au pays Ajjer où ils formeront, avec les Uraghen, les clans suzerains du pays.