Taroudannt war im 11. Jahrhundert die Hauptstadt eines kleinen schiitischen Königreichs (Königreich der Bajjalis)², das theoretisch den Fatimiden-Kalifen unterstand. Im Jahr 1056 von den Almoraviden annektiert und unter den Almohaden praktisch unabhängig, war es vor allem die Hauptstadt der Rebellenprinzen Ben Yedder, die von 1252 bis 1334³ über den Souss herrschten.

Die Stadt wurde 1306 von den Meriniden zerstört, erlebte jedoch sofort einen Aufschwung und erreichte im 16. Jahrhundert unter dem Einfluss von Mohammed ech-Cheikh Sâadi, dem Gründer der Saadier-Dynastie, ihren Höhepunkt. Er machte sie vor Marrakesch zur ersten Saadier-Hauptstadt vor Marrakesch machte und zu einer Basis für seine Offensive gegen die Portugiesen, die sich in Agadir niedergelassen hatten (damals Santa Cruz de Cap de Gué genannt). Sie wurde damals zu einem wichtigen Karawanenzentrum, berühmt für die Fülle und Qualität ihrer Waren: Zucker, Baumwolle, Reis usw.