L'APHL a été créée le 12 mars 1974 par Paul CADOT, Directeur général de l'Association départementale de parents et amis de personnes handicapées mentales (ADAPEI) et Paul LEBRETON, Directeur du Centre régional pour l'enfance et l'adolescence inadaptées (CREAI) . Dès l'origine, la pluralité des handicaps constituera une ligne identitaire prépondérante traduite dans le nom que s'est donné l'Association. L'APHL s'est fondée comme instance de concertation inter associative et a participé à des projets d'ouverture de nouvelles structures confiées à des associations membres du département du Loiret. L'Association, née de la volonté de ses fondateurs, avec le concours de la Direction Départementale de l’Action Sanitaire et Sociale (DASS), de la Caisse Régionale d’Assurance Maladie (CRAM) et de la Direction Départementale du Travail de l’Emploi et de la Formation Professionnelle (DRTEFP), s'est attachée à rechercher une harmonisation des politiques départementales et à dynamiser le réseau associatif afin d’améliorer l’accompagnement des personnes handicapées. Cette mission a permis une réflexion collective sur les besoins des personnes adultes du Loiret, de remédier à la carence d'équipements et être une instance de régulation entre les politiques sociales et les initiatives associatives. A la demande de ses adhérents, cette mission conduite jusqu'en 2010 a été déléguée à l'Union Régionale Interfédérale des Œuvres Privées Sanitaires et Sociales Centre (URIOPSS) par création de la Commission Départementale du Handicap du Loiret (CDHL), elle-même rattachée à la Commission Régionale. Cette fonction, initiée par l'APHL, demeure indispensable pour poursuivre et structurer la réflexion entre les Associations et être force de propositions régionales auprès des Pouvoirs Publics au service des personnes handicapées.