Première entité du CRDS, la bibliothèque est un héritage colonial. Son existence remonte à 1838. Elle est l’une la plus ancienne bibliothèque des Côtes d’Afrique Noires. À cette époque elle comptait 1900 volumes. La création en 1936 de l’Institut fondamental d’Afrique noire(IFAN) par arrêté du 19 aout 1936, donna un nouveau souffre aux bibliothèques car l’IFAN avait pour mission de constituer dans les musées, les Archives, les Bibliothèques, les collections scientifiques, la documentation nécessaire à la connaissance et à l’étude des questions intéressant l’Afrique occidentale. Parmi les bibliothèques de cette époque, celle de Saint-Louis, la plus importante, était riche de 24 000 volumes provenant de l’ancienne bibliothèque publique de la ville et de celles du gouvernement du Sénégal et de la Mauritanie. En 1955, cette bibliothèque cumulait les fonctions de bibliothèque de recherche et de lecture publique et deviendra plus tard la bibliothèque du centre de Recherche et de Documentation du Sénégal (CRDS).De nos jours, elle abrite un fonds documentaire très riche et varié d’environs 15000 volumes (composé principalement de documents anciens dont le plus vieux des documents date de 1546 et traite la question « Des mœurs, des philosophes du 16iéme siècle »). Ce dernier a été découvert lors de l’inventaire de 2008 avec 711 titres de périodiques. En effet, la bibliothèque a été réorganisée par le Gouverneur Faidherbe et installée successivement au Palais de Justice, ensuite au Fort(1859), puis au Conseil Général avant de se retrouver définitivement au Centre Michel ANDANSON en 1954. Au plan national elle fait partie également de l’une des plus importantes bibliothèques publique situées hors de Dakar.  

La bibliothèque détient un fonds comportant également des ouvrages écrits par des voyageurs, des administrateurs coloniaux, des chercheurs ayants visités le Sénégal ou y séjournés. Elle est couvert de disciplines diverses que sont : la préhistoire, l’histoire, l’ethnologie, la botanique, la sociologie, la linguistique, le droit…

Les missions de la bibliothèque du CRDS sont également de faire de la recherche documentaire, la création de produit documentaire (répertoires, bibliographies….), mais aussi la tenue des conférences et des expositions sur les documents anciens dans différents thèmes.

La bibliothèque est fréquentée principalement par des élèves, étudiants, professeurs, candidats aux concours professionnels, des employés de l’administration publique et privée, agronomes, vétérinaires, sociologues, pédologues… Mais aussi elle est fréquentée par des internationaux notamment des étudiants Américains dans le cadre de la rédaction de leur mémoire.