湛江市少年儿童图书馆前身为湛江市图书馆，创建于1957年，是湛江市建市以来第一家公共图书馆。1984年更名为少儿图书馆，成为广东省第一家独立建制的少儿图书馆。1993年6月新馆舍落成，占地面积1200平方米，建筑总面积6300平方米。新馆建设总投资500万元，其中港澳同胞捐资286万元。全国政协副主席叶选平题写了馆名。