1965年5月，经省政府批准正式成立宁远县图书馆。建馆初期，配备工作人员两名，馆址设宁远文庙（借用）。虽单独建制，却仍与文化馆合署办公，开展图书外借、阅览等业务。1966年，因受“文化大革命”的干扰破坏，工作人员被下放，图书洗劫一空，图书馆被迫停止工作达十年之久。到　 1976年，才重新恢复宁远县图书馆建制和正常的业务活动。

至今，图书馆事业已有较大发展。现有工作人员11人，按文化层次分，大专4人，高中5人，中专1人，初中1人；按职称结构，中级职称1人，助馆4人，管理员3人。设图书外借处、综合阅览室、少儿阅览室、资料查阅室、采编室、信息服务部等业务部门。

1985年，县人民政府加大对图书事业的投入，在县城九疑南路划地三余亩，用于图书馆馆舍工程建设。次年拨款数十万元（省厅资助十万元）建图书馆大楼。1987年破土动工，1988年竣工交付使用，7月1日举行隆重的开馆仪式。新馆舍总建筑面积1563平方米，分设报告厅（视听）一间，书库阅览室并用六间，专门阅览室三间，其它大小业务用房十一间。彻底结束了图书馆无馆舍的旧貌，成为永州辖区内馆舍面积最大的图书馆之一。同年，地方财政拨专款建造图书馆职工宿舍，总面积580余平方米。

建馆初期，年经费基数5000元。以后逐年增加，1998年，拨给该馆经费已达8万元，其中购书费单列2.5万元，图书馆自身创收2万元。1999年订报50余种，期刊80余种，计划购新书1500册。该馆现有图书6万余册。其中期刊2.4万余册，少儿读物 4000余册（不含连环画册），常用工具书400余种600余册，地方文献100余册。

采用《中图法》标引，使用《普通图书著录规则》著录；设有齐全的公务分类目录、书名目录，读者分类与书名目录。有查目辅导，专人管理，目录组织健全合理。多年来，该馆在馆内利用墙报、黑板报、橱窗介绍书刊信息，揭示书刊内容，简短评述等。

在馆外，利用图书馆宣传服务周活动，送书到全县各乡镇，开展现场服务。并利用节假日，经常开展讲故事、猜谜语、书法比赛、游艺等多种活动；为最大限度满足读者的借阅要求，实行全天开放制度，每周开放最低不少于63小时。通过上述工作，近几年来，在图书馆事业不太景气的情况下，历年能接待读者6万余人次，书刊流通不少于8万册次。该馆每年都不定期举办乡镇（村）图书室管理员培训班，经常与水市、天堂、中和、冷水、太平、禾亭等重点乡镇图书室保持业务联系，开展业务交流与合作，辅导其开展正常业务活动，受到基层图书馆（室）的好评。

1998年，该馆被文化部评定为国家三级图书馆。