该图书馆位于米脂县南大街45号。

    杜斌丞，米脂县城隍庙湾人。1917年毕业于北京高等师范学校，历任榆林中学校长、十七路军总指挥杨虎城将军的高级参议、甘肃皇慰使署秘书长、陕西省政府秘书长、中国民主同盟会中共常委兼西北总支部主任委员。他衷心拥护新民主主义，为杨虎城将军同中国共产党合作以及西安事变和平解放作出了卓越贡献。1947年惨遭国民党反动派杀害，终年60岁。毛泽东主席曾题词“为人民而死，虽死犹生”，周恩来副主席赞其为“鲁迅式的共产党员”，陕甘宁边区政府主红席林伯渠挽词献烈士“告慰先生应瞑目，千章红叶满晴皋”。对杜斌丞先生给予了很高的评价。

    1948年3月，为纪念伟大的爱国者、卓越的教育家、民主运动的活动家、忠诚的共产主义战士杜斌丞先生，经陕甘宁边区政府批准，在米脂县东大街创立斌丞图书馆。陕甘宁边区政府主席林伯渠题写匾额。同时在馆内设杜斌丞纪念室。1984年，在县城南关新建斌丞图书馆和杜斌丞纪念室。图书馆总面积3000平方米，建筑面积1948平方米。内设阅览室和书库，藏书12万册，3万余种。纪念室建筑面积145平方米，室内陈列杜斌丞生平事迹介绍、杜斌丞遗物、相册等，以及挽联挽词。马文瑞、吴波、常黎夫等5人赠送的“杜斌丞传略”大理石碑立于纪念室前，上刻合撰碑文。1997年，在院落中央专立杜斌丞铜像，并举行了揭幕仪式。

    1994年，中共陕西省委命名斌丞图书馆为陕西省爱国主义教育基地。1999年该馆被文化部评为三级图书馆。