稻香楼位于合肥金寨路中段，三面环水，自然景色优美。明末清初时，稻香楼在古庐州府（今安徽省合肥市）很有名气，是庐州府的标志性建筑。
稻香楼的起源，据说清初，合肥人龚鼎孠在合肥城南建楼2栋，号“稻香、水明”，当时的龚家在清朝时家族地位十分显赫，家族多人在朝中为官，其中龚鼎孠在江苏做过县令，后辞官回到合肥专心文学，著有《稻香楼诗集》。龚鼎孠其兄龚鼎孳是明末清初文学家，与吴伟业、钱谦益并称为“江左三大家”，先后担任过清朝的左都御史、刑部尚书、兵部尚书、礼部尚书等，有著作《定山堂集》《潭影堂诗序》。其夫人顾横波为南京名妓，不仅貌美，而且琴棋书画样样精通，著有《柳花阁集》。龚鼎孳多次携夫人回肥，均下榻稻香楼。至清朝中期，随着龚家的衰败，稻香楼也逐渐退出历史舞台，至清朝末年仅仅存有残基了。
新中国建立以后，在上世纪50年代中期，安徽省人民政府在稻香楼遗址重起楼台5座，仍沿用旧名，为稻香楼饭店，今称稻香楼宾馆。
50多年来，稻香楼宾馆曾多次接待*党**和国家领导人及世界各地的国家元首。1958年9月18日、10月28日，毛*东泽**主席两次视察合肥，皆在稻香楼下榻。1958年8月中央政治局北戴河会议前后，毛*东泽**主席陆续到河北、河南、山东和湖北、安徽、江苏、上海视察。9月16日上午，毛*东泽**在张治中、谭震林、罗瑞卿、张云逸等陪同下，乘江峡号轮船抵达安庆，曾希圣、黄岩等在码头迎接。中午前后，毛*东泽**下江游泳并视察安庆一中。下午5点多，毛*东泽**一行在顺道参观刚成立的舒城县舒茶人民公社后，继续向合肥进发，７点抵达稻香楼。
稻香楼宾馆当时条件非常简陋，主席下榻于此，也只能安排入住靠近东楼的三间红砖平房，因在东楼以西，故取名西苑。西苑内有新打的木板床和办公桌，桌上除摆放安徽文房四宝外，还特备了光绪《安徽通志》、嘉庆《合肥县志》和二十四史等古书典籍，供主席翻阅查考。
晚饭前，毛主席和省、市负责人“约法三章”：“第一、不要请我们吃饭；第二、我也不请你们吃饭；第三、按伙食标准用餐，不喝酒。这三条，希望大家监督。”韭菜炒蛋、土豆烧肉、干煸辣椒和素炒青菜外加小米粥、馒头，他一个人单吃津津有味。完了，他还倒点茶水到饭碗里，晃晃，把剩下的都喝了。他边抹嘴边说，“哪天全国农民都能吃上这样的饭菜，那就不错了。”工作人员已经乘隙把毛主席随身带来的棉被棉毯荞麦枕头和换洗衣服、布鞋拖鞋等摆放停当，但主席哪顾得上休息？他先接见了全国妇联章蕴、曾宪植等，再和曾希圣、黄岩、刘征田等省市领导谈到11点多，深夜曾希圣等告辞后，毛*东泽**在稻香楼西苑展纸挥毫，连写了四张“安徽大学”，之后又精力充沛地坐到办公桌前，直到翌日早上他才上床稍憩。