提到哈素海，大多人只会想到哈素海的鱼，因肉质肥嫩，味道鲜美而出名，但现如今可不单单是鱼能让你流连忘返了。
哈素海的传说有两个版本， 相传，从前土默川中部有一个不大的水潭，潭水清澈，潭边居住着勤劳勇敢的蒙汉人民。他们当中有一个叫哈力图的青年和一个叫素克的青年，两人亲如兄弟。有一天，从外地来了一个自称叫雄牯的人。他说，10年前，他在潭边不慎将一只朋友送给他的碗掉在潭里了，他想跳进潭中把碗捞上来，请哈力图和素克在潭边帮着接一下碗。哈力图和素克答应了雄牯的要求，帮助雄牯捞出了一只盛着半碗清水的碧玉大碗。雄牯走了，潭水渐渐开始枯竭了。兄弟俩知道上了当，骑上雪蹄追风马追上了雄牯，叫他立即交出那只碗。雄牯冷笑着说：“我是一个魔法高明的人，这碗是聚宝盆，放进什么东西永远取之不尽，现在碗里有水，一打碎，这里就成了湖海，我们仨人都活不了。你们要是放了我，我可以给你们许多金银珠宝。”哈力图和素克坚决不放雄牯，雄牯想逃跑，被哈力图一箭射中。这个坏蛋临死前摔破了宝碗。于是，平地下陷，激浪排天，这里变成了一片汪洋，芦苇摇曳，荷花绽开，鲤鱼打挺，飞鸟齐鸣，两位英雄自然也就葬身了湖底。蒙汉人民为了纪念这两位英雄，把这个湖叫做哈素海。
这个是比较官方的传说，在哈素海民间，还流传着另外一种传说。公元前54年，匈奴呼韩邪单于被他哥哥郅支单于打败，南迁至长城外的光禄塞下，同西汉结好，曾三次进长安入朝，并向汉元帝请求和亲。王昭君听说后请求出塞和亲，她到匈奴后，被封为“宁胡阏氏”，象征她将给匈奴带来和平、安宁和兴旺。后来呼韩邪单于在西汉的支持下控制了匈奴全境，从而使匈奴同汉朝和好达半个多世纪。相传，昭君在去往和亲的路上，一路琵琶低吟，一路眼泪连连，西汉的宫乐对于昭君依旧那么亲切暖心，塞外的西风吹着马车的帷帐，和亲的队伍马不停蹄的直奔塞外。在燕支山下，敕勒川前，昭君让和亲的队伍停下来，她想再回望一下故乡的方向，因为那里有自己的亲人，儿时的亲梅竹马，更有举国百姓和平的期许。此刻，昭君再也忍不住心中复杂的情愫，她一手揽琵琶，一边看着敕勒泉水中倒影的悲腔掠影，一边失声大哭，在起伏揪心的旋律中，泪水落在了敕勒泉水中，引着泉水越来越大，转眼就汇成了汪洋一片，将昭君与和亲队伍彻底隔在了塞外的地界，与西汉故土从此隔海相望。昭君为了将这感天动地时刻永远的珍藏，将自己心爱的琵琶扔进了这片海子，将自己心中永远的思念留在塞外与西汉最近的地方。昭君与和亲队伍顺着海子继续北行，为了让匈奴单于看不出自己憔悴的容颜，她决定在离海子不远的小岛上梳妆修冠，此时已是夕阳暮云，倾国倾城的容貌在夕阳的余晖中显得更加惊艳迷人，天际的群雁看到岛上的美丽女子，忘情的落在岛上。从此，昭君就得来“落雁” 的代称，海子上的岛得名“落雁岛”。
现在从哈素海的东南方向，登高向西北方鸟瞰哈素海，海子的形状宛如一把竖琴，众所周知，竖琴是西方乐器，但是根据史学家考证，西方琴的来源要追溯到成吉思汗时期，是蒙古铁骑把弦乐器带到西方世界。
相较而言，这个传说与历史有挂钩的地方，当然，这个传说的真伪问题大家不要计较，它并不重要，昭君的坟墓有十几处，昭君的传说有千百种，这是人民群众自发的行动，表现着各地人民的共同心理—对昭君的崇敬、热爱和怀念。所有的传说都仅仅是人们对于哈素海的美好想象，实际情况是，哈素海是黄河改道而形成的，属于大黑河水系的外流淡水湖泊。