潘濬很聪明，对问题的也是回答的很好。当他二十一岁的时候，他是孔子宋中的老师，被建安的七个儿子之一王灿非常的欣赏。在他三十岁时，他被荆州游牧民族刘任命为江夏。当时，他检查并处决了沙县的腐败，震惊了整个县。后来，他在湘乡担任县长，在治理湘乡方面享有盛名。建安十四年的时候，刘备率领荆州牧区，任命他为政。建安十六年的时候，刘备进入宜州，留下他管理这里的事务。
当在建安二十四年的时候，孙权派人把关羽的兵给消灭了，还把荆州都给占领了，还把这些领馆的人都给归附了，这时却没有见到他。然而孙权却去亲自见他，他却哭了起来，躺在床上不起来，然而孙权却以安抚俘虏的名义，先去安慰了他，还让人帮他洗了脸，这时他才下地来感谢，还把一些军事的细节都告诉了孙权，就这样她被封为了中郎将，还开始带兵了。
在那个时候武陵从事想要把武陵献给了刘备。这时孙权问他。他认为派上五千个人到武陵就够了。又问他为什么鄙视他。他回答说："可以炫耀自己的嘴唇和舌头，但事实上，他没有能力去争论。以前，他为州中人准备了宴会，但来到了宴会。中午没有东西吃，十几个人独自离开。就像看到侏儒的一部分，知道整个画面。他却笑了，派他去指挥那五千个人，确实把樊胄杀了。
在后来，他晋升为将军。六年的时候，奋武中郎去世了，他率领他的部曲，驻扎在夏口。当时，将军驻扎在口中，要求招募更多的人来增加他的实力。孙权询问了他的意见。他说："我们周围的人会赞美我们的，因为他们的混乱和事实是众所周知和强大。这时听了他的建议。在孙权称帝之后，任命她成为了少府。称帝后的他授与他符节，并命令他与陆戴总督军抗击五万名的蛮夷。他奖惩得当，几年来，杀害和俘虏了数万人。
此后，蛮夷变得衰落，非常的平静。之后他回到了武昌。长期以来，他一直在和陆逊一起管理荆州事情。在之后他的表哥，晋升为军衔的大将军。武陵县长在桌上告诉了孙权，他说："他是不会做这样的事。"并解除了自己的官职。他喜欢吕壹的校务。但是他这个人卑鄙，粗暴，善于操纵。他和陆逊都非常的担心他的行为。当他们谈论悲伤时，他们都会用眼泪洗脸，甚至感到不安和恐惧。他弹劾总理顾雍，离开朱将军，两人被送进监狱。
黄门谢朗问他："顾雍怎么了?"他回答说："事情不太好。"又问，"如果他被把职位免掉了，那么谁来接替他?"这时吕一没有回答，谢宏说："会是潘太常吗?"他过了很久才说："你说的很有可能。"谢宏又说，"这个人非常的恨你，只不过是离你很远，一直没有得到机会。"如果他接替位置，恐怕明天就会攻击你。"这时的他非常的害怕，所以顾雍的事情就这样消失了。后来，他要求见孙权，并试图说服他。当他听说孙登亲王以前说过很多次，但是没有被接受，他邀请了数百名官员参加一个大型宴会，打算在宴会上亲自杀死他。
一个从小就很聪明的人，在之后一定是会有一定的能力的。之后他的这个计划也是被别人知道了，他说是生病了这个理由来拒绝的他，然而他每次想要去见到孙权都是需要来把机会给利用起来的，他非常的讨厌，出现背叛的人。