潘姓氏起源：
姓氏的源流就是同一族得姓的来源与变迁，中国人的姓氏渊源大多很为古老，可以追溯到人类原始社会的母系氏族制度时期，伏羲氏就开始"正姓氏，别婚姻"。姓是作为区分氏族的特定标志符号，如部落的名称或部落首领的名字。氏是姓的分支，表示部落分支之名称，用于区别子孙之所出。氏也是贵族宗族制度的代表和称号，夏、商、周三代以前，男子多称氏、女子多称姓。
姓氏主要来自：1、从土地和赐姓而来，天子就是赐姓命氏的人。黄帝对他的二十五个儿子创设了十二个姓。陶唐氏之后代封于刘地，其后裔以刘为姓。　　2、以出生地为姓。黄帝生于寿丘，长于姬水，故以姬为姓。3、以封爵、官职为姓。楚庄王少子，作上官大夫，后代就以上官为氏。4、因事物或其他原因而得姓。
关于潘氏的姓氏来源说法如下：
源于姬姓，为周文王子毕公高后。毕公高封其子季孙于潘，附庸于毕国。据说其地在今陕西省北部，子孙以采邑命氏。

源于芈姓，春秋时楚国有潘氏，见于家传者始租为潘崇。潘崇官拜楚穆王太师。 《 通志。氏族略三》 ："潘氏，芈姓，楚之公族，以字为氏。潘崇之先，未详其始或言毕公高之子季孙食采于潘，谬矣。潘岳家风诗自可见。晋亦有潘父，恐自楚往也。汉有潘瑾，后汉有潘勉。"

源于北方鲜卑族，后魏时，代北鲜卑有姓破多罗者，后改潘氏。由于《史记》载有潘崇的事迹,故潘氏大多以潘崇为始祖。潘崇的儿子潘尪，为楚大夫;孙子叫潘党，继为大夫。