- 春秋战国时，潘姓主要在今湖北省境内发展，此后，有向山东、湖南迁徙的少数潘姓人。

- 汉时，潘姓北迁至荥阳中牟（今属河南省），三国时发展兴旺而为荥阳郡一大望族。

- 东汉灵帝时，有潘乾因仕宦而迁江苏溧阳。

- 吴国有右将军潘璋由发干（治在今山东省冠县）而迁建康，而吴国还有浏阳侯潘，为汉寿（今湖南省常德）人。

- 晋时，潘勖之裔孙潘才因任广宗太守，而落籍广宗（今河北省威县），后又发展成为潘姓历史上第二大郡望。

- 唐初，陈元光父子开漳，有河南固始人潘节随其入闽。

- 宋时有潘节后人迁广东、云南。

- 分布：元明清时，潘姓已分布于全国各地。在山西省，潘姓也有一定的分布，如在一些历史悠久的城市和地区，都有潘姓家族的存在。不过具体的分布情况可能因历史变迁和人口流动而有所不同。

杜姓

- 起源：

- 出自祁姓：帝尧的裔孙刘累之后。西周时期，周成王将唐杜氏封于杜城（今陕西西安东南），建立杜国，称为杜伯。周宣王时，杜国被灭，杜伯的子孙大多逃往中原，以国为氏，称为杜姓。这是杜姓的主要起源之一。

- 出自外姓和外族的改姓：古代有一些少数民族如鲜卑族、蒙古族等，在历史发展过程中逐渐汉化，改汉姓为杜。

- 变迁：

- 先秦时期，杜姓主要活动在陕西地区。

- 秦汉时期，杜姓开始向中原地区迁徙，逐渐在河南、山东等地形成较大的家族群体。

- 魏晋南北朝时期，社会动荡，杜姓人口也随之迁徙流动，一些杜姓家族南迁到了江南地区。

- 隋唐时期，杜姓家族在政治、文化等方面都有一定的影响力，如唐代的杜如晦、杜甫等都是着名的人物。

- 宋元明清时期，杜姓人口不断繁衍增长，分布范围更加广泛。

- 分布：在山西省，杜姓有较为集中的分布。长治沁县杜氏以杜丰为始祖，杜丰字唐臣，为金末元初山西西和县（今平遥县）人，其父、祖父均侍金为官。长治襄垣县、武乡县杜氏以杜藏修（字积中，号树德）为始祖，杜藏修从襄垣城底村迁南漳村定居，生锦詹、文成二子，长子锦詹迁武乡魏家窑。此外，在山西的其他地区如太原、大同、临汾等地也有杜姓人口分布。

总体而言，山西省的余姓、潘姓、杜姓都有着各自独特的起源、变迁历史和分布特点，这些姓氏的发展与中国历史的发展紧密相连，反映了不同时期的社会、政治、经济和文化状况。