湖南人本土人与江西人混淆与古时候湖南地区的人口密度、迁徙与战争息息相关。
一、湖南地区地广人稀。
如今湖南人祖籍人大部分是江西，其中很大一部分原因是古代的湖南地广人稀，湖南一带，曾在古时候被称为南蛮之地，自古人烟稀少，所以说本来的湖南人本就不多。
二、迁徙造成湖南地区的本地人减少。
到唐朝末年，战乱发生，地广人稀、土地肥沃而欠缺开发的湖南地区对最先遭受战乱伤害的江西人来说，无疑是迁徙地的首选，因此长江中下游地区的大批江西人涌入湖南生活，世代相传。所以现在湖南人祖籍一般都在江西。
由于战乱使得生活在黄河流域的中原人不得不离开他们原来的生活地区，越来越多的人迁徙到土壤肥沃、人口稀少的湖南一带，中原人带来的先进的技术让湖南地区得到了一定的发展，但同时也因为生活的竞争压力的提升，使得生活在“南蛮之地”，生活方式比较落后湖南本地人的数量减少。
三、战争导致湖南人数减少。
湖南地区人数本就不多，元末的时候发生了战乱更是造成湖南土著显著减少。元末明初，蒙古人成为新的“盖世主”，众所周知，古时候的蒙古人痛恨中原人而常常对中原人肆意厮杀。长此以往，中原人最多的湖南等地区开始对蒙古人进行反抗。战争发生后，导致为数不多的湖南本地人战死沙场。
四、传闻湖南本地人惨遭误杀。
传说朱元璋在率领军队驻扎湖南地区时，有士兵误会了朱元璋的命令，误以为朱元璋要“血洗当地”，因此对当地人展开杀戒，所以湖南本地人由于惨遭误杀而人数急剧减少。但这只是一个传说，因为从原则上来说，平民出生的朱元璋是不会对无辜的湖南百姓展开杀戒的。
五、湖南本地人与江西人混淆而无法被辨识。
虽然现在大多数湖南人的祖籍都是江西，但本来的湖南人还是在的。这些湖南本地人有些并非是汉族，而是非汉族后裔，这些族裔为了在当时的古代为了更好的生活，想要摆脱少数族裔的身份成为汉人，假称自己是江西移民的后裔而修改族谱，一定程度上让人误以为湖南本地人消失不见。再加上不管是汉族本土湖南人还是非汉族本土湖南人，都因为后来和江西人世世代代生活在一起，导致本来的湖南人再无法从中区分出来。