靖康二年（1127年）金人攻破汴梁，俘虏徽钦二帝及大批皇室贵族。康王赵构即位，是为宋高宗。由于北方故土大部陷于女真之手，所以大批沦陷区的汉族军民选择随皇室南下！“靖康之变”后，这种移民规模越来越大。由于他们来自北方沦陷区，因此南宋给了他们一个共同的标签——“归正人”。但是，对于不堪忍受金国统治而选择南下的“归正人”，南宋政府不仅不重用，还处处打压，这是为什么呢？
第一，“绍兴和议”中有约定
《绍兴和议》对南宋最大的伤害，不是称臣、不是纳贡，也不是杀岳飞，而是确定了“南自南，北自北”的方针。这个想法最初是金国的完颜昌提出的，后来得到秦桧的大肆宣扬。最初宋高宗对此完全反对，因为自己也是北方人。但是随着时局的变化，赵构也同意了这个方针，并且与金国正式达成共识。
赵构
如此一来，北方的北宋遗民已经不再是宋朝人了，也没有了南渡投奔新政府的权利，他们一旦渡过国境线，就会被视为叛逃，南宋必须将其遣返北国，任其处置。这样，不是北方汉人不爱国，而是国家抛弃了他们，他们被逼迫无奈地成为南宋的敌人。试想，当张弘范在崖山之战取得胜利时，他心里是不是这么想的——我终于帮助大金皇帝复了亡国之仇！
第二，南宋政府也很无奈
另一个重要原因就是，南宋政府和百姓都不想接受北方遗民！首先，仅北宋首都汴京及其腹地就有多少百姓？他们拖家带口到了南方，衣食无着，甚至连自己的耕地都没有，谁来养活他们？亡国之初最先来到南方的北宋遗民，很大一部分都成为占据山头的流寇，甚至可以说中兴四将一生中的战争，大部分都是打击流寇，而不是对抗金军！如果要妥善处理这件事，就必须从早就定居南方的百姓腰包里掏钱，肯定会遭到所有老百姓的反对！这其实也是南宋百姓不愿意北伐的一个重要原因。
福建至今还保留着大量土楼，这种兼顾堡垒性质的住宅是唐朝安史之乱后，大量北方人南下和当地原住民冲突的历史遗存。
事实上，从五胡乱华开始，北方人就不断南下，大量人口的到来，固然带来了先进技术，促进了南方的开发。但是越来越多的人口不断挤压原住民的生存空间，特别是土地，引发的社会矛盾日益尖锐。
靖康之变后，这种趋势有增无减。大量的归正人自北方南下，不仅是他们，有的将领带来了自己的军队，有的地方长官带来了自己的子民。这就让国土狭小的南宋有些吃不消了。
南宋形势图
此时，不管朝廷是主战还是主和，来自民间的排挤之音就已经甚嚣尘上了。大量归正人挤占了南方原有的土地等资源，已经对他们的生存造成了严峻挑战。
宋朝是中国历史上最有钱的朝代，统治者也利于用钱解决问题。大量归正人南下，朝廷不管是主战和主和，对接纳的归正人都以厚礼相待，毕竟他们心向中华。而随着归正人的增加，南宋财政也不堪重负。
久而久之，这种从统治上层到民间的对归正人的鄙夷也就不难理解了。
第三，来自敌国的尴尬身份
另外，历史上被敌人俘虏过的人，一般回归后也很难得到同胞的原谅和信任！所谓信任就是一张白纸，揉皱了就再也不能抚平了。归正人，面临的就是这样的尴尬。
因为来自敌人占领的沦陷区，他们的头上被戴上了外国人的帽子，虽然不久前大家还是同一个皇帝治下的好兄弟。既然受到了敌人的“洗脑”，谁能保证你会百分百效忠我们的皇帝？
所以，从南宋建立开始一直到端平元年（1234年）金国灭亡，在宋金对峙的107年时间里，归正人是一个始终无法回避的话题。他们南下数量的多寡，有时候也影响了两国对峙的平衡。
归正人在金国不堪忍受女真人的残酷剥削，历经千难万险南下宋朝。却因为带有歧视性的身份不能够得到重用，这是他们始料未及的。
这也就算了，北方人普遍尚武，这让天生对武将防范的宋朝芒刺在背。南宋自己的武将尚不能够身居高位、号令三军。你作为“外国”来的归正人，怎么会授予你高位呢？
归正人因为故土的沦丧，恢复中原的愿望最为迫切，但是南宋一味的打压最终只能让自己成为偏安一隅的小朝廷。
后期蒙古南下，南宋由于缺乏足够的战略纵深，加上对归正人的不信任。归正人刘整选择投降忽必烈，为忽必烈贡献了自襄阳灭宋的建议，并最终灭亡南宋。
岳飞
第四，北人主军，南人主政的水火不容
一直以来，在抗金前线浴血拼杀的，基本都是北方人。岳飞、韩世忠、刘光世、虞允文等人，他们在故土沦丧的情况下，无不积极反击侵略，意图北复中原，他们是南宋朝廷坚定的主战派。而以秦桧为代表的南方人，乐于在自己的地盘作威作福，对于北伐中原没有积极性，他们唯一的愿望，就是金国南下时能够保留半壁江山让他们继续享乐，他们是朝廷的主和派。
主战与主和，是南宋朝廷摇摆不定的国策，也影响了南宋对归正人的态度。
主战派占据上风时，南宋需要强大的军事实力和大量人口，因此南宋很乐于接受归正人，他们的到来为南宋提供了强大的军事支撑，大量的人口将荒芜的土地开垦出来，满足了战争所需的后勤支援。最重要的是归正人来自敌国，可以提供大量的准确情报，这在作战中无疑作用巨大。在宋金对峙的一段时期内，南宋一度取得了对金战略的主动。这其中，就有归正人的功劳。
秦桧夫妇跪像
但是很可惜，南宋对金，主战是暂时的，主和是长期的，这就让归正人的身份异常尴尬。首先，对金妥协，罢战息兵，让归正人组成的强大军队无用武之地。这样的条件下，归正人的重要性就开始弱化最后到可有可无。岳飞被杀是南宋对金称臣的必然结果，岳飞这样战功卓著的统帅不死，主和是没法继续的。
既然称臣做仆从了，那么对于金国的要求就一定要高标准去达成。由于归正人的大量南下，金国国内人口锐减，没有汉人做奴隶让女真人作威作福了，那么金国要求南宋不许接纳归正人，以保证金国的人口规模。南宋不敢怠慢，于是大量归正人被拒之门外。此时就不只是南宋对归正人的歧视了，在自己的出发地，他们也会受到女真人的疯狂报复，这是归正人的悲剧！
可贵的是，在里外不是人的尴尬中，大量归正人胸怀民族大义，为自己的民族抛头颅、洒热血，昭示了自己的民族气节。祥兴二年（1279年），崖山海战，宋军彻底战败，绝望的归正人陆秀夫身负幼帝投海殉国，上演了南宋最悲壮的一幕！