日本皇族对平清盛的专权行为必然不满，在中央对他多次造成麻烦。
其余老牌贵族对平氏大量侵占他们的利益也感到非常不满，在地方上形成强大的反抗力量。
依靠武士起家的平氏在掌握大权之后逐渐贵族化，本身利益和武士阶层的利益渐行渐远，自然而然让原本拥护平氏的武士阶层也感到不满。
三方面的威胁之下，平清盛作为一个头脑清醒的政治人物，显然感觉到了庞大的威胁。
他需要一种势力的介入来帮他巩固统治根基，紧紧团结在他的周围，帮他抵抗三股反抗势力的威胁。
他们要有钱，要人多势众，要有学识，最好还有斗争经验，那就最美不过了。
大量南宋和高丽的本土精英的逃难而来给了他这个契机。
这帮人有钱，有人，有学识，有统治知识，而且初来乍到毫无根基，宛如孤魂野鬼，没有本土关系，缺乏底蕴。
他们急切的需要一个日本本土的权力者为他们提供庇护。
而平清盛也需要一股不属于任何一个政治派系的势力来帮助自己。
更美妙的是，南宋和高丽的这些精英虽然说不了日本话，但是他们都懂汉字。
日常交流虽然不一定使用汉语，可是三国高层精英都有深厚的汉学底蕴，就算语言上难以立刻进行无障碍交流，他们却可以用汉字交流。
平清盛不仅会读写汉字，也能用汉话进行一定程度的交流，于是在第一批南宋和高丽来人的时候，他很快就派人前去接触他们，并且与他们群体当中的几名领头人达成了协议。
这些南宋和高丽来人可以在他控制下的地区安家落户，给予户籍，成为日本国人，并且优秀者还可以在他的麾下出仕做官，享受特殊待遇。
这下子南宋逃人和高丽逃人们可高兴了。
一段时间的磨合之后，平清盛任命了五十名南宋和高丽的精英人物出任他麾下的官职，有留任中央的，也有到地方上的令制国担任职位的，总而言之，他们发挥出了自己的作用，展现了价值。