译文：日本友人晁衡卿，辞别长安回家乡，乘坐帆船远去东方回蓬莱群岛。晁卿如同明月沉大海一去不返，思念你的心情如同苍白的云彩笼罩着云台山。
本文引用李白的《哭晁卿衡》，其诗中的晁衡就是其中一名最著名的留学生(日文名叫阿倍仲麻吕)。遣唐使回日，唐朝有时派遣送使同去。由于航行艰险，他们往往居留下来，归化日本。如沈惟岳、袁晋卿等，都在日本朝廷任职。唐朝僧人也有随遣唐使赴日的，最有名的是鉴真东渡。
有趣的是，伴随着大规模的人员交往，出现了很多唐日之间的跨国婚姻，如遣唐大使藤原清河娶的就是一位中国新娘。可见，跨国婚姻不是今天才有的的时尚，早在一千多年前的唐朝就已相对的普遍化了。安史之乱后，唐朝衰弱，藩镇割据混战，民不聊生，此时直至唐末，又陆续有不少民众驾舟东渡，但规模已无法与两晋时相比。甚至有传说杨贵妃并没有在马嵬驿被缢死，而是随使者逃到了日本，据说日本还有人自称是其后裔。
第四次是宋明时代(公元13世纪末至17世纪末)。
遣唐使于公元895年废止后，一直到元朝，中日两国之间的关系趋于冷淡，官方往来基本停止，大规模有组织的大陆归化人移民浪潮也基本结束。有据可查的是洪武二十五年(1392)，朱元璋“更赐闽人三十六姓”人琉球。这批中国移民主要是向琉球传授中国先进的生产技术和文化。琉球王国也曾主动请求赐人，如1606年，尚宁王受册封时，便请赐明人归化。如从中国去的蔡氏为蔡襄的后人，林氏为林和靖家族的后人。
到了元灭南宋和清军入关的残酷民族战争与屠杀中，又有些南宋和明朝遗民(主要是江南汉人)迁居日本(比如著名的南宋温州雁山能仁寺住持高僧祖元、明朝宗室遗民朱舜水等)，但为数已不足道。一个最主要的原因就是唐宋以来，中国造船技术的进步和指南针的使用大大提高了中国人的航海技术，大量的贫苦农民和战争难民开始浮海到自然条件更为优越的南洋一带谋生，人多地狭的日本已逐渐失去了对大陆人民的吸引力，不再是中国海外移民的首选目的地。
17世纪末，清朝统治日趋稳定，民族压迫政策有所减轻，经济由恢复而发展，开始进入封建社会最后也是持续时间最长的盛世——康乾盛世;日本则进入了德川幕