他们可以作为防备匈奴的力量；如果东方发生变故，我们也可以随时率领他们东征。不仅是齐楚两国，就连燕、赵、韩、魏的后代，以及那些豪杰名家，都可以根据具体情况迁入关中，以备朝廷随时调用。这未尝不是一种加强中央集权、削弱地方势力的方法，还请陛下采纳并施行！”
高祖又认为这是一个好主意，于是当天就发布了诏书，命令齐王刘肥、楚王刘交等人，让他们迁徙齐楚两地的豪门望族到关中地区。同时，已经回到封国的英布、彭越、张敖等诸侯王，也接到了诏令，要求他们调查当地的豪门贵族，并强迫他们携带家眷迁往关中。据统计，迁徙的人口总数不少于十万。幸运的是，关中地区在经历秦朝的战乱后，人口流失严重，还有很多空地可以安置这些新来的移民，使他们不会失去住所。但是，无缘无故地迁移人口，这是秦朝时期的一个弊端，为什么高祖不考虑百姓的困难，还要重蹈覆辙呢？那时候，有十多万人因为受到朝廷命令的逼迫，不得不扶着老人、带着孩子，一路颠簸地迁往关中。他们在关中住了几年后，因为人口众多、语言繁杂，使得京城这个重要的地方变得五湖四海的人都有。一些豪杰和侠客借此机会混在其中，渐渐地开始结党营私、玩弄权力。因此，汉朝时的三辅地区（包括京兆、左冯翊、右扶风）变得难以治理。各位想一想，这难道不是刘敬遗留下来的问题吗？
高祖回到都城仅两个月，就再次前往洛阳。这时，恰好赵相贯高的仇人向朝廷上书告发。高祖看完告发信后，非常生气，于是亲自写了一道诏书，交给卫士，让他立即前往赵国，迅速将赵王张敖以及赵相贯高、赵午等人捉拿归案。这件事情是怎么发生的呢？原来是因为高祖之前巡游赵国时，曾经对赵王张敖出言不逊，这激怒了贯高和赵午两人。他们心中愤愤不平，竟然起了谋反之心。贯高和赵午两人都已年过六旬，他们是赵王张敖父亲辈的朋友，被张敖任命为赵相后，他们依然保持着年轻时的性格，好名好斗，到老都不减当年。自从张敖被高祖侮辱之后，贯高和赵午就觉得心里很不是滋味，他们私下里议论纷纷，嘲笑张敖太过软弱。后来，他们一起去找张敖，避开其他人后对他说：
“大王您亲自到郊外去迎接皇帝，表现得极为谦恭有礼，可以说是尊敬至极了。可是皇帝却一点面子都不给，还随心所欲地辱骂您，难道做了天子就可以这样目中无人吗？我们实在咽不下这口气，愿意为大王您除掉皇帝！”
张敖听到这个计划后，吓得咬破了自己的手指，鲜血直流，他指着天发誓说：
“这种事情怎么能做呢？从前我们的先王失去了国家，全靠皇帝的帮助才得以复国，这份恩情和恩德，我们世世代代都不会忘记。你们怎么能说出这种大逆不道的话来呢？”
张敖的表现显示出他还有良心。贯高和赵午见张敖不肯听从他们的计划，就私下对亲近的人说：
“我们原来是想错了，我们的大王性格忠厚，不忍心做出背弃恩德的事情。但是我们实在受不了这种侮辱，一定要出这口恶气。如果事情成功了，功劳归大王；如果失败了，我们自己去承担罪责就是了。”
其实他们真的没必要这么做。于是，贯高和赵午开始暗中策划，想要加害高祖。
高祖匆匆经过赵国，并没有多做停留，这使得贯高和赵午一时之间找不到下手的机会，只能暂时放弃。后来，他们听说高祖从东垣出发，要回兵经过赵国，于是秘密派遣了几名刺客，暗中监视高祖的行踪，打算趁机行刺。当高祖的车队经过柏人县时，他心中突然涌起一股不安，于是立即下令离开，没有多做停留。高祖并不知道有刺客在暗中盯梢，其实那些刺客正躲在厕所的墙壁后面，准备等高祖入睡后动手。然而，高祖就像是被神灵庇佑一样，没有选择在柏人县过夜，从而躲过了这一劫。这样一来，贯高和赵午精心策划的刺杀计划就落空了。这里是对前面情节的回应和补充，说明了高祖在赵国遭遇刺杀未遂的经过。等到贯高的仇家揭露了这个秘密计划后，朝廷立即向赵国颁发了一道严厉的诏书。赵王张敖对此毫不知情，却平白无故地背上了罪名，只能无奈地束手就擒。赵午等人在危急关头，为了保全性命，都选择了自杀。唯独贯高愤怒地斥责其他人说：
“我们的赵王并没有参与谋反，这一切都是我们做的。如今我们连累了赵王，你们却都想着一死百了，试问赵王的冤屈，又有谁来为他申辩呢？”
于是，贯高自愿被捆绑起来，跟随张敖一同前往（洛阳）。有几个对赵王忠心耿耿的大臣，也想跟着一起去。但诏书中明确禁
