刘邦回到沛县，受到父老乡亲的盛情款待，他一住就是半个多月，期间降下旨意，世代免除沛县人的赋税徭役，但不包括丰邑。沛人闻之莫不感恩戴德。但临走的时候，众乡亲却拦住刘邦不让走，跪请刘邦把丰邑人的负担也免了，说：“陛下虽然是喝沛县水长大的，号称沛公，和沛县的感情深一些，但毕竟是丰生沛养，丰邑和沛县都是你的老家，两地又是近邻，亲戚连亲戚，陛下怎么能只免除沛县人的赋税徭役，而不免除丰邑的呢？”
刘邦说：“我在丰邑只是借生，还没出娘胎就差点死在那里，见秦军来屠婴儿，邻里多自保，不惜陷害我家，致使全家流落沛地，我于丰人有可牵焉？我起义初时，创业艰难，正是用人用物之机，丰邑守将雍齿伙同丰人却率先叛我，差点把义军掐死在摇篮中。每念及此，我深恨之，因此我不承认是丰邑人，我与那里没有任何瓜葛！”
乡人齐呼：“陛下一向宽厚仁慈，请您不要计较过去的事，您要不同意，我们就长跪不起！”
刘邦看这么多父老乡亲一直跪在他的面前，心中不忍，只好说：“也免了，你们起来吧。”
众乡亲马上站了起来，高呼：“谢谢陛下，皇上万福！”
刘邦带领一帮随从，愉快地返回长安，沿途路过一些城市，地方官员不免兴师动众隆重接待，他们也没有甚推辞，歇息一下仍旧赶路，又用了半个月时间，回到宫中。
萧何负责承建的新的皇宫未央宫即将封顶，远远看去，巍峨壮观，气势恢宏。刘邦看到这个建筑这么豪华，眉头一皱，当即让人把萧何叫到宫中一顿臭骂：“你是诚心坏我江山，还是脑子里进水了怎么的？我让你负责建设皇宫，你建个稍大一些的院子也就罢了，谁叫你搞得规模这么大，楼又这么高，这么铺张浪费了？现在国家刚刚建立，经过了这么多年的战乱，国家和百姓都很贫穷，哪容得我们这样糟踏？宫室再小也不影响决策，只要心里装着百姓，在哪儿都能办公。秦朝的灭亡，很大程度上就是大兴土木，不顾老百姓的死活，你这样做，怎能不遭到天下老百姓的怨愤，是要我刘邦做第二个秦始皇吗？”