没错，摘了桃子的人就是刘邦。
虽然没有直接的证据，但我们有理由相信在项羽军中是有刘邦的卧底的，或者说项羽军中有人与刘邦暗通款曲，不断的给刘邦传送一些有关项羽部队的最新信息，使得刘邦对项羽军队的最新动向至少有个大概的了解，而相对应的项羽对刘邦的行动则基本上是全然不知。
刘邦的军事实力、军事能力都远不如项羽，在进军关中的过程中想要取得先机，项羽与章邯两军的僵持应该是刘邦最愿意看到的局面，一旦这个局面被打破，不管谁胜谁负对刘邦入主关中的目标都是大为不妙。秦二世三年七月，当章邯已经明显不支准备投降项羽的时候，刘邦正在从宛城向武关进军的路上。虽然一路上的军事行动中颇为顺利，只是在武关前受到秦军的阻挠，但刘邦仍然生怕项羽会抢在他的前面攻入关中，于是情急之下他偷偷的向秦政府派出了一个使者。
这个使者名叫甯昌，魏国人，一个无名小卒而已。甯昌乔装改扮蒙混过武关后日夜兼程赶往咸阳，此行目的是想要面见赵高，传达刘邦想劝降他的意愿。但是甯昌虽然进了咸阳，却遇到当时赵高因为“关东群贼作乱”的事情正受到胡亥的斥责，躲在家里不见任何人，甯昌在咸阳一连等了多日最终也没有机会和赵高见面。
这时候刘邦的军队此时受阻于武关，迟迟不能前进，一连多日收不到使者的回音，心急的刘邦随即展开B计划：派遣手下郦食其和陆贾两位得力的说客说降武关的守将。偏偏此时赵高又派出使者和刘邦接触，提出了由赵高与刘邦两人“分王关中”的提议。因为赵高虽然没有见到甯昌，但他也知道自己没有能力阻止反秦武装的前进，赵高想：与其坐等别人杀上门来灭了自己，还是不如主动媾和，说不定还能保住自己的富贵荣华。
虽然有了使者的通信，但刘邦知道此时章邯已经投降了项羽，项羽的大军势不可挡随时可能在刘邦之前入关，因此他仍然是心急如焚，等不得使者们里三番五次往来沟通，又担心这是赵高的缓兵之计，于是虽然武关的守将已经原则上同意投降，但刘邦不愿意再继续拖延时间，命令军队趁秦军守备松懈发动突然袭击，攻破了武关。我们知道关中地区是八百里秦川一望无际，基本是无险可守，刘邦攻破了武关，咸阳差不多直接暴露在他的眼前。
通过武关后刘邦挥兵疾驰，一路上严令军队不得骚扰百姓——实际上急于攻入咸阳的刘邦可能也来不及骚扰百姓，随后又在蓝田（地名）的南边和北边两次击溃了秦军最后的抵抗，终于刘邦第一个到达了咸阳城外的霸上。在霸上迎接刘邦的是坐着白车白马，脖子上系着白布（表示要自杀）的秦王子婴，他向刘邦纳玺投降。
也许有人问赵高、胡亥人呢？子婴又是何许人也？
第一个问题的答案是两个都死掉了。秦二世三年七月，章邯率军投降项羽后，帝国的最后一根救命稻草断了，秦朝的大势已经彻底的无法挽回。赵高由于担心胡亥会杀掉自己，于是抢先发难，命令自己的女婿咸阳令阎乐带兵去杀死当时正躲在望夷宫的胡亥。
得到命令的阎乐以宫里有贼为理由，带着千把号如狼似虎的手下冲进望夷宫见人就杀，宫里的宦官侍女们纷纷逃命，只有一个还算忠心的侍从仍然留在胡亥身边不敢离去。胡亥这个时候才明白谁是身边披着人皮的狼，他责怪侍从为什么不早跟他揭发赵高的狼子野心，侍从也是很委屈：“我就是没说才活到今天，要是说了不早就死了吗？”
死到临头的胡亥没有一点君王的气概，他最大的愿望竟然只是见上赵高一面，但赵高怎么会见他？最大的愿望没能实现，胡亥天真的想退而求其次，做一个诸侯王，不行的话就做一个万户侯，实在不行就做个平民百姓，享受和始皇帝其他儿子一样的待遇就可以了。
估计这个时候阎乐也服了胡亥的傻劲了，他怪异的看着眼前这个二十三岁的年轻人，事到如今还不了解情况，都不知道他这样的人是怎么活到现在的。于是也懒得再跟这样的傻子废话，把一把剑丢在地上催促胡亥自行了断，不要再丢人现眼了。
话说“天子升天，自有其道。”，到了这个时候，胡亥虽然不情愿，但也不得不抹脖子自杀了，算是保留了天子最后一点尊严。
胡亥死后赵高自己也想过一把皇帝瘾，但是当他佩戴玉玺大摇大摆的坐上金銮殿时，整个大殿一阵地动山摇将他从椅子上震落。迷信的赵高认为这是上天不让他做皇帝位，只好讪讪作罢，从残存的皇室成员中选择一个叫子婴的皇亲来即位。
子婴不是胡亥的儿子（他还没来得及有儿子），也不是胡亥的兄弟（早被他杀光了），子婴是秦庄襄王异人的二儿子、嬴政的同父异母弟弟成蟜的儿子，在经历胡亥屠杀剩余的皇室成员中年纪最长，且素有贤名。子婴虽然答应继位，却并不愿意做赵高的棋子再受他的操纵，便在与自己的儿子商量后决定先发制人诛杀赵高。计议已定，子婴在斋宫斋戒完成后故意装病迟迟不去祭拜宗庙宣誓登基，平日里趾高气昂做惯了大爷的赵高一看子婴这小子如此的不配合，便上门指责：“继位延续宗庙的香火是国家最大的事，你怎么可以再三推辞！”
面对赵高的诘难子婴没有反驳，他低声下气的认错然后缓步接近赵高，突然从衣袖中拔出事先藏好的匕首将赵高刺死，随后立即派人灭了赵高的三族。
赵高死后，由于秦帝国已失去了大半天下，子婴也不敢再称皇帝，只能改称秦王。但这个时候谁也没有能力再扭转局势，当刘邦在蓝田击败了秦军最后的抵抗顺利抵达霸上的时候，这个只做了四十六天秦王的子婴只能向刘邦投降，做了刘邦的俘虏。一个强大的帝国，仅仅经历了十五个年头，就以一种略带讽刺的方式走到了终点。
公元前206年十月，时间进入了汉纪元，历史翻开了新的一页。