W następnych latach kolejno wybuchały bunty ustanowionych przez niego królów, tak że do końca jego panowania wszyscy z wyjątkiem jednego zostali zastąpieni przez jego krewnych. W zakresie polityki zagranicznej Liu Bang został pokonany przez władcę Xiongnu Maoduna i zawarł z nim pokój, ofiarowując mu rękę chińskiej księżniczki i trybut.
Walka z Qin Liu Bang urodził się w chłopskiej rodzinie w mieście Feng (dzis. powiat Feng w Xuzhou) w powiecie (xian, 縣) Pei (dzis. powiat Pei w Xuzhou). Sima Qian w jego biografii w Zapiskach historyka opisuje wiele okoliczności, które zgodnie z chińskimi wierzeniami miały wskazywać na jego cesarskie przeznaczenie. Miał on być poczęty przez smoka, mieć smoczy nos i smok miał unosić się nad nim, gdy był pijany. Na lewym udzie miał mieć siedemdziesiąt dwie czarne kropki (liczba symboliczna), a jego przyszłą cesarską godność miały potwierdzać też jego rysy twarzy oraz horoskopy i szereg znaków. Za dynastii Qin Liu Bang piastował podrzędny urząd naczelnika gminy (tingzhang, 亭長). Kiedy otrzymał rozkaz odstawienia skazańców na roboty, część z nich uciekła i by uniknąć za to kary, Liu Bang rozpoczął życie przywódcy lokalnej bandy. Kiedy w 209 p.n.e. wybuchła rebelia Chen Shenga, znający od dawna Liu Banga urzędnicy powiatu Pei, Xiao He i Cao Shen, wezwali go do objęcia w nim władzy.