原來韓信父親早逝，自小和母親相依為命，因為貧窮常去別人家裡蹭吃蹭喝，人們大多都討厭他。後來母親去世，窮得無錢來辦喪事，只能尋找又一塊寬闊的荒山野嶺草草埋葬。人們就笑他沒有本事，他卻說道，將來我必聞達，找這麼寬敞的地方，就是為了墳地四周能安頓下一萬戶人家為我母親守墳。
母親去世後，由於再無親人，生計無著落，按秦法，須由官府出糧食，讓地亭長找一戶人家收養，直至成年。由於無人原意收養，只能天天到亭長家吃飯，接連數月。亭長的妻子厭惡他，一早偷偷把飯煮好吃完。到了吃飯時間，韓信只能吃剩下的飯食。韓信一怒之下，最終四處流浪乞討不再回來。