对于成吉思汗而言，他的少年时期是不幸的。在得知父亲也速该的死讯后，他便匆忙地赶回了部落。但是很快，他们孤儿寡母的处境就开始恶化了。也速该在未死之前，凭着他个人的威望，曾经把若干同种的氏族团结在乞颜部的周围。可是他一死，泰赤乌人就企图恢复他们的首领俺巴孩一度享有的权力。
在也速该死去一年后的春天，蒙古人像往常一样祭祀他们的祖先，在祭祀的最后会有一个仪式，把祭祀时用的祭肉分给部族中参加祭祀的每一个人，按照身份的不同，分得的祭肉自然也有多寡之分。诃额仑作为也速该的女人，铁木真的母亲，乞颜部当时实际上的领导者，本应分到属于她和她的家人的那一份祭肉。俺巴孩的两个寡妇，斡儿伯和莎合台作为部族中的两位长者主持了这次祭祀，而她们却没有通知诃额仑，并以缺席为由没有分给诃额仑祭肉。目的非常明显，她们在排挤诃额仑。诃额仑知道后，明白自己的处境，她愤怒地说：“也速该是死了，但是你们以为他的儿子们就长不大了吗？你们不请我来，不通知我，你们是不是要起营，并将我抛下？”事实正是如此，他们确实决定将诃额仑母子抛下。第二天破晓的时候，泰赤乌族卷起营盘，遗弃了诃额仑母子。
这一时期，铁木真在他坚强的母亲诃额仑的带领下，同他的弟弟妹妹们一起住在斡难河一带，日子过得非常穷困，甚至要靠采集野果、钓鱼捕鼠为生。在艰苦的环境中，铁木真和他的兄弟们过早地成熟起来，也懂得了生活的艰苦和团结的重要。
但当时的铁木真毕竟还是一个孩子，作为长子，他懂得权力的重要，但却并不清楚应该如何团结他的兄弟们。铁木真有五个弟弟和一个妹妹，其中别克帖儿和别勒古台并不是诃额仑所生，而是也速该的一个妾室的儿子。当时他们的牲畜都已经被部众带走了，没有了牛羊马匹，兄弟几人每抓到一条鱼，捕到一只草原鼠，对于一家数口人来说都是宝贵的。在这种情况下，别克帖儿和别勒古台兄弟两人却经常抢夺盗取铁木真兄弟们捕获的猎物。不过别克帖儿和别勒古台兄弟两人也只是孩子，他们只是因无法忍受饥饿做出了不应该做的事情，需要的是正确的教育。可惜的是当时的铁木真还不明白这些，十岁就成为一家之主的他，实行了他幼稚且无情的惩罚——他用弓箭射死了别克帖儿，他同父异母的兄弟。