楚虎儿是东土默特部左翼前旗，他和本翼三旗的绝大多数牧民一样，并非土默特人，而是兀良哈人。如今的喀尔沁部族，其实也跟他们一样，打着黄金家族旗号的兀良哈人。
明初，漠北蒙古分为三部，兀良哈、鞑靼、瓦剌。其中兀良哈居于西辽河老哈河一带，最靠近中原。因此也是最早归附明朝的蒙古人，明初曾被编为朵颜三卫。
此后，兀良哈人后先依附鞑靼，再依附瓦剌，屡犯中原边境。再到蒙古左右翼争斗，兀良哈也分别依附左翼察哈尔与右翼土默特。
自元末起，这个部落几乎就一直是游荡不安的，更似一根墙头草，跟随过无数的强者，屡屡充当着打手先锋，但又屡次为鞑靼、明朝、女真等重创。
明清战争中，倒向女真人，到了如今，他们又归附了大汉。
楚虎儿是一个兀良哈人，同时也是一个阿勒巴图。
在蒙古诸部臣服大汉之前，漠南诸部已经臣服女真多年。女真在漠南蒙古诸部建立了盟旗建度，甚至还有内外札萨克旗等区别。
但不管是在诸部时代，还是盟旗时代，蒙古部落里也是等级分明的。
蒙古部族里可以分为四大阶层，王公贵族，宗教僧侣、阿勒巴图、奴隶。