说起卫拉特蒙古，我们总是很容易将其等同于卫拉特四部，即著名的土尔扈特部、准噶尔部、和硕特部和杜尔伯特部。但是，形成四部的卫拉特蒙古其实是在明末清初之际，而在此之前，卫拉特并没有四部的说法。而那时候，辉特部正是卫拉特蒙古极为重要的一支，并在卫拉特蒙古的发展过程中，发挥了难以替代的重要作用。

辉特部的历史很古老，但关于它早期的历史却并没有一个定论。关于辉特的起源，迄今为止有两种说法，一种说法是：辉特部是卫拉特部早期领袖、林木中百姓斡亦剌惕部落首领忽都合别乞的后代。再具体一些，则是忽都合别乞的两个儿子脱栾勒赤和依纳勒赤的后裔。而众所周知，卫拉特蒙古就是林木中百姓发展而来的部落联盟。按照这种说法，那么，辉特部显然是卫拉特蒙古嫡系中的嫡系，属于根红苗正的卫拉特。

而另一种说法则是，辉特部起源于蒙古帝国四大汗国时期，据说，原来是游牧于金帐汗国钦察草原和察合台汗国的察合台汗、窝阔台汗后裔，以及一部分阿速特部离开故地之后，翻越阿尔泰山来到漠北地区后所组成的部落。也就是说，辉特部的主要组成部分为察合台部属民。

而在成吉思汗时期，成吉思汗向他的儿子察合台分封了8000户，也因此，辉特部被蒙古诸部称为“奈曼明安辉特”，汉语的意思是“8000户辉特”。

不过，无论辉特部到底起源于何方，但是毋庸置疑的是，辉特部是蒙古草原部落的一部分，由于迁徙到了林木中百姓附近的地方，与卫拉特部融合，成为卫拉特早期重要的组成部分。

原来生活在蒙古高原以北、西伯利亚以南的林木中百姓，在抵抗成吉思汗统一蒙古各部的战争失败后，在首领忽都合别乞的率领下，投靠了前来征讨的铁木真长子术赤，并从此加入了蒙古汗国，成为成吉思汗帐下重要的一支力量。

由于忽都合别乞率先臣服，再加上骁勇善战的林木中百姓屡立战功，因此，成吉思汗为了奖励他们，将女儿扯扯干公主嫁给了忽都合别乞的儿子，并将卫拉特部分为了4个千户。随后，颇具眼光的忽都合别乞一直致力于加强与成吉思汗黄金家族的姻亲关系。

例如，除了两个儿子娶了成吉思汗的两个女儿之外，忽都合别乞还有一个女儿嫁给了蒙古大汗贵由汗，并在贵由去世之后对庞大的蒙古帝国临朝称制。而他的两个孙女儿，分别嫁给拖雷的儿子阿里不哥和旭烈兀。

按照辉特部起源的第一种传说，作为忽都合别乞的后裔，辉特部自然也在蒙古帝国时期拥有了相当重要的地位和实力。阿里不哥起兵反对忽必烈称汗时，与阿里不哥关系更近的卫拉特部还曾加入阿里不哥的大军，参与了与忽必烈的战争。

但是不幸的是，由于阿里不哥的叛乱被忽必烈击败，作为重要参与者之一的辉特部，也理所当然地受到了元朝皇室的冷落。元朝灭亡之后，辉特部不但没能再次崛起，反而更加衰落。16世纪中叶，俺答汗就曾率领蒙古大军进攻辉特部，杀死了辉特部首领，掳掠其妻子和两个儿子，并占领了卫拉特部的故地，辉特部因此被迫离开了哈拉和林。

整个明朝近300年的时间，以元朝后裔为首的鞑靼和以为卫拉特部为主的瓦剌之间的战争从未停息。作为卫拉特部的重要组成部分，辉特部自然也参与了一系列的战争。

鞑靼和瓦剌之间的纷争，不是东风压倒西风，就是西风压倒东风。明朝后期，鞑靼，也就是东蒙古诸部逐渐占据了上风。不过，虽然屡战屡败，但是，被东蒙古征服后，卫拉特部并没有屈服，而是奋起抗争。

辉特部就曾用为蒙古汗进贡为理由，带领250峰骆驼，以驮运大量礼物为名，实际把500名武士隐藏在骆驼两侧的挂布里，顺利到达了蒙古牙帐，并果断发起突击，大败蒙古军，辉特部甚至俘获了蒙古汗。俘虏蒙古汗王之后，辉特部将其带到卫拉特驻守之地，并要求他宣誓永不侵犯卫拉特，才将其放回。从这个故事中也可以看到辉特部在卫拉特部中的重要地位和作用。

然而，在与东蒙古各部的战争之中，大多数时候，卫拉特其实是居于劣势地位的。辉特部受到的损失尤其严重，到了明末清初之际，已经被迫迁居新疆中亚一带的卫拉特部，逐步演变为我们最熟悉的和硕特部、土尔扈特部、准噶尔部和杜尔伯特部。

这四大部的实力不断壮大，然而，曾经是卫拉特部重要组成部分的辉特部却日渐衰微。此时，辉特部的实力甚至衰落到已经无法成为一个独立的部落，他们开始成为杜尔伯特部的属民，游牧于塔尔巴哈台一带。

众所周知，杜尔伯特部是卫拉特四部中唯一一个没能建立属于自己汗国的部落。当葛尔丹率领准噶尔部崛起并建立庞大的准噶尔汗国之后，同出一源并不断衰落的杜尔伯特部大部归附了准噶尔汗国，自然，作为杜尔伯特属民的辉特部，在贵族们的率领下也归附了葛尔丹。

不过，虽然成为了准噶尔汗国的附属，正所谓瘦死的骆驼比马大，辉特部的实力仍不容小觑，例如在葛尔丹策零所设立的21昂吉中，辉特部就占了9个之多。