Rosborg har en flere hundredårig historie. Det moderne uddannelsessted på Vestre Engvej er nemlig placeret på det sted i midt i Vejle Ådal, hvor der tilbage i 1300-tallet lå en borg, der med tiden blev til kongelig borg og administrationscenter i det sydlige Jylland i 1400-tallet. 
Anders Grosen og Vigand Rasmussen, der begge er pensionererede undervisere fra Rosborg Gymnasium & HF, har indsamlet historisk materiale om såvel den gamle borg og engene omkring Rosborg som om skolens udvikling fra starten i 1973 og frem.