W 1655 r. założył ją Wielki Elektor Fryderyk Wilhelm. Była to pierwsza szkoła wojskowa w państwie brandenbursko-pruskim. W 1703 r. przekształcono ją w Szkołę Kadetów, rozwiązaną w 1716 r. Budynek Akademii Rycerskiej w Kołobrzegu powstał w stylu renesansu florenckiego w drugiej połowie XVII wieku i mieścił w swoich wnętrzach szkołę wojenną, w której uczyli się synowie szlachciców Pomorskich. Była to jedna z pierwszych tego typu szkół w Europie. Nauka w jej murach trwała 3 lata, nauczano w niej jazdy konnej, musztry, tańca, matematyki, budowy fortec oraz języka francuskiego. W 1701 roku szkoła została zamknięta w dwa lata później otwarto w niej Szkołę Kadetów. W XVIII wieku budynek szkolny został zamieniony na arsenał. W 1945 roku nie uległ większym zniszczeniom. W latach 60. XX wieku został wyremontowany. Obecnie w gmachu mieści się hala sportowa, w piwnicach natomiast klubokawiarnia.
