Род графов Адлерберг происходит от архиепископа упсальского Олафа Свебелиуса, сыновья которого были возведены королем шведским Карлом XI 4 августа 1684 г. в дворянское достоинство с фамилией Адлерберг.

Именным высочайшим указом от 1 июля 1847 г. главноначальствующий над почтовым департаментом, генерал-адъютант, генерал от инфантерии Эдуард-Фердинанд-Вольдемар Адлерберг возведен, с нисходящим его потомством, в графское Российской империи достоинство.