Род графов Остерманов происходит от Иоганна-Конрада Остермана, бывшего пастором в графстве Марк, во второй половине XVII столетия.

Именным высочайшим указом от 28 апреля 1730 г. вице-канцлер барон Генрих-Иоганн Остерман возведен, с нисходящим потомством, в графское Российской империи достоинство.

Высочайшей резолюцией от 14 января 1742 г. Генрих-Иоганн Остерман лишен чинов и графского достоинства.

Именным высочайшим указом от 1762 г. графское достоинство возвращено сыновьям его, Федору и Ивану Андреевичам Остерманам.

Высочайшим указом от 27 октября 1796 г. подполковнику Александру Ивановичу Толстому дозволено принять титул и фамилию графов Федора и Ивана Андреевичей Остерманов и именоваться впредь графом Остерман-Толстым, с тем чтобы фамилия эта и графский титул переходили лишь к старшему в роде из его потомков.

Высочайше утвержденным 21 мая 1863 г. мнением Государственного совета князю Мстиславу Валериановичу Голицыну, наследовавшему заповедное имение графов Остерман, дозволено принять фамилию, титул и герб графов Остерман и именоваться князем Голицыным графом Остерман.