Род графов Грабовских происходит от Германа Грабовского, жившего с 1501 по 1588 г.

Грамотой прусского короля Фридриха-Вильгельма III от 30 ноября / 12 декабря 1816 г. майор 2-го гвардейского пехотного полка Альберт Грабовский возведен, с нисходящим его потомством, в графское королевства Прусского достоинство.

Высочайшим повелением от 21 апреля 1836 г. фамилия члена Государственного совета, министра статс-секретаря Царства Польского Степана Фомича и двоюродного брата его Станислава Ивановича Грабовских утверждена в графском достоинстве, без предъявления на оное дальнейших доказательств.

Высочайше утвержденным 28 мая 1840 г. положением Комитета министров утверждены в графском достоинстве родные племянники и внуки графа Степана Фомича Грабовского.

Высочайше утвержденным 1 февраля 1894 г. мнением Государственного совета утвержден за Иосифом-Карлом-Густавом Антоновичем-Иосифовичем-Фаддеевичем Грабовским графский титул.