Род князей Прозоровских происходит от князя Андрея Ивановича Моложского, владельца села Прозорово, потомка великого князя Рюрика в XVIII поколении.
Неоднократными определениями Правительствующего сената род этот утвержден в княжеском достоинстве.
Высочайше утвержденным 10 ноября 1854 г. мнением Государственного совета свиты его величества генерал-майору князю Александру Федоровичу Голицыну дозволено к фамилии своей присоединить фамилию деда его по матери, генерал-фельдмаршала князя Александра Александровича Прозоровского, и именоваться впредь, потомственно, князем Прозоровским-Голицыным.