Родился 11 мая 1748 года, сын генерал-аншефа И. А. Прозоровского и его жены Марии Михайловны урождённой княжны Голицыной. В военную службу записан в 1755 году в Рязанский карабинерный полк.
В 1763 году произведён в премьер-майоры и в 1770 году — в полковники Рязанского полка. Принимал участие в русско-турецкой войне 1768—1774 годов и 27 августа 1770 года за отличие в Кагульской битве был удостоен ордена св. Георгия 4-й степени (№ 25 по кавалерским спискам). Фельдмаршал П. А. Румянцев писал в реляции о сражении императрице Екатерине II:
С 1773 года занимал должность генеральс-адъютанта своего дяди генерал-фельдмаршала князя А. М. Голицына. 17 марта 1774 года произведён в генерал-майоры и назначен шефом Кинбурнского драгунского полка, состоял при корпусе войск в Новороссийской и Азовской губерниях.
В 1779 году вышел в отставку, проживал в своём имении под Москвой и скончался 15 августа 1800 года, похоронен в Никольской церкви села Никольское-Шапилово, которую построил на свои деньги.
Его брат Иван был генерал-поручиком, сестра Варвара была замужем за генералиссимусом А. В. Суворовым.