В творчестве Грузинова значительное место занимают стихотворения о русской деревне.
Родился в деревне Шебаршино Смоленской губернии в крестьянской семье.
Выступал в печати с 1912 года, в 1915—1926 годах выпустил ряд поэтических сборников («Бубны боли», «Избяная Русь», «Малиновая шаль» и др.); его небольшой сборник «Серафические подвески» (1921) был конфискован из-за использования обсценной лексики.
В 1924 году вместе с Есениным объявлял о «роспуске» группы имажинистов, планировал вместе с Есениным в последние годы его жизни ряд несостоявшихся организационных мероприятий (создание журнала, группы «Россияне»). Грузинову принадлежат воспоминания о Есенине («С. Есенин разговаривает о литературе и искусстве»), Хлебникове и Маяковском.
В 1939—1940 годах подготовил итоговый сборник стихов, не опубликованный при жизни Грузинова.
в 1942 году он умер в Кунцеве от голода.