Родился 9 декабря 1929 года в селе Вячеславка Приморского района Запорожской области в семье болгарских переселенцев.
Окончив школу ФЗО, в 1948 году начал трудовую деятельность в качестве плотника треста «Запорожстрой», а затем был переведен в «Кривожострой» кадровым рабочим. В 1962 году его перевели в трест «Марганецрудстрой» бригадиром каменщиков-монтажников.
В 1985 году Ганчев вышел на пенсию, но продолжал работать технологом строительно-монтажных работ на ЖБК-27.
Умер в 2009 году и похоронен в городе Никополь.
В 1969 году Ганчеву И. Д. было присвоено звание почетного гражданина города Никополя, а в 2004 году на проспекте Трубников Никополя ему был установлен бронзовый бюст.