Родился в 1804 году на Локтевском заводе Алтайского округа. Двенадцати лет поступил в горнозаводское училище, откуда по окончании курса был послан на службу в Санкт-Петербург при кабинете его величества.
По возвращении в 1869 году в Барнаул Гуляев всецело отдался практической и научной деятельности. Хорошо ознакомившись с естественными и бытовыми условиями Алтая, он положил основание новым промыслам, улучшению культурных растений и разведению новых пород скота и сельскохозяйственных растений. Его дом в Барнауле постоянно посещался как русскими, так и иностранными путешественниками, исследователями Алтая, которые знакомились с чрезвычайно интересными коллекциями хозяина.
Умер в Барнауле в мае 1888 года.
Кроме массы заметок и корреспонденций по вопросам, касающимся географии, этнографии, археологии и истории края, можно отметить следующие главные работы Гуляева:
Из ненапечатанных: