Ворошильский родился в семье врача-еврея. Во время гитлеровской оккупации работал столяром, пользуясь фальшивыми документами. В 1945 году уехал в Лодзь и начал изучать польскую филологию в местном университете. Стал членом Польской рабочей партии и автором агитационной поэзии. В 1947 году переселился в Варшаву. В 1952-1956 годах учился в аспирантуре в московском Литературном институте им. Горького.
Доклад Н. С. Хрущёва «О культе личности и его последствиях» оказал глубокое влияние на его творчество. Во время Венгерского восстания 1956 года находился в Будапеште. Постепенно отошёл от своих прежних политических взглядов. В 1966 году был исключён из ПОРП. В 1970-ых годах был участником в демократической оппозиции, его произведения были запрещены к публикации. 13 декабря 1981 года во время введения в Польше военного положения Ворошильский был интернирован.
По словам Томаса Венцловы, «Ворошильский был великим знатоком русской культуры XIX и XX веков». Он переводил на польский язык поэзию Маяковскoго, Бродского, Геннадия Айги, Натальи Горбаневской, Аверинцева, Ирины Ратушинской, дневники М.Пришвина, произведения Зощенко, Солженицына, Василя Быкова. Ворошильский был автором польских биографий Пушкина, Маяковского, Есенина и Салтыкова-Щедрина.
Большую ценность имеют его многолетние дневники, а также мемуарные хроники:
Произведения В.Ворошильского переведены на английский, французский, немецкий, испанский, венгерский, чешский, словацкий и др. языки.