Родился 16 сентября 1913 г. в станице Каневской. Окончил три класса. Работал в колхозе конюхом, трактористом. Действительную военную службу проходил с 1935 по 1937 г. На фронте с июня 1941 года. Механик – водитель танка 66-й гвардейской танковой бригады (12-й гвардейский танковый корпус 2-й гвардейской танковой армии 1-го Белорусского фронта) гвардии старшина И.А. Передерий в марте 1943 года в составе отряда из четырех танков участвовал в захвате и удержании поста вблизи украинского города  Белая Церковь. Противник уничтожил три танка, но Иосиф Антонович с одним танком и двенадцатью автоматчиками удержал мост до подхода наших главных сил. Находясь в танковой разведке в двенадцати километрах от  Праги, с боем захватил населенный пункт, уничтожил 3 танка, 16 автомашин, склад боеприпасов, пленил немецкого генерала, которого на своем танке доставил в часть. Звание Героя Советского Союза  И.А. Передерию присвоено 24 марта 1945 года. В 1946 году он демобилизовался, работал председателем колхоза, бригадиром в станице Каневской. Награжден орденами Ленина, Красного Знамени, Отечественной войны I степени, Славы III степени, медалями. Умер 31 мая 1975 года. Похоронен в станице Каневской.