Сергей Харитонович родился в 1926 году в Усть-Уйском районе Курганской области. В Рабоче-Крестьянскую Красную Армию был призван Усть-Уйским районным военным комиссариатом Курганской области 11 ноября 1943 года.

Воевал Сергей Харитонович на 2 и 3 Украинских фронтах. Работал он радистом на бронетранспортере: выполнял обязанности передвижного наблюдательного пункта, обеспечивал связь с главной станцией.

В декабре 1944 года перед ним была поставлена задача: вынести тело убитого подполковника Романенко из района хутора Лая, высота 207. Несмотря на ураганный огонь со стороны противника, бронетранспортер Ольховского выдвинулся к позициям врага. Приказ был выполнен, при обстреле было уничтожено 4 солдата противника и 1 пулемет.

Ефрейтор Сергей Ольховский показал себя в бою смелым и отважным воином. За этот подвиг был представлен к Правительственной награде – медали «За отвагу».

За годы Великой Отечественной войны 1941-1945 гг. Ольховский Сергей Харитонович был дважды награжден медалью «За отвагу», вторую медаль он получил в мае 1945 года.