Уроженец хутора Нюрса Томского уезда с 1946 года работал преподавателем черчения и рисования в школе села Подгорного. В 1947 году приехал в Томск, был членом товарищества «Художник».
В 1951 году с пейзажем «Вечер на Томи» дебютировал на республиканской выставке в Москве. Инициатор создания картинной галереи в Подгорном, которой даровал 36 работ.
Яков Панов ушёл из жизни в Томске в возрасте 76 лет.