1861 году была учреждена воскресная школа для взрослых, и П. Н. Свистунов был назначен членом-распорядителем. При губернском по крестьянским делам присутствии в апреле 1861 года была создана комиссия по распространению грамотности среди крестьян, освобожденных от крепостной зависимости. В состав ее вошли П. Н. Свистунов и Е. П. Оболенский, обязавшиеся разработать устав «Общества содействия к распространению грамотности в селениях временно-обязанных крестьян Калужской губернии».