곽세종은 고종 3년(1866)에 병인양요가 일어났을 때 재임(齋任)의 직책에 있었는데, 프랑스군의 침공으로 행궁과 관사가 불탔는가 하면, 양민이 무자비하게 학살당하고 향교 역시 불길에 휩싸여 있었다. 이에 곽공이 불길을 뚫고 대성전에 들어가 모든 성현의 위판을 꺼내어 서도면 볼음도로 옮겼다가 난이 평정된 후에 다시 모셔다가 봉안하였다.