不倫校長、義母・父・妻も「不幸」にしていた