(Похоже, что сам герой не знал, за что, или не всегда.)
Это всё были экстраординарные ситуации? Что делал сын отцу, чтобы каждый раз подвергаться такому? Это к вопросу, в чём виноват отец. И одновременно, почему сын не стал сопротивляться и не ушёл. Привык с детства, что у него нет никаких шансов против сокрушительной и безжалостной силы. Стал жертвой, недостаточно сильной личностью, чтобы дать отпор при угрозе насилия.
А не отец ли свёл в могилу первую жену, тираня её дома так же, как сына?
(На всякий случай, если это в очередной раз не очевидно: это моё личное восприятие текста, не претендующее на истину. Я так его вижу.)