El ex boxeador habló de su vida privada en una entrevista reciente y explicó la particular situación de su numerosa familia