Paul Nardal, son père