大倉忠義、『鳥貴族』会長の父から「昔から『継がせない』と言われてた」その理由も明かす