それは千代の富士引退当時から言われてたことなので、貴闘力の素行云々は関係ないと思います。
むしろ初代貴ノ花に引退を決意させたのが千代の富士だったというのを踏まえてのことかと。