宮迫博之、相次ぐ男女トラブル告発に「怖い」嘆き「あの時はつらかったって言われたら…」