キュー解除をしないのならば、そちらのDL完了までにあなたを無視リストに入れますので、あしからず。