6月より、Windows 10へのアップグレードの予約を促すアプリが動作を始めています。このアプリをタスクトレイに表示させなくする方法です。
※Windows 10への無償アップグレードグレードは、Windows 7 SP1 Windows8.1が対象。すべてが対象というわけではなく、その中でMS側の条件を満たしたものだけ。
手順は、下記のURLを参照してください。
http://www.atmarkit.co.jp/ait/articles/1506/08/news025.html
手順をみた感覚だと、元になっているアップデートを消すよりも、リスクはありますが、レジストリを変更するほうが良さそうです。 （Windows Update配布なので、またインストールされる可能性があるため）
また、このWindows 10のアップグレード予約のアプリですが、2015年5月のWindows Updateの一部として配布されています。アップグレード対象かどうかに関わらず、Windows内にはプログラムがインストールされており、定期的に実行もされています。ただし、対象外のPCでは、そもそも起動しないのでユーザは気が付きません。（パス： C:\Windows\System32\GWX\ ）
ちなみに、がんばってどうにか起動させようと試みましたが、アプリは起動しませんでした。（10を試してみたかったので、とても悔しい。。。）MS側がアップグレードの条件を変更すれば、起動される可能性はありえます。（定期的にタスクスケジューラで起動するようになっています。）
追記。
検証した結果、Windows10へのアップグレードを行うプログラム（KB3033583）は、 IE11をインストールしていない場合にはWindows Updateに表示されません。そのため、IE11を入れていないPCでは、現状、対応しなくてもよいでしょう。