トップ画面からアイコンを削除したい

トップ画面からFacebookなどのアイコンを削除する際に右の3つのドットの削除をクリックすると、その場では削除できるのですが、また出現してしまいます。出現しないようにするにはどのようにすればいいのでしょうか。