試しにクイックリンクをすべて削除してみたのですが、私の環境でもプラスボタンごと消えたので、Edgeのバグか仕様の様な気がします。 適当なサイトを数回開くと、クイックリンクによく使うサイトとして登録され、プラスボタンも復活しました。 (1度も開いたことのないサイトの方が登録されやすいようです。) 全て削除しないように気を付けながら整理してみてください。 もっと賢い方法があるのかもしれませんが私にはこれしか分かりませんでした。 Windows11カテゴリもMicrosoft Edgeカテゴリもまだありませんが、質問文で明記した方が他の方からの回答も付きやすくなると思います。