Windows10「付箋」を起動させると過去の付箋が大量に出てくる

Windows10に搭載されているアプリ「付箋」を起動させると、過去の付箋が大量（10個以上）に出てきます。
・「新しいメモ」でも「メモの一覧」でも同様の挙動をします。
・一度「すべてのウィンドウを閉じる」をして再起動させても同じように出てきます。
・一つ一つ削除した後、再起動させてもまた同じように出てきます。
・「すべてのノートを非表示にする」も、ただウィンドウがしまわれるだけで閉じてくれるわけではないようです。

これらが表示されないよう設定する方法はありますか？
ご存じの方、ご回答いただけますと幸いです。よろしくお願いいたします。