Windows11と同様に、Linux で KeePassXC を使用すれば、起動時に ssh-agent に鍵情報を記録し、終了時に消去します。Windows11 から ssh を -A オプション付きで Linux にログインすれば、Windows11 の ssh-agent の鍵情報を使用できます。ただし条件付きです。