WSLではマウントしたドライブ上のファイルにchmod効かないから気をつけろって話 - Qiita

結論wsl上の.sshにでも鍵をコピーしてからchmodで権限を変更して使えwsl上でsshしたくなったwindowsも最近よく頑張っているのでpowershell上からsshするのも悪くない…