javascatさん、こんにちは。フォーラムオペレーターのKumoです。
MSDNフォーラムにご投稿くださいましてありがとうございます。
ご質問によって、下記の方法をお薦めします。
1、非互換性があると思います。
「windows10」に付属の「openSSH」を使用している場合は、Gitに付属のSSHバージョンを使用してみてください。
方法:
構成前に、使用しているSSHバージョンを確認:

構成後に、cmdウィンドウを再起動し、SSHバージョンを確認:
そして、VSCodeをもう一度開いて接続します。
2、ほかの要因からの干渉:
①PCに実行されている無関係なプロセスを閉じて、ネットワークとメモリ使用量などの影響を減らします。
②VSCodeの無関係な拡張機能を無効にします。
3、最新バージョンのVSCodeと拡張を使用します。
設定後、VSCodeを再起動してください。
どうぞよろしくお願いいたします。
MSDN/ TechNet Community Support Kumo ~参考になった投稿には「回答としてマーク」をご設定ください。なかった場合は「回答としてマークされていない」も設定できます。同じ問題で後から参照した方が、情報を見つけやすくなりますので、 ご協力くださいますようお願いいたします。また、MSDNサポートに賛辞や苦情がある場合は、MSDNFSF@microsoft.comまでお気軽にお問い合わせください。~