リモートされる側のレジストリを書き換えます。
regeditで下記を書き換えます。
コンピューター\HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\Keyboard Layouts\00000411
Layout File KBDJPN.dll 英語キーボード
Layout File KBD106.dll 日本語キーボード
PC再起動
私の環境(MAC -> Win10,MAC -> Win11, Win10 ->Win11 : ホスト->リモート)では、この設定変更でうまくいっています。