Файл с настройками WSL должен (изначально его нет) находиться в домашней папке windows-пользователя (c:\Users\имя_пользователя) и называться .wslconfig. Для использования максимум 2 ядер процессора и 2ГБ оперативной памяти в конфигурационном файле нужно прописать следующие строки:

[wsl2]
memory=2GB
processors=2

После создания файла конфигурации WSL необходимо остановить командой wsl --shutdown и запустить снова.

Дополнительная информация по теме.