Возможно ли писать .asi плагины на vscode? Если да, то подскажите расширение чем компилировать, и т.д. Буду благодарен)

Возможно.

Можно даже в блокноте писать, но нужен компилятор - что логично.

Можно более подробный гайд?

Полное руководство по CMake. Часть вторая: Система сборки

Введение В данной статье рассмотрено использование системы сборки CMake, применяемой в колоссальном количестве проектов на C/C++. Строго рекомендуется прочитать первую часть руководства во...

habr.com

писать можно, а вот с компилирование возникнут вопросики

а почему просто не скачать визуалку без приписки CODE?