Сначала нужно загрузить инсталлятор отсюда. Для подавляющего большинства современных инсталляций Windows Вам нужен файл qemu-ga-x64.msi. Если у Вас 32-разрядная Windows — соответственно, Вам понадобится файл qemu-ga-x86.msi.
Также инсталлятор qemu-guest-agent есть в образе CD с драйверами VirtIO, который можно загрузить по ссылкам: стабильная версия или последняя версия.
Далее инсталлятор нужно просто запустить. На несколько секунд покажется чёрное окно командной строки. На этом инсталляция закончена, дополнительных настроек не требуется.