Заходим на сайт https://www.zabbix.com/download_agents выбираем нужную нам версию агента качаем и запускаем.
Заполняем:

Host name - Имя компьютера (должно появиться автоматически)
Agent listen port - 10050
Zabbix server IP/DNS - IP адрес zabbix сервера
После установки идем в Брандмауэр и создаем правило на входящее подключение
(если правило создалось автоматически пропускаем данный пункт)
Порт 10050
Протокол TCP
Разрешаем подключения для всех профилей
Заходим в настройки > узлы сети > создать узел связи

Имя узла сети - указываем имя нашей windows машины соблюдая регистр
Группы - Выбираем нужные нам группы
Интерфейсы агента – IP адрес,DNS, порт нашей windows машины и выбираем через что будет происходить подключение к нашей windows машине - IP\DNS что нам нужно.
В шаблонах выбираем нужный нам шаблон

Если все настроено верно то значек ZBX загорится зеленым
