@echo off
echo ==============================================================
echo Testing Qwen 35B UD-Q2_K_XL - RAW PERFORMANCE MODE
echo ==============================================================

SET ROOT_DIR=C:\Users\vatutin_n_a\sch-qwen\
SET BIN_DIR=%ROOT_DIR%llama-cpp-turbo\build_turbo\bin\Release
SET MODEL_PATH=D:\Qwen3.6-35B-A3B-UD-Q2_K_XL.gguf

"%BIN_DIR%\llama-cli.exe" ^
    -m "%MODEL_PATH%" ^
    -p "Привет! Расскажи кратко, чем архитектура MoE отличается от обычной." ^
    -n 128 ^
    -c 8192 ^
    -t 6 ^
    --flash-attn on ^
    --cache-type-k q4_0 ^
    --cache-type-v q4_0 ^
    --no-display-prompt

echo.
pause
