RuQualBench/.env.example at main · kristaller486/RuQualBench · GitHub

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
# Настройки для тестируемой модели v1 и runtime-параметров v2
# В v2 модель задается через --model, провайдер - через --test-provider.
# Ключи v2 берутся из переменных, указанных в providers.toml/providers.default.toml.

# Транспорт: litellm | google_genai | google_genai_batch
# - litellm: Универсальный клиент через LiteLLM (по умолчанию)
# - google_genai: Прямой доступ к Google GenAI API
# - google_genai_batch: Google GenAI Batch API (50% скидка, асинхронная обработка до 24ч)
TEST_MODEL_TRANSPORT=litellm
TEST_MODEL_NAME=
TEST_MODEL_BASE_URL=
TEST_MODEL_API_KEY=
TEST_MODEL_MAX_WORKERS=10
TEST_MODEL_TEMPERATURE=0
TEST_MODEL_MAX_TOKENS=8192
TEST_MODEL_EXCLUDE_THINK=false

# Ключи для providers.default.toml
OPENROUTER_API_KEY=
LITELLM_PROXY_API_KEY=

# Настройки для модели-оценщика (judge)
# Транспорт: litellm | google_genai | google_genai_batch
JUDGE_MODEL_TRANSPORT=litellm
JUDGE_MODEL_NAME=litellm_proxy/gemini-2.5-pro
JUDGE_MODEL_BASE_URL=
JUDGE_MODEL_API_KEY=
JUDGE_MODEL_MAX_WORKERS=10
JUDGE_MODEL_MAX_TOKENS=32768
JUDGE_MODEL_EXTRA_BODY=

# Настройки для модели исправления ошибок
CORRECT_MODEL_NAME=
CORRECT_MODEL_BASE_URL=
CORRECT_MODEL_API_KEY=
CORRECT_MODEL_MAX_WORKERS=5
CORRECT_MODEL_TEMPERATURE=0.3
CORRECT_MODEL_MAX_TOKENS=8192

# Настройки ретраев при ошибках
MAX_RETRIES=5
RETRY_DELAY=1.0