lm-evaluation-harness

Форк

Описание

A framework for few-shot evaluation of language models.

language-model

27.42 MiB

Языки

Python99,2%
C++0,8%

Sungho Park

Update installation commands in openai_completions.py and contributing document and, update wandb_args description (#1536)

06 мар 2024, 23:58

Не верифицирован

06 мар 2024, 23:589e6e240

.github

Make dependencies compatible with PyPI (#1378)

3 года назад

docs

Update installation commands in openai_completions.py and contributing document and, update wandb_args description (#1536)

2 года назад

examples

modify `WandbLogger` to accept arbitrary kwargs (#1491)

2 года назад

lm_eval

Update installation commands in openai_completions.py and contributing document and, update wandb_args description (#1536)

2 года назад

scripts

Cleanup and fixes (Task, Instance, and a little bit of *evaluate) (#1533)

2 года назад

templates

adjust format

3 года назад

tests

Cleaning up unused unit tests (#1516)

2 года назад

4 года назад

4 года назад

Create a means for caching task registration and request building. Ad… (#1372)

2 года назад

.pre-commit-config.yaml

Vllm update DP+TP (#1508)

2 года назад

CITATION.bib

Update CITATION.bib (#1285)

3 года назад

3 года назад

6 лет назад

modify `WandbLogger` to accept arbitrary kwargs (#1491)

2 года назад

ignore.txt

Update ignore.txt

3 года назад

mypy.ini

disable `mypy` (#1193)

3 года назад

pile_statistics.json

add pre-commit

4 года назад

pyproject.toml

Cleanup and fixes (Task, Instance, and a little bit of *evaluate) (#1533)

2 года назад

requirements.txt

Revert "Update requirements.txt"

5 лет назад

setup.py

Switch Linting to `ruff` (#1166)

3 года назад

README.md