Passer à la navigation

nemo_rl.data.eval_datasets.mmlu

Afficher en Markdown

Jeu de données MMLU et ses variantes.

Contenu du Module

Classes

NomDescription
MMLUDatasetAucun

API

class nemo_rl.data.eval_datasets.mmlu.MMLUDataset(language: typing.Literal[AR-XY, BN-BD, DE-DE, EN-US, ES-LA, FR-FR, HI-IN, ID-ID, IT-IT, JA-JP, KO-KR, PT-BR, ZH-CN, SW-KE, YO-NG] = 'EN-US', prompt_file: typing.Optional[str] = None, system_prompt_file: typing.Optional[str] = None)
_rekey(data: dict[str, typing.Any])