GSM8K Consistency

GSM8K-Conscience Benchmark

GSM8K-Consister est une base de données de référence pour analyser la cohérence du Arithmetic Reasoning on GSM8K .

L'ensemble de données est disponible? Face étreint!

Il s'agit d'une référence de perturbation préservant les problèmes de MATH-Problem qui peut être très utile pour évaluer la cohérence de la capacité de raisonnement arithmétique.

Utilisation de l'ensemble de données

Exécutez la commande suivante pour charger les données:

 from datasets import load_dataset

dataset = load_dataset ( "shuyuej/GSM8K-Consistency" )
dataset = dataset [ 'train' ]
print ( dataset )

Description de l'ensemble de données:

 Dataset ({
    features : [ 'id' , 'original_question' , 'paraphrased_question' , 'answer_detail' , 'numerical_answer' ],
    num_rows : 85225
})