Исследование структуры и качества датасетов

data

investigate-dataset — это скилл для Claude Code, который исследует структуру и качество датасетов из HuggingFace, CSV и JSON/JSONL файлов без использования заранее написанных скриптов. Скилл охватывает весь процесс: поиск конфигурации датасета в коде оценок (переменные `DATASET_PATH`, `DATASET_REVISION`, функция `record_to_sample()`), загрузку сырых данных через `datasets.load_dataset()`, `pd.read_csv()` или `pd.read_json()`, а также анализ схемы, формы, пропущенных значений и дубликатов. Поддерживаются gated-датасеты через `HF_TOKEN`, потоковая загрузка больших файлов и быстрые команды через `uv run python` для просмотра метаданных без полного скачивания. Скилл предназначен для разработчиков, работающих с Inspect AI, которым нужно разобраться в структуре данных перед написанием или отладкой пайплайнов оценки.