Live survey304 models · 14 providers · 22,792 auditsAudited grill-with-docs · SAFE →What changedHow we verifyllms.txt

Agent skill · Audited from source

обработка и нормализация больших Jsonl файлов

skill · ECNU-ICALK/AutoSkillLicence not declaredAudited 14 Oct 2026 · source 04e912cff54b

★ 602pushed 157 days agoversion 0.1.0
✓SAFEGrade B · 89/100 · 14 Oct 2026 · 04e912c
602repo stars · whole ECNU-ICALK/AutoSkill

Is it safe? Yes — SAFE, grade B (89/100). We read this skill's source at commit 04e912cff54b and found no filesystem, network or shell access and no hard-coded secrets. What it does: Создание скриптов для эффективной обработки больших JSONL файлов (десятки ГБ) с использованием чанков, быстрой библиотеки orjson, валидации данных, сортировки, нормализации числовых полей и добавления классифицирующего…

Ask an AI about this pageGChatGPTCClaudePPerplexityGeGeminiXGrok
More
Cite

Cite this page

ModelsAtlas. “обработка и нормализация больших Jsonl файлов (ECNU-ICALK/AutoSkill)”. Retrieved 14 Oct 2026. https://modelsatlas.com/skills/ecnu-icalk/jsonl

Trust audit

Audit 0.4.1 · source read 14 Oct 2026

Trust score89/100✓SAFE B
0 critical0 high0 medium0 low0 info

SAFE means nothing in the source contradicts what the skill says it does. Grade B is shared by 16,667 of 17,602 audited skills.

What the source does

  • FilesystemNone observedNo reads or writes in the source
  • NetworkNone observedNo outbound calls in the source
  • ShellNone observedNo commands run in the source
  • DependenciesPinnedNothing floats
  • SecretsNone foundNo keys in source

Five audit layers

LayerWhat we checkResultFindings
L0 ProvenanceRepo owner, licence, archive status, activityPASS0
L1 Static sourceSecrets, path traversal, supply chain, hidden codeNA0
L2 InstructionsPrompt injection, authority framing, hidden directivesPASS0
L3 InventoryThe files and declarations match the sourcePASS0
L4 SandboxRun in isolation and watch behaviourSKIPPED why0

Gates applied: no behavioural pass.

Findings (0)

No findings at any severity. We re-audit when the source changes.

Audit 0.4.1 · source sha 04e912cff54b · 14 Oct 2026Report an issue or request a re-scan

Provenance

Who published it, and what the verdict is pinned to

What it tells the agent

Full source on GitHub ↗

Its description: Создание скриптов для эффективной обработки больших JSONL файлов (десятки ГБ) с использованием чанков, быстрой библиотеки orjson, валидации данных, сортировки, нормализации числовых полей и добавления классифицирующего…

---
id: "c9b3442d-ea57-4a38-b4f3-14ff366ee07e"
name: "Обработка и нормализация больших JSONL файлов"
description: "Создание скриптов для эффективной обработки больших JSONL файлов (десятки ГБ) с использованием чанков, быстрой библиотеки orjson, валидации данных, сортировки, нормализации числовых полей и добавления классифицирующего столбца."
version: "0.1.0"
tags:
  - "python"
  - "jsonl"
  - "data-processing"
  - "normalization"
  - "big-data"
triggers:
  - "обработай большой jsonl файл"
  - "сортировка и нормализация данных"
  - "скрипт для обработки логов"
  - "оптимизация кода для больших файлов"
  - "нормализация MinMaxScaler для jsonl"
---

# Обработка и нормализация больших JSONL файлов

Создание скриптов для эффективной обработки больших JSONL файлов (десятки ГБ) с использованием чанков, быстрой библиотеки orjson, валидации данных, сортировки, нормализации числовых полей и добавления классифицирующего столбца.

## Prompt

# Role & Objective
Ты эксперт по обработке данных на Python. Твоя задача — создать скрипт для эффективной обработки больших JSONL файлов (десятки гигабайт), обеспечивая валидацию, сортировку, нормализацию и классификацию записей.

# Operational Rules & Constraints
1. **Библиотеки**: Используй `orjson` для быстрого парсинга JSON. Используй `pandas` и `sklearn.preprocessing.MinMaxScaler` для обработки данных внутри чанков.
2. **Чанкование**: Обрабатывай файл порциями (чанками), чтобы не загружать его целиком в память. Размер чанка должен быть настраиваемым (например, 10 000 строк).
3. **Валидация**: Перед обработкой проверяй наличие всех обязательных ключей в записи. Если хотя бы одного ключа нет или важные поля (например, имя хоста, время) пустые, пропусти эту строку.
4. **Сортировка**: Сортируй данные внутри каждого чанка по заданным столбцам (например, по имени хоста и времени).
5. **Нормализация**: Применяй `MinMaxScaler` к указанным числовым столбцам.
6. **Классификация**: Создавай новый столбец `Class` на основе логического условия (например, проверка вхождения подстроки в строковое поле).
7. **Запись**: Записывай обработанные данные в выходной файл в формате JSONL построчно.

# Anti-Patterns
- Не загружай весь файл в память сразу.
- Не используй стандартный модуль `json` для больших файлов.
- Не прерывай выполнение при ошибке парсинга одной строки (пропускай её).

# Interaction Workflow
1. Запроси входной и выходной файлы.
2. Запроси список полей для валидации, сортировки и нормализации.
3. Запроси правило для поля `Class`.
4. Предоставь готовый код с чанковой обработкой.

## Triggers

- обработай большой jsonl файл
- сортировка и нормализация данных
- скрипт для обработки логов
- оптимизация кода для больших файлов
- нормализация MinMaxScaler для jsonl

Excerpt, first 2,732 characters of SKILL.md, verbatim from the audited commit. It is text from someone else’s repository, quoted so you can judge it before your agent reads it.

Install

Pinned to the audited commit 04e912c

Download folder ↗
git clone https://github.com/ECNU-ICALK/AutoSkill
git -C AutoSkill checkout 04e912cff54b

The author documents no install command, so this uses the repository directly. Our verdict covers commit 04e912cff54b only.

Works in

The author has not said which agents this skill supports, and we have not tested it in any.

Audit history

Every audit, every source change

  1. ✓SAFE B 89 / 100

    first audit · source 04e912cff54b

Similar skills

Questions about обработка и нормализация больших Jsonl файлов

What does the обработка и нормализация больших Jsonl файлов skill do?
AutoSkill: Experience-Driven Lifelong Learning via Skill Self-Evolution
Is обработка и нормализация больших Jsonl файлов safe to install?
The audit found nothing in the source that contradicts what it says it does, and graded it B (89/100). Grade A is held back for packages that have also passed a sandboxed behavioural run, which is why a clean skill reads B.
What can обработка и нормализация больших Jsonl файлов access on my machine?
The audit observed no filesystem, network or shell use at all in its source.
How current is this page?
The grade is for one exact copy of the source (04e912cff54b), read on 2026-10-14. The repository is watched, and a new audit runs when it changes — this is the first audit.

Sources

Spotted something wrong? Report a correction · Methodology

Keep going in your AI

Opens with this page as the source. We add nothing else to the prompt.

  • What does the обработка и нормализация больших Jsonl файлов skill do?
  • Is обработка и нормализация больших Jsonl файлов safe to install?
  • What can обработка и нормализация больших Jsonl файлов access on my machine?