nemo-curator
✓LLM 교육을 위한 GPU 가속 데이터 큐레이션. 텍스트/이미지/비디오/오디오를 지원합니다. 퍼지 중복 제거(16배 더 빠름), 품질 필터링(30개 이상의 휴리스틱), 의미 중복 제거, PII 수정, NSFW 감지 기능을 제공합니다. RAPIDS를 통해 GPU 전반에 걸쳐 확장됩니다. 고품질 교육 데이터 세트 준비, 웹 데이터 정리 또는 대규모 말뭉치 중복 제거에 사용합니다.
SKILL.md
| Operation | CPU (16 cores) | GPU (A100) | Speedup |
| Fuzzy dedup (8TB) | 120 hours | 7.5 hours | 16× | | Exact dedup (1TB) | 8 hours | 0.5 hours | 16× | | Quality filtering | 2 hours | 0.2 hours | 10× |
LLM 교육을 위한 GPU 가속 데이터 큐레이션. 텍스트/이미지/비디오/오디오를 지원합니다. 퍼지 중복 제거(16배 더 빠름), 품질 필터링(30개 이상의 휴리스틱), 의미 중복 제거, PII 수정, NSFW 감지 기능을 제공합니다. RAPIDS를 통해 GPU 전반에 걸쳐 확장됩니다. 고품질 교육 데이터 세트 준비, 웹 데이터 정리 또는 대규모 말뭉치 중복 제거에 사용합니다. 출처: orchestra-research/ai-research-skills.
터미널 또는 명령줄 도구(Terminal, iTerm, Windows Terminal 등)를 엽니다 이 명령어를 복사하여 실행합니다: npx skills add https://github.com/orchestra-research/ai-research-skills --skill nemo-curator 설치 후 스킬은 자동으로 AI 코딩 환경에 설정되어 Claude Code나 Cursor에서 사용할 수 있습니다
인용 가능한 정보
AI/검색 인용용 안정적인 필드와 명령어.
- 설치 명령어
npx skills add https://github.com/orchestra-research/ai-research-skills --skill nemo-curator- 카테고리
- *크리에이티브
- 인증됨
- ✓
- 최초 등록
- 2026-02-11
- 업데이트
- 2026-02-18
빠른 답변
nemo-curator이란?
LLM 교육을 위한 GPU 가속 데이터 큐레이션. 텍스트/이미지/비디오/오디오를 지원합니다. 퍼지 중복 제거(16배 더 빠름), 품질 필터링(30개 이상의 휴리스틱), 의미 중복 제거, PII 수정, NSFW 감지 기능을 제공합니다. RAPIDS를 통해 GPU 전반에 걸쳐 확장됩니다. 고품질 교육 데이터 세트 준비, 웹 데이터 정리 또는 대규모 말뭉치 중복 제거에 사용합니다. 출처: orchestra-research/ai-research-skills.
nemo-curator 설치 방법은?
터미널 또는 명령줄 도구(Terminal, iTerm, Windows Terminal 등)를 엽니다 이 명령어를 복사하여 실행합니다: npx skills add https://github.com/orchestra-research/ai-research-skills --skill nemo-curator 설치 후 스킬은 자동으로 AI 코딩 환경에 설정되어 Claude Code나 Cursor에서 사용할 수 있습니다
소스 저장소는 어디인가요?
https://github.com/orchestra-research/ai-research-skills
상세
- 카테고리
- *크리에이티브
- 출처
- skills.sh
- 최초 등록
- 2026-02-11