도구로 건너뛰기

도구

HTML·위키 스크랩 찌꺼기 찾기

HTML 태그, 이름·숫자 엔티티, [[분류:]]·[[파일:]]·위키 링크, 마크다운 링크를 패턴으로 찾습니다. 지우기는 치환이며 HTML 파서가 아닙니다. 원본은 이 탭을 떠나지 않습니다.

패턴 찾기는 이 탭에서만 합니다. 붙여 넣은 글을 올리지 않습니다.

어떤 찌꺼기를 찾는가

HTML 태그: </?이름 …> 형태의 보수적 패턴입니다. 브라우저 파서가 아니어서 깨진 마크업은 놓칩니다.

엔티티: &이름; , &#숫자; , &#x16진; . 지울 때 푸는 것은 nbsp, lt, gt, amp, quot, apos, 숫자 형식뿐입니다. 모르는 이름은 그대로 둡니다.

위키: [[분류:]] [[파일:]] [[틀:]] 와 영어 Category/File/Image/Template 접두가 이름공간 표시입니다. 다른 [[링크|표시]] 는 지울 때 마지막 | 뒤만 남깁니다.

마크다운: [라벨](url) 과 ![대체](url). 라벨이나 대체 텍스트를 남깁니다. JSONL 모드는 문자열 칸만 다시 씁니다.

하지 않는 일

  • 자바스크립트, CSS 배치, DOM을 실행하지 않습니다. style 블록과 짝이 없는 < 는 HTML 트리가 아닙니다.
  • 모든 HTML 이름 엔티티를 풀지 않습니다. 모르는 &foo; 를 그대로 두는 것이 의도입니다.
  • 한 줄이 깨끗하다고 덤프 전체를 판단하지 않습니다. 한 번에 2만 줄, 또는 약 200만 글자까지입니다.

붙여 넣기

입력 모양

HTML 0 · 엔티티 0 · 위키 이름공간 0 · 위키 링크 0 · 마크다운 0 · 손본 줄 0 · JSON 객체 0 · 오류 0

자주 나오는 질문

위키백과 덤프를 지우나요?

한국어 웹 텍스트에 흔한 패턴 일부를 지웁니다. MediaWiki XML, 표, 틀은 덤프 도구가 필요합니다.

지운 뒤에도 &copy; 가 남습니다.

짧은 엔티티 목록만 풉니다. 나머지를 여기서 만들면 가짜 표가 됩니다.

기어델이 파일을 받나요?

받지 않습니다. 카탈로그도 데이터셋을 보관하지 않습니다. 이 도구는 탭 안의 글만 다시 씁니다.

기어델에서 이어서

과제로 데이터셋 고르기 →

한국어 지시문·학습 모음 →

Alpaca·ShareGPT·messages →

평가셋과 학습 데이터 →

브라우저 도구 모음 →