AutoCrawler (이미지 수집)
구글·네이버 이미지 수집 도구. 구글·네이버 이미지 검색 결과를 병렬로 내려받는 데이터셋 수집 도구입니다.
AutoCrawler는 구글·네이버 이미지 검색 결과를 멀티프로세스로 내려받는 크롤러입니다.
GitHub 현황 (2026년 8월 기준)
- 스타 1,692 · 포크 423
- 라이선스 Apache-2.0 · 저장소
YoongiKim/AutoCrawler - 생성 2018-11-21 · 마지막 push 2024-04-15
포크 423개는 이미지 데이터셋을 직접 만들어 쓰는 사람이 그만큼 많다는 뜻입니다.
학습용 이미지가 늘 부족한 문제
분류 모델을 만들려면 클래스마다 수백~수천 장이 필요합니다. 공개 데이터셋에 없는 주제(특정 상품, 국내 간판, 지역 사물)라면 직접 모아야 합니다.
검색 결과를 자동으로 받는 도구가 계속 만들어지는 이유입니다. 네이버를 함께 지원하는 것이 한국 데이터에서는 실질적인 차이를 냅니다.
그리고 검색 결과로 모은 데이터는 품질이 고르지 않습니다. 관련 없는 이미지, 중복, 워터마크가 섞이므로 사람이 걸러내는 단계가 반드시 필요합니다. 마지막 push가 2024년이라 검색 페이지 구조 변경에 대응이 안 됐을 수도 있습니다.
같은 결의 한국 데이터 수집 도구
- 공공데이터 분석 실습 모음
- DART 공시 파서 계열
- 네이버 검색 MCP
- 경량 한글 OCR API
이런 분께 맞아요
- 이미지 분류 모델용 데이터셋을 직접 만드는 개발자
- 공개 데이터셋에 없는 주제를 다루는 연구자
- 한국 관련 이미지가 필요한 학습자
- (저작권·약관 확인이 선행돼야 합니다)
이런 서비스도 있어요
데이터 전체 →
Chat DB Manager (자연어 SQL)윈도우용 DB 클라이언트. 말로 물으면 연결한 데이터베이스 문법에 맞는 SQL을 편집기에 채워 주고, 사용자가 읽고 고친 뒤 직접 실행하는 데스크톱 앱입니다.Measured코드 없는 이벤트 수집 도구. 배포 없이 클릭 몇 번으로 사용자 행동을 수집해 GA·Amplitude·Mixpanel·PostHog로 보냅니다. 설치는 코드 한 줄입니다.
LexQ비즈니스 규칙 외부화 도구. 할인 기준 한 줄 바꾸는 데 PR·리뷰·스테이징·배포로 2주가 걸리던 문제를 풉니다. 규칙을 코드 밖으로 꺼내 시뮬레이션으로 증명하고 배포 없이 반영합니다.대한민국 행정구역 지도 데이터GeoJSON 읍면동 경계 파일. 시도·시군구·읍면동 경계를 Shapefile·GeoJSON으로 정리한 데이터셋으로, 스타 478개와 포크 185개를 받았습니다.korean-stats-mcp (딴짓하는 류주임)KOSIS 국가통계 MCP. 「광진구 고용률」처럼 물으면 AI가 국가데이터처 KOSIS 공식 수치를 통계표 출처와 함께 답하게 해 주는 무료 MCP 서버입니다.
치즈보드 (ChhezBoard)SOOP·치지직 시청자 통계 대시보드. 씨미까지 합친 시청자 추이와 지금 시청자가 많은 라이브를 한곳에서 볼 수 있습니다.자주 묻는 질문
AutoCrawler, 어떤 서비스인가요?
AutoCrawler는 구글·네이버 이미지 검색 결과를 멀티프로세스로 내려받는 크롤러입니다.
AutoCrawler, 누가 만들었나요?
AutoCrawler는 구글·네이버 이미지 검색 결과를 멀티프로세스로 내려받는 크롤러입니다. 한국 1인 개발자 생태계의 데이터·개발도구 사례로 Dreamboat 디스커버에 수록돼 있습니다.
AutoCrawler, 어떤 사람에게 추천되나요?
이미지 분류 모델용 데이터셋을 직접 만드는 개발자 공개 데이터셋에 없는 주제를 다루는 연구자 한국 관련 이미지가 필요한 학습자 (저작권·약관 확인이 선행돼야 합니다)
AutoCrawler, 어디서 사용할 수 있나요?
이 페이지의 「사이트 가보기」 버튼으로 AutoCrawler (이미지 수집) 공식 사이트에 바로 갈 수 있습니다. Dreamboat 디스커버에서는 이 서비스가 무엇이고 누구에게 맞는지, 비슷한 한국 1인 개발자가 만든 서비스는 무엇이 있는지 함께 정리해 두었습니다.
