크롤러 운영 정책 (Crawler Policy)

1. 운영 주체

타운픽(townpick) 서비스의 데이터 크롤러는 다음 법인이 운영합니다.

회사명	타운에이아이 주식회사 (Town-AI Co., Ltd.)
사업자등록번호	585-81-04340
업종	직업정보제공사업 · 정보통신업
직업정보제공사업신고	서울서부 제2026-08호 (J1203020260006)
회사 홈	corp.townai.co.kr
서비스 홈	townai.co.kr
크롤러 관련 컨택	admin@townai.co.kr

2. 수집 5원칙

타운픽 크롤러는 다음 다섯 가지 원칙을 엄격히 준수합니다.

① 사실 데이터만 저장

상품명·가격·혜택 등 창작성 없는 사실 정보만 저장합니다. 전단 이미지·디자인·로고 등 원본 콘텐츠는 영구 저장하지 않습니다.

② 트래픽 환원

모든 상세보기 링크는 본사 공식 페이지로 이동하도록 설계되어 있습니다. 미러링·재가공 호스팅을 하지 않습니다.

③ robots.txt 준수

각 사이트 robots.txt의 Disallow·Crawl-delay·Visit-time을 확인하고 준수합니다. §5의 도메인별 매트릭스로 공개합니다.

④ 일반 사용자 수준 트래픽

요청 간 2–15초 랜덤 지연(jitter)을 두며, 도메인당 월 수십~수백 회 수준의 저빈도 수집만 수행합니다.

⑤ 본사 요청 시 24시간 내 정지

본사 운영팀·법무팀의 정지 요청 수신 시 영업일 1일 이내에 해당 도메인 수집을 완전 정지하며, 조치 결과를 회신합니다. §4 즉시 정지 SOP 참조.

3. 준수 법령

본 크롤러는 대한민국 다음 법령을 준수하도록 설계되었으며, 모든 소스 코드 상단에 표준 법률 고지(Legal Disclaimer)가 의무적으로 표기됩니다.

저작권법 §16(복제권), §18(전송권), §35조의5(공정 이용) — 사실 데이터만 저장, 이미지 미보관

부정경쟁방지법 §2조1호카목(성과 등 무단사용) — 트래픽 환원형 메타 서비스

표시·광고의 공정화에 관한 법률 §3 — 앱 내 상시 면책고지(Disclaimer) 노출, 공식 제휴 관계 부정 명시

정보통신망 이용촉진 및 정보보호 등에 관한 법률 §48조1항 — 정당한 접근 권한 범위 내 수집, robots.txt 위반 도메인 호출 0건 운영

형법 §314(업무방해) — 일반 사용자 수준 트래픽, 자동화 차단 미실행, 정상 응답 패턴 준수

4. 즉시 정지 SOP (Cease & Desist 대응 절차)

본사 운영팀·법무팀 또는 일반 사용자가 다음 절차에 따라 요청 시, 영업일 1일 이내에 해당 도메인 수집을 정지합니다.

STEP 1. admin@townai.co.kr로 다음 항목을 명시한 이메일을 발송합니다.

대상 도메인 (예: example.com)
요청 사유 (저작권·robots.txt·내용증명 등)
요청자 소속·직책 (선택)
회신받을 연락처

STEP 2. 영업일 기준 24시간 이내에 수신 확인 회신을 발송합니다. SLA 24h

STEP 3. 영업일 기준 1일 이내에 다음 절차로 해당 도메인 수집을 완전 정지합니다. SLA 1 영업일

스케줄러(cron) 라인 주석 처리 (5분 내 적용)
해당 크롤러 진입부에 비활성 가드(opt-in 환경변수 패턴) 추가
필요 시 기존 적재 데이터 비공개(is_active=FALSE) 처리

STEP 4. 정지 후 1주간의 모니터링 결과를 요청자에게 회신합니다 (네트워크 로그 그렙 + 수집 건수 0건 확인).

참고 선례: 본 SOP에 따라 다음 도메인의 수집을 이미 자율적으로 중단했습니다.

store.emart.com의 전체 차단(User-agent: * Disallow: /) 정책 확인 → EMART_EVERYDAY 수집 자율 중단 (2026-06-22)
EMART 본 크롤러의 store.emart.com 지점 메타 호출도 사전 빌드된 로컬 캐시로 전환하여 정상 운영 시 호출 0건 (2026-06-23)

5. 도메인별 정책 매트릭스

현재 운영 중인 크롤러가 접근하는 도메인의 robots.txt 정책과 본 서비스의 적용 정책을 공개합니다. 최근 확인 일자는 우측 컬럼에 표기되어 있으며, 분기마다 재검증합니다.

편의점 (Convenience Store)

도메인	robots.txt 요약	우리 정책	상태	확인일
cu.bgfretail.com	robots.txt 미배포 (HTTP 404)	jitter 2–4s, 매일 02:30 KST 1회	✅ 적합	2026-06-23
www.7-eleven.co.kr	`Disallow: /front/, /library/, /management/, /manager/, /upload/, /util/` — 관리·내부 경로만 차단	jitter 2–4s, 우리 접근 경로는 모두 Allow 영역	✅ 준수	2026-06-23
www.emart24.co.kr	`Disallow: /founded/brief/req, /founded/recommend` — 가맹 문의 경로만 차단	jitter 2–4s, 우리 접근 경로는 모두 Allow 영역	✅ 준수	2026-06-23
gs25.gsretail.com	`Crawl-delay: 10` + `Visit-time: 0400-0845 UTC` + `Disallow: /gscvs/ko/cart, /checkout, /my-account`	준수: jitter 10–15s, KST 14:00(=05:00 UTC) 실행, 결제·회원 영역 접근 0건	✅ 엄격 준수	2026-06-23

대형마트 · SSM (Mart)

도메인	robots.txt 요약	우리 정책	상태	확인일
emart.ssg.com	우리 접근 경로(`/item/itemView.ssg`, `/disp/category.ssg` 등) Allow 명시	jitter 3–5s, 매일 02:00 KST 1회	✅ 명시적 Allow	2026-06-23
store.emart.com	`User-agent: * Disallow: /` — 일반 봇 전체 차단 (검색엔진 봇만 화이트리스트)	접근하지 않음. 지점 메타데이터는 사전 빌드된 로컬 JSON 캐시(`emart_stores_all.json`)만 사용. 정상 운영 시 호출 0건	✅ 완전 차단 준수	2026-06-23
gsthefresh.gsretail.com	`Crawl-delay: 10` + `Visit-time: 0400-0845 UTC` + `Disallow: /gssuper/ko/cart, /checkout, /my-account`	준수: jitter 10–15s, KST 14:30(=05:30 UTC) 실행, 결제·회원 영역 접근 0건	✅ 엄격 준수	2026-06-23
lottemartzetta.com	`Allow: /` + `Disallow: /api/, /events/` — API 내부 경로만 차단	jitter 기본값, 주간 1회 수집	✅ 적합	2026-06-23
www.homeplus.co.kr	`Disallow: /favorite, /mypage` — 회원 영역만 차단	jitter 기본값, 우리 접근 경로는 모두 Allow 영역	✅ 준수	2026-06-23

온라인 식료품 (Online Grocery)

도메인	robots.txt 요약	우리 정책	상태	확인일
www.kurly.com	Googlebot 등 특정 봇별 정책만 명시 (`User-agent: *` 일반 봇 규칙 부재), `/mypage/, /order/, /popup/` 차단	jitter 기본값, 회원·주문 영역 접근 0건	✅ 준수	2026-06-23
www.oasis.co.kr	robots.txt 미배포 (HTTP 404)	jitter 기본값, 상품 카테고리 페이지만 접근	✅ 적합	2026-06-23

핫딜 게시판 (Community)

도메인	robots.txt 요약	우리 정책	상태	확인일
www.ppomppu.co.kr	`Allow: /zboard/` + `Disallow: /include/, /zboard/view.php?id=market*, /bookmark/` — 핫딜 게시판은 Allow	핫딜·줍줍 게시판(Allow 영역)만 접근. Cloudflare JS Challenge 통과를 위해 PlaywrightClient 사용 (사이트가 일반 브라우저 접근만 허용하기 때문)	✅ 준수	2026-06-23

6. 비활성 도메인 (Inactive)

법령·정책 검토 결과 다음 도메인은 수집을 자율적으로 중단했으며, 본사의 명시적 허용(공식 제휴 등)이 있기 전까지 재개하지 않습니다.

EMART_EVERYDAY (이마트 에브리데이) — 비활성 일자: 2026-06-22
본사 도메인 store.emart.com/robots.txt가 일반 봇 전체 차단(User-agent: * Disallow: /)을 명시하고 있어, 정보통신망법 §48조1항 정황 회피를 위해 자율 중단했습니다. 기존 적재 데이터는 is_active=FALSE로 처리되어 사용자에게 노출되지 않습니다.

NH_MART (농협 하나로마트) — 비활성 일자: 2026-06-17
본사 통합 전단 부재로 73개 지점의 데이터 커버가 불가능해 운영을 중단했습니다. 본사 공식 데이터 제휴 시점에 재검토 예정입니다.

7. 분쟁 응대 정책

본 서비스는 1인 법인이 운영하는 Pre-revenue 단계의 서비스로서, 정식 변호사 자문은 보유하고 있지 않습니다. 다만 다음 사항을 보장합니다.

본사 운영팀·법무팀의 비공식 컴플레인(이메일·전화)에 영업일 1일 이내 회신
내용증명(cease-and-desist) 수신 시 30일 이내 답신 + IT 전문 변호사 1회 자문 후 정식 답변
가처분 신청·형사고발장 수신 시 변호사 의무 선임 + 사업 모델 전면 재검토

8. 본 정책의 변경 이력

2026-06-23 v1.0: 초판 게시. 운영 주체·수집 5원칙·법령·SOP·도메인 매트릭스(12개)·비활성 도메인 정책 명시.

본 정책은 별도 공지 없이 변경될 수 있으며, 변경 시 본 페이지 상단의 "최종 갱신" 일자와 §8 변경 이력에 반영합니다. 정책 관련 문의: admin@townai.co.kr