magma-collect — 커머스 수집·적재 파이프라인

목적

남성 패션 시장 데이터(리얼 축)를 세 소스에서 수집해 하나의 정규 스키마로 적재한다. 소스마다 주는 필드가 다르다 — 그 차이를 감추지 않고 nullable로 기록하는 것이 이 스킬의 설계 철학이다.

수집 윤리 (필수 준수)

• 공개 화면의 집계 수치(가격·할인율·리뷰 수·평점·랭킹)만 수집한다.
• 리뷰 본문, 작성자명 등 저작물·개인정보성 데이터는 수집하지 않는다.
• 키워드당 1~2페이지, 소스당 상위 50개 이내로 제한한다. 반복 대량 요청을 하지 않는다.
• 교육 목적 수집임을 전제로 하며, 수집 결과를 상업적으로 재배포하지 않는다.

절차