배치 처리로 구현하는 리드 스크래퍼

n8n으로 마케팅 워크플로우 구축하기

Yaron Been

Marketing Automation Architect

피드백 루프에서 배치 처리로

$$

• 👈 이전 워크플로: 피드백 루프를 활용한 자가 개선 최적화
• 👉 새 워크플로: 대규모로 여러 항목 처리하기
• 🧠 새로운 패턴: 배치 루프와 병렬 스트림

리드 생성 문제

$$

• 목표: 잠재 고객 찾기(예: 마이애미의 배관공)
• 수동 검색은 업체당 몇 시간이 걸림
• 해결책: 전체 프로세스 자동화

외부 API 통합

$$

• HTTP 요청으로 Apify REST API 호출
• 검색어와 위치 전송
• Google Maps에서 업체 목록 수신

Split In Batches로 배치 처리하기

$$

• Split In Batches가 항목을 하나씩 처리
• 속도 제한용 Wait 노드(1초)
• 정규식(Regex)으로 HTML에서 이메일 추출

병렬 데이터 스트림

$$

• 스트림 A: 업체 정보(이름, 주소, 전화번호)
• 스트림 B: 추출된 이메일(필터링, 중복 제거)
• 두 스트림 모두 단일 항목으로 집계

병합 및 최종 출력

• Merge 노드가 두 스트림을 결합
• Code 노드가 이메일을 업체와 매칭
• 출력: 연락처가 포함된 전체 리드 목록

배우게 될 새로운 패턴

$$

• 🌐 HTTP Request로 외부 API 통합하기
• 🗂 Split In Batches로 배치 처리 마스터하기
• 🔀 병합되는 병렬 스트림 구축하기

연습해 봅시다!

n8n으로 마케팅 워크플로우 구축하기