← 노드 한 장 전체#15 · Remove Duplicates
Remove Duplicates
중복 빼고, 본 건 건너뛰기
이 글은 이런 분께중복 항목을 빼거나, 이전 실행에서 본 항목을 건너뛰고 싶은 분
1분 영상은 @workflow.hanjang 에 순서대로 공개돼요
Steam 인기 1위 게임이 목록에 두 번 들어와 있었어요.
Remove Duplicates 노드 하나면 정리됩니다.
먼저 결과부터
Remove Duplicates는 한 번 실행 안의 중복(10 → 9)도, 이전 실행에서 본 항목(두 번째 실행 9 → 0)도 걸러낸다. 새 항목만 알림 보낼 때 유용.
우리가 실제로 돌린 기록 · 실행 #71395 · 2026-10-24
우리가 실제로 돌린 기록 · 실행 #71395 · 2026-10-24
- 이번 실행 안의 중복 빼기: 10개 → 9개 (0.001초)
- 지난 실행에서 본 것 건너뛰기: 같은 걸 또 돌렸더니 9개 → 0개
- 기억 지우기(Clear Deduplication History)로 처음부터 다시
따라 하기
아래 설정값은 이 영상에 나온 워크플로우 JSON에서 그대로 가져왔어요. n8n 캔버스에서 +를 눌러 노드를 순서대로 추가하고 같은 값을 넣으면 돼요. 빨간 제목이 이번 편의 주인공 노드예요. 표 왼쪽은 n8n 편집기에 보이는 칸 이름, 오른쪽은 실제로 넣은 값이에요. 직접 입력하기 번거로우면 JSON을 받아 ⋯ → Import from File로 가져오세요.
Step 1. Manual Trigger 노드 추가이름: Run manually
설정 없이 그대로 추가해요.
Step 2. HTTP Request 노드 추가이름: Get Steam top sellers
| URL | https://store.steampowered.com/api/featuredcategories?cc=us&l=english |
Step 3. Split Out 노드 추가이름: Split into games
| Fields To Split Out | top_sellers.items |
Step 4. Remove Duplicates 노드 추가이름: Remove repeats in this run
| Compare | Selected Fields |
| Fields To Compare | id |
Step 5. Remove Duplicates 노드 추가이름: Skip games seen before
| Operation | Remove Items Processed in Previous Executions |
| Value to Dedupe On | {{ $json.id }} |
Step 6. Edit Fields (Set) 노드 추가이름: New games only
| 필드 1 | game · string · {{ $json.name }} |
| 필드 2 | app_id · number · {{ $json.id }} |
| 필드 3 | price_usd · number · {{ $json.final_price / 100 }} |
가져와서 쓸 때 확인할 것
- YOUR_… 표시를 내 값으로 바꾸고, 계정이 필요한 서비스 노드만 자격 증명을 연결하세요. 그런 칸이나 노드가 없는 예제는 추가 계정 없이 실행할 수 있어요.
노드의 모든 옵션은 n8n 공식 문서에서 볼 수 있어요.