Screaming Frog SEO Spider로 할 수 있는 일, 무료 버전과 유료 라이선스의 차이, 중요한 설정, 오류, 리디렉션, 중복, 고아 페이지를 찾는 감사 순서를 정리했습니다.
도구
요약
Screaming Frog SEO Spider는 검색엔진 봇처럼 사이트의 모든 URL을 방문한 뒤 상태 코드, 제목, 메타 설명, 소제목, canonical, 지시어, 리디렉션, 링크를 정렬 가능한 표로 보여 주는 데스크톱 크롤러입니다. 무료 버전은 최대 500개 URL을 크롤링하며, 연간 라이선스(사용자당 245유로 또는 199파운드, 2026년 10월 확인)를 사면 제한이 풀리고 고급 기능이 열립니다. 기술 SEO 감사의 기준이 되는 도구로, 문제는 도구가 찾고 수정은 CMS에서 직접 합니다.
더 알아보고 싶다면 물어보세요
Screaming Frog SEO Spider는 Windows, macOS, Linux에서 내 컴퓨터로 실행되므로 속도는 메모리에 달려 있습니다. 개발사의 사용자 가이드에 모든 설정이 설명되어 있습니다. 이 글은 첫 감사를 쓸모 있게 만드는 핵심만 다룹니다.
하나의 URL에서 출발해 찾은 모든 링크를 따라가며 각 페이지에서 봇이 보는 내용을 기록합니다. 이 과정을 크롤링이라고 합니다. URL마다 다음 정보를 얻습니다.
가치는 전체를 한눈에 본다는 데 있습니다. 수작업으로 몇 주가 걸릴 확인을 1만 페이지라도 몇 분 만에 문제별로 정렬할 수 있습니다.
| 기준 | 무료 버전 | 유료 라이선스 |
|---|---|---|
| 크롤링 한도 | 1회 500개 URL | 무제한(메모리와 저장 공간에 따라 다름) |
| 가격 | 무료 | 사용자당 연 245유로 또는 199파운드, 여러 라이선스 구매 시 할인(2026년 10월 확인) |
| 크롤링 설정과 결과 저장 | 제한 | 가능 |
| JavaScript 렌더링, 사용자 지정 추출 | 제한 | 가능 |
| Google Search Console, GA4, PageSpeed Insights 연동 | 제한 | 가능 |
| 크롤링 비교, 예약 실행 | 제한 | 가능 |
작은 사이트나 특정 섹션을 빠르게 점검할 때는 무료 버전으로 충분합니다. 사이트가 500개 URL을 넘거나, JavaScript를 렌더링해야 하거나, 변화를 꾸준히 추적해야 한다면 라이선스 비용은 금방 회수됩니다.
Spider 모드는 시작 URL부터 크롤링합니다. List 모드는 붙여 넣거나 업로드한 URL만 크롤링하므로 사이트맵 점검, 마이그레이션 전 예전 URL 목록, 백링크 대상 페이지 확인에 유용합니다.
설정에서 메모리 저장을 SSD의 데이터베이스 저장으로 바꿉니다. 대규모 크롤링이 가능해지고 결과가 자동 저장됩니다.
콘텐츠나 링크가 JavaScript로 삽입된다면(React, Vue, 일부 Shopify나 Webflow 테마) 렌더링을 JavaScript로 설정합니다. 그러면 도구가 구글 렌더러처럼 헤드리스 Chromium 브라우저를 사용합니다. 원본 HTML과 렌더링된 HTML을 비교해 렌더링 후에만 존재하는 콘텐츠를 찾으세요.
Google Search Console, GA4, PageSpeed Insights를 연결합니다. 클릭, 노출, Core Web Vitals가 URL 옆에 표시되고, 이 데이터에는 있지만 크롤링에서는 발견되지 않은 URL이 고아 페이지로 드러납니다.
XPath, CSS 선택자, 정규식으로 게시일, 작성자, 가격, 재고 상태, schema 유형 등 어떤 요소든 추출할 수 있습니다. 템플릿을 대규모로 감사할 때 편리합니다.
호스팅이 약하면 속도(스레드 수나 초당 URL 수)를 낮추고, 사이트가 낯선 봇을 차단하지 않을 때만 사용자 에이전트를 Googlebot으로 설정하세요.
| 감사 항목 | 확인 위치 | 수정할 내용 |
|---|---|---|
| 4xx 오류 | Response Codes 탭, Client Error (4xx) 필터, 하단 Inlinks | 죽은 페이지로 가는 링크를 수정하거나 삭제하고, 백링크가 있던 URL은 리디렉션 |
| 5xx 오류 | Response Codes, Server Error (5xx) | 서버나 플러그인 문제로 개발자나 호스팅 업체에 전달 |
| 리디렉션 체인과 루프 | Reports, Redirects, Redirect Chains | 모든 링크를 최종 URL로 바로 연결하고 301은 최대 한 번만 |
| 중복되거나 누락된 제목 | Page Titles 탭, Duplicate, Missing, Over 60 characters 필터 | 페이지마다 고유한 제목을 쓰고 주요 키워드를 앞에 배치 |
| 중복되거나 누락된 메타 설명 | Meta Description 탭 | 120 - 160자의 페이지별 설명 작성 |
| canonical 문제 | Canonicals 탭, Non-Indexable Canonical, Missing 필터 | 모든 canonical이 상태 200의 색인 가능한 URL을 가리키게 수정 |
| 순위에 올라야 하는데 noindex인 페이지 | Directives 탭, Noindex 필터 | 구글에 노출하려는 페이지에서 태그 제거 |
| 깊이 | Links 탭의 Crawl Depth 열, 또는 Site Structure 보기 | 핵심 페이지를 홈에서 3클릭 이내로 |
| 고아 페이지 | Crawl Analysis 실행 후 Sitemaps, Analytics, Search Console 탭의 Orphan URLs 필터 | 유용한 고아 페이지에는 내부 링크를 추가하고 나머지는 삭제하거나 리디렉션 |
| 무거운 이미지, 대체 텍스트 누락 | Images 탭, Over 100 KB와 Missing Alt Text 필터 | 압축하고 WebP로 변환한 뒤 설명적인 대체 텍스트 작성 |
구글은 HTTP 상태 코드와 표준 URL을 어떻게 처리하는지 설명합니다. 무엇을 리디렉션하고 통합할지 정하기 전에 두 문서를 모두 읽어 보세요.
모든 탭은 CSV, Excel, Google Sheets로 내보낼 수 있습니다. 결합된 데이터(4xx 페이지로 가는 모든 링크, 대체 텍스트가 없는 모든 이미지)는 Bulk Export로, 리디렉션 체인이나 canonical 오류는 Reports 메뉴로 추출합니다. 고객이나 개발자에게는 페이지 URL과 문제의 출처를 붙인, 필터링된 문제 목록만 보내세요. 출처 페이지가 표시된 40개의 깨진 링크 목록은 처리되지만, 1만 줄짜리 파일은 처리되지 않습니다. 라이선스가 있으면 주간 크롤링을 예약하고 크롤링 비교로 배포 후 무엇이 바뀌었는지 확인할 수 있습니다.
크롤러는 Googlebot, Bingbot, AI 크롤러(GPTBot, ClaudeBot, PerplexityBot)와 같은 방식으로 사이트를 봅니다. 이들이 도달할 수 없거나, 오류를 반환하거나, 일곱 번 클릭해야 닿는 페이지는 크롤링 예산을 낭비하고, 구글에 색인되거나 ChatGPT와 Perplexity가 가져갈 가능성도 낮습니다. 깨끗한 크롤링 결과(상태 200, canonical 하나, 얕은 깊이, 실제 내부 링크)는 콘텐츠와 링크보다 먼저 갖춰야 할 모든 기술 SEO 감사의 기본입니다.
페이지 하나만 볼 때는 크롤러가 꼭 필요하지 않습니다. 무료 온페이지 SEO 감사와 무료 Sorank Chrome 확장 프로그램이 보고 있는 페이지의 수정 사항을 몇 초 만에 보여 줍니다.
Screaming Frog SEO Spider는 사이트 전체의 기술 문제를 몇 분 만에 찾아냅니다. 트래픽을 만드는 일은 그 문제를 영향이 큰 순서대로 고치는 데서 시작됩니다. 기본이 정리되면 Sorank가 최적화되고 서로 연결된 글을 autopilot으로 발행해 사이트가 구글과 AI에서 계속 성장하도록 돕습니다.
일부만 무료입니다. 무료 버전은 한 번에 최대 500개 URL을 크롤링하며 설정도 제한됩니다. 사용자당 연간 유료 라이선스를 사면 URL 한도가 없어지고 크롤링 저장, JavaScript 렌더링, 사용자 지정 추출, API 연동, 예약 실행을 쓸 수 있습니다. 최신 가격은 개발사의 가격 페이지에서 확인하세요.
사이트 규모, 서버 속도, 설정한 크롤링 속도, JavaScript 렌더링 사용 여부에 따라 다릅니다. 수천 페이지는 보통 몇 분이면 되지만 수십만 페이지는 몇 시간이 걸릴 수 있고, JavaScript 렌더링을 켜면 크롤링이 눈에 띄게 느려집니다. 데이터베이스 저장과 충분한 메모리가 있으면 대규모 크롤링을 끝까지 마치기 쉽습니다.
둘은 서로 다른 질문에 답합니다. Screaming Frog는 원할 때 사이트를 크롤링해 페이지별 기술 상태를 보여 주고, Google Search Console은 구글이 실제로 색인한 내용과 Googlebot이 본 검색어, 클릭, 오류를 보여 줍니다. 둘 다 쓰고, Search Console을 Screaming Frog에 연결하면 두 관점을 나란히 볼 수 있습니다.
AI 콘텐츠 브리프 생성기
FAQ 스키마 생성기AI 블로그 글 아이디어 생성기구조화 데이터 검사기
대체 텍스트 검사기
내부 링크 분석기백링크 챌린지AI 메타 설명 생성기AI 블로그 제목 생성기
Google 색인 가능성 검사기AI 글 개요 생성기UTM 링크 생성기키워드 클러스터링 도구canonical 태그 검사기
XML 사이트맵 생성기깨진 링크 검사기AI SEO 제목 생성기제목 점수 분석기검색 결과 미리보기리디렉션 검사기
hreflang 생성기제목 구조 분석기HTTP 헤더 검사기Favicon 추출기
SEO 트래픽·매출 예측 계산기
SEO 예산 계산기
순위 상승 시뮬레이터
키워드 기회 점수 계산기
GEO 콘텐츠 투자 계산기
고객 생애 가치 계산기
CTR 계산기
AI 트래픽 가치 계산기
AI 점유율(SOV) 계산기
Gemini 순위 도구
ROAS 계산기
오가닉 트래픽 가치 계산기
로컬 SEO ROI 계산기
링크 빌딩 비용 계산기
키워드 밀도 계산기
고객 획득 비용 계산기
글 1편당 비용 계산기
이탈률 계산기
AI 인용률 계산기
LLM용 구조화 데이터 진단llms.txt 생성기사이트맵 검사기SERP 변동성 센서
단어 카운터Schema 마크업 생성기
키워드 리서치 도구
SEO 손익분기점 계산기
읽기 시간 계산기
오가닉 트래픽 추정기
ChatGPT 추천 트래픽 추정기
AI 가시성 점수 계산기AI 가독성 검사기SearchGPT 준비도 검사기ChatGPT가 내 웹사이트를 추천하지 않는 이유
URL 추출기웹페이지 Markdown 변환기
robots.txt 생성기
Open Graph 미리보기
온페이지 SEO 점검
LTV 대비 CAC 비율 계산기
GEO ROI 계산기
전환율 계산기AI 크롤러 접근 감사AI 검색 가시성 테스트페이지 용량 검사기URL 슬러그 생성기메타 태그 생성기
이미지 압축기파비콘 생성기
도메인 권위 검사기
SERP CTR 계산기
이커머스 SEO ROI 계산기
콘텐츠 마케팅 ROI 계산기
AI 비가시성 비용 계산기AI 개요 검사기robots.txt 검사기AI SEO 진단Perplexity 순위 검사기답변 엔진 최적화(AEO) 진단ChatGPT 가시성 체커
백링크 분석 도구
SEO 대 유료 검색 절감액 계산기
SEO 점유율(SOV) 계산기
SaaS SEO ROI 계산기
백링크 ROI 계산기llms.txt 검증 도구LLM 인용 검사기GEO 진단
SEO ROI 계산기
키워드 가치 계산기먼저 Sorank를 경험한 사람들
“2년 동안 제 고객의 100%는 LinkedIn에서 왔습니다. 매일 게시물을 올리고, 댓글을 달고, DM으로 후속 연락을 하고… 알고리즘에 완전히 의존하는 방식이었습니다. SEO를 해야 한다는 것은 알았지만 늘 미뤘습니다. 시간이 오래 걸리고, 너무 기술적이며, 제 일이 아니라고 생각했기 때문입니다. Sorank와 함께 드디어 첫걸음을 내디뎠습니다. 4개월 만에 아무것도 게시하지 않고도 매달 15건의 오가닉 리드를 확보하고 있습니다. 아직 LinkedIn과 50 대 50은 아니지만, 자동 운영으로 성장하는 두 번째 리드 채널이 생겼다는 사실에 훨씬 마음이 놓입니다.”
Valentin Thomy콜드메일 대행사“Sorank는 저희가 고객사에 제공하는 성과를 완전히 바꿔 놓았습니다. 이제 AI가 실제로 사용하는 키워드를 파악하고, 특정 경쟁사가 인용되는 이유를 이해하며, 이전에는 전혀 보지 못했던 기회를 발견합니다. 고객사는 더 빠른 순위 상승, AI 답변에서의 더 나은 가시성, 그리고 실행하는 모든 작업에 대한 더 명확한 ROI를 확인합니다.”
Benjamin Rouxovirank.com
“저는 마케터가 아니라 개발자입니다. 제 Shopify 테마는 입소문과 광고로만 팔리고 있었습니다. Sorank 덕분에 드디어 SEO를 어떻게 구조화하고 상위에 노출되는 글을 어떻게 써야 하는지 이해했습니다. 진단 결과 제품 페이지가 너무 느리다는 사실이 드러났습니다. 2개월 만에 오가닉 트래픽이 두 배가 되었고, 사람들이 Shopify 테마를 검색할 때 ChatGPT 답변에 등장하기 시작했습니다. 그 모든 것을 주당 약 2시간으로 해냈습니다.”
Thème FullStackthemefullstack.com“Sorank는 저희 SEO 대행사의 운영 방식을 완전히 바꿔 놓았습니다. 모든 것이 한곳에 모이고 자동화되어 고객사마다 들이는 시간이 훨씬 줄었습니다. 예전에 몇 시간씩 걸리던 작업이 이제 몇 분이면 끝나고, 덕분에 드디어 사업 안에서 일하는 것을 멈추고 사업 위에서 일하기 시작할 수 있게 되었습니다.”
Océane Bondismaison-leverage.com
