IT1004

검색엔진이 들어오게 만드는 최소 설정

웹 운영 IT1004

검색엔진은 발견 → 크롤 → 색인 순서로 움직입니다. 첫 단계에서 막히면 뒤는 아예 일어나지 않습니다.

가장 먼저 확인할 세 가지

의외로 사이트맵이 404인 경우가 많습니다. 검색엔진이 계속 요청하는데 없는 상태입니다.

항목확인 방법없으면
robots.txt루트에서 접속크롤 정책을 못 알려줌
sitemap.xml루트에서 접속페이지 발견이 늦어짐
내부 링크메인에서 각 페이지로 연결사이트맵보다 중요합니다

내부 링크가 사이트맵보다 강합니다

사이트맵은 “여기 페이지가 있습니다”라는 목록일 뿐입니다. 실제로 링크가 걸려 있어야 중요하다고 판단합니다.

이미 크롤되고 있는 메인 페이지에서 새 페이지로 링크를 거는 것이 가장 빠른 방법입니다.

페이지마다 있어야 할 것

네이버는 따로 챙겨야 합니다

구글에 잡힌다고 네이버에 잡히는 것이 아닙니다. 네이버 서치어드바이저에 별도로 등록하고 사이트맵을 제출해야 합니다.

한국 대상 서비스라면 이걸 빠뜨리면 안 됩니다.

속도도 요소입니다

압축(gzip·brotli), HTTP/2, 캐시 설정만 해도 상당히 개선됩니다. 이미지 최적화가 대부분의 경우 가장 큰 효과를 냅니다.

발견 → 크롤 → 색인 → 순위

검색 노출은 네 단계를 거칩니다. 앞 단계가 막히면 뒤는 아예 일어나지 않습니다. 순위를 고민하기 전에 앞의 세 단계부터 확인해야 합니다.

단계무엇이 필요한가확인 방법
발견링크 또는 사이트맵서치콘솔 검색 결과
크롤robots 허용, 응답 200서버 로그의 봇 기록
색인고유하고 충분한 콘텐츠site: 검색
순위관련성·신뢰도실제 검색

서버 로그를 보면 크롤러가 실제로 오는지, 어떤 페이지를 가져가는지 알 수 있습니다. 이게 가장 정확한 확인 방법입니다.

내부 링크가 사이트맵보다 강한 이유

사이트맵은 “여기 페이지가 있습니다”라는 신고일 뿐입니다. 반면 링크는 “이 페이지가 중요합니다”라는 추천입니다.

이미 신뢰가 쌓인 페이지에서 링크를 받으면 그 신뢰의 일부가 전달됩니다. 그래서 메인 페이지에서 링크를 거는 것이 가장 효과가 큽니다.

  1. 메인에서 주요 페이지로 링크
  2. 글에서 관련 글로 링크
  3. 카테고리 페이지로 묶기
  4. 고아 페이지가 없는지 확인 — 어디서도 링크되지 않는 페이지
사이트맵에는 있는데 어디서도 링크되지 않는 페이지는 색인이 잘 안 됩니다. 사이트맵과 실제 링크 구조를 대조해 보세요.

페이지별 필수 요소 점검표

요소기준흔한 실수
title페이지마다 고유, 검색어 포함전 페이지 동일
meta description한국어 80자 안팎비어 있음
canonical정규 주소 지정누락 또는 잘못된 주소
h1페이지당 하나여러 개 또는 없음
구조화 데이터콘텐츠 유형에 맞게문법 오류
alt 속성이미지 설명비어 있음

네이버는 별도로 챙겨야 합니다

구글에 잡힌다고 네이버에 잡히는 것이 아닙니다. 크롤러도 다르고(Yeti) 평가 방식도 다릅니다.

한국 대상 서비스라면 네이버 서치어드바이저 등록이 필수입니다. 등록하지 않으면 크롤 자체가 거의 오지 않는 경우가 있습니다.

  1. 서치어드바이저에서 사이트 소유확인
  2. 사이트맵 제출
  3. robots.txt 확인
  4. 수집 요청으로 주요 페이지 개별 요청
  5. 웹마스터 도구에서 수집 현황 주기적 확인

AI 검색 대응

ChatGPT·Perplexity 같은 AI가 답변에 인용할 때는 구조가 명확한 글을 선호합니다. 전통 SEO와 겹치는 부분이 많지만 강조점이 조금 다릅니다.

AI 크롤러(GPTBot, ClaudeBot 등)를 robots.txt에서 차단하지 않았는지도 확인해야 합니다. 차단하면 인용 대상에서 빠집니다.

속도 — 무엇부터 고칠까

항목효과난이도
이미지 최적화·지연 로딩가장 큼낮음
압축(gzip/brotli)낮음
캐시 헤더재방문에 큼낮음
불필요한 스크립트 제거중간
HTTP/2·3중간낮음
CDN지역에 따라 큼중간

대부분의 사이트에서 이미지가 용량의 70% 이상을 차지합니다. 여기부터 손보는 것이 효율적입니다.

자주 묻는 질문

색인까지 얼마나 걸리나요?
신생 도메인은 몇 주에서 몇 달까지 걸립니다. 도메인 나이와 링크 수에 크게 좌우됩니다.
색인이 안 되는데 왜 그런가요?
흔한 원인은 내부 링크 부재, 중복 콘텐츠, 얇은 콘텐츠, noindex 실수입니다. 순서대로 확인해 보세요.
메타 키워드는 필요한가요?
주요 검색엔진에서 순위 요소로 쓰지 않는 것으로 알려져 있습니다. 넣어도 해롭지는 않지만 효과를 기대하기는 어렵습니다.

같이 보면 좋은 글

웹 운영 전체 글

웹 운영 목록 보기 →