[네이버 SEO 06] 네이버는 긁으러 오지 않는다. RSS·수집요청·능동 발견

구글봇은 링크를 타고 웹을 부지런히 돌아다니며 새 페이지를 알아서 발견한다. 네이버 Yeti는 그렇지 않다. 상대적으로 소극적이라, 가만히 두면 새 글을 한참 뒤에야 발견하거나 아예 놓친다. 그래서 네이버에선 능동적으로 알려주는 게 필수다. 이번 편은 그 능동 발견의 도구, RSS와 수집 요청을 다룬다.

이건 네이버가 구글과 다른 가장 실무적인 지점이다. 구글은 잘 만들어두면 알아서 오지만, 네이버는 만들어두고 알려주기까지 해야 온다.

1. 왜 능동적으로 알려야 하나

네이버 Yeti의 크롤 빈도는 구글봇보다 낮다. 신생 사이트라면 Yeti가 며칠에 한 번, 그것도 몇 페이지만 훑고 가는 경우도 흔하다. 이 상태로는 매일 올라오는 새 글이 발견되기까지 오래 걸리고, 그사이 신선도라는 값어치도 떨어진다.

구글 시리즈에서 크롤 예산과 크롤 수요 이야기를 했는데, 네이버는 이 수요를 끌어올리기가 더 어렵다. 그래서 수동적으로 기다리는 대신, 내가 먼저 여기 새 글 있으니 와서 보라고 알려주는 능동적 방식이 필요하다. 이게 네이버 발견의 핵심 전략이다.

능동 발견의 도구는 세 가지다. RSS 피드, 서치어드바이저의 수집 요청, 그리고 IndexNow다. IndexNow는 빙과도 연결되는 중요한 주제라 다음 편에서 따로 다루고, 이번 편은 RSS와 수집 요청에 집중한다.

능동적으로 알려야 한다는 게 처음엔 번거롭게 느껴진다. 구글은 잘 만들어두면 알아서 오는데 네이버는 왜 이렇게까지 해야 하나 싶다. 하지만 이게 네이버의 방식이고, 이걸 받아들이고 대응하는 사이트와 그렇지 않은 사이트의 네이버 색인 속도는 확연히 갈린다. 번거로움을 감수하는 쪽이 이긴다.

네이버가 소극적으로 크롤한다는 게 게을러서가 아니라 정책적 선택이다. 무분별하게 웹을 긁기보다, 자사 생태계와 등록된 사이트 위주로 효율적으로 수집하는 방향이다. 그래서 외부 사이트는 그 수집 대상에 적극적으로 이름을 올려야 한다. 능동 발견은 그 이름을 올리는 행위다.

덧붙이면 능동 발견은 신생 사이트일수록 효과가 극적이다. 이미 신뢰가 쌓인 사이트는 가만히 둬도 네이버가 자주 오지만, 신생은 알리지 않으면 거의 오지 않는다. 그래서 초기 몇 달의 부지런한 능동 발견이 네이버 색인의 출발을 좌우한다. 이 시기를 놓치면 색인이 한참 늦어진다.

2. RSS 피드의 힘

RSS는 사이트의 새 글 목록을 표준 형식으로 제공하는 피드다. 네이버는 이 RSS를 통해 새 글을 발견하는 데 적극 활용한다. 그래서 구글에선 사이트맵이 주력이라면, 네이버에선 RSS의 비중이 상대적으로 크다.

RSS를 만들 때는 최신 글 위주로 담는 게 좋다. 전체 글을 다 넣기보다, 최근에 발행된 글 수십 건을 담고 새 글이 나올 때마다 갱신하는 것이다. RSS의 목적이 새 소식 알림이라, 신선한 최신 목록을 자주 갱신하는 게 발견 도구로서 제 역할을 한다.

각 글의 발행 시각도 정확히 담아야 한다. 새 글이 올라오면 그 시각으로 RSS가 즉시 갱신되게 해두면, 네이버가 새 글을 놓치지 않고 빠르게 발견한다. 커뮤니티처럼 글이 자주 올라오는 사이트에서 이 RSS가 1순위 발견 통로가 되는 이유다.

RSS를 잘 갖춰두면 네이버뿐 아니라 다른 서비스에서도 활용되는 부수 효과가 있다. RSS는 표준 형식이라, 새 글을 구독하거나 다른 플랫폼으로 자동 전달하는 데도 쓰인다. 그래서 RSS는 네이버 대응이자 콘텐츠 배포의 기본 인프라이기도 하다. 한 번 잘 만들어두면 여러 곳에서 값어치를 한다.

3. 수집 요청 실전

RSS가 자동 알림이라면, 수집 요청은 콕 집어 신고하는 방식이다. 서치어드바이저에서 새 글의 주소를 직접 넣어 이 페이지를 수집해달라고 요청하는 것이다. 사이트맵이나 RSS로 발견되기를 기다리는 것보다 훨씬 빠르다.

실무적으로는 하루에 일정 건수를 요청할 수 있다. 모든 글을 다 요청하기 어렵다면, 인기 있고 추천과 댓글이 많은 좋은 글을 우선 요청하는 게 효율적이다. 네이버가 좋은 글부터 수집하게 유도하는 것이다. 수집까지는 수 시간에서 수일이 걸린다.

신생 사이트에서 이 수집 요청을 꾸준히 넣으면, 시간이 지나며 Yeti의 자동 방문 빈도 자체가 올라가는 효과가 있다. 이 사이트는 새 글이 계속 올라오는 곳이라고 네이버가 학습하는 것이다. 그래서 초기 몇 달의 부지런한 수집 요청이 이후의 자동 크롤을 앞당긴다.

수집 요청에서 우선순위를 정하는 감각이 중요하다. 모든 글을 다 요청할 수 없다면, 검색 유입이 기대되는 좋은 글, 반응이 좋은 글을 먼저 요청한다. 네이버에게 이 사이트의 대표 콘텐츠는 이런 것이라고 보여주는 셈이다. 아무 글이나 마구 요청하기보다 좋은 글부터 알리는 게 출처 신뢰도에도 도움이 된다.

수집 요청과 RSS를 함께 쓰면 상호 보완이 된다. RSS는 새 글을 자동으로 흘려보내고, 수집 요청은 특정 중요 글을 콕 집어 밀어준다. 넓게 흘리는 RSS와 좁게 찌르는 수집 요청, 이 둘을 병행하면 발견의 그물이 촘촘해진다. 어느 하나만으로는 놓치는 글이 생긴다.

4. 절제의 원칙

능동 발견 도구는 강력한 만큼 절제해서 써야 한다. 여기서도 구글 IndexNow에서 강조한 원칙이 그대로 적용된다. 살아 있는 신규 정식 글만 알려야 한다. 옛 글 수천 건을 한꺼번에 수집 요청하거나 RSS에 죽은 주소를 담으면 역효과가 난다.

대량으로 밀어 넣는 건 네이버 입장에서 남용으로 보인다. 자연스러운 발행 리듬에 맞춰 새 글만 소량씩 알리는 게 맞다. 하루에 몇 건에서 수십 건 수준의 신규 글을 흘려보내는 정도가 건강하다. 조급하다고 과거 글까지 몰아 넣으면 도우려던 도구가 오히려 신뢰를 깎는다.

그리고 알리는 글은 색인 가능한 상태여야 한다. 죽은 주소, 리다이렉트되는 주소, 비공개 글을 알리면 네이버를 헛걸음시킨다. 구글 시리즈에서 다룬 살아 있는 URL만이라는 원칙이 네이버 능동 발견에도 그대로 걸린다.

절제의 원칙이 반복해서 나오는 건 그만큼 어기기 쉽기 때문이다. 색인이 급하면 누구나 더 많이, 더 자주 알리고 싶어진다. 하지만 그 조급함이 남용 신호가 되어 역효과를 낸다. 능동 발견 도구는 꾸준하고 절제된 사용이 핵심이지, 몰아치는 게 아니다. 이 균형 감각이 네이버 대응의 성패를 가른다.

5. 자동화로 꾸준함을 만든다

능동 발견의 관건은 꾸준함인데, 사람이 매번 손으로 하기는 어렵다. 그래서 자동화가 답이다. 새 글이 발행되는 순간 RSS가 자동 갱신되고, 그 글이 자동으로 수집 요청 대상에 오르게 파이프라인을 짜두는 것이다.

발행 훅에 이 알림을 연결해두면, 운영자가 신경 쓰지 않아도 새 글만 자동으로 네이버에 알려진다. 여기에 조건을 걸어 공개 상태의 정식 글만 알리고 임시 글이나 삭제된 글은 제외하면, 실수로 엉뚱한 걸 알리는 사고도 막는다. 자동화의 핵심은 신규와 공개 상태에만 반응하게 하는 것이다.

정리하면 네이버는 소극적으로 크롤하니 RSS와 수집 요청으로 능동적으로 알려야 하고, 신규 정식 글만 절제해서, 자동화로 꾸준히 알리는 게 답이다. 다음 편에서는 이 능동 발견의 또 다른 축이자 빙과 네이버를 한 번에 잡는 도구, IndexNow를 다룬다.

자동화를 강조하는 이유는, 결국 꾸준함은 사람의 의지가 아니라 시스템에서 나오기 때문이다. 처음 며칠은 손으로 열심히 하다가도 시간이 지나면 흐지부지되기 쉽다. 발행 훅에 알림을 걸어두면 운영자가 잊어도 새 글이 자동으로 알려진다. 이 자동화가 몇 달의 꾸준함을 보장하고, 그 꾸준함이 네이버 색인을 정상화한다.

자동화 이야기가 반복되는 건, 네이버 대응이 결국 지구력 싸움이기 때문이다. 하루 이틀 열심히 해서 되는 게 아니라 몇 달을 꾸준히 해야 색인이 정상화된다. 사람의 의지로 그 긴 기간을 버티기는 어렵다. 그래서 발행 훅 자동화가 답이다. 시스템이 대신 꾸준해주면, 운영자는 콘텐츠에 집중할 수 있다.

다음 편에서는 이 능동 발견의 또 다른 축이자, 네이버와 빙을 한 번에 잡는 강력한 도구인 IndexNow를 다룬다. 지금까지가 네이버 단독 대응이었다면, 그 편부터는 빙이 함께 묶인다. 발견 방식이 같은 두 검색엔진을 하나의 도구로 공략하는 효율적인 방법이다.

조금 더 실무적으로 말하면, 능동 발견 작업의 성과는 서치어드바이저의 수집 현황에서 확인된다. 요청한 글이 며칠 안에 수집됐는지, Yeti의 방문이 늘고 있는지를 보면 내 노력이 통하고 있는지 알 수 있다. 이 지표가 우상향하면 방향이 맞는 것이고, 정체되면 다른 문제를 의심해봐야 한다. 능동 발견도 결국 데이터로 확인하는 것이다.