네이버 블로그 글은 AI의 기억에 남지 않습니다 — 국내 채널 10곳 robots.txt 전수 확인
네이버는 AI 학습·색인 크롤러를 전면 차단하지만, 사용자가 질문할 때 그 자리에서 열어보는 에이전트는 막지 않았습니다. 국내 주요 채널 10곳의 robots.txt를 직접 확인하고, 실제 AI 답변에서 어떻게 나타나는지까지 검증했습니다.
결론부터 적습니다. 네이버 블로그·카페·지도에 올린 글은 AI가 미리 학습하거나 색인해 두지 못합니다. 네이버가 robots.txt에서 AI 크롤러의 접근을 전면 차단해 두었기 때문입니다.
다만 “AI가 전혀 못 읽는다”는 아닙니다. 차단된 것은 미리 긁어가는 크롤러이고, 사용자가 질문한 그 순간에 페이지를 열어보는 에이전트는 차단 목록에 없습니다. 이 구분이 실무에서 중요해서 아래에 따로 정리했습니다.
정리하면 이렇습니다. 원장님이 네이버 블로그에 몇 년간 쌓아온 글은 AI가 평소에 알고 있는 지식으로는 쌓이지 않습니다. 그때그때 검색으로만 닿습니다.
어떻게 확인했는지
robots.txt는 웹사이트가 크롤러에게 “여기는 읽어도 된다, 여기는 읽지 마라”를 알려주는 파일입니다. 주소 뒤에 /robots.txt를 붙이면 누구나 볼 수 있는 공개 파일입니다.
국내 주요 채널 10곳의 robots.txt를 2026년 8월 14일에 내려받아, 아래 여섯 개 AI 크롤러에 대한 규칙을 확인했습니다.
GPTBot— 오픈AI (챗GPT 학습)OAI-SearchBot— 오픈AI (챗GPT 검색·인용)PerplexityBot— 퍼플렉시티ClaudeBot— 앤트로픽 (클로드)Google-Extended— 구글 제미나이·AI 개요CCBot— 커먼 크롤 (다수 AI 모델의 공용 학습 데이터)
한 가지 주의할 점이 있습니다. robots.txt는 User-agent 줄이 연속으로 여러 개 오면 그것들이 하나의 그룹으로 묶입니다. 이걸 모르고 한 줄씩 끊어 읽으면 차단된 봇을 “규칙 없음”으로 잘못 읽게 됩니다. 저희도 처음 집계에서 브런치와 밴드를 그렇게 잘못 읽었고, 그룹 단위로 다시 파싱해 바로잡았습니다.
채널별 확인 결과
| 채널 | GPTBot | OAI-SearchBot | PerplexityBot | ClaudeBot | Google-Extended |
|---|---|---|---|---|---|
| 네이버 블로그 | 전면 차단 | 전면 차단 | 전면 차단 | 전면 차단 | 전면 차단 |
| 네이버 카페 | 전면 차단 | 전면 차단 | 전면 차단 | 전면 차단 | 전면 차단 |
| 네이버 지도 | 전면 차단 | 전면 차단 | 전면 차단 | 전면 차단 | 전면 차단 |
| 인스타그램 | 전면 차단 | (전체 규칙에 따름) | 전면 차단 | 전면 차단 | 전면 차단 |
| 브런치 | 전면 차단 | 일부 차단 | 일부 차단 | 전면 차단 | 전면 차단 |
| 밴드 | 차단(일부 경로만 허용) | 차단(일부 허용) | 차단(일부 허용) | 차단(일부 허용) | 차단(일부 허용) |
| 네이버 포스트 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 |
| 티스토리 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 |
| 유튜브 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 |
| 위키백과(한국어) | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 | 지정 규칙 없음 |
“지정 규칙 없음”은 그 크롤러를 따로 막지 않았다는 뜻입니다. 즉 접근할 수 있습니다.
네이버 포스트는 조금 특이합니다. post.naver.com/robots.txt를 요청하면 robots.txt 파일이 아니라 HTML 페이지가 돌아옵니다. 규칙 파일이 사실상 없는 상태입니다.
티스토리는 블로그마다 주소가 나뉘어 있어 개별 블로그 주소로 확인했습니다. 관리·검색 경로만 막혀 있고 AI 크롤러를 지정해 막은 규칙은 없었습니다.
네이버가 적어 둔 문장
네이버 블로그의 robots.txt에는 차단 목록 바로 위에 이런 주석이 붙어 있습니다.
# BOT ACCESS FOR THE PURPOSES OF AI TRAINING AND
# RETRIEVAL-AUGMENTED GENERATION (RAG) IS STRICTLY PROHIBITED.
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Disallow: /
User-agent: PerplexityBot
Disallow: /“AI 학습과 검색증강생성(RAG) 목적의 봇 접근을 엄격히 금지한다”는 뜻입니다. 실수로 막힌 것이 아니라 의도적으로, 명시적으로 막아 둔 것입니다.
그런데 막히지 않은 통로가 하나 있습니다
AI 업체들은 성격이 다른 두 종류의 에이전트를 운영합니다.
- 미리 긁어 가는 크롤러 —
GPTBot,PerplexityBot,ClaudeBot,Google-Extended등. 학습과 색인에 쓰입니다 - 사용자가 물었을 때 그 자리에서 열어보는 에이전트 —
ChatGPT-User,Perplexity-User등
네이버 블로그 robots.txt에 실제로 이름이 올라와 있는 것은 앞쪽뿐입니다. 전체 목록은 *, Yeti, GPTBot, OAI-SearchBot, PerplexityBot, ClaudeBot, Claude-SearchBot, Google-Extended, CCBot, meta-externalagent, Applebot-Extended 입니다. ChatGPT-User와 Perplexity-User는 없습니다.
실제 답변에서도 그렇게 나타납니다. 2026년 8월 15일 퍼플렉시티에 대구 병원마케팅 업체 추천해줘라고 물었을 때, 인용된 출처 중에 blog.naver 주소가 포함되어 있었습니다. 크롤러는 막혀 있지만 그 순간의 조회는 이루어진 것입니다.
그래서 정확한 문장은 이렇습니다.
| 네이버 블로그 | |
|---|---|
| AI가 미리 학습·색인해 두는 것 | 안 됩니다 |
| 사용자가 물었을 때 그 자리에서 조회 | 됩니다 |
실무적으로는 이런 차이가 납니다. 모델이 아무 자료 없이 답할 때, 즉 “대구에 병원마케팅 업체 추천해줘” 같은 질문에 자기가 알고 있는 지식으로 답할 때 네이버 블로그의 내용은 후보에 없습니다. 반면 그 자리에서 웹을 뒤지는 모드로 답할 때는 닿을 수 있습니다.
원장님 입장에서 읽으면 이렇습니다. 네이버 블로그는 찾아보면 나오는 자리이고, AI가 기억해 두는 자리는 아닙니다.
오해하지 마셔야 할 것
이 글은 네이버 블로그를 그만두시라는 이야기가 아닙니다.
네이버 블로그는 네이버 검색 안에서 계속 일합니다. 국내 환자 상당수는 여전히 네이버에서 병원을 찾고, 블로그 글은 그 검색 결과에 그대로 노출됩니다. 지금 하고 계신 블로그 운영을 멈출 이유는 없습니다.
막힌 것은 AI 쪽 통로 하나입니다. 정리하면 이렇습니다.
- 네이버 검색에서의 노출 → 네이버 블로그가 계속 담당합니다
- AI 답변에서의 인용 → 네이버 블로그는 후보에서 빠져 있습니다
문제는 두 번째 통로에 아무것도 없는 병원이 대부분이라는 점입니다. 네이버 블로그 하나만 운영하고 계시다면, AI 검색 쪽에는 원장님 병원의 자료가 한 줄도 없는 상태입니다.
그럼 어디에 써야 하는가
위 표에서 “지정 규칙 없음”으로 나온 자리가 AI가 읽을 수 있는 자리입니다. 그리고 하나가 더 있습니다.
병원 자체 도메인입니다. 자체 홈페이지는 robots.txt를 병원이 직접 정합니다. 열지 말지를 남이 정하지 않습니다.
참고로 이 홈페이지(hospitalmarketing.kr)의 robots.txt는 위 여섯 개 크롤러를 전부 Allow로 열어 두었습니다. 저희가 쓰는 글이 AI 답변에 인용되기를 바라기 때문이고, 그 판단을 저희가 직접 내릴 수 있기 때문입니다. 원장님 홈페이지도 같습니다.
정리하면 순서는 이렇습니다.
- 지금 쓰는 글이 어느 채널에 쌓이고 있는지 확인합니다
- 그 채널이 위 표에서 어느 칸에 있는지 봅니다
- 전부 차단된 칸에만 쌓이고 있다면, 열려 있는 자리를 하나 만듭니다
직접 확인해 보시는 방법
이 글을 믿지 않으셔도 됩니다. 확인이 30초면 됩니다.
브라우저 주소창에 blog.naver.com/robots.txt를 입력해 보십시오. GPTBot을 찾으시면 바로 아래에 Disallow: /가 보입니다. 원장님이 쓰시는 다른 채널도 같은 방법으로 확인하실 수 있습니다.
자주 묻는 질문
차단되어 있으면 챗GPT가 우리 병원을 아예 모르나요?
아닙니다. 미리 학습해 두지 못한다는 뜻입니다. 사용자가 물어보는 그 순간 웹을 뒤지는 방식으로는 닿을 수 있습니다. 다만 모델이 평소에 축적해 둔 지식에는 들어가지 않으므로, 병원 이름이 다른 곳(뉴스 기사, 자체 홈페이지, 커뮤니티 등)에도 있어야 안정적으로 알려집니다.
그럼 결국 블로그도 AI에 도움이 되는 것 아닌가요?
그 순간의 조회에는 도움이 됩니다. 다만 매번 다시 찾아야 닿는 자리와 모델이 알고 있는 자리는 다릅니다. 후자에 들어가려면 크롤러가 열려 있는 곳에도 자료가 있어야 합니다.
네이버가 나중에 풀어줄 수도 있지 않나요?
가능합니다. robots.txt는 언제든 바뀔 수 있고, 이 글의 표도 2026년 8월 14일 기준입니다. 다만 바뀌기를 기다리는 것과 열려 있는 자리를 지금 하나 만들어 두는 것은 다른 선택입니다.
AI 검색에서 나오면 환자가 늘어나나요?
이 글은 그 인과를 주장하지 않습니다. 확인한 것은 “읽히느냐 안 읽히느냐”까지입니다. 읽히지 않으면 인용될 가능성 자체가 없다는 것이 이 글의 범위입니다.
블로그를 자체 홈페이지로 옮기면 되나요?
기존 글을 그대로 복사해 옮기면 중복 문서가 됩니다. 옮기는 것과 새로 쓰는 것은 다르게 다뤄야 합니다. 이 주제는 다음 글에서 따로 다루겠습니다.
확인 기준일: 2026년 8월 14일. robots.txt는 각 서비스가 언제든 수정할 수 있으므로, 중요한 판단에 쓰실 때는 해당 주소에서 직접 다시 확인하시기를 권합니다. 이 글은 특정 서비스의 정책을 비판할 목적으로 쓰지 않았고, 확인 가능한 사실만 적었습니다.