2026 GEO 마케팅 실전, robots.txt와 WAF부터 잡아야 ChatGPT Perplexity Gemini에 노출된다

목차

• 왜 지금 GEO는 콘텐츠보다 배포 인프라가 먼저인가
• 2026 최신 공식 문서에서 읽히는 변화
• ChatGPT Perplexity Gemini가 사이트를 읽는 방식 차이
• 노출을 막는 흔한 기술 장애 4가지
• 실무 적용: robots.txt, noindex, WAF, UTM 세팅 순서
• 교육기관 사이트 예시로 보는 점검 방법
• 실무 체크리스트
• Q&A
• 미래이음연구소 홍보
• 마무리
• 참고자료

왜 지금 GEO는 콘텐츠보다 배포 인프라가 먼저인가

GEO 마케팅을 이야기하면 아직도 많은 팀이 제목, 키워드, FAQ 길이만 먼저 본다. 그런데 2026년 기준으로 이 순서는 자주 틀린다. 이유는 단순하다. ChatGPT, Perplexity, Gemini는 사람이 브라우저로 보는 화면만 읽는 것이 아니라, 각자의 크롤러 정책과 검색 흐름을 바탕으로 접근 가능한 페이지를 다시 분해하고 다시 연결한다. 그래서 문장이 아무리 좋아도 크롤러가 못 읽으면 인용 후보에 오르지 못한다.

특히 최근 흐름은 더 운영형이다. OpenAI는 퍼블리셔 FAQ에서 OAI-SearchBot을 막지 말아야 ChatGPT 검색 결과의 요약, 스니펫, 링크 노출에 유리하다고 분명히 적었다. Perplexity도 공식 크롤러 문서에서 PerplexityBot과 Perplexity-User를 구분하고, WAF에서 둘을 따로 허용해야 할 수 있다고 설명한다. Google은 AI Overviews와 AI Mode를 별도 비밀 전술로 최적화하라는 쪽이 아니라, 기존 Search Essentials와 크롤링 가능성을 지키라는 쪽에 무게를 둔다.

즉 지금 GEO 실무는 글감 경쟁만이 아니라 전달 경로 경쟁이다. 잘 쓴 글이 있는데도 AI 검색에 안 뜨는 이유는 의외로 robots.txt 한 줄, WAF 한 규칙, noindex 한 설정, 자바스크립트 렌더링 한 구조 때문인 경우가 많다. 이걸 잡으면 같은 콘텐츠여도 노출 확률이 달라진다.

2026 최신 공식 문서에서 읽히는 변화

1. OpenAI는 노출과 학습을 분리해서 관리하라고 말한다

OpenAI 문서에서 가장 실무적인 포인트는 이것이다. OAI-SearchBot은 검색 노출용이고, GPTBot은 학습 관련이다. 둘은 같은 스위치가 아니다. 즉 학습은 막고 싶지만 ChatGPT 검색 결과에는 나오고 싶다면 GPTBot은 차단하고 OAI-SearchBot은 허용하는 식의 운영이 가능하다. 예전처럼 AI 전부 차단 아니면 전부 허용 같은 거친 선택이 아니라, 목적별 제어가 가능해졌다는 뜻이다.

2. ChatGPT 유입은 utm_source=chatgpt.com으로 측정할 수 있다

이건 현업에서 꽤 큰 변화다. OpenAI 퍼블리셔 FAQ는 ChatGPT 검색에서 넘어오는 추천 링크에 utm_source=chatgpt.com 파라미터가 자동 포함된다고 안내한다. 즉 이제 GEO 성과를 막연히 체감으로 말할 것이 아니라, GA4나 서버 로그에서 실제 유입을 분리해 볼 수 있다. 콘텐츠 팀이 아니라 운영팀과 분석팀이 같이 들어와야 하는 이유다.

3. Perplexity는 WAF 화이트리스트를 공식 권장한다

Perplexity 공식 크롤러 문서는 Cloudflare WAF와 AWS WAF에서 User-Agent와 IP 대역을 함께 조건으로 허용 규칙을 잡는 방식을 구체적으로 설명한다. 이건 중요한 신호다. 이제 AI 노출 문제는 마케팅 문서만으로 해결되지 않고, 보안 장비 설정까지 같이 봐야 한다. 보안이 세다고 좋은 것이 아니라 필요한 봇을 정확히 통과시키는 쪽이 더 좋은 운영이다.

4. Google은 AI 전용 꼼수가 아니라 읽히는 사이트를 요구한다

Google AI Mode와 AI Overviews는 커졌지만, 공식 가이드는 여전히 기본으로 돌아간다. 크롤링 가능성, 유용한 텍스트, 화면과 일치하는 구조화 데이터, 검색 친화적인 HTML이 핵심이다. 2026년 1월 Google은 AI Overviews에서 바로 후속질문을 이어 AI Mode 대화로 넘어가는 흐름을 더 강화했다. 이 말은 한 페이지 안에 결론, 비교, FAQ, 실행 정보가 텍스트로 잘 열려 있어야 한다는 뜻이다.

ChatGPT Perplexity Gemini가 사이트를 읽는 방식 차이

세 서비스는 모두 AI 검색처럼 보이지만 운영 포인트는 조금씩 다르다.

• ChatGPT: 검색 노출과 학습 크롤러가 분리되어 있다. 검색 가시성을 노린다면 OAI-SearchBot 허용 여부와 noindex 정책을 먼저 봐야 한다. 또 유입 추적이 가능하므로 성과 측정 설계를 바로 붙일 수 있다.
• Perplexity: 출처 링크가 가까이 붙는 경험이 강하고, 크롤러와 사용자 요청 에이전트가 분리된다. WAF에서 User-Agent만 보고 막거나, IP 검증 없이 막아버리면 실제 인용 후보에서 자주 빠질 수 있다.
• Gemini와 Google Search: AI Overviews와 AI Mode는 검색 인프라 위에서 동작한다. 별도 AI 태그보다 기존 검색 품질과 크롤링 가능성이 먼저다. 자바스크립트 렌더링으로 핵심 답이 늦게 뜨거나, 중요한 본문이 이미지 안에만 있으면 손해를 본다.

실무적으로 보면 정답은 하나다. 한 플랫폼 전용 비법보다 공통 기반을 먼저 맞춰야 한다. 공개 접근 가능한 HTML 본문, 명확한 제목 구조, 차단되지 않은 크롤러, 측정 가능한 추천 유입. 이것이 2026 GEO 기본 세트다.

노출을 막는 흔한 기술 장애 4가지

1. robots.txt를 한 번 막아놓고 잊어버리는 경우

예전 SEO 작업이나 보안 작업 중에 특정 봇을 광범위하게 차단한 뒤 그대로 방치하는 경우가 많다. 이때 문제는 페이지 품질과 무관하게 AI 검색 노출 자체가 줄어든다는 점이다. OpenAI는 robots.txt 수정 후 시스템 반영에 약 24시간 정도 걸릴 수 있다고 안내한다. 즉 테스트 후 바로 결과가 안 보여도 하루 단위로 확인해야 한다.

2. noindex와 크롤러 허용 정책을 헷갈리는 경우

OpenAI FAQ를 보면 크롤러가 페이지를 읽지 못하면 noindex 메타 태그도 읽지 못할 수 있다. 이 말은 허용과 차단을 뒤섞으면 의도와 다른 결과가 날 수 있다는 뜻이다. 단순히 숨기고 싶다 정도로 설정하면 검색 노출, 요약 노출, 링크 노출이 엉켜버린다.

3. WAF나 봇 방어 솔루션이 필요한 요청까지 차단하는 경우

Cloudflare, AWS WAF, 봇 차단 플러그인은 정상 사용자뿐 아니라 크롤러도 막는다. 특히 AI 검색 봇은 기존 SEO팀이 익숙한 Googlebot만 통과시키는 식으로 구성되어 있으면 빠지기 쉽다. Perplexity가 WAF 설정 가이드를 굳이 공식 문서로 낸 이유가 여기 있다.

4. 핵심 정보가 HTML이 아니라 이미지, 아코디언, 클라이언트 렌더링에만 숨어 있는 경우

Gemini와 Google Search 관점에서는 이 문제가 여전히 크다. 첫 화면에서 가격, 대상, 비교 기준, 결론이 텍스트로 드러나야 하는데 카드 이미지나 인터랙션 뒤에 숨겨놓으면 재조합이 어려워진다. GEO는 디자인을 버리라는 뜻이 아니라, 핵심 답만큼은 HTML 본문에 그대로 두라는 뜻이다.

실무 적용: robots.txt, noindex, WAF, UTM 세팅 순서

1단계. 크롤러 허용 정책부터 나눈다

가장 먼저 OAI-SearchBot, GPTBot, PerplexityBot 관련 정책을 분리한다. 검색 노출이 목적이면 검색용 봇은 열고, 학습 차단이 필요하면 학습용 봇은 별도로 관리한다. 한 줄 예시로는 검색 노출용 허용, 학습용 차단처럼 역할을 나눠보는 식이다. 이 단계에서 정책 문서를 한 장으로 정리해두면 나중에 보안팀과 충돌이 줄어든다.

2단계. noindex 페이지를 목적별로 재점검한다

문의 완료 페이지, 테스트 페이지, 관리자 부근 페이지처럼 진짜 숨겨야 하는 것만 noindex로 남기고, 서비스 소개, 강의 안내, 비교 글, 사례 글 같은 전환형 페이지는 다시 확인한다. 실무에서는 오래전에 임시로 noindex를 걸어둔 랜딩 페이지가 그대로 남아 있는 경우가 꽤 많다.

3단계. WAF에서 AI 검색 관련 허용 규칙을 만든다

Perplexity 문서처럼 User-Agent와 IP 조건을 같이 본다. User-Agent만 보면 위장 요청에 취약하고, IP만 보면 운영이 불편하다. 두 조건을 같이 묶는 편이 안전하고 명확하다. Cloudflare를 쓰는 사이트라면 별도 규칙 우선순위도 같이 봐야 한다.

4단계. 유입 측정 대시보드를 만든다

GA4에서 session source나 landing page 기준으로 chatgpt.com 유입을 분리해본다. 서버 로그가 있다면 referrer와 UTM까지 같이 본다. 이 데이터가 쌓이면 어떤 글이 AI 추천을 타는지 감이 잡힌다. 예를 들어 FAQ형 글이 강한지, 비교표형 글이 강한지, 지역형 페이지가 강한지 실제로 보게 된다.

5단계. 페이지 본문을 HTML 기준으로 다시 손본다

결론 문장, 대상 구분, 가격 조건, 주의점, Q&A를 아예 HTML 본문에 넣는다. 여기에 날짜 정보와 운영 조건도 같이 적어두면 변동성 있는 내용을 다룰 때 신뢰도가 올라간다. 이 단계부터 비로소 콘텐츠 최적화가 의미를 갖는다.

교육기관 사이트 예시로 보는 점검 방법

가령 교육기관이 평택 교사 연수용 생성형 AI 강의 페이지를 운영한다고 해보자. 이 페이지가 ChatGPT, Perplexity, Gemini에서 보이려면 단순 소개문보다 더 구체적인 운영 정보가 살아 있어야 한다. 아래처럼 점검하면 된다.

점검 항목	나쁜 상태	좋은 상태
크롤러 접근	AI 관련 봇 광범위 차단	검색용 봇 허용, 학습용은 목적별 분리
본문 구조	이미지 카드 중심 소개	대상, 시간, 커리큘럼, 비용, 지역 정보가 HTML 본문에 노출
유입 측정	검색 유입만 뭉뚱그림	chatgpt.com 유입 분리, 랜딩 페이지별 전환 확인
보안 설정	WAF에서 알 수 없는 봇 전부 차단	공식 IP와 User-Agent 기준 허용 규칙 운영

실무 데이터로 보면, Google은 AI Overviews와 연동된 검색 경험을 더 깊은 대화 흐름으로 확장하고 있고, OpenAI는 추천 유입을 추적할 수 있는 파라미터를 공개했다. 이 두 신호는 분명하다. 이제 GEO는 검색 결과에 걸렸는가만 보는 단계가 아니라, AI가 추천했고 그 추천이 상담이나 신청으로 이어졌는가를 보는 단계로 넘어갔다.

그래서 교육기관, 강사, 로컬 서비스 업체라면 먼저 지역성과 대상성을 본문에 텍스트로 명확히 넣어야 한다. 예를 들어 평택, 교사 연수, 공공기관, 생성형 AI 활용, 실습형 강의처럼 실제 질문에 들어갈 단서를 문단 속에 분명히 써야 한다. 이 작업은 키워드 나열이 아니라 질문 해상도를 높이는 일이다.

실무 체크리스트

• OAI-SearchBot과 GPTBot 정책을 분리해서 관리하고 있는가
• PerplexityBot과 Perplexity-User를 WAF에서 점검했는가
• robots.txt 수정 후 최소 24시간 단위로 반영 여부를 확인하는가
• 핵심 랜딩 페이지에 불필요한 noindex가 남아 있지 않은가
• 가격, 대상, 지역, 적용 장면이 HTML 텍스트로 바로 보이는가
• 비교표와 체크리스트가 이미지가 아니라 테이블 또는 리스트로 작성되어 있는가
• GA4에서 chatgpt.com 유입을 따로 보고 있는가
• Cloudflare나 AWS WAF 규칙 우선순위까지 확인했는가
• 페이지 상단에 한 줄 결론과 바로 이어지는 Q&A가 있는가

Q&A

Q1. llms.txt를 넣으면 바로 노출이 좋아지나

과장하면 안 된다. llms.txt는 문서형 사이트에서 탐색 보조 역할을 할 수 있지만, 현재 공개 가이드 기준으로 Google이나 OpenAI 노출을 보장하는 핵심 신호는 아니다. 우선순위는 여전히 robots.txt, 크롤링 허용, HTML 가시성, 신뢰할 수 있는 본문 구조다.

Q2. GPTBot을 막으면 ChatGPT 검색에도 안 나오는가

그렇지 않다. OpenAI 문서 기준으로 검색 노출용은 OAI-SearchBot이고 학습 관련은 GPTBot이다. 목적을 나눠 관리해야 한다.

Q3. Perplexity는 robots.txt만 열면 끝인가

끝이 아니다. WAF에서 막히는 경우가 실제로 많다. 공식 문서가 Cloudflare와 AWS WAF 허용 규칙을 따로 설명하는 이유가 바로 그 지점이다.

Q4. Google AI Mode 대응은 별도 AI 스키마가 필요한가

대체로 아니다. Google 가이드의 방향은 특수 꼼수보다 검색 친화적 HTML, 유용한 본문, 올바른 구조화 데이터, 일관된 크롤링 가능성에 가깝다.

미래이음연구소 홍보

마무리

2026 GEO 마케팅의 분기점은 여기다. 예전에는 누가 더 잘 쓰느냐가 핵심이었다면, 지금은 누가 더 잘 열어두고, 더 잘 측정하고, 더 정확히 운영하느냐가 중요해졌다. OpenAI는 검색 노출과 학습을 분리해 관리하라고 말하고, Perplexity는 WAF 화이트리스트까지 공식 문서로 안내하며, Google은 AI 경험이 커질수록 기본 검색 품질과 크롤링 가능성이 더 중요하다고 말한다.

그러니 오늘 해야 할 일은 새 글 10개를 급하게 쓰는 것이 아니다. 먼저 대표 랜딩 페이지 3개를 골라 robots.txt, noindex, WAF, HTML 본문, 유입 측정부터 다시 점검해라. 이 기본기만 잡아도 ChatGPT, Perplexity, Gemini에서 선택될 확률이 확실히 달라진다. GEO는 더 이상 문장만의 게임이 아니다. 운영이 곧 노출이다.

참고자료

• OpenAI Help Center, Publishers and Developers FAQ
• OpenAI Developers, Overview of OpenAI Crawlers
• Google Search Central, AI Features and Your Website
• Google Blog, AI Mode in Google Search and AI Overviews get Gemini upgrades
• Perplexity Docs, Perplexity Crawlers