AI 검색 시대, 콘텐츠 창작자를 위한 새로운 수익 모델
AI 검색의 확산으로 기존 웹 콘텐츠의 발견 용이성(Discoverability)과 수익 모델(Revenue Model)이 위협받는 상황 발생
클라우드플레어는 AI 봇의 콘텐츠 접근 제어 강화 및 새로운 경제 모델 구축을 위한 두 가지 이니셔티브 발표
AI 검색의 정보 신선도 및 품질 신호(Freshness & Quality Signals) 활용 연구 및 '크롤링당 지불(Pay Per Crawl)'에서 '사용량당 지불(Pay Per Use)'로의 전환 실험 진행
AI 검색으로 인한 기존 웹 비즈니스 모델의 위협
AI 검색 엔진이 웹페이지를 읽고 요약 정보를 제공하면서, 사용자의 전통적인 검색 결과 링크 클릭률(Click-Through Rate)이 급감하는 현상이 발생하고 있음. Pew Research Center 연구에 따르면 AI 요약이 있을 때 사용자는 전통적 링크를 8%만 클릭하며, 요약 내 링크 클릭률은 1%에 불과함. 이는 광고, 구독 등으로 수익을 창출하던 콘텐츠 제공자들에게 심각한 수익 감소(Significant Revenue Loss)를 야기하며, '발견 가능성'과 '수익 창출'이 동일했던 기존의 웹 생태계 균형을 무너뜨리고 있음. 콘텐츠 제공자들은 AI 검색에서 배제되거나, 가치 제공 대비 보상을 받지 못하는 딜레마에 처함.
클라우드플레어의 AI 검색 신호 활용 연구 프로그램
클라우드플레어는 자사 네트워크를 통해 수집된 콘텐츠 신선도(Content Freshness) 및 트래픽 흐름(Traffic Flow) 신호를 활용하여 AI 검색의 효율성을 높이는 연구 프로그램을 진행함. 이 프로그램은 AI 검색 엔진에게 고품질 콘텐츠(High-Quality Content)를 우선적으로 노출하도록 유도하고, 변경되지 않은 페이지에 대한 불필요한 크롤링을 줄여 AI 기업과 사이트 소유자 양측의 비용을 절감하는 것을 목표로 함. 특히, 변경되지 않은 페이지에 대한 재크롤링을 방지하는 신호는 컴퓨팅 자원 낭비(Compute Resource Waste)를 막는 데 크게 기여할 것으로 기대됨.
'크롤링당 지불'에서 '사용량당 지불'로의 전환
기존 '크롤링당 지불(Pay Per Crawl)' 모델은 실제 콘텐츠 가치 측정에 한계가 있어, 클라우드플레어는 '사용량당 지불(Pay Per Use)' 모델로 전환을 모색함. Ceramic.ai와 You.com과 같은 AI 기업들과의 실험을 통해, 콘텐츠가 AI 검색 결과에 실제로 사용될 때 보상하는 '쿼리당 지불(Pay-per-Query)' 또는 '결과당 지불(Pay per Result)' 방식을 지원함. 이는 콘텐츠 제공자가 자신의 작업이 제공하는 실질적인 가치(Actual Value)에 따라 공정하게 보상받도록 하며, 원본 콘텐츠 생산에 대한 인센티브를 강화하는 것을 목표로 함.
AI 검색 결과 최적화(AEO)를 위한 보고 기능
클라우드플레어와 Ceramic.ai 프로그램 참여자는 AI 검색 결과 최적화(AEO)를 위한 새로운 보고 기능(New Reporting Capabilities)을 활용할 수 있음. 이를 통해 콘텐츠 제공자는 자신의 콘텐츠로 연결되는 주요 검색어(Top Queries), 특정 웹페이지 및 스니펫(Webpage & Snippet), 평균 검색 순위(Average Search Ranking Position) 등 상세 정보를 파악할 수 있음. 이러한 데이터는 콘텐츠가 AI 검색에서 어떻게 발견되고 사용되는지에 대한 가시성(Visibility)을 제공하며, 향후 콘텐츠 전략 수립에 중요한 기반이 될 것임.
AI 시대의 웹 경제 모델 변화와 클라우드플레어의 역할
AI 에이전트가 연속적으로 검색을 수행하는 '에이전트 인터넷(Agentic Internet)' 시대에는 검색 단위가 '클릭'에서 '결과(Outcome)'로 변화함. 클라우드플레어는 이러한 변화에 맞춰 결과 기반 가격 책정(Pricing the Outcome) 및 콘텐츠 제공자 보상 시스템을 구축하는 인프라 역할을 수행하고자 함. 이는 과거 웹이 개방성과 중립성을 기반으로 성장했듯이, AI 시대에도 창의성과 기술에 대한 공정한 보상을 통해 웹 생태계가 지속적으로 발전할 수 있도록 지원하는 것을 목표로 함.