hCaptcha·Turnstile, AI 에이전트 대부분 못 잡아…스크립트 봇은 95~100% 탐지

'Proof of Human'이 2026년 10월 25일 공개한 벤치마크에서 hCaptcha와 Cloudflare Turnstile이 스크립트 기반 봇은 대부분 잡아내면서도 AI 에이전트는 거의 탐지하지 못한 것으로 나타났다. 이번 테스트는 'Proof of Human', 'reCAPTCHA v3', 'hCaptcha', 'Cloudflare Turnstile', 'Cloudflare Bot Management' 등 5개 봇 탐지 시스템을 비교한 것이다.

실험에는 AI 에이전트 3종과 스크립트 봇 2종이 참여해 브라우저에서 5문항 설문을 수행했다. AI 에이전트는 Claude Opus를 사용한 'Browser Use', Perplexity의 'Comet', xAI의 'Grok'이었고, 스크립트 봇은 'Chromium'과 'CloakBrowser'였다. 각 시스템은 에이전트·봇별로 20회씩 테스트했으며, 탐지율은 자동화가 적발된 평가 비율로 계산했다.

시스템별 탐지율 격차

'hCaptcha'와 'Cloudflare Turnstile'은 스크립트 봇을 95~100% 탐지했지만 AI 에이전트는 대부분 놓쳤다. 'hCaptcha'의 AI 에이전트 탐지율은 Browser Use 16%, Comet 0%, Grok 6%였고, 'Cloudflare Turnstile'은 세 에이전트 모두 0%를 기록했다. 'Cloudflare Turnstile'은 세 에이전트에 아예 과제를 제시하지 않고 통과시켰으며, AI 에이전트들은 여러 시도에서 'hCaptcha'의 이미지 과제를 풀어낸 반면 스크립트 봇은 자주 실패했다.

반대로 'reCAPTCHA v3'는 AI 에이전트를 Browser Use 95%, Comet 100%, Grok 72% 탐지했으나, 브라우저 정보를 위장하고 주거용 회선 IP를 사용한 'CloakBrowser' 기반 자동화에 대해서는 탐지율 0%였다.

AI 에이전트와 봇 전체 시도를 합산하면 'Proof of Human'이 99%로 가장 높은 탐지율을 보였고, 'reCAPTCHA v3'가 69.4%로 뒤를 이었다. 다만 이번 연구는 인간을 봇으로 잘못 판정하는 비율은 측정하지 않았으며, 연구팀은 향후 연구에 인간 참가자를 포함해야 한다고 밝혔다. 이번 결과는 gigazine.net이 보도했다.