Search

  • Home
  • circumventing robots.txt

circumventing robots.txt

퍼플렉시티, AI 스크래핑 차단 사이트까지 무단 크롤링 논란

퍼플렉시티, AI 스크래핑 차단 사이트까지 무단 크롤링 논란

8월 5, 2025

테크크런치가 4일(현지 시간) 보도한 내용에 따르면, AI 스타트업 퍼플렉시티(Perplexity)가 AI 스크래핑을 명시적으로 차단한 웹사이트들의 콘텐츠를 무단으로 크롤링하고 스크래핑했다는…

circumventing robots.txt – AI 매터스 l AI Matters