Vercel Firewall에서 AI Bots 관리 규칙을 통해 AI crawlers와 AI assistants를 각각 다르게 설정할 수 있게 되었습니다. AI crawlers는 콘텐츠 인덱싱 및 모델 학습을 위해 데이터를 수집하는 봇이며, AI assistants는 사용자의 요청에 따라 페이지를 가져오는 봇을 의미합니다. 이를 통해 AI crawlers는 차단하면서도, 사용자의 질문에 답하기 위해 콘텐츠를 가져가는 AI assistants의 요청은 허용하거나 로그만 남기는 등의 세밀한 제어가 가능합니다. 설정은 Vercel 대시보드의 Security > Firewall > Rules 메뉴 또는 Vercel CLI를 통해 간편하게 수행할 수 있습니다.