체크리스트

GEO 마케팅 AI SGAEO | 로그의 사용자 에이전트와 응답 코드로 크롤러 요청 구분하기

로그에서 사용자 에이전트는 요청을 보낸 프로그램이 자신을 어떻게 식별했는지, 응답 코드는 서버가 해당 요청에 어떻게 응답했는지를 보여줍니다. 두 항목과 요청 경로를 함께 보면 크롤러로 보이는 방문의 범위를 파악할 수 있지만,…