크롤링과 인덱싱은 검색 엔진이 웹 페이지를 발견하고 저장하는 두 가지 다른 단계입니다.
크롤링(Crawling)
검색 엔진 봇(Googlebot 등)이 웹을 돌아다니며 페이지를 발견하고 콘텐츠를 수집하는 과정입니다.
인덱싱(Indexing)
크롤링된 페이지를 분석하여 검색 데이터베이스에 저장하는 과정입니다. 인덱싱되어야 검색 결과에 노출됩니다.
크롤링 되었다고 반드시 인덱싱 되는 것은 아닙니다. 품질이 낮거나 중복된 콘텐츠는 인덱싱에서 제외될 수 있습니다.