구글 크롤링 - 정확하고 빠르게 원하는 정보를 검색하기 위한 기술
많은 컴퓨터에는 많은 자료들이 분산되어 있고 이 자료들을 모아서 빨리 찾을 수 있도록 정리하는 기술을 크롤링이라고 하며, 크롤링을 위해 만들어진 프로그램을 크롤러라고 합니다. 이런 크롤링은 검색을 필요로 하는 검색포탈사이트나 일반적으로 우리가 사용하는 프로그램 등 우리가 사용하는 거의 모든 곳에 사용되고 있습니다. 인터넷 공간은 한없이 넓어지고 데이터도 계속 많아지고 있으니 이런 크롤링은 필수가 되었는데요. 구글도 웹크롤러라는 소프트웨어를 사용하여 공개된 웹데이지를 발견하고 정리합니다. 구글이 아무리 큰 회사라고 해도 모든 내용을 서버에 저장할 수는 없으니 검색결과에서 보여줄 수 있는데 필요한 내용만을 색인에 포함을 합니다. 유용성, 관련성 검색결과를 보면서 내가 원하는 정보가 안 나온다고 생각하는 적이..