나의 공부 일기

같이 프로젝트를 진행한 팀원: https://jihoon44-it.tistory.com/ 저는 지금 파이썬 개발자와 데이터분석에 관한 국비지원을 받고 있습니다. 2주간 글을 작성하지 안했던것은 이 국비지원을 하며 진행하는 프로젝트에 더 집중하기 위해서였습니다. 먼저 크롤링이란 프로그램이 웹 사이트를 정기적으로 돌며 정보를 추출하는 기술을 말합니다. 이런 프로그램은 우리는 크롤러(Crawler) 또는 스파이터(Spider)라고 불립니다. 크롤러의 예로는 우리가 자주 사용하는 네이버의 검색엔진이 해당합니다. 웹 사이트의 링크를 타고 다니면서 웹 사이트들의 데이터를 긁어와 데이터베이스에 저장하며 정기적으로 동작하여 최선정보를 유지하는것이지요. 저희는 3개월정도 공부를하였기에 네이버처럼 완벽하지는 않지만 할 수..