인터넷 정보를 요리하는 자동화 기술, 웹 크롤링!

내가 좋아하는 스포츠 팀의 성적 데이터를 자동으로 가져와 분석해 봅시다. 최근에 부동산 가격이 올라가는 지역이 어딘지 궁금하다면 공공 사이트에서 데이터를 가져와 분석해 봅시다. 주식 정보는 어떤가요? 매일 변동하는 주가를 데이터베이스에 저장했다가, 필요할 때마다 그래프 형태로 불러와 변동 추이를 살펴보는 것도 재미있지 않을까요?

처음 만나는 웹 크롤링 입문서

인터넷 정보를 나의 필요나 업무의 요구에 맞게 불러오고 가공하고 자동화하는 모든 것들이 다 웹 크롤링이라는 IT 기술을 기반으로 합니다. 이 책은 웹 크롤링 기술에 대한 안내서이자 입문서입니다. 그동안 파이썬이라는 언어와 크롤링의 난해한 코드로 고개를 떨구던 독자에게, 크롤링 기술은 누구나 쉽게 배울 수 있다는 것을 알려주는 책입니다.

세 가지 기본 기술만 알면 웹 크롤링이 내 손 안에

웹 크롤링은 세 가지 기본 개념과 방법만 손에 익히면 입문자도 충분히 구현할 수 있는 기술입니다. BeautifulSoup 라이브러리를 이용한 파싱, 동적 웹 페이지를 다루는 Selenium 라이브러리, 그리고 오픈 데이터를 활용하는 API 기술이 그것입니다. 다만 이 기술을 제대로 아는 게 중요합니다. 이 책은 입문자도 쉽게 따라올 수 있도록 기초부터 차근차근 크롤링 기술의 개념과 방법을 단계적으로 학습하도록 돕습니다. 파이썬을 전혀 모른다고요? 크롤링 학습에 꼭 필요한 내용 중심으로 공부하도록 안배하였습니다.

크롤링은 물론 데이터 분석까지

더 나아가 이 책에서는 크롤링한 데이터를 활용하는 여러 가지 방법도 함께 배웁니다. 데이터를 제대로 가져왔어도 내 업무에 맞게 변형할 수 없다면 모두 무용지물입니다. CSV 파일이나 엑셀 파일로 저장하기, 판다스 라이브러리의 데이터 프레임 형태로 변환하기, MySQL 데이터베이스 형태로 저장하기, 데이터를 시각화하기 등 크롤링한 데이터를 내 입맛에 맞게 변환하는 다양한 기법도 함께 배우게 됩니다.