5주차 일정
5주차에는 자료수집 수업과 2차 미니 프로젝트를 진행하였다.
수업 내용
데이터 수집
크롤링에 대해 배우는 시간이었습니다.
4주차 마지막 날에는 하루 동안 오픈 API로 데이터를 수집하는 방법을 배웠습니다.
5주 2일 동안 웹 크롤링에 대해 배웠습니다.
웹사이트 유형
- 정적 페이지: 웹 브라우저에 화면이 표시되면 이벤트에 따라 화면이 바뀌지 않는 페이지.
- 동적 페이지: 이벤트 발생 시 서버에서 데이터를 가져와서 웹 브라우저에서 화면을 띄우고 화면을 바꾸는 페이지
웹 검색 방법
- 사용 요청
- JSON 문자열 수신 및 파싱: 주로 동적 페이지에 사용
- HTML 문자열 수신 및 구문 분석: 주로 정적 페이지에 사용
- 셀레늄을 사용
HTML
- 웹 문서 작성에 사용되는 마크업 언어인 Hyper Text Markup Language의 약자.
생각 정리하기
개인적으로 이론수업과 실기수업 모두 최고였습니다.
무엇보다 바로 배워서 사용할 수 있는 크롤링이라 더욱 재미있었어요.
수업 시작 전 크몽과 같은 사이트에서 인터넷 서핑을 하면 돈을 벌 수 있다고 했다.
쇼핑몰 크롤링의 경우 20만원 안팎으로 고정됐다.
수업에 열심히 참여하게 된 가장 큰 동기부여가 되었습니다.
