회고노트 18주차 : Selenium web-crawling

 

01 도전한 점

---

1. 크롤링 강의를 듣고 리뷰 웹사이트 크롤링을 도전했다.

2. nn번의 시행착오 끝에 마무리가 되는 것 같다.

3. 마지막 도전은 데이터프레임을 완성시키는 것이 될거다.

 

02 어려운 점

---

1. By메소드에 대해 이해도가 높은 상태에서 진행했으면 더 수월했겠다 생각한다.

2. CSS 선택자에 대해 처음 배웠고 실습해보는 과정이기도 했다.

3. 해당 과정에서는 요소 추출이 너무나 어려웠다.

4. HTML, CSS에 대한 최소한의 지식을 정규로 습득하는 게 좋겠다.

 

03 잊지말 점

---

1. 이론과 실습은 너무나 다르다.

2. 부딪혀서 해결하는 과정이 중요하다고 본다.

3. 해결까지의 과정이 지난한 건 분명하다.

4. 하지만 해결된다면 무엇과도 비교할 수 없는 도파민이 기다리고 있다.

 

04 시도할 점

---

1. 크롤링 데드라인 정하기

2. 리뷰 아이디, 기간에 대해 토의하기

3. 긍부정 데이터 수집하기

4. 하루 일기까지 모든 과정을 미루지 않기