본문 바로가기
개발일지/제로베이스_데이터사이언티스트스쿨

제로베이스 오일 크롤링 중

by 다니엘의 개발 이야기 2022. 7. 5.
320x100

휴.. SQL 마지막 작업하다가, 계속 oil 스크래핑 자료로 활용하는게 나오는것같길래

어차피 짚고 넘어가야하는 문제였기도 해서 겸사겸사 oil에 손을 대기 시작했다.

 

시작부터 엄청난 난관이였다.

근데 엄청나다고 하기엔, 이제는 몇가지 안풀린 핵심적인 것들만 가닥을 잡으면 되는 부분들이였다.

 

코드를 해설해주시는것도 따라하는 것도 순탄치는 않았지만 재밌었다.

 

그도 그럴것이, 강사님이 찍은날자는 거의 10개월전쯤에서 반년전쯤에 찍은것같은데

그 사이에도 구현하는게 라이브러리 내용이 바뀌고, 스크래핑을 이용하는 사이트가 변하는 등의 요인으로 인해서 결코 같지 않았다.

 

따라하는데만 거의 8시간 걸린것같다. 고민하면서 하느라.

더 걸렸나?

 

아무튼 결과적으로 스크래핑에 성공!

 

하지만 아직 부족한것들이 있다.

부분적으로 쪼개서 확인하는것은 이제 능하다.

하지만 이걸 하나의 덩어리로 합치는 것은 지금 머리를 너무 많이써서 그런가 안돌아가서 이게 감이 잘안오더라.

 

나름대로 하나로 합쳤을때를 연상하면서 쪼개놓았다고 쪼개놓았는데,

에러가 발생하니 거참.. 어떻게 해결할지 시도하기가 힘들어서 일단 오늘은 여기까지하고, 내일 마저 시각화까지 마무리하려고 한다.

 

과제를 제출할때마다 거의 최하점에 가까운 수준이였지만, 실력이 향상되고 있음이 눈에 보인다.

이제 몇개의 벽만 뚫고나면 이제 전문가의 시작단계에 있을 수 있다는 느낌이 든다.

 

오늘도 수고했다.

300x250