[KT AIVLE SCHOOL_DX] 5주차 후기 (2/27 ~ 3/3)

일자	교육내용
2/27	데이터수집하기_웹크롤링_ 동적 페이지
2/28	데이터수집하기_웹크롤링_ 정적 페이지
3/1	삼일절
3/2	2차 미니프로젝트
3/3	2차 미니프로젝트

---

# 2/27 데이터수집하기_웹크롤링_ 동적 페이지

오늘은 새로운 강사님과 웹크롤링을 통해 데이터를 수집하는 방법을 배웠습니다.

지난주에 배웠던 API를 통한 방법과 달리 이번에는 웹페이지를 통해 데이터를 얻는 방법이었는데,  실습으로 네이버와 다음을 웹크롤링해 보았는데, 웹에 관련된 지식이 전혀 없다 보니 처음으로 접하는 것이 많아서 신기했습니다.

그리고 목요일부터 시작되는 2차 미니프로젝트의 조편성이 발표되었습니다. 전에 1차 미니프로젝트에서 같은 조였던 분들이 새로운 조원의 반 이상이어서 조금 익숙한 느낌이라 좋았습니다.

---

# 2/28 데이터수집하기_웹크롤링_ 정적 페이지

오늘은 전 날 배웠던 수업에 이어서 웹크롤링을 통해 데이터를 수집하는 방법을 배웠습니다.

전 날 수업은 조금 어렵긴 했지만, 할 만하다고 생각했었는데, 오늘 수업은 조금 힘들었습니다.

html과 css에 대해서 처음으로 알게 되었는데, 이와 관련된 부분을 이해하는 것이 조금 힘들었습니다.

그리고 실습을 하면서 오류가 너무 많이 난 것도 문제가 되었는데, 수업 중간에 코드 오류가 나서 그 오류를 해결하려고 하다 보니 다음 수업을 제대로 듣지 못했고, 다시 진도를 따라가려 하면 다음 수업으로 넘어가고 있어서 이해는 뒷전으로 하고, 수업내용을 받아 적느라 바빴습니다. 내일이 휴일이라서 다행이었습니다.

---

# 3/2 2차 미니프로젝트

오늘부터 2차 미니프로젝트가 시작되었습니다.

여러 데이터파일을 전처리하고 합쳐서 분석을 시행했는데, 생각보다 전처리에서 시간이 오래 걸렸습니다. 전에 다른 강사님께서 데이터 분석 과정 중 가장 오래 걸리는 구간이 데이터 전처리라고 하셨는데, 그 이유를 실감할 수 있었습니다. 분석하기 쉽도록 데이터 타입을 바꾸거나 필요 없는 값들을 없애다 보니 오늘 하루 시간이 거의 다 갔던 것 같습니다.

---

# 3/3 2차 미니프로젝트, 발표

오늘은 어제 하던 미니 프로젝트를 이어서 마무리하고, 오후에 발표하는 시간을 가졌습니다.

저희 조의 경우, 대면으로 프로젝트를 진행하고 싶었지만, 교육장 예약이 마감되어서 어쩔 수 없이 비대면으로 진행하게 되었습니다. 오전에는 각자 분석을 진행하고, 오후에는 이를 합쳐 ppt를 작성해 제출했습니다. 이후에는 zoom을 통해 DX 반 전체가 모여 발표를 하는 시간을 가졌습니다. 강사님께서 자원하는 조가 없다면 랜덤으로 선택해서 발표를 시키신다고 하셨는데, 오히려 발표를 하고 싶어 하는 조가 많아 시간이 부족해서 전부 하지 못하는 상황이 발생했습니다.

다른 조의 발표 내용을 보면서 같은 데이터 안에서 모두 다른 인사이트가 도출되는 것이 흥미로웠습니다.

---

[5주차 후기]

저번에 3일 동안 진행했던 1차 미니프로젝트 때와는 달리 이번에 진행된 2차 미니 프로젝트는 이틀밖에 시간이 없어서 아쉬웠습니다. 그리고 1차 때는 비대면으로도 괜찮다고 생각했었지만, 이번에 2차 미니 프로젝트를 진행하다 보니 프로젝트를 할 때에는 대면으로 회의를 하는 것이 더 효율적일 것이라고 생각했습니다. 다음에 있을 프로젝트 때는 꼭 교육장을 예약할 수 있으면 좋겠습니다.