[KT AIVLE 3기] 에이블스쿨 3주차 후기 : 미니프로젝트 1차 & 웹 크롤링

---

Day 9 - 미니프로젝트 1차 (1)

일정 개요

• 프로젝트 개요 및 레퍼런스 공유
• 문제 해결 실습 (개인별)
• 조별 토의 실습 (조별)
• +)  코딩마스터스 시작

 

후기

첫 미니프로젝트가 시작되었다! 프로젝트의 주제는 데이터 분석을 통해 대중교통 수요 분석을 하는 것이었다. 우선 관련 설명을 먼저 듣고 각자 실습을 진행했다. 저번주에 데이터 다루는 법을 열심히 배웠지만 막상 하려니까 헷갈리는 부분도 많았다. 실습은 시간이 촉박했지만 그래도 시간안에 진행을 할 수 있었다. 그렇지만 데이터를 하나하나 자세히 보고 의미있는 인사이트를 도출하기에는 부족한 시간이라고 생각되었다. 

 

개인 실습이 끝나고 8인으로 이루어진 미니프로젝트 조원들끼리 줌 미팅을 이용하여 각자 어디까지 실습했는지를 공유하고 각자 세운 가설을 공유했다. 토론을 하면서 MURAL이라는 새로운 플랫폼도 알게 되었고 활용을 해보았다. 팀별 미팅은 다음날까지 자신이 선택한 가설에 대해서 분석을 진행하는 것이었다.

 

에이블 강의 시간이 끝나고, 저녁을 먹은 뒤 미니프로젝트 단톡에서 같이 스터디를 진행해보자고 하신 조원분이 계셔서 참여했다! 아래 사진처럼 귀엽게 게더타운에서 모여서 스터디를 진행했다. 오전에 혼자서 진행했던 실습을 같이 돌려보고 하나하나 분석과 해석을 하는 시간을 가졌다. 혼자하려고 했던 것인데 같이하니 코드 오류도 빨리 찾고 재밌기도 했다. 물론 시간이 오래걸려서 전부 진행하지 못한 것은 아쉬웠다. 시간관계상 데이터 두 개만 자세히 보고 이후에는 각자 가설검정을 진행했다. 나는 주점 사업체 수와 시간대별 총 이동 인구수 관계를 중점적으로 진행했다. 

 

 

 

 

 

 

---

Day 10 - 미니프로젝트 1차 (2)

일정 개요

• 가설 검증 결과 기반 인사이트 토의 (조별)
• 종합 발표 자료 PPT 정리 (조별)
• 조별 토의 결과 발표
• 셀프테스트/설문

 

후기

각자 가설 검증한 결과를 줌 미팅을 통해서 나누고 서로 어떤 부분을 더 디벨롭 하면 좋겠다 그런 의견을 나눴다. 그리고 각자 다시 실습을 진행한 뒤에 다시 모여서 PPT를 제작했다. 구글 독스를 이용해서 같이 제작을 했다. 시간이 좀 부족하다고 느껴져서 다급하게 진행했다. 그 후에 전체 미팅 줌에서 다른 조들의 발표를 들었다. 새로운 타겟을 설정하거나, PCA, Autoencoder 등 아직 배우지 않은 기술들도 사용해서 발표한 팀이 있어서 많이 배웠다.

 

그리고 체크아웃 미팅 시간에 나의 자기소개 순서여서 자기소개를 진행하고, 저녁약속 이후 코딩마스터스 기초문제 13문제까지 풀었다.

 

 

 

 

---

Day 11 - 미니프로젝트 1차 (3)

일정 개요

• 개요, 데이터, 진행방법 (서울시 따릉이 수요 분석)
• 데이터 분석 (개인별)
• 인사이트 도출 및 공유 (조별)
• 전체 발표 / 마무리
• 셀프테스트 / 설문

 

후기

이번에는 새로운 데이터로 서울시 따릉이 수요 분석이라는 새로운 미니 프로젝트를 진행했다. 조원의 구성은 이전과 동일했다. 이전 이틀동안 진행했던 미니프로젝트보다는 데이터의 구조가 간단해서 비교적 빠른 시간에 해낼 수 있었다. 나는 조금 단순하게 이변량, 단변량 분석을 했는데 다른 조원분들은 도메인 지식을 새로 도입해서 새로운 컬럼들을 만들어 분석한 것이 인상깊었다. 확실히 팀플을 해야 많이 배우는 것 같다. 서로 분석한 것을 공유하고 여러 가설중에 괜찮은 것을 투표해서 조원들 다같이 구글 독스를 활용해 동시에 PPT 자료를 제작했다. 확실히 이전보다는 빠르게 제작할 수 있었다.

 

 

 

---

Day 12~13 - 웹 크롤링

일정 개요

• Day 12 : 동적 웹 크롤링 / API를 이용한 데이터 수집
• Day 13 : 정적 웹 크롤링 / Selenium을 이용한 데이터 수집

 

후기

이번에도 새로운 강사님이 오셔서 가르쳐주셨다. 그런데 정말 깔끔하고 정돈된 구성의 강의가 아니었나 싶다. 강의 내용도 확실하게 잘 알려주시고 그 외의 공부 방법이라든지 파이썬 활용 팁이라든지 정말 도움이 많이 되는 정보들도 많이 알려주시고 가셨다. 물론 나는 혼자서 크롤링을 해보고 웹도 공부한 적이 있어서 재밌게 들었지만 한번도 웹을 접해보지 않았더라면 조금 진도가 빠르게 느껴질 수 있을 것이라고 생각이 들긴 한다. 아무래도 강의가 이틀이라는 짧은 시간에 걸쳐서 구성되어 있기 때문에 그런 것 같다. 강사님도 그 부분에 대해서 아쉬움을 표하시긴 했다. 아무튼,, 정말 좋은 강의 듣게 되어서 너무 만족스러웠다. 강사님의 조언대로 scrapy를 이용한 프로젝트도 작게 해보면 좋을 것 같다는 생각을 했다.

 

 

Day 13(금) 체크아웃 미팅 때 매니저님이 코딩마스터스 우리반 두 분 빼고 대체 뭐하는 거냐고 장난식으로 ㅎㅎ 그러셔서 나도 뒤늦게 후다닥 코딩마스터스 문제를 몇개 풀었다. 근데 기초문제를 다 풀고나니 초급 문제도 은근 난이도가 있어서 걱정이다.. 하핫 열심히 공부하면서 해야겠다~~

 

 

 

---

3주차 소감

• 미니프로젝트를 하면서 다른 조원분들과 다른 조들로부터 많은 것을 배울 수 있었다!
• 너무나 깔끔한 웹크롤링 강의를 듣고 만족했다 
• 코딩마스터스 열심히 해야겠다..!