여니의 글로벌 도전기

2020.10.15 패스트캠퍼스 데이터분석 강의(직장인을 위한 파이썬 데이터분석) 챌린지 참여 후기 안녕하세요! 8월 10일부터에서 9월 28일까지 총 50일간 진행된 7월 패스트캠퍼스 환급 100% 챌린지 1차 합격자로 선정이 되어서 마지막으로 최종 미션을 수행하게 되었습니다!! 🤔패스트캠퍼스를 선택한 이유? 대학교 마지막 학기이기도 하고, 종강은 했는데... 7월부터 방학동안 뭔가 커리어에 도움되는 새로운 것을 배우고 싶고,👩🏻‍💻 요즘 4차산업시대이다, 알고리즘 시대다 뭐다, 파이썬이든, 웹개발이든 '개발'분야가 많이 뜨는데.. 요즘은 초등학생들조차도 '필수과목'으로 코딩을 배우고 있다는 급한 마음에..😯 중간에 샌드위치 세대로 껴서 뒤쳐질 순 없다!! 격변하는 시대에 나도 이에 맞춰 준비해야겠다!..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 10. 13. 22:46

2020.09.28 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 50회차 미션 48회차랑 49회에서는 조회수가 높게 나오는 채널을 1위부터 100위까지 막대그래프를 그려봤고, 이번 시간에는 조회수가 높게 나오는 제목을 뽑아서 보고싶기 때문에,soynlp과 wordcloud를 이용해서 시각화해보는 실습을 했다. 👉 먼저 soynlp 설치 하고, LTokenizer로 단어의 경계를 따라 L-R 분리줬다. 여기서 L과 R을 알아야하는데, L은 한글에서 의미를 가지는 부분인 명사, 동사를 뜻하고, R은 을과 었어-와 같은 조사나 어미를 뜻한다. LTokenizer로 L인 의미를 지닌 단어만 추출해서 유효한 키워드를 알아 볼 수 있다. df_hot_top = df_hot[df_sorted['v..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 28. 03:12

2020.09.27 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 49회차 미션 48회차에서 국내 인기채널 순위를 순서대로 시각화하기 위해 colaboratory 환경을 설정하고, 데이터를 불러와 필요한 데이터만 추려냈다. 오늘은 이에 이어 group을 해줘서 조회수 100위를 순서대로 막대그래프📊를 그려봤다. 👉 groupby로 묶어서 합계 파이썬 개념을 배우면서 강사님께서 데이터 시각화를 위해 groupby 코딩을 많이 쓴다고 하셨는데 이번 실습 예제에서 이렇게 한번 써본다..ㅎㅎ 채널에 속한 각각 동영상의 조회수를 합하기 위해 df_chanel_view_sum = df_drop_sorted.groupby(df['channel_title']).sum() df_chanel_view_s..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 27. 03:01

2020.09.26 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 48회차 미션 코딩- 파이썬- 머신러닝의 개념을 배우고 이를 토대로 연습예제를 해보고 마케팅, 유튜브, 헬스케어, 비즈니스 금융의 실전예제를 가지고 직접 데이터를 시각화해봤다. 이 다섯가지 중에 '국내 유튜브 인기채널 순위'가 가장 흥미로워보이고 배워보고 싶었던 것이라 유튜브 실전예제부터 강의를 들었다ㅎㅎ 실전예제부터 강사분이 바꼈는데, 유튜브 동영상으로 봤던 '조코딩'분이 강의를 진행하셔서 신기하고 반가웠다. 이번 실전예제에서 우리가 국내 유튜브 데이터파일을 가지고 알아보고 싶은 것은 국내 인기채널 순위를 순서대로 시각화, 인기영상들의 제목을 분석하고, 많은 조회수를 부르는 키워드는 어떤건지? 활용하는 것이었다. 데이터..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 26. 03:43

2020.09.25 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 47회차 미션 46회차에서는 앙상블의 또다른 종류인 베깅을 이용해서 어떻게 모델 성능을 높일 수 있는지 배웠고 그다음 부스팅으로 넘어와서 그라디언트 부스팅을 배웠다. 📎 XGBoost XGBoost는 그라디언트 부스팅의 부족함을 개선한 버전으로, 그라디언트 부스팅보다 빠르고 성능도 향상되었으나 여전히 학습시간이 매 우느리다. scikit learn 패기키가 아니기때문에 xgboost에서 import를 해줘야한다. from xgboost import XGBRegressor, XGBClassifier xgb = XGBRegressor(random_state=42) xgb.fit(x_train, y_train) xgb_pred..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 25. 03:25

2020.09.24 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 46회차 미션 45회차에서는 lasso와 Ridge의 알고리즘 다 사용한 poly ElasticNet 를 실습해보았고, 확실히 라쏘와 릿지보다 더 낮은 오차가 있고 성능이 좋음을 알 수 있었다. 그 다음에는 앙상블에 대한 개념을 배웠는데, 앙상블의 4가지 종류 중 하나인 보팅을 배웠다. 📍 베깅 베깅은 샘플에 대한 다양한 그룹군을 만든다음에, 그 것에 대한 각각의 알고리즘을 예측한다음에 결과값을 토대로 앙상블한다. 사용하기 편하고 성능이 좋아서 많은 사람들이 사용하지만, 역시 단일모델을 사용하는 것에 한계가 있다. 수학시간에 배운 조합..? 과 비슷한 것 같다. 이전에 배웠던 디시젼 트리도 이 베깅 앙상블을 기반으로 했다..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 24. 03:19

2020.09.23 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 45회차 미션 📈Polynomial Features 선형함수로 계속 실습을 했는데, feature의 개수가 많아질때 즉 인풋이 많아질때 계수?값을 바꿔가면서 최적의 우리의 선형함수를 만들게되는데, Polynomial Features를 하면 여러가지 다양한 피처를 고려할 수 있게되어 더 많은 정보량을 받을 수 있기 때문에 모델 성능이 올라가는 경우가 있다. from sklearn.preprocessing import PolynomialFeatures poly = PolynomialFeatures(degree=2, include_bias=False) poly_pipeline = make_pipeline(PolynomialFe..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 23. 03:08

2020.09.22 [패스트캠퍼스 수강 후기] 데이터분석 강의 100% 환급 챌린지 44회차 미션 43회차에서는 42회차에서 배운 '규제'를 바탕으로 릿지, 라쏘, Elastic Net그래프를 출력해서 규제정도를 어떻게 줬을 때 모델의 성능이 높은지 판단하는지 강의를 통해서 배웠다. 오늘은 3가지 스케일러에 대해서 배웠는데, 머신러닝 전처리에서 훑어보고 지나간 것이라 복습하는 느낌으로 강의를 들었다. 📈 스케일러Scaler 먼저 from sklearn.preprocessing import StandardScaler, MinMaxScaler, RobustScaler 으로 임포팅주고! 👉Standard Scale Standard Scale은, 평균(mean)을 0, 표준편차(std)를 1로 만들어 주는 스케..

같이 공부해요/패스트캠퍼스ㅣ직장인을 위한 파이썬 데이터분석 올인원 패키지 Online 2020. 9. 22. 03:11