본문 바로가기

파이썬10

[댓심]댓글 크롤링 프로그램 제작1 : 코드 완성 from selenium import webdriver as wd from bs4 import BeautifulSoup import time import re import pandas as pd driver = wd.Chrome(executable_path="C:/Users/MSI/OneDrive/바탕 화면/youtube/chromedriver.exe") url = 'https://www.youtube.com/watch?v=yDD4K-XxuDY' driver.get(url) last_page_height = driver.execute_script("return document.documentElement.scrollHeight") while True: driver.execute_script("window.. 2021. 4. 7.
두 번째 프로젝트 : 댓심 프로젝트 두 번째 프로젝트로 댓심(댓글 + 민심) 프로젝트를 시작해보려 한다. 1. 배경 (1) 나의 경험 예전 스타트업에서 일할 때 유튜브 댓글과 고객들의 후기 데이터를 근거로 영상을 기획한 적이 있었다. 단순한 텍스트 마이닝으로 키워드를 추출해 이를 참고하는 방식이었지만, 정량적인 근거를 토대로 영상을 기획해본 경험이 인상적이었다. 몇 년전 영화 홍보영상을 제작할 기회가 있을 때에도 써먹었던 방법이었다. 댓글을 있는대로 다 긁어 무식하게 키워드를 뽑아내 해석해보니 영화에 기대하는 부분, 장면, 감동적인 포인트를 얼추 유추할 수 있었고, 토대로 영상의 포인트를 기획했었다. 영상을 제작한 후 피드백을 해봤을 때에도 의도했던 부분이 먹혀들었던 것 같다. (2) 트렌드 최근 유튜브 영상을 시발점으로 재밌는 현상들이 .. 2021. 3. 31.
어쩌다 데이터4 : 당장 돈이 되는 데이터 분석 당장 돈이 되는, 당장 돈을 벌어올 수 있는 데이터 분석이 있을까? 마이데이터 사업, 데이터 바우쳐 사업처럼 보유하고 있는 데이터, 로우 데이터를 판매해 수익을 내는 것 말고, 데이터 분석을 통해 얻은 인사이트, 컨설팅, 기획, 프로모션 등으로 직접적인 수익을 낼 수 있을까? 더 나아가 데이터 분석이 비즈니스 모델이 될 수 있을까? 1. 분석가들아, 돈 벌어와! 현재 다니고 있는 회사에서 발생하고 있는 악순환 먼저 짚어 보고자 한다. 작년까지 이 악순환의 출발은 데이터 비즈니스의 당장의 매출을 내라는 압박에서 시작한다고 생각했다. 저번에 2021.02.04 - [그냥 생각난 것들] - "Data-Driven-Decision" vs "Decision-Drives-Data"에서 한번 정리했듯이 데이터 인사이.. 2021. 3. 29.
어쩌다 데이터3 : 데이터 분석가 주니어의 현실 "어떤 데이터 분석가가 되고 싶은가?" 굉장히 취준생스러운 질문이지만 실무를 시작한지 얼마 안된 주니어에게도 굉장히 유효한 질문이다. 데이터 분석가가 되기 위한 로드맵과 배울 수 있는 루트는 하루가 다르게 많아지고 있기 때문에 실력을 향상 시키는건 개인의 성실함, 능력에 맡겨둘 수 있다고 생각한다. 하지만 어떤 분석가로 성장하고 싶은지는 개인이 집중해서 생각해봐야 한다. 조금은 막연한 문제처럼 느껴지지만 정리해둘 필요가 있어 정리해본다. 메xx 전직 처럼 어떤 특성의 분석가로 바뀌는 건 아니지만, 적어도 초보자로 200찍는 일은 없어야 하기 때문이다. 개인적으로 어떤 데이터 분석가가 되고 싶은지에 대한 대답은 꽤나 명쾌하다. 분석을 실행에 옮겨 문제를 해결하는 분석가 명쾌한 답과는 다르게 현재 실무에서 .. 2021. 3. 12.