🦄

유튜브 api 가서 키값을 발급받은 후, 아래와 같이 설치해주고, pip install google-api-python-client import re import datetime from tqdm import tqdm tvNdrama 채널의 재생 리스트를 확인하고, 특정 재생리스트의 댓글을 모두 가져오고 싶을때 from googleapiclient.discovery import build from googleapiclient.errors import HttpError # from oauth2client.tools import argparser DEVELOPER_KEY = ' ' # 내 유튜브 API 키 YOUTUBE_API_SERVICE_NAME = 'youtube' YOUTUBE_API_VERSION ..

유튜브 영상을 검색하여, 나오는 영상들의 댓글을 모두 수집해야 했다. 여러 참고 자료를 활용하여 아래와 같은 코드를 완성시켰다. import pandas as pd from bs4 import BeautifulSoup from selenium import webdriver from webdriver_manager.chrome import ChromeDriverManager from tqdm import tqdm import time import re import requests import random import datetime #Queue의 기본적인 기능 구현 class Queue(): def __init__(self, maxsize): self.queue = [] self.maxsize = maxs..

Numpy소개 및 필요성 Numerocal Python의 약어 머신/딥, 데이터 전처리 필수 api 머신러닝의 주요 알고리즘은 선형대수와 통계 기반 선형대수 기반의 프로그램을 쉽게 만들 수 있도록 지원하는 대표적인 package 벡터 배열상에서 데이터 개조, 정제, 부분 집합, 필터링, 변형, 다른 종류 연산의 빠르 수행 if-elif-else를 표현하는 반복문 대신 사용할 수 있는 조건절을 표현할 수 있는 배열표현 기본 python에선 list로 표현하나, numpy에서는 ndarray로 표현 Numpy의 데이터 표현 단위 Numpy의 용어 axis: 값들의 나열 방향 rank : 데이터 집합에서의 축의 개수 shape : 형상 / 형태, 각 축 별 데이터 개수 size 벡터화 : 배열의 각 원소에 대..

데이터 시각화 목적 데이터 탐색을 할 때 가장 많이 사용하는 것이 시각화 데이터의 크기를 비교하는 것 수치값을 하나씩 보는 것보다 그림을 보면 데이터에 존재하는 패턴을 쉽게 알아볼 수 있음 데이터 분석 결과 뿐만 아니라 정확한 분석을 위해 데이터 탐색 방법으로 활용 분석시에 최적화된 데이터 구조로 분석을 요할 경우 금전적인 효과가 창출 기존 분석과의 차별점 대용량 데이터를 처리하기 위해 장비빨이 필요 데이터 시각화 프로세스 상황을 이해해야 함 누가 보는 것인지? 무엇을 보는 것인지? 어떻게 보는 것인지? 누구를 대상하는 것인지? 적합한 시각화 방법 선택 불필요한 요소 제거 (가장 중요) 원하는 곳에 집중하도록 유도 결과적으로 하나의 스토리가 만들어짐 결론 : 데이터로부터 숨은 이야기를 발견하는 것이 중요..

가상환경을 생성하고(python 3.6) 주피터 노트북을 실행했는데 kernel이 연결이 안되는 현상이 발생했다. 다음과 같은 에러 메시지가 터미널 창에 출력됨 AssertionError: Couldn't find Class NSProcessInfo Mac의 Big Sur OS 에서 발생하는 에러일 확률이 높다고 한다. - 맥에서 파이썬 주피터를 쓸 땐, 3.8 이상을 쓰도록 하자. Running a Jupyter Lab kernel under Python 3.6 (possibly also 3.7) throws: AssertionError: Couldn't find Class NSProcessInfo Running in Python 3.8 works fine. https://stackoverflow.co..

모듈(묶음)이란? 함수나 변수들을 모아 놓은 library들 의미 회사, 그룹, 모르는 누군가가 제공하는 외부 library들 사용하는 방법, 외부에 내 코드를 공유하는 방법 모듈 사용 방법 2-1. 모듈의 파일 확장자 : py 2-2. 모듈 사용 문법 a. import file명 b. from file명 import 함수명 c. import file명 as 별칭 %%writefile mymath.py #mymath.py를 파일로 저장 mypi = 3.14 def add(a,b): return a+b def area(r): return r*r*mypi mymath 모듈의 각 메소드 호출 및 출력 # from file명 import 함수명1 [, 함수명2] import mymath as m print(m...

크롤링 후 데이터 저장시 인코딩을 utfmb4로 설정했는데도 'utf-8' codec can't encode characters in position 188-189: surrogates not allowed 오류가 뜨면 이모티콘 오류를 고려해보자. 이모지를 제거하는 함수 만들어서 사용해 해결! def rmEmoji(inputData): return inputData.encode('utf-8', 'ignore').decode('utf-8')

넷플릭스 구독한지 어언 2년차 넷플은 공기와 같은 존재.. 그러나 문득 드는 생각이 있었다. ❓ 나는 넷플릭스 보는데 얼마나 시간을 쓰고있나? MBTI power J인 나는 이 것이 궁금해졌고, ❓ 나는 총 몇편의 시리즈를 봤을까? ❓ 2021년 가장 많은 시간을 할애한 넷플 콘텐츠는? ❓ 무슨 요일에 가장 많이 봤을까? ❓ 주로 보는 시간대는 언제인가? . . . 등등등 드는 궁금증을 해결해보고자 시작해본 나의 넷플릭스 데이터 분석 START! Step 1. 넷플릭스 데이터 다운로드 받기 대부분의 사람들이 아직 잘 모르고 있을 꿀정보. 넷플릭스는 구독자의 데이터를 아주 관대하게 제공해준다. 여기에 접속해서 넷플릭스 정보를 요청하면 수 일 내에 다운을 받을 수 있다는 사실. 빨간 버튼의 요청하기 클릭하면..

1. 문장 만들기 # 문장을 입력받아서 문법에 맞도록 결과를 출력하는 코드를 작성 # 마지막 문자는 . 이 있을수도 있고 없을수도 있습니다. # 논리적인 문제해결 순서 -> 코드로 변경 # str.upper(), str.lower(),, offset index [], str.__add__(문자열 덧셈) # python IS the best Language / python IS the best Language. # Python is the best language. #값을 입력받기 sentence = input("input: ") #2. 모두 소문자로 변경 result = sentence.lower() #3. 가장 앞글자 대문자로 변경 result = result[0].upper() + result[1:]..

*args, **kwargs 함수를 호출할때 아규먼트와 키워드 아규먼트의 갯수를 특정지을 수 없을때 사용 키워드가 없는 Argument def plus(*args, **kwargs): print(type(args), args) print(type(kwargs), kwargs) return sum(args) + sum(list(kwargs.values())) (1, 2, 3, 4, 5) {'num1': 6, 'num2': 7} 키워드가 있는 Argument : kwargs를 사용함 예시 : def func(num1, num2, num3): retrun num1 + num2 + num3 data = [1,2,3] func(*data) #func(1, 2, 3) 하나하나 인자 하나씩 순차적으로 함수를 호출하게..