🦄

셀레니움을 사용하여 크롬 드라이버로 자동화하는데, 아무리 driver.get(url) 해도 invalidargument exception이 뜰 때. 1) url 이 string 값인지 확인한다. 2) https://를 앞에 붙여본다. 내 경우는 m.~~~~로 시작하는 주소였는데, 이 주소를 링크로 인식을 못해서 생기는 문제였다. suffix = "https://" driver.get( suffix + url ) 하니까 되었음

유튜브 api 가서 키값을 발급받은 후, 아래와 같이 설치해주고, pip install google-api-python-client import re import datetime from tqdm import tqdm tvNdrama 채널의 재생 리스트를 확인하고, 특정 재생리스트의 댓글을 모두 가져오고 싶을때 from googleapiclient.discovery import build from googleapiclient.errors import HttpError # from oauth2client.tools import argparser DEVELOPER_KEY = ' ' # 내 유튜브 API 키 YOUTUBE_API_SERVICE_NAME = 'youtube' YOUTUBE_API_VERSION ..

유튜브 영상을 검색하여, 나오는 영상들의 댓글을 모두 수집해야 했다. 여러 참고 자료를 활용하여 아래와 같은 코드를 완성시켰다. import pandas as pd from bs4 import BeautifulSoup from selenium import webdriver from webdriver_manager.chrome import ChromeDriverManager from tqdm import tqdm import time import re import requests import random import datetime #Queue의 기본적인 기능 구현 class Queue(): def __init__(self, maxsize): self.queue = [] self.maxsize = maxs..

Numpy소개 및 필요성 Numerocal Python의 약어 머신/딥, 데이터 전처리 필수 api 머신러닝의 주요 알고리즘은 선형대수와 통계 기반 선형대수 기반의 프로그램을 쉽게 만들 수 있도록 지원하는 대표적인 package 벡터 배열상에서 데이터 개조, 정제, 부분 집합, 필터링, 변형, 다른 종류 연산의 빠르 수행 if-elif-else를 표현하는 반복문 대신 사용할 수 있는 조건절을 표현할 수 있는 배열표현 기본 python에선 list로 표현하나, numpy에서는 ndarray로 표현 Numpy의 데이터 표현 단위 Numpy의 용어 axis: 값들의 나열 방향 rank : 데이터 집합에서의 축의 개수 shape : 형상 / 형태, 각 축 별 데이터 개수 size 벡터화 : 배열의 각 원소에 대..

데이터 시각화 목적 데이터 탐색을 할 때 가장 많이 사용하는 것이 시각화 데이터의 크기를 비교하는 것 수치값을 하나씩 보는 것보다 그림을 보면 데이터에 존재하는 패턴을 쉽게 알아볼 수 있음 데이터 분석 결과 뿐만 아니라 정확한 분석을 위해 데이터 탐색 방법으로 활용 분석시에 최적화된 데이터 구조로 분석을 요할 경우 금전적인 효과가 창출 기존 분석과의 차별점 대용량 데이터를 처리하기 위해 장비빨이 필요 데이터 시각화 프로세스 상황을 이해해야 함 누가 보는 것인지? 무엇을 보는 것인지? 어떻게 보는 것인지? 누구를 대상하는 것인지? 적합한 시각화 방법 선택 불필요한 요소 제거 (가장 중요) 원하는 곳에 집중하도록 유도 결과적으로 하나의 스토리가 만들어짐 결론 : 데이터로부터 숨은 이야기를 발견하는 것이 중요..

가상환경을 생성하고(python 3.6) 주피터 노트북을 실행했는데 kernel이 연결이 안되는 현상이 발생했다. 다음과 같은 에러 메시지가 터미널 창에 출력됨 AssertionError: Couldn't find Class NSProcessInfo Mac의 Big Sur OS 에서 발생하는 에러일 확률이 높다고 한다. - 맥에서 파이썬 주피터를 쓸 땐, 3.8 이상을 쓰도록 하자. Running a Jupyter Lab kernel under Python 3.6 (possibly also 3.7) throws: AssertionError: Couldn't find Class NSProcessInfo Running in Python 3.8 works fine. https://stackoverflow.co..

모듈(묶음)이란? 함수나 변수들을 모아 놓은 library들 의미 회사, 그룹, 모르는 누군가가 제공하는 외부 library들 사용하는 방법, 외부에 내 코드를 공유하는 방법 모듈 사용 방법 2-1. 모듈의 파일 확장자 : py 2-2. 모듈 사용 문법 a. import file명 b. from file명 import 함수명 c. import file명 as 별칭 %%writefile mymath.py #mymath.py를 파일로 저장 mypi = 3.14 def add(a,b): return a+b def area(r): return r*r*mypi mymath 모듈의 각 메소드 호출 및 출력 # from file명 import 함수명1 [, 함수명2] import mymath as m print(m...

💬 문제 설명 숫자 카드는 정수 하나가 적혀져 있는 카드이다. 상근이는 숫자 카드 N개를 가지고 있다. 정수 M개가 주어졌을 때, 이 수가 적혀있는 숫자 카드를 상근이가 몇 개 가지고 있는지 구하는 프로그램을 작성하시오. 📍 제한 사항 첫째 줄에 상근이가 가지고 있는 숫자 카드의 개수 N(1 ≤ N ≤ 500,000)이 주어진다. 둘째 줄에는 숫자 카드에 적혀있는 정수가 주어진다. 숫자 카드에 적혀있는 수는 -10,000,000보다 크거나 같고, 10,000,000보다 작거나 같다. 셋째 줄에는 M(1 ≤ M ≤ 500,000)이 주어진다. 넷째 줄에는 상근이가 몇 개 가지고 있는 숫자 카드인지 구해야 할 M개의 정수가 주어지며, 이 수는 공백으로 구분되어져 있다. 이 수도 -10,000,000보다 크거..

💬 문제 설명 한자리 숫자가 적힌 종이 조각이 흩어져있습니다. 흩어진 종이 조각을 붙여 소수를 몇 개 만들 수 있는지 알아내려 합니다. 각 종이 조각에 적힌 숫자가 적힌 문자열 numbers가 주어졌을 때, 종이 조각으로 만들 수 있는 소수가 몇 개인지 return 하도록 solution 함수를 완성해주세요. 📍 제한 사항 numbers는 길이 1 이상 7 이하인 문자열입니다. numbers는 0~9까지 숫자만으로 이루어져 있습니다. "013"은 0, 1, 3 숫자가 적힌 종이 조각이 흩어져있다는 의미입니다. 💡 나의 풀이 from itertools import permutations answer = [] def solution(numbers): nums = [n for n in numbers] # nu..

크롤링 후 데이터 저장시 인코딩을 utfmb4로 설정했는데도 'utf-8' codec can't encode characters in position 188-189: surrogates not allowed 오류가 뜨면 이모티콘 오류를 고려해보자. 이모지를 제거하는 함수 만들어서 사용해 해결! def rmEmoji(inputData): return inputData.encode('utf-8', 'ignore').decode('utf-8')