Home
restato's memo
Cancel

[RaspberryPi] 애기 CCTV 만들기

준비 git clone https://github.com/EbenKouao/SmartCCTV-Camera.git python3 -m venv venv source venv/bin/activate pip install opencv-python # for cv3 pip install flask pip install face_recognition 카메...

[Python] Logging Handler

Multi Handler error.log, info.log에 따로 파일에 저장 StreamHandler와 RotatingFileHandler를 함께 사용해 화면, 파일에 함께 표시되도록 import logging from logging.handlers import RotatingFileHandler def setup_logger():...

Snippets in Visual Studio Code

_post에 글을 작성할때마다 매번 아래를 작성해주는게 번거로움 --- title: #title categories: # [] tags: # [] --- 글을 작성할때 에디터로 Visual Studio Code (이하: VSCode)를 사용하고 있는데, VSCode에서는 Snippets을 지원한다. 나만의 snippet 만들기 아래 경로로 ...

t-test 정리

한개의 집단을 대상으로 전/후를 비교할때 Paired T-Test 두개의 독립된 집단을 대상으로 비교할때 Unpaired T-Test Paired T-Test import numpy as np from scipy import status np.random.seed(1) # 항상 consistent 결과를 얻기 위해서 # before ...

Spark 테이블을 Hive 테이블로 생성

Spark 결과를 Hive 테이블로 생성 External 테이블로 생성 DROP TABLE <table_name>; CREATE EXTERNAL TABLE <db_name>.<table_name>( col1 STRING, col2 STRING ) STORED AS ORC LOCATION '<hdfs_...

[Shell] 값 입력하는 방법 (id/passwd)

echo "--- Github Login: ----" echo -n "Username:" && read GIT_USERNAME echo -n "Password:" && read -s GIT_PASSWORD PASSWORD와 같이 입력하는 값이 보이지 않기 위해서는 -s 옵션을 사용

[Python] LoggerAdapter

로거를 생성할때 추가할래 -> LoggerAdapter 로깅을 남길때 추가할래 -> CustomAdapter LoggerAdapter # encoding: utf8 import logging class LoggerAdapter(logging.LoggerAdapter): def __init__(self, logger, ...

[Pyspark] Data Quaility를 측정하는 방법과 코드

데이터 품질 측정 기준 데이터 품질을 측정하는데 사용되는 기준이 5개가 있다. Accuracy - 설명된 데이터가 무엇이든 정확해야 한다. Relevance - 데이터가 의도된 사용에 대한 요구사항을 충족해야 한다. Completeness - 데이터에 누락된 값이 있거나 누락된 데이터 레코드가 없어야 한다. Timeliness - ...

[Pyspark] 코드 정리

파티션 개수 확인 (=파일 개수) df = spark.sql("QUERY") df.rdd.getNumPartitions()

[Jekyll] Chirpy Theme Favicon, Avatar 세팅

Favicon 변경 Favicon-Generator에 접속 이미지 업로드 Generate your Favicons and HTML code 해서 다운로드 압축 해제 아래 파일 제거 browserconfig.xml site.webmanifest assets/img/favicons에 있...