Welcome to

Beomi's Tech Blog

Posts
Categories

Nov 30, 2018
AWS Lambda Layers로 함수 공통용 Python 패키지 재사용하기

들어가며 올해 AWS Re:Invent에서 새로 발표된 기능 중 AWS Lambda에 새로운 전환점을 가져오는 기능이 발표되었습니다. 바로 Custom Runtime 지원과 Layers 지원이 추가된 것인데요, 이번 글에서는 두가지 기능 중 “Layers” 기능에...
Read More
Mar 18, 2018
GPU EC2 스팟 인스턴스에 Cuda/cuDNN와 Tensorflow/PyTorch/Jupyter Notebook 세팅하기

들어가며 Tensorflow나 PyTorch등을 사용하며 딥러닝 모델을 만들고 학습을 시킬 때 GPU를 사용하면 CPU만 사용하는 것에 비해 몇배~몇십배에 달하는 속도향상을 얻을 수 있다는 것은 누구나 알고 있습니다. 그래서 비싼 GPU를 사용하고...
Read More
Mar 9, 2018
Django: Truncated or oversized response headers received from daemon process 에러 해결법

문제 발생 환경 OS: Ubuntu 16.04 LTS Python 3.5.2 Django 2.0.2 Apache HTTPd 2.4 numpy / Pandas / pymssql 등 사용중 문제의 발생 장고 배포를 마친 뒤 배포 서버에 접속시...
Read More
Feb 26, 2018
PySpark: 손상된 parquet파일 무시하기

문제 PySpark를 이용해 파일을 읽어와 DataFrame 객체로 만드는 경우 읽어오는 파일이 parquet 파일이라면 이 파일이 어떤 형식으로 되어있는지(어떤 Column/Type으로 이루어져있는지)에 대한 정보를 필요로 합니다. 보통 parquet파일에 이 파일에 대한 스키마가...
Read More
Feb 19, 2018
DjangoORM에서 SQL Driver 지정해 Query & Pandas DataFrame 얻어내기

들어가며 장고의 매력적인 기능 중 하나는 ORM을 통해 SQL을 직접 작성하지 않아도 된다는 점입니다. 즉, 우리가 파이썬 코드를 작성하면 모델 매니저와 SQL Driver를 거쳐 실제로 SQL문으로 만들어주는 일을 장고가 대신해줍니다....
Read More

Previous Next

Beomi's Tech Blog

AWS Lambda Layers로 함수 공통용 Python 패키지 재사용하기

GPU EC2 스팟 인스턴스에 Cuda/cuDNN와 Tensorflow/PyTorch/Jupyter Notebook 세팅하기

Django: Truncated or oversized response headers received from daemon process 에러 해결법

PySpark: 손상된 parquet파일 무시하기

DjangoORM에서 SQL Driver 지정해 Query & Pandas DataFrame 얻어내기

Celery

DevEnv

Django

DjangoTDDStudy

Fabric

MacOS

Python

Tech

Translation

Ubuntu

Windows

analysis

aws

azure

blog

celery

celerydocs

comments

dataanalysis

django

es6

fabric

flask

github

githubpages

howtomakewebcrawler

javascript

ldap

life

machinelearning

macos

pandas

pyspark

python

react

seminar

socialdata

sqlalchemy

tensorflow

tips

translation

ubuntu

vlang

webpack