JADE's Repository

Model Definition class VGG11(nn.Module): def __init__(self): super(VGG11, self).__init__() self.relu = nn.ReLU(inplace=True) # Convolution Feature Extraction Part self.conv1 = nn.Conv2d(3, 64, kernel_size=3, padding=1) self.bn1 = nn.BatchNorm2d(64) self.pool1 = nn.MaxPool2d(kernel_size=2, stride=2) self.conv2 = nn.Conv2d(64, 128, kernel_size=3, padding=1) self.bn2 = nn.BatchNorm2d(128) self.pool..

A Dual-Stage Attention-Based Recurrent Neural Network (DA-RNN) Instroduction encoder-decoder networks의 문제는 sequence의 길이가 길어질수록 성능이 낮아지는 것이다. 위 문제를 해결하기 위해 attention based encoder-decoder network를 사용 하지만 time series prediction task에는 맞지 않음 time series prediction task를 목적으로 하는 모델인 dual-stage attnetion-based recurrent neural network (DA-RNN)을 제안 1 stage: 모든 time steps에서 이전 encoder hidden state를 참고하..

RNN 기반 seq2seq 모델의 문제 하나의 고정된 크기의 벡터에 모든 정보를 압축하려고 하니까 정보 손실이 발생 기울기 소실(vanishig gradient) 문제가 존재 Attention Idea 디코더에서 출력 단어를 예측하는 매 time step마다 인코더에서의 전체 입력 문장을 다시 한 번 참고 전체 입력 문장을 전부 참고하는 것이 아닌해당 시점에서 예측해야할 단어와 연관이 있는 입력 단어 부분을 좀 더 attention Attention function 더보기 Q = Query : 모든 시점의 디코더 셀에서의 은닉 상태 K = Keys : 모든 시점의 인코더 셀의 은닉 상태들 V = Values : 모든 시점의 인코더 셀의 은닉 상태들 1. 쿼리(Query)에 대해서 모든 키(Key)와의 유..

Linux에서 timezone을 "Asia/Seoul" 로 변경하기 위해서 다음과 같은 명령어를 입력하면 된다. # 한국 timezone 확인 timedatectl list-timezones | grep Seoul # timezone 설정 sudo timedatectl set-timezone Asia/Seoul 현재 설정된 timezone을 확인하기 위해서는 다음과 같은 명령어를 입력하면 된다. # 현재 설정된 timezone 확인 timedatectl [reference] https://psychoria.tistory.com/750

Pet Peeves 대괄호, 중괄호, 소괄호 안의 공백 # Correct: spam(ham[1], {eggs: 2}) # Wrong: spam( ham[ 1 ], { eggs: 2 } ) 마지막 쉼표와 닫는 괄호 사이의 공백 # Correct: foo = (0,) # Wrong: bar = (0, ) 콤마, 세미클론, 콜론 앞의 공백 # Correct: if x == 4: print(x, y); x, y = y, x # Wrong: if x == 4 : print(x , y) ; x , y = y , x 슬라이스에서는 콜론의 양쪽 간격이 동일(단, 슬라이스의 parameter가 생략되면 공백도 생략) # Correct: ham[1:9], ham[1:9:3], ham[:9:3], ham[1::3], ham..

python에서 작은 따옴표 문자열과 큰 따옴표 문자열은 동일 문자열에 작은 따옴표 또는 큰 따옴표가 포함되는 경우 다른 하나를 사용하여 백슬래시 사용을 피해야한다. # https://www.kite.com/python/answers/how-to-put-quotes-in-a-string-in-python # -- 1 print('"abc"') # -- 2 print("'abc'") # -- 3 print("""a'b"c""") # -- backslash를 사용하는 경우 print("\"abc\"") print('\'abc\'') 삼중 따옴표로 묶인 문자열의 경우 항상 큰 따옴표를 사용 [reference] https://www.python.org/dev/peps/pep-0008/#string-quotes

Create ssh key path: ~/.ssh에 생성 # ↓ e-mail change ssh-keygen -r ed25519 -C "jk042386@gmail.com" Check ssh key cd ~/.ssh cat id_ed25519.pub cat으로 나오는 내용을 전부 복사 Register shh key https://github.com/settings/ssh/new Key 부분에 복사한 내용 붙여넣기 Add SSH key [reference] https://chinsun9.github.io/2021/08/19/git-clone-using-ssh/

들여쓰기 들여쓰기는 4개의 공백을 사용 # 올바른 예 # 괄호 기호에 맞춰 정렬 foo = long_function_name(var_one, var_two, var_three, var_four) # arguments를 구별하기 위해 들여쓰기를 추가 def long_function_name( var_one, var_two, var_three, var_four): print(var_one) # 다음과 같은 들여쓰기는 Hanging indent라고 부르며 level이 추가되어야 함 foo = long_function_name( var_one, var_two, var_three, var_four) # 잘못된 예 # vertical로 정렬이 안되어있으면 첫째 줄에 arguments를 작성하면 안됨 foo = lo..

Gym은 강화학습 알고리즘을 개발하고 비교하기위한 Toolkit입니다. 하지만 처음 강화학습을 접하는 저에게는 무슨 말인지 이해가 안갑니다. Installation 1. pip install python 3.5 이상이어야한다고 합니다. pip install gym ** Error ImportError: Cannot import pyglet. HINT: you can install pyglet directly via 'pip install pyglet'. But if you really just want to install all Gym dependencies and not have to think about it, 'pip install -e .[all]' or 'pip install gym[all]' ..

대게 해상도가 크거나 해당 이미지의 바이트 크기가 24를 넘어갈때 Resize를 시도할 경우 나타나는 에러이다. 이때 Pillow에서는 truncated image를 허용해주는 설정을 해줄 수 있다. 그 설정은 다음과 같다. from PIL import ImageFile ImageFile.LOAD_TRUNCATED_IMAGES = True [ref] https://stackoverflow.com/questions/12984426/pil-ioerror-image-file-truncated-with-big-images#