박주니 개발 정리

1. 필요한 라이브러리 임포트 import torchimport torch.nn as nnimport torch.optim as optim- `torch`: PyTorch 기본 라이브러리, 텐서 조작 및 기본 연산에 사용. - `torch.nn`: 신경망을 구성하는 데 필요한 모듈과 클래스를 제공. - `torch.optim`: 최적화 알고리즘을 제공, 이 예제에서는 사용되지 않음. 2. 모델 클래스 정의 class TextPrototypicalNetwork(nn.Module): def __init__(self, vocab_size, embedding_dim): super(TextPrototypicalNetwork, self).__init__() self.embedding ..

gpt2 model 적용 코드 설명 1. 필요한 라이브러리와 클래스의 임포트import torchfrom transformers import GPT2LMHeadModel, GPT2Tokenizer, Trainer, TrainingArgumentsfrom torch.utils.data import Datasetfrom torch.optim import AdamW- `torch`: PyTorch 라이브러리, 딥러닝 모델을 구현하고 훈련하는 데 필요.- `transformers`: Hugging Face의 transformers 라이브러리, 사전 훈련된 모델과 토크나이저를 제공.- `Dataset`: PyTorch의 데이터셋을 정의할 때 사용하는 클래스.- `AdamW`: 옵티마이저 중 하나로, 모델의 파라미..

1. https://docs.anaconda.com/free/miniconda/miniconda-install/ 에서 환경에 맞게 설치합니다. 저는 window환경이여서 windows graphical installer에서 설치했습니다.  Installing Miniconda — Anaconda documentationDownload the installer. (Optional) Verify your installer’s SHA-256 checksum. This check proves that the installer you downloaded is the original one. Open PowerShell version 4.0 or later. For instructions for using Wind..