목록분류 전체보기 (137)

박주니 개발 정리

few shot learning 간단 구현 방법

1. 필요한 라이브러리 임포트 import torchimport torch.nn as nnimport torch.optim as optim- `torch`: PyTorch 기본 라이브러리, 텐서 조작 및 기본 연산에 사용. - `torch.nn`: 신경망을 구성하는 데 필요한 모듈과 클래스를 제공. - `torch.optim`: 최적화 알고리즘을 제공, 이 예제에서는 사용되지 않음. 2. 모델 클래스 정의 class TextPrototypicalNetwork(nn.Module): def __init__(self, vocab_size, embedding_dim): super(TextPrototypicalNetwork, self).__init__() self.embedding ..
AI 2024. 4. 30. 17:29
openai api 없이 gpt2 model 적용 방법

gpt2 model 적용 코드 설명 1. 필요한 라이브러리와 클래스의 임포트import torchfrom transformers import GPT2LMHeadModel, GPT2Tokenizer, Trainer, TrainingArgumentsfrom torch.utils.data import Datasetfrom torch.optim import AdamW- `torch`: PyTorch 라이브러리, 딥러닝 모델을 구현하고 훈련하는 데 필요.- `transformers`: Hugging Face의 transformers 라이브러리, 사전 훈련된 모델과 토크나이저를 제공.- `Dataset`: PyTorch의 데이터셋을 정의할 때 사용하는 클래스.- `AdamW`: 옵티마이저 중 하나로, 모델의 파라미..
AI 2024. 4. 30. 16:42
miniconda 설치 및 vscode 연결 방법

1. https://docs.anaconda.com/free/miniconda/miniconda-install/ 에서 환경에 맞게 설치합니다. 저는 window환경이여서 windows graphical installer에서 설치했습니다.  Installing Miniconda — Anaconda documentationDownload the installer. (Optional) Verify your installer’s SHA-256 checksum. This check proves that the installer you downloaded is the original one. Open PowerShell version 4.0 or later. For instructions for using Wind..
회고 2024. 4. 30. 14:49
langchain with pdf 적용 방법

https://www.youtube.com/watch?v=WYzFzZg4YZI 설명 전) 제가 이 영상을 참고로 만들었는데 지금 이렇게 따로 정리하게 된 이유는 영상에 나온대로 만들 때 변경된 부분도 있어서 공유하고자 올리게되었습니다. 현재 python으로 하고 있는 것이다보니 중간에 변경된 부분도 있을 수 있으니 참고 부탁드립니다. 수정할 부분) from langchain import FAISS ▶from langchain_community.vectorstores.faiss import FAISS python - Cannot import langchain.vectorstores.FAISS, only langchain_community.vectorstores.faiss - Stack Overflow Ca..
AI 2024. 3. 21. 15:00
이전 Prev 1 ··· 5 6 7 8 9 10 11 ··· 35 Next 다음