일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
Tags
- Windows
- Container
- judge
- pytorch
- Package
- Python
- CUDA
- git
- KAKAO
- Database
- GitLab
- AI
- DB
- Paper
- LLM
- file
- docker
- pandas
- format
- enV
- Mac
- Converting
- numpy
- Flask
- Laravel
- TORCH
- evaluation
- PostgreSQL
- Linux
- list
Archives
- Today
- Total
목록code (2)
Daily Develope
[AI] Hugginface, sklearn, torch 샘플 코드 및 설명
Huggingface Model/Tokenizer 설치 pip install transformers사용 예시 Tokenizer 선언 (불러오기) from transformers import AutoTokenizer model = "klue/bert-base" tokenizer = AutoTokenizer.from_pretrained(model_checkpoint)Encoding (Tokenize-토큰화) & Decoding (디코딩) ### [pre-condition] Tokenizer 선언 이후 ### Encoding my_data = "text of target data" tokenized_input = tokenizer(my_data, padding='max_length', trunc..
AI
2023. 10. 17. 13:42
[Web] curl & program code 변환 (관련링크)
참고사이트 CURL to CODE 변환사이트
Develope/Web
2023. 3. 27. 10:03