Tech/LLM2025. 12. 20. 17:43[LLM] LLM의 구축 단계
LLM 구축LLM을 구축하기 전에 어떤 도구들을 사용하여 만들어지는지 알아보자. 대부분의 LLM은 PyTorch와 같은 라이브러리를 사용하여 만들어지며, 고수준의 도구의 경우에는 허깅페이스(Hugging Face)의 Transformers 패키지나 KerasNLP 등을 사용할 수도 있을 것이다. 또한, 우리가 흔히 오픈 소스(Open Source) 모델이라고 부르는 Llama, Phi 같은 모델들은 엄밀히 따지면 오픈 웨이트(Open Weight) 모델이라고 부르는 것이 정확하다. 오픈 웨이트(Open Weight) 모델이란?모델의 파라미터(weight)와 구조는 공개되어 있지만, 훈련되 사용된 데이터나 구체적인 훈련 방식은 공개되지 않은 경우가 많기 때문에 Open Weight Model이라고 부른다...