B300 도입 준비: 아키텍처부터 프로덕션 서빙까지
올해 팀에서 B300을 다수 도입할 예정이다. 학습도 하지만 주로 서빙 용도로, vLLM/SGLang/KServe 기반 Kubeflow 파이프라인 위에서 운용하게 된다.
올해 팀에서 B300을 다수 도입할 예정이다. 학습도 하지만 주로 서빙 용도로, vLLM/SGLang/KServe 기반 Kubeflow 파이프라인 위에서 운용하게 된다.
1월에 본 책과 영화 리뷰 정리 1월에는 히가시노 게이고를 많이 읽은 달이었다
안다는 것과 이해한다는 것은 다르다.