자체 LLM 구축 솔루션 Ollama (윈도우도 가능)

https://ollama.com/

 

2039503729_1720674600.9761.png

 

위 사진에 설명된 것처럼 macOS, Linux, Windows에서 실행가능한 자체 LLM 구축 솔루션입니다.

 

저는 윈도우에서 실행해 봤는데, 되긴 한데 답변이 넘 느리네요 ㅠㅠ GPU가 딸려서 그런지...

|

댓글 3개

전시회때 본것처럼 최소 RTS40시리즈 한 4대 연결해놓고 돌려야하지않을까요 ? 저는 그래서 SLM으로 방향을 선회했습니다.

@techstar 오 SLM은 덕분에 처음 알게 되었습니다.

RTX40 4대... 어마어마한 자금이 필요하겠군요 ㅠㅠ

 

저만의 자비스를 만들어 보려고 하는데 SLM이 뭔지 한 번 공부해 봐야겠습니다.

 

감사합니다.

@부산곰돌이 SLM이나 SLLM을 검색해보시면 좀더 도움이 되실꺼 같습니다. ^^

댓글을 작성하시려면 로그인이 필요합니다.

인공지능

+
제목 글쓴이 날짜 조회
1년 전 조회 955
1년 전 조회 852
2년 전 조회 1,054
2년 전 조회 708
2년 전 조회 1,244
2년 전 조회 1,323
2년 전 조회 1,415
2년 전 조회 600
2년 전 조회 642
2년 전 조회 1,033
2년 전 조회 1,022
2년 전 조회 1,058
2년 전 조회 1,144
2년 전 조회 646
2년 전 조회 1,188
2년 전 조회 1,442
2년 전 조회 1,168
2년 전 조회 547
2년 전 조회 1,287
2년 전 조회 1,136
2년 전 조회 926
2년 전 조회 443
2년 전 조회 837
2년 전 조회 626
2년 전 조회 770
2년 전 조회 612
2년 전 조회 874
2년 전 조회 1,122