깃허브 트렌드
Apple Silicon용 LLM 추론 서버
Apple Silicon에서 LLM 추론을 수행하며 연속 배치 처리와 SSD 캐싱을 적용한다. macOS 메뉴 바에서 모델을 관리하고 컨텍스트 한도를 설정한다.
깃허브에서 보기 → · 오늘 판