전체 기사
github llama.cpp · 13일 전

llama.cpp 릴리스 b9700: 새로운 바이너리 및 SYCL API 업데이트

llama.cpp 버전 b9700 은 이름이 변경된 API 플래그와 함께 업데이트된 SYCL 지원을 도입했습니다. GGML_SYCL_SUPPORT_LEVEL_ZERO 가 GGML_SYCL_SUPPORT_LEVEL_ZERO_API 로, GGML_SYCL_ENABLE_LEVEL_ZERO 가 GGML_SYCL_USE_LEVEL_ZERO_API 로 이름이 변경되었습니다. 이 릴리스에는 macOS, Linux, Android, Windows 및 openEuler 에 대한 바이너리가 포함되어 있으며 Vulkan, ROCm, OpenVINO 및 SYCL 을 포함한 여러 아키텍처와 하드웨어 가속 옵션을 지원합니다.

github llama.cpp · 14일 전

ggml-cpu: 컴파일러 지원에 따라 POWER11 백엔드 조건부 활성화

ggml-cpu 프로젝트는 이제 -mcpu=power11 에 대한 컴파일러 지원을 기반으로 ggml 에서 POWER11 백엔드를 조건부로 활성화합니다. 이는 현재 GCC/Clang 툴체인에서의 빌드 실패를 방지하면서 미래 호환성을 유지합니다. CMakeLists.txt 의 업데이트가 이 변경을 지원하며, P10 및 P11 아키텍처 모두에 -mcpu=power10 이 사용됩니다.

github llama.cpp · 14일 전

llama.cpp, rope_back 연산자와 크로스 플랫폼 바이너리가 포함된 b9690 출시

llama.cpp 버전 b9690은 기존 rope 커널을 재사용하고 함수 상수를 사용하여 전진/후진 회전을 전환하여 구현된 rope_back 연산자를 도입했습니다. 이번 릴리스에는 macOS, Linux, Android, Windows 및 openEuler 에 대한 사전 빌드된 바이너리가 포함되어 있으며, Vulkan, CUDA, ROCm, OpenVINO 및 SYCL 을 포함한 여러 아키텍처와 하드웨어 가속 옵션을 지원합니다.