llama.cppプロジェクトはビルドb9888をリリースしました。これには、flash attentionのためにK-typeの検証をV-typeに拡張するCUDAアップデートが含まれています。
- macOS Apple Siliconビルドが利用可能ですが、KleidiAIサポートは無効化されています。
- Linuxバイナリは、x64、arm64、s390xアーキテクチャ上のCPU、Vulkan、ROCm 7.2、OpenVINO、SYCLターゲットをカバーしています。
- Windowsリリースには、CPU、OpenCL Adreno、CUDA 12/13、Vulkan、OpenVINO、SYCL、HIPのバリアントが含まれます。
- Android arm64(CPU)およびiOS XCFrameworkビルドが提供されています。
- openEulerサポートはx86とaarch64アーキテクチャに対して部分的に無効化されています。
このリリースにより、複数のプラットフォームとハードウェアアクセラレータで更新されたバイナリが提供されます。