Формат файла модели

GGML Universal File (GGUF) — формат файла, в котором хранятся веса модели и сведения для их чтения.