Safetensors

Safetensors to nowoczesny i bezpieczny format przechowywania wag modeli uczenia maszynowego, opracowany przez Hugging Face jako alternatywa dla ryzykownego formatu pickle. W przeciwieństwie do starszych rozwiązań, uniemożliwia on wykonywanie złośliwego kodu podczas ładowania danych, a dzięki technice zero-copy oraz wsparciu dla mapowania pamięci (mmap) zapewnia znacznie szybsze i bardziej wydajne przesyłanie tensorów między dyskiem a pamięcią RAM lub GPU.

Reklama

Powiązane posty

Zacznij wpisywać wyszukiwane hasło powyżej i naciśnij Enter, aby wyszukać. Naciśnij ESC, aby anulować.

Powrót do góry