Geri dön: Katalog

Zarr

Zarr, sıkıştırılmış ve parçalara ayrılmış N-boyutlu diziler için geliştirilmiş bir Python kütüphanesidir. Verilerin bellek, disk veya bulut depolama birimleri üzerinde hiyerarşik gruplar halinde saklanmasına ve paralel olarak işlenmesine olanak tanır. NumPy uyumlu veri tiplerini destekleyen bu yapı, çoklu iş parçacığı veya süreçler üzerinden eş zamanlı okuma ve yazma işlemlerini destekler.

ZA

Zarr

70

zarr-developers · Bilimsel Araştırma & Hesaplama

YILDIZ2.1K
ÇATAL477
COMMIT—
KATKICI—
SÜRÜMzarr_metadata-v0.4.0
GÜNCELLEMEbugün
n-dimensional-arrayscloud-storagescientific-computingpythonMIT
Ne yapar?
  • NumPy uyumlu veri tipleriyle N-boyutlu diziler oluşturup bunları farklı depolama ortamlarında saklarsın.
  • Büyük veri kümelerini parçalara ayırarak farklı boyutlar üzerinden optimize edersin.
  • Çoklu iş parçacığı veya süreçler kullanarak verileri eş zamanlı okur ve yazarsın.
Kullanıcı yorumları
  • ↓ OlumsuzHacker News

    NumPy dizileri diskten yükleniyor: mmap() vs. Zarr/HDF5

    “Zarr, HDF5 ve TileDB'deki tartışma göz önüne alındığında, umarım sahip olduğum bir sorundan geri bildirim alabilirim. Yaptığım bir formattan (bu formatta tanımlanan "FPB" formatı) 250 milyondan fazla girişe ölçeklenen bir formata geçmek istiyorum. (Sistemdeki son yayınıma bakın, ki...”

  • ↓ OlumsuzHacker News

    NumPy dizileri diskten yükleniyor: mmap() vs. Zarr/HDF5

    “Aksi takdirde, HDF5, Zarray'ın sahip olduğu ve çok daha olgun, istikrarlı, daha iyi belgelenmiş ve daha iyi desteğe sahip olduğu her avantajı sunar. Kesinlikle hayır. HDF5, korkunç uygulamalara sahip korkunç bir formattır. Örneğin, birden fazla konu içeren bir python programı yazmayı deneyin...”

Web Sitesi GitHub

Notum

Aynı kategoride: Bilimsel Araştırma & Hesaplama