İçeriğe geç

ProofFrame

Veri sözleşmeleri ve doğrulanabilir kalite kanıtları.

Veri setini sözleşmeye karşı tarar; ihlalleri, karar durumunu ve doğrulanabilir kanıt zarfını üretir.

Kimin için
Veri platformu ve analitik ekipleri
Motor
Rust · Python · WASM
Kaynak kodu
Açık · Apache-2.0
Sürüm
0.7.2
Satın alma
Yazılı, sabit bedelli pilot

ProofFrame nedir?

ProofFrame, Arrow tabanlı açık kaynak bir veri kalitesi aracıdır. Bir veri setini veri sözleşmesine karşı tarar ve üç değerli bir karar verir: accepted, rejected ya da unknown. Sonucu Ed25519 imzalı, veri olmadan çevrimdışı doğrulanabilen bir kanıt zarfına yazar. Rust ile yazılmıştır; Python paketi ve tarayıcıda çalışan bir linter'ı vardır.

Sözleşmeden imzalı kanıta, üç değerli bir kararla.

total ≥ subtotalorder_id benzersizsatır sayısı ≥ 1

Sözleşme şemaya karşı derlendi · ilk satır okunmadan

order_idsubtotaltotal
10112.5012.50
1028.007.50
10310.0010.00
10421.0023.10
1055.405.40

Görselleştirme. Satırlar README'deki örnekten; parmak izi burada gösterilen tablonun tarayıcıda hesaplanan SHA-256'sıdır, ProofFrame'in kendi parmak izi protokolü farklıdır.

Nasıl çalışır

Ürünün kendi belgelerinden. Rakamların yanında nerede ve hangi sürümle ölçüldükleri yazar.

  1. Sözleşme önce derlenir

    Kurallar ilk satır okunmadan şemaya karşı derlenir. Tipe uymayan kural taramadan önce reddedilir.

  2. Arrow üzerinde tarar

    Pandas, Polars, PyArrow, CSV, Parquet. Hücreler Python nesnesine çevrilmez, bellek ve disk sınırı baştan bellidir.

  3. Üç değerli karar verir

    accepted, rejected, unknown. Açılamayan dosya ya da tükenen limit asla sessizce 'accepted' olmaz.

  4. Kanıtı yanında taşır

    Evidence V2: veri parmak izi, şema, sözleşme ve plan. Ed25519 imzalı, veri olmadan çevrimdışı doğrulanır.

0.7.2
PyPI ve crates.io'da yayında. Airflow ve Dagster paketleri ayrı. Kaynak
3 durum
Çoğu doğrulayıcıda 'kontrol çalışmadı' diye bir sonuç yoktur. Burada var: unknown. Kaynak
Tarayıcıda
Motor WebAssembly'ye derli. CSV sekmede taranır, hiçbir şey yüklenmez. Kaynak
3 işletim sistemi
CI: Linux, macOS, Windows. Python 3.10–3.13, Rust 1.85. Kaynak

Teknoloji

  • Rust
  • Apache Arrow
  • Python (PyO3)
  • WebAssembly
  • Ed25519
  • Airflow
  • Dagster
  • GitHub Actions

Deneyin

pip install proofframe
proofframe suggest orders.csv > contract.json   # review, then set "active"
proofframe review orders.csv --contract contract.json --out review-run

Ne iddia etmiyor

Bir gözlemleme (observability) platformu değil. Arrow sınırında deterministik kontrol yapan bir kütüphane ve CLI. Kural kütüphanesi Great Expectations'tan bilerek daha dar.

Bugünkü sınır

Tarayıcı linter'ı yerel dosyayla çalışır. Kuruma özel entegrasyon ayrı pilot kapsamıdır.

Bir pilotta ne olur

Örnek başlangıç kapsamı. Nihai teslimler ve kabul ölçütleri yazılı teklifte sabitlenir.

Soru
Bu veri tesliminin kalitesi nasıl ispatlanır?
Gerekebilecek girdi
Örnek veri seti, şema ve kabul kuralları
Teslimler
  • Veri sözleşmesi taslağı
  • Kalite bulguları ve fark raporu
  • Doğrulanabilir teslim kanıtı
Problemi gönder
Yazı · 6 dkProofFrame, Great Expectations, Pandera ve Soda: hangi veri doğrulama aracı ne zaman?

Karardan önce

Bu ürün şu anda satın alınabilir mi?

Ücretli pilot ve kurulum teklifi hazırlanabilir. Kapsam, veri erişimi, teslimler, süre ve sabit bedel keşif görüşmesinden sonra yazılı olarak netleşir.

Fiyat neden yazmıyor?

Veri miktarı, entegrasyon ve başarı ölçütü her işte farklı. Görüşmeden sonra sabit bedelli yazılı teklif gelir; onayınız olmadan ücretli iş başlamaz.

Gerçek verimi bu siteye yüklemem gerekiyor mu?

Hayır. Bu sitede dosya yükleme ya da hesap yok. Veri erişimi, saklama ve yetki koşulları yalnızca pilot anlaşmasında belirlenir.

İlk adım nedir?

Formda ProofFrame ürününü seçip çözmek istediğiniz problemi yazın. Sonra veri ve pilot sınırları birlikte belirlenir.

  • CRM Cleaning API

    Dağınık müşteri adayı listelerini içe aktarıma hazırlar.

    Rust (Axum) · Python
  • Fuzzy Dedupe

    İsim ve kurum kayıtlarında yakın tekrar tespiti.

    Rust · Python
  • Scraping Pipeline

    Herkese açık web verisini doğrulanmış çıktıya taşır.

    Python · asyncio