This commit is contained in:
1 parent
23b1cb2966
commit
e9532e8878
30 files changed
+1835
-542
No files matched your search
@@ -1,13 +1,63 @@
|
||||
#!/usr/bin/env python3
|
||||
# -*- coding: utf-8 -*-
|
||||
"""
|
||||
FILE: scripts/parse_validate_notes.py
|
||||
VERSION: 2.1.0 (2025-12-15)
|
||||
STATUS: Active
|
||||
COMPATIBILITY: v2.9.1 (Post-WP14/WP-15b)
|
||||
|
||||
Zweck:
|
||||
-------
|
||||
Validiert alle Markdown-Dateien in einem Vault auf strukturelle Korrektheit.
|
||||
Prüft Frontmatter-Validität und Note-Payload-Erzeugung ohne Datenbank-Upsert.
|
||||
|
||||
Funktionsweise:
|
||||
---------------
|
||||
1. Scannt rekursiv alle .md-Dateien im angegebenen Vault-Verzeichnis
|
||||
2. Für jede Datei:
|
||||
- Liest und parst Markdown mit Frontmatter
|
||||
- Validiert erforderliche Frontmatter-Felder (id, title, type)
|
||||
- Erzeugt Note-Payload (validiert durch JSON-Serialisierung)
|
||||
3. Gibt Statistik aus: Anzahl valider vs. invalider Dateien
|
||||
|
||||
Ergebnis-Interpretation:
|
||||
------------------------
|
||||
- Exit-Code 0: Alle Dateien sind valide
|
||||
- Exit-Code 1: Mindestens eine Datei ist invalide
|
||||
- Ausgabe: "✅ Valid: X | ❌ Invalid: Y"
|
||||
- Fehlerdetails werden auf stderr ausgegeben
|
||||
|
||||
Häufige Fehler:
|
||||
--------------
|
||||
- Fehlende oder ungültige Frontmatter-Felder (id, title, type)
|
||||
- JSON-Serialisierungsfehler im Payload (z.B. ungültige Datentypen)
|
||||
- Encoding-Probleme beim Lesen der Datei
|
||||
|
||||
Aufruf:
|
||||
-------
|
||||
python3 -m scripts.parse_validate_notes --vault ./vault
|
||||
python3 -m scripts.parse_validate_notes --vault ./vault --include "**/*.md" --exclude /.obsidian/ /_imported/
|
||||
|
||||
Parameter:
|
||||
----------
|
||||
--vault PATH Pfad zum Vault-Verzeichnis (erforderlich)
|
||||
--include PATTERN Glob-Pattern für Dateien (Default: "**/*.md")
|
||||
--exclude PATH Pfade zum Ausschließen (Default: /.obsidian/, /_imported/)
|
||||
|
||||
Änderungen:
|
||||
-----------
|
||||
v2.1.0 (2025-12-15): Kompatibilität mit WP-14 Modularisierung
|
||||
- Entfernt: app.core.note_payload (ersetzt durch ingestion_note_payload)
|
||||
- Entfernt: app.core.validate_note (Validierung in make_note_payload integriert)
|
||||
- Entfernt: jsonschema.ValidationError (nicht mehr benötigt)
|
||||
v1.0.0: Erster Release
|
||||
"""
|
||||
from __future__ import annotations
|
||||
import argparse
|
||||
import os
|
||||
import sys
|
||||
import glob
|
||||
from jsonschema import ValidationError
|
||||
from app.core.parser import read_markdown, validate_required_frontmatter, normalize_frontmatter
|
||||
from app.core.note_payload import make_note_payload
|
||||
from app.core.validate_note import validate_note_payload
|
||||
from app.core.ingestion.ingestion_note_payload import make_note_payload
|
||||
|
||||
|
||||
@@ -39,11 +89,10 @@ def main():
|
||||
parsed = read_markdown(path)
|
||||
fm = normalize_frontmatter(parsed.frontmatter)
|
||||
validate_required_frontmatter(fm)
|
||||
# Note-Payload gemäß note.schema.json validieren
|
||||
payload = make_note_payload(parsed, vault_root=root)
|
||||
validate_note_payload(payload)
|
||||
# Note-Payload wird in make_note_payload bereits validiert (JSON-Serialisierung)
|
||||
payload = make_note_payload(parsed, vault_root=root, file_path=path)
|
||||
ok += 1
|
||||
except (ValidationError, ValueError) as e:
|
||||
except (ValueError, TypeError, KeyError, AttributeError) as e:
|
||||
failed += 1
|
||||
print(f"❌ {os.path.relpath(path, root)} :: {e}", file=sys.stderr)
|
||||
|
||||
|
||||
Reference in new issue
Block a user