521 Commits

Author	SHA1	Message	Date
Lars	6aa6b32a6c	Update chunking system to version 3.9.9, synchronizing parameters with the orchestrator and enhancing edge detection. Implement robust parsing to prevent duplicate edges in section propagation. Adjust comments for clarity and consistency across the codebase.	2025-12-30 08:40:19 +01:00
Lars	33dff04d47	Fix v3.3.5: Prevent duplicate Wikilink targets in text by checking for existing references before injecting section edges. Update comments for clarity and maintain consistency in the code structure.	2025-12-30 08:22:17 +01:00
Lars	65d697b7be	Aktualisierung der atomaren Sektions-Chunking-Strategie auf Version 3.9.8 mit verbesserten Implementierungen des 'Pack-and-Carry-Over' Verfahrens. Einführung von Look-Ahead zur strikten Einhaltung von Sektionsgrenzen und Vermeidung redundanter Kanten-Injektionen. Anpassungen an der Chunk-Erstellung und Optimierung der Handhabung von leeren Überschriften.	2025-12-30 07:54:54 +01:00
Lars	06fc42ed37	Aktualisierung des Chunking-Parsers zur Einführung der Funktion parse_edges_robust zur Extraktion von Kanten-Kandidaten aus Wikilinks und Callouts. Verbesserung der Satzverarbeitung durch die Implementierung der Funktion split_sentences. Aktualisierung der Sektions-Chunking-Strategie auf Version 3.9.6 mit optimierter Handhabung von leeren Überschriften und Carry-Over Logik zur besseren Chunk-Erstellung.	2025-12-30 07:44:30 +01:00
Lars	3c5c567077	Aktualisierung der atomaren Sektions-Chunking-Strategie auf Version 3.9.5 mit Implementierung des 'Pack-and-Carry-Over' Verfahrens. Einführung neuer Konfigurationsoptionen für Smart-Edge und strikte Überschriftenteilung. Verbesserte Handhabung von leeren Überschriften und Anpassungen an der Warteschlangen-Verarbeitung zur Optimierung der Chunk-Erstellung.	2025-12-30 07:41:30 +01:00
Lars	8f65e550c8	Optimierung des Chunking-Parsers zur Unterstützung atomarer Blöcke und Verbesserung der Satzverarbeitung. Aktualisierung der Sektions-Chunking-Strategie auf Version 3.9.0 mit regelkonformer Implementierung und Anpassungen an der Warteschlangen-Verarbeitung für Carry-Over. Verbesserte Handhabung von Überschriften und Metadaten zur Gewährleistung der strukturellen Integrität.	2025-12-29 22:16:12 +01:00
Lars	6b83879741	Aktualisierung des Chunking-Parsers zur Verbesserung der Satzverarbeitung und Blocktrennung. Einführung des 'Pack-and-Carry-Over' Verfahrens in der Sektions-Chunking-Strategie zur Optimierung der Handhabung von großen Sektionen und Gewährleistung der Sektionsintegrität. Anpassungen an der Token-Schätzung und Verbesserung der Metadatenverarbeitung.	2025-12-29 22:04:23 +01:00
Lars	be265e9cc0	Verbesserung des Chunking-Parsers zur Unterstützung atomarer Blöcke und Gewährleistung der strukturellen Integrität von Callouts. Aktualisierung der Beschreibung und Optimierung der Satz- und Blockverarbeitung, einschließlich präziserer Handhabung von H1-Überschriften und Trennern.	2025-12-29 21:48:54 +01:00
Lars	680c36ab59	Aktualisierung des Chunking-Parsers zur Verbesserung der Blockverarbeitung und Beschreibung. Anpassungen an der atomaren Sektions-Chunking-Strategie mit optimierter Token-Schätzung und neuen Hilfsfunktionen zur besseren Handhabung von großen Sektionen. Einführung einer präziseren Schätzung für deutsche Texte und Anpassungen an der Logik zur Handhabung von Sektionen.	2025-12-29 21:45:14 +01:00
Lars	96b4f65cd1	Aktualisierung des Chunking-Parsers zur Verbesserung der Blockverarbeitung und Beschreibung. Anpassungen an der atomaren Sektions-Chunking-Strategie mit optimierter Token-Schätzung und neuen Hilfsfunktionen zur besseren Handhabung von großen Sektionen.	2025-12-29 21:37:11 +01:00
Lars	b1a897e51c	Verbesserung des Chunking-Parsers zur Unterstützung aller Überschriften (H1-H6) und Optimierung der Block-Trennung für atomares Sektions-Chunking. Aktualisierung der Sektions-Chunking-Strategie mit striktem Look-Ahead und präziserer Token-Schätzung für eine verbesserte Handhabung von großen Blöcken.	2025-12-29 21:26:05 +01:00
Lars	e5a34efee9	Verbesserung des Chunking-Parsers zur Gewährleistung der Integrität von Callouts und Listen sowie Anpassungen an der Blockverarbeitung. Aktualisierung der atomaren Sektions-Chunking-Strategie mit Block-Aware-Flushing und optimierter Token-Schätzung für eine präzisere Handhabung von großen Blöcken.	2025-12-29 21:15:03 +01:00
Lars	f9ac4e4dbf	Verbesserung der atomaren Sektions-Chunking-Strategie durch Einführung strikter Look-Ahead-Logik und präventiven Flush zur Gewährleistung von Sektionsgrenzen. Anpassungen an der Token-Schätzung und Umbenennung von Funktionen zur besseren Lesbarkeit.	2025-12-29 21:05:42 +01:00
Lars	1b40e29f40	Optimierung des Chunking-Parsers zur Unterstützung atomares Chunking und verbesserte Block-Trennung. Anpassungen an der Sektions-Chunking-Strategie zur Wahrung von Sektionsgrenzen und Vermeidung von Überhängen.	2025-12-29 20:57:07 +01:00
Lars	7eba1fb487	Aktualisierung des Chunking-Parsers zur Unterstützung aller Überschriften im Stream und Verbesserung der Metadatenverarbeitung. Anpassungen an der atomaren Sektions-Chunking-Strategie zur besseren Handhabung von Blockinhalten und Token-Schätzungen.	2025-12-29 20:45:04 +01:00
Lars	838083b909	Verbesserung des Chunking-Parsers zur Unterstützung von H1-Überschriften und Anpassung der Metadatenlogik. Implementierung einer atomaren Sektions-Chunking-Strategie, die Überschriften und deren Inhalte zusammenhält.	2025-12-29 20:33:43 +01:00
Lars	8f5eb36b5f	neuer Chunking parser, der Headings mitführt und nicht mitten im Abschnitt schneidet	2025-12-29 20:16:23 +01:00
Lars	b7d1bcce3d	Rücksprung zur Vorwersion, in der 2 Kantentypen angelegt wurden	2025-12-29 18:04:14 +01:00
Lars	03d3173ca6	neu deduplizierung für callout-edges	2025-12-29 12:42:26 +01:00
Lars	38a61d7b50	Fix: Semantische Deduplizierung in graph_derive_edges.py	2025-12-29 12:21:57 +01:00
Lars	0a429e1f7b	anpassungen Kantenvergeleich	2025-12-29 11:45:25 +01:00
Lars	857ba953e3	bug fix	2025-12-29 11:00:00 +01:00
Lars	e180018c99	Anpassung gui	2025-12-29 10:31:51 +01:00
Lars	ac9956bf00	Index und Anlage neues Feld in qdrant	2025-12-29 10:16:51 +01:00
Lars	62b5a8bf65	Anpassung payload für neues Feld in edges	2025-12-29 08:40:05 +01:00
Lars	303efefcb7	bug fix	2025-12-29 08:19:40 +01:00
Lars	feeb7c2d92	Initial WP4d	2025-12-29 07:58:20 +01:00
Lars	ea9a54421a	ui_fraph.old Version	2025-12-29 07:51:07 +01:00
Lars	fdf99b2bb0	bug fix	2025-12-28 18:53:11 +01:00
Lars	c7cd641f89	bug fix	2025-12-28 18:51:44 +01:00
Lars	18b90c8df3	bug fix	2025-12-28 18:16:29 +01:00
Lars	8d3bc1c2e2	next try	2025-12-28 12:00:31 +01:00
Lars	079d988034	bug fix	2025-12-28 11:57:49 +01:00
Lars	aa9d388337	ui_update	2025-12-28 11:54:44 +01:00
Lars	92bd3d9a47	bug fix	2025-12-28 11:52:49 +01:00
Lars	53058d1504	bug fix	2025-12-28 11:49:41 +01:00
Lars	3fe8463a03	bug fix	2025-12-28 11:44:04 +01:00
Lars	5c4ce5d727	neuer test	2025-12-28 11:41:47 +01:00
Lars	459193e7b1	test ui	2025-12-28 11:38:51 +01:00
Lars	98f21323fb	bug fix	2025-12-28 11:35:18 +01:00
Lars	515248d438	kanten mit #Abschnitt finden	2025-12-28 11:30:22 +01:00
Lars	b0c69ad3e0	UI test	2025-12-28 11:23:46 +01:00
Lars	c5f29ab4ae	Erweiterung der Kanten um Abschnittsinformationen	2025-12-28 11:20:30 +01:00
Lars	876ee898d8	Ui_Update_cytos	2025-12-28 11:15:11 +01:00
Lars	e93bab6ea7	Fassadenauflösung unter app/core	2025-12-28 11:04:40 +01:00
Lars	7fa9ce81bd	letzte anpassungen	2025-12-27 20:30:24 +01:00
Lars	8490911958	modularisierung	2025-12-27 20:26:00 +01:00
Lars	19d899b277	Große Modularisierung WP19b	2025-12-27 19:47:23 +01:00
Lars	37ec8b614e	bug fix	2025-12-27 19:12:14 +01:00
Lars	e045371969	Anpassung der Textausgabe zur Filterung der Steuerzeichen	2025-12-27 18:59:38 +01:00
Lars	cd5383432e	Parametrisierung der wesentliche Einstellwerte in der types.yaml	2025-12-27 18:45:15 +01:00
Lars	8b8baa27b3	W19b flexible Level Überschriften	2025-12-27 18:31:00 +01:00
Lars	386fa3ef0c	WP15b vollständieg chunking strategien	2025-12-27 18:17:13 +01:00
Lars	19c96fd00f	graph refacturiert	2025-12-27 14:44:44 +01:00
Lars	ecb35fb869	parser refactured WP15b	2025-12-27 14:31:12 +01:00
Lars	21cda0072a	refacturing parser	2025-12-27 14:26:42 +01:00
Lars	e3858e8bc3	aufräumen und löschen von Alt-Scripten WP19b	2025-12-27 14:15:22 +01:00
Lars	f08a331bc6	herstellung vollständiger Kompaitibilität	2025-12-27 13:20:37 +01:00
Lars	cfcaa926cd	WP19a Refacturierung - Edgedefaults	2025-12-27 13:14:10 +01:00
Lars	8ade34af0a	WP19b- chunk_payload an neue Struktur	2025-12-27 10:50:15 +01:00
Lars	a6d37c92d2	Integration von payload modulen in die neue Struktur	2025-12-27 10:40:44 +01:00
Lars	1b7b8091a3	bug Fix	2025-12-27 10:30:09 +01:00
Lars	94e5ebf577	WP13b Refactoring ingestion und Chunker	2025-12-27 10:25:35 +01:00
Lars	82c7752266	richtige Filename für den pool Lookup	2025-12-27 06:31:57 +01:00
Lars	c676c8263f	Import Script und Logging für WP15b	2025-12-26 22:07:25 +01:00
Lars	f6b2375d65	WP15b - Initial	2025-12-26 21:52:08 +01:00
Lars	f686ecf947	anpassung an variable Kontextgrenzen für Ollama	2025-12-26 11:15:13 +01:00
Lars	6ac1f318d0	max retries eingeführt	2025-12-26 10:33:40 +01:00
Lars	cbaf664123	Die Context-Drossel (10.000 Zeichen), die Deaktivierung der Retry-Kaskaden (max_retries=0) für den Echtzeit-Chat und eine robustere Fehlerbehandlung für die LLM-Aufrufe.	2025-12-26 07:19:51 +01:00
Lars	43d3d8f7f3	debug für chat	2025-12-26 05:21:15 +01:00
Lars	83c0c9944d	angepasst an die neue LLM Logik	2025-12-26 05:11:48 +01:00
Lars	b0d73cb053	app/core/ingestion.py aktualisiert	2025-12-25 21:46:40 +01:00
Lars	5213d262a2	app/core/ingestion.py aktualisiert	2025-12-25 21:28:54 +01:00
Lars	16e128668c	Mistral sichere Parser implemntierung	2025-12-25 17:17:55 +01:00
Lars	ecfdc67485	neue Version mit Wartezeit bei externen LLM Fehler	2025-12-25 13:03:42 +01:00
Lars	c9cf1b7e4c	WP20 - Chat Interface auf neue Struktur der decision.yaml	2025-12-25 11:50:08 +01:00
Lars	fa6eb0795a	Config Anpassungen WP20	2025-12-25 09:58:25 +01:00
Lars	b4a07a05af	Nachzügler für Config mit abgleich auf die neue .env	2025-12-25 08:41:33 +01:00
Lars	5c55229376	bereinigung Code Basis, wegfall von Platzhaltern und Annahmen. Volle Kofigurierbarkeit	2025-12-25 08:38:08 +01:00
Lars	079cf174d4	überarbeitet mit Gemini	2025-12-24 08:07:48 +01:00
Lars	4ab44e36a2	Mit ChatGBT Überarbeitetes Modell WP20	2025-12-24 07:47:45 +01:00
Lars	5278c75ac1	bug fix	2025-12-23 22:02:32 +01:00
Lars	a908853c30	weitere Anpassungen WP20	2025-12-23 21:57:50 +01:00
Lars	867a7a8b44	bug fix Wp20	2025-12-23 21:44:49 +01:00
Lars	2c073c7d3c	bug Fix	2025-12-23 19:05:43 +01:00
Lars	0157faab89	komplett neues WP20 deployment	2025-12-23 18:51:12 +01:00
Lars	f1bfa40b5b	semantic semantic_analyzer angepasst	2025-12-23 18:17:34 +01:00
Lars	dcc3083455	pfad Anpassung	2025-12-23 18:11:05 +01:00
Lars	a5b4dfb31f	edge_registry	2025-12-23 18:07:24 +01:00
Lars	a733212c0f	neue Wp20	2025-12-23 17:56:44 +01:00
Lars	49b454d2ec	edge_registry hergestellt	2025-12-23 16:05:40 +01:00
Lars	36fb27edf0	komplette openrouter integration	2025-12-23 15:55:06 +01:00
Lars	c60aba63a4	WP20 openrouter	2025-12-23 15:20:14 +01:00
Lars	2a98c37ca1	integration openrouter	2025-12-23 15:09:47 +01:00
Lars	0ac8a14ea7	WP20 - parser	2025-12-23 14:38:27 +01:00
Lars	234949800b	WP20 initial	2025-12-23 14:33:51 +01:00
Lars	2d43e0596c	Test der neuen mehrzeiligen Edge-Parser	2025-12-22 06:08:48 +01:00
Lars	2cd3605017	doku	2025-12-19 09:02:49 +01:00
Lars	0d71f41a13	dictionary parsen	2025-12-18 18:53:01 +01:00
Lars	f5bfb0cfb4	edge regsitry debug	2025-12-18 18:50:45 +01:00