Empfehlung: Recherche-Tool bei großen PDF

Empfehlung: Recherche-Tool bei großen PDF

von Erik Laubenstein -
Anzahl Antworten: 3
Nutzerbild von Gruppenchat KITE Start: 04.07.25

Der Energieträger Erdgas besteht zu ca. 90% aus Methan. Zur Klimaverträglichkeit von Methan gibt es verschiedenste Betrachtungsweisen, welche sich alle in einem einig sind: Methan ist um ein vielfaches klimaschädlicher als Kohlendioxid.

Um diesem Schadpotential habhaft zu werden hat die Europäische Union mit der Methanemissionsschutzverordnung 2024/1787 über die Verringerung der Methanemissionen im Energiesektor eine verbindliche Regelung erlassen. Die Verordnung trat im Juni 2024 in Kraft und stellte für die Transport- und Verteilnetzbetreiber vor einen erheblichen technischen und organisatorischen Aufwand dar.

Auf die Netzleitstelle Gas kommt in diesem Kontext eine Reihe von Dokumentationspflichten zu und so waren wir Mitte 2024 gefordert uns mit der neuen Gesetzgebung auseinander zu setzen. Wir mussten einige Dokumenten durcharbeiten und uns relevante Passagen heraussuchen.

Derlei Recherchearbeiten kommen in regelmäßigen Abständen auf uns zu und so nutze ich dieses Beispiel exemplarisch für einen Test zur Empfehlung eines KI-Recherchetools. Ich nutze hierfür die Tools AskYourPDF und den MS Copilot.

Beiden Tools stelle ich 3 Dokumente als Recherchegrundlage zur Verfügung:

1.    VERORDNUNG (EU) 2024/1787 DES EUROPÄISCHEN PARLAMENTS UND DES RATES vom 13. Juni 2024 über die Verringerung der Methanemissionen im Energiesektor und zur Änderung der Verordnung (EU) 2019/942

2.    Technischer Hinweis – Merkblatt DVGW G 424 (M) – Leitfaden zur Verringerung der Methanemissionen durch den Gastransport- und Verteilnetzbetrieb in Anlehnung an die Verordnung (EU) 2024/1787

3.    DVGW-Rundschreiben G 04/24 – Hilfestellungen zur Umsetzung der EU-VO Methanemissionen im aktuellen Regelwerk des DVGW


Ich erteile beiden Tools die gleichen Rechercheaufgabe:

„Ich benötige eine sachliche tabellarische Zusammenstellung, welche Dokumentationspflichten beim Abfackeln von Erdgas bestehen“


Und vergleiche die Ergebnisse

AskYourPDF:

Dokumentationspflichten beim Abfackeln von Erdgas

Beim Abfackeln von Erdgas sind Betreiber verpflichtet, eine Reihe von Dokumentationspflichten zu erfüllen. Diese Pflichten sind in verschiedenen rechtlichen Rahmenbedingungen und Normen festgelegt. Im Folgenden finden Sie eine tabellarische Zusammenstellung der erforderlichen Dokumentationspflichten.

1. Allgemeine Dokumentationspflichten

Punkt

Beschreibung

1. Betreiber

Name und Anschrift des Betreibers

2. Standort

Lage, Bezeichnung und Art der Betriebseinheit

3. Ausrüstung

Eingesetzte Ausrüstung bei der Abfackelung

4. Datum und Uhrzeit

Datum und Uhrzeit (Beginn und Ende) des Abfackelvorgangs

5. Methanvolumen

Gemessenes oder berechnetes Methanvolumen der Freisetzung oder des Abfackelvorgangs

6. Fackelart

Art der Fackel und herstellergeführter Nachweis

7. Ursache

Ursache der Freisetzung oder des Abfackelvorgangs inkl. Nichteinsetzbarkeit einer Fackel

8. Maßnahmen

Unternommene Schritte zur Reduzierung der freigesetzten Menge

9. Korrekturmaßnahmen

Geplante Schritte zur Vermeidung zukünftiger Vorkommen

10. Sichtkontrolle

Ergebnisse der Sichtkontrolle vor dem Einsatz einer Fackel, die dokumentiert werden müssen [1][6][10].

 

Über diese Antwort hinaus bietet AskYouPDF noch weitere tabellarische Auflistungen zu spezifischen Meldepflichten und Berichtspflichten nach EU-Verordnung.

Diese Antworten sind in diesem Fragekontext wünschenswert und richtig, gehen aber über das geforderte Maß hinaus und werden in dem Vergleich nicht betrachtet.

Der Inhalt ist fachlich korrekt und übersichtlich, ich konnte im Vergleich zu unseren eigenen Ausarbeitungen keine Abweichungen feststellen.

Interessant: man kann AskYourPDF auf verschiedener LLM-Basis laufen lassen. Und das hat einen deutlichen Effekt auf das Ergebnis:

GPT-4o Mini:              Ergebnis inhaltlich richtig, keine Anwahl der [x] Quellnachweise möglich

Gemini 2.0 Flash:       Ergebnis an der Aufgabenstellung vorbei, keine Anwahl der [x] Quellnachweise möglich

Claude 4.0 Sonnet:    Ergebis sehr ausführlich, keine Tabelle, am Ende einer langen Ausführung kommt das korrekte Ergebnis, Anwahl der [x] Quellnachweise möglich

 

MS Copilot

Hier ist eine tabellarische Übersicht der Dokumentationspflichten beim Abfackeln von Erdgas, basierend auf der EU-Methanverordnung, dem DVGW-Merkblatt G 424 und dem DVGW-Rundschreiben G 04/24:


📋 Dokumentationspflichten beim Abfackeln von Erdgas

Pflicht

Inhalt / Umfang

Zeitpunkt / Frist

Quelle

Einzelvorgang dokumentieren

- Betreiber
- Standort, Anlagentyp
- Ausrüstung
- Datum & Uhrzeit
- Methanvolumen
- Art der Fackel & Nachweis
- Ursache & Begründung
- Maßnahmen zur Vermeidung

Laufend bei jedem Abfackelvorgang

DVGW G 424, Kap. 6.4

Meldung bei Notfall oder Störung

Abfackelvorgänge ≥ 8 Std. oder durch Störung/Notfall verursacht

Unverzüglich, spätestens 48 Std. nach Beginn

EU-VO Art. 16, DVGW G 424

Jährlicher Bericht

Zusammenfassung aller Abfackelvorgänge inkl. Nachweise zur Notwendigkeit

Jährlich, Bestandteil des Methanemissionsberichts

EU-VO Art. 16, DVGW RS G 04/24

Methanemissionsbericht

Quantifizierung aller Emissionen inkl. durch Abfackeln

Erstbericht: 05.08.2025
Folgeberichte: jährlich bis 31.05.

DVGW RS G 04/24, Anhang B

Prüfung installierter Fackeln

Sichtkontrolle, Nachweis Zerstörungs-/Abscheidegrad

Alle 15 Tage (stationär), vor jedem Einsatz (mobil)

DVGW G 424, Kap. 6.4

Durchführungszeitplan bei Fristüberschreitung

Zeitplan zur Umsetzung der Beschränkung von Abfackeln

Bei Fristüberschreitung: bis 05.02.2026

DVGW RS G 04/24, Anhang B

Nachweis wirtschaftlicher Unmöglichkeit

Begründung, warum keine alternative Nutzung möglich war

Bestandteil des Berichts

EU-VO Art. 16

Aufbewahrungspflicht

Alle Aufzeichnungen zu Abfackelvorgängen

Mindestens 10 Jahre

EU-VO Art. 14, DVGW G 424

 

Das Ergebnis ist inhaltlich richtig, geht aber wie bei AskYourPDF über das notwendige Maß hinaus. Fairer halber muss man hier zugestehen, dass mein Prompt recht lieblos gestaltet ist und es hier an Eindeutigkeit fehlt.

Im MS Copilot fehlen grundsätzlich die Quellnachweise, diese kann man sich Prompt einfordern.

 

Fazit:

Nachdem man sich einen kurzen Überblick verschafft hat, ist AskYourPDF das Profi-Tool für die übergreifenden Recherche in PDF-Dokumenten. Die Ergebnisse erfordern sowohl Geschick beim Prompting als auch Erfahrungswerte bei der Auswahl des passenden LLMs. Die Erarbeitung der Dokumente erfolgt sehr schnell.

Copilot vermag ähnliche Ergebnisse zu erzielen wie AskYourPDF. Je nach Anwendungshäufigkeit kann ich den Copiloten empfehlen, zumal er sich vermutlich mittlerweile innerhalb sehr vieler Büroumgebungen befindet.

Für eine sehr häufige Anwendung lohnt sich die Anschaffung von und eine intensive Auseinandersetzung mit AskYourPDF. Hier sind Folgekosten in Form eines Abonnements zu erwarten. 


868 Wörter

Als Antwort auf Erik Laubenstein

Re: Empfehlung: Recherche-Tool bei großen PDF

von Milena Droste -
Nutzerbild von Gruppenchat KITE Start: 04.07.25
Hallo Erik,

vielen Dank für deinen äußerst fundierten und praxisorientierten Beitrag zur Vertiefungsaufgabe. Du hast ein sehr aktuelles und relevantes Thema gewählt, das nicht nur für dein Berufsfeld, sondern auch gesellschaftlich eine hohe Bedeutung hat. Besonders hervorzuheben ist die Klarheit, mit der du die Herausforderung beschreibst und den konkreten Arbeitsanlass darstellst, nämlich die Umsetzung der neuen Methanemissionsschutzverordnung.

Deine Herangehensweise, gleich zwei KI Tools systematisch zu testen und miteinander zu vergleichen, ist methodisch hervorragend und zeigt ein tiefes Verständnis für den sinnvollen Einsatz von KI in der Recherchearbeit. Die Darstellung der Anforderungen, der gewählten Quellen und die Anwendung des gleichen Prompts auf beide Tools machen deine Analyse sehr nachvollziehbar. Besonders hilfreich ist deine strukturierte Ergebnisaufbereitung inklusive Stärken Schwächen Vergleich beider Tools.

Bemerkenswert ist auch deine technische Detailtiefe, etwa bei der Bewertung der unterschiedlichen Sprachmodelle innerhalb von AskYourPDF und der konkreten Funktionen im MS Copilot. Du zeigst damit auf, wie stark sich die Ergebnisse je nach gewähltem System unterscheiden können und wie wichtig es ist, sich nicht nur auf ein Tool zu verlassen, sondern auch die dahinterliegenden Modelle zu verstehen.

Deine kritische Reflexion der Ergebnisse, zum Beispiel im Hinblick auf das Maß der gelieferten Informationen und die Qualität der Prompts, ist sehr differenziert. Die abschließende Empfehlung ist praxisnah und hilfreich, vor allem für Teilnehmende, die in Zukunft selbst mit komplexen Regulierungs oder Gesetzestexten arbeiten müssen.

Einzig als kleine Anregung: Eine kurze Ergänzung zur tatsächlichen Zeitersparnis oder zur Integration der Ergebnisse in eure interne Dokumentation oder Prozesse würde das Bild noch abrunden.

Insgesamt ein exzellenter Beitrag, der sowohl inhaltlich als auch methodisch überzeugt. Vielen Dank für diese starke und hilfreiche Ausarbeitung.

Viele Grüße

270 Wörter

Als Antwort auf Milena Droste

Re: Empfehlung: Recherche-Tool bei großen PDF

von Erik Laubenstein -
Nutzerbild von Gruppenchat KITE Start: 04.07.25
Hallo Milena,

ich bedanke mich für dein Feedback und komme gern auf die angesprochenen Themen Zeitersparnis und Integration zurück:

Zeitersparnis: Ernorm
Die Vermeidung und Verringerung von Methaemissionen lässt sich in 3 Teilgebiet untergliedern
- Vermeidung durch Druckabsenkung
- Vermeidung durch Umpumpen
- Verringerung durch Abfackeln
Als letzte Option gilt die Freisetzung, ebenfalls in 3 Teilbereiche zu gliedern
- Ausblasen
- Absaugen/ Belüften
- Spülen
Jede der 6 Kategorien muss dokumentiert werden. Die notwenidgen Parameter erhält man nur bei Studium der 3 genannten Dokumente und die umfassen in Summe 99 Seiten - die alle durchgearbeitet werden müssten, um die relvanten Informationen zu ziehen.

Integration: Der Copilot ist in seiner Grundfunktion in Microsoft 365 integriert und steht mir zur Verfügung. Unter Beachtung datenschutzrechtlicher Aspekte kann ich diesen für die Verarbeitung von PDF-Dateien nutzen und tue dies bereits jetzt. Für meinen Bedarf ausreichend. Darüber hinaus wäre bei höheren Anforderungen eine Beschaffung eines Profitools wie AskYouPDF denkbar - für mich aber aktuell nicht erforderlich.

Viele GRüße,
Erik lächelnd

164 Wörter

Als Antwort auf Erik Laubenstein

Re: Empfehlung: Recherche-Tool bei großen PDF

von Matthias Enderle -
Nutzerbild von Gruppenchat KITE Start: 04.07.25
Hallo Erik,

das Thema, Normen und Vorschriften zu durchforsten ist in jedem
Bereich interessant. Insofern war auch der Vergleich der verschiedenen
LLM-Basen sehr erhellend. Die Ergebnisse waren bei Dir sehr unterschiedlich.
Was sind Deiner Einschätzung nach die Ursachen dafür? Art und Präzision der
Fragstellung? Das bearbeitete Gebiet an sich?

Mit bestem Gruß

Matthias

53 Wörter