Firecrawl startet kostenlosen Index mit 30 Millionen US-Behördenseiten für KI-Agenten

Was der Index abdeckt

Der Index umfasst Quellen von Bund, Bundesstaaten, Countys und Städten. Firecrawl nennt mehrere Gruppen von Inhalten:

• Bund und Bundesstaaten: Gesetze, Verordnungen, Gerichtsentscheidungen, Schriftsätze und Behördenleitfäden.
• County und Stadt: Gemeindesatzungen, Bebauungsvorschriften, Genehmigungsanforderungen und Gebührenordnungen.
• Weitere öffentliche Quellen: Steuerformulare, Ausschreibungen und Behördenpublikationen.

Der Index beschränkt sich vorerst auf die USA. Firecrawl erklärt außerdem, Seiten würden mit den Gesetzen und Fällen verknüpft, die sie zitieren. Agenten sollen so verwandtes Material finden, statt jede Seite als isoliertes Ergebnis zu behandeln.

Das Unternehmen beschreibt das Problem als eines der Auffindbarkeit, nicht der Verfügbarkeit. Die meisten dieser Informationen seien bereits öffentlich, verteilten sich aber auf Tausende Behörden-Websites, jede mit eigener Struktur, eigenen Suchfunktionen und eigener Sammlung von PDFs.

Warum Firecrawl den Index gebaut hat

Firecrawl zufolge beginnt ein KI-Agent bei einer juristischen oder regulatorischen Frage oft mit einer Websuche. Die Treffer seien dann etwa die Zusammenfassung einer Kanzlei, ein Forenbeitrag oder eine Behördenseite, die auf eine weitere Behördenseite verweist. Zusammenfassungen könnten veraltet sein oder sich auf eine andere Rechtsordnung beziehen, so das Unternehmen. Der Zugriff auf die Originalquelle sei daher wichtig, wenn es auf die Antwort ankommt.

Teams, die Tools für Steuern, Compliance, Genehmigungen und Rechtsrecherche entwickeln, hätten immer wieder nach einer Möglichkeit gefragt, ihre Agenten direkt in offiziellen Behördeninformationen suchen zu lassen, heißt es.

Als Beispiel beschreibt Firecrawl jemanden, der in Austin, Texas, Tacos aus einem Verkaufsfenster verkaufen möchte. Eine solche Person braucht womöglich die staatlichen Lizenzanforderungen, Angaben zur Brandschutzprüfung und Regeln zur Abwasserentsorgung. Laut dem Beitrag findet ein Agent den Leitfaden des texanischen Gesundheitsministeriums für mobile Lebensmittelhändler, die Prüfungsinformationen der Feuerwehr von Austin und die Abwasserregeln von Austin Water, jeweils auf der Website der zuständigen Behörde. Für einen Standort außerhalb der Stadtgrenzen kann er zusätzlich die Checkliste des Travis County Fire Marshal und die einschlägige County-Verordnung auffinden. Jedes Ergebnis verlinkt auf seine Quelle.

Firecrawl benennt die Grenzen offen: Der Index „ersetzt weder einen Anwalt noch die Person am Genehmigungsschalter“.

So funktioniert der Zugang

Nutzer können den Index in ChatGPT und Claude über das Firecrawl-Plugin durchsuchen. Firecrawl schlägt Fragen vor wie: Welche Genehmigungen sind nötig, um in einer bestimmten Stadt ein Geschäft zu eröffnen? Welche Vorschriften gelten für ein Grundstück? Welche Gerichtsentscheidungen legen ein Gesetz aus? Gibt es lokale Regierungsaufträge, auf die sich ein Gebot lohnt?

Entwickler haben drei Wege: den API-Endpunkt /search/gov, das Tool firecrawl_gov_search im gehosteten MCP-Server von Firecrawl und den CLI-Befehl firecrawl gov. Suchanfragen sind kostenlos und verbrauchen keine Firecrawl-Credits. Zum Start ist kein API-Schlüssel nötig, mit einem Schlüssel steigen die Ratenlimits. Wer ein Ergebnis scrapt, um den vollständigen Text abzurufen, zahlt dafür die üblichen Scrape-Credits.

Firecrawl rät, in Suchanfragen die jeweilige Rechtsordnung anzugeben. Mit der Nennung einer Behörde, eines Zitats oder eines Jahres lassen sich die Ergebnisse weiter eingrenzen.

Was das für Nutzer bedeutet

Der Index reiht sich neben den Developer Index und den Research Index in Alexandria ein, Firecrawls Sammlung durchsuchbarer Quellen für KI-Agenten. Wer Recherche-, Steuer-, Compliance- oder Genehmigungstools entwickelt, erhält damit einen kostenlosen Weg, Agenten auf staatliche Primärquellen statt auf Sekundärzusammenfassungen zu lenken.

Firecrawl weist darauf hin, dass die Ergebnisse wie bei jedem Suchwerkzeug nicht garantieren, dass eine Regel aktuell ist oder auf einen konkreten Fall zutrifft. Nutzer sollten Quelle, Rechtsordnung und Datum des Inkrafttretens prüfen, bevor sie sich auf eine Antwort verlassen.