Wie Sie den Domainbesitz in Scraping Camel per DNS verifizieren#

Beim Anlegen eines neuen Projekts (einer Website) in der Erweiterung Scraping Camel ist es notwendig, die Beziehung zur jeweiligen Domain nachzuweisen. Diese Maßnahme dient dazu, dass das Werkzeug nicht zum Scrapen fremder Websites oder von Wettbewerbern missbraucht wird. Eine der einfachsten Methoden, besonders für Marketingagenturen, ist die Verifizierung mittels DNS-TXT-Eintrag.

Ein DNS-TXT-Eintrag ist ein spezifischer Typ eines Dateneintrags im Domain Name System (DNS), der es ermöglicht, Ihrer Domain eine beliebige Textzeichenfolge zuzuordnen. Während andere Eintragstypen (z. B. A oder MX) die Domain auf eine konkrete IP-Adresse oder einen Mailserver leiten, dient der TXT-Eintrag primär der Übermittlung von Informationen an externe Dienste.

Im Kontext von Scraping Camel funktioniert er als „Textnotiz", mit der Sie den Domainbesitz nachweisen. Sie fügen in die Administration Ihres Hostings einen eindeutigen Verifizierungscode ein, den Ihnen die Erweiterung generiert, und Scraping Camel überprüft anschließend in den DNS-Einträgen, dass dieser Code tatsächlich dort steht. Damit erhält es die Gewissheit, dass Sie Zugriff auf die Einstellungen der jeweiligen Website haben.

Wie Sie die Verifizierung in Scraping Camel durchführen#

1. Ermittlung des Verifizierungscodes in Scraping Camel#

Der erste Schritt ist die Erstellung eines neuen Projekts in der Erweiterung.

Klicken Sie im Bereich Websites auf die Schaltfläche New website (Neue Website).
Geben Sie im Assistenten Name und URL Ihrer Website ein.
Wählen Sie im Schritt zur Domain-Verifizierung die Methode DNS-Eintrag.
Die Erweiterung generiert eine eindeutige Textzeichenfolge (Wert), die Sie kopieren.

2. Einstellung des DNS-Eintrags beim Domain-Verwalter#

Nun müssen Sie diesen Code in die Einstellungen Ihrer Domain einfügen. Dieser Schritt erfolgt in der Administration Ihres Webhostings oder Domain-Registrars.

Melden Sie sich in der Administration Ihres Hostings an. Die Administrationsoberfläche unterscheidet sich je nach Webhosting, suchen Sie jedoch nach einem Bereich mit einem Namen ähnlich wie Domainverwaltung oder DNS-Einstellungen.
Erstellen Sie einen neuen DNS-Eintrag mit folgenden Parametern:
- Eintragstyp: Wählen Sie TXT.
- Name: Geben Sie exakt die Subdomain ein, die Sie beim Anlegen des Projekts in Scraping Camel angegeben haben.
- Wert: In dieses Feld fügen Sie den eindeutigen Code ein, den Sie aus dem Assistenten der Erweiterung kopiert haben.

⚠️ Achtung: Der Name muss exakt dem entsprechen, wie Sie die Domain in der Erweiterung angegeben haben. Haben Sie im Assistenten www.ihredomain.de eingegeben, tragen Sie auch hier www ein. Haben Sie die Domain ohne www angegeben (also ihredomain.de), lassen Sie das entsprechende Feld leer oder tragen Sie @ ein — abhängig von der Oberfläche Ihres Hostings. Die Verwechslung dieser Varianten ist die häufigste Ursache für eine fehlgeschlagene Verifizierung.

3. Abschluss der Verifizierung#

Nach dem Speichern des neuen DNS-Eintrags muss dessen Verbreitung im Netzwerk abgewartet werden.

Änderungen im DNS wirken sich nicht sofort aus. Webhostings cachen diese Einträge in der Regel, sodass der Vorgang 15 bis 60 Minuten (aber durchaus auch länger) dauern kann.
Ob der Eintrag bereits aktiv ist, können Sie mittels Online-Tools überprüfen. Zum Beispiel Google Dig, wo Sie die Domain (inklusive eines eventuellen www am Anfang) eingeben und das Werkzeug die gefundenen DNS-Einträge zurückgibt. Linux-Nutzer können dies durch Eingabe des Befehls dig txt ihre-domain.de in die Kommandozeile überprüfen, das Terminal gibt dann die gefundenen TXT-Einträge aus.
Sobald der Eintrag sichtbar ist, kehren Sie zu Scraping Camel zurück und fahren Sie im Assistenten fort mit dem nächsten Schritt. Das System überprüft die Gültigkeit des Eintrags selbst.

FAQ#

Warum muss ich den Domainbesitz verifizieren?#

Scraping Camel ist ausschließlich für die Verarbeitung eigener Websites oder der Websites Ihrer Kunden bestimmt. Die Domainverifizierung verhindert den Missbrauch des Werkzeugs zum Scrapen fremder oder konkurrierender Websites und stellt sicher, dass stets eine berechtigte Person mit den Daten arbeitet.

Was ist ein DNS-TXT-Eintrag?#

Es handelt sich um einen speziellen Eintragstyp im Domain Name System, der es ermöglicht, einer Domain eine beliebige Textzeichenfolge zuzuordnen. Anders als andere Einträge (z. B. A oder MX) dient er nicht der Weiterleitung von Datenverkehr, sondern der Übermittlung von Informationen an externe Dienste — in diesem Fall als Nachweis des Domainbesitzes.

Warum gerade die Methode DNS-TXT-Eintrag wählen?#

Diese Methode ist dauerhaft und unabhängig von Änderungen am Website-Code. Sie eignet sich besonders dann, wenn Sie nicht in den Quellcode der Seiten eingreifen möchten oder wenn Sie die Domain direkt beim Registrar verwalten und Zugriff auf das DNS haben.

Wo stelle ich den DNS-Eintrag ein?#

In der Administration Ihres Webhostings oder Domain-Registrars. Der konkrete Ort unterscheidet sich je nach Anbieter, in der Regel suchen Sie einen Bereich namens Domainverwaltung oder DNS-Einstellungen.

Welche Parameter muss ich beim Erstellen des Eintrags ausfüllen?#

Stellen Sie den Eintragstyp auf TXT. Geben Sie im Feld Name exakt die Subdomain ein, die Sie beim Anlegen des Projekts in Scraping Camel angegeben haben. Fügen Sie im Feld Wert den von der Erweiterung generierten eindeutigen Code ein.

Wie fülle ich das Feld Name korrekt aus – mit www oder ohne?#

Das hängt davon ab, wie Sie die Domain im Assistenten von Scraping Camel angegeben haben. Haben Sie www.ihredomain.de angegeben, tragen Sie www ein. Haben Sie die Domain ohne www angegeben, lassen Sie das Feld leer oder tragen Sie @ ein — abhängig von der Oberfläche Ihres Hostings. Die Verwechslung dieser Varianten ist die häufigste Ursache für eine fehlgeschlagene Verifizierung.

Wie lange dauert es, bis sich der DNS-Eintrag im Netzwerk verbreitet?#

In der Regel 15 bis 60 Minuten, die Verbreitung kann jedoch abhängig von den Einstellungen Ihres Hostings auch länger dauern.

Wie erkenne ich, dass der DNS-Eintrag bereits aktiv ist?#

Das können Sie mit dem Online-Tool Google Dig überprüfen – Sie geben die Domain inklusive eines eventuellen www ein und das Werkzeug zeigt die gefundenen DNS-Einträge an.

Was soll ich tun, wenn die Verifizierung in Scraping Camel weiterhin nicht funktioniert?#

Überprüfen Sie, ob das Feld Name im DNS-Eintrag exakt der im Assistenten angegebenen Subdomain entspricht (www vs. ohne www). Ist der Eintrag in Google Dig sichtbar, findet Scraping Camel ihn aber weiterhin nicht, versuchen Sie, die Verifizierung erneut zu starten — die Verbreitung auf alle Server kann eine Weile dauern.