Frequently Asked Questions

Als Premium Nutzer kannst du Dein Projekt jederzeit neu crawlen lassen. Zusätzlich kannst Du jedes Projekt automatisch crawlen lassen und eine Wartezeit in Stunden zwischen den Crawlings festlegen. Basis Nutzer müssen 3 Tage nach jedem Crawling warten, bis sie ein neues Crawling starten können. Ein automatisches Crawling steht außerdem nur Premium Nutzern zur Verfügung.

Durch die Projektverifizierung können wir sicher gehen, dass Du der Inhaber bzw. Verantwortliche für die jeweilige Website bist. Nach einer erfolgreichen Verifizierung kann unser Crawler mit mehr als einer Instanz auf die Domain zugreifen und so das Crawling viel schneller fertigstellen.

Der Seobility Crawler beachtet selbstverständlich die Angaben in Deiner robots.txt sowie Meta Angaben oder Link Attribute wie Nofollow und Noindex. Möchtest Du zusätzlich bestimmte Bereiche Deiner Website vom Crawling ausschließen, kannst Du dies über individuelle robots.txt Angaben in den Crawler Einstellungen für jedes Projekt angeben.

Nutzt Deine Website Content Negotiation, um unterschiedliche Inhalte je nach Client auszugeben, kannst Du in den Crawler Einstellungen festlegen, welche Sprache vom Crawler an den Server gesendet werden soll.

Du kannst in den Crawler Einstellungen festlegen, ob nur Deine Hauptdomain und die www. Subdomain oder alle gefundenen Subdomains gecrawlt werden sollen.

Ja, Du kannst in den Crawler Einstellungen für die HTTP Authentifizierung einen Username und ein Passwort hinterlegen. Diese Funktion ist nur für Premium Nutzer verfügbar.

Ein Crawling kann jederzeit beendet werden. Klicke dazu in der Projekt Übersicht auf "Crawling beenden". Bitte beachte, dass durch ein vorzeitig beendetes Crawling sowohl die Analysewerte als auch die historische Entwicklung der Analyseergebnisse beeinträchtigt werden können.

Theoretisch kann Seobility jede Website, egal welche Größe crawlen. Da unsere Analysen teilweise in Echtzeit berechnet werden und Du auch bei laufenden Crawling bereits Ergebnisse einsehen kannst, haben wir die maximale Anzahl an Unterseiten auf 100.000 beschränkt. Wieviele Unterseiten pro Projekt in Deinem Account abgerufen werden können, entnimmst Du bitte der Preisübersicht.

Bei der Analyse und Auswertung von Textinhalten werden folgende Schriftsysteme vollständig unterstützt:

• Lateinisch (Englisch, Spanisch, Französisch, Deutsch, etc.)
• Kyrilisch (Russisch)
• Arabisch
• Griechisch

Folgende Schriftsysteme werden nur teilweise unterstützt und können bei der Analyse von Keywords, Textlängen und anderen Textauswertungen möglicherweise Fehler aufweisen:

• Chinesisch
• Japanisch
• Koreanisch
• sowie weitere Schriftsysteme aus Südostasien (Thai, Bengalisch, etc.)

Nein, Du kannst bereits während des Crawlings die meisten Analysen aufrufen. Klicke dazu einfach in den jeweiligen Analysebereich (Technik, Struktur oder Inhalt), oder in der Projektübersicht auf "Zur Live Auswertung". Bitte beachte, dass Analysen, die aggregierte Daten der kompletten Website benötigen, erst nach Ende des Crawlings zur Verfügung stehen.

Die Dauer des Crawlings richtet sich nach der Anzahl an abzurufenden Unterseiten sowie nach der Antwortzeit Deiner Website. Ist die Antwortzeit Deiner Seiten gering und werden nicht allzu viele Unterseiten gefunden bzw. abgerufen, dauert ein Crawling nur wenige Minuten.

Die Anzahl an Crawlings ist nicht beschränkt. Nach jedem Crawling kann, wenn gewünscht, ein neues Crawling gestartet werden. Basis Nutzer müssen allerdings 3 Tage warten, bevor sie das Crawling neu starten können.

Dass ein Crawling nicht durchgeführt werden kann, hat meist folgende Ursachen:

• Die Domain ist nicht konnektiert (Tippfehler?)
• Die Domain leitet zu einer anderen Domain weiter
• Die Startseite konnte nicht abgerufen werden (404, Timeout etc.)
• Seobility ist in den robots.txt Angaben gesperrt (User-Agent: * oder Seobility)
• Der Server antwortet während des Crawlings nicht mehr (Timeout, Too many Requests etc.)

Wenn Du nicht weiter weißt und das Crawling für Deine Website nicht funktioniert, kontaktiere einfach unser Support-Team.

Den Seobility Bot erkennst Du an folgenden Angaben:

User Agent: Seobility

IP Adressen (IPv4):

116.202.182.111
167.235.151.116
167.235.158.133
159.69.46.182
49.12.205.98
162.55.217.135
128.140.14.171
116.203.123.238
157.90.233.32
162.55.58.96
94.130.111.123
116.203.44.205
168.119.172.39
188.245.214.127
188.245.212.102
188.245.208.7
91.107.228.242
94.130.182.75
5.75.172.119
188.245.213.57
188.245.210.17
188.245.212.7
5.75.171.241
142.132.167.189
116.203.143.57
116.203.60.150
157.90.30.158
78.47.249.97
78.47.109.158
128.140.64.48
88.99.171.96
116.203.195.17
128.140.38.248
188.245.149.2
188.245.147.156
188.245.151.253
5.75.183.162
188.245.214.95
188.245.47.30
188.245.212.32
188.245.211.238
116.203.51.72
188.245.212.107
94.130.105.241
159.69.85.189
5.75.139.32
167.235.132.206
116.203.125.116
188.245.77.46
128.140.45.196
167.235.23.143
78.47.227.224
5.75.179.74
78.46.133.250
159.69.147.205
128.140.44.234
188.245.211.49
94.130.168.253
188.245.107.236
49.13.198.95
5.75.151.175
159.69.28.204
188.245.176.6
49.12.204.240
128.140.73.183
188.245.64.84
128.140.105.243
157.90.173.91
94.130.98.118
46.224.192.231
128.140.104.203
188.245.214.157
116.203.185.58
116.203.176.85
49.13.164.191
46.224.124.102
157.90.167.94
46.224.126.210
46.224.117.142
116.203.152.117
94.130.186.94
157.90.124.89
46.224.121.221
46.224.117.167
167.235.141.22
46.224.117.166
188.245.38.54
128.140.78.247
188.245.72.232
46.224.118.207
168.119.171.113
78.46.135.69
91.107.235.117
167.235.132.228
46.224.120.21
46.224.117.162
46.224.120.177
46.224.117.145
91.99.224.2
46.224.212.202
46.224.210.184
46.224.217.49
46.224.210.168
46.224.212.244
46.224.212.80
46.224.211.146
46.224.218.132
46.224.211.53
159.69.86.158
46.224.210.220
188.245.176.122
46.224.212.79
46.224.212.247
46.224.211.110
46.224.212.25
46.224.222.35
46.224.210.88
46.224.212.208
46.224.212.255
46.224.211.109
91.98.231.93
46.224.214.132
46.224.213.1
46.224.222.32
46.224.219.53
46.224.214.127
46.224.83.115
46.224.213.0
46.224.212.73
46.224.219.16
91.98.71.210
46.224.215.73
46.224.212.201
46.224.216.139
91.98.21.79
46.224.212.81
49.12.193.42
46.224.212.242
46.224.212.215
46.224.212.78
46.224.215.226
159.69.6.57
46.224.212.236
46.224.213.17
46.224.213.153
46.224.212.77
46.224.212.27
46.224.58.1
46.224.212.243
46.224.221.145
188.245.33.136
46.224.217.215
46.224.222.33
46.224.212.30
46.224.212.246
46.224.211.123
46.224.213.9
46.224.222.34
46.224.212.253
46.224.212.245
46.224.211.4
46.224.210.215
46.224.212.76
46.224.211.5
46.224.213.6
46.224.211.122
46.224.213.3
46.224.213.4
46.224.221.140
91.99.161.82
46.224.221.139
46.224.211.147
46.224.212.28
46.224.208.163
178.156.219.176
5.161.211.219
5.161.52.46
178.156.218.160
5.161.213.7
5.161.236.87
178.156.202.99
5.161.86.229
5.161.97.73
178.156.200.243
178.156.203.127
178.156.216.32
5.161.126.63
5.161.184.233
178.156.198.104
5.161.65.225
178.156.164.170
178.156.221.57
5.161.115.9
178.156.146.210
5.223.62.247
5.223.54.133
5.223.48.5
5.223.79.100
5.223.52.173
5.223.75.235
5.223.74.28
5.223.62.119
5.223.61.158
5.223.58.111
159.69.9.7

IP Adressen (IPv6):

2a01:4f8:1c1c:184c::1
2a01:4f8:1c0c:5791::1
2a01:4f8:c0c:84a7::1
2a01:4f8:c2c:e2bc::1
2a01:4f8:c2c:d21::1
2a01:4f8:1c1e:6829::1
2a01:4f8:1c1b:4020::1
2a01:4f8:1c1c:8a00::1
2a01:4f8:1c0c:6779::1
2a01:4f8:c2c:30d2::1
2a01:4f8:1c1c:8f3b::1
2a01:4f8:c2c:9351::1
2a01:4f8:1c1e:93fd::1
2a01:4f8:1c0c:5b9f::1
2a01:4f8:1c1b:466a::1
2a01:4f8:c2c:dd84::1
2a01:4f8:c2c:9ff5::1
2a01:4f8:1c1e:b9a8::1
2a01:4f8:c0c:c3e4::1
2a01:4f8:1c1e:e646::1
2a01:4f8:1c1b:8a93::1
2a01:4f8:1c1c:6441::1
2a01:4f8:1c1b:d443::1
2a01:4f8:1c1c:1178::1
2a01:4f8:c0c:4e7e::1
2a01:4f8:1c1b:4a41::1
2a01:4f8:1c1b:9365::1
2a01:4f8:1c1b:b8bf::1
2a01:4f8:1c1e:494a::1
2a01:4f8:c0c:47c3::1
2a01:4f8:1c1b:4712::1
2a01:4f8:1c1e:d8e9::1
2a01:4f8:1c1e:4468::1
2a01:4f8:1c1b:6271::1
2a01:4f8:1c1b:d47c::1
2a01:4f8:c2c:b136::1
2a01:4f8:1c1c:7ee7::1
2a01:4f8:c0c:459e::1
2a01:4f8:c0c:ede3::1
2a01:4f8:c0c:5ff::1
2a01:4f8:1c1c:6918::1
2a01:4f8:1c1b:d9ac::1
2a01:4f8:1c1b:7bd2::1
2a01:4f8:1c1b:9c3f::1
2a01:4f8:1c1c:495f::1
2a01:4f8:c2c:fe8d::1
2a01:4f8:1c1e:6974::1
2a01:4f8:c0c:4193::1
2a01:4f8:1c1e:e5a5::1
2a01:4f8:1c1e:a4a3::1
2a01:4f8:1c0c:71d5::1
2a01:4f8:1c1b:d285::1
2a01:4f8:1c1e:7ed8::1
2a01:4f8:1c1c:e75d::1
2a01:4f8:c0c:80c1::1
2a01:4f8:c0c:62f4::1
2a01:4f8:1c1e:c0eb::1
2a01:4f8:1c1c:8ba3::1
2a01:4f8:1c0c:49d9::1
2a01:4f8:1c1c:98fb::1
2a01:4f8:1c0c:4018::1
2a01:4f8:1c1b:b553::1
2a01:4f8:c0c:9de3::1
2a01:4f8:1c1b:4569::1
2a01:4f8:c0c:f4c0::/64
2a01:4f8:c0c:5e22::/64
2a01:4f8:c0c:2e24::/64
2a01:4f8:1c1f:b2df::/64
2a01:4f8:c0c:4cb8::/64
2a01:4f8:c0c:1ead::/64
2a01:4f8:c0c:fd3a::/64
2a01:4f8:c0c:23b6::/64

Sofern Deine Website durch eine Firewall o.ä. geschützt wird, erstelle bitte eine Regel, damit der Zugriff für Seobility gestattet wird.