EN Google found this page, but it has yet not managed to crawl it. This situation usually happens because when GoogleBot tried to crawl the page, the site was overloaded. The crawl has been scheduled for another time.
EN Google found this page, but it has yet not managed to crawl it. This situation usually happens because when GoogleBot tried to crawl the page, the site was overloaded. The crawl has been scheduled for another time.
NL Google heeft deze pagina gevonden, maar het is nog niet gelukt om hem te kruipen. Deze situatie gebeurt meestal omdat wanneer GoogleBot de pagina probeerde te crawlen, de site overbelast was. De crawl is een andere keer ingepland.
Anglų | Olandų |
---|---|
found | gevonden |
crawl | kruipen |
situation | situatie |
usually | meestal |
googlebot | googlebot |
page | pagina |
the | de |
to | om |
site | site |
another | een andere |
happens | gebeurt |
because | omdat |
this | deze |
yet | een |
it | hem |
but |
EN Google found this page, but it has yet not managed to crawl it. This situation usually happens because when GoogleBot tried to crawl the page, the site was overloaded. The crawl has been scheduled for another time.
NL Google heeft deze pagina gevonden, maar het is nog niet gelukt om hem te kruipen. Deze situatie gebeurt meestal omdat wanneer GoogleBot de pagina probeerde te crawlen, de site overbelast was. De crawl is een andere keer ingepland.
Anglų | Olandų |
---|---|
found | gevonden |
crawl | kruipen |
situation | situatie |
usually | meestal |
googlebot | googlebot |
page | pagina |
the | de |
to | om |
site | site |
another | een andere |
happens | gebeurt |
because | omdat |
this | deze |
yet | een |
it | hem |
but |
EN Yes, you get 5,000 crawl credits per project per month. These credits are only used up when you crawl an HTML page with status code 200, so other URLs like broken URLs, redirects or any non-HTML resources aren't counted.
NL Ja, je krijgt 5.000 crawlcredits per project per maand. Deze credits worden alleen gebruikt wanneer je een HTML-pagina met statuscode 200 crawlt, dus andere URL’s zoals gebroken URL’s, redirects of wat voor non-HTML-bronnen tellen niet mee.
Anglų | Olandų |
---|---|
project | project |
html | html |
page | pagina |
broken | gebroken |
redirects | redirects |
credits | credits |
or | of |
resources | bronnen |
month | maand |
only | alleen |
used | gebruikt |
other | andere |
yes | ja |
so | dus |
per | per |
when | wanneer |
are | worden |
like | zoals |
you | je |
these | deze |
EN Control all your sites You can crawl all your domains and subdomains as the L plan lets you crawl up to 1.800.000 pages along 10 different projects
NL Controleer al uw sites U kunt al uw domeinen en subdomeinen kruipen, want met het L-plan kunt u tot 1.800.000 pagina's langs 10 verschillende projecten kruipen
Anglų | Olandų |
---|---|
crawl | kruipen |
subdomains | subdomeinen |
control | controleer |
sites | sites |
domains | domeinen |
plan | plan |
projects | projecten |
and | en |
different | verschillende |
you can | kunt |
you | u |
EN Crawl any website that you want to analyze and contrast it with the crawl results of your site
NL Crawl elke website die u wilt analyseren en contrasteren met de crawlresultaten van uw site
Anglų | Olandų |
---|---|
the | de |
website | website |
site | site |
analyze | analyseren |
want | wilt |
with | met |
you | u |
and | en |
of | van |
EN Monitoring your SEO metrics regularly and run a competitive analysis between your last crawl and your current crawl. Use FandangoSEO to track more than 250 metrics and receive periodical reports when a change is detected.
NL Bewaak uw SEO-metriek regelmatig en voer een concurrentieanalyse uit tussen uw laatste crawl en uw huidige crawl. Gebruik FandangoSEO om meer dan 250 statistieken bij te houden en ontvang periodieke rapporten wanneer een verandering wordt gedetecteerd.
Anglų | Olandų |
---|---|
seo | seo |
regularly | regelmatig |
fandangoseo | fandangoseo |
change | verandering |
detected | gedetecteerd |
use | gebruik |
reports | rapporten |
metrics | statistieken |
last | laatste |
current | huidige |
to | om |
and | en |
between | tussen |
more | meer |
receive | ontvang |
when | wanneer |
than | dan |
is | wordt |
a | een |
EN See how search engines visit your site in real-time. Detect crawl errors and make the most out of your crawl budget.
NL Zie hoe zoekmachines uw site in real-time bezoeken. Detecteer crawlfouten en haal het maximale uit uw crawlbudget.
Anglų | Olandų |
---|---|
site | site |
visit | bezoeken |
in | in |
and | en |
out | haal |
see | zie |
most | maximale |
search engines | zoekmachines |
EN See precisely how the bots access the pages of a website and spend the crawl budget. You?ll immediately find opportunities to improve the crawl efficiency.
NL Bekijk precies hoe de bots de pagina's van een website bezoeken en het crawlbudget besteden. U zult onmiddellijk mogelijkheden vinden om de crawl-efficiëntie te verbeteren.
Anglų | Olandų |
---|---|
precisely | precies |
bots | bots |
spend | besteden |
opportunities | mogelijkheden |
efficiency | efficiëntie |
website | website |
the | de |
to | om |
improve | verbeteren |
how | hoe |
see | bekijk |
pages | van |
you | zult |
immediately | onmiddellijk |
a | een |
find | en |
EN . Make your site easy to crawl for bots and optimize your crawl budget.
NL . Maak uw site gemakkelijk te crawlen voor bots en optimaliseer uw crawlbudget.
Anglų | Olandų |
---|---|
easy | gemakkelijk |
bots | bots |
site | site |
and | en |
to | maak |
for | voor |
EN Save Riviera Bar Crawl Paris : Pub Crawl Paris Latin Quarter to your collection.
NL Sla Riviera Bar Crawl Paris : Pub Crawl Paris Latin Quarter op in je collectie.
Anglų | Olandų |
---|---|
riviera | riviera |
bar | bar |
your | je |
collection | collectie |
paris | paris |
EN Crawl any website that you want to analyze and contrast it with the crawl results of your site
NL Crawl elke website die u wilt analyseren en contrasteren met de crawlresultaten van uw site
Anglų | Olandų |
---|---|
the | de |
website | website |
site | site |
analyze | analyseren |
want | wilt |
with | met |
you | u |
and | en |
of | van |
EN Monitoring your SEO metrics regularly and run a competitive analysis between your last crawl and your current crawl. Use FandangoSEO to track more than 250 metrics and receive periodical reports when a change is detected.
NL Bewaak uw SEO-metriek regelmatig en voer een concurrentieanalyse uit tussen uw laatste crawl en uw huidige crawl. Gebruik FandangoSEO om meer dan 250 statistieken bij te houden en ontvang periodieke rapporten wanneer een verandering wordt gedetecteerd.
Anglų | Olandų |
---|---|
seo | seo |
regularly | regelmatig |
fandangoseo | fandangoseo |
change | verandering |
detected | gedetecteerd |
use | gebruik |
reports | rapporten |
metrics | statistieken |
last | laatste |
current | huidige |
to | om |
and | en |
between | tussen |
more | meer |
receive | ontvang |
when | wanneer |
than | dan |
is | wordt |
a | een |
EN A crawl error is an issue that occurs when a search engine attempts to crawl a website but fails
NL Een crawlfout is een probleem dat optreedt wanneer een zoekmachine een website probeert te crawlen, maar daar niet in slaagt
Anglų | Olandų |
---|---|
website | website |
is | is |
search engine | zoekmachine |
but | |
when | wanneer |
EN Only 0.1% of the responses had a 304 Not Modified status in our crawl, though this is not unexpected as our crawl is using an empty cache and 304 responses are mostly useful for subsequent visits that our Methodology does not test for
NL Slechts 0,1% van de reacties had de status 304 Not Modified tijdens onze crawl, hoewel dit niet onverwacht is aangezien onze crawl een lege cache gebruikt en 304 reacties vooral nuttig zijn voor volgende bezoeken die onze Methodologie niet voor test
Anglų | Olandų |
---|---|
unexpected | onverwacht |
cache | cache |
useful | nuttig |
visits | bezoeken |
methodology | methodologie |
is | is |
using | gebruikt |
the | de |
status | status |
test | test |
our | onze |
this | dit |
and | en |
as | aangezien |
for | voor |
in | tijdens |
though | hoewel |
of | van |
responses | reacties |
that | die |
are | zijn |
EN Quality data is what we're known for. We’ve built advanced tech to crawl the web 24/7 to fill our multi-petabyte, multi-region database of keywords, backlinks and pages.
NL We staan bekend om kwaliteitsdata. We hebben geavanceerde technologie gebouwd om het web 24/7 te crawlen om onze multi-petabyte, multiregionale databases met zoektermen, backlinks en pagina’s te vullen.
Anglų | Olandų |
---|---|
known | bekend |
built | gebouwd |
advanced | geavanceerde |
tech | technologie |
backlinks | backlinks |
to | om |
web | web |
fill | vullen |
our | onze |
and | en |
EN Crawl it fast by verifying your domain and tuning the speed settings
NL Crawl ’m snel door je domein te verifiëren en de snelheidsinstellingen aan te passen
Anglų | Olandų |
---|---|
verifying | verifiëren |
your | je |
domain | domein |
the | de |
fast | snel |
by | door |
and | en |
EN Watch the crawl of your website in real time.
NL Bekijk het crawlen van je website in realtime.
Anglų | Olandų |
---|---|
watch | bekijk |
website | website |
real time | realtime |
your | je |
in | in |
EN Schedule daily, weekly or monthly crawls for your projects – Site Audit will run these automatically and save each crawl.
NL Plan dagelijkse, wekelijkse of maandelijkse crawls in voor jouw projecten – Site Audit draait deze automatisch en bewaart elke crawl.
EN In Site Audit, you can choose to crawl the mobile version of your website by selecting from one of our pre-configured mobile user agents.
NL In Site Audit kun je kiezen om de mobiele versie van jouw website te crawlen door een van onze voorgeconfigureerde mobile user agents te selecteren.
Anglų | Olandų |
---|---|
audit | audit |
user | user |
agents | agents |
choose | kiezen |
your | je |
selecting | selecteren |
the | de |
in | in |
site | site |
to | om |
mobile | mobiele |
website | website |
you can | kun |
version | versie |
by | door |
of | van |
EN Is there a limit on how many pages I can crawl?
NL Is er een limiet op het aantal pagina’s dat ik kan crawlen?
Anglų | Olandų |
---|---|
limit | limiet |
i | ik |
is | is |
on | op |
can | kan |
there | er |
a | een |
EN For verified websites, you'll get an additional 5,000 crawl credits per month in Site Audit, and some limitations lifted in Site Explorer
NL Je krijgt 5.000 extra crawlcredits per maand in Site Audit voor geverifieerde websites en verhoging van enkele limieten in Site Explorer
Anglų | Olandų |
---|---|
get | krijgt |
audit | audit |
explorer | explorer |
in | in |
site | site |
month | maand |
per | per |
and | en |
additional | extra |
for | voor |
websites | websites |
EN Each time we crawl your website, we look for:
NL Elke keer dat we je website crawlen, zoeken we naar:
Anglų | Olandų |
---|---|
website | website |
your | je |
we | we |
each | elke |
for | keer |
look for | zoeken |
EN Crawl your website for SEO issues that can hurt your rankings, including:
NL Crawl je website op SEO-issues die je rankings kunnen schaden, waaronder:
Anglų | Olandų |
---|---|
website | website |
seo | seo |
rankings | rankings |
your | je |
including | waaronder |
can | kunnen |
issues | issues |
EN Browse any website's internal links without having to crawl it
NL Bekijk de interne links van elke website zonder deze te hoeven crawlen
Anglų | Olandų |
---|---|
links | links |
websites | van |
internal | interne |
without | zonder |
any | de |
EN And if you crawl your website in Site Audit, the “Link Opportunities” report automatically generates internal link ideas for you.
NL En als je jouw website in Site Audit crawlt genereert de "Linkkansen"-rapportage automatisch ideeën voor interne links voor jou.
Anglų | Olandų |
---|---|
audit | audit |
generates | genereert |
automatically | automatisch |
ideas | ideeën |
and | en |
the | de |
in | in |
you | je |
website | website |
site | site |
internal | interne |
if | als |
for | voor |
link | links |
your | jouw |
EN Historic Index - over five years of crawl data
NL Historische Index - meer dan vijf jaar aan crawl-data
Anglų | Olandų |
---|---|
historic | historische |
index | index |
data | data |
years | jaar |
five | vijf |
of | aan |
EN I’ve asked you not to crawl my site but my site is still in your index!
NL Ik heb jullie gevraagd mijn website niet te crawlen, maar hij staat nog steeds in jullie index!
Anglų | Olandų |
---|---|
asked | gevraagd |
site | website |
in | in |
index | index |
is | staat |
my | mijn |
you | jullie |
but | |
to | maar |
EN Our Fresh Index and Historic Index are populated by crawl data produced by our web crawlers.
NL Onze Fresh Index en Historische Index bevatten crawl-data die door onze webcrawlers zijn geproduceerd.
Anglų | Olandų |
---|---|
index | index |
historic | historische |
data | data |
by | door |
produced | geproduceerd |
our | onze |
are | zijn |
and | en |
EN You don?t want to put the files on your website host because that can easily make your site come to a crawl, and can cause problems when people try to listen.
NL U wilt niet dat de bestanden op uw website host, want dat kan gemakkelijk uw site te komen tot een crawl, en kan problemen veroorzaken wanneer mensen proberen te luisteren.
Anglų | Olandų |
---|---|
files | bestanden |
host | host |
easily | gemakkelijk |
try | proberen |
problems | problemen |
people | mensen |
the | de |
want | wilt |
on | op |
website | website |
site | site |
can | kan |
cause | veroorzaken |
a | een |
you | u |
when | wanneer |
EN You can also create a site map to provide information about how your site content is organised, which helps Google and other search engines to more intelligently crawl your site.
NL Je kunt ook een sitemap maken om informatie te geven over hoe de content op je site is georganiseerd, zodat Google en andere zoekmachines je site slimmer kunnen crawlen.
Anglų | Olandų |
---|---|
organised | georganiseerd |
intelligently | slimmer |
site | site |
information | informatie |
your | je |
content | content |
is | is |
to | zodat |
other | andere |
how | hoe |
a | een |
you can | kunt |
search engines | zoekmachines |
and | en |
more | de |
EN How Does Ahrefs Crawl and Index the Web
NL Hoe Ahrefs het web crawlt en indexeert
Anglų | Olandų |
---|---|
ahrefs | ahrefs |
and | en |
web | web |
EN Understand the site architecture Visualize the distribution of your website pages to see how you can improve their authority and reduce the crawl depth.
NL De architectuur van de site begrijpen Visualiseer de distributie van uw website pagina's om te zien hoe u hun autoriteit kunt verbeteren en de kruipdiepte kunt verminderen.
Anglų | Olandų |
---|---|
architecture | architectuur |
visualize | visualiseer |
distribution | distributie |
improve | verbeteren |
reduce | verminderen |
authority | autoriteit |
the | de |
site | site |
website | website |
to | om |
see | zien |
how | hoe |
pages | van |
you can | kunt |
understand | begrijpen |
their | hun |
and | en |
you | u |
EN Internal links Analyze, adjust the interlinking of your website to make the most of your crawl budget and make sure your anchor texts are relevant to search engines
NL Interne koppelingen Analyseer, pas de koppeling van uw website aan om het maximale uit uw crawlbudget te halen en zorg ervoor dat uw ankerteksten relevant zijn voor zoekmachines
Anglų | Olandų |
---|---|
links | koppelingen |
analyze | analyseer |
website | website |
the | de |
to | om |
internal | interne |
relevant | relevant |
and | en |
sure | dat |
search engines | zoekmachines |
of | van |
are | zijn |
EN Monitor Search Engine crawls Find out how search engines crawl your website with our Log Analyzer.
NL Monitor Zoekmachine kruipt Ontdek hoe zoekmachines uw website kruipen met onze Log Analyzer.
Anglų | Olandų |
---|---|
monitor | monitor |
crawl | kruipen |
website | website |
log | log |
analyzer | analyzer |
our | onze |
how | hoe |
with | met |
your | uw |
find out | ontdek |
search engine | zoekmachine |
search engines | zoekmachines |
EN Optimize the Crawl budget Reduce your website?s navigation depth and create search engine friendly paths to save time in crawling and getting the maximum pages indexed.
NL Optimaliseer het kruipbudget Verminder de navigatiediepte van uw website en maak zoekmachinevriendelijke paden om tijd te besparen bij het kruipen en het maximaal geïndexeerd krijgen van de pagina's.
Anglų | Olandų |
---|---|
reduce | verminder |
time | tijd |
maximum | maximaal |
indexed | geïndexeerd |
website | website |
in | bij |
the | de |
paths | paden |
to | om |
pages | van |
and | en |
EN It allows you to perform in-depth SEO analysis, fix crawl errors, check the architecture of websites with millions of pages, and much more!
NL Het stelt u in staat om diepgaande SEO-analyses uit te voeren, crawlfouten te herstellen, de architectuur van websites met miljoenen pagina's te controleren en nog veel meer!
Anglų | Olandų |
---|---|
seo | seo |
analysis | analyses |
fix | herstellen |
check | controleren |
architecture | architectuur |
perform | voeren |
the | de |
in | in |
to | om |
much | te |
with | met |
websites | websites |
pages | van |
you | u |
and | en |
more | meer |
EN Fix crawl errors Spot all the errors of your blog, such as broken links, wrong redirects or 404 and fix them following the recommendations of the technical SEO audit
NL Kruipfouten verhelpen Zoek alle fouten van uw blog, zoals gebroken links, verkeerde redirects of 404 en repareer ze volgens de aanbevelingen van de technische SEO-audit
Anglų | Olandų |
---|---|
fix | verhelpen |
spot | zoek |
blog | blog |
broken | gebroken |
links | links |
redirects | redirects |
recommendations | aanbevelingen |
technical | technische |
seo | seo |
audit | audit |
errors | fouten |
or | of |
the | de |
wrong | verkeerde |
as | zoals |
and | en |
of | volgens |
following | van de |
EN Find the best balance within your top -and less- strategic pages to optimize the crawl budget and make any small business successful.
NL Vind de beste balans binnen uw top- en minder strategische pagina's om het crawlbudget te optimaliseren en elk klein bedrijf succesvol te maken.
Anglų | Olandų |
---|---|
balance | balans |
strategic | strategische |
business | bedrijf |
successful | succesvol |
optimize | optimaliseren |
small | klein |
the | de |
less | minder |
to | om |
best | beste |
EN But how sure are you that search engines see the same data you want them to find? Run our Log Analyzer and discover how they truly see you and how the use the crawl budget.
NL Maar hoe zeker weet u dat zoekmachines dezelfde gegevens zien die u wilt dat ze vinden? Draai onze Log Analyzer en ontdek hoe ze u echt zien en hoe ze het crawlbudget gebruiken.
Anglų | Olandų |
---|---|
analyzer | analyzer |
log | log |
discover | ontdek |
truly | echt |
use | gebruiken |
but | |
data | gegevens |
our | onze |
search engines | zoekmachines |
want | wilt |
sure | dat |
you | u |
find | en |
they | ze |
the | dezelfde |
EN Crawl security protocols HTTPS This is a must on eCommerce SEO. If you?re running a small business, you?ll need to count on the HTTPS protocol. We will help you set it up and make the most of its function.
NL Crawl beveiligingsprotocollen HTTPS Dit is een must op eCommerce SEO. Als u een klein bedrijf runt, moet u rekenen op het HTTPS-protocol. Wij zullen u helpen het op te zetten en het beste uit zijn functie te halen.
Anglų | Olandų |
---|---|
https | https |
ecommerce | ecommerce |
small | klein |
business | bedrijf |
is | is |
seo | seo |
protocol | protocol |
function | functie |
we | wij |
help | helpen |
will | zullen |
on | op |
if | als |
you | u |
and | en |
the | zetten |
this | dit |
up | beste |
EN Fix crawl errors Run technical SEO audits to spot all the errors of a client?s website such as broken links, wrong redirects or 404
NL Kruipfouten verhelpen Voer technische SEO-audits uit om alle fouten van de website van een klant op te sporen, zoals gebroken links, verkeerde redirects of 404
Anglų | Olandų |
---|---|
fix | verhelpen |
seo | seo |
audits | audits |
client | klant |
broken | gebroken |
links | links |
redirects | redirects |
errors | fouten |
technical | technische |
website | website |
or | of |
the | de |
to | om |
wrong | verkeerde |
as | zoals |
a | een |
of | van |
EN Thanks to our intuitive and visual graphics, you will picture the distribution of the internal links, which will help you balance their weight and optimize the crawl budget.
NL Dankzij onze intuïtieve en visuele graphics kunt u zich een beeld vormen van de verdeling van de interne links, wat u zal helpen om hun gewicht in evenwicht te brengen en het crawlbudget te optimaliseren.
Anglų | Olandų |
---|---|
picture | beeld |
distribution | verdeling |
links | links |
optimize | optimaliseren |
visual | visuele |
graphics | graphics |
balance | evenwicht |
weight | gewicht |
the | de |
to | om |
will | zal |
internal | interne |
help | helpen |
and | en |
their | hun |
thanks | dankzij |
our | in |
you | u |
of | van |
EN Crawl security protocols HTTPS Track different versions of your site, including the HTTPS one. We will help you set it up and make the most of its function to provide safe websites and eCommerce.
NL Crawl beveiligingsprotocollen HTTPS Volg verschillende versies van uw site, waaronder de HTTPS-website. Wij zullen u helpen bij het opzetten van de site en het optimaal benutten van de functie ervan om veilige websites en eCommerce aan te bieden.
Anglų | Olandų |
---|---|
https | https |
ecommerce | ecommerce |
the | de |
versions | versies |
function | functie |
to | om |
provide | bieden |
will | zullen |
site | site |
including | waaronder |
we | wij |
track | volg |
help | helpen |
safe | veilige |
websites | websites |
you | u |
and | en |
EN FandangoSEO is the newest tool to help companies master search engine optimization audits. With the latest technology and intuitive interface, you can crawl your site and track all the changes quickly and comfortably.
NL FandangoSEO is de nieuwste tool om bedrijven te helpen bij het beheersen van zoekmachine optimalisatie audits. Met de nieuwste technologie en een intuïtieve interface kunt u snel en comfortabel door uw site kruipen en alle veranderingen volgen.
Anglų | Olandų |
---|---|
fandangoseo | fandangoseo |
tool | tool |
companies | bedrijven |
optimization | optimalisatie |
audits | audits |
technology | technologie |
interface | interface |
crawl | kruipen |
quickly | snel |
comfortably | comfortabel |
is | is |
site | site |
track | volgen |
the | de |
to | om |
changes | veranderingen |
with | bij |
help | helpen |
and | en |
search engine | zoekmachine |
you can | kunt |
latest | nieuwste |
you | u |
EN Easily picture the distribution of the internal links and balance their weight to optimize the crawl budget.
NL Stel eenvoudig de verdeling van de interne links in beeld en breng het gewicht ervan in balans om het crawlbudget te optimaliseren.
Anglų | Olandų |
---|---|
easily | eenvoudig |
picture | beeld |
distribution | verdeling |
links | links |
optimize | optimaliseren |
balance | balans |
weight | gewicht |
the | de |
to | om |
internal | interne |
and | en |
of | van |
EN Fix crawl errors This SEO web crawler will help you detect all kinds of errors, like broken links, wrong redirects or 404, among others
NL Kruipfouten verhelpen Deze SEO-webcrawler helpt u bij het opsporen van allerlei soorten fouten, zoals gebroken links, verkeerde redirects of 404, onder andere
Anglų | Olandų |
---|---|
fix | verhelpen |
seo | seo |
kinds | soorten |
broken | gebroken |
links | links |
redirects | redirects |
others | andere |
detect | opsporen |
errors | fouten |
or | of |
wrong | verkeerde |
all | allerlei |
you | u |
like | zoals |
among | van |
help you | helpt |
this | deze |
EN When a bot finds a website on the Internet, the first thing it does is check the robots.txt file in order to learn what it is allowed to explore and what it has to ignore during the crawl.
NL Wanneer een bot een website op het internet vindt, is het eerste wat hij doet het robots.txt-bestand controleren om te weten te komen wat hij mag onderzoeken en wat hij tijdens het crawlen moet negeren.
Anglų | Olandų |
---|---|
bot | bot |
check | controleren |
robots | robots |
ignore | negeren |
website | website |
is | is |
on | op |
internet | internet |
txt | txt |
to | om |
file | bestand |
explore | onderzoeken |
allowed | mag |
when | wanneer |
the | eerste |
during | tijdens |
learn | en |
EN ? They help optimize the crawl budget, as the spider will only visit what’s truly relevant and it’ll make better use of its time crawling a page. An example of a page you wouldn’t want Google to find is a “thank you page”.
NL - Ze helpen het crawlbudget te optimaliseren, omdat de spider alleen bezoekt wat echt relevant is en de tijd die hij aan het crawlen van een pagina besteedt, beter benut. Een voorbeeld van een pagina die Google niet mag vinden is een "bedankpagina".
Anglų | Olandų |
---|---|
help | helpen |
spider | spider |
truly | echt |
relevant | relevant |
example | voorbeeld |
they | ze |
the | de |
is | is |
and | en |
optimize | optimaliseren |
better | beter |
use | benut |
page | pagina |
time | tijd |
only | alleen |
will | mag |
you | niet |
find | vinden |
to | aan |
EN Take a look at the available packages with which you can crawl up to 20 million pages.
NL Bekijk de beschikbare pakketten waarmee u tot 20 miljoen pagina's kunt kruipen.
Anglų | Olandų |
---|---|
packages | pakketten |
crawl | kruipen |
million | miljoen |
the | de |
you can | kunt |
you | u |
EN The robots.txt controls the access of the crawler to some areas of the website. This sometimes can be risky, especially if the GoogleBot is accidentally not allowed to crawl the entire site, but there are situations where a robots.txt file can be handy.
NL De robots.txt regelt de toegang van de crawler tot bepaalde delen van de website. Dit kan soms riskant zijn, vooral als de GoogleBot per ongeluk niet de hele site mag crawlen, maar er zijn situaties waarin een robots.txt-bestand handig kan zijn.
Anglų | Olandų |
---|---|
robots | robots |
crawler | crawler |
googlebot | googlebot |
accidentally | per ongeluk |
situations | situaties |
handy | handig |
access | toegang |
sometimes | soms |
the | de |
txt | txt |
website | website |
site | site |
file | bestand |
if | als |
entire | hele |
can | kan |
especially | vooral |
there | er |
but | |
this | dit |
are | zijn |
Rodoma 50 iš 50 vertimų