Managed VPS: LiteSpeed Crawler

Let op: de LiteSpeed Crawler is momenteel alleen beschikbaar op een Managed VPS.

Binnen dit artikel leggen we uit hoe je de LiteSpeed Cache Crawler kunt configureren op een WordPress website. Met de Crawler functie is het doel ervoor zorgen dat alle (of in ieder geval de belangrijkste) pagina's van een website altijd voorzien zijn van cache en dus altijd snel inladen.


Stap 1. Installeer de LiteSpeed Cache plug-in WordPress

Lees hier hoe je de Litespeed Cache plug-in installeert en deze configureert.


Stap 2. Open de LiteSpeed Crawler pagina

Binnen het overzicht van de crawlerpagina zie je vier gekleurde balkjes.

Tijdens het lopen van crawler houden de kleuren het volgende in.

  • Grijs: wacht om door crawler bezocht te worden
  • Groen: Was al cache aanwezig, overgeslagen
  • Blauw: Was geen cache op pagina, caching aangemaakt via crawler
  • Rood: Geen cache kunnen aanmaken op deze pagina (uitgesloten)

Stap 3. Koppelen van sitemap

Hiermee weet de Crawler welke pagina’s er aanwezig zijn en welke dus moeten worden voorzien van cache. We gaan dit instellen onder het tabblad Settings.

Standaard biedt WordPress al een sitemap (wp-sitemap.xml). Je kunt desgewenst ook gebruikmaken van een WordPress plug-in hiervoor, bijvoorbeeld Yoast SEO.

Let op: voor websites met veel pagina's (meer dan een paar honderd) (inclusief WooCommerce producten) adviseren we niet om deze allemaal te laten crawlen, dit duurt dan vaak te lang en dat kan de website dan juist vertragen omdat de crawl taak constant loopt. Gebruik in dat geval een sitemap met alleen de belangrijkste pagina's ingesteld.


Stap 4. Inladen van de sitemap

Dit doen we op het tabblad Map. Klik op deze pagina op de Refresh Crawler Map knop, dit laadt de sitemap items in. Je kunt hier zodra de crawler een keer gelopen heeft ook de status van iedere pagina zien en of deze cache heeft.


Stap 5. Eerste Crawler run

Nu alles is ingesteld is het tijd om de eerste crawlrun handmatig te starten, ga naar de overzichtspagina en klik op de Manually run knop. Klik vervolgens onderaan op dezelfde pagina op Show Crawler Status. In het zichtbare venster kun je nu de live status van de crawler zien.

Belangrijk is om bij te houden hoe lang deze run duurt, hierop passen we de crawlerfrequentie in de volgende stap op aan.


Stap 6. Crawler aanzetten

Nu we hebben vastgesteld hoe lang de crawler moet/kan draaien kunnen we de crawler echt aanzetten, zodat deze automatisch gaat draaien. Dit doen we op het tabblad Settings, zet de Crawler instelling op ON.

Vervolgens pas je de volgende waarde aan op basis van hoe lang de run in de vorige stap heeft geduurd. Heeft de handmatige crawlrun bijvoorbeeld 45 minuten geduurd, zet deze waarde dan op 3600 seconden (1 uur). Hanteer altijd een marge van een paar minuten naar boven toe.