Tools om het web vast te leggen en te converteren

Schermafbeeldingen van webpagina's zo snel mogelijk maken

Maandag, September 21, 2015

We hebben onlangs een reeks verbeteringen in onze services voltooid om deze zo snel mogelijk te kunnen maken webpagina screenshots, voer een scrape uit of maak een geanimeerde GIF enz.

Allereerst hebben we onze hardware geanalyseerd en verschillende wijzigingen aangebracht die de generatietijden van screenshot aanzienlijk hebben versneld. De eerste wijziging was om naar MongoDB te gaan met behulp van WiredTiger als de database-engine, die de reactietijd van onze database enorm heeft verbeterd.

Vervolgens zijn we gemigreerd naar een nieuw datacenter, dat SSD-harde schijven en dubbele netwerkverbindingen gebruikt die 100 keer sneller zijn dan onze vorige servers. Dit betekent dat onze klanten veel betere, consistentere prestaties krijgen, zelfs onder zware belastingen.

Ten slotte hebben we onze op maat gemaakte software geanalyseerd en een snellere cachetechniek geïmplementeerd waarmee we webinhoud, zoals afbeeldingen en JavaScript, kunnen cachen zonder de snelheid van het genereren van screenshot te beïnvloeden. We blokkeren nu ook veel webanalysediensten van derden om het aantal webverzoeken te verminderen dat nodig is om een ​​screenshot te maken. Dit alles heeft de tijd die nodig is om een ​​screenshot te genereren met maar liefst 50% verkort.

Bekijk de nieuwste blogberichten