Per impostazione predefinita, il Crawler dell’Optimizer utilizza lo User Agent seguente, quando scansiona la tua Homepage:
Mozilla/5.0 (compatible; Optimizer; http://crawler.sistrix.net/)
Nelle impostazioni di progetto potrai personalizzare lo User Agent a seconda dei tuoi desideri e delle tue necessità: dalla scansione futura, useremo lo User Agent che avrai indicato.
Gli accessi del Crawler Optimizer avvengono sempre via indirizzo IP, la cui entrata del reverse DNS è *.crawler.sistrix.net. In questo modo potrai essere sicuro che siamo davvero noi a scansionare il tuo dominio, e che nessun altro stia usando abusivamente il nostro User Agent.
