TYPO3 Plugin:

versatile_crawler

EXT:versatile_crawler

Vielseitiger Crawler ist im Grunde genommen eine Erweiterung zum Crawlen von Seiten und Inhalten in einer TYPO3 CMS-Installation. Es wurde auf Basis von TYPO3 CMS Version 8 entwickelt. Die Erweiterung hat eine übersichtliche und leicht verständliche struktur und bietet Queue- und Crawler-Funktionen für Seiten und Datensätze.

Installation & Einrichtung

Klonen Sie die Erweiterung von GitHub, manuell oder über composer, und aktivieren Sie die Erweiterung über den Extension Manager. Erstellen Sie einen Crawler-Konfigurationsdatensatz auf der Seite, auf der Sie die Indexierung starten möchten, z.B. auf der Homepage. Gehen Sie zum Scheduler-Modul und erstellen Sie einen Queue-Task und einen Prozesstask. Konfigurieren Sie einen Cron-Job, der auslöst TYPO3 CMS' Scheduler.

Voraussetzungen

  • TYPO3 CMS 8 8
  • PHP 7 mit cURL

Dokumentation

Die Dokumentation finden Sie im GitHub-Wiki: https://github.com/webcoast-dk/versatile-crawler/wiki

Beitragend

Zögern Sie nicht, das Repository zu teilen, Änderungen vorzunehmen und einen pull request zu erstellen. Wenn Sie sich nicht mit Coding beschäftigen oder haben nicht die Zeit, ein Problem zu lösen.

Credits

Die Erweiterung wird von Thorben Nissen (https://www.kapp-hamburg.de/en/) entwickelt und betreut

Lizenz

Copyright (C) 2017 Thorben Nissen

Dieses Programm ist freie Software: Sie können es weitergeben und/oder ändern unter den Bedingungen der GNU General Public License, wie sie von der Firma die Free Software Foundation, entweder Version 3 der Lizenz, oder (nach Ihrer Wahl) jede spätere Version.

Dieses Programm wird in der Hoffnung verteilt, dass es nützlich sein wird, aber OHNE JEGLICHE GARANTIE; auch ohne die implizite Garantie von MARKTFÄHIGKEIT oder Tauglichkeit für einen bestimmten Zweck. Siehe die GNU General Public License für weitere Details.

Sie sollten eine Kopie der GNU General Public License erhalten haben zusammen mit diesem Programm. Wenn nicht, siehe http://www.gnu.org/licenses/.

Icons

Die Symbole stammen aus dem Materialdesign (https://materialdesignicons.com/) und sind lizenziert unter die SIL Open Font License 1.1.

Benötigen Sie schnelle Hilfe mit dieser Extension? Unser Team von erfahrenen TYPO3-Entwicklern löst Probleme unkompliziert und zum Stundensatz.

Verteilung:VERSATILE_CRAWLER ist auf

0.02 % aller TYPO3 installiert.

  • 0.15 % aller TYPO3 8.7.x Installationen installiert

Aktualität:VERSATILE_CRAWLER ist auf dem neusten Stand (v.1.0.1) bei

100 % aller TYPO3 Installationen

  • 0 % aller TYPO3 9.5.x Installationen
  • 0 % aller TYPO3 9.3.x Installationen
  • 0 % aller TYPO3 9.2.x Installationen
  • 0.15 % aller TYPO3 8.7.x Installationen
  • 0 % aller TYPO3 7.6.x Installationen
  • 0 % aller TYPO3 7.5.x Installationen
  • 0 % aller TYPO3 7.4.x Installationen
  • 0 % aller TYPO3 7.3.x Installationen
  • 0 % aller TYPO3 7.2.x Installationen
  • 0 % aller TYPO3 7.1.x Installationen
  • 0 % aller TYPO3 7.0.x Installationen
  • 0 % aller TYPO3 6.2.x Installationen
  • 0 % aller TYPO3 6.1.x Installationen
  • 0 % aller TYPO3 6.0.x Installationen
  • 0 % aller TYPO3 5.0.x Installationen
  • 0 % aller TYPO3 4.7.x Installationen
  • 0 % aller TYPO3 4.6.x Installationen
  • 0 % aller TYPO3 4.5.x Installationen
  • 0 % aller TYPO3 4.4.x Installationen
  • 0 % aller TYPO3 4.3.x Installationen
  • 0 % aller TYPO3 4.2.x Installationen
  • 0 % aller TYPO3 4.1.x Installationen
  • 0 % aller TYPO3 4.0.x Installationen
  • 0 % aller TYPO3 3.5.x Installationen

VERSATILE_CRAWLER Version:Verteilung nach installierten Versionen

  • 100 % VERSATILE_CRAWLER v.1.0.1

PHP Version:VERSATILE_CRAWLER wird benutzt mit

  • 100 % PHP/7.1

Gosign-Responsive Index: TYPO3 Installationen nutzen VERSATILE_CRAWLER zu

  • 71 % wenn der Gosign-Responsive-Index zwischen 80 % und 100 % ist
  • 29 % wenn der Gosign-Responsive-Index zwischen 60 % und 80 % ist
  • 0 % wenn der Gosign-Responsive-Index zwischen 40 % und 60 % ist
  • 0 % wenn der Gosign-Responsive-Index zwischen 20 % und 40 % ist
  • 0 % wenn der Gosign-Responsive-Index zwischen 0 % und 20 % ist

Pagespeed: TYPO3 Installationen nutzen VERSATILE_CRAWLER zu

  • 14 % wenn der Pagespeed zwischen 80 % und 100 % ist
  • 71 % wenn der Pagespeed zwischen 60 % und 80 % ist
  • 14 % wenn der Pagespeed zwischen 40 % und 60 % ist
  • 0 % wenn der Pagespeed zwischen 20 % und 40 % ist
  • 0 % wenn der Pagespeed zwischen 0 % und 20 % ist


Stichprobe n=36680 von Gosign gecrawlte TYPO3-Seiten mit den Top-Level-Domains <.de/.ch/.at>