Hi,
tja, nun läufts seit 2 Wochen stabil bei uns.
Die vollständige Beschreibung und der aktuelle Code stehen dort wo es hingehört:
http://typo3.org/1383.0.html?&tx_t3annotation_pi1%5BshowUid%5D=356&tx_extrepmgm_pi1%5Bmode%5D=99&tx_extrepmgm_pi1%5BshowUid%5D=766&tx_extrepmgm_pi1%5Bcmd%5D=forum
Die Vorteile:
- schneller (checked nur noch die Seiten, die überhaupt gecached werden können)
- Umschaltung der Cache-Methode: wget (nur default-Sprache) oder curl
- kann mit hilfe von curl alle Sprachen cachen.
Wie kann man die Extension updaten:
- login ins backend -> extension-manager -> "cache_all" wählen -> umstellen (oben rechts): "information" in "edit files")
- Datei öffnen: "mod1/index.php"
- Ach ja und curl (http://www.linuxwiki.de/curl) muss man natürlich installieren ;-)
Viel Spaß damit ;-)
DanielBrüßler
Vielen Dank Daniel für die ausführliche Darstellung. Wie läuft denn jetzt das Cachen der Seiten genau ab. Ich geh im Backend auf Cache erstellen, dann beginnt sich der Fortschrittbalken rechts unten im Browser zu bewegen ... wird immer langsamer ... stillstand 😢 Muss ich denn nicht noch den Pfad von curl irgendwo einbringen? Ist ein Win Server. Oder dauert das cachen einfach sooooooo lange?
Hi sw-stud,
Weil das caching natürlich ein paar Sekunden dauert, wird stets angezeigt, welche Seite gerade gecached wird und welche Einstellungen verwendet werden. Schön wärs, wenn die Extension selbst checken würde, ob man curl oder wget installiert hat 😃
Stell das Maximum lieber erstmal runter. Zum Testen ist
$howmuch = 5;
ein guter Wert. Trotzdem hast Du auf Windows weder wget noch curl automatisch mit drauf. Die Sachen gehören zur Linux-Welt.
Aber no prob. Klick hier: http://curl.haxx.se/download.html
Wär nett, wenn Du ein kleines installations-Howto für Windows-User als Beitrag hinterhersetzt. 50% der Typo3-Installationen sind ja daheim auf dem eigenen PC.
Have fun ;-)
Daniel
So, jetzt hab ich die Stelle im Code gefunden, wo ich den Pfad einstellen kann. Mit &howmuch = 5 spuckt er folgendes aus:
Caching. Please wait some seconds.
The settings are: max 5 pages by each run, using curl, building cache for 2 languages,
Your site is: http://172.16.1.164/
The database-query is: SELECT pages.uid FROM pages LEFT JOIN cache_pages ON pages.uid=cache_pages.page_id WHERE pages.deleted=0 and pages.hidden=0 and pages.no_cache=0 and pages.doktype>0 and pages.doktype<3 and pages.fe_group=0 and cache_pages.page_id IS NULL LIMIT 0 , 5
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L0.html -d "id=109&L=0" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L1.html -d "id=109&L=1" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L0.html -d "id=113&L=0" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L1.html -d "id=113&L=1" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L0.html -d "id=114&L=0" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L1.html -d "id=114&L=1" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L0.html -d "id=115&L=0" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L1.html -d "id=115&L=1" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L0.html -d "id=116&L=0" http://172.16.1.164/index.php
c:/apache/htdocs/quickstart/fileadmin/tools/curl/curl -o tempCURL_L1.html -d "id=116&L=1" http://172.16.1.164/index.php
Remaining pages to cache: 61
Drunter steht noch was von wegen, dass man das Tool weitere Male ausführen soll. Aber was bringt das, wenn jedesmal dieselben Seiten gecached werden? Und wieso geht's immer bei id=109 los und nicht bei 0? Sobald ich &howmuch erhöhe, passiert wieder garnix (siehe oben).
Mit &howmuch = 5 spuckt er folgendes aus
Die Variable heißt "$howmuch".
Schaut prinzipell schon mal prima aus. Dein Domainname stimmt, und die erste NICHT-gecache'te Seite ist in Deinem Fall 109. Alles vor 109 liegt schon im Cache!!
Remaining pages to cache: 61
Leider lässt sich mit dem SELECT nicht für alle Seiten herausfinden, ob sie gecached werden können. Deswegen bleiben immer ein paar Seiten übrig. -- Die tt_news-Extension zum Beispiel verhindert das Cachen der jeweiligen Seite.
Übrigens: Wenn der Index mal angelegt wurde, dann bleibt er auch! -- Der Button "Alle Caches löschen" löscht nur den Cache! Es sind ja verschiedene Datenbanktabellen. 😉
Schönes Wochenende
Daniel
Hi Peoples out there,
kann man allgemein sagen, dass Seiten / Extensions welche man mit einem Browser Refresh aktualisiert werden können, nicht gecached werden, also Inhalte auch nicht in die Indexliste aufgenommen werden?
sw-student schrieb... nicht gecached werden, also Inhalte auch nicht in die Indexliste aufgenommen werden ...
So isses. Denn der Index wird ja aus den Cache-Datensätzen erstellt. Schau Dir doch die Tabellen mal in der Datenbank an.
Verwendest Du denn curl nun?
Greetzz
Daniel
Habs damals dann irgendwann aufgegeben. So richtig funktioniert hat's nicht. Aber werd mal nochmal einen neuen Anlauf starten. Damit ich nicht schon bei der Auswahl der Version einen Fehler mache: Welche Windows Version benötige ich?
Win32 - Generic?
Win32 - cygwin?
Win32 - Mingw32?
mit / ohne SSL?
Gruß
sw-student
sw-student schriebWin32 - Generic?
Win32 - cygwin?
Win32 - Mingw32?
mit / ohne SSL?
Oh, hätte nicht gedacht dass es unter Windows mal schwierig ist etwas zu installieren.
Nun SSL brauchst Du nicht, also "ohne". Und cygwin verwendest Du ja nicht sondern es soll ja als .dll ins Systemverzeichnis. Bleiben also noch zwei Sachen übrig. Ich würde mir Generic mal genauer anschauen.
Greetzz
Daniel
Also bei mir wird nichts gecached. Der rattert zwar die eingestellten 15 Seiten runter, gecachede Seiten werden aber immer noch 0 angezeigt. (habe zuvor den Cache geleert)
Hi sw-stud,
Ich installiere Curl auch mal auf meinem Windows-Rechner um zu schauen was es da für Probleme geben kann. Welche curl-Version hast Du denn nun gewählt?
Greetzz
Daniel
Morgen escapedPrisoner,
das ist lieb von dir. Benutze die curl-7.10.8-win32-nossl(.zip) [generic] Version.
Gruß
SW-Student
Installiererei:
Ich bin ja auch nicht der Held im Installieren und drücke mich wenn ich kann. Aber nun muss es mal wieder sein. 8-)
Also: Habe das zip heruntergeladen und das File curl.exe ins windows-root-verzeichnis (bei mir mir c:winnt) hineingeschoben.
Beim Wechsel zur Kommandozeile, und der Eingabe von "curl --help" wird curl tatsächlich aktiv und zeigt brav die Hilfe an. Klappt also.
Klappt das bei Dir soweit? 🙂
Wenn ja ist zu prüfen ob curl auch von PHP her verwendet werden kann. Am einfachsten führst Du dafür die cache_all Extension kurz aus und schaust dann nach, ob das File "tempCURL_L0.html" vorhanden ist (im Verzeichnis der Extension). -- Soweit alles roger?
Greetzz
Daniel
Morgen Daniel,
also "curl --help" funktioniert. Das lustige ist jetzt, dass "tempCURL_L0.html" in meinem Ordner vorhanden war. Nachdem ich es jetzt einmal gelöscht habe, ist es aber nimmer wieder aufgetaucht. Es muss also schon einmal funktioniert haben.
Na, das freut mich ja 😃
Das heißt die Extension tut das was sie soll auch bei Dir - nämlich einen Benutzer simulieren der nach und nach alle Seiten mal anklickt. 😉
----
Was nun noch nicht im Index (und auch nicht im Cache) liegt ist aus irgendwelchen Gründen auf "no_cache" eingestellt.
Hast Du ne Ahnung, woran das liegen könnte?
Greetzz
Daniel
ähm, diese cache_all Extension... cacht die auch Externe Medien (pdf, doc, html, htm, txt)? habe nämlich auch das problem, das er bei mir die "externen" seiten nicht cacht. bin halb am verzweifeln...
hab auch schon doku gelesen und hier nachgeschaut, s bringt alles nix. folgendes hab ich gemacht:
SETUP:
page.index_externals = 1
page.index_enable = 1
dann hab ich auch noch eingestellt, das er unendlich in die tiefe gehn soll (bei der konfiguration des plugins).
cache gelöscht
abgemeldet und ein paar htmls und pdfs aufgerufen.
wieder im be angemeldet und unter indizierung geschaut ob er was gecacht hat -> negativ
das ganze spielchen dann 10x hintereinander-> bringt alles nix!!! 😢
habe auch schon die pfade für die parser angepasst und überprüft ob sie installiert sind.
zumindest die html-files müsste er doch indizieren?! muss ich bei den html-files auf was achten? oder funktioniert die indizierung nicht mit handelsüblichen links via a href?? muss ich das html-dokument iergendwie auf eine spezielle weise hochladen oder so (muss typo3 das kennnen). alle meine externen dokumente, die indiziert werden sollen, liegen im fileadmin-ordner. ich weiß nicht mehr weiter...
das cachen der typo3 seiten funzt aber wunderbar.
Bitte um Hilfe
bnai schriebabgemeldet und ein paar htmls und pdfs aufgerufen.
wieder im be angemeldet und unter indizierung geschaut ob er was gecacht hat -> negativ
Halte ich mittlerweile für ein Gerücht. Bei mir wird auch ohne Logout indiziert.
bnai schrieb
das cachen der typo3 seiten funzt aber wunderbar.
Bei mir leider immer noch nicht :x
Ganz wichtig ist noch:
(!)Rootlevel darf nur in deinem MainTemplate gesetzt sein!
(!)Die beiden Marker in deinem Template:<!--TYPO3SEARCH_begin-->###INHALT###<!--TYPO3SEARCH_end-->
"Rekursiv: Unendlich" ist übrigens nicht notwendig.
Schau doch mal im phpAdmin, ob er in den index_xyz Tables Wörter drin hat.
Ganz wichtig ist noch:
(!)Rootlevel darf nur in deinem MainTemplate gesetzt sein!
Hmm, ich habe glaub ich gar kein Root-Level gesetzt oder weiß es schon nicht mehr... im Seitenheader sehe ich die Option auch gar nicht. Aber da die Indizierung der Typo3-Seiten funzt denk ich mal, daß mein Root-Level richtig gesetzt ist.
(!)Die beiden Marker in deinem Template:<!--TYPO3SEARCH_begin-->###INHALT###<!--TYPO3SEARCH_end-->
Die hab ich nicht drin... also du meinst das HTML-Tamplate, ja? Was steht denn für "###INHALT###" das komplette HTML-File oder nur der eigendliche Content?
Da deine Typo Seiten korrekt indiziert werden (hab ich in deinem ersten posting überlesen :o - wer versteckt das auch in der letzten Zeile?? #giggle#), kann man die zwei obigen Punkte ausschließen.
Schau mal, ob das einen Unterschied bringt:
config.index_enable = 1
config.index_externals = 1
Wohl aber sehr unwahrscheinlich, da deine Typo Seiten ja bekanntlich indiziert werden ,-)
Wie genau hast du denn deine Pdfs eingebunden? Per "Dateiverweis" oder Rich Text Editor?
sw-student schriebDa deine Typo Seiten korrekt indiziert werden (hab ich in deinem ersten posting überlesen :o - wer versteckt das auch in der letzten Zeile?? #giggle#), kann man die zwei obigen Punkte ausschließen.
Also das war ja wohl eindeutig die vorletzte 😉
sw-student schriebSchau mal, ob das einen Unterschied bringt:
config.index_enable = 1
config.index_externals = 1
Wohl aber sehr unwahrscheinlich, da deine Typo Seiten ja bekanntlich indiziert werden ,-)
hab ich auch schon versucht, ohne "page." dann stehts sogar im ObjectBrowser unter config drinne, bringt nur herzlich wenig
sw-student schriebWie genau hast du denn deine Pdfs eingebunden? Per "Dateiverweis" oder Rich Text Editor?
ja das sind normale Links (<a href = "mein.pdf">PDF!</a>)
Aber wenn es generell funtionieren würde, müsste er doch zumindest die HTMLs cachen.