Zum Inhalt springen

Knifflig: Typo3 verursacht plötzlich enorme CPU Belastung

Erstellt am 13. Oktober 2004 · 48 Antworten · letzte Antwort am 14. Januar 2005 · Seite 2 von 3

Tags: tt_news, Cache & Performance, Frage

hamraucher ·

ahh: da bin ich schon wieder motivierter - habe das zwar gestern schon einmal gemacht - ohne ergebnis

dennoch wie von dir hingewiesen jetzt alle befehle wie angegeben nochmal ausgeführt. - (+ tt_news_cat etc..)

hier der auszug der structure anzeige der tt_news:

Structure tt_news

Indizes:

Name Typ Kardinalität Aktion Feld
PRIMARY PRIMARY 1029 uid
parent INDEX 38 pid

Speicherplatzverbrauch:
Typ Verbrauch
Daten 4.826 KB
Index 21.504 Bytes
Insgesamt 4.847 KB

Zeilenstatistik:
Angaben Wert
Format dynamisch
Zeilen 1.029
Zeilenlänge ø 4.802
Zeilengröße ø 4.824 Bytes
Nächste Autoindex 1.066
Erzeugt am 11. Oktober 2004 um 21:51
Aktualisiert am 26. Oktober 2004 um 11:40
Letzter Check am 26. Oktober 2004 um 11:40

...sehe ein kleines flämmlein leuchten in düsterer röhre *lol*

vor deinem posting hatte ich mich mit "myisamchk" beschäftigt - bisher aber leider auch ergebnislos...

thx🙂

barthel ·
hamraucher schrieb

ahh: da bin ich schon wieder motivierter - habe das zwar gestern schon einmal gemacht - ohne ergebnis

http://dev.mysql.com/doc/mysql/en/CHECK_TABLE.html

CHECK TABLE tt_news EXTENDED

http://dev.mysql.com/doc/mysql/en/ANALYZE_TABLE.html

http://dev.mysql.com/doc/mysql/en/MyISAM_table_problems.html

REPAIR TABLE tt_news EXTENDED

http://dev.mysql.com/doc/mysql/en/OPTIMIZE_TABLE.html

OPTIMIZE TABLE tt_news

Einige der Operationen werden ziemlich lange dauern, da EXTENDED wirklich VIEL zu tun hat.

Sollte sich nach diesen Oerationen auf allen beteiligten Tabellen nichts verändern, würde ich sagen, die Datenbank kann man als Flaschenhals ausklammern.

Wie sieht es mit dem loggen aus ?
Ist vielleicht das log file voll und er muß andauernd rotieren ?

hamraucher ·

hui - klingt wirklich vielsversprechend - ich werde das mal alles checken

logfiles sind zu beginn (vor zwei wochen) eigentlich weitegehnd überprüft worden - ist aber ne option, vielleicht habe ich was übersehen

werde mich darauf gleich wieder melden,

bis dahin,
superlieben und verbundenen dank 🙂

haM .

hamraucher ·

so, habe jetzt alle befehle wie oben beschrieben versucht über phpMyAdmin auszuführen (und hoffe dass ich das so richtig gemacht habe) - ging trotz hinweis alles sehr schnell, wahrscheinlich weil in der tt_news alles in ordnung zu sein scheint. SQL meldet jedenfalls: alles ok!

jetzt wirds schon wieder perspektivlos, denn: wenn ich die tt_news extension nämlich deaktiviere, läufts wie geschmiert

in sachen logfiles lässt sich nichts nennenswertes berichten

teste SQL nochmal mit anderen möglicherweise dafür in frage kommenden tables durch (tx_rlmpeventdb_events etc... )

barthel ·
hamraucher schrieb

teste SQL nochmal mit anderen möglicherweise dafür in frage kommenden tables durch (tx_rlmpeventdb_events etc... )

Das wäre der nächste Schritt...
Schauen, ob ein abhängiges Modul der Engpaß ist.

Bzw. holt das news Plugin alle Entries auf einmal oder hast du die Anzahl der darzustellenden Entries begrenzt ?
Hast du mal versucht alle caching Instanzen (z.B.: turckMMCache usw.) auszumachen ?
Wie sieht es aus mit der Tabelle für den URL Cache ?
Hast die mal überprüft ?

hamraucher ·

Habe jetzt nicht nur alle abhängigen extensions überprüft sondern die ganze datenbank mit EXTENDED gecheckt

Bzw. holt das news Plugin alle Entries auf einmal oder hast du die Anzahl der darzustellenden Entries begrenzt ?

Wenn damit die anzahl darzustellender news gemeint ist, ja

Hast du mal versucht alle caching Instanzen (z.B.: turckMMCache usw.) auszumachen ?

turckMMCache ist im nachhinein erst installiert worden - aufgrund dieser problematik

Wie sieht es aus mit der Tabelle für den URL Cache ?
Hast die mal überprüft ?

ich denke ja, ich habe alle caches gelöscht , vor allem auch die md5Params tabelle überprüft

(habe woanders gelesen das es auch eine "hash collision" geben kann....)

irgendwie tückische krankheit...

nochmal tt_news 1.7 abhängige extensions:
rlmp eventlkalender
FEU news submitter

...wenn ich die extensions im extManager entferne, keine änderung der situation
...wenn ich tt_news extension dort entferne alles wieder in ordnung

zusätzlich habe ich vorrübergehend alle db_inhalte des rlmp eventkalenders gelöscht - keine änderung der situation

megaverflixt das ganze...

barthel ·
hamraucher schrieb
barthel schrieb

Bzw. holt das news Plugin alle Entries auf einmal oder hast du die Anzahl der darzustellenden Entries begrenzt ?

Wenn damit die anzahl darzustellender news gemeint ist, ja

Wieviel ?

hamraucher schrieb

...wenn ich die extensions im extManager entferne, keine änderung der situation
...wenn ich tt_news extension dort entferne alles wieder in ordnung

Kannst du mal stoppen, wie lange vom Anfordern bis zum 'Erscheinen' der Seite vergeht?
Außerdem, integriere mal die 'Statistik' innerhalb der generierten Seite:

<!-- Cached page generated 26/10 2004 16:38. Expires 27/10 2004 00:00 -->
<!-- Parsetime: 157 ms-->
<!-- Compressed, level 3, original size was 3769 bytes. New size is 1610 bytes -->

mit folgenden Einstellungen:

page.config {
debug = 1
}

und mal in dem mysql log die passenden Zeiten der Seitenzugriffe rausfummeln.

Ich will anhand der Zeiten mal schauen, wo's klemmt.
Letztendlich vermute ich ein leak im module tt_news.

hamraucher ·

hat a bisser länger gedauert - finde irgendwie mysq.log nicht

Zur Anzahl der News: 10

Bei der Debuginfo zeigt er nur:

<!-- Parsetime: 6824 ms-->

Jetzt zu den SQL Zugriffen:

irgendwie ist mysqld.log leer - ??? eine mysql.log finde ich unter /var/lib irgendwie sowie woanders nicht (kann das sein?)

barthel ·
hamraucher schrieb

Bei der Debuginfo zeigt er nur:
<!-- Parsetime: 6824 ms-->

Jetzt zu den SQL Zugriffen:
irgendwie ist mysqld.log leer - ??? eine mysql.log finde ich unter /var/lib irgendwie sowie woanders nicht (kann das sein?)

Da muß ich dich leider an SuSe verweisen.
Auf meiner Gentoo (http://www.gentoo.org) liegt das log file unter:
/var/log/mysql/mysql.log

Hast du das 'Admin Panel' bei dir aktiviert ?
Soweit ich mich erinnern kann, werden da die Zeiten der einzelnen Schritte (SQL, parsing...) eingetragen.
Benutzt du die Archiv Funktion von tt_news ?

Am besten du schaust mal, das du das log file von mysql findest. Dort werden die SQL Queries mitgeschrieben. Den 'passenden' Query raussuchen und per phpmyadmin oder auf der Konsole mal absetzen und die Zeit 'messem'/ausgeben lassen.

Damit hätten wir die Datenbank ausreichend beackert.
Danach ist das tt_news selbst drann.

barthel ·
hamraucher schrieb

Bei der Debuginfo zeigt er nur:
<!-- Parsetime: 6824 ms-->

Diese Seite wird von Typo3 nicht gecached. Ansonsten würde etwas wie hier zu sehen im Quelltext auftauchen:

<!-- Cached page generated 27/10 2004 11:50. Expires 28/10 2004 00:00 -->
<!-- Parsetime: 338 ms-->

Der Quelltext (Debugeintrag) sollte sich bis 28/10 2004 00:00 nicht ändern.

hamraucher ·

jetzt bin ich kurzfristig überfragt: nichts weist darauf hin dass das caching ausgeschaltet wäre...

konnte bis gestern leider auch nicht ermitteln, wie ich an eine sql-logdatei abfrage komme - (ich habs über den sql monitor versucht (abfrage der ISAM tabellen) hat leider nicht geklappt - müsste ich mich wohl noch genauer mit beschäftigen)

barthel ·
hamraucher schrieb

jetzt bin ich kurzfristig überfragt: nichts weist darauf hin dass das caching ausgeschaltet wäre...

Hast du etwas wie:

page.config {
...
}

Bei mir sieht es in Sachen caching wie folgt aus:

page.config {
...
    # cache optimierung
    cache_period = 86400
    cache_clearAtMidnight = 1
...
}
hamraucher ·

is bei mir jetzt auch drin... - zeigt aber in der debuginfo nachwievor nur "parsetime" -

bin aber in sachen "leak" in den tt_news tables ebenso von deiner vermutung überzeugt - da is irgendwo der wurm drin...

barthel ·
hamraucher schrieb

is bei mir jetzt auch drin... - zeigt aber in der debuginfo nachwievor nur "parsetime" -

Ist auch Quatsch... Asche auf mein Haupt o.O
Newsartikel werden doch in Typo3 nicht zwischengespeichert...

Hast du die Sache mit dem Adminpanel mal ausprobiert ?
Ich glaube es wurde in früheren postings schon mal erwähnt.

hamraucher ·

nein nein, ist im prinzip kein falscher gedanke - tt_news werden in der version 1.7 eigentlich doch gecachet (um diese mit der indexed suche zu verwenden)

admin panel ? sozusagen die möglichkeit im frontend zu editieren ?

barthel ·
hamraucher schrieb

nein nein, ist im prinzip kein falscher gedanke - tt_news werden in der version 1.7 eigentlich doch gecachet (um diese mit der indexed suche zu verwenden)

Dann ist das aber ausgeschaltet. Ansonsten würde beim generieren der oben genennte Text erscheinen.

Suche mal nach:

plugin.tt_news {
    allowChaching >
    allowChaching = 0
}
hamraucher schrieb

admin panel ? sozusagen die möglichkeit im frontend zu editieren ?

Nicht zu verwechseln mit dem editPanel...
https://docs.typo3.org/m/typo3/reference-typoscript/main/en-us/UserTsconfig/Index.html

hamraucher ·

also in den constants steht:

plugin.tt_news.allowCaching = 1

einen anderen eintrag habe ich nicht gefunden (weder im typo setup der extension noch im eigenen)

barthel ·
hamraucher schrieb

also in den constants steht:

plugin.tt_news.allowCaching = 1

einen anderen eintrag habe ich nicht gefunden (weder im typo setup der extension noch im eigenen)

Klingt richtig. Leider kann ich den parsetime Text nicht validieren, da ich im Moment kein Testsystem habe.
Sollte also das caching aktiv sein, wird das langsam ein Fall für den tt_news Maintainer/Entwickler...

Hast du mal das adminpanel eingebunden ?

Nochmal zur Klarstellung:
Dein gesammter Webauftritt (Domain) wird Knete sobald das tt_news aktiviert ist ? Oder nur die Anzeige der Newsliste/ einzelnen News ?

hamraucher ·

der gesamte webauftritt ! aber nur EINE DOMAIN - heisst: alle anderen domains in ein und dem selben seitenbaum funktionieren korrekt... (und sind von bestehender präsenz separiert )

is schon ein irrsinn alles

also das adminpanel steht im setupcode, lässt sich aber irgendwie auch nicht anzeigen... - nun gut, ich denke ich werde die tage mal versuchen den entwickler zu kontaktieren, vielleicht bringts ja was...