nach ewigem hin und her werde ich mal folgendes machen: ich mach ein backup und installiere den ganzen laden mal auf einen größeren server
-
da muss es klappen bzw. dann weiß ich, obs am server lag oder an einer falschen konfiguration im typo3
trotzdem, lieben dank für deinen tip 🙂
habe diese riesige typo3 website+datenbank eben gebackupt und auf einem 3500MhZ/2GB Ram Server gezogen. -> immernoch exakt selbes problem: 98% CPU 😢
kann also irgendiwe nicht am server oder seinen einstellungen liegen - der wurm ist woanders begraben o.O - wie gesagt, andere seiten in ein und demselben baum funktionieren prima... (tt_news datenbank ?)
werde mich nach nun zwei wochen weiter auf die suche begeben - irgendwie muss dieses problem eine lösung finden...
vielleicht fällt ja irgendwem noch was ein..
vielen dank bis dahin, 😉
haM .
hamraucher schriebhabe diese riesige typo3 website+datenbank eben gebackupt und auf einem 3500MhZ/2GB Ram Server gezogen. -> immernoch exakt selbes problem: 98% CPU 😢
Schau doch mal in die Datenbank, ob in der tt_news Tabelle irgendein Index definiert ist bzw. indiziere die Tabelle mal neu... vielleicht ist der Index zerdonnert.
mit freundlichen Grüßen
Uwe Barthel
GANZ GENAU! dass MUSS es sein ! bin da gestern nacht noch ewig drann gesessen und ich vermute das dass genau irgendwas mit dem tt_news sql index zu tun haben muss.
noch folgende vorgeschichte: ich habe diese seite bisher mehrmals auf verschiedenen servern gehabt, bis ich es jetzt endlich providerunabhängig auf einem eigenen server unterbringen konnte. Ich habe die SQL jeweils gedumpt und es hat auch bisher immer hervorragend geklappt gehabt -
jetzt nochmal die frage: wie lässt sich ein kapuuter sql index reparieren (ich kann mich erinnern , ich habe das auch schon einmal versucht, da dass keine weiteren ergebnisse brachte, nicht wieder versucht)
jedenfalls bin ich mir zu fast 98% sicher , dass hier der wurm begraben liegt
lieben dank für den hinweis - ich hoffe dass sich das problem bald löst
ansonsten werde ich vermutlich die seite neu aufziehen müssen und die bestehenden inhalte separat als archiv auslesen lassen - wäre natürlich schön, es insgesamt geregelt zu bekommen
vielen lieben dank bis dahin,
liebe grüsse,
haM
hamraucher schrieb
jetzt nochmal die frage: wie lässt sich ein kapuuter sql index reparieren (ich kann mich erinnern , ich habe das auch schon einmal versucht, da dass keine weiteren ergebnisse brachte, nicht wieder versucht)
Anmelden im Backend.
PHPMyAdmin auswählen
tt_news auswählen
Unter Operationen (ist ein deutsches phpmyadmin ;-)) findest du z.B.: folgende Punkte:
# Überprüfe Tabelle [Dokumentation]
# Analysiere Tabelle [Dokumentation]
# Repariere Tabelle [Dokumentation]
# Optimiere Tabelle [Dokumentation]
# Leeren des Tabellenchaches ("FLUSH") [Dokumentation]
Ich würde alle nacheinander ausführen; von oben nach unter... und ebenso für die Tabellen tt_news_*
Ansonsten muß ich mir mal mein SQL Buch zur Hand nehmen, um dir den SQL String zum neuen Aufbau des Index stricken zu können ;-)
Ansonsten poste doch mal bitte die Daten, die unter Strucktur unterhalb der aufgelisteten Tabellenzellen stehen. Wie z.B.:
Indizes : [Dokumentation]
Name Typ Kardinalität Aktion Feld
PRIMARY PRIMARY 0 Bearbeiten Löschen uid
parent INDEX keine Bearbeiten Löschen pid
Index über Spalten anlegen
Speicherplatzverbrauch :
Typ Verbrauch
Daten 0 Bytes
Index 1.024 Bytes
Insgesamt 1.024 Bytes
Zeilenstatistik :
Angaben Wert
Format dynamisch
Zeilen 0
Nächste Autoindex 1
Erzeugt am 27. August 2004 um 19:45
Aktualisiert am 26. Oktober 2004 um 11:21
Letzter Check am 26. Oktober 2004 um 11:21
*
ahh: da bin ich schon wieder motivierter - habe das zwar gestern schon einmal gemacht - ohne ergebnis
dennoch wie von dir hingewiesen jetzt alle befehle wie angegeben nochmal ausgeführt. - (+ tt_news_cat etc..)
hier der auszug der structure anzeige der tt_news:
Structure tt_news
Indizes:
Name Typ Kardinalität Aktion Feld
PRIMARY PRIMARY 1029 uid
parent INDEX 38 pid
Speicherplatzverbrauch:
Typ Verbrauch
Daten 4.826 KB
Index 21.504 Bytes
Insgesamt 4.847 KB
Zeilenstatistik:
Angaben Wert
Format dynamisch
Zeilen 1.029
Zeilenlänge ø 4.802
Zeilengröße ø 4.824 Bytes
Nächste Autoindex 1.066
Erzeugt am 11. Oktober 2004 um 21:51
Aktualisiert am 26. Oktober 2004 um 11:40
Letzter Check am 26. Oktober 2004 um 11:40
...sehe ein kleines flämmlein leuchten in düsterer röhre *lol*
vor deinem posting hatte ich mich mit "myisamchk" beschäftigt - bisher aber leider auch ergebnislos...
thx🙂
hamraucher schriebahh: da bin ich schon wieder motivierter - habe das zwar gestern schon einmal gemacht - ohne ergebnis
Also alle Operationen ausgeführt und kein nennenswertes Ergebnis ?
Schau dir mal den comment der folgenden Seite an:
http://dev.mysql.com/doc/mysql/en/Indexes.html
hamraucher schriebahh: da bin ich schon wieder motivierter - habe das zwar gestern schon einmal gemacht - ohne ergebnis
http://dev.mysql.com/doc/mysql/en/CHECK_TABLE.html
CHECK TABLE tt_news EXTENDED
http://dev.mysql.com/doc/mysql/en/ANALYZE_TABLE.html
http://dev.mysql.com/doc/mysql/en/MyISAM_table_problems.html
REPAIR TABLE tt_news EXTENDED
http://dev.mysql.com/doc/mysql/en/OPTIMIZE_TABLE.html
OPTIMIZE TABLE tt_news
Einige der Operationen werden ziemlich lange dauern, da EXTENDED wirklich VIEL zu tun hat.
Sollte sich nach diesen Oerationen auf allen beteiligten Tabellen nichts verändern, würde ich sagen, die Datenbank kann man als Flaschenhals ausklammern.
Wie sieht es mit dem loggen aus ?
Ist vielleicht das log file voll und er muß andauernd rotieren ?
hui - klingt wirklich vielsversprechend - ich werde das mal alles checken
logfiles sind zu beginn (vor zwei wochen) eigentlich weitegehnd überprüft worden - ist aber ne option, vielleicht habe ich was übersehen
werde mich darauf gleich wieder melden,
bis dahin,
superlieben und verbundenen dank 🙂
haM .
so, habe jetzt alle befehle wie oben beschrieben versucht über phpMyAdmin auszuführen (und hoffe dass ich das so richtig gemacht habe) - ging trotz hinweis alles sehr schnell, wahrscheinlich weil in der tt_news alles in ordnung zu sein scheint. SQL meldet jedenfalls: alles ok!
jetzt wirds schon wieder perspektivlos, denn: wenn ich die tt_news extension nämlich deaktiviere, läufts wie geschmiert
in sachen logfiles lässt sich nichts nennenswertes berichten
teste SQL nochmal mit anderen möglicherweise dafür in frage kommenden tables durch (tx_rlmpeventdb_events etc... )
hamraucher schrieb
teste SQL nochmal mit anderen möglicherweise dafür in frage kommenden tables durch (tx_rlmpeventdb_events etc... )
Das wäre der nächste Schritt...
Schauen, ob ein abhängiges Modul der Engpaß ist.
Bzw. holt das news Plugin alle Entries auf einmal oder hast du die Anzahl der darzustellenden Entries begrenzt ?
Hast du mal versucht alle caching Instanzen (z.B.: turckMMCache usw.) auszumachen ?
Wie sieht es aus mit der Tabelle für den URL Cache ?
Hast die mal überprüft ?
Habe jetzt nicht nur alle abhängigen extensions überprüft sondern die ganze datenbank mit EXTENDED gecheckt
Bzw. holt das news Plugin alle Entries auf einmal oder hast du die Anzahl der darzustellenden Entries begrenzt ?
Wenn damit die anzahl darzustellender news gemeint ist, ja
Hast du mal versucht alle caching Instanzen (z.B.: turckMMCache usw.) auszumachen ?
turckMMCache ist im nachhinein erst installiert worden - aufgrund dieser problematik
Wie sieht es aus mit der Tabelle für den URL Cache ?
Hast die mal überprüft ?
ich denke ja, ich habe alle caches gelöscht , vor allem auch die md5Params tabelle überprüft
(habe woanders gelesen das es auch eine "hash collision" geben kann....)
irgendwie tückische krankheit...
nochmal tt_news 1.7 abhängige extensions:
rlmp eventlkalender
FEU news submitter
...wenn ich die extensions im extManager entferne, keine änderung der situation
...wenn ich tt_news extension dort entferne alles wieder in ordnung
zusätzlich habe ich vorrübergehend alle db_inhalte des rlmp eventkalenders gelöscht - keine änderung der situation
megaverflixt das ganze...
hamraucher schrieb
barthel schriebBzw. holt das news Plugin alle Entries auf einmal oder hast du die Anzahl der darzustellenden Entries begrenzt ?
Wenn damit die anzahl darzustellender news gemeint ist, ja
Wieviel ?
hamraucher schrieb
...wenn ich die extensions im extManager entferne, keine änderung der situation
...wenn ich tt_news extension dort entferne alles wieder in ordnung
Kannst du mal stoppen, wie lange vom Anfordern bis zum 'Erscheinen' der Seite vergeht?
Außerdem, integriere mal die 'Statistik' innerhalb der generierten Seite:
<!-- Cached page generated 26/10 2004 16:38. Expires 27/10 2004 00:00 -->
<!-- Parsetime: 157 ms-->
<!-- Compressed, level 3, original size was 3769 bytes. New size is 1610 bytes -->
mit folgenden Einstellungen:
page.config {
debug = 1
}
und mal in dem mysql log die passenden Zeiten der Seitenzugriffe rausfummeln.
Ich will anhand der Zeiten mal schauen, wo's klemmt.
Letztendlich vermute ich ein leak im module tt_news.
hat a bisser länger gedauert - finde irgendwie mysq.log nicht
Zur Anzahl der News: 10
Bei der Debuginfo zeigt er nur:
<!-- Parsetime: 6824 ms-->
Jetzt zu den SQL Zugriffen:
irgendwie ist mysqld.log leer - ??? eine mysql.log finde ich unter /var/lib irgendwie sowie woanders nicht (kann das sein?)
hamraucher schrieb
Bei der Debuginfo zeigt er nur:
<!-- Parsetime: 6824 ms-->
Jetzt zu den SQL Zugriffen:
irgendwie ist mysqld.log leer - ??? eine mysql.log finde ich unter /var/lib irgendwie sowie woanders nicht (kann das sein?)
Da muß ich dich leider an SuSe verweisen.
Auf meiner Gentoo (http://www.gentoo.org) liegt das log file unter:
/var/log/mysql/mysql.log
Hast du das 'Admin Panel' bei dir aktiviert ?
Soweit ich mich erinnern kann, werden da die Zeiten der einzelnen Schritte (SQL, parsing...) eingetragen.
Benutzt du die Archiv Funktion von tt_news ?
Am besten du schaust mal, das du das log file von mysql findest. Dort werden die SQL Queries mitgeschrieben. Den 'passenden' Query raussuchen und per phpmyadmin oder auf der Konsole mal absetzen und die Zeit 'messem'/ausgeben lassen.
Damit hätten wir die Datenbank ausreichend beackert.
Danach ist das tt_news selbst drann.
hamraucher schrieb
Bei der Debuginfo zeigt er nur:
<!-- Parsetime: 6824 ms-->
Diese Seite wird von Typo3 nicht gecached. Ansonsten würde etwas wie hier zu sehen im Quelltext auftauchen:
<!-- Cached page generated 27/10 2004 11:50. Expires 28/10 2004 00:00 -->
<!-- Parsetime: 338 ms-->
Der Quelltext (Debugeintrag) sollte sich bis 28/10 2004 00:00 nicht ändern.
jetzt bin ich kurzfristig überfragt: nichts weist darauf hin dass das caching ausgeschaltet wäre...
konnte bis gestern leider auch nicht ermitteln, wie ich an eine sql-logdatei abfrage komme - (ich habs über den sql monitor versucht (abfrage der ISAM tabellen) hat leider nicht geklappt - müsste ich mich wohl noch genauer mit beschäftigen)
hamraucher schriebjetzt bin ich kurzfristig überfragt: nichts weist darauf hin dass das caching ausgeschaltet wäre...
Hast du etwas wie:
page.config {
...
}
Bei mir sieht es in Sachen caching wie folgt aus:
page.config {
...
# cache optimierung
cache_period = 86400
cache_clearAtMidnight = 1
...
}
is bei mir jetzt auch drin... - zeigt aber in der debuginfo nachwievor nur "parsetime" -
bin aber in sachen "leak" in den tt_news tables ebenso von deiner vermutung überzeugt - da is irgendwo der wurm drin...
hamraucher schriebis bei mir jetzt auch drin... - zeigt aber in der debuginfo nachwievor nur "parsetime" -
Ist auch Quatsch... Asche auf mein Haupt o.O
Newsartikel werden doch in Typo3 nicht zwischengespeichert...
Hast du die Sache mit dem Adminpanel mal ausprobiert ?
Ich glaube es wurde in früheren postings schon mal erwähnt.