MySQL INNODB-Beschädigung nach Serverabsturz beim gleichzeitigen Abschneiden

9

Mein Server ist heute abgestürzt, glaube ich, aufgrund eines gleichzeitigen Befehls zum Abschneiden von Tabellen in einer unserer INNODB-Tabellen. Der Server könnte neu gestartet werden, aber nach dem Start wird jedes Mal, wenn ich versuche, einen SQL-Befehl auszugeben, die folgende Fehlermeldung angezeigt:

ERROR 2006 (HY000): MySQL server has gone away

Folgendes ist in den Protokollen passiert:

121206 01:11:12  mysqld restarted
121206  1:11:13  InnoDB: Started; log sequence number 275 559321759
InnoDB: !!! innodb_force_recovery is set to 1 !!!
121206  1:11:13 [Note] /usr/libexec/mysqld: ready for connections.
Version: '5.0.95-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  Source distribution
InnoDB: Error: trying to load index PRIMARY for table 
InnoDB: but the index tree has been freed!
121206  1:11:37 - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help diagnose
the problem, but since we have already crashed, something is definitely wrong
and this may fail.

key_buffer_size=134217728
read_buffer_size=1048576
max_used_connections=1
max_connections=400
threads_connected=1
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_connections = 950272 K
bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

thd=0x9900950
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Cannot determine thread, fp=0x46353fa0, backtrace may not be correct.
Stack range sanity check OK, backtrace follows:
(nil)
New value of fp=0x9900950 failed sanity check, terminating stack trace!
Please read http://dev.mysql.com/doc/mysql/en/using-stack-trace.html and follow instructions on how to resolve the stack trace. Resolved
stack trace is much more helpful in diagnosing the problem, so please do
resolve it
Trying to get some variables.
Some pointers may be invalid and cause the dump to abort...
thd->query at 0x993e500 =
thd->thread_id=1
The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
information that should help you find out what is causing the crash.

Ich habe online gesucht und bekomme den Hinweis, dass es sich um einen MySQL-Fehler handelt, aber ich habe keine Ahnung, wie ich ihn lösen soll. Ich verwende MySQL Version 5.0.95.

Es scheint, als müsste ich eine neue Datenbank erstellen und die alten Daten in die neue speichern. Aber wie kann ich das tun, wenn ich nicht einmal SQL-Befehle an die aktuelle ausgeben kann?

--- UPDATE ---
Version: '5.0.95-log' Socket: '/var/lib/mysql/mysql.sock' Port: 3306 Quelldistribution InnoDB: Fehler: Versuch, den Index PRIMARY für die Tabelle InnoDB zu laden: aber die Indexbaum wurde freigegeben! 121206 4:13:41 - mysqld hat Signal 11 erhalten; Dies könnte daran liegen, dass Sie einen Fehler gefunden haben. Es ist auch möglich, dass diese Binärdatei oder eine der Bibliotheken, mit denen sie verknüpft wurde, beschädigt, nicht ordnungsgemäß erstellt oder falsch konfiguriert ist. Dieser Fehler kann auch durch eine fehlerhafte Hardware verursacht werden. Wir werden unser Bestes geben, um einige Informationen zu sammeln, die hoffentlich zur Diagnose des Problems beitragen. Da wir jedoch bereits abgestürzt sind, stimmt definitiv etwas nicht, und dies kann fehlschlagen.

key_buffer_size=134217728
read_buffer_size=1048576
max_used_connections=1
max_connections=400
threads_connected=1
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_connections = 950272 K
bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

thd=0x17fb8950
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Cannot determine thread, fp=0x464a3fa0, backtrace may not be correct.
Stack range sanity check OK, backtrace follows:
(nil)
New value of fp=0x17fb8950 failed sanity check, terminating stack trace!
Please read http://dev.mysql.com/doc/mysql/en/using-stack-trace.html and follow instructions on how to resolve the stack trace. Resolved
stack trace is much more helpful in diagnosing the problem, so please do
resolve it
Trying to get some variables.
Some pointers may be invalid and cause the dump to abort...
thd->query at 0x17ff6500 =
thd->thread_id=3
The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
information that should help you find out what is causing the crash.

Number of processes running now: 0
121206 04:13:41  mysqld restarted
InnoDB: The log sequence number in ibdata files does not match
InnoDB: the log sequence number in the ib_logfiles!
121206  4:13:42  InnoDB: Database was not shut down normally!
InnoDB: Starting crash recovery.
InnoDB: Reading tablespace information from the .ibd files...
InnoDB: Restoring possible half-written data pages from the doublewrite
InnoDB: buffer...
121206  4:13:43  InnoDB: Started; log sequence number 275 559323148
121206  4:13:43 [Note] /usr/libexec/mysqld: ready for connections.
Version: '5.0.95-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  Source distribution
Andrew
quelle

Antworten:

6

ASPEKT 1

Das erste, was mir auffiel, war diese Linie

InnoDB: Fehler: Versuch, den Index PRIMARY für Tabelle / zu laden

Dies zeigt an, dass Sie eine Tabelle mit der InnoDB Storage Engine haben

Das Interessante an InnoDB ist die Art und Weise, wie ein PRIMARY KEY gespeichert wird. Es wird in einer Struktur gespeichert, die als gen_clust_index oder allgemein als Clustered Index bezeichnet wird.

Ich vermute sofort, dass ein bestimmter PRIMARY KEY-Eintrag zu groß ist

Bitte beachten Sie einige Artikel über die guten, schlechten und hässlichen Verwendung langer PRIMARY KEYs:

Überprüfen Sie dann, ob das <DB Hidden>.<Table Hidden>neu gestaltet werden muss.

ASPEKT 2

In Bezug auf Ihre Vermutung bezüglich einer parallelen abgeschnittenen Tabelle klingt das irgendwie gefährlich. Warum? InnoDB führt TRUNCATE TABLE als DDLnicht aus DML. Ich habe darüber schon einmal geschrieben:

ASPEKT 3

Einige Tuning-Vorschläge

Bitte fügen Sie Folgendes hinzu my.ini

[mysqld]
max_allowed_packet=1G
innodb_fast_shutdown=0

Starten Sie MySQL

Führen Sie in einer anderen Sitzung tail -f <errorlogfile>InnoDB Crash Recovery aus und sehen Sie es sich an.

Wenn MySQL vollständig neu gestartet wurde und die Wiederherstellung des InnoDB-Absturzes abgeschlossen ist, versuchen Sie, MySQL sofort herunterzufahren. Möglicherweise müssen Sie die Größe Ihrer InnoDB-Transaktionsprotokolle ändern.

Entschuldigung für diese wilden Vorschläge, aber ich fliege hier blind.

Bitte posten Sie folgendes in der Frage:

  • dein gesamtes my.cnf
  • wie viel RAM ist an Bord

UPDATE 2012-12-05 12:09 EDT

Bitte machen Sie folgendes:

SCHRITT 01) Fügen Sie diese Änderungen hinzu my.cnf

[mysqld]
max_allowed_packet=1G
innodb_fast_shutdown=0
innodb_thread_concurrency=0

SCHRITT 02) service mysql restart

um sicherzustellen, dass MySQL kommt

SCHRITT 03) Sie müssen die Größe von ib_logfile0 und ib_logfile1 ändern (24 MB sind möglicherweise zu klein).

service mysql stop
cd /var/lib/mysql
mv ib_logfile0 ib_logfile0.bak
mv ib_logfile1 ib_logfile1.bak

SCHRITT 04) Fügen Sie diese Änderungen hinzu my.cnf

[mysqld]
innodb_log_file_size=512M
innodb_log_buffer_size=8M

SCHRITT 05) service mysql start

mysqld erstellt jeweils ib_logfile0 und ib_logfile1 512M neu

Versuchen Sie jetzt zu sehen, was passiert ...

UPDATE 2012-12-05 12:18 EDT

In der Zwischenzeit lesen Sie bitte meinen ServerFault-Beitrag zum MySQL-Paket und seine Auswirkungen auf die Größe in Bezug auf innodb_log_file_size und innodb_log_buffer_size, wie ich aus dem ServerFault-Beitrag eines anderen erfahren habe .

UPDATE 2012-12-05 14:28 EDT

Ich habe alle Verweise auf Kundentabellen aus dieser Frage heraus bearbeitet.

Die Hauptursache war eine beschädigte Seite ibdata1mit darin gemischten Daten- und Indexseiten. Ich habe Andrew dabei geholfen, Daten zu migrieren, ibdata1 mit innodb_file_per_table neu zu erstellen , und Andrew hat die Daten neu geladen.

RolandoMySQLDBA
quelle
Danke für deine Kommentare Rolando. Ich werde die Struktur des Primärschlüssels auf jeden Fall überdenken. In der Zwischenzeit werde ich Ihre Artikel durchgehen und prüfen, ob ich unseren Server so schnell wie möglich wieder zum Laufen bringen kann.
Andrew
Ein Teil von ibdata1 hat eine beschädigte Seite. Ich habe diesen Zustand schon oft bei meinen Hosting-Kunden gesehen.
RolandoMySQLDBA
Lassen Sie uns diese Diskussion im Chat fortsetzen
RolandoMySQLDBA
Wie gewünscht, habe ich alle meine Kommentare gelöscht, um vertrauliche Informationen zu verbergen.
RolandoMySQLDBA
@ RolandoMySQLDBA, Könnten Sie bitte näher erläutern, wie Sie die Grundursache entdeckt haben? Ich meine, wie haben Sie das herausgefunden? Und welche Schritte haben Sie unternommen, um dies zu beheben?
Bhupesh Pant