¿Alguien sabe una forma fácil y rápida de migrar una base de datos SQLite3 a MySQL?
Aquí hay una lista de convertidores (no actualizada desde 2011):
es decir, podrías hacer esto:
Todo el mundo parece comenzar con unos pocos greps y expresiones perl y de alguna manera obtienes algo que funciona para tu conjunto de datos en particular, pero no tienes idea si se importaron los datos correctamente o no. Me sorprende mucho que nadie haya construido una biblioteca sólida que pueda convertir entre los dos.
Aquí una lista de TODAS las diferencias en sintaxis SQL que conozco entre los dos formatos de archivo: Las líneas que comienzan con:
no se usan en MySQL
CREATE TABLE/INSERT INTO "table_name"
y usos de MySQLCREATE TABLE/INSERT INTO table_name
INSERT INTO
cláusulasINSERT INTO
cláusulas't'
y 'f'
para booleanos, MySQL usa 1
y 0
(una expresión regular simple para esto puede fallar cuando tiene una cadena como: 'Sí, no' dentro de su INSERT INTO
)AUTOINCREMENT
, usos de MySQLAUTO_INCREMENT
Aquí hay un script perl pirateado muy básico que funciona para mi conjunto de datos y comprueba muchas más de estas condiciones que otros scripts perl que encontré en la web. Nu garantiza que funcionará para sus datos, pero puede modificarlos y publicarlos aquí.
#! /usr/bin/perl
while ($line = <>){
if (($line !~ /BEGIN TRANSACTION/) && ($line !~ /COMMIT/) && ($line !~ /sqlite_sequence/) && ($line !~ /CREATE UNIQUE INDEX/)){
if ($line =~ /CREATE TABLE \"([a-z_]*)\"(.*)/i){
$name = $1;
$sub = $2;
$sub =~ s/\"//g;
$line = "DROP TABLE IF EXISTS $name;\nCREATE TABLE IF NOT EXISTS $name$sub\n";
}
elsif ($line =~ /INSERT INTO \"([a-z_]*)\"(.*)/i){
$line = "INSERT INTO $1$2\n";
$line =~ s/\"/\\\"/g;
$line =~ s/\"/\'/g;
}else{
$line =~ s/\'\'/\\\'/g;
}
$line =~ s/([^\\'])\'t\'(.)/$1THIS_IS_TRUE$2/g;
$line =~ s/THIS_IS_TRUE/1/g;
$line =~ s/([^\\'])\'f\'(.)/$1THIS_IS_FALSE$2/g;
$line =~ s/THIS_IS_FALSE/0/g;
$line =~ s/AUTOINCREMENT/AUTO_INCREMENT/g;
print $line;
}
}
&& ($line !~ /CREATE UNIQUE INDEX/)
agregar&& ($line !~ /PRAGMA foreign_keys=OFF/)
* la expresión regular de coincidencia de nombre de tabla pierde dígitos, es decir, en lugar de$line =~ /INSERT INTO \"([a-z_]*)\"(.*)/
debe haber$line =~ /INSERT INTO \"([a-z_1-9]*)\"(.*)/
Espero que esto ayude al futuro lectoresAquí hay un script de Python, construido a partir de la respuesta de Shalmanese y un poco de ayuda de Alex martelli en Translating Perl to Python
Lo estoy haciendo wiki comunitario, así que siéntase libre de editar y refactorizar siempre que no rompa la funcionalidad (afortunadamente podemos retroceder): es bastante feo pero funciona
use así (suponiendo que el script se llame
dump_for_mysql.py
:Que luego puedes importar a mysql
nota: debe agregar restricciones de clave externa manualmente ya que sqlite en realidad no las admite
Aquí está el guión:
fuente
schema_migrations
(version
varchar (255) NO NULO); INSERTAR EN Schema_migrations VALUES (20100714032840
); INSERTAR EN VALORES de schema_migrations ('20100714033251'); __Blobvar
tipo de datos, ticks de retroceso en la declaración CREATE ...Probablemente la forma más fácil y rápida es usar el comando sqlite .dump, en este caso, crear un volcado de la base de datos de muestra.
Luego puede (en teoría) importar esto a la base de datos mysql, en este caso la base de datos de prueba en el servidor de base de datos 127.0.0.1, utilizando la raíz del usuario.
Digo en teoría, ya que hay algunas diferencias entre las gramáticas.
En sqlite comienzan las transacciones
MySQL usa solo
Hay otros problemas similares (los varchars y las comillas dobles vuelven a mi mente) pero nada de encontrar y reemplazar no se pudo solucionar.
Tal vez debería preguntar por qué está migrando, si el problema es el tamaño del rendimiento / base de datos, quizás considere volver a iniciar el esquema, si el sistema se está moviendo a un producto más potente, este podría ser el momento ideal para planificar el futuro de sus datos.
fuente
Si está utilizando Python / Django, es bastante fácil:
cree dos bases de datos en settings.py (como aquí https://docs.djangoproject.com/en/1.11/topics/db/multi-db/ )
entonces hazlo así:
fuente
fuente
Usualmente uso la función Exportar / importar tablas de IntelliJ DataGrip .
Puedes ver el progreso en la esquina inferior derecha.
[ ]
fuente
Acabo de pasar por este proceso, y hay mucha muy buena ayuda e información en este Q / A, pero descubrí que tenía que reunir varios elementos (más algunos de otros Q / A) para obtener una solución de trabajo en Para migrar con éxito.
Sin embargo, incluso después de combinar las respuestas existentes, descubrí que el script de Python no funcionaba completamente para mí, ya que no funcionaba donde había múltiples ocurrencias booleanas en un INSERT. Vea aquí por qué ese fue el caso.
Entonces, pensé en publicar mi respuesta combinada aquí. El crédito va a aquellos que han contribuido en otros lugares, por supuesto. Pero quería devolver algo y ahorrar a otros el tiempo que sigue.
Publicaré el guión a continuación. Pero primero, aquí están las instrucciones para una conversión ...
Ejecuté el script en OS X 10.7.5 Lion. Python salió de la caja.
Para generar el archivo de entrada MySQL de su base de datos SQLite3 existente, ejecute el script en sus propios archivos de la siguiente manera,
Luego copié el archivo dumped_sql.sql resultante en una caja de Linux que ejecuta Ubuntu 10.04.4 LTS donde residía mi base de datos MySQL.
Otro problema que tuve al importar el archivo MySQL fue que algunos caracteres UTF-8 unicode (específicamente comillas simples) no se importaban correctamente, por lo que tuve que agregar un interruptor al comando para especificar UTF-8.
El comando resultante para ingresar los datos en una nueva base de datos MySQL vacía es el siguiente:
¡Déjalo cocinar, y eso debería ser! No olvides examinar tus datos antes y después.
Entonces, como lo solicitó el OP, ¡es rápido y fácil, cuando sabes cómo! :-)
Por otro lado, una cosa de la que no estaba seguro antes de analizar esta migración era si se preservarían los valores de campo created_at y updated_at; la buena noticia para mí es que sí lo son, por lo que podría migrar mis datos de producción existentes.
¡Buena suerte!
ACTUALIZAR
Desde que hice este cambio, noté un problema que no había notado antes. En mi aplicación Rails, mis campos de texto se definen como 'cadena', y esto se traslada al esquema de la base de datos. El proceso descrito aquí da como resultado que estos se definan como VARCHAR (255) en la base de datos MySQL. Esto coloca un límite de 255 caracteres en estos tamaños de campo, y cualquier cosa más allá de esto se truncó silenciosamente durante la importación. Creo que para admitir una longitud de texto superior a 255, el esquema MySQL necesitaría usar 'TEXTO' en lugar de VARCHAR (255). El proceso definido aquí no incluye esta conversión.
Aquí está el script Python fusionado y revisado que funcionó para mis datos:
fuente
Recientemente tuve que migrar de MySQL a JavaDB para un proyecto en el que nuestro equipo está trabajando. Encontré una biblioteca Java escrita por Apache llamada DdlUtils que lo hizo bastante fácil. Proporciona una API que le permite hacer lo siguiente:
Las herramientas con las que terminamos no estaban completamente automatizadas, pero funcionaron bastante bien. Incluso si su aplicación no está en Java, no debería ser demasiado difícil preparar algunas herramientas pequeñas para realizar una migración única. Creo que pude extraer nuestra migración con menos de 150 líneas de código.
fuente
No hay necesidad de ningún script, comando, etc.
solo tiene que exportar su base de datos sqlite como un
.csv
archivo y luego importarlo en Mysql usando phpmyadmin.Lo usé y funcionó increíble ...
fuente
Basado en la solución de Jims: ¿Una forma fácil y rápida de migrar SQLite3 a MySQL?
Esto funciona para mi. Utilizo sed solo para lanzar la primera línea, que no es similar a mysql, pero también podría modificar el script dump.py para tirar esta línea.
fuente
Obtenga un volcado de SQL
Importar volcado a MySQL
Para pequeñas importaciones:
o
Esto le pedirá una contraseña. Tenga en cuenta: si desea ingresar su contraseña directamente, debe hacerlo SIN espacio, directamente después de
-p
:Para vertederos más grandes:
mysqlimport u otras herramientas de importación como BigDump .
BigDump te da una barra de progreso:
fuente
Ja ... Ojalá hubiera encontrado esto primero! Mi respuesta fue a esta publicación ... script para convertir mysql dump sql file en formato que se pueda importar a sqlite3 db
Combinar los dos sería exactamente lo que necesitaba:
Cuando la base de datos sqlite3 se vaya a usar con ruby, es posible que desee cambiar:
a:
Por desgracia, esto solo funciona a la mitad porque aunque inserte 1 y 0 en un campo marcado como booleano, sqlite3 los almacena como 1 y 0, por lo que debe pasar y hacer algo como:
pero fue útil tener el archivo sql para buscar todos los booleanos.
fuente
Escribí este simple script en Python3. Se puede usar como una clase incluida o un script independiente invocado a través de un shell de terminal. Por defecto, importa todos los enteros como
int(11)
y cadenas comovarchar(300)
, pero todo eso se puede ajustar en el constructor o en los argumentos del script, respectivamente.NOTA: Requiere MySQL Connector / Python 2.0.4 o superior
Aquí hay un enlace a la fuente en GitHub si encuentra el siguiente código difícil de leer: https://github.com/techouse/sqlite3-to-mysql
fuente
Este script está bien, excepto en este caso que, por supuesto, he conocido:
El script debería dar este resultado:
Pero da en cambio esa salida:
con algunos extraños caracteres no ascii alrededor de los últimos 0 y 1.
Esto ya no apareció cuando comenté las siguientes líneas del código (43-46) pero aparecieron otros problemas:
Este es solo un caso especial, cuando queremos agregar un valor que sea 'f' o 't' pero no estoy realmente cómodo con las expresiones regulares, solo quería detectar este caso para que alguien lo corrija.
De todos modos muchas gracias por ese útil guión !!!
fuente
Esta solución simple funcionó para mí:
fuente
cuidado con las declaraciones CREATE
fuente