Re: Error al importar dump

Lists: arpug
From: "Sergio Minini (NETKEY)" <sminini(at)netkey(dot)com(dot)ar>
To: arpug(at)postgresql(dot)org
Subject: Error al importar dump
Date: 2010-01-19 14:52:22
Message-ID: 4B55C726.1000609@netkey.com.ar
Views: Raw Message | Whole Thread | Download mbox | Resend email
Lists: arpug

<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
<head>
</head>
<body bgcolor="#ffffff" text="#333399">
Hola lista,<br>
antes que nada me presento. Mi nombre es Sergio, uso PG en el laburo
hace varios a&ntilde;os, que se usa como DB para un sistema ERP.<br>
Tenemos varios servidores instalados y nunca habia encontrado un
problema que no pueda resolver con un poquito de Google.<br>
Mayormente lo tenemos instalado sobre CentOS 5.x.<br>
Yo personalmente participo en ubuntu-ar, estoy suscripto a kde-ar y uso
Kubuntu en mis maquinas personales y como ya dije CentOS en los
servidores. Las formalidades hasta aqui.<br>
<br>
En esta oportunidad tengo un problema migrando un dump desde un
servidor viejo a uno nuevo.<br>
Exporto el schema sin problemas, lo paso a la otra maquina y cuando lo
importo corre varias horas haciendo los inserts, create y demases y
termina tirando 'Segmentation fault' y vuelve al prompt.<br>
Lo hice un par de veces con identico resultado. El archivo .sql pesa
nada mas que 4842487833 bytes!<br>
Tengo instalada la version 8.1.18 en un CentOS 5.4 (uname -a: Linux
2.6.18-164.10.1.el5 #1 SMP Thu Jan 7 19:54:26 EST 2010 x86_64 x86_64
x86_64 GNU/Linux)<br>
El servidor viejo tiene un postgresql-7.4.7-1PGDG en un Fedora Core 1
(si, muy viejo por eso lo estan reemplazando)<br>
<br>
Alguien tiene idea de como puedo hacer para migrar exitosamente de uno
a otro?<br>
O como ver un poco mejor que significa ese error? Es bastante generico.<br>
<br>
Muchas gracias a todos!<br>
-Sergio<br>
</body>
</html>

Attachment Content-Type Size
unknown_filename text/html 1.5 KB
From: Emanuel Calvo Franco <postgres(dot)arg(at)gmail(dot)com>
To: "Sergio Minini (NETKEY)" <sminini(at)netkey(dot)com(dot)ar>
Cc: arpug(at)postgresql(dot)org
Subject: Re: Error al importar dump
Date: 2010-01-19 15:27:42
Message-ID: f205bb121001190727i37c1c1bbq1624cdb0942c71c2@mail.gmail.com
Views: Raw Message | Whole Thread | Download mbox | Resend email
Lists: arpug

El día 19 de enero de 2010 11:52, Sergio Minini (NETKEY)
<sminini(at)netkey(dot)com(dot)ar> escribió:
> Hola lista,
> antes que nada me presento. Mi nombre es Sergio, uso PG en el laburo hace
> varios años, que se usa como DB para un sistema ERP.
> Tenemos varios servidores instalados y nunca habia encontrado un problema
> que no pueda resolver con un poquito de Google.
> Mayormente lo tenemos instalado sobre CentOS 5.x.
> Yo personalmente participo en ubuntu-ar, estoy suscripto a kde-ar y uso
> Kubuntu en mis maquinas personales y como ya dije CentOS en los servidores.
> Las formalidades hasta aqui.
>

Bienvenido!

> En esta oportunidad tengo un problema migrando un dump desde un servidor
> viejo a uno nuevo.
> Exporto el schema sin problemas, lo paso a la otra maquina y cuando lo
> importo corre varias horas haciendo los inserts, create y demases y termina
> tirando 'Segmentation fault' y vuelve al prompt.

Como esta configurado el nuevo sistema operativo? Tocástes los
parametros del Kernel
y demás?

> Lo hice un par de veces con identico resultado. El archivo .sql pesa nada
> mas que 4842487833 bytes!
> Tengo instalada la version 8.1.18 en un CentOS 5.4 (uname -a: Linux
> 2.6.18-164.10.1.el5 #1 SMP Thu Jan 7 19:54:26 EST 2010 x86_64 x86_64 x86_64
> GNU/Linux)

Si migras, migrá a una más nueva.

> El servidor viejo tiene un postgresql-7.4.7-1PGDG en un Fedora Core 1 (si,
> muy viejo por eso lo estan reemplazando)
>

Descartástes que sea un problema de hard? :
http://archives.postgresql.org/pgsql-hackers/2007-11/msg01195.php

--
Emanuel Calvo Franco
DBA at: www.siu.edu.ar
www.emanuelcalvofranco.com.ar
Join: http://www.thevenusproject.com/

From: "Sergio Minini (NETKEY)" <sminini(at)netkey(dot)com(dot)ar>
To: Emanuel Calvo Franco <postgres(dot)arg(at)gmail(dot)com>
Cc: arpug(at)postgresql(dot)org
Subject: Re: Error al importar dump
Date: 2010-01-19 16:13:02
Message-ID: 4B55DA0E.2030203@netkey.com.ar
Views: Raw Message | Whole Thread | Download mbox | Resend email
Lists: arpug

<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
<head>
<meta content="text/html;charset=ISO-8859-1" http-equiv="Content-Type">
</head>
<body bgcolor="#ffffff" text="#333399">
Emanuel Calvo Franco escribi&oacute;:
<blockquote
cite="mid:f205bb121001190727i37c1c1bbq1624cdb0942c71c2(at)mail(dot)gmail(dot)com"
type="cite">
<pre wrap="">El d&Atilde;&shy;a 19 de enero de 2010 11:52, Sergio Minini (NETKEY)
<a class="moz-txt-link-rfc2396E" href="mailto:sminini(at)netkey(dot)com(dot)ar">&lt;sminini(at)netkey(dot)com(dot)ar&gt;</a> escribi&Atilde;&sup3;:
</pre>
<blockquote type="cite">
<pre wrap="">Hola lista,
antes que nada me presento. Mi nombre es Sergio, uso PG en el laburo hace
varios a&Atilde;&plusmn;os, que se usa como DB para un sistema ERP.
Tenemos varios servidores instalados y nunca habia encontrado un problema
que no pueda resolver con un poquito de Google.
Mayormente lo tenemos instalado sobre CentOS 5.x.
Yo personalmente participo en ubuntu-ar, estoy suscripto a kde-ar y uso
Kubuntu en mis maquinas personales y como ya dije CentOS en los servidores.
Las formalidades hasta aqui.

</pre>
</blockquote>
<pre wrap=""><!---->
Bienvenido!

</pre>
<blockquote type="cite">
<pre wrap="">En esta oportunidad tengo un problema migrando un dump desde un servidor
viejo a uno nuevo.
Exporto el schema sin problemas, lo paso a la otra maquina y cuando lo
importo corre varias horas haciendo los inserts, create y demases y termina
tirando 'Segmentation fault' y vuelve al prompt.
</pre>
</blockquote>
<pre wrap=""><!---->
Como esta configurado el nuevo sistema operativo? Toc&Atilde;&iexcl;stes los
parametros del Kernel
y dem&Atilde;&iexcl;s?

</pre>
<blockquote type="cite">
<pre wrap="">Lo hice un par de veces con identico resultado. El archivo .sql pesa nada
mas que 4842487833 bytes!
Tengo instalada la version 8.1.18 en un CentOS 5.4 (uname -a: Linux
2.6.18-164.10.1.el5 #1 SMP Thu Jan 7 19:54:26 EST 2010 x86_64 x86_64 x86_64
GNU/Linux)
</pre>
</blockquote>
<pre wrap=""><!---->
Si migras, migr&Atilde;&iexcl; a una m&Atilde;&iexcl;s nueva.

</pre>
<blockquote type="cite">
<pre wrap="">El servidor viejo tiene un postgresql-7.4.7-1PGDG en un Fedora Core 1 (si,
muy viejo por eso lo estan reemplazando)

</pre>
</blockquote>
<pre wrap=""><!---->
Descart&Atilde;&iexcl;stes que sea un problema de hard? :
<a class="moz-txt-link-freetext" href="http://archives.postgresql.org/pgsql-hackers/2007-11/msg01195.php">http://archives.postgresql.org/pgsql-hackers/2007-11/msg01195.php</a>
</pre>
</blockquote>
Hola Emanuel, gracias por tu respuesta.<br>
Parametros del kernel no toque nada, jamas cambiamos la configuracion
estandar.<br>
La version es la que esta en los repos de CentOS, siempre tratamos de
mantener los paquetes de los repos que estan recontra-testeados.<br>
<br>
El problema del hard aun no llegue a eso, porque tampoco puedo
descartar que sea un error con el PG.<br>
Por eso queria ver si como migran habitualmente schemas tan grandes, y
ver de encontrar algun log o forma de ver mensaje de error que me
oriente a que paso.<br>
<br>
Alguna otra idea o tip?<br>
Gracias!<br>
-Sergio<br>
</body>
</html>

Attachment Content-Type Size
unknown_filename text/html 3.1 KB
From: Emanuel Calvo Franco <postgres(dot)arg(at)gmail(dot)com>
To: "Sergio Minini (NETKEY)" <sminini(at)netkey(dot)com(dot)ar>
Cc: arpug(at)postgresql(dot)org
Subject: Re: Error al importar dump
Date: 2010-01-19 16:32:57
Message-ID: f205bb121001190832x22b8e19bxb1ef485389143cd@mail.gmail.com
Views: Raw Message | Whole Thread | Download mbox | Resend email
Lists: arpug

> Hola Emanuel, gracias por tu respuesta.
> Parametros del kernel no toque nada, jamas cambiamos la configuracion
> estandar.
> La version es la que esta en los repos de CentOS, siempre tratamos de
> mantener los paquetes de los repos que estan recontra-testeados.
>

El problema es que 8.1 es una versión vieja. Si queres una versión bien testeada
pero con buenas features podés optar por 8.3 o como mucho 8.2

> El problema del hard aun no llegue a eso, porque tampoco puedo descartar que
> sea un error con el PG.

NO. Primero descarta que no sea problema del hard, porque generalmente
este error
no es común, empezá por la capa más baja y asegurate que está todo ok.

> Por eso queria ver si como migran habitualmente schemas tan grandes, y ver
> de encontrar algun log o forma de ver mensaje de error que me oriente a que
> paso.
>

No es un error común.

--
Emanuel Calvo Franco
DBA at: www.siu.edu.ar
www.emanuelcalvofranco.com.ar
Join: http://www.thevenusproject.com/

From: "Sergio Minini (NETKEY)" <sminini(at)netkey(dot)com(dot)ar>
To: Emanuel Calvo Franco <postgres(dot)arg(at)gmail(dot)com>
Cc: arpug(at)postgresql(dot)org
Subject: Re: Error al importar dump
Date: 2010-01-20 16:58:58
Message-ID: 4B573652.1090203@netkey.com.ar
Views: Raw Message | Whole Thread | Download mbox | Resend email
Lists: arpug

<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
<head>
<meta content="text/html;charset=ISO-8859-1" http-equiv="Content-Type">
</head>
<body bgcolor="#ffffff" text="#333399">
Emanuel Calvo Franco escribi&oacute;:
<blockquote
cite="mid:f205bb121001190832x22b8e19bxb1ef485389143cd(at)mail(dot)gmail(dot)com"
type="cite">
<blockquote type="cite">
<pre wrap="">Hola Emanuel, gracias por tu respuesta.
Parametros del kernel no toque nada, jamas cambiamos la configuracion
estandar.
La version es la que esta en los repos de CentOS, siempre tratamos de
mantener los paquetes de los repos que estan recontra-testeados.

</pre>
</blockquote>
<pre wrap=""><!---->
El problema es que 8.1 es una versi&Atilde;&sup3;n vieja. Si queres una versi&Atilde;&sup3;n bien testeada
pero con buenas features pod&Atilde;&copy;s optar por 8.3 o como mucho 8.2

</pre>
<blockquote type="cite">
<pre wrap="">El problema del hard aun no llegue a eso, porque tampoco puedo descartar que
sea un error con el PG.
</pre>
</blockquote>
<pre wrap=""><!---->
NO. Primero descarta que no sea problema del hard, porque generalmente
este error
no es com&Atilde;&ordm;n, empez&Atilde;&iexcl; por la capa m&Atilde;&iexcl;s baja y asegurate que est&Atilde;&iexcl; todo ok.

</pre>
<blockquote type="cite">
<pre wrap="">Por eso queria ver si como migran habitualmente schemas tan grandes, y ver
de encontrar algun log o forma de ver mensaje de error que me oriente a que
paso.

</pre>
</blockquote>
<pre wrap=""><!---->
No es un error com&Atilde;&ordm;n.<font size="-1"><font
face="Helvetica, Arial, sans-serif">
</font></font></pre>
</blockquote>
Gracias Emanuel por las tips.<br>
Lo estuvieron probando con el Hierens Boot CD 10.1 y no tuvo reportes
de errores de hard.<br>
<br>
Como es la mejor manera de pasar una DB de un equipo al otro?<br>
<br>
yo lo hacia simple:<br>
@origen: pg_dump -U postgres -n schema ddbb --insert -D &gt;
archivo_de_salida.sql<br>
@destino: psql -U postgres ddbb schema -f archivo_de_salida.sql<br>
<br>
Esto siempre me funciono con schemas chicos (~1Gb) y no tuve ningun
problema.<br>
Este tiene ~4Gb y hace una gran (GRAN!) cantidad de inserts. <br>
Tengo forma de hacer que vaya commiteando mas seguido y generando un
log con lo que va haciendo? porque solo veo como output los 'INSERT 0
1, INSERT ..." y al final termina con "Segmentation fault" y no se por
donde iba ni porque termino asi.<br>
<br>
Gracias!<br>
Sergio<br>
</body>
</html>

Attachment Content-Type Size
unknown_filename text/html 2.4 KB
From: Emanuel Calvo Franco <postgres(dot)arg(at)gmail(dot)com>
To: "Sergio Minini (NETKEY)" <sminini(at)netkey(dot)com(dot)ar>
Cc: arpug(at)postgresql(dot)org
Subject: Re: Error al importar dump
Date: 2010-01-20 17:57:32
Message-ID: f205bb121001200957l5d1c7b43q878b8985a4d0c3df@mail.gmail.com
Views: Raw Message | Whole Thread | Download mbox | Resend email
Lists: Postg토토 커뮤니티SQL : Postg토토 커뮤니티SQL 메일 링리스트 : 2010-01-20 이후 ARPUG 17:57

> yo lo hacia simple:
> @origen: pg_dump -U postgres -n schema ddbb --insert -D >
> archivo_de_salida.sql
> @destino: psql -U postgres ddbb schema -f archivo_de_salida.sql
>
> Esto siempre me funciono con schemas chicos (~1Gb) y no tuve ningun
> problema.
> Este tiene ~4Gb y hace una gran (GRAN!) cantidad de inserts.
> Tengo forma de hacer que vaya commiteando mas seguido y generando un log con
> lo que va haciendo? porque solo veo como output los 'INSERT 0 1, INSERT ..."
> y al final termina con "Segmentation fault" y no se por donde iba ni porque
> termino asi.
>

Verificastes el estado del almacenamiento? Ambos equipos están bien?

Verifica si hicistes mas de un dump de la misma base si el archivo te arroja el
mismo MD5.

4Gb no es un tamaño que haga caer a Postgres y el error que te tira tampoco es
algo común. Pudites pasar a una versión de postgres mas nueva?

Saludos!

--
Emanuel Calvo Franco
DBA at: www.siu.edu.ar
www.emanuelcalvofranco.com.ar
Join: http://www.thevenusproject.com/