Re: [Talk-de] APIDB-Import aus Geofabrik-Extrakten

2011-09-27 Diskussionsfäden Frederik Ramm 
Hi,

On Mon, 26 Sep 2011 22:21:48 +0200
Peter Wendorff wendo...@uni-paderborn.de wrote:
 Sind die Geofabrik-Extrakte generell ungeeignet für das Aufsetzen
 einer apidb?

Das waere mir neu. 

 Wenn ja: was hab ich falsch gemacht?

Vielleicht kannst Du tatsaechlich mal die genaue Fehlermeldung
nachreichen?

Bye
Frederik

___
Talk-de mailing list
Talk-de@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-de

Re: [Talk-de] APIDB-Import aus Geofabrik-Extrakten

2011-09-27 Diskussionsfäden Peter Wendorff 

Hallo Frederik.
Gestartet hab ich das mit

osmosis --read-xml-0.6 file=germany-2011-09-19-0414.osm.bz2 
--write-apidb-0.6 populateCurrentTables=yes host=localhost 
database=gis user=user validateSchemaVersion=no  apidb-import2.log 21


Die Datenbank enthält zusätzlich noch die Tabellen für Mapnik, die sich 
aber eigentlich nicht in die Quere kommen dürften, da die 
Mapnik-Tabellen geprefixed sind (Prefix: germany).


Gruß
Peter

Das apidb-import2.log enthält folgendes:

Sep 26, 2011 10:03:39 PM org.openstreetmap.osmosis.core.Osmosis run
INFO: Osmosis Version 0.39
Sep 26, 2011 10:03:40 PM org.openstreetmap.osmosis.core.Osmosis run
INFO: Preparing pipeline.
Sep 26, 2011 10:03:40 PM org.openstreetmap.osmosis.core.Osmosis run
INFO: Launching pipeline execution.
Sep 26, 2011 10:03:40 PM org.openstreetmap.osmosis.core.Osmosis run
INFO: Pipeline executing, waiting for completion.
Sep 27, 2011 1:23:39 AM 
org.openstreetmap.osmosis.core.pipeline.common.ActiveTaskManager 
waitForCompletion
SEVERE: Thread for task 1-read-xml-0.6 failed
org.openstreetmap.osmosis.core.OsmosisRuntimeException: Unable to insert user 
with id 473784 into the database.
at 
org.openstreetmap.osmosis.apidb.v0_6.impl.UserManager.insertUser(UserManager.java:143)
at 
org.openstreetmap.osmosis.apidb.v0_6.impl.UserManager.addOrUpdateUser(UserManager.java:191)
at 
org.openstreetmap.osmosis.apidb.v0_6.ApidbWriter.process(ApidbWriter.java:1079)
at 
org.openstreetmap.osmosis.xml.v0_6.impl.NodeElementProcessor.end(NodeElementProcessor.java:117)
at 
org.openstreetmap.osmosis.xml.v0_6.impl.OsmHandler.endElement(OsmHandler.java:107)
at org.apache.xerces.parsers.AbstractSAXParser.endElement(Unknown 
Source)
at 
org.apache.xerces.parsers.AbstractXMLDocumentParser.emptyElement(Unknown Source)
at 
org.apache.xerces.impl.XMLDocumentFragmentScannerImpl.scanStartElement(Unknown 
Source)
at 
org.apache.xerces.impl.XMLDocumentFragmentScannerImpl$FragmentContentDispatcher.dispatch(Unknown
 Source)
at 
org.apache.xerces.impl.XMLDocumentFragmentScannerImpl.scanDocument(Unknown 
Source)
at org.apache.xerces.parsers.XML11Configuration.parse(Unknown Source)
at org.apache.xerces.parsers.XML11Configuration.parse(Unknown Source)
at org.apache.xerces.parsers.XMLParser.parse(Unknown Source)
at org.apache.xerces.parsers.AbstractSAXParser.parse(Unknown Source)
at org.apache.xerces.jaxp.SAXParserImpl$JAXPSAXParser.parse(Unknown 
Source)
at org.apache.xerces.jaxp.SAXParserImpl.parse(Unknown Source)
at javax.xml.parsers.SAXParser.parse(SAXParser.java:195)
at org.openstreetmap.osmosis.xml.v0_6.XmlReader.run(XmlReader.java:108)
at java.lang.Thread.run(Thread.java:636)
Caused by: org.postgresql.util.PSQLException: ERROR: duplicate key value violates unique 
constraint users_display_name_idx
at 
org.postgresql.core.v3.QueryExecutorImpl.receiveErrorResponse(QueryExecutorImpl.java:2062)
at 
org.postgresql.core.v3.QueryExecutorImpl.processResults(QueryExecutorImpl.java:1795)
at 
org.postgresql.core.v3.QueryExecutorImpl.execute(QueryExecutorImpl.java:257)
at 
org.postgresql.jdbc2.AbstractJdbc2Statement.execute(AbstractJdbc2Statement.java:479)
at 
org.postgresql.jdbc2.AbstractJdbc2Statement.executeWithFlags(AbstractJdbc2Statement.java:367)
at 
org.postgresql.jdbc2.AbstractJdbc2Statement.executeUpdate(AbstractJdbc2Statement.java:321)
at 
org.openstreetmap.osmosis.apidb.v0_6.impl.UserManager.insertUser(UserManager.java:140)
... 18 more
Sep 27, 2011 1:23:39 AM org.openstreetmap.osmosis.core.Osmosis main
SEVERE: Execution aborted.
org.openstreetmap.osmosis.core.OsmosisRuntimeException: One or more tasks 
failed.
at 
org.openstreetmap.osmosis.core.pipeline.common.Pipeline.waitForCompletion(Pipeline.java:146)
at org.openstreetmap.osmosis.core.Osmosis.run(Osmosis.java:92)
at org.openstreetmap.osmosis.core.Osmosis.main(Osmosis.java:37)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at 
sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at 
sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:616)
at 
org.codehaus.plexus.classworlds.launcher.Launcher.launchStandard(Launcher.java:329)
at 
org.codehaus.plexus.classworlds.launcher.Launcher.launch(Launcher.java:239)
at 
org.codehaus.plexus.classworlds.launcher.Launcher.mainWithExitCode(Launcher.java:409)
at 
org.codehaus.plexus.classworlds.launcher.Launcher.main(Launcher.java:352)
at org.codehaus.classworlds.Launcher.main(Launcher.java:31)



___
Talk-de mailing list
Talk-de@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-de

Re: [Talk-de] APIDB-Import aus Geofabrik-Extrakten

2011-09-27 Diskussionsfäden Jan Torben Heuer 
Peter wrote:

 Caused by: org.postgresql.util.PSQLException: ERROR: duplicate key value
 violates unique constraint users_display_name_idx

Sind schon Einträge in der Datenbank? (import schonmal versucht?)

Generell ists schneller den index hinterher zu erstellen, nach dem import.

Jan

___
Talk-de mailing list
Talk-de@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-de

Re: [Talk-de] APIDB-Import aus Geofabrik-Extrakten

2011-09-27 Diskussionsfäden Peter Wendorff 
Frische Datenbank, Tabellen direkt vorher mit den bei den im rails-port 
enthaltenen Befehlen erzeugt.


Gruß
Peter

Am 27.09.2011 14:48, schrieb Jan Torben Heuer:

Peter wrote:


Caused by: org.postgresql.util.PSQLException: ERROR: duplicate key value
violates unique constraint users_display_name_idx

Sind schon Einträge in der Datenbank? (import schonmal versucht?)

Generell ists schneller den index hinterher zu erstellen, nach dem import.

Jan

___
Talk-de mailing list
Talk-de@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-de




___
Talk-de mailing list
Talk-de@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-de

[Talk-de] APIDB-Import aus Geofabrik-Extrakten

2011-09-26 Diskussionsfäden Peter Wendorff 

Hi.
Ich bin momentan dabei, einen vorläufigen OSM-Server einzurichten.
Vorläufig, weil auf Dauer auch dedizierte Hardware anstatt der VM zur 
Verfügung stehen wird; das dauert aber leider noch.


Um zunächst lokale Edits zu erlauben, hätte ich gerne eine API-DB.
Nachdem ich Mapnik und Tirex erstmal eingerichtet habe und feststellen 
musste, dass die VM, die mir momentan zur Verfügung steht, mit dem 
update sowieso nicht hinterherkommt (wie gesagt - Übergangslösung), 
würde ich gerne den gleichen Stand wie die Mapnik-DB auch für die APIDB 
benutzen, damit das konsistent ist, wenn wir zunächst Datenabfragen zum 
clientseitigen Rendering bedienen wollen.


Genutzt hab ich den Geofabrik-Deutschland-Import vom 19.9., 04:14 (osm.bz2).

Beim Versuch, das mit osmosis als apidb zu importieren bekomme ich 
jedoch immer einen pgsql-Fehler, weil die duplicate-key-Constraint bei 
den Benutzernamen irgendwo (genaue Fehlermeldung lege ich bei Bedarf nach).


Meine Frage deshalb:
Sind die Geofabrik-Extrakte generell ungeeignet für das Aufsetzen einer 
apidb?

Wenn ja: was hab ich falsch gemacht?
Falls nein: gibt es irgendwo alternative extrakte, die zum testen 
geeignet wären (muss also dann nicht unbedingt aktuelles sein)?


Gruß
Peter


___
Talk-de mailing list
Talk-de@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-de