Re: [Talk-de] Doppelte Wege - Untersuchung
Hallo doppelte Wegesucher, Andre Hinrichs schrieb vor einiger Zeit: Am Montag, den 17.08.2009, 11:31 +0200 schrieb Steffen Wolf: Was Euch noch fehlt, und da weiss ich auch keinen rechten Weg, ist die Moeglichkeit, die Beseitigungen einzutragen, d.h. die GPX-Datei zu kuerzen. Ich denke, es reicht, wenn Du die Generierung der Datei automatisieren kannst und dann tagesaktuell hältst. Für diejenigen, die die Fehler bearbeiten und JOSM verwenden, gibt es ein schönes Plugin, welches GPX-Dateien bearbeiten kann. Ich hab mein Skript mittlerweile automatisiert. Es lief jetzt taeglich in der Mittagspause, wenn der Buerorechner lief, d.h. am Wochenende nicht. Ich hab neben der Liste von Wegen mit 3 ueberlappenden Knoten noch Listen fuer 5, 9 und 29 aktualisiert. Die Daten liegen hier: http://www.unix-ag.uni-kl.de/~stw/osm/ Die 29er sind eigentlich immer falsche Eintragungen. Mich hat gestern aber gewundert, dass da scheinbar immer mehr hinzukommen, egal wieviel ich selbst versuche zu beseitigen. Richtige Doppelungen sind es nicht, meist wurden Wege geteilt oder kombiniert, aber die alten Wege nicht geloescht. Ein Programm scheint beim Kombinieren verschiedenwertige Tags mit Semikolon getrennt zusammenzulegen (tracktype=grade1;grade2 etwa). Mal beispielshaft zwei Wege mit 111 gemeinsamen Knoten: http://www.openstreetmap.org/browse/way/38583228/history http://www.openstreetmap.org/browse/way/23068726/history Huh, die sind ja noch interessanter, gut 79 Knoten auf derselben Position: http://www.openstreetmap.org/browse/way/22787735/history http://www.openstreetmap.org/browse/way/39483682/history Danke uebrigens fuer den Tip mit mittlerer Maustaste und Strg in JOSM. Da ich nicht weiss, wie intensiv die Daten genutzt werden, hab ich mich entschlossen, die Aktualisierungen erstmal auf drei pro Woche zu beschraenken: Mo+Mi+Fr jeweils so mittags. Viel Spass damit, stw -- Press any key to continue or any other key to quit. ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Hi Werner Hoch, On Dienstag, 11. August 2009, Steffen Wolf wrote: http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx Besteht die Möglichkeit nur die Punkte in das GPX-File aufzunehmen, die an den doppelten Wegen beteiligt sind? Ich musste bei manchen Wegen ein Weilchen suchen, bis ich die Doppelung gefunden hatte. Beispiel: Weg1: abcdefghijklmnopq Weg2: abc Weg3: mno Im GPX-File sollten nur die Wegpunkte abc und mno auftauchen. Ah, hmm. Muss mal ueberlegen, wie ich das anstelle. In der GPX-Datei tauchen zur Zeit alle drei Wege auf. Natuerlich liegen die uebereinander, so dass man es nicht erkennt, aber die Daten waeren da. Ich hatte bei solch langen Wegen den grossen Weg mal kurz geloescht und dann wiederhergestellt. Ich hatte bisher vermieden, die Wege zu kuerzen. Ich hatte jedenfalls Probleme, die richtigen Wege zu finden, wenn der GPX-Track nur ab und zu mal einen Knoten vom Weg beruehrt. Was Euch noch fehlt, und da weiss ich auch keinen rechten Weg, ist die Moeglichkeit, die Beseitigungen einzutragen, d.h. die GPX-Datei zu kuerzen. cu, stw -- How much wood would a woodchucker chuck, if a woodchucker could chuck wood? ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Am Montag, den 17.08.2009, 11:31 +0200 schrieb Steffen Wolf: Was Euch noch fehlt, und da weiss ich auch keinen rechten Weg, ist die Moeglichkeit, die Beseitigungen einzutragen, d.h. die GPX-Datei zu kuerzen. Ich denke, es reicht, wenn Du die Generierung der Datei automatisieren kannst und dann tagesaktuell hältst. Für diejenigen, die die Fehler bearbeiten und JOSM verwenden, gibt es ein schönes Plugin, welches GPX-Dateien bearbeiten kann. Gruß Andre ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
On Montag, 17. August 2009, Andre Hinrichs wrote: Am Montag, den 17.08.2009, 11:31 +0200 schrieb Steffen Wolf: Was Euch noch fehlt, und da weiss ich auch keinen rechten Weg, ist die Moeglichkeit, die Beseitigungen einzutragen, d.h. die GPX-Datei zu kuerzen. Nicht notwendig. Ich denke, es reicht, wenn Du die Generierung der Datei automatisieren kannst und dann tagesaktuell hältst. Hoffentlich tauchen die Fehler nicht in so großer Zahl auf, daß das notwendig wird. Einmal im Monat ein Update würde IMHO reichen. Für diejenigen, die die Fehler bearbeiten und JOSM verwenden, gibt es ein schönes Plugin, welches GPX-Dateien bearbeiten kann. Dieses Plugin habe ich auch verwendet. Zusätzlich habe ich immer die Grenzrelation eines Landkreises eingeblendet, sodaß ich immer einen kleineren Rahmen um ein Teilgebiet hatte. Grüße Werner ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Hallo Steffen, On Dienstag, 11. August 2009, Steffen Wolf wrote: Ich bereite mal eine GPX-Datei fuer ganz Deutschland vor, mit Wegen mit mehr als 4 gemeinsamen Knoten. Damit koennte man in JOSM schnell die Fehler entfernen. Ich halt mich aber lieber mit Aenderungen mangels Ortskenntnis zurueck. http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx Ich bin die Fehler in Baden-Württemberg durchgegangen und habe die meisten auch behoben. Fehler bei denen Ortskenntnis erforderlich ist habe ich nicht korrigiert. Besteht die Möglichkeit nur die Punkte in das GPX-File aufzunehmen, die an den doppelten Wegen beteiligt sind? Ich musste bei manchen Wegen ein Weilchen suchen, bis ich die Doppelung gefunden hatte. Beispiel: Weg1: abcdefghijklmnopq Weg2: abc Weg3: mno Im GPX-File sollten nur die Wegpunkte abc und mno auftauchen. Grüsse Werner (werner2101) http://www.openstreetmap.org/user/werner2101/edits ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Steffen Wolf schrieb: Hi Andre Hinrichs, Ich bereite mal eine GPX-Datei fuer ganz Deutschland vor, mit Wegen mit mehr als 4 gemeinsamen Knoten. Damit koennte man in JOSM schnell die Fehler entfernen. Ich halt mich aber lieber mit Aenderungen mangels Ortskenntnis zurueck. http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx oder http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx.bz2 Ergab 1526 ueberlappende Wege, 3.1 MB, gepackt 347 kB. Wird die Datei in Zukunft regelmäßig aktualisiert, oder ist der Aufwand dafür zu hoch? Aufwand ist ueberschaubar. Ist alles skriptbar, braucht aber Zeit. Vier Minuten Germanien von der Geofabrik laden, gut zehn Minuten auspacken, nochmal soviel zum Einlesen in mein Skript, dann eine Minute Analyse. Ich koennte irgendwelche taeglichen Diffs einspielen, um die Downloadmenge zu verringern. Und ich koennte eine bz2-xml-Einleseroutine fuer das C-Programm gebrauchen. Am einfachsten ist es aber, wenn ich eine Vorauswahl nach Bundesland durchfuehre. Lange Rede, kurzer Sinn: Ich lass es mal eine Weile laufen. Gerade aktualisiert: 1471 Ueberlappungen, 3.0 MB, gepackt 336 kB. URL geaendert (Verzeichnis osm): http://www.unix-ag.uni-kl.de/~stw/osm/germany-5.gpx oder http://www.unix-ag.uni-kl.de/~stw/osm/germany-5.gpx.bz2 Viel Spass damit, stw Hi ich mach das immer mit bzip2 über die pipe: bunzip2 planet.osm.bz2 | some-tool some-tool bekommt nun auf stdin den rohen xml-stream, dei platte wird nicht belegt und auch der ram-verbrauch hält sich in grenzen. so kann man problemlos auf nem home-pc auch ein planet-dump verarbeiten. man sogar das downloaden inlinen: wget -qO - http://download.geofabrik.de/osm/europe/germany/rheinland-pfalz.osm.bz2 | bunzip2 | less wobei less natürlich durch dein tool zu ersetzen ist. Peter ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Hi Peter Körner, Steffen Wolf schrieb: Aufwand ist ueberschaubar. Ist alles skriptbar, braucht aber Zeit. Vier Minuten Germanien von der Geofabrik laden, gut zehn Minuten auspacken, nochmal soviel zum Einlesen in mein Skript, dann eine Minute Analyse. ich mach das immer mit bzip2 über die pipe: bunzip2 planet.osm.bz2 | some-tool Ja, so aehnlich mach ich es auch. bzcat germany.osm.bz2 | script.pl Mit Perl ziehe ich die IDs der Wege und Knoten aus dem XML-Strom. Dabei verbraucht bzcat etwa 6min CPU, Perl 14min. Es schreibt dann auch gut 700MB ints auf die Platte, das koennte ich sparen. Ich hab letztens den Code mal auf dieselbe Seite gelegt. Anregungen willkommen. man sogar das downloaden inlinen: wget -qO - http://download.geofabrik.de/osm/europe/germany/rheinland-pfalz.osm.bz2 | bunzip2 | less Hey, das ist lustig! Da ich aber die OSM-Dateien noch fuer die Verwandlung ins Garminformat brauche, werd ich's wohl erstmal nicht so machen. Das hier gaebe wirklichen Gewinn: Ich koennte irgendwelche taeglichen Diffs einspielen, um die Downloadmenge zu verringern. Und ich koennte eine bz2-xml-Einleseroutine fuer das C-Programm gebrauchen. Ich kann ja mal was zurechthacken, bislang sind naemlich die OSM-Dateien vorhersehbar eingerueckt. Damit koennte ich an den entsprechenden Stellen nach node oder way gucken, ohne das ganze XML parsen zu muessen. Lesbarer wird der Code dadurch aber nicht. cu, stw -- gibt es für Linux ein Textverarbeitungsprogramm, welches Dateien so abspeichert, daß man sie auch mit Windows Word bearbeiten kann? /dev/urandom sollte den gewünschten Effekt haben. [Robin Socha in de.comp.os.linux.misc] ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Steffen Wolf schrieb: Ich koennte irgendwelche taeglichen Diffs einspielen, um die Downloadmenge zu verringern. Und ich koennte eine bz2-xml-Einleseroutine fuer das C-Programm gebrauchen. Ich kann ja mal was zurechthacken, bislang sind naemlich die OSM-Dateien vorhersehbar eingerueckt. Damit koennte ich an den entsprechenden Stellen nach node oder way gucken, ohne das ganze XML parsen zu muessen. Lesbarer wird der Code dadurch aber nicht. Wenn du wirklich tägliche diffs willst, setz dir eine postgresql-datenbank auf und spiele die da mit osmosis ein. s. http://wiki.openstreetmap.org/wiki/DE:Mapnik Peter ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Hi Andre Hinrichs, Ich bereite mal eine GPX-Datei fuer ganz Deutschland vor, mit Wegen mit mehr als 4 gemeinsamen Knoten. Damit koennte man in JOSM schnell die Fehler entfernen. Ich halt mich aber lieber mit Aenderungen mangels Ortskenntnis zurueck. http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx oder http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx.bz2 Ergab 1526 ueberlappende Wege, 3.1 MB, gepackt 347 kB. Wird die Datei in Zukunft regelmäßig aktualisiert, oder ist der Aufwand dafür zu hoch? Aufwand ist ueberschaubar. Ist alles skriptbar, braucht aber Zeit. Vier Minuten Germanien von der Geofabrik laden, gut zehn Minuten auspacken, nochmal soviel zum Einlesen in mein Skript, dann eine Minute Analyse. Ich koennte irgendwelche taeglichen Diffs einspielen, um die Downloadmenge zu verringern. Und ich koennte eine bz2-xml-Einleseroutine fuer das C-Programm gebrauchen. Am einfachsten ist es aber, wenn ich eine Vorauswahl nach Bundesland durchfuehre. Lange Rede, kurzer Sinn: Ich lass es mal eine Weile laufen. Gerade aktualisiert: 1471 Ueberlappungen, 3.0 MB, gepackt 336 kB. URL geaendert (Verzeichnis osm): http://www.unix-ag.uni-kl.de/~stw/osm/germany-5.gpx oder http://www.unix-ag.uni-kl.de/~stw/osm/germany-5.gpx.bz2 Viel Spass damit, stw -- Eine mir bekannte Diakonisse pflegte uberall, wo sie eintrat, erstmal ein ellenlanges Kirchenlied gesanglich vorzutragen. Das wurde immer schlimmer und fuehrte zu ihrer Unterbringung in der Geschlossenen - FR Dabei gaebe es so schoene kurze. [Florian Ritter und Andreas Höfeld, desd] ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Hi Gary68, [doppelte Wege] ich werde nun mal in hessen aufräumen und die sache im auge behalten. Ich hab mir hier schon oefter mal Rheinland-Pfalz vorgenommen. Ich such aber nicht nur nach Wegdoppelungen, sondern nach allen Wegen, die mehr als zwei Knoten gemeinsam haben. Damit finde ich auch sowas: Weg 1: a - b - c - d - e Weg 2: a - b - c Weg 3: c - d - e Hab leider nicht geguckt, welche Editoren dafuer verantwortlich waren. Oft ist es aber auch legitim, etwa eine Treppe mit schlangenlinienfoermiger Auffahrt fuer Radler o.so, die die Treppe fuenfmal kreuzt. Wenn ich nach Wegen mit mehr als 10 gemeinsamen Knoten suche, bekomme ich eigentlich nur noch wirklich falsches. Ich bereite mal eine GPX-Datei fuer ganz Deutschland vor, mit Wegen mit mehr als 4 gemeinsamen Knoten. Damit koennte man in JOSM schnell die Fehler entfernen. Ich halt mich aber lieber mit Aenderungen mangels Ortskenntnis zurueck. http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx oder http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx.bz2 Ergab 1526 ueberlappende Wege, 3.1 MB, gepackt 347 kB. Viel Spass damit, stw -- Von zwei Sachen, die nicht zusammenpassen, alle beide zu glauben, mit der Idee im Kopf, es gebe irgendwo noch eine dritte, die sie vereine - das ist Gläubigkeit. [Umberto Eco] ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Am Dienstag, den 11.08.2009, 11:10 +0200 schrieb Steffen Wolf: Hi Gary68, [doppelte Wege] ich werde nun mal in hessen aufräumen und die sache im auge behalten. Ich hab mir hier schon oefter mal Rheinland-Pfalz vorgenommen. Ich such aber nicht nur nach Wegdoppelungen, sondern nach allen Wegen, die mehr als zwei Knoten gemeinsam haben. Damit finde ich auch sowas: Weg 1: a - b - c - d - e Weg 2: a - b - c Weg 3: c - d - e Hab leider nicht geguckt, welche Editoren dafuer verantwortlich waren. Oft ist es aber auch legitim, etwa eine Treppe mit schlangenlinienfoermiger Auffahrt fuer Radler o.so, die die Treppe fuenfmal kreuzt. Wenn ich nach Wegen mit mehr als 10 gemeinsamen Knoten suche, bekomme ich eigentlich nur noch wirklich falsches. Ich bereite mal eine GPX-Datei fuer ganz Deutschland vor, mit Wegen mit mehr als 4 gemeinsamen Knoten. Damit koennte man in JOSM schnell die Fehler entfernen. Ich halt mich aber lieber mit Aenderungen mangels Ortskenntnis zurueck. http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx oder http://www.unix-ag.uni-kl.de/~stw/germany-5.gpx.bz2 Ergab 1526 ueberlappende Wege, 3.1 MB, gepackt 347 kB. Viel Spass damit, Vielen Dank! Habe hier in Niedersachsen auch damit angefangen, diese Fehler zu fixen. Wird die Datei in Zukunft regelmäßig aktualisiert, oder ist der Aufwand dafür zu hoch? Gruß Andre signature.asc Description: Dies ist ein digital signierter Nachrichtenteil ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
On Tue, 11 Aug 2009, Steffen Wolf wrote: Damit finde ich auch sowas: Weg 1: a - b - c - d - e Weg 2: a - b - c Weg 3: c - d - e Hab leider nicht geguckt, welche Editoren dafuer verantwortlich waren. Ich denke das haben sowohl Potlatch als auch JOSM produziert. Wenn während des Datenbankuploads etwas schiefgegangen ist, dann kann es sein das beide neuen Wegteile einer Teilung schon hochgeladen wurden, dass Löschen es aber nicht mehr geschaft hat. Mit der neuen API und dem Hochladen in einem Rutsch sollte so etwas weniger werden. Ciao -- http://www.dstoecker.eu/ (PGP key available)___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
Re: [Talk-de] Doppelte Wege - Untersuchung
Am 11. August 2009 14:55 schrieb Dirk Stöcker openstreet...@dstoecker.de: On Tue, 11 Aug 2009, Steffen Wolf wrote: Damit finde ich auch sowas: Weg 1: a - b - c - d - e Weg 2: a - b - c Weg 3: c - d - e Hab leider nicht geguckt, welche Editoren dafuer verantwortlich waren. Ich denke das haben sowohl Potlatch als auch JOSM produziert. Wenn während des Datenbankuploads etwas schiefgegangen ist, dann kann es sein das beide neuen Wegteile einer Teilung schon hochgeladen wurden, dass Löschen es aber nicht mehr geschaft hat. Mit der neuen API und dem Hochladen in einem Rutsch sollte so etwas weniger werden. diese Wege tauchen in Rom auch neuerdings auf, Grund könnte m.E. sein, dass man in bestimmten Editoren schon zeichnen kann, bevor alle Daten geladen sind. Aufgrund von Netzwerk-problem (vermute ich) kommt es gelegentlich nämlich auch vor, dass überhaupt nicht alle Daten geladen werden (innerhalb von einigen Minuten). Gruß Martin ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
[Talk-de] Doppelte Wege - Untersuchung
hi, habe eben mal einige doppelte wege untersucht: hessen 1 286019993595340410 min nach last edit, dupe mit potlatch erzeugt 2 3503072435030725selbe zeit, selbes change set, potlatch 1.0 3 3815303438176778both created with potlatch 1.1a 4 3784942837849533both created with potlatch 1.1a 5 119033485008both created with Merkaartor 0.13 6 4229204 22887564all edited in 2008, maybe user error... 7 2364288730880257dup created by Potlatch 0.8a, seems like user error 8 2460221035953403dup created by Merkaartor 0.13, seems like user error 9 2488078724931986created with 3 days difference, editor unknown, in 2008 10 24880787249520454 days difference in creation date, same user... ich denke, man kann nicht sagen, es läge an einem bestimmten editor, obwohl bei manchen versionen evtl. mutmaßungen angesagt sind. aber es sind eben einige versionen und programme, ok josm war nun gerade nicht dabei... theoretisch ist auch denkbar, dass die api nicht alle wege geliefert hat und der user dann einfach den fehlenden nachgezeichnet hat... ich werde nun mal in hessen aufräumen und die sache im auge behalten. ciao gerhard gary68 ___ Talk-de mailing list Talk-de@openstreetmap.org http://lists.openstreetmap.org/listinfo/talk-de
