source: subversion/applications/utils/export/osm2pgsql/osm2pgsql.c @ 14843

Last change on this file since 14843 was 14843, checked in by tomhughes, 11 years ago

Initial work on generating a gazetteer database.

  • Property svn:keywords set to Rev
File size: 25.0 KB
Line 
1/*
2#-----------------------------------------------------------------------------
3# osm2pgsql - converts planet.osm file into PostgreSQL
4# compatible output suitable to be rendered by mapnik
5# Use: osm2pgsql planet.osm.bz2
6#-----------------------------------------------------------------------------
7# Original Python implementation by Artem Pavlenko
8# Re-implementation by Jon Burgess, Copyright 2006
9#
10# This program is free software; you can redistribute it and/or
11# modify it under the terms of the GNU General Public License
12# as published by the Free Software Foundation; either version 2
13# of the License, or (at your option) any later version.
14#
15# This program is distributed in the hope that it will be useful,
16# but WITHOUT ANY WARRANTY; without even the implied warranty of
17# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18# GNU General Public License for more details.
19#
20# You should have received a copy of the GNU General Public License
21# along with this program; if not, write to the Free Software
22# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02110-1301, USA.
23#-----------------------------------------------------------------------------
24*/
25
26#define _GNU_SOURCE
27#include <stdio.h>
28#include <unistd.h>
29#include <stdlib.h>
30#include <string.h>
31#include <assert.h>
32#include <getopt.h>
33#include <libgen.h>
34
35#include <libpq-fe.h>
36
37#include <libxml/xmlstring.h>
38#include <libxml/xmlreader.h>
39
40#include "osmtypes.h"
41#include "build_geometry.h"
42#include "keyvals.h"
43#include "middle-pgsql.h"
44#include "middle-ram.h"
45#include "output-pgsql.h"
46#include "output-gazetteer.h"
47#include "output-null.h"
48#include "sanitizer.h"
49#include "reprojection.h"
50#include "text-tree.h"
51#include "input.h"
52#include "sprompt.h"
53
54typedef enum { FILETYPE_NONE, FILETYPE_OSM, FILETYPE_OSMCHANGE, FILETYPE_PLANETDIFF } filetypes_t;
55typedef enum { ACTION_NONE, ACTION_CREATE, ACTION_MODIFY, ACTION_DELETE } actions_t;
56
57static int count_node,    max_node;
58static int count_way,     max_way;
59static int count_rel,     max_rel;
60
61struct output_t *out;
62
63/* Since {node,way} elements are not nested we can guarantee the
64   values in an end tag must match those of the corresponding
65   start tag and can therefore be cached.
66*/
67static double node_lon, node_lat;
68static struct keyval tags;
69static int *nds;
70static int nd_count, nd_max;
71static struct member *members;
72static int member_count, member_max;
73static int osm_id;
74
75#define INIT_MAX_MEMBERS 64
76#define INIT_MAX_NODES  4096
77
78int verbose;
79static void realloc_nodes();
80static void realloc_members();
81
82// Bounding box to filter imported data
83const char *bbox = NULL;
84static double minlon, minlat, maxlon, maxlat;
85
86static void printStatus(void)
87{
88    fprintf(stderr, "\rProcessing: Node(%dk) Way(%dk) Relation(%dk)",
89            count_node/1000, count_way/1000, count_rel/1000);
90}
91
92static int parse_bbox(void)
93{
94    int n;
95
96    if (!bbox)
97        return 0;
98
99    n = sscanf(bbox, "%lf,%lf,%lf,%lf", &minlon, &minlat, &maxlon, &maxlat);
100    if (n != 4) {
101        fprintf(stderr, "Bounding box must be specified like: minlon,minlat,maxlon,maxlat\n");
102        return 1;
103    }
104    if (maxlon <= minlon) {
105        fprintf(stderr, "Bounding box failed due to maxlon <= minlon\n");
106        return 1;
107    }
108    if (maxlat <= minlat) {
109        fprintf(stderr, "Bounding box failed due to maxlat <= minlat\n");
110        return 1;
111    }
112    printf("Applying Bounding box: %f,%f to %f,%f\n", minlon,minlat,maxlon,maxlat);
113    return 0;
114}
115
116static int node_wanted(double lat, double lon)
117{
118    if (!bbox)
119        return 1;
120
121    if (lat < minlat || lat > maxlat)
122        return 0;
123    if (lon < minlon || lon > maxlon)
124        return 0;
125    return 1;
126}
127
128static filetypes_t filetype = FILETYPE_NONE;
129static actions_t action = ACTION_NONE;
130
131/* Parses the action="foo" tags in JOSM change files. Obvisouly not useful from osmChange files */
132static actions_t ParseAction( xmlTextReaderPtr reader )
133{
134    if( filetype == FILETYPE_OSMCHANGE || filetype == FILETYPE_PLANETDIFF )
135        return action;
136    actions_t new_action = ACTION_NONE;
137    xmlChar *action = xmlTextReaderGetAttribute( reader, BAD_CAST "action" );
138    if( action == NULL )
139        new_action = ACTION_CREATE;
140    else if( strcmp((char *)action, "modify") == 0 )
141        new_action = ACTION_MODIFY;
142    else if( strcmp((char *)action, "delete") == 0 )
143        new_action = ACTION_DELETE;
144    else
145    {
146        fprintf( stderr, "Unknown value for action: %s\n", (char*)action );
147        exit_nicely();
148    }
149    return new_action;
150}
151
152void StartElement(xmlTextReaderPtr reader, const xmlChar *name)
153{
154    xmlChar *xid, *xlat, *xlon, *xk, *xv, *xrole, *xtype;
155    char *k;
156
157    if (filetype == FILETYPE_NONE)
158    {
159        if (xmlStrEqual(name, BAD_CAST "osm"))
160        {
161            filetype = FILETYPE_OSM;
162            action = ACTION_CREATE;
163        }
164        else if (xmlStrEqual(name, BAD_CAST "osmChange"))
165        {
166            filetype = FILETYPE_OSMCHANGE;
167            action = ACTION_NONE;
168        }
169        else if (xmlStrEqual(name, BAD_CAST "planetdiff"))
170        {
171            filetype = FILETYPE_PLANETDIFF;
172            action = ACTION_NONE;
173        }
174        else
175        {
176            fprintf( stderr, "Unknown XML document type: %s\n", name );
177            exit_nicely();
178        }
179        return;
180    }
181   
182    if (xmlStrEqual(name, BAD_CAST "node")) {
183        xid  = xmlTextReaderGetAttribute(reader, BAD_CAST "id");
184        xlon = xmlTextReaderGetAttribute(reader, BAD_CAST "lon");
185        xlat = xmlTextReaderGetAttribute(reader, BAD_CAST "lat");
186        assert(xid); assert(xlon); assert(xlat);
187
188        osm_id  = strtol((char *)xid, NULL, 10);
189        node_lon = strtod((char *)xlon, NULL);
190        node_lat = strtod((char *)xlat, NULL);
191        action = ParseAction( reader );
192
193        if (osm_id > max_node)
194            max_node = osm_id;
195
196        count_node++;
197        if (count_node%10000 == 0)
198            printStatus();
199
200        xmlFree(xid);
201        xmlFree(xlon);
202        xmlFree(xlat);
203    } else if (xmlStrEqual(name, BAD_CAST "tag")) {
204        xk = xmlTextReaderGetAttribute(reader, BAD_CAST "k");
205        assert(xk);
206
207        /* 'created_by' and 'source' are common and not interesting to mapnik renderer */
208        if (strcmp((char *)xk, "created_by") && strcmp((char *)xk, "source")) {
209            char *p;
210            xv = xmlTextReaderGetAttribute(reader, BAD_CAST "v");
211            assert(xv);
212            k  = (char *)xmlStrdup(xk);
213            while ((p = strchr(k, ' ')))
214                *p = '_';
215
216            addItem(&tags, k, (char *)xv, 0);
217            xmlFree(k);
218            xmlFree(xv);
219        }
220        xmlFree(xk);
221    } else if (xmlStrEqual(name, BAD_CAST "way")) {
222        xid  = xmlTextReaderGetAttribute(reader, BAD_CAST "id");
223        assert(xid);
224        osm_id   = strtol((char *)xid, NULL, 10);
225        action = ParseAction( reader );
226
227        if (osm_id > max_way)
228            max_way = osm_id;
229
230        count_way++;
231        if (count_way%1000 == 0)
232            printStatus();
233
234        nd_count = 0;
235        xmlFree(xid);
236    } else if (xmlStrEqual(name, BAD_CAST "nd")) {
237        xid  = xmlTextReaderGetAttribute(reader, BAD_CAST "ref");
238        assert(xid);
239
240        nds[nd_count++] = strtol( (char *)xid, NULL, 10 );
241
242        if( nd_count >= nd_max )
243          realloc_nodes();
244        xmlFree(xid);
245    } else if (xmlStrEqual(name, BAD_CAST "relation")) {
246        xid  = xmlTextReaderGetAttribute(reader, BAD_CAST "id");
247        assert(xid);
248        osm_id   = strtol((char *)xid, NULL, 10);
249        action = ParseAction( reader );
250
251        if (osm_id > max_rel)
252            max_rel = osm_id;
253
254        count_rel++;
255        if (count_rel%1000 == 0)
256            printStatus();
257
258        member_count = 0;
259        xmlFree(xid);
260    } else if (xmlStrEqual(name, BAD_CAST "member")) {
261        xrole = xmlTextReaderGetAttribute(reader, BAD_CAST "role");
262        assert(xrole);
263
264        xtype = xmlTextReaderGetAttribute(reader, BAD_CAST "type");
265        assert(xtype);
266
267        xid  = xmlTextReaderGetAttribute(reader, BAD_CAST "ref");
268        assert(xid);
269
270        members[member_count].id   = strtol( (char *)xid, NULL, 0 );
271        members[member_count].role = strdup( (char *)xrole );
272       
273        /* Currently we are only interested in 'way' members since these form polygons with holes */
274        if (xmlStrEqual(xtype, BAD_CAST "way"))
275            members[member_count].type = OSMTYPE_WAY;
276        if (xmlStrEqual(xtype, BAD_CAST "node"))
277            members[member_count].type = OSMTYPE_NODE;
278        if (xmlStrEqual(xtype, BAD_CAST "relation"))
279            members[member_count].type = OSMTYPE_RELATION;
280        member_count++;
281
282        if( member_count >= member_max )
283          realloc_members();
284        xmlFree(xid);
285        xmlFree(xrole);
286        xmlFree(xtype);
287    } else if (xmlStrEqual(name, BAD_CAST "add") ||
288               xmlStrEqual(name, BAD_CAST "create")) {
289        action = ACTION_CREATE;
290        action = ACTION_MODIFY; // Turns all creates into modifies, makes it resiliant against inconsistant snapshots.
291    } else if (xmlStrEqual(name, BAD_CAST "modify")) {
292        action = ACTION_MODIFY;
293    } else if (xmlStrEqual(name, BAD_CAST "delete")) {
294        action = ACTION_DELETE;
295    } else if (xmlStrEqual(name, BAD_CAST "bound")) {
296        /* ignore */
297    } else if (xmlStrEqual(name, BAD_CAST "bounds")) {
298        /* ignore */
299    } else {
300        fprintf(stderr, "%s: Unknown element name: %s\n", __FUNCTION__, name);
301    }
302}
303
304static void resetMembers()
305{
306  int i;
307  for(i=0; i<member_count; i++ )
308    free( members[i].role );
309}
310
311void EndElement(const xmlChar *name)
312{
313    if (xmlStrEqual(name, BAD_CAST "node")) {
314        if (node_wanted(node_lat, node_lon)) {
315            reproject(&node_lat, &node_lon);
316            if( action == ACTION_CREATE )
317                out->node_add(osm_id, node_lat, node_lon, &tags);
318            else if( action == ACTION_MODIFY )
319                out->node_modify(osm_id, node_lat, node_lon, &tags);
320            else if( action == ACTION_DELETE )
321                out->node_delete(osm_id);
322            else
323            {
324                fprintf( stderr, "Don't know action for node %d\n", osm_id );
325                exit_nicely();
326            }
327        }
328        resetList(&tags);
329    } else if (xmlStrEqual(name, BAD_CAST "way")) {
330        if( action == ACTION_CREATE )
331            out->way_add(osm_id, nds, nd_count, &tags );
332        else if( action == ACTION_MODIFY )
333            out->way_modify(osm_id, nds, nd_count, &tags );
334        else if( action == ACTION_DELETE )
335            out->way_delete(osm_id);
336        else
337        {
338            fprintf( stderr, "Don't know action for way %d\n", osm_id );
339            exit_nicely();
340        }
341        resetList(&tags);
342    } else if (xmlStrEqual(name, BAD_CAST "relation")) {
343        if( action == ACTION_CREATE )
344            out->relation_add(osm_id, members, member_count, &tags);
345        else if( action == ACTION_MODIFY )
346            out->relation_modify(osm_id, members, member_count, &tags);
347        else if( action == ACTION_DELETE )
348            out->relation_delete(osm_id);
349        else
350        {
351            fprintf( stderr, "Don't know action for relation %d\n", osm_id );
352            exit_nicely();
353        }
354        resetList(&tags);
355        resetMembers();
356    } else if (xmlStrEqual(name, BAD_CAST "tag")) {
357        /* ignore */
358    } else if (xmlStrEqual(name, BAD_CAST "nd")) {
359        /* ignore */
360    } else if (xmlStrEqual(name, BAD_CAST "member")) {
361        /* ignore */
362    } else if (xmlStrEqual(name, BAD_CAST "osm")) {
363        printStatus();
364        filetype = FILETYPE_NONE;
365    } else if (xmlStrEqual(name, BAD_CAST "osmChange")) {
366        printStatus();
367        filetype = FILETYPE_NONE;
368    } else if (xmlStrEqual(name, BAD_CAST "planetdiff")) {
369        printStatus();
370        filetype = FILETYPE_NONE;
371    } else if (xmlStrEqual(name, BAD_CAST "bound")) {
372        /* ignore */
373    } else if (xmlStrEqual(name, BAD_CAST "bounds")) {
374        /* ignore */
375    } else if (xmlStrEqual(name, BAD_CAST "add")) {
376        action = ACTION_NONE;
377    } else if (xmlStrEqual(name, BAD_CAST "create")) {
378        action = ACTION_NONE;
379    } else if (xmlStrEqual(name, BAD_CAST "modify")) {
380        action = ACTION_NONE;
381    } else if (xmlStrEqual(name, BAD_CAST "delete")) {
382        action = ACTION_NONE;
383    } else {
384        fprintf(stderr, "%s: Unknown element name: %s\n", __FUNCTION__, name);
385    }
386}
387
388static void processNode(xmlTextReaderPtr reader) {
389    xmlChar *name;
390    name = xmlTextReaderName(reader);
391    if (name == NULL)
392        name = xmlStrdup(BAD_CAST "--");
393       
394    switch(xmlTextReaderNodeType(reader)) {
395        case XML_READER_TYPE_ELEMENT:
396            StartElement(reader, name);
397            if (xmlTextReaderIsEmptyElement(reader))
398                EndElement(name); /* No end_element for self closing tags! */
399            break;
400        case XML_READER_TYPE_END_ELEMENT:
401            EndElement(name);
402            break;
403        case XML_READER_TYPE_SIGNIFICANT_WHITESPACE:
404            /* Ignore */
405            break;
406        default:
407            fprintf(stderr, "Unknown node type %d\n", xmlTextReaderNodeType(reader));
408            break;
409    }
410
411    xmlFree(name);
412}
413
414static int streamFile(char *filename, int sanitize) {
415    xmlTextReaderPtr reader;
416    int ret = 0;
417
418    if (sanitize)
419        reader = sanitizerOpen(filename);
420    else
421        reader = inputUTF8(filename);
422
423    if (reader != NULL) {
424        ret = xmlTextReaderRead(reader);
425        while (ret == 1) {
426            processNode(reader);
427            ret = xmlTextReaderRead(reader);
428        }
429
430        if (ret != 0) {
431            fprintf(stderr, "%s : failed to parse\n", filename);
432            return ret;
433        }
434
435        xmlFreeTextReader(reader);
436    } else {
437        fprintf(stderr, "Unable to open %s\n", filename);
438        return 1;
439    }
440    return 0;
441}
442
443void exit_nicely(void)
444{
445    fprintf(stderr, "Error occurred, cleaning up\n");
446    out->cleanup();
447    exit(1);
448}
449 
450static void short_usage(char *arg0)
451{
452    const char *name = basename(arg0);
453
454    fprintf(stderr, "Usage error. For further information see:\n");
455    fprintf(stderr, "\t%s -h|--help\n", name);
456}
457
458static void long_usage(char *arg0)
459{
460    int i;
461    const char *name = basename(arg0);
462
463    fprintf(stderr, "Usage:\n");
464    fprintf(stderr, "\t%s [options] planet.osm\n", name);
465    fprintf(stderr, "\t%s [options] planet.osm.{gz,bz2}\n", name);
466    fprintf(stderr, "\t%s [options] file1.osm file2.osm file3.osm\n", name);
467    fprintf(stderr, "\nThis will import the data from the OSM file(s) into a PostgreSQL database\n");
468    fprintf(stderr, "suitable for use by the Mapnik renderer\n");
469    fprintf(stderr, "\nOptions:\n");
470    fprintf(stderr, "   -a|--append\t\tAdd the OSM file into the database without removing\n");
471    fprintf(stderr, "              \t\texisting data.\n");
472    fprintf(stderr, "   -b|--bbox\t\tApply a bounding box filter on the imported data\n");
473    fprintf(stderr, "              \t\tMust be specified as: minlon,minlat,maxlon,maxlat\n");
474    fprintf(stderr, "              \t\te.g. --bbox -0.5,51.25,0.5,51.75\n");
475    fprintf(stderr, "   -c|--create\t\tRemove existing data from the database. This is the \n");
476    fprintf(stderr, "              \t\tdefault if --append is not specified.\n");
477    fprintf(stderr, "   -d|--database\tThe name of the PostgreSQL database to connect\n");
478    fprintf(stderr, "                \tto (default: gis).\n");
479    fprintf(stderr, "   -l|--latlong\t\tStore data in degrees of latitude & longitude.\n");
480    fprintf(stderr, "   -m|--merc\t\tStore data in proper spherical mercator (default)\n");
481    fprintf(stderr, "   -M|--oldmerc\t\tStore data in the legacy OSM mercator format\n");
482    fprintf(stderr, "   -E|--proj num\tUse projection EPSG:num\n");
483    fprintf(stderr, "   -u|--utf8-sanitize\tRepair bad UTF8 input data (present in planet\n");
484    fprintf(stderr, "                \tdumps prior to August 2007). Adds about 10%% overhead.\n");
485    fprintf(stderr, "   -p|--prefix\t\tPrefix for table names (default planet_osm)\n");
486    fprintf(stderr, "   -s|--slim\t\tStore temporary data in the database. This greatly\n");
487    fprintf(stderr, "            \t\treduces the RAM usage but is much slower.\n");
488    fprintf(stderr, "   -S|--style\t\tLocation of the style file. Defaults to ./default.style\n");
489    fprintf(stderr, "   -C|--cache\t\tOnly for slim mode: Use upto this many MB for caching nodes\n");
490    fprintf(stderr, "             \t\tDefault is 800\n");
491    fprintf(stderr, "   -U|--username\tPostgresql user name.\n");
492    fprintf(stderr, "   -W|--password\tForce password prompt.\n");
493    fprintf(stderr, "   -H|--host\t\tDatabase server hostname or socket location.\n");
494    fprintf(stderr, "   -P|--port\t\tDatabase server port.\n");
495    fprintf(stderr, "   -e|--expire-tiles [min_zoom-]max_zoom\tCreate a tile expiry list.\n");
496    fprintf(stderr, "   -o|--expire-output filename\tOutput filename for expired tiles list.\n");
497    fprintf(stderr, "   -O|--output\t\tOutput backend.\n");
498    fprintf(stderr, "              \t\tpgsql - Output to a PostGIS database. (default)\n");
499    fprintf(stderr, "              \t\tnull  - No output. Useful for testing.\n");
500    fprintf(stderr, "   -h|--help\t\tHelp information.\n");
501    fprintf(stderr, "   -v|--verbose\t\tVerbose output.\n");
502    fprintf(stderr, "\n");
503    if(!verbose)
504    {
505        fprintf(stderr, "Add -v to display supported projections.\n");
506        fprintf(stderr, "Use -E to access any espg projections (usually in /usr/share/proj/epsg)\n" );
507    }
508    else
509    {
510        fprintf(stderr, "Supported projections:\n" );
511        for(i=0; i<PROJ_COUNT; i++ )
512        {
513            fprintf( stderr, "%-20s(%2s) SRS:%6d %s\n", 
514                    Projection_Info[i].descr, Projection_Info[i].option, Projection_Info[i].srs, Projection_Info[i].proj4text);
515        }
516    }
517}
518
519const char *build_conninfo(const char *db, const char *username, const char *password, const char *host, const char *port)
520{
521    static char conninfo[1024];
522
523    conninfo[0]='\0';
524    strcat(conninfo, "dbname='");
525    strcat(conninfo, db);
526    strcat(conninfo, "'");
527
528    if (username) {
529        strcat(conninfo, " user='");
530        strcat(conninfo, username);
531        strcat(conninfo, "'");
532    }
533    if (password) {
534        strcat(conninfo, " password='");
535        strcat(conninfo, password);
536        strcat(conninfo, "'");
537    }
538    if (host) {
539        strcat(conninfo, " host='");
540        strcat(conninfo, host);
541        strcat(conninfo, "'");
542    }
543    if (port) {
544        strcat(conninfo, " port='");
545        strcat(conninfo, port);
546        strcat(conninfo, "'");
547    }
548
549    return conninfo;
550}
551
552static void realloc_nodes()
553{
554  if( nd_max == 0 )
555    nd_max = INIT_MAX_NODES;
556  else
557    nd_max <<= 1;
558   
559  nds = realloc( nds, nd_max * sizeof( nds[0] ) );
560  if( !nds )
561  {
562    fprintf( stderr, "Failed to expand node list to %d\n", nd_max );
563    exit_nicely();
564  }
565}
566
567static void realloc_members()
568{
569  if( member_max == 0 )
570    member_max = INIT_MAX_NODES;
571  else
572    member_max <<= 1;
573   
574  members = realloc( members, member_max * sizeof( members[0] ) );
575  if( !members )
576  {
577    fprintf( stderr, "Failed to expand member list to %d\n", member_max );
578    exit_nicely();
579  }
580}
581
582int main(int argc, char *argv[])
583{
584    int append=0;
585    int create=0;
586    int slim=0;
587    int sanitize=0;
588    int pass_prompt=0;
589    int projection = PROJ_SPHERE_MERC;
590    int expire_tiles_zoom = -1;
591    int expire_tiles_zoom_min = -1;
592    const char *expire_tiles_filename = "dirty_tiles";
593    const char *db = "gis";
594    const char *username=NULL;
595    const char *host=NULL;
596    const char *password=NULL;
597    const char *port = "5432";
598    const char *conninfo = NULL;
599    const char *prefix = "planet_osm";
600    const char *style = "./default.style";
601    const char *temparg;
602    const char *output_backend = "pgsql";
603    int cache = 800;
604    struct output_options options;
605    PGconn *sql_conn;
606
607    fprintf(stderr, "osm2pgsql SVN version %s\n\n", VERSION);
608
609    while (1) {
610        int c, option_index = 0;
611        static struct option long_options[] = {
612            {"append",   0, 0, 'a'},
613            {"bbox",     1, 0, 'b'},
614            {"create",   0, 0, 'c'},
615            {"database", 1, 0, 'd'},
616            {"latlong",  0, 0, 'l'},
617            {"verbose",  0, 0, 'v'},
618            {"slim",     0, 0, 's'},
619            {"prefix",   1, 0, 'p'},
620            {"proj",     1, 0, 'E'},
621            {"merc",     0, 0, 'm'},
622            {"oldmerc",  0, 0, 'M'},
623            {"utf8-sanitize", 0, 0, 'u'},
624            {"cache",    1, 0, 'C'},
625            {"username", 1, 0, 'U'},
626            {"password", 0, 0, 'W'},
627            {"host",     1, 0, 'H'},
628            {"port",     1, 0, 'P'},
629            {"help",     0, 0, 'h'},
630            {"style",    1, 0, 'S'},
631            {"expire-tiles", 1, 0, 'e'},
632            {"expire-output", 1, 0, 'o'},
633            {"output",   1, 0, 'O'},
634            {0, 0, 0, 0}
635        };
636
637        c = getopt_long (argc, argv, "ab:cd:hlmMp:suvU:WH:P:E:C:S:e:o:O:", long_options, &option_index);
638        if (c == -1)
639            break;
640
641        switch (c) {
642            case 'a': append=1;   break;
643            case 'b': bbox=optarg; break;
644            case 'c': create=1;   break;
645            case 'v': verbose=1;  break;
646            case 's': slim=1;     break;
647            case 'u': sanitize=1; break;
648            case 'l': projection=PROJ_LATLONG;  break;
649            case 'm': projection=PROJ_SPHERE_MERC; break;
650            case 'M': projection=PROJ_MERC; break;
651            case 'E': projection=-atoi(optarg); break;
652            case 'p': prefix=optarg; break;
653            case 'd': db=optarg;  break;
654            case 'C': cache = atoi(optarg); break;
655            case 'U': username=optarg; break;
656            case 'W': pass_prompt=1; break;
657            case 'H': host=optarg; break;
658            case 'P': port=optarg; break;
659            case 'S': style=optarg; break;
660            case 'e':
661                expire_tiles_zoom_min = atoi(optarg);
662                temparg = strchr(optarg, '-');
663                if (temparg) expire_tiles_zoom = atoi(temparg + 1);
664                if (expire_tiles_zoom < expire_tiles_zoom_min) expire_tiles_zoom = expire_tiles_zoom_min;
665                break;
666            case 'o': expire_tiles_filename=optarg; break;
667            case 'O': output_backend = optarg; break;
668
669            case 'h':
670                long_usage(argv[0]);
671                exit(EXIT_FAILURE);
672
673            case '?':
674            default:
675                short_usage(argv[0]);
676                exit(EXIT_FAILURE);
677        }
678    }
679
680    if (argc == optind) {  // No non-switch arguments
681        short_usage(argv[0]);
682        exit(EXIT_FAILURE);
683    }
684
685    if (append && create) {
686        fprintf(stderr, "Error: --append and --create options can not be used at the same time!\n");
687        exit(EXIT_FAILURE);
688    }
689
690    if ((expire_tiles_zoom >= 0) && (projection != PROJ_SPHERE_MERC)) {
691        fprintf(stderr, "Error: --expire-tiles can only be used with spherical mercator projection!\n");
692        exit(EXIT_FAILURE);
693    }
694   
695    if( cache < 0 ) cache = 0;
696
697    if (pass_prompt)
698        password = simple_prompt("Password:", 100, 0);
699
700    conninfo = build_conninfo(db, username, password, host, port);
701    sql_conn = PQconnectdb(conninfo);
702    if (PQstatus(sql_conn) != CONNECTION_OK) {
703        fprintf(stderr, "Connection to database failed: %s\n", PQerrorMessage(sql_conn));
704        exit(EXIT_FAILURE);
705    }
706    PQfinish(sql_conn);
707
708    text_init();
709    initList(&tags);
710
711    count_node = max_node = 0;
712    count_way = max_way = 0;
713    count_rel = max_rel = 0;
714
715    LIBXML_TEST_VERSION
716
717    project_init(projection);
718    fprintf(stderr, "Using projection SRS %d (%s)\n", 
719        project_getprojinfo()->srs, project_getprojinfo()->descr );
720
721    if (parse_bbox())
722        return 1;
723
724    options.conninfo = conninfo;
725    options.prefix = prefix;
726    options.append = append;
727    options.slim = slim;
728    options.projection = project_getprojinfo()->srs;
729    options.scale = (projection==PROJ_LATLONG)?10000000:100;
730    options.mid = slim ? &mid_pgsql : &mid_ram;
731    options.cache = cache;
732    options.style = style;
733    options.expire_tiles_zoom = expire_tiles_zoom;
734    options.expire_tiles_zoom_min = expire_tiles_zoom_min;
735    options.expire_tiles_filename = expire_tiles_filename;
736
737    if (strcmp("pgsql", output_backend) == 0) {
738      out = &out_pgsql;
739    } else if (strcmp("gazetteer", output_backend) == 0) {
740      out = &out_gazetteer;
741    } else if (strcmp("null", output_backend) == 0) {
742      out = &out_null;
743    } else {
744      fprintf(stderr, "Output backend `%s' not recognised. Should be one of [pgsql, null].\n", output_backend);
745      exit(EXIT_FAILURE);
746    }
747
748    out->start(&options);
749
750    realloc_nodes();
751    realloc_members();
752
753    while (optind < argc) {
754        fprintf(stderr, "\nReading in file: %s\n", argv[optind]);
755        if (streamFile(argv[optind], sanitize) != 0)
756            exit_nicely();
757        optind++;
758    }
759
760    xmlCleanupParser();
761    xmlMemoryDump();
762   
763    if (count_node || count_way || count_rel) {
764        fprintf(stderr, "\n");
765        fprintf(stderr, "Node stats: total(%d), max(%d)\n", count_node, max_node);
766        fprintf(stderr, "Way stats: total(%d), max(%d)\n", count_way, max_way);
767        fprintf(stderr, "Relation stats: total(%d), max(%d)\n", count_rel, max_rel);
768    }
769    out->stop();
770   
771    free(nds);
772    free(members);
773
774    project_exit();
775    text_exit();
776    fprintf(stderr, "\n");
777
778    return 0;
779}
Note: See TracBrowser for help on using the repository browser.