source: subversion/applications/utils/mod_tile/gen_tile.cpp @ 6894

Last change on this file since 6894 was 6894, checked in by jonb, 12 years ago

mod_tile: Update to a new meta tile scheme which stores all sub-tiles in a single .meta file. The PNG files are extracted from this on the fly by mod_tile. This is more efficient in disk space and inode usage

File size: 7.4 KB
Line 
1#include <mapnik/map.hpp>
2#include <mapnik/datasource_cache.hpp>
3#include <mapnik/agg_renderer.hpp>
4#include <mapnik/filter_factory.hpp>
5#include <mapnik/color_factory.hpp>
6#include <mapnik/image_util.hpp>
7#include <mapnik/load_map.hpp>
8#include <mapnik/image_util.hpp>
9
10#include <iostream>
11#include <sys/stat.h>
12#include <sys/types.h>
13#include <dirent.h>
14#include <unistd.h>
15#include <pthread.h>
16
17#include "gen_tile.h"
18#include "protocol.h"
19#include "render_config.h"
20#include "dir_utils.h"
21#include "store.h"
22
23using namespace mapnik;
24
25#define DEG_TO_RAD (M_PIl/180)
26#define RAD_TO_DEG (180/M_PIl)
27
28#ifdef METATILE
29#define RENDER_SIZE (256 * (METATILE + 1))
30#else
31#define RENDER_SIZE (512)
32#endif
33
34pthread_mutex_t map_lock;
35
36
37static const int minZoom = 0;
38static const int maxZoom = 18;
39//static const char *mapfile = "/home/jburgess/osm/svn.openstreetmap.org/applications/rendering/mapnik/osm-jb-merc.xml";
40static const char *mapfile = "/home/jburgess/osm/svn.openstreetmap.org/applications/rendering/mapnik/osm-local-fast-sphere.xml";
41//static const char *mapfile = "/home/jburgess/osm/svn.openstreetmap.org/applications/rendering/mapnik/osm-local-fast.xml";
42
43//static projection prj("+proj=merc +datum=WGS84 +k=1.0 +units=m +over +no_defs");
44static projection prj("+proj=merc +a=6378137 +b=6378137 +lat_ts=0.0 +lon_0=0.0 +x_0=0.0 +y_0=0 +k=1.0 +units=m +nadgrids=@null +no_defs +over");
45
46
47static double minmax(double a, double b, double c)
48{
49#define MIN(x,y) ((x)<(y)?(x):(y))
50#define MAX(x,y) ((x)>(y)?(x):(y))
51    a = MAX(a,b);
52    a = MIN(a,c);
53    return a;
54}
55
56class GoogleProjection
57{
58    double *Ac, *Bc, *Cc, *zc;
59
60    public:
61        GoogleProjection(int levels=18) {
62            Ac = new double[levels];
63            Bc = new double[levels];
64            Cc = new double[levels];
65            zc = new double[levels];
66            int d, c = 256;
67            for (d=0; d<levels; d++) {
68                int e = c/2;
69                Bc[d] = c/360.0;
70                Cc[d] = c/(2 * M_PIl);
71                zc[d] = e;
72                Ac[d] = c;
73                c *=2;
74            }
75        }
76
77        void fromLLtoPixel(double &x, double &y, int zoom) {
78            double d = zc[zoom];
79            double f = minmax(sin(DEG_TO_RAD * y),-0.9999,0.9999);
80            x = round(d + x * Bc[zoom]);
81            y = round(d + 0.5*log((1+f)/(1-f))*-Cc[zoom]);
82        }
83        void fromPixelToLL(double &x, double &y, int zoom) {
84            double e = zc[zoom];
85            double g = (y - e)/-Cc[zoom];
86            x = (x - e)/Bc[zoom];
87            y = RAD_TO_DEG * ( 2 * atan(exp(g)) - 0.5 * M_PIl);
88        }
89};
90
91static void load_fonts(const char *font_dir, int recurse)
92{
93    DIR *fonts = opendir(font_dir);
94    struct dirent *entry;
95    char path[PATH_MAX]; // FIXME: Eats lots of stack space when recursive
96
97    if (!fonts) {
98        fprintf(stderr, "Unable to open font directory: %s\n", font_dir);
99        return;
100    }
101
102    while ((entry = readdir(fonts))) {
103        struct stat b;
104        char *p;
105
106        if (!strcmp(entry->d_name, ".") || !strcmp(entry->d_name, ".."))
107            continue;
108        snprintf(path, sizeof(path), "%s/%s", font_dir, entry->d_name);
109        if (stat(path, &b))
110            continue;
111        if (S_ISDIR(b.st_mode)) {
112            if (recurse)
113                load_fonts(path, recurse);
114            continue;
115        }
116        p = strrchr(path, '.');
117        if (p && !strcmp(p, ".ttf")) {
118            //fprintf(stderr, "Loading font: %s\n", path);
119            freetype_engine::register_font(path);
120        }
121    }
122    closedir(fonts);
123}
124
125static GoogleProjection gprj(maxZoom+1);
126
127#ifdef METATILE
128static enum protoCmd render(Map &m, int x, int y, int z, unsigned int size)
129{
130    int render_size = 256 * (size + 1);
131    double p0x = x * 256;
132    double p0y = (y + size) * 256;
133    double p1x = (x + size) * 256;
134    double p1y = y * 256;
135
136    //std::cout << "META TILE " << z << " " << x << "-" << x+size-1 << " " << y << "-" << y+size-1 << "\n";
137
138    // FIXME: Without a lock around the projection and rendering we seem
139    // to get corrupted tiles. The current evidence is pointing towards
140    // a problem with libproj
141    pthread_mutex_lock(&map_lock);
142
143    gprj.fromPixelToLL(p0x, p0y, z);
144    gprj.fromPixelToLL(p1x, p1y, z);
145
146    prj.forward(p0x, p0y);
147    prj.forward(p1x, p1y);
148
149    Envelope<double> bbox(p0x, p0y, p1x,p1y);
150    bbox.height(bbox.height() * (size+1.0)/size);
151    bbox.width(bbox.width() * (size+1.0)/size);
152    m.resize(render_size, render_size);
153    m.zoomToBox(bbox);
154    //m.zoom(size+1);
155
156    Image32 buf(render_size, render_size);
157    agg_renderer<Image32> ren(m,buf);
158    ren.apply();
159
160    pthread_mutex_unlock(&map_lock);
161
162    // Split the meta tile into an NxN grid of tiles
163    unsigned int xx, yy;
164    for (yy = 0; yy < size; yy++) {
165        for (xx = 0; xx < size; xx++) {
166            int yoff = 128 + yy * 256;
167            int xoff = 128 + xx * 256;
168            image_view<ImageData32> vw(xoff, yoff, 256, 256, buf.data());
169
170            char filename[PATH_MAX];
171            char tmp[PATH_MAX];
172            xyz_to_path(filename, sizeof(filename), x+xx, y+yy, z);
173            mkdirp(filename);
174            snprintf(tmp, sizeof(tmp), "%s.tmp", filename);
175            //std::cout << "Render " << z << " " << x << "(" << xx << ") " << y << "(" << yy << ") " << filename << "\n";
176            save_to_file(vw, tmp,"png256");
177            rename(tmp, filename);
178        }
179    }
180    std::cout << "DONE TILE " << z << " " << x << "-" << x+size-1 << " " << y << "-" << y+size-1 << "\n";
181    return cmdDone; // OK
182}
183#else
184static enum protoCmd render(Map &m, int x, int y, int z, const char *filename)
185{
186
187    double p0x = x * 256.0;
188    double p0y = (y + 1) * 256.0;
189    double p1x = (x + 1) * 256.0;
190    double p1y = y * 256.0;
191
192    gprj.fromPixelToLL(p0x, p0y, z);
193    gprj.fromPixelToLL(p1x, p1y, z);
194
195    prj.forward(p0x, p0y);
196    prj.forward(p1x, p1y);
197
198    Envelope<double> bbox(p0x, p0y, p1x,p1y);
199    bbox.width(bbox.width() * 2);
200    bbox.height(bbox.height() * 2);
201    m.zoomToBox(bbox);
202
203    Image32 buf(RENDER_SIZE, RENDER_SIZE);
204    agg_renderer<Image32> ren(m,buf);
205    ren.apply();
206
207    image_view<ImageData32> vw(128,128,256,256, buf.data());
208    save_to_file(filename,"png256", vw);
209
210
211    return cmdDone; // OK
212}
213#endif
214
215
216void render_init(void)
217{
218    // TODO: Make these module options
219    datasource_cache::instance()->register_datasources("/usr/local/lib64/mapnik/input");
220    //load_fonts("/usr/share/fonts", 1);
221    load_fonts("/usr/local/lib64/mapnik/fonts", 0);
222    pthread_mutex_init(&map_lock, NULL);
223}
224
225
226void *render_thread(__attribute__((unused)) void *unused)
227{
228    Map m(RENDER_SIZE, RENDER_SIZE);
229
230    pthread_mutex_lock(&map_lock);
231    load_map(m,mapfile);
232    pthread_mutex_unlock(&map_lock);
233
234    while (1) {
235        enum protoCmd ret;
236        struct item *item = fetch_request();
237        if (item) {
238            struct protocol *req = &item->req;
239#ifdef METATILE
240            // At very low zoom the whole world may be smaller than METATILE
241            unsigned int size = MIN(METATILE, 1 << req->z);
242    //pthread_mutex_lock(&map_lock);
243            ret = render(m, item->mx, item->my, req->z, size);
244            process_meta(item->mx, item->my, req->z);
245    //pthread_mutex_unlock(&map_lock);
246
247#else
248            ret = render(m, req->x, req->y, req->z, req->path);
249#endif
250            send_response(item, ret);
251        } else
252            sleep(1); // TODO: Use an event to indicate there are new requests
253    }
254    return NULL;
255}
Note: See TracBrowser for help on using the repository browser.