xref: /unit/src/nxt_router.c (revision 140)
120Sigor@sysoev.ru 
220Sigor@sysoev.ru /*
320Sigor@sysoev.ru  * Copyright (C) Igor Sysoev
420Sigor@sysoev.ru  * Copyright (C) Valentin V. Bartenev
520Sigor@sysoev.ru  * Copyright (C) NGINX, Inc.
620Sigor@sysoev.ru  */
720Sigor@sysoev.ru 
853Sigor@sysoev.ru #include <nxt_router.h>
9115Sigor@sysoev.ru #include <nxt_conf.h>
1020Sigor@sysoev.ru 
1120Sigor@sysoev.ru 
12115Sigor@sysoev.ru typedef struct {
13133Sigor@sysoev.ru     nxt_str_t  type;
14133Sigor@sysoev.ru     uint32_t   workers;
15133Sigor@sysoev.ru } nxt_router_app_conf_t;
16133Sigor@sysoev.ru 
17133Sigor@sysoev.ru 
18133Sigor@sysoev.ru typedef struct {
19133Sigor@sysoev.ru     nxt_str_t  application;
20115Sigor@sysoev.ru } nxt_router_listener_conf_t;
21115Sigor@sysoev.ru 
22115Sigor@sysoev.ru 
23139Sigor@sysoev.ru static nxt_router_temp_conf_t *nxt_router_temp_conf(nxt_task_t *task);
24139Sigor@sysoev.ru static nxt_int_t nxt_router_conf_new(nxt_task_t *task,
25139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, u_char *start, u_char *end);
26139Sigor@sysoev.ru static void nxt_router_conf_success(nxt_task_t *task,
27139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
28139Sigor@sysoev.ru static void nxt_router_conf_error(nxt_task_t *task,
29139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
30139Sigor@sysoev.ru static void nxt_router_conf_send(nxt_task_t *task,
31139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, u_char *start, size_t size);
32139Sigor@sysoev.ru static void nxt_router_conf_buf_completion(nxt_task_t *task, void *obj,
33139Sigor@sysoev.ru     void *data);
3453Sigor@sysoev.ru static void nxt_router_listen_sockets_sort(nxt_router_t *router,
3553Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
3653Sigor@sysoev.ru 
37115Sigor@sysoev.ru static nxt_int_t nxt_router_conf_create(nxt_task_t *task,
38115Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, u_char *start, u_char *end);
39133Sigor@sysoev.ru static nxt_app_t *nxt_router_app_find(nxt_queue_t *queue, nxt_str_t *name);
40133Sigor@sysoev.ru static nxt_app_t *nxt_router_listener_application(nxt_router_temp_conf_t *tmcf,
41133Sigor@sysoev.ru     nxt_str_t *name);
4253Sigor@sysoev.ru static nxt_int_t nxt_router_listen_sockets_stub_create(nxt_task_t *task,
4353Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
4465Sigor@sysoev.ru static nxt_socket_conf_t *nxt_router_socket_conf(nxt_task_t *task, nxt_mp_t *mp,
4565Sigor@sysoev.ru     nxt_sockaddr_t *sa);
4653Sigor@sysoev.ru 
4753Sigor@sysoev.ru static nxt_int_t nxt_router_engines_create(nxt_task_t *task,
4853Sigor@sysoev.ru     nxt_router_t *router, nxt_router_temp_conf_t *tmcf,
4953Sigor@sysoev.ru     const nxt_event_interface_t *interface);
50115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_create(nxt_router_temp_conf_t *tmcf,
51115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
52115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_update(nxt_router_temp_conf_t *tmcf,
53115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
54115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_delete(nxt_router_temp_conf_t *tmcf,
55115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
56115Sigor@sysoev.ru static void nxt_router_engine_socket_count(nxt_queue_t *sockets);
57115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_joints_create(nxt_mp_t *mp,
58139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, nxt_router_engine_conf_t *recf,
59139Sigor@sysoev.ru     nxt_queue_t *sockets, nxt_array_t *array, nxt_work_handler_t handler);
60139Sigor@sysoev.ru static nxt_int_t nxt_router_engine_joints_delete(nxt_router_temp_conf_t *tmcf,
61139Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets);
6253Sigor@sysoev.ru 
6353Sigor@sysoev.ru static nxt_int_t nxt_router_threads_create(nxt_task_t *task, nxt_runtime_t *rt,
6453Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
6553Sigor@sysoev.ru static nxt_int_t nxt_router_thread_create(nxt_task_t *task, nxt_runtime_t *rt,
6653Sigor@sysoev.ru     nxt_event_engine_t *engine);
67133Sigor@sysoev.ru static void nxt_router_apps_sort(nxt_router_t *router,
68133Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
6953Sigor@sysoev.ru 
7053Sigor@sysoev.ru static void nxt_router_engines_post(nxt_router_temp_conf_t *tmcf);
71139Sigor@sysoev.ru static void nxt_router_engine_post(nxt_router_temp_conf_t *tmcf,
72139Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
7353Sigor@sysoev.ru 
7453Sigor@sysoev.ru static void nxt_router_thread_start(void *data);
7553Sigor@sysoev.ru static void nxt_router_listen_socket_create(nxt_task_t *task, void *obj,
7653Sigor@sysoev.ru     void *data);
7753Sigor@sysoev.ru static void nxt_router_listen_socket_update(nxt_task_t *task, void *obj,
7853Sigor@sysoev.ru     void *data);
7953Sigor@sysoev.ru static void nxt_router_listen_socket_delete(nxt_task_t *task, void *obj,
8053Sigor@sysoev.ru     void *data);
8153Sigor@sysoev.ru static void nxt_router_listen_socket_close(nxt_task_t *task, void *obj,
8253Sigor@sysoev.ru     void *data);
8353Sigor@sysoev.ru static void nxt_router_listen_socket_release(nxt_task_t *task,
8453Sigor@sysoev.ru     nxt_socket_conf_joint_t *joint);
8553Sigor@sysoev.ru static void nxt_router_thread_exit_handler(nxt_task_t *task, void *obj,
8653Sigor@sysoev.ru     void *data);
8753Sigor@sysoev.ru static void nxt_router_conf_release(nxt_task_t *task,
8853Sigor@sysoev.ru     nxt_socket_conf_joint_t *joint);
8953Sigor@sysoev.ru 
9053Sigor@sysoev.ru static void nxt_router_conn_init(nxt_task_t *task, void *obj, void *data);
9153Sigor@sysoev.ru static void nxt_router_conn_http_header_parse(nxt_task_t *task, void *obj,
9253Sigor@sysoev.ru     void *data);
9388Smax.romanov@nginx.com static void nxt_router_process_http_request(nxt_task_t *task,
9488Smax.romanov@nginx.com     nxt_conn_t *c, nxt_app_parse_ctx_t *ap);
9588Smax.romanov@nginx.com static void nxt_router_conn_ready(nxt_task_t *task, void *obj, void *data);
9653Sigor@sysoev.ru static void nxt_router_conn_close(nxt_task_t *task, void *obj, void *data);
9753Sigor@sysoev.ru static void nxt_router_conn_free(nxt_task_t *task, void *obj, void *data);
9853Sigor@sysoev.ru static void nxt_router_conn_error(nxt_task_t *task, void *obj, void *data);
9953Sigor@sysoev.ru static void nxt_router_conn_timeout(nxt_task_t *task, void *obj, void *data);
10062Sigor@sysoev.ru static nxt_msec_t nxt_router_conn_timeout_value(nxt_conn_t *c, uintptr_t data);
10120Sigor@sysoev.ru 
102119Smax.romanov@nginx.com static nxt_router_t  *nxt_router;
10320Sigor@sysoev.ru 
10420Sigor@sysoev.ru nxt_int_t
10520Sigor@sysoev.ru nxt_router_start(nxt_task_t *task, nxt_runtime_t *rt)
10620Sigor@sysoev.ru {
107115Sigor@sysoev.ru     nxt_int_t     ret;
108115Sigor@sysoev.ru     nxt_router_t  *router;
10953Sigor@sysoev.ru 
11088Smax.romanov@nginx.com     ret = nxt_app_http_init(task, rt);
11188Smax.romanov@nginx.com     if (nxt_slow_path(ret != NXT_OK)) {
11288Smax.romanov@nginx.com         return ret;
11388Smax.romanov@nginx.com     }
11488Smax.romanov@nginx.com 
11553Sigor@sysoev.ru     router = nxt_zalloc(sizeof(nxt_router_t));
11653Sigor@sysoev.ru     if (nxt_slow_path(router == NULL)) {
11753Sigor@sysoev.ru         return NXT_ERROR;
11853Sigor@sysoev.ru     }
11953Sigor@sysoev.ru 
12053Sigor@sysoev.ru     nxt_queue_init(&router->engines);
12153Sigor@sysoev.ru     nxt_queue_init(&router->sockets);
122133Sigor@sysoev.ru     nxt_queue_init(&router->apps);
12353Sigor@sysoev.ru 
124119Smax.romanov@nginx.com     nxt_router = router;
125119Smax.romanov@nginx.com 
126115Sigor@sysoev.ru     return NXT_OK;
127115Sigor@sysoev.ru }
128115Sigor@sysoev.ru 
129115Sigor@sysoev.ru 
130139Sigor@sysoev.ru void
131139Sigor@sysoev.ru nxt_router_conf_data_handler(nxt_task_t *task, nxt_port_recv_msg_t *msg)
132115Sigor@sysoev.ru {
133139Sigor@sysoev.ru     size_t                  dump_size;
134139Sigor@sysoev.ru     nxt_buf_t               *b;
135139Sigor@sysoev.ru     nxt_int_t               ret;
136139Sigor@sysoev.ru     nxt_router_temp_conf_t  *tmcf;
137139Sigor@sysoev.ru 
138139Sigor@sysoev.ru     b = msg->buf;
139139Sigor@sysoev.ru 
140139Sigor@sysoev.ru     dump_size = nxt_buf_used_size(b);
141139Sigor@sysoev.ru 
142139Sigor@sysoev.ru     if (dump_size > 300) {
143139Sigor@sysoev.ru         dump_size = 300;
14453Sigor@sysoev.ru     }
14553Sigor@sysoev.ru 
146139Sigor@sysoev.ru     nxt_debug(task, "router conf data (%z): %*s",
147139Sigor@sysoev.ru               msg->size, dump_size, b->mem.pos);
148139Sigor@sysoev.ru 
149139Sigor@sysoev.ru     tmcf = nxt_router_temp_conf(task);
150139Sigor@sysoev.ru     if (nxt_slow_path(tmcf == NULL)) {
151139Sigor@sysoev.ru         return;
15253Sigor@sysoev.ru     }
15353Sigor@sysoev.ru 
154139Sigor@sysoev.ru     tmcf->conf->router = nxt_router;
155139Sigor@sysoev.ru     tmcf->stream = msg->port_msg.stream;
156139Sigor@sysoev.ru     tmcf->port = nxt_runtime_port_find(task->thread->runtime,
157139Sigor@sysoev.ru                                        msg->port_msg.pid, 0);
158139Sigor@sysoev.ru 
159139Sigor@sysoev.ru     ret = nxt_router_conf_new(task, tmcf, b->mem.pos, b->mem.free);
160139Sigor@sysoev.ru 
161139Sigor@sysoev.ru     b->mem.pos = b->mem.free;
162139Sigor@sysoev.ru 
163139Sigor@sysoev.ru     if (ret == NXT_OK) {
164139Sigor@sysoev.ru         return nxt_router_conf_success(task, tmcf);
165139Sigor@sysoev.ru     }
166139Sigor@sysoev.ru 
167139Sigor@sysoev.ru     nxt_log(task, NXT_LOG_CRIT, "failed to apply new conf");
168139Sigor@sysoev.ru 
169139Sigor@sysoev.ru     return nxt_router_conf_error(task, tmcf);
17053Sigor@sysoev.ru }
17153Sigor@sysoev.ru 
17253Sigor@sysoev.ru 
17353Sigor@sysoev.ru static nxt_router_temp_conf_t *
174139Sigor@sysoev.ru nxt_router_temp_conf(nxt_task_t *task)
17553Sigor@sysoev.ru {
17665Sigor@sysoev.ru     nxt_mp_t                *mp, *tmp;
17753Sigor@sysoev.ru     nxt_router_conf_t       *rtcf;
17853Sigor@sysoev.ru     nxt_router_temp_conf_t  *tmcf;
17953Sigor@sysoev.ru 
18065Sigor@sysoev.ru     mp = nxt_mp_create(1024, 128, 256, 32);
18153Sigor@sysoev.ru     if (nxt_slow_path(mp == NULL)) {
18253Sigor@sysoev.ru         return NULL;
18353Sigor@sysoev.ru     }
18453Sigor@sysoev.ru 
18565Sigor@sysoev.ru     rtcf = nxt_mp_zget(mp, sizeof(nxt_router_conf_t));
18653Sigor@sysoev.ru     if (nxt_slow_path(rtcf == NULL)) {
18753Sigor@sysoev.ru         goto fail;
18853Sigor@sysoev.ru     }
18953Sigor@sysoev.ru 
19053Sigor@sysoev.ru     rtcf->mem_pool = mp;
19153Sigor@sysoev.ru     rtcf->count = 1;
19253Sigor@sysoev.ru 
19365Sigor@sysoev.ru     tmp = nxt_mp_create(1024, 128, 256, 32);
19453Sigor@sysoev.ru     if (nxt_slow_path(tmp == NULL)) {
19553Sigor@sysoev.ru         goto fail;
19653Sigor@sysoev.ru     }
19753Sigor@sysoev.ru 
19865Sigor@sysoev.ru     tmcf = nxt_mp_zget(tmp, sizeof(nxt_router_temp_conf_t));
19953Sigor@sysoev.ru     if (nxt_slow_path(tmcf == NULL)) {
20053Sigor@sysoev.ru         goto temp_fail;
20153Sigor@sysoev.ru     }
20253Sigor@sysoev.ru 
20353Sigor@sysoev.ru     tmcf->mem_pool = tmp;
20453Sigor@sysoev.ru     tmcf->conf = rtcf;
205139Sigor@sysoev.ru     tmcf->count = 1;
206139Sigor@sysoev.ru     tmcf->engine = task->thread->engine;
20753Sigor@sysoev.ru 
20853Sigor@sysoev.ru     tmcf->engines = nxt_array_create(tmcf->mem_pool, 4,
20953Sigor@sysoev.ru                                      sizeof(nxt_router_engine_conf_t));
21053Sigor@sysoev.ru     if (nxt_slow_path(tmcf->engines == NULL)) {
21153Sigor@sysoev.ru         goto temp_fail;
21253Sigor@sysoev.ru     }
21353Sigor@sysoev.ru 
21453Sigor@sysoev.ru     nxt_queue_init(&tmcf->deleting);
21553Sigor@sysoev.ru     nxt_queue_init(&tmcf->keeping);
21653Sigor@sysoev.ru     nxt_queue_init(&tmcf->updating);
21753Sigor@sysoev.ru     nxt_queue_init(&tmcf->pending);
21853Sigor@sysoev.ru     nxt_queue_init(&tmcf->creating);
219133Sigor@sysoev.ru     nxt_queue_init(&tmcf->apps);
220133Sigor@sysoev.ru     nxt_queue_init(&tmcf->previous);
22153Sigor@sysoev.ru 
22253Sigor@sysoev.ru     return tmcf;
22353Sigor@sysoev.ru 
22453Sigor@sysoev.ru temp_fail:
22553Sigor@sysoev.ru 
22665Sigor@sysoev.ru     nxt_mp_destroy(tmp);
22753Sigor@sysoev.ru 
22853Sigor@sysoev.ru fail:
22953Sigor@sysoev.ru 
23065Sigor@sysoev.ru     nxt_mp_destroy(mp);
23153Sigor@sysoev.ru 
23253Sigor@sysoev.ru     return NULL;
23353Sigor@sysoev.ru }
23453Sigor@sysoev.ru 
23553Sigor@sysoev.ru 
236139Sigor@sysoev.ru static nxt_int_t
237139Sigor@sysoev.ru nxt_router_conf_new(nxt_task_t *task, nxt_router_temp_conf_t *tmcf,
238139Sigor@sysoev.ru     u_char *start, u_char *end)
239139Sigor@sysoev.ru {
240139Sigor@sysoev.ru     nxt_int_t                    ret;
241139Sigor@sysoev.ru     nxt_router_t                 *router;
242139Sigor@sysoev.ru     nxt_runtime_t                *rt;
243139Sigor@sysoev.ru     const nxt_event_interface_t  *interface;
244139Sigor@sysoev.ru 
245139Sigor@sysoev.ru     ret = nxt_router_conf_create(task, tmcf, start, end);
246139Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
247139Sigor@sysoev.ru         return ret;
248139Sigor@sysoev.ru     }
249139Sigor@sysoev.ru 
250139Sigor@sysoev.ru     router = tmcf->conf->router;
251139Sigor@sysoev.ru 
252139Sigor@sysoev.ru     nxt_router_listen_sockets_sort(router, tmcf);
253139Sigor@sysoev.ru 
254139Sigor@sysoev.ru     ret = nxt_router_listen_sockets_stub_create(task, tmcf);
255139Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
256139Sigor@sysoev.ru         return ret;
257139Sigor@sysoev.ru     }
258139Sigor@sysoev.ru 
259139Sigor@sysoev.ru     rt = task->thread->runtime;
260139Sigor@sysoev.ru 
261139Sigor@sysoev.ru     interface = nxt_service_get(rt->services, "engine", NULL);
262139Sigor@sysoev.ru 
263139Sigor@sysoev.ru     ret = nxt_router_engines_create(task, router, tmcf, interface);
264139Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
265139Sigor@sysoev.ru         return ret;
266139Sigor@sysoev.ru     }
267139Sigor@sysoev.ru 
268139Sigor@sysoev.ru     ret = nxt_router_threads_create(task, rt, tmcf);
269139Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
270139Sigor@sysoev.ru         return ret;
271139Sigor@sysoev.ru     }
272139Sigor@sysoev.ru 
273139Sigor@sysoev.ru     nxt_router_apps_sort(router, tmcf);
274139Sigor@sysoev.ru 
275139Sigor@sysoev.ru     nxt_router_engines_post(tmcf);
276139Sigor@sysoev.ru 
277139Sigor@sysoev.ru     nxt_queue_add(&router->sockets, &tmcf->updating);
278139Sigor@sysoev.ru     nxt_queue_add(&router->sockets, &tmcf->creating);
279139Sigor@sysoev.ru 
280139Sigor@sysoev.ru     return NXT_OK;
281139Sigor@sysoev.ru }
282139Sigor@sysoev.ru 
283139Sigor@sysoev.ru 
284139Sigor@sysoev.ru static void
285139Sigor@sysoev.ru nxt_router_conf_wait(nxt_task_t *task, void *obj, void *data)
286139Sigor@sysoev.ru {
287139Sigor@sysoev.ru     nxt_router_temp_conf_t  *tmcf;
288139Sigor@sysoev.ru 
289139Sigor@sysoev.ru     tmcf = obj;
290139Sigor@sysoev.ru 
291139Sigor@sysoev.ru     nxt_router_conf_success(task, tmcf);
292139Sigor@sysoev.ru }
293139Sigor@sysoev.ru 
294139Sigor@sysoev.ru 
295139Sigor@sysoev.ru static void
296139Sigor@sysoev.ru nxt_router_conf_success(nxt_task_t *task, nxt_router_temp_conf_t *tmcf)
297139Sigor@sysoev.ru {
298139Sigor@sysoev.ru     nxt_debug(task, "temp conf count:%D", tmcf->count);
299139Sigor@sysoev.ru 
300139Sigor@sysoev.ru     if (--tmcf->count == 0) {
301139Sigor@sysoev.ru         nxt_router_conf_send(task, tmcf, (u_char *) "OK", 2);
302139Sigor@sysoev.ru     }
303139Sigor@sysoev.ru }
304139Sigor@sysoev.ru 
305139Sigor@sysoev.ru 
306139Sigor@sysoev.ru static void
307139Sigor@sysoev.ru nxt_router_conf_error(nxt_task_t *task, nxt_router_temp_conf_t *tmcf)
308139Sigor@sysoev.ru {
309139Sigor@sysoev.ru     nxt_mp_destroy(tmcf->conf->mem_pool);
310139Sigor@sysoev.ru 
311139Sigor@sysoev.ru     nxt_router_conf_send(task, tmcf, (u_char *) "ERROR", 5);
312139Sigor@sysoev.ru }
313139Sigor@sysoev.ru 
314139Sigor@sysoev.ru 
315139Sigor@sysoev.ru static void
316139Sigor@sysoev.ru nxt_router_conf_send(nxt_task_t *task, nxt_router_temp_conf_t *tmcf,
317139Sigor@sysoev.ru     u_char *start, size_t size)
318139Sigor@sysoev.ru {
319139Sigor@sysoev.ru     nxt_buf_t  *b;
320139Sigor@sysoev.ru 
321139Sigor@sysoev.ru     b = nxt_buf_mem_alloc(tmcf->mem_pool, size, 0);
322139Sigor@sysoev.ru     if (nxt_slow_path(b == NULL)) {
323139Sigor@sysoev.ru         return;
324139Sigor@sysoev.ru     }
325139Sigor@sysoev.ru 
326*140Svbart@nginx.com     b->mem.free = nxt_cpymem(b->mem.free, start, size);
327*140Svbart@nginx.com 
328139Sigor@sysoev.ru     b->parent = tmcf->mem_pool;
329139Sigor@sysoev.ru     b->completion_handler = nxt_router_conf_buf_completion;
330139Sigor@sysoev.ru 
331139Sigor@sysoev.ru     nxt_port_socket_write(task, tmcf->port, NXT_PORT_MSG_DATA, -1,
332139Sigor@sysoev.ru                           tmcf->stream, 0, b);
333139Sigor@sysoev.ru }
334139Sigor@sysoev.ru 
335139Sigor@sysoev.ru 
336139Sigor@sysoev.ru static void
337139Sigor@sysoev.ru nxt_router_conf_buf_completion(nxt_task_t *task, void *obj, void *data)
338139Sigor@sysoev.ru {
339139Sigor@sysoev.ru     nxt_mp_t  *mp;
340139Sigor@sysoev.ru 
341139Sigor@sysoev.ru     /* nxt_router_temp_conf_t mem pool. */
342139Sigor@sysoev.ru     mp = data;
343139Sigor@sysoev.ru 
344139Sigor@sysoev.ru     nxt_mp_destroy(mp);
345139Sigor@sysoev.ru }
346139Sigor@sysoev.ru 
347139Sigor@sysoev.ru 
348115Sigor@sysoev.ru static nxt_conf_map_t  nxt_router_conf[] = {
349115Sigor@sysoev.ru     {
350133Sigor@sysoev.ru         nxt_string("listeners_threads"),
351115Sigor@sysoev.ru         NXT_CONF_MAP_INT32,
352115Sigor@sysoev.ru         offsetof(nxt_router_conf_t, threads),
353115Sigor@sysoev.ru     },
354115Sigor@sysoev.ru };
355115Sigor@sysoev.ru 
356115Sigor@sysoev.ru 
357133Sigor@sysoev.ru static nxt_conf_map_t  nxt_router_app_conf[] = {
358115Sigor@sysoev.ru     {
359133Sigor@sysoev.ru         nxt_string("type"),
360115Sigor@sysoev.ru         NXT_CONF_MAP_STR,
361133Sigor@sysoev.ru         offsetof(nxt_router_app_conf_t, type),
362115Sigor@sysoev.ru     },
363115Sigor@sysoev.ru 
364115Sigor@sysoev.ru     {
365133Sigor@sysoev.ru         nxt_string("workers"),
366115Sigor@sysoev.ru         NXT_CONF_MAP_INT32,
367133Sigor@sysoev.ru         offsetof(nxt_router_app_conf_t, workers),
368133Sigor@sysoev.ru     },
369133Sigor@sysoev.ru };
370133Sigor@sysoev.ru 
371133Sigor@sysoev.ru 
372133Sigor@sysoev.ru static nxt_conf_map_t  nxt_router_listener_conf[] = {
373133Sigor@sysoev.ru     {
374133Sigor@sysoev.ru         nxt_string("application"),
375133Sigor@sysoev.ru         NXT_CONF_MAP_STR,
376133Sigor@sysoev.ru         offsetof(nxt_router_listener_conf_t, application),
377115Sigor@sysoev.ru     },
378115Sigor@sysoev.ru };
379115Sigor@sysoev.ru 
380115Sigor@sysoev.ru 
381115Sigor@sysoev.ru static nxt_conf_map_t  nxt_router_http_conf[] = {
382115Sigor@sysoev.ru     {
383115Sigor@sysoev.ru         nxt_string("header_buffer_size"),
384115Sigor@sysoev.ru         NXT_CONF_MAP_SIZE,
385115Sigor@sysoev.ru         offsetof(nxt_socket_conf_t, header_buffer_size),
386115Sigor@sysoev.ru     },
387115Sigor@sysoev.ru 
388115Sigor@sysoev.ru     {
389115Sigor@sysoev.ru         nxt_string("large_header_buffer_size"),
390115Sigor@sysoev.ru         NXT_CONF_MAP_SIZE,
391115Sigor@sysoev.ru         offsetof(nxt_socket_conf_t, large_header_buffer_size),
392115Sigor@sysoev.ru     },
393115Sigor@sysoev.ru 
394115Sigor@sysoev.ru     {
395115Sigor@sysoev.ru         nxt_string("header_read_timeout"),
396115Sigor@sysoev.ru         NXT_CONF_MAP_MSEC,
397115Sigor@sysoev.ru         offsetof(nxt_socket_conf_t, header_read_timeout),
398115Sigor@sysoev.ru     },
399115Sigor@sysoev.ru };
400115Sigor@sysoev.ru 
401115Sigor@sysoev.ru 
40253Sigor@sysoev.ru static nxt_int_t
403115Sigor@sysoev.ru nxt_router_conf_create(nxt_task_t *task, nxt_router_temp_conf_t *tmcf,
404115Sigor@sysoev.ru     u_char *start, u_char *end)
40553Sigor@sysoev.ru {
406133Sigor@sysoev.ru     u_char                      *p;
407133Sigor@sysoev.ru     size_t                      size;
408115Sigor@sysoev.ru     nxt_mp_t                    *mp;
409115Sigor@sysoev.ru     uint32_t                    next;
410115Sigor@sysoev.ru     nxt_int_t                   ret;
411115Sigor@sysoev.ru     nxt_str_t                   name;
412133Sigor@sysoev.ru     nxt_app_t                   *app, *prev;
413133Sigor@sysoev.ru     nxt_app_type_t              type;
414115Sigor@sysoev.ru     nxt_sockaddr_t              *sa;
415133Sigor@sysoev.ru     nxt_queue_link_t            *qlk, *nqlk;
416133Sigor@sysoev.ru     nxt_conf_value_t            *conf, *http;
417133Sigor@sysoev.ru     nxt_conf_value_t            *applications, *application;
418133Sigor@sysoev.ru     nxt_conf_value_t            *listeners, *listener;
419115Sigor@sysoev.ru     nxt_socket_conf_t           *skcf;
420133Sigor@sysoev.ru     nxt_router_app_conf_t       apcf;
421115Sigor@sysoev.ru     nxt_router_listener_conf_t  lscf;
422115Sigor@sysoev.ru 
423115Sigor@sysoev.ru     static nxt_str_t  http_path = nxt_string("/http");
424133Sigor@sysoev.ru     static nxt_str_t  applications_path = nxt_string("/applications");
425115Sigor@sysoev.ru     static nxt_str_t  listeners_path = nxt_string("/listeners");
426115Sigor@sysoev.ru 
427115Sigor@sysoev.ru     conf = nxt_conf_json_parse(tmcf->mem_pool, start, end);
428115Sigor@sysoev.ru     if (conf == NULL) {
429115Sigor@sysoev.ru         nxt_log(task, NXT_LOG_CRIT, "configuration parsing error");
430115Sigor@sysoev.ru         return NXT_ERROR;
431115Sigor@sysoev.ru     }
432115Sigor@sysoev.ru 
433136Svbart@nginx.com     ret = nxt_conf_map_object(conf, nxt_router_conf,
434136Svbart@nginx.com                               nxt_nitems(nxt_router_conf), tmcf->conf);
435115Sigor@sysoev.ru     if (ret != NXT_OK) {
436133Sigor@sysoev.ru         nxt_log(task, NXT_LOG_CRIT, "root map error");
437115Sigor@sysoev.ru         return NXT_ERROR;
438115Sigor@sysoev.ru     }
439115Sigor@sysoev.ru 
440117Sigor@sysoev.ru     if (tmcf->conf->threads == 0) {
441117Sigor@sysoev.ru         tmcf->conf->threads = nxt_ncpu;
442117Sigor@sysoev.ru     }
443117Sigor@sysoev.ru 
444133Sigor@sysoev.ru     applications = nxt_conf_get_path(conf, &applications_path);
445133Sigor@sysoev.ru     if (applications == NULL) {
446133Sigor@sysoev.ru         nxt_log(task, NXT_LOG_CRIT, "no \"applications\" block");
447115Sigor@sysoev.ru         return NXT_ERROR;
448115Sigor@sysoev.ru     }
449115Sigor@sysoev.ru 
450133Sigor@sysoev.ru     next = 0;
451133Sigor@sysoev.ru 
452133Sigor@sysoev.ru     for ( ;; ) {
453133Sigor@sysoev.ru         application = nxt_conf_next_object_member(applications, &name, &next);
454133Sigor@sysoev.ru         if (application == NULL) {
455133Sigor@sysoev.ru             break;
456133Sigor@sysoev.ru         }
457133Sigor@sysoev.ru 
458133Sigor@sysoev.ru         nxt_debug(task, "application \"%V\"", &name);
459133Sigor@sysoev.ru 
460133Sigor@sysoev.ru         app = nxt_zalloc(sizeof(nxt_app_t));
461133Sigor@sysoev.ru         if (app == NULL) {
462133Sigor@sysoev.ru             goto fail;
463133Sigor@sysoev.ru         }
464133Sigor@sysoev.ru 
465133Sigor@sysoev.ru         size = nxt_conf_json_length(application, NULL);
466133Sigor@sysoev.ru 
467133Sigor@sysoev.ru         app->conf.start = nxt_malloc(size);
468133Sigor@sysoev.ru         if (app->conf.start == NULL) {
469133Sigor@sysoev.ru             nxt_free(app);
470133Sigor@sysoev.ru             goto fail;
471133Sigor@sysoev.ru         }
472133Sigor@sysoev.ru 
473133Sigor@sysoev.ru         p = nxt_conf_json_print(app->conf.start, application, NULL);
474133Sigor@sysoev.ru         app->conf.length = p - app->conf.start;
475133Sigor@sysoev.ru 
476133Sigor@sysoev.ru         nxt_debug(task, "application conf \"%V\"", &app->conf);
477133Sigor@sysoev.ru 
478133Sigor@sysoev.ru         prev = nxt_router_app_find(&tmcf->conf->router->apps, &name);
479133Sigor@sysoev.ru 
480133Sigor@sysoev.ru         if (prev != NULL && nxt_strstr_eq(&app->conf, &prev->conf)) {
481133Sigor@sysoev.ru             nxt_free(app->conf.start);
482133Sigor@sysoev.ru             nxt_free(app);
483133Sigor@sysoev.ru 
484133Sigor@sysoev.ru             nxt_queue_remove(&prev->link);
485133Sigor@sysoev.ru             nxt_queue_insert_tail(&tmcf->previous, &prev->link);
486133Sigor@sysoev.ru             continue;
487133Sigor@sysoev.ru         }
488133Sigor@sysoev.ru 
489136Svbart@nginx.com         ret = nxt_conf_map_object(application, nxt_router_app_conf,
490136Svbart@nginx.com                                   nxt_nitems(nxt_router_app_conf), &apcf);
491133Sigor@sysoev.ru         if (ret != NXT_OK) {
492133Sigor@sysoev.ru             nxt_log(task, NXT_LOG_CRIT, "application map error");
493133Sigor@sysoev.ru             goto app_fail;
494133Sigor@sysoev.ru         }
495115Sigor@sysoev.ru 
496133Sigor@sysoev.ru         nxt_debug(task, "application type: %V", &apcf.type);
497133Sigor@sysoev.ru         nxt_debug(task, "application workers: %D", apcf.workers);
498133Sigor@sysoev.ru 
499133Sigor@sysoev.ru         if (nxt_str_eq(&apcf.type, "python", 6)) {
500133Sigor@sysoev.ru             type = NXT_APP_PYTHON;
501133Sigor@sysoev.ru 
502133Sigor@sysoev.ru         } else if (nxt_str_eq(&apcf.type, "php", 3)) {
503133Sigor@sysoev.ru             type = NXT_APP_PHP;
504133Sigor@sysoev.ru 
505133Sigor@sysoev.ru         } else if (nxt_str_eq(&apcf.type, "ruby", 4)) {
506133Sigor@sysoev.ru             type = NXT_APP_RUBY;
507133Sigor@sysoev.ru 
508133Sigor@sysoev.ru         } else if (nxt_str_eq(&apcf.type, "go", 2)) {
509133Sigor@sysoev.ru             type = NXT_APP_GO;
510133Sigor@sysoev.ru 
511133Sigor@sysoev.ru         } else {
512133Sigor@sysoev.ru             nxt_log(task, NXT_LOG_CRIT, "unsupported application type: \"%V\"",
513133Sigor@sysoev.ru                     &apcf.type);
514133Sigor@sysoev.ru             goto app_fail;
515133Sigor@sysoev.ru         }
516133Sigor@sysoev.ru 
517133Sigor@sysoev.ru         ret = nxt_thread_mutex_create(&app->mutex);
518133Sigor@sysoev.ru         if (ret != NXT_OK) {
519133Sigor@sysoev.ru             goto app_fail;
520133Sigor@sysoev.ru         }
521133Sigor@sysoev.ru 
522133Sigor@sysoev.ru         app->name = name;
523133Sigor@sysoev.ru         app->type = type;
524133Sigor@sysoev.ru         app->max_workers = apcf.workers;
525133Sigor@sysoev.ru         app->live = 1;
526133Sigor@sysoev.ru 
527133Sigor@sysoev.ru         nxt_queue_insert_tail(&tmcf->apps, &app->link);
528133Sigor@sysoev.ru     }
529133Sigor@sysoev.ru 
530133Sigor@sysoev.ru     http = nxt_conf_get_path(conf, &http_path);
531133Sigor@sysoev.ru #if 0
532133Sigor@sysoev.ru     if (http == NULL) {
533133Sigor@sysoev.ru         nxt_log(task, NXT_LOG_CRIT, "no \"http\" block");
534133Sigor@sysoev.ru         return NXT_ERROR;
535133Sigor@sysoev.ru     }
536133Sigor@sysoev.ru #endif
537133Sigor@sysoev.ru 
538133Sigor@sysoev.ru     listeners = nxt_conf_get_path(conf, &listeners_path);
539115Sigor@sysoev.ru     if (listeners == NULL) {
540133Sigor@sysoev.ru         nxt_log(task, NXT_LOG_CRIT, "no \"listeners\" block");
541115Sigor@sysoev.ru         return NXT_ERROR;
542115Sigor@sysoev.ru     }
54353Sigor@sysoev.ru 
544133Sigor@sysoev.ru     next = 0;
54553Sigor@sysoev.ru 
546133Sigor@sysoev.ru     mp = tmcf->conf->mem_pool;
547115Sigor@sysoev.ru 
548115Sigor@sysoev.ru     for ( ;; ) {
549115Sigor@sysoev.ru         listener = nxt_conf_next_object_member(listeners, &name, &next);
550115Sigor@sysoev.ru         if (listener == NULL) {
551115Sigor@sysoev.ru             break;
552115Sigor@sysoev.ru         }
55353Sigor@sysoev.ru 
554115Sigor@sysoev.ru         sa = nxt_sockaddr_parse(mp, &name);
555115Sigor@sysoev.ru         if (sa == NULL) {
556115Sigor@sysoev.ru             nxt_log(task, NXT_LOG_CRIT, "invalid listener \"%V\"", &name);
557133Sigor@sysoev.ru             goto fail;
558115Sigor@sysoev.ru         }
559115Sigor@sysoev.ru 
560115Sigor@sysoev.ru         sa->type = SOCK_STREAM;
561115Sigor@sysoev.ru 
562115Sigor@sysoev.ru         nxt_debug(task, "router listener: \"%*s\"",
563115Sigor@sysoev.ru                   sa->length, nxt_sockaddr_start(sa));
56453Sigor@sysoev.ru 
565115Sigor@sysoev.ru         skcf = nxt_router_socket_conf(task, mp, sa);
566115Sigor@sysoev.ru         if (skcf == NULL) {
567133Sigor@sysoev.ru             goto fail;
568115Sigor@sysoev.ru         }
56953Sigor@sysoev.ru 
570136Svbart@nginx.com         ret = nxt_conf_map_object(listener, nxt_router_listener_conf,
571136Svbart@nginx.com                                   nxt_nitems(nxt_router_listener_conf), &lscf);
572115Sigor@sysoev.ru         if (ret != NXT_OK) {
573115Sigor@sysoev.ru             nxt_log(task, NXT_LOG_CRIT, "listener map error");
574133Sigor@sysoev.ru             goto fail;
575115Sigor@sysoev.ru         }
57653Sigor@sysoev.ru 
577133Sigor@sysoev.ru         nxt_debug(task, "application: %V", &lscf.application);
578133Sigor@sysoev.ru 
579133Sigor@sysoev.ru         // STUB, default values if http block is not defined.
580133Sigor@sysoev.ru         skcf->header_buffer_size = 2048;
581133Sigor@sysoev.ru         skcf->large_header_buffer_size = 8192;
582133Sigor@sysoev.ru         skcf->header_read_timeout = 5000;
58353Sigor@sysoev.ru 
584133Sigor@sysoev.ru         if (http != NULL) {
585136Svbart@nginx.com             ret = nxt_conf_map_object(http, nxt_router_http_conf,
586136Svbart@nginx.com                                       nxt_nitems(nxt_router_http_conf), skcf);
587133Sigor@sysoev.ru             if (ret != NXT_OK) {
588133Sigor@sysoev.ru                 nxt_log(task, NXT_LOG_CRIT, "http map error");
589133Sigor@sysoev.ru                 goto fail;
590133Sigor@sysoev.ru             }
591115Sigor@sysoev.ru         }
592115Sigor@sysoev.ru 
593115Sigor@sysoev.ru         skcf->listen.handler = nxt_router_conn_init;
594115Sigor@sysoev.ru         skcf->router_conf = tmcf->conf;
595133Sigor@sysoev.ru         skcf->application = nxt_router_listener_application(tmcf,
596133Sigor@sysoev.ru                                                             &lscf.application);
597115Sigor@sysoev.ru 
598115Sigor@sysoev.ru         nxt_queue_insert_tail(&tmcf->pending, &skcf->link);
599115Sigor@sysoev.ru     }
60053Sigor@sysoev.ru 
60153Sigor@sysoev.ru     return NXT_OK;
602133Sigor@sysoev.ru 
603133Sigor@sysoev.ru app_fail:
604133Sigor@sysoev.ru 
605133Sigor@sysoev.ru     nxt_free(app->conf.start);
606133Sigor@sysoev.ru     nxt_free(app);
607133Sigor@sysoev.ru 
608133Sigor@sysoev.ru fail:
609133Sigor@sysoev.ru 
610133Sigor@sysoev.ru     for (qlk = nxt_queue_first(&tmcf->apps);
611133Sigor@sysoev.ru          qlk != nxt_queue_tail(&tmcf->apps);
612133Sigor@sysoev.ru          qlk = nqlk)
613133Sigor@sysoev.ru     {
614133Sigor@sysoev.ru         nqlk = nxt_queue_next(qlk);
615133Sigor@sysoev.ru         app = nxt_queue_link_data(qlk, nxt_app_t, link);
616133Sigor@sysoev.ru 
617133Sigor@sysoev.ru         nxt_thread_mutex_destroy(&app->mutex);
618133Sigor@sysoev.ru         nxt_free(app);
619133Sigor@sysoev.ru     }
620133Sigor@sysoev.ru 
621133Sigor@sysoev.ru     return NXT_ERROR;
622133Sigor@sysoev.ru }
623133Sigor@sysoev.ru 
624133Sigor@sysoev.ru 
625133Sigor@sysoev.ru static nxt_app_t *
626133Sigor@sysoev.ru nxt_router_app_find(nxt_queue_t *queue, nxt_str_t *name)
627133Sigor@sysoev.ru {
628133Sigor@sysoev.ru     nxt_app_t         *app;
629133Sigor@sysoev.ru     nxt_queue_link_t  *qlk;
630133Sigor@sysoev.ru 
631133Sigor@sysoev.ru     for (qlk = nxt_queue_first(queue);
632133Sigor@sysoev.ru          qlk != nxt_queue_tail(queue);
633133Sigor@sysoev.ru          qlk = nxt_queue_next(qlk))
634133Sigor@sysoev.ru     {
635133Sigor@sysoev.ru         app = nxt_queue_link_data(qlk, nxt_app_t, link);
636133Sigor@sysoev.ru 
637133Sigor@sysoev.ru         if (nxt_strstr_eq(name, &app->name)) {
638133Sigor@sysoev.ru             return app;
639133Sigor@sysoev.ru         }
640133Sigor@sysoev.ru     }
641133Sigor@sysoev.ru 
642133Sigor@sysoev.ru     return NULL;
643133Sigor@sysoev.ru }
644133Sigor@sysoev.ru 
645133Sigor@sysoev.ru 
646133Sigor@sysoev.ru static nxt_app_t *
647133Sigor@sysoev.ru nxt_router_listener_application(nxt_router_temp_conf_t *tmcf, nxt_str_t *name)
648133Sigor@sysoev.ru {
649133Sigor@sysoev.ru     nxt_app_t  *app;
650133Sigor@sysoev.ru 
651133Sigor@sysoev.ru     app = nxt_router_app_find(&tmcf->apps, name);
652133Sigor@sysoev.ru 
653133Sigor@sysoev.ru     if (app == NULL) {
654134Sigor@sysoev.ru         app = nxt_router_app_find(&tmcf->previous, name);
655133Sigor@sysoev.ru     }
656133Sigor@sysoev.ru 
657133Sigor@sysoev.ru     return app;
65853Sigor@sysoev.ru }
65953Sigor@sysoev.ru 
66053Sigor@sysoev.ru 
66153Sigor@sysoev.ru static nxt_socket_conf_t *
66265Sigor@sysoev.ru nxt_router_socket_conf(nxt_task_t *task, nxt_mp_t *mp, nxt_sockaddr_t *sa)
66353Sigor@sysoev.ru {
66453Sigor@sysoev.ru     nxt_socket_conf_t  *conf;
66553Sigor@sysoev.ru 
66665Sigor@sysoev.ru     conf = nxt_mp_zget(mp, sizeof(nxt_socket_conf_t));
66753Sigor@sysoev.ru     if (nxt_slow_path(conf == NULL)) {
66853Sigor@sysoev.ru         return NULL;
66953Sigor@sysoev.ru     }
67053Sigor@sysoev.ru 
671115Sigor@sysoev.ru     conf->sockaddr = sa;
672115Sigor@sysoev.ru 
67353Sigor@sysoev.ru     conf->listen.sockaddr = sa;
674103Sigor@sysoev.ru     conf->listen.socklen = sa->socklen;
675103Sigor@sysoev.ru     conf->listen.address_length = sa->length;
67653Sigor@sysoev.ru 
67753Sigor@sysoev.ru     conf->listen.socket = -1;
67853Sigor@sysoev.ru     conf->listen.backlog = NXT_LISTEN_BACKLOG;
67953Sigor@sysoev.ru     conf->listen.flags = NXT_NONBLOCK;
68053Sigor@sysoev.ru     conf->listen.read_after_accept = 1;
68153Sigor@sysoev.ru 
68253Sigor@sysoev.ru     return conf;
68353Sigor@sysoev.ru }
68453Sigor@sysoev.ru 
68553Sigor@sysoev.ru 
68653Sigor@sysoev.ru static void
68753Sigor@sysoev.ru nxt_router_listen_sockets_sort(nxt_router_t *router,
68853Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf)
68953Sigor@sysoev.ru {
69053Sigor@sysoev.ru     nxt_queue_link_t   *nqlk, *oqlk, *next;
69153Sigor@sysoev.ru     nxt_socket_conf_t  *nskcf, *oskcf;
69253Sigor@sysoev.ru 
69353Sigor@sysoev.ru     for (nqlk = nxt_queue_first(&tmcf->pending);
69453Sigor@sysoev.ru          nqlk != nxt_queue_tail(&tmcf->pending);
69553Sigor@sysoev.ru          nqlk = next)
69653Sigor@sysoev.ru     {
69753Sigor@sysoev.ru         next = nxt_queue_next(nqlk);
69853Sigor@sysoev.ru         nskcf = nxt_queue_link_data(nqlk, nxt_socket_conf_t, link);
69953Sigor@sysoev.ru 
70053Sigor@sysoev.ru         for (oqlk = nxt_queue_first(&router->sockets);
70153Sigor@sysoev.ru              oqlk != nxt_queue_tail(&router->sockets);
70253Sigor@sysoev.ru              oqlk = nxt_queue_next(oqlk))
70353Sigor@sysoev.ru         {
70453Sigor@sysoev.ru             oskcf = nxt_queue_link_data(oqlk, nxt_socket_conf_t, link);
70553Sigor@sysoev.ru 
706115Sigor@sysoev.ru             if (nxt_sockaddr_cmp(nskcf->sockaddr, oskcf->sockaddr)) {
707115Sigor@sysoev.ru                 nskcf->socket = oskcf->socket;
708115Sigor@sysoev.ru                 nskcf->listen.socket = oskcf->listen.socket;
709115Sigor@sysoev.ru 
71053Sigor@sysoev.ru                 nxt_queue_remove(oqlk);
71153Sigor@sysoev.ru                 nxt_queue_insert_tail(&tmcf->keeping, oqlk);
71253Sigor@sysoev.ru 
71353Sigor@sysoev.ru                 nxt_queue_remove(nqlk);
71453Sigor@sysoev.ru                 nxt_queue_insert_tail(&tmcf->updating, nqlk);
71553Sigor@sysoev.ru 
71653Sigor@sysoev.ru                 break;
71753Sigor@sysoev.ru             }
71853Sigor@sysoev.ru         }
71953Sigor@sysoev.ru     }
72053Sigor@sysoev.ru 
72153Sigor@sysoev.ru     nxt_queue_add(&tmcf->deleting, &router->sockets);
722115Sigor@sysoev.ru     nxt_queue_init(&router->sockets);
72353Sigor@sysoev.ru }
72453Sigor@sysoev.ru 
72553Sigor@sysoev.ru 
72653Sigor@sysoev.ru static nxt_int_t
72753Sigor@sysoev.ru nxt_router_listen_sockets_stub_create(nxt_task_t *task,
72853Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf)
72953Sigor@sysoev.ru {
730115Sigor@sysoev.ru     nxt_int_t            ret;
731115Sigor@sysoev.ru     nxt_socket_t         s;
732115Sigor@sysoev.ru     nxt_queue_link_t     *qlk, *nqlk;
733115Sigor@sysoev.ru     nxt_socket_conf_t    *skcf;
734115Sigor@sysoev.ru     nxt_router_socket_t  *rtsk;
73553Sigor@sysoev.ru 
73653Sigor@sysoev.ru     for (qlk = nxt_queue_first(&tmcf->pending);
73753Sigor@sysoev.ru          qlk != nxt_queue_tail(&tmcf->pending);
73853Sigor@sysoev.ru          qlk = nqlk)
73953Sigor@sysoev.ru     {
740115Sigor@sysoev.ru         rtsk = nxt_malloc(sizeof(nxt_router_socket_t));
741115Sigor@sysoev.ru         if (nxt_slow_path(rtsk == NULL)) {
74253Sigor@sysoev.ru             return NXT_ERROR;
74353Sigor@sysoev.ru         }
74453Sigor@sysoev.ru 
745115Sigor@sysoev.ru         rtsk->count = 0;
746115Sigor@sysoev.ru 
747115Sigor@sysoev.ru         skcf = nxt_queue_link_data(qlk, nxt_socket_conf_t, link);
748115Sigor@sysoev.ru         skcf->socket = rtsk;
749115Sigor@sysoev.ru 
750115Sigor@sysoev.ru         s = nxt_listen_socket_create0(task, skcf->sockaddr, NXT_NONBLOCK);
751115Sigor@sysoev.ru         if (nxt_slow_path(s == -1)) {
752115Sigor@sysoev.ru             return NXT_ERROR;
753115Sigor@sysoev.ru         }
754115Sigor@sysoev.ru 
755115Sigor@sysoev.ru         ret = nxt_listen_socket(task, s, NXT_LISTEN_BACKLOG);
756115Sigor@sysoev.ru         if (nxt_slow_path(ret != NXT_OK)) {
757115Sigor@sysoev.ru             return NXT_ERROR;
758115Sigor@sysoev.ru         }
759115Sigor@sysoev.ru 
760115Sigor@sysoev.ru         skcf->listen.socket = s;
761115Sigor@sysoev.ru 
762115Sigor@sysoev.ru         rtsk->fd = s;
763115Sigor@sysoev.ru 
76453Sigor@sysoev.ru         nqlk = nxt_queue_next(qlk);
76553Sigor@sysoev.ru         nxt_queue_remove(qlk);
76653Sigor@sysoev.ru         nxt_queue_insert_tail(&tmcf->creating, qlk);
76753Sigor@sysoev.ru     }
76853Sigor@sysoev.ru 
76953Sigor@sysoev.ru     return NXT_OK;
77053Sigor@sysoev.ru }
77153Sigor@sysoev.ru 
77253Sigor@sysoev.ru 
77353Sigor@sysoev.ru static nxt_int_t
77453Sigor@sysoev.ru nxt_router_engines_create(nxt_task_t *task, nxt_router_t *router,
77553Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, const nxt_event_interface_t *interface)
77653Sigor@sysoev.ru {
77753Sigor@sysoev.ru     nxt_int_t                 ret;
77853Sigor@sysoev.ru     nxt_uint_t                n, threads;
77953Sigor@sysoev.ru     nxt_queue_link_t          *qlk;
78053Sigor@sysoev.ru     nxt_router_engine_conf_t  *recf;
78153Sigor@sysoev.ru 
78253Sigor@sysoev.ru     threads = tmcf->conf->threads;
78353Sigor@sysoev.ru 
78453Sigor@sysoev.ru     tmcf->engines = nxt_array_create(tmcf->mem_pool, threads,
78553Sigor@sysoev.ru                                      sizeof(nxt_router_engine_conf_t));
78653Sigor@sysoev.ru     if (nxt_slow_path(tmcf->engines == NULL)) {
78753Sigor@sysoev.ru         return NXT_ERROR;
78853Sigor@sysoev.ru     }
78953Sigor@sysoev.ru 
79053Sigor@sysoev.ru     n = 0;
79153Sigor@sysoev.ru 
79253Sigor@sysoev.ru     for (qlk = nxt_queue_first(&router->engines);
79353Sigor@sysoev.ru          qlk != nxt_queue_tail(&router->engines);
79453Sigor@sysoev.ru          qlk = nxt_queue_next(qlk))
79553Sigor@sysoev.ru     {
79653Sigor@sysoev.ru         recf = nxt_array_zero_add(tmcf->engines);
79753Sigor@sysoev.ru         if (nxt_slow_path(recf == NULL)) {
79853Sigor@sysoev.ru             return NXT_ERROR;
79953Sigor@sysoev.ru         }
80053Sigor@sysoev.ru 
801115Sigor@sysoev.ru         recf->engine = nxt_queue_link_data(qlk, nxt_event_engine_t, link0);
80253Sigor@sysoev.ru 
80353Sigor@sysoev.ru         if (n < threads) {
804115Sigor@sysoev.ru             ret = nxt_router_engine_conf_update(tmcf, recf);
80553Sigor@sysoev.ru 
80653Sigor@sysoev.ru         } else {
807115Sigor@sysoev.ru             ret = nxt_router_engine_conf_delete(tmcf, recf);
80853Sigor@sysoev.ru         }
80953Sigor@sysoev.ru 
81053Sigor@sysoev.ru         if (nxt_slow_path(ret != NXT_OK)) {
81153Sigor@sysoev.ru             return ret;
81253Sigor@sysoev.ru         }
81353Sigor@sysoev.ru 
81453Sigor@sysoev.ru         n++;
81553Sigor@sysoev.ru     }
81653Sigor@sysoev.ru 
81753Sigor@sysoev.ru     tmcf->new_threads = n;
81853Sigor@sysoev.ru 
81953Sigor@sysoev.ru     while (n < threads) {
82053Sigor@sysoev.ru         recf = nxt_array_zero_add(tmcf->engines);
82153Sigor@sysoev.ru         if (nxt_slow_path(recf == NULL)) {
82253Sigor@sysoev.ru             return NXT_ERROR;
82353Sigor@sysoev.ru         }
82453Sigor@sysoev.ru 
82553Sigor@sysoev.ru         recf->engine = nxt_event_engine_create(task, interface, NULL, 0, 0);
82653Sigor@sysoev.ru         if (nxt_slow_path(recf->engine == NULL)) {
82753Sigor@sysoev.ru             return NXT_ERROR;
82853Sigor@sysoev.ru         }
82953Sigor@sysoev.ru 
830115Sigor@sysoev.ru         ret = nxt_router_engine_conf_create(tmcf, recf);
83153Sigor@sysoev.ru         if (nxt_slow_path(ret != NXT_OK)) {
83253Sigor@sysoev.ru             return ret;
83353Sigor@sysoev.ru         }
83453Sigor@sysoev.ru 
835115Sigor@sysoev.ru         nxt_queue_insert_tail(&router->engines, &recf->engine->link0);
836115Sigor@sysoev.ru 
83753Sigor@sysoev.ru         n++;
83853Sigor@sysoev.ru     }
83953Sigor@sysoev.ru 
84053Sigor@sysoev.ru     return NXT_OK;
84153Sigor@sysoev.ru }
84253Sigor@sysoev.ru 
84353Sigor@sysoev.ru 
84453Sigor@sysoev.ru static nxt_int_t
845115Sigor@sysoev.ru nxt_router_engine_conf_create(nxt_router_temp_conf_t *tmcf,
846115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf)
84753Sigor@sysoev.ru {
848115Sigor@sysoev.ru     nxt_mp_t               *mp;
849115Sigor@sysoev.ru     nxt_int_t              ret;
850115Sigor@sysoev.ru     nxt_thread_spinlock_t  *lock;
85153Sigor@sysoev.ru 
85253Sigor@sysoev.ru     recf->creating = nxt_array_create(tmcf->mem_pool, 4, sizeof(nxt_work_t));
85353Sigor@sysoev.ru     if (nxt_slow_path(recf->creating == NULL)) {
85453Sigor@sysoev.ru         return NXT_ERROR;
85553Sigor@sysoev.ru     }
85653Sigor@sysoev.ru 
857115Sigor@sysoev.ru     mp = tmcf->conf->mem_pool;
858115Sigor@sysoev.ru 
859139Sigor@sysoev.ru     ret = nxt_router_engine_joints_create(mp, tmcf, recf, &tmcf->creating,
860115Sigor@sysoev.ru                             recf->creating, nxt_router_listen_socket_create);
861115Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
862115Sigor@sysoev.ru         return ret;
863115Sigor@sysoev.ru     }
864115Sigor@sysoev.ru 
865139Sigor@sysoev.ru     ret = nxt_router_engine_joints_create(mp, tmcf, recf, &tmcf->updating,
86653Sigor@sysoev.ru                             recf->creating, nxt_router_listen_socket_create);
86753Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
86853Sigor@sysoev.ru         return ret;
86953Sigor@sysoev.ru     }
87053Sigor@sysoev.ru 
871115Sigor@sysoev.ru     lock = &tmcf->conf->router->lock;
872115Sigor@sysoev.ru 
873115Sigor@sysoev.ru     nxt_thread_spin_lock(lock);
874115Sigor@sysoev.ru 
875115Sigor@sysoev.ru     nxt_router_engine_socket_count(&tmcf->creating);
876115Sigor@sysoev.ru     nxt_router_engine_socket_count(&tmcf->updating);
877115Sigor@sysoev.ru 
878115Sigor@sysoev.ru     nxt_thread_spin_unlock(lock);
879115Sigor@sysoev.ru 
880115Sigor@sysoev.ru     return ret;
88153Sigor@sysoev.ru }
88253Sigor@sysoev.ru 
88353Sigor@sysoev.ru 
88453Sigor@sysoev.ru static nxt_int_t
885115Sigor@sysoev.ru nxt_router_engine_conf_update(nxt_router_temp_conf_t *tmcf,
886115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf)
88753Sigor@sysoev.ru {
888115Sigor@sysoev.ru     nxt_mp_t               *mp;
889115Sigor@sysoev.ru     nxt_int_t              ret;
890115Sigor@sysoev.ru     nxt_thread_spinlock_t  *lock;
89153Sigor@sysoev.ru 
89253Sigor@sysoev.ru     recf->creating = nxt_array_create(tmcf->mem_pool, 4, sizeof(nxt_work_t));
89353Sigor@sysoev.ru     if (nxt_slow_path(recf->creating == NULL)) {
89453Sigor@sysoev.ru         return NXT_ERROR;
89553Sigor@sysoev.ru     }
89653Sigor@sysoev.ru 
897115Sigor@sysoev.ru     mp = tmcf->conf->mem_pool;
898115Sigor@sysoev.ru 
899139Sigor@sysoev.ru     ret = nxt_router_engine_joints_create(mp, tmcf, recf, &tmcf->creating,
90053Sigor@sysoev.ru                             recf->creating, nxt_router_listen_socket_create);
90153Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
90253Sigor@sysoev.ru         return ret;
90353Sigor@sysoev.ru     }
90453Sigor@sysoev.ru 
90553Sigor@sysoev.ru     recf->updating = nxt_array_create(tmcf->mem_pool, 4, sizeof(nxt_work_t));
90653Sigor@sysoev.ru     if (nxt_slow_path(recf->updating == NULL)) {
90753Sigor@sysoev.ru         return NXT_ERROR;
90853Sigor@sysoev.ru     }
90953Sigor@sysoev.ru 
910139Sigor@sysoev.ru     ret = nxt_router_engine_joints_create(mp, tmcf, recf, &tmcf->updating,
91153Sigor@sysoev.ru                             recf->updating, nxt_router_listen_socket_update);
91253Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
91353Sigor@sysoev.ru         return ret;
91453Sigor@sysoev.ru     }
91553Sigor@sysoev.ru 
91653Sigor@sysoev.ru     recf->deleting = nxt_array_create(tmcf->mem_pool, 4, sizeof(nxt_work_t));
91753Sigor@sysoev.ru     if (nxt_slow_path(recf->deleting == NULL)) {
91853Sigor@sysoev.ru         return NXT_ERROR;
91953Sigor@sysoev.ru     }
92053Sigor@sysoev.ru 
921139Sigor@sysoev.ru     ret = nxt_router_engine_joints_delete(tmcf, recf, &tmcf->deleting);
922115Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
923115Sigor@sysoev.ru         return ret;
924115Sigor@sysoev.ru     }
925115Sigor@sysoev.ru 
926115Sigor@sysoev.ru     lock = &tmcf->conf->router->lock;
927115Sigor@sysoev.ru 
928115Sigor@sysoev.ru     nxt_thread_spin_lock(lock);
929115Sigor@sysoev.ru 
930115Sigor@sysoev.ru     nxt_router_engine_socket_count(&tmcf->creating);
931115Sigor@sysoev.ru 
932115Sigor@sysoev.ru     nxt_thread_spin_unlock(lock);
933115Sigor@sysoev.ru 
934115Sigor@sysoev.ru     return ret;
93553Sigor@sysoev.ru }
93653Sigor@sysoev.ru 
93753Sigor@sysoev.ru 
93853Sigor@sysoev.ru static nxt_int_t
939115Sigor@sysoev.ru nxt_router_engine_conf_delete(nxt_router_temp_conf_t *tmcf,
940115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf)
94153Sigor@sysoev.ru {
94253Sigor@sysoev.ru     nxt_int_t  ret;
94353Sigor@sysoev.ru 
94453Sigor@sysoev.ru     recf->deleting = nxt_array_create(tmcf->mem_pool, 4, sizeof(nxt_work_t));
94553Sigor@sysoev.ru     if (nxt_slow_path(recf->deleting == NULL)) {
94653Sigor@sysoev.ru         return NXT_ERROR;
94753Sigor@sysoev.ru     }
94853Sigor@sysoev.ru 
949139Sigor@sysoev.ru     ret = nxt_router_engine_joints_delete(tmcf, recf, &tmcf->updating);
95053Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
95153Sigor@sysoev.ru         return ret;
95253Sigor@sysoev.ru     }
95353Sigor@sysoev.ru 
954139Sigor@sysoev.ru     return nxt_router_engine_joints_delete(tmcf, recf, &tmcf->deleting);
95553Sigor@sysoev.ru }
95653Sigor@sysoev.ru 
95753Sigor@sysoev.ru 
95853Sigor@sysoev.ru static nxt_int_t
959139Sigor@sysoev.ru nxt_router_engine_joints_create(nxt_mp_t *mp, nxt_router_temp_conf_t *tmcf,
960139Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets, nxt_array_t *array,
96153Sigor@sysoev.ru     nxt_work_handler_t handler)
96253Sigor@sysoev.ru {
963139Sigor@sysoev.ru     nxt_work_t               *work, *back;
96453Sigor@sysoev.ru     nxt_queue_link_t         *qlk;
96553Sigor@sysoev.ru     nxt_socket_conf_joint_t  *joint;
96653Sigor@sysoev.ru 
96753Sigor@sysoev.ru     for (qlk = nxt_queue_first(sockets);
96853Sigor@sysoev.ru          qlk != nxt_queue_tail(sockets);
96953Sigor@sysoev.ru          qlk = nxt_queue_next(qlk))
97053Sigor@sysoev.ru     {
971139Sigor@sysoev.ru         back = nxt_mp_get(tmcf->mem_pool, sizeof(nxt_work_t));
972139Sigor@sysoev.ru         if (nxt_slow_path(back == NULL)) {
973139Sigor@sysoev.ru             return NXT_ERROR;
974139Sigor@sysoev.ru         }
975139Sigor@sysoev.ru 
976139Sigor@sysoev.ru         back->next = NULL;
977139Sigor@sysoev.ru         back->handler = nxt_router_conf_wait;
978139Sigor@sysoev.ru         back->task = &tmcf->engine->task;
979139Sigor@sysoev.ru         back->obj = tmcf;
980139Sigor@sysoev.ru         back->data = NULL;
981139Sigor@sysoev.ru 
98253Sigor@sysoev.ru         work = nxt_array_add(array);
98353Sigor@sysoev.ru         if (nxt_slow_path(work == NULL)) {
98453Sigor@sysoev.ru             return NXT_ERROR;
98553Sigor@sysoev.ru         }
98653Sigor@sysoev.ru 
98753Sigor@sysoev.ru         work->next = NULL;
98853Sigor@sysoev.ru         work->handler = handler;
989139Sigor@sysoev.ru         work->task = &recf->engine->task;
990139Sigor@sysoev.ru         work->obj = back;
99153Sigor@sysoev.ru 
99265Sigor@sysoev.ru         joint = nxt_mp_alloc(mp, sizeof(nxt_socket_conf_joint_t));
99353Sigor@sysoev.ru         if (nxt_slow_path(joint == NULL)) {
99453Sigor@sysoev.ru             return NXT_ERROR;
99553Sigor@sysoev.ru         }
99653Sigor@sysoev.ru 
99753Sigor@sysoev.ru         work->data = joint;
99853Sigor@sysoev.ru 
99953Sigor@sysoev.ru         joint->count = 1;
100053Sigor@sysoev.ru         joint->socket_conf = nxt_queue_link_data(qlk, nxt_socket_conf_t, link);
100188Smax.romanov@nginx.com         joint->engine = recf->engine;
1002115Sigor@sysoev.ru 
1003115Sigor@sysoev.ru         nxt_queue_insert_tail(&joint->engine->joints, &joint->link);
100453Sigor@sysoev.ru     }
100553Sigor@sysoev.ru 
100620Sigor@sysoev.ru     return NXT_OK;
100720Sigor@sysoev.ru }
100820Sigor@sysoev.ru 
100920Sigor@sysoev.ru 
1010115Sigor@sysoev.ru static void
1011115Sigor@sysoev.ru nxt_router_engine_socket_count(nxt_queue_t *sockets)
1012115Sigor@sysoev.ru {
1013115Sigor@sysoev.ru     nxt_queue_link_t   *qlk;
1014115Sigor@sysoev.ru     nxt_socket_conf_t  *skcf;
1015115Sigor@sysoev.ru 
1016115Sigor@sysoev.ru     for (qlk = nxt_queue_first(sockets);
1017115Sigor@sysoev.ru          qlk != nxt_queue_tail(sockets);
1018115Sigor@sysoev.ru          qlk = nxt_queue_next(qlk))
1019115Sigor@sysoev.ru     {
1020115Sigor@sysoev.ru         skcf = nxt_queue_link_data(qlk, nxt_socket_conf_t, link);
1021115Sigor@sysoev.ru         skcf->socket->count++;
1022115Sigor@sysoev.ru     }
1023115Sigor@sysoev.ru }
1024115Sigor@sysoev.ru 
1025115Sigor@sysoev.ru 
102620Sigor@sysoev.ru static nxt_int_t
1027139Sigor@sysoev.ru nxt_router_engine_joints_delete(nxt_router_temp_conf_t *tmcf,
1028139Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets)
102920Sigor@sysoev.ru {
1030139Sigor@sysoev.ru     nxt_work_t        *work, *back;
103153Sigor@sysoev.ru     nxt_queue_link_t  *qlk;
103220Sigor@sysoev.ru 
103353Sigor@sysoev.ru     for (qlk = nxt_queue_first(sockets);
103453Sigor@sysoev.ru          qlk != nxt_queue_tail(sockets);
103553Sigor@sysoev.ru          qlk = nxt_queue_next(qlk))
103653Sigor@sysoev.ru     {
1037139Sigor@sysoev.ru         back = nxt_mp_get(tmcf->mem_pool, sizeof(nxt_work_t));
1038139Sigor@sysoev.ru         if (nxt_slow_path(back == NULL)) {
1039139Sigor@sysoev.ru             return NXT_ERROR;
1040139Sigor@sysoev.ru         }
1041139Sigor@sysoev.ru 
1042139Sigor@sysoev.ru         back->next = NULL;
1043139Sigor@sysoev.ru         back->handler = nxt_router_conf_wait;
1044139Sigor@sysoev.ru         back->task = &tmcf->engine->task;
1045139Sigor@sysoev.ru         back->obj = tmcf;
1046139Sigor@sysoev.ru         back->data = NULL;
1047139Sigor@sysoev.ru 
1048115Sigor@sysoev.ru         work = nxt_array_add(recf->deleting);
104953Sigor@sysoev.ru         if (nxt_slow_path(work == NULL)) {
105053Sigor@sysoev.ru             return NXT_ERROR;
105153Sigor@sysoev.ru         }
105220Sigor@sysoev.ru 
105353Sigor@sysoev.ru         work->next = NULL;
105453Sigor@sysoev.ru         work->handler = nxt_router_listen_socket_delete;
1055139Sigor@sysoev.ru         work->task = &recf->engine->task;
1056139Sigor@sysoev.ru         work->obj = back;
105753Sigor@sysoev.ru         work->data = nxt_queue_link_data(qlk, nxt_socket_conf_t, link);
105820Sigor@sysoev.ru     }
105920Sigor@sysoev.ru 
106053Sigor@sysoev.ru     return NXT_OK;
106153Sigor@sysoev.ru }
106220Sigor@sysoev.ru 
106320Sigor@sysoev.ru 
106453Sigor@sysoev.ru static nxt_int_t
106553