xref: /unit/src/nxt_router.c (revision 1546)
120Sigor@sysoev.ru 
220Sigor@sysoev.ru /*
320Sigor@sysoev.ru  * Copyright (C) Igor Sysoev
420Sigor@sysoev.ru  * Copyright (C) Valentin V. Bartenev
520Sigor@sysoev.ru  * Copyright (C) NGINX, Inc.
620Sigor@sysoev.ru  */
720Sigor@sysoev.ru 
853Sigor@sysoev.ru #include <nxt_router.h>
9115Sigor@sysoev.ru #include <nxt_conf.h>
10774Svbart@nginx.com #if (NXT_TLS)
11774Svbart@nginx.com #include <nxt_cert.h>
12774Svbart@nginx.com #endif
13431Sigor@sysoev.ru #include <nxt_http.h>
14743Smax.romanov@nginx.com #include <nxt_port_memory_int.h>
15743Smax.romanov@nginx.com #include <nxt_unit_request.h>
16743Smax.romanov@nginx.com #include <nxt_unit_response.h>
171131Smax.romanov@nginx.com #include <nxt_router_request.h>
1820Sigor@sysoev.ru 
19115Sigor@sysoev.ru typedef struct {
20318Smax.romanov@nginx.com     nxt_str_t         type;
21507Smax.romanov@nginx.com     uint32_t          processes;
22507Smax.romanov@nginx.com     uint32_t          max_processes;
23507Smax.romanov@nginx.com     uint32_t          spare_processes;
24318Smax.romanov@nginx.com     nxt_msec_t        timeout;
25427Smax.romanov@nginx.com     nxt_msec_t        res_timeout;
26507Smax.romanov@nginx.com     nxt_msec_t        idle_timeout;
27318Smax.romanov@nginx.com     uint32_t          requests;
28318Smax.romanov@nginx.com     nxt_conf_value_t  *limits_value;
29507Smax.romanov@nginx.com     nxt_conf_value_t  *processes_value;
301473Svbart@nginx.com     nxt_conf_value_t  *targets_value;
31133Sigor@sysoev.ru } nxt_router_app_conf_t;
32133Sigor@sysoev.ru 
33133Sigor@sysoev.ru 
34133Sigor@sysoev.ru typedef struct {
35964Sigor@sysoev.ru     nxt_str_t         pass;
36964Sigor@sysoev.ru     nxt_str_t         application;
37115Sigor@sysoev.ru } nxt_router_listener_conf_t;
38115Sigor@sysoev.ru 
39115Sigor@sysoev.ru 
40774Svbart@nginx.com #if (NXT_TLS)
41774Svbart@nginx.com 
42774Svbart@nginx.com typedef struct {
43774Svbart@nginx.com     nxt_str_t          name;
44774Svbart@nginx.com     nxt_socket_conf_t  *conf;
45774Svbart@nginx.com 
46774Svbart@nginx.com     nxt_queue_link_t   link;  /* for nxt_socket_conf_t.tls */
47774Svbart@nginx.com } nxt_router_tlssock_t;
48774Svbart@nginx.com 
49774Svbart@nginx.com #endif
50774Svbart@nginx.com 
51774Svbart@nginx.com 
52198Sigor@sysoev.ru typedef struct {
53198Sigor@sysoev.ru     nxt_socket_conf_t       *socket_conf;
54198Sigor@sysoev.ru     nxt_router_temp_conf_t  *temp_conf;
55198Sigor@sysoev.ru } nxt_socket_rpc_t;
56198Sigor@sysoev.ru 
57198Sigor@sysoev.ru 
58507Smax.romanov@nginx.com typedef struct {
59507Smax.romanov@nginx.com     nxt_app_t               *app;
60507Smax.romanov@nginx.com     nxt_router_temp_conf_t  *temp_conf;
61507Smax.romanov@nginx.com } nxt_app_rpc_t;
62507Smax.romanov@nginx.com 
63507Smax.romanov@nginx.com 
64427Smax.romanov@nginx.com struct nxt_port_select_state_s {
651123Smax.romanov@nginx.com     nxt_app_t               *app;
661123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
671123Smax.romanov@nginx.com 
681123Smax.romanov@nginx.com     nxt_port_t              *failed_port;
691123Smax.romanov@nginx.com     int                     failed_port_use_delta;
701123Smax.romanov@nginx.com 
711123Smax.romanov@nginx.com     uint8_t                 start_process;    /* 1 bit */
721123Smax.romanov@nginx.com     nxt_request_app_link_t  *shared_ra;
731123Smax.romanov@nginx.com     nxt_port_t              *port;
74427Smax.romanov@nginx.com };
75427Smax.romanov@nginx.com 
76427Smax.romanov@nginx.com typedef struct nxt_port_select_state_s nxt_port_select_state_t;
77427Smax.romanov@nginx.com 
781488St.nateldemoura@f5.com static nxt_int_t nxt_router_prefork(nxt_task_t *task, nxt_process_t *process,
791488St.nateldemoura@f5.com     nxt_mp_t *mp);
801488St.nateldemoura@f5.com static nxt_int_t nxt_router_start(nxt_task_t *task, nxt_process_data_t *data);
81662Smax.romanov@nginx.com static void nxt_router_greet_controller(nxt_task_t *task,
82662Smax.romanov@nginx.com     nxt_port_t *controller_port);
83662Smax.romanov@nginx.com 
84427Smax.romanov@nginx.com static void nxt_router_port_select(nxt_task_t *task,
85427Smax.romanov@nginx.com     nxt_port_select_state_t *state);
86427Smax.romanov@nginx.com 
87427Smax.romanov@nginx.com static nxt_int_t nxt_router_port_post_select(nxt_task_t *task,
88427Smax.romanov@nginx.com     nxt_port_select_state_t *state);
89427Smax.romanov@nginx.com 
90507Smax.romanov@nginx.com static nxt_int_t nxt_router_start_app_process(nxt_task_t *task, nxt_app_t *app);
911123Smax.romanov@nginx.com static void nxt_request_app_link_update_peer(nxt_task_t *task,
921123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link);
931123Smax.romanov@nginx.com 
94343Smax.romanov@nginx.com 
95425Smax.romanov@nginx.com nxt_inline void
961123Smax.romanov@nginx.com nxt_request_app_link_inc_use(nxt_request_app_link_t *req_app_link)
97425Smax.romanov@nginx.com {
981123Smax.romanov@nginx.com     nxt_atomic_fetch_add(&req_app_link->use_count, 1);
99425Smax.romanov@nginx.com }
100425Smax.romanov@nginx.com 
101425Smax.romanov@nginx.com nxt_inline void
1021294Smax.romanov@nginx.com nxt_request_app_link_chk_use(nxt_request_app_link_t *req_app_link, int i)
103425Smax.romanov@nginx.com {
104538Svbart@nginx.com #if (NXT_DEBUG)
105425Smax.romanov@nginx.com     int  c;
106425Smax.romanov@nginx.com 
1071294Smax.romanov@nginx.com     c = nxt_atomic_fetch_add(&req_app_link->use_count, i);
1081294Smax.romanov@nginx.com 
1091294Smax.romanov@nginx.com     nxt_assert((c + i) > 0);
110538Svbart@nginx.com #else
1111294Smax.romanov@nginx.com     (void) nxt_atomic_fetch_add(&req_app_link->use_count, i);
112538Svbart@nginx.com #endif
113425Smax.romanov@nginx.com }
114425Smax.romanov@nginx.com 
1151123Smax.romanov@nginx.com static void nxt_request_app_link_use(nxt_task_t *task,
1161123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link, int i);
117425Smax.romanov@nginx.com 
118139Sigor@sysoev.ru static nxt_router_temp_conf_t *nxt_router_temp_conf(nxt_task_t *task);
119198Sigor@sysoev.ru static void nxt_router_conf_apply(nxt_task_t *task, void *obj, void *data);
120198Sigor@sysoev.ru static void nxt_router_conf_ready(nxt_task_t *task,
121139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
122139Sigor@sysoev.ru static void nxt_router_conf_error(nxt_task_t *task,
123139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
124139Sigor@sysoev.ru static void nxt_router_conf_send(nxt_task_t *task,
125193Smax.romanov@nginx.com     nxt_router_temp_conf_t *tmcf, nxt_port_msg_type_t type);
12653Sigor@sysoev.ru 
127115Sigor@sysoev.ru static nxt_int_t nxt_router_conf_create(nxt_task_t *task,
128115Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, u_char *start, u_char *end);
1291183Svbart@nginx.com static nxt_int_t nxt_router_conf_process_static(nxt_task_t *task,
1301183Svbart@nginx.com     nxt_router_conf_t *rtcf, nxt_conf_value_t *conf);
131133Sigor@sysoev.ru static nxt_app_t *nxt_router_app_find(nxt_queue_t *queue, nxt_str_t *name);
132198Sigor@sysoev.ru static void nxt_router_listen_socket_rpc_create(nxt_task_t *task,
133198Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, nxt_socket_conf_t *skcf);
134198Sigor@sysoev.ru static void nxt_router_listen_socket_ready(nxt_task_t *task,
135198Sigor@sysoev.ru     nxt_port_recv_msg_t *msg, void *data);
136198Sigor@sysoev.ru static void nxt_router_listen_socket_error(nxt_task_t *task,
137198Sigor@sysoev.ru     nxt_port_recv_msg_t *msg, void *data);
138774Svbart@nginx.com #if (NXT_TLS)
139774Svbart@nginx.com static void nxt_router_tls_rpc_create(nxt_task_t *task,
140774Svbart@nginx.com     nxt_router_temp_conf_t *tmcf, nxt_router_tlssock_t *tls);
141774Svbart@nginx.com static void nxt_router_tls_rpc_handler(nxt_task_t *task,
142774Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
143774Svbart@nginx.com #endif
144507Smax.romanov@nginx.com static void nxt_router_app_rpc_create(nxt_task_t *task,
145507Smax.romanov@nginx.com     nxt_router_temp_conf_t *tmcf, nxt_app_t *app);
146507Smax.romanov@nginx.com static void nxt_router_app_prefork_ready(nxt_task_t *task,
147507Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
148507Smax.romanov@nginx.com static void nxt_router_app_prefork_error(nxt_task_t *task,
149507Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
150359Sigor@sysoev.ru static nxt_socket_conf_t *nxt_router_socket_conf(nxt_task_t *task,
151359Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, nxt_str_t *name);
152359Sigor@sysoev.ru static nxt_int_t nxt_router_listen_socket_find(nxt_router_temp_conf_t *tmcf,
153359Sigor@sysoev.ru     nxt_socket_conf_t *nskcf, nxt_sockaddr_t *sa);
15453Sigor@sysoev.ru 
15553Sigor@sysoev.ru static nxt_int_t nxt_router_engines_create(nxt_task_t *task,
15653Sigor@sysoev.ru     nxt_router_t *router, nxt_router_temp_conf_t *tmcf,
15753Sigor@sysoev.ru     const nxt_event_interface_t *interface);
158115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_create(nxt_router_temp_conf_t *tmcf,
159115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
160115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_update(nxt_router_temp_conf_t *tmcf,
161115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
162115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_delete(nxt_router_temp_conf_t *tmcf,
163115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
164154Sigor@sysoev.ru static nxt_int_t nxt_router_engine_joints_create(nxt_router_temp_conf_t *tmcf,
165154Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets,
166154Sigor@sysoev.ru     nxt_work_handler_t handler);
167313Sigor@sysoev.ru static nxt_int_t nxt_router_engine_quit(nxt_router_temp_conf_t *tmcf,
168313Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
169139Sigor@sysoev.ru static nxt_int_t nxt_router_engine_joints_delete(nxt_router_temp_conf_t *tmcf,
170139Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets);
17153Sigor@sysoev.ru 
17253Sigor@sysoev.ru static nxt_int_t nxt_router_threads_create(nxt_task_t *task, nxt_runtime_t *rt,
17353Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
17453Sigor@sysoev.ru static nxt_int_t nxt_router_thread_create(nxt_task_t *task, nxt_runtime_t *rt,
17553Sigor@sysoev.ru     nxt_event_engine_t *engine);
176343Smax.romanov@nginx.com static void nxt_router_apps_sort(nxt_task_t *task, nxt_router_t *router,
177133Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
17853Sigor@sysoev.ru 
179315Sigor@sysoev.ru static void nxt_router_engines_post(nxt_router_t *router,
180315Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
181315Sigor@sysoev.ru static void nxt_router_engine_post(nxt_event_engine_t *engine,
182315Sigor@sysoev.ru     nxt_work_t *jobs);
18353Sigor@sysoev.ru 
18453Sigor@sysoev.ru static void nxt_router_thread_start(void *data);
1851545Smax.romanov@nginx.com static void nxt_router_rt_add_port(nxt_task_t *task, void *obj,
1861545Smax.romanov@nginx.com     void *data);
18753Sigor@sysoev.ru static void nxt_router_listen_socket_create(nxt_task_t *task, void *obj,
18853Sigor@sysoev.ru     void *data);
18953Sigor@sysoev.ru static void nxt_router_listen_socket_update(nxt_task_t *task, void *obj,
19053Sigor@sysoev.ru     void *data);
19153Sigor@sysoev.ru static void nxt_router_listen_socket_delete(nxt_task_t *task, void *obj,
19253Sigor@sysoev.ru     void *data);
193313Sigor@sysoev.ru static void nxt_router_worker_thread_quit(nxt_task_t *task, void *obj,
194313Sigor@sysoev.ru     void *data);
19553Sigor@sysoev.ru static void nxt_router_listen_socket_close(nxt_task_t *task, void *obj,
19653Sigor@sysoev.ru     void *data);
19753Sigor@sysoev.ru static void nxt_router_thread_exit_handler(nxt_task_t *task, void *obj,
19853Sigor@sysoev.ru     void *data);
199359Sigor@sysoev.ru static void nxt_router_listen_socket_release(nxt_task_t *task,
200359Sigor@sysoev.ru     nxt_socket_conf_t *skcf);
20153Sigor@sysoev.ru 
202630Svbart@nginx.com static void nxt_router_access_log_writer(nxt_task_t *task,
203630Svbart@nginx.com     nxt_http_request_t *r, nxt_router_access_log_t *access_log);
204630Svbart@nginx.com static u_char *nxt_router_access_log_date(u_char *buf, nxt_realtime_t *now,
205630Svbart@nginx.com     struct tm *tm, size_t size, const char *format);
206630Svbart@nginx.com static void nxt_router_access_log_open(nxt_task_t *task,
207630Svbart@nginx.com     nxt_router_temp_conf_t *tmcf);
208630Svbart@nginx.com static void nxt_router_access_log_ready(nxt_task_t *task,
209630Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
210630Svbart@nginx.com static void nxt_router_access_log_error(nxt_task_t *task,
211630Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
212630Svbart@nginx.com static void nxt_router_access_log_release(nxt_task_t *task,
213630Svbart@nginx.com     nxt_thread_spinlock_t *lock, nxt_router_access_log_t *access_log);
214651Svbart@nginx.com static void nxt_router_access_log_reopen_completion(nxt_task_t *task, void *obj,
215651Svbart@nginx.com     void *data);
216631Svbart@nginx.com static void nxt_router_access_log_reopen_ready(nxt_task_t *task,
217631Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
218631Svbart@nginx.com static void nxt_router_access_log_reopen_error(nxt_task_t *task,
219631Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
220630Svbart@nginx.com 
221343Smax.romanov@nginx.com static void nxt_router_app_port_ready(nxt_task_t *task,
222343Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
223343Smax.romanov@nginx.com static void nxt_router_app_port_error(nxt_task_t *task,
224343Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
225343Smax.romanov@nginx.com 
226753Smax.romanov@nginx.com static void nxt_router_app_unlink(nxt_task_t *task, nxt_app_t *app);
2271123Smax.romanov@nginx.com 
228343Smax.romanov@nginx.com static void nxt_router_app_port_release(nxt_task_t *task, nxt_port_t *port,
2291123Smax.romanov@nginx.com     nxt_apr_action_t action);
230427Smax.romanov@nginx.com static nxt_int_t nxt_router_app_port(nxt_task_t *task, nxt_app_t *app,
2311123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link);
232141Smax.romanov@nginx.com 
233425Smax.romanov@nginx.com static void nxt_router_app_prepare_request(nxt_task_t *task,
2341123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link);
2351007Salexander.borisov@nginx.com static nxt_buf_t *nxt_router_prepare_msg(nxt_task_t *task,
2361007Salexander.borisov@nginx.com     nxt_http_request_t *r, nxt_port_t *port, const nxt_str_t *prefix);
237510Salexander.borisov@nginx.com 
238318Smax.romanov@nginx.com static void nxt_router_app_timeout(nxt_task_t *task, void *obj, void *data);
239507Smax.romanov@nginx.com static void nxt_router_adjust_idle_timer(nxt_task_t *task, void *obj,
240507Smax.romanov@nginx.com     void *data);
241507Smax.romanov@nginx.com static void nxt_router_app_idle_timeout(nxt_task_t *task, void *obj,
242507Smax.romanov@nginx.com     void *data);
243753Smax.romanov@nginx.com static void nxt_router_app_joint_release_handler(nxt_task_t *task, void *obj,
244507Smax.romanov@nginx.com     void *data);
245753Smax.romanov@nginx.com static void nxt_router_free_app(nxt_task_t *task, void *obj, void *data);
246431Sigor@sysoev.ru 
247431Sigor@sysoev.ru static const nxt_http_request_state_t  nxt_http_request_send_state;
248431Sigor@sysoev.ru static void nxt_http_request_send_body(nxt_task_t *task, void *obj, void *data);
249141Smax.romanov@nginx.com 
250753Smax.romanov@nginx.com static void nxt_router_app_joint_use(nxt_task_t *task,
251753Smax.romanov@nginx.com     nxt_app_joint_t *app_joint, int i);
252753Smax.romanov@nginx.com 
2531007Salexander.borisov@nginx.com static nxt_int_t nxt_router_http_request_done(nxt_task_t *task,
2541007Salexander.borisov@nginx.com     nxt_http_request_t *r);
2551007Salexander.borisov@nginx.com static void nxt_router_http_request_release(nxt_task_t *task, void *obj,
2561007Salexander.borisov@nginx.com     void *data);
2571321Smax.romanov@nginx.com static void nxt_router_oosm_handler(nxt_task_t *task, nxt_port_recv_msg_t *msg);
2581545Smax.romanov@nginx.com static void nxt_router_get_port_handler(nxt_task_t *task,
2591545Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg);
260*1546Smax.romanov@nginx.com static void nxt_router_get_mmap_handler(nxt_task_t *task,
261*1546Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg);
2621007Salexander.borisov@nginx.com 
2631149Smax.romanov@nginx.com extern const nxt_http_request_state_t  nxt_http_websocket;
2641131Smax.romanov@nginx.com 
265119Smax.romanov@nginx.com static nxt_router_t  *nxt_router;
26620Sigor@sysoev.ru 
267743Smax.romanov@nginx.com static const nxt_str_t http_prefix = nxt_string("HTTP_");
268743Smax.romanov@nginx.com static const nxt_str_t empty_prefix = nxt_string("");
269743Smax.romanov@nginx.com 
270743Smax.romanov@nginx.com static const nxt_str_t  *nxt_app_msg_prefix[] = {
271804Svbart@nginx.com     &empty_prefix,
272743Smax.romanov@nginx.com     &http_prefix,
273743Smax.romanov@nginx.com     &http_prefix,
274743Smax.romanov@nginx.com     &http_prefix,
275743Smax.romanov@nginx.com     &http_prefix,
276977Smax.romanov@gmail.com     &empty_prefix,
277216Sigor@sysoev.ru };
278216Sigor@sysoev.ru 
279216Sigor@sysoev.ru 
2801488St.nateldemoura@f5.com static const nxt_port_handlers_t  nxt_router_process_port_handlers = {
2811488St.nateldemoura@f5.com     .quit         = nxt_signal_quit_handler,
282662Smax.romanov@nginx.com     .new_port     = nxt_router_new_port_handler,
2831545Smax.romanov@nginx.com     .get_port     = nxt_router_get_port_handler,
284662Smax.romanov@nginx.com     .change_file  = nxt_port_change_log_file_handler,
285662Smax.romanov@nginx.com     .mmap         = nxt_port_mmap_handler,
286*1546Smax.romanov@nginx.com     .get_mmap     = nxt_router_get_mmap_handler,
287662Smax.romanov@nginx.com     .data         = nxt_router_conf_data_handler,
288662Smax.romanov@nginx.com     .remove_pid   = nxt_router_remove_pid_handler,
289662Smax.romanov@nginx.com     .access_log   = nxt_router_access_log_reopen_handler,
290662Smax.romanov@nginx.com     .rpc_ready    = nxt_port_rpc_handler,
291662Smax.romanov@nginx.com     .rpc_error    = nxt_port_rpc_handler,
2921321Smax.romanov@nginx.com     .oosm         = nxt_router_oosm_handler,
293662Smax.romanov@nginx.com };
294662Smax.romanov@nginx.com 
295662Smax.romanov@nginx.com 
2961488St.nateldemoura@f5.com const nxt_process_init_t  nxt_router_process = {
2971488St.nateldemoura@f5.com     .name           = "router",
2981488St.nateldemoura@f5.com     .type           = NXT_PROCESS_ROUTER,
2991488St.nateldemoura@f5.com     .prefork        = nxt_router_prefork,
3001488St.nateldemoura@f5.com     .restart        = 1,
3011488St.nateldemoura@f5.com     .setup          = nxt_process_core_setup,
3021488St.nateldemoura@f5.com     .start          = nxt_router_start,
3031488St.nateldemoura@f5.com     .port_handlers  = &nxt_router_process_port_handlers,
3041488St.nateldemoura@f5.com     .signals        = nxt_process_signals,
3051488St.nateldemoura@f5.com };
3061488St.nateldemoura@f5.com 
3071488St.nateldemoura@f5.com 
3081509Sigor@sysoev.ru /* Queues of nxt_socket_conf_t */
3091509Sigor@sysoev.ru nxt_queue_t  creating_sockets;
3101509Sigor@sysoev.ru nxt_queue_t  pending_sockets;
3111509Sigor@sysoev.ru nxt_queue_t  updating_sockets;
3121509Sigor@sysoev.ru nxt_queue_t  keeping_sockets;
3131509Sigor@sysoev.ru nxt_queue_t  deleting_sockets;
3141509Sigor@sysoev.ru 
3151509Sigor@sysoev.ru 
3161488St.nateldemoura@f5.com static nxt_int_t
3171488St.nateldemoura@f5.com nxt_router_prefork(nxt_task_t *task, nxt_process_t *process, nxt_mp_t *mp)
3181488St.nateldemoura@f5.com {
3191488St.nateldemoura@f5.com     nxt_runtime_stop_app_processes(task, task->thread->runtime);
3201488St.nateldemoura@f5.com 
3211488St.nateldemoura@f5.com     return NXT_OK;
3221488St.nateldemoura@f5.com }
3231488St.nateldemoura@f5.com 
3241488St.nateldemoura@f5.com 
3251488St.nateldemoura@f5.com static nxt_int_t
3261488St.nateldemoura@f5.com nxt_router_start(nxt_task_t *task, nxt_process_data_t *data)
32720Sigor@sysoev.ru {
328141Smax.romanov@nginx.com     nxt_int_t      ret;
329662Smax.romanov@nginx.com     nxt_port_t     *controller_port;
330141Smax.romanov@nginx.com     nxt_router_t   *router;
331141Smax.romanov@nginx.com     nxt_runtime_t  *rt;
332141Smax.romanov@nginx.com 
333141Smax.romanov@nginx.com     rt = task->thread->runtime;
33453Sigor@sysoev.ru 
3351488St.nateldemoura@f5.com     nxt_log(task, NXT_LOG_INFO, "router started");
3361488St.nateldemoura@f5.com 
337771Sigor@sysoev.ru #if (NXT_TLS)
338771Sigor@sysoev.ru     rt->tls = nxt_service_get(rt->services, "SSL/TLS", "OpenSSL");
339771Sigor@sysoev.ru     if (nxt_slow_path(rt->tls == NULL)) {
340771Sigor@sysoev.ru         return NXT_ERROR;
341771Sigor@sysoev.ru     }
342771Sigor@sysoev.ru 
343771Sigor@sysoev.ru     ret = rt->tls->library_init(task);
344771Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
345771Sigor@sysoev.ru         return ret;
346771Sigor@sysoev.ru     }
347771Sigor@sysoev.ru #endif
348771Sigor@sysoev.ru 
3491459Smax.romanov@nginx.com     ret = nxt_http_init(task);
35088Smax.romanov@nginx.com     if (nxt_slow_path(ret != NXT_OK)) {
35188Smax.romanov@nginx.com         return ret;
35288Smax.romanov@nginx.com     }
35388Smax.romanov@nginx.com 
35453Sigor@sysoev.ru     router = nxt_zalloc(sizeof(nxt_router_t));
35553Sigor@sysoev.ru     if (nxt_slow_path(router == NULL)) {
35653Sigor@sysoev.ru         return NXT_ERROR;
35753Sigor@sysoev.ru     }
35853Sigor@sysoev.ru 
35953Sigor@sysoev.ru     nxt_queue_init(&router->engines);
36053Sigor@sysoev.ru     nxt_queue_init(&router->sockets);
361133Sigor@sysoev.ru     nxt_queue_init(&router->apps);
36253Sigor@sysoev.ru 
363119Smax.romanov@nginx.com     nxt_router = router;
364119Smax.romanov@nginx.com 
365662Smax.romanov@nginx.com     controller_port = rt->port_by_type[NXT_PROCESS_CONTROLLER];
366662Smax.romanov@nginx.com     if (controller_port != NULL) {
367662Smax.romanov@nginx.com         nxt_router_greet_controller(task, controller_port);
368662Smax.romanov@nginx.com     }
369662Smax.romanov@nginx.com 
370115Sigor@sysoev.ru     return NXT_OK;
371115Sigor@sysoev.ru }
372115Sigor@sysoev.ru 
373115Sigor@sysoev.ru 
374343Smax.romanov@nginx.com static void
375662Smax.romanov@nginx.com nxt_router_greet_controller(nxt_task_t *task, nxt_port_t *controller_port)
376662Smax.romanov@nginx.com {
377662Smax.romanov@nginx.com     nxt_port_socket_write(task, controller_port, NXT_PORT_MSG_PROCESS_READY,
378662Smax.romanov@nginx.com                           -1, 0, 0, NULL);
379662Smax.romanov@nginx.com }
380662Smax.romanov@nginx.com 
381662Smax.romanov@nginx.com 
382662Smax.romanov@nginx.com static void
383507Smax.romanov@nginx.com nxt_router_start_app_process_handler(nxt_task_t *task, nxt_port_t *port,
384507Smax.romanov@nginx.com     void *data)
385167Smax.romanov@nginx.com {
386343Smax.romanov@nginx.com     size_t         size;
387343Smax.romanov@nginx.com     uint32_t       stream;
388430Sigor@sysoev.ru     nxt_mp_t       *mp;
389648Svbart@nginx.com     nxt_int_t      ret;
390343Smax.romanov@nginx.com     nxt_app_t      *app;
391343Smax.romanov@nginx.com     nxt_buf_t      *b;
392343Smax.romanov@nginx.com     nxt_port_t     *main_port;
393343Smax.romanov@nginx.com     nxt_runtime_t  *rt;
394343Smax.romanov@nginx.com 
395343Smax.romanov@nginx.com     app = data;
396167Smax.romanov@nginx.com 
397167Smax.romanov@nginx.com     rt = task->thread->runtime;
398240Sigor@sysoev.ru     main_port = rt->port_by_type[NXT_PROCESS_MAIN];
399167Smax.romanov@nginx.com 
400507Smax.romanov@nginx.com     nxt_debug(task, "app '%V' %p start process", &app->name, app);
401343Smax.romanov@nginx.com 
402343Smax.romanov@nginx.com     size = app->name.length + 1 + app->conf.length;
403343Smax.romanov@nginx.com 
404343Smax.romanov@nginx.com     b = nxt_buf_mem_ts_alloc(task, task->thread->engine->mem_pool, size);
405343Smax.romanov@nginx.com 
406343Smax.romanov@nginx.com     if (nxt_slow_path(b == NULL)) {
407343Smax.romanov@nginx.com         goto failed;
408167Smax.romanov@nginx.com     }
409167Smax.romanov@nginx.com 
410343Smax.romanov@nginx.com     nxt_buf_cpystr(b, &app->name);
411343Smax.romanov@nginx.com     *b->mem.free++ = '\0';
412343Smax.romanov@nginx.com     nxt_buf_cpystr(b, &app->conf);
413343Smax.romanov@nginx.com 
414753Smax.romanov@nginx.com     nxt_router_app_joint_use(task, app->joint, 1);
415753Smax.romanov@nginx.com 
416343Smax.romanov@nginx.com     stream = nxt_port_rpc_register_handler(task, port,
417343Smax.romanov@nginx.com                                            nxt_router_app_port_ready,
418343Smax.romanov@nginx.com                                            nxt_router_app_port_error,
419753Smax.romanov@nginx.com                                            -1, app->joint);
420343Smax.romanov@nginx.com 
421343Smax.romanov@nginx.com     if (nxt_slow_path(stream == 0)) {
422753Smax.romanov@nginx.com         nxt_router_app_joint_use(task, app->joint, -1);
423753Smax.romanov@nginx.com 
424343Smax.romanov@nginx.com         goto failed;
425343Smax.romanov@nginx.com     }
426343Smax.romanov@nginx.com 
4271488St.nateldemoura@f5.com     ret = nxt_port_socket_write(task, main_port, NXT_PORT_MSG_START_PROCESS,
4281488St.nateldemoura@f5.com                                 -1, stream, port->id, b);
429648Svbart@nginx.com 
430648Svbart@nginx.com     if (nxt_slow_path(ret != NXT_OK)) {
431648Svbart@nginx.com         nxt_port_rpc_cancel(task, port, stream);
432753Smax.romanov@nginx.com 
433753Smax.romanov@nginx.com         nxt_router_app_joint_use(task, app->joint, -1);
434753Smax.romanov@nginx.com 
435648Svbart@nginx.com         goto failed;
436648Svbart@nginx.com     }
437343Smax.romanov@nginx.com 
438753Smax.romanov@nginx.com     nxt_router_app_use(task, app, -1);
439753Smax.romanov@nginx.com 
440343Smax.romanov@nginx.com     return;
441343Smax.romanov@nginx.com 
442343Smax.romanov@nginx.com failed:
443343Smax.romanov@nginx.com 
444648Svbart@nginx.com     if (b != NULL) {
445648Svbart@nginx.com         mp = b->data;
446648Svbart@nginx.com         nxt_mp_free(mp, b);
447648Svbart@nginx.com         nxt_mp_release(mp);
448648Svbart@nginx.com     }
449648Svbart@nginx.com 
450343Smax.romanov@nginx.com     nxt_thread_mutex_lock(&app->mutex);
451343Smax.romanov@nginx.com 
452507Smax.romanov@nginx.com     app->pending_processes--;
453343Smax.romanov@nginx.com 
454343Smax.romanov@nginx.com     nxt_thread_mutex_unlock(&app->mutex);
455343Smax.romanov@nginx.com 
456343Smax.romanov@nginx.com     nxt_router_app_use(task, app, -1);
457167Smax.romanov@nginx.com }
458167Smax.romanov@nginx.com 
459167Smax.romanov@nginx.com 
460753Smax.romanov@nginx.com static void
461753Smax.romanov@nginx.com nxt_router_app_joint_use(nxt_task_t *task, nxt_app_joint_t *app_joint, int i)
462753Smax.romanov@nginx.com {
463753Smax.romanov@nginx.com     app_joint->use_count += i;
464753Smax.romanov@nginx.com 
465753Smax.romanov@nginx.com     if (app_joint->use_count == 0) {
466753Smax.romanov@nginx.com         nxt_assert(app_joint->app == NULL);
467753Smax.romanov@nginx.com 
468753Smax.romanov@nginx.com         nxt_free(app_joint);
469753Smax.romanov@nginx.com     }
470753Smax.romanov@nginx.com }
471753Smax.romanov@nginx.com 
472753Smax.romanov@nginx.com 
473343Smax.romanov@nginx.com static nxt_int_t
474507Smax.romanov@nginx.com nxt_router_start_app_process(nxt_task_t *task, nxt_app_t *app)
475141Smax.romanov@nginx.com {
476343Smax.romanov@nginx.com     nxt_int_t      res;
477343Smax.romanov@nginx.com     nxt_port_t     *router_port;
478343Smax.romanov@nginx.com     nxt_runtime_t  *rt;
479343Smax.romanov@nginx.com 
480343Smax.romanov@nginx.com     rt = task->thread->runtime;
481343Smax.romanov@nginx.com     router_port = rt->port_by_type[NXT_PROCESS_ROUTER];
482343Smax.romanov@nginx.com 
483343Smax.romanov@nginx.com     nxt_router_app_use(task, app, 1);
484343Smax.romanov@nginx.com 
485507Smax.romanov@nginx.com     res = nxt_port_post(task, router_port, nxt_router_start_app_process_handler,
486343Smax.romanov@nginx.com                         app);
487343Smax.romanov@nginx.com 
488343Smax.romanov@nginx.com     if (res == NXT_OK) {
489343Smax.romanov@nginx.com         return res;
490318Smax.romanov@nginx.com     }
491318Smax.romanov@nginx.com 
492343Smax.romanov@nginx.com     nxt_thread_mutex_lock(&app->mutex);
493343Smax.romanov@nginx.com 
494507Smax.romanov@nginx.com     app->pending_processes--;
495343Smax.romanov@nginx.com 
496343Smax.romanov@nginx.com     nxt_thread_mutex_unlock(&app->mutex);
497343Smax.romanov@nginx.com 
498343Smax.romanov@nginx.com     nxt_router_app_use(task, app, -1);
499343Smax.romanov@nginx.com 
500343Smax.romanov@nginx.com     return NXT_ERROR;
501318Smax.romanov@nginx.com }
502318Smax.romanov@nginx.com 
503318Smax.romanov@nginx.com 
504351Smax.romanov@nginx.com nxt_inline void
5051123Smax.romanov@nginx.com nxt_request_app_link_init(nxt_task_t *task,
5061123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link, nxt_request_rpc_data_t *req_rpc_data)
507167Smax.romanov@nginx.com {
5081414Smax.romanov@nginx.com     nxt_buf_t           *body;
509318Smax.romanov@nginx.com     nxt_event_engine_t  *engine;
510351Smax.romanov@nginx.com 
511318Smax.romanov@nginx.com     engine = task->thread->engine;
512167Smax.romanov@nginx.com 
5131123Smax.romanov@nginx.com     nxt_memzero(req_app_link, sizeof(nxt_request_app_link_t));
5141123Smax.romanov@nginx.com 
5151123Smax.romanov@nginx.com     req_app_link->stream = req_rpc_data->stream;
5161123Smax.romanov@nginx.com     req_app_link->use_count = 1;
5171123Smax.romanov@nginx.com     req_app_link->req_rpc_data = req_rpc_data;
5181123Smax.romanov@nginx.com     req_rpc_data->req_app_link = req_app_link;
5191123Smax.romanov@nginx.com     req_app_link->reply_port = engine->port;
5201123Smax.romanov@nginx.com     req_app_link->request = req_rpc_data->request;
5211123Smax.romanov@nginx.com     req_app_link->apr_action = NXT_APR_GOT_RESPONSE;
5221123Smax.romanov@nginx.com 
5231123Smax.romanov@nginx.com     req_app_link->work.handler = NULL;
5241123Smax.romanov@nginx.com     req_app_link->work.task = &engine->task;
5251123Smax.romanov@nginx.com     req_app_link->work.obj = req_app_link;
5261123Smax.romanov@nginx.com     req_app_link->work.data = engine;
5271414Smax.romanov@nginx.com 
5281414Smax.romanov@nginx.com     body = req_rpc_data->request->body;
5291414Smax.romanov@nginx.com 
5301414Smax.romanov@nginx.com     if (body != NULL && nxt_buf_is_file(body)) {
5311414Smax.romanov@nginx.com         req_app_link->body_fd = body->file->fd;
5321414Smax.romanov@nginx.com 
5331414Smax.romanov@nginx.com         body->file->fd = -1;
5341414Smax.romanov@nginx.com 
5351414Smax.romanov@nginx.com     } else {
5361414Smax.romanov@nginx.com         req_app_link->body_fd = -1;
5371414Smax.romanov@nginx.com     }
538351Smax.romanov@nginx.com }
539351Smax.romanov@nginx.com 
540351Smax.romanov@nginx.com 
5411123Smax.romanov@nginx.com nxt_inline nxt_request_app_link_t *
5421123Smax.romanov@nginx.com nxt_request_app_link_alloc(nxt_task_t *task,
5431123Smax.romanov@nginx.com     nxt_request_app_link_t *ra_src, nxt_request_rpc_data_t *req_rpc_data)
544351Smax.romanov@nginx.com {
5451123Smax.romanov@nginx.com     nxt_mp_t                *mp;
5461123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
5471123Smax.romanov@nginx.com 
5481123Smax.romanov@nginx.com     if (ra_src != NULL && ra_src->mem_pool != NULL) {
549425Smax.romanov@nginx.com         return ra_src;
550425Smax.romanov@nginx.com     }
551425Smax.romanov@nginx.com 
5521123Smax.romanov@nginx.com     mp = req_rpc_data->request->mem_pool;
5531123Smax.romanov@nginx.com 
5541123Smax.romanov@nginx.com     req_app_link = nxt_mp_alloc(mp, sizeof(nxt_request_app_link_t));
5551123Smax.romanov@nginx.com 
5561123Smax.romanov@nginx.com     if (nxt_slow_path(req_app_link == NULL)) {
5571123Smax.romanov@nginx.com 
5581123Smax.romanov@nginx.com         req_rpc_data->req_app_link = NULL;
5591123Smax.romanov@nginx.com 
5601123Smax.romanov@nginx.com         if (ra_src != NULL) {
5611123Smax.romanov@nginx.com             ra_src->req_rpc_data = NULL;
5621123Smax.romanov@nginx.com         }
563351Smax.romanov@nginx.com 
564351Smax.romanov@nginx.com         return NULL;
565351Smax.romanov@nginx.com     }
566351Smax.romanov@nginx.com 
567430Sigor@sysoev.ru     nxt_mp_retain(mp);
568430Sigor@sysoev.ru 
5691123Smax.romanov@nginx.com     nxt_request_app_link_init(task, req_app_link, req_rpc_data);
5701123Smax.romanov@nginx.com 
5711414Smax.romanov@nginx.com     if (ra_src != NULL) {
5721414Smax.romanov@nginx.com         req_app_link->body_fd = ra_src->body_fd;
5731414Smax.romanov@nginx.com     }
5741414Smax.romanov@nginx.com 
5751123Smax.romanov@nginx.com     req_app_link->mem_pool = mp;
5761123Smax.romanov@nginx.com 
5771123Smax.romanov@nginx.com     return req_app_link;
578167Smax.romanov@nginx.com }
579167Smax.romanov@nginx.com 
580167Smax.romanov@nginx.com 
581423Smax.romanov@nginx.com nxt_inline nxt_bool_t
582423Smax.romanov@nginx.com nxt_router_msg_cancel(nxt_task_t *task, nxt_msg_info_t *msg_info,
583423Smax.romanov@nginx.com     uint32_t stream)
584423Smax.romanov@nginx.com {
585423Smax.romanov@nginx.com     nxt_buf_t   *b, *next;
586423Smax.romanov@nginx.com     nxt_bool_t  cancelled;
587423Smax.romanov@nginx.com 
588423Smax.romanov@nginx.com     if (msg_info->buf == NULL) {
589423Smax.romanov@nginx.com         return 0;
590423Smax.romanov@nginx.com     }
591423Smax.romanov@nginx.com 
592423Smax.romanov@nginx.com     cancelled = nxt_port_mmap_tracking_cancel(task, &msg_info->tracking,
593423Smax.romanov@nginx.com                                               stream);
594423Smax.romanov@nginx.com 
595423Smax.romanov@nginx.com     if (cancelled) {
596423Smax.romanov@nginx.com         nxt_debug(task, "stream #%uD: cancelled by router", stream);
597423Smax.romanov@nginx.com     }
598423Smax.romanov@nginx.com 
599423Smax.romanov@nginx.com     for (b = msg_info->buf; b != NULL; b = next) {
600423Smax.romanov@nginx.com         next = b->next;
6011269Sigor@sysoev.ru         b->next = NULL;
602423Smax.romanov@nginx.com 
603423Smax.romanov@nginx.com         b->completion_handler = msg_info->completion_handler;
604423Smax.romanov@nginx.com 
605423Smax.romanov@nginx.com         if (b->is_port_mmap_sent) {
606423Smax.romanov@nginx.com             b->is_port_mmap_sent = cancelled == 0;
607423Smax.romanov@nginx.com             b->completion_handler(task, b, b->parent);
608423Smax.romanov@nginx.com         }
609423Smax.romanov@nginx.com     }
610423Smax.romanov@nginx.com 
611423Smax.romanov@nginx.com     msg_info->buf = NULL;
612423Smax.romanov@nginx.com 
613423Smax.romanov@nginx.com     return cancelled;
614423Smax.romanov@nginx.com }
615423Smax.romanov@nginx.com 
616423Smax.romanov@nginx.com 
617167Smax.romanov@nginx.com static void
6181123Smax.romanov@nginx.com nxt_request_app_link_update_peer_handler(nxt_task_t *task, void *obj,
6191123Smax.romanov@nginx.com     void *data)
6201123Smax.romanov@nginx.com {
6211123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
6221123Smax.romanov@nginx.com 
6231123Smax.romanov@nginx.com     req_app_link = obj;
6241123Smax.romanov@nginx.com 
6251123Smax.romanov@nginx.com     nxt_request_app_link_update_peer(task, req_app_link);
6261123Smax.romanov@nginx.com 
6271123Smax.romanov@nginx.com     nxt_request_app_link_use(task, req_app_link, -1);
6281123Smax.romanov@nginx.com }
629425Smax.romanov@nginx.com 
630425Smax.romanov@nginx.com 
631425Smax.romanov@nginx.com static void
6321123Smax.romanov@nginx.com nxt_request_app_link_update_peer(nxt_task_t *task,
6331123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link)
634167Smax.romanov@nginx.com {
6351123Smax.romanov@nginx.com     nxt_event_engine_t      *engine;
6361123Smax.romanov@nginx.com     nxt_request_rpc_data_t  *req_rpc_data;
6371123Smax.romanov@nginx.com 
6381123Smax.romanov@nginx.com     engine = req_app_link->work.data;
6391123Smax.romanov@nginx.com 
6401123Smax.romanov@nginx.com     if (task->thread->engine != engine) {
6411123Smax.romanov@nginx.com         nxt_request_app_link_inc_use(req_app_link);
6421123Smax.romanov@nginx.com 
6431123Smax.romanov@nginx.com         req_app_link->work.handler = nxt_request_app_link_update_peer_handler;
6441123Smax.romanov@nginx.com         req_app_link->work.task = &engine->task;
6451123Smax.romanov@nginx.com         req_app_link->work.next = NULL;
6461123Smax.romanov@nginx.com 
6471123Smax.romanov@nginx.com         nxt_debug(task, "req_app_link stream #%uD post update peer to %p",
6481123Smax.romanov@nginx.com                   req_app_link->stream, engine);
6491123Smax.romanov@nginx.com 
6501123Smax.romanov@nginx.com         nxt_event_engine_post(engine, &req_app_link->work);
6511123Smax.romanov@nginx.com 
6521123Smax.romanov@nginx.com         return;
6531123Smax.romanov@nginx.com     }
6541123Smax.romanov@nginx.com 
6551123Smax.romanov@nginx.com     nxt_debug(task, "req_app_link stream #%uD update peer",
6561123Smax.romanov@nginx.com               req_app_link->stream);
6571123Smax.romanov@nginx.com 
6581123Smax.romanov@nginx.com     req_rpc_data = req_app_link->req_rpc_data;
6591123Smax.romanov@nginx.com 
6601123Smax.romanov@nginx.com     if (req_rpc_data != NULL && req_app_link->app_port != NULL) {
6611123Smax.romanov@nginx.com         nxt_port_rpc_ex_set_peer(task, engine->port, req_rpc_data,
6621123Smax.romanov@nginx.com                                  req_app_link->app_port->pid);
6631123Smax.romanov@nginx.com     }
664425Smax.romanov@nginx.com }
665425Smax.romanov@nginx.com 
666425Smax.romanov@nginx.com 
667425Smax.romanov@nginx.com static void
6681123Smax.romanov@nginx.com nxt_request_app_link_release(nxt_task_t *task,
6691123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link)
670425Smax.romanov@nginx.com {
671431Sigor@sysoev.ru     nxt_mp_t                *mp;
6721131Smax.romanov@nginx.com     nxt_http_request_t      *r;
6731123Smax.romanov@nginx.com     nxt_request_rpc_data_t  *req_rpc_data;
6741123Smax.romanov@nginx.com 
6751123Smax.romanov@nginx.com     nxt_assert(task->thread->engine == req_app_link->work.data);
6761123Smax.romanov@nginx.com     nxt_assert(req_app_link->use_count == 0);
6771123Smax.romanov@nginx.com 
6781123Smax.romanov@nginx.com     nxt_debug(task, "req_app_link stream #%uD release", req_app_link->stream);
6791123Smax.romanov@nginx.com 
6801123Smax.romanov@nginx.com     req_rpc_data = req_app_link->req_rpc_data;
6811123Smax.romanov@nginx.com 
6821123Smax.romanov@nginx.com     if (req_rpc_data != NULL) {
6831123Smax.romanov@nginx.com         if (nxt_slow_path(req_app_link->err_code != 0)) {
6841123Smax.romanov@nginx.com             nxt_http_request_error(task, req_rpc_data->request,
6851123Smax.romanov@nginx.com                                    req_app_link->err_code);
686423Smax.romanov@nginx.com 
687423Smax.romanov@nginx.com         } else {
6881123Smax.romanov@nginx.com             req_rpc_data->app_port = req_app_link->app_port;
6891123Smax.romanov@nginx.com             req_rpc_data->apr_action = req_app_link->apr_action;
6901123Smax.romanov@nginx.com             req_rpc_data->msg_info = req_app_link->msg_info;
6911123Smax.romanov@nginx.com 
6921123Smax.romanov@nginx.com             if (req_rpc_data->app->timeout != 0) {
6931131Smax.romanov@nginx.com                 r = req_rpc_data->request;
6941131Smax.romanov@nginx.com 
6951131Smax.romanov@nginx.com                 r->timer.handler = nxt_router_app_timeout;
6961131Smax.romanov@nginx.com                 r->timer_data = req_rpc_data;
6971131Smax.romanov@nginx.com                 nxt_timer_add(task->thread->engine, &r->timer,
6981123Smax.romanov@nginx.com                               req_rpc_data->app->timeout);
699425Smax.romanov@nginx.com             }
700425Smax.romanov@nginx.com 
7011123Smax.romanov@nginx.com             req_app_link->app_port = NULL;
7021123Smax.romanov@nginx.com             req_app_link->msg_info.buf = NULL;
703423Smax.romanov@nginx.com         }
704343Smax.romanov@nginx.com 
7051123Smax.romanov@nginx.com         req_rpc_data->req_app_link = NULL;
7061123Smax.romanov@nginx.com         req_app_link->req_rpc_data = NULL;
7071123Smax.romanov@nginx.com     }
7081123Smax.romanov@nginx.com 
7091123Smax.romanov@nginx.com     if (req_app_link->app_port != NULL) {
7101123Smax.romanov@nginx.com         nxt_router_app_port_release(task, req_app_link->app_port,
7111123Smax.romanov@nginx.com                                     req_app_link->apr_action);
7121123Smax.romanov@nginx.com 
7131123Smax.romanov@nginx.com         req_app_link->app_port = NULL;
7141123Smax.romanov@nginx.com     }
7151123Smax.romanov@nginx.com 
7161414Smax.romanov@nginx.com     if (req_app_link->body_fd != -1) {
7171414Smax.romanov@nginx.com         nxt_fd_close(req_app_link->body_fd);
7181414Smax.romanov@nginx.com 
7191414Smax.romanov@nginx.com         req_app_link->body_fd = -1;
7201414Smax.romanov@nginx.com     }
7211414Smax.romanov@nginx.com 
7221123Smax.romanov@nginx.com     nxt_router_msg_cancel(task, &req_app_link->msg_info, req_app_link->stream);
7231123Smax.romanov@nginx.com 
7241123Smax.romanov@nginx.com     mp = req_app_link->mem_pool;
725430Sigor@sysoev.ru 
726430Sigor@sysoev.ru     if (mp != NULL) {
727