xref: /unit/src/nxt_router.c (revision 1131)
120Sigor@sysoev.ru 
220Sigor@sysoev.ru /*
320Sigor@sysoev.ru  * Copyright (C) Igor Sysoev
420Sigor@sysoev.ru  * Copyright (C) Valentin V. Bartenev
520Sigor@sysoev.ru  * Copyright (C) NGINX, Inc.
620Sigor@sysoev.ru  */
720Sigor@sysoev.ru 
853Sigor@sysoev.ru #include <nxt_router.h>
9115Sigor@sysoev.ru #include <nxt_conf.h>
10774Svbart@nginx.com #if (NXT_TLS)
11774Svbart@nginx.com #include <nxt_cert.h>
12774Svbart@nginx.com #endif
13431Sigor@sysoev.ru #include <nxt_http.h>
14743Smax.romanov@nginx.com #include <nxt_port_memory_int.h>
15743Smax.romanov@nginx.com #include <nxt_unit_request.h>
16743Smax.romanov@nginx.com #include <nxt_unit_response.h>
17*1131Smax.romanov@nginx.com #include <nxt_router_request.h>
1820Sigor@sysoev.ru 
19115Sigor@sysoev.ru typedef struct {
20318Smax.romanov@nginx.com     nxt_str_t         type;
21507Smax.romanov@nginx.com     uint32_t          processes;
22507Smax.romanov@nginx.com     uint32_t          max_processes;
23507Smax.romanov@nginx.com     uint32_t          spare_processes;
24318Smax.romanov@nginx.com     nxt_msec_t        timeout;
25427Smax.romanov@nginx.com     nxt_msec_t        res_timeout;
26507Smax.romanov@nginx.com     nxt_msec_t        idle_timeout;
27318Smax.romanov@nginx.com     uint32_t          requests;
28318Smax.romanov@nginx.com     nxt_conf_value_t  *limits_value;
29507Smax.romanov@nginx.com     nxt_conf_value_t  *processes_value;
30133Sigor@sysoev.ru } nxt_router_app_conf_t;
31133Sigor@sysoev.ru 
32133Sigor@sysoev.ru 
33133Sigor@sysoev.ru typedef struct {
34964Sigor@sysoev.ru     nxt_str_t         pass;
35964Sigor@sysoev.ru     nxt_str_t         application;
36115Sigor@sysoev.ru } nxt_router_listener_conf_t;
37115Sigor@sysoev.ru 
38115Sigor@sysoev.ru 
39774Svbart@nginx.com #if (NXT_TLS)
40774Svbart@nginx.com 
41774Svbart@nginx.com typedef struct {
42774Svbart@nginx.com     nxt_str_t          name;
43774Svbart@nginx.com     nxt_socket_conf_t  *conf;
44774Svbart@nginx.com 
45774Svbart@nginx.com     nxt_queue_link_t   link;  /* for nxt_socket_conf_t.tls */
46774Svbart@nginx.com } nxt_router_tlssock_t;
47774Svbart@nginx.com 
48774Svbart@nginx.com #endif
49774Svbart@nginx.com 
50774Svbart@nginx.com 
51198Sigor@sysoev.ru typedef struct {
52198Sigor@sysoev.ru     nxt_socket_conf_t       *socket_conf;
53198Sigor@sysoev.ru     nxt_router_temp_conf_t  *temp_conf;
54198Sigor@sysoev.ru } nxt_socket_rpc_t;
55198Sigor@sysoev.ru 
56198Sigor@sysoev.ru 
57507Smax.romanov@nginx.com typedef struct {
58507Smax.romanov@nginx.com     nxt_app_t               *app;
59507Smax.romanov@nginx.com     nxt_router_temp_conf_t  *temp_conf;
60507Smax.romanov@nginx.com } nxt_app_rpc_t;
61507Smax.romanov@nginx.com 
62507Smax.romanov@nginx.com 
63427Smax.romanov@nginx.com struct nxt_port_select_state_s {
641123Smax.romanov@nginx.com     nxt_app_t               *app;
651123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
661123Smax.romanov@nginx.com 
671123Smax.romanov@nginx.com     nxt_port_t              *failed_port;
681123Smax.romanov@nginx.com     int                     failed_port_use_delta;
691123Smax.romanov@nginx.com 
701123Smax.romanov@nginx.com     uint8_t                 start_process;    /* 1 bit */
711123Smax.romanov@nginx.com     nxt_request_app_link_t  *shared_ra;
721123Smax.romanov@nginx.com     nxt_port_t              *port;
73427Smax.romanov@nginx.com };
74427Smax.romanov@nginx.com 
75427Smax.romanov@nginx.com typedef struct nxt_port_select_state_s nxt_port_select_state_t;
76427Smax.romanov@nginx.com 
77662Smax.romanov@nginx.com static void nxt_router_greet_controller(nxt_task_t *task,
78662Smax.romanov@nginx.com     nxt_port_t *controller_port);
79662Smax.romanov@nginx.com 
80427Smax.romanov@nginx.com static void nxt_router_port_select(nxt_task_t *task,
81427Smax.romanov@nginx.com     nxt_port_select_state_t *state);
82427Smax.romanov@nginx.com 
83427Smax.romanov@nginx.com static nxt_int_t nxt_router_port_post_select(nxt_task_t *task,
84427Smax.romanov@nginx.com     nxt_port_select_state_t *state);
85427Smax.romanov@nginx.com 
86507Smax.romanov@nginx.com static nxt_int_t nxt_router_start_app_process(nxt_task_t *task, nxt_app_t *app);
871123Smax.romanov@nginx.com static void nxt_request_app_link_update_peer(nxt_task_t *task,
881123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link);
891123Smax.romanov@nginx.com 
90343Smax.romanov@nginx.com 
91425Smax.romanov@nginx.com nxt_inline void
921123Smax.romanov@nginx.com nxt_request_app_link_inc_use(nxt_request_app_link_t *req_app_link)
93425Smax.romanov@nginx.com {
941123Smax.romanov@nginx.com     nxt_atomic_fetch_add(&req_app_link->use_count, 1);
95425Smax.romanov@nginx.com }
96425Smax.romanov@nginx.com 
97425Smax.romanov@nginx.com nxt_inline void
981123Smax.romanov@nginx.com nxt_request_app_link_dec_use(nxt_request_app_link_t *req_app_link)
99425Smax.romanov@nginx.com {
100538Svbart@nginx.com #if (NXT_DEBUG)
101425Smax.romanov@nginx.com     int  c;
102425Smax.romanov@nginx.com 
1031123Smax.romanov@nginx.com     c = nxt_atomic_fetch_add(&req_app_link->use_count, -1);
104425Smax.romanov@nginx.com 
105425Smax.romanov@nginx.com     nxt_assert(c > 1);
106538Svbart@nginx.com #else
1071123Smax.romanov@nginx.com     (void) nxt_atomic_fetch_add(&req_app_link->use_count, -1);
108538Svbart@nginx.com #endif
109425Smax.romanov@nginx.com }
110425Smax.romanov@nginx.com 
1111123Smax.romanov@nginx.com static void nxt_request_app_link_use(nxt_task_t *task,
1121123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link, int i);
113425Smax.romanov@nginx.com 
114139Sigor@sysoev.ru static nxt_router_temp_conf_t *nxt_router_temp_conf(nxt_task_t *task);
115198Sigor@sysoev.ru static void nxt_router_conf_apply(nxt_task_t *task, void *obj, void *data);
116198Sigor@sysoev.ru static void nxt_router_conf_ready(nxt_task_t *task,
117139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
118139Sigor@sysoev.ru static void nxt_router_conf_error(nxt_task_t *task,
119139Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
120139Sigor@sysoev.ru static void nxt_router_conf_send(nxt_task_t *task,
121193Smax.romanov@nginx.com     nxt_router_temp_conf_t *tmcf, nxt_port_msg_type_t type);
12253Sigor@sysoev.ru 
123115Sigor@sysoev.ru static nxt_int_t nxt_router_conf_create(nxt_task_t *task,
124115Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, u_char *start, u_char *end);
125133Sigor@sysoev.ru static nxt_app_t *nxt_router_app_find(nxt_queue_t *queue, nxt_str_t *name);
126198Sigor@sysoev.ru static void nxt_router_listen_socket_rpc_create(nxt_task_t *task,
127198Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, nxt_socket_conf_t *skcf);
128198Sigor@sysoev.ru static void nxt_router_listen_socket_ready(nxt_task_t *task,
129198Sigor@sysoev.ru     nxt_port_recv_msg_t *msg, void *data);
130198Sigor@sysoev.ru static void nxt_router_listen_socket_error(nxt_task_t *task,
131198Sigor@sysoev.ru     nxt_port_recv_msg_t *msg, void *data);
132774Svbart@nginx.com #if (NXT_TLS)
133774Svbart@nginx.com static void nxt_router_tls_rpc_create(nxt_task_t *task,
134774Svbart@nginx.com     nxt_router_temp_conf_t *tmcf, nxt_router_tlssock_t *tls);
135774Svbart@nginx.com static void nxt_router_tls_rpc_handler(nxt_task_t *task,
136774Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
137774Svbart@nginx.com #endif
138507Smax.romanov@nginx.com static void nxt_router_app_rpc_create(nxt_task_t *task,
139507Smax.romanov@nginx.com     nxt_router_temp_conf_t *tmcf, nxt_app_t *app);
140507Smax.romanov@nginx.com static void nxt_router_app_prefork_ready(nxt_task_t *task,
141507Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
142507Smax.romanov@nginx.com static void nxt_router_app_prefork_error(nxt_task_t *task,
143507Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
144359Sigor@sysoev.ru static nxt_socket_conf_t *nxt_router_socket_conf(nxt_task_t *task,
145359Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf, nxt_str_t *name);
146359Sigor@sysoev.ru static nxt_int_t nxt_router_listen_socket_find(nxt_router_temp_conf_t *tmcf,
147359Sigor@sysoev.ru     nxt_socket_conf_t *nskcf, nxt_sockaddr_t *sa);
14853Sigor@sysoev.ru 
14953Sigor@sysoev.ru static nxt_int_t nxt_router_engines_create(nxt_task_t *task,
15053Sigor@sysoev.ru     nxt_router_t *router, nxt_router_temp_conf_t *tmcf,
15153Sigor@sysoev.ru     const nxt_event_interface_t *interface);
152115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_create(nxt_router_temp_conf_t *tmcf,
153115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
154115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_update(nxt_router_temp_conf_t *tmcf,
155115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
156115Sigor@sysoev.ru static nxt_int_t nxt_router_engine_conf_delete(nxt_router_temp_conf_t *tmcf,
157115Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
158154Sigor@sysoev.ru static nxt_int_t nxt_router_engine_joints_create(nxt_router_temp_conf_t *tmcf,
159154Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets,
160154Sigor@sysoev.ru     nxt_work_handler_t handler);
161313Sigor@sysoev.ru static nxt_int_t nxt_router_engine_quit(nxt_router_temp_conf_t *tmcf,
162313Sigor@sysoev.ru     nxt_router_engine_conf_t *recf);
163139Sigor@sysoev.ru static nxt_int_t nxt_router_engine_joints_delete(nxt_router_temp_conf_t *tmcf,
164139Sigor@sysoev.ru     nxt_router_engine_conf_t *recf, nxt_queue_t *sockets);
16553Sigor@sysoev.ru 
16653Sigor@sysoev.ru static nxt_int_t nxt_router_threads_create(nxt_task_t *task, nxt_runtime_t *rt,
16753Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
16853Sigor@sysoev.ru static nxt_int_t nxt_router_thread_create(nxt_task_t *task, nxt_runtime_t *rt,
16953Sigor@sysoev.ru     nxt_event_engine_t *engine);
170343Smax.romanov@nginx.com static void nxt_router_apps_sort(nxt_task_t *task, nxt_router_t *router,
171133Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
17253Sigor@sysoev.ru 
173315Sigor@sysoev.ru static void nxt_router_engines_post(nxt_router_t *router,
174315Sigor@sysoev.ru     nxt_router_temp_conf_t *tmcf);
175315Sigor@sysoev.ru static void nxt_router_engine_post(nxt_event_engine_t *engine,
176315Sigor@sysoev.ru     nxt_work_t *jobs);
17753Sigor@sysoev.ru 
17853Sigor@sysoev.ru static void nxt_router_thread_start(void *data);
17953Sigor@sysoev.ru static void nxt_router_listen_socket_create(nxt_task_t *task, void *obj,
18053Sigor@sysoev.ru     void *data);
18153Sigor@sysoev.ru static void nxt_router_listen_socket_update(nxt_task_t *task, void *obj,
18253Sigor@sysoev.ru     void *data);
18353Sigor@sysoev.ru static void nxt_router_listen_socket_delete(nxt_task_t *task, void *obj,
18453Sigor@sysoev.ru     void *data);
185313Sigor@sysoev.ru static void nxt_router_worker_thread_quit(nxt_task_t *task, void *obj,
186313Sigor@sysoev.ru     void *data);
18753Sigor@sysoev.ru static void nxt_router_listen_socket_close(nxt_task_t *task, void *obj,
18853Sigor@sysoev.ru     void *data);
18953Sigor@sysoev.ru static void nxt_router_thread_exit_handler(nxt_task_t *task, void *obj,
19053Sigor@sysoev.ru     void *data);
191359Sigor@sysoev.ru static void nxt_router_listen_socket_release(nxt_task_t *task,
192359Sigor@sysoev.ru     nxt_socket_conf_t *skcf);
19353Sigor@sysoev.ru 
194630Svbart@nginx.com static void nxt_router_access_log_writer(nxt_task_t *task,
195630Svbart@nginx.com     nxt_http_request_t *r, nxt_router_access_log_t *access_log);
196630Svbart@nginx.com static u_char *nxt_router_access_log_date(u_char *buf, nxt_realtime_t *now,
197630Svbart@nginx.com     struct tm *tm, size_t size, const char *format);
198630Svbart@nginx.com static void nxt_router_access_log_open(nxt_task_t *task,
199630Svbart@nginx.com     nxt_router_temp_conf_t *tmcf);
200630Svbart@nginx.com static void nxt_router_access_log_ready(nxt_task_t *task,
201630Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
202630Svbart@nginx.com static void nxt_router_access_log_error(nxt_task_t *task,
203630Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
204630Svbart@nginx.com static void nxt_router_access_log_release(nxt_task_t *task,
205630Svbart@nginx.com     nxt_thread_spinlock_t *lock, nxt_router_access_log_t *access_log);
206651Svbart@nginx.com static void nxt_router_access_log_reopen_completion(nxt_task_t *task, void *obj,
207651Svbart@nginx.com     void *data);
208631Svbart@nginx.com static void nxt_router_access_log_reopen_ready(nxt_task_t *task,
209631Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
210631Svbart@nginx.com static void nxt_router_access_log_reopen_error(nxt_task_t *task,
211631Svbart@nginx.com     nxt_port_recv_msg_t *msg, void *data);
212630Svbart@nginx.com 
213343Smax.romanov@nginx.com static void nxt_router_app_port_ready(nxt_task_t *task,
214343Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
215343Smax.romanov@nginx.com static void nxt_router_app_port_error(nxt_task_t *task,
216343Smax.romanov@nginx.com     nxt_port_recv_msg_t *msg, void *data);
217343Smax.romanov@nginx.com 
218753Smax.romanov@nginx.com static void nxt_router_app_unlink(nxt_task_t *task, nxt_app_t *app);
2191123Smax.romanov@nginx.com 
220343Smax.romanov@nginx.com static void nxt_router_app_port_release(nxt_task_t *task, nxt_port_t *port,
2211123Smax.romanov@nginx.com     nxt_apr_action_t action);
222427Smax.romanov@nginx.com static nxt_int_t nxt_router_app_port(nxt_task_t *task, nxt_app_t *app,
2231123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link);
224141Smax.romanov@nginx.com 
225425Smax.romanov@nginx.com static void nxt_router_app_prepare_request(nxt_task_t *task,
2261123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link);
2271007Salexander.borisov@nginx.com static nxt_buf_t *nxt_router_prepare_msg(nxt_task_t *task,
2281007Salexander.borisov@nginx.com     nxt_http_request_t *r, nxt_port_t *port, const nxt_str_t *prefix);
229510Salexander.borisov@nginx.com 
230318Smax.romanov@nginx.com static void nxt_router_app_timeout(nxt_task_t *task, void *obj, void *data);
231507Smax.romanov@nginx.com static void nxt_router_adjust_idle_timer(nxt_task_t *task, void *obj,
232507Smax.romanov@nginx.com     void *data);
233507Smax.romanov@nginx.com static void nxt_router_app_idle_timeout(nxt_task_t *task, void *obj,
234507Smax.romanov@nginx.com     void *data);
235753Smax.romanov@nginx.com static void nxt_router_app_joint_release_handler(nxt_task_t *task, void *obj,
236507Smax.romanov@nginx.com     void *data);
237753Smax.romanov@nginx.com static void nxt_router_free_app(nxt_task_t *task, void *obj, void *data);
238431Sigor@sysoev.ru 
239431Sigor@sysoev.ru static const nxt_http_request_state_t  nxt_http_request_send_state;
240431Sigor@sysoev.ru static void nxt_http_request_send_body(nxt_task_t *task, void *obj, void *data);
241141Smax.romanov@nginx.com 
242753Smax.romanov@nginx.com static void nxt_router_app_joint_use(nxt_task_t *task,
243753Smax.romanov@nginx.com     nxt_app_joint_t *app_joint, int i);
244753Smax.romanov@nginx.com 
2451007Salexander.borisov@nginx.com static nxt_int_t nxt_router_http_request_done(nxt_task_t *task,
2461007Salexander.borisov@nginx.com     nxt_http_request_t *r);
2471007Salexander.borisov@nginx.com static void nxt_router_http_request_release(nxt_task_t *task, void *obj,
2481007Salexander.borisov@nginx.com     void *data);
2491007Salexander.borisov@nginx.com 
250*1131Smax.romanov@nginx.com const nxt_http_request_state_t  nxt_http_websocket;
251*1131Smax.romanov@nginx.com 
252119Smax.romanov@nginx.com static nxt_router_t  *nxt_router;
25320Sigor@sysoev.ru 
254743Smax.romanov@nginx.com static const nxt_str_t http_prefix = nxt_string("HTTP_");
255743Smax.romanov@nginx.com static const nxt_str_t empty_prefix = nxt_string("");
256743Smax.romanov@nginx.com 
257743Smax.romanov@nginx.com static const nxt_str_t  *nxt_app_msg_prefix[] = {
258804Svbart@nginx.com     &empty_prefix,
259743Smax.romanov@nginx.com     &http_prefix,
260743Smax.romanov@nginx.com     &http_prefix,
261743Smax.romanov@nginx.com     &http_prefix,
262743Smax.romanov@nginx.com     &http_prefix,
263977Smax.romanov@gmail.com     &empty_prefix,
264216Sigor@sysoev.ru };
265216Sigor@sysoev.ru 
266216Sigor@sysoev.ru 
267662Smax.romanov@nginx.com nxt_port_handlers_t  nxt_router_process_port_handlers = {
268662Smax.romanov@nginx.com     .quit         = nxt_worker_process_quit_handler,
269662Smax.romanov@nginx.com     .new_port     = nxt_router_new_port_handler,
270662Smax.romanov@nginx.com     .change_file  = nxt_port_change_log_file_handler,
271662Smax.romanov@nginx.com     .mmap         = nxt_port_mmap_handler,
272662Smax.romanov@nginx.com     .data         = nxt_router_conf_data_handler,
273662Smax.romanov@nginx.com     .remove_pid   = nxt_router_remove_pid_handler,
274662Smax.romanov@nginx.com     .access_log   = nxt_router_access_log_reopen_handler,
275662Smax.romanov@nginx.com     .rpc_ready    = nxt_port_rpc_handler,
276662Smax.romanov@nginx.com     .rpc_error    = nxt_port_rpc_handler,
277662Smax.romanov@nginx.com };
278662Smax.romanov@nginx.com 
279662Smax.romanov@nginx.com 
28020Sigor@sysoev.ru nxt_int_t
281141Smax.romanov@nginx.com nxt_router_start(nxt_task_t *task, void *data)
28220Sigor@sysoev.ru {
283141Smax.romanov@nginx.com     nxt_int_t      ret;
284662Smax.romanov@nginx.com     nxt_port_t     *controller_port;
285141Smax.romanov@nginx.com     nxt_router_t   *router;
286141Smax.romanov@nginx.com     nxt_runtime_t  *rt;
287141Smax.romanov@nginx.com 
288141Smax.romanov@nginx.com     rt = task->thread->runtime;
28953Sigor@sysoev.ru 
290771Sigor@sysoev.ru #if (NXT_TLS)
291771Sigor@sysoev.ru     rt->tls = nxt_service_get(rt->services, "SSL/TLS", "OpenSSL");
292771Sigor@sysoev.ru     if (nxt_slow_path(rt->tls == NULL)) {
293771Sigor@sysoev.ru         return NXT_ERROR;
294771Sigor@sysoev.ru     }
295771Sigor@sysoev.ru 
296771Sigor@sysoev.ru     ret = rt->tls->library_init(task);
297771Sigor@sysoev.ru     if (nxt_slow_path(ret != NXT_OK)) {
298771Sigor@sysoev.ru         return ret;
299771Sigor@sysoev.ru     }
300771Sigor@sysoev.ru #endif
301771Sigor@sysoev.ru 
302431Sigor@sysoev.ru     ret = nxt_http_init(task, rt);
30388Smax.romanov@nginx.com     if (nxt_slow_path(ret != NXT_OK)) {
30488Smax.romanov@nginx.com         return ret;
30588Smax.romanov@nginx.com     }
30688Smax.romanov@nginx.com 
30753Sigor@sysoev.ru     router = nxt_zalloc(sizeof(nxt_router_t));
30853Sigor@sysoev.ru     if (nxt_slow_path(router == NULL)) {
30953Sigor@sysoev.ru         return NXT_ERROR;
31053Sigor@sysoev.ru     }
31153Sigor@sysoev.ru 
31253Sigor@sysoev.ru     nxt_queue_init(&router->engines);
31353Sigor@sysoev.ru     nxt_queue_init(&router->sockets);
314133Sigor@sysoev.ru     nxt_queue_init(&router->apps);
31553Sigor@sysoev.ru 
316119Smax.romanov@nginx.com     nxt_router = router;
317119Smax.romanov@nginx.com 
318662Smax.romanov@nginx.com     controller_port = rt->port_by_type[NXT_PROCESS_CONTROLLER];
319662Smax.romanov@nginx.com     if (controller_port != NULL) {
320662Smax.romanov@nginx.com         nxt_router_greet_controller(task, controller_port);
321662Smax.romanov@nginx.com     }
322662Smax.romanov@nginx.com 
323115Sigor@sysoev.ru     return NXT_OK;
324115Sigor@sysoev.ru }
325115Sigor@sysoev.ru 
326115Sigor@sysoev.ru 
327343Smax.romanov@nginx.com static void
328662Smax.romanov@nginx.com nxt_router_greet_controller(nxt_task_t *task, nxt_port_t *controller_port)
329662Smax.romanov@nginx.com {
330662Smax.romanov@nginx.com     nxt_port_socket_write(task, controller_port, NXT_PORT_MSG_PROCESS_READY,
331662Smax.romanov@nginx.com                           -1, 0, 0, NULL);
332662Smax.romanov@nginx.com }
333662Smax.romanov@nginx.com 
334662Smax.romanov@nginx.com 
335662Smax.romanov@nginx.com static void
336507Smax.romanov@nginx.com nxt_router_start_app_process_handler(nxt_task_t *task, nxt_port_t *port,
337507Smax.romanov@nginx.com     void *data)
338167Smax.romanov@nginx.com {
339343Smax.romanov@nginx.com     size_t         size;
340343Smax.romanov@nginx.com     uint32_t       stream;
341430Sigor@sysoev.ru     nxt_mp_t       *mp;
342648Svbart@nginx.com     nxt_int_t      ret;
343343Smax.romanov@nginx.com     nxt_app_t      *app;
344343Smax.romanov@nginx.com     nxt_buf_t      *b;
345343Smax.romanov@nginx.com     nxt_port_t     *main_port;
346343Smax.romanov@nginx.com     nxt_runtime_t  *rt;
347343Smax.romanov@nginx.com 
348343Smax.romanov@nginx.com     app = data;
349167Smax.romanov@nginx.com 
350167Smax.romanov@nginx.com     rt = task->thread->runtime;
351240Sigor@sysoev.ru     main_port = rt->port_by_type[NXT_PROCESS_MAIN];
352167Smax.romanov@nginx.com 
353507Smax.romanov@nginx.com     nxt_debug(task, "app '%V' %p start process", &app->name, app);
354343Smax.romanov@nginx.com 
355343Smax.romanov@nginx.com     size = app->name.length + 1 + app->conf.length;
356343Smax.romanov@nginx.com 
357343Smax.romanov@nginx.com     b = nxt_buf_mem_ts_alloc(task, task->thread->engine->mem_pool, size);
358343Smax.romanov@nginx.com 
359343Smax.romanov@nginx.com     if (nxt_slow_path(b == NULL)) {
360343Smax.romanov@nginx.com         goto failed;
361167Smax.romanov@nginx.com     }
362167Smax.romanov@nginx.com 
363343Smax.romanov@nginx.com     nxt_buf_cpystr(b, &app->name);
364343Smax.romanov@nginx.com     *b->mem.free++ = '\0';
365343Smax.romanov@nginx.com     nxt_buf_cpystr(b, &app->conf);
366343Smax.romanov@nginx.com 
367753Smax.romanov@nginx.com     nxt_router_app_joint_use(task, app->joint, 1);
368753Smax.romanov@nginx.com 
369343Smax.romanov@nginx.com     stream = nxt_port_rpc_register_handler(task, port,
370343Smax.romanov@nginx.com                                            nxt_router_app_port_ready,
371343Smax.romanov@nginx.com                                            nxt_router_app_port_error,
372753Smax.romanov@nginx.com                                            -1, app->joint);
373343Smax.romanov@nginx.com 
374343Smax.romanov@nginx.com     if (nxt_slow_path(stream == 0)) {
375753Smax.romanov@nginx.com         nxt_router_app_joint_use(task, app->joint, -1);
376753Smax.romanov@nginx.com 
377343Smax.romanov@nginx.com         goto failed;
378343Smax.romanov@nginx.com     }
379343Smax.romanov@nginx.com 
380648Svbart@nginx.com     ret = nxt_port_socket_write(task, main_port, NXT_PORT_MSG_START_WORKER, -1,
381648Svbart@nginx.com                                 stream, port->id, b);
382648Svbart@nginx.com 
383648Svbart@nginx.com     if (nxt_slow_path(ret != NXT_OK)) {
384648Svbart@nginx.com         nxt_port_rpc_cancel(task, port, stream);
385753Smax.romanov@nginx.com 
386753Smax.romanov@nginx.com         nxt_router_app_joint_use(task, app->joint, -1);
387753Smax.romanov@nginx.com 
388648Svbart@nginx.com         goto failed;
389648Svbart@nginx.com     }
390343Smax.romanov@nginx.com 
391753Smax.romanov@nginx.com     nxt_router_app_use(task, app, -1);
392753Smax.romanov@nginx.com 
393343Smax.romanov@nginx.com     return;
394343Smax.romanov@nginx.com 
395343Smax.romanov@nginx.com failed:
396343Smax.romanov@nginx.com 
397648Svbart@nginx.com     if (b != NULL) {
398648Svbart@nginx.com         mp = b->data;
399648Svbart@nginx.com         nxt_mp_free(mp, b);
400648Svbart@nginx.com         nxt_mp_release(mp);
401648Svbart@nginx.com     }
402648Svbart@nginx.com 
403343Smax.romanov@nginx.com     nxt_thread_mutex_lock(&app->mutex);
404343Smax.romanov@nginx.com 
405507Smax.romanov@nginx.com     app->pending_processes--;
406343Smax.romanov@nginx.com 
407343Smax.romanov@nginx.com     nxt_thread_mutex_unlock(&app->mutex);
408343Smax.romanov@nginx.com 
409343Smax.romanov@nginx.com     nxt_router_app_use(task, app, -1);
410167Smax.romanov@nginx.com }
411167Smax.romanov@nginx.com 
412167Smax.romanov@nginx.com 
413753Smax.romanov@nginx.com static void
414753Smax.romanov@nginx.com nxt_router_app_joint_use(nxt_task_t *task, nxt_app_joint_t *app_joint, int i)
415753Smax.romanov@nginx.com {
416753Smax.romanov@nginx.com     app_joint->use_count += i;
417753Smax.romanov@nginx.com 
418753Smax.romanov@nginx.com     if (app_joint->use_count == 0) {
419753Smax.romanov@nginx.com         nxt_assert(app_joint->app == NULL);
420753Smax.romanov@nginx.com 
421753Smax.romanov@nginx.com         nxt_free(app_joint);
422753Smax.romanov@nginx.com     }
423753Smax.romanov@nginx.com }
424753Smax.romanov@nginx.com 
425753Smax.romanov@nginx.com 
426343Smax.romanov@nginx.com static nxt_int_t
427507Smax.romanov@nginx.com nxt_router_start_app_process(nxt_task_t *task, nxt_app_t *app)
428141Smax.romanov@nginx.com {
429343Smax.romanov@nginx.com     nxt_int_t      res;
430343Smax.romanov@nginx.com     nxt_port_t     *router_port;
431343Smax.romanov@nginx.com     nxt_runtime_t  *rt;
432343Smax.romanov@nginx.com 
433343Smax.romanov@nginx.com     rt = task->thread->runtime;
434343Smax.romanov@nginx.com     router_port = rt->port_by_type[NXT_PROCESS_ROUTER];
435343Smax.romanov@nginx.com 
436343Smax.romanov@nginx.com     nxt_router_app_use(task, app, 1);
437343Smax.romanov@nginx.com 
438507Smax.romanov@nginx.com     res = nxt_port_post(task, router_port, nxt_router_start_app_process_handler,
439343Smax.romanov@nginx.com                         app);
440343Smax.romanov@nginx.com 
441343Smax.romanov@nginx.com     if (res == NXT_OK) {
442343Smax.romanov@nginx.com         return res;
443318Smax.romanov@nginx.com     }
444318Smax.romanov@nginx.com 
445343Smax.romanov@nginx.com     nxt_thread_mutex_lock(&app->mutex);
446343Smax.romanov@nginx.com 
447507Smax.romanov@nginx.com     app->pending_processes--;
448343Smax.romanov@nginx.com 
449343Smax.romanov@nginx.com     nxt_thread_mutex_unlock(&app->mutex);
450343Smax.romanov@nginx.com 
451343Smax.romanov@nginx.com     nxt_router_app_use(task, app, -1);
452343Smax.romanov@nginx.com 
453343Smax.romanov@nginx.com     return NXT_ERROR;
454318Smax.romanov@nginx.com }
455318Smax.romanov@nginx.com 
456318Smax.romanov@nginx.com 
457351Smax.romanov@nginx.com nxt_inline void
4581123Smax.romanov@nginx.com nxt_request_app_link_init(nxt_task_t *task,
4591123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link, nxt_request_rpc_data_t *req_rpc_data)
460167Smax.romanov@nginx.com {
461318Smax.romanov@nginx.com     nxt_event_engine_t  *engine;
462351Smax.romanov@nginx.com 
463318Smax.romanov@nginx.com     engine = task->thread->engine;
464167Smax.romanov@nginx.com 
4651123Smax.romanov@nginx.com     nxt_memzero(req_app_link, sizeof(nxt_request_app_link_t));
4661123Smax.romanov@nginx.com 
4671123Smax.romanov@nginx.com     req_app_link->stream = req_rpc_data->stream;
4681123Smax.romanov@nginx.com     req_app_link->use_count = 1;
4691123Smax.romanov@nginx.com     req_app_link->req_rpc_data = req_rpc_data;
4701123Smax.romanov@nginx.com     req_rpc_data->req_app_link = req_app_link;
4711123Smax.romanov@nginx.com     req_app_link->reply_port = engine->port;
4721123Smax.romanov@nginx.com     req_app_link->request = req_rpc_data->request;
4731123Smax.romanov@nginx.com     req_app_link->apr_action = NXT_APR_GOT_RESPONSE;
4741123Smax.romanov@nginx.com 
4751123Smax.romanov@nginx.com     req_app_link->work.handler = NULL;
4761123Smax.romanov@nginx.com     req_app_link->work.task = &engine->task;
4771123Smax.romanov@nginx.com     req_app_link->work.obj = req_app_link;
4781123Smax.romanov@nginx.com     req_app_link->work.data = engine;
479351Smax.romanov@nginx.com }
480351Smax.romanov@nginx.com 
481351Smax.romanov@nginx.com 
4821123Smax.romanov@nginx.com nxt_inline nxt_request_app_link_t *
4831123Smax.romanov@nginx.com nxt_request_app_link_alloc(nxt_task_t *task,
4841123Smax.romanov@nginx.com     nxt_request_app_link_t *ra_src, nxt_request_rpc_data_t *req_rpc_data)
485351Smax.romanov@nginx.com {
4861123Smax.romanov@nginx.com     nxt_mp_t                *mp;
4871123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
4881123Smax.romanov@nginx.com 
4891123Smax.romanov@nginx.com     if (ra_src != NULL && ra_src->mem_pool != NULL) {
490425Smax.romanov@nginx.com         return ra_src;
491425Smax.romanov@nginx.com     }
492425Smax.romanov@nginx.com 
4931123Smax.romanov@nginx.com     mp = req_rpc_data->request->mem_pool;
4941123Smax.romanov@nginx.com 
4951123Smax.romanov@nginx.com     req_app_link = nxt_mp_alloc(mp, sizeof(nxt_request_app_link_t));
4961123Smax.romanov@nginx.com 
4971123Smax.romanov@nginx.com     if (nxt_slow_path(req_app_link == NULL)) {
4981123Smax.romanov@nginx.com 
4991123Smax.romanov@nginx.com         req_rpc_data->req_app_link = NULL;
5001123Smax.romanov@nginx.com 
5011123Smax.romanov@nginx.com         if (ra_src != NULL) {
5021123Smax.romanov@nginx.com             ra_src->req_rpc_data = NULL;
5031123Smax.romanov@nginx.com         }
504351Smax.romanov@nginx.com 
505351Smax.romanov@nginx.com         return NULL;
506351Smax.romanov@nginx.com     }
507351Smax.romanov@nginx.com 
508430Sigor@sysoev.ru     nxt_mp_retain(mp);
509430Sigor@sysoev.ru 
5101123Smax.romanov@nginx.com     nxt_request_app_link_init(task, req_app_link, req_rpc_data);
5111123Smax.romanov@nginx.com 
5121123Smax.romanov@nginx.com     req_app_link->mem_pool = mp;
5131123Smax.romanov@nginx.com 
5141123Smax.romanov@nginx.com     return req_app_link;
515167Smax.romanov@nginx.com }
516167Smax.romanov@nginx.com 
517167Smax.romanov@nginx.com 
518423Smax.romanov@nginx.com nxt_inline nxt_bool_t
519423Smax.romanov@nginx.com nxt_router_msg_cancel(nxt_task_t *task, nxt_msg_info_t *msg_info,
520423Smax.romanov@nginx.com     uint32_t stream)
521423Smax.romanov@nginx.com {
522423Smax.romanov@nginx.com     nxt_buf_t   *b, *next;
523423Smax.romanov@nginx.com     nxt_bool_t  cancelled;
524423Smax.romanov@nginx.com 
525423Smax.romanov@nginx.com     if (msg_info->buf == NULL) {
526423Smax.romanov@nginx.com         return 0;
527423Smax.romanov@nginx.com     }
528423Smax.romanov@nginx.com 
529423Smax.romanov@nginx.com     cancelled = nxt_port_mmap_tracking_cancel(task, &msg_info->tracking,
530423Smax.romanov@nginx.com                                               stream);
531423Smax.romanov@nginx.com 
532423Smax.romanov@nginx.com     if (cancelled) {
533423Smax.romanov@nginx.com         nxt_debug(task, "stream #%uD: cancelled by router", stream);
534423Smax.romanov@nginx.com     }
535423Smax.romanov@nginx.com 
536423Smax.romanov@nginx.com     for (b = msg_info->buf; b != NULL; b = next) {
537423Smax.romanov@nginx.com         next = b->next;
538423Smax.romanov@nginx.com 
539423Smax.romanov@nginx.com         b->completion_handler = msg_info->completion_handler;
540423Smax.romanov@nginx.com 
541423Smax.romanov@nginx.com         if (b->is_port_mmap_sent) {
542423Smax.romanov@nginx.com             b->is_port_mmap_sent = cancelled == 0;
543423Smax.romanov@nginx.com             b->completion_handler(task, b, b->parent);
544423Smax.romanov@nginx.com         }
545423Smax.romanov@nginx.com     }
546423Smax.romanov@nginx.com 
547423Smax.romanov@nginx.com     msg_info->buf = NULL;
548423Smax.romanov@nginx.com 
549423Smax.romanov@nginx.com     return cancelled;
550423Smax.romanov@nginx.com }
551423Smax.romanov@nginx.com 
552423Smax.romanov@nginx.com 
553167Smax.romanov@nginx.com static void
5541123Smax.romanov@nginx.com nxt_request_app_link_update_peer_handler(nxt_task_t *task, void *obj,
5551123Smax.romanov@nginx.com     void *data)
5561123Smax.romanov@nginx.com {
5571123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
5581123Smax.romanov@nginx.com 
5591123Smax.romanov@nginx.com     req_app_link = obj;
5601123Smax.romanov@nginx.com 
5611123Smax.romanov@nginx.com     nxt_request_app_link_update_peer(task, req_app_link);
5621123Smax.romanov@nginx.com 
5631123Smax.romanov@nginx.com     nxt_request_app_link_use(task, req_app_link, -1);
5641123Smax.romanov@nginx.com }
565425Smax.romanov@nginx.com 
566425Smax.romanov@nginx.com 
567425Smax.romanov@nginx.com static void
5681123Smax.romanov@nginx.com nxt_request_app_link_update_peer(nxt_task_t *task,
5691123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link)
570167Smax.romanov@nginx.com {
5711123Smax.romanov@nginx.com     nxt_event_engine_t      *engine;
5721123Smax.romanov@nginx.com     nxt_request_rpc_data_t  *req_rpc_data;
5731123Smax.romanov@nginx.com 
5741123Smax.romanov@nginx.com     engine = req_app_link->work.data;
5751123Smax.romanov@nginx.com 
5761123Smax.romanov@nginx.com     if (task->thread->engine != engine) {
5771123Smax.romanov@nginx.com         nxt_request_app_link_inc_use(req_app_link);
5781123Smax.romanov@nginx.com 
5791123Smax.romanov@nginx.com         req_app_link->work.handler = nxt_request_app_link_update_peer_handler;
5801123Smax.romanov@nginx.com         req_app_link->work.task = &engine->task;
5811123Smax.romanov@nginx.com         req_app_link->work.next = NULL;
5821123Smax.romanov@nginx.com 
5831123Smax.romanov@nginx.com         nxt_debug(task, "req_app_link stream #%uD post update peer to %p",
5841123Smax.romanov@nginx.com                   req_app_link->stream, engine);
5851123Smax.romanov@nginx.com 
5861123Smax.romanov@nginx.com         nxt_event_engine_post(engine, &req_app_link->work);
5871123Smax.romanov@nginx.com 
5881123Smax.romanov@nginx.com         return;
5891123Smax.romanov@nginx.com     }
5901123Smax.romanov@nginx.com 
5911123Smax.romanov@nginx.com     nxt_debug(task, "req_app_link stream #%uD update peer",
5921123Smax.romanov@nginx.com               req_app_link->stream);
5931123Smax.romanov@nginx.com 
5941123Smax.romanov@nginx.com     req_rpc_data = req_app_link->req_rpc_data;
5951123Smax.romanov@nginx.com 
5961123Smax.romanov@nginx.com     if (req_rpc_data != NULL && req_app_link->app_port != NULL) {
5971123Smax.romanov@nginx.com         nxt_port_rpc_ex_set_peer(task, engine->port, req_rpc_data,
5981123Smax.romanov@nginx.com                                  req_app_link->app_port->pid);
5991123Smax.romanov@nginx.com     }
6001123Smax.romanov@nginx.com 
6011123Smax.romanov@nginx.com     nxt_request_app_link_use(task, req_app_link, -1);
602425Smax.romanov@nginx.com }
603425Smax.romanov@nginx.com 
604425Smax.romanov@nginx.com 
605425Smax.romanov@nginx.com static void
6061123Smax.romanov@nginx.com nxt_request_app_link_release(nxt_task_t *task,
6071123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link)
608425Smax.romanov@nginx.com {
609431Sigor@sysoev.ru     nxt_mp_t                *mp;
610*1131Smax.romanov@nginx.com     nxt_http_request_t      *r;
6111123Smax.romanov@nginx.com     nxt_request_rpc_data_t  *req_rpc_data;
6121123Smax.romanov@nginx.com 
6131123Smax.romanov@nginx.com     nxt_assert(task->thread->engine == req_app_link->work.data);
6141123Smax.romanov@nginx.com     nxt_assert(req_app_link->use_count == 0);
6151123Smax.romanov@nginx.com 
6161123Smax.romanov@nginx.com     nxt_debug(task, "req_app_link stream #%uD release", req_app_link->stream);
6171123Smax.romanov@nginx.com 
6181123Smax.romanov@nginx.com     req_rpc_data = req_app_link->req_rpc_data;
6191123Smax.romanov@nginx.com 
6201123Smax.romanov@nginx.com     if (req_rpc_data != NULL) {
6211123Smax.romanov@nginx.com         if (nxt_slow_path(req_app_link->err_code != 0)) {
6221123Smax.romanov@nginx.com             nxt_http_request_error(task, req_rpc_data->request,
6231123Smax.romanov@nginx.com                                    req_app_link->err_code);
624423Smax.romanov@nginx.com 
625423Smax.romanov@nginx.com         } else {
6261123Smax.romanov@nginx.com             req_rpc_data->app_port = req_app_link->app_port;
6271123Smax.romanov@nginx.com             req_rpc_data->apr_action = req_app_link->apr_action;
6281123Smax.romanov@nginx.com             req_rpc_data->msg_info = req_app_link->msg_info;
6291123Smax.romanov@nginx.com 
6301123Smax.romanov@nginx.com             if (req_rpc_data->app->timeout != 0) {
631*1131Smax.romanov@nginx.com                 r = req_rpc_data->request;
632*1131Smax.romanov@nginx.com 
633*1131Smax.romanov@nginx.com                 r->timer.handler = nxt_router_app_timeout;
634*1131Smax.romanov@nginx.com                 r->timer_data = req_rpc_data;
635*1131Smax.romanov@nginx.com                 nxt_timer_add(task->thread->engine, &r->timer,
6361123Smax.romanov@nginx.com                               req_rpc_data->app->timeout);
637425Smax.romanov@nginx.com             }
638425Smax.romanov@nginx.com 
6391123Smax.romanov@nginx.com             req_app_link->app_port = NULL;
6401123Smax.romanov@nginx.com             req_app_link->msg_info.buf = NULL;
641423Smax.romanov@nginx.com         }
642343Smax.romanov@nginx.com 
6431123Smax.romanov@nginx.com         req_rpc_data->req_app_link = NULL;
6441123Smax.romanov@nginx.com         req_app_link->req_rpc_data = NULL;
6451123Smax.romanov@nginx.com     }
6461123Smax.romanov@nginx.com 
6471123Smax.romanov@nginx.com     if (req_app_link->app_port != NULL) {
6481123Smax.romanov@nginx.com         nxt_router_app_port_release(task, req_app_link->app_port,
6491123Smax.romanov@nginx.com                                     req_app_link->apr_action);
6501123Smax.romanov@nginx.com 
6511123Smax.romanov@nginx.com         req_app_link->app_port = NULL;
6521123Smax.romanov@nginx.com     }
6531123Smax.romanov@nginx.com 
6541123Smax.romanov@nginx.com     nxt_router_msg_cancel(task, &req_app_link->msg_info, req_app_link->stream);
6551123Smax.romanov@nginx.com 
6561123Smax.romanov@nginx.com     mp = req_app_link->mem_pool;
657430Sigor@sysoev.ru 
658430Sigor@sysoev.ru     if (mp != NULL) {
6591123Smax.romanov@nginx.com         nxt_mp_free(mp, req_app_link);
660430Sigor@sysoev.ru         nxt_mp_release(mp);
661351Smax.romanov@nginx.com     }
662167Smax.romanov@nginx.com }
663167Smax.romanov@nginx.com 
664167Smax.romanov@nginx.com 
665425Smax.romanov@nginx.com static void
6661123Smax.romanov@nginx.com nxt_request_app_link_release_handler(nxt_task_t *task, void *obj, void *data)
667425Smax.romanov@nginx.com {
6681123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
6691123Smax.romanov@nginx.com 
6701123Smax.romanov@nginx.com     req_app_link = obj;
6711123Smax.romanov@nginx.com 
6721123Smax.romanov@nginx.com     nxt_assert(req_app_link->work.data == data);
6731123Smax.romanov@nginx.com 
6741123Smax.romanov@nginx.com     nxt_atomic_fetch_add(&req_app_link->use_count, -1);
6751123Smax.romanov@nginx.com 
6761123Smax.romanov@nginx.com     nxt_request_app_link_release(task, req_app_link);
677425Smax.romanov@nginx.com }
678425Smax.romanov@nginx.com 
679425Smax.romanov@nginx.com 
680425Smax.romanov@nginx.com static void
6811123Smax.romanov@nginx.com nxt_request_app_link_use(nxt_task_t *task, nxt_request_app_link_t *req_app_link,
6821123Smax.romanov@nginx.com     int i)
683425Smax.romanov@nginx.com {
684425Smax.romanov@nginx.com     int                 c;
685425Smax.romanov@nginx.com     nxt_event_engine_t  *engine;
686425Smax.romanov@nginx.com 
6871123Smax.romanov@nginx.com     c = nxt_atomic_fetch_add(&req_app_link->use_count, i);
688425Smax.romanov@nginx.com 
689425Smax.romanov@nginx.com     if (i < 0 && c == -i) {
6901123Smax.romanov@nginx.com         engine = req_app_link->work.data;
691425Smax.romanov@nginx.com 
692425Smax.romanov@nginx.com         if (task->thread->engine == engine) {
6931123Smax.romanov@nginx.com             nxt_request_app_link_release(task, req_app_link);
694425Smax.romanov@nginx.com 
695425Smax.romanov@nginx.com             return;
696425Smax.romanov@nginx.com         }
697425Smax.romanov@nginx.com 
6981123Smax.romanov@nginx.com         nxt_request_app_link_inc_use(req_app_link);
6991123Smax.romanov@nginx.com 
7001123Smax.romanov@nginx.com         req_app_link->work.handler = nxt_request_app_link_release_handler;
7011123Smax.romanov@nginx.com         req_app_link->work.task = &engine->task;
7021123Smax.romanov@nginx.com         req_app_link->work.next = NULL;
7031123Smax.romanov@nginx.com 
7041123Smax.romanov@nginx.com         nxt_debug(task, "req_app_link stream #%uD post release to %p",
7051123Smax.romanov@nginx.com                   req_app_link->stream, engine);
7061123Smax.romanov@nginx.com 
7071123Smax.romanov@nginx.com         nxt_event_engine_post(engine, &req_app_link->work);
708425Smax.romanov@nginx.com     }
709425Smax.romanov@nginx.com }
710425Smax.romanov@nginx.com 
711425Smax.romanov@nginx.com 
712423Smax.romanov@nginx.com nxt_inline void
7131123Smax.romanov@nginx.com nxt_request_app_link_error(nxt_request_app_link_t *req_app_link, int code,
7141123Smax.romanov@nginx.com     const char *str)
715345Smax.romanov@nginx.com {
7161123Smax.romanov@nginx.com     req_app_link->app_port = NULL;
7171123Smax.romanov@nginx.com     req_app_link->err_code = code;
7181123Smax.romanov@nginx.com     req_app_link->err_str = str;
719345Smax.romanov@nginx.com }
720345Smax.romanov@nginx.com 
721345Smax.romanov@nginx.com 
722427Smax.romanov@nginx.com nxt_inline void
7231123Smax.romanov@nginx.com nxt_request_app_link_pending(nxt_task_t *task, nxt_app_t *app,
7241123Smax.romanov@nginx.com     nxt_request_app_link_t *req_app_link)
725427Smax.romanov@nginx.com {
7261123Smax.romanov@nginx.com     nxt_queue_insert_tail(&req_app_link->app_port->pending_requests,
7271123Smax.romanov@nginx.com                           &req_app_link->link_port_pending);
7281123Smax.romanov@nginx.com     nxt_queue_insert_tail(&app->pending, &req_app_link->link_app_pending);
7291123Smax.romanov@nginx.com 
7301123Smax.romanov@nginx.com     nxt_request_app_link_inc_use(req_app_link);
7311123Smax.romanov@nginx.com 
7321123Smax.romanov@nginx.com     req_app_link->res_time = nxt_thread_monotonic_time(task->thread)
7331123Smax.romanov@nginx.com                              + app->res_timeout;
7341123Smax.romanov@nginx.com 
7351123Smax.romanov@nginx.com     nxt_debug(task, "req_app_link stream #%uD enqueue to pending_requests",
7361123Smax.romanov@nginx.com               req_app_link->stream);
737427Smax.romanov@nginx.com }
738427Smax.romanov@nginx.com 
739427Smax.romanov@nginx.com 
740425Smax.romanov@nginx.com nxt_inline nxt_bool_t
741425Smax.romanov@nginx.com nxt_queue_chk_remove(nxt_queue_link_t *lnk)
742425Smax.romanov@nginx.com {
743425Smax.romanov@nginx.com     if (lnk->next != NULL) {
744425Smax.romanov@nginx.com         nxt_queue_remove(lnk);
745425Smax.romanov@nginx.com 
746425Smax.romanov@nginx.com         lnk->next = NULL;
747425Smax.romanov@nginx.com 
748425Smax.romanov@nginx.com         return 1;
749425Smax.romanov@nginx.com     }
750425Smax.romanov@nginx.com 
751425Smax.romanov@nginx.com     return 0;
752425Smax.romanov@nginx.com }
753425Smax.romanov@nginx.com 
754425Smax.romanov@nginx.com 
755343Smax.romanov@nginx.com nxt_inline void
7561123Smax.romanov@nginx.com nxt_request_rpc_data_unlink(nxt_task_t *task,
7571123Smax.romanov@nginx.com     nxt_request_rpc_data_t *req_rpc_data)
758343Smax.romanov@nginx.com {
7591123Smax.romanov@nginx.com     int                     ra_use_delta;
7601123Smax.romanov@nginx.com     nxt_request_app_link_t  *req_app_link;
7611123Smax.romanov@nginx.com 
7621123Smax.romanov@nginx.com     if (req_rpc_data->app_port != NULL) {
7631123Smax.romanov@nginx.com         nxt_router_app_port_release(task, req_rpc_data->app_port,
7641123Smax.romanov@nginx.com                                     req_rpc_data->apr_action);
7651123Smax.romanov@nginx.com 
7661123Smax.romanov@nginx.com         req_rpc_data->app_port = NULL;
7671123Smax.romanov@nginx.com     }
7681123Smax.romanov@nginx.com 
7691123Smax.romanov@nginx.com     nxt_router_msg_cancel(task, &req_rpc_data->msg_info, req_rpc_data->stream);
7701123Smax.romanov@nginx.com 
7711123Smax.romanov@nginx.com     req_app_link = req_rpc_data->req_app_link;
7721123Smax.romanov@nginx.com     if (req_app_link != NULL) {
7731123Smax.romanov@nginx.com         req_rpc_data->req_app_link = NULL;
7741123Smax.romanov@nginx.com         req_app_link->req_rpc_data = NULL;
775343Smax.romanov@nginx.com 
776425Smax.romanov@nginx.com         ra_use_delta = 0;
777425Smax.romanov@nginx.com 
7781123Smax.romanov@nginx.com         nxt_thread_mutex_lock(&req_rpc_data->app->mutex);
7791123Smax.romanov@nginx.com 
7801123Smax.romanov@nginx.com         if (req_app_link->link_app_requests.next == NULL
7811123Smax.romanov@nginx.com             && req_app_link->link_port_pending.next == NULL
782*1131Smax.romanov@nginx.com             && req_app_link->link_app_pending.next == NULL
783*1131Smax.romanov@nginx.com             && req_app_link->link_port_websockets.next == NULL)
784425Smax.romanov@nginx.com         {
7851123Smax.romanov@nginx.com             req_app_link = NULL;
786343Smax.romanov@nginx.com 
787343Smax.romanov@nginx.com         } else {
7881123Smax.romanov@nginx.com             ra_use_delta -=
789