Merge branch 'for-davem' of git://git.kernel.org/pub/scm/linux/kernel/git/viro/vfs
[cascardo/linux.git] / net / tipc / socket.c
1 /*
2  * net/tipc/socket.c: TIPC socket API
3  *
4  * Copyright (c) 2001-2007, 2012-2014, Ericsson AB
5  * Copyright (c) 2004-2008, 2010-2013, Wind River Systems
6  * All rights reserved.
7  *
8  * Redistribution and use in source and binary forms, with or without
9  * modification, are permitted provided that the following conditions are met:
10  *
11  * 1. Redistributions of source code must retain the above copyright
12  *    notice, this list of conditions and the following disclaimer.
13  * 2. Redistributions in binary form must reproduce the above copyright
14  *    notice, this list of conditions and the following disclaimer in the
15  *    documentation and/or other materials provided with the distribution.
16  * 3. Neither the names of the copyright holders nor the names of its
17  *    contributors may be used to endorse or promote products derived from
18  *    this software without specific prior written permission.
19  *
20  * Alternatively, this software may be distributed under the terms of the
21  * GNU General Public License ("GPL") version 2 as published by the Free
22  * Software Foundation.
23  *
24  * THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS "AS IS"
25  * AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
26  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
27  * ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT OWNER OR CONTRIBUTORS BE
28  * LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR
29  * CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF
30  * SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS
31  * INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN
32  * CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
33  * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
34  * POSSIBILITY OF SUCH DAMAGE.
35  */
36
37 #include "core.h"
38 #include "name_table.h"
39 #include "node.h"
40 #include "link.h"
41 #include <linux/export.h>
42 #include "config.h"
43 #include "socket.h"
44
45 #define SS_LISTENING    -1      /* socket is listening */
46 #define SS_READY        -2      /* socket is connectionless */
47
48 #define CONN_TIMEOUT_DEFAULT  8000      /* default connect timeout = 8s */
49 #define CONN_PROBING_INTERVAL 3600000   /* [ms] => 1 h */
50 #define TIPC_FWD_MSG          1
51 #define TIPC_CONN_OK          0
52 #define TIPC_CONN_PROBING     1
53
54 /**
55  * struct tipc_sock - TIPC socket structure
56  * @sk: socket - interacts with 'port' and with user via the socket API
57  * @connected: non-zero if port is currently connected to a peer port
58  * @conn_type: TIPC type used when connection was established
59  * @conn_instance: TIPC instance used when connection was established
60  * @published: non-zero if port has one or more associated names
61  * @max_pkt: maximum packet size "hint" used when building messages sent by port
62  * @ref: unique reference to port in TIPC object registry
63  * @phdr: preformatted message header used when sending messages
64  * @port_list: adjacent ports in TIPC's global list of ports
65  * @publications: list of publications for port
66  * @pub_count: total # of publications port has made during its lifetime
67  * @probing_state:
68  * @probing_interval:
69  * @timer:
70  * @port: port - interacts with 'sk' and with the rest of the TIPC stack
71  * @peer_name: the peer of the connection, if any
72  * @conn_timeout: the time we can wait for an unresponded setup request
73  * @dupl_rcvcnt: number of bytes counted twice, in both backlog and rcv queue
74  * @link_cong: non-zero if owner must sleep because of link congestion
75  * @sent_unacked: # messages sent by socket, and not yet acked by peer
76  * @rcv_unacked: # messages read by user, but not yet acked back to peer
77  */
78 struct tipc_sock {
79         struct sock sk;
80         int connected;
81         u32 conn_type;
82         u32 conn_instance;
83         int published;
84         u32 max_pkt;
85         u32 ref;
86         struct tipc_msg phdr;
87         struct list_head sock_list;
88         struct list_head publications;
89         u32 pub_count;
90         u32 probing_state;
91         u32 probing_interval;
92         struct timer_list timer;
93         uint conn_timeout;
94         atomic_t dupl_rcvcnt;
95         bool link_cong;
96         uint sent_unacked;
97         uint rcv_unacked;
98 };
99
100 static int tipc_backlog_rcv(struct sock *sk, struct sk_buff *skb);
101 static void tipc_data_ready(struct sock *sk);
102 static void tipc_write_space(struct sock *sk);
103 static int tipc_release(struct socket *sock);
104 static int tipc_accept(struct socket *sock, struct socket *new_sock, int flags);
105 static int tipc_wait_for_sndmsg(struct socket *sock, long *timeo_p);
106 static void tipc_sk_timeout(unsigned long ref);
107 static int tipc_sk_publish(struct tipc_sock *tsk, uint scope,
108                            struct tipc_name_seq const *seq);
109 static int tipc_sk_withdraw(struct tipc_sock *tsk, uint scope,
110                             struct tipc_name_seq const *seq);
111 static u32 tipc_sk_ref_acquire(struct tipc_sock *tsk);
112 static void tipc_sk_ref_discard(u32 ref);
113 static struct tipc_sock *tipc_sk_get(u32 ref);
114 static struct tipc_sock *tipc_sk_get_next(u32 *ref);
115 static void tipc_sk_put(struct tipc_sock *tsk);
116
117 static const struct proto_ops packet_ops;
118 static const struct proto_ops stream_ops;
119 static const struct proto_ops msg_ops;
120
121 static struct proto tipc_proto;
122 static struct proto tipc_proto_kern;
123
124 static const struct nla_policy tipc_nl_sock_policy[TIPC_NLA_SOCK_MAX + 1] = {
125         [TIPC_NLA_SOCK_UNSPEC]          = { .type = NLA_UNSPEC },
126         [TIPC_NLA_SOCK_ADDR]            = { .type = NLA_U32 },
127         [TIPC_NLA_SOCK_REF]             = { .type = NLA_U32 },
128         [TIPC_NLA_SOCK_CON]             = { .type = NLA_NESTED },
129         [TIPC_NLA_SOCK_HAS_PUBL]        = { .type = NLA_FLAG }
130 };
131
132 /*
133  * Revised TIPC socket locking policy:
134  *
135  * Most socket operations take the standard socket lock when they start
136  * and hold it until they finish (or until they need to sleep).  Acquiring
137  * this lock grants the owner exclusive access to the fields of the socket
138  * data structures, with the exception of the backlog queue.  A few socket
139  * operations can be done without taking the socket lock because they only
140  * read socket information that never changes during the life of the socket.
141  *
142  * Socket operations may acquire the lock for the associated TIPC port if they
143  * need to perform an operation on the port.  If any routine needs to acquire
144  * both the socket lock and the port lock it must take the socket lock first
145  * to avoid the risk of deadlock.
146  *
147  * The dispatcher handling incoming messages cannot grab the socket lock in
148  * the standard fashion, since invoked it runs at the BH level and cannot block.
149  * Instead, it checks to see if the socket lock is currently owned by someone,
150  * and either handles the message itself or adds it to the socket's backlog
151  * queue; in the latter case the queued message is processed once the process
152  * owning the socket lock releases it.
153  *
154  * NOTE: Releasing the socket lock while an operation is sleeping overcomes
155  * the problem of a blocked socket operation preventing any other operations
156  * from occurring.  However, applications must be careful if they have
157  * multiple threads trying to send (or receive) on the same socket, as these
158  * operations might interfere with each other.  For example, doing a connect
159  * and a receive at the same time might allow the receive to consume the
160  * ACK message meant for the connect.  While additional work could be done
161  * to try and overcome this, it doesn't seem to be worthwhile at the present.
162  *
163  * NOTE: Releasing the socket lock while an operation is sleeping also ensures
164  * that another operation that must be performed in a non-blocking manner is
165  * not delayed for very long because the lock has already been taken.
166  *
167  * NOTE: This code assumes that certain fields of a port/socket pair are
168  * constant over its lifetime; such fields can be examined without taking
169  * the socket lock and/or port lock, and do not need to be re-read even
170  * after resuming processing after waiting.  These fields include:
171  *   - socket type
172  *   - pointer to socket sk structure (aka tipc_sock structure)
173  *   - pointer to port structure
174  *   - port reference
175  */
176
177 static u32 tsk_peer_node(struct tipc_sock *tsk)
178 {
179         return msg_destnode(&tsk->phdr);
180 }
181
182 static u32 tsk_peer_port(struct tipc_sock *tsk)
183 {
184         return msg_destport(&tsk->phdr);
185 }
186
187 static  bool tsk_unreliable(struct tipc_sock *tsk)
188 {
189         return msg_src_droppable(&tsk->phdr) != 0;
190 }
191
192 static void tsk_set_unreliable(struct tipc_sock *tsk, bool unreliable)
193 {
194         msg_set_src_droppable(&tsk->phdr, unreliable ? 1 : 0);
195 }
196
197 static bool tsk_unreturnable(struct tipc_sock *tsk)
198 {
199         return msg_dest_droppable(&tsk->phdr) != 0;
200 }
201
202 static void tsk_set_unreturnable(struct tipc_sock *tsk, bool unreturnable)
203 {
204         msg_set_dest_droppable(&tsk->phdr, unreturnable ? 1 : 0);
205 }
206
207 static int tsk_importance(struct tipc_sock *tsk)
208 {
209         return msg_importance(&tsk->phdr);
210 }
211
212 static int tsk_set_importance(struct tipc_sock *tsk, int imp)
213 {
214         if (imp > TIPC_CRITICAL_IMPORTANCE)
215                 return -EINVAL;
216         msg_set_importance(&tsk->phdr, (u32)imp);
217         return 0;
218 }
219
220 static struct tipc_sock *tipc_sk(const struct sock *sk)
221 {
222         return container_of(sk, struct tipc_sock, sk);
223 }
224
225 static int tsk_conn_cong(struct tipc_sock *tsk)
226 {
227         return tsk->sent_unacked >= TIPC_FLOWCTRL_WIN;
228 }
229
230 /**
231  * tsk_advance_rx_queue - discard first buffer in socket receive queue
232  *
233  * Caller must hold socket lock
234  */
235 static void tsk_advance_rx_queue(struct sock *sk)
236 {
237         kfree_skb(__skb_dequeue(&sk->sk_receive_queue));
238 }
239
240 /**
241  * tsk_rej_rx_queue - reject all buffers in socket receive queue
242  *
243  * Caller must hold socket lock
244  */
245 static void tsk_rej_rx_queue(struct sock *sk)
246 {
247         struct sk_buff *buf;
248         u32 dnode;
249
250         while ((buf = __skb_dequeue(&sk->sk_receive_queue))) {
251                 if (tipc_msg_reverse(buf, &dnode, TIPC_ERR_NO_PORT))
252                         tipc_link_xmit(buf, dnode, 0);
253         }
254 }
255
256 /* tsk_peer_msg - verify if message was sent by connected port's peer
257  *
258  * Handles cases where the node's network address has changed from
259  * the default of <0.0.0> to its configured setting.
260  */
261 static bool tsk_peer_msg(struct tipc_sock *tsk, struct tipc_msg *msg)
262 {
263         u32 peer_port = tsk_peer_port(tsk);
264         u32 orig_node;
265         u32 peer_node;
266
267         if (unlikely(!tsk->connected))
268                 return false;
269
270         if (unlikely(msg_origport(msg) != peer_port))
271                 return false;
272
273         orig_node = msg_orignode(msg);
274         peer_node = tsk_peer_node(tsk);
275
276         if (likely(orig_node == peer_node))
277                 return true;
278
279         if (!orig_node && (peer_node == tipc_own_addr))
280                 return true;
281
282         if (!peer_node && (orig_node == tipc_own_addr))
283                 return true;
284
285         return false;
286 }
287
288 /**
289  * tipc_sk_create - create a TIPC socket
290  * @net: network namespace (must be default network)
291  * @sock: pre-allocated socket structure
292  * @protocol: protocol indicator (must be 0)
293  * @kern: caused by kernel or by userspace?
294  *
295  * This routine creates additional data structures used by the TIPC socket,
296  * initializes them, and links them together.
297  *
298  * Returns 0 on success, errno otherwise
299  */
300 static int tipc_sk_create(struct net *net, struct socket *sock,
301                           int protocol, int kern)
302 {
303         const struct proto_ops *ops;
304         socket_state state;
305         struct sock *sk;
306         struct tipc_sock *tsk;
307         struct tipc_msg *msg;
308         u32 ref;
309
310         /* Validate arguments */
311         if (unlikely(protocol != 0))
312                 return -EPROTONOSUPPORT;
313
314         switch (sock->type) {
315         case SOCK_STREAM:
316                 ops = &stream_ops;
317                 state = SS_UNCONNECTED;
318                 break;
319         case SOCK_SEQPACKET:
320                 ops = &packet_ops;
321                 state = SS_UNCONNECTED;
322                 break;
323         case SOCK_DGRAM:
324         case SOCK_RDM:
325                 ops = &msg_ops;
326                 state = SS_READY;
327                 break;
328         default:
329                 return -EPROTOTYPE;
330         }
331
332         /* Allocate socket's protocol area */
333         if (!kern)
334                 sk = sk_alloc(net, AF_TIPC, GFP_KERNEL, &tipc_proto);
335         else
336                 sk = sk_alloc(net, AF_TIPC, GFP_KERNEL, &tipc_proto_kern);
337
338         if (sk == NULL)
339                 return -ENOMEM;
340
341         tsk = tipc_sk(sk);
342         ref = tipc_sk_ref_acquire(tsk);
343         if (!ref) {
344                 pr_warn("Socket create failed; reference table exhausted\n");
345                 return -ENOMEM;
346         }
347         tsk->max_pkt = MAX_PKT_DEFAULT;
348         tsk->ref = ref;
349         INIT_LIST_HEAD(&tsk->publications);
350         msg = &tsk->phdr;
351         tipc_msg_init(msg, TIPC_LOW_IMPORTANCE, TIPC_NAMED_MSG,
352                       NAMED_H_SIZE, 0);
353         msg_set_origport(msg, ref);
354
355         /* Finish initializing socket data structures */
356         sock->ops = ops;
357         sock->state = state;
358         sock_init_data(sock, sk);
359         k_init_timer(&tsk->timer, (Handler)tipc_sk_timeout, ref);
360         sk->sk_backlog_rcv = tipc_backlog_rcv;
361         sk->sk_rcvbuf = sysctl_tipc_rmem[1];
362         sk->sk_data_ready = tipc_data_ready;
363         sk->sk_write_space = tipc_write_space;
364         tsk->conn_timeout = CONN_TIMEOUT_DEFAULT;
365         tsk->sent_unacked = 0;
366         atomic_set(&tsk->dupl_rcvcnt, 0);
367
368         if (sock->state == SS_READY) {
369                 tsk_set_unreturnable(tsk, true);
370                 if (sock->type == SOCK_DGRAM)
371                         tsk_set_unreliable(tsk, true);
372         }
373         return 0;
374 }
375
376 /**
377  * tipc_sock_create_local - create TIPC socket from inside TIPC module
378  * @type: socket type - SOCK_RDM or SOCK_SEQPACKET
379  *
380  * We cannot use sock_creat_kern here because it bumps module user count.
381  * Since socket owner and creator is the same module we must make sure
382  * that module count remains zero for module local sockets, otherwise
383  * we cannot do rmmod.
384  *
385  * Returns 0 on success, errno otherwise
386  */
387 int tipc_sock_create_local(int type, struct socket **res)
388 {
389         int rc;
390
391         rc = sock_create_lite(AF_TIPC, type, 0, res);
392         if (rc < 0) {
393                 pr_err("Failed to create kernel socket\n");
394                 return rc;
395         }
396         tipc_sk_create(&init_net, *res, 0, 1);
397
398         return 0;
399 }
400
401 /**
402  * tipc_sock_release_local - release socket created by tipc_sock_create_local
403  * @sock: the socket to be released.
404  *
405  * Module reference count is not incremented when such sockets are created,
406  * so we must keep it from being decremented when they are released.
407  */
408 void tipc_sock_release_local(struct socket *sock)
409 {
410         tipc_release(sock);
411         sock->ops = NULL;
412         sock_release(sock);
413 }
414
415 /**
416  * tipc_sock_accept_local - accept a connection on a socket created
417  * with tipc_sock_create_local. Use this function to avoid that
418  * module reference count is inadvertently incremented.
419  *
420  * @sock:    the accepting socket
421  * @newsock: reference to the new socket to be created
422  * @flags:   socket flags
423  */
424
425 int tipc_sock_accept_local(struct socket *sock, struct socket **newsock,
426                            int flags)
427 {
428         struct sock *sk = sock->sk;
429         int ret;
430
431         ret = sock_create_lite(sk->sk_family, sk->sk_type,
432                                sk->sk_protocol, newsock);
433         if (ret < 0)
434                 return ret;
435
436         ret = tipc_accept(sock, *newsock, flags);
437         if (ret < 0) {
438                 sock_release(*newsock);
439                 return ret;
440         }
441         (*newsock)->ops = sock->ops;
442         return ret;
443 }
444
445 /**
446  * tipc_release - destroy a TIPC socket
447  * @sock: socket to destroy
448  *
449  * This routine cleans up any messages that are still queued on the socket.
450  * For DGRAM and RDM socket types, all queued messages are rejected.
451  * For SEQPACKET and STREAM socket types, the first message is rejected
452  * and any others are discarded.  (If the first message on a STREAM socket
453  * is partially-read, it is discarded and the next one is rejected instead.)
454  *
455  * NOTE: Rejected messages are not necessarily returned to the sender!  They
456  * are returned or discarded according to the "destination droppable" setting
457  * specified for the message by the sender.
458  *
459  * Returns 0 on success, errno otherwise
460  */
461 static int tipc_release(struct socket *sock)
462 {
463         struct sock *sk = sock->sk;
464         struct tipc_sock *tsk;
465         struct sk_buff *buf;
466         u32 dnode;
467
468         /*
469          * Exit if socket isn't fully initialized (occurs when a failed accept()
470          * releases a pre-allocated child socket that was never used)
471          */
472         if (sk == NULL)
473                 return 0;
474
475         tsk = tipc_sk(sk);
476         lock_sock(sk);
477
478         /*
479          * Reject all unreceived messages, except on an active connection
480          * (which disconnects locally & sends a 'FIN+' to peer)
481          */
482         dnode = tsk_peer_node(tsk);
483         while (sock->state != SS_DISCONNECTING) {
484                 buf = __skb_dequeue(&sk->sk_receive_queue);
485                 if (buf == NULL)
486                         break;
487                 if (TIPC_SKB_CB(buf)->handle != NULL)
488                         kfree_skb(buf);
489                 else {
490                         if ((sock->state == SS_CONNECTING) ||
491                             (sock->state == SS_CONNECTED)) {
492                                 sock->state = SS_DISCONNECTING;
493                                 tsk->connected = 0;
494                                 tipc_node_remove_conn(dnode, tsk->ref);
495                         }
496                         if (tipc_msg_reverse(buf, &dnode, TIPC_ERR_NO_PORT))
497                                 tipc_link_xmit(buf, dnode, 0);
498                 }
499         }
500
501         tipc_sk_withdraw(tsk, 0, NULL);
502         tipc_sk_ref_discard(tsk->ref);
503         k_cancel_timer(&tsk->timer);
504         if (tsk->connected) {
505                 buf = tipc_msg_create(TIPC_CRITICAL_IMPORTANCE, TIPC_CONN_MSG,
506                                       SHORT_H_SIZE, 0, dnode, tipc_own_addr,
507                                       tsk_peer_port(tsk),
508                                       tsk->ref, TIPC_ERR_NO_PORT);
509                 if (buf)
510                         tipc_link_xmit(buf, dnode, tsk->ref);
511                 tipc_node_remove_conn(dnode, tsk->ref);
512         }
513         k_term_timer(&tsk->timer);
514
515         /* Discard any remaining (connection-based) messages in receive queue */
516         __skb_queue_purge(&sk->sk_receive_queue);
517
518         /* Reject any messages that accumulated in backlog queue */
519         sock->state = SS_DISCONNECTING;
520         release_sock(sk);
521         sock_put(sk);
522         sock->sk = NULL;
523
524         return 0;
525 }
526
527 /**
528  * tipc_bind - associate or disassocate TIPC name(s) with a socket
529  * @sock: socket structure
530  * @uaddr: socket address describing name(s) and desired operation
531  * @uaddr_len: size of socket address data structure
532  *
533  * Name and name sequence binding is indicated using a positive scope value;
534  * a negative scope value unbinds the specified name.  Specifying no name
535  * (i.e. a socket address length of 0) unbinds all names from the socket.
536  *
537  * Returns 0 on success, errno otherwise
538  *
539  * NOTE: This routine doesn't need to take the socket lock since it doesn't
540  *       access any non-constant socket information.
541  */
542 static int tipc_bind(struct socket *sock, struct sockaddr *uaddr,
543                      int uaddr_len)
544 {
545         struct sock *sk = sock->sk;
546         struct sockaddr_tipc *addr = (struct sockaddr_tipc *)uaddr;
547         struct tipc_sock *tsk = tipc_sk(sk);
548         int res = -EINVAL;
549
550         lock_sock(sk);
551         if (unlikely(!uaddr_len)) {
552                 res = tipc_sk_withdraw(tsk, 0, NULL);
553                 goto exit;
554         }
555
556         if (uaddr_len < sizeof(struct sockaddr_tipc)) {
557                 res = -EINVAL;
558                 goto exit;
559         }
560         if (addr->family != AF_TIPC) {
561                 res = -EAFNOSUPPORT;
562                 goto exit;
563         }
564
565         if (addr->addrtype == TIPC_ADDR_NAME)
566                 addr->addr.nameseq.upper = addr->addr.nameseq.lower;
567         else if (addr->addrtype != TIPC_ADDR_NAMESEQ) {
568                 res = -EAFNOSUPPORT;
569                 goto exit;
570         }
571
572         if ((addr->addr.nameseq.type < TIPC_RESERVED_TYPES) &&
573             (addr->addr.nameseq.type != TIPC_TOP_SRV) &&
574             (addr->addr.nameseq.type != TIPC_CFG_SRV)) {
575                 res = -EACCES;
576                 goto exit;
577         }
578
579         res = (addr->scope > 0) ?
580                 tipc_sk_publish(tsk, addr->scope, &addr->addr.nameseq) :
581                 tipc_sk_withdraw(tsk, -addr->scope, &addr->addr.nameseq);
582 exit:
583         release_sock(sk);
584         return res;
585 }
586
587 /**
588  * tipc_getname - get port ID of socket or peer socket
589  * @sock: socket structure
590  * @uaddr: area for returned socket address
591  * @uaddr_len: area for returned length of socket address
592  * @peer: 0 = own ID, 1 = current peer ID, 2 = current/former peer ID
593  *
594  * Returns 0 on success, errno otherwise
595  *
596  * NOTE: This routine doesn't need to take the socket lock since it only
597  *       accesses socket information that is unchanging (or which changes in
598  *       a completely predictable manner).
599  */
600 static int tipc_getname(struct socket *sock, struct sockaddr *uaddr,
601                         int *uaddr_len, int peer)
602 {
603         struct sockaddr_tipc *addr = (struct sockaddr_tipc *)uaddr;
604         struct tipc_sock *tsk = tipc_sk(sock->sk);
605
606         memset(addr, 0, sizeof(*addr));
607         if (peer) {
608                 if ((sock->state != SS_CONNECTED) &&
609                         ((peer != 2) || (sock->state != SS_DISCONNECTING)))
610                         return -ENOTCONN;
611                 addr->addr.id.ref = tsk_peer_port(tsk);
612                 addr->addr.id.node = tsk_peer_node(tsk);
613         } else {
614                 addr->addr.id.ref = tsk->ref;
615                 addr->addr.id.node = tipc_own_addr;
616         }
617
618         *uaddr_len = sizeof(*addr);
619         addr->addrtype = TIPC_ADDR_ID;
620         addr->family = AF_TIPC;
621         addr->scope = 0;
622         addr->addr.name.domain = 0;
623
624         return 0;
625 }
626
627 /**
628  * tipc_poll - read and possibly block on pollmask
629  * @file: file structure associated with the socket
630  * @sock: socket for which to calculate the poll bits
631  * @wait: ???
632  *
633  * Returns pollmask value
634  *
635  * COMMENTARY:
636  * It appears that the usual socket locking mechanisms are not useful here
637  * since the pollmask info is potentially out-of-date the moment this routine
638  * exits.  TCP and other protocols seem to rely on higher level poll routines
639  * to handle any preventable race conditions, so TIPC will do the same ...
640  *
641  * TIPC sets the returned events as follows:
642  *
643  * socket state         flags set
644  * ------------         ---------
645  * unconnected          no read flags
646  *                      POLLOUT if port is not congested
647  *
648  * connecting           POLLIN/POLLRDNORM if ACK/NACK in rx queue
649  *                      no write flags
650  *
651  * connected            POLLIN/POLLRDNORM if data in rx queue
652  *                      POLLOUT if port is not congested
653  *
654  * disconnecting        POLLIN/POLLRDNORM/POLLHUP
655  *                      no write flags
656  *
657  * listening            POLLIN if SYN in rx queue
658  *                      no write flags
659  *
660  * ready                POLLIN/POLLRDNORM if data in rx queue
661  * [connectionless]     POLLOUT (since port cannot be congested)
662  *
663  * IMPORTANT: The fact that a read or write operation is indicated does NOT
664  * imply that the operation will succeed, merely that it should be performed
665  * and will not block.
666  */
667 static unsigned int tipc_poll(struct file *file, struct socket *sock,
668                               poll_table *wait)
669 {
670         struct sock *sk = sock->sk;
671         struct tipc_sock *tsk = tipc_sk(sk);
672         u32 mask = 0;
673
674         sock_poll_wait(file, sk_sleep(sk), wait);
675
676         switch ((int)sock->state) {
677         case SS_UNCONNECTED:
678                 if (!tsk->link_cong)
679                         mask |= POLLOUT;
680                 break;
681         case SS_READY:
682         case SS_CONNECTED:
683                 if (!tsk->link_cong && !tsk_conn_cong(tsk))
684                         mask |= POLLOUT;
685                 /* fall thru' */
686         case SS_CONNECTING:
687         case SS_LISTENING:
688                 if (!skb_queue_empty(&sk->sk_receive_queue))
689                         mask |= (POLLIN | POLLRDNORM);
690                 break;
691         case SS_DISCONNECTING:
692                 mask = (POLLIN | POLLRDNORM | POLLHUP);
693                 break;
694         }
695
696         return mask;
697 }
698
699 /**
700  * tipc_sendmcast - send multicast message
701  * @sock: socket structure
702  * @seq: destination address
703  * @msg: message to send
704  * @dsz: total length of message data
705  * @timeo: timeout to wait for wakeup
706  *
707  * Called from function tipc_sendmsg(), which has done all sanity checks
708  * Returns the number of bytes sent on success, or errno
709  */
710 static int tipc_sendmcast(struct  socket *sock, struct tipc_name_seq *seq,
711                           struct msghdr *msg, size_t dsz, long timeo)
712 {
713         struct sock *sk = sock->sk;
714         struct tipc_msg *mhdr = &tipc_sk(sk)->phdr;
715         struct sk_buff *buf;
716         uint mtu;
717         int rc;
718
719         msg_set_type(mhdr, TIPC_MCAST_MSG);
720         msg_set_lookup_scope(mhdr, TIPC_CLUSTER_SCOPE);
721         msg_set_destport(mhdr, 0);
722         msg_set_destnode(mhdr, 0);
723         msg_set_nametype(mhdr, seq->type);
724         msg_set_namelower(mhdr, seq->lower);
725         msg_set_nameupper(mhdr, seq->upper);
726         msg_set_hdr_sz(mhdr, MCAST_H_SIZE);
727
728 new_mtu:
729         mtu = tipc_bclink_get_mtu();
730         rc = tipc_msg_build(mhdr, msg, 0, dsz, mtu, &buf);
731         if (unlikely(rc < 0))
732                 return rc;
733
734         do {
735                 rc = tipc_bclink_xmit(buf);
736                 if (likely(rc >= 0)) {
737                         rc = dsz;
738                         break;
739                 }
740                 if (rc == -EMSGSIZE)
741                         goto new_mtu;
742                 if (rc != -ELINKCONG)
743                         break;
744                 tipc_sk(sk)->link_cong = 1;
745                 rc = tipc_wait_for_sndmsg(sock, &timeo);
746                 if (rc)
747                         kfree_skb_list(buf);
748         } while (!rc);
749         return rc;
750 }
751
752 /* tipc_sk_mcast_rcv - Deliver multicast message to all destination sockets
753  */
754 void tipc_sk_mcast_rcv(struct sk_buff *buf)
755 {
756         struct tipc_msg *msg = buf_msg(buf);
757         struct tipc_port_list dports = {0, NULL, };
758         struct tipc_port_list *item;
759         struct sk_buff *b;
760         uint i, last, dst = 0;
761         u32 scope = TIPC_CLUSTER_SCOPE;
762
763         if (in_own_node(msg_orignode(msg)))
764                 scope = TIPC_NODE_SCOPE;
765
766         /* Create destination port list: */
767         tipc_nametbl_mc_translate(msg_nametype(msg),
768                                   msg_namelower(msg),
769                                   msg_nameupper(msg),
770                                   scope,
771                                   &dports);
772         last = dports.count;
773         if (!last) {
774                 kfree_skb(buf);
775                 return;
776         }
777
778         for (item = &dports; item; item = item->next) {
779                 for (i = 0; i < PLSIZE && ++dst <= last; i++) {
780                         b = (dst != last) ? skb_clone(buf, GFP_ATOMIC) : buf;
781                         if (!b) {
782                                 pr_warn("Failed do clone mcast rcv buffer\n");
783                                 continue;
784                         }
785                         msg_set_destport(msg, item->ports[i]);
786                         tipc_sk_rcv(b);
787                 }
788         }
789         tipc_port_list_free(&dports);
790 }
791
792 /**
793  * tipc_sk_proto_rcv - receive a connection mng protocol message
794  * @tsk: receiving socket
795  * @dnode: node to send response message to, if any
796  * @buf: buffer containing protocol message
797  * Returns 0 (TIPC_OK) if message was consumed, 1 (TIPC_FWD_MSG) if
798  * (CONN_PROBE_REPLY) message should be forwarded.
799  */
800 static int tipc_sk_proto_rcv(struct tipc_sock *tsk, u32 *dnode,
801                              struct sk_buff *buf)
802 {
803         struct tipc_msg *msg = buf_msg(buf);
804         int conn_cong;
805
806         /* Ignore if connection cannot be validated: */
807         if (!tsk_peer_msg(tsk, msg))
808                 goto exit;
809
810         tsk->probing_state = TIPC_CONN_OK;
811
812         if (msg_type(msg) == CONN_ACK) {
813                 conn_cong = tsk_conn_cong(tsk);
814                 tsk->sent_unacked -= msg_msgcnt(msg);
815                 if (conn_cong)
816                         tsk->sk.sk_write_space(&tsk->sk);
817         } else if (msg_type(msg) == CONN_PROBE) {
818                 if (!tipc_msg_reverse(buf, dnode, TIPC_OK))
819                         return TIPC_OK;
820                 msg_set_type(msg, CONN_PROBE_REPLY);
821                 return TIPC_FWD_MSG;
822         }
823         /* Do nothing if msg_type() == CONN_PROBE_REPLY */
824 exit:
825         kfree_skb(buf);
826         return TIPC_OK;
827 }
828
829 /**
830  * dest_name_check - verify user is permitted to send to specified port name
831  * @dest: destination address
832  * @m: descriptor for message to be sent
833  *
834  * Prevents restricted configuration commands from being issued by
835  * unauthorized users.
836  *
837  * Returns 0 if permission is granted, otherwise errno
838  */
839 static int dest_name_check(struct sockaddr_tipc *dest, struct msghdr *m)
840 {
841         struct tipc_cfg_msg_hdr hdr;
842
843         if (unlikely(dest->addrtype == TIPC_ADDR_ID))
844                 return 0;
845         if (likely(dest->addr.name.name.type >= TIPC_RESERVED_TYPES))
846                 return 0;
847         if (likely(dest->addr.name.name.type == TIPC_TOP_SRV))
848                 return 0;
849         if (likely(dest->addr.name.name.type != TIPC_CFG_SRV))
850                 return -EACCES;
851
852         if (!m->msg_iovlen || (m->msg_iov[0].iov_len < sizeof(hdr)))
853                 return -EMSGSIZE;
854         if (copy_from_user(&hdr, m->msg_iov[0].iov_base, sizeof(hdr)))
855                 return -EFAULT;
856         if ((ntohs(hdr.tcm_type) & 0xC000) && (!capable(CAP_NET_ADMIN)))
857                 return -EACCES;
858
859         return 0;
860 }
861
862 static int tipc_wait_for_sndmsg(struct socket *sock, long *timeo_p)
863 {
864         struct sock *sk = sock->sk;
865         struct tipc_sock *tsk = tipc_sk(sk);
866         DEFINE_WAIT(wait);
867         int done;
868
869         do {
870                 int err = sock_error(sk);
871                 if (err)
872                         return err;
873                 if (sock->state == SS_DISCONNECTING)
874                         return -EPIPE;
875                 if (!*timeo_p)
876                         return -EAGAIN;
877                 if (signal_pending(current))
878                         return sock_intr_errno(*timeo_p);
879
880                 prepare_to_wait(sk_sleep(sk), &wait, TASK_INTERRUPTIBLE);
881                 done = sk_wait_event(sk, timeo_p, !tsk->link_cong);
882                 finish_wait(sk_sleep(sk), &wait);
883         } while (!done);
884         return 0;
885 }
886
887 /**
888  * tipc_sendmsg - send message in connectionless manner
889  * @iocb: if NULL, indicates that socket lock is already held
890  * @sock: socket structure
891  * @m: message to send
892  * @dsz: amount of user data to be sent
893  *
894  * Message must have an destination specified explicitly.
895  * Used for SOCK_RDM and SOCK_DGRAM messages,
896  * and for 'SYN' messages on SOCK_SEQPACKET and SOCK_STREAM connections.
897  * (Note: 'SYN+' is prohibited on SOCK_STREAM.)
898  *
899  * Returns the number of bytes sent on success, or errno otherwise
900  */
901 static int tipc_sendmsg(struct kiocb *iocb, struct socket *sock,
902                         struct msghdr *m, size_t dsz)
903 {
904         DECLARE_SOCKADDR(struct sockaddr_tipc *, dest, m->msg_name);
905         struct sock *sk = sock->sk;
906         struct tipc_sock *tsk = tipc_sk(sk);
907         struct tipc_msg *mhdr = &tsk->phdr;
908         u32 dnode, dport;
909         struct sk_buff *buf;
910         struct tipc_name_seq *seq = &dest->addr.nameseq;
911         u32 mtu;
912         long timeo;
913         int rc = -EINVAL;
914
915         if (unlikely(!dest))
916                 return -EDESTADDRREQ;
917
918         if (unlikely((m->msg_namelen < sizeof(*dest)) ||
919                      (dest->family != AF_TIPC)))
920                 return -EINVAL;
921
922         if (dsz > TIPC_MAX_USER_MSG_SIZE)
923                 return -EMSGSIZE;
924
925         if (iocb)
926                 lock_sock(sk);
927
928         if (unlikely(sock->state != SS_READY)) {
929                 if (sock->state == SS_LISTENING) {
930                         rc = -EPIPE;
931                         goto exit;
932                 }
933                 if (sock->state != SS_UNCONNECTED) {
934                         rc = -EISCONN;
935                         goto exit;
936                 }
937                 if (tsk->published) {
938                         rc = -EOPNOTSUPP;
939                         goto exit;
940                 }
941                 if (dest->addrtype == TIPC_ADDR_NAME) {
942                         tsk->conn_type = dest->addr.name.name.type;
943                         tsk->conn_instance = dest->addr.name.name.instance;
944                 }
945         }
946         rc = dest_name_check(dest, m);
947         if (rc)
948                 goto exit;
949
950         timeo = sock_sndtimeo(sk, m->msg_flags & MSG_DONTWAIT);
951
952         if (dest->addrtype == TIPC_ADDR_MCAST) {
953                 rc = tipc_sendmcast(sock, seq, m, dsz, timeo);
954                 goto exit;
955         } else if (dest->addrtype == TIPC_ADDR_NAME) {
956                 u32 type = dest->addr.name.name.type;
957                 u32 inst = dest->addr.name.name.instance;
958                 u32 domain = dest->addr.name.domain;
959
960                 dnode = domain;
961                 msg_set_type(mhdr, TIPC_NAMED_MSG);
962                 msg_set_hdr_sz(mhdr, NAMED_H_SIZE);
963                 msg_set_nametype(mhdr, type);
964                 msg_set_nameinst(mhdr, inst);
965                 msg_set_lookup_scope(mhdr, tipc_addr_scope(domain));
966                 dport = tipc_nametbl_translate(type, inst, &dnode);
967                 msg_set_destnode(mhdr, dnode);
968                 msg_set_destport(mhdr, dport);
969                 if (unlikely(!dport && !dnode)) {
970                         rc = -EHOSTUNREACH;
971                         goto exit;
972                 }
973         } else if (dest->addrtype == TIPC_ADDR_ID) {
974                 dnode = dest->addr.id.node;
975                 msg_set_type(mhdr, TIPC_DIRECT_MSG);
976                 msg_set_lookup_scope(mhdr, 0);
977                 msg_set_destnode(mhdr, dnode);
978                 msg_set_destport(mhdr, dest->addr.id.ref);
979                 msg_set_hdr_sz(mhdr, BASIC_H_SIZE);
980         }
981
982 new_mtu:
983         mtu = tipc_node_get_mtu(dnode, tsk->ref);
984         rc = tipc_msg_build(mhdr, m, 0, dsz, mtu, &buf);
985         if (rc < 0)
986                 goto exit;
987
988         do {
989                 TIPC_SKB_CB(buf)->wakeup_pending = tsk->link_cong;
990                 rc = tipc_link_xmit(buf, dnode, tsk->ref);
991                 if (likely(rc >= 0)) {
992                         if (sock->state != SS_READY)
993                                 sock->state = SS_CONNECTING;
994                         rc = dsz;
995                         break;
996                 }
997                 if (rc == -EMSGSIZE)
998                         goto new_mtu;
999                 if (rc != -ELINKCONG)
1000                         break;
1001                 tsk->link_cong = 1;
1002                 rc = tipc_wait_for_sndmsg(sock, &timeo);
1003                 if (rc)
1004                         kfree_skb_list(buf);
1005         } while (!rc);
1006 exit:
1007         if (iocb)
1008                 release_sock(sk);
1009
1010         return rc;
1011 }
1012
1013 static int tipc_wait_for_sndpkt(struct socket *sock, long *timeo_p)
1014 {
1015         struct sock *sk = sock->sk;
1016         struct tipc_sock *tsk = tipc_sk(sk);
1017         DEFINE_WAIT(wait);
1018         int done;
1019
1020         do {
1021                 int err = sock_error(sk);
1022                 if (err)
1023                         return err;
1024                 if (sock->state == SS_DISCONNECTING)
1025                         return -EPIPE;
1026                 else if (sock->state != SS_CONNECTED)
1027                         return -ENOTCONN;
1028                 if (!*timeo_p)
1029                         return -EAGAIN;
1030                 if (signal_pending(current))
1031                         return sock_intr_errno(*timeo_p);
1032
1033                 prepare_to_wait(sk_sleep(sk), &wait, TASK_INTERRUPTIBLE);
1034                 done = sk_wait_event(sk, timeo_p,
1035                                      (!tsk->link_cong &&
1036                                       !tsk_conn_cong(tsk)) ||
1037                                      !tsk->connected);
1038                 finish_wait(sk_sleep(sk), &wait);
1039         } while (!done);
1040         return 0;
1041 }
1042
1043 /**
1044  * tipc_send_stream - send stream-oriented data
1045  * @iocb: (unused)
1046  * @sock: socket structure
1047  * @m: data to send
1048  * @dsz: total length of data to be transmitted
1049  *
1050  * Used for SOCK_STREAM data.
1051  *
1052  * Returns the number of bytes sent on success (or partial success),
1053  * or errno if no data sent
1054  */
1055 static int tipc_send_stream(struct kiocb *iocb, struct socket *sock,
1056                             struct msghdr *m, size_t dsz)
1057 {
1058         struct sock *sk = sock->sk;
1059         struct tipc_sock *tsk = tipc_sk(sk);
1060         struct tipc_msg *mhdr = &tsk->phdr;
1061         struct sk_buff *buf;
1062         DECLARE_SOCKADDR(struct sockaddr_tipc *, dest, m->msg_name);
1063         u32 ref = tsk->ref;
1064         int rc = -EINVAL;
1065         long timeo;
1066         u32 dnode;
1067         uint mtu, send, sent = 0;
1068
1069         /* Handle implied connection establishment */
1070         if (unlikely(dest)) {
1071                 rc = tipc_sendmsg(iocb, sock, m, dsz);
1072                 if (dsz && (dsz == rc))
1073                         tsk->sent_unacked = 1;
1074                 return rc;
1075         }
1076         if (dsz > (uint)INT_MAX)
1077                 return -EMSGSIZE;
1078
1079         if (iocb)
1080                 lock_sock(sk);
1081
1082         if (unlikely(sock->state != SS_CONNECTED)) {
1083                 if (sock->state == SS_DISCONNECTING)
1084                         rc = -EPIPE;
1085                 else
1086                         rc = -ENOTCONN;
1087                 goto exit;
1088         }
1089
1090         timeo = sock_sndtimeo(sk, m->msg_flags & MSG_DONTWAIT);
1091         dnode = tsk_peer_node(tsk);
1092
1093 next:
1094         mtu = tsk->max_pkt;
1095         send = min_t(uint, dsz - sent, TIPC_MAX_USER_MSG_SIZE);
1096         rc = tipc_msg_build(mhdr, m, sent, send, mtu, &buf);
1097         if (unlikely(rc < 0))
1098                 goto exit;
1099         do {
1100                 if (likely(!tsk_conn_cong(tsk))) {
1101                         rc = tipc_link_xmit(buf, dnode, ref);
1102                         if (likely(!rc)) {
1103                                 tsk->sent_unacked++;
1104                                 sent += send;
1105                                 if (sent == dsz)
1106                                         break;
1107                                 goto next;
1108                         }
1109                         if (rc == -EMSGSIZE) {
1110                                 tsk->max_pkt = tipc_node_get_mtu(dnode, ref);
1111                                 goto next;
1112                         }
1113                         if (rc != -ELINKCONG)
1114                                 break;
1115                         tsk->link_cong = 1;
1116                 }
1117                 rc = tipc_wait_for_sndpkt(sock, &timeo);
1118                 if (rc)
1119                         kfree_skb_list(buf);
1120         } while (!rc);
1121 exit:
1122         if (iocb)
1123                 release_sock(sk);
1124         return sent ? sent : rc;
1125 }
1126
1127 /**
1128  * tipc_send_packet - send a connection-oriented message
1129  * @iocb: if NULL, indicates that socket lock is already held
1130  * @sock: socket structure
1131  * @m: message to send
1132  * @dsz: length of data to be transmitted
1133  *
1134  * Used for SOCK_SEQPACKET messages.
1135  *
1136  * Returns the number of bytes sent on success, or errno otherwise
1137  */
1138 static int tipc_send_packet(struct kiocb *iocb, struct socket *sock,
1139                             struct msghdr *m, size_t dsz)
1140 {
1141         if (dsz > TIPC_MAX_USER_MSG_SIZE)
1142                 return -EMSGSIZE;
1143
1144         return tipc_send_stream(iocb, sock, m, dsz);
1145 }
1146
1147 /* tipc_sk_finish_conn - complete the setup of a connection
1148  */
1149 static void tipc_sk_finish_conn(struct tipc_sock *tsk, u32 peer_port,
1150                                 u32 peer_node)
1151 {
1152         struct tipc_msg *msg = &tsk->phdr;
1153
1154         msg_set_destnode(msg, peer_node);
1155         msg_set_destport(msg, peer_port);
1156         msg_set_type(msg, TIPC_CONN_MSG);
1157         msg_set_lookup_scope(msg, 0);
1158         msg_set_hdr_sz(msg, SHORT_H_SIZE);
1159
1160         tsk->probing_interval = CONN_PROBING_INTERVAL;
1161         tsk->probing_state = TIPC_CONN_OK;
1162         tsk->connected = 1;
1163         k_start_timer(&tsk->timer, tsk->probing_interval);
1164         tipc_node_add_conn(peer_node, tsk->ref, peer_port);
1165         tsk->max_pkt = tipc_node_get_mtu(peer_node, tsk->ref);
1166 }
1167
1168 /**
1169  * set_orig_addr - capture sender's address for received message
1170  * @m: descriptor for message info
1171  * @msg: received message header
1172  *
1173  * Note: Address is not captured if not requested by receiver.
1174  */
1175 static void set_orig_addr(struct msghdr *m, struct tipc_msg *msg)
1176 {
1177         DECLARE_SOCKADDR(struct sockaddr_tipc *, addr, m->msg_name);
1178
1179         if (addr) {
1180                 addr->family = AF_TIPC;
1181                 addr->addrtype = TIPC_ADDR_ID;
1182                 memset(&addr->addr, 0, sizeof(addr->addr));
1183                 addr->addr.id.ref = msg_origport(msg);
1184                 addr->addr.id.node = msg_orignode(msg);
1185                 addr->addr.name.domain = 0;     /* could leave uninitialized */
1186                 addr->scope = 0;                /* could leave uninitialized */
1187                 m->msg_namelen = sizeof(struct sockaddr_tipc);
1188         }
1189 }
1190
1191 /**
1192  * tipc_sk_anc_data_recv - optionally capture ancillary data for received message
1193  * @m: descriptor for message info
1194  * @msg: received message header
1195  * @tsk: TIPC port associated with message
1196  *
1197  * Note: Ancillary data is not captured if not requested by receiver.
1198  *
1199  * Returns 0 if successful, otherwise errno
1200  */
1201 static int tipc_sk_anc_data_recv(struct msghdr *m, struct tipc_msg *msg,
1202                                  struct tipc_sock *tsk)
1203 {
1204         u32 anc_data[3];
1205         u32 err;
1206         u32 dest_type;
1207         int has_name;
1208         int res;
1209
1210         if (likely(m->msg_controllen == 0))
1211                 return 0;
1212
1213         /* Optionally capture errored message object(s) */
1214         err = msg ? msg_errcode(msg) : 0;
1215         if (unlikely(err)) {
1216                 anc_data[0] = err;
1217                 anc_data[1] = msg_data_sz(msg);
1218                 res = put_cmsg(m, SOL_TIPC, TIPC_ERRINFO, 8, anc_data);
1219                 if (res)
1220                         return res;
1221                 if (anc_data[1]) {
1222                         res = put_cmsg(m, SOL_TIPC, TIPC_RETDATA, anc_data[1],
1223                                        msg_data(msg));
1224                         if (res)
1225                                 return res;
1226                 }
1227         }
1228
1229         /* Optionally capture message destination object */
1230         dest_type = msg ? msg_type(msg) : TIPC_DIRECT_MSG;
1231         switch (dest_type) {
1232         case TIPC_NAMED_MSG:
1233                 has_name = 1;
1234                 anc_data[0] = msg_nametype(msg);
1235                 anc_data[1] = msg_namelower(msg);
1236                 anc_data[2] = msg_namelower(msg);
1237                 break;
1238         case TIPC_MCAST_MSG:
1239                 has_name = 1;
1240                 anc_data[0] = msg_nametype(msg);
1241                 anc_data[1] = msg_namelower(msg);
1242                 anc_data[2] = msg_nameupper(msg);
1243                 break;
1244         case TIPC_CONN_MSG:
1245                 has_name = (tsk->conn_type != 0);
1246                 anc_data[0] = tsk->conn_type;
1247                 anc_data[1] = tsk->conn_instance;
1248                 anc_data[2] = tsk->conn_instance;
1249                 break;
1250         default:
1251                 has_name = 0;
1252         }
1253         if (has_name) {
1254                 res = put_cmsg(m, SOL_TIPC, TIPC_DESTNAME, 12, anc_data);
1255                 if (res)
1256                         return res;
1257         }
1258
1259         return 0;
1260 }
1261
1262 static void tipc_sk_send_ack(struct tipc_sock *tsk, uint ack)
1263 {
1264         struct sk_buff *buf = NULL;
1265         struct tipc_msg *msg;
1266         u32 peer_port = tsk_peer_port(tsk);
1267         u32 dnode = tsk_peer_node(tsk);
1268
1269         if (!tsk->connected)
1270                 return;
1271         buf = tipc_msg_create(CONN_MANAGER, CONN_ACK, INT_H_SIZE, 0, dnode,
1272                               tipc_own_addr, peer_port, tsk->ref, TIPC_OK);
1273         if (!buf)
1274                 return;
1275         msg = buf_msg(buf);
1276         msg_set_msgcnt(msg, ack);
1277         tipc_link_xmit(buf, dnode, msg_link_selector(msg));
1278 }
1279
1280 static int tipc_wait_for_rcvmsg(struct socket *sock, long *timeop)
1281 {
1282         struct sock *sk = sock->sk;
1283         DEFINE_WAIT(wait);
1284         long timeo = *timeop;
1285         int err;
1286
1287         for (;;) {
1288                 prepare_to_wait(sk_sleep(sk), &wait, TASK_INTERRUPTIBLE);
1289                 if (timeo && skb_queue_empty(&sk->sk_receive_queue)) {
1290                         if (sock->state == SS_DISCONNECTING) {
1291                                 err = -ENOTCONN;
1292                                 break;
1293                         }
1294                         release_sock(sk);
1295                         timeo = schedule_timeout(timeo);
1296                         lock_sock(sk);
1297                 }
1298                 err = 0;
1299                 if (!skb_queue_empty(&sk->sk_receive_queue))
1300                         break;
1301                 err = sock_intr_errno(timeo);
1302                 if (signal_pending(current))
1303                         break;
1304                 err = -EAGAIN;
1305                 if (!timeo)
1306                         break;
1307         }
1308         finish_wait(sk_sleep(sk), &wait);
1309         *timeop = timeo;
1310         return err;
1311 }
1312
1313 /**
1314  * tipc_recvmsg - receive packet-oriented message
1315  * @iocb: (unused)
1316  * @m: descriptor for message info
1317  * @buf_len: total size of user buffer area
1318  * @flags: receive flags
1319  *
1320  * Used for SOCK_DGRAM, SOCK_RDM, and SOCK_SEQPACKET messages.
1321  * If the complete message doesn't fit in user area, truncate it.
1322  *
1323  * Returns size of returned message data, errno otherwise
1324  */
1325 static int tipc_recvmsg(struct kiocb *iocb, struct socket *sock,
1326                         struct msghdr *m, size_t buf_len, int flags)
1327 {
1328         struct sock *sk = sock->sk;
1329         struct tipc_sock *tsk = tipc_sk(sk);
1330         struct sk_buff *buf;
1331         struct tipc_msg *msg;
1332         long timeo;
1333         unsigned int sz;
1334         u32 err;
1335         int res;
1336
1337         /* Catch invalid receive requests */
1338         if (unlikely(!buf_len))
1339                 return -EINVAL;
1340
1341         lock_sock(sk);
1342
1343         if (unlikely(sock->state == SS_UNCONNECTED)) {
1344                 res = -ENOTCONN;
1345                 goto exit;
1346         }
1347
1348         timeo = sock_rcvtimeo(sk, flags & MSG_DONTWAIT);
1349 restart:
1350
1351         /* Look for a message in receive queue; wait if necessary */
1352         res = tipc_wait_for_rcvmsg(sock, &timeo);
1353         if (res)
1354                 goto exit;
1355
1356         /* Look at first message in receive queue */
1357         buf = skb_peek(&sk->sk_receive_queue);
1358         msg = buf_msg(buf);
1359         sz = msg_data_sz(msg);
1360         err = msg_errcode(msg);
1361
1362         /* Discard an empty non-errored message & try again */
1363         if ((!sz) && (!err)) {
1364                 tsk_advance_rx_queue(sk);
1365                 goto restart;
1366         }
1367
1368         /* Capture sender's address (optional) */
1369         set_orig_addr(m, msg);
1370
1371         /* Capture ancillary data (optional) */
1372         res = tipc_sk_anc_data_recv(m, msg, tsk);
1373         if (res)
1374                 goto exit;
1375
1376         /* Capture message data (if valid) & compute return value (always) */
1377         if (!err) {
1378                 if (unlikely(buf_len < sz)) {
1379                         sz = buf_len;
1380                         m->msg_flags |= MSG_TRUNC;
1381                 }
1382                 res = skb_copy_datagram_msg(buf, msg_hdr_sz(msg), m, sz);
1383                 if (res)
1384                         goto exit;
1385                 res = sz;
1386         } else {
1387                 if ((sock->state == SS_READY) ||
1388                     ((err == TIPC_CONN_SHUTDOWN) || m->msg_control))
1389                         res = 0;
1390                 else
1391                         res = -ECONNRESET;
1392         }
1393
1394         /* Consume received message (optional) */
1395         if (likely(!(flags & MSG_PEEK))) {
1396                 if ((sock->state != SS_READY) &&
1397                     (++tsk->rcv_unacked >= TIPC_CONNACK_INTV)) {
1398                         tipc_sk_send_ack(tsk, tsk->rcv_unacked);
1399                         tsk->rcv_unacked = 0;
1400                 }
1401                 tsk_advance_rx_queue(sk);
1402         }
1403 exit:
1404         release_sock(sk);
1405         return res;
1406 }
1407
1408 /**
1409  * tipc_recv_stream - receive stream-oriented data
1410  * @iocb: (unused)
1411  * @m: descriptor for message info
1412  * @buf_len: total size of user buffer area
1413  * @flags: receive flags
1414  *
1415  * Used for SOCK_STREAM messages only.  If not enough data is available
1416  * will optionally wait for more; never truncates data.
1417  *
1418  * Returns size of returned message data, errno otherwise
1419  */
1420 static int tipc_recv_stream(struct kiocb *iocb, struct socket *sock,
1421                             struct msghdr *m, size_t buf_len, int flags)
1422 {
1423         struct sock *sk = sock->sk;
1424         struct tipc_sock *tsk = tipc_sk(sk);
1425         struct sk_buff *buf;
1426         struct tipc_msg *msg;
1427         long timeo;
1428         unsigned int sz;
1429         int sz_to_copy, target, needed;
1430         int sz_copied = 0;
1431         u32 err;
1432         int res = 0;
1433
1434         /* Catch invalid receive attempts */
1435         if (unlikely(!buf_len))
1436                 return -EINVAL;
1437
1438         lock_sock(sk);
1439
1440         if (unlikely(sock->state == SS_UNCONNECTED)) {
1441                 res = -ENOTCONN;
1442                 goto exit;
1443         }
1444
1445         target = sock_rcvlowat(sk, flags & MSG_WAITALL, buf_len);
1446         timeo = sock_rcvtimeo(sk, flags & MSG_DONTWAIT);
1447
1448 restart:
1449         /* Look for a message in receive queue; wait if necessary */
1450         res = tipc_wait_for_rcvmsg(sock, &timeo);
1451         if (res)
1452                 goto exit;
1453
1454         /* Look at first message in receive queue */
1455         buf = skb_peek(&sk->sk_receive_queue);
1456         msg = buf_msg(buf);
1457         sz = msg_data_sz(msg);
1458         err = msg_errcode(msg);
1459
1460         /* Discard an empty non-errored message & try again */
1461         if ((!sz) && (!err)) {
1462                 tsk_advance_rx_queue(sk);
1463                 goto restart;
1464         }
1465
1466         /* Optionally capture sender's address & ancillary data of first msg */
1467         if (sz_copied == 0) {
1468                 set_orig_addr(m, msg);
1469                 res = tipc_sk_anc_data_recv(m, msg, tsk);
1470                 if (res)
1471                         goto exit;
1472         }
1473
1474         /* Capture message data (if valid) & compute return value (always) */
1475         if (!err) {
1476                 u32 offset = (u32)(unsigned long)(TIPC_SKB_CB(buf)->handle);
1477
1478                 sz -= offset;
1479                 needed = (buf_len - sz_copied);
1480                 sz_to_copy = (sz <= needed) ? sz : needed;
1481
1482                 res = skb_copy_datagram_msg(buf, msg_hdr_sz(msg) + offset,
1483                                             m, sz_to_copy);
1484                 if (res)
1485                         goto exit;
1486
1487                 sz_copied += sz_to_copy;
1488
1489                 if (sz_to_copy < sz) {
1490                         if (!(flags & MSG_PEEK))
1491                                 TIPC_SKB_CB(buf)->handle =
1492                                 (void *)(unsigned long)(offset + sz_to_copy);
1493                         goto exit;
1494                 }
1495         } else {
1496                 if (sz_copied != 0)
1497                         goto exit; /* can't add error msg to valid data */
1498
1499                 if ((err == TIPC_CONN_SHUTDOWN) || m->msg_control)
1500                         res = 0;
1501                 else
1502                         res = -ECONNRESET;
1503         }
1504
1505         /* Consume received message (optional) */
1506         if (likely(!(flags & MSG_PEEK))) {
1507                 if (unlikely(++tsk->rcv_unacked >= TIPC_CONNACK_INTV)) {
1508                         tipc_sk_send_ack(tsk, tsk->rcv_unacked);
1509                         tsk->rcv_unacked = 0;
1510                 }
1511                 tsk_advance_rx_queue(sk);
1512         }
1513
1514         /* Loop around if more data is required */
1515         if ((sz_copied < buf_len) &&    /* didn't get all requested data */
1516             (!skb_queue_empty(&sk->sk_receive_queue) ||
1517             (sz_copied < target)) &&    /* and more is ready or required */
1518             (!(flags & MSG_PEEK)) &&    /* and aren't just peeking at data */
1519             (!err))                     /* and haven't reached a FIN */
1520                 goto restart;
1521
1522 exit:
1523         release_sock(sk);
1524         return sz_copied ? sz_copied : res;
1525 }
1526
1527 /**
1528  * tipc_write_space - wake up thread if port congestion is released
1529  * @sk: socket
1530  */
1531 static void tipc_write_space(struct sock *sk)
1532 {
1533         struct socket_wq *wq;
1534
1535         rcu_read_lock();
1536         wq = rcu_dereference(sk->sk_wq);
1537         if (wq_has_sleeper(wq))
1538                 wake_up_interruptible_sync_poll(&wq->wait, POLLOUT |
1539                                                 POLLWRNORM | POLLWRBAND);
1540         rcu_read_unlock();
1541 }
1542
1543 /**
1544  * tipc_data_ready - wake up threads to indicate messages have been received
1545  * @sk: socket
1546  * @len: the length of messages
1547  */
1548 static void tipc_data_ready(struct sock *sk)
1549 {
1550         struct socket_wq *wq;
1551
1552         rcu_read_lock();
1553         wq = rcu_dereference(sk->sk_wq);
1554         if (wq_has_sleeper(wq))
1555                 wake_up_interruptible_sync_poll(&wq->wait, POLLIN |
1556                                                 POLLRDNORM | POLLRDBAND);
1557         rcu_read_unlock();
1558 }
1559
1560 /**
1561  * filter_connect - Handle all incoming messages for a connection-based socket
1562  * @tsk: TIPC socket
1563  * @msg: message
1564  *
1565  * Returns 0 (TIPC_OK) if everything ok, -TIPC_ERR_NO_PORT otherwise
1566  */
1567 static int filter_connect(struct tipc_sock *tsk, struct sk_buff **buf)
1568 {
1569         struct sock *sk = &tsk->sk;
1570         struct socket *sock = sk->sk_socket;
1571         struct tipc_msg *msg = buf_msg(*buf);
1572         int retval = -TIPC_ERR_NO_PORT;
1573
1574         if (msg_mcast(msg))
1575                 return retval;
1576
1577         switch ((int)sock->state) {
1578         case SS_CONNECTED:
1579                 /* Accept only connection-based messages sent by peer */
1580                 if (tsk_peer_msg(tsk, msg)) {
1581                         if (unlikely(msg_errcode(msg))) {
1582                                 sock->state = SS_DISCONNECTING;
1583                                 tsk->connected = 0;
1584                                 /* let timer expire on it's own */
1585                                 tipc_node_remove_conn(tsk_peer_node(tsk),
1586                                                       tsk->ref);
1587                         }
1588                         retval = TIPC_OK;
1589                 }
1590                 break;
1591         case SS_CONNECTING:
1592                 /* Accept only ACK or NACK message */
1593
1594                 if (unlikely(!msg_connected(msg)))
1595                         break;
1596
1597                 if (unlikely(msg_errcode(msg))) {
1598                         sock->state = SS_DISCONNECTING;
1599                         sk->sk_err = ECONNREFUSED;
1600                         retval = TIPC_OK;
1601                         break;
1602                 }
1603
1604                 if (unlikely(msg_importance(msg) > TIPC_CRITICAL_IMPORTANCE)) {
1605                         sock->state = SS_DISCONNECTING;
1606                         sk->sk_err = EINVAL;
1607                         retval = TIPC_OK;
1608                         break;
1609                 }
1610
1611                 tipc_sk_finish_conn(tsk, msg_origport(msg), msg_orignode(msg));
1612                 msg_set_importance(&tsk->phdr, msg_importance(msg));
1613                 sock->state = SS_CONNECTED;
1614
1615                 /* If an incoming message is an 'ACK-', it should be
1616                  * discarded here because it doesn't contain useful
1617                  * data. In addition, we should try to wake up
1618                  * connect() routine if sleeping.
1619                  */
1620                 if (msg_data_sz(msg) == 0) {
1621                         kfree_skb(*buf);
1622                         *buf = NULL;
1623                         if (waitqueue_active(sk_sleep(sk)))
1624                                 wake_up_interruptible(sk_sleep(sk));
1625                 }
1626                 retval = TIPC_OK;
1627                 break;
1628         case SS_LISTENING:
1629         case SS_UNCONNECTED:
1630                 /* Accept only SYN message */
1631                 if (!msg_connected(msg) && !(msg_errcode(msg)))
1632                         retval = TIPC_OK;
1633                 break;
1634         case SS_DISCONNECTING:
1635                 break;
1636         default:
1637                 pr_err("Unknown socket state %u\n", sock->state);
1638         }
1639         return retval;
1640 }
1641
1642 /**
1643  * rcvbuf_limit - get proper overload limit of socket receive queue
1644  * @sk: socket
1645  * @buf: message
1646  *
1647  * For all connection oriented messages, irrespective of importance,
1648  * the default overload value (i.e. 67MB) is set as limit.
1649  *
1650  * For all connectionless messages, by default new queue limits are
1651  * as belows:
1652  *
1653  * TIPC_LOW_IMPORTANCE       (4 MB)
1654  * TIPC_MEDIUM_IMPORTANCE    (8 MB)
1655  * TIPC_HIGH_IMPORTANCE      (16 MB)
1656  * TIPC_CRITICAL_IMPORTANCE  (32 MB)
1657  *
1658  * Returns overload limit according to corresponding message importance
1659  */
1660 static unsigned int rcvbuf_limit(struct sock *sk, struct sk_buff *buf)
1661 {
1662         struct tipc_msg *msg = buf_msg(buf);
1663
1664         if (msg_connected(msg))
1665                 return sysctl_tipc_rmem[2];
1666
1667         return sk->sk_rcvbuf >> TIPC_CRITICAL_IMPORTANCE <<
1668                 msg_importance(msg);
1669 }
1670
1671 /**
1672  * filter_rcv - validate incoming message
1673  * @sk: socket
1674  * @buf: message
1675  *
1676  * Enqueues message on receive queue if acceptable; optionally handles
1677  * disconnect indication for a connected socket.
1678  *
1679  * Called with socket lock already taken; port lock may also be taken.
1680  *
1681  * Returns 0 (TIPC_OK) if message was consumed, -TIPC error code if message
1682  * to be rejected, 1 (TIPC_FWD_MSG) if (CONN_MANAGER) message to be forwarded
1683  */
1684 static int filter_rcv(struct sock *sk, struct sk_buff *buf)
1685 {
1686         struct socket *sock = sk->sk_socket;
1687         struct tipc_sock *tsk = tipc_sk(sk);
1688         struct tipc_msg *msg = buf_msg(buf);
1689         unsigned int limit = rcvbuf_limit(sk, buf);
1690         u32 onode;
1691         int rc = TIPC_OK;
1692
1693         if (unlikely(msg_user(msg) == CONN_MANAGER))
1694                 return tipc_sk_proto_rcv(tsk, &onode, buf);
1695
1696         if (unlikely(msg_user(msg) == SOCK_WAKEUP)) {
1697                 kfree_skb(buf);
1698                 tsk->link_cong = 0;
1699                 sk->sk_write_space(sk);
1700                 return TIPC_OK;
1701         }
1702
1703         /* Reject message if it is wrong sort of message for socket */
1704         if (msg_type(msg) > TIPC_DIRECT_MSG)
1705                 return -TIPC_ERR_NO_PORT;
1706
1707         if (sock->state == SS_READY) {
1708                 if (msg_connected(msg))
1709                         return -TIPC_ERR_NO_PORT;
1710         } else {
1711                 rc = filter_connect(tsk, &buf);
1712                 if (rc != TIPC_OK || buf == NULL)
1713                         return rc;
1714         }
1715
1716         /* Reject message if there isn't room to queue it */
1717         if (sk_rmem_alloc_get(sk) + buf->truesize >= limit)
1718                 return -TIPC_ERR_OVERLOAD;
1719
1720         /* Enqueue message */
1721         TIPC_SKB_CB(buf)->handle = NULL;
1722         __skb_queue_tail(&sk->sk_receive_queue, buf);
1723         skb_set_owner_r(buf, sk);
1724
1725         sk->sk_data_ready(sk);
1726         return TIPC_OK;
1727 }
1728
1729 /**
1730  * tipc_backlog_rcv - handle incoming message from backlog queue
1731  * @sk: socket
1732  * @buf: message
1733  *
1734  * Caller must hold socket lock, but not port lock.
1735  *
1736  * Returns 0
1737  */
1738 static int tipc_backlog_rcv(struct sock *sk, struct sk_buff *buf)
1739 {
1740         int rc;
1741         u32 onode;
1742         struct tipc_sock *tsk = tipc_sk(sk);
1743         uint truesize = buf->truesize;
1744
1745         rc = filter_rcv(sk, buf);
1746
1747         if (likely(!rc)) {
1748                 if (atomic_read(&tsk->dupl_rcvcnt) < TIPC_CONN_OVERLOAD_LIMIT)
1749                         atomic_add(truesize, &tsk->dupl_rcvcnt);
1750                 return 0;
1751         }
1752
1753         if ((rc < 0) && !tipc_msg_reverse(buf, &onode, -rc))
1754                 return 0;
1755
1756         tipc_link_xmit(buf, onode, 0);
1757
1758         return 0;
1759 }
1760
1761 /**
1762  * tipc_sk_rcv - handle incoming message
1763  * @buf: buffer containing arriving message
1764  * Consumes buffer
1765  * Returns 0 if success, or errno: -EHOSTUNREACH
1766  */
1767 int tipc_sk_rcv(struct sk_buff *buf)
1768 {
1769         struct tipc_sock *tsk;
1770         struct sock *sk;
1771         u32 dport = msg_destport(buf_msg(buf));
1772         int rc = TIPC_OK;
1773         uint limit;
1774         u32 dnode;
1775
1776         /* Validate destination and message */
1777         tsk = tipc_sk_get(dport);
1778         if (unlikely(!tsk)) {
1779                 rc = tipc_msg_eval(buf, &dnode);
1780                 goto exit;
1781         }
1782         sk = &tsk->sk;
1783
1784         /* Queue message */
1785         spin_lock_bh(&sk->sk_lock.slock);
1786
1787         if (!sock_owned_by_user(sk)) {
1788                 rc = filter_rcv(sk, buf);
1789         } else {
1790                 if (sk->sk_backlog.len == 0)
1791                         atomic_set(&tsk->dupl_rcvcnt, 0);
1792                 limit = rcvbuf_limit(sk, buf) + atomic_read(&tsk->dupl_rcvcnt);
1793                 if (sk_add_backlog(sk, buf, limit))
1794                         rc = -TIPC_ERR_OVERLOAD;
1795         }
1796         spin_unlock_bh(&sk->sk_lock.slock);
1797         tipc_sk_put(tsk);
1798         if (likely(!rc))
1799                 return 0;
1800 exit:
1801         if ((rc < 0) && !tipc_msg_reverse(buf, &dnode, -rc))
1802                 return -EHOSTUNREACH;
1803
1804         tipc_link_xmit(buf, dnode, 0);
1805         return (rc < 0) ? -EHOSTUNREACH : 0;
1806 }
1807
1808 static int tipc_wait_for_connect(struct socket *sock, long *timeo_p)
1809 {
1810         struct sock *sk = sock->sk;
1811         DEFINE_WAIT(wait);
1812         int done;
1813
1814         do {
1815                 int err = sock_error(sk);
1816                 if (err)
1817                         return err;
1818                 if (!*timeo_p)
1819                         return -ETIMEDOUT;
1820                 if (signal_pending(current))
1821                         return sock_intr_errno(*timeo_p);
1822
1823                 prepare_to_wait(sk_sleep(sk), &wait, TASK_INTERRUPTIBLE);
1824                 done = sk_wait_event(sk, timeo_p, sock->state != SS_CONNECTING);
1825                 finish_wait(sk_sleep(sk), &wait);
1826         } while (!done);
1827         return 0;
1828 }
1829
1830 /**
1831  * tipc_connect - establish a connection to another TIPC port
1832  * @sock: socket structure
1833  * @dest: socket address for destination port
1834  * @destlen: size of socket address data structure
1835  * @flags: file-related flags associated with socket
1836  *
1837  * Returns 0 on success, errno otherwise
1838  */
1839 static int tipc_connect(struct socket *sock, struct sockaddr *dest,
1840                         int destlen, int flags)
1841 {
1842         struct sock *sk = sock->sk;
1843         struct sockaddr_tipc *dst = (struct sockaddr_tipc *)dest;
1844         struct msghdr m = {NULL,};
1845         long timeout = (flags & O_NONBLOCK) ? 0 : tipc_sk(sk)->conn_timeout;
1846         socket_state previous;
1847         int res;
1848
1849         lock_sock(sk);
1850
1851         /* For now, TIPC does not allow use of connect() with DGRAM/RDM types */
1852         if (sock->state == SS_READY) {
1853                 res = -EOPNOTSUPP;
1854                 goto exit;
1855         }
1856
1857         /*
1858          * Reject connection attempt using multicast address
1859          *
1860          * Note: send_msg() validates the rest of the address fields,
1861          *       so there's no need to do it here
1862          */
1863         if (dst->addrtype == TIPC_ADDR_MCAST) {
1864                 res = -EINVAL;
1865                 goto exit;
1866         }
1867
1868         previous = sock->state;
1869         switch (sock->state) {
1870         case SS_UNCONNECTED:
1871                 /* Send a 'SYN-' to destination */
1872                 m.msg_name = dest;
1873                 m.msg_namelen = destlen;
1874
1875                 /* If connect is in non-blocking case, set MSG_DONTWAIT to
1876                  * indicate send_msg() is never blocked.
1877                  */
1878                 if (!timeout)
1879                         m.msg_flags = MSG_DONTWAIT;
1880
1881                 res = tipc_sendmsg(NULL, sock, &m, 0);
1882                 if ((res < 0) && (res != -EWOULDBLOCK))
1883                         goto exit;
1884
1885                 /* Just entered SS_CONNECTING state; the only
1886                  * difference is that return value in non-blocking
1887                  * case is EINPROGRESS, rather than EALREADY.
1888                  */
1889                 res = -EINPROGRESS;
1890         case SS_CONNECTING:
1891                 if (previous == SS_CONNECTING)
1892                         res = -EALREADY;
1893                 if (!timeout)
1894                         goto exit;
1895                 timeout = msecs_to_jiffies(timeout);
1896                 /* Wait until an 'ACK' or 'RST' arrives, or a timeout occurs */
1897                 res = tipc_wait_for_connect(sock, &timeout);
1898                 break;
1899         case SS_CONNECTED:
1900                 res = -EISCONN;
1901                 break;
1902         default:
1903                 res = -EINVAL;
1904                 break;
1905         }
1906 exit:
1907         release_sock(sk);
1908         return res;
1909 }
1910
1911 /**
1912  * tipc_listen - allow socket to listen for incoming connections
1913  * @sock: socket structure
1914  * @len: (unused)
1915  *
1916  * Returns 0 on success, errno otherwise
1917  */
1918 static int tipc_listen(struct socket *sock, int len)
1919 {
1920         struct sock *sk = sock->sk;
1921         int res;
1922
1923         lock_sock(sk);
1924
1925         if (sock->state != SS_UNCONNECTED)
1926                 res = -EINVAL;
1927         else {
1928                 sock->state = SS_LISTENING;
1929                 res = 0;
1930         }
1931
1932         release_sock(sk);
1933         return res;
1934 }
1935
1936 static int tipc_wait_for_accept(struct socket *sock, long timeo)
1937 {
1938         struct sock *sk = sock->sk;
1939         DEFINE_WAIT(wait);
1940         int err;
1941
1942         /* True wake-one mechanism for incoming connections: only
1943          * one process gets woken up, not the 'whole herd'.
1944          * Since we do not 'race & poll' for established sockets
1945          * anymore, the common case will execute the loop only once.
1946         */
1947         for (;;) {
1948                 prepare_to_wait_exclusive(sk_sleep(sk), &wait,
1949                                           TASK_INTERRUPTIBLE);
1950                 if (timeo && skb_queue_empty(&sk->sk_receive_queue)) {
1951                         release_sock(sk);
1952                         timeo = schedule_timeout(timeo);
1953                         lock_sock(sk);
1954                 }
1955                 err = 0;
1956                 if (!skb_queue_empty(&sk->sk_receive_queue))
1957                         break;
1958                 err = -EINVAL;
1959                 if (sock->state != SS_LISTENING)
1960                         break;
1961                 err = sock_intr_errno(timeo);
1962                 if (signal_pending(current))
1963                         break;
1964                 err = -EAGAIN;
1965                 if (!timeo)
1966                         break;
1967         }
1968         finish_wait(sk_sleep(sk), &wait);
1969         return err;
1970 }
1971
1972 /**
1973  * tipc_accept - wait for connection request
1974  * @sock: listening socket
1975  * @newsock: new socket that is to be connected
1976  * @flags: file-related flags associated with socket
1977  *
1978  * Returns 0 on success, errno otherwise
1979  */
1980 static int tipc_accept(struct socket *sock, struct socket *new_sock, int flags)
1981 {
1982         struct sock *new_sk, *sk = sock->sk;
1983         struct sk_buff *buf;
1984         struct tipc_sock *new_tsock;
1985         struct tipc_msg *msg;
1986         long timeo;
1987         int res;
1988
1989         lock_sock(sk);
1990
1991         if (sock->state != SS_LISTENING) {
1992                 res = -EINVAL;
1993                 goto exit;
1994         }
1995         timeo = sock_rcvtimeo(sk, flags & O_NONBLOCK);
1996         res = tipc_wait_for_accept(sock, timeo);
1997         if (res)
1998                 goto exit;
1999
2000         buf = skb_peek(&sk->sk_receive_queue);
2001
2002         res = tipc_sk_create(sock_net(sock->sk), new_sock, 0, 1);
2003         if (res)
2004                 goto exit;
2005
2006         new_sk = new_sock->sk;
2007         new_tsock = tipc_sk(new_sk);
2008         msg = buf_msg(buf);
2009
2010         /* we lock on new_sk; but lockdep sees the lock on sk */
2011         lock_sock_nested(new_sk, SINGLE_DEPTH_NESTING);
2012
2013         /*
2014          * Reject any stray messages received by new socket
2015          * before the socket lock was taken (very, very unlikely)
2016          */
2017         tsk_rej_rx_queue(new_sk);
2018
2019         /* Connect new socket to it's peer */
2020         tipc_sk_finish_conn(new_tsock, msg_origport(msg), msg_orignode(msg));
2021         new_sock->state = SS_CONNECTED;
2022
2023         tsk_set_importance(new_tsock, msg_importance(msg));
2024         if (msg_named(msg)) {
2025                 new_tsock->conn_type = msg_nametype(msg);
2026                 new_tsock->conn_instance = msg_nameinst(msg);
2027         }
2028
2029         /*
2030          * Respond to 'SYN-' by discarding it & returning 'ACK'-.
2031          * Respond to 'SYN+' by queuing it on new socket.
2032          */
2033         if (!msg_data_sz(msg)) {
2034                 struct msghdr m = {NULL,};
2035
2036                 tsk_advance_rx_queue(sk);
2037                 tipc_send_packet(NULL, new_sock, &m, 0);
2038         } else {
2039                 __skb_dequeue(&sk->sk_receive_queue);
2040                 __skb_queue_head(&new_sk->sk_receive_queue, buf);
2041                 skb_set_owner_r(buf, new_sk);
2042         }
2043         release_sock(new_sk);
2044 exit:
2045         release_sock(sk);
2046         return res;
2047 }
2048
2049 /**
2050  * tipc_shutdown - shutdown socket connection
2051  * @sock: socket structure
2052  * @how: direction to close (must be SHUT_RDWR)
2053  *
2054  * Terminates connection (if necessary), then purges socket's receive queue.
2055  *
2056  * Returns 0 on success, errno otherwise
2057  */
2058 static int tipc_shutdown(struct socket *sock, int how)
2059 {
2060         struct sock *sk = sock->sk;
2061         struct tipc_sock *tsk = tipc_sk(sk);
2062         struct sk_buff *buf;
2063         u32 dnode;
2064         int res;
2065
2066         if (how != SHUT_RDWR)
2067                 return -EINVAL;
2068
2069         lock_sock(sk);
2070
2071         switch (sock->state) {
2072         case SS_CONNECTING:
2073         case SS_CONNECTED:
2074
2075 restart:
2076                 /* Disconnect and send a 'FIN+' or 'FIN-' message to peer */
2077                 buf = __skb_dequeue(&sk->sk_receive_queue);
2078                 if (buf) {
2079                         if (TIPC_SKB_CB(buf)->handle != NULL) {
2080                                 kfree_skb(buf);
2081                                 goto restart;
2082                         }
2083                         if (tipc_msg_reverse(buf, &dnode, TIPC_CONN_SHUTDOWN))
2084                                 tipc_link_xmit(buf, dnode, tsk->ref);
2085                         tipc_node_remove_conn(dnode, tsk->ref);
2086                 } else {
2087                         dnode = tsk_peer_node(tsk);
2088                         buf = tipc_msg_create(TIPC_CRITICAL_IMPORTANCE,
2089                                               TIPC_CONN_MSG, SHORT_H_SIZE,
2090                                               0, dnode, tipc_own_addr,
2091                                               tsk_peer_port(tsk),
2092                                               tsk->ref, TIPC_CONN_SHUTDOWN);
2093                         tipc_link_xmit(buf, dnode, tsk->ref);
2094                 }
2095                 tsk->connected = 0;
2096                 sock->state = SS_DISCONNECTING;
2097                 tipc_node_remove_conn(dnode, tsk->ref);
2098                 /* fall through */
2099
2100         case SS_DISCONNECTING:
2101
2102                 /* Discard any unreceived messages */
2103                 __skb_queue_purge(&sk->sk_receive_queue);
2104
2105                 /* Wake up anyone sleeping in poll */
2106                 sk->sk_state_change(sk);
2107                 res = 0;
2108                 break;
2109
2110         default:
2111                 res = -ENOTCONN;
2112         }
2113
2114         release_sock(sk);
2115         return res;
2116 }
2117
2118 static void tipc_sk_timeout(unsigned long ref)
2119 {
2120         struct tipc_sock *tsk;
2121         struct sock *sk;
2122         struct sk_buff *buf = NULL;
2123         u32 peer_port, peer_node;
2124
2125         tsk = tipc_sk_get(ref);
2126         if (!tsk)
2127                 return;
2128
2129         sk = &tsk->sk;
2130         bh_lock_sock(sk);
2131         if (!tsk->connected) {
2132                 bh_unlock_sock(sk);
2133                 goto exit;
2134         }
2135         peer_port = tsk_peer_port(tsk);
2136         peer_node = tsk_peer_node(tsk);
2137
2138         if (tsk->probing_state == TIPC_CONN_PROBING) {
2139                 /* Previous probe not answered -> self abort */
2140                 buf = tipc_msg_create(TIPC_CRITICAL_IMPORTANCE, TIPC_CONN_MSG,
2141                                       SHORT_H_SIZE, 0, tipc_own_addr,
2142                                       peer_node, ref, peer_port,
2143                                       TIPC_ERR_NO_PORT);
2144         } else {
2145                 buf = tipc_msg_create(CONN_MANAGER, CONN_PROBE, INT_H_SIZE,
2146                                       0, peer_node, tipc_own_addr,
2147                                       peer_port, ref, TIPC_OK);
2148                 tsk->probing_state = TIPC_CONN_PROBING;
2149                 k_start_timer(&tsk->timer, tsk->probing_interval);
2150         }
2151         bh_unlock_sock(sk);
2152         if (buf)
2153                 tipc_link_xmit(buf, peer_node, ref);
2154 exit:
2155         tipc_sk_put(tsk);
2156 }
2157
2158 static int tipc_sk_publish(struct tipc_sock *tsk, uint scope,
2159                            struct tipc_name_seq const *seq)
2160 {
2161         struct publication *publ;
2162         u32 key;
2163
2164         if (tsk->connected)
2165                 return -EINVAL;
2166         key = tsk->ref + tsk->pub_count + 1;
2167         if (key == tsk->ref)
2168                 return -EADDRINUSE;
2169
2170         publ = tipc_nametbl_publish(seq->type, seq->lower, seq->upper,
2171                                     scope, tsk->ref, key);
2172         if (unlikely(!publ))
2173                 return -EINVAL;
2174
2175         list_add(&publ->pport_list, &tsk->publications);
2176         tsk->pub_count++;
2177         tsk->published = 1;
2178         return 0;
2179 }
2180
2181 static int tipc_sk_withdraw(struct tipc_sock *tsk, uint scope,
2182                             struct tipc_name_seq const *seq)
2183 {
2184         struct publication *publ;
2185         struct publication *safe;
2186         int rc = -EINVAL;
2187
2188         list_for_each_entry_safe(publ, safe, &tsk->publications, pport_list) {
2189                 if (seq) {
2190                         if (publ->scope != scope)
2191                                 continue;
2192                         if (publ->type != seq->type)
2193                                 continue;
2194                         if (publ->lower != seq->lower)
2195                                 continue;
2196                         if (publ->upper != seq->upper)
2197                                 break;
2198                         tipc_nametbl_withdraw(publ->type, publ->lower,
2199                                               publ->ref, publ->key);
2200                         rc = 0;
2201                         break;
2202                 }
2203                 tipc_nametbl_withdraw(publ->type, publ->lower,
2204                                       publ->ref, publ->key);
2205                 rc = 0;
2206         }
2207         if (list_empty(&tsk->publications))
2208                 tsk->published = 0;
2209         return rc;
2210 }
2211
2212 static int tipc_sk_show(struct tipc_sock *tsk, char *buf,
2213                         int len, int full_id)
2214 {
2215         struct publication *publ;
2216         int ret;
2217
2218         if (full_id)
2219                 ret = tipc_snprintf(buf, len, "<%u.%u.%u:%u>:",
2220                                     tipc_zone(tipc_own_addr),
2221                                     tipc_cluster(tipc_own_addr),
2222                                     tipc_node(tipc_own_addr), tsk->ref);
2223         else
2224                 ret = tipc_snprintf(buf, len, "%-10u:", tsk->ref);
2225
2226         if (tsk->connected) {
2227                 u32 dport = tsk_peer_port(tsk);
2228                 u32 destnode = tsk_peer_node(tsk);
2229
2230                 ret += tipc_snprintf(buf + ret, len - ret,
2231                                      " connected to <%u.%u.%u:%u>",
2232                                      tipc_zone(destnode),
2233                                      tipc_cluster(destnode),
2234                                      tipc_node(destnode), dport);
2235                 if (tsk->conn_type != 0)
2236                         ret += tipc_snprintf(buf + ret, len - ret,
2237                                              " via {%u,%u}", tsk->conn_type,
2238                                              tsk->conn_instance);
2239         } else if (tsk->published) {
2240                 ret += tipc_snprintf(buf + ret, len - ret, " bound to");
2241                 list_for_each_entry(publ, &tsk->publications, pport_list) {
2242                         if (publ->lower == publ->upper)
2243                                 ret += tipc_snprintf(buf + ret, len - ret,
2244                                                      " {%u,%u}", publ->type,
2245                                                      publ->lower);
2246                         else
2247                                 ret += tipc_snprintf(buf + ret, len - ret,
2248                                                      " {%u,%u,%u}", publ->type,
2249                                                      publ->lower, publ->upper);
2250                 }
2251         }
2252         ret += tipc_snprintf(buf + ret, len - ret, "\n");
2253         return ret;
2254 }
2255
2256 struct sk_buff *tipc_sk_socks_show(void)
2257 {
2258         struct sk_buff *buf;
2259         struct tlv_desc *rep_tlv;
2260         char *pb;
2261         int pb_len;
2262         struct tipc_sock *tsk;
2263         int str_len = 0;
2264         u32 ref = 0;
2265
2266         buf = tipc_cfg_reply_alloc(TLV_SPACE(ULTRA_STRING_MAX_LEN));
2267         if (!buf)
2268                 return NULL;
2269         rep_tlv = (struct tlv_desc *)buf->data;
2270         pb = TLV_DATA(rep_tlv);
2271         pb_len = ULTRA_STRING_MAX_LEN;
2272
2273         tsk = tipc_sk_get_next(&ref);
2274         for (; tsk; tsk = tipc_sk_get_next(&ref)) {
2275                 lock_sock(&tsk->sk);
2276                 str_len += tipc_sk_show(tsk, pb + str_len,
2277                                         pb_len - str_len, 0);
2278                 release_sock(&tsk->sk);
2279                 tipc_sk_put(tsk);
2280         }
2281         str_len += 1;   /* for "\0" */
2282         skb_put(buf, TLV_SPACE(str_len));
2283         TLV_SET(rep_tlv, TIPC_TLV_ULTRA_STRING, NULL, str_len);
2284
2285         return buf;
2286 }
2287
2288 /* tipc_sk_reinit: set non-zero address in all existing sockets
2289  *                 when we go from standalone to network mode.
2290  */
2291 void tipc_sk_reinit(void)
2292 {
2293         struct tipc_msg *msg;
2294         u32 ref = 0;
2295         struct tipc_sock *tsk = tipc_sk_get_next(&ref);
2296
2297         for (; tsk; tsk = tipc_sk_get_next(&ref)) {
2298                 lock_sock(&tsk->sk);
2299                 msg = &tsk->phdr;
2300                 msg_set_prevnode(msg, tipc_own_addr);
2301                 msg_set_orignode(msg, tipc_own_addr);
2302                 release_sock(&tsk->sk);
2303                 tipc_sk_put(tsk);
2304         }
2305 }
2306
2307 /**
2308  * struct reference - TIPC socket reference entry
2309  * @tsk: pointer to socket associated with reference entry
2310  * @ref: reference value for socket (combines instance & array index info)
2311  */
2312 struct reference {
2313         struct tipc_sock *tsk;
2314         u32 ref;
2315 };
2316
2317 /**
2318  * struct tipc_ref_table - table of TIPC socket reference entries
2319  * @entries: pointer to array of reference entries
2320  * @capacity: array index of first unusable entry
2321  * @init_point: array index of first uninitialized entry
2322  * @first_free: array index of first unused socket reference entry
2323  * @last_free: array index of last unused socket reference entry
2324  * @index_mask: bitmask for array index portion of reference values
2325  * @start_mask: initial value for instance value portion of reference values
2326  */
2327 struct ref_table {
2328         struct reference *entries;
2329         u32 capacity;
2330         u32 init_point;
2331         u32 first_free;
2332         u32 last_free;
2333         u32 index_mask;
2334         u32 start_mask;
2335 };
2336
2337 /* Socket reference table consists of 2**N entries.
2338  *
2339  * State        Socket ptr      Reference
2340  * -----        ----------      ---------
2341  * In use        non-NULL       XXXX|own index
2342  *                              (XXXX changes each time entry is acquired)
2343  * Free            NULL         YYYY|next free index
2344  *                              (YYYY is one more than last used XXXX)
2345  * Uninitialized   NULL         0
2346  *
2347  * Entry 0 is not used; this allows index 0 to denote the end of the free list.
2348  *
2349  * Note that a reference value of 0 does not necessarily indicate that an
2350  * entry is uninitialized, since the last entry in the free list could also
2351  * have a reference value of 0 (although this is unlikely).
2352  */
2353
2354 static struct ref_table tipc_ref_table;
2355
2356 static DEFINE_RWLOCK(ref_table_lock);
2357
2358 /**
2359  * tipc_ref_table_init - create reference table for sockets
2360  */
2361 int tipc_sk_ref_table_init(u32 req_sz, u32 start)
2362 {
2363         struct reference *table;
2364         u32 actual_sz;
2365
2366         /* account for unused entry, then round up size to a power of 2 */
2367
2368         req_sz++;
2369         for (actual_sz = 16; actual_sz < req_sz; actual_sz <<= 1) {
2370                 /* do nothing */
2371         };
2372
2373         /* allocate table & mark all entries as uninitialized */
2374         table = vzalloc(actual_sz * sizeof(struct reference));
2375         if (table == NULL)
2376                 return -ENOMEM;
2377
2378         tipc_ref_table.entries = table;
2379         tipc_ref_table.capacity = req_sz;
2380         tipc_ref_table.init_point = 1;
2381         tipc_ref_table.first_free = 0;
2382         tipc_ref_table.last_free = 0;
2383         tipc_ref_table.index_mask = actual_sz - 1;
2384         tipc_ref_table.start_mask = start & ~tipc_ref_table.index_mask;
2385
2386         return 0;
2387 }
2388
2389 /**
2390  * tipc_ref_table_stop - destroy reference table for sockets
2391  */
2392 void tipc_sk_ref_table_stop(void)
2393 {
2394         if (!tipc_ref_table.entries)
2395                 return;
2396         vfree(tipc_ref_table.entries);
2397         tipc_ref_table.entries = NULL;
2398 }
2399
2400 /* tipc_ref_acquire - create reference to a socket
2401  *
2402  * Register an socket pointer in the reference table.
2403  * Returns a unique reference value that is used from then on to retrieve the
2404  * socket pointer, or to determine if the socket has been deregistered.
2405  */
2406 u32 tipc_sk_ref_acquire(struct tipc_sock *tsk)
2407 {
2408         u32 index;
2409         u32 index_mask;
2410         u32 next_plus_upper;
2411         u32 ref = 0;
2412         struct reference *entry;
2413
2414         if (unlikely(!tsk)) {
2415                 pr_err("Attempt to acquire ref. to non-existent obj\n");
2416                 return 0;
2417         }
2418         if (unlikely(!tipc_ref_table.entries)) {
2419                 pr_err("Ref. table not found in acquisition attempt\n");
2420                 return 0;
2421         }
2422
2423         /* Take a free entry, if available; otherwise initialize a new one */
2424         write_lock_bh(&ref_table_lock);
2425         index = tipc_ref_table.first_free;
2426         entry = &tipc_ref_table.entries[index];
2427
2428         if (likely(index)) {
2429                 index = tipc_ref_table.first_free;
2430                 entry = &tipc_ref_table.entries[index];
2431                 index_mask = tipc_ref_table.index_mask;
2432                 next_plus_upper = entry->ref;
2433                 tipc_ref_table.first_free = next_plus_upper & index_mask;
2434                 ref = (next_plus_upper & ~index_mask) + index;
2435                 entry->tsk = tsk;
2436         } else if (tipc_ref_table.init_point < tipc_ref_table.capacity) {
2437                 index = tipc_ref_table.init_point++;
2438                 entry = &tipc_ref_table.entries[index];
2439                 ref = tipc_ref_table.start_mask + index;
2440         }
2441
2442         if (ref) {
2443                 entry->ref = ref;
2444                 entry->tsk = tsk;
2445         }
2446         write_unlock_bh(&ref_table_lock);
2447         return ref;
2448 }
2449
2450 /* tipc_sk_ref_discard - invalidate reference to an socket
2451  *
2452  * Disallow future references to an socket and free up the entry for re-use.
2453  */
2454 void tipc_sk_ref_discard(u32 ref)
2455 {
2456         struct reference *entry;
2457         u32 index;
2458         u32 index_mask;
2459
2460         if (unlikely(!tipc_ref_table.entries)) {
2461                 pr_err("Ref. table not found during discard attempt\n");
2462                 return;
2463         }
2464
2465         index_mask = tipc_ref_table.index_mask;
2466         index = ref & index_mask;
2467         entry = &tipc_ref_table.entries[index];
2468
2469         write_lock_bh(&ref_table_lock);
2470
2471         if (unlikely(!entry->tsk)) {
2472                 pr_err("Attempt to discard ref. to non-existent socket\n");
2473                 goto exit;
2474         }
2475         if (unlikely(entry->ref != ref)) {
2476                 pr_err("Attempt to discard non-existent reference\n");
2477                 goto exit;
2478         }
2479
2480         /* Mark entry as unused; increment instance part of entry's
2481          *   reference to invalidate any subsequent references
2482          */
2483
2484         entry->tsk = NULL;
2485         entry->ref = (ref & ~index_mask) + (index_mask + 1);
2486
2487         /* Append entry to free entry list */
2488         if (unlikely(tipc_ref_table.first_free == 0))
2489                 tipc_ref_table.first_free = index;
2490         else
2491                 tipc_ref_table.entries[tipc_ref_table.last_free].ref |= index;
2492         tipc_ref_table.last_free = index;
2493 exit:
2494         write_unlock_bh(&ref_table_lock);
2495 }
2496
2497 /* tipc_sk_get - find referenced socket and return pointer to it
2498  */
2499 struct tipc_sock *tipc_sk_get(u32 ref)
2500 {
2501         struct reference *entry;
2502         struct tipc_sock *tsk;
2503
2504         if (unlikely(!tipc_ref_table.entries))
2505                 return NULL;
2506         read_lock_bh(&ref_table_lock);
2507         entry = &tipc_ref_table.entries[ref & tipc_ref_table.index_mask];
2508         tsk = entry->tsk;
2509         if (likely(tsk && (entry->ref == ref)))
2510                 sock_hold(&tsk->sk);
2511         else
2512                 tsk = NULL;
2513         read_unlock_bh(&ref_table_lock);
2514         return tsk;
2515 }
2516
2517 /* tipc_sk_get_next - lock & return next socket after referenced one
2518 */
2519 struct tipc_sock *tipc_sk_get_next(u32 *ref)
2520 {
2521         struct reference *entry;
2522         struct tipc_sock *tsk = NULL;
2523         uint index = *ref & tipc_ref_table.index_mask;
2524
2525         read_lock_bh(&ref_table_lock);
2526         while (++index < tipc_ref_table.capacity) {
2527                 entry = &tipc_ref_table.entries[index];
2528                 if (!entry->tsk)
2529                         continue;
2530                 tsk = entry->tsk;
2531                 sock_hold(&tsk->sk);
2532                 *ref = entry->ref;
2533                 break;
2534         }
2535         read_unlock_bh(&ref_table_lock);
2536         return tsk;
2537 }
2538
2539 static void tipc_sk_put(struct tipc_sock *tsk)
2540 {
2541         sock_put(&tsk->sk);
2542 }
2543
2544 /**
2545  * tipc_setsockopt - set socket option
2546  * @sock: socket structure
2547  * @lvl: option level
2548  * @opt: option identifier
2549  * @ov: pointer to new option value
2550  * @ol: length of option value
2551  *
2552  * For stream sockets only, accepts and ignores all IPPROTO_TCP options
2553  * (to ease compatibility).
2554  *
2555  * Returns 0 on success, errno otherwise
2556  */
2557 static int tipc_setsockopt(struct socket *sock, int lvl, int opt,
2558                            char __user *ov, unsigned int ol)
2559 {
2560         struct sock *sk = sock->sk;
2561         struct tipc_sock *tsk = tipc_sk(sk);
2562         u32 value;
2563         int res;
2564
2565         if ((lvl == IPPROTO_TCP) && (sock->type == SOCK_STREAM))
2566                 return 0;
2567         if (lvl != SOL_TIPC)
2568                 return -ENOPROTOOPT;
2569         if (ol < sizeof(value))
2570                 return -EINVAL;
2571         res = get_user(value, (u32 __user *)ov);
2572         if (res)
2573                 return res;
2574
2575         lock_sock(sk);
2576
2577         switch (opt) {
2578         case TIPC_IMPORTANCE:
2579                 res = tsk_set_importance(tsk, value);
2580                 break;
2581         case TIPC_SRC_DROPPABLE:
2582                 if (sock->type != SOCK_STREAM)
2583                         tsk_set_unreliable(tsk, value);
2584                 else
2585                         res = -ENOPROTOOPT;
2586                 break;
2587         case TIPC_DEST_DROPPABLE:
2588                 tsk_set_unreturnable(tsk, value);
2589                 break;
2590         case TIPC_CONN_TIMEOUT:
2591                 tipc_sk(sk)->conn_timeout = value;
2592                 /* no need to set "res", since already 0 at this point */
2593                 break;
2594         default:
2595                 res = -EINVAL;
2596         }
2597
2598         release_sock(sk);
2599
2600         return res;
2601 }
2602
2603 /**
2604  * tipc_getsockopt - get socket option
2605  * @sock: socket structure
2606  * @lvl: option level
2607  * @opt: option identifier
2608  * @ov: receptacle for option value
2609  * @ol: receptacle for length of option value
2610  *
2611  * For stream sockets only, returns 0 length result for all IPPROTO_TCP options
2612  * (to ease compatibility).
2613  *
2614  * Returns 0 on success, errno otherwise
2615  */
2616 static int tipc_getsockopt(struct socket *sock, int lvl, int opt,
2617                            char __user *ov, int __user *ol)
2618 {
2619         struct sock *sk = sock->sk;
2620         struct tipc_sock *tsk = tipc_sk(sk);
2621         int len;
2622         u32 value;
2623         int res;
2624
2625         if ((lvl == IPPROTO_TCP) && (sock->type == SOCK_STREAM))
2626                 return put_user(0, ol);
2627         if (lvl != SOL_TIPC)
2628                 return -ENOPROTOOPT;
2629         res = get_user(len, ol);
2630         if (res)
2631                 return res;
2632
2633         lock_sock(sk);
2634
2635         switch (opt) {
2636         case TIPC_IMPORTANCE:
2637                 value = tsk_importance(tsk);
2638                 break;
2639         case TIPC_SRC_DROPPABLE:
2640                 value = tsk_unreliable(tsk);
2641                 break;
2642         case TIPC_DEST_DROPPABLE:
2643                 value = tsk_unreturnable(tsk);
2644                 break;
2645         case TIPC_CONN_TIMEOUT:
2646                 value = tsk->conn_timeout;
2647                 /* no need to set "res", since already 0 at this point */
2648                 break;
2649         case TIPC_NODE_RECVQ_DEPTH:
2650                 value = 0; /* was tipc_queue_size, now obsolete */
2651                 break;
2652         case TIPC_SOCK_RECVQ_DEPTH:
2653                 value = skb_queue_len(&sk->sk_receive_queue);
2654                 break;
2655         default:
2656                 res = -EINVAL;
2657         }
2658
2659         release_sock(sk);
2660
2661         if (res)
2662                 return res;     /* "get" failed */
2663
2664         if (len < sizeof(value))
2665                 return -EINVAL;
2666
2667         if (copy_to_user(ov, &value, sizeof(value)))
2668                 return -EFAULT;
2669
2670         return put_user(sizeof(value), ol);
2671 }
2672
2673 static int tipc_ioctl(struct socket *sk, unsigned int cmd, unsigned long arg)
2674 {
2675         struct tipc_sioc_ln_req lnr;
2676         void __user *argp = (void __user *)arg;
2677
2678         switch (cmd) {
2679         case SIOCGETLINKNAME:
2680                 if (copy_from_user(&lnr, argp, sizeof(lnr)))
2681                         return -EFAULT;
2682                 if (!tipc_node_get_linkname(lnr.bearer_id & 0xffff, lnr.peer,
2683                                             lnr.linkname, TIPC_MAX_LINK_NAME)) {
2684                         if (copy_to_user(argp, &lnr, sizeof(lnr)))
2685                                 return -EFAULT;
2686                         return 0;
2687                 }
2688                 return -EADDRNOTAVAIL;
2689         default:
2690                 return -ENOIOCTLCMD;
2691         }
2692 }
2693
2694 /* Protocol switches for the various types of TIPC sockets */
2695
2696 static const struct proto_ops msg_ops = {
2697         .owner          = THIS_MODULE,
2698         .family         = AF_TIPC,
2699         .release        = tipc_release,
2700         .bind           = tipc_bind,
2701         .connect        = tipc_connect,
2702         .socketpair     = sock_no_socketpair,
2703         .accept         = sock_no_accept,
2704         .getname        = tipc_getname,
2705         .poll           = tipc_poll,
2706         .ioctl          = tipc_ioctl,
2707         .listen         = sock_no_listen,
2708         .shutdown       = tipc_shutdown,
2709         .setsockopt     = tipc_setsockopt,
2710         .getsockopt     = tipc_getsockopt,
2711         .sendmsg        = tipc_sendmsg,
2712         .recvmsg        = tipc_recvmsg,
2713         .mmap           = sock_no_mmap,
2714         .sendpage       = sock_no_sendpage
2715 };
2716
2717 static const struct proto_ops packet_ops = {
2718         .owner          = THIS_MODULE,
2719         .family         = AF_TIPC,
2720         .release        = tipc_release,
2721         .bind           = tipc_bind,
2722         .connect        = tipc_connect,
2723         .socketpair     = sock_no_socketpair,
2724         .accept         = tipc_accept,
2725         .getname        = tipc_getname,
2726         .poll           = tipc_poll,
2727         .ioctl          = tipc_ioctl,
2728         .listen         = tipc_listen,
2729         .shutdown       = tipc_shutdown,
2730         .setsockopt     = tipc_setsockopt,
2731         .getsockopt     = tipc_getsockopt,
2732         .sendmsg        = tipc_send_packet,
2733         .recvmsg        = tipc_recvmsg,
2734         .mmap           = sock_no_mmap,
2735         .sendpage       = sock_no_sendpage
2736 };
2737
2738 static const struct proto_ops stream_ops = {
2739         .owner          = THIS_MODULE,
2740         .family         = AF_TIPC,
2741         .release        = tipc_release,
2742         .bind           = tipc_bind,
2743         .connect        = tipc_connect,
2744         .socketpair     = sock_no_socketpair,
2745         .accept         = tipc_accept,
2746         .getname        = tipc_getname,
2747         .poll           = tipc_poll,
2748         .ioctl          = tipc_ioctl,
2749         .listen         = tipc_listen,
2750         .shutdown       = tipc_shutdown,
2751         .setsockopt     = tipc_setsockopt,
2752         .getsockopt     = tipc_getsockopt,
2753         .sendmsg        = tipc_send_stream,
2754         .recvmsg        = tipc_recv_stream,
2755         .mmap           = sock_no_mmap,
2756         .sendpage       = sock_no_sendpage
2757 };
2758
2759 static const struct net_proto_family tipc_family_ops = {
2760         .owner          = THIS_MODULE,
2761         .family         = AF_TIPC,
2762         .create         = tipc_sk_create
2763 };
2764
2765 static struct proto tipc_proto = {
2766         .name           = "TIPC",
2767         .owner          = THIS_MODULE,
2768         .obj_size       = sizeof(struct tipc_sock),
2769         .sysctl_rmem    = sysctl_tipc_rmem
2770 };
2771
2772 static struct proto tipc_proto_kern = {
2773         .name           = "TIPC",
2774         .obj_size       = sizeof(struct tipc_sock),
2775         .sysctl_rmem    = sysctl_tipc_rmem
2776 };
2777
2778 /**
2779  * tipc_socket_init - initialize TIPC socket interface
2780  *
2781  * Returns 0 on success, errno otherwise
2782  */
2783 int tipc_socket_init(void)
2784 {
2785         int res;
2786
2787         res = proto_register(&tipc_proto, 1);
2788         if (res) {
2789                 pr_err("Failed to register TIPC protocol type\n");
2790                 goto out;
2791         }
2792
2793         res = sock_register(&tipc_family_ops);
2794         if (res) {
2795                 pr_err("Failed to register TIPC socket type\n");
2796                 proto_unregister(&tipc_proto);
2797                 goto out;
2798         }
2799  out:
2800         return res;
2801 }
2802
2803 /**
2804  * tipc_socket_stop - stop TIPC socket interface
2805  */
2806 void tipc_socket_stop(void)
2807 {
2808         sock_unregister(tipc_family_ops.family);
2809         proto_unregister(&tipc_proto);
2810 }
2811
2812 /* Caller should hold socket lock for the passed tipc socket. */
2813 static int __tipc_nl_add_sk_con(struct sk_buff *skb, struct tipc_sock *tsk)
2814 {
2815         u32 peer_node;
2816         u32 peer_port;
2817         struct nlattr *nest;
2818
2819         peer_node = tsk_peer_node(tsk);
2820         peer_port = tsk_peer_port(tsk);
2821
2822         nest = nla_nest_start(skb, TIPC_NLA_SOCK_CON);
2823
2824         if (nla_put_u32(skb, TIPC_NLA_CON_NODE, peer_node))
2825                 goto msg_full;
2826         if (nla_put_u32(skb, TIPC_NLA_CON_SOCK, peer_port))
2827                 goto msg_full;
2828
2829         if (tsk->conn_type != 0) {
2830                 if (nla_put_flag(skb, TIPC_NLA_CON_FLAG))
2831                         goto msg_full;
2832                 if (nla_put_u32(skb, TIPC_NLA_CON_TYPE, tsk->conn_type))
2833                         goto msg_full;
2834                 if (nla_put_u32(skb, TIPC_NLA_CON_INST, tsk->conn_instance))
2835                         goto msg_full;
2836         }
2837         nla_nest_end(skb, nest);
2838
2839         return 0;
2840
2841 msg_full:
2842         nla_nest_cancel(skb, nest);
2843
2844         return -EMSGSIZE;
2845 }
2846
2847 /* Caller should hold socket lock for the passed tipc socket. */
2848 static int __tipc_nl_add_sk(struct sk_buff *skb, struct netlink_callback *cb,
2849                             struct tipc_sock *tsk)
2850 {
2851         int err;
2852         void *hdr;
2853         struct nlattr *attrs;
2854
2855         hdr = genlmsg_put(skb, NETLINK_CB(cb->skb).portid, cb->nlh->nlmsg_seq,
2856                           &tipc_genl_v2_family, NLM_F_MULTI, TIPC_NL_SOCK_GET);
2857         if (!hdr)
2858                 goto msg_cancel;
2859
2860         attrs = nla_nest_start(skb, TIPC_NLA_SOCK);
2861         if (!attrs)
2862                 goto genlmsg_cancel;
2863         if (nla_put_u32(skb, TIPC_NLA_SOCK_REF, tsk->ref))
2864                 goto attr_msg_cancel;
2865         if (nla_put_u32(skb, TIPC_NLA_SOCK_ADDR, tipc_own_addr))
2866                 goto attr_msg_cancel;
2867
2868         if (tsk->connected) {
2869                 err = __tipc_nl_add_sk_con(skb, tsk);
2870                 if (err)
2871                         goto attr_msg_cancel;
2872         } else if (!list_empty(&tsk->publications)) {
2873                 if (nla_put_flag(skb, TIPC_NLA_SOCK_HAS_PUBL))
2874                         goto attr_msg_cancel;
2875         }
2876         nla_nest_end(skb, attrs);
2877         genlmsg_end(skb, hdr);
2878
2879         return 0;
2880
2881 attr_msg_cancel:
2882         nla_nest_cancel(skb, attrs);
2883 genlmsg_cancel:
2884         genlmsg_cancel(skb, hdr);
2885 msg_cancel:
2886         return -EMSGSIZE;
2887 }
2888
2889 int tipc_nl_sk_dump(struct sk_buff *skb, struct netlink_callback *cb)
2890 {
2891         int err;
2892         struct tipc_sock *tsk;
2893         u32 prev_ref = cb->args[0];
2894         u32 ref = prev_ref;
2895
2896         tsk = tipc_sk_get_next(&ref);
2897         for (; tsk; tsk = tipc_sk_get_next(&ref)) {
2898                 lock_sock(&tsk->sk);
2899                 err = __tipc_nl_add_sk(skb, cb, tsk);
2900                 release_sock(&tsk->sk);
2901                 tipc_sk_put(tsk);
2902                 if (err)
2903                         break;
2904
2905                 prev_ref = ref;
2906         }
2907
2908         cb->args[0] = prev_ref;
2909
2910         return skb->len;
2911 }
2912
2913 /* Caller should hold socket lock for the passed tipc socket. */
2914 static int __tipc_nl_add_sk_publ(struct sk_buff *skb,
2915                                  struct netlink_callback *cb,
2916                                  struct publication *publ)
2917 {
2918         void *hdr;
2919         struct nlattr *attrs;
2920
2921         hdr = genlmsg_put(skb, NETLINK_CB(cb->skb).portid, cb->nlh->nlmsg_seq,
2922                           &tipc_genl_v2_family, NLM_F_MULTI, TIPC_NL_PUBL_GET);
2923         if (!hdr)
2924                 goto msg_cancel;
2925
2926         attrs = nla_nest_start(skb, TIPC_NLA_PUBL);
2927         if (!attrs)
2928                 goto genlmsg_cancel;
2929
2930         if (nla_put_u32(skb, TIPC_NLA_PUBL_KEY, publ->key))
2931                 goto attr_msg_cancel;
2932         if (nla_put_u32(skb, TIPC_NLA_PUBL_TYPE, publ->type))
2933                 goto attr_msg_cancel;
2934         if (nla_put_u32(skb, TIPC_NLA_PUBL_LOWER, publ->lower))
2935                 goto attr_msg_cancel;
2936         if (nla_put_u32(skb, TIPC_NLA_PUBL_UPPER, publ->upper))
2937                 goto attr_msg_cancel;
2938
2939         nla_nest_end(skb, attrs);
2940         genlmsg_end(skb, hdr);
2941
2942         return 0;
2943
2944 attr_msg_cancel:
2945         nla_nest_cancel(skb, attrs);
2946 genlmsg_cancel:
2947         genlmsg_cancel(skb, hdr);
2948 msg_cancel:
2949         return -EMSGSIZE;
2950 }
2951
2952 /* Caller should hold socket lock for the passed tipc socket. */
2953 static int __tipc_nl_list_sk_publ(struct sk_buff *skb,
2954                                   struct netlink_callback *cb,
2955                                   struct tipc_sock *tsk, u32 *last_publ)
2956 {
2957         int err;
2958         struct publication *p;
2959
2960         if (*last_publ) {
2961                 list_for_each_entry(p, &tsk->publications, pport_list) {
2962                         if (p->key == *last_publ)
2963                                 break;
2964                 }
2965                 if (p->key != *last_publ) {
2966                         /* We never set seq or call nl_dump_check_consistent()
2967                          * this means that setting prev_seq here will cause the
2968                          * consistence check to fail in the netlink callback
2969                          * handler. Resulting in the last NLMSG_DONE message
2970                          * having the NLM_F_DUMP_INTR flag set.
2971                          */
2972                         cb->prev_seq = 1;
2973                         *last_publ = 0;
2974                         return -EPIPE;
2975                 }
2976         } else {
2977                 p = list_first_entry(&tsk->publications, struct publication,
2978                                      pport_list);
2979         }
2980
2981         list_for_each_entry_from(p, &tsk->publications, pport_list) {
2982                 err = __tipc_nl_add_sk_publ(skb, cb, p);
2983                 if (err) {
2984                         *last_publ = p->key;
2985                         return err;
2986                 }
2987         }
2988         *last_publ = 0;
2989
2990         return 0;
2991 }
2992
2993 int tipc_nl_publ_dump(struct sk_buff *skb, struct netlink_callback *cb)
2994 {
2995         int err;
2996         u32 tsk_ref = cb->args[0];
2997         u32 last_publ = cb->args[1];
2998         u32 done = cb->args[2];
2999         struct tipc_sock *tsk;
3000
3001         if (!tsk_ref) {
3002                 struct nlattr **attrs;
3003                 struct nlattr *sock[TIPC_NLA_SOCK_MAX + 1];
3004
3005                 err = tipc_nlmsg_parse(cb->nlh, &attrs);
3006                 if (err)
3007                         return err;
3008
3009                 err = nla_parse_nested(sock, TIPC_NLA_SOCK_MAX,
3010                                        attrs[TIPC_NLA_SOCK],
3011                                        tipc_nl_sock_policy);
3012                 if (err)
3013                         return err;
3014
3015                 if (!sock[TIPC_NLA_SOCK_REF])
3016                         return -EINVAL;
3017
3018                 tsk_ref = nla_get_u32(sock[TIPC_NLA_SOCK_REF]);
3019         }
3020
3021         if (done)
3022                 return 0;
3023
3024         tsk = tipc_sk_get(tsk_ref);
3025         if (!tsk)
3026                 return -EINVAL;
3027
3028         lock_sock(&tsk->sk);
3029         err = __tipc_nl_list_sk_publ(skb, cb, tsk, &last_publ);
3030         if (!err)
3031                 done = 1;
3032         release_sock(&tsk->sk);
3033         tipc_sk_put(tsk);
3034
3035         cb->args[0] = tsk_ref;
3036         cb->args[1] = last_publ;
3037         cb->args[2] = done;
3038
3039         return skb->len;
3040 }