Home | History | Annotate | Line # | Download | only in netinet
ip_encap.c revision 1.13.2.3
      1       1.7   itojun /*	$KAME: ip_encap.c,v 1.73 2001/10/02 08:30:58 itojun Exp $	*/
      2       1.1   itojun 
      3       1.1   itojun /*
      4       1.1   itojun  * Copyright (C) 1995, 1996, 1997, and 1998 WIDE Project.
      5       1.1   itojun  * All rights reserved.
      6       1.1   itojun  *
      7       1.1   itojun  * Redistribution and use in source and binary forms, with or without
      8       1.1   itojun  * modification, are permitted provided that the following conditions
      9       1.1   itojun  * are met:
     10       1.1   itojun  * 1. Redistributions of source code must retain the above copyright
     11       1.1   itojun  *    notice, this list of conditions and the following disclaimer.
     12       1.1   itojun  * 2. Redistributions in binary form must reproduce the above copyright
     13       1.1   itojun  *    notice, this list of conditions and the following disclaimer in the
     14       1.1   itojun  *    documentation and/or other materials provided with the distribution.
     15       1.1   itojun  * 3. Neither the name of the project nor the names of its contributors
     16       1.1   itojun  *    may be used to endorse or promote products derived from this software
     17       1.1   itojun  *    without specific prior written permission.
     18       1.1   itojun  *
     19       1.1   itojun  * THIS SOFTWARE IS PROVIDED BY THE PROJECT AND CONTRIBUTORS ``AS IS'' AND
     20       1.1   itojun  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
     21       1.1   itojun  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
     22       1.1   itojun  * ARE DISCLAIMED.  IN NO EVENT SHALL THE PROJECT OR CONTRIBUTORS BE LIABLE
     23       1.1   itojun  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
     24       1.1   itojun  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
     25       1.1   itojun  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
     26       1.1   itojun  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
     27       1.1   itojun  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
     28       1.1   itojun  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
     29       1.1   itojun  * SUCH DAMAGE.
     30       1.1   itojun  */
     31       1.1   itojun /*
     32       1.1   itojun  * My grandfather said that there's a devil inside tunnelling technology...
     33       1.1   itojun  *
     34       1.1   itojun  * We have surprisingly many protocols that want packets with IP protocol
     35       1.1   itojun  * #4 or #41.  Here's a list of protocols that want protocol #41:
     36       1.1   itojun  *	RFC1933 configured tunnel
     37       1.1   itojun  *	RFC1933 automatic tunnel
     38       1.1   itojun  *	RFC2401 IPsec tunnel
     39       1.1   itojun  *	RFC2473 IPv6 generic packet tunnelling
     40       1.1   itojun  *	RFC2529 6over4 tunnel
     41       1.7   itojun  *	RFC3056 6to4 tunnel
     42       1.7   itojun  *	isatap tunnel
     43       1.1   itojun  *	mobile-ip6 (uses RFC2473)
     44       1.1   itojun  * Here's a list of protocol that want protocol #4:
     45       1.1   itojun  *	RFC1853 IPv4-in-IPv4 tunnelling
     46       1.1   itojun  *	RFC2003 IPv4 encapsulation within IPv4
     47       1.1   itojun  *	RFC2344 reverse tunnelling for mobile-ip4
     48       1.1   itojun  *	RFC2401 IPsec tunnel
     49       1.1   itojun  * Well, what can I say.  They impose different en/decapsulation mechanism
     50       1.1   itojun  * from each other, so they need separate protocol handler.  The only one
     51       1.1   itojun  * we can easily determine by protocol # is IPsec, which always has
     52       1.1   itojun  * AH/ESP/IPComp header right after outer IP header.
     53       1.1   itojun  *
     54       1.1   itojun  * So, clearly good old protosw does not work for protocol #4 and #41.
     55       1.1   itojun  * The code will let you match protocol via src/dst address pair.
     56       1.1   itojun  */
     57       1.1   itojun /* XXX is M_NETADDR correct? */
     58       1.6    lukem 
     59       1.7   itojun /*
     60       1.7   itojun  * With USE_RADIX the code will use radix table for tunnel lookup, for
     61       1.7   itojun  * tunnels registered with encap_attach() with a addr/mask pair.
     62       1.7   itojun  * Faster on machines with thousands of tunnel registerations (= interfaces).
     63       1.7   itojun  *
     64       1.7   itojun  * The code assumes that radix table code can handle non-continuous netmask,
     65       1.7   itojun  * as it will pass radix table memory region with (src + dst) sockaddr pair.
     66       1.7   itojun  *
     67       1.7   itojun  * FreeBSD is excluded here as they make max_keylen a static variable, and
     68       1.7   itojun  * thus forbid definition of radix table other than proper domains.
     69       1.7   itojun  */
     70       1.7   itojun #define USE_RADIX
     71       1.7   itojun 
     72       1.6    lukem #include <sys/cdefs.h>
     73  1.13.2.3    skrll __KERNEL_RCSID(0, "$NetBSD: ip_encap.c,v 1.13.2.3 2004/09/18 14:54:54 skrll Exp $");
     74       1.1   itojun 
     75       1.4   itojun #include "opt_mrouting.h"
     76       1.4   itojun #include "opt_inet.h"
     77       1.1   itojun 
     78       1.1   itojun #include <sys/param.h>
     79       1.1   itojun #include <sys/systm.h>
     80       1.1   itojun #include <sys/socket.h>
     81       1.1   itojun #include <sys/sockio.h>
     82       1.1   itojun #include <sys/mbuf.h>
     83       1.1   itojun #include <sys/errno.h>
     84       1.1   itojun #include <sys/protosw.h>
     85       1.4   itojun #include <sys/queue.h>
     86       1.1   itojun 
     87       1.1   itojun #include <net/if.h>
     88       1.1   itojun #include <net/route.h>
     89       1.1   itojun 
     90       1.1   itojun #include <netinet/in.h>
     91       1.1   itojun #include <netinet/in_systm.h>
     92       1.1   itojun #include <netinet/ip.h>
     93       1.1   itojun #include <netinet/ip_var.h>
     94       1.1   itojun #include <netinet/ip_encap.h>
     95       1.1   itojun #ifdef MROUTING
     96       1.1   itojun #include <netinet/ip_mroute.h>
     97       1.1   itojun #endif /* MROUTING */
     98       1.1   itojun 
     99       1.1   itojun #ifdef INET6
    100       1.1   itojun #include <netinet/ip6.h>
    101       1.1   itojun #include <netinet6/ip6_var.h>
    102       1.1   itojun #include <netinet6/ip6protosw.h>
    103       1.7   itojun #include <netinet6/in6_var.h>
    104       1.7   itojun #include <netinet6/in6_pcb.h>
    105       1.7   itojun #include <netinet/icmp6.h>
    106       1.1   itojun #endif
    107       1.1   itojun 
    108       1.1   itojun #include <machine/stdarg.h>
    109       1.1   itojun 
    110       1.1   itojun #include <net/net_osdep.h>
    111       1.1   itojun 
    112       1.7   itojun /* to lookup a pair of address using radix tree */
    113       1.7   itojun struct sockaddr_pack {
    114       1.7   itojun 	u_int8_t sp_len;
    115       1.7   itojun 	u_int8_t sp_family;	/* not really used */
    116       1.7   itojun 	/* followed by variable-length data */
    117      1.10   itojun };
    118       1.7   itojun 
    119       1.7   itojun struct pack4 {
    120       1.7   itojun 	struct sockaddr_pack p;
    121       1.7   itojun 	struct sockaddr_in mine;
    122       1.7   itojun 	struct sockaddr_in yours;
    123      1.10   itojun };
    124       1.7   itojun struct pack6 {
    125       1.7   itojun 	struct sockaddr_pack p;
    126       1.7   itojun 	struct sockaddr_in6 mine;
    127       1.7   itojun 	struct sockaddr_in6 yours;
    128      1.10   itojun };
    129       1.7   itojun 
    130       1.7   itojun enum direction { INBOUND, OUTBOUND };
    131       1.7   itojun 
    132       1.7   itojun #ifdef INET
    133       1.7   itojun static struct encaptab *encap4_lookup __P((struct mbuf *, int, int,
    134       1.7   itojun 	enum direction));
    135       1.7   itojun #endif
    136       1.7   itojun #ifdef INET6
    137       1.7   itojun static struct encaptab *encap6_lookup __P((struct mbuf *, int, int,
    138       1.7   itojun 	enum direction));
    139       1.7   itojun #endif
    140       1.7   itojun static int encap_add __P((struct encaptab *));
    141       1.7   itojun static int encap_remove __P((struct encaptab *));
    142       1.7   itojun static int encap_afcheck __P((int, const struct sockaddr *, const struct sockaddr *));
    143       1.7   itojun #ifdef USE_RADIX
    144       1.7   itojun static struct radix_node_head *encap_rnh __P((int));
    145       1.7   itojun static int mask_matchlen __P((const struct sockaddr *));
    146       1.7   itojun #endif
    147       1.7   itojun #ifndef USE_RADIX
    148       1.1   itojun static int mask_match __P((const struct encaptab *, const struct sockaddr *,
    149       1.1   itojun 		const struct sockaddr *));
    150       1.7   itojun #endif
    151       1.1   itojun static void encap_fillarg __P((struct mbuf *, const struct encaptab *));
    152       1.1   itojun 
    153       1.2  thorpej LIST_HEAD(, encaptab) encaptab = LIST_HEAD_INITIALIZER(&encaptab);
    154       1.1   itojun 
    155       1.7   itojun #ifdef USE_RADIX
    156       1.7   itojun extern int max_keylen;	/* radix.c */
    157       1.7   itojun struct radix_node_head *encap_head[2];	/* 0 for AF_INET, 1 for AF_INET6 */
    158       1.7   itojun #endif
    159       1.7   itojun 
    160       1.1   itojun void
    161  1.13.2.2    skrll encap_setkeylen()
    162  1.13.2.2    skrll {
    163  1.13.2.2    skrll #ifdef USE_RADIX
    164  1.13.2.2    skrll 	if (sizeof(struct pack4) > max_keylen)
    165  1.13.2.2    skrll 		max_keylen = sizeof(struct pack4);
    166  1.13.2.2    skrll #ifdef INET6
    167  1.13.2.2    skrll 	if (sizeof(struct pack6) > max_keylen)
    168  1.13.2.2    skrll 		max_keylen = sizeof(struct pack6);
    169  1.13.2.2    skrll #endif
    170  1.13.2.2    skrll #endif
    171  1.13.2.2    skrll }
    172  1.13.2.2    skrll 
    173  1.13.2.2    skrll void
    174       1.1   itojun encap_init()
    175       1.1   itojun {
    176       1.7   itojun 	static int initialized = 0;
    177       1.7   itojun 
    178       1.7   itojun 	if (initialized)
    179       1.7   itojun 		return;
    180       1.7   itojun 	initialized++;
    181       1.1   itojun #if 0
    182       1.1   itojun 	/*
    183       1.1   itojun 	 * we cannot use LIST_INIT() here, since drivers may want to call
    184       1.4   itojun 	 * encap_attach(), on driver attach.  encap_init() will be called
    185       1.1   itojun 	 * on AF_INET{,6} initialization, which happens after driver
    186       1.1   itojun 	 * initialization - using LIST_INIT() here can nuke encap_attach()
    187       1.1   itojun 	 * from drivers.
    188       1.1   itojun 	 */
    189       1.1   itojun 	LIST_INIT(&encaptab);
    190       1.1   itojun #endif
    191       1.7   itojun 
    192       1.7   itojun #ifdef USE_RADIX
    193       1.7   itojun 	/*
    194       1.9   itojun 	 * initialize radix lookup table.
    195       1.7   itojun 	 * max_keylen initialization should happen before the call to rn_init().
    196       1.7   itojun 	 */
    197      1.11  thorpej 	rn_inithead((void *)&encap_head[0], sizeof(struct sockaddr_pack) << 3);
    198       1.7   itojun #ifdef INET6
    199      1.11  thorpej 	rn_inithead((void *)&encap_head[1], sizeof(struct sockaddr_pack) << 3);
    200       1.7   itojun #endif
    201       1.7   itojun #endif
    202       1.1   itojun }
    203       1.1   itojun 
    204       1.4   itojun #ifdef INET
    205       1.7   itojun static struct encaptab *
    206       1.7   itojun encap4_lookup(m, off, proto, dir)
    207       1.1   itojun 	struct mbuf *m;
    208       1.7   itojun 	int off;
    209       1.7   itojun 	int proto;
    210       1.7   itojun 	enum direction dir;
    211       1.1   itojun {
    212       1.1   itojun 	struct ip *ip;
    213       1.7   itojun 	struct pack4 pack;
    214       1.1   itojun 	struct encaptab *ep, *match;
    215       1.1   itojun 	int prio, matchprio;
    216       1.7   itojun #ifdef USE_RADIX
    217       1.7   itojun 	struct radix_node_head *rnh = encap_rnh(AF_INET);
    218       1.7   itojun 	struct radix_node *rn;
    219       1.7   itojun #endif
    220       1.1   itojun 
    221       1.7   itojun #ifdef DIAGNOSTIC
    222       1.7   itojun 	if (m->m_len < sizeof(*ip))
    223       1.7   itojun 		panic("encap4_lookup");
    224       1.7   itojun #endif
    225       1.1   itojun 	ip = mtod(m, struct ip *);
    226       1.1   itojun 
    227       1.7   itojun 	bzero(&pack, sizeof(pack));
    228       1.7   itojun 	pack.p.sp_len = sizeof(pack);
    229       1.7   itojun 	pack.mine.sin_family = pack.yours.sin_family = AF_INET;
    230       1.7   itojun 	pack.mine.sin_len = pack.yours.sin_len = sizeof(struct sockaddr_in);
    231       1.7   itojun 	if (dir == INBOUND) {
    232       1.7   itojun 		pack.mine.sin_addr = ip->ip_dst;
    233       1.7   itojun 		pack.yours.sin_addr = ip->ip_src;
    234       1.7   itojun 	} else {
    235       1.7   itojun 		pack.mine.sin_addr = ip->ip_src;
    236       1.7   itojun 		pack.yours.sin_addr = ip->ip_dst;
    237       1.7   itojun 	}
    238       1.1   itojun 
    239       1.1   itojun 	match = NULL;
    240       1.1   itojun 	matchprio = 0;
    241       1.7   itojun 
    242       1.7   itojun #ifdef USE_RADIX
    243       1.7   itojun 	rn = rnh->rnh_matchaddr((caddr_t)&pack, rnh);
    244       1.7   itojun 	if (rn && (rn->rn_flags & RNF_ROOT) == 0) {
    245       1.7   itojun 		match = (struct encaptab *)rn;
    246       1.7   itojun 		matchprio = mask_matchlen(match->srcmask) +
    247       1.7   itojun 		    mask_matchlen(match->dstmask);
    248       1.7   itojun 	}
    249       1.7   itojun #endif
    250       1.7   itojun 
    251       1.1   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    252       1.1   itojun 		if (ep->af != AF_INET)
    253       1.1   itojun 			continue;
    254       1.1   itojun 		if (ep->proto >= 0 && ep->proto != proto)
    255       1.1   itojun 			continue;
    256       1.1   itojun 		if (ep->func)
    257       1.1   itojun 			prio = (*ep->func)(m, off, proto, ep->arg);
    258       1.1   itojun 		else {
    259       1.7   itojun #ifdef USE_RADIX
    260       1.7   itojun 			continue;
    261       1.7   itojun #else
    262       1.7   itojun 			prio = mask_match(ep, (struct sockaddr *)&pack.mine,
    263       1.7   itojun 			    (struct sockaddr *)&pack.yours);
    264       1.7   itojun #endif
    265       1.1   itojun 		}
    266       1.1   itojun 
    267       1.1   itojun 		/*
    268       1.1   itojun 		 * We prioritize the matches by using bit length of the
    269       1.1   itojun 		 * matches.  mask_match() and user-supplied matching function
    270       1.1   itojun 		 * should return the bit length of the matches (for example,
    271       1.1   itojun 		 * if both src/dst are matched for IPv4, 64 should be returned).
    272       1.1   itojun 		 * 0 or negative return value means "it did not match".
    273       1.1   itojun 		 *
    274       1.1   itojun 		 * The question is, since we have two "mask" portion, we
    275       1.1   itojun 		 * cannot really define total order between entries.
    276       1.1   itojun 		 * For example, which of these should be preferred?
    277       1.1   itojun 		 * mask_match() returns 48 (32 + 16) for both of them.
    278       1.1   itojun 		 *	src=3ffe::/16, dst=3ffe:501::/32
    279       1.1   itojun 		 *	src=3ffe:501::/32, dst=3ffe::/16
    280       1.1   itojun 		 *
    281       1.1   itojun 		 * We need to loop through all the possible candidates
    282       1.1   itojun 		 * to get the best match - the search takes O(n) for
    283       1.1   itojun 		 * n attachments (i.e. interfaces).
    284       1.7   itojun 		 *
    285       1.7   itojun 		 * For radix-based lookup, I guess source takes precedence.
    286       1.7   itojun 		 * See rn_{refines,lexobetter} for the correct answer.
    287       1.1   itojun 		 */
    288       1.1   itojun 		if (prio <= 0)
    289       1.1   itojun 			continue;
    290       1.1   itojun 		if (prio > matchprio) {
    291       1.1   itojun 			matchprio = prio;
    292       1.1   itojun 			match = ep;
    293       1.1   itojun 		}
    294       1.1   itojun 	}
    295       1.1   itojun 
    296       1.7   itojun 	return match;
    297       1.7   itojun #undef s
    298       1.7   itojun #undef d
    299       1.7   itojun }
    300       1.7   itojun 
    301       1.7   itojun void
    302       1.7   itojun encap4_input(struct mbuf *m, ...)
    303       1.7   itojun {
    304       1.7   itojun 	int off, proto;
    305       1.7   itojun 	va_list ap;
    306       1.7   itojun 	const struct protosw *psw;
    307       1.7   itojun 	struct encaptab *match;
    308       1.7   itojun 
    309       1.7   itojun 	va_start(ap, m);
    310       1.7   itojun 	off = va_arg(ap, int);
    311       1.7   itojun 	proto = va_arg(ap, int);
    312       1.7   itojun 	va_end(ap);
    313       1.7   itojun 
    314       1.7   itojun 	match = encap4_lookup(m, off, proto, INBOUND);
    315       1.7   itojun 
    316       1.1   itojun 	if (match) {
    317       1.1   itojun 		/* found a match, "match" has the best one */
    318       1.4   itojun 		psw = match->psw;
    319       1.4   itojun 		if (psw && psw->pr_input) {
    320       1.1   itojun 			encap_fillarg(m, match);
    321       1.4   itojun 			(*psw->pr_input)(m, off, proto);
    322       1.1   itojun 		} else
    323       1.1   itojun 			m_freem(m);
    324       1.1   itojun 		return;
    325       1.1   itojun 	}
    326       1.1   itojun 
    327       1.1   itojun 	/* last resort: inject to raw socket */
    328       1.1   itojun 	rip_input(m, off, proto);
    329       1.1   itojun }
    330       1.1   itojun #endif
    331       1.1   itojun 
    332       1.1   itojun #ifdef INET6
    333       1.7   itojun static struct encaptab *
    334       1.7   itojun encap6_lookup(m, off, proto, dir)
    335       1.7   itojun 	struct mbuf *m;
    336       1.7   itojun 	int off;
    337       1.1   itojun 	int proto;
    338       1.7   itojun 	enum direction dir;
    339       1.1   itojun {
    340       1.1   itojun 	struct ip6_hdr *ip6;
    341       1.7   itojun 	struct pack6 pack;
    342       1.7   itojun 	int prio, matchprio;
    343       1.1   itojun 	struct encaptab *ep, *match;
    344       1.7   itojun #ifdef USE_RADIX
    345       1.7   itojun 	struct radix_node_head *rnh = encap_rnh(AF_INET6);
    346       1.7   itojun 	struct radix_node *rn;
    347       1.7   itojun #endif
    348       1.1   itojun 
    349       1.7   itojun #ifdef DIAGNOSTIC
    350       1.7   itojun 	if (m->m_len < sizeof(*ip6))
    351       1.7   itojun 		panic("encap6_lookup");
    352       1.7   itojun #endif
    353       1.1   itojun 	ip6 = mtod(m, struct ip6_hdr *);
    354       1.1   itojun 
    355       1.7   itojun 	bzero(&pack, sizeof(pack));
    356       1.7   itojun 	pack.p.sp_len = sizeof(pack);
    357       1.7   itojun 	pack.mine.sin6_family = pack.yours.sin6_family = AF_INET6;
    358       1.7   itojun 	pack.mine.sin6_len = pack.yours.sin6_len = sizeof(struct sockaddr_in6);
    359       1.7   itojun 	if (dir == INBOUND) {
    360       1.7   itojun 		pack.mine.sin6_addr = ip6->ip6_dst;
    361       1.7   itojun 		pack.yours.sin6_addr = ip6->ip6_src;
    362       1.7   itojun 	} else {
    363       1.7   itojun 		pack.mine.sin6_addr = ip6->ip6_src;
    364       1.7   itojun 		pack.yours.sin6_addr = ip6->ip6_dst;
    365       1.7   itojun 	}
    366       1.1   itojun 
    367       1.1   itojun 	match = NULL;
    368       1.1   itojun 	matchprio = 0;
    369       1.7   itojun 
    370       1.7   itojun #ifdef USE_RADIX
    371       1.7   itojun 	rn = rnh->rnh_matchaddr((caddr_t)&pack, rnh);
    372       1.7   itojun 	if (rn && (rn->rn_flags & RNF_ROOT) == 0) {
    373       1.7   itojun 		match = (struct encaptab *)rn;
    374       1.7   itojun 		matchprio = mask_matchlen(match->srcmask) +
    375       1.7   itojun 		    mask_matchlen(match->dstmask);
    376       1.7   itojun 	}
    377       1.7   itojun #endif
    378       1.7   itojun 
    379       1.1   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    380       1.1   itojun 		if (ep->af != AF_INET6)
    381       1.1   itojun 			continue;
    382       1.1   itojun 		if (ep->proto >= 0 && ep->proto != proto)
    383       1.1   itojun 			continue;
    384       1.1   itojun 		if (ep->func)
    385       1.7   itojun 			prio = (*ep->func)(m, off, proto, ep->arg);
    386       1.1   itojun 		else {
    387       1.7   itojun #ifdef USE_RADIX
    388       1.7   itojun 			continue;
    389       1.7   itojun #else
    390       1.7   itojun 			prio = mask_match(ep, (struct sockaddr *)&pack.mine,
    391       1.7   itojun 			    (struct sockaddr *)&pack.yours);
    392       1.7   itojun #endif
    393       1.1   itojun 		}
    394       1.1   itojun 
    395       1.7   itojun 		/* see encap4_lookup() for issues here */
    396       1.1   itojun 		if (prio <= 0)
    397       1.1   itojun 			continue;
    398       1.1   itojun 		if (prio > matchprio) {
    399       1.1   itojun 			matchprio = prio;
    400       1.1   itojun 			match = ep;
    401       1.1   itojun 		}
    402       1.1   itojun 	}
    403       1.1   itojun 
    404       1.7   itojun 	return match;
    405       1.7   itojun #undef s
    406       1.7   itojun #undef d
    407       1.7   itojun }
    408       1.7   itojun 
    409       1.7   itojun int
    410       1.7   itojun encap6_input(mp, offp, proto)
    411       1.7   itojun 	struct mbuf **mp;
    412       1.7   itojun 	int *offp;
    413       1.7   itojun 	int proto;
    414       1.7   itojun {
    415       1.7   itojun 	struct mbuf *m = *mp;
    416       1.7   itojun 	const struct ip6protosw *psw;
    417       1.7   itojun 	struct encaptab *match;
    418       1.7   itojun 
    419       1.7   itojun 	match = encap6_lookup(m, *offp, proto, INBOUND);
    420       1.7   itojun 
    421       1.1   itojun 	if (match) {
    422       1.1   itojun 		/* found a match */
    423       1.4   itojun 		psw = (const struct ip6protosw *)match->psw;
    424       1.1   itojun 		if (psw && psw->pr_input) {
    425       1.1   itojun 			encap_fillarg(m, match);
    426       1.1   itojun 			return (*psw->pr_input)(mp, offp, proto);
    427       1.1   itojun 		} else {
    428       1.1   itojun 			m_freem(m);
    429       1.1   itojun 			return IPPROTO_DONE;
    430       1.1   itojun 		}
    431       1.1   itojun 	}
    432       1.1   itojun 
    433       1.1   itojun 	/* last resort: inject to raw socket */
    434       1.1   itojun 	return rip6_input(mp, offp, proto);
    435       1.1   itojun }
    436       1.1   itojun #endif
    437       1.1   itojun 
    438       1.7   itojun static int
    439       1.1   itojun encap_add(ep)
    440       1.1   itojun 	struct encaptab *ep;
    441       1.1   itojun {
    442       1.7   itojun #ifdef USE_RADIX
    443       1.7   itojun 	struct radix_node_head *rnh = encap_rnh(ep->af);
    444       1.7   itojun #endif
    445       1.7   itojun 	int error = 0;
    446       1.1   itojun 
    447       1.1   itojun 	LIST_INSERT_HEAD(&encaptab, ep, chain);
    448       1.7   itojun #ifdef USE_RADIX
    449       1.7   itojun 	if (!ep->func && rnh) {
    450       1.7   itojun 		if (!rnh->rnh_addaddr((caddr_t)ep->addrpack,
    451       1.7   itojun 		    (caddr_t)ep->maskpack, rnh, ep->nodes)) {
    452       1.7   itojun 			error = EEXIST;
    453       1.7   itojun 			goto fail;
    454       1.7   itojun 		}
    455       1.7   itojun 	}
    456       1.7   itojun #endif
    457       1.7   itojun 	return error;
    458       1.7   itojun 
    459       1.7   itojun  fail:
    460       1.7   itojun 	LIST_REMOVE(ep, chain);
    461       1.7   itojun 	return error;
    462       1.7   itojun }
    463       1.7   itojun 
    464       1.7   itojun static int
    465       1.7   itojun encap_remove(ep)
    466       1.7   itojun 	struct encaptab *ep;
    467       1.7   itojun {
    468       1.7   itojun #ifdef USE_RADIX
    469       1.7   itojun 	struct radix_node_head *rnh = encap_rnh(ep->af);
    470       1.7   itojun #endif
    471       1.7   itojun 	int error = 0;
    472       1.7   itojun 
    473       1.7   itojun 	LIST_REMOVE(ep, chain);
    474       1.7   itojun #ifdef USE_RADIX
    475       1.7   itojun 	if (!ep->func && rnh) {
    476       1.7   itojun 		if (!rnh->rnh_deladdr((caddr_t)ep->addrpack,
    477       1.7   itojun 		    (caddr_t)ep->maskpack, rnh))
    478       1.7   itojun 			error = ESRCH;
    479       1.7   itojun 	}
    480       1.7   itojun #endif
    481       1.7   itojun 	return error;
    482       1.7   itojun }
    483       1.7   itojun 
    484       1.7   itojun static int
    485       1.7   itojun encap_afcheck(af, sp, dp)
    486       1.7   itojun 	int af;
    487       1.7   itojun 	const struct sockaddr *sp;
    488       1.7   itojun 	const struct sockaddr *dp;
    489       1.7   itojun {
    490       1.7   itojun 	if (sp && dp) {
    491       1.7   itojun 		if (sp->sa_len != dp->sa_len)
    492       1.7   itojun 			return EINVAL;
    493       1.7   itojun 		if (af != sp->sa_family || af != dp->sa_family)
    494       1.7   itojun 			return EINVAL;
    495       1.7   itojun 	} else if (!sp && !dp)
    496       1.7   itojun 		;
    497       1.7   itojun 	else
    498       1.7   itojun 		return EINVAL;
    499       1.7   itojun 
    500       1.7   itojun 	switch (af) {
    501       1.7   itojun 	case AF_INET:
    502       1.7   itojun 		if (sp && sp->sa_len != sizeof(struct sockaddr_in))
    503       1.7   itojun 			return EINVAL;
    504       1.7   itojun 		if (dp && dp->sa_len != sizeof(struct sockaddr_in))
    505       1.7   itojun 			return EINVAL;
    506       1.7   itojun 		break;
    507       1.7   itojun #ifdef INET6
    508       1.7   itojun 	case AF_INET6:
    509       1.7   itojun 		if (sp && sp->sa_len != sizeof(struct sockaddr_in6))
    510       1.7   itojun 			return EINVAL;
    511       1.7   itojun 		if (dp && dp->sa_len != sizeof(struct sockaddr_in6))
    512       1.7   itojun 			return EINVAL;
    513       1.7   itojun 		break;
    514       1.7   itojun #endif
    515       1.7   itojun 	default:
    516       1.7   itojun 		return EAFNOSUPPORT;
    517       1.7   itojun 	}
    518       1.7   itojun 
    519       1.7   itojun 	return 0;
    520       1.1   itojun }
    521       1.1   itojun 
    522       1.1   itojun /*
    523       1.1   itojun  * sp (src ptr) is always my side, and dp (dst ptr) is always remote side.
    524       1.1   itojun  * length of mask (sm and dm) is assumed to be same as sp/dp.
    525       1.1   itojun  * Return value will be necessary as input (cookie) for encap_detach().
    526       1.1   itojun  */
    527       1.1   itojun const struct encaptab *
    528       1.1   itojun encap_attach(af, proto, sp, sm, dp, dm, psw, arg)
    529       1.1   itojun 	int af;
    530       1.1   itojun 	int proto;
    531       1.1   itojun 	const struct sockaddr *sp, *sm;
    532       1.1   itojun 	const struct sockaddr *dp, *dm;
    533       1.1   itojun 	const struct protosw *psw;
    534       1.1   itojun 	void *arg;
    535       1.1   itojun {
    536       1.1   itojun 	struct encaptab *ep;
    537       1.1   itojun 	int error;
    538       1.1   itojun 	int s;
    539       1.7   itojun 	size_t l;
    540       1.7   itojun 	struct pack4 *pack4;
    541       1.7   itojun #ifdef INET6
    542       1.7   itojun 	struct pack6 *pack6;
    543       1.7   itojun #endif
    544       1.1   itojun 
    545       1.1   itojun 	s = splsoftnet();
    546       1.1   itojun 	/* sanity check on args */
    547       1.7   itojun 	error = encap_afcheck(af, sp, dp);
    548       1.7   itojun 	if (error)
    549       1.1   itojun 		goto fail;
    550       1.1   itojun 
    551       1.1   itojun 	/* check if anyone have already attached with exactly same config */
    552       1.1   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    553       1.1   itojun 		if (ep->af != af)
    554       1.1   itojun 			continue;
    555       1.1   itojun 		if (ep->proto != proto)
    556       1.1   itojun 			continue;
    557       1.7   itojun 		if (ep->func)
    558       1.7   itojun 			continue;
    559       1.7   itojun #ifdef DIAGNOSTIC
    560       1.7   itojun 		if (!ep->src || !ep->dst || !ep->srcmask || !ep->dstmask)
    561       1.7   itojun 			panic("null pointers in encaptab");
    562       1.7   itojun #endif
    563       1.7   itojun 		if (ep->src->sa_len != sp->sa_len ||
    564       1.7   itojun 		    bcmp(ep->src, sp, sp->sa_len) != 0 ||
    565       1.7   itojun 		    bcmp(ep->srcmask, sm, sp->sa_len) != 0)
    566       1.7   itojun 			continue;
    567       1.7   itojun 		if (ep->dst->sa_len != dp->sa_len ||
    568       1.7   itojun 		    bcmp(ep->dst, dp, dp->sa_len) != 0 ||
    569       1.7   itojun 		    bcmp(ep->dstmask, dm, dp->sa_len) != 0)
    570       1.1   itojun 			continue;
    571       1.1   itojun 
    572       1.1   itojun 		error = EEXIST;
    573       1.1   itojun 		goto fail;
    574       1.1   itojun 	}
    575       1.3  thorpej 
    576       1.7   itojun 	switch (af) {
    577       1.7   itojun 	case AF_INET:
    578       1.7   itojun 		l = sizeof(*pack4);
    579       1.7   itojun 		break;
    580       1.7   itojun #ifdef INET6
    581       1.7   itojun 	case AF_INET6:
    582       1.7   itojun 		l = sizeof(*pack6);
    583       1.7   itojun 		break;
    584       1.7   itojun #endif
    585       1.7   itojun 	default:
    586       1.7   itojun 		goto fail;
    587       1.7   itojun 	}
    588       1.7   itojun 
    589       1.7   itojun #ifdef DIAGNOSTIC
    590       1.7   itojun 	/* if l exceeds the value sa_len can possibly express, it's wrong. */
    591       1.7   itojun 	if (l > (1 << (8 * sizeof(ep->addrpack->sa_len)))) {
    592       1.7   itojun 		error = EINVAL;
    593       1.7   itojun 		goto fail;
    594       1.7   itojun 	}
    595       1.7   itojun #endif
    596       1.1   itojun 
    597       1.7   itojun 	ep = malloc(sizeof(*ep), M_NETADDR, M_NOWAIT);	/* M_NETADDR ok? */
    598       1.1   itojun 	if (ep == NULL) {
    599       1.1   itojun 		error = ENOBUFS;
    600       1.1   itojun 		goto fail;
    601       1.1   itojun 	}
    602       1.1   itojun 	bzero(ep, sizeof(*ep));
    603       1.7   itojun 	ep->addrpack = malloc(l, M_NETADDR, M_NOWAIT);
    604       1.7   itojun 	if (ep->addrpack == NULL) {
    605       1.7   itojun 		error = ENOBUFS;
    606       1.7   itojun 		goto gc;
    607       1.7   itojun 	}
    608       1.7   itojun 	ep->maskpack = malloc(l, M_NETADDR, M_NOWAIT);
    609       1.7   itojun 	if (ep->maskpack == NULL) {
    610       1.7   itojun 		error = ENOBUFS;
    611       1.7   itojun 		goto gc;
    612       1.7   itojun 	}
    613       1.1   itojun 
    614       1.1   itojun 	ep->af = af;
    615       1.1   itojun 	ep->proto = proto;
    616       1.7   itojun 	ep->addrpack->sa_len = l & 0xff;
    617       1.7   itojun 	ep->maskpack->sa_len = l & 0xff;
    618       1.7   itojun 	switch (af) {
    619       1.7   itojun 	case AF_INET:
    620       1.7   itojun 		pack4 = (struct pack4 *)ep->addrpack;
    621       1.7   itojun 		ep->src = (struct sockaddr *)&pack4->mine;
    622       1.7   itojun 		ep->dst = (struct sockaddr *)&pack4->yours;
    623       1.7   itojun 		pack4 = (struct pack4 *)ep->maskpack;
    624       1.7   itojun 		ep->srcmask = (struct sockaddr *)&pack4->mine;
    625       1.7   itojun 		ep->dstmask = (struct sockaddr *)&pack4->yours;
    626       1.7   itojun 		break;
    627       1.7   itojun #ifdef INET6
    628       1.7   itojun 	case AF_INET6:
    629       1.7   itojun 		pack6 = (struct pack6 *)ep->addrpack;
    630       1.7   itojun 		ep->src = (struct sockaddr *)&pack6->mine;
    631       1.7   itojun 		ep->dst = (struct sockaddr *)&pack6->yours;
    632       1.7   itojun 		pack6 = (struct pack6 *)ep->maskpack;
    633       1.7   itojun 		ep->srcmask = (struct sockaddr *)&pack6->mine;
    634       1.7   itojun 		ep->dstmask = (struct sockaddr *)&pack6->yours;
    635       1.7   itojun 		break;
    636       1.7   itojun #endif
    637       1.7   itojun 	}
    638       1.7   itojun 
    639       1.7   itojun 	bcopy(sp, ep->src, sp->sa_len);
    640       1.7   itojun 	bcopy(sm, ep->srcmask, sp->sa_len);
    641       1.7   itojun 	bcopy(dp, ep->dst, dp->sa_len);
    642       1.7   itojun 	bcopy(dm, ep->dstmask, dp->sa_len);
    643       1.1   itojun 	ep->psw = psw;
    644       1.1   itojun 	ep->arg = arg;
    645       1.1   itojun 
    646       1.7   itojun 	error = encap_add(ep);
    647       1.7   itojun 	if (error)
    648       1.7   itojun 		goto gc;
    649       1.1   itojun 
    650       1.1   itojun 	error = 0;
    651       1.1   itojun 	splx(s);
    652       1.1   itojun 	return ep;
    653       1.1   itojun 
    654       1.7   itojun gc:
    655       1.7   itojun 	if (ep->addrpack)
    656       1.7   itojun 		free(ep->addrpack, M_NETADDR);
    657       1.7   itojun 	if (ep->maskpack)
    658       1.7   itojun 		free(ep->maskpack, M_NETADDR);
    659       1.7   itojun 	if (ep)
    660       1.7   itojun 		free(ep, M_NETADDR);
    661       1.1   itojun fail:
    662       1.1   itojun 	splx(s);
    663       1.1   itojun 	return NULL;
    664       1.1   itojun }
    665       1.1   itojun 
    666       1.1   itojun const struct encaptab *
    667       1.1   itojun encap_attach_func(af, proto, func, psw, arg)
    668       1.1   itojun 	int af;
    669       1.1   itojun 	int proto;
    670       1.1   itojun 	int (*func) __P((const struct mbuf *, int, int, void *));
    671       1.1   itojun 	const struct protosw *psw;
    672       1.1   itojun 	void *arg;
    673       1.1   itojun {
    674       1.1   itojun 	struct encaptab *ep;
    675       1.1   itojun 	int error;
    676       1.1   itojun 	int s;
    677       1.1   itojun 
    678       1.1   itojun 	s = splsoftnet();
    679       1.1   itojun 	/* sanity check on args */
    680       1.1   itojun 	if (!func) {
    681       1.1   itojun 		error = EINVAL;
    682       1.1   itojun 		goto fail;
    683       1.1   itojun 	}
    684       1.1   itojun 
    685       1.7   itojun 	error = encap_afcheck(af, NULL, NULL);
    686       1.7   itojun 	if (error)
    687       1.7   itojun 		goto fail;
    688       1.7   itojun 
    689       1.1   itojun 	ep = malloc(sizeof(*ep), M_NETADDR, M_NOWAIT);	/*XXX*/
    690       1.1   itojun 	if (ep == NULL) {
    691       1.1   itojun 		error = ENOBUFS;
    692       1.1   itojun 		goto fail;
    693       1.1   itojun 	}
    694       1.1   itojun 	bzero(ep, sizeof(*ep));
    695       1.1   itojun 
    696       1.1   itojun 	ep->af = af;
    697       1.1   itojun 	ep->proto = proto;
    698       1.1   itojun 	ep->func = func;
    699       1.1   itojun 	ep->psw = psw;
    700       1.1   itojun 	ep->arg = arg;
    701       1.1   itojun 
    702       1.7   itojun 	error = encap_add(ep);
    703       1.7   itojun 	if (error)
    704       1.7   itojun 		goto fail;
    705       1.1   itojun 
    706       1.1   itojun 	error = 0;
    707       1.1   itojun 	splx(s);
    708       1.1   itojun 	return ep;
    709       1.1   itojun 
    710       1.1   itojun fail:
    711       1.1   itojun 	splx(s);
    712       1.1   itojun 	return NULL;
    713       1.1   itojun }
    714       1.1   itojun 
    715       1.7   itojun /* XXX encap4_ctlinput() is necessary if we set DF=1 on outer IPv4 header */
    716       1.7   itojun 
    717       1.7   itojun #ifdef INET6
    718       1.7   itojun void
    719       1.7   itojun encap6_ctlinput(cmd, sa, d0)
    720       1.7   itojun 	int cmd;
    721       1.7   itojun 	struct sockaddr *sa;
    722       1.7   itojun 	void *d0;
    723       1.7   itojun {
    724       1.7   itojun 	void *d = d0;
    725       1.7   itojun 	struct ip6_hdr *ip6;
    726       1.7   itojun 	struct mbuf *m;
    727       1.7   itojun 	int off;
    728       1.7   itojun 	struct ip6ctlparam *ip6cp = NULL;
    729       1.7   itojun 	int nxt;
    730       1.7   itojun 	struct encaptab *ep;
    731       1.7   itojun 	const struct ip6protosw *psw;
    732       1.7   itojun 
    733       1.7   itojun 	if (sa->sa_family != AF_INET6 ||
    734       1.7   itojun 	    sa->sa_len != sizeof(struct sockaddr_in6))
    735       1.7   itojun 		return;
    736       1.7   itojun 
    737       1.7   itojun 	if ((unsigned)cmd >= PRC_NCMDS)
    738       1.7   itojun 		return;
    739       1.7   itojun 	if (cmd == PRC_HOSTDEAD)
    740       1.7   itojun 		d = NULL;
    741       1.7   itojun 	else if (cmd == PRC_MSGSIZE)
    742       1.7   itojun 		; /* special code is present, see below */
    743       1.7   itojun 	else if (inet6ctlerrmap[cmd] == 0)
    744       1.7   itojun 		return;
    745       1.7   itojun 
    746       1.7   itojun 	/* if the parameter is from icmp6, decode it. */
    747       1.7   itojun 	if (d != NULL) {
    748       1.7   itojun 		ip6cp = (struct ip6ctlparam *)d;
    749       1.7   itojun 		m = ip6cp->ip6c_m;
    750       1.7   itojun 		ip6 = ip6cp->ip6c_ip6;
    751       1.7   itojun 		off = ip6cp->ip6c_off;
    752       1.7   itojun 		nxt = ip6cp->ip6c_nxt;
    753  1.13.2.1    skrll 
    754  1.13.2.1    skrll 		if (ip6 && cmd == PRC_MSGSIZE) {
    755  1.13.2.1    skrll 			int valid = 0;
    756  1.13.2.1    skrll 			struct encaptab *match;
    757  1.13.2.1    skrll 
    758  1.13.2.1    skrll 			/*
    759  1.13.2.1    skrll 		 	* Check to see if we have a valid encap configuration.
    760  1.13.2.1    skrll 		 	*/
    761  1.13.2.1    skrll 			match = encap6_lookup(m, off, nxt, OUTBOUND);
    762  1.13.2.1    skrll 			if (match)
    763  1.13.2.1    skrll 				valid++;
    764  1.13.2.1    skrll 
    765  1.13.2.1    skrll 			/*
    766  1.13.2.1    skrll 		 	* Depending on the value of "valid" and routing table
    767  1.13.2.1    skrll 		 	* size (mtudisc_{hi,lo}wat), we will:
    768  1.13.2.1    skrll 		 	* - recalcurate the new MTU and create the
    769  1.13.2.1    skrll 		 	*   corresponding routing entry, or
    770  1.13.2.1    skrll 		 	* - ignore the MTU change notification.
    771  1.13.2.1    skrll 		 	*/
    772  1.13.2.1    skrll 			icmp6_mtudisc_update((struct ip6ctlparam *)d, valid);
    773  1.13.2.1    skrll 		}
    774       1.7   itojun 	} else {
    775       1.7   itojun 		m = NULL;
    776       1.7   itojun 		ip6 = NULL;
    777       1.7   itojun 		nxt = -1;
    778       1.7   itojun 	}
    779       1.7   itojun 
    780       1.7   itojun 	/* inform all listeners */
    781       1.7   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    782       1.7   itojun 		if (ep->af != AF_INET6)
    783       1.7   itojun 			continue;
    784       1.7   itojun 		if (ep->proto >= 0 && ep->proto != nxt)
    785       1.7   itojun 			continue;
    786       1.7   itojun 
    787       1.7   itojun 		/* should optimize by looking at address pairs */
    788       1.7   itojun 
    789       1.7   itojun 		/* XXX need to pass ep->arg or ep itself to listeners */
    790       1.7   itojun 		psw = (const struct ip6protosw *)ep->psw;
    791       1.7   itojun 		if (psw && psw->pr_ctlinput)
    792       1.7   itojun 			(*psw->pr_ctlinput)(cmd, sa, d);
    793       1.7   itojun 	}
    794       1.7   itojun 
    795       1.7   itojun 	rip6_ctlinput(cmd, sa, d0);
    796       1.7   itojun }
    797       1.7   itojun #endif
    798       1.7   itojun 
    799       1.1   itojun int
    800       1.1   itojun encap_detach(cookie)
    801       1.1   itojun 	const struct encaptab *cookie;
    802       1.1   itojun {
    803       1.1   itojun 	const struct encaptab *ep = cookie;
    804       1.1   itojun 	struct encaptab *p;
    805       1.7   itojun 	int error;
    806       1.1   itojun 
    807       1.1   itojun 	for (p = LIST_FIRST(&encaptab); p; p = LIST_NEXT(p, chain)) {
    808       1.1   itojun 		if (p == ep) {
    809       1.7   itojun 			error = encap_remove(p);
    810       1.7   itojun 			if (error)
    811       1.7   itojun 				return error;
    812       1.7   itojun 			if (!ep->func) {
    813       1.7   itojun 				free(p->addrpack, M_NETADDR);
    814       1.7   itojun 				free(p->maskpack, M_NETADDR);
    815       1.7   itojun 			}
    816       1.1   itojun 			free(p, M_NETADDR);	/*XXX*/
    817       1.1   itojun 			return 0;
    818       1.1   itojun 		}
    819       1.1   itojun 	}
    820       1.1   itojun 
    821       1.7   itojun 	return ENOENT;
    822       1.7   itojun }
    823       1.7   itojun 
    824       1.7   itojun #ifdef USE_RADIX
    825       1.7   itojun static struct radix_node_head *
    826       1.7   itojun encap_rnh(af)
    827       1.7   itojun 	int af;
    828       1.7   itojun {
    829       1.7   itojun 
    830       1.7   itojun 	switch (af) {
    831       1.7   itojun 	case AF_INET:
    832       1.7   itojun 		return encap_head[0];
    833       1.7   itojun #ifdef INET6
    834       1.7   itojun 	case AF_INET6:
    835       1.7   itojun 		return encap_head[1];
    836       1.7   itojun #endif
    837       1.7   itojun 	default:
    838       1.7   itojun 		return NULL;
    839       1.7   itojun 	}
    840       1.7   itojun }
    841       1.7   itojun 
    842       1.7   itojun static int
    843       1.7   itojun mask_matchlen(sa)
    844       1.7   itojun 	const struct sockaddr *sa;
    845       1.7   itojun {
    846       1.7   itojun 	const char *p, *ep;
    847       1.7   itojun 	int l;
    848       1.7   itojun 
    849       1.7   itojun 	p = (const char *)sa;
    850       1.7   itojun 	ep = p + sa->sa_len;
    851       1.7   itojun 	p += 2;	/* sa_len + sa_family */
    852       1.7   itojun 
    853       1.7   itojun 	l = 0;
    854       1.7   itojun 	while (p < ep) {
    855       1.7   itojun 		l += (*p ? 8 : 0);	/* estimate */
    856       1.7   itojun 		p++;
    857       1.7   itojun 	}
    858       1.7   itojun 	return l;
    859       1.1   itojun }
    860       1.7   itojun #endif
    861       1.1   itojun 
    862       1.7   itojun #ifndef USE_RADIX
    863       1.1   itojun static int
    864       1.1   itojun mask_match(ep, sp, dp)
    865       1.1   itojun 	const struct encaptab *ep;
    866       1.1   itojun 	const struct sockaddr *sp;
    867       1.1   itojun 	const struct sockaddr *dp;
    868       1.1   itojun {
    869       1.1   itojun 	struct sockaddr_storage s;
    870       1.1   itojun 	struct sockaddr_storage d;
    871       1.1   itojun 	int i;
    872       1.4   itojun 	const u_int8_t *p, *q;
    873       1.4   itojun 	u_int8_t *r;
    874       1.1   itojun 	int matchlen;
    875       1.1   itojun 
    876       1.7   itojun #ifdef DIAGNOSTIC
    877       1.7   itojun 	if (ep->func)
    878       1.7   itojun 		panic("wrong encaptab passed to mask_match");
    879       1.7   itojun #endif
    880       1.1   itojun 	if (sp->sa_len > sizeof(s) || dp->sa_len > sizeof(d))
    881       1.1   itojun 		return 0;
    882       1.1   itojun 	if (sp->sa_family != ep->af || dp->sa_family != ep->af)
    883       1.1   itojun 		return 0;
    884       1.7   itojun 	if (sp->sa_len != ep->src->sa_len || dp->sa_len != ep->dst->sa_len)
    885       1.1   itojun 		return 0;
    886       1.1   itojun 
    887       1.1   itojun 	matchlen = 0;
    888       1.1   itojun 
    889       1.4   itojun 	p = (const u_int8_t *)sp;
    890       1.7   itojun 	q = (const u_int8_t *)ep->srcmask;
    891       1.1   itojun 	r = (u_int8_t *)&s;
    892       1.1   itojun 	for (i = 0 ; i < sp->sa_len; i++) {
    893       1.1   itojun 		r[i] = p[i] & q[i];
    894       1.1   itojun 		/* XXX estimate */
    895       1.1   itojun 		matchlen += (q[i] ? 8 : 0);
    896       1.1   itojun 	}
    897       1.1   itojun 
    898       1.4   itojun 	p = (const u_int8_t *)dp;
    899       1.7   itojun 	q = (const u_int8_t *)ep->dstmask;
    900       1.1   itojun 	r = (u_int8_t *)&d;
    901       1.1   itojun 	for (i = 0 ; i < dp->sa_len; i++) {
    902       1.1   itojun 		r[i] = p[i] & q[i];
    903       1.1   itojun 		/* XXX rough estimate */
    904       1.1   itojun 		matchlen += (q[i] ? 8 : 0);
    905       1.1   itojun 	}
    906       1.1   itojun 
    907       1.1   itojun 	/* need to overwrite len/family portion as we don't compare them */
    908       1.1   itojun 	s.ss_len = sp->sa_len;
    909       1.1   itojun 	s.ss_family = sp->sa_family;
    910       1.1   itojun 	d.ss_len = dp->sa_len;
    911       1.1   itojun 	d.ss_family = dp->sa_family;
    912       1.1   itojun 
    913       1.7   itojun 	if (bcmp(&s, ep->src, ep->src->sa_len) == 0 &&
    914       1.7   itojun 	    bcmp(&d, ep->dst, ep->dst->sa_len) == 0) {
    915       1.1   itojun 		return matchlen;
    916       1.1   itojun 	} else
    917       1.1   itojun 		return 0;
    918       1.1   itojun }
    919       1.7   itojun #endif
    920       1.1   itojun 
    921       1.1   itojun static void
    922       1.1   itojun encap_fillarg(m, ep)
    923       1.1   itojun 	struct mbuf *m;
    924       1.1   itojun 	const struct encaptab *ep;
    925       1.1   itojun {
    926      1.12   itojun 	struct m_tag *mtag;
    927       1.1   itojun 
    928      1.12   itojun 	mtag = m_tag_get(PACKET_TAG_ENCAP, sizeof(void *), M_NOWAIT);
    929      1.12   itojun 	if (mtag) {
    930      1.12   itojun 		*(void **)(mtag + 1) = ep->arg;
    931      1.12   itojun 		m_tag_prepend(m, mtag);
    932       1.1   itojun 	}
    933       1.1   itojun }
    934       1.1   itojun 
    935       1.1   itojun void *
    936       1.1   itojun encap_getarg(m)
    937       1.1   itojun 	struct mbuf *m;
    938       1.1   itojun {
    939       1.1   itojun 	void *p;
    940      1.12   itojun 	struct m_tag *mtag;
    941       1.1   itojun 
    942       1.1   itojun 	p = NULL;
    943      1.12   itojun 	mtag = m_tag_find(m, PACKET_TAG_ENCAP, NULL);
    944      1.12   itojun 	if (mtag != NULL) {
    945      1.13   itojun 		p = *(void **)(mtag + 1);
    946      1.12   itojun 		m_tag_delete(m, mtag);
    947       1.1   itojun 	}
    948       1.1   itojun 	return p;
    949       1.1   itojun }
    950