Home | History | Annotate | Line # | Download | only in netinet
ip_encap.c revision 1.29
      1   1.7   itojun /*	$KAME: ip_encap.c,v 1.73 2001/10/02 08:30:58 itojun Exp $	*/
      2   1.1   itojun 
      3   1.1   itojun /*
      4   1.1   itojun  * Copyright (C) 1995, 1996, 1997, and 1998 WIDE Project.
      5   1.1   itojun  * All rights reserved.
      6   1.1   itojun  *
      7   1.1   itojun  * Redistribution and use in source and binary forms, with or without
      8   1.1   itojun  * modification, are permitted provided that the following conditions
      9   1.1   itojun  * are met:
     10   1.1   itojun  * 1. Redistributions of source code must retain the above copyright
     11   1.1   itojun  *    notice, this list of conditions and the following disclaimer.
     12   1.1   itojun  * 2. Redistributions in binary form must reproduce the above copyright
     13   1.1   itojun  *    notice, this list of conditions and the following disclaimer in the
     14   1.1   itojun  *    documentation and/or other materials provided with the distribution.
     15   1.1   itojun  * 3. Neither the name of the project nor the names of its contributors
     16   1.1   itojun  *    may be used to endorse or promote products derived from this software
     17   1.1   itojun  *    without specific prior written permission.
     18   1.1   itojun  *
     19   1.1   itojun  * THIS SOFTWARE IS PROVIDED BY THE PROJECT AND CONTRIBUTORS ``AS IS'' AND
     20   1.1   itojun  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
     21   1.1   itojun  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
     22   1.1   itojun  * ARE DISCLAIMED.  IN NO EVENT SHALL THE PROJECT OR CONTRIBUTORS BE LIABLE
     23   1.1   itojun  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
     24   1.1   itojun  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
     25   1.1   itojun  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
     26   1.1   itojun  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
     27   1.1   itojun  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
     28   1.1   itojun  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
     29   1.1   itojun  * SUCH DAMAGE.
     30   1.1   itojun  */
     31   1.1   itojun /*
     32   1.1   itojun  * My grandfather said that there's a devil inside tunnelling technology...
     33   1.1   itojun  *
     34   1.1   itojun  * We have surprisingly many protocols that want packets with IP protocol
     35   1.1   itojun  * #4 or #41.  Here's a list of protocols that want protocol #41:
     36   1.1   itojun  *	RFC1933 configured tunnel
     37   1.1   itojun  *	RFC1933 automatic tunnel
     38   1.1   itojun  *	RFC2401 IPsec tunnel
     39   1.1   itojun  *	RFC2473 IPv6 generic packet tunnelling
     40   1.1   itojun  *	RFC2529 6over4 tunnel
     41   1.7   itojun  *	RFC3056 6to4 tunnel
     42   1.7   itojun  *	isatap tunnel
     43   1.1   itojun  *	mobile-ip6 (uses RFC2473)
     44   1.1   itojun  * Here's a list of protocol that want protocol #4:
     45   1.1   itojun  *	RFC1853 IPv4-in-IPv4 tunnelling
     46   1.1   itojun  *	RFC2003 IPv4 encapsulation within IPv4
     47   1.1   itojun  *	RFC2344 reverse tunnelling for mobile-ip4
     48   1.1   itojun  *	RFC2401 IPsec tunnel
     49   1.1   itojun  * Well, what can I say.  They impose different en/decapsulation mechanism
     50   1.1   itojun  * from each other, so they need separate protocol handler.  The only one
     51   1.1   itojun  * we can easily determine by protocol # is IPsec, which always has
     52   1.1   itojun  * AH/ESP/IPComp header right after outer IP header.
     53   1.1   itojun  *
     54   1.1   itojun  * So, clearly good old protosw does not work for protocol #4 and #41.
     55   1.1   itojun  * The code will let you match protocol via src/dst address pair.
     56   1.1   itojun  */
     57   1.1   itojun /* XXX is M_NETADDR correct? */
     58   1.6    lukem 
     59   1.7   itojun /*
     60   1.7   itojun  * With USE_RADIX the code will use radix table for tunnel lookup, for
     61   1.7   itojun  * tunnels registered with encap_attach() with a addr/mask pair.
     62   1.7   itojun  * Faster on machines with thousands of tunnel registerations (= interfaces).
     63   1.7   itojun  *
     64   1.7   itojun  * The code assumes that radix table code can handle non-continuous netmask,
     65   1.7   itojun  * as it will pass radix table memory region with (src + dst) sockaddr pair.
     66   1.7   itojun  *
     67   1.7   itojun  * FreeBSD is excluded here as they make max_keylen a static variable, and
     68   1.7   itojun  * thus forbid definition of radix table other than proper domains.
     69   1.7   itojun  */
     70   1.7   itojun #define USE_RADIX
     71   1.7   itojun 
     72   1.6    lukem #include <sys/cdefs.h>
     73  1.29   dyoung __KERNEL_RCSID(0, "$NetBSD: ip_encap.c,v 1.29 2007/02/17 22:34:11 dyoung Exp $");
     74   1.1   itojun 
     75   1.4   itojun #include "opt_mrouting.h"
     76   1.4   itojun #include "opt_inet.h"
     77   1.1   itojun 
     78   1.1   itojun #include <sys/param.h>
     79   1.1   itojun #include <sys/systm.h>
     80   1.1   itojun #include <sys/socket.h>
     81   1.1   itojun #include <sys/sockio.h>
     82   1.1   itojun #include <sys/mbuf.h>
     83   1.1   itojun #include <sys/errno.h>
     84   1.1   itojun #include <sys/protosw.h>
     85   1.4   itojun #include <sys/queue.h>
     86   1.1   itojun 
     87   1.1   itojun #include <net/if.h>
     88   1.1   itojun #include <net/route.h>
     89   1.1   itojun 
     90   1.1   itojun #include <netinet/in.h>
     91   1.1   itojun #include <netinet/in_systm.h>
     92   1.1   itojun #include <netinet/ip.h>
     93   1.1   itojun #include <netinet/ip_var.h>
     94   1.1   itojun #include <netinet/ip_encap.h>
     95   1.1   itojun #ifdef MROUTING
     96   1.1   itojun #include <netinet/ip_mroute.h>
     97   1.1   itojun #endif /* MROUTING */
     98   1.1   itojun 
     99   1.1   itojun #ifdef INET6
    100   1.1   itojun #include <netinet/ip6.h>
    101   1.1   itojun #include <netinet6/ip6_var.h>
    102   1.1   itojun #include <netinet6/ip6protosw.h>
    103   1.7   itojun #include <netinet6/in6_var.h>
    104   1.7   itojun #include <netinet6/in6_pcb.h>
    105   1.7   itojun #include <netinet/icmp6.h>
    106   1.1   itojun #endif
    107   1.1   itojun 
    108   1.1   itojun #include <machine/stdarg.h>
    109   1.1   itojun 
    110   1.1   itojun #include <net/net_osdep.h>
    111   1.1   itojun 
    112   1.7   itojun /* to lookup a pair of address using radix tree */
    113   1.7   itojun struct sockaddr_pack {
    114   1.7   itojun 	u_int8_t sp_len;
    115   1.7   itojun 	u_int8_t sp_family;	/* not really used */
    116   1.7   itojun 	/* followed by variable-length data */
    117  1.10   itojun };
    118   1.7   itojun 
    119   1.7   itojun struct pack4 {
    120   1.7   itojun 	struct sockaddr_pack p;
    121   1.7   itojun 	struct sockaddr_in mine;
    122   1.7   itojun 	struct sockaddr_in yours;
    123  1.10   itojun };
    124   1.7   itojun struct pack6 {
    125   1.7   itojun 	struct sockaddr_pack p;
    126   1.7   itojun 	struct sockaddr_in6 mine;
    127   1.7   itojun 	struct sockaddr_in6 yours;
    128  1.10   itojun };
    129   1.7   itojun 
    130   1.7   itojun enum direction { INBOUND, OUTBOUND };
    131   1.7   itojun 
    132   1.7   itojun #ifdef INET
    133  1.22    perry static struct encaptab *encap4_lookup(struct mbuf *, int, int, enum direction);
    134   1.7   itojun #endif
    135   1.7   itojun #ifdef INET6
    136  1.22    perry static struct encaptab *encap6_lookup(struct mbuf *, int, int, enum direction);
    137   1.7   itojun #endif
    138  1.22    perry static int encap_add(struct encaptab *);
    139  1.22    perry static int encap_remove(struct encaptab *);
    140  1.22    perry static int encap_afcheck(int, const struct sockaddr *, const struct sockaddr *);
    141   1.7   itojun #ifdef USE_RADIX
    142  1.22    perry static struct radix_node_head *encap_rnh(int);
    143  1.22    perry static int mask_matchlen(const struct sockaddr *);
    144   1.7   itojun #endif
    145   1.7   itojun #ifndef USE_RADIX
    146  1.22    perry static int mask_match(const struct encaptab *, const struct sockaddr *,
    147  1.22    perry 		const struct sockaddr *);
    148   1.7   itojun #endif
    149  1.22    perry static void encap_fillarg(struct mbuf *, const struct encaptab *);
    150   1.1   itojun 
    151   1.2  thorpej LIST_HEAD(, encaptab) encaptab = LIST_HEAD_INITIALIZER(&encaptab);
    152   1.1   itojun 
    153   1.7   itojun #ifdef USE_RADIX
    154   1.7   itojun extern int max_keylen;	/* radix.c */
    155   1.7   itojun struct radix_node_head *encap_head[2];	/* 0 for AF_INET, 1 for AF_INET6 */
    156   1.7   itojun #endif
    157   1.7   itojun 
    158   1.1   itojun void
    159  1.23    perry encap_setkeylen(void)
    160  1.19   itojun {
    161  1.19   itojun #ifdef USE_RADIX
    162  1.19   itojun 	if (sizeof(struct pack4) > max_keylen)
    163  1.19   itojun 		max_keylen = sizeof(struct pack4);
    164  1.19   itojun #ifdef INET6
    165  1.19   itojun 	if (sizeof(struct pack6) > max_keylen)
    166  1.19   itojun 		max_keylen = sizeof(struct pack6);
    167  1.19   itojun #endif
    168  1.19   itojun #endif
    169  1.19   itojun }
    170  1.19   itojun 
    171  1.19   itojun void
    172  1.23    perry encap_init(void)
    173   1.1   itojun {
    174   1.7   itojun 	static int initialized = 0;
    175   1.7   itojun 
    176   1.7   itojun 	if (initialized)
    177   1.7   itojun 		return;
    178   1.7   itojun 	initialized++;
    179   1.1   itojun #if 0
    180   1.1   itojun 	/*
    181   1.1   itojun 	 * we cannot use LIST_INIT() here, since drivers may want to call
    182   1.4   itojun 	 * encap_attach(), on driver attach.  encap_init() will be called
    183   1.1   itojun 	 * on AF_INET{,6} initialization, which happens after driver
    184   1.1   itojun 	 * initialization - using LIST_INIT() here can nuke encap_attach()
    185   1.1   itojun 	 * from drivers.
    186   1.1   itojun 	 */
    187   1.1   itojun 	LIST_INIT(&encaptab);
    188   1.1   itojun #endif
    189   1.7   itojun 
    190   1.7   itojun #ifdef USE_RADIX
    191   1.7   itojun 	/*
    192   1.9   itojun 	 * initialize radix lookup table.
    193  1.21    enami 	 * max_keylen initialization happen in the rn_init().
    194   1.7   itojun 	 */
    195  1.21    enami 	rn_init();
    196  1.11  thorpej 	rn_inithead((void *)&encap_head[0], sizeof(struct sockaddr_pack) << 3);
    197   1.7   itojun #ifdef INET6
    198  1.11  thorpej 	rn_inithead((void *)&encap_head[1], sizeof(struct sockaddr_pack) << 3);
    199   1.7   itojun #endif
    200   1.7   itojun #endif
    201   1.1   itojun }
    202   1.1   itojun 
    203   1.4   itojun #ifdef INET
    204   1.7   itojun static struct encaptab *
    205  1.23    perry encap4_lookup(struct mbuf *m, int off, int proto, enum direction dir)
    206   1.1   itojun {
    207   1.1   itojun 	struct ip *ip;
    208   1.7   itojun 	struct pack4 pack;
    209   1.1   itojun 	struct encaptab *ep, *match;
    210   1.1   itojun 	int prio, matchprio;
    211   1.7   itojun #ifdef USE_RADIX
    212   1.7   itojun 	struct radix_node_head *rnh = encap_rnh(AF_INET);
    213   1.7   itojun 	struct radix_node *rn;
    214   1.7   itojun #endif
    215   1.1   itojun 
    216   1.7   itojun #ifdef DIAGNOSTIC
    217   1.7   itojun 	if (m->m_len < sizeof(*ip))
    218   1.7   itojun 		panic("encap4_lookup");
    219   1.7   itojun #endif
    220   1.1   itojun 	ip = mtod(m, struct ip *);
    221   1.1   itojun 
    222   1.7   itojun 	bzero(&pack, sizeof(pack));
    223   1.7   itojun 	pack.p.sp_len = sizeof(pack);
    224   1.7   itojun 	pack.mine.sin_family = pack.yours.sin_family = AF_INET;
    225   1.7   itojun 	pack.mine.sin_len = pack.yours.sin_len = sizeof(struct sockaddr_in);
    226   1.7   itojun 	if (dir == INBOUND) {
    227   1.7   itojun 		pack.mine.sin_addr = ip->ip_dst;
    228   1.7   itojun 		pack.yours.sin_addr = ip->ip_src;
    229   1.7   itojun 	} else {
    230   1.7   itojun 		pack.mine.sin_addr = ip->ip_src;
    231   1.7   itojun 		pack.yours.sin_addr = ip->ip_dst;
    232   1.7   itojun 	}
    233   1.1   itojun 
    234   1.1   itojun 	match = NULL;
    235   1.1   itojun 	matchprio = 0;
    236   1.7   itojun 
    237   1.7   itojun #ifdef USE_RADIX
    238   1.7   itojun 	rn = rnh->rnh_matchaddr((caddr_t)&pack, rnh);
    239   1.7   itojun 	if (rn && (rn->rn_flags & RNF_ROOT) == 0) {
    240   1.7   itojun 		match = (struct encaptab *)rn;
    241   1.7   itojun 		matchprio = mask_matchlen(match->srcmask) +
    242   1.7   itojun 		    mask_matchlen(match->dstmask);
    243   1.7   itojun 	}
    244   1.7   itojun #endif
    245   1.7   itojun 
    246   1.1   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    247   1.1   itojun 		if (ep->af != AF_INET)
    248   1.1   itojun 			continue;
    249   1.1   itojun 		if (ep->proto >= 0 && ep->proto != proto)
    250   1.1   itojun 			continue;
    251   1.1   itojun 		if (ep->func)
    252   1.1   itojun 			prio = (*ep->func)(m, off, proto, ep->arg);
    253   1.1   itojun 		else {
    254   1.7   itojun #ifdef USE_RADIX
    255   1.7   itojun 			continue;
    256   1.7   itojun #else
    257   1.7   itojun 			prio = mask_match(ep, (struct sockaddr *)&pack.mine,
    258   1.7   itojun 			    (struct sockaddr *)&pack.yours);
    259   1.7   itojun #endif
    260   1.1   itojun 		}
    261   1.1   itojun 
    262   1.1   itojun 		/*
    263   1.1   itojun 		 * We prioritize the matches by using bit length of the
    264   1.1   itojun 		 * matches.  mask_match() and user-supplied matching function
    265   1.1   itojun 		 * should return the bit length of the matches (for example,
    266   1.1   itojun 		 * if both src/dst are matched for IPv4, 64 should be returned).
    267   1.1   itojun 		 * 0 or negative return value means "it did not match".
    268   1.1   itojun 		 *
    269   1.1   itojun 		 * The question is, since we have two "mask" portion, we
    270   1.1   itojun 		 * cannot really define total order between entries.
    271   1.1   itojun 		 * For example, which of these should be preferred?
    272   1.1   itojun 		 * mask_match() returns 48 (32 + 16) for both of them.
    273   1.1   itojun 		 *	src=3ffe::/16, dst=3ffe:501::/32
    274   1.1   itojun 		 *	src=3ffe:501::/32, dst=3ffe::/16
    275   1.1   itojun 		 *
    276   1.1   itojun 		 * We need to loop through all the possible candidates
    277   1.1   itojun 		 * to get the best match - the search takes O(n) for
    278   1.1   itojun 		 * n attachments (i.e. interfaces).
    279   1.7   itojun 		 *
    280   1.7   itojun 		 * For radix-based lookup, I guess source takes precedence.
    281   1.7   itojun 		 * See rn_{refines,lexobetter} for the correct answer.
    282   1.1   itojun 		 */
    283   1.1   itojun 		if (prio <= 0)
    284   1.1   itojun 			continue;
    285   1.1   itojun 		if (prio > matchprio) {
    286   1.1   itojun 			matchprio = prio;
    287   1.1   itojun 			match = ep;
    288   1.1   itojun 		}
    289   1.1   itojun 	}
    290   1.1   itojun 
    291   1.7   itojun 	return match;
    292   1.7   itojun #undef s
    293   1.7   itojun #undef d
    294   1.7   itojun }
    295   1.7   itojun 
    296   1.7   itojun void
    297   1.7   itojun encap4_input(struct mbuf *m, ...)
    298   1.7   itojun {
    299   1.7   itojun 	int off, proto;
    300   1.7   itojun 	va_list ap;
    301   1.7   itojun 	const struct protosw *psw;
    302   1.7   itojun 	struct encaptab *match;
    303   1.7   itojun 
    304   1.7   itojun 	va_start(ap, m);
    305   1.7   itojun 	off = va_arg(ap, int);
    306   1.7   itojun 	proto = va_arg(ap, int);
    307   1.7   itojun 	va_end(ap);
    308   1.7   itojun 
    309   1.7   itojun 	match = encap4_lookup(m, off, proto, INBOUND);
    310   1.7   itojun 
    311   1.1   itojun 	if (match) {
    312   1.1   itojun 		/* found a match, "match" has the best one */
    313   1.4   itojun 		psw = match->psw;
    314   1.4   itojun 		if (psw && psw->pr_input) {
    315   1.1   itojun 			encap_fillarg(m, match);
    316   1.4   itojun 			(*psw->pr_input)(m, off, proto);
    317   1.1   itojun 		} else
    318   1.1   itojun 			m_freem(m);
    319   1.1   itojun 		return;
    320   1.1   itojun 	}
    321   1.1   itojun 
    322   1.1   itojun 	/* last resort: inject to raw socket */
    323   1.1   itojun 	rip_input(m, off, proto);
    324   1.1   itojun }
    325   1.1   itojun #endif
    326   1.1   itojun 
    327   1.1   itojun #ifdef INET6
    328   1.7   itojun static struct encaptab *
    329  1.23    perry encap6_lookup(struct mbuf *m, int off, int proto, enum direction dir)
    330   1.1   itojun {
    331   1.1   itojun 	struct ip6_hdr *ip6;
    332   1.7   itojun 	struct pack6 pack;
    333   1.7   itojun 	int prio, matchprio;
    334   1.1   itojun 	struct encaptab *ep, *match;
    335   1.7   itojun #ifdef USE_RADIX
    336   1.7   itojun 	struct radix_node_head *rnh = encap_rnh(AF_INET6);
    337   1.7   itojun 	struct radix_node *rn;
    338   1.7   itojun #endif
    339   1.1   itojun 
    340   1.7   itojun #ifdef DIAGNOSTIC
    341   1.7   itojun 	if (m->m_len < sizeof(*ip6))
    342   1.7   itojun 		panic("encap6_lookup");
    343   1.7   itojun #endif
    344   1.1   itojun 	ip6 = mtod(m, struct ip6_hdr *);
    345   1.1   itojun 
    346   1.7   itojun 	bzero(&pack, sizeof(pack));
    347   1.7   itojun 	pack.p.sp_len = sizeof(pack);
    348   1.7   itojun 	pack.mine.sin6_family = pack.yours.sin6_family = AF_INET6;
    349   1.7   itojun 	pack.mine.sin6_len = pack.yours.sin6_len = sizeof(struct sockaddr_in6);
    350   1.7   itojun 	if (dir == INBOUND) {
    351   1.7   itojun 		pack.mine.sin6_addr = ip6->ip6_dst;
    352   1.7   itojun 		pack.yours.sin6_addr = ip6->ip6_src;
    353   1.7   itojun 	} else {
    354   1.7   itojun 		pack.mine.sin6_addr = ip6->ip6_src;
    355   1.7   itojun 		pack.yours.sin6_addr = ip6->ip6_dst;
    356   1.7   itojun 	}
    357   1.1   itojun 
    358   1.1   itojun 	match = NULL;
    359   1.1   itojun 	matchprio = 0;
    360   1.7   itojun 
    361   1.7   itojun #ifdef USE_RADIX
    362   1.7   itojun 	rn = rnh->rnh_matchaddr((caddr_t)&pack, rnh);
    363   1.7   itojun 	if (rn && (rn->rn_flags & RNF_ROOT) == 0) {
    364   1.7   itojun 		match = (struct encaptab *)rn;
    365   1.7   itojun 		matchprio = mask_matchlen(match->srcmask) +
    366   1.7   itojun 		    mask_matchlen(match->dstmask);
    367   1.7   itojun 	}
    368   1.7   itojun #endif
    369   1.7   itojun 
    370   1.1   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    371   1.1   itojun 		if (ep->af != AF_INET6)
    372   1.1   itojun 			continue;
    373   1.1   itojun 		if (ep->proto >= 0 && ep->proto != proto)
    374   1.1   itojun 			continue;
    375   1.1   itojun 		if (ep->func)
    376   1.7   itojun 			prio = (*ep->func)(m, off, proto, ep->arg);
    377   1.1   itojun 		else {
    378   1.7   itojun #ifdef USE_RADIX
    379   1.7   itojun 			continue;
    380   1.7   itojun #else
    381   1.7   itojun 			prio = mask_match(ep, (struct sockaddr *)&pack.mine,
    382   1.7   itojun 			    (struct sockaddr *)&pack.yours);
    383   1.7   itojun #endif
    384   1.1   itojun 		}
    385   1.1   itojun 
    386   1.7   itojun 		/* see encap4_lookup() for issues here */
    387   1.1   itojun 		if (prio <= 0)
    388   1.1   itojun 			continue;
    389   1.1   itojun 		if (prio > matchprio) {
    390   1.1   itojun 			matchprio = prio;
    391   1.1   itojun 			match = ep;
    392   1.1   itojun 		}
    393   1.1   itojun 	}
    394   1.1   itojun 
    395   1.7   itojun 	return match;
    396   1.7   itojun #undef s
    397   1.7   itojun #undef d
    398   1.7   itojun }
    399   1.7   itojun 
    400   1.7   itojun int
    401  1.23    perry encap6_input(struct mbuf **mp, int *offp, int proto)
    402   1.7   itojun {
    403   1.7   itojun 	struct mbuf *m = *mp;
    404   1.7   itojun 	const struct ip6protosw *psw;
    405   1.7   itojun 	struct encaptab *match;
    406   1.7   itojun 
    407   1.7   itojun 	match = encap6_lookup(m, *offp, proto, INBOUND);
    408   1.7   itojun 
    409   1.1   itojun 	if (match) {
    410   1.1   itojun 		/* found a match */
    411   1.4   itojun 		psw = (const struct ip6protosw *)match->psw;
    412   1.1   itojun 		if (psw && psw->pr_input) {
    413   1.1   itojun 			encap_fillarg(m, match);
    414   1.1   itojun 			return (*psw->pr_input)(mp, offp, proto);
    415   1.1   itojun 		} else {
    416   1.1   itojun 			m_freem(m);
    417   1.1   itojun 			return IPPROTO_DONE;
    418   1.1   itojun 		}
    419   1.1   itojun 	}
    420   1.1   itojun 
    421   1.1   itojun 	/* last resort: inject to raw socket */
    422   1.1   itojun 	return rip6_input(mp, offp, proto);
    423   1.1   itojun }
    424   1.1   itojun #endif
    425   1.1   itojun 
    426   1.7   itojun static int
    427  1.23    perry encap_add(struct encaptab *ep)
    428   1.1   itojun {
    429   1.7   itojun #ifdef USE_RADIX
    430   1.7   itojun 	struct radix_node_head *rnh = encap_rnh(ep->af);
    431   1.7   itojun #endif
    432   1.7   itojun 	int error = 0;
    433   1.1   itojun 
    434   1.1   itojun 	LIST_INSERT_HEAD(&encaptab, ep, chain);
    435   1.7   itojun #ifdef USE_RADIX
    436   1.7   itojun 	if (!ep->func && rnh) {
    437   1.7   itojun 		if (!rnh->rnh_addaddr((caddr_t)ep->addrpack,
    438   1.7   itojun 		    (caddr_t)ep->maskpack, rnh, ep->nodes)) {
    439   1.7   itojun 			error = EEXIST;
    440   1.7   itojun 			goto fail;
    441   1.7   itojun 		}
    442   1.7   itojun 	}
    443   1.7   itojun #endif
    444   1.7   itojun 	return error;
    445   1.7   itojun 
    446   1.7   itojun  fail:
    447   1.7   itojun 	LIST_REMOVE(ep, chain);
    448   1.7   itojun 	return error;
    449   1.7   itojun }
    450   1.7   itojun 
    451   1.7   itojun static int
    452  1.23    perry encap_remove(struct encaptab *ep)
    453   1.7   itojun {
    454   1.7   itojun #ifdef USE_RADIX
    455   1.7   itojun 	struct radix_node_head *rnh = encap_rnh(ep->af);
    456   1.7   itojun #endif
    457   1.7   itojun 	int error = 0;
    458   1.7   itojun 
    459   1.7   itojun 	LIST_REMOVE(ep, chain);
    460   1.7   itojun #ifdef USE_RADIX
    461   1.7   itojun 	if (!ep->func && rnh) {
    462   1.7   itojun 		if (!rnh->rnh_deladdr((caddr_t)ep->addrpack,
    463   1.7   itojun 		    (caddr_t)ep->maskpack, rnh))
    464   1.7   itojun 			error = ESRCH;
    465   1.7   itojun 	}
    466   1.7   itojun #endif
    467   1.7   itojun 	return error;
    468   1.7   itojun }
    469   1.7   itojun 
    470   1.7   itojun static int
    471  1.23    perry encap_afcheck(int af, const struct sockaddr *sp, const struct sockaddr *dp)
    472   1.7   itojun {
    473   1.7   itojun 	if (sp && dp) {
    474   1.7   itojun 		if (sp->sa_len != dp->sa_len)
    475   1.7   itojun 			return EINVAL;
    476   1.7   itojun 		if (af != sp->sa_family || af != dp->sa_family)
    477   1.7   itojun 			return EINVAL;
    478   1.7   itojun 	} else if (!sp && !dp)
    479   1.7   itojun 		;
    480   1.7   itojun 	else
    481   1.7   itojun 		return EINVAL;
    482   1.7   itojun 
    483   1.7   itojun 	switch (af) {
    484   1.7   itojun 	case AF_INET:
    485   1.7   itojun 		if (sp && sp->sa_len != sizeof(struct sockaddr_in))
    486   1.7   itojun 			return EINVAL;
    487   1.7   itojun 		if (dp && dp->sa_len != sizeof(struct sockaddr_in))
    488   1.7   itojun 			return EINVAL;
    489   1.7   itojun 		break;
    490   1.7   itojun #ifdef INET6
    491   1.7   itojun 	case AF_INET6:
    492   1.7   itojun 		if (sp && sp->sa_len != sizeof(struct sockaddr_in6))
    493   1.7   itojun 			return EINVAL;
    494   1.7   itojun 		if (dp && dp->sa_len != sizeof(struct sockaddr_in6))
    495   1.7   itojun 			return EINVAL;
    496   1.7   itojun 		break;
    497   1.7   itojun #endif
    498   1.7   itojun 	default:
    499   1.7   itojun 		return EAFNOSUPPORT;
    500   1.7   itojun 	}
    501   1.7   itojun 
    502   1.7   itojun 	return 0;
    503   1.1   itojun }
    504   1.1   itojun 
    505   1.1   itojun /*
    506   1.1   itojun  * sp (src ptr) is always my side, and dp (dst ptr) is always remote side.
    507   1.1   itojun  * length of mask (sm and dm) is assumed to be same as sp/dp.
    508   1.1   itojun  * Return value will be necessary as input (cookie) for encap_detach().
    509   1.1   itojun  */
    510   1.1   itojun const struct encaptab *
    511  1.23    perry encap_attach(int af, int proto,
    512  1.23    perry     const struct sockaddr *sp, const struct sockaddr *sm,
    513  1.23    perry     const struct sockaddr *dp, const struct sockaddr *dm,
    514  1.23    perry     const struct protosw *psw, void *arg)
    515   1.1   itojun {
    516   1.1   itojun 	struct encaptab *ep;
    517   1.1   itojun 	int error;
    518   1.1   itojun 	int s;
    519   1.7   itojun 	size_t l;
    520   1.7   itojun 	struct pack4 *pack4;
    521   1.7   itojun #ifdef INET6
    522   1.7   itojun 	struct pack6 *pack6;
    523   1.7   itojun #endif
    524   1.1   itojun 
    525   1.1   itojun 	s = splsoftnet();
    526   1.1   itojun 	/* sanity check on args */
    527   1.7   itojun 	error = encap_afcheck(af, sp, dp);
    528   1.7   itojun 	if (error)
    529   1.1   itojun 		goto fail;
    530   1.1   itojun 
    531   1.1   itojun 	/* check if anyone have already attached with exactly same config */
    532   1.1   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    533   1.1   itojun 		if (ep->af != af)
    534   1.1   itojun 			continue;
    535   1.1   itojun 		if (ep->proto != proto)
    536   1.1   itojun 			continue;
    537   1.7   itojun 		if (ep->func)
    538   1.7   itojun 			continue;
    539   1.7   itojun #ifdef DIAGNOSTIC
    540   1.7   itojun 		if (!ep->src || !ep->dst || !ep->srcmask || !ep->dstmask)
    541   1.7   itojun 			panic("null pointers in encaptab");
    542   1.7   itojun #endif
    543   1.7   itojun 		if (ep->src->sa_len != sp->sa_len ||
    544   1.7   itojun 		    bcmp(ep->src, sp, sp->sa_len) != 0 ||
    545   1.7   itojun 		    bcmp(ep->srcmask, sm, sp->sa_len) != 0)
    546   1.7   itojun 			continue;
    547   1.7   itojun 		if (ep->dst->sa_len != dp->sa_len ||
    548   1.7   itojun 		    bcmp(ep->dst, dp, dp->sa_len) != 0 ||
    549   1.7   itojun 		    bcmp(ep->dstmask, dm, dp->sa_len) != 0)
    550   1.1   itojun 			continue;
    551   1.1   itojun 
    552   1.1   itojun 		error = EEXIST;
    553   1.1   itojun 		goto fail;
    554   1.1   itojun 	}
    555   1.3  thorpej 
    556   1.7   itojun 	switch (af) {
    557   1.7   itojun 	case AF_INET:
    558   1.7   itojun 		l = sizeof(*pack4);
    559   1.7   itojun 		break;
    560   1.7   itojun #ifdef INET6
    561   1.7   itojun 	case AF_INET6:
    562   1.7   itojun 		l = sizeof(*pack6);
    563   1.7   itojun 		break;
    564   1.7   itojun #endif
    565   1.7   itojun 	default:
    566   1.7   itojun 		goto fail;
    567   1.7   itojun 	}
    568   1.7   itojun 
    569  1.20   itojun 	/* M_NETADDR ok? */
    570  1.20   itojun 	ep = malloc(sizeof(*ep), M_NETADDR, M_NOWAIT|M_ZERO);
    571   1.1   itojun 	if (ep == NULL) {
    572   1.1   itojun 		error = ENOBUFS;
    573   1.1   itojun 		goto fail;
    574   1.1   itojun 	}
    575  1.20   itojun 	ep->addrpack = malloc(l, M_NETADDR, M_NOWAIT|M_ZERO);
    576   1.7   itojun 	if (ep->addrpack == NULL) {
    577   1.7   itojun 		error = ENOBUFS;
    578   1.7   itojun 		goto gc;
    579   1.7   itojun 	}
    580  1.20   itojun 	ep->maskpack = malloc(l, M_NETADDR, M_NOWAIT|M_ZERO);
    581   1.7   itojun 	if (ep->maskpack == NULL) {
    582   1.7   itojun 		error = ENOBUFS;
    583   1.7   itojun 		goto gc;
    584   1.7   itojun 	}
    585   1.1   itojun 
    586   1.1   itojun 	ep->af = af;
    587   1.1   itojun 	ep->proto = proto;
    588   1.7   itojun 	ep->addrpack->sa_len = l & 0xff;
    589   1.7   itojun 	ep->maskpack->sa_len = l & 0xff;
    590   1.7   itojun 	switch (af) {
    591   1.7   itojun 	case AF_INET:
    592   1.7   itojun 		pack4 = (struct pack4 *)ep->addrpack;
    593   1.7   itojun 		ep->src = (struct sockaddr *)&pack4->mine;
    594   1.7   itojun 		ep->dst = (struct sockaddr *)&pack4->yours;
    595   1.7   itojun 		pack4 = (struct pack4 *)ep->maskpack;
    596   1.7   itojun 		ep->srcmask = (struct sockaddr *)&pack4->mine;
    597   1.7   itojun 		ep->dstmask = (struct sockaddr *)&pack4->yours;
    598   1.7   itojun 		break;
    599   1.7   itojun #ifdef INET6
    600   1.7   itojun 	case AF_INET6:
    601   1.7   itojun 		pack6 = (struct pack6 *)ep->addrpack;
    602   1.7   itojun 		ep->src = (struct sockaddr *)&pack6->mine;
    603   1.7   itojun 		ep->dst = (struct sockaddr *)&pack6->yours;
    604   1.7   itojun 		pack6 = (struct pack6 *)ep->maskpack;
    605   1.7   itojun 		ep->srcmask = (struct sockaddr *)&pack6->mine;
    606   1.7   itojun 		ep->dstmask = (struct sockaddr *)&pack6->yours;
    607   1.7   itojun 		break;
    608   1.7   itojun #endif
    609   1.7   itojun 	}
    610   1.7   itojun 
    611   1.7   itojun 	bcopy(sp, ep->src, sp->sa_len);
    612   1.7   itojun 	bcopy(sm, ep->srcmask, sp->sa_len);
    613   1.7   itojun 	bcopy(dp, ep->dst, dp->sa_len);
    614   1.7   itojun 	bcopy(dm, ep->dstmask, dp->sa_len);
    615   1.1   itojun 	ep->psw = psw;
    616   1.1   itojun 	ep->arg = arg;
    617   1.1   itojun 
    618   1.7   itojun 	error = encap_add(ep);
    619   1.7   itojun 	if (error)
    620   1.7   itojun 		goto gc;
    621   1.1   itojun 
    622   1.1   itojun 	error = 0;
    623   1.1   itojun 	splx(s);
    624   1.1   itojun 	return ep;
    625   1.1   itojun 
    626   1.7   itojun gc:
    627   1.7   itojun 	if (ep->addrpack)
    628   1.7   itojun 		free(ep->addrpack, M_NETADDR);
    629   1.7   itojun 	if (ep->maskpack)
    630   1.7   itojun 		free(ep->maskpack, M_NETADDR);
    631   1.7   itojun 	if (ep)
    632   1.7   itojun 		free(ep, M_NETADDR);
    633   1.1   itojun fail:
    634   1.1   itojun 	splx(s);
    635   1.1   itojun 	return NULL;
    636   1.1   itojun }
    637   1.1   itojun 
    638   1.1   itojun const struct encaptab *
    639  1.23    perry encap_attach_func(int af, int proto,
    640  1.26   martin     int (*func)(struct mbuf *, int, int, void *),
    641  1.23    perry     const struct protosw *psw, void *arg)
    642   1.1   itojun {
    643   1.1   itojun 	struct encaptab *ep;
    644   1.1   itojun 	int error;
    645   1.1   itojun 	int s;
    646   1.1   itojun 
    647   1.1   itojun 	s = splsoftnet();
    648   1.1   itojun 	/* sanity check on args */
    649   1.1   itojun 	if (!func) {
    650   1.1   itojun 		error = EINVAL;
    651   1.1   itojun 		goto fail;
    652   1.1   itojun 	}
    653   1.1   itojun 
    654   1.7   itojun 	error = encap_afcheck(af, NULL, NULL);
    655   1.7   itojun 	if (error)
    656   1.7   itojun 		goto fail;
    657   1.7   itojun 
    658   1.1   itojun 	ep = malloc(sizeof(*ep), M_NETADDR, M_NOWAIT);	/*XXX*/
    659   1.1   itojun 	if (ep == NULL) {
    660   1.1   itojun 		error = ENOBUFS;
    661   1.1   itojun 		goto fail;
    662   1.1   itojun 	}
    663   1.1   itojun 	bzero(ep, sizeof(*ep));
    664   1.1   itojun 
    665   1.1   itojun 	ep->af = af;
    666   1.1   itojun 	ep->proto = proto;
    667   1.1   itojun 	ep->func = func;
    668   1.1   itojun 	ep->psw = psw;
    669   1.1   itojun 	ep->arg = arg;
    670   1.1   itojun 
    671   1.7   itojun 	error = encap_add(ep);
    672   1.7   itojun 	if (error)
    673   1.7   itojun 		goto fail;
    674   1.1   itojun 
    675   1.1   itojun 	error = 0;
    676   1.1   itojun 	splx(s);
    677   1.1   itojun 	return ep;
    678   1.1   itojun 
    679   1.1   itojun fail:
    680   1.1   itojun 	splx(s);
    681   1.1   itojun 	return NULL;
    682   1.1   itojun }
    683   1.1   itojun 
    684   1.7   itojun /* XXX encap4_ctlinput() is necessary if we set DF=1 on outer IPv4 header */
    685   1.7   itojun 
    686   1.7   itojun #ifdef INET6
    687   1.7   itojun void
    688  1.29   dyoung encap6_ctlinput(int cmd, const struct sockaddr *sa, void *d0)
    689   1.7   itojun {
    690   1.7   itojun 	void *d = d0;
    691   1.7   itojun 	struct ip6_hdr *ip6;
    692   1.7   itojun 	struct mbuf *m;
    693   1.7   itojun 	int off;
    694   1.7   itojun 	struct ip6ctlparam *ip6cp = NULL;
    695   1.7   itojun 	int nxt;
    696   1.7   itojun 	struct encaptab *ep;
    697   1.7   itojun 	const struct ip6protosw *psw;
    698   1.7   itojun 
    699   1.7   itojun 	if (sa->sa_family != AF_INET6 ||
    700   1.7   itojun 	    sa->sa_len != sizeof(struct sockaddr_in6))
    701   1.7   itojun 		return;
    702   1.7   itojun 
    703   1.7   itojun 	if ((unsigned)cmd >= PRC_NCMDS)
    704   1.7   itojun 		return;
    705   1.7   itojun 	if (cmd == PRC_HOSTDEAD)
    706   1.7   itojun 		d = NULL;
    707   1.7   itojun 	else if (cmd == PRC_MSGSIZE)
    708   1.7   itojun 		; /* special code is present, see below */
    709   1.7   itojun 	else if (inet6ctlerrmap[cmd] == 0)
    710   1.7   itojun 		return;
    711   1.7   itojun 
    712   1.7   itojun 	/* if the parameter is from icmp6, decode it. */
    713   1.7   itojun 	if (d != NULL) {
    714   1.7   itojun 		ip6cp = (struct ip6ctlparam *)d;
    715   1.7   itojun 		m = ip6cp->ip6c_m;
    716   1.7   itojun 		ip6 = ip6cp->ip6c_ip6;
    717   1.7   itojun 		off = ip6cp->ip6c_off;
    718   1.7   itojun 		nxt = ip6cp->ip6c_nxt;
    719  1.15  mycroft 
    720  1.15  mycroft 		if (ip6 && cmd == PRC_MSGSIZE) {
    721  1.15  mycroft 			int valid = 0;
    722  1.15  mycroft 			struct encaptab *match;
    723  1.15  mycroft 
    724  1.15  mycroft 			/*
    725  1.15  mycroft 		 	* Check to see if we have a valid encap configuration.
    726  1.15  mycroft 		 	*/
    727  1.15  mycroft 			match = encap6_lookup(m, off, nxt, OUTBOUND);
    728  1.15  mycroft 			if (match)
    729  1.15  mycroft 				valid++;
    730  1.15  mycroft 
    731  1.15  mycroft 			/*
    732  1.15  mycroft 		 	* Depending on the value of "valid" and routing table
    733  1.15  mycroft 		 	* size (mtudisc_{hi,lo}wat), we will:
    734  1.15  mycroft 		 	* - recalcurate the new MTU and create the
    735  1.15  mycroft 		 	*   corresponding routing entry, or
    736  1.15  mycroft 		 	* - ignore the MTU change notification.
    737  1.15  mycroft 		 	*/
    738  1.15  mycroft 			icmp6_mtudisc_update((struct ip6ctlparam *)d, valid);
    739  1.15  mycroft 		}
    740   1.7   itojun 	} else {
    741   1.7   itojun 		m = NULL;
    742   1.7   itojun 		ip6 = NULL;
    743   1.7   itojun 		nxt = -1;
    744   1.7   itojun 	}
    745   1.7   itojun 
    746   1.7   itojun 	/* inform all listeners */
    747   1.7   itojun 	for (ep = LIST_FIRST(&encaptab); ep; ep = LIST_NEXT(ep, chain)) {
    748   1.7   itojun 		if (ep->af != AF_INET6)
    749   1.7   itojun 			continue;
    750   1.7   itojun 		if (ep->proto >= 0 && ep->proto != nxt)
    751   1.7   itojun 			continue;
    752   1.7   itojun 
    753   1.7   itojun 		/* should optimize by looking at address pairs */
    754   1.7   itojun 
    755   1.7   itojun 		/* XXX need to pass ep->arg or ep itself to listeners */
    756   1.7   itojun 		psw = (const struct ip6protosw *)ep->psw;
    757   1.7   itojun 		if (psw && psw->pr_ctlinput)
    758   1.7   itojun 			(*psw->pr_ctlinput)(cmd, sa, d);
    759   1.7   itojun 	}
    760   1.7   itojun 
    761   1.7   itojun 	rip6_ctlinput(cmd, sa, d0);
    762   1.7   itojun }
    763   1.7   itojun #endif
    764   1.7   itojun 
    765   1.1   itojun int
    766  1.23    perry encap_detach(const struct encaptab *cookie)
    767   1.1   itojun {
    768   1.1   itojun 	const struct encaptab *ep = cookie;
    769   1.1   itojun 	struct encaptab *p;
    770   1.7   itojun 	int error;
    771   1.1   itojun 
    772   1.1   itojun 	for (p = LIST_FIRST(&encaptab); p; p = LIST_NEXT(p, chain)) {
    773   1.1   itojun 		if (p == ep) {
    774   1.7   itojun 			error = encap_remove(p);
    775   1.7   itojun 			if (error)
    776   1.7   itojun 				return error;
    777   1.7   itojun 			if (!ep->func) {
    778   1.7   itojun 				free(p->addrpack, M_NETADDR);
    779   1.7   itojun 				free(p->maskpack, M_NETADDR);
    780   1.7   itojun 			}
    781   1.1   itojun 			free(p, M_NETADDR);	/*XXX*/
    782   1.1   itojun 			return 0;
    783   1.1   itojun 		}
    784   1.1   itojun 	}
    785   1.1   itojun 
    786   1.7   itojun 	return ENOENT;
    787   1.7   itojun }
    788   1.7   itojun 
    789   1.7   itojun #ifdef USE_RADIX
    790   1.7   itojun static struct radix_node_head *
    791  1.23    perry encap_rnh(int af)
    792   1.7   itojun {
    793   1.7   itojun 
    794   1.7   itojun 	switch (af) {
    795   1.7   itojun 	case AF_INET:
    796   1.7   itojun 		return encap_head[0];
    797   1.7   itojun #ifdef INET6
    798   1.7   itojun 	case AF_INET6:
    799   1.7   itojun 		return encap_head[1];
    800   1.7   itojun #endif
    801   1.7   itojun 	default:
    802   1.7   itojun 		return NULL;
    803   1.7   itojun 	}
    804   1.7   itojun }
    805   1.7   itojun 
    806   1.7   itojun static int
    807  1.23    perry mask_matchlen(const struct sockaddr *sa)
    808   1.7   itojun {
    809   1.7   itojun 	const char *p, *ep;
    810   1.7   itojun 	int l;
    811   1.7   itojun 
    812   1.7   itojun 	p = (const char *)sa;
    813   1.7   itojun 	ep = p + sa->sa_len;
    814   1.7   itojun 	p += 2;	/* sa_len + sa_family */
    815   1.7   itojun 
    816   1.7   itojun 	l = 0;
    817   1.7   itojun 	while (p < ep) {
    818   1.7   itojun 		l += (*p ? 8 : 0);	/* estimate */
    819   1.7   itojun 		p++;
    820   1.7   itojun 	}
    821   1.7   itojun 	return l;
    822   1.1   itojun }
    823   1.7   itojun #endif
    824   1.1   itojun 
    825   1.7   itojun #ifndef USE_RADIX
    826   1.1   itojun static int
    827  1.23    perry mask_match(const struct encaptab *ep,
    828  1.23    perry 	   const struct sockaddr *sp,
    829  1.23    perry 	   const struct sockaddr *dp)
    830   1.1   itojun {
    831   1.1   itojun 	struct sockaddr_storage s;
    832   1.1   itojun 	struct sockaddr_storage d;
    833   1.1   itojun 	int i;
    834   1.4   itojun 	const u_int8_t *p, *q;
    835   1.4   itojun 	u_int8_t *r;
    836   1.1   itojun 	int matchlen;
    837   1.1   itojun 
    838   1.7   itojun #ifdef DIAGNOSTIC
    839   1.7   itojun 	if (ep->func)
    840   1.7   itojun 		panic("wrong encaptab passed to mask_match");
    841   1.7   itojun #endif
    842   1.1   itojun 	if (sp->sa_len > sizeof(s) || dp->sa_len > sizeof(d))
    843   1.1   itojun 		return 0;
    844   1.1   itojun 	if (sp->sa_family != ep->af || dp->sa_family != ep->af)
    845   1.1   itojun 		return 0;
    846   1.7   itojun 	if (sp->sa_len != ep->src->sa_len || dp->sa_len != ep->dst->sa_len)
    847   1.1   itojun 		return 0;
    848   1.1   itojun 
    849   1.1   itojun 	matchlen = 0;
    850   1.1   itojun 
    851   1.4   itojun 	p = (const u_int8_t *)sp;
    852   1.7   itojun 	q = (const u_int8_t *)ep->srcmask;
    853   1.1   itojun 	r = (u_int8_t *)&s;
    854   1.1   itojun 	for (i = 0 ; i < sp->sa_len; i++) {
    855   1.1   itojun 		r[i] = p[i] & q[i];
    856   1.1   itojun 		/* XXX estimate */
    857   1.1   itojun 		matchlen += (q[i] ? 8 : 0);
    858   1.1   itojun 	}
    859   1.1   itojun 
    860   1.4   itojun 	p = (const u_int8_t *)dp;
    861   1.7   itojun 	q = (const u_int8_t *)ep->dstmask;
    862   1.1   itojun 	r = (u_int8_t *)&d;
    863   1.1   itojun 	for (i = 0 ; i < dp->sa_len; i++) {
    864   1.1   itojun 		r[i] = p[i] & q[i];
    865   1.1   itojun 		/* XXX rough estimate */
    866   1.1   itojun 		matchlen += (q[i] ? 8 : 0);
    867   1.1   itojun 	}
    868   1.1   itojun 
    869   1.1   itojun 	/* need to overwrite len/family portion as we don't compare them */
    870   1.1   itojun 	s.ss_len = sp->sa_len;
    871   1.1   itojun 	s.ss_family = sp->sa_family;
    872   1.1   itojun 	d.ss_len = dp->sa_len;
    873   1.1   itojun 	d.ss_family = dp->sa_family;
    874   1.1   itojun 
    875   1.7   itojun 	if (bcmp(&s, ep->src, ep->src->sa_len) == 0 &&
    876   1.7   itojun 	    bcmp(&d, ep->dst, ep->dst->sa_len) == 0) {
    877   1.1   itojun 		return matchlen;
    878   1.1   itojun 	} else
    879   1.1   itojun 		return 0;
    880   1.1   itojun }
    881   1.7   itojun #endif
    882   1.1   itojun 
    883   1.1   itojun static void
    884  1.23    perry encap_fillarg(struct mbuf *m, const struct encaptab *ep)
    885   1.1   itojun {
    886  1.12   itojun 	struct m_tag *mtag;
    887   1.1   itojun 
    888  1.12   itojun 	mtag = m_tag_get(PACKET_TAG_ENCAP, sizeof(void *), M_NOWAIT);
    889  1.12   itojun 	if (mtag) {
    890  1.12   itojun 		*(void **)(mtag + 1) = ep->arg;
    891  1.12   itojun 		m_tag_prepend(m, mtag);
    892   1.1   itojun 	}
    893   1.1   itojun }
    894   1.1   itojun 
    895   1.1   itojun void *
    896  1.23    perry encap_getarg(struct mbuf *m)
    897   1.1   itojun {
    898   1.1   itojun 	void *p;
    899  1.12   itojun 	struct m_tag *mtag;
    900   1.1   itojun 
    901   1.1   itojun 	p = NULL;
    902  1.12   itojun 	mtag = m_tag_find(m, PACKET_TAG_ENCAP, NULL);
    903  1.12   itojun 	if (mtag != NULL) {
    904  1.13   itojun 		p = *(void **)(mtag + 1);
    905  1.12   itojun 		m_tag_delete(m, mtag);
    906   1.1   itojun 	}
    907   1.1   itojun 	return p;
    908   1.1   itojun }
    909