]> git.ipfire.org Git - thirdparty/iptables.git/log
thirdparty/iptables.git
4 years agonft: Avoid memleak in error path of nft_cmd_new()
Phil Sutter [Wed, 2 Jun 2021 09:55:20 +0000 (11:55 +0200)] 
nft: Avoid memleak in error path of nft_cmd_new()

If rule allocation fails, free the allocated 'cmd' before returning to
caller.

Fixes: a7f1e208cdf9c ("nft: split parsing from netlink commands")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agolibxtables: Fix memleak in xtopt_parse_hostmask()
Phil Sutter [Wed, 2 Jun 2021 09:04:30 +0000 (11:04 +0200)] 
libxtables: Fix memleak in xtopt_parse_hostmask()

The allocated hostmask duplicate needs to be freed again.

Fixes: 66266abd17adc ("libxtables: XTTYPE_HOSTMASK support")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: libebt_ip6: Drop unused variables
Phil Sutter [Fri, 13 Nov 2020 20:13:50 +0000 (21:13 +0100)] 
extensions: libebt_ip6: Drop unused variables

They are being assigned to but never read.

Fixes: 5c8ce9c6aede0 ("ebtables-compat: add 'ip6' match extension")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agolibxtables: Drop leftover variable in xtables_numeric_to_ip6addr()
Phil Sutter [Fri, 13 Nov 2020 20:04:39 +0000 (21:04 +0100)] 
libxtables: Drop leftover variable in xtables_numeric_to_ip6addr()

Variable 'err' was only used in removed debug code, so drop it as well.

Fixes: 7f526c9373c17 ("libxtables: xtables: remove unnecessary debug code")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: sctp: Translate --chunk-types option
Phil Sutter [Tue, 4 May 2021 14:26:42 +0000 (16:26 +0200)] 
extensions: sctp: Translate --chunk-types option

The translation is not fully complete as it is not possible to map 'any'
match type into nft syntax with a single rule. Also, 'only' match type
translation is a bit poor as it explicitly lists all chunk types that
are supposed to be missing.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: sctp: Fix nftables translation
Phil Sutter [Tue, 4 May 2021 14:03:24 +0000 (16:03 +0200)] 
extensions: sctp: Fix nftables translation

If both sport and dport was present, incorrect nft syntax was generated.

Fixes: defc7bd2bac89 ("extensions: libxt_sctp: Add translation to nft")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoUse proto_to_name() from xshared in more places
Phil Sutter [Mon, 16 Nov 2020 23:57:10 +0000 (00:57 +0100)] 
Use proto_to_name() from xshared in more places

Share the common proto name lookup code. While being at it, make proto
number variable 16bit, values may exceed 256.

This aligns iptables-nft '-p' argument printing with legacy iptables. In
practice, this should make a difference only in corner cases.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoebtables-translate: Use shared ebt_get_current_chain() function
Phil Sutter [Sat, 20 Jun 2020 08:11:52 +0000 (10:11 +0200)] 
ebtables-translate: Use shared ebt_get_current_chain() function

Drop the local reimplementation. It was barely different enough to
be buggy:

| % ebtables-nft -A foo -o eth0 -j ACCEPT
| % xtables-nft-multi ebtables-translate -A foo -o eth0 -j ACCEPT
| ebtables-translate v1.8.5 (nf_tables): Use -o only in OUTPUT, FORWARD and POSTROUTING chains
| Try `ebtables-translate -h' or 'ebtables-translate --help' for more information.

With this change, output is as expected:

| % xtables-nft-multi ebtables-translate -A foo -o eth0 -j ACCEPT
| nft add rule bridge filter foo oifname "eth0" counter accept

This is roughly the same issue fixed in commit e1ccd979e6849 ("ebtables:
fix over-eager -o checks on custom chains").

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxshared: Merge invflags handling code
Phil Sutter [Mon, 16 Nov 2020 16:20:57 +0000 (17:20 +0100)] 
xshared: Merge invflags handling code

Join invflags handling between iptables, ip6tables, xtables and
arptables. Ebtables still has its own code which differs quite a bit.

In order to use a shared set_option() routine, iptables and ip6tables
need to provide a local 'invflags' variable which is 16bits wide.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxshared: Eliminate iptables_command_state->invert
Phil Sutter [Wed, 11 Nov 2020 16:16:40 +0000 (17:16 +0100)] 
xshared: Eliminate iptables_command_state->invert

This field is not used by routines working with struct
iptables_command_state: It is merely a temporary flag used by parsers to
carry the '!' prefix until invflags have been populated (or error
checking done if unsupported).

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxtables: Make invflags 16bit wide
Phil Sutter [Mon, 2 Nov 2020 11:05:44 +0000 (12:05 +0100)] 
xtables: Make invflags 16bit wide

This is needed to merge with xtables-arp which has more builtin
options and hence needs more bits in invflags.

The only adjustment needed is the set_option() call for option '-j'
which passed a pointer to cs->fw.ip.invflags. That field can't be
changed, it belongs to uAPI. Though using args->invflags instead works
fine, aside from that '-j' doesn't support inverting so this is merely a
sanity check and no real invflag value assignment will happen.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: SECMARK: Implement revision 1
Phil Sutter [Thu, 29 Apr 2021 13:28:59 +0000 (15:28 +0200)] 
extensions: SECMARK: Implement revision 1

The changed data structure for communication with kernel allows to
exclude the field 'secid' which is populated on kernel side. Thus
this fixes the formerly always failing extension comparison breaking
rule check and rule delete by content.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft-arp: Make use of ipv4_addr_to_string()
Phil Sutter [Tue, 27 Apr 2021 08:02:34 +0000 (10:02 +0200)] 
nft-arp: Make use of ipv4_addr_to_string()

This eliminates quite a bit of redundant code apart from also dropping
use of obsolete function gethostbyaddr().

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoEliminate inet_aton() and inet_ntoa()
Phil Sutter [Tue, 27 Apr 2021 07:12:53 +0000 (09:12 +0200)] 
Eliminate inet_aton() and inet_ntoa()

Both functions are obsolete, replace them by equivalent calls to
inet_pton() and inet_ntop().

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: sctp: Explain match types in man page
Phil Sutter [Wed, 24 Mar 2021 15:18:58 +0000 (16:18 +0100)] 
extensions: sctp: Explain match types in man page

They weren't mentioned at all.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Increase BATCH_PAGE_SIZE to support huge rulesets
Phil Sutter [Tue, 6 Apr 2021 08:51:20 +0000 (10:51 +0200)] 
nft: Increase BATCH_PAGE_SIZE to support huge rulesets

In order to support the same ruleset sizes as legacy iptables, the
kernel's limit of 1024 iovecs has to be overcome. Therefore increase
each iovec's size from 128KB to 2MB.

While being at it, add a log message for failing sendmsg() call. This is
not supposed to happen, even if the transaction fails. Yet if it does,
users are left with only a "line XXX failed" message (with line number
being the COMMIT line).

Signed-off-by: Phil Sutter <phil@nwl.cc>
Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agonft: cache: Sort chains on demand only
Phil Sutter [Thu, 25 Mar 2021 15:24:39 +0000 (16:24 +0100)] 
nft: cache: Sort chains on demand only

Mandatory sorted insert of chains into cache significantly slows down
restoring of large rulesets. Since the sorted list of user-defined
chains is needed for listing and verbose output only, introduce
nft_cache_sort_chains() and call it where needed.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agofix build for missing ETH_ALEN definition
Maciej Żenczykowski [Fri, 2 Apr 2021 20:26:28 +0000 (13:26 -0700)] 
fix build for missing ETH_ALEN definition

(this is needed at least with bionic)

Signed-off-by: Maciej Żenczykowski <maze@google.com>
Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agoextensions: libxt_conntrack: use bitops for status negation
Alexander Mikhalitsyn [Thu, 1 Apr 2021 13:47:08 +0000 (16:47 +0300)] 
extensions: libxt_conntrack: use bitops for status negation

At the moment, status_xlate_print function prints statusmask as comma-separated
sequence of enabled statusmask flags. But if we have inverted conntrack ctstatus
condition then we have to use more complex expression (if more than one flag enabled)
because nft not supports syntax like "ct status != expected,assured".

Examples:
! --ctstatus CONFIRMED,ASSURED
should be translated as
ct status & (assured|confirmed) == 0

! --ctstatus CONFIRMED
can be translated as
ct status & confirmed == 0

See also netfilter/xt_conntrack.c (conntrack_mt() function as a reference).

Reproducer:
$ iptables -A INPUT -d 127.0.0.1/32 -p tcp -m conntrack ! --ctstatus expected,assured -j DROP
$ nft list ruleset
...
meta l4proto tcp ip daddr 127.0.0.1 ct status != expected,assured counter packets 0 bytes 0 drop
...

it will fail if we try to load this rule:
$ nft -f nft_test
../nft_test:6:97-97: Error: syntax error, unexpected comma, expecting newline or semicolon

Cc: Florian Westphal <fw@strlen.de>
Signed-off-by: Alexander Mikhalitsyn <alexander.mikhalitsyn@virtuozzo.com>
Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agoextensions: libxt_conntrack: use bitops for state negation
Alexander Mikhalitsyn [Thu, 1 Apr 2021 13:47:07 +0000 (16:47 +0300)] 
extensions: libxt_conntrack: use bitops for state negation

Currently, state_xlate_print function prints statemask as comma-separated sequence of enabled
statemask flags. But if we have inverted conntrack ctstate condition then we have to use more
complex expression because nft not supports syntax like "ct state != related,established".

Reproducer:
$ iptables -A INPUT -d 127.0.0.1/32 -p tcp -m conntrack ! --ctstate RELATED,ESTABLISHED -j DROP
$ nft list ruleset
...
meta l4proto tcp ip daddr 127.0.0.1 ct state != related,established counter packets 0 bytes 0 drop
...

it will fail if we try to load this rule:
$ nft -f nft_test
../nft_test:6:97-97: Error: syntax error, unexpected comma, expecting newline or semicolon

Cc: Florian Westphal <fw@strlen.de>
Signed-off-by: Alexander Mikhalitsyn <alexander.mikhalitsyn@virtuozzo.com>
Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agolibxtables: Simplify xtables_ipmask_to_cidr() a bit
Phil Sutter [Tue, 2 Mar 2021 14:07:13 +0000 (15:07 +0100)] 
libxtables: Simplify xtables_ipmask_to_cidr() a bit

Reduce the whole mask matching into a single for-loop. No need for a
shortcut, /32 masks will match in the first iteration.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxtables-translate: Fix translation of odd netmasks
Phil Sutter [Tue, 2 Mar 2021 13:50:07 +0000 (14:50 +0100)] 
xtables-translate: Fix translation of odd netmasks

Iptables supports netmasks which are not prefixes to match on (or
ignore) arbitrary bits in an address. Yet nftables' prefix notation is
available for real prefixes only, so translation is not as trivial -
print bitmask syntax for those cases.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Fix bitwise expression avoidance detection
Phil Sutter [Fri, 19 Feb 2021 15:54:57 +0000 (16:54 +0100)] 
nft: Fix bitwise expression avoidance detection

Byte-boundary prefix detection was too sloppy: Any data following the
first zero-byte was ignored. Add a follow-up loop making sure there are
no stray bits in the designated host part.

Fixes: 323259001d617 ("nft: Optimize class-based IP prefix matches")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoiptables-nft: fix -Z option
Florian Westphal [Wed, 24 Feb 2021 10:08:02 +0000 (11:08 +0100)] 
iptables-nft: fix -Z option

it zeroes the rule counters, so it needs fully populated cache.
Add a test case to cover this.

Fixes: 9d07514ac5c7a ("nft: calculate cache requirements from list of commands")
Signed-off-by: Florian Westphal <fw@strlen.de>
Acked-by: Phil Sutter <phil@nwl.cc>
4 years agoinclude: Drop libipulog.h
Phil Sutter [Tue, 16 Feb 2021 22:17:02 +0000 (23:17 +0100)] 
include: Drop libipulog.h

The file is not included anywhere, also it seems outdated compared to
the one in libnetfilter_log (which also holds the implementation).

Signed-off-by: Phil Sutter <phil@nwl.cc>
Acked-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agoebtables: Exit gracefully on invalid table names
Phil Sutter [Thu, 28 Jan 2021 00:09:56 +0000 (01:09 +0100)] 
ebtables: Exit gracefully on invalid table names

Users are able to cause program abort by passing a table name that
doesn't exist:

| # ebtables-nft -t dummy -P INPUT ACCEPT
| ebtables: nft-cache.c:455: fetch_chain_cache: Assertion `t' failed.
| Aborted

Avoid this by checking table existence just like iptables-nft does upon
parsing '-t' optarg. Since the list of tables is known and fixed,
checking the given name's length is pointless. So just drop that check
in return.

With this patch in place, output looks much better:

| # ebtables-nft -t dummy -P INPUT ACCEPT
| ebtables v1.8.7 (nf_tables): table 'dummy' does not exist
| Perhaps iptables or your kernel needs to be upgraded.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoconfigure: bump version for 1.8.7 release v1.8.7
Pablo Neira Ayuso [Wed, 13 Jan 2021 15:47:07 +0000 (16:47 +0100)] 
configure: bump version for 1.8.7 release

Update libtool version for libxtables since two new interfaces have been
added:

- xtables_parse_mac_and_mask()
- xtables_print_well_known_mac_and_mask()

Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agotests/shell: Fix nft-only/0009-needless-bitwise_0
Phil Sutter [Fri, 15 Jan 2021 20:58:48 +0000 (21:58 +0100)] 
tests/shell: Fix nft-only/0009-needless-bitwise_0

For whatever reason, stored expected output contains false handles. To
overcome this, filter the rule data lines from both expected and stored
output before comparing.

Fixes: 81a2e12851283 ("tests/shell: Add test for bitwise avoidance fixes")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Avoid pointless table/chain creation
Phil Sutter [Fri, 10 Jul 2020 16:23:50 +0000 (18:23 +0200)] 
nft: Avoid pointless table/chain creation

Accept a chain name in nft_xt_builtin_init() to limit the base chain
creation to that specific chain only.

Introduce nft_xt_builtin_table_init() to create just the table for
situations where no builtin chains are needed but the command may still
succeed in an empty ruleset, particularly when creating a custom chain,
restoring base chains or adding a set for ebtables among match.

Introduce nft_xt_fake_builtin_chains(), a function to call after cache
has been populated to fill empty base chain slots. This keeps ruleset
listing output intact if some base chains do not exist (or even the
whole ruleset is completely empty).

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agotests: shell: Drop any dump sorting in place
Phil Sutter [Mon, 6 Jul 2020 16:40:16 +0000 (18:40 +0200)] 
tests: shell: Drop any dump sorting in place

With iptables-nft-save output now sorted just like legacy one, no
sorting to unify them is needed anymore.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: cache: Sort custom chains by name
Phil Sutter [Thu, 30 Jul 2020 08:24:10 +0000 (10:24 +0200)] 
nft: cache: Sort custom chains by name

With base chains no longer residing in the tables' chain lists, they can
easily be sorted upon insertion. This on one hand aligns custom chain
ordering with legacy iptables and on the other makes it predictable,
which is very helpful when manually comparing ruleset dumps for
instance.

Adjust the one ebtables-nft test case this change breaks (as wrong
ordering is expected in there). The manual output sorting done for tests
which apply to legacy as well as nft is removed in a separate patch.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Introduce a dedicated base chain array
Phil Sutter [Tue, 7 Jul 2020 09:43:26 +0000 (11:43 +0200)] 
nft: Introduce a dedicated base chain array

Preparing for sorted chain output, introduce a per-table array holding
base chains indexed by nf_inet_hooks value. Since the latter is ordered
correctly, iterating over the array will return base chains in expected
order.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Introduce struct nft_chain
Phil Sutter [Wed, 29 Jul 2020 12:33:33 +0000 (14:33 +0200)] 
nft: Introduce struct nft_chain

Preparing for ordered output of user-defined chains, introduce a local
datatype wrapping nftnl_chain. In order to maintain the chain name hash
table, introduce nft_chain_list as well and use it instead of
nftnl_chain_list.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: cache: Move nft_chain_find() over
Phil Sutter [Thu, 10 Sep 2020 14:19:44 +0000 (16:19 +0200)] 
nft: cache: Move nft_chain_find() over

It is basically just a cache lookup, hence fits better in here.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Implement nft_chain_foreach()
Phil Sutter [Wed, 8 Jul 2020 14:09:52 +0000 (16:09 +0200)] 
nft: Implement nft_chain_foreach()

This is just a fancy wrapper around nftnl_chain_list_foreach() with the
added benefit of detecting invalid table names or uninitialized chain
lists. This in turn allows to drop the checks in flush_rule_cache() and
ignore the return code of nft_chain_foreach() as it fails only if the
dropped checks had failed, too.

Since this wrapper does the chain list lookup by itself, use of
nft_chain_list_get() shrinks down to a single place, namely inside
nft_chain_find(). Therefore fold it into the latter.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: cache: Introduce nft_cache_add_chain()
Phil Sutter [Fri, 10 Jul 2020 19:37:38 +0000 (21:37 +0200)] 
nft: cache: Introduce nft_cache_add_chain()

This is a convenience function for adding a chain to cache, for now just
a simple wrapper around nftnl_chain_list_add_tail().

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Fix selective chain compatibility checks
Phil Sutter [Wed, 23 Sep 2020 17:13:45 +0000 (19:13 +0200)] 
nft: Fix selective chain compatibility checks

Since commit 80251bc2a56ed ("nft: remove cache build calls"), 'chain'
parameter passed to nft_chain_list_get() is no longer effective.
Before, it was used to fetch only that single chain from kernel when
populating the cache. So the returned list of chains for which
compatibility checks are done would contain only that single chain.

Re-establish the single chain compat checking by introducing a dedicated
code path to nft_is_chain_compatible() doing so.

Fixes: 80251bc2a56ed ("nft: remove cache build calls")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxtables-monitor:
Florian Westphal [Mon, 14 Dec 2020 16:11:23 +0000 (17:11 +0100)] 
xtables-monitor:

'LL=0x304' is not very convenient, print LOOPBACK instead.

Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agoxtables-monitor: print packet first
Florian Westphal [Sat, 12 Dec 2020 15:15:34 +0000 (16:15 +0100)] 
xtables-monitor: print packet first

The trace mode should first print the packet that was received and
then the rule/verdict.

Furthermore, the monitor did sometimes print an extra newline.

After this patch, output is more consistent with nft monitor.

Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agoxtables-monitor: fix packet family protocol
Florian Westphal [Sat, 12 Dec 2020 15:15:33 +0000 (16:15 +0100)] 
xtables-monitor: fix packet family protocol

This prints the family passed on the command line (which might be 0).
Print the table family instead.

Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agoxtables-monitor: fix rule printing
Florian Westphal [Sat, 12 Dec 2020 15:15:32 +0000 (16:15 +0100)] 
xtables-monitor: fix rule printing

trace_print_rule does a rule dump.  This prints unrelated rules
in the same chain.  Instead the function should only request the
specific handle.

Furthermore, flush output buffer afterwards so this plays nice when
output isn't a terminal.

Signed-off-by: Florian Westphal <fw@strlen.de>
4 years agoextensions: dccp: Fix for DCCP type 'INVALID'
Phil Sutter [Wed, 2 Dec 2020 12:37:06 +0000 (13:37 +0100)] 
extensions: dccp: Fix for DCCP type 'INVALID'

Support for matching on invalid DCCP type field values was pretty
broken: While RFC4340 declares any type value from 10 to 15 invalid, the
extension's type name 'INVALID' mapped to type value 10 only. Fix this
by introduction of INVALID_OTHER_TYPE_MASK which has the remaining
invalid type's bits set and apply it if bit 10 is set after parsing the
type list. When printing, stop searching type names after printing
'INVALID' - unless numeric output was requested. The latter prints all
actual type values. Since parsing types in numeric form is not
supported, changing the output should not break existing scripts.

When translating into nftables syntax, the code returned prematurely if
'INVALID' was among the list of types - thereby emitting invalid syntax.
Instead print a real match for invalid types by use of a range
expression.

While being at it, fix syntax of translator output: If only
'--dccp-types' was translated, the output contained an extra 'dccp'. On
the other hand, if '--sport' and '--dport' was present, a required
'dccp' between the translations of both was missing.

Fixes: e40b11d7ef827 ("add support for new 'dccp' protocol match")
Fixes: c94a998724143 ("extensions: libxt_dccp: Add translation to nft")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agotests/shell: Test for fixed extension registration
Phil Sutter [Fri, 4 Dec 2020 16:44:51 +0000 (17:44 +0100)] 
tests/shell: Test for fixed extension registration

Use strace to look at iptables-restore behaviour with typically
problematic input (conntrack revision 0 is no longer supported by
current kernels) to make sure the fix in commit a1eaaceb0460b
("libxtables: Simplify pending extension registration") is still
effective.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxshared: Merge some command option-related code
Phil Sutter [Fri, 30 Oct 2020 11:42:57 +0000 (12:42 +0100)] 
xshared: Merge some command option-related code

Add OPT_FRAGMENT define into the enum of other OPT_* defines at the
right position and adjust the arptables-specific ones that follow
accordingly. Appropriately adjust inverse_for_options array in
xtables-arp.c.

Extend optflags from iptables.c by the arptables values for the sake of
completeness, then move it to xshared.h along with NUMBER_OF_OPT
definition. As a side-effect, this fixes for wrong ordering of entries
in arptables' 'optflags' copy.

Add arptables-specific bits to commands_v_options table (the speicific
options are matches on ARP header fields, just treat them like '-s'
option. This is also just a cosmetic change, arptables doesn't have a
generic_opt_check() implementation and hence doesn't use such a table.

With things potentially ready for common use, move commands_v_options
table along with generic_opt_check() and opt2char() into xshared.c and
drop the local (identical) implementations from iptables.c, ip6tables.c
xtables.c and xtables-arp.c. While doing so, fix ordering of entries in
that table: the row for CMD_ZERO_NUM was in the wrong position. Since
all moved rows though are identical, this had no effect in practice.

Fixes: d960a991350ca ("xtables-arp: Integrate OPT_* defines into xshared.h")
Fixes: 384958620abab ("use nf_tables and nf_tables compatibility interface")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoxtables-arp: Don't use ARPT_INV_*
Phil Sutter [Tue, 3 Nov 2020 11:21:29 +0000 (12:21 +0100)] 
xtables-arp: Don't use ARPT_INV_*

Arptables invflags are partly identical to IPT_INV_* ones but the bits
are differently assigned. Eliminate this incompatibility by definition
of the unique invflags in nft-arp.h on bits that don't collide with
IPT_INV_* ones, then use those in combination with IPT_INV_* ones in
arptables-specific code.

Note that ARPT_INV_ARPPRO is replaced by IPT_INV_PROTO although these
are in fact different options - yet since '-p' option is not supported
by arptables, this does not lead to a collision.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agolibxtables: Extend MAC address printing/parsing support
Phil Sutter [Tue, 3 Nov 2020 11:08:39 +0000 (12:08 +0100)] 
libxtables: Extend MAC address printing/parsing support

Adding a parser which supports common names for special MAC/mask
combinations and a print routine detecting those special addresses and
printing the respective name allows to consolidate all the various
duplicated implementations.

The side-effects of this change are manageable:

* arptables now accepts "BGA" as alias for the bridge group address
* "mac" match now prints MAC addresses in lower-case which is consistent
  with the remaining code at least

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoiptables-test.py: Try to unshare netns by default
Phil Sutter [Tue, 17 Nov 2020 18:00:45 +0000 (19:00 +0100)] 
iptables-test.py: Try to unshare netns by default

If user did not explicitly requst to "test netnamespace path", try an
import of 'unshare' module and call unshare() to avoid killing the local
host's network by accident.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoiptables-test.py: Accept multiple test files on commandline
Phil Sutter [Tue, 17 Nov 2020 15:18:33 +0000 (16:18 +0100)] 
iptables-test.py: Accept multiple test files on commandline

This allows to call the script like so:

| # ./iptables-test.py -n extensions/libebt_*.t

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoebtables: Fix for broken chain renaming
Phil Sutter [Tue, 17 Nov 2020 10:38:27 +0000 (11:38 +0100)] 
ebtables: Fix for broken chain renaming

Loading extensions pollutes 'errno' value, hence before using it to
indicate failure it should be sanitized. This was done by the called
function before the parsing/netlink split and not migrated by accident.
Move it into calling code to clarify the connection.

Fixes: a7f1e208cdf9c ("nft: split parsing from netlink commands")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agotests: shell: update format of registers in bitwise payloads.
Pablo Neira Ayuso [Mon, 16 Nov 2020 09:37:41 +0000 (10:37 +0100)] 
tests: shell: update format of registers in bitwise payloads.

libnftnl has been changed to bring the format of registers in bitwise
dumps in line with those in other types of expression.  Update the
expected output of Python test-cases.

Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agotests/shell: Add test for bitwise avoidance fixes
Phil Sutter [Tue, 10 Nov 2020 13:50:46 +0000 (14:50 +0100)] 
tests/shell: Add test for bitwise avoidance fixes

Masked address matching was recently improved to avoid bitwise
expression if the given mask covers full bytes. Make use of nft netlink
debug output to assert iptables-nft generates the right bytecode for
each situation.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoebtables: Optimize masked MAC address matches
Phil Sutter [Fri, 30 Oct 2020 13:08:33 +0000 (14:08 +0100)] 
ebtables: Optimize masked MAC address matches

Just like with class-based prefix matches in iptables-nft, optimize
masked MAC address matches if the mask is on a byte-boundary.

To reuse the logic in add_addr(), extend it to accept the payload base
value via parameter.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Optimize class-based IP prefix matches
Phil Sutter [Fri, 2 Oct 2020 07:44:38 +0000 (09:44 +0200)] 
nft: Optimize class-based IP prefix matches

Payload expression works on byte-boundaries, leverage this with suitable
prefix lengths.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoconfigure: bump version for 1.8.6 release v1.8.6
Pablo Neira Ayuso [Sat, 31 Oct 2020 17:26:57 +0000 (18:26 +0100)] 
configure: bump version for 1.8.6 release

Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agotests: shell: Improve concurrent noflush restore test a bit
Phil Sutter [Mon, 26 Oct 2020 16:25:03 +0000 (17:25 +0100)] 
tests: shell: Improve concurrent noflush restore test a bit

The described issue happens only if chain FOO does not exist at program
start so flush the ruleset after each iteration to make sure this is the
case. Sadly the bug is still not 100% reproducible on my testing VM.

While being at it, add a paragraph describing what exact situation the
test is trying to provoke.

Fixes: dac904bdcd9a1 ("nft: Fix for concurrent noflush restore calls")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Fix for concurrent noflush restore calls
Phil Sutter [Mon, 5 Oct 2020 14:06:49 +0000 (16:06 +0200)] 
nft: Fix for concurrent noflush restore calls

Transaction refresh was broken with regards to nft_chain_restore(): It
created a rule flush batch object only if the chain was found in cache
and a chain add object only if the chain was not found. Yet with
concurrent ruleset updates, one has to expect both situations:

* If a chain vanishes, the rule flush job must be skipped and instead
  the chain add job become active.

* If a chain appears, the chain add job must be skipped and instead
  rules flushed.

Change the code accordingly: Create both batch objects and set their
'skip' field depending on the situation in cache and adjust both in
nft_refresh_transaction().

As a side-effect, the implicit rule flush becomes explicit and all
handling of implicit batch jobs is dropped along with the related field
indicating such.

Reuse the 'implicit' parameter of __nft_rule_flush() to control the
initial 'skip' field value instead.

A subtle caveat is vanishing of existing chains: Creating the chain add
job based on the chain in cache causes a netlink message containing that
chain's handle which the kernel dislikes. Therefore unset the chain's
handle in that case.

Fixes: 58d7de0181f61 ("xtables: handle concurrent ruleset modifications")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agolibiptc: Avoid gcc-10 zero-length array warning
Phil Sutter [Thu, 8 Oct 2020 12:51:52 +0000 (14:51 +0200)] 
libiptc: Avoid gcc-10 zero-length array warning

Gcc-10 doesn't like the use of zero-length arrays as last struct member
to denote variable sized objects. The suggested alternative, namely to
use a flexible array member as defined by C99, is problematic as that
doesn't allow for said struct to be embedded into others. With the
relevant structs being part of kernel UAPI, this can't be precluded
though.

The call to memcpy() which triggers the warning copies data from one
struct xt_counters to another. Since this struct is flat and merely
contains two u64 fields, One can use direct assignment instead which
avoids the warning.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoiptables-nft: fix basechain policy configuration
Pablo Neira Ayuso [Fri, 2 Oct 2020 11:44:36 +0000 (13:44 +0200)] 
iptables-nft: fix basechain policy configuration

Previous to this patch, the basechain policy could not be properly
configured if it wasn't explictly set when loading the ruleset, leading
to iptables-nft-restore (and ip6tables-nft-restore) trying to send an
invalid ruleset to the kernel.

Signed-off-by: Arturo Borrero Gonzalez <arturo@netfilter.org>
Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agonft: Fix error reporting for refreshed transactions
Phil Sutter [Mon, 5 Oct 2020 13:54:35 +0000 (15:54 +0200)] 
nft: Fix error reporting for refreshed transactions

When preparing a batch from the list of batch objects in nft_action(),
the sequence number used for each object is stored within that object
for later matching against returned error messages. Though if the
transaction has to be refreshed, some of those objects may be skipped,
other objects take over their sequence number and errors are matched to
skipped objects. Avoid this by resetting the skipped object's sequence
number to zero.

Fixes: 58d7de0181f61 ("xtables: handle concurrent ruleset modifications")
Signed-off-by: Phil Sutter <phil@nwl.cc>
Reviewed-by: Florian Westphal <fw@strlen.de>
4 years agonft: Make batch_add_chain() return the added batch object
Phil Sutter [Sat, 3 Oct 2020 15:46:09 +0000 (17:46 +0200)] 
nft: Make batch_add_chain() return the added batch object

Do this so in a later patch the 'skip' field can be adjusted.

While being at it, simplify a few callers and eliminate the need for a
'ret' variable.

Signed-off-by: Phil Sutter <phil@nwl.cc>
Reviewed-by: Florian Westphal <fw@strlen.de>
4 years agolibxtables: Register multiple extensions in ascending order
Phil Sutter [Tue, 22 Sep 2020 18:01:15 +0000 (20:01 +0200)] 
libxtables: Register multiple extensions in ascending order

The newly introduced ordered insert algorithm in
xtables_register_{match,target}() works best if extensions of same name
are passed in ascending revisions. Since this is the case in about all
extensions' arrays, iterate over them from beginning to end.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agolibxtables: Simplify pending extension registration
Phil Sutter [Fri, 18 Sep 2020 16:48:14 +0000 (18:48 +0200)] 
libxtables: Simplify pending extension registration

Assuming that pending extensions are sorted by first name and family,
then descending revision, the decision where to insert a newly
registered extension may be simplified by memorizing the previous
registration (which obviously is of same name and family and higher
revision).

As a side-effect, fix for unsupported old extension revisions lingering
in pending extension list forever and being retried with every use of
the given extension. Any revision being rejected by the kernel may
safely be dropped iff a previous (read: higher) revision was accepted
already.

Yet another side-effect of this change is the removal of an unwanted
recursion by xtables_fully_register_pending_*() into itself via
xtables_find_*().

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agolibxtables: Make sure extensions register in revision order
Phil Sutter [Mon, 21 Sep 2020 11:42:06 +0000 (13:42 +0200)] 
libxtables: Make sure extensions register in revision order

Insert extensions into pending lists in ordered fashion: Group by
extension name (and, for matches, family) and order groups by descending
revision number.

This allows to simplify the later full registration considerably. Since
that involves kernel compatibility checks, the extra cycles here pay off
eventually.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: libipt_icmp: Fix translation of type 'any'
Phil Sutter [Tue, 6 Oct 2020 17:07:19 +0000 (19:07 +0200)] 
extensions: libipt_icmp: Fix translation of type 'any'

By itself, '-m icmp --icmp-type any' is a noop, it matches any icmp
types. Yet nft_ipv4_xlate() does not emit an 'ip protocol' match if
there's an extension with same name present in the rule. Luckily, legacy
iptables demands icmp match to be prepended by '-p icmp', so we can
assume this is present and just emit the 'ip protocol' match from icmp
xlate callback.

Fixes: aa158ca0fda65 ("extensions: libipt_icmp: Add translation to nft")
Signed-off-by: Phil Sutter <phil@nwl.cc>
Reviewed-by: Florian Westphal <fw@strlen.de>
4 years agonft: Fix for broken address mask match detection
Phil Sutter [Mon, 28 Sep 2020 16:57:18 +0000 (18:57 +0200)] 
nft: Fix for broken address mask match detection

Trying to decide whether a bitwise expression is needed to match parts
of a source or destination address only, add_addr() checks if all bytes
in 'mask' are 0xff or not. The check is apparently broken though as each
byte in 'mask' is cast to a signed char before comparing against 0xff,
therefore the bitwise is always added:

| # ./bad/iptables-nft -A foo -s 10.0.0.1 -j ACCEPT
| # ./good/iptables-nft -A foo -s 10.0.0.2 -j ACCEPT
| # nft --debug=netlink list chain ip filter foo
| ip filter foo 5
|   [ payload load 4b @ network header + 12 => reg 1 ]
|   [ bitwise reg 1 = (reg=1 & 0xffffffff ) ^ 0x00000000 ]
|   [ cmp eq reg 1 0x0100000a ]
|   [ counter pkts 0 bytes 0 ]
|   [ immediate reg 0 accept ]
|
| ip filter foo 6 5
|   [ payload load 4b @ network header + 12 => reg 1 ]
|   [ cmp eq reg 1 0x0200000a ]
|   [ counter pkts 0 bytes 0 ]
|   [ immediate reg 0 accept ]
|
| table ip filter {
|  chain foo {
|  ip saddr 10.0.0.1 counter packets 0 bytes 0 accept
|  ip saddr 10.0.0.2 counter packets 0 bytes 0 accept
|  }
| }

Fix the cast, safe an extra op and gain 100% performance in ideal cases.

Fixes: 56859380eb328 ("xtables-compat: avoid unneeded bitwise ops")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Use nft_chain_find() in nft_chain_builtin_init()
Phil Sutter [Tue, 4 Aug 2020 15:02:21 +0000 (17:02 +0200)] 
nft: Use nft_chain_find() in nft_chain_builtin_init()

The replaced code is basically identical to nft_chain_find()'s body.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Fold nftnl_rule_list_chain_save() into caller
Phil Sutter [Wed, 8 Jul 2020 21:03:12 +0000 (23:03 +0200)] 
nft: Fold nftnl_rule_list_chain_save() into caller

Existence of this function was mostly code-duplication: Caller already
branches depending on whether 'chain' is NULL or not and even does the
chain list lookup.

While being at it, simplify __nftnl_rule_list_chain_save function name a
bit now that the non-prefixed name is gone.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Extend use of nftnl_chain_list_foreach()
Phil Sutter [Wed, 8 Jul 2020 14:46:14 +0000 (16:46 +0200)] 
nft: Extend use of nftnl_chain_list_foreach()

Make use of the callback-based iterator in nft_rule_list(),
nft_rule_list_save(), nft_rule_flush() and nft_rule_save().

Callback code for nft_rule_list() and nft_rule_list_save is pretty
similar, so introduce and use a common callback function.

For nft_rule_save(), turn nft_chain_save_rules() into a callback - it is
not used anywhere else, anyway.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: cache: Check consistency with NFT_CL_FAKE, too
Phil Sutter [Wed, 29 Jul 2020 13:39:31 +0000 (15:39 +0200)] 
nft: cache: Check consistency with NFT_CL_FAKE, too

Athough this cache level fetches table names only, it shouldn't skip the
consistency check.

Fixes: f42bfb344af82 ("nft: cache: Re-establish cache consistency check")
Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoMakefile: Add missing man pages to CLEANFILES
Phil Sutter [Mon, 17 Aug 2020 10:29:08 +0000 (12:29 +0200)] 
Makefile: Add missing man pages to CLEANFILES

The list of man pages to remove along with 'make clean' was missing a
few built ones, add them.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Fix for ruleset flush while restoring
Phil Sutter [Fri, 31 Jul 2020 16:20:17 +0000 (18:20 +0200)] 
nft: Fix for ruleset flush while restoring

If ruleset is flushed while an instance of iptables-nft-restore is
running and has seen a COMMIT line once, it doesn't notice the
disappeared table while handling the next COMMIT. This is due to table
existence being tracked via 'initialized' boolean which is only reset
by nft_table_flush().

To fix this, drop the dedicated 'initialized' boolean and switch users
to the recently introduced 'exists' one.

As a side-effect, this causes base chain existence being checked for
each command calling nft_xt_builtin_init() as the old 'initialized' bit
was used to track if that function has been called before or not.

Signed-off-by: Phil Sutter <phil@nwl.cc>
Acked-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agoxtables-monitor: Fix ip6tables rule printing
Phil Sutter [Fri, 7 Aug 2020 14:42:07 +0000 (16:42 +0200)] 
xtables-monitor: Fix ip6tables rule printing

When printing an ip6tables rule event, false family ops are used as they
are initially looked up for AF_INET and reused no matter the current
rule's family. In practice, this means that nft_rule_print_save() calls
the wrong rule_to_cs, save_rule and clear_cs callbacks. Therefore, if a
rule specifies a source or destination address, the address is not
printed.

Fix this by performing a family lookup each time rule_cb is called.

Signed-off-by: Phil Sutter <phil@nwl.cc>
Acked-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agotests: shell: Merge and extend return codes test
Phil Sutter [Thu, 6 Aug 2020 16:52:34 +0000 (18:52 +0200)] 
tests: shell: Merge and extend return codes test

Merge scripts for iptables and ip6tables, they were widely identical.
Also extend the test by one check (removing a non-existent rule with
valid chain and target) and quote the error messages where differences
are deliberately ignored.

Signed-off-by: Phil Sutter <phil@nwl.cc>
Acked-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agonft: Fix command name in ip6tables error message
Phil Sutter [Fri, 7 Aug 2020 11:48:28 +0000 (13:48 +0200)] 
nft: Fix command name in ip6tables error message

Upon errors, ip6tables-nft would prefix its error messages with
'iptables:' instead of 'ip6tables:'. Turns out the command name was
hard-coded, use 'progname' variable instead.
While being at it, merge the two mostly identical fprintf() calls into
one.

Signed-off-by: Phil Sutter <phil@nwl.cc>
Acked-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agonft: Eliminate table list from cache
Phil Sutter [Thu, 30 Jul 2020 09:54:36 +0000 (11:54 +0200)] 
nft: Eliminate table list from cache

The full list of tables in kernel is not relevant, only those used by
iptables-nft and for those, knowing if they exist or not is sufficient.
For holding that information, the already existing 'table' array in
nft_cache suits well.

Consequently, nft_table_find() merely checks if the new 'exists' boolean
is true or not and nft_for_each_table() iterates over the builtin_table
array in nft_handle, additionally checking the boolean in cache for
whether to skip the entry or not.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoiptables: replace libnftnl table list by linux list
Pablo Neira Ayuso [Thu, 23 Jul 2020 12:15:53 +0000 (14:15 +0200)] 
iptables: replace libnftnl table list by linux list

This patch removes the libnftnl table list by linux list. This comes
with an extra memory allocation to store the nft_table object. Probably,
there is no need to cache the entire nftnl_table in the near future.

Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agonft: Reorder enum nft_table_type
Phil Sutter [Tue, 7 Jul 2020 16:40:11 +0000 (18:40 +0200)] 
nft: Reorder enum nft_table_type

This list of table types is used internally only, the actual values
don't matter that much. Reorder them to match the order in which
iptables-legacy-save prints them (if present). As a consequence, entries
in builtin_table array 'xtables_ipv4' are correctly sorted as well.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Use nft_chain_find() in two more places
Phil Sutter [Tue, 7 Jul 2020 16:35:26 +0000 (18:35 +0200)] 
nft: Use nft_chain_find() in two more places

This doesn't really increase functions' readability but prepares for
later changes.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Turn nft_chain_save() into a foreach-callback
Phil Sutter [Wed, 8 Jul 2020 13:18:48 +0000 (15:18 +0200)] 
nft: Turn nft_chain_save() into a foreach-callback

Let nftnl_chain_list_foreach() do the chain list iterating instead of
open-coding it. While being at it, simplify the policy value selection
code as well.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Drop pointless nft_xt_builtin_init() call
Phil Sutter [Fri, 10 Jul 2020 19:12:34 +0000 (21:12 +0200)] 
nft: Drop pointless nft_xt_builtin_init() call

When renaming a chain, either everything is in place already or the
command will bail anyway. So just drop this superfluous call.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: cache: Drop duplicate chain check
Phil Sutter [Fri, 10 Jul 2020 19:53:08 +0000 (21:53 +0200)] 
nft: cache: Drop duplicate chain check

When fetching chains from kernel, checking for duplicate chain names is
not needed: Nftables doesn't support them in the first place. This is
merely a leftover from when multiple cache fetches could happen and so a
bit of sanity checking was in order.

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Be lazy when flushing
Phil Sutter [Fri, 10 Jul 2020 18:42:11 +0000 (20:42 +0200)] 
nft: Be lazy when flushing

If neither chain nor verbose flag was specified and the table to flush
doesn't exist yet, no action is needed (as there is nothing to flush
anyway).

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agonft: Make table creation purely implicit
Phil Sutter [Fri, 10 Jul 2020 18:08:35 +0000 (20:08 +0200)] 
nft: Make table creation purely implicit

While asserting a required builtin chain exists, its table is created
implicitly if missing. Exploit this from xtables-restore, too: The only
actions which need adjustment are chain_new and chain_restore, i.e. when
restoring (either builtin or custom) chains.

Note: The call to nft_table_builtin_add() wasn't sufficient as it
doesn't set the table as initialized and therefore a following call to
nft_xt_builtin_init() would override non-default base chain policies.

Note2: The 'table_new' callback in 'nft_xt_restore_cb' is left in place
as xtables-translate uses it to print an explicit 'add table' command.

Note3: nft_table_new() function was already unused since a7f1e208cdf9c
("nft: split parsing from netlink commands").

Signed-off-by: Phil Sutter <phil@nwl.cc>
4 years agoextensions: libxt_conntrack: provide translation for DNAT and SNAT --ctstate
Pablo Neira Ayuso [Wed, 22 Jul 2020 11:04:34 +0000 (13:04 +0200)] 
extensions: libxt_conntrack: provide translation for DNAT and SNAT --ctstate

iptables-translate -t filter -A INPUT -m conntrack --ctstate DNAT -j ACCEPT
nft add rule ip filter INPUT ct status dnat counter accept

Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agoiptables: accept lock file name at runtime
Giuseppe Scrivano [Fri, 17 Jul 2020 08:39:40 +0000 (10:39 +0200)] 
iptables: accept lock file name at runtime

allow users to override at runtime the lock file to use through the
XTABLES_LOCKFILE environment variable.

It allows to use iptables when the user has granted enough
capabilities (e.g. a user+network namespace) to configure the network
but that lacks access to the XT_LOCK_NAME (by default placed under
/run).

$ XTABLES_LOCKFILE=/tmp/xtables unshare -rn iptables ...

Signed-off-by: Giuseppe Scrivano <gscrivan@redhat.com>
Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
4 years agotests: shell: Add help output to run-tests.sh
Phil Sutter [Mon, 6 Jul 2020 11:11:36 +0000 (13:11 +0200)] 
tests: shell: Add help output to run-tests.sh

The script has quite a few options nowadays, so add a bit of help text
also.

Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agolibxtables: compiler warning fixes for NO_SHARED_LIBS
Maciej Żenczykowski [Tue, 23 Jun 2020 23:09:02 +0000 (16:09 -0700)] 
libxtables: compiler warning fixes for NO_SHARED_LIBS

Fixes two issues with NO_SHARED_LIBS:
 - #include <dlfcn.h> is ifdef'ed out and thus dlclose()
   triggers an undeclared function compiler warning
 - dlreg_add() is unused and thus triggers an unused
   function warning

Test: builds without warnings
Signed-off-by: Maciej Żenczykowski <maze@google.com>
Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
5 years agoxtables-translate: Use proper clear_cs function
Phil Sutter [Tue, 16 Jun 2020 11:06:26 +0000 (13:06 +0200)] 
xtables-translate: Use proper clear_cs function

Avoid memleaks by performing a full free of any allocated data in local
iptables_command_state variable.

Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agoxtables-translate: don't fail if help was requested
Arturo Borrero Gonzalez [Tue, 16 Jun 2020 09:20:42 +0000 (11:20 +0200)] 
xtables-translate: don't fail if help was requested

If the user called `iptables-translate -h` then we have CMD_NONE and we should gracefully handle
this case in do_command_xlate().

Before this patch, you would see:

 user@debian:~$ sudo iptables-translate -h
 [..]
 nft Unsupported command?
 user@debian:~$ echo $?
 1

After this patch:

 user@debian:~$ sudo iptables-translate -h
 [..]
 user@debian:~$ echo $?
 0

Fixes: d4409d449c10fa ("nft: Don't exit early after printing help texts")
Acked-by: Phil Sutter <phil@nwl.cc>
Signed-off-by: Arturo Borrero Gonzalez <arturo@netfilter.org>
5 years agobuild: Fix for failing 'make uninstall'
Phil Sutter [Tue, 9 Jun 2020 10:40:24 +0000 (12:40 +0200)] 
build: Fix for failing 'make uninstall'

Support for uninstalling is severely broken:

- extensions/GNUmakefile.in defines an 'install' target but lacks a
  respective 'uninstall' one, causing 'make uninstall' abort with an
  error message.

- iptables/Makefile.am defines an 'install-exec-hook' to create the
  binary symlinks which are left in place after 'make uninstall'.

Fix these problems by defining respective targets containing code copied
from automake-generated uninstall targets.

While being at it, add a few more uninstall-hooks removing custom
directories created by 'make install' if they are empty afterwards.

Reported-by: Richard Guy Briggs <rgb@redhat.com>
Signed-off-by: Phil Sutter <phil@nwl.cc>
Tested-by: Richard Guy Briggs <rgb@redhat.com>
5 years agoxtables-restore: Fix verbose mode table flushing
Phil Sutter [Tue, 12 May 2020 10:59:42 +0000 (12:59 +0200)] 
xtables-restore: Fix verbose mode table flushing

When called with --verbose mode, iptables-nft-restore did not print
anything when flushing the table. Fix this by adding a "manual" mode to
nft_cmd_table_flush(), turning it into a wrapper around '-F' and '-X'
commands, which is exactly what iptables-legacy-restore does to flush a
table. This though requires a real cache, so don't set NFT_CL_FAKE then.

Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agobuild: resolve iptables-apply not getting installed
Jan Engelhardt [Wed, 3 Jun 2020 13:38:48 +0000 (15:38 +0200)] 
build: resolve iptables-apply not getting installed

ip6tables-apply gets installed but iptables-apply does not.
That is wrong.

» make install DESTDIR=$PWD/r
» find r -name "*app*"
r/usr/local/sbin/ip6tables-apply
r/usr/local/share/man/man8/iptables-apply.8
r/usr/local/share/man/man8/ip6tables-apply.8

Fixes: v1.8.5~87
Signed-off-by: Jan Engelhardt <jengelh@inai.de>
Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
5 years agodoc: document danger of applying REJECT to INVALID CTs
Jan Engelhardt [Wed, 3 Jun 2020 13:36:04 +0000 (15:36 +0200)] 
doc: document danger of applying REJECT to INVALID CTs

Signed-off-by: Jan Engelhardt <jengelh@inai.de>
Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
5 years agoconfigure: bump version for 1.8.5 release v1.8.5
Pablo Neira Ayuso [Wed, 3 Jun 2020 09:37:52 +0000 (11:37 +0200)] 
configure: bump version for 1.8.5 release

Signed-off-by: Pablo Neira Ayuso <pablo@netfilter.org>
5 years agobuild: bump dependency on libnftnl
Phil Sutter [Wed, 3 Jun 2020 09:41:55 +0000 (11:41 +0200)] 
build: bump dependency on libnftnl

Recently added full among match support depends on concatenated ranges
in nftables sets, a feature which was not available in libnftnl before
version 1.1.6.

Fixes: c33bae9c6c7a4 ("ebtables: among: Support mixed MAC and MAC/IP entries")
Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agoinclude: Avoid undefined left-shift in xt_sctp.h
Phil Sutter [Thu, 5 Dec 2019 12:35:25 +0000 (13:35 +0100)] 
include: Avoid undefined left-shift in xt_sctp.h

Pull the fix in kernel commit 164166558aace ("netfilter: uapi: Avoid
undefined left-shift in xt_sctp.h") into iptables repository. The
original description is:

With 'bytes(__u32)' being 32, a left-shift of 31 may happen which is
undefined for the signed 32-bit value 1. Avoid this by declaring 1 as
unsigned.

Signed-off-by: Phil Sutter <phil@nwl.cc>
Acked-by: Pablo Neira Ayuso <pablo@netfilter.org>
5 years agotests: shell: Fix syntax in ipt-restore/0010-noflush-new-chain_0
Phil Sutter [Fri, 29 May 2020 14:39:31 +0000 (16:39 +0200)] 
tests: shell: Fix syntax in ipt-restore/0010-noflush-new-chain_0

The here-doc statement missed the final delimiter. Worked anyways
because end-of-file would do the trick.

Fixes: a103fbfadf4c1 ("xtables-restore: Fix parser feed from line buffer")
Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agodoc: libxt_MARK: OUTPUT chain is fine, too
Phil Sutter [Tue, 19 May 2020 23:00:57 +0000 (01:00 +0200)] 
doc: libxt_MARK: OUTPUT chain is fine, too

In order to route packets originating from the host itself based on
fwmark, mangle table's OUTPUT chain must be used. Mention this chain as
alternative to PREROUTING.

Fixes: c9be7f153f7bf ("doc: libxt_MARK: no longer restricted to mangle table")
Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agonft: Drop save_counters callback from family_ops
Phil Sutter [Fri, 8 May 2020 13:40:52 +0000 (15:40 +0200)] 
nft: Drop save_counters callback from family_ops

All families use the same callback function, just fold it into the sole
place it's called.

Signed-off-by: Phil Sutter <phil@nwl.cc>
5 years agonft: Merge nft_*_rule_find() functions
Phil Sutter [Thu, 7 May 2020 16:53:47 +0000 (18:53 +0200)] 
nft: Merge nft_*_rule_find() functions

Both ebtables and arptables are fine with using nft_ipv46_rule_find()
instead of their own implementations. Take the chance and move the
former into nft.c as a static helper since it is used in a single place,
only. Then get rid of the callback from family_ops.

Signed-off-by: Phil Sutter <phil@nwl.cc>