modemmanager: fix device unplug handling

When a USB modem device is unplugged, we had to do two different
things: first, cleanup the sysfs cache; and second, set interface as
unavailable.

Those two things were never being done properly due to several
different issues:

 * The parent sysfs path retrieval logic relies on checking for which
 sysfs path has the vid/pid files. This logic obviously only works
 when the device is available, and cannot be used on e.g. removal
 events.

 * The command to cleanup the modem wait status from the sysfs cache
 was not removing the previous state properly, because the sysfs path
 variable wasn't escaped properly for the sed command.

This patch handles those issues in order to have a proper device
removal handling, by making sure the sysfs path is properly escaped in
the sed command, and by introducing a new hotplug script that runs
when the full USB device is removed.

Signed-off-by: Aleksander Morgado <aleksander@aleksander.es>

modemmanager: flag as available and no_device when initializing

Otherwise, if the modem is reseted, netifd will think that the device
is gone forever.

Signed-off-by: Aleksander Morgado <aleksander@aleksander.es>

modemmanager: add default proto configs

Signed-off-by: Aleksander Morgado <aleksander@aleksander.es>

Merge pull request #10650 from neheb/procp

procps-ng: Remove DEFAULT line

procps-ng: Remove DEFAULT line

The intended behavior is to has the buildbot select all the applets
as well as packages only selecting what they need. This should do it.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

Merge pull request #10645 from Andy2244/softethervpn5-9672

softethervpn5: update to 5.01.9672

softethervpn5: update to 5.01.9672

* 5.01.9672 release
* Cedar: handle UDP acceleration and R-UDP versions
* Mayaqua: implement R-UDP version 2, powered by ChaCha20-Poly1305
* Cedar: implement UDP acceleration version 2, powered by ChaCha20-Poly1305
* Cedar: serve new web management interface
* Cedar: implement detailed protocol info
* Mayaqua: add Windows Server 2019 to the supported operating systems list
* Cedar: various fixes
* Cedar: add "DisableIPsecAggressiveMode" option
* Make install dir for unit files configurable
* Protocol.c: adapt ClientConnectGetSocket() for new proxy functions
* Wpc.c: adapt WpcSockConnectEx() for new proxy functions
* Protocol: add ProxyCodeToCedar()
* Move generic proxy stuff from Cedar to Mayaqua
* Proto_OpenVPN.c: improve OvsProcessData(), fix out-of-bounds access found by Coverity
* Proto_OpenVPN.c: fix segmentation fault in OvsProceccRecvPacket()
* Addressing the UDP reflection amplification attack: https://github.com/SoftEtherVPN/SoftEtherVPN/issues/1001
* Mayaqua.h: include <stdarg.h> for "va_list" on Illumos
* Protocol.c: fix bug in ClientConnectGetSocket() causing custom HTTP header not to work
* Mayaqua: move HTTP functions from "Network" to "HTTP"
* Move GetMimeTypeFromFileName() and related structure to Mayaqua
* Mayaqua.h: include <stdio.h> for "FILE"
* Mayaqua.h: include <stddef.h>, for "wchar_t"
* Bump mixin-deep in /src/bin/hamcore/wwwroot/admin/default
* - Fixed the problem occurs when RPC messages between Cluster Members exceed 64Kbytes. - Fixed the RADIUS PEAP client to use the standard TLS versioning. - Implementation of a function to fix the MAC address of L3 VPN protocol by entering e.g. "MAC: 112233445566" in the "Notes" field of the user information. - Implementation of a function to fix the virtual MAC address to be assigned to the L3 VPN client as a string attribute from RADIUS server when authentication.
* Updating built-in Win32 libraries - OpenSSL 1.1.1 -> 1.1.1d - zlib 1.2.3 -> 1.2.11
* Update strtable_cn.stb
* Avoid using hardcoded paths in log file enumeration
* Fix buffer overflow during NETBIOS name resolution
* Update SEVPN.sln
* Create strtable_pt_br.stb
* ci: display error if vpntest failed
* Fix several compile warnings on MS VC++ 2008.
* Enables crash minidump for Win32 vpntest. Minidump files will be saved to the 'C:\Users\<username>\AppData\Local\Temp\vpn_debug' (for normal user) or 'src\bin\vpn_debug\' (for administrator user).
* OpenVPN: use new protocol interface
* Add interface for easy protocol implementation
* add "no-deprecated" to openssl builds "no-deprecated" is widely used in openwrt devices
* Fix LibreSSL support
* Switch to OpenSSL THREADID API
* travis-ci: update openssl, libressl
* enable sonar-scan in travis-ci builds
* Virtual: fix race condition in DHCP server which resulted in multiple clients receiving the same IP
* Mayaqua: Fix compilation without deprecated OpenSSL APIs
* Mayaqua: Replace GNU specific sys/poll.h header with POSIX poll.h
* systemd: replace deprecated CAP_SYS_ADMIN with CAP_SYSLOG

Signed-off-by: Andy Walsh <andy.walsh44+github@gmail.com>

Merge pull request #10637 from Andy2244/cifsd-tools_update-2019-11-25

cifsd-tools: update to git (2019-11-25)

Merge pull request #10582 from neheb/domo

domoticz: Fix compilation with newer python

Merge pull request #10588 from gladiac1337/pcre-jit-co

pcre: Add JIT-support for select architectures

Merge pull request #10626 from NeoRaider/move-luasrcdiet

luasrcdiet: add package (moved from luci-base package)

Merge pull request #10630 from jefferyto/python-pyopenssl-19.1.0

python-pyopenssl: Update to 19.1.0

cifsd-tools: update to git (2019-11-25)

* cifsd-tools: fix Assignment of a signed value which has type 'long'
* init: convert hide_dot_files to yes/no option
* 'read only = no' seems bugged for cifsd/smb.conf, so fix via 'writeable = yes'

Signed-off-by: Andy Walsh <andy.walsh44+github@gmail.com>

transmission: Disable webseeding

It causes 100% CPU usage in certain situations. Just disable it.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

Merge pull request #10632 from wfleurant/ygg-bump-0-3-12

yggdrasil: bump to 0.3.12

yggdrasil: bump to 0.3.12

Signed-off-by: William Fleurant <meshnet@protonmail.com>

Merge pull request #10628 from BKPepe/php7

php7: Update to version 7.2.25

python-pyopenssl: Update to 19.1.0

Signed-off-by: Jeffery To <jeffery.to@gmail.com>

php7: Update to version 7.2.25

- Fixes CVE-2019-11043

Signed-off-by: Josef Schlehofer <pepe.schlehofer@gmail.com>

Merge pull request #10519 from BKPepe/git

git: Update to version 2.24.0

Merge pull request #10627 from hnyman/collectd-fix

collectd: enable cpufreq module for ipq40xx and brcm2708_bcm2709

collectd: enable cpufreq module for ipq40xx and brcm2708_bcm2709

As some ipq40xx CPUs support frequency scaling, enable building
collectd-mod-cpufreq for ipq40xx (for private builds) and
its package architecture brcm2708_bcm2709 (for buildbot)

Signed-off-by: Hannu Nyman <hannu.nyman@iki.fi>

Merge pull request #10518 from BKPepe/clamav_update

clamav: Update to version 0.101.4

clamav: Shellcheck fixes

Fix SC2129

Signed-off-by: Rosen Penev <rosenp@gmail.com>

clamav: Update to version 0.101.4

Change deprecated options to a new one:
DetectBrokenExecutables to AlertBrokenExecutables
ArchiveBlockEncrypted to AlertEncrypted

Fixes: CVE-2019-12900 and CVE-2019-12625
Signed-off-by: Josef Schlehofer <pepe.schlehofer@gmail.com>

luasrcdiet: add package (moved from luci-base package)

We use luasrcdiet in Gluon as well. Move it from the luci feed to packages.

Signed-off-by: Matthias Schiffer <mschiffer@universe-factory.net>

Merge pull request #10625 from dibdot/adblock

adblock: update 3.8.12

adblock: update 3.8.12

* fix possible dns restart issue with DNS File Reset (race condition)

Signed-off-by: Dirk Brenken <dev@brenken.org>

Merge pull request #10621 from BKPepe/youtube

youtube-dl: Update to version 2019.11.22

Merge pull request #10622 from diizzyy/fix-circleci

circleci: Revert switch to CDN due to breakage

circleci: Revert switch to CDN due to breakage

This reverts commit 27fdddf due to it causing random failures.
Change agreed on here: https://github.com/openwrt/packages/pull/10560

Signed-off-by: Daniel Engberg <daniel.engberg.lists@pyret.net>

youtube-dl: Update to version 2019.11.22

Signed-off-by: Josef Schlehofer <pepe.schlehofer@gmail.com>

Merge pull request #10616 from Andy2244/samba4-22-11-2019

samba4: add UCI option 'disable_async_io'

Merge pull request #10615 from Andy2244/cifsd-22-11-2019

cifsd: update to git (2019-11-22)

Merge pull request #10614 from expiron/kcptun-updates

kcptun: bump to v20191112

samba4: add UCI option 'disable_async_io'

* add UCI option 'disable_async_io'
* remove [homes] options

Signed-off-by: Andy Walsh <andy.walsh44+github@gmail.com>

cifsd: update to git (2019-11-22)

* cifsd: fix uninitialized fp could be freed
* cifsd: fix potential uninitialized spnego_blob could be freed
* cifsd: smbd: replace spinlock_irqsave with spinlock
* cifsd: smbd: avoid the lack of client's send credits
* cifsd-tools: add version generation script
* cifsd-tools: do not abbrev git describe
* cifsd-tools: use 'unknown' version string if git describe fails

Signed-off-by: Andy Walsh <andy.walsh44+github@gmail.com>

pcre: Add JIT-support for select architectures

- This commit adds a config-option for JIT in libpcre(1).

  According to research published on
  https://rust-leipzig.github.io/regex/2017/03/28/comparison-of-regex-engines/
  this should give a 10x performance increase on JIT operations
  which can be desireable for high performance Apache mod_rewrite
  or haproxy reqrep operations.

  This option is available on all officially supported architecutres
  which are listed on https://pcre.org/original/doc/html/pcrejit.html#SEC3.
  Furthermore, it is enabled by default on the following
  architectures: arm, i686, x86_64.

Signed-off-by: Christian Lachner <gladiac@gmail.com>

kcptun: bump to v20191112

Signed-off-by: Chao Liu <expiron18@gmail.com>

Merge pull request #10547 from zhoreeq/yggdrasil_uci

yggdrasil: Change package configuration to UCI

Merge pull request #10605 from rs/nextdns-1.1.5

nextdns: Update version 1.1.5 + add per host config option

Merge pull request #10608 from ja-pa/bind-9.14.8

bind: update to version 9.14.8 (security fix)

yggdrasil: Change package configuration to UCI

Signed-off-by: George Iv <57254463+zhoreeq@users.noreply.github.com>

python3: bump PKG_RELEASE

Fixes: 85eee2d7f85421fd9156fb988ac865679e4e7851 (python3: fix build when
Blake2 not enabled in OpenSSL")

Signed-off-by: Josef Schlehofer <pepe.schlehofer@gmail.com>

Merge pull request #10604 from yorkie/fix/python3-build

python3: fix build when Blake2 not enabled in OpenSSL

bind: update to version 9.14.8 (security fix)

Fixes CVE-2019-6477

Signed-off-by: Jan Pavlinec <jan.pavlinec@nic.cz>

nextdns: Update version 1.1.5 + add per host config option

* Update nextdns to version 1.1.5 which adds IPv6 dual stack support.
* Add the ability to configure per host configuration id from uci.

Signed-off-by: Olivier Poitrey <rs@nextdns.io>

python3: fix build when Blake2 not enabled in OpenSSL

Refs:

- https://github.com/python/cpython/commit/7c20888e71304ecbf4bd3d595f364b7c691d30a0
- https://bugs.python.org/issue38684

Signed-off-by: Yorkie Liu <yorkiefixer@gmail.com>

unbound: Update to version 1.9.5

Fixes CVE-2019-18934

Signed-off-by: Josef Schlehofer <pepe.schlehofer@gmail.com>

Merge pull request #10596 from neheb/f

fish: Convert to CMake

Merge pull request #10595 from neheb/yam2

libyaml-cpp: Update to 0.63

Merge pull request #10583 from neheb/cif

cifs-utils: Add smbinfo utility

Merge pull request #10602 from micmac1/mary-104-deps

mariadb: prevent building against uClibc

nnn: Add a new package

Signed-off-by: Josef Schlehofer <pepe.schlehofer@gmail.com>

mariadb: prevent building against uClibc

MariaDB 10.4 includes some changes in sql/sql_statistics.cc that require
std::fmin and std::fmax. But these functions aren't available when
libstdc++ is compiled against uClibc, because uClibc doesn't pass the
test when libstdc++ checks for C99 math that supports "TR1" facilities
(macro: GLIBCXX_CHECK_C99_TR1).

Hence compilation fails:

[ 90%] Building CXX object sql/CMakeFiles/sql.dir/sql_table.cc.o
/builder/shared-workdir/build/sdk/build_dir/target-arc_archs_uClibc/mariadb-10.4.10/sql/sql_statistics.cc: In member function 'void Column_statistics_collected::finish(ha_rows, double)':
/builder/shared-workdir/build/sdk/build_dir/target-arc_archs_uClibc/mariadb-10.4.10/sql/sql_statistics.cc:2533:20: error: 'fmax' is not a member of 'std'
         val = std::fmax(estimate_total_distincts * (rows - nulls) / rows, 1.0);

This commit updates package dependencies to prevent a build against
uClibc. There is no reason to waste CPU cycles on the build bots.

The dependencies are also tidied up. In the past it made sense to define
MARIADB_COMMON_DEPENDS and MARIADB_COMMON_DEPENDS_EXE, because the
server had different dependencies compared to the library. But since the
library is now in its own package we can remove the differentiation.

Signed-off-by: Sebastian Kemper <sebastian_ml@gmx.net>

fish: Convert to CMake

CMake is faster and allows to simplify the Makefile slightly. It also
creates a slightly smaller package for some reason.

Fixed license information.

Ran postinst through shellcheck. It was using bashisms.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

Merge pull request #10600 from val-kulkov/imagemagick-package

imagemagick: update to the latest release

imagemagick: update to the latest release

Update to ImageMagick 7.0.9-5.

Signed-off-by: Val Kulkov <val.kulkov@gmail.com>

libyaml-cpp: Update to 0.63

Several Makefile cleanups for consistency.

Added ABI_VERSION.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

Merge pull request #10591 from peter-stadler/django-cors-headers

python3-django-cors-headers: update to version 3.2.0

python3-django-cors-headers: update to verson 3.2.0

Signed-off-by: Peter Stadler <peter.stadler@student.uibk.ac.at>

Merge pull request #10587 from Payne-X6/master

knot: update to version 2.9.1

Merge pull request #10585 from commodo/staging-updates1

django1,python-mysqlclient,python-dateutil: bump versions

python-dateutil: bump to version 2.8.1

Signed-off-by: Alexandru Ardelean <ardeleanalex@gmail.com>

python-mysqlclient: bump to version 1.4.5

Signed-off-by: Alexandru Ardelean <ardeleanalex@gmail.com>

Merge pull request #10581 from dibdot/travelmate

travelmate: update 1.5.3

domoticz: Add missing dependency

CMake picks up telldus-core now that it is in the tree.

Fixes #10246

Signed-off-by: Rosen Penev <rosenp@gmail.com>

domoticz: Fix compilation with newer Python

Backported upstream patch.

Fixes #10543

Signed-off-by: Rosen Penev <rosenp@gmail.com>

perl-xml-parser: Update to 2.46

Added patch that removes faulty expat check.

Minor cleanups.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

perl-www: Update to 6.41

Signed-off-by: Rosen Penev <rosenp@gmail.com>

perl-www-mechanize: Update to 1.95

Signed-off-by: Rosen Penev <rosenp@gmail.com>

perl-http-cookies: Update to 6.07

Signed-off-by: Rosen Penev <rosenp@gmail.com>

perl-html-form: Update to 6.05

Small update to pod.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

vala: Update to 0.46.5

Signed-off-by: Rosen Penev <rosenp@gmail.com>

cifs-utils: Add smbinfo utility

Switched to PKG_INSTALL for simplicity.

Added PKG_BUILD_PARALLEL for faster compilation.

Added InstallDev section.

Signed-off-by: Rosen Penev <rosenp@gmail.com>

travelmate: update 1.5.3

* some init tweaks
* use the usual wifi wrapper for reloads
* compatibility fix for latest wifi-related changes
  in master (dynamic wireless radio reconfiguration)

Signed-off-by: Dirk Brenken <dev@brenken.org>

knot: update to version 2.9.1

Signed-off-by: Jan Hak <jan.hak@nic.cz>

django1: bump to version 1.11.26

Signed-off-by: Alexandru Ardelean <ardeleanalex@gmail.com>

Merge pull request #10538 from TDT-AG/pr/20191113-mwan3

mwan3: add https ping possibility and a minor fix

mwan3: change license to SPDX compatible identifier

Signed-off-by: Florian Eckert <fe@dev.tdt.de>

qemu: bump to version 4.1.1

Signed-off-by: Yousong Zhou <yszhou4tech@gmail.com>

Merge pull request #10570 from micmac1/maria-10.4

mariadb: major bump to 10.4, split off lib package

prometheus-node-exporter-lua: bump version

Signed-off-by: Etienne Champetier <champetier.etienne@gmail.com>

prometheus-node-exporter-lua: an unavaliable wifi interface may have stopped the scraper from functioning

Signed-off-by: Zoltan Haindrich <kirk@rxd.hu>

prometheus-node-exporter-lua: respawn the process

Signed-off-by: Andre Heider <a.heider@gmail.com>

prometheus-node-exporter-lua: add a config reload trigger

Signed-off-by: Andre Heider <a.heider@gmail.com>

prometheus-node-exporter-lua: switch config to openwrt interface names

Drop the config knob 'listen_address' and introduce 'listen_interface'
and 'listen_ipv6' instead.

'listen_interface' takes an openwrt interface name ('loopback', 'lan',
'wan' etc, or "*" for all), from which the primary IP is used to listen
on. If 'listen_ipv6' is set to '1', the IPv6 adress will be used, IPv4
elsewise.

procd interface triggers are now combined with this, so if the listen
interface is not yet configured when the init script is executed, the
process start is defered, and the trigger takes care of that once
the interface is ready.

Fixes #7670

Signed-off-by: Andre Heider <a.heider@gmail.com>

Merge pull request #10576 from jefferyto/python-zope-interface-4.7.1

python-zope-interface: Update to 4.7.1, refresh patch

Merge pull request #10574 from jefferyto/python-twisted-19.10.0

python-twisted: Update to 19.10.0, refresh patches

Merge pull request #10560 from jefferyto/circleci-cdn

circleci: Change SDK download host to cdn.openwrt.org

Merge pull request #10545 from lucize/frrup

frr: add missing build options

Merge pull request #10546 from TDT-AG/pr/20191114-xtables-addons

xtables-addons: disable ASLR PIE

Merge pull request #10551 from aleksander0m/aleksander/mm-fix-any-ip-type

modemmanager: fix 'any' iptype setting

Merge pull request #10566 from rs/nextdns-1.1.3

nextdns: update to 1.1.3

nextdns: update to 1.1.3

Signed-off-by: Olivier Poitrey <rs@nextdns.io>

Merge pull request #10544 from ewsi/dcwapd-procd

dcwapd: Update init script to use procd

python-zope-interface: Update to 4.7.1, refresh patch

Signed-off-by: Jeffery To <jeffery.to@gmail.com>

Merge pull request #10572 from jefferyto/python-pyasn1-0.4.8

python-pyasn1: Update to 0.4.8

python-twisted: Update to 19.10.0, refresh patches

Signed-off-by: Jeffery To <jeffery.to@gmail.com>

python-pyasn1: Update to 0.4.8

Signed-off-by: Jeffery To <jeffery.to@gmail.com>