Author SHA1 Message Date
kevin_janssenandClaude Opus 5.5 19163a2efe Document the OPNsense HTTPS installer, allow its paths in the public ingress and fix its diagnostic hint
Rust development slice / linux (push) Failing after 7s
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-11-21 09:31:53 +01:00
kevin_janssenandClaude Opus 5.5 7201b18300 Add an HTTPS installer for the OPNsense agent and show its command in the WebUI
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-11-21 09:25:51 +01:00
kevin_janssenandClaude Opus 5.5 20bf40adce Show a root install command without sudo for Proxmox VE hosts
Rust development slice / linux (push) Failing after 7s
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-11-21 09:01:33 +01:00
16 changed files with 504 additions and 15 deletions
+1 -1
View File
@@ -30,7 +30,7 @@ Die Spalte **Zweck** und das Gerätedetail zeigen optionalen Freitext. Unter **Z
## Vom Skript zum Ergebnis ## Vom Skript zum Ergebnis
**OPNsense:** Das Gerätegateway akzeptiert `opnsense.base/1` als eigene Inventarplattform. Im Gerätedetail erscheinen aktive PF-Filterregeln sowie getrennte Listen für konfigurierte VPNs und native Laufzeitbefunde. Fehlende Berechtigung bzw. ausgefallene Quellen sind kein Nachweis einer leeren Liste. Skriptaufträge gehören wie bei Linux und Windows unter **Aufträge**. Die WebUI bindet eine Bibliotheksrevision oder ein einmaliges POSIX-Skript an die ausgewählten OPNsense-Geräte. Für die Ausführung als `root` gelten zusätzlich zum normalen signierten Abgleich und persönlichen Freigabeverfahren `root:execute`, die zentrale Geräte- und Principalbindung sowie die unabhängige Prüfung durch den lokal provisionierten FreeBSD-Helper. [OPNsense-Betrieb](deploy/opnsense/README.md) **OPNsense:** Das Gerätegateway akzeptiert `opnsense.base/1` als eigene Inventarplattform. Im Gerätedetail erscheinen aktive PF-Filterregeln sowie getrennte Listen für konfigurierte VPNs und native Laufzeitbefunde. Fehlende Berechtigung bzw. ausgefallene Quellen sind kein Nachweis einer leeren Liste. Skriptaufträge gehören wie bei Linux und Windows unter **Aufträge**. Die WebUI bindet eine Bibliotheksrevision oder ein einmaliges POSIX-Skript an die ausgewählten OPNsense-Geräte. Für die Ausführung als `root` gelten zusätzlich zum normalen signierten Abgleich und persönlichen Freigabeverfahren `root:execute`, die zentrale Geräte- und Principalbindung sowie die unabhängige Prüfung durch den lokal provisionierten FreeBSD-Helper. Die Aufnahme erfolgt mit `opnsense.sh` über HTTPS: Das Skript fragt den Einmalcode ab, lädt das feste OPNsense-Paket des Servers nur gegen diesen Code, prüft jede Datei gegen Größe und SHA-256, nimmt das Gerät unter dem Dienstkonto `discovery` auf und bindet den Skript-Worker an diese Installation. Eine vorhandene Geräteidentität bleibt erhalten; eine Installation eines anderen Kunden wird nicht überschrieben. Der Root-Helper wird weiterhin separat eingerichtet. Die WebUI zeigt den Befehl, sobald der Server ein gültiges Paket bereithält. [OPNsense-Betrieb](deploy/opnsense/README.md)
| Schritt | Verhalten | | Schritt | Verhalten |
| --- | --- | | --- | --- |
+17
View File
@@ -304,6 +304,21 @@ RMM_BOOTSTRAP_PYTHON
) )
}), }),
) )
.route(
"/install/opnsense.sh",
get(|| async {
(
[("content-type", "text/x-shellscript")],
concat!(
include_str!("bootstrap/opnsense.sh"),
include_str!("../../../deploy/opnsense/install-dev.sh"),
"RMM_OPNSENSE_FILES\ncat >\"$work/install.py\" <<'RMM_OPNSENSE_PYTHON'\n",
include_str!("bootstrap/opnsense_install.py"),
"RMM_OPNSENSE_PYTHON\n/usr/local/bin/python3 -I \"$work/install.py\" \"$work/install-files.sh\" \"$@\"\n"
),
)
}),
)
.route( .route(
"/install/windows.ps1", "/install/windows.ps1",
get(|| async { get(|| async {
@@ -319,6 +334,8 @@ RMM_BOOTSTRAP_PYTHON
get(bootstrap::artifact), get(bootstrap::artifact),
) )
.route("/agent/v1/bootstrap/updater", get(bootstrap::updater)) .route("/agent/v1/bootstrap/updater", get(bootstrap::updater))
.route("/agent/v1/bootstrap/opnsense/current", get(bootstrap::opnsense::current))
.route("/agent/v1/bootstrap/opnsense/files/{name}", get(bootstrap::opnsense::file))
.route("/agent/v1/releases/current", get(current)) .route("/agent/v1/releases/current", get(current))
.route("/agent/v1/releases/installed", get(installed)) .route("/agent/v1/releases/installed", get(installed))
.route("/agent/v1/releases/device-trust", get(bootstrap::device_trust)) .route("/agent/v1/releases/device-trust", get(bootstrap::device_trust))
+3 -1
View File
@@ -2,6 +2,7 @@
//! the tenant's one-time enrollment token until the final enrollment consumes it. //! the tenant's one-time enrollment token until the final enrollment consumes it.
use super::*; use super::*;
mod starter; mod starter;
pub(super) mod opnsense;
pub(super) use starter::publish_missing as publish_starters; pub(super) use starter::publish_missing as publish_starters;
@@ -135,7 +136,8 @@ pub(super) async fn issue(
.await?; .await?;
tx.commit().await?; tx.commit().await?;
Ok(private_json( Ok(private_json(
json!({"token":token,"expires_at":expires,"bootstrap_origin":bootstrap_origin,"release_platforms":release_platforms}), json!({"token":token,"expires_at":expires,"bootstrap_origin":bootstrap_origin,"release_platforms":release_platforms,
"opnsense_installer":opnsense::available()}),
)) ))
} }
async fn token_tenant(s: &crate::State, h: &HeaderMap) -> Result<Uuid, Error> { async fn token_tenant(s: &crate::State, h: &HeaderMap) -> Result<Uuid, Error> {
+105
View File
@@ -0,0 +1,105 @@
//! HTTPS installation of the OPNsense agent. The program files are a fixed
//! bundle in the release configuration (`opnsense/` next to the Linux bootstrap
//! file). The public script holds no credentials; the bundle is served only
//! against a valid one-time enrollment token, until enrollment consumes it.
use super::*;
use std::collections::BTreeMap;
/// Files the installer needs; `rmm-opnsense-jobs` (script worker) is optional.
const REQUIRED: [&str; 3] = ["agent.pyz", "collect.pyz", "discovery_agent"];
const OPTIONAL: [&str; 1] = ["rmm-opnsense-jobs"];
const MAX_FILE_BYTES: u64 = 32 * 1024 * 1024;
#[derive(Deserialize, serde::Serialize, Clone)]
#[serde(deny_unknown_fields)]
pub(super) struct File {
sha256: String,
bytes: u64,
}
#[derive(Deserialize)]
#[serde(deny_unknown_fields)]
struct Manifest {
schema_version: u32,
version: String,
files: BTreeMap<String, File>,
}
fn bundle_dir() -> Result<std::path::PathBuf, Error> {
std::env::var_os("RMM_AGENT_BOOTSTRAP_LINUX_FILE")
.and_then(|slot| FsPath::new(&slot).parent().map(|p| p.join("opnsense")))
.ok_or_else(|| fail("BOOTSTRAP_NOT_CONFIGURED"))
}
fn manifest() -> Result<Manifest, Error> {
let raw = protected_file(&bundle_dir()?.join("manifest.json"), 8192)?;
let m: Manifest = serde_json::from_slice(&raw).map_err(|_| fail("OPNSENSE_BUNDLE_INVALID"))?;
valid(&m).then_some(m).ok_or_else(|| fail("OPNSENSE_BUNDLE_INVALID"))
}
fn valid(m: &Manifest) -> bool {
m.schema_version == 1
&& (1..=64).contains(&m.version.len())
&& m.version.bytes().all(|b| b.is_ascii_alphanumeric() || b"._-".contains(&b))
&& REQUIRED.iter().all(|name| m.files.contains_key(*name))
&& m.files.iter().all(|(name, f)| {
(REQUIRED.contains(&name.as_str()) || OPTIONAL.contains(&name.as_str()))
&& rmm_domain::agent_update::digest(&f.sha256)
&& (1..=MAX_FILE_BYTES).contains(&f.bytes)
})
}
/// Whether the enrollment dialog can offer the OPNsense command.
pub(super) fn available() -> bool {
manifest().is_ok()
}
pub(crate) async fn current(State(s): State<crate::State>, headers: HeaderMap) -> Result<Response, Error> {
let tenant = token_tenant(&s, &headers).await?;
let m = manifest()?;
// The device gateway is the same for every platform; the Linux slot names it.
let gateway = config(&s, Platform::LinuxX64, tenant, None).await?.gateway_origin;
let ca = s.signer.as_ref().ok_or_else(missing)?.ca.to_pem().map_err(|_| invalid())?;
let trust = device_trust_data(&s)?;
Ok(private_json(json!({"schema_version":1,"tenant_id":tenant,"version":m.version,"gateway_origin":gateway,
"ca_pem":String::from_utf8(ca).map_err(|_| invalid())?,
"job_signing_public_key_hex":trust["job_signing_public_key_hex"],"files":m.files})))
}
pub(crate) async fn file(
State(s): State<crate::State>,
headers: HeaderMap,
Path(name): Path<String>,
) -> Result<Response, Error> {
token_tenant(&s, &headers).await?;
let expected = manifest()?.files.remove(&name).ok_or_else(missing)?;
let raw = protected_file(&bundle_dir()?.join(&name), MAX_FILE_BYTES)?;
if raw.len() as u64 != expected.bytes || hex::encode(openssl::sha::sha256(&raw)) != expected.sha256 {
return Err(fail("OPNSENSE_BUNDLE_INVALID"));
}
Ok(([("content-type", "application/octet-stream"), ("cache-control", "private, no-store"),
("x-content-type-options", "nosniff")], raw).into_response())
}
#[cfg(test)]
mod tests {
use super::*;
fn bundle(files: &[(&str, u64)]) -> Manifest {
Manifest { schema_version: 1, version: "0.1.0-opnsense.6".into(),
files: files.iter().map(|(n, b)| (n.to_string(), File { sha256: "a".repeat(64), bytes: *b })).collect() }
}
#[test]
fn bundle_needs_the_program_files_and_accepts_only_known_names() {
let base = [("agent.pyz", 10), ("collect.pyz", 10), ("discovery_agent", 10)];
assert!(valid(&bundle(&base)));
assert!(valid(&bundle(&[base[0], base[1], base[2], ("rmm-opnsense-jobs", 10)])));
assert!(!valid(&bundle(&base[..2])));
assert!(!valid(&bundle(&[base[0], base[1], base[2], ("../ca.pem", 10)])));
assert!(!valid(&bundle(&[base[0], base[1], ("discovery_agent", 0)])));
assert!(!valid(&bundle(&[base[0], base[1], ("discovery_agent", MAX_FILE_BYTES + 1)])));
let mut bad = bundle(&base);
bad.version = "1.0 ; rm".into();
assert!(!valid(&bad));
}
}
+13
View File
@@ -0,0 +1,13 @@
#!/bin/sh
# OPNsense (FreeBSD amd64). Usage as root: sh opnsense.sh https://bootstrap.example
set -eu
umask 077
if [ "$(id -u)" != 0 ]; then
echo 'Bitte als root ausfuehren (Konsole: Option 8, Shell).' >&2; exit 1
fi
if [ "$(uname -s)" != FreeBSD ] || [ ! -x /usr/local/sbin/opnsense-version ] || [ ! -x /usr/local/bin/python3 ]; then
echo 'Dieses Installationsskript ist nur fuer OPNsense.' >&2; exit 1
fi
work=$(mktemp -d /var/tmp/discovery-install.XXXXXX)
trap 'rm -rf "$work"' EXIT
cat >"$work/install-files.sh" <<'RMM_OPNSENSE_FILES'
@@ -0,0 +1,199 @@
"""HTTPS installer for the OPNsense agent. Runs as root on the firewall.
Downloads the fixed program bundle with the one-time enrollment code, checks
each file against the server's size and SHA-256, installs it with the same
steps as the development installation and enrolls the device under the
unprivileged `discovery` account. An existing device identity is kept.
"""
import getpass
import hashlib
import http.client
import json
import os
from pathlib import Path
import re
import ssl
import subprocess
import sys
import time
import urllib.parse
import uuid
STATE = Path('/var/db/discovery-agent')
CONF = Path('/usr/local/etc/discovery-agent')
APP = Path('/usr/local/libexec/discovery-agent')
BINDING = CONF / 'job-binding.json'
PYTHON = '/usr/local/bin/python3'
REQUIRED = ('agent.pyz', 'collect.pyz', 'discovery_agent')
OPTIONAL = ('rmm-opnsense-jobs',)
MAX_FILE = 32 * 1024 * 1024
def stop(message):
raise SystemExit('Installation abgebrochen: ' + message)
def origin(raw):
url = urllib.parse.urlsplit(raw)
if (url.scheme != 'https' or not url.hostname or url.username or url.password or url.query
or url.fragment or url.path not in ('', '/')):
stop('Die Serveradresse muss eine reine HTTPS-Adresse sein, z. B. https://server.example:8443')
return url
def tls():
context = ssl.create_default_context()
if not context.get_ca_certs():
for bundle in ('/usr/local/openssl/cert.pem', '/usr/local/etc/ssl/cert.pem', '/etc/ssl/cert.pem'):
if os.path.isfile(bundle):
context.load_verify_locations(bundle)
break
return context
def get(base, path, token, limit):
conn = http.client.HTTPSConnection(base.hostname, base.port or 443, context=tls(), timeout=30)
try:
conn.request('GET', path, headers={'Authorization': 'Enrollment ' + token})
res = conn.getresponse()
if res.status == 401:
stop('Der Einmalcode ist ungueltig, abgelaufen oder bereits verwendet.')
if res.status != 200:
stop(f'Server antwortet auf {path} mit HTTP {res.status}.')
body = res.read(limit + 1)
if len(body) > limit:
stop('Antwort des Servers ist zu gross.')
return body
finally:
conn.close()
def metadata(raw):
meta = json.loads(raw)
files = meta.get('files')
if (meta.get('schema_version') != 1 or not isinstance(files, dict)
or not all(name in files for name in REQUIRED)
or not all(name in REQUIRED + OPTIONAL for name in files)
or not re.fullmatch('[a-f0-9]{64}', str(meta.get('job_signing_public_key_hex')))
or not str(meta.get('ca_pem', '')).startswith('-----BEGIN CERTIFICATE-----')
or not re.fullmatch(r'[A-Za-z0-9._-]{1,64}', str(meta.get('version')))
or not re.fullmatch(r'https://[a-z0-9.-]+(:[0-9]{1,5})?/?', str(meta.get('gateway_origin')))):
stop('Der Server liefert kein gueltiges OPNsense-Paket.')
uuid.UUID(meta['tenant_id'])
for item in files.values():
if not (re.fullmatch('[a-f0-9]{64}', str(item.get('sha256'))) and isinstance(item.get('bytes'), int)
and 0 < item['bytes'] <= MAX_FILE):
stop('Der Server liefert kein gueltiges OPNsense-Paket.')
return meta
def as_discovery(command, payload, timeout=60):
# `su -m` keeps root's shell; OPNsense may set an interactive menu there.
return subprocess.run(['su', '-m', 'discovery', '-c', command], input=payload, capture_output=True,
timeout=timeout, env={**os.environ, 'SHELL': '/bin/sh'})
# Runs as `discovery`: reads the device-owned key only after dropping privileges.
DEVICE_QUERY = """
import http.client,json,ssl,sys
from pathlib import Path
p=Path('/var/db/discovery-agent')
ctx=ssl.create_default_context(cafile='/usr/local/etc/discovery-agent/ca.pem')
ctx.load_cert_chain(p/'device.pem',p/'device.key')
out={}
for name,path in (('installed','/agent/v1/releases/installed'),('trust','/agent/v1/releases/device-trust')):
c=http.client.HTTPSConnection(sys.argv[1],int(sys.argv[2]),context=ctx,timeout=15)
c.request('GET',path)
r=c.getresponse()
if r.status!=200: raise SystemExit(name+' HTTP '+str(r.status))
out[name]=json.loads(r.read(65537))
print(json.dumps(out))
"""
def device_view(host, port):
res = as_discovery(f'{PYTHON} -I - {host} {port}', DEVICE_QUERY.encode())
if res.returncode:
return None
return json.loads(res.stdout)
def bind_jobs(meta, host, port):
"""Pin the job signing key for the script worker of this exact installation."""
view = device_view(host, port)
if view is None:
stop('Der Gerätekanal ist nicht erreichbar; die Skriptbindung wurde nicht angelegt.')
identity = json.loads((STATE / 'identity.json').read_bytes())
installed, key = view['installed'], view['trust']['job_signing_public_key_hex']
if (installed['tenant_id'], installed['agent_id'], installed['asset_id'], key) != (
meta['tenant_id'], identity['agent_id'], identity['asset_id'], meta['job_signing_public_key_hex']):
stop('Gerätekanal und Installationsserver widersprechen sich.')
payload = dict(agent_id=identity['agent_id'], asset_id=identity['asset_id'], tenant_id=meta['tenant_id'],
enrollment_generation=int(installed['enrollment_generation']),
assignment_version=int(installed['assignment_version']), public_key_hex=key)
with BINDING.open('x') as f:
os.fchmod(f.fileno(), 0o444)
json.dump(payload, f)
f.flush()
os.fsync(f.fileno())
def running():
return all(Path(f'/var/run/discovery-{part}.pid').is_file() for part in ('agent', 'collect'))
def main():
if len(sys.argv) not in (3, 5) or (len(sys.argv) == 5 and sys.argv[3] != '--token-file'):
stop('Aufruf: sh opnsense.sh https://server.example:8443')
files_script, base = Path(sys.argv[1]), origin(sys.argv[2])
existing = (STATE / 'identity.json').is_file() and (STATE / 'identity.json').stat().st_size > 0
if existing:
print('Vorhandene Installation gefunden. Programmdateien werden aktualisiert, die Geräteidentität bleibt.')
if len(sys.argv) == 5:
token = Path(sys.argv[4]).read_text().strip()
else:
token = getpass.getpass('Einmalcode: ').strip()
if not re.fullmatch('[0-9a-f]{64}', token):
stop('Der Einmalcode besteht aus 64 Zeichen 0-9 und a-f.')
meta = metadata(get(base, '/agent/v1/bootstrap/opnsense/current', token, 65536))
if existing and BINDING.is_file() and json.loads(BINDING.read_bytes())['tenant_id'] != meta['tenant_id']:
stop('Diese Installation gehört zu einem anderen Kunden. Für einen Kundenwechsel das Gerät neu aufnehmen.')
stage = files_script.parent / 'stage'
stage.mkdir(mode=0o700)
for name, item in sorted(meta['files'].items()):
data = get(base, '/agent/v1/bootstrap/opnsense/files/' + name, token, item['bytes'])
if len(data) != item['bytes'] or hashlib.sha256(data).hexdigest() != item['sha256']:
stop(f'{name} stimmt nicht mit der Prüfsumme des Servers überein.')
(stage / name).write_bytes(data)
(stage / 'ca.pem').write_text(meta['ca_pem'])
print(f'OPNsense-Agent {meta["version"]} geladen und geprüft. Installation läuft …')
subprocess.run(['sh', str(files_script), str(stage)], check=True)
gateway = urllib.parse.urlsplit(meta['gateway_origin'])
host, port = gateway.hostname, gateway.port or 443
if not existing:
res = as_discovery(f'{PYTHON} -I {APP}/agent.pyz enroll', (token + '\n').encode())
if res.returncode:
stop('Die Aufnahme beim Server ist fehlgeschlagen. Bitte einen neuen Einmalcode erzeugen.')
print('Gerät beim Server aufgenommen.')
if (APP / 'rmm-opnsense-jobs').is_file() and not BINDING.exists():
bind_jobs(meta, host, port)
print('Skriptausführung für diese Installation gebunden.')
before = device_view(host, port) if existing else None
generation = int(before['installed']['connection_generation']) if before else -1
subprocess.run(['service', 'discovery_agent', 'restart' if running() else 'start'], check=True,
stdout=subprocess.DEVNULL)
for _ in range(30):
time.sleep(3)
view = running() and device_view(host, port)
# A new client hello raises the connection generation and reports the installed version.
if (view and view['installed'].get('agent_version') == meta['version']
and int(view['installed']['connection_generation']) > generation):
print(f'Fertig. Das Gerät meldet sich mit Version {view["installed"]["agent_version"]} '
'und erscheint in der WebUI unter Geräte.')
return
stop('Der Dienst läuft, hat sich aber noch nicht beim Server gemeldet. '
'Diagnose: /var/log/system/latest.log und service discovery_agent restart.')
if __name__ == '__main__':
main()
+14
View File
@@ -2,6 +2,20 @@
Test-VM `discovery-opnsense` auf `qemu:///system`, 2 vCPU, 1536 MiB RAM, 12 GiB virtuelle Platte. Basis: offizielles Nano-Image OPNsense 26.7 amd64; SHA-256 des komprimierten Images `28d5e2f37e40d87468a924e3006ef10e2ddc6de485b85333d9e3958c84d0cb9d`, gegen die Herstellerankündigung verglichen und die Signatur des entpackten Images geprüft. Start bei Bedarf: `virsh -c qemu:///system start discovery-opnsense`. Konsole: `virsh -c qemu:///system console discovery-opnsense`. Das LAN `192.168.247.0/24` ist eine isolierte libvirt-Bridge, das WAN `192.168.246.0/24` verwendet NAT. Management vom Notebook: `https://192.168.247.1`. Der Hostpin stammt aus der seriellen Konsole; Zugangswerte liegen ausschließlich im privaten Zugangsspeicher des ursprünglichen Checkouts. Test-VM `discovery-opnsense` auf `qemu:///system`, 2 vCPU, 1536 MiB RAM, 12 GiB virtuelle Platte. Basis: offizielles Nano-Image OPNsense 26.7 amd64; SHA-256 des komprimierten Images `28d5e2f37e40d87468a924e3006ef10e2ddc6de485b85333d9e3958c84d0cb9d`, gegen die Herstellerankündigung verglichen und die Signatur des entpackten Images geprüft. Start bei Bedarf: `virsh -c qemu:///system start discovery-opnsense`. Konsole: `virsh -c qemu:///system console discovery-opnsense`. Das LAN `192.168.247.0/24` ist eine isolierte libvirt-Bridge, das WAN `192.168.246.0/24` verwendet NAT. Management vom Notebook: `https://192.168.247.1`. Der Hostpin stammt aus der seriellen Konsole; Zugangswerte liegen ausschließlich im privaten Zugangsspeicher des ursprünglichen Checkouts.
## Aufnahme per HTTPS
Unter **Verwaltung → Geräteaufnahme** den Kunden wählen und einen Einmalcode erstellen. Auf der Firewall als `root` (SSH oder Konsole, Option **8) Shell**) den angezeigten Befehl ausführen:
```sh
fetch -o opnsense.sh 'https://discovery.ease-technologies.de:8443/install/opnsense.sh' && sh opnsense.sh 'https://discovery.ease-technologies.de:8443'
```
Das Skript fragt nach dem **Einmalcode**. Es lädt mit diesem Code das OPNsense-Paket des Servers, prüft jede Datei gegen Größe und SHA-256 und installiert es mit denselben Schritten wie [install-dev.sh](install-dev.sh). Danach nimmt es die Firewall unter dem Dienstkonto `discovery` auf. Ist der Skript-Worker im Paket, wird er über den Gerätekanal an genau diese Installation gebunden (`job-binding.json`). Das Skript startet den Dienst und wartet, bis sich die Firewall mit der Paketversion meldet. [Installer](../../crates/server/src/bootstrap/opnsense_install.py)
Ein erneuter Lauf auf einer aufgenommenen Firewall aktualisiert nur die Programmdateien. Geräteidentität, Zertifikat, Journale und Bindung bleiben erhalten; der Einmalcode wird dabei nicht verbraucht. Gehört die vorhandene Bindung zu einem anderen Kunden, bricht das Skript ab. Für einen Kundenwechsel das Gerät neu aufnehmen. Den Root-Helper richtet der Installer nicht ein (siehe unten).
**Paket bereitstellen:** `python3 tools/dev_opnsense_bundle.py --worker-from-guest` baut `agent.pyz` und `collect.pyz` aus diesem Verzeichnis, nimmt das rc.d-Skript und den nativen Worker aus dem Testgast und legt alles mit `manifest.json` unter `devstate/mvp-releases/config/opnsense/` auf dem Entwicklungsserver ab (Eigentümer wie die übrige Releasekonfiguration, Modus 0600). Die Version stammt aus `VERSION` in `agent.py`. Ohne gültiges Paket zeigt die WebUI keinen OPNsense-Befehl. Das Paket ist nicht signiert. Seine Integrität beruht auf der HTTPS-Verbindung zum Installationsserver, über die auch das Skript selbst kommt. [Paketwerkzeug](../../tools/dev_opnsense_bundle.py)
## Quelle und Entwicklungsinstallation ## Quelle und Entwicklungsinstallation
Der OPNsense-eigene Python-Interpreter führt zwei Zipapps aus. Der lokale Collector läuft mit den für PF, VPN-Sockets und Konfiguration nötigen Rechten. Er veröffentlicht ausschließlich den ausgewählten Bestand atomar in `/var/db/discovery-observations/inventory.json`. Das Dienstkonto `discovery` kann die Datei lesen, aber weder Collector noch Cache verändern. Nur dieses Konto hält die Geräteidentität und nutzt den ausgehenden HTTPS-Kanal. Für die Erfassung wird keine eingehende Netzwerkverbindung benötigt. Der OPNsense-eigene Python-Interpreter führt zwei Zipapps aus. Der lokale Collector läuft mit den für PF, VPN-Sockets und Konfiguration nötigen Rechten. Er veröffentlicht ausschließlich den ausgewählten Bestand atomar in `/var/db/discovery-observations/inventory.json`. Das Dienstkonto `discovery` kann die Datei lesen, aber weder Collector noch Cache verändern. Nur dieses Konto hält die Geräteidentität und nutzt den ausgehenden HTTPS-Kanal. Für die Erfassung wird keine eingehende Netzwerkverbindung benötigt.
+1 -1
View File
@@ -4,7 +4,7 @@ Ein Proxmox-VE-Host ist ein Debian-System. Er verwendet deshalb den regulären L
## Aufnahme ## Aufnahme
Für die Aufnahme den gemeinsamen [HTTPS-Installer](../../docs/development.md#linux-gerät-per-https-aufnehmen) als `root` auf dem Proxmox-Host ausführen. Der Installer erkennt Proxmox VE an `pveversion` und `pveum` und richtet einen nur lesenden Zugang ein: Für die Aufnahme den gemeinsamen [HTTPS-Installer](../../docs/development.md#linux-gerät-per-https-aufnehmen) als `root` auf dem Proxmox-Host ausführen. Proxmox VE enthält kein `sudo`. Die WebUI zeigt unter **Gerät aufnehmen** deshalb einen eigenen Befehl „Proxmox VE“, der `linux.sh` direkt mit `sh` startet. Der Installer erkennt Proxmox VE an `pveversion` und `pveum` und richtet einen nur lesenden Zugang ein:
- Proxmox-Benutzer `rmm-discovery@pve` und das privilegiengetrennte API-Token `rmm-discovery@pve!inventory`. Beide erhalten auf `/` ausschließlich die Rolle `PVEAuditor`. Bei einem privilegiengetrennten Token gilt die Schnittmenge aus Benutzer- und Tokenrechten. Deshalb braucht auch der Benutzer die Rolle. - Proxmox-Benutzer `rmm-discovery@pve` und das privilegiengetrennte API-Token `rmm-discovery@pve!inventory`. Beide erhalten auf `/` ausschließlich die Rolle `PVEAuditor`. Bei einem privilegiengetrennten Token gilt die Schnittmenge aus Benutzer- und Tokenrechten. Deshalb braucht auch der Benutzer die Rolle.
- Den Tokenwert schreibt er nach `/opt/rust-discovery-client/proxmox-token` (Eigentümer root, Modus 0600). Die Cluster-CA landet als `/opt/rust-discovery-client/pve-ca.pem`. - Den Tokenwert schreibt er nach `/opt/rust-discovery-client/proxmox-token` (Eigentümer root, Modus 0600). Die Cluster-CA landet als `/opt/rust-discovery-client/pve-ca.pem`.
+1 -1
View File
@@ -33,7 +33,7 @@ http {
proxy_set_header Host discovery.ease-technologies.de; proxy_set_header Host discovery.ease-technologies.de;
proxy_set_header Content-Length ""; proxy_set_header Content-Length "";
proxy_set_header Authorization $http_authorization; proxy_set_header Authorization $http_authorization;
location ~ "^/(install/(linux\.sh|windows\.ps1)|agent/v1/bootstrap/(current|updater|releases/[0-9a-f-]{36}/artifacts/[0-9a-f-]{36}))$" { location ~ "^/(install/(linux\.sh|windows\.ps1|opnsense\.sh)|agent/v1/bootstrap/(current|updater|releases/[0-9a-f-]{36}/artifacts/[0-9a-f-]{36}|opnsense/current|opnsense/files/(agent\.pyz|collect\.pyz|discovery_agent|rmm-opnsense-jobs)))$" {
limit_except GET { deny all; } limit_except GET { deny all; }
proxy_pass https://127.0.0.1:18444$uri$is_args$args; proxy_pass https://127.0.0.1:18444$uri$is_args$args;
} }
+1 -1
View File
@@ -75,7 +75,7 @@ Unter **Verwaltung → Geräteaufnahme** den Kunden wählen und einen Einmalcode
curl --fail --show-error --silent 'https://discovery.ease-technologies.de:8443/install/linux.sh' -o linux.sh && sudo sh linux.sh 'https://discovery.ease-technologies.de:8443' --enable-admin-scripts curl --fail --show-error --silent 'https://discovery.ease-technologies.de:8443/install/linux.sh' -o linux.sh && sudo sh linux.sh 'https://discovery.ease-technologies.de:8443' --enable-admin-scripts
``` ```
Den Einmalcode auf Nachfrage eingeben. Bei direkter Root-Anmeldung entfällt `sudo`. `--enable-admin-scripts` aktiviert den lokalen Skript-Helper. Zusätzliche zentrale Geräterechte und die WebUI-Genehmigung gelten pro Auftrag. Den Einmalcode auf Nachfrage eingeben. Bei direkter Root-Anmeldung entfällt `sudo`. Für OPNsense-Firewalls gibt es einen eigenen Befehl mit `opnsense.sh`. [OPNsense-Aufnahme](../deploy/opnsense/README.md#aufnahme-per-https) `--enable-admin-scripts` aktiviert den lokalen Skript-Helper. Zusätzliche zentrale Geräterechte und die WebUI-Genehmigung gelten pro Auftrag.
Auf einem bereits aufgenommenen Linux-Gerät kann der gleiche HTTPS-Installer den Root-Skript-Helper nachträglich einrichten. Dazu `--enable-admin-scripts` verwenden. Der Installer übernimmt die vorhandene Geräteidentität. Für die WebUI muss die zentrale Geräteregel zusätzlich das berechtigte Konto und die authentisiert gemeldete Helper-Bindung enthalten. [Richtlinie und Berechtigungen](public-access.md#administrator-skripte-anfordern) Auf einem bereits aufgenommenen Linux-Gerät kann der gleiche HTTPS-Installer den Root-Skript-Helper nachträglich einrichten. Dazu `--enable-admin-scripts` verwenden. Der Installer übernimmt die vorhandene Geräteidentität. Für die WebUI muss die zentrale Geräteregel zusätzlich das berechtigte Konto und die authentisiert gemeldete Helper-Bindung enthalten. [Richtlinie und Berechtigungen](public-access.md#administrator-skripte-anfordern)
+1
View File
@@ -11,6 +11,7 @@
| Genehmigung und Zustellung | [Genehmigungseingang](../crates/server/src/approvals.rs), [Entscheidung und Freigabe](../crates/server/src/jobs.rs), [Gerätegateway](../crates/server/src/job_gateway.rs), [Abgleich im Agenten](../crates/agent-core/src/reconcile.rs) | | Genehmigung und Zustellung | [Genehmigungseingang](../crates/server/src/approvals.rs), [Entscheidung und Freigabe](../crates/server/src/jobs.rs), [Gerätegateway](../crates/server/src/job_gateway.rs), [Abgleich im Agenten](../crates/agent-core/src/reconcile.rs) |
| MCP und Administrator-Skripte | [Werkzeuge](../crates/server/src/mcp.rs), [Tokenrechte](../crates/server/src/mcp_tokens.rs), [Helper und zentrale Geräteregel](../crates/server/src/managed_scripts.rs) | | MCP und Administrator-Skripte | [Werkzeuge](../crates/server/src/mcp.rs), [Tokenrechte](../crates/server/src/mcp_tokens.rs), [Helper und zentrale Geräteregel](../crates/server/src/managed_scripts.rs) |
| Geräteaufnahme und Releasewechsel | [HTTPS-Installer und Lebenszyklus](../crates/server/src/bootstrap), [Releasekatalog](../crates/server/src/agent_updates.rs), [Signaturprüfung](../crates/updater/src/manifest.rs) | | Geräteaufnahme und Releasewechsel | [HTTPS-Installer und Lebenszyklus](../crates/server/src/bootstrap), [Releasekatalog](../crates/server/src/agent_updates.rs), [Signaturprüfung](../crates/updater/src/manifest.rs) |
| OPNsense-Aufnahme per HTTPS | [Skript](../crates/server/src/bootstrap/opnsense.sh), [Installer](../crates/server/src/bootstrap/opnsense_install.py), [Paketauslieferung](../crates/server/src/bootstrap/opnsense.rs), [Paketwerkzeug](../tools/dev_opnsense_bundle.py) |
| Native Laufzeiten | [Linux-Agent](../crates/agent/src/main.rs), [Linux-Inventar und Skripte](../crates/agent-linux/src), [Windows-Agent](../crates/agent-windows/src/runtime.rs), [Agentprotokoll](../proto/BACKEND_CONTRACT.md) | | Native Laufzeiten | [Linux-Agent](../crates/agent/src/main.rs), [Linux-Inventar und Skripte](../crates/agent-linux/src), [Windows-Agent](../crates/agent-windows/src/runtime.rs), [Agentprotokoll](../proto/BACKEND_CONTRACT.md) |
| Proxmox-Host und VM-Zuordnung | [Sammelmodul](../crates/agent-linux/src/inventory/proxmox.rs), [Validierung und Backupbewertung](../crates/domain/src/inventory_document/proxmox.rs), [automatische Zuordnung](../crates/server/src/proxmox_links.sql), [Detailansicht](../web/src/proxmox.tsx), [Betrieb](../deploy/proxmox/README.md) | | Proxmox-Host und VM-Zuordnung | [Sammelmodul](../crates/agent-linux/src/inventory/proxmox.rs), [Validierung und Backupbewertung](../crates/domain/src/inventory_document/proxmox.rs), [automatische Zuordnung](../crates/server/src/proxmox_links.sql), [Detailansicht](../web/src/proxmox.tsx), [Betrieb](../deploy/proxmox/README.md) |
+2
View File
@@ -54,6 +54,8 @@ Alle acht Versuche lieferten Exitcode 0. Bei beiden Neustarts wurde die Wiederan
| Gerätetyp in der Übersicht | Spalte „Type“ nach „Hostname“ mit `physical`, `virtual` und `hypervisor`. Erkannte Proxmox-VE-Hosts zeigen `Proxmox VE` als OS. Am 18. November wurde `c599baa` auf dem öffentlichen Server aktiviert. Der Serverrunner bestätigte API, Gateway und öffentlichen API-Dienst mit Binärhash `4f9c8c60…`. Der öffentliche WebUI-Index stimmte mit dem gebauten Bundle überein. Die unveränderten Geräteidentitäten meldeten nach regulärem signierten Update `virtual` auf Linux mit `0.1.0-mvp.7` um 16:45 UTC und Windows mit `0.1.17` um 16:47 UTC. Geräteliste, Details, Mobilansicht mit 390 px und Historie sind in der öffentlichen WebUI geprüft. Beide Pakete sind in Development A und B und als Starter für leere Kataloge veröffentlicht. Die Typen `physical` und `hypervisor` sind mit Testdaten geprüft. Die Feldabnahme auf einem physischen Gerät und einem Proxmox-VE-Host steht aus. [Inventarprojektion](../crates/server/src/devices.rs) · [Geräteansicht](../web/src/devices.tsx) | | Gerätetyp in der Übersicht | Spalte „Type“ nach „Hostname“ mit `physical`, `virtual` und `hypervisor`. Erkannte Proxmox-VE-Hosts zeigen `Proxmox VE` als OS. Am 18. November wurde `c599baa` auf dem öffentlichen Server aktiviert. Der Serverrunner bestätigte API, Gateway und öffentlichen API-Dienst mit Binärhash `4f9c8c60…`. Der öffentliche WebUI-Index stimmte mit dem gebauten Bundle überein. Die unveränderten Geräteidentitäten meldeten nach regulärem signierten Update `virtual` auf Linux mit `0.1.0-mvp.7` um 16:45 UTC und Windows mit `0.1.17` um 16:47 UTC. Geräteliste, Details, Mobilansicht mit 390 px und Historie sind in der öffentlichen WebUI geprüft. Beide Pakete sind in Development A und B und als Starter für leere Kataloge veröffentlicht. Die Typen `physical` und `hypervisor` sind mit Testdaten geprüft. Die Feldabnahme auf einem physischen Gerät und einem Proxmox-VE-Host steht aus. [Inventarprojektion](../crates/server/src/devices.rs) · [Geräteansicht](../web/src/devices.tsx) |
| Hostzuordnung bei VMs | Die WebUI zeigt einen zugeordneten Hypervisor direkt an der VM. Der Browsertest prüfte Zuordnung, Verlinkung, Entfernen und den Hetzner-Platzhalter bei 390 px Breite. In PostgreSQL wurden die Page-Grenze, archivierte Hypervisoren und die Trennung der Kunden geprüft. 80 WebUI-Tests, vier Browsertests und fünf Rust-Gerätetests bestanden. Revision `bcd3bd8` wurde am 18. November um 21:43 UTC mit Schema 43 aktiviert. Der Serverrunner bestätigte die TLS-Healthchecks und der öffentliche Index entsprach dem Build. In der öffentlichen WebUI zeigten zwei vorhandene Hetzner-VMs den Platzhalter auf Desktop und Mobil. Die Auswahl war im Gerätedetail verfügbar. Der Bestand enthielt zum Prüfzeitpunkt keinen registrierten Hypervisor. [Geräteansicht](../web/src/device-hypervisor.tsx) · [Hostsuche](../crates/server/src/hypervisors.sql) | | Hostzuordnung bei VMs | Die WebUI zeigt einen zugeordneten Hypervisor direkt an der VM. Der Browsertest prüfte Zuordnung, Verlinkung, Entfernen und den Hetzner-Platzhalter bei 390 px Breite. In PostgreSQL wurden die Page-Grenze, archivierte Hypervisoren und die Trennung der Kunden geprüft. 80 WebUI-Tests, vier Browsertests und fünf Rust-Gerätetests bestanden. Revision `bcd3bd8` wurde am 18. November um 21:43 UTC mit Schema 43 aktiviert. Der Serverrunner bestätigte die TLS-Healthchecks und der öffentliche Index entsprach dem Build. In der öffentlichen WebUI zeigten zwei vorhandene Hetzner-VMs den Platzhalter auf Desktop und Mobil. Die Auswahl war im Gerätedetail verfügbar. Der Bestand enthielt zum Prüfzeitpunkt keinen registrierten Hypervisor. [Geräteansicht](../web/src/device-hypervisor.tsx) · [Hostsuche](../crates/server/src/hypervisors.sql) |
| Gruppierte Geräteübersicht | Der Bestand zeigt je Hypervisor einen Block mit Host und eingerückten VMs, danach „Hetzner Cloud“, „Physische Geräte“ und „Nicht zugeordnet“. Am 20. November bestanden 87 WebUI-Tests, darunter vier zur Gruppierung (Reihenfolge, Host außerhalb der Seite, Kundentrennung, manuell zugeordneter Host), und die lokale Browsersuite mit dem angepassten Zuordnungstest bei 390 px Breite. Desktop- und Mobildarstellung wurden mit Beispieldaten im Browser angesehen. Eine Sichtprüfung mit persönlicher Sitzung auf dem Entwicklungsserver steht aus. [Gruppierung](../web/src/device-groups.ts) · [Geräteliste](../web/src/devices.tsx) | | Gruppierte Geräteübersicht | Der Bestand zeigt je Hypervisor einen Block mit Host und eingerückten VMs, danach „Hetzner Cloud“, „Physische Geräte“ und „Nicht zugeordnet“. Am 20. November bestanden 87 WebUI-Tests, darunter vier zur Gruppierung (Reihenfolge, Host außerhalb der Seite, Kundentrennung, manuell zugeordneter Host), und die lokale Browsersuite mit dem angepassten Zuordnungstest bei 390 px Breite. Desktop- und Mobildarstellung wurden mit Beispieldaten im Browser angesehen. Eine Sichtprüfung mit persönlicher Sitzung auf dem Entwicklungsserver steht aus. [Gruppierung](../web/src/device-groups.ts) · [Geräteliste](../web/src/devices.tsx) |
| OPNsense-Aufnahme per HTTPS | Am 21. November wurde Revision `7201b18` aktiviert, das OPNsense-Paket `0.1.0-opnsense.6` mit nativem Worker auf dem Server abgelegt und der öffentliche Ingress um die OPNsense-Pfade ergänzt. Öffentlich: `/install/opnsense.sh` 200, Paketmetadaten und Dateien ohne gültigen Code 401, nicht gelistete Dateinamen 404. Auf der Test-VM `discovery-opnsense` (Kunde `9d730e0a-…`) lud der Befehl das Skript mit `fetch`, prüfte das Paket und aktualisierte die Programmdateien. Danach entsprachen `agent.pyz`, `collect.pyz` und `rmm-opnsense-jobs` den SHA-256 des Servers. Identität, Gerätschlüssel, Job-Bindung und Root-Policy waren unverändert, Agent, Collector und Root-Helper liefen, und die Firewall meldete sich mit neuer Verbindungsgeneration und Version `0.1.0-opnsense.6`. Ein ungültiger Code brach vor jeder Änderung ab. Die Erstaufnahme einer neuen Firewall ist live noch nicht geprüft. 87 WebUI-Tests und die Browsersuite bestanden. [Installer](../crates/server/src/bootstrap/opnsense_install.py) · [Paketauslieferung](../crates/server/src/bootstrap/opnsense.rs) |
| Installationsbefehl für Proxmox VE | Proxmox VE 9.2 enthält kein `sudo`. Auf dem Testhost am 21. November geprüft: `curl` und `python3` vorhanden, `sudo` fehlt. Der Linux-Befehl der WebUI brach dort deshalb ab. **Gerät aufnehmen** zeigt bei verfügbarem x86-64-Release zusätzlich den Block „Proxmox VE“ mit demselben Installer ohne `sudo` für eine Root-Shell, mit und ohne `--enable-admin-scripts`. 87 WebUI-Tests und der angepasste Browsertest der Aufnahmebefehle bestanden. [Aufnahme](../web/src/main.tsx) · [Proxmox-Host](../deploy/proxmox/README.md) |
| Von der Auswahl zur Ausgabe | Die WebUI bindet die ausgewählte Skriptversion, zeigt den Inhalt vor Genehmigung und verlinkt das Ergebnis je Gerät. Ein abgelehnter Antrag erzeugte null Jobs. [Auftragsablauf](evidence/webui-auftragsablauf-20261117.json) · [Ergebnislinks und Entscheidungen](evidence/webui-order-history-20261118.json) Auf OTRS ARM64 wurde der Root-Skript-Helper nachträglich mit dem HTTPS-Installer aktiviert. Die zentrale Geräteregel bindet das berechtigte WebUI-Konto an diese Installation und den signierten Helper. Die öffentliche WebUI-Vorschau akzeptierte Root für OTRS. Die Probe blieb bei einer Vorschau und erzeugte null Anträge, Jobs, Outbox-Einträge und Startgrants. [OTRS-Nachweis](evidence/linux-arm64-otrs-root-helper-20261118.json) | | Von der Auswahl zur Ausgabe | Die WebUI bindet die ausgewählte Skriptversion, zeigt den Inhalt vor Genehmigung und verlinkt das Ergebnis je Gerät. Ein abgelehnter Antrag erzeugte null Jobs. [Auftragsablauf](evidence/webui-auftragsablauf-20261117.json) · [Ergebnislinks und Entscheidungen](evidence/webui-order-history-20261118.json) Auf OTRS ARM64 wurde der Root-Skript-Helper nachträglich mit dem HTTPS-Installer aktiviert. Die zentrale Geräteregel bindet das berechtigte WebUI-Konto an diese Installation und den signierten Helper. Die öffentliche WebUI-Vorschau akzeptierte Root für OTRS. Die Probe blieb bei einer Vorschau und erzeugte null Anträge, Jobs, Outbox-Einträge und Startgrants. [OTRS-Nachweis](evidence/linux-arm64-otrs-root-helper-20261118.json) |
| Frische Installation und periodisches Agentupdate | Beide VMs wurden über HTTPS aufgenommen und übernahmen anschließend ein signiertes Folgepaket mit derselben Geräteidentität. Auf Windows ist der öffentliche GNU-Kanal einschließlich Prüfung des offiziellen Schlüssels belegt. [Linux](evidence/linux-public-installer-update-20261117.json) · [Windows GNU](evidence/windows-gnu-official-vm-20261118.json). ARM64 erweitert denselben HTTPS-Installer mit automatischer Architekturerkennung. Release `0.1.0-arm64.1` ist veröffentlicht und als Starter verfügbar. Auf Ubuntu 22.04.5 ARM64 wurden die öffentlichen Downloads, die Signaturprüfung, die Ablehnung einer veränderten Agentdatei und der native Start aller drei Dateien im Prüfmodus beobachtet. OTRS ist mit Gerätezertifikat aufgenommen und meldet authentisierte Heartbeats. Die erste Kontaktprüfung wartet seit der Korrektur auf das Zertifikat. Der öffentliche Installer lief auf OTRS erneut ohne Traceback und ohne neuen Einmalcode. Der ARM64-Katalogabruf ist bestätigt. Ein späterer Versionswechsel auf ARM64 steht aus. [ARM64-Release](evidence/linux-arm64-installer-20261118.json) · [Geräteaufnahme und Nachtest](evidence/linux-arm64-enrollment-heartbeat-20261118.json) | | Frische Installation und periodisches Agentupdate | Beide VMs wurden über HTTPS aufgenommen und übernahmen anschließend ein signiertes Folgepaket mit derselben Geräteidentität. Auf Windows ist der öffentliche GNU-Kanal einschließlich Prüfung des offiziellen Schlüssels belegt. [Linux](evidence/linux-public-installer-update-20261117.json) · [Windows GNU](evidence/windows-gnu-official-vm-20261118.json). ARM64 erweitert denselben HTTPS-Installer mit automatischer Architekturerkennung. Release `0.1.0-arm64.1` ist veröffentlicht und als Starter verfügbar. Auf Ubuntu 22.04.5 ARM64 wurden die öffentlichen Downloads, die Signaturprüfung, die Ablehnung einer veränderten Agentdatei und der native Start aller drei Dateien im Prüfmodus beobachtet. OTRS ist mit Gerätezertifikat aufgenommen und meldet authentisierte Heartbeats. Die erste Kontaktprüfung wartet seit der Korrektur auf das Zertifikat. Der öffentliche Installer lief auf OTRS erneut ohne Traceback und ohne neuen Einmalcode. Der ARM64-Katalogabruf ist bestätigt. Ein späterer Versionswechsel auf ARM64 steht aus. [ARM64-Release](evidence/linux-arm64-installer-20261118.json) · [Geräteaufnahme und Nachtest](evidence/linux-arm64-enrollment-heartbeat-20261118.json) |
| Erste Windows-Meldung ohne `DisplayVersion` | Bei einem betroffenen Gerät nahm das Gateway das Enrollment und die authentisierten Verbindungsaufbauten an, erhielt aber weder Inventar noch Heartbeat. Windows GNU `0.1.26` aus `037b5e3` nutzt bei fehlendem `DisplayVersion` den Registrywert `ReleaseId` oder meldet Produkt und Build ohne Versionsbezeichnung. Drei Regressionen und die Inventarprobe liefen nativ auf der Windows-Test-VM. Das offiziell signierte Paket (Sequenz 27) ist im Katalog des betroffenen Kunden und als Starter für neue Windows-Kataloge verfügbar. Die Test-VM übernahm das reguläre Update, meldete einen neuen Heartbeat mit derselben Identität und startete beide signierten Binärdateien mit den erwarteten Hashes. Die erneute Meldung des betroffenen Geräts mit derselben Identität steht aus. Bei durch den Erstkontakt blockiertem Installer den vorhandenen `RmmDiscoveryReleasePull` lokal starten; nach erfolgreichem Update den Installer mit derselben Identität abschließen. [Nachweis](evidence/windows-missing-display-version-20261119.json) | | Erste Windows-Meldung ohne `DisplayVersion` | Bei einem betroffenen Gerät nahm das Gateway das Enrollment und die authentisierten Verbindungsaufbauten an, erhielt aber weder Inventar noch Heartbeat. Windows GNU `0.1.26` aus `037b5e3` nutzt bei fehlendem `DisplayVersion` den Registrywert `ReleaseId` oder meldet Produkt und Build ohne Versionsbezeichnung. Drei Regressionen und die Inventarprobe liefen nativ auf der Windows-Test-VM. Das offiziell signierte Paket (Sequenz 27) ist im Katalog des betroffenen Kunden und als Starter für neue Windows-Kataloge verfügbar. Die Test-VM übernahm das reguläre Update, meldete einen neuen Heartbeat mit derselben Identität und startete beide signierten Binärdateien mit den erwarteten Hashes. Die erneute Meldung des betroffenen Geräts mit derselben Identität steht aus. Bei durch den Erstkontakt blockiertem Installer den vorhandenen `RmmDiscoveryReleasePull` lokal starten; nach erfolgreichem Update den Installer mit derselben Identität abschließen. [Nachweis](evidence/windows-missing-display-version-20261119.json) |
+14 -4
View File
@@ -165,7 +165,7 @@ test('shows the execution stop and prepares the Windows restart through a versio
expect(writes).toHaveLength(2); expect(writes).toHaveLength(2);
}); });
test('offers one Linux command for x86-64 and ARM64 and keeps the code outside both installer commands', async ({ page }) => { test('offers one Linux command for x86-64 and ARM64, root commands for Proxmox VE and OPNsense and keeps the code outside all installer commands', async ({ page }) => {
const token = 'f'.repeat(64), api = '/api/v1/tenants/' + tenantId; const token = 'f'.repeat(64), api = '/api/v1/tenants/' + tenantId;
const requests: string[] = []; const requests: string[] = [];
await page.route(origin + '/auth/config', r => r.fulfill({ json: { dev_login_enabled: true, oidc_configured: false, oidc_login_url: null } })); await page.route(origin + '/auth/config', r => r.fulfill({ json: { dev_login_enabled: true, oidc_configured: false, oidc_login_url: null } }));
@@ -176,7 +176,8 @@ test('offers one Linux command for x86-64 and ARM64 and keeps the code outside b
if (url.pathname === '/api/v1/tenants') return r.fulfill({ json: listing(auth.tenants) }); if (url.pathname === '/api/v1/tenants') return r.fulfill({ json: listing(auth.tenants) });
if (url.pathname === api + '/enrollment-tokens') return r.fulfill({ json: { if (url.pathname === api + '/enrollment-tokens') return r.fulfill({ json: {
token, expires_at: new Date(Date.now() + 900000).toISOString(), bootstrap_origin: 'https://bootstrap.example', token, expires_at: new Date(Date.now() + 900000).toISOString(), bootstrap_origin: 'https://bootstrap.example',
release_platforms: ['x86_64-unknown-linux-gnu', 'aarch64-unknown-linux-gnu', 'x86_64-pc-windows-gnu'] release_platforms: ['x86_64-unknown-linux-gnu', 'aarch64-unknown-linux-gnu', 'x86_64-pc-windows-gnu'],
opnsense_installer: true
} }); } });
return r.fulfill({ json: { ...listing([]), pending_count: 0 } }); return r.fulfill({ json: { ...listing([]), pending_count: 0 } });
}); });
@@ -187,11 +188,20 @@ test('offers one Linux command for x86-64 and ARM64 and keeps the code outside b
await enroll.getByRole('button', { name: 'Einmalcode erstellen' }).click(); await enroll.getByRole('button', { name: 'Einmalcode erstellen' }).click();
await expect(enroll.getByRole('heading', { name: 'Linux (x86-64 und ARM64)' })).toBeVisible(); await expect(enroll.getByRole('heading', { name: 'Linux (x86-64 und ARM64)' })).toBeVisible();
const commands = enroll.locator('pre'); const commands = enroll.locator('pre');
await expect(commands).toHaveCount(2); await expect(commands).toHaveCount(4);
await expect(commands.nth(0)).toContainText("&& sudo sh linux.sh 'https://bootstrap.example'");
await expect(enroll.getByRole('heading', { name: 'Proxmox VE' })).toBeVisible();
await expect(commands.nth(1)).toHaveText("curl --fail --show-error --silent 'https://bootstrap.example/install/linux.sh' -o linux.sh && sh linux.sh 'https://bootstrap.example'");
await expect(enroll.getByRole('heading', { name: 'OPNsense' })).toBeVisible();
await expect(commands.nth(2)).toHaveText("fetch -o opnsense.sh 'https://bootstrap.example/install/opnsense.sh' && sh opnsense.sh 'https://bootstrap.example'");
expect((await commands.allTextContents()).join(' ')).not.toMatch(/enable-admin-scripts|EnableAdministratorScripts/); expect((await commands.allTextContents()).join(' ')).not.toMatch(/enable-admin-scripts|EnableAdministratorScripts/);
await option.check(); await option.check();
await expect(commands.nth(0)).toContainText('--enable-admin-scripts'); await expect(commands.nth(0)).toContainText('--enable-admin-scripts');
await expect(commands.nth(1)).toContainText('-EnableAdministratorScripts'); await expect(commands.nth(1)).toContainText("sh linux.sh 'https://bootstrap.example' --enable-admin-scripts");
await expect(commands.nth(1)).not.toContainText('sudo');
await expect(commands.nth(2)).not.toContainText('admin');
await expect(enroll.getByText(/Root-Helper/)).toBeVisible();
await expect(commands.nth(3)).toContainText('-EnableAdministratorScripts');
await expect(enroll.getByText(/Für jeden Auftrag gelten zusätzlich/)).toBeVisible(); await expect(enroll.getByText(/Für jeden Auftrag gelten zusätzlich/)).toBeVisible();
expect((await commands.allTextContents()).join(' ')).not.toContain(token); expect((await commands.allTextContents()).join(' ')).not.toContain(token);
expect(requests).toEqual([api + '/enrollment-tokens']); expect(requests).toEqual([api + '/enrollment-tokens']);
+2 -1
View File
@@ -42,7 +42,8 @@ TARGETS = {
} }
REMOTE_TARGETS = ("server-arm64", "linux-arm64") REMOTE_TARGETS = ("server-arm64", "linux-arm64")
SOURCE_PATHS = ["Cargo.toml", "Cargo.lock", "rust-toolchain.toml", "crates", "proto", SOURCE_PATHS = ["Cargo.toml", "Cargo.lock", "rust-toolchain.toml", "crates", "proto",
"migrations", "tools/apt-transaction", "deploy/linux", "tests"] "migrations", "tools/apt-transaction", "deploy/linux",
"deploy/opnsense/install-dev.sh", "tests"]
def git(*args): def git(*args):
+106
View File
@@ -0,0 +1,106 @@
#!/usr/bin/env python3
"""Build the OPNsense agent bundle and place it on the dev server for the HTTPS installer.
The bundle is `agent.pyz`, `collect.pyz`, the rc.d script and optionally the native
script worker `rmm-opnsense-jobs` (FreeBSD amd64, built natively in the test guest).
It lands in `devstate/mvp-releases/config/opnsense/` next to the Linux bootstrap
configuration and is served only against a valid one-time enrollment code.
"""
import argparse
import base64
import hashlib
import json
from pathlib import Path
import re
import shlex
import subprocess
import sys
import tempfile
ROOT = Path(__file__).resolve().parents[1]
sys.path.insert(0, str(ROOT / 'tools'))
def activate(payload):
"""Runs on the dev server as root."""
import os
target = Path('/opt/rust-discovery/devstate/mvp-releases/config/opnsense')
owner = os.stat(target.parent)
target.mkdir(mode=0o700, exist_ok=True)
os.chown(target, owner.st_uid, owner.st_gid)
os.chmod(target, 0o700)
wanted = set(payload['files']) | {'manifest.json'}
for name, data in [*payload['files'].items(), ('manifest.json', payload['manifest'])]:
raw = base64.b64decode(data, validate=True)
tmp = target / ('.' + name + '.new')
with open(tmp, 'wb') as f:
os.fchmod(f.fileno(), 0o600)
f.write(raw)
f.flush()
os.fsync(f.fileno())
os.chown(tmp, owner.st_uid, owner.st_gid)
os.replace(tmp, target / name)
for old in target.iterdir():
if old.name not in wanted:
old.unlink()
print(json.dumps({'directory': str(target), 'files': sorted(wanted)}))
def build_zipapps(out):
python = ROOT / 'devstate/opnsense-vm/venv/bin/python'
if not python.is_file():
raise SystemExit('Build-venv fehlt: devstate/opnsense-vm/venv mit grpcio-tools==1.76.0 und protobuf==6.33.5')
subprocess.run([str(python), str(ROOT / 'deploy/opnsense/build.py'), str(out)], check=True)
def worker_from_guest():
credentials = ROOT / 'credentials'
ssh = ['ssh', '-F', '/dev/null', '-T', '-i', str(credentials / 'opnsense-dev-key'),
'-o', 'UserKnownHostsFile=' + str(credentials / 'opnsense-dev.known_hosts'),
'-o', 'GlobalKnownHostsFile=/dev/null', '-o', 'StrictHostKeyChecking=yes', '-o', 'BatchMode=yes',
'-o', 'IdentitiesOnly=yes', '-o', 'ConnectTimeout=10', 'root@192.168.247.1']
return subprocess.run([*ssh, 'cat /usr/local/libexec/discovery-agent/rmm-opnsense-jobs'],
check=True, capture_output=True).stdout
def main():
parser = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter)
worker = parser.add_mutually_exclusive_group()
worker.add_argument('--worker', type=Path, help='Native rmm-opnsense-jobs (FreeBSD amd64) to include')
worker.add_argument('--worker-from-guest', action='store_true',
help='Take the installed rmm-opnsense-jobs from the OPNsense test guest')
parser.add_argument('--prepare-only', type=Path, metavar='DIR', help='Write the bundle locally, do not upload')
args = parser.parse_args()
version = re.search(r"^VERSION = '([A-Za-z0-9._-]+)'$", (ROOT / 'deploy/opnsense/agent.py').read_text(), re.M)[1]
with tempfile.TemporaryDirectory() as tmp:
out = Path(tmp)
build_zipapps(out)
files = {name: (out / name).read_bytes() for name in ('agent.pyz', 'collect.pyz')}
files['discovery_agent'] = (ROOT / 'deploy/opnsense/discovery_agent').read_bytes()
if args.worker:
files['rmm-opnsense-jobs'] = args.worker.read_bytes()
elif args.worker_from_guest:
files['rmm-opnsense-jobs'] = worker_from_guest()
if 'rmm-opnsense-jobs' in files and not files['rmm-opnsense-jobs'].startswith(b'\x7fELF'):
raise SystemExit('rmm-opnsense-jobs ist keine ELF-Datei')
manifest = json.dumps({'schema_version': 1, 'version': version, 'files': {
name: {'sha256': hashlib.sha256(data).hexdigest(), 'bytes': len(data)} for name, data in sorted(files.items())
}}, indent=1).encode()
if args.prepare_only:
args.prepare_only.mkdir(parents=True, exist_ok=True, mode=0o700)
for name, data in [*files.items(), ('manifest.json', manifest)]:
(args.prepare_only / name).write_bytes(data)
print(manifest.decode())
return
from dev_stage import ssh_prefix
import inspect
payload = json.dumps({'manifest': base64.b64encode(manifest).decode(),
'files': {n: base64.b64encode(d).decode() for n, d in files.items()}})
source = 'import base64, json, os\nfrom pathlib import Path\n' + inspect.getsource(activate)
subprocess.run(ssh_prefix('server') + [shlex.join(['python3', '-I', '-'])],
input=source + '\nactivate(json.loads(' + repr(payload) + '))\n', text=True, check=True)
print(manifest.decode())
if __name__ == '__main__':
main()
+24 -5
View File
@@ -194,7 +194,7 @@ function AgentReleaseCatalog({ tenantId, auth }: { tenantId: string; auth: Sessi
} }
function DeviceEnrollment({ tenantId, auth, customerName }: { tenantId: string; auth: Session; customerName: string }) { function DeviceEnrollment({ tenantId, auth, customerName }: { tenantId: string; auth: Session; customerName: string }) {
const [enrollment, setEnrollment] = useState<{ token: string; expires: string; origin: string | null; platforms: string[] } | null>(null); const [enrollment, setEnrollment] = useState<{ token: string; expires: string; origin: string | null; platforms: string[]; opnsense: boolean } | null>(null);
const [enrollmentError, setEnrollmentError] = useState<string | null>(null); const [enrollmentError, setEnrollmentError] = useState<string | null>(null);
const [issuing, setIssuing] = useState(false); const [issuing, setIssuing] = useState(false);
const [copied, setCopied] = useState(false); const [copied, setCopied] = useState(false);
@@ -206,6 +206,10 @@ function DeviceEnrollment({ tenantId, auth, customerName }: { tenantId: string;
] as const; ] as const;
const availableLinuxArchitectures = linuxArchitectures.filter(([target]) => enrollment?.platforms.includes(target)).map(([, label]) => label); const availableLinuxArchitectures = linuxArchitectures.filter(([target]) => enrollment?.platforms.includes(target)).map(([, label]) => label);
const linuxInstaller = origin && availableLinuxArchitectures.length > 0 ? `${origin}/install/linux.sh` : null; const linuxInstaller = origin && availableLinuxArchitectures.length > 0 ? `${origin}/install/linux.sh` : null;
/** Proxmox VE is Debian on x86-64 and ships without sudo; the installer then runs from a root shell. */
const proxmoxInstaller = linuxInstaller && enrollment?.platforms.includes('x86_64-unknown-linux-gnu') ? linuxInstaller : null;
const adminFlag = adminScripts ? ' --enable-admin-scripts' : '';
const opnsenseInstaller = origin && enrollment?.opnsense ? `${origin}/install/opnsense.sh` : null;
const windowsPlatforms = ['x86_64-pc-windows-gnu', 'x86_64-pc-windows-msvc'].filter(platform => enrollment?.platforms.includes(platform)); const windowsPlatforms = ['x86_64-pc-windows-gnu', 'x86_64-pc-windows-msvc'].filter(platform => enrollment?.platforms.includes(platform));
const windowsInstaller = origin && windowsPlatforms.length > 0 ? `${origin}/install/windows.ps1` : null; const windowsInstaller = origin && windowsPlatforms.length > 0 ? `${origin}/install/windows.ps1` : null;
return <section aria-label="Gerät aufnehmen"><h2>Gerät aufnehmen</h2> return <section aria-label="Gerät aufnehmen"><h2>Gerät aufnehmen</h2>
@@ -217,6 +221,7 @@ function DeviceEnrollment({ tenantId, auth, customerName }: { tenantId: string;
if (typeof result.token !== 'string' || !/^[a-f0-9]{64}$/.test(result.token) || typeof result.expires_at !== 'string') throw new Error('Ungültiger Einmalcode'); if (typeof result.token !== 'string' || !/^[a-f0-9]{64}$/.test(result.token) || typeof result.expires_at !== 'string') throw new Error('Ungültiger Einmalcode');
const bootstrap = typeof result.bootstrap_origin === 'string' ? new URL(result.bootstrap_origin) : null; const bootstrap = typeof result.bootstrap_origin === 'string' ? new URL(result.bootstrap_origin) : null;
setEnrollment({ token: result.token, expires: result.expires_at, origin: bootstrap?.protocol === 'https:' ? bootstrap.origin : null, setEnrollment({ token: result.token, expires: result.expires_at, origin: bootstrap?.protocol === 'https:' ? bootstrap.origin : null,
opnsense: result.opnsense_installer === true,
platforms: Array.isArray(result.release_platforms) ? result.release_platforms.filter((p): p is string => typeof p === 'string') : [] }); platforms: Array.isArray(result.release_platforms) ? result.release_platforms.filter((p): p is string => typeof p === 'string') : [] });
} catch (error) { setEnrollmentError(errorText(error)); } finally { setIssuing(false); } } catch (error) { setEnrollmentError(errorText(error)); } finally { setIssuing(false); }
}}>Einmalcode erstellen</button> }}>Einmalcode erstellen</button>
@@ -232,9 +237,9 @@ function DeviceEnrollment({ tenantId, auth, customerName }: { tenantId: string;
<article> <article>
<h3>Installation auf dem neuen Gerät</h3> <h3>Installation auf dem neuen Gerät</h3>
<ol> <ol>
<li>Öffnen Sie auf dem neuen Linux-Gerät ein Terminal mit <code>sudo</code>-Rechten oder auf dem neuen Windows-Gerät Windows PowerShell 5.1 (64 Bit) als Administrator.</li> <li>Öffnen Sie auf dem neuen Linux-Gerät ein Terminal mit <code>sudo</code>-Rechten, auf einem Proxmox-VE-Host oder einer OPNsense-Firewall eine Shell als <code>root</code> oder auf dem neuen Windows-Gerät Windows PowerShell 5.1 (64 Bit) als Administrator.</li>
<li>Führen Sie den passenden Befehlsblock unten aus. Er lädt das Installationsskript per HTTPS vom Server und startet es.</li> <li>Führen Sie den passenden Befehlsblock unten aus. Er lädt das Installationsskript per HTTPS vom Server und startet es.</li>
<li>Fügen Sie den oben angezeigten Einmalcode ein, sobald das Skript nach <strong>Einmalcode</strong> (Linux) oder <strong>One-time enrollment token</strong> (Windows) fragt. Bestätigen Sie mit Enter. Eine vorherige Passwortabfrage von <code>sudo</code> gehört zur Anmeldung mit Administratorrechten.</li> <li>Fügen Sie den oben angezeigten Einmalcode ein, sobald das Skript nach <strong>Einmalcode</strong> (Linux, Proxmox VE, OPNsense) oder <strong>One-time enrollment token</strong> (Windows) fragt. Bestätigen Sie mit Enter. Eine vorherige Passwortabfrage von <code>sudo</code> gehört zur Anmeldung mit Administratorrechten.</li>
<li>Prüfen Sie nach der Installation, ob das neue Gerät unter <a href="#geraete">Geräte</a> beim gewählten Kunden erscheint.</li> <li>Prüfen Sie nach der Installation, ob das neue Gerät unter <a href="#geraete">Geräte</a> beim gewählten Kunden erscheint.</li>
</ol> </ol>
<label className="check"><input type="checkbox" checked={adminScripts} onChange={e => setAdminScripts(e.target.checked)}/> <label className="check"><input type="checkbox" checked={adminScripts} onChange={e => setAdminScripts(e.target.checked)}/>
@@ -244,11 +249,25 @@ function DeviceEnrollment({ tenantId, auth, customerName }: { tenantId: string;
{' '}Für jeden Auftrag gelten zusätzlich die Skript- und Administratorrechte des Kunden und die Genehmigung in der WebUI.</p>} {' '}Für jeden Auftrag gelten zusätzlich die Skript- und Administratorrechte des Kunden und die Genehmigung in der WebUI.</p>}
{!enrollment && <p className="muted">Die Downloadlinks und Befehle erscheinen hier, sobald ein Einmalcode angezeigt wird.</p>} {!enrollment && <p className="muted">Die Downloadlinks und Befehle erscheinen hier, sobald ein Einmalcode angezeigt wird.</p>}
{enrollment && !origin && <p role="status">Für die Geräteaufnahme ist keine HTTPS-Downloadadresse konfiguriert.</p>} {enrollment && !origin && <p role="status">Für die Geräteaufnahme ist keine HTTPS-Downloadadresse konfiguriert.</p>}
{origin && !linuxInstaller && !windowsInstaller && <p role="status">Für diesen Kunden ist derzeit kein Linux- oder Windows-Installer verfügbar.</p>} {origin && !linuxInstaller && !windowsInstaller && !opnsenseInstaller && <p role="status">Für diesen Kunden ist derzeit kein Installer verfügbar.</p>}
{linuxInstaller && <> {linuxInstaller && <>
<h4>Linux ({availableLinuxArchitectures.join(' und ')})</h4> <h4>Linux ({availableLinuxArchitectures.join(' und ')})</h4>
<p>Installationsskript <a href={linuxInstaller} target="_blank" rel="noopener noreferrer">linux.sh</a></p> <p>Installationsskript <a href={linuxInstaller} target="_blank" rel="noopener noreferrer">linux.sh</a></p>
<pre>{`curl --fail --show-error --silent '${linuxInstaller}' -o linux.sh && sudo sh linux.sh '${origin}'${adminScripts ? ' --enable-admin-scripts' : ''}`}</pre> <pre>{`curl --fail --show-error --silent '${linuxInstaller}' -o linux.sh && sudo sh linux.sh '${origin}'${adminFlag}`}</pre>
</>}
{proxmoxInstaller && <>
<h4>Proxmox VE</h4>
<p>Proxmox VE enthält kein <code>sudo</code>. Führen Sie den Befehl in einer Shell als <code>root</code> aus, zum Beispiel über SSH oder die Shell des Nodes in der Proxmox-Oberfläche.
{' '}Der Installer richtet zusätzlich einen nur lesenden Proxmox-Zugang für Gäste und Backups ein.</p>
<pre>{`curl --fail --show-error --silent '${proxmoxInstaller}' -o linux.sh && sh linux.sh '${origin}'${adminFlag}`}</pre>
</>}
{opnsenseInstaller && <>
<h4>OPNsense</h4>
<p>Installationsskript <a href={opnsenseInstaller} target="_blank" rel="noopener noreferrer">opnsense.sh</a>.
{' '}Führen Sie den Befehl als <code>root</code> aus, über SSH oder an der Konsole mit Option <strong>8) Shell</strong>.
{' '}Der Installer lädt den Agenten, prüft jede Datei gegen die Prüfsumme des Servers, nimmt die Firewall auf und startet den Dienst.
{adminScripts && <>{' '}Skripte mit <code>root</code>-Rechten brauchen auf OPNsense zusätzlich den separat eingerichteten Root-Helper; der Installer richtet ihn nicht ein.</>}</p>
<pre>{`fetch -o opnsense.sh '${opnsenseInstaller}' && sh opnsense.sh '${origin}'`}</pre>
</>} </>}
{windowsInstaller && <> {windowsInstaller && <>
<h4>Windows (x64)</h4> <h4>Windows (x64)</h4>