[{"content":"50 TOPS che non fanno niente Ogni portatile Ryzen AI venduto negli ultimi due anni ha dentro una Neural Processing Unit (NPU), un blocco di silicio costruito solo per la matematica dei modelli di AI. Sul mio, un ThinkPad con un Ryzen AI 7 PRO 350, AMD la dichiara fino a 50 TOPS, migliaia di miliardi di operazioni al secondo1. L\u0026rsquo;hai pagata. Su un\u0026rsquo;installazione Linux di serie non fa niente.\nQuest\u0026rsquo;anno è cambiato. Una volta configurata, la NPU fa girare un modello linguistico da 4 miliardi di parametri dietro una finestra di chat, più la trascrizione vocale, tutto sul portatile, senza account, senza abbonamento e senza che nulla lasci la macchina, che per qualunque cosa preferiresti non scrivere nel sito di qualcun altro è esattamente il punto. L\u0026rsquo;intero chip assorbe circa 21 W mentre risponde, e a riposo sta sotto i 9 W.\nCosa gira Dove Indirizzo Qwen 3.5 4B, contesto da 256k token NPU, in un container http://[::1]:52625/v1 Trascrizione vocale: Whisper di OpenAI, whisper-v3:turbo NPU, stesso container lo stesso, /audio/transcriptions Open WebUI, la pagina di chat CPU, in un container http://[::1]:3000 driver del kernel amdxdna, firmware host /dev/accel/accel0 Due regole hanno dato forma alla build. Sull\u0026rsquo;host vanno solo il driver del kernel e il suo firmware; ogni framework per i modelli gira in un container podman rootless. E ogni servizio ascolta solo sul loopback IPv6, con niente del tutto su IPv4. Entrambe si sono rivelate meno lavoro che fare le cose alla buona, ed entrambe hanno scovato problemi che altrimenti avrei messo in produzione.\nCosa serve su Linux La NPU di questo chip è il progetto AMD di seconda generazione, XDNA2. Conta, perché il software che ci fa girare i modelli linguistici supporta le parti XDNA2 (serie Ryzen AI 300 e 400, Strix Halo) e non la prima generazione dei Ryzen 7040 e 80402. Controlla la tua prima di cominciare:\n$ lspci -nn | grep -i \u0026#39;neural\\|signal processing\u0026#39; c5:00.1 Signal processing controller [1180]: Advanced Micro Devices, Inc. [AMD] Strix/Krackan/Krackan2/Strix Halo Neural Processing Unit [1022:17f0] (rev 20) Tra quel dispositivo e una risposta in chat ci sono quattro strati, e la divisione tra host e container è tutto il progetto:\nStrato Cos\u0026rsquo;è Dove sta amdxdna driver del kernel, crea /dev/accel/accel03 host, via DKMS Firmware della NPU npu_7.sbin, 1.1.2.64 su questo chip host, da linux-firmware XRT + plugin amdxdna la libreria runtime di AMD e il suo backend per la NPU container FastFlowLM il runtime LLM, kernel NPU inclusi container Cosa sta sull'host e cosa sta in un container Podman rootless, ricostruito quando voglio Open WebUI pagina di chat, sulla CPU [::1]:3000 FastFlowLM [::1]:52625 XRT + plugin NPU allineato al commit del driver Host: il modulo del kernel e il suo firmware, nient'altro Niente XRT, niente runtime, niente modelli. Un solo device node è tutto ciò che passa nel container. modulo amdxdna, compilato da DKMS npu_7.sbin NPU XDNA2 /dev/accel/accel0 La divisione. Tutto ciò che cambia spesso vive in un container; l\u0026rsquo;host tiene un modulo del kernel e il suo firmware, e un solo device node è l\u0026rsquo;unica cosa passata dall\u0026rsquo;altra parte. Il kernel 7.x include amdxdna nell\u0026rsquo;albero, ma AMD lo sviluppa prima nel proprio repository, e il plugin in userspace deve corrispondere al modulo del kernel con cui parla4. Il divario tra i due non è piccolo. Su questo portatile:\nNell\u0026rsquo;albero, 7.2.15 e 7.3.3 di Fedora Fuori albero, amd/xdna-driver a 24dfd686 Interfaccia del driver 0.105 0.19 Versione del modulo nessuna 2.27.0_20261113 ID PCI di NPU che gestisce 6 8 File di firmware che chiede 7 59 Firmware che carica questo chip 17f0_10/npu_7.sbin, 1.1.2.64 lo stesso file Nove versioni di interfaccia di distanza, e Linux 7.3, l\u0026rsquo;ultima release, porta ancora la 0.10. L\u0026rsquo;unica cosa su cui concordano è il firmware, e quello arriva da linux-firmware di Fedora, non da nessuno dei due driver. Così compilo entrambe le metà da un solo commit di amd/xdna-driver, metto il modulo sull\u0026rsquo;host, e incorporo nell\u0026rsquo;immagine lo userspace corrispondente.\nIl driver: compila tutto, tieni solo la parte del kernel amd/xdna-driver include XRT come submodule git, e la build produce RPM per XRT e un pacchetto plugin. Il pacchetto plugin contiene anche il sorgente del driver, che registra con DKMS (Dynamic Kernel Module Support, quello che ricompila un modulo per ogni nuovo kernel). Niente di tutto questo è difficile:\ngit clone --recursive https://github.com/amd/xdna-driver.git \u0026amp;\u0026amp; cd xdna-driver sudo ./tools/amdxdna_deps.sh (cd xrt/build \u0026amp;\u0026amp; ./build.sh -npu -opt) # XRT RPMs in xrt/build/Release/ (cd build \u0026amp;\u0026amp; ./build.sh -release) # plugin RPM, driver source inside Su Fedora 45 lo script delle dipendenze finisce con un errore. Ignoralo:\nChiede Cosa succede Importa? protobuf-devel va in conflitto con un protobuf3-compiler installato no, senza di esso XRT salta solo uno strumento di tracing redhat-lsb il pacchetto non esiste, Fedora l\u0026rsquo;ha tolto no tutto il resto già installato L\u0026rsquo;ultima release con tag lì è di febbraio, quindi main è il canale di rilascio. Sono passato da una build di maggio a quella di novembre: 550 commit, XRT da 2.23 a 2.27.\nL\u0026rsquo;aggiornamento cancella il driver che ha appena installato Il mio primo tentativo di aggiornamento ha fatto sparire del tutto il modulo. RPM esegue lo script di installazione del nuovo pacchetto, che compila e registra il nuovo driver con DKMS, e poi esegue lo script di rimozione del vecchio pacchetto. Quello script di rimozione legge la versione del driver da un file che il nuovo pacchetto ha già sovrascritto, quindi deregistra la versione appena installata. L\u0026rsquo;output di dnf lo dice in due righe, una dopo l\u0026rsquo;altra:\n\u0026gt;\u0026gt;\u0026gt; Successfully installed and enabled DKMS for xrt-amdxdna/2.27.0 \u0026gt;\u0026gt;\u0026gt; Removing driver source: xrt-amdxdna/2.27.0... Niente è fallito, niente è diventato rosso, e al boot successivo il kernel avrebbe caricato in silenzio quello che aveva di serie. Posso chiedere perché uno script di rimozione gira durante un aggiornamento senza controllare se si tratta di un aggiornamento? RPM passa questa risposta a ogni scriptlet come primo argomento. È un solo if.\nCome un aggiornamento RPM deregistra il driver che ha appena installato Un aggiornamento dnf, nell'ordine in cui RPM lo esegue %post nuovo compila la 2.27, la registra con DKMS 2.27 in DKMS arrivano i file nuovi il file di versione ora dice 2.27 2.27 in DKMS %preun vecchio legge quel file, deregistra la 2.27 2.27 sparita boot successivo il modulo nell'albero si carica, senza avvisi non la build che hai fatto DKMS contiene: La correzione è un solo test. Uno scriptlet %preun riceve $1 = 1 in un aggiornamento e $1 = 0 in una rimozione. Solo una rimozione dovrebbe deregistrare qualcosa. L\u0026rsquo;ordine in cui RPM esegue un aggiornamento. Il nuovo pacchetto registra il suo driver, poi il vecchio pacchetto deregistra quello che nomina il file di versione condiviso, che a quel punto è il nuovo. È anche il motivo per cui ora l\u0026rsquo;host non riceve affatto gli RPM. Il sorgente del driver è un tarball dentro il pacchetto plugin, quindi lo tiro fuori e lo do direttamente a DKMS:\nT=$(mktemp -d) \u0026amp;\u0026amp; rpm2cpio xrt_plugin*.rpm | (cd $T \u0026amp;\u0026amp; cpio -idm --quiet) D=$T/opt/xilinx/xrt/share/amdxdna sudo mkdir -p /usr/src/xrt-amdxdna-2.27.0 sudo tar -xf $D/amdxdna.tar.gz -C /usr/src/xrt-amdxdna-2.27.0 sudo cp $D/dkms.conf $D/configure_kernel.sh /usr/src/xrt-amdxdna-2.27.0/ sudo dkms install xrt-amdxdna/2.27.0 sudo modprobe -r amdxdna; sudo modprobe amdxdna Nessun riavvio. È Linux, e a quel punto niente ha il dispositivo aperto, quindi il modulo si sostituisce a caldo. Poi DKMS lo ricompila per ogni kernel che dnf installa; quando è arrivato il 7.3.3 era già compilato prima che io riavviassi per usarlo.\nIl driver va direttamente a DKMS Dal pacchetto a un modulo caricato, senza installare il pacchetto RPM del plugin il sorgente del driver è un tarball dentro /usr/src tarball estratto, con dkms.conf accanto dkms install compila il modulo per questo kernel modprobe -r poi modprobe: a caldo, senza riavvio dnf installa un nuovo kernel DKMS ricompila prima del riavvio rpm2cpio estrae il tarball. L'host non riceve mai gli RPM, quindi lì non gira mai uno script di pacchetto. Il driver passa dal pacchetto a DKMS senza che il pacchetto venga mai installato, quindi sull\u0026rsquo;host non gira nessuno script di pacchettizzazione. Controlla che sia caricata la build DKMS e non quella nell\u0026rsquo;albero, e che il firmware sia abbastanza recente. FastFlowLM vuole la 1.1.0.0 o successiva2:\n$ modinfo -F filename amdxdna /lib/modules/7.2.15-300.fc45.x86_64/extra/amdxdna.ko.xz $ cat /sys/bus/pci/drivers/amdxdna/*/fw_version 1.1.2.64 $ journalctl -k | grep \u0026#39;Initialized amdxdna\u0026#39; [drm] Initialized amdxdna_accel_driver 0.19.0 for 0000:c5:00.1 on minor 0 DKMS sposta da parte il modulo proprio del kernel invece di cancellarlo, in /var/lib/dkms/xrt-amdxdna/original_module/, quindi togliere la build DKMS lo rimette al suo posto.\nUn\u0026rsquo;altra cosa da lasciare stare: amd_iommu=off sulla riga di comando del kernel disattiva la NPU2.\nFastFlowLM in un container FastFlowLM è il runtime che rende la NPU utile per i modelli linguistici. È una riga di comando in stile Ollama e un server compatibile con OpenAI, scritto per XDNA2, e quest\u0026rsquo;anno è passato sotto l\u0026rsquo;organizzazione ROCm di AMD6. Il runtime è sotto licenza MIT. I kernel NPU che distribuisce sono binari chiusi, liberi da usare e ridistribuire senza modifiche7. Preferirei che fossero aperti, e lo dico, ma sono nel repository e non c\u0026rsquo;è niente da scaricare da nessun altro posto.\nL\u0026rsquo;immagine è in tre stadi su Fedora 45: XRT dalla build del driver, FastFlowLM compilato contro di esso, poi un runtime con solo quello che serve. La parte che conta:\nFROM registry.fedoraproject.org/fedora:45 AS xrt ARG XDNA_COMMIT COPY dist/xdna-${XDNA_COMMIT}/ /rpms/ RUN dnf -y install /rpms/xrt_2*-base.rpm /rpms/xrt_2*-npu.rpm \\ \u0026amp;\u0026amp; rpm -i --noscripts --nodeps --nosignature \\ --excludepath=/usr/lib/firmware --excludepath=/opt/xilinx/xrt/share/amdxdna \\ /rpms/xrt_plugin*.rpm \\ \u0026amp;\u0026amp; echo /opt/xilinx/xrt/lib64 \u0026gt; /etc/ld.so.conf.d/xrt.conf \u0026amp;\u0026amp; ldconfig Ognuno di quei flag c\u0026rsquo;è perché senza qualcosa si è rotto:\nProblema Soluzione Gli script del plugin compilano un modulo del kernel, che va sull\u0026rsquo;host --noscripts, ed esclusi sorgente del driver e firmware RPM 6 di Fedora 45 impone la verifica delle firme per default8, e un RPM compilato in proprio non è firmato --nosignature: l\u0026rsquo;ho compilato io, so da dove viene Le librerie di XRT sono in lib64, che non è nel percorso del linker /etc/ld.so.conf.d/xrt.conf dentro l\u0026rsquo;immagine FastFlowLM trova XRT tramite pkg-config, e setup.sh di XRT non imposta il percorso PKG_CONFIG_PATH=/opt/xilinx/xrt/lib64/pkgconfig nello stadio di build L\u0026rsquo;immagine finita pesa 609 MB, e il suo tag porta il commit del driver, fastflowlm:v1.0.12-xdna24dfd686. Un health check lo confronta con il commit che riporta il modulo caricato e fallisce se sono diversi. Un\u0026rsquo;immagine costruita per il driver sbagliato è l\u0026rsquo;unico guasto qui davvero difficile da diagnosticare, quindi viene preso prima che arrivi così lontano.\nCome si costruisce e si controlla l'immagine di FastFlowLM Tre stadi su Fedora 45 stadio 1: xrt RPM di XRT e plugin, senza script né firmware stadio 2: build FastFlowLM compilato contro quell'XRT stadio 3: runtime solo quello che serve, 609 MB Health check: immagine e host devono concordare il tag dell'immagine dice v1.0.12-xdna24dfd686 = il modulo caricato dice 24dfd686 Diversi: unhealthy, prima che qualcosa diventi confuso. Tre stadi di build, e un health check che lega l\u0026rsquo;immagine al driver per cui è stata costruita. Il container riceve un solo dispositivo, la NPU, e il limite di memory lock di cui FastFlowLM ha bisogno per bloccare i suoi buffer:\npodman run --rm --device /dev/accel/accel0 --ulimit memlock=-1:-1 \\ localhost/fastflowlm:v1.0.12-xdna24dfd686 validate [Linux] NPU: /dev/accel/accel0 with 8 columns [Linux] NPU FW Version: 1.1.2.64 [Linux] Memlock Limit: infinity Il self-test di AMD, xrt-smi validate, ha misurato la NPU a 51 TOPS su una moltiplicazione di matrici. Sono i 50 scritti sulla scatola, consegnati.\nAvvio al boot, solo su IPv6 Quadlet trasforma un breve file .container in un servizio systemd9. Come unit utente gira rootless, come me, e con il lingering attivo parte al boot senza nessuno collegato10:\n[Unit] Description=FastFlowLM NPU server ConditionPathExists=/dev/accel/accel0 [Container] Image=localhost/fastflowlm:v1.0.12-xdna24dfd686 AddDevice=/dev/accel/accel0 Ulimit=memlock=-1:-1 Network=host Volume=%h/.config/flm:/models:Z Exec=serve qwen3.5:4b --host ::1 --port 52625 -c 262144 -a whisper-v3:turbo StopSignal=SIGINT [Install] WantedBy=default.target loginctl enable-linger $USER cp fastflowlm.container ~/.config/containers/systemd/ systemctl --user daemon-reload \u0026amp;\u0026amp; systemctl --user start fastflowlm -c 262144 imposta la finestra di contesto, e il test di contesto più sotto spiega perché è così grande. -a whisper-v3:turbo carica un secondo modello accanto a quello di chat, uno che trasforma la voce in testo; ha una sezione tutta sua.\nTre righe lì dentro le ho imparate a mie spese:\nRiga Senza StopSignal=SIGINT FastFlowLM ignora SIGTERM, il segnale di stop di podman, e viene ucciso dieci secondi dopo --host ::1 ascolta su 127.0.0.1, IPv4 ::1, non [::1] la forma con le parentesi non viene interpretata; le parentesi vanno dentro un URL Verifica l\u0026rsquo;indirizzo invece di fidarti:\n$ ss -ltn \u0026#39;sport = :52625\u0026#39; LISTEN 0 4096 [::1]:52625 [::]:* $ curl -s http://127.0.0.1:52625/v1/models || echo refused refused localhost funziona ancora per qualunque cosa lo risolva prima a ::1, e lo fanno sia /etc/hosts di Fedora sia Chrome.\nOrdine di boot e gli unici indirizzi che rispondono Parte al boot user manager al boot loginctl enable-linger Quadlet file .container in servizio due servizi utente fastflowlm, open-webui Chi può raggiungerlo browser Open WebUI [::1]:3000 FastFlowLM [::1]:52625 127.0.0.1 rifiutato NPU Il lingering avvia lo user manager al boot, Quadlet crea i servizi, e ogni indirizzo che risponde è sul loopback IPv6. Cosa fa, misurato Nove modelli attraverso il benchmark di FastFlowLM, dove il decode è la velocità con cui scorre la risposta:\nModello Decode, contesto 1k Decode, contesto 8k Lettura del prompt, 8k llama3.2:1b 77 tok/s 56 tok/s 2.009 tok/s qwen3.5:2b 32 29 1.533 llama3.2:3b 30 20 857 phi4-mini-it:4b 25 17 744 qwen3:4b 23 15 613 qwen3.5:4b 17 15 657 gemma4-it:e4b 14 12 642 qwen3:8b 13 10 418 qwen3.5:9b 11 10 451 Velocità di decode per modello, contro la velocità di lettura Decode con contesto 1k, token al secondo lettura, da 5 a 8 token al secondo llama3.2:1b 77 qwen3.5:2b 32 llama3.2:3b 30 phi4-mini-it:4b 25 qwen3:4b 23 qwen3.5:4b 17 quello che uso gemma4-it:e4b 14 qwen3:8b 13 qwen3.5:9b 11 Decode con contesto 1k. Ogni modello supera la velocità di lettura; la velocità si dimezza grosso modo quando il modello raddoppia. La velocità di lettura è da cinque a otto token al secondo, quindi ognuno di questi ti sta davanti. Il decode si dimezza grosso modo ogni volta che il modello raddoppia, che è quello che ti aspetti quando il limite è la banda di memoria e non il calcolo. Io uso qwen3.5:4b. Phi-4 mini è più veloce, ma Qwen 3.5 mantiene la velocità mentre la conversazione cresce, gestisce immagini e chiamate a strumenti, e tiene una cache del prompt che evita di rileggere tutta la cronologia a ogni turno. È questo che decide.\n256.000 token di contesto Qwen 3.5 è costruito per una finestra da 262.144 token11, e FastFlowLM di default usa 32.768. Oltre quel limite fa una cosa che vale la pena sapere: scrive nel log Max length reached, stopping prefilling e chiude la connessione senza risposta e senza errore, così la finestra di chat resta lì con una risposta vuota e ti tocca indovinare se è caduto il modello, il server o il browser.\nCosì l\u0026rsquo;ho alzato con -c 262144 e l\u0026rsquo;ho testato come si deve. Un codice nascosto nella prima riga di un prompt da 232.250 token, circa 175.000 parole, richiesto alla fine:\nContesto 8k Contesto 232k Risposta corretta corretta, AMBER-FALCON-7731 Lettura del prompt 657 tok/s 210 tok/s Attesa della prima parola 12 secondi 18,4 minuti Decode 15 tok/s 2,4 tok/s Memoria riservata ~5 GB ~12,7 GB Funziona. È lento. E la memoria viene riservata che tu usi la finestra o no. Con 90 GB nella macchina lo pago volentieri pur di avere una risposta a un lungo incolla invece di vederlo scartato in silenzio.\nLa GPU può aiutare? Lo stesso chip ha una Radeon 860M, quindi la domanda ovvia è se può prendersi una parte del carico. Dividere un solo modello tra NPU e GPU, leggendo il prompt su una e scrivendo la risposta sull\u0026rsquo;altra, oggi non lo fa nessun runtime su Linux. Far girare un secondo runtime sulla GPU sì, quindi ho misurato quello.\n«Efficiente» qui significa velocità ed energia insieme. Il driver amdgpu riporta la potenza del package per l\u0026rsquo;intero chip senza root, e il driver amdxdna riporta la NPU da sola, quindi ogni prova qui sotto è stata campionata quattro volte al secondo. Stesso modello a 4 bit in tutte.\nDei runtime per GPU che ho guardato, uno ha funzionato:\nRuntime Risultato sulla 860M llama.cpp, backend Vulkan12 funziona; immagine da 881 MB llama.cpp, backend ROCm vede la GPU, poi va in segfault al primo lavoro, con o senza override della versione GPU; immagine da 23 GB MLC-LLM, Vulkan13 il suo compilatore va in segfault costruendo l\u0026rsquo;architettura Qwen 3.5 vLLM, SGLang non provati: fatti per GPU da data centre e molti utenti, non per una iGPU da 8 unità E la NPU contro quello che ha funzionato:\nQwen 3.5 4B NPU, FastFlowLM GPU, llama.cpp Vulkan A riposo, modello caricato 8,6 W 16,0 W, contro 9,7 W con il server fermo Lettura del prompt, ~6k token 557 tok/s a 23,8 W 411 tok/s a 46,1 W Energia per token di prompt 0,043 J 0,112 J Decode 18,2 tok/s a 21,0 W 23,5 tok/s a 40,7 W Energia per token generato 1,16 J 1,73 J NPU contro GPU, stesso modello NPU, FastFlowLM GPU Radeon 860M, llama.cpp Vulkan energia per token di prompt più basso è meglio 0,043 J 0,112 J energia per token di risposta più basso è meglio 1,16 J 1,73 J a riposo, modello caricato più basso è meglio 8,6 W 16,0 W velocità di decode più alto è meglio 18,2 tok/s 23,5 tok/s Stesso modello, entrambi gli acceleratori, ogni barra scalata sulla maggiore della coppia. La GPU risponde più in fretta; la NPU consuma meno energia in tutto il resto. La GPU scrive le risposte circa il 29% più in fretta. Ci brucia il doppio della potenza. La NPU legge i prompt più in fretta e con meno della metà dell\u0026rsquo;energia. Il numero più grosso è quello a riposo: il server sulla GPU caricato e fermo costa 6,3 W in più della stessa macchina con il server spento, tutto il giorno. Farli girare entrambi insieme ha portato la NPU da 18,2 a 14,2 token al secondo e la GPU da 23,5 a 13,9, perché condividono la stessa memoria. Per questo il container per la GPU esiste, ma lo avvio quando voglio un secondo modello, e non è abilitato al boot.\nLa NPU in sé ha assorbito meno di 2 W in ogni prova. La maggior parte dei 21 W è la CPU e la memoria che la alimentano. È quello il limite da tenere d\u0026rsquo;occhio nelle prossime release di FastFlowLM.\nAnche la trascrizione vocale sulla NPU Whisper è il modello di riconoscimento vocale di OpenAI: audio in ingresso, testo in uscita, in 99 lingue, e rilasciato sotto licenza MIT, quindi gira ovunque senza chiedere niente a nessuno14. Large-v3 è la versione completa attuale. Turbo è lo stesso modello con il decoder, la metà che scrive il testo, ridotto da 32 strati a 4. La model card mette lo scambio in chiaro: «way faster, at the expense of a minor quality degradation». Con 809 milioni di parametri è un quinto del modello di chat.\nFastFlowLM lo distribuisce già convertito per la NPU come whisper-v3:turbo, un download da 623 MB, e lo carica accanto al modello di chat con -a whisper-v3:turbo. Whisper da solo non lo serve; deve esserci anche un modello di chat caricato. L\u0026rsquo;audio va al normale endpoint di trascrizione di OpenAI e il testo torna indietro.\n19,6 secondi di parlato Prima richiesta, con il caricamento di Whisper 6,2 s Dopo 2,0 s, circa dieci volte il tempo reale Potenza dell\u0026rsquo;intero chip ~24,7 W Precisione ogni parola giusta Scritto però con l\u0026rsquo;ortografia finta dell\u0026rsquo;inglese americano: «color» e «program». L\u0026rsquo;API di Whisper accetta un prompt, e un prompt scritto nella vera ortografia dell\u0026rsquo;inglese britannico, l\u0026rsquo;inglese dell\u0026rsquo;Inghilterra da cui la lingua viene, basta a sistemarlo:\ncurl -s \u0026#39;http://[::1]:52625/v1/audio/transcriptions\u0026#39; -F file=@speech.wav \\ -F model=whisper-v3:turbo -F language=en \\ -F \u0026#39;prompt=British English spelling: colour, programme, organise, centre.\u0026#39; Non dovremmo dover correggere questi modelli per niente. Whisper è stato addestrato su 99 lingue e ancora scrive l\u0026rsquo;inglese all\u0026rsquo;americana a meno che non gli si dica altrimenti, perché chi l\u0026rsquo;ha costruito tratta la propria ortografia come predefinita e quella di tutti gli altri come un\u0026rsquo;opzione da chiedere. È il fastidioso predefinito americano che il resto del mondo detesta, ed è incorporato come un bias. Il system prompt del modello di chat porta la stessa istruzione, nella sezione qui sotto, per lo stesso motivo.\nUna finestra di chat, e 7.000 token che non hai mai scritto Open WebUI è il front end nel browser15, nel suo container, legato a [::1]:3000 allo stesso modo e puntato sulla NPU. Il suo pulsante del microfono va a Whisper sulla NPU invece del suo default, che avrebbe scaricato un modello e l\u0026rsquo;avrebbe fatto girare sulla CPU.\nIl primo messaggio che gli ho mandato era di venti parole. È arrivato alla NPU come un prompt da 7.223 token, perché Open WebUI 0.13 allega le definizioni di tutti i suoi strumenti integrati (memoria, note, calendario, automazioni, ricerca web) a ogni messaggio, e un admin li riceve tutti.\nStessa domanda da venti parole Prompt mandato alla NPU Attesa della prima parola Strumenti integrati attivi, il default 7.223 token ~12 s Strumenti integrati disattivati per il modello 127 token meno di 1 s Da dove arrivavano 7.000 token tu scrivi venti parole Open WebUI aggiunge ogni strumento integrato la NPU legge tutto, a ogni messaggio Prompt mandato alla NPU strumenti attivi, il default 7.223 token, circa 12 s alla prima parola strumenti spenti 127 token, meno di 1 s La stessa domanda da venti parole con gli strumenti integrati di Open WebUI attivi e disattivati, in scala. Per un modello locale quel default dovrebbe essere spento. Dodici secondi, a ogni risposta.\nMi ha anche detto con sicurezza di essere «trained by Google» e di girare «on Google\u0026rsquo;s advanced infrastructure». È un modello Qwen, fatto da Alibaba, che gira su un portatile. È una sciocchezza completa, e non dovrebbe succedere.\nNon è la configurazione. Un modello vede solo il testo che gli viene mandato, e il nome nel menu a tendina è un\u0026rsquo;etichetta per il server, mai passata al modello. Quindi quella risposta è venuta dal modello da solo, e ha sbagliato l\u0026rsquo;unico fatto su di sé che non dovrebbe mai essere in dubbio. È un difetto di progettazione, e sta in capo a chi ha distribuito il modello.\nIl nome nel menu a tendina non arriva mai al modello Cosa vedi tu nome del modello nel menu system prompt, se lo imposti i tuoi messaggi un'etichetta per il server, mai inviata Cosa vede il modello system prompt, se lo imposti i tuoi messaggi niente nome, produttore o macchina inviato senza system prompt tira a indovinare Il modello riceve il system prompt e la conversazione. Il nome nel menu a tendina resta al server. Alibaba sapeva come evitarlo. Il chat template di Qwen 2.5 apriva ogni conversazione con «You are Qwen, created by Alibaba Cloud» a meno che non gli dessi qualcos\u0026rsquo;altro16. Qwen 3 ha tolto quella riga17, e anche Qwen 3.5 esce senza18. Niente l\u0026rsquo;ha sostituita, e a giudicare da quella risposta il modello non l\u0026rsquo;ha mai imparata abbastanza bene da cavarsela da solo. Chiedi a un modello 4B «cosa sei?» senza prompt e ripiega sulla risposta più comune nei suoi dati di addestramento, che è quella di qualcun altro.\nÈ una cosa da poco? No. Un modello che ti dice, con piena sicurezza, chi l\u0026rsquo;ha costruito e in quale data centre gira, e sbaglia entrambe le cose, farà lo stesso con qualunque altra cosa che non può verificare. Qui conosci la risposta giusta. La maggior parte delle volte no.\nQuindi bisogna dirglielo, in un system prompt:\nDomanda: «cosa sei, e su cosa stai girando?» Risposta Senza system prompt «a large language model trained by Google… Google\u0026rsquo;s advanced infrastructure» Con un system prompt «Qwen 3.5, a large language model created by Alibaba… running locally on your Lenovo ThinkPad using the AMD Ryzen AI 7 PRO 350\u0026rsquo;s NPU via FastFlowLM» Lo stesso prompt gli dice di scrivere in inglese britannico, sempre per via del predefinito americano che ha anche Whisper. Se glielo dici, lo fa. Però non sa ancora dirti che giorno è. Un modello senza calendario e senza internet tira a indovinare le date e i fatti recenti, e non sempre lo dice, qualunque cosa chieda il prompt.\nTre anni per far girare l\u0026rsquo;AI su Linux AMD ha portato Ryzen AI sul palco nel gennaio 2023 come «the first dedicated artificial intelligence hardware in an x86 processor»19. Conta in avanti da quel keynote:\nQuando Cosa è successo su Linux Dopo il keynote 4 gennaio 2023 annunciato Ryzen AI, nel Ryzen 7040 25 gennaio 2024 amd/xdna-driver pubblicato su GitHub4 1 anno 24 marzo 2025 amdxdna nel Linux mainline, 6.1420 2 anni e 2 mesi 27 marzo 2025 esce questo chip, il Ryzen AI 7 PRO 3501 2 anni e 2 mesi 11 marzo 2026 FastFlowLM 0.9.35, la sua prima release nativa per Linux21 3 anni e 2 mesi 11 agosto 2026 FastFlowLM 1.0.0, ora sotto ROCm di AMD6 3 anni e 7 mesi oggi ancora nessun runtime LLM per i 7040 e 80402 3 anni e 10 mesi Tre anni e due mesi per far girare un modello linguistico sulla NPU sotto Linux, punto, e non l\u0026rsquo;ha fatto il software di AMD. L\u0026rsquo;ha fatto FastFlowLM, un progetto nato fuori dall\u0026rsquo;azienda e preso sotto ROCm quest\u0026rsquo;anno. Le sue note di rilascio per Linux si aprono con «The wait is finally over», poi dicono che usa «the exact same recipe you already know and love on Windows»21. Il Fisher-Price OS (Windows) l\u0026rsquo;ha avuto per primo, e lo hanno detto. Il Ryzen AI Software di AMD dice ancora, nelle sue note di rilascio attuali, «Model generation is not supported on Linux in this release»22.\nChi ha comprato la prima generazione sta peggio. Un portatile Ryzen 7040 del 2023 ha una NPU che nessun runtime per modelli linguistici su Linux tocca, e niente di pubblicato dice che ne arriverà uno. Stesso marchio.\nPosso chiedere perché? Non chi, perché. Che cosa nel processo di AMD ha permesso di vendere un chip con AI nel nome mentre il software per usare quell\u0026rsquo;AI su Linux arrivava anni dopo, da fuori? La scheda tecnica dice «Up to 50 TOPS»1. Il marchio dice Ryzen AI. Sono entrambe affermazioni fatte a chi compra il portatile, e per il primo anno di questo chip su Linux non valevano niente.\nPuntato su Copilot, non sul data centre Non è che AMD trovi Linux difficile. Nel data centre Linux è di prima classe e AMD lo sa: El Capitan al Lawrence Livermore è fatto di processori AMD EPYC e acceleratori AMD Instinct, è stato il computer più veloce del mondo fino a giugno di quest\u0026rsquo;anno23, e gira su TOSS, la build di Red Hat Linux propria di Livermore24. Riesci a immaginare AMD che vende un acceleratore Instinct e dice al cliente che il software Linux arriverà prima o poi, da qualcun altro? Sarebbe un no. AMD ha perfino scritto il driver del kernel di questa NPU e l\u0026rsquo;ha portato nel mainline. L\u0026rsquo;ultimo strato, quello che fa fare all\u0026rsquo;hardware il lavoro per cui è stato venduto, è stato il pezzo lasciato ad aspettare.\nNon sarebbe mai dovuto essere un progetto da portatile. La stessa architettura XDNA è finita in una scheda da data centre lo stesso anno, la Alveo V70, venduta come «the first Alveo production card leveraging AMD XDNA architecture with AI Engines»25. Costruisci un solo stack software per l\u0026rsquo;AI Engine, prima Linux come il resto del data centre, e il portatile lo riceve gratis. Anche il server. Un acceleratore piccolo e parco è proprio quello che vuoi distribuire alle macchine virtuali, una fetta ciascuna, per i modelli piccoli che non hanno bisogno di un\u0026rsquo;intera GPU. Il kernel ha imparato a farlo solo quest\u0026rsquo;anno, dividendo una NPU in virtual function sulle nuove parti AIE426. Sulla NPU di questo portatile non può farlo affatto.\nInvece lo sforzo è andato al Fisher-Price OS (Windows), e a Copilot. AMD ha lanciato la generazione di questo chip come processori che «Unlock Transformational AI Experiences for Windows Copilot+ PCs»27. Non ci ha creduto quasi nessuno. Le macchine Copilot+ erano il 2,3% dei PC Fisher-Price OS (Windows) venduti nel primo trimestre del 2025, e le funzioni Copilot più recenti di Microsoft girano comunque nel cloud: «only one of its new AI capabilities actually requires an NPU»28. Microsoft riporta anche gli incassi dai produttori di PC in calo del 7% per «lower PC market demand», con «roughly 30% of the installed base still on Windows 10»29. Quindi la NPU è stata puntata su un sistema operativo che la gente non aggiorna, per far girare un assistente che nessuno ha chiesto, che per lo più non usa la NPU.\nE non è nemmeno dove l\u0026rsquo;AI si costruisce. Chi lo fa di mestiere usa Linux, perché è lì che girano i suoi strumenti. TensorFlow dice chiaramente che la 2.10 «was the last TensorFlow release that supported GPU on native-Windows»30. Il model server vLLM «does not support Windows natively»31. JAX elenca la sua build per il Fisher-Price OS (Windows) come sperimentale, e il suo supporto AMD come «AMD GPU (Linux)»32. Dove il Fisher-Price OS (Windows) fa girare questi strumenti, lo fa tramite WSL 2, che per descrizione della stessa Microsoft è «an actual Linux kernel inside a managed VM»33. AMD ha puntato il suo chip per l\u0026rsquo;AI sull\u0026rsquo;unico desktop che la professione dell\u0026rsquo;AI non usa. Supportarla in parte non basta, AMD.\nPoi AMD si vende agli investitori come un\u0026rsquo;azienda di AI. L'11 novembre 2025 chi la presiede e la guida ha detto che AMD «is uniquely positioned to lead the next generation of high-performance and AI computing», in un comunicato che si vanta di aver fatto crescere il suo «AI PC portfolio 2.5x since 2024» e chiude con «full-stack AI solutions»34. Full stack. Sull\u0026rsquo;AI PC di questo articolo la cima di quello stack è arrivata da un progetto che AMD non ha avviato, e sulla prima generazione non è mai arrivata. Un\u0026rsquo;azienda di AI il cui chip per l\u0026rsquo;AI ha aspettato tre anni per far girare l\u0026rsquo;AI sul sistema operativo su cui è costruito il suo business del data centre? Ridicolo.\nIl supporto di prima classe è semplice da descrivere. Funziona il giorno in cui compri la macchina, sul sistema operativo che usi, dall\u0026rsquo;azienda che ti ha venduto il chip. Questa NPU non ci è ancora arrivata. Ho comprato il portatile per tutto il resto e la NPU è venuta con lui, ed è l\u0026rsquo;unico motivo per cui questo è un resoconto e non un reclamo. Chi ne ha comprato uno per l\u0026rsquo;AI sul marchio, e usa Linux, ha comprato una promessa mantenuta in ritardo, e da qualcun altro.\nPossiedi il silicio che hai pagato La NPU è arrivata con il portatile. Per come viene venduta, è il pezzo che rende la macchina pronta per l\u0026rsquo;AI, e l\u0026rsquo;AI in offerta è quella di qualcun altro, nel data centre di qualcun altro, che legge quello che scrivi così da poter essere pagata in qualche altro modo. Niente nell\u0026rsquo;hardware ha bisogno di quell\u0026rsquo;accordo. Un modello 4B a 21 W risponde a una domanda, legge un incolla da 175.000 parole se gli dai il tempo, e trascrive quello che dici, e niente lascia la scrivania.\nSoftware finito non è, e ogni spigolo qui sopra è costato un\u0026rsquo;ora per trovarlo e una riga o due per sistemarlo. È quello che costa l\u0026rsquo;open source quando lo usi davvero. È comunque un affare migliore che riprendersi in affitto la stessa capacità, e l\u0026rsquo;ora ti compra il sapere come funziona.\nI container lo tengono onesto. Niente sull\u0026rsquo;host tranne un modulo del kernel e il suo firmware, un dispositivo passato a un container, un indirizzo che nessun altro può raggiungere, e un controllo che fallisce nel momento in cui i pezzi smettono di combaciare. Ci è voluto un giorno. Continuerà a funzionare, perché so perché ogni riga lì dentro c\u0026rsquo;è e il controllo mi dirà la mattina in cui una di esse smette di essere vera.\nAMD — Ryzen AI 7 PRO 350 — 8 core, 16 thread, Radeon 860M, «NPU TOPS: Up to 50 TOPS», data di lancio «3/27/2025».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLemonade — LLMs on Linux with FastFlowLM — solo XDNA2 (Ryzen AI 300/400, Strix Halo), non XDNA1; firmware della NPU 1.1.0.0 o successivo; non impostare amd_iommu=off.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — amdxdna — il driver acceleratore nell\u0026rsquo;albero per le NPU AMD.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\namd/xdna-driver — driver, submodule XRT e plugin; compila il pacchetto base di XRT dal submodule incluso perché funzioni con il plugin; repository creato il 25 gennaio 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux v7.3 — drivers/accel/amdxdna/amdxdna_pci_drv.c — AMDXDNA_DRIVER_MAJOR 0, AMDXDNA_DRIVER_MINOR 10; lo stesso nella v7.2.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nROCm/FastFlowLM — runtime LLM per NPU XDNA2, server compatibile con OpenAI, parte di ROCm dalla v1.0.0; la release usata qui è la v1.0.12.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFastFlowLM — LICENSE_BINARY.txt — condizioni per i binari dei kernel NPU inclusi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRPM 6.0.0 release notes — «RPM defaults to enforcing signature checking».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npodman-systemd.unit(5) — unit .container di Quadlet, compresi AddDevice=, Ulimit=, StopSignal= ed Exec=.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nloginctl(1) — enable-linger avvia uno user manager al boot e lo tiene attivo dopo il logout.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen3.5-4B — «Context Length: 262,144 natively»; strati ibridi Gated DeltaNet e gated attention.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nggml-org/llama.cpp — l\u0026rsquo;immagine container server-vulkan usata per le prove sulla GPU, build 12352.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nmlc-ai/mlc-llm — provato con i pacchetti nightly 0.26.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nopenai/whisper-large-v3-turbo — «a state-of-the-art model for automatic speech recognition (ASR) and speech translation»; ridotto da large-v3, «the number of decoding layers have reduced from 32 to 4»; 809M parametri; licenza MIT.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nopen-webui/open-webui — release v0.13.3 usata qui.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen2.5-7B-Instruct — tokenizer_config.json — il messaggio di sistema predefinito del chat template: «You are Qwen, created by Alibaba Cloud. You are a helpful assistant.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen3-4B — tokenizer_config.json — chat template senza messaggio di sistema predefinito.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen3.5-4B — tokenizer_config.json — chat template senza messaggio di sistema predefinito.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — AMD Highlights Future of High-Performance and Adaptive Computing During Opening Keynote of CES 2023 — 4 gennaio 2023: «AMD also unveiled Ryzen AI Technology – the first dedicated artificial intelligence hardware in an x86 processor.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKernel Newbies — Linux 6.14 — rilasciato lunedì 24 marzo 2025; «an amdxdna driver for AMD NPUs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFastFlowLM v0.9.35 release notes — 11 marzo 2026: «The wait is finally over… FastFlowLM is officially available natively on Linux!»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — Ryzen AI Software release notes — problemi noti: «Model generation is not supported on Linux in this release.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTOP500 — June 2026 — «LineShine debuts as the new No. 1 system, ending El Capitan\u0026rsquo;s run atop the list»; El Capitan «is based on AMD 4th generation EPYC processors… and AMD Instinct MI300A accelerators».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLLNL — TOSS: Speeding Up Commodity Cluster Computing — «a fully functional cluster operating system, based on Red Hat Linux».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — Alveo V70 — «the first Alveo production card leveraging AMD XDNA architecture with AI Engines… designed for AI inference efficiency».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux — accel/amdxdna: Add basic support for AIE4 devices — «Add initial support for AIE4 devices (PCI device IDs 0x17F2 and 0x1B0B), including… SR-IOV enablement». La tabella del driver dà voci di virtual function solo a quelle parti; la NPU di questo portatile è 17f0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — AMD Unveils Next-Gen \u0026ldquo;Zen 5\u0026rdquo; Ryzen Processors to Power Advanced AI Experiences — Computex, 2 giugno 2024: «AMD Ryzen AI 300 Series Processors Unlock Transformational AI Experiences for Windows Copilot+ PCs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEngadget — Microsoft\u0026rsquo;s Copilot+ AI PC plan fizzled, but it still served a purpose — 5 dicembre 2025: i sistemi Copilot+ «made up just 2.3 percent of Windows machines sold in the first quarter of 2025»; «only one of its new AI capabilities actually requires an NPU».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWindows Latest — Microsoft admits its end of support was the real Windows 11 sales driver — 31 luglio 2026, citando la conference call sui risultati di Microsoft: «Windows OEM and Devices revenue decreased 7%… driven by lower PC market demand»; «roughly 30% of the installed base still on Windows 10».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTensorFlow — Install TensorFlow with pip — «TensorFlow 2.10 was the last TensorFlow release that supported GPU on native-Windows.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nvLLM — GPU installation — «vLLM does not support Windows natively».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJAX — Installation — wheel CPU per «Windows, x86_64 (experimental)»; sezioni GPU per NVIDIA, Google Cloud TPU, Mac e «AMD GPU (Linux)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Comparing WSL versions — «the use of an actual Linux kernel inside a managed VM».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — AMD Unveils Strategy to Lead the $1 Trillion Compute Market and Accelerate Next Phase of Growth — Financial Analyst Day, 11 novembre 2025: «AMD is uniquely positioned to lead the next generation of high-performance and AI computing»; «AMD has expanded its AI PC portfolio 2.5x since 2024»; «AMD delivers full-stack AI solutions».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/hardware/ryzen-ai-npu-llm-in-a-container/","summary":"La NPU di un portatile Ryzen AI vale 50 TOPS e sulla maggior parte delle installazioni Linux resta ferma. Qui si compila il driver amdxdna di AMD tenendo sull\u0026rsquo;host solo il modulo del kernel, si costruisce FastFlowLM con il runtime XRT di AMD in un container podman rootless allineato a quel driver, si lega tutto al loopback IPv6 e lo si avvia al boot con Quadlet. Poi cosa fa: nove modelli misurati, un test di contesto da 232.000 token, Whisper che trascrive la voce a dieci volte il tempo reale, Open WebUI e i 7.000 token nascosti che aggiungeva a ogni messaggio, e velocità ed energia della NPU misurate contro llama.cpp sulla iGPU Radeon 860M. Infine la cronologia: tre anni dall\u0026rsquo;annuncio di Ryzen AI a un modello linguistico sulla sua NPU sotto Linux, arrivato da un progetto che AMD non ha avviato, mentre lo sforzo andava a Copilot+ sul Fisher-Price OS (Windows) invece che al data centre e agli strumenti Linux che i professionisti dell\u0026rsquo;AI usano davvero.","title":"Un LLM sulla NPU Ryzen AI, in un container"},{"content":"Lo dico subito: lavoro per croit, che ha scritto FlashStore. Tutto quello che segue è letto dal codice sorgente e dalla documentazione di Ceph alla v21.2.0 e dallo snapshot pubblico di ceph-rust di croit, tutto linkato in fondo alla pagina. Dove il ragionamento di croit sta da una parte di una discussione, dico di chi è il ragionamento.\nDue riscritture dello stesso demone L\u0026rsquo;OSD classico di Ceph è un server C++ multithread cresciuto sui dischi rotanti. Su NVMe veloci e reti veloci spende buona parte della sua CPU in cose che non sono salvare i tuoi dati: passare operazioni tra pool di thread, prendere lock, aspettare altri thread. Due progetti si sono messi a risolverlo riscrivendo l\u0026rsquo;OSD da capo.\nUno è Crimson, quello di Ceph. La documentazione di Umbrella lo chiama «the next generation ceph-osd», costruito «to deliver enhanced performance on fast network and storage devices»1. L\u0026rsquo;altro è l\u0026rsquo;OSD FlashStore di croit, dal progetto ceph-rust, in anteprima pubblica dal 9 novembre 20262.\nEntrambi dicono di essere sostituti diretti. Entrambi dicono di essere per NVMe. Entrambi sono in anteprima, e nessuno dei due dovrebbe tenere dati di produzione oggi. Quindi se usi Ceph su NVMe e ti chiedi quale dei due seguire, vale la pena sapere dove differiscono davvero, perché non è dove farebbero pensare i titoli.\nQui li confronto come li troveresti su Ceph 21.2.0, Umbrella: Crimson come quella release lo documenta e lo distribuisce, contro FlashStore, che è costruito e testato contro la stessa release2. È il seguito di FlashStore contro BlueStore di Umbrella, e tutto quello che lì è già spiegato su FlashStore lo do per letto.\nDue riscritture di un demone ceph-osd classico C++, thread Crimson Ceph upstream, C++ su Seastar croit-flashstore-osd croit, Rust, runtime proprio BlueStore predefinito SeaStore nativo CyanStore niente dati FlashStore l'unico store Due riscritture dell\u0026rsquo;OSD classico. Crimson tiene tre store tra cui scegliere, con BlueStore come predefinito; FlashStore ne ha uno. Da dove viene ciascuno La prima differenza è chi lo costruisce e come.\nCrimson FlashStore Costruito da Ceph upstream, nell\u0026rsquo;albero principale croit Linguaggio C++ Rust Framework Seastar executor single-thread di croit Codice in ceph/ceph riscrittura clean-room, nessun codice Ceph linkato Sviluppo upstream, aperto snapshot in sola lettura durante l\u0026rsquo;anteprima; aperto dopo la prima release di produzione Licenza quella di Ceph demone LGPL-3.0, client MPL-2.0 Stato, con parole sue «not suitable for production use» «not yet recommended for production data» GA prevista non indicata Q1 2027 Crimson vive nel repository di Ceph ed è costruito dagli sviluppatori di Ceph. È scritto su Seastar, un framework C++ per server thread-per-core nato da ScyllaDB3. La documentazione di Umbrella dice chiaro e tondo che «is in a tech-preview stage and is not suitable for production use»1.\nFlashStore è scritto da zero in Rust e non linka nessun codice Ceph; il C++ di Ceph viene letto come riferimento e reimplementato a partire dalle specifiche di croit4. Il suo README dice che serve per test e valutazione e che è «not yet recommended for production data», con la disponibilità generale prevista per il primo trimestre del 20272. Il repository pubblico è uno snapshot in sola lettura: «no issue tracker, no contribution workflow»2.\nQuella riga merita una lettura attenta. Crimson è sviluppato all\u0026rsquo;aperto, e chiunque può leggere le pull request e discuterne. FlashStore, per ora, arriva come snapshot finiti da una sola azienda: puoi leggere ogni riga, ma non puoi ancora mandargli una patch. È la fase di anteprima, non il piano. L\u0026rsquo;anteprima serve a raccogliere il feedback della community mentre croit fa girare internamente i suoi casi di test di produzione, prima di dichiarare l\u0026rsquo;OSD sicuro da usare. Lo sviluppo aperto arriva dopo quella prima release di produzione, la stessa strada che prende la maggior parte dei progetti open source sponsorizzati da un\u0026rsquo;azienda. Questo viene dall\u0026rsquo;interno di croit e non da una roadmap pubblicata, quindi tienili a quella parola.\ncroit ha valutato di fare un fork di Crimson e ha messo per iscritto perché non l\u0026rsquo;ha fatto. Il suo ADR dice che Crimson «tries to support everything (HDD, alienstore/BlueStore, all pool types)», e aggiunge «Complex code is never fast»4. Questa è l\u0026rsquo;opinione di croit su Crimson, non una misura, e la tratterei come tale. Lo stesso ADR ha scartato il fork anche per via della LGPL4, e otto giorni dopo croit ha rilasciato il proprio demone sotto LGPL-3.05. Quindi la licenza non è mai stata davvero il motivo.\nSicurezza della memoria: Rust contro C++ Un OSD è il codice che tiene i tuoi dati. Un use-after-free o un buffer overrun lì dentro non è un crash da cui riparti; sono dati corrotti su disco, copiati su ogni replica. È esattamente la classe di bug che le agenzie di cybersicurezza occidentali hanno passato gli ultimi tre anni a chiedere all\u0026rsquo;industria di eliminare in fase di progetto.\nLinea guida Chi l\u0026rsquo;ha firmata Cosa dice The Case for Memory Safe Roadmaps, dicembre 2023 CISA, NSA e FBI (USA), ACSC dell\u0026rsquo;ASD (Australia), CCCS (Canada), NCSC-UK, NCSC-NZ, CERT-NZ C e C++ non sono sicuri per la memoria; pubblicate una roadmap per abbandonarli Product Security Bad Practices v2.0, gennaio 2025 CISA e FBI nuove linee di prodotto per infrastrutture critiche in C o C++ sono «dangerous» dove esistono linguaggi sicuri per la memoria La linea guida congiunta lo dice in modo esplicito: «Programming languages such as C and C++ are examples of memory unsafe programming languages»6. CISA e FBI vanno oltre, e definiscono pericoloso «the development of new product lines for use in service of critical infrastructure or NCFs in a memory-unsafe language (e.g., C or C++)» quando si potrebbe usare un\u0026rsquo;alternativa sicura per la memoria7. È una linea guida, non una legge. Ma lo storage sotto i servizi critici è proprio il codice a cui mira, ed entrambi questi OSD di nuova generazione verranno giudicati su quella base.\nFlashStore la rispetta. È scritto in Rust, e l\u0026rsquo;ADR di croit dà il motivo in una riga: «Storage = correctness-critical; memory-safety bugs = data loss»8. Il compilatore controlla la sicurezza della memoria ovunque tranne nel codice marcato unsafe, e lo stesso ADR lo confina ai moduli FFI, DMA, NVMe e network-driver, ognuno con un commento SAFETY8. L\u0026rsquo;ho contato nello snapshot: 1.216 righe che contengono unsafe su 696.125 righe di Rust, circa lo 0,17%, e stanno nei crate RDMA, runtime, NVMe e store, dove il codice parla con l\u0026rsquo;hardware. La linea guida congiunta nomina proprio questa via di fuga, notando che Rust «can contain the \u0026lsquo;unsafe\u0026rsquo; keyword»6, quindi la misura onesta è questa: non zero, ma piccola, recintata, e nei posti dove te la aspetti. Il C che chiama, SPDK e DPDK, sta dietro quegli stessi confini8.\nCrimson no. È un nuovo OSD scritto in C++ su un framework C++13, cioè il linguaggio che le agenzie qui sopra indicano come non sicuro per la memoria. Ogni sua riga è fuori da ciò che un compilatore può controllare per la sicurezza della memoria, e nella configurazione predefinita affida lo store a BlueStore, che è anch\u0026rsquo;esso C++.\nCrimson FlashStore Linguaggio C++ Rust Sicurezza della memoria controllata dal compilatore no sì, fuori da unsafe Codice non controllato tutto circa lo 0,17% delle righe, driver e FFI Store predefinito BlueStore, C++ FlashStore, Rust Conforme alle linee guida Five Eyes sulla memoria no sì Gli sviluppatori di Ceph non hanno scelto il C++ alla leggera; Crimson è cresciuto da una base di codice C++, e riscrivere sul posto voleva dire restarci dentro. È un percorso ingegneristico ragionevole. Resta il fatto che l\u0026rsquo;OSD di nuova generazione di Ceph è scritto proprio nel tipo di linguaggio che le agenzie di cinque paesi hanno chiesto al nuovo codice critico di lasciarsi alle spalle.\nCome entra ciascuno in un cluster Questa è la differenza pratica più grande tra i due, e non riguarda per niente le prestazioni.\nUn OSD FlashStore entra nei pool che hai già. Sta negli stessi placement group accanto agli OSD BlueStore classici, e sostituisci un disco alla volta2.\nUn OSD Crimson no. Neanche lontanamente. La documentazione di Umbrella dice: «Crimson OSD won\u0026rsquo;t instantiate PGs from non-Crimson pools»1. Il codice fa esattamente questo. Quando il monitor chiede a un OSD Crimson di creare un PG in un pool senza il flag crimson, scrive nel log «pool lacks crimson flag» e annulla la creazione9.\nQuali pool serve ciascuno il tuo pool esistente senza flag crimson OSD classico BlueStore OSD FlashStore stessi PG OSD Crimson solo pool crimson PG ignorati pool nuovo, --crimson autoscale spento FlashStore prende PG nei tuoi pool esistenti. Crimson serve solo pool creati con il flag crimson, quindi servono pool nuovi e i dati copiati dentro. Quindi una prova di Crimson vuol dire pool nuovi, creati con il flag crimson, e i tuoi dati spostati dentro. E quei pool arrivano con condizioni che il monitor fa rispettare:\nRegola dei pool Crimson (Umbrella) Dove L\u0026rsquo;autoscaling dei PG deve essere spento quando si crea il pool OSDMonitor, creazione del pool10 Il merge dei PG (ridurre pg_num) è rifiutato OSDMonitor, modifica di pg_num11 Lo split dei PG è ammesso solo finché crimson_allow_pg_split è true stesso punto, e l\u0026rsquo;opzione12 I pool EC devono essere del tipo EC ottimizzato, senza eccezioni OSDMonitor, creazione del pool13 Niente OMAP sui pool EC stesso punto13 FlashStore serve i pool classici, sia replicati sia erasure-coded, e declina le configurazioni EC che non supporta invece di rifiutarle al monitor14. Nessuno dei due approcci è sbagliato. Ma uno ti permette di provare su una copia della disposizione reale dei tuoi pool, e l\u0026rsquo;altro ti obbliga prima a costruirne una separata.\nNessun passaggio per i pool che hai già Allora, puoi trasformare un pool esistente in un pool Crimson e spostarlo un disco alla volta? No.\nLa documentazione di Umbrella dice che Crimson sta «aiming to allow seamless migration from existing ceph-osd deployments»1. Aiming, cioè ci punta. La release non lo fa, e il codice mostra perché non può. Il flag crimson è un\u0026rsquo;opzione di ceph osd pool create e di nient\u0026rsquo;altro15. ceph osd pool set non ha nessuna variabile crimson da impostare su un pool che esiste già16. E un OSD Crimson ignora ogni PG di un pool senza il flag, come visto sopra9. Non ho trovato nessuno strumento di conversione, né nel codice né nella documentazione.\nSpostare un pool esistente Crimson (Umbrella) FlashStore, oggi Tenere lo stesso pool no, serve un pool nuovo sì Si può aggiungere il flag dopo no, solo alla creazione non serve Come si spostano i dati li copi tu, da pool a pool li riporta il cluster con il backfill Client da ripuntare sì, sul pool nuovo no Un disco alla volta no sì Questo fa del passaggio a Crimson una copia di dati che gestisci tu: le immagini RBD si possono migrare a caldo «between different pools»17, e i dati a oggetti o a file hanno bisogno di qualunque strumento le tue applicazioni usino per copiarli. Poi ogni client va puntato sul pool nuovo.\nFlashStore è compatibile con i pool che usi oggi. Lo prepari su un disco, il cluster fa il backfill dei placement group che gli vengono assegnati, e i tuoi client non si accorgono che il pool è cambiato sotto di loro, perché non è cambiato18. Tutta la differenza tra una riscrittura che entra nel tuo cluster e una che gli sta accanto è qui.\nCosa dice ciascuno al monitor Crimson si presenta. All\u0026rsquo;avvio manda osd_type=crimson19, e il monitor si rifiuta di farlo entrare se il flag allow_crimson dell\u0026rsquo;OSDMap non è impostato, con una riga di log che dice che crimson-osd «is considered unstable and may result in crashes or data loss»20. Per arrivare fin lì servono quattro comandi presi dalla documentazione, e il primo imposta un\u0026rsquo;opzione che si chiama enable_experimental_unrecoverable_data_corrupting_features1.\nFlashStore fa l\u0026rsquo;opposto. Non manda nessun osd_type e dichiara osd_objectstore=bluestore, quindi il monitor vede un OSD classico e non fa domande21. L\u0026rsquo;articolo precedente spiega perché: il monitor di Umbrella abilita funzioni come le sovrascritture EC solo se ogni OSD del pool dichiara BlueStore21. Questo vale per i monitor e i manager standard in produzione oggi. Sulle build di Ceph di croit, dove sono modificati per riconoscerlo, FlashStore si dichiara flashstore21.\nCosa controlla il monitor all'avvio OSD Crimson osd_type=crimson mon: allow_crimson impostato? set-allow-crimson no: avvio rifiutato «crashes or data loss» OSD FlashStore nessun osd_type mon: un OSD classico objectstore=bluestore si avvia, nessun flag serve i pool esistenti Crimson va fatto entrare, per nome, dietro un flag su cui il monitor avverte. FlashStore entra come un OSD classico. Preferisco che un software mi dica cos\u0026rsquo;è. Crimson lo fa. Il suo è il modo onesto, e il nome del flag non ti lascia dubbi su cosa stai accettando. Il modo di FlashStore è quello che fa funzionare la sostituzione diretta sui monitor e i manager standard che la gente usa adesso, ed è una misura di compatibilità, non lo stato finale. Sono scelte deliberate entrambe, ed entrambe messe per iscritto. Sappi solo con quale delle due hai a che fare quando conti i tuoi OSD.\nCore: reactor contro thread fissati in polling Entrambi i progetti hanno buttato via i pool di thread. Bene. Entrambi usano un thread per core e dividono il lavoro per core. La differenza sta in quanto chiedono all\u0026rsquo;operatore e in quanto stretto tengono il core.\nCrimson FlashStore Unità di lavoro un reactor Seastar per core un thread fissato per core Numero di core crimson_cpu_num, nessun default, va impostato flashstore_cores, default 8 Fissato ai core solo con crimson_cpu_set sì, flashstore_lcores Comportamento a riposo polling per 200 µs, poi dorme polling, idle adattivo Busy-poll completo opzionale, crimson_poll_mode è il progetto, con backoff a riposo Modificabile dopo il deploy no shard dello store fissati alla preparazione Su Crimson, crimson_cpu_num «does not have a default value», va impostato prima del deploy degli OSD, e «cannot be changed after deployment»1. Non fissa i thread a meno che tu non imposti anche crimson_cpu_set, che la documentazione descrive come «generally less recommended due to its complexity»1. A riposo il reactor fa polling per 200 µs prima di tornare a dormire, e c\u0026rsquo;è una modalità di polling completo «at the expense of 100% cpu usage», spenta di default22. Anche SeaStore rifiuta un cambio nel numero di reactor dopo mkfs23.\nFlashStore fissa i thread per progetto, fa polling per progetto, e rallenta a riposo2425. Il numero di shard dello store è fissato quando lo store viene preparato, lo stesso vincolo in un posto diverso26.\nIn pratica, entrambi vogliono core interi ed entrambi vogliono che tu li dimensioni prima del deploy. Crimson rende il polling una scelta da attivare. FlashStore ne fa il comportamento predefinito e lascia alla logica di idle il compito di recuperare un po\u0026rsquo; di CPU.\nLo store predefinito di Crimson è BlueStore Questa è la parte che mi ha sorpreso. Non avrebbe dovuto.\nCrimson ha due tipi di object store. Quelli nativi girano dentro il reactor Seastar; quelli non nativi passano attraverso «a thread pool proxy» verso «alien threads: worker threads not managed by Seastar»1. SeaStore è quello nativo. BlueStore è non nativo. E BlueStore è il predefinito.\nLa documentazione è schietta. SeaStore «is the primary native object store for Crimson OSD, though it is not the default as the support is in early stages»1. Cephadm fa il deploy di Crimson con --objectstore bluestore se non gli dici altrimenti, e anche allora SeaStore non si può installare con --method raw; ti dicono di usare LVM1.\nLo store predefinito di Crimson, contro FlashStore Crimson, store predefinito reactor Seastar crimson_cpu_num thread pool proxy passaggio fuori dal reactor alien threads crimson_bluestore_num_threads BlueStore RocksDB su BlueFS FlashStore core che possiede il PG fissato, in polling shard dello store, stesso core nessun passaggio coda NVMe, stesso core SPDK o io_uring Un OSD Crimson predefinito passa ogni operazione sullo store dal suo reactor a un pool di thread normali che eseguono BlueStore. FlashStore tiene l\u0026rsquo;intero percorso sul core che possiede il PG. Quindi un OSD Crimson installato oggi con i default esegue un front end Seastar sopra lo stesso BlueStore, RocksDB e BlueFS che usa l\u0026rsquo;OSD classico, con crimson_bluestore_num_threads thread riservati a lui22. Sul lato dello store non è cambiato niente rispetto all\u0026rsquo;OSD classico. È un modo sensato di costruire un percorso di migrazione. È anche il motivo per cui confrontare «Crimson» con FlashStore sulle prestazioni significa ben poco se non dici quale store stava usando Crimson.\nIl confronto corretto per lo store è SeaStore contro FlashStore. È il resto di questo articolo.\nSeaStore e FlashStore: dove stanno i metadati Entrambi gli store sono stati scritti per NVMe fin dall\u0026rsquo;inizio, entrambi sono divisi per core, ed entrambi tengono i metadati in B-tree propri invece che in RocksDB. Ma la loro struttura è molto diversa.\nSeaStore dà a ogni reactor la propria radice27. Sotto stanno un albero degli onode, un albero LBA e un albero backref. L\u0026rsquo;onode di ogni oggetto punta poi al proprio B-tree OMAP e al proprio B-tree XATTR, e a extent di dati con indirizzi logici27. L\u0026rsquo;albero LBA mappa quegli indirizzi logici su quelli fisici, così un blocco può spostarsi sul disco senza che cambino gli alberi dell\u0026rsquo;oggetto; la documentazione indica questa indirezione come il motivo per cui la maggior parte degli extent «can be relocated freely»27.\nFlashStore mette tutto in un solo B+tree copy-on-write per shard: onode, xattr, OMAP, mappe degli extent con un crc32c per ogni blocco da 4 KiB, il log dei PG e la bitmap dell\u0026rsquo;allocatore28. Le mappe degli extent puntano direttamente ai blocchi fisici. Non c\u0026rsquo;è nessuno strato logico in mezzo.\nDove stanno i metadati SeaStore radice albero onode albero LBA albero backref onode OMAP B-tree proprio XATTR B-tree proprio dati indir. logico indirizzo logico, poi albero LBA, poi disco FlashStore un B+tree COW per shard onode, xattr OMAP mappe extent + crc32c log PG, info PG bitmap allocatore mappa extent, poi disco SeaStore: un albero per ogni tipo di cosa, un B-tree per oggetto per OMAP e xattr, e un albero LBA per trovare i dati. FlashStore: un albero per shard, che punta direttamente al disco. Entrambe le scelte hanno un motivo. L\u0026rsquo;indirezione di SeaStore è ciò che rende economico il suo cleaner: può spostare dati vivi senza riscrivere ogni albero che li punta. FlashStore non ne ha bisogno, perché non ha un cleaner, come si vede più avanti. Il suo ADR elenca «Per-object omap subtree/root» tra le alternative considerate e scartate28.\nUna differenza da conoscere sui checksum: SeaStore calcola il suo crc32c su un intero extent in cache29, mentre FlashStore ne tiene uno per ogni blocco da 4 KiB28.\nL\u0026rsquo;ordine in cui si fa il commit di una scrittura Il tipo di device predefinito di SeaStore è SSD, che usa il backend segmentato30. Su quel backend una transazione è un record di journal che contiene delta, e ai dati possono succedere due cose.\nGli extent piccoli e di breve vita possono viaggiare inline nel record di journal, e allora il record è tutto il commit27. Gli extent più grandi o più longevi vanno in segmenti separati out-of-line, e allora la documentazione fissa l\u0026rsquo;ordine: il «final record with the deltas should be written only once the other blocks are persisted»27. Sono due scritture in serie, la stessa forma del commit dati-poi-RocksDB di BlueStore.\nFlashStore scrive l\u0026rsquo;extent di dati e l\u0026rsquo;unità di WAL nello stesso momento, mette il crc32c dei nuovi dati nel record del WAL così il replay può verificarlo, e dà conferma quando entrambi sono durevoli28. Un solo viaggio al device, qualunque sia la dimensione.\nQuando può partire il commit SeaStore extent piccolo record di journal extent inline + delta ack 1 viaggio SeaStore out-of-line extent nel segmento OOL attesa persistenza record di journal delta ack 2 viaggi FlashStore dati, 4 KiB nuovi unità WAL, crc dei dati ack 1 viaggio tempo SeaStore sul suo device segmentato predefinito: un viaggio quando l\u0026rsquo;extent entra nel record di journal, due in serie quando va out-of-line. FlashStore: dati e record di log insieme. Quanto conti dipende dal tuo carico di lavoro, esattamente come nel confronto con BlueStore. A bassa queue depth, dove i client aspettano ogni scrittura, un secondo viaggio è latenza reale. Sotto carico, il batching ne nasconde la maggior parte.\nRecuperare lo spazio L\u0026rsquo;altra metà di un progetto log-structured è fare pulizia.\nSeaStore sul backend segmentato scrive sempre e solo in segmenti aperti. Prima che un segmento possa essere riusato, i suoi blocchi vivi vanno riscritti altrove, e il documento di progetto dice quanto costa: «we must \u0026lsquo;clean\u0026rsquo; one byte of an existing segment for every byte written at steady state»27. Mescola parte di questa pulizia alle scritture in corso, per evitare picchi, e fa il resto in background quando il disco è più tranquillo27. La dimensione del segmento è di 64 MiB per default31.\nSeaStore ha anche un secondo backend per NVMe, il random block manager, che la documentazione dice essere «Preferred for fast NVMe devices where overwrites are efficient enough that log structured updates aren\u0026rsquo;t worth the overhead»27. Non è il predefinito. Lo scegli con seastore_main_device_type30.\nFlashStore non ha un segment cleaner. Nessuno. Un blocco sostituito torna all\u0026rsquo;allocatore dello shard appena un checkpoint lo ha superato, cosa che succede ogni cinque secondi finché c\u0026rsquo;è lavoro non persistito, o prima quando l\u0026rsquo;anello del WAL è pieno a metà28. Il suo documento di progetto ha scartato senza mezzi termini una struttura log-structured28. Questo non vuol dire che non abbia lavoro in background: unisce e compatta comunque le pagine dell\u0026rsquo;albero e deframmenta lo spazio libero, con un ritmo regolato sotto l\u0026rsquo;I/O dei client28. Ma non copia mai i tuoi dati vivi per fare spazio.\nRecuperare lo spazio SeaStore, segmentato (default) segmento chiuso blocchi vivi + morti il cleaner riscrive i vivi in un segmento aperto segmento vuoto discard, riuso a regime: pulire circa un byte per ogni byte scritto FlashStore blocco sostituito da un extent nuovo trattenuto fino al checkpoint ogni 5 s o WAL a metà torna nella bitmap nessun dato vivo spostato Il backend predefinito di SeaStore paga le scritture sequenziali con un cleaner che sposta dati vivi. FlashStore libera i blocchi sostituiti sul posto dopo un checkpoint e non sposta niente. Sulla flash, che fa già la sua garbage collection dentro il disco, preferisco che l\u0026rsquo;OSD non ne faccia girare una seconda sopra. La documentazione di SeaStore sembra essere d\u0026rsquo;accordo, visto cosa dice del backend RBM. La differenza è che FlashStore ne ha fatto l\u0026rsquo;unica opzione e SeaStore quella non predefinita.\nSu cosa gira ciascuno Crimson (Umbrella) FlashStore HDD sì, con BlueStore; SeaStore ha un tipo di segmento per HDD no NVMe sì sì, l\u0026rsquo;unico obiettivo Protezione da perdita di alimentazione nessun requisito indicato richiesta, mkfs si rifiuta senza Layout del device LVM per SeaStore tramite cephadm namespace interi, niente partizioni Protocollo di rete solo msgr2 solo msgr2 Backend di I/O io_uring di default; linux-aio, epoll SPDK di default, livello io_uring Pool pool nuovi con il flag crimson pool classici esistenti Spostare i dati esistenti copiarli in un pool nuovo backfill nello stesso pool Installato con cephadm, --osd-type crimson pacchetti, croit-flashstore-tool Build consigliata l\u0026rsquo;ultima build CI di main snapshot di release Crimson mantiene l\u0026rsquo;ampiezza. La documentazione dice che SeaStore «may not be suitable for traditional HDDs», ma che «Crimson will continue to support BlueStore ensuring compatibility with HDDs and slower SSDs»1, e il documento di progetto di SeaStore elenca ancora un interesse per gli HDD27. Il suo messenger rifiuta la v1 senza appello, «ProtocolV1 is no longer supported»32, la stessa scelta fatta da FlashStore33. La sua documentazione consiglia «one of the latest available builds, as Crimson evolves rapidly», che in pratica vuol dire immagini CI di main1.\nFlashStore restringe tutto a NVMe con protezione da perdita di alimentazione, e da lì ricava la sua semplicità34. Che è esattamente lo scambio descritto dall\u0026rsquo;ADR di croit, visto dall\u0026rsquo;altra parte.\nDue risposte alla stessa domanda Entrambi i progetti sono partiti dalla stessa osservazione: l\u0026rsquo;OSD classico spreca hardware veloce. Hanno dato risposte molto diverse.\nLa risposta di Crimson è quella della community. Riscrivere l\u0026rsquo;OSD sul posto, dentro Ceph, tenere funzionanti ogni vecchio store e ogni vecchio disco mentre il nuovo store matura, e lasciare che tutti vedano il lavoro mentre succede. È lento, e si vede. In Umbrella, l\u0026rsquo;OSD Crimson predefinito esegue ancora BlueStore attraverso un pool di thread, i suoi pool sono recintati e separati dai tuoi, e accenderlo vuol dire digitare le parole «unrecoverable data corrupting». Ma appartiene a tutti quelli che usano Ceph, e nessuno te lo può togliere.\nLa risposta di FlashStore è quella del vendor. Scegliere un obiettivo più stretto, NVMe con protezione da perdita di alimentazione, buttare via tutto ciò che esisteva solo per altro hardware, e consegnare uno store che entra nei pool che hai già. È più veloce, e si vede anche questo. Ma viene da una sola azienda, come snapshot in sola lettura fino alla prima release di produzione, e su un cluster standard entra dicendo al monitor di essere BlueStore.\nLavoro per quell\u0026rsquo;azienda, quindi pesa di conseguenza quello che segue. croit ha fatto la scommessa tecnica giusta per i cluster all-flash. Crimson ha fatto la scommessa giusta per Ceph come progetto. Non sono la stessa cosa. Un progetto che serve tutti non può abbandonare gli HDD. Un vendor può, e deve, se è quello che comprano i suoi clienti.\nQuello che non farei è scegliere tra i due sulla base di un grafico di benchmark di una delle due parti. I numeri di Crimson dipendono da quale dei suoi tre store stava girando; quelli di FlashStore vengono dal laboratorio di croit. Entrambi i progetti pubblicano i loro documenti di progetto. Leggili, poi metti entrambi sui dischi che installeresti davvero e fai girare il tuo carico di lavoro. Quello che fa ancora quello che dicono i suoi documenti quando in gioco ci sono i tuoi dati è quello che vale la pena aspettare.\nCeph Umbrella, Crimson (Tech Preview) — «the next generation ceph-osd», «not suitable for production use», i flag richiesti, crimson_cpu_num, backend nativi e non nativi, SeaStore «not the default», --method raw non supportato. Sorgente: doc/crimson/crimson.rst alla v21.2.0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit ceph-rust, README at snapshot 48f9014 — dichiarazione di sostituto diretto, anteprima dal 9 novembre 2026, GA Q1 2027, «not yet recommended for production data», «no issue tracker, no contribution workflow».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSeastar — il framework C++ su cui è costruito Crimson.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0003, green-field, no Crimson fork — «Crimson = C++/seastar, tries to support everything (HDD, alienstore/BlueStore, all pool types) -\u0026gt; complexity. Complex code is never fast.»; fork scartato per «C++, complexity, LGPL».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0164, licences — datato 2026-10-17; demone LGPL-3.0-only.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA, NSA, FBI, ASD\u0026rsquo;s ACSC, CCCS, NCSC-UK, NCSC-NZ, CERT-NZ: The Case for Memory Safe Roadmaps (December 2023) — «Programming languages such as C and C++ are examples of memory unsafe programming languages»; Rust «can contain the \u0026lsquo;unsafe\u0026rsquo; keyword».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA and FBI: Product Security Bad Practices, v2.0 (January 2025) — nuove linee di prodotto per infrastrutture critiche «in a memory-unsafe language (e.g., C or C++) where readily available alternative memory-safe languages could be used is dangerous».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0002, language: Rust — «Storage = correctness-critical; memory-safety bugs = data loss»; unsafe «confined to ffi/dma/nvme/net-driver modules with SAFETY comments»; SPDK e DPDK tramite FFI.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/osd/shard_services.cc — «ignoring pgid {}, pool lacks crimson flag».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, crimson pool creation — «crimson-osd does not support changing pg_num or pgp_num, pg_autoscale_mode must be set to \u0026lsquo;off\u0026rsquo;».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, crimson pg_num changes — «pg merging is not yet supported in Crimson».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson_allow_pg_split — «Allow Crimson pools to increase their PG count (split)», default true.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, EC pools for Crimson — «For Crimson - only EC-optimized pools are supported», «Omap is not supported by EC pools in crimson».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, erasure-coded pools — EC legacy e ottimizzato serviti di default; i pool non supportati vengono declinati dall\u0026rsquo;OSD.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, MonCommands.h, osd pool create — name=crimson,type=CephBool,req=false, l\u0026rsquo;unico punto in cui il flag è accettato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, MonCommands.h, osd pool set — le variabili impostabili; crimson non è tra queste.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, RBD image live-migration — «RBD images can be live-migrated between different pools».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, migrate from classic — aggiungi o libera un disco, prepara FlashStore, lascia che il backfill sposti i dati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/osd/osd.cc — m-\u0026gt;metadata[\u0026quot;osd_type\u0026quot;] = \u0026quot;crimson\u0026quot;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, boot check — «Disallowing boot of crimson-osd without allow_crimson OSDMap flag», «considered unstable and may result in crashes or data loss».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0019, report osd_objectstore=bluestore — nessuna chiave osd_type, i controlli delle funzioni BlueStore del monitor.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson.yaml.in — crimson_reactor_idle_poll_time_us 200, crimson_poll_mode «at the expense of 100% cpu usage» default false, crimson_bluestore_num_threads.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, seastore_require_partition_count_match_reactor_count — «disable osd shards changes upon restart», default true.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0006, thread-per-core runtime — un thread fissato in busy-polling per core, ogni PG posseduto da un solo core.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0004, storage I/O — SPDK e il livello io_uring, idle temporizzato sul device.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, configuration reference — flashstore_cores default 8, flashstore_lcores, flashstore_store_shards fissato alla preparazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, SeaStore developer documentation — radice per reactor, alberi onode, OMAP, LBA e backref, «clean» un byte per ogni byte scritto, l\u0026rsquo;ordine del record di journal, il backend RBM. Sorgente: doc/dev/crimson/seastore.rst alla v21.2.0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0021, storage engine — un B+tree COW per shard, commit in parallelo, checkpoint, manutenzione in background, alternative scartate tra cui log-structured e «Per-object omap subtree/root».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/os/seastore/cached_extent.h — «Returns crc32c of buffer».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, seastore_main_device_type — «The main device type seastore uses (SSD or RANDOM_BLOCK_SSD)», default SSD.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, seastore_segment_size — default 64 MiB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/net/SocketMessenger.cc — «ProtocolV1 is no longer supported».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0168, out of scope — msgr1 escluso, solo v2.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, hardware and host requirements — PLP obbligatoria, namespace interi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/ceph/flashstore-against-crimson/","summary":"Crimson è la riscrittura dell\u0026rsquo;OSD fatta da Ceph stesso, in C++ sul framework Seastar, con un nuovo store nativo chiamato SeaStore; FlashStore è la riscrittura di croit, in Rust, con uno store tutto suo. Sono entrambi in anteprima ed entrambi puntano a NVMe e a reti veloci. Qui li confronto così come Ceph 21.2.0 Umbrella distribuisce Crimson, partendo dal codice sorgente e dalla documentazione di Ceph e dallo snapshot ceph-rust di croit: da dove viene ciascuno e con quale licenza, perché Rust rispetta le linee guida dei Five Eyes sulla sicurezza della memoria e C++ no, perché Crimson ha bisogno di pool suoi e di un flag sperimentale mentre FlashStore entra nei pool esistenti, perché Umbrella non ha modo di trasformare un pool esistente in un pool Crimson e quindi i dati vanno copiati, cosa dice ciascuno al monitor all\u0026rsquo;avvio, i reactor di Seastar contro i core fissati in polling, il fatto che un OSD Crimson predefinito esegue ancora BlueStore, gli alberi onode, OMAP e LBA di SeaStore contro l\u0026rsquo;unico albero per shard di FlashStore, l\u0026rsquo;ordine in cui ciascuno fa il commit di una scrittura, il segment cleaner di SeaStore, e quale hardware e quali pool accetta ciascuno.","title":"FlashStore contro Crimson: due riscritture dello stesso OSD"},{"content":"Lo dico subito: lavoro per croit, che l\u0026rsquo;ha scritto. Tutto quello che segue è letto dal codice sorgente e dalla documentazione pubblicati dei due progetti, linkati in fondo alla pagina, e dove la documentazione di croit non è d\u0026rsquo;accordo con il codice di croit, lo dico.\nL\u0026rsquo;OSD di Ceph, riscritto da zero croit ha pubblicato ceph-rust, un OSD di Ceph scritto da zero in Rust, con un object store suo chiamato FlashStore al posto di BlueStore1. È entrato in anteprima pubblica il 9 novembre 2026, con la disponibilità generale prevista per il primo trimestre del 20271. Non è un fork. La regola del progetto è che il C++ di Ceph viene letto come riferimento, messo per iscritto come specifica con parole di croit, e poi implementato a partire dalla specifica2.\nLa dichiarazione che conta per chiunque usi Ceph è quella del sostituto diretto. I tuoi monitor, i tuoi manager, la CLI ceph e i tuoi client restano come sono. Un OSD FlashStore entra negli stessi pool e negli stessi placement group degli OSD classici già presenti, e cambi un disco alla volta1.\nCosa viene sostituito ceph-mon, ceph-mgr 21.2.0 classico client librados, librbd, krbd un pool, gli stessi placement group ceph-osd BlueStore RocksDB su BlueFS C++, da Ceph croit-flashstore-osd FlashStore B+tree COW + WAL Rust, da croit Cambia solo l\u0026rsquo;OSD. Monitor, manager e client restano Ceph classico, e un placement group può tenere una copia su ciascun tipo. Quindi per un operatore la domanda è pratica. Se sostituisci un OSD BlueStore con uno FlashStore, cosa c\u0026rsquo;è di diverso sotto? Non in astratto, e non contro un BlueStore visto anni fa a una conferenza. Contro il BlueStore che usi davvero oggi se sei su Umbrella, Ceph 21.2.0, che è la release contro cui FlashStore è costruito e testato1.\nQuindi il confronto qui è questo, e solo questo. Il BlueStore di Umbrella come lo descrivono il suo codice e la sua documentazione, contro FlashStore come lo descrivono il suo codice e i suoi registri delle decisioni.\nRiguarda chiunque abbia cluster Ceph su NVMe, e chiunque abbia guardato quanti core gli costa un OSD. Non riguarda per niente i cluster su HDD, e il motivo viene fuori più avanti.\nCosa c\u0026rsquo;è nel repository Il repository è uno snapshot in sola lettura dell\u0026rsquo;albero di sviluppo privato di croit. Niente issue tracker, niente pull request; gli aggiornamenti arrivano come nuovi commit di snapshot1. È la fase di anteprima, e serve a raccogliere il feedback della community mentre croit fa girare internamente i suoi casi di test di produzione prima di dichiararlo sicuro da usare. Lo sviluppo aperto arriva dopo la prima release di produzione, come succede nella maggior parte dei progetti open source sponsorizzati da un\u0026rsquo;azienda. Questo snapshot è datato 10 novembre 2026 e contiene circa 700.000 righe di Rust e oltre 450 architecture decision record, gli ADR, cioè i brevi documenti che registrano perché è stata fatta ogni scelta di progetto.\nPer un confronto come questo, la parte utile sono gli ADR. Sono schietti, contengono misure, e registrano cosa è stato provato e buttato via oltre a cosa è rimasto.\nComponente Cosa sostituisce Anteprima GA (prevista) OSD FlashStore ceph-osd + BlueStore nov 2026 Q1 2027 librustyrados librados nov 2026 Q1 2027 librustyrbd librbd nov 2026 Q1 2027 Trasporto RDMA (RoCEv2) niente in Umbrella nov 2026 Q1 2027 CephFS2, RGW in Rust MDS, RGW Q1 2027 Q2 2027 ceph-mon, ceph-mgr non sostituiti n/d n/d Vale la pena conoscere le licenze prima di costruirci sopra qualcosa. Il demone e gli strumenti sono LGPL-3.0-only, le librerie client sono MPL-2.0, e la documentazione è CC-BY-SA-4.03. Le librerie client sono passate a MPL perché un programma Rust possa linkarle staticamente senza gli obblighi di ri-linking che porta la LGPL, il che è una scelta ragionata e messa per iscritto come tale3.\nAnteprima vuol dire quello che dice. Il README di croit stesso dice che serve per test e valutazione e che è «not yet recommended for production data»1. Neanch\u0026rsquo;io ci metterei ancora dati dei clienti, e niente nel resto di questo articolo cambia questo.\nDue store, uno accanto all\u0026rsquo;altro Un OSD ha due metà. La metà superiore parla il protocollo Ceph, possiede i placement group, fa peering, recovery e scrub. La metà inferiore, l\u0026rsquo;object store, trasforma «scrivi questi byte in questo oggetto» in blocchi su un disco e promette che sopravvivano a un\u0026rsquo;interruzione di corrente.\nBlueStore è la metà inferiore di Umbrella. La sua documentazione dice che «reads and writes to the devices directly in a \u0026lsquo;raw\u0026rsquo; fashion»4, e che consuma «raw block devices or partitions»5. I dati degli oggetti vanno direttamente sul block device. Tutto il resto, i metadati degli oggetti, l\u0026rsquo;OMAP e la sua contabilità interna, va in un database chiave/valore RocksDB incorporato, e RocksDB sta su BlueFS, un piccolo file system che BlueStore si porta dietro apposta56.\nFlashStore butta via tutto questo. Un solo B+tree copy-on-write per shard dello store contiene tutto: collection, metadati degli oggetti, attributi estesi, mappe degli extent, OMAP, il log dei PG, i contatori di riferimento e persino la bitmap dell\u0026rsquo;allocatore7. Accanto ci sono un anello di write-ahead log di tipo redo e l\u0026rsquo;area dati. Niente RocksDB, niente BlueFS, e nessun secondo database da tarare.\nDue stack sotto un OSD BlueStore di Umbrella FlashStore ceph-osd 8 shard op × 2 thread livello oggetti BlueStore allocatore hybrid dati oggetti block raw, aio RocksDB onode, omap, differite BlueFS block o block.db block layer del kernel flush prima del commit HDD, SSD o NVMe, qualsiasi partizione croit-flashstore-osd 1 thread fissato per core shard store per core allocatore proprio, niente lock condivisi dati oggetti extent nuovi da 4 KiB B+tree COW meta, omap, log PG anello WAL redo log, per shard SPDK (vfio) o io_uring niente flush sul percorso critico NVMe con PLP, 4 KiB, namespace intero BlueStore di Umbrella separa dati e metadati in alto e fa passare i metadati per RocksDB e BlueFS. FlashStore invece separa per core, e dentro ogni shard un solo albero contiene tutto ciò che non sono dati degli oggetti. L\u0026rsquo;altra grande separazione è il disco stesso. BlueStore passa per il block layer del kernel verso qualunque cosa gli dai. FlashStore parla con l\u0026rsquo;NVMe o con SPDK, un driver in userspace che toglie il device al kernel tramite vfio, o attraverso il kernel con io_uring89. SPDK è il backend predefinito. Il livello io_uring è quello che funziona dove vfio non funziona, ed è per questo che è quello su cui sono finito nella build su Proxmox.\nDove stanno i metadati Si parte da qui. Quasi tutto il resto ne deriva.\nBlueStore di Umbrella FlashStore Metadati degli oggetti chiavi RocksDB B+tree COW per shard OMAP chiavi RocksDB lo stesso B+tree di default; LSM o RocksDB opzionali alla preparazione Log dei PG chiavi RocksDB lo stesso B+tree Stato dell\u0026rsquo;allocatore allocatore hybrid, freelist in RocksDB bitmap per shard, dentro l\u0026rsquo;albero Device per i metadati block.db e block.wal opzionali nessuno, lo stesso NVMe Checksum dei dati crc32c ogni 4 KiB di default crc32c ogni 4 KiB, nella mappa degli extent Numero di store per OSD uno uno per core I default dal lato di BlueStore vengono direttamente dal file delle opzioni di Umbrella: RocksDB come backend chiave/valore, l\u0026rsquo;allocatore hybrid, checksum crc32c61011. Il checksum dei metadati di BlueStore «is handled by RocksDB and uses the crc32c algorithm», e per i dati gli costa «a checksum value (usually 4 bytes) for every 4 KB block of data»4. Sui checksum i due store sono d\u0026rsquo;accordo. FlashStore tiene un crc32c per ogni blocco da 4 KiB nella mappa degli extent e lo verifica in lettura7.\nÈ sulla struttura che si separano. Il RocksDB di BlueStore è un log-structured merge tree, quindi scrive, poi compatta in background, riscrivendo dati che ha già scritto. L\u0026rsquo;albero di FlashStore viene aggiornato in copy-on-write e riversato su disco ai checkpoint: ogni cinque secondi finché c\u0026rsquo;è qualcosa di non persistito, o quando l\u0026rsquo;anello del WAL arriva a metà7.\nUn\u0026rsquo;altra conseguenza è che FlashStore non ha un device veloce per i metadati, perché non gli serve. Su Umbrella puoi mettere block.db su un disco più veloce, e BlueStore metterà «as much metadata as it can on the DB device»4. FlashStore dà per scontato che ogni disco sia già un NVMe veloce, e tiene i metadati accanto ai dati. È un\u0026rsquo;ipotesi giusta per l\u0026rsquo;hardware a cui punta. È anche esattamente il motivo per cui non c\u0026rsquo;è una strada per gli HDD.\nL\u0026rsquo;OMAP è l\u0026rsquo;unico punto in cui FlashStore si copre. L\u0026rsquo;albero è il default, ma uno store si può preparare con un motore LSM di croit, o con RocksDB, dietro la stessa interfaccia12. Il motore OMAP si sceglie quando si crea lo store. Non lo cambi su un OSD in funzione.\nUna scrittura da 4 KiB, in due modi Ecco la differenza che sentiresti, se ne senti una.\nPrendi una scrittura da 4 KiB su un oggetto in Umbrella con le impostazioni predefinite su flash. bluestore_min_alloc_size_ssd è 4 KiB e bluestore_prefer_deferred_size_ssd è 0, quindi una scrittura intera da 4 KiB va su 4 KiB appena allocati1314. BlueStore invia quella scrittura dei dati, e la transazione resta in STATE_AIO_WAIT finché il disco non dice di aver finito15. Solo allora i metadati vengono messi in coda per RocksDB, e il thread di sync di RocksDB fa il flush del block device prima del commit16. Poi il client riceve la conferma.\nDue viaggi al device, in serie.\nFlashStore li manda entrambi insieme. I dati vanno in un extent nuovo da 4 KiB e l\u0026rsquo;unità di WAL va nell\u0026rsquo;anello del log in parallelo. Il record del WAL contiene il crc32c di ogni nuovo blocco di dati, così il replay dopo un crash può capire se i dati sono arrivati7. La conferma parte, nell\u0026rsquo;ordine del log, quando i dati, l\u0026rsquo;unità di WAL e ogni transazione precedente sono durevoli7. La motivazione che l\u0026rsquo;ADR dà per questo progetto è «parallel commit gives one device latency per ack»7.\nUna scrittura da 4 KiB, contro il tempo BlueStore scrittura dati 4 KiB nuovi, aio, attesa commit RocksDB log BlueFS + flush ack 2 viaggi FlashStore dati, 4 KiB nuovi unità WAL, crc dei dati ack 1 viaggio tempo La stessa scrittura da 4 KiB. BlueStore aspetta i dati prima del commit di RocksDB; FlashStore scrive insieme i dati e il loro record di log. Due cose tengono onesto il confronto. Su un OSD carico entrambi gli store raggruppano i commit, quindi sotto carico il divario è minore di una latenza di device per scrittura. E un singolo viaggio al device su NVMe dura qualche decina di microsecondi. Se lo noti dipende da se i tuoi client aspettano sulla latenza a bassa queue depth, come spesso fanno i database su RBD, o spingono throughput, dove sparisce.\ncroit ha provato ad andare oltre, a una sola scrittura sul device per transazione, alla maniera di ZFS. L\u0026rsquo;hanno costruito, l\u0026rsquo;hanno misurato e l\u0026rsquo;hanno buttato via: il guadagno si vedeva solo a queue depth 1 e la complessità non ne valeva la pena17. Lo valuto più di qualunque grafico di benchmark. È un registro delle decisioni che dice «l\u0026rsquo;abbiamo costruito e non ne valeva la pena», in pubblico.\nLa scrittura sotto i 4 KiB È nella scrittura più piccola che i due divergono davvero.\nDiciamo che un client sovrascrive 512 byte in mezzo a un blocco che contiene già dati. Umbrella usa ancora di default il suo percorso di scrittura originale; bluestore_write_v2, il rifacimento, è spento18. Su quel percorso, una scrittura più piccola di min_alloc_size in un blocco già allocato diventa una scrittura differita19. I dati viaggiano dentro la transazione di RocksDB come chiave con prefisso L, e vanno nella loro vera sede solo dopo che al client è stato detto che sono al sicuro2021.\nUna scrittura sotto i 4 KiB BlueStore, differita 1 legge il resto riempie fino a 4 KiB 2 dati nella chiave L log di RocksDB 3 commit, flush client confermato 4 scrive sul posto stessi 4 KiB di nuovo 5 cancella la chiave L un altro commit FlashStore 4 KiB nuovi interi + unità WAL in parallelo, mai sul posto client confermato poi libera il vecchio Il percorso differito di Umbrella per una scrittura sotto i 4 KiB in un blocco usato, contro l\u0026rsquo;extent nuovo di FlashStore. Il rosa segna ogni volta che vengono scritti i dati stessi. Quindi i dati arrivano al disco due volte. La documentazione di Umbrella non lo nasconde: «writes smaller than min_alloc_size must first pass through the BlueStore WAL»4.\nFlashStore non sovrascrive mai dati vivi sul posto, punto7. Gli oggetti fino a 2 KiB vanno oltre e vivono interamente nell\u0026rsquo;albero, quindi una sola scrittura nel WAL è tutto il commit7.\nQuesto significa anche che FlashStore non ha una coda di scritture differite da svuotare, nessun replay differito al mount e nessuna chiave L da ripulire. Paga invece da un\u0026rsquo;altra parte: i blocchi liberati vengono trattenuti fino al checkpoint successivo, quindi lo spazio liberato arriva in ritardo fino a un intervallo di checkpoint7.\nThread contro core La metà superiore dell\u0026rsquo;OSD differisce altrettanto.\nIl ceph-osd di Umbrella è un classico server multithread, e ogni numero nella metà sinistra del diagramma qui sotto è uno dei suoi default su flash22. Un\u0026rsquo;operazione attraversa diversi di quei pool lungo il percorso. Condividono stato dietro dei lock.\nFlashStore tiene l\u0026rsquo;intero percorso su un solo core fissato e in polling, dalla scheda di rete al disco e ritorno23. Ogni placement group appartiene esattamente a un core, e così tutto ciò che il PG tocca: «no locks, no atomics, no shared mutable state»24. Il traffico tra core passa per anelli single-producer, e con il messaggio passa anche la sua proprietà.\nThread contro core ceph-osd di Umbrella 3 thread messenger coda op mClock 8 shard × 2 thread bstore_kv_sync, bstore_kv_final RocksDB, BlueFS croit-flashstore-osd core 0 core 1 core n coda NIC msgr2, PG shard store coda NVMe coda NIC msgr2, PG shard store coda NVMe coda NIC msgr2, PG shard store coda NVMe anelli SPSC tra i core, niente lock Umbrella passa un\u0026rsquo;operazione da un pool di thread all\u0026rsquo;altro. FlashStore la tiene su un core dalla rete al disco, e attraversa i core solo tramite anelli. Lo store segue la stessa divisione. flashstore_store_shards ha come default uno shard per core, ognuno con il suo anello WAL, il suo albero e il suo allocatore, e un PG vive in esattamente uno shard257. BlueStore è uno store per OSD con un solo RocksDB.\nC\u0026rsquo;è un prezzo, e l\u0026rsquo;ADR lo dichiara: «idle cores burn CPU (accepted; optional adaptive sleep later)»23. Lavori successivi hanno aggiunto l\u0026rsquo;idle adattivo e le attese temporizzate sul device, così un core non gira a vuoto per tutta la latenza del device a bassa queue depth8, ma il principio resta, e flashstore_cores ha come default 8 quando non fissi un intervallo25. A FlashStore dai core interi.\nSu un nodo di storage dedicato va bene. Su una macchina iperconvergente dove quegli stessi core fanno girare anche VM, è il primo conto da fare.\nIl disco deve mantenere la sua promessa BlueStore è scritto per gestire un disco che mente su quando i dati sono al sicuro. FlashStore si rifiuta proprio di avere a che fare con quel disco.\nBlueStore di Umbrella FlashStore Cosa rende durevole una scrittura flush del block device prima del commit di RocksDB la scrittura completata su un disco con PLP Flush sul percorso critico sì no Disco con write cache volatile usato, e con flush mkfs lo rifiuta; controllo dell\u0026rsquo;host FAIL Eccezione non serve solo in laboratorio: bit FUA su ogni scrittura durevole Il lato BlueStore è il thread di sync kv già citato16. Il lato FlashStore è l\u0026rsquo;ADR sulla durabilità e il controllo dell\u0026rsquo;host: PLP vuol dire che il disco non dichiara nessuna write cache volatile, quindi un completamento significa che i dati sono su supporto stabile2426.\nÈ la scelta giusta per l\u0026rsquo;obiettivo, ma devi avere chiaro cosa esclude, perché quasi tutti gli NVMe consumer hanno una cache volatile e niente PLP, e così una buona parte del materiale «datacenter» venduto sul prezzo. Niente PLP, niente FlashStore. Qualunque cosa tu ne pensi per il resto.\nSu cosa FlashStore non gira Metti i requisiti uno accanto all\u0026rsquo;altro e il mercato a cui punta è evidente.\nBlueStore di Umbrella FlashStore Supporti HDD, SSD, NVMe solo NVMe Protezione da perdita di alimentazione non richiesta richiesta, mkfs si rifiuta senza Formato dei settori 512 B o 4 KiB 4 KiB previsto, avviso altrimenti Layout partizioni, LVM tramite ceph-volume namespace interi, niente partizioni Device DB/WAL separato supportato non esiste Cifratura a riposo --dmcrypt tramite ceph-volume fuori dallo scope Client msgr1 in ascolto di default rifiutati, solo msgr2 Cache tiering deprecato, ancora presente rifiutato, il pool diventa passivo Requisiti del kernel qualsiasi supportato io_uring: Linux 5.19+, o il 5.14 di RHEL 9 con backport; hugepage per SPDK La colonna di BlueStore è quella di Umbrella: ceph-volume cifra i volumi logici «using dmcrypt by specifying the --dmcrypt flag»27, e ms_bind_msgr1 è ancora true di default28. La colonna di FlashStore viene dal suo riferimento hardware e dalla sua decisione sullo scope2629.\nDue di queste meritano più di una riga di tabella.\nLa cifratura a riposo è esclusa, con un motivo: SPDK scavalca dm-crypt, e una cifratura dentro lo store non è prevista. La risposta dell\u0026rsquo;ADR sono i dischi NVMe autocifranti, o la cifratura sopra lo store, al client o in RGW29. Se hai un requisito di conformità che nomina dm-crypt sull\u0026rsquo;OSD, oggi è un blocco.\nmsgr1 è escluso come rischio accettato. I client kernel più vecchi del 5.11 e librados precedenti a Nautilus non possono proprio parlare con un OSD FlashStore29. La maggior parte delle installazioni è ben oltre. Alcune no, ed è la vecchia macchina dimenticata nell\u0026rsquo;angolo che se ne accorge.\nDice al monitor di essere BlueStore Questa è quella che fregherà qualcuno.\nDi default, un OSD FlashStore si avvia e dice ai monitor osd_objectstore=bluestore30. Non si nasconde. Aggiunge accanto le sue chiavi flashstore_version e flashstore_build30. Il motivo è la compatibilità: un monitor Umbrella permette funzioni come le sovrascritture EC su un pool solo quando ogni suo OSD dichiara BlueStore, e moduli del manager come Prometheus e telemetry si basano sullo stesso valore30. L\u0026rsquo;ADR dice esplicitamente che bluestore qui «is a compat value for mon/mgr feature gates, not a product name»30.\nC\u0026rsquo;è un interruttore, flashstore_report_objectstore=flashstore, che rinomina tutto: i metadati, le chiavi bluestore_bdev_*, il perf logger, i comandi tell e i codici di salute BLUESTORE_*. Servono monitor modificati, e il default resta bluestore2530. Le build di Ceph di croit hanno quelle modifiche, quindi lì FlashStore si dichiara flashstore e niente di quello che segue si applica. Il nome bluestore c\u0026rsquo;è per i monitor e i manager standard che la gente usa oggi in produzione.\nCosa viene detto al monitor OSD FlashStore impostazione predefinita osd_objectstore=bluestore flashstore_version=… mon, mgr: BlueStore sovrascritture EC ammesse OSD FlashStore report=flashstore osd_objectstore=flashstore flashstore_bdev_* mon classico: non BlueStore serve un mon modificato Lo store è lo stesso in entrambe le righe. Cambia solo il nome che dà. Stesso store, due nomi. Il default tiene contenti i monitor e i manager di Umbrella, al prezzo che gli OSD FlashStore contano come BlueStore ovunque guardi. Capisco il perché. Un controllo del monitor basato su una stringa è un progetto di Ceph, non di croit, e rifiutarsi di dire bluestore spegnerebbe funzioni su un cluster non modificato. Questa è la trappola su un cluster standard. Ogni dashboard, ogni script di inventario e ogni ceph osd count-metadata osd_objectstore che lanci conterà gli OSD FlashStore come BlueStore. Durante una migrazione, proprio quando hai più bisogno di sapere quali OSD sono quali, il campo più ovvio non ti dice niente.\nQuindi controlla flashstore_version in ceph osd metadata, non osd_objectstore. Mettilo nel tuo runbook prima che entri il primo OSD FlashStore.\nStesse manopole, comportamento diverso FlashStore legge molte delle opzioni esistenti di Ceph, e per lo più è una buona notizia. Non tutte le opzioni significano quello che significavano su Umbrella, e quelle che non lo fanno sono dove un cluster ben tarato ha una sorpresa.\nOpzione BlueStore di Umbrella FlashStore compression_mode, per pool none, passive, aggressive, force le stesse quattro, stesso significato compression_algorithm snappy di default snappy, zlib, zstd, lz4; livello zstd fisso a 1 bluestore_compression_max_blob_size_ssd 64 KiB blocchi da 64 KiB osd_memory_target 4 GiB, cache regolate in automatico a caldo letto una volta all\u0026rsquo;avvio, dimensiona le cache dello store, nessuna regolazione automatica osd_op_queue mclock_scheduler accettato e ignorato osd_mclock_* attivi accettati e ignorati csum_type crc32c di default, varianti xxhash disponibili crc32c fisso; qualsiasi altro valore scrive un avviso nel log31 La compressione corrisponde. La modalità predefinita di BlueStore è none e il suo algoritmo predefinito è snappy3233; FlashStore implementa le stesse quattro modalità, le stesse opzioni di pool e la stessa divisione in blocchi da 64 KiB, e l\u0026rsquo;ADR nota che un blocco da 64 KiB comprimibile al 50% occupa lo stesso spazio su entrambi34. Non era scontato che ci fosse. Il file dell\u0026rsquo;ADR si chiama ancora no-store-compression, dalla decisione originale, ribaltata quando croit ha fissato l\u0026rsquo;obiettivo di piena parità funzionale con il Ceph classico34.\nLa memoria non è in parità. Umbrella regola in automatico le cache di BlueStore rispetto a osd_memory_target mentre gira3536. FlashStore legge l\u0026rsquo;obiettivo una volta all\u0026rsquo;avvio, lo divide tra i suoi shard, e una modifica fatta con ceph config set ha effetto al riavvio successivo37. Inoltre non tiene il processo dentro l\u0026rsquo;obiettivo: hugepage, buffer di rete e stato dei PG stanno fuori37. Quindi osd_memory_target dimensiona le cache di FlashStore. Non limita la memoria dell\u0026rsquo;OSD nel modo a cui magari sei abituato.\nE mClock viene ignorato del tutto37. Non attenuato. Ignorato. Non c\u0026rsquo;è uno scheduler delle operazioni da configurare, perché ogni core possiede i suoi PG. Recovery e backfill vengono invece frenati da osd_max_backfills, osd_recovery_max_active e dalle opzioni di sleep37. Se su Umbrella hai tarato dei profili mClock per una ricostruzione, quelle impostazioni non fanno niente su un OSD FlashStore, e niente te lo segnalerà.\nNon c\u0026rsquo;è conversione, in nessuna direzione Non puoi convertire un OSD BlueStore in uno FlashStore. La guida di migrazione di croit lo dice chiaramente: «There is no in-place conversion of a BlueStore device»38. Offre invece due sequenze, ed entrambe sono backfill38:\nAggiungi, poi togli Libera, poi aggiungi Serve uno slot NVMe libero niente di libero Passo 1 prepara FlashStore sul disco nuovo ceph osd out, aspetta lo stato clean Passo 2 aspetta active+clean ferma e fai il purge dell\u0026rsquo;OSD classico Passo 3 togli l\u0026rsquo;OSD classico prepara FlashStore sul disco liberato Rischio durante l\u0026rsquo;operazione nessuno oltre il normale backfill una copia in meno finché il backfill non finisce E non diventa più facile dopo. Il formato su disco di FlashStore ha dei feature bit, e un mount rifiuta un bit sconosciuto: «Every format change means mkfs; unknown bits refuse mount (no downgrade)»7. Quindi un cambio di formato in una release futura di FlashStore è lo stesso svuota-e-riempi della prima migrazione.\nL'unico passaggio OSD BlueStore osd.N su nvme0 OSD FlashStore mkfs nuovo nessuna conversione, in nessun verso il cluster backfill dalle copie out, purge backfill in entrata Il backfill è l\u0026rsquo;unico ponte tra i due store, ed è anche il ponte tra due formati di FlashStore. Una cosa che la documentazione sbaglia. La checklist della guida di migrazione dice di assicurarsi che «the pools do not use erasure coding on croit-flashstore-osd OSDs»38. La guida sull\u0026rsquo;erasure coding nello stesso snapshot dice che FlashStore serve i pool EC legacy di default, e il default del codice per l\u0026rsquo;EC ottimizzato è all3940. Una delle due è obsoleta, e a giudicare dal codice è la guida di migrazione. Leggerei comunque per intero la guida EC prima di mescolare pool EC tra i due tipi di OSD, perché il guasto che descrive è un PG che si degrada e un backfill che si blocca39.\nUno store fatto per i dischi che compriamo davvero BlueStore è stato fatto per girare su tutto. Dischi rotanti, SSD economici, NVMe, partizioni, LVM, volumi cifrati, un device DB veloce davanti a un device dati lento. Quell\u0026rsquo;ampiezza è il motivo per cui è diventato il default, ed è il motivo per cui si porta dietro un percorso di scrittura differita, un flush prima di ogni commit, un database chiave/valore su un file system tutto suo, e un pool di thread per tenere in moto tutto questo. Ognuna di queste cose esiste perché qualche disco da qualche parte ne aveva bisogno.\nFlashStore parte dall\u0026rsquo;estremo opposto. Dà per scontato che il disco sia NVMe, che abbia la protezione da perdita di alimentazione, e che sia abbastanza veloce da far diventare il software il collo di bottiglia. Poi butta via tutto ciò che esisteva solo per gli altri dischi.\nÈ la scommessa giusta? Per i nuovi cluster all-flash, costruiti su NVMe enterprise come si deve, sì. È lì che stanno andando i cluster Ceph, e un OSD che spende i suoi core in lock, passaggi di mano e un database che compatta alle sue spalle sta pagando, ogni secondo di ogni giorno, per una flessibilità che un cluster del genere non userà mai.\nMa la scommessa ha un costo, e preferisco che tu lo veda prima di entrarci. Rinunci a HDD, dm-crypt, msgr1, regolazione della memoria a caldo e mClock. Su un cluster standard ottieni un OSD che dice ai tuoi monitor di essere BlueStore, perché i monitor e i manager di oggi non gli lasciano altra scelta; le build di croit non ne avranno bisogno. Ottieni un formato in cui non puoi convertire, e tra le cui versioni non puoi convertire. E lo ottieni in anteprima, da un solo vendor, che per caso è il mio datore di lavoro.\nQuindi tratta il codice come la prova, non questo articolo e non il report di benchmark di croit. I registri delle decisioni sono pubblici e dicono cosa è stato misurato e cosa è stato buttato via. Leggili, costruisci un cluster di test sul materiale che installeresti davvero, e misura il tuo carico di lavoro. Se fa quello che dicono gli ADR sui tuoi dischi, lo saprai. Se non lo fa, saprai anche questo, e l\u0026rsquo;avrai scoperto su un cluster di test.\ncroit ceph-rust, README at snapshot 48f9014 — componenti, stato e roadmap, «not yet recommended for production data», compatibile sul filo con v21.2.0 e v20.2.4.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0003, green-field, no Crimson fork — «No fork, no linking of Ceph code»; sorgente di Ceph letto come riferimento, specifiche con parole proprie.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0164, licences — demone e strumenti LGPL-3.0-only, librerie client MPL-2.0, documentazione CC-BY-SA-4.0, e il motivo della MPL.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, BlueStore configuration reference — accesso raw al device, device DB, «writes smaller than min_alloc_size must first pass through the BlueStore WAL», checksum.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, storage devices — BlueStore «consumes raw block devices or partitions»; RocksDB incorporato per i metadati interni.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_kvbackend — default rocksdb.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0021, storage engine — B+tree COW per shard, anello WAL, commit in parallelo, checkpoint, dati inline, rilasci trattenuti, «Every format change means mkfs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0004, storage I/O — SPDK su vfio, modificato in due livelli con io_uring, idle temporizzato sul device.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, prepare and activate — spdk è il backend predefinito, kernel e kernel-cmd lasciano l\u0026rsquo;NVMe al driver del kernel.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_allocator — default hybrid.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_csum_type — default crc32c.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust, croit-flashstore-tool usage — «fresh prepare/mkfs \u0026ndash;omap-engine btree|lsm|rocksdb».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_min_alloc_size_ssd — default 4 KiB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_prefer_deferred_size_ssd — default 0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, transaction state machine — gli aio in sospeso portano la transazione in STATE_AIO_WAIT prima che venga messa in coda per il commit chiave/valore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, kv sync thread — «flush/barrier on block device» prima dell\u0026rsquo;invio a RocksDB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0027, single-IO atomic commit, rejected — «gain only at QD1», costruito e rimosso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_write_v2 — «Use faster write path», default false.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, _do_write_small — lettura di testa e coda, poi «chunk-aligned deferred overwrite».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, \u0026ldquo;journal deferred items\u0026rdquo; — la transazione differita viene scritta come chiave nella stessa transazione di RocksDB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, key prefixes — PREFIX_DEFERRED = \u0026quot;L\u0026quot;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDefault dei thread di Ceph v21.2.0 — osd_op_num_shards_ssd 8; osd_op_num_threads_per_shard_ssd 2; osd_op_queue mclock_scheduler; ms_async_op_threads 3; creazione dei thread in BlueStore.cc, bstore_kv_sync e bstore_kv_final.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0006, thread-per-core runtime — un thread fissato in busy-polling per core, PG posseduti da un solo core, «idle cores burn CPU (accepted \u0026hellip;)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0008, concurrency and durability — «no locks, no atomics, no shared mutable state»; PLP obbligatoria, mkfs rifiuta i dischi senza PLP, eccezione FUA per il laboratorio.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, configuration reference — flashstore_cores default 8, flashstore_store_shards automatico, flashstore_report_objectstore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, hardware and host requirements — write cache volatile FAIL, LBA da 4 KiB, niente partizioni, requisiti di kernel e io_uring.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, ceph-volume encryption — «Logical volumes can be encrypted using dmcrypt by specifying the --dmcrypt flag».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, ms_bind_msgr1 — default true.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0168, encryption at rest, msgr1, cache tiering out of scope — «SPDK bypasses dm-crypt»; i client solo v1 «cannot reach croit-flashstore-osd».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0019, report osd_objectstore=bluestore — i controlli delle funzioni del monitor, le chiavi flashstore_* aggiuntive, e l\u0026rsquo;opzione di dichiarazione flashstore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust, pgs.rs — «csum_type {v} unsupported; using fixed crc32c per 4096-byte block».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_compression_mode — default none.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_compression_algorithm — default snappy.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0059, per-pool store compression — stesse modalità e opzioni di BlueStore, livello zstd 1 fisso, spazio al 50% comprimibile «identical to BlueStore».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, osd_memory_target — default 4 GiB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_cache_autotune — default true.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0062, memory target and mClock — obiettivo letto una volta, nessuna regolazione automatica, RSS non imposto; le opzioni mClock «ACCEPTED and IGNORED».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, migrate from classic — «There is no in-place conversion of a BlueStore device»; le due sequenze; la riga della checklist sull\u0026rsquo;EC.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, erasure-coded pools — ec_enable_pools default all, ec_enable_optimized default all, e come appare un pool declinato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust, OSD config defaults — (\u0026quot;ec_enable_optimized\u0026quot;, \u0026quot;all\u0026quot;).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/ceph/flashstore-against-umbrella-bluestore/","summary":"ceph-rust di croit è una riscrittura clean-room in Rust dell\u0026rsquo;OSD di Ceph con un object store suo, FlashStore, in anteprima pubblica dal 9 novembre 2026. Qui lo metto accanto a BlueStore esattamente come lo distribuisce Ceph 21.2.0 Umbrella, leggendo il codice sorgente e la documentazione di entrambi i progetti: cosa c\u0026rsquo;è nel repository e sotto quali licenze, dove ciascuno store tiene i metadati, come arrivano al disco una scrittura da 4 KiB e una sotto i 4 KiB, i pool di thread di Umbrella contro il singolo thread per core di FlashStore, perché FlashStore fa della protezione da perdita di alimentazione un requisito rigido, su cosa non gira, perché dice ai tuoi monitor di essere BlueStore, quali opzioni di BlueStore rispetta e quali ignora, e perché l\u0026rsquo;unica strada tra i due è il backfill.","title":"FlashStore contro BlueStore di Umbrella: cosa ha cambiato croit sotto l'OSD"},{"content":"Un OSD in Rust, il giorno del rilascio croit ha messo FlashStore OSD in anteprima pubblica il 9 novembre 20261. È un OSD Ceph scritto da zero in Rust, con un proprio object store al posto di BlueStore, e parla il protocollo di rete di Ceph. La promessa è che si inserisce in un cluster che hai già: i tuoi monitor, i tuoi manager, la tua CLI ceph e i tuoi client restano come sono, e sostituisci un disco alla volta1.\nQuesta promessa conta per chi usa Proxmox più che per quasi chiunque altro. Su un nodo Proxmox VE iperconvergente, Ceph non è qualcosa che installi a parte. Arriva dalla GUI di Proxmox, dai repository di Proxmox, compilato e patchato da Proxmox, e tutto è gestito da pveceph. Se un OSD di qualcun altro riesce a stare lì dentro senza rompere niente, ottieni un nuovo motore di storage senza rinunciare agli strumenti. Se non ci riesce, lo scopri a tue spese, su un nodo che fa girare anche le tue VM.\nAllora l\u0026rsquo;ho provato.\nLavoro per croit, che produce FlashStore. È il motivo per cui l\u0026rsquo;ho provato entro due giorni dal rilascio, ed è anche il motivo per cui niente di quello che segue viene addolcito. È un\u0026rsquo;anteprima, il README dice che «not yet recommended for production data»1, e questo è il resoconto di cosa è servito su hardware vero, non una brochure.\nChi fornisce cosa su un nodo Disco VM su RBD QEMU con la librbd fornita da Proxmox Da Proxmox: pveceph ceph-mon, ceph-mgr 21.2.0-pve1 CLI, GUI, pool, storage RBD installati dal wizard sulla 8006 Da croit: FlashStore croit-flashstore-osd 21.2.0 un daemon per Optane installato da un .deb, a mano Disco di boot SN750: mai un OSD 8 × Optane P4800X, 4 KiB, namespace intero Chi fornisce cosa. Proxmox installa monitor e manager e gestisce la GUI, i pool e la definizione dello storage. Il pacchetto di croit fornisce solo i daemon OSD, uno per disco. Risposta breve: funziona. Mentre scrivo, otto OSD FlashStore servono un pool RBD a una VM su un nodo Proxmox VE 9.2 standard, in HEALTH_OK. La risposta lunga è che sono servite due correzioni che la documentazione non cita, una per come Proxmox conserva la configurazione di Ceph e una per il kernel di Proxmox, e il resto di questo articolo parla di quelle correzioni e di come sono state trovate. Se vuoi solo farlo funzionare, verso la fine c\u0026rsquo;è uno script che fa tutto, ed è stato eseguito su questo nodo.\nLa macchina Il laboratorio è un nodo singolo, pve2, sulla mia LAN di casa, ed è un mini PC Minisforum B550 del 2021, una ciofeca. Ceph su un nodo singolo non è come lo faresti girare in produzione, e la regola CRUSH più sotto è il prezzo da pagare, ma ogni passaggio qui è identico su un nodo che ha dei vicini.\nProxmox VE pve-manager 9.2.26, kernel 7.0.14-28-pve, Debian 13.7 Macchina mini PC Minisforum B550, 2021; la scheda si presenta come BESSTAR TECH B550, BIOS 5.17 CPU AMD Ryzen 7 5700G, 8 core, 16 thread, 1 nodo NUMA Memoria 58 GiB Dischi OSD 8 × Intel Optane P4800X 375 GB (6 con marchio Dell, 2 Intel retail) PCIe verso gli Optane tutti e otto dietro uno switch Broadcom PEX880xx, su un solo link PCIe 3.0 x16 dall\u0026rsquo;APU Disco di boot WD SN750 512 GB, VG pve, tenuto fuori da tutto questo Rete una porta da 2,5 GbE, vmbr0 FlashStore snapshot-2026-11-10, commit upstream c5792750020e2 Gli Optane ci sono perché FlashStore ha due requisiti rigidi che molti dischi non rispettano. Il disco deve avere la protezione contro la perdita di alimentazione, e il namespace deve usare blocchi da 4096 byte, come namespace intero senza partizioni né filesystem sopra1. FlashStore conferma una scrittura quando è durevole sul disco, quindi un disco che mente sulla durabilità con una cache volatile viene rifiutato al mkfs3. Ogni P4800X dichiara di non avere una cache di scrittura volatile nei dati Identify (vwc 0), cioè è il disco stesso a dire che la cache non può perdere una scrittura confermata.\nPer questo il limite di questa analisi è il mini PC, non FlashStore e non i dischi. Otto core significano uno per OSD e niente di scorta, 58 GiB devono sfamare sia Ceph sia le VM, e otto Optane condividono un solo link PCIe 3.0 perché l\u0026rsquo;APU non ha altro da dare. Leggi ogni numero qui sotto come quello che questa macchina permette.\nUmbrella o niente FlashStore viene compilato per una release di Ceph alla volta. Lo decide il branch: main parla Ceph 21.2.0 Umbrella, e un branch v20.2.4 parla 20.2.4 Tentacle4. Il daemon controlla la release del cluster all\u0026rsquo;avvio e ne rifiuta una fuori dalla sua finestra4. I pacchetti nella pagina delle release sono compilati da main, e il binario lo dice da solo: croit-flashstore-osd 21.2.0 umbrella.\nProxmox VE 9 offre tre repository Ceph, e solo uno combacia.\nLa finestra delle versioni Repository di Proxmox VE 9 Branch di FlashStore ceph-squid: 19.2.7 nessun branch squid ceph-tentacle: 20.2.5 20.2.5 non è 20.2.4 v20.2.4: tentacle 20.2.4 ceph-umbrella: 21.2.0-pve1 21.2.0 corrisponde main: umbrella 21.2.0 Il daemon rifiuta una release del cluster fuori dalla sua finestra. Il repository Tentacle di Proxmox è già andato oltre la 20.2.4, e non esiste alcun branch Squid. Umbrella 21.2.0-pve1 è l\u0026rsquo;unica release su cui le due parti sono d\u0026rsquo;accordo. Tentacle è il default di Proxmox, quindi è la scelta sicura? È quella che non funziona. Il repository di Proxmox porta Tentacle fino alla 20.2.5-pve1, e il branch Tentacle di FlashStore punta esattamente alla 20.2.4. Umbrella nel repository di Proxmox è la 21.2.0-pve1, la stessa release a cui punta main.\nProxmox non nasconde cos\u0026rsquo;è Umbrella. PVE/Ceph/Releases.pm la elenca con unsupported =\u0026gt; 15, e la procedura guidata della GUI lo dice chiaro nel momento in cui la scegli.\n«Technology Preview», nessun repository enterprise, e l\u0026rsquo;installer chiede una seconda volta nel terminale, continue (y/N)?, prima di toccare apt. È la giusta dose di avvertimento, e vale la pena leggerla come una dichiarazione sull\u0026rsquo;intero stack: un OSD in anteprima su una release di Ceph in anteprima.\nL\u0026rsquo;installazione è Proxmox standard. Datacenter → Ceph → Install, versione Umbrella, repository No-Subscription, poi la rete pubblica e il primo monitor.\nTredici pacchetti aggiornati, 46 nuovi, 107 MB scaricati. Una cosa in quell\u0026rsquo;elenco è nuova in Umbrella: ceph-osd-classic accanto a ceph-osd. Nessuno dei due viene usato qui, perché non viene mai creato un OSD classico. Circa un minuto dopo mon.pve2 e mgr.pve2 erano in funzione, ceph versions riportava 21.2.0 … umbrella, e lo stato era OK, senza ancora niente da archiviare.\nQuattro dischi a 512 byte Quattro degli otto Optane erano stati passati a una VM di laboratorio ed erano ancora formattati a 512 byte, con vecchie etichette ZFS sopra. Altri due avevano il formato giusto e le stesse etichette. La soluzione per entrambi i casi è semplice: toglierli dalla VM, formattarli a 4 KiB, cancellare le etichette.\nIl P4800X offre 4096 byte senza metadati come formato LBA 3, che nvme id-ns riporta come lbaf 3 : ms:0 lbads:12.\nnvme format /dev/nvme0n1 --lbaf=3 --force --timeout=900000 wipefs -a /dev/nvme0n1 sgdisk --zap-all /dev/nvme0n1 Il primo tentativo è fallito, e anche uno successivo. Entrambe le volte nvme format è tornato con Interrupted system call e il disco era ancora a 512 byte. Il log del kernel ha il motivo:\nnvme nvme0: I/O tag 0 (0000) opcode 0x2 (Admin Cmd) QID 0 timeout, reset controller nvme nvme1: I/O tag 9 (0009) opcode 0x6 (Admin Cmd) QID 0 timeout, reset controller L\u0026rsquo;opcode 0x2 è Get Log Page e 0x6 è Identify. Nessuno dei due è la formattazione. Un P4800X formatta l\u0026rsquo;intero supporto, e qui ci sono voluti da 345 a 351 secondi per disco. Mentre lavora, il controller non risponde ad altri comandi admin, quindi qualunque cosa faccia una domanda al disco resta in attesa. Dopo il timeout admin di 60 secondi del kernel, questo si arrende e resetta il controller, e il reset uccide la formattazione.\nCome si interrompe una formattazione nvme format da 345 a 351 s per P4800X Comando admin smartctl, nvme list, un refresh dischi nella GUI timeout di 60 s il kernel resetta il controller Formattazione interrotta EINTR, rc 1 disco ancora a 512 B Soluzione: ogni formattazione nella sua unit systemd, un disco alla volta, e nient'altro ai dischi finché non finisce. Il comando che va in timeout non è la formattazione. Qualcos\u0026rsquo;altro fa una domanda al disco, aspetta dietro la formattazione, e il reset che segue la interrompe. Tentativo Cosa ha raggiunto il disco Risultato nvme0, primo un Get Log Page alle 09:53:04, a metà installazione di Ceph interrotto, ancora 512 B nvme0, in una unit niente 4 KiB in 345 s nvme1 il mio nvme list, per controllare l\u0026rsquo;avanzamento interrotto, ancora 512 B nvme2, nvme3 niente 4 KiB in 351 s e 350 s nvme1, da solo niente 4 KiB in 346 s La soluzione è lanciare ogni formattazione in una unit transitoria con un timeout lungo, un disco alla volta, e lasciare in pace i dischi finché non ha finito:\nsystemd-run --unit=fmt4k /root/fmt4k.sh journalctl -u fmt4k -f # read progress from the journal, not from the drive Così l\u0026rsquo;unico controllo dell\u0026rsquo;avanzamento è il journal, e niente raggiunge il controller. A quel punto tutti e otto risultavano 4 KiB in nvme list.\nIl pacchetto La pagina delle release ha pacchetti .deb e .rpm, tra cui Debian 13 trixie, su cui è costruito Proxmox VE 92. Un\u0026rsquo;unica build serve ogni distribuzione e richiede glibc 2.34 o più recente6.\nB=https://github.com/croit/ceph-rust/releases/download/snapshot-2026-11-10-0b6783237291 curl -LO \u0026#34;$B/flashstore_21.2.0+git.20261110063351.c5792750020e_debian-trixie_amd64.deb\u0026#34; curl -LO \u0026#34;$B/sha256sums.txt\u0026#34; sha256sum flashstore_*_debian-trixie_amd64.deb grep debian-trixie/flashstore_ sha256sums.txt Controllalo a mano. sha256sum -c non può verificare questo download, perché il file dei checksum lo chiama debian-trixie/flashstore_…_amd64.deb mentre l\u0026rsquo;asset si chiama flashstore_…_debian-trixie_amd64.deb. Gli hash coincidono, ce1fb352…26c8 da entrambe le parti, quindi il file è a posto e solo l\u0026rsquo;elenco è disallineato con gli asset.\napt install ./flashstore_*_debian-trixie_amd64.deb croit-flashstore-osd --version croit-flashstore-osd 21.2.0 umbrella (build 0.0.0) git c5792750020e net tiers: kernel (+rdma upgrade) Si è installato senza problemi accanto a ceph-osd e ceph-osd-classic di Proxmox. Il pacchetto installa un ceph-osd.target minimale solo sugli host che non ne hanno uno6, e Proxmox ce l\u0026rsquo;ha già, quindi le unit FlashStore si agganciano allo stesso target a cui si aggancerebbero quelle classiche.\nTre cose sul pacchetto da sapere prima di scriverci sopra uno script:\nCosa dice la documentazione Cos\u0026rsquo;è il pacchetto Nome del pacchetto apt remove flashstore …6 croit-flashstore-osd, il file dell\u0026rsquo;asset è flashstore_… Backend dello store l\u0026rsquo;insieme di funzioni di produzione di main è knet,spdk,rdma,mimalloc1 niente SPDK: --check riporta «SPDK NVMe driver: compiled out» Valori di flashstore_dev spdk:\u0026lt;pci\u0026gt;, oppure file: nelle build di sviluppo7 il livello kernel, kernel:/dev/…, è l\u0026rsquo;unico percorso di store reale in questa build La riga centrale conta. Il livello SPDK, il driver NVMe in user space che richiede il disco legato a vfio-pci, non è nel pacchetto Debian pubblicato. Quello che c\u0026rsquo;è è il livello kernel: il disco resta sul driver nvme del kernel e FlashStore gli parla tramite io_uring. Il sorgente mostra che è compilato, perché la funzione knet include kernel-nvme8, anche se la riga di riepilogo del controllo dell\u0026rsquo;host dice che è «compiled out of this build». Quella riga è sbagliata. Chi le crede si fermerebbe proprio lì.\nCosa dice il controllo dell\u0026rsquo;host croit-flashstore-osd --check è in sola lettura e gira prima che venga scritto qualunque cosa. Controlla la build, la CPU, la memoria, l\u0026rsquo;IOMMU, ogni controller NVMe, la scheda di rete, il kernel e la configurazione, e stampa la correzione esatta per ogni risultato9. Su questo nodo ha eseguito 115 controlli, ed è fatto bene: ogni risultato arriva con il comando che lo risolve, e questo mi ha risparmiato un sacco di ricerche.\nRisultato Esito Cosa ho fatto Hugepage: nessuna riservata FAIL riservati i 16 GiB richiesti, resi persistenti in /etc/sysctl.d Disco di boot SN750: cache di scrittura volatile FAIL niente, non è un candidato OSD vfio-pci non caricato WARN niente, questa build non ha SPDK con cui usarlo limite memlock 8 MiB WARN niente, misura la shell; la unit imposta LimitMEMLOCK=infinity niente isolcpus / nohz_full WARN annotato, tuning della latenza IOMMU in traduzione, non iommu=pt WARN annotato init_on_alloc=1 WARN annotato, costa dal 15 al 20% di CPU sulle letture grandi, dice porta da 2,5 GbE, code della scheda di rete di default, IRQ su cinque CPU WARN annotato 8 × P4800X: niente VWC, 4096+0 attivo, x4 a 8 GT/s, liberi OK io_uring con SEND_ZC e buffer fissi, kernel 7.0 OK Metti in conto il secondo FAIL. Il controllo conta ogni controller nella macchina, e l\u0026rsquo;SSD di boot ha una cache di scrittura, quindi non passa il test sulla perdita di alimentazione, anche se lo stesso controllo lo segna correttamente come «in use, not a candidate». Il tutorial dice che uscire con 0 significa nessun FAIL9. Su qualunque host che fa il boot da un SSD consumer, cioè molti host Proxmox, --check non può uscire con 0, qualunque cosa tu sistemi. Scrivi gli script sulle righe dei singoli controlli, non sul codice di uscita.\nI WARN di tuning sono rimasti. Ognuno richiede una modifica alla riga di comando del kernel e un riavvio, e questa è un\u0026rsquo;installazione, non un benchmark. Sono l\u0026rsquo;elenco giusto da smaltire prima che qualcuno citi un numero preso da questa macchina.\nCore e hugepage per otto OSD FlashStore gira con un thread per core, e il controllo spiega cosa significa: «one core = one shard/PG owner», al massimo 8 core per OSD, e ogni core di un OSD su un proprio core fisico invece di condividerlo con un fratello SMT. Otto core fisici e otto OSD fanno un core ciascuno, da flashstore_lcores = 0 a 7, con i fratelli SMT lasciati a Proxmox e alle VM. Rieseguito con questo nella configurazione, il controllo segna OK ogni piano dei core.\nCore e hugepage su una macchina Un OSD per core fisico; i fratelli SMT restano all'host 0: osd.0 1: osd.1 2: osd.2 3: osd.3 4: osd.4 5: osd.5 6: osd.6 7: osd.7 thread da 8 a 15: Proxmox, VM, thread ausiliari degli OSD Hugepage: 16 GiB riservati, 4 GiB usati da otto OSD 4 GiB in uso 12 GiB riservati e inattivi, su 58 GiB dell'host Un core fisico per OSD. Il pool di hugepage è dimensionato con il default del controllo, 2048 MiB per OSD, e ogni OSD in funzione ne ha preso un quarto. Guarda di nuovo le hugepage. Il controllo chiede 2048 MiB per OSD, che è il --mem di default del daemon, quindi otto OSD richiedono 16 GiB riservati. In funzione, ogni OSD ne ha usati 512 dei suoi 2048. Corrisponde alla nota di progetto di croit per il backend kernel, che assegna un quarto di --mem al suo allocatore per i dati10. Quindi su questa macchina, con tutti e otto in funzione, 12 GiB di RAM restano riservati come hugepage che niente tocca, su un host che deve sfamare anche delle VM. Un nodo di solo storage farebbe spallucce. Su un nodo Proxmox quella memoria era una VM, e più sotto viene ridotta a quello che gli OSD usano.\nPosso chiedere perché non riesce a leggere ceph.conf? Con i dischi formattati, il pacchetto installato e il controllo dell\u0026rsquo;host superato, il primo OSD non partiva.\ncroit-flashstore-tool: refused: /etc/ceph/ceph.conf: Permission denied (os error 13) Su Proxmox, /etc/ceph/ceph.conf è un link simbolico a /etc/pve/ceph.conf, e /etc/pve è pmxcfs, il filesystem del cluster che tiene allineata la configurazione di ogni nodo. I file lì sono root:www-data 0640, e pmxcfs non ti permette di cambiarlo file per file11. I daemon Ceph di Proxmox se la cavano perché partono come root, leggono la configurazione e poi passano all\u0026rsquo;utente ceph, che è quello che fa --setuser ceph --setgroup ceph su ogni unit ceph-osd@.\nLa unit di FlashStore non parte come root. È User=ceph dalla prima istruzione, ExecStartPre compreso12, quindi non arriva mai a leggere il file.\nPosso chiedere perché un pacchetto compilato per Debian, per un prodotto che si vende come drop-in, non è stato provato sulla piattaforma Ceph basata su Debian più diffusa che esista? Non sto chiedendo chi. pveceph tiene la sua configurazione su pmxcfs, e ogni OSD FlashStore su un nodo gestito da pveceph ci sbatterà contro al primo avvio.\nIl daemon ha già la risposta dentro. Il suo sorgente descrive un classico passaggio con --setuser/--setgroup: «started as root by a classic unit (--setuser ceph --setgroup ceph), the daemon becomes that user before it opens the store, a socket or a file»13. Quindi un drop-in che avvia la unit come Proxmox avvia i propri OSD dovrebbe bastare.\nNon del tutto. Avviato come root puro, il rifiuto successivo è stato il disco.\nactivate: device kernel:/dev/ng0n1 not ready: /dev/nvme0n1: Permission denied (os error 13) Il CapabilityBoundingSet della unit lascia fuori CAP_DAC_OVERRIDE12, quindi root è vincolato ai normali permessi dei file, e i nodi dei namespace appartengono a ceph:ceph. Partire come root con il gruppo impostato a ceph copre entrambe le cose: root possiede il file di configurazione, il gruppo ceph apre il disco, e il daemon passa a ceph prima di fare qualunque altra cosa.\nTre modi di avviare la unit Come viene fornita User=ceph Group=ceph /etc/pve/ceph.conf root:www-data 0640 Permission denied leggendo la conf Avvio come root niente CAP_DAC_OVERRIDE /dev/nvme0n1 ceph:ceph 0660 Permission denied aprendo il disco Root, gruppo ceph poi --setuser ceph conf letta come proprietario, disco aperto come gruppo, il daemon gira come ceph La unit così come viene fornita non può leggere pmxcfs. Root puro non può aprire il disco, perché il bounding set gli toglie l\u0026rsquo;override. Root con gruppo ceph fa entrambe le cose, poi cede i privilegi. # /etc/systemd/system/croit-flashstore-osd@.service.d/pve-ceph-conf.conf [Service] User=root Group=ceph ExecStart= ExecStart=/usr/bin/croit-flashstore-osd run --id %i --cluster ${CLUSTER} -f --setuser ceph --setgroup ceph Il daemon conferma il passaggio nel suo log: set uid:gid to 64045:64045 (ceph).\nC\u0026rsquo;è una correzione più corta, SupplementaryGroups=www-data, e non l\u0026rsquo;ho usata. Permetterebbe all\u0026rsquo;OSD di leggere ogni file leggibile dal gruppo sotto /etc/pve, non solo la configurazione di Ceph. Un OSD non ha alcun motivo di leggere il resto della configurazione del cluster, e il drop-in qui sopra non gli dà niente di più di quello che Proxmox dà ai propri.\nPoi i nodi dei dispositivi. La documentazione di FlashStore dice che il nodo del namespace deve essere scrivibile da ceph, «(udev rule)»14, e il pacchetto non ne fornisce nessuna. Questa riconosce i dischi per modello, quindi non può prendere il disco di boot qualunque cosa faccia la numerazione:\n# /etc/udev/rules.d/70-croit-flashstore-optane.rules SUBSYSTEM==\u0026#34;nvme-generic\u0026#34;, KERNEL==\u0026#34;ng*n*\u0026#34;, ATTRS{model}==\u0026#34;Dell Express Flash NVMe P4800X*|INTEL SSDPE21*\u0026#34;, OWNER=\u0026#34;ceph\u0026#34;, GROUP=\u0026#34;ceph\u0026#34;, MODE=\u0026#34;0660\u0026#34; SUBSYSTEM==\u0026#34;block\u0026#34;, KERNEL==\u0026#34;nvme*n*\u0026#34;, ENV{DEVTYPE}==\u0026#34;disk\u0026#34;, ATTRS{model}==\u0026#34;Dell Express Flash NVMe P4800X*|INTEL SSDPE21*\u0026#34;, OWNER=\u0026#34;ceph\u0026#34;, GROUP=\u0026#34;ceph\u0026#34;, MODE=\u0026#34;0660\u0026#34; Dopo udevadm trigger, i sedici nodi degli Optane erano ceph:ceph 0660 e l\u0026rsquo;SN750 è rimasto root.\nIl passthrough che questo kernel non fa Il livello kernel ha due modalità, e sceglie il nodo che indichi. kernel:/dev/ngXnY manda i comandi NVMe dritti al disco tramite io_uring, che croit chiama kernel-cmd. kernel:/dev/nvmeXnY fa letture e scritture O_DIRECT sul dispositivo a blocchi, chiamato kernel o diretto10. croit ha misurato kernel-cmd in vantaggio in ogni caso testato10, e il quick start del README lo usa1, quindi è quello che ho configurato.\nCon i permessi sistemati, il daemon è passato a ceph, ha letto la configurazione e si è fermato alla prima lettura:\ncroit-flashstore-osd: --dev kernel:/dev/ng0n1: /dev/ng0n1: kernel-cmd fixed-buffer probe read: Errno(13) La stessa prova era passata un minuto prima in activate, che aveva ancora le capability di root. Quindi la domanda è se questo kernel permette a un processo non privilegiato di mandare comandi di I/O attraverso /dev/ngXnY. Si può rispondere senza FlashStore, con la stessa lettura fatta da nvme-cli, come ceph:\nCome Comando su /dev/ng0n1 Risultato ceph Identify Namespace permesso ceph Read, LBA 0, 4 KiB Permission denied root Read, LBA 0, 4 KiB permesso Tutti e otto gli Optane hanno dato la stessa risposta, compresi due che non avevo mai formattato né resettato, con il firmware di Intel invece di quello di Dell. Quindi non sono i dischi e non sono le formattazioni della mattina.\nUpstream dice che dovrebbe funzionare. In Linux 7.0, nvme_cmd_allowed() permette a un processo non privilegiato di mandare un comando di I/O quando il log Commands Supported and Effects del disco lo segna come supportato senza effetti insoliti, e richiede un\u0026rsquo;apertura in scrittura solo per i comandi che scrivono o modificano dati15. Il log degli effetti del P4800X segna Read come supportato, 00000001, e nient\u0026rsquo;altro. La lettura è permessa.\nIl kernel di Proxmox non è quello di upstream. Il suo changelog per questa build include una correzione portata indietro proprio su questo percorso, CVE-2026-90227: nvme/ioctl: check SUBMIT_IO with nvme_cmd_allowed(), che a prima vista riguarda un ioctl diverso da quello che ho testato. Non ho individuato quale modifica nel kernel 7.0.14-28-pve faccia la differenza, e non tirerò a indovinare. Quello che è certo è il comportamento: su questo kernel, l\u0026rsquo;I/O NVMe in passthrough non privilegiato viene rifiutato.\nFlashStore ha un ripiego per il passthrough rifiutato, e non è scattato. La nota di progetto di croit dice che quando Identify viene rifiutato, un dispositivo kernel-cmd ripiega sull\u0026rsquo;I/O diretto sul suo nodo a blocchi e lo dice all\u0026rsquo;avvio10. Qui Identify è permesso e Read no, quindi il ripiego non scatta mai e l\u0026rsquo;OSD si ferma.\nDue strade verso il disco kernel-cmd: passthrough NVMe kernel: I/O diretto a blocchi io_uring URING_CMD /dev/ng0n1, char generico rifiutato all'utente ceph: EACCES io_uring READ/WRITE_FIXED /dev/nvme0n1, O_DIRECT funziona: serve solo rw sul nodo Il passthrough passa dal controllo dei permessi degli ioctl NVMe, e il kernel di Proxmox lo rifiuta all\u0026rsquo;utente ceph. L\u0026rsquo;I/O diretto sul dispositivo a blocchi richiede solo lettura e scrittura sul nodo, che la regola udev dà già. All\u0026rsquo;I/O diretto non importa. È una riga per OSD:\nflashstore_store_backend = kernel Con questa, osd.0 è partito.\ncroit-flashstore-osd: store mounted (1 shards, replayed 4 txns in 16 ms) croit-flashstore-osd: set uid:gid to 64045:64045 (ceph) [ 1.398] crush location set (create-or-move updating item name \u0026#39;osd.0\u0026#39; weight 0.3359 at location {host=pve2,root=default} to crush map) [ 2.406] osd.0 is now active (up_from 10, map 10) Attivo in 2,4 secondi.\nPreparare e avviare gli OSD Ogni OSD riceve una sezione nella configurazione di Ceph, che su Proxmox significa modificare /etc/pve/ceph.conf, e farlo a mano va benissimo.\n[osd.0] flashstore_dev = spdk:0000:05:00.0 flashstore_store_backend = kernel flashstore_lcores = 0 Il dispositivo è indicato per indirizzo PCI, non come /dev/nvme0n1, e il prefisso spdk: qui non significa SPDK. Con un backend kernel impostato, il daemon cerca l\u0026rsquo;indirizzo in sysfs a ogni avvio e trova i nodi attuali del controller10.\nDare a un disco un nome che resta [osd.0] spdk:0000:05:00.0 ricerca in sysfs a ogni avvio /dev/nvme0n1 /dev/ng0n1 i numeri nvme seguono l'ordine di rilevamento, e su questo host si sono spostati: l'SN750 era nvme7 a ottobre e ora è nvme8. Un indirizzo PCI è fissato dallo slot. Un numero nvme è fissato dall\u0026rsquo;ordine di rilevamento, che non lo è. Qui conta. Il disco di boot SN750 era nvme7 a ottobre ed è nvme8 adesso, e nemmeno i minor dei nodi generici seguono l\u0026rsquo;ordine dei dischi, con ng1n1 al minor 0 e ng0n1 al minor 2. Una configurazione che dice /dev/nvme4n1 può puntare a un disco diverso dopo un riavvio. Una configurazione che dice 0000:0b:00.0 no.\nPoi un comando per disco, che scrive lo store e registra l\u0026rsquo;OSD presso il monitor:\ncroit-flashstore-tool prepare --dev spdk:0000:05:00.0 --id 0 kernel-cmd /dev/ng0n1: fixed-buffer NVMe passthrough probe ok (IORING_URING_CMD_FIXED on) mkfs: device lba 4096 B x 91573146 (375083606016 B), awupf 1 lba, vwc false, max_xfer 32 lba mkfs: 1 store shards, WAL ring 4096 MiB each osd.0 prepared in /var/lib/ceph/osd/ceph-0 Due secondi, come root. prepare legge la chiave di bootstrap da /var/lib/ceph/bootstrap-osd/ceph.keyring16, che pveceph scrive solo la prima volta che crea un proprio OSD, quindi senza OSD classici va recuperata prima:\nceph auth get client.bootstrap-osd -o /var/lib/ceph/bootstrap-osd/ceph.keyring Sei dischi preparati al primo colpo. Due sono stati rifiutati:\ncroit-flashstore-tool: refused: device is not empty (non-zero data in the first 8192 bytes); --wipe destroys it croit-flashstore-tool: refused: device is not empty (non-zero data at 65536 bytes); --wipe destroys it lsblk e blkid avevano entrambi segnalato quei due dischi come vuoti. Sopra c\u0026rsquo;era l\u0026rsquo;area dei metadati testuali di un volume group LVM di un laboratorio precedente, rimosso da tempo, con l\u0026rsquo;etichetta in testa già azzerata. La sonda di FlashStore legge i primi 8 KiB e le zone a 64 KiB e 256 KiB17, più in là di dove guardano i soliti strumenti, e aveva ragione. Rifiutare un disco che contiene qualcosa, a meno che non gli si dica --wipe, è esattamente quello che dovrebbe fare uno strumento per OSD. Cancellarli è una decisione di chi possiede i dischi, non dello strumento. Una volta deciso, --wipe li ha preparati entrambi in circa due secondi, e si sono aggiunti dopo l\u0026rsquo;installazione più sotto, ed è per questo che lo screenshot del pannello e i dati dell\u0026rsquo;installazione ne mostrano sei.\nPoi avviali:\nsystemctl enable --now croit-flashstore-osd@0 ID CLASS WEIGHT TYPE NAME STATUS REWEIGHT PRI-AFF -1 2.01535 root default -3 2.01535 host pve2 0 nvme 0.33589 osd.0 up 1.00000 1.00000 1 nvme 0.33589 osd.1 up 1.00000 1.00000 2 nvme 0.33589 osd.2 up 1.00000 1.00000 3 nvme 0.33589 osd.3 up 1.00000 1.00000 4 nvme 0.33589 osd.4 up 1.00000 1.00000 5 nvme 0.33589 osd.5 up 1.00000 1.00000 Ogni OSD si è messo sotto host=pve2 con classe di dispositivo nvme. Quello che dicono di sé al cluster vale la pena leggerlo una volta:\nCampo Monitor e manager OSD FlashStore ceph versions 21.2.0 (087cd25db8f1) umbrella (dev - None) 21.2.0 (b060042deb05) umbrella (dev - croit-flashstore-osd) Compilato da Proxmox, pacchetti -pve1 croit, dal commit upstream v21.2.0 indicato nel README1 osd_objectstore bluestore, con ogni campo bluestore_bdev_* compilato Cos\u0026rsquo;è davvero FlashStore, niente BlueFS, niente RocksDB La risposta BlueStore è voluta. flashstore_report_objectstore ha come default bluestore perché i monitor classici attivano alcune funzioni solo quando ogni OSD lo riporta, quindi il default tiene in piedi un cluster misto7. Non è vero, ed è bene saperlo prima di leggere i metadati del cluster e crederci.\nCosa ne fa Proxmox Il pannello OSD di Proxmox li elenca tutti e sei, up e in, classe nvme, versione 21.2.0, 344 GiB ciascuno. Li chiama anche FileStore.\nFileStore è l\u0026rsquo;object store che BlueStore ha sostituito. Proxmox ricava l\u0026rsquo;etichetta in PVE/API2/Ceph/OSD.pm: se i metadati dell\u0026rsquo;OSD hanno una chiave bluefs è BlueStore, e qualunque altra cosa è FileStore18. FlashStore non ha BlueFS, perché sotto non c\u0026rsquo;è RocksDB, quindi dichiara BlueStore in un campo e viene etichettato FileStore in base a un altro. Nessuna delle due cose è giusta. E il pannello è il primo posto dove guarda la maggior parte degli amministratori Proxmox.\nLe colonne della latenza segnano 0 / 0 a riposo. Durante l\u0026rsquo;installazione qui sotto, ceph osd perf ha riportato latenze di commit da 0 a 3 ms sui sei.\nStart, Stop e Restart nel pannello comandano ceph-osd@N, la unit classica, che non è quella in funzione19. Per questo il pannello è una vista su questi OSD, non un comando per gestirli. Usa systemctl … croit-flashstore-osd@N e la CLI per qualunque cosa tocchi i daemon, e lascia stare Create: OSD e Destroy su questi.\nUn pool, uno storage e una VM Fisher-Price OS (Windows) Il primo PG del cluster, il pool .mgr del manager, è rimasto undersized+degraded appena gli OSD sono partiti. Colpa del nodo singolo. La replicated_rule di default mette ogni copia su un host diverso, e c\u0026rsquo;è un solo host.\nceph osd crush rule create-replicated replicated_osd default osd nvme ceph osd pool set .mgr crush_rule replicated_osd Una regola con dominio di guasto osd e classe di dispositivo nvme20 mette ogni copia su un OSD diverso, e il PG è passato ad active+clean in pochi secondi. Su un cluster vero con tre o più host, tieni la regola per host e salta questo passaggio.\nTutto il resto è la GUI di Proxmox come al solito. Ceph → Pools → Create: nome flashstore, size 3, min size 2, regola replicated_osd, Add as Storage spuntato. Più avanti è passato a size 2, min size 1, per la prova di carico più sotto.\nProxmox ha creato il pool e la definizione dello storage RBD in un colpo solo, e flashstore è comparso nell\u0026rsquo;albero con 654 GiB utilizzabili, cioè i 2 TiB grezzi divisi per tre copie, meno l\u0026rsquo;overhead. 129 PG sono passati ad active+clean, e poco dopo l\u0026rsquo;autoscaler ha portato il nuovo pool da 128 a 32.\nLa VM di prova è una VM Fisher-Price OS (Windows). Non è una preferenza, è quello che una buona parte dei clienti fa davvero girare sui propri pool Proxmox, quindi è il carico che conta: 16 GiB di memoria, 4 core, un disco da 60 GiB su flashstore con discard e iothread attivi. Fa anche molto rumore sul disco e lo usa male, ed è proprio questo il punto: una prova di storage vuole il guest che si appoggia al disco più di tutti.\nDal disco della VM all'Optane Disco VM scsi0, 60 GiB QEMU + librbd 21.2.0-pve1 pool flashstore replicated_osd, size 2 OSD FlashStore, copia 1 OSD FlashStore, copia 2 La librbd classica di Proxmox parla con gli OSD di croit; qui librustyrbd non è installata. Le scritture della VM passano dalla librbd fornita da Proxmox, nella regola del pool, e arrivano a due OSD FlashStore con size 2. La librustyrbd di croit non è installata, quindi questo è un client classico contro OSD in Rust. Campionando il pool ogni dieci secondi per i primi quindici minuti dell\u0026rsquo;installazione:\nScritture sul pool mediana 9,3 MB/s quando attivo, picco 302 MB/s Operazioni di scrittura picco di 2.486 al secondo Letture dal pool picco 60 MB/s Spazio grezzo usato 35 GiB su sei OSD Stato HEALTH_OK in tutti i 90 campioni Riavvii degli OSD 0 Memoria residente degli OSD da 565 a 871 MiB ciascuno, dopo Sono i numeri di un installer, con la VM e gli OSD sullo stesso host e i WARN di tuning intatti, e non dicono niente sulla velocità di FlashStore. Quello che dicono è che un client Proxmox classico ha portato a termine l\u0026rsquo;installazione di un sistema operativo su OSD in Rust, 35 GiB grezzi, senza un errore, che è proprio la promessa che questo articolo voleva mettere alla prova.\nCosa fa sotto carico Un\u0026rsquo;installazione dimostra che funziona. Non ti dice com\u0026rsquo;è usare la VM.\nAllora la VM ha avuto CrystalDiskMark 9.0.321, tre volte: il profilo Real World Performance [+Mix], Read\u0026amp;Write [+Mix], un file da 16 GiB su C: e un mix 70/30 di letture e scritture, una volta con tre passate e due volte con nove. Quel profilo esegue tutto una richiesta alla volta su un solo thread, che è quello che fa davvero un desktop o un piccolo database, non quello che fa una scheda tecnica.\nA quel punto la configurazione era andata oltre l\u0026rsquo;installazione. La VM aveva sei core, e il pool era stato cambiato dalla GUI a size 2, min size 1 e 256 PG. Size 2 con min size 1 è un\u0026rsquo;impostazione da laboratorio su una sola macchina: con una sola copia rimasta, il pool continua ad accettare scritture che un singolo guasto può poi far perdere. Altrove, tieni 3 e 2.\nIl disco era sul default di Proxmox, nessuna cache, che è il default da Proxmox 222.\nReal World Performance [+Mix], 16 GiB 3 passate 9 passate 9 passate di nuovo SEQ1M Q1T1 lettura 1.279,71 MB/s 1.675,33 MB/s 1.852,32 MB/s SEQ1M Q1T1 scrittura 563,67 MB/s 576,65 MB/s 580,08 MB/s SEQ1M Q1T1 mix 1.043,75 MB/s 1.043,28 MB/s 986,10 MB/s RND4K Q1T1 lettura 5.342 IOPS, 186,57 µs 5.659 IOPS, 176,17 µs 5.706 IOPS, 174,73 µs RND4K Q1T1 scrittura 2.419 IOPS, 412,51 µs 2.405 IOPS, 414,79 µs 2.435 IOPS, 409,77 µs RND4K Q1T1 mix 3.938 IOPS, 253,13 µs 3.826 IOPS, 260,49 µs 3.936 IOPS, 253,25 µs Le scritture e la latenza sui blocchi piccoli restano entro circa l'1% da un\u0026rsquo;esecuzione all\u0026rsquo;altra. La lettura sequenziale sale del 45% nelle tre. È il primo segnale che la colonna delle letture non sta misurando quello che sembra.\nL\u0026rsquo;host è stato campionato ogni cinque secondi durante tutte e tre, da /proc/diskstats per gli otto Optane, ceph status per il pool e /proc per ogni processo e thread, e le due viste non raccontano la stessa storia.\nScritture: il disco è la parte piccola Una scrittura casuale da 4 KiB alla volta, ultima esecuzione Tempo per scrittura, visto dalla VM 409,77 µs Tempo per scrittura, a ciascun Optane 17 µs Scritture che arrivano agli Optane per ogni scrittura della VM 4,05: due copie, circa due scritture ciascuna Scritture sequenziali grandi 580 MB/s dalla VM, 1,14 GB/s agli Optane, con la seconda copia che le raddoppia Il disco è meno del 5% di una scrittura piccola. Gli altri 393 µs sono il viaggio: QEMU, librbd, il messenger verso l\u0026rsquo;OSD, l\u0026rsquo;OSD stesso, e l\u0026rsquo;attesa della seconda copia. Niente di questo è stato misurato separatamente qui, quindi non darò un numero a ciascun pezzo. Quello che dice è che su questa macchina gli Optane non sono il limite per l\u0026rsquo;I/O una richiesta alla volta, e un disco più veloce non sposterebbe di molto quei 410. Il limite si è spostato sul client, la librbd fornita da Proxmox, e ci sarà altro da dire quando la librustyrbd di croit verrà installata qui.\nLetture: la cache, non gli Optane Nell\u0026rsquo;ultima esecuzione la passata di letture casuali da 4 KiB ha fatto 5.700 letture al secondo sull\u0026rsquo;intero file da 16 GiB, e gli otto Optane non hanno letto assolutamente niente. La passata sequenziale ha raggiunto 2,2 GB/s al pool mentre le letture dei dischi scendevano da 755 MB/s a zero. CrystalDiskMark aggira la cache del guest e il disco in QEMU non ne ha, quindi la memoria che fa il lavoro sta negli OSD. flashstore_obj_cache è attivo di default in questa build, la quota del file di ciascun OSD è di circa 2 GiB con size 2, e ogni OSD era cresciuto a circa 2,6 GiB. FlashStore non riporta i suoi hit, quindi chiamalo quasi certo invece che dimostrato. È anche il motivo per cui la lettura sequenziale è salita a ogni esecuzione: una parte maggiore del file era già lì. Tratta la colonna delle letture come un dato della cache, non dello store.\nCPU: dove sono finiti i core Ultima esecuzione, in core Host occupato OSD vCPU del guest librbd e client Ceph QEMU A riposo tra le passate dal 20 al 24% 3,3 0,1 0,03 0,03 Scrittura casuale 4 KiB 30% 3,9 0,38 0,20 0,08 Lettura casuale 4 KiB 30% 3,6 0,47 0,39 0,15 Mix sequenziale dal 41 al 53% 3,8 da 1,5 a 2,3 0,5 0,12 Le tre colonne della VM vengono dai suoi thread: QEMU dà un nome alle vCPU del guest, e i thread messenger e worker di librbd girano dentro lo stesso processo.\nLa colonna degli OSD si muove appena. Otto OSD in polling costano 3,3 core senza fare niente e 3,9 al massimo, quindi su una macchina da 16 thread un quinto della CPU se ne va prima che una VM chieda qualcosa. Nient\u0026rsquo;altro si è avvicinato al proprio limite. Il thread singolo più impegnato è stato una vCPU del guest al 47%, e il più impegnato di librbd è rimasto sotto il 15%. Con una richiesta alla volta il limite è l\u0026rsquo;attesa, non il lavoro, e un dato sulla CPU non può mostrare un\u0026rsquo;attesa.\nMemoria: pianifica per il picco Su tutte e tre le esecuzioni Stato HEALTH_OK in ogni campione, ogni PG active+clean, nessun riavvio degli OSD Hugepage in uso 4 GiB dall\u0026rsquo;inizio alla fine Memoria dell\u0026rsquo;host ancora assegnabile, con una VM da 16 GiB in funzione da 3,1 a 4,0 GiB La riga delle hugepage è di nuovo la sezione sul budget, stavolta sotto carico: 512 MiB per OSD, e gli altri 12 GiB mai toccati.\nLa memoria ordinaria è il numero da tenere d\u0026rsquo;occhio, perché la cache qui sopra è fatta di quella. Una volta che una lettura aveva caricato il file, ogni OSD si è assestato intorno a 2,5 GiB, e questo è quanto teneva Ceph su un host da 58,7 GiB:\nMemoria di Ceph al picco, target di default 4 GiB Processi OSD, gli otto insieme 19,9 GiB, da 2,4 a 2,6 GiB ciascuno Hugepage riservate per gli OSD 16 GiB, di cui 4 GiB usati Monitor e manager 0,3 GiB Totale 36,2 GiB, il 62% dell\u0026rsquo;host Rimasto da assegnare all\u0026rsquo;host, con una VM da 16 GiB in funzione 3,6 GiB Torna indietro, ma non con una tempistica che io abbia potuto vedere. È rimasta a 19,9 GiB per 25 minuti, pause di inattività comprese, poi è scesa a 13,9 GiB alla fine dell\u0026rsquo;ultima esecuzione, e l\u0026rsquo;host aveva di nuovo 10,2 GiB da assegnare. osd_memory_target è rimasto al suo default di 4 GiB per OSD per tutto il tempo, quindi otto OSD avevano diritto a 32 GiB prima ancora di contare una sola hugepage. Su un nodo che deve anche far girare VM, il picco è il budget da calcolare prima dei dischi, ed è lì che i 12 GiB di hugepage inutilizzate fanno più male.\nTre VM insieme, con un budget più stretto Una VM lascia un sacco di spazio. Tre sono il punto in cui il budget deve essere giusto. Quindi prima sono cambiate due impostazioni.\nceph config set osd osd_memory_target 1073741824 # 1 GiB per OSD, was 4 sysctl -w vm.nr_hugepages=2048 # what eight OSDs use, was 8192 Il target non richiede altro: ogni OSD ha riportato il nuovo valore in pochi secondi, e sono stati comunque riavviati uno alla volta, con tutti i 257 PG tornati active+clean prima del successivo. Le hugepage hanno un tranello. Prima di ogni avvio di un OSD, croit-flashstore-prep vuole libero un intero --mem, 2048 MiB, e alza il pool se manca, ma non lo riabbassa mai. Riavviare osd.7 dopo il taglio ha riportato subito su il pool:\ncroit-flashstore-prep[7]: hugepages 2048kB: free 256 \u0026lt; need 1024, nr_hugepages 2048 -\u0026gt; 2816 Quindi il minimo che sopravvive a un riavvio dell\u0026rsquo;OSD o della macchina è quello che usano gli OSD più il margine di un avvio: 2.816 pagine, 5,5 GiB, contro i 16 GiB che chiede il controllo. Lo script più avanti ora riserva esattamente quello. Ritagliare a 2.048 una volta che tutti e otto sono su fa guadagnare altri 1,5 GiB fino al riavvio successivo.\nPoi tre cloni della VM, da 10 GiB ciascuno, hanno eseguito CrystalDiskMark nello stesso momento: Real World Performance [+Mix], tre passate, ma su un file da 1 GiB ciascuno invece che da 16 GiB. Questo rende la colonna delle letture ancora più un dato della cache, quindi leggi le scritture.\nCrystalDiskMark, tre VM insieme VM 104 VM 105 VM 106 Tutte e tre Una VM da sola SEQ1M Q1T1 scrittura 346,99 MB/s 318,99 MB/s 446,98 MB/s 1.113 MB/s 580,08 MB/s SEQ1M Q1T1 lettura 796,05 MB/s 905,03 MB/s 1.160,93 MB/s 2.862 MB/s 1.852,32 MB/s RND4K Q1T1 scrittura 1.901 IOPS 1.928 IOPS 1.862 IOPS 5.691 IOPS 2.435 IOPS RND4K Q1T1 latenza in scrittura 524,56 µs 517,00 µs 535,42 µs 409,77 µs RND4K Q1T1 lettura 3.773 IOPS 3.916 IOPS 3.909 IOPS 11.598 IOPS 5.706 IOPS RND4K Q1T1 mix 2.978 IOPS 3.027 IOPS 3.411 IOPS 9.416 IOPS 3.936 IOPS Tre VM hanno ottenuto 2,3 volte le scritture piccole di una, e ciascuna l\u0026rsquo;ha pagato con circa il 27% di latenza in più. Gli Optane non erano ancora la causa. Hanno toccato il picco di 20.900 scritture al secondo a 17 µs ciascuna, gli stessi 17 µs di una VM, e il più impegnato degli otto era occupato al 14%.\nHost, ogni cinque secondi durante l\u0026rsquo;esecuzione Target di default 4 GiB, una VM Target 1 GiB, tre VM Processo OSD più grande 2,7 GiB 1,15 GiB al picco, 0,8 dopo Gli otto processi OSD insieme 19,9 GiB 8,0 GiB al picco, 5,8 dopo Hugepage riservate 16 GiB, 4 usati 4 GiB, tutti usati Memoria data alle VM 16 GiB 30 GiB Memoria dell\u0026rsquo;host ancora assegnabile, al minimo 3,1 GiB 14,8 GiB Crescita dello swap nessuna nessuna Quindi FlashStore rispetta davvero osd_memory_target. È andato oltre del 15% al picco di una passata di letture ed è tornato sotto, con la cache che fa il suo lavoro dentro il budget invece che fuori. Tra il target e il taglio, 26 GiB sono tornati alle VM sulla stessa macchina.\nCPU in core, tre VM Host occupato OSD Guest librbd e client Ceph QEMU Tre avvii di Fisher-Price OS (Windows) dall'81 all'89% da 3,4 a 3,6 da 6,3 a 7,9 da 0,4 a 0,7 0,3 Benchmark dal 42 al 73% da 3,7 a 4,5 da 1,2 a 4,0 da 0,4 a 1,6 da 0,2 a 0,4 A riposo dopo dal 20 al 24% 3,3 0,3 0 0 Avviare tre guest ha fatto lavorare la CPU più del benchmark. Lo storage sotto non ci si è mai avvicinato, ed è il mini PC che pone il limite, come era scontato che fosse.\nTutto quanto, in uno script Tutto quello che c\u0026rsquo;è qui sopra sta in un solo script. Dagli gli indirizzi PCI dei dischi che vuoi come OSD e fa il resto, nell\u0026rsquo;ordine seguito da questo articolo, con dentro le due correzioni per Proxmox.\n\u0026#8615; flashstore-pve-setup.sh: OSD FlashStore su un nodo Proxmox VE flashstore-pve-setup.sh · 17 kB lspci -D -d ::0108 # find the drives bash flashstore-pve-setup.sh --dry-run 0000:05:00.0 # show the plan, change nothing bash flashstore-pve-setup.sh 0000:05:00.0 0000:06:00.0 Controlla Scrive Esegue Proxmox VE 9 e Ceph 21.2.0 Umbrella il keyring bootstrap-osd una lettura in passthrough come ceph, per scegliere kernel-cmd o kernel ogni disco: NVMe, niente cache di scrittura, non montato, partizionato o in uso il drop-in root-poi---setuser prepare e systemctl enable --now per ogni disco nessun dato nelle zone che legge la sonda di FlashStore una regola udev per disco, riconosciuto dal numero di serie il controllo dell\u0026rsquo;host, fermandosi solo su ciò che serve agli OSD blocchi da 4 KiB una sezione [osd.N] per disco, un core fisico ciascuno il download del pacchetto, verificato contro lo SHA-256 della release Niente viene distrutto a meno che tu non lo chieda. --format-4k riformatta un disco che non è a 4 KiB, uno alla volta nella propria unit così che niente lo interrompa, e --wipe gli permette di sovrascrivere un disco che contiene dati. --single-node aggiunge la regola replicated_osd, e rieseguirlo salta i dischi che sono già OSD.\nÈ stato testato qui, non solo scritto. Ha rifiutato l\u0026rsquo;SN750 per la sua cache di scrittura, ha rifiutato il disco di osd.7 finché conteneva ancora uno store, e poi, con osd.7 eliminato e i suoi nodi restituiti a root, l\u0026rsquo;ha ricostruito da zero in 10,5 secondi, scegliendo da solo il backend kernel. Quello che non fa è installare Ceph. Quel passaggio ti chiede di accettare una Technology Preview, e quella è una decisione tua, non di uno script.\nCosa va sistemato Niente di questo ferma un amministratore determinato, e tutto questo fermerebbe uno di fretta. Ogni voce è una dichiarazione che croit fa a chiunque scarichi il pacchetto, e ci ho sbattuto contro ciascuna al primo tentativo.\nDove Cosa succede Cosa la risolverebbe unit systemd User=ceph non può leggere pmxcfs, quindi l\u0026rsquo;OSD non parte mai su un nodo pveceph fornire l\u0026rsquo;avvio root-poi---setuser, o un drop-in per Proxmox ripiego di kernel-cmd ripiega solo se Identify viene rifiutato; sul kernel di PVE viene rifiutato Read e l\u0026rsquo;OSD si ferma ripiegare sull\u0026rsquo;I/O diretto per qualunque I/O in passthrough rifiutato udev la documentazione richiede una regola che dia a ceph i nodi dei namespace; non ne viene fornita nessuna fornirne una legata ai dispositivi configurati riepilogo di --check dice che il kernel NVMe è «compiled out» quando è l\u0026rsquo;unico percorso di store compilato correggere l\u0026rsquo;etichetta codice di uscita di --check l\u0026rsquo;SSD di boot non passa il test PLP, quindi uscire con 0 è impossibile valutare solo i dispositivi configurati o candidati hugepage dimensiona 2048 MiB per OSD, e prep li vuole liberi a ogni avvio; il backend kernel ne usa 512 dimensionare il backend kernel per quello che usa, e far chiedere a prep la stessa cifra sha256sums.txt i nomi dei file non corrispondono agli asset della release chiamarli come sono pubblicati nome del pacchetto la documentazione dice apt remove flashstore; il pacchetto è croit-flashstore-osd un solo nome, o quello giusto nella documentazione riferimento di flashstore_dev elenca solo spdk: e file: documentare kernel: e spdk: con un backend kernel Niente di questo è lavoro nuovo. Il daemon ha già il passaggio di privilegi, il backend diretto e la logica del ripiego. Solo che non sono stati collegati per la piattaforma su cui la maggior parte delle persone lo proverà per prima.\nUn\u0026rsquo;anteprima è dove lo scopri Un\u0026rsquo;anteprima è il posto giusto per ognuno di questi risultati, e il posto sbagliato dove lasciarli. È a questo che serve un\u0026rsquo;anteprima: qualcuno se la porta a casa, la mette sull\u0026rsquo;hardware che ha davvero, e scrive dove cade. Le parti che contano hanno tenuto. Lo store è salito in millisecondi, gli OSD si sono uniti a un cluster costruito con gli strumenti di qualcun altro, e l\u0026rsquo;installazione di un sistema operativo ci è andata sopra senza un errore.\nQuello che l\u0026rsquo;ha fatto inciampare è tutto ciò che sta intorno al daemon. Un file di configurazione su un filesystem che la unit non poteva leggere, un kernel che dice no a una chiamata che upstream permette, un disco di boot che il controllo non smetteva di contare. Niente di tutto questo è difficile. Tutto questo è la differenza tra un software che funziona e un software che funziona sulla tua macchina, e l\u0026rsquo;unico modo per colmarla è testare sulle macchine che la gente ha davvero invece che su quelle che hai costruito apposta.\nDetto questo, è un inizio promettente. Su un mini PC scadente, con il lato client ancora sulla librbd classica e tutti e otto i dischi su un solo link PCIe 3.0, qui gli Optane lavorano più che sotto BlueStore. Man mano che il progetto cresce ci tornerò sopra e scaverò più a fondo, quando altre parti dello stack verranno sostituite, e darò anche un\u0026rsquo;occhiata a CephFS2.\n«Drop-in» è una promessa fatta a un amministratore che non ha tempo di leggere il sorgente. I monitor di Proxmox, la GUI di Proxmox, il kernel di Proxmox e un pacchetto di qualcun altro sono esattamente la situazione per cui esiste quella promessa. Adesso la mantiene quasi. Nove piccole correzioni e la manterrà, e preferisco essere io a trovarle un mercoledì mattina piuttosto che un cliente a trovarle un venerdì sera.\ncroit/ceph-rust README — anteprima pubblica dal 9 novembre 2026, «not yet recommended for production data», requisiti, quick start, insieme di funzioni di produzione, commit Ceph testato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust release snapshot-2026-11-10 — i pacchetti usati qui, tra cui flashstore_…_debian-trixie_amd64.deb e sha256sums.txt.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — hardware requirements — controllo della cache di scrittura volatile, hugepage, note sulla versione del kernel.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — branches and versions — main punta a v21.2.0, v20.2.4 punta a v20.2.4; «The daemon refuses a cluster release outside its supported window.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager, PVE/Ceph/Releases.pm — umbrella elencata con release =\u0026gt; '21.2' e unsupported =\u0026gt; 1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — build and install packages — distribuzioni, glibc 2.34, gestione di ceph-osd.target, la riga apt remove.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — configuration reference — flashstore_dev, flashstore_lcores, flashstore_report_objectstore e perché il suo default è bluestore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit-flashstore-osd Cargo.toml — riga 29, knet = [… \u0026quot;kernel-nvme\u0026quot;].\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — first OSD tutorial — il controllo dell\u0026rsquo;host in sola lettura; «Exit 0 means no FAIL.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — ADR 0169, kernel NVMe backend — le due modalità kernel, il confronto misurato, il budget dell\u0026rsquo;allocatore per i dati, la risoluzione degli indirizzi spdk: e il ripiego solo su Identify (emendamento 6). Aggiunto al repository la sera stessa del rilascio.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE — Proxmox Cluster File System (pmxcfs) — il filesystem del cluster sotto /etc/pve e i suoi proprietari e permessi fissi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit-flashstore-osd@.service — User=ceph, ExecStartPre=… activate, e un CapabilityBoundingSet senza CAP_DAC_OVERRIDE.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit-flashstore-osd privdrop.rs — il classico passaggio di privilegi con --setuser/--setgroup.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — prepare the host — «the namespace node must be readable and writable by user ceph (udev rule)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux v7.0, drivers/nvme/host/ioctl.c — nvme_cmd_allowed(), la regola per il passthrough NVMe non privilegiato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — security — «prepare defaults --keyring to /var/lib/ceph/bootstrap-osd/\u0026lt;cluster\u0026gt;.keyring».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — prepare, activate and list — la sonda per i dispositivi non vuoti e --wipe.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager, PVE/API2/Ceph/OSD.pm — osdtype è bluestore solo quando i metadati contengono bluefs, altrimenti filestore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager, PVE/Ceph/Services.pm — ceph_service_cmd() associa osd.N alla unit systemd ceph-osd@N.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph documentation — CRUSH maps — regole replicate, domini di guasto e classi di dispositivo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCrystalDiskMark — il benchmark per dischi di Crystal Dew World; «Various measure mode (Peak/Real World/Demo)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Performance Tweaks — le modalità di cache del disco: «cache=none seems to be the best performance and is the default since Proxmox 2.X».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/proxmox/flashstore-osd-on-proxmox/","summary":"FlashStore OSD di croit è un sostituto in Rust di ceph-osd e BlueStore, in anteprima pubblica dal 9 novembre 2026. Qui lo installo in modo iperconvergente su un singolo nodo Proxmox VE 9.2: Ceph Umbrella 21.2.0 dalla procedura guidata di PVE per monitor e manager, OSD FlashStore su dischi Intel Optane P4800X. Spiega perché Umbrella è l\u0026rsquo;unica release di Proxmox compatibile, la formattazione dei dischi a 4 KiB e il reset del controller che interrompe la formattazione, cosa riporta croit-flashstore-osd \u0026ndash;check, perché l\u0026rsquo;unit fornita non riesce a leggere il ceph.conf di Proxmox e il drop-in che lo risolve, il passthrough NVMe che il kernel di Proxmox rifiuta e il backend diretto che funziona, la preparazione degli OSD per indirizzo PCI, cosa ne fa il pannello OSD di PVE, un pool, uno storage RBD e una VM Fisher-Price OS (Windows) installata sopra, CrystalDiskMark dentro quella VM confrontato con i contatori dei dischi stessi, la memoria di Ceph con tutti e otto gli OSD attivi, tre VM insieme con un target di memoria di 1 GiB, e uno script che fa tutto, testato ricostruendo un OSD da zero.","title":"OSD FlashStore su Proxmox VE: cosa è servito su un nodo"},{"content":"Una console, molti clienti Se gestisci Proxmox per conto di altri, ogni nuovo nodo è lo stesso lavoro fatto in modo leggermente diverso. Ogni cliente ha il suo paese, il suo fuso orario, le sue chiavi di root, il suo layout dei dischi, i suoi nomi degli host e la sua chiave di subscription. Sbagliane una su un nodo nuovo e lo scopri la prima volta che qualcuno fa login, o la prima volta che un audit chiede perché l\u0026rsquo;orologio è avanti di un\u0026rsquo;ora.\nL\u0026rsquo;ho costruito per un cliente con esattamente questo problema, e quello che chiedeva era piacevolmente semplice. Ogni sito si costruisce con i suoi nomi, la sua password di root e le sue chiavi SSH. Al sito nessuno fa niente di furbo: montano un server nel rack, lo collegano alla VLAN giusta e lo accendono. Nessuno raccoglie numeri di serie, e nessuno scrive un file di risposta per macchina. E un server aggiunto in quel modo finisce nel cluster già esistente del sito.\nCosa volevano Cosa lo realizza qui nomi, password e chiavi del sito una risposta preparata per sito, scelta dal token di quel sito collegalo alla VLAN giusta, accendilo e vattene discovery DNS, iPXE, e Caddy che sceglie il token dalla subnet di origine niente seriali, niente file di risposta per macchina le risposte filtrano solo sul prodotto; il sito viene dalla rete il nuovo server entra nel cluster esistente non in questo articolo: PDM non ha un hook di primo avvio, vedi sotto Questo articolo copre le prime tre: portare un server nudo dall\u0026rsquo;accensione a un nodo Proxmox installato con le impostazioni del sito giusto. Quella metà è quella che salta fuori per quasi chiunque abbia più di un sito, MSP o no, quindi vale la pena averla da sola. L\u0026rsquo;ingresso nel cluster è un lavoro separato, e la sezione sull\u0026rsquo;hook di primo avvio mancante spiega perché PDM non può ancora farlo per te.\nProxmox Datacenter Manager (PDM) 1.1 ha aggiunto il pezzo che mancava1. Ora può fare da server di risposte per l\u0026rsquo;installer automatico di Proxmox, così una macchina nuda si avvia, dichiara cos\u0026rsquo;è, riceve indietro una risposta preparata e si installa da sola senza nessuno alla console. Per un managed service provider (MSP) che usa già PDM come console di gestione, è il posto ovvio dove tenere le impostazioni di installazione di ogni cliente.\nQuello che non vuoi è un server PXE per cliente. Ognuno è un server Trivial File Transfer Protocol (TFTP), una configurazione DHCP, un insieme di file di boot e una ISO da rifare ogni volta che Proxmox rilascia una point release. Dieci clienti sono dieci di questi da tenere aggiornati. Non scala. L\u0026rsquo;obiettivo qui è un solo ambiente PXE, un\u0026rsquo;immagine di boot, un record DNS e un PDM, con ogni sito che riceve comunque la sua risposta.\nUn solo ambiente PXE per ogni sito site1 10.10.50.0/24 site2 10.20.50.0/24 site3 10.30.50.0/24 Caddy sulla 443 entra il catch token esce il token del sito, scelto dalla subnet PDM risposte delimitate per token 8443 sul loopback Un'immagine di boot, un record DNS e un servizio DHCP per ogni sito Il design finito. Ogni sito avvia la stessa immagine. Caddy capisce da quale sito arriva una richiesta guardando la subnet e passa a PDM il token di quel sito, e PDM offre solo le risposte legate a quel token. PDM 1.1 fa da solo gran parte della strada. Resta corto in due punti, ed entrambi vanno conosciuti prima di pianificare un rollout intorno a lui: non ha modo di abbinare una risposta a un sito, e non ha modo di dare a un nuovo nodo uno script di primo avvio. Questo articolo dimostra entrambe le cose dal sorgente stesso di PDM, aggira la prima e costruisce il tutto sul PDM del mio lab con la 1.1.9, con il proxy irrobustito in modo che le parti che custodiscono segreti restino chiuse.\nCosa ti dà PDM 1.1 La funzione si trova in Remotes → Automated Installations e ha tre parti: installazioni, risposte preparate e token di autenticazione2. Una risposta preparata è la versione PDM dell\u0026rsquo;answer.toml dell\u0026rsquo;installer, compilata tramite un modulo invece che scritta a mano.\nParte Cosa fa Dettaglio che conta Risposte preparate paese, tastiera, fuso orario, hash della password di root, chiavi SSH, rete, layout dei dischi, chiave di subscription, azione post-installazione generate da zero a ogni richiesta Filtri di destinazione decidono quale macchina riceve quale risposta JSON Pointer nelle informazioni di sistema dell\u0026rsquo;installer, glob per il valore3 Template MiniJinja nei campi FQDN, email dell\u0026rsquo;amministratore, IP, gateway e DNS contatori come installation_nr salgono ogni volta che una risposta viene servita4 Token di autenticazione l\u0026rsquo;installer invia Authorization: Bearer \u0026lt;name\u0026gt;:\u0026lt;secret\u0026gt; un tipo di token separato dai token API di PDM; ogni risposta elenca i token che accetta2 Installazioni un record per richiesta, con le informazioni di sistema complete passa da in corso a finita quando il webhook post-installazione richiama Permessi Sys.Audit per guardare, Sys.Modify per modificare entrambi su /system/auto-installation4 Il lato installer c\u0026rsquo;è da un po\u0026rsquo;. Il comando proxmox-auto-install-assistant prepare-iso costruisce una ISO che scarica la sua risposta via HTTP, e dalla ISO di Proxmox VE 9.2 sa anche produrre il kernel, l\u0026rsquo;initrd, la ISO e il boot.ipxe di cui iPXE ha bisogno per avviare il tutto via rete5.\nI contatori sono la parte che un answer.toml autonomo non ha. Una sola risposta preparata numera ogni host che costruisce, dove un file statico andrebbe copiato per ogni macchina. È un vero passo avanti, ed è comunque una prima versione. Il modulo non è ancora alla pari con il file di risposta autonomo6, e un\u0026rsquo;area manca del tutto: nella 1.1 non c\u0026rsquo;è uno script di primo avvio, in nessuna forma7. Quella lacuna, e il sito su cui non sa abbinare, sono le prossime due sezioni.\nNon sa abbinare sul sito PDM sceglie una risposta confrontando i filtri con le informazioni di sistema che l\u0026rsquo;installer invia. Quindi la domanda è cosa c\u0026rsquo;è in quel documento, perché tutto ciò che non c\u0026rsquo;è non può essere abbinato.\nChiave Cosa contiene Potrebbe indicare il sito? product fullname, product (pve, pbs, pmg), enable_btrfs no iso release, isorelease no dmi sistema, scheda madre e chassis: nome, seriale, UUID, SKU, asset tag solo se qualcuno ha scritto il sito nell\u0026rsquo;asset tag network_interfaces una lista di {link, mac} solo tramite un inventario che tieni tu È tutto qui8,9. Non c\u0026rsquo;è un indirizzo, non c\u0026rsquo;è un hostname, non c\u0026rsquo;è un\u0026rsquo;opzione DHCP, niente su dove è collegata la macchina.\nI campi del Desktop Management Interface (DMI) sembrano promettenti finché non ne leggi di veri. Ogni installazione del mio lab è tornata con il nome di sistema Standard PC (Q35 + ICH9, 2009) e seriale e asset tag vuoti. I server veri li compilano, ma con quello che ci ha messo il produttore e non con il nome del tuo cliente, e abbinare su seriali o indirizzi MAC funziona solo se tieni una lista di ogni chassis che installerai mai, che è esattamente la contabilità che tutto questo doveva eliminare. Per host, sì. Per sito, no.\nQuindi a quale rete è collegata la macchina? PDM non lo scopre mai. L\u0026rsquo;installer ha in mano il suo lease DHCP quando invia, e l\u0026rsquo;unico fatto che un MSP conosce con certezza su un nodo nuovo è proprio quello che lascia indietro. L\u0026rsquo;abbinamento sull\u0026rsquo;indirizzo di origine, IPv4 o IPv6, è una richiesta di funzionalità aperta, e l\u0026rsquo;ho aperta io stesso come bug 826310.\nC\u0026rsquo;è un secondo limite nascosto nelle regole di selezione, e il mio lab ci è finito dritto dentro.\nCome PDM sceglie una risposta 1. Token valido? attivo, non scaduto no 401 dopo circa mezzo secondo non registrato 2. Risposte su quel token in ordine di file, nient'altro 3. Tutti i filtri combaciano? solo stringhe, glob ammessi la prima risposta generata ogni suo contatore sale di 1 nessuna 4. Default su questo token? un solo default in tutto PDM no 400: no answer file found registrato in Installations La selezione di PDM, dal sorgente. Il token viene controllato per primo e delimita tutto ciò che segue, compresa la risposta di default. Il token viene controllato per primo, e vengono considerate solo le risposte autorizzate su quel token, compreso il default4. PDM permette esattamente una risposta di default in tutto il sistema. Quindi non puoi dare a ogni sito un ripiego tutto suo con il flag di default. Il mio lab aveva una risposta di default chiamata fallback su un token tutto suo, e non è mai stata servita nemmeno una volta, perché niente invia mai quel token. A ogni sito serve invece un filtro pigliatutto sul suo token, come /product/product=*, messo per ultimo nel file.\nAltre due cose dallo stesso codice vale la pena tenerle a mente quando fai debug:\nVince la prima corrispondenza, nell\u0026rsquo;ordine del file, e una seconda corrispondenza produce solo un warning nel log. È la regola dalla 1.1.111. Un filtro abbina solo stringhe. /product/enable_btrfs è un booleano e non abbina mai niente, e un array ha bisogno di un indice, come in /network_interfaces/0/mac. Sulla 1.1.9 un token sconosciuto o scaduto riceve un 401 dopo un ritardo deliberato di circa mezzo secondo e non lascia traccia. Un token valido senza nessuna corrispondenza riceve un 400 con il corpo no answer file found, e quel tentativo viene registrato, con le informazioni di sistema complete. Quel record è il modo più veloce per leggere i seriali e gli indirizzi MAC veri di un nuovo chassis prima di scrivergli un filtro.\nNon sa eseguire uno script di primo avvio L\u0026rsquo;installer di per sé supporta un hook di primo avvio. Una risposta può contenere una sezione [first-boot] con source = \u0026quot;from-iso\u0026quot; o \u0026quot;from-url\u0026quot;, un ordinamento tra before-network, network-online o fully-up, e un\u0026rsquo;impronta del certificato facoltativa9. prepare-iso --on-first-boot incorpora uno script nella ISO per il caso from-iso.\nPDM quella sezione non la invia mai. Mai. Il tipo di risposta dell\u0026rsquo;installer ha il campo, first_boot: Option\u0026lt;FirstBootHookInfo\u0026gt;12. La risposta preparata di PDM non ha nessun campo per questo, e il codice che costruisce la risposta a partire da essa scrive first_boot: None incondizionatamente4. Non c\u0026rsquo;è niente nel modulo, niente nell\u0026rsquo;API e niente nel file di configurazione che potresti aggiungere a mano. È una richiesta di funzionalità aperta, il bug 7699, aperto a giugno 2026 e ancora non assegnato mentre scrivevo7. Quasi cinque mesi dopo non ha ricevuto nessuna risposta da Proxmox, e neanche il 8263. Quel silenzio è la parte preoccupante. Chi si è preso il tempo di scrivere come il tuo prodotto potrebbe essere migliore merita una risposta, anche se la risposta è no, ed è normale cortesia professionale. A maggior ragione quando chi scrive sono clienti paganti e partner, che stanno già mettendo soldi nel prodotto prima di metterci anche il loro tempo.\nE lo script sulla ISO non ti salva. L\u0026rsquo;installer prepara il servizio di primo avvio solo if let Some(first_boot) = \u0026amp;answer.first_boot, ed è l\u0026rsquo;unico percorso che legge mai il file incorporato13. prepare-iso non dà nessun avviso quando incorpori uno script che nessuna risposta chiederà mai. Sta sulla ISO e non fa niente.\nLa lacuna del primo avvio Script sulla ISO prepare-iso --on-first-boot Risposta da PDM first_boot: None, sempre Installer prepara l'hook di primo avvio solo se la risposta ha [first-boot] lo script resta sulla ISO e non gira mai, senza avvisi Entrambe le metà arrivano all\u0026rsquo;installer, e quella che viene da PDM non chiede mai l\u0026rsquo;hook. Lo script sulla ISO è peso morto. Per un MSP conta più che per chiunque altro. Un nodo uscito dall\u0026rsquo;installer è un sistema nudo con una password di root in hash e qualche chiave SSH. Non è un remote di PDM, non è in un cluster, e non ha niente del tuo monitoraggio, dei tuoi repository o del tuo storage. Nel mio lab i tre nodi hanno tutti finito e richiamato, e il remote SITEA in PDM andava comunque aggiunto a mano dopo.\nQuindi qualunque cosa usi per finire un nodo, che sia Ansible o altro, deve essere avviata da fuori: dal webhook post-installazione, da un job che osserva la lista Installations, o da una persona. Lo lascio lì. Questo articolo parla di come far servire ogni sito da un solo ambiente PXE, e la lacuna del primo avvio è un limite intorno a cui pianificare, non uno che coprirò qui con una pezza.\nIl token è il sito PDM non vede il sito, ma delimita le risposte per token, e un token è solo un header. Chi imposta l\u0026rsquo;header sceglie quale insieme di risposte l\u0026rsquo;installer può ottenere. Tutto il trucco è qui.\nQuindi metti davanti a PDM qualcosa che sappia da dove arriva la richiesta:\nL\u0026rsquo;immagine di boot porta un catch token, catch-all:not-a-secret, che è lo stesso in ogni immagine ed è pubblicato proprio qui. Non è un token di PDM e da solo non apre niente. Un reverse proxy Caddy davanti a PDM guarda la subnet di origine di una richiesta di risposta che porta il catch token, e sostituisce l\u0026rsquo;header con il vero token di quel sito. PDM vede site2-2026q4:\u0026lt;secret\u0026gt; e offre solo le risposte di site2. Il segreto non si avvicina mai all\u0026rsquo;immagine di boot, quindi una chiavetta USB persa o una ISO copiata non danno niente a nessuno. Ruotare il token di un sito è una modifica a Caddy, non una ricostruzione dell\u0026rsquo;immagine. E aggiungere un sito è una riga di configurazione di Caddy e un nuovo token in PDM.\nTutto si regge sull\u0026rsquo;onestà dell\u0026rsquo;indirizzo di origine, che è una proprietà della tua rete, non del proxy. Quel compromesso e gli altri sono esposti più sotto in «Cosa resta da decidere».\nCome l\u0026rsquo;installer trova PDM senza un URL incorporato Un\u0026rsquo;immagine per ogni sito funziona solo se l\u0026rsquo;immagine non porta nemmeno l\u0026rsquo;indirizzo di PDM. L\u0026rsquo;installer cerca l\u0026rsquo;URL della risposta in tre posti, in ordine14:\nDove l'installer trova l'URL della risposta 1. URL incorporato nella ISO? prepare-iso --url sì usato, DHCP e DNS mai interrogati un'immagine per PDM: evitato qui no 2. Opzione DHCP 250? letta dal lease dell'installer sì usata, con l'opzione 251 per l'impronta: qui non inviata no, o un errore DHCP 3. Ricerca TXT nel DNS dominio di ricerca da resolv.conf proxmox-auto-installer.example.doc URL e impronta, entrambi dal DNS L\u0026rsquo;ordine che segue l\u0026rsquo;installer. Lascia l\u0026rsquo;URL fuori dall\u0026rsquo;immagine e non inviare nessuna opzione 250, e ogni sito ricade sul DNS. Regola Cosa fa il codice Cosa significa per te Ordine un URL nella ISO vince; altrimenti DHCP; qualsiasi errore DHCP ricade sul DNS14 costruisci l\u0026rsquo;immagine senza --url, e non inviare l\u0026rsquo;opzione 250 da nessuna parte Nomi dei record proxmox-auto-installer.\u0026lt;search domain\u0026gt; per l\u0026rsquo;URL, proxmox-auto-installer-cert-fingerprint.\u0026lt;search domain\u0026gt; per l\u0026rsquo;impronta una zona, due record TXT Dominio di ricerca la prima riga search di /etc/resolv.conf, divisa su un singolo spazio distribuisci esattamente un dominio; due diventano un unico nome non valido Nessun dominio fallisce con Could not find search domain in resolv.conf. controlla che l\u0026rsquo;opzione DHCP 15 o 119 venga inviata Valore TXT dig txt +short, tolti tutti i \u0026quot;, poi rifilato un valore TXT diviso in più stringhe lascia uno spazio nell\u0026rsquo;URL; tienilo come una sola stringa Impronta presa dal DNS solo quando anche l\u0026rsquo;URL viene dal DNS e non ce n\u0026rsquo;è una incorporata pubblica l\u0026rsquo;impronta del certificato di PDM, che serve anche Caddy Token inviato come Authorization: Bearer \u0026lt;token\u0026gt;, conservato in chiaro sulla ISO9 ed è per questo che l\u0026rsquo;immagine porta solo il catch token Il certificato che l\u0026rsquo;installer controlla è quello che risponde sulla 443. In questo design lì Caddy serve il certificato di PDM stesso, quindi un client vede sulla 443 lo stesso certificato che PDM ha sulla 8443, e c\u0026rsquo;è una sola impronta da pubblicare.\nCostruirlo: PDM, file di boot e DNS Gli esempi usano il dominio example.doc e tre siti, 10.10.50.0/24, 10.20.50.0/24 e 10.30.50.0/24. .doc non è un vero dominio di primo livello, quindi sostituisci il tuo. PDM, Caddy, dnsmasq e i file di boot stanno tutti su un solo host, pdm.example.doc a 10.10.50.10, e i siti remoti lo raggiungono tramite un relay DHCP sui loro gateway. La gestione sta su 10.99.0.0/24 e, come tale, è l\u0026rsquo;unica rete che vede mai la UI web di PDM.\nToken e risposte in PDM In Remotes → Automated Installations → Authentication Tokens, aggiungi un token per sito e dagli una scadenza che corrisponda alla tua finestra di rollout. Il nome non è segreto, e lo vedrai nei log, quindi fagli dire qualcosa: site1-2026q4. Copia il segreto quando viene mostrato.\nPoi aggiungi una risposta preparata per sito e per prodotto, autorizzata solo sul token di quel sito:\nCampo site1, Proxmox VE Token autorizzato site1-2026q4 Filtro di destinazione /product/product=pve Paese, tastiera, fuso orario gb, en-gb, Europe/London Accesso root chiavi SSH, più una password impostata tramite il modulo, che PDM conserva e invia solo come hash4 Rete DHCP, nomi delle interfacce fissati FQDN {{ product.product }}-site1-{{ installation_nr }}.example.doc Disco il tuo layout, per esempio un mirror ZFS su due dischi indicati per nome Webhook post-installazione URL di base https://pdm.example.doc, con l\u0026rsquo;impronta del certificato di PDM Il contatore sale ogni volta che una risposta viene servita, tentativi ripetuti compresi, quindi i nomi possono saltare dei numeri. Il contatore del mio lab è a 4 dopo tre installazioni finite. Se ti servono nomi prevedibili, usa FQDN from DHCP e metti il nome host sulla prenotazione DHCP.\nL\u0026rsquo;URL di base del webhook è l\u0026rsquo;unica impostazione che deve cambiare per questo design. Viene naturale puntarlo a PDM stesso sulla porta 8443, ed era così nel mio lab, e la 8443 sta per essere chiusa. Puntalo a Caddy.\nI file di boot Su qualsiasi host Proxmox VE o Debian con il repository Proxmox:\napt install proxmox-auto-install-assistant xorriso mkdir -p /srv/www/pve-9.2 proxmox-auto-install-assistant prepare-iso proxmox-ve_9.2-1.iso \\ --fetch-from http \\ --answer-auth-token \u0026#39;catch-all:not-a-secret\u0026#39; \\ --pxe-loader ipxe \\ --output /srv/www/pve-9.2/ Niente --url, perché lo fornisce il DNS. --pxe-loader ipxe implica --pxe, e con --pxe l\u0026rsquo;output deve essere una directory che esiste già15. Ottieni quattro file: vmlinuz, initrd.img ricompresso da zstd a gzip perché iPXE non sa caricare un initrd zstd, la ISO preparata con /boot rimossa, e un menu boot.ipxe che dopo dieci secondi parte di default con l\u0026rsquo;installazione automatica e si riferisce agli altri per nome relativo15. Tieni tutti e quattro in una sola directory.\nOgni macchina di destinazione ha bisogno di memoria sufficiente a contenere il kernel, l\u0026rsquo;initrd e l\u0026rsquo;intera ISO. Le note di Proxmox VE 9.2 la fissano a «at least 6 GiB of available memory on the host»5. Le stesse note elencano un problema noto con il kernel della ISO 9.2 sui controller megaraid_sas e su alcuni dischi NVMe in modalità JBOD (just a bunch of disks), con il consiglio di installare dalla ISO 9.1 e aggiornare5. Prova il tuo hardware prima di affidarlo al percorso di rete.\nI record DNS Nella zona che corrisponde all\u0026rsquo;unico dominio di ricerca distribuito dal DHCP:\n$ORIGIN example.doc. pdm IN A 10.10.50.10 proxmox-auto-installer IN TXT \u0026#34;https://pdm.example.doc/api2/json/auto-install/answer\u0026#34; proxmox-auto-installer-cert-fingerprint IN TXT \u0026#34;63:C4:D6:...:85:07\u0026#34; L\u0026rsquo;impronta è quella del certificato di PDM stesso:\nopenssl x509 -in /etc/proxmox-datacenter-manager/auth/api.pem -noout -fingerprint -sha256 Controllali come farà l\u0026rsquo;installer:\ndig txt +short proxmox-auto-installer.example.doc @10.10.50.10 # one quoted string, nothing split Caddy, l\u0026rsquo;unica porta per PDM L\u0026rsquo;API di PDM ascolta su [::]:8443, ed è una costante compilata nel binario, non un\u0026rsquo;impostazione16. Non puoi legarla al loopback. Quindi Caddy diventa l\u0026rsquo;unica via d\u0026rsquo;accesso, e il firewall se ne assicura.\nLe route di Caddy davanti a PDM RICHIESTA COSA SUCCEDE POST di risposta, subnet di sito, catch token riscritto con il token del sito POST di post-hook, subnet di sito Authorization tolto, inoltrato UI web o API, subnet di gestione passa intatto, login PDM qualsiasi altra cosa, da ovunque interrotto, non arriva a PDM porta 8443, da fuori macchina scartato da nftables Ogni richiesta che Caddy vede finisce in uno di cinque posti. Solo i primi tre arrivano mai a PDM. PDM ha esattamente due route che funzionano senza un login PDM: POST /api2/json/auto-install/answer con un token dell\u0026rsquo;installer, e POST …/installations/{uuid}/post-hook con il token monouso nel corpo4. Sono le uniche due che una rete di provisioning dovrebbe mai raggiungere.\nUsa Caddy 2.11.1 o successivo. La 2.11.1 ha corretto un aggiramento del path matcher, CVE-2026-27587, che è esattamente il tipo di filtro sui percorsi su cui si regge tutto questo17. Il pacchetto di Debian 13 è la 2.6.2, quindi prendilo da trixie-backports, che ha la 2.11.2, o dal repository di Caddy stesso18.\nIl Caddyfile, /etc/caddy/Caddyfile:\n{ # the admin API on a socket only root can open, never on TCP admin unix//run/caddy/admin.sock|0600 auto_https disable_redirects servers { protocols h1 h2 } } # PDM itself, on the loopback, trusted by its own certificate (pdm_upstream) { reverse_proxy https://[::1]:8443 { transport http { tls_trust_pool file /etc/proxmox-datacenter-manager/auth/api.pem tls_server_name pdm.example.doc } } log_append pdm_status {http.reverse_proxy.status_code} } # one site: name, subnet, PDM token name, PDM token secret (site) { @{args[0]} { method POST path /api2/json/auto-install/answer remote_ip {args[1]} header Authorization \u0026#34;Bearer catch-all:not-a-secret\u0026#34; } handle @{args[0]} { log_append site {args[0]} log_append pdm_token {args[2]} request_header Authorization \u0026#34;Bearer {args[2]}:{args[3]}\u0026#34; import pdm_upstream } } pdm.example.doc, 10.10.50.10 { tls /etc/proxmox-datacenter-manager/auth/api.pem /etc/proxmox-datacenter-manager/auth/api.key import site site1 10.10.50.0/24 site1-2026q4 {env.PDM_SECRET_SITE1} import site site2 10.20.50.0/24 site2-2026q4 {env.PDM_SECRET_SITE2} import site site3 10.30.50.0/24 site3-2026q4 {env.PDM_SECRET_SITE3} @post_hook { method POST path /api2/json/auto-install/installations/*/post-hook remote_ip 10.10.50.0/24 10.20.50.0/24 10.30.50.0/24 } handle @post_hook { request_header -Authorization import pdm_upstream } # the PDM web UI and API, from the management network only @mgmt remote_ip 10.99.0.0/24 handle @mgmt { import pdm_upstream } # anything else, from anywhere, never reaches PDM handle { abort } log { output file /var/log/caddy/pdm.log format filter { request\u0026gt;headers\u0026gt;Csrfpreventiontoken replace REDACTED } } } # boot files, to the sites and management only http://:80 { @hidden path_regexp /\\. handle @hidden { abort } @boot remote_ip 10.10.50.0/24 10.20.50.0/24 10.30.50.0/24 10.99.0.0/24 handle @boot { root * /srv/www file_server } handle { abort } } Le parti che fanno lavoro di sicurezza, e perché ognuna è lì:\nRiga Perché header Authorization \u0026quot;Bearer catch-all:not-a-secret\u0026quot; nel matcher del sito senza, qualsiasi POST da una subnet di sito riceve il token vero; una richiesta deve arrivare dalla subnet giusta e portare il catch token request_header Authorization … imposta l\u0026rsquo;header sovrascrivendo quello che ha inviato il client, quindi un token falsificato viene sostituito, mai inoltrato19 remote_ip il peer immediato; non mettere né NAT né load balancer tra gli installer e Caddy20 blocchi handle con nome mantenuti nell\u0026rsquo;ordine in cui sono scritti e mutuamente esclusivi, così il handle { abort } nudo ha l\u0026rsquo;ultima parola21 @mgmt l\u0026rsquo;intera UI e API di PDM, intatte, così login, token API e cookie di PDM funzionano normalmente; una subnet di sito non ne riceve niente admin unix//…|0600 l\u0026rsquo;API di amministrazione di default sta su TCP localhost:2019, senza autenticazione22 protocols h1 h2 di default Caddy ascolta su UDP 443 per HTTP/322; questo lo spegne invece di lasciare una porta che nessuno voleva aprire @hidden file_server serve ogni file sotto la sua root, file nascosti compresi, e hide è documentato come non un confine di sicurezza23 Csrfpreventiontoken replace REDACTED Caddy oscura Authorization e Cookie nel suo access log di default, ma non l\u0026rsquo;header CSRF di PDM24 Il path matcher è più tollerante di PDM, che è il verso giusto. Caddy pulisce il percorso, decodifica il percent-encoding, unisce le barre ripetute e ignora le maiuscole prima di abbinare20. Quindi //answer, %61nswer e ANSWER contano tutti come route della risposta, mentre una variante /api2/extjs/… o una barra finale non abbina nessuna route di sito e ricade su abort.\nDue scelte lì dentro vanno spiegate.\nCaddy serve il certificato di PDM, direttamente dai file di PDM. Caddy legge api.pem e api.key dove li tiene PDM, così gli installer, il webhook e un browser vedono tutti il certificato che PDM presenta sulla 8443, e non c\u0026rsquo;è una seconda copia che possa andare fuori allineamento. Il modo ovvio per dargli quell\u0026rsquo;accesso è aggiungere l\u0026rsquo;utente caddy a www-data. Sul mio lab ho controllato cosa raggiunge davvero quell\u0026rsquo;appartenenza al gruppo, provando ogni file come utente caddy:\nFile sotto /etc/proxmox-datacenter-manager/ Leggibile da caddy in www-data remotes.shadow, le credenziali di ogni remote gestito sì autoinst/tokens.shadow, ogni segreto dei token dell\u0026rsquo;installer sì auth/api.key, auth/csrf.key sì access/user.cfg, subscriptions/ sì Niente in quella lista deve stare vicino a un proxy web. Un bug nel proxy diventerebbe allora la compromissione di ogni cluster gestito da PDM.\nQuindi Caddy resta fuori da www-data e riceve una ACL esattamente sui due file di cui ha bisogno, più il permesso di attraversare le due directory sopra di loro senza elencarle:\n#!/bin/sh # /usr/local/sbin/pdm-cert-acl # let Caddy read PDM\u0026#39;s certificate and key in place, and nothing else of PDM\u0026#39;s set -e D=/etc/proxmox-datacenter-manager; A=$D/auth setfacl -m u:caddy:x \u0026#34;$D\u0026#34; \u0026#34;$A\u0026#34; setfacl -m u:caddy:r \u0026#34;$A/api.pem\u0026#34; \u0026#34;$A/api.key\u0026#34; Provato come utente caddy sul lab dopo averlo eseguito:\nPercorso caddy auth/api.pem, auth/api.key può leggere auth/csrf.key, auth/authkey.key, auth/authkey.pub non può leggere remotes.shadow, remotes.cfg, autoinst/tokens.shadow, access/user.cfg non può leggere elencare auth/ rifiutato Il problema è il rinnovo. PDM scrive un certificato rinnovato in un file nuovo e lo rinomina al posto del vecchio, e un file nuovo non porta la ACL di quello vecchio. Quindi quando PDM rinnova, systemd rimette la ACL e ricarica Caddy, senza che nessuno intervenga.\nUn controllo che certificato e chiave vadano insieme, perché un rinnovo li scrive uno alla volta:\n#!/bin/sh # /usr/local/sbin/pdm-cert-pair-ok # exit 0 only when PDM\u0026#39;s certificate and key belong together d=/etc/proxmox-datacenter-manager/auth c=$(openssl x509 -noout -pubkey -in \u0026#34;$d/api.pem\u0026#34;) || exit 1 k=$(openssl pkey -pubout -in \u0026#34;$d/api.key\u0026#34;) || exit 1 [ \u0026#34;$c\u0026#34; = \u0026#34;$k\u0026#34; ] Una path unit che osserva entrambi i file, e il servizio che avvia:\n# /etc/systemd/system/caddy-pdm-cert.path [Unit] Description=Watch the PDM certificate and key for renewal [Path] PathChanged=/etc/proxmox-datacenter-manager/auth/api.pem PathChanged=/etc/proxmox-datacenter-manager/auth/api.key Unit=caddy-pdm-cert.service [Install] WantedBy=multi-user.target # /etc/systemd/system/caddy-pdm-cert.service [Unit] Description=Let Caddy read the renewed PDM certificate in place, then reload Caddy [Service] Type=oneshot ExecCondition=/usr/local/sbin/pdm-cert-pair-ok ExecStart=/usr/local/sbin/pdm-cert-acl ExecStart=/usr/bin/systemctl try-reload-or-restart caddy.service apt install acl systemctl daemon-reload systemctl enable --now caddy-pdm-cert.path L\u0026rsquo;override più sotto esegue lo stesso script ACL prima di ogni avvio di Caddy, così un rinnovo avvenuto mentre Caddy era fermo non viene mai perso.\nI dettagli che lo fanno funzionare, ognuno verificato:\nPezzo Perché entrambi i file osservati la prima scrittura fa partire la unit; la condizione la salta finché la coppia non combacia, e la seconda scrittura la fa ripartire con una coppia che combacia ExecCondition una condizione fallita salta l\u0026rsquo;esecuzione invece di farla fallire, quindi un rinnovo scritto a metà non arriva mai a Caddy25 PathChanged scatta quando un file osservato che era aperto in scrittura viene chiuso26; sul lab è scattato anche quando un file nuovo è stato rinominato sopra quello vecchio lo script ACL a ogni esecuzione un file rinominato al suo posto non ha ACL, quindi Caddy non potrebbe leggerlo finché lo script non gira di nuovo try-reload-or-restart ricarica Caddy se è in esecuzione e non fa niente se non lo è reload --force nella unit di Caddy senza --force, Caddy vede la stessa configurazione e continua a servire il certificato vecchio Quest\u0026rsquo;ultima riga non è un\u0026rsquo;ipotesi. In un container usa e getta con Caddy 2.11.7 ho sostituito il file del certificato dietro un server in esecuzione: un semplice caddy reload ha continuato a servire il certificato vecchio, e caddy reload --force ha servito quello nuovo. La unit del pacchetto ricarica già con --force27, quindi tieni quella riga se fai l\u0026rsquo;override di ExecReload.\nSul lab ho sostituito api.key e api.pem di PDM come fa un rinnovo, scrivendo file nuovi e rinominandoli sopra quelli vecchi. Subito dopo il rename, api.key non aveva nessuna voce ACL per caddy. Entro quattro secondi la path unit era scattata, la ACL era tornata su entrambi i file, e Caddy si era ricaricato sul posto con lo stesso ID di processo.\nIl nome del token e il segreto restano separati. Il nome va nel Caddyfile, dove finisce nei log. Il segreto va in un file di ambiente che solo root può leggere, e Caddy lo legge tramite {env.*} al momento della richiesta.\nLogga quale token è stato usato, mai il segreto La prima versione di tutto questo nel mio lab perdeva il segreto. La unit del pacchetto di Caddy lo avvia come caddy run --environ, e --environ stampa tutto l\u0026rsquo;ambiente prima di partire28,27. Ogni riavvio metteva il token del sito nel journal in chiaro: otto righe, quando le ho contate. Niente nell\u0026rsquo;access log, niente nei log di PDM, tutto da quell\u0026rsquo;unico flag.\nDove vanno il segreto e il nome del token IL SEGRETO pdm-secrets.env solo root, 0600 ambiente di Caddy {env.PDM_SECRET_SITE1} header Authorization solo hop di loopback verso PDM IL NOME riga import nel Caddyfile access log, ogni richiesta di risposta \"pdm_token\":\"site1-2026q4\" MAI SCRITTO IN il journal --environ tolto l'API di amministrazione socket unix, 0600 un dump della config solo il segnaposto Il segreto ha un solo lavoro e un solo percorso. Il nome è quello che metti nei log. Quindi il file dei segreti contiene segreti e nient\u0026rsquo;altro:\ninstall -m 0600 /dev/null /etc/caddy/pdm-secrets.env printf \u0026#39;PDM_SECRET_SITE1=%s\\nPDM_SECRET_SITE2=%s\\nPDM_SECRET_SITE3=%s\\n\u0026#39; \\ \u0026#39;\u0026lt;secret1\u0026gt;\u0026#39; \u0026#39;\u0026lt;secret2\u0026gt;\u0026#39; \u0026#39;\u0026lt;secret3\u0026gt;\u0026#39; \u0026gt; /etc/caddy/pdm-secrets.env e l\u0026rsquo;override della unit toglie --environ e dà una casa al socket di amministrazione:\n# systemctl edit caddy [Service] EnvironmentFile=/etc/caddy/pdm-secrets.env RuntimeDirectory=caddy RuntimeDirectoryMode=0700 # PDM\u0026#39;s certificate and key, read where PDM keeps them ExecStartPre=+/usr/local/sbin/pdm-cert-acl # the access log directory and its files belong to Caddy ExecStartPre=+/usr/bin/install -d -o caddy -g caddy -m 0750 /var/log/caddy ExecStartPre=+/usr/bin/chown -R caddy:caddy /var/log/caddy ExecStart= ExecStart=/usr/bin/caddy run --config /etc/caddy/Caddyfile ExecReload= ExecReload=/usr/bin/caddy reload --config /etc/caddy/Caddyfile --force Il + esegue quelle righe come root, prima che Caddy parta come suo utente. Le righe dei log contano non appena qualcos\u0026rsquo;altro tocca /var/log/caddy: un log ruotato da root, o un file creato a mano durante i test, lascia Caddy incapace di aprire il suo access log. Sul lab ho impostato pdm.log a root:root e riavviato Caddy; è tornato caddy:caddy e Caddy non ha registrato nessun errore di permessi.\nDopo averlo modificato riavvia invece di ricaricare, perché un reload non rilegge l\u0026rsquo;ambiente. Usa {env.NAME}, mai {$NAME}: la seconda forma viene sostituita quando il Caddyfile viene adattato, quindi il segreto finisce nella configurazione JSON, nel file di autosave e in qualsiasi cosa li scarichi29. Anche qui il socket di amministrazione conta. {env.*} risolve qualsiasi cosa nell\u0026rsquo;ambiente del processo senza una allow-list, quindi chiunque possa caricare una configurazione tramite un\u0026rsquo;API di amministrazione su TCP può farsi rileggere un segreto da Caddy30.\nOgni riga di risposta nell\u0026rsquo;access log ora indica il sito e il token, con l\u0026rsquo;header stesso oscurato. Dal lab, dove entrambi si chiamano siteA:\n{\u0026#34;site\u0026#34;:\u0026#34;siteA\u0026#34;,\u0026#34;pdm_token\u0026#34;:\u0026#34;siteA\u0026#34;,\u0026#34;pdm_status\u0026#34;:400,\u0026#34;status\u0026#34;:400, \u0026#34;request\u0026#34;:{\u0026#34;headers\u0026#34;:{\u0026#34;Authorization\u0026#34;:[\u0026#34;REDACTED\u0026#34;]}}} L\u0026rsquo;ho verificato invece di fidarmi. Su una copia podman di questa configurazione con segreti fittizi, e poi sul lab, ho inviato risposte lungo ogni percorso che mi veniva in mente: normale, con il logging di debug acceso, con l\u0026rsquo;upstream giù per un 502, un reload e un riavvio. Poi ho contato ogni segreto nel journal, nell\u0026rsquo;access log, nelle directory di configurazione e dati di Caddy e nel JSON adattato. Ogni conteggio era zero. L\u0026rsquo;esecuzione di controllo, la stessa configurazione avviata con --environ, ha stampato il segreto due volte.\nDue avvertenze da quel test. Con debug acceso, Caddy logga tutta la sua configurazione adattata, quindi lì compaiono il catch token e i segnaposto {env.*}; i valori dietro di loro no. Tieni comunque il debug spento in produzione. E se un segreto è già passato per un journal, come il mio, rigeneralo in PDM e aggiorna il file; cancellare righe di log non è la soluzione.\nIl firewall: la 8443 non lascia mai la macchina Il mio lab non aveva nessun firewall, quindi la 8443 rispondeva a ogni host della rete di provisioning e ogni regola del Caddyfile si poteva aggirare. Chiudila. nftables, con policy di default drop:\n#!/usr/sbin/nft -f flush ruleset define SITES = { 10.10.50.0/24, 10.20.50.0/24, 10.30.50.0/24 } define MGMT = { 10.99.0.0/24 } table inet filter { chain input { type filter hook input priority filter; policy drop; iifname \u0026#34;lo\u0026#34; accept ct state established,related accept ct state invalid drop meta l4proto { icmp, ipv6-icmp } accept # PDM\u0026#39;s API listens on [::]:8443 and cannot be rebound tcp dport 8443 counter drop ip saddr $MGMT tcp dport { 22, 80, 443 } accept udp dport { 67, 69 } accept ip saddr $SITES meta l4proto { tcp, udp } th dport 53 accept ip saddr $SITES tcp dport { 80, 443 } accept } chain forward { type filter hook forward priority filter; policy drop; } } Le connessioni di PDM verso i suoi remote sono in uscita, quindi chiudere la 8443 in ingresso lì non cambia niente. La prima volta carica un nuovo ruleset con un rollback a tempo, così un errore ti costa novanta secondi invece di un viaggio alla console:\nsystemd-run --unit=nft-rollback --on-active=90 /usr/sbin/nft flush ruleset nft -f /etc/nftables.conf # still connected? then: systemctl stop nft-rollback.timer \u0026amp;\u0026amp; systemctl enable nftables Sul lab, dopo tutto questo:\nControllo Risultato 8443 dalla rete di gestione nessuna connessione; il contatore del drop che sale UI web di PDM tramite Caddy sulla 443, dalla gestione fa login e funziona UI web di PDM da un indirizzo di sito interrotta POST di risposta da un sito con il catch token arriva a PDM con il token del sito: una sonda volutamente senza corrispondenza ha ricevuto 400 no answer file found la stessa sonda diretta a PDM con un token inventato 401 POST di risposta senza il catch token, o come /api2/extjs/… interrotto file in cui stanno i segreti di PDM, letti come caddy nessuno leggibile il segreto del sito nel journal, nell\u0026rsquo;access log o nei dati di Caddy dopo la modifica 0 DHCP, iPXE e il loop Il firmware dei server può scaricare il suo primo file solo via TFTP, quindi TFTP serve il piccolo loader iPXE e iPXE scarica tutto il resto via HTTP. La trappola è che iPXE invia una sua richiesta DHCP, e un server che le risponde di nuovo con ipxe.efi manda la macchina a girare in tondo per sempre. Il server DHCP deve saper distinguere il firmware da iPXE.\nPerché una risposta DHCP semplice gira in tondo Risposta semplice: loop il firmware chiede un file di boot risposta: ipxe.efi iPXE parte e chiede di nuovo stessa risposta: ipxe.efi il server non distingue il firmware da iPXE, quindi non va mai avanti Riconosce iPXE: funziona il firmware chiede un file di boot non iPXE: ipxe.efi via TFTP iPXE richiede, con l'opzione 175 risposta: URL di boot.ipxe, via HTTP kernel, initrd e ISO, poi installa La stessa richiesta due volte riceve la stessa risposta due volte. L\u0026rsquo;opzione 175, che invia solo iPXE, è il modo in cui il server distingue la seconda richiesta dalla prima. Server DHCP Come rompe il loop dnsmasq marca con un tag le richieste che portano l\u0026rsquo;opzione 175, che invia solo iPXE, e a quelle passa l\u0026rsquo;URL HTTP31 ISC dhcpd if exists user-class and option user-class = \u0026quot;iPXE\u0026quot;32 FortiGate il campo filename accetta un solo valore, quindi costruisci un loader iPXE con l\u0026rsquo;URL incorporato e servi quello a tutti dnsmasq, che serve la sua rete e le altre due tramite relay, solo con prenotazioni:\n# /etc/dnsmasq.d/pxe.conf local=/example.doc/ domain=example.doc address=/pdm.example.doc/10.10.50.10 txt-record=proxmox-auto-installer.example.doc,\u0026#34;https://pdm.example.doc/api2/json/auto-install/answer\u0026#34; txt-record=proxmox-auto-installer-cert-fingerprint.example.doc,\u0026#34;63:C4:D6:...:85:07\u0026#34; dhcp-authoritative dhcp-range=set:site1,10.10.50.0,static,255.255.255.0,1h dhcp-range=set:site2,10.20.50.0,static,255.255.255.0,1h dhcp-range=set:site3,10.30.50.0,static,255.255.255.0,1h dhcp-option=tag:site1,option:router,10.10.50.1 dhcp-option=tag:site2,option:router,10.20.50.1 dhcp-option=tag:site3,option:router,10.30.50.1 dhcp-option=option:dns-server,10.10.50.10 dhcp-option=option:domain-search,example.doc dhcp-match=set:ipxe,175 dhcp-match=set:efi64,option:client-arch,7 dhcp-match=set:efi64,option:client-arch,9 dhcp-boot=tag:efi64,tag:!ipxe,ipxe.efi dhcp-boot=tag:ipxe,http://pdm.example.doc/pve-9.2/boot.ipxe # no option 250 anywhere: DNS discovery depends on it enable-tftp tftp-root=/srv/tftp tftp-secure # TFTP block-size ceiling: lower it for an IPsec or other tunnel in the path tftp-mtu=1500 # dhcp-host=\u0026lt;mac\u0026gt;,\u0026lt;ip inside that site\u0026#39;s /24\u0026gt;,\u0026lt;hostname\u0026gt; dhcp-host=aa:bb:cc:dd:ee:01,10.10.50.21,pve01 dhcp-host=aa:bb:cc:dd:ee:02,10.20.50.21,pve01 static significa nessun pool: solo le macchine prenotate ricevono un indirizzo, il che tiene gli estranei fuori dal percorso dell\u0026rsquo;installer. L\u0026rsquo;indirizzo di ogni prenotazione deve stare dentro il /24 del suo sito, perché è quell\u0026rsquo;indirizzo che Caddy usa per scegliere il token. Un nodo prenotato nella subnet sbagliata riceve la risposta del sito sbagliato, o niente.\nLe prenotazioni sono una lista di indirizzi MAC, ed è contabilità per macchina proprio del tipo che il cliente non voleva. Se collegalo e avvialo è davvero il requisito, dai invece a ogni VLAN di provisioning un piccolo range dinamico, per esempio dhcp-range=set:site1,10.10.50.100,10.10.50.150,255.255.255.0,1h. Il sito viene ancora dalla subnet, quindi Caddy sceglie ancora il token giusto, e il template FQDN con installation_nr dà il nome al nodo. Il prezzo è la prima riga di «Cosa resta da decidere»: qualsiasi cosa collegata a quella VLAN può ora scaricare la risposta del sito, quindi è la VLAN stessa a diventare il cancello.\ndnsmasq negozia con il client la dimensione del blocco TFTP. Lasciato fare, la limita all\u0026rsquo;MTU della sua interfaccia31, il che funziona finché il percorso verso un sito non è più piccolo del link su cui sta dnsmasq. Quindi la configurazione dichiara il tetto come tftp-mtu=1500 invece di ereditarlo. Questo mette il numero davanti a chi gestisce un sito dietro un tunnel IPsec o qualsiasi altra cosa che mangi spazio nel pacchetto, e lo abbassa a quello che il percorso porta davvero invece di scoprirlo da un trasferimento che si pianta a metà. Se una ROM di scheda di rete si comporta male quando l\u0026rsquo;opzione viene concessa, tftp-no-blocksize spegne la negoziazione.\nCopia ipxe.efi dal pacchetto ipxe di Debian in /srv/tftp, di proprietà dell\u0026rsquo;utente dnsmasq, perché tftp-secure rifiuta qualsiasi altra cosa. Preferisci UEFI. Secure Boot ha bisogno di un iPXE firmato, quindi o lo prepari o spegni Secure Boot per l\u0026rsquo;installazione e lo riaccendi dopo.\nAvvio, osservazione e cosa si rompe Prova con una macchina virtuale su una rete di sito prima di toccare l\u0026rsquo;hardware: firmware UEFI, 8 GiB di memoria e una scheda di rete su quella VLAN riproducono tutta la catena.\nCosa succede all'avvio Server di destinazione avvio di rete UEFI 6 GiB o più 1. DHCP e TFTP un lease, un dominio di ricerca, poi ipxe.efi 2. HTTP sulla porta 80 boot.ipxe, vmlinuz, initrd.img e la ISO, in memoria 3. DNS due record TXT: URL della risposta e impronta di PDM 4. Caddy sulla 443, poi PDM la risposta ora, il webhook dopo il riavvio Quattro conversazioni separate, ognuna con il suo posto dove guardare quando fallisce. E il tutto in ordine, dall\u0026rsquo;accensione a un\u0026rsquo;installazione che PDM segna come Finished:\nDall'accensione all'installazione completa Macchina dnsmasq, :80 Caddy :443 PDM DHCP: un lease TFTP: ipxe.efi iPXE richiede HTTP: kernel, initrd, ISO installer: un dominio DNS: due record TXT POST, catch token token del sito in corso la risposta generata, via Caddy installa sul disco webhook, token monouso Authorization tolto Finished riavvio; primo avvio attiva la chiave Ogni passo, in ordine. Il webhook parte dall\u0026rsquo;installer prima del riavvio, quindi Finished significa installato, non avviato; la chiave di subscription si attiva dopo, al primo avvio. Passo Cosa succede Dove guardare 1 il firmware riceve ipxe.efi via TFTP, iPXE riceve boot.ipxe via HTTP journalctl -u dnsmasq, il log di Caddy 2 dopo dieci secondi il menu avvia la voce automatica; kernel, initrd e ISO si scaricano quattro GET, uno di circa 1,6 GB 3 l\u0026rsquo;installer prende un lease, legge il dominio di ricerca, interroga entrambi i record TXT /tmp/fetch_answer.log sulla macchina 4 POST a Caddy, token sostituito, PDM sceglie una risposta il log di Caddy indica il token; PDM mostra una nuova installazione 5 l\u0026rsquo;installazione gira /tmp/auto_installer.log, /tmp/install-low-level-start-session.log 6 ancora nell\u0026rsquo;installer, il webhook richiama tramite Caddy, poi la macchina si riavvia33 l\u0026rsquo;installazione passa a Finished con dischi, schede di rete e chiavi host SSH allegati In caso di errore l\u0026rsquo;installer apre una shell, a meno che la risposta non imposti Reboot on Error, quindi lascialo spento mentre fai le prove.\nSintomo Causa probabile Could not find search domain in resolv.conf. il DHCP non ha inviato un dominio una query TXT per un nome con uno spazio dentro più di un dominio di ricerca Got empty response. record mancante, zona sbagliata, o l\u0026rsquo;opzione 6 punta a un altro server DNS un URL con uno spazio in mezzo valore TXT diviso in più stringhe il log dice che l\u0026rsquo;URL è arrivato dal DHCP l\u0026rsquo;opzione 250 è sulla rete da qualche parte errore TLS sul POST l\u0026rsquo;impronta nel DNS non è il certificato attuale di Caddy connessione chiusa senza risposta Caddy l\u0026rsquo;ha interrotta: subnet sbagliata, niente catch token, o una route che non è una delle due 400 no answer file found il token ha funzionato; nessun filtro ha trovato corrispondenza e non c\u0026rsquo;è un default su quel token la risposta sbagliata filtri sovrapposti; vince il primo nel file lo stato resta in corso l\u0026rsquo;URL di base del webhook punta ancora alla 8443 iPXE si ricarica all\u0026rsquo;infinito il server DHCP non distingue iPXE dal firmware timeout TFTP PXE-E32 next-server sbagliato, o UDP 69 bloccata Aggiungere Proxmox Backup Server Niente nel percorso è specifico di Proxmox VE. Costruisci un secondo insieme di file di boot dalla ISO di PBS 4 con lo stesso catch token, in /srv/www/pbs-4/, e aggiungi una risposta PBS per sito con il filtro /product/product=pbs, autorizzata sul token di quel sito. I record DNS, Caddy, i token e il firewall non cambiano.\nPer un sito con entrambi, qualcosa deve decidere quale prodotto riceve una macchina, e un menu è la cosa sbagliata per deciderlo. Il choose di iPXE senza --timeout aspetta alla console la pressione di un tasto per sempre, che è l\u0026rsquo;opposto di automatico.\nLascia invece decidere la prenotazione DHCP. Prenoti già ogni nodo per indirizzo MAC, quindi marca quelli PBS con un tag e manda a ogni tag il suo boot.ipxe:\n# /etc/dnsmasq.d/pxe.conf, replacing the single iPXE dhcp-boot line dhcp-host=aa:bb:cc:dd:ee:01,10.10.50.21,pve01 dhcp-host=aa:bb:cc:dd:ee:31,set:pbs,10.10.50.31,pbs01 dhcp-boot=tag:ipxe,tag:!pbs,http://pdm.example.doc/pve-9.2/boot.ipxe dhcp-boot=tag:ipxe,tag:pbs,http://pdm.example.doc/pbs-4/boot.ipxe set:pbs su una prenotazione marca quella sola macchina31, e tag:!pbs tiene le due righe di boot mutuamente esclusive, quindi non c\u0026rsquo;è dubbio su quale vinca. Il boot.ipxe di ogni prodotto avvia già la sua voce automatica dopo dieci secondi senza nessuno alla tastiera15.\nQueste righe passano dnsmasq --test sulla 2.91, la versione del mio lab, e seguono la sintassi documentata di dhcp-host e dei tag. Non ho ancora avviato via PXE un nodo PBS attraverso di loro, quindi prova una macchina marcata prima di farci affidamento.\nDa lì è lo stesso percorso di Proxmox VE. L\u0026rsquo;installer di PBS invia \u0026quot;product\u0026quot;: \u0026quot;pbs\u0026quot;, Caddy inserisce il token del sito, e PDM sceglie la risposta PBS di quel sito. Niente viene scelto a mano in nessun momento, e il prodotto che un nodo diventa è scritto in un solo posto, la prenotazione, accanto al suo indirizzo.\nCosa decide Dove sta quale ISO si avvia il tag set:pbs sulla prenotazione DHCP quali risposte di sito si applicano la subnet di origine, tramite la sostituzione del token in Caddy quale risposta dentro quel sito il filtro /product/product=pbs in PDM L\u0026rsquo;installer posa solo il sistema operativo. Il datastore, su uno storage separato dal disco del sistema operativo, è un altro lavoro per qualunque cosa finisca il nodo, il che ci riporta all\u0026rsquo;hook di primo avvio mancante.\nCosa resta da decidere Nessuno di questi punti ti impedisce di usare questo design. Ognuno ha bisogno che qualcuno se ne faccia carico.\nCompromesso Perché conta Cosa fare l\u0026rsquo;indirizzo di origine è il cancello qualsiasi cosa su una VLAN di provisioning, o capace di falsificare un indirizzo su di essa, può scaricare la risposta di quel sito: hash della password di root, chiavi SSH, chiave di subscription isolare la VLAN, port security, solo prenotazioni, scadenza dei token, disattivare i token tra un rollout e l\u0026rsquo;altro il catch token non è un segreto è in ogni immagine e su questa pagina filtra solo le richieste vaganti; il cancello sono la subnet e il token vero custodito in Caddy Caddy può leggere la chiave di PDM servire il certificato di PDM significa che il proxy legge quella sola chiave privata una ACL solo su api.pem e api.key, nient\u0026rsquo;altro di PDM leggibile, l\u0026rsquo;host chiuso a dovere; la chiave non lo lascia mai il DNS è considerato affidabile un record TXT falsificato manda l\u0026rsquo;installer altrove, e se anche l\u0026rsquo;impronta viene dal DNS il falsario controlla entrambi proteggere il DNS di provisioning, o incorporare l\u0026rsquo;impronta di PDM con --cert-fingerprint e ricostruire quando cambia i file di boot viaggiano in HTTP in chiaro possono essere letti o sostituiti sul filo tenere la rete isolata; iPXE su HTTPS se la tua build lo supporta il token del webhook 16 byte casuali, monouso, cancellato dopo la richiamata, ma senza limite di tempo4 eliminare i vecchi record di installazione la chiave di subscription attivata una volta dopo che la rete è su; in caso di errore la chiave viene cancellata e la unit fallisce, senza nuovi tentativi34 controllare systemctl --failed sui nodi nuovi PDM è un punto singolo oggi non è in alta disponibilità un\u0026rsquo;interruzione ferma le nuove installazioni, non i cluster in esecuzione una sola scheda di rete di gestione la risposta non ha opzioni per bond, VLAN o bridge9 è lavoro post-installazione, con lo stesso problema del primo avvio Una prima versione, su cui costruire a dovere Questa è una prima release della funzione, e per essere una prima release è buona. Il modulo delle risposte è sensato, le regole di selezione sono chiare una volta lette, il webhook funziona, e il codice è aperto, che è l\u0026rsquo;unico motivo per cui tutto quanto sopra si è potuto dimostrare invece di indovinarlo. La serie di patch è passata per quattro giri sulla mailing list pubblica prima di entrare35, e si vede.\nLe lacune sono le due cose che trasformano un server di installazione in un sistema di provisioning. Un sito è l\u0026rsquo;unità in cui ragiona un MSP, e l\u0026rsquo;installer ci sta sopra quando chiede. Un hook di primo avvio è la differenza tra un nodo installato e un nodo finito. Entrambi sono già a metà strada: l\u0026rsquo;installer ha l\u0026rsquo;hook e PDM ha il token. Mi aspetto che arrivino tutti e due, e quando arriveranno il Caddy in mezzo a questo design diventerà più semplice invece di sparire, perché un proxy che tiene i segreti di PDM fuori portata e la 8443 fuori dalla rete vale la pena averlo comunque.\nIl motivo per farlo così nel frattempo è quello detto all\u0026rsquo;inizio. Dieci server PXE sono dieci cose che vanno fuori aggiornamento a dieci velocità diverse, e ognuna viene guardata solo quando si rompe il giorno in cui ti serve. Un solo ambiente, tenuto aggiornato una volta, con il sito ricavato dalla rete e i segreti custoditi in un solo posto, è meno roba da possedere. Meno roba da possedere è meno roba da sbagliare, e questo è gran parte del mestiere.\nProxmox — Proxmox Datacenter Manager 1.1 press release — installazioni automatiche, con una nuova scheda sotto Remotes che segue l\u0026rsquo;avanzamento delle installazioni.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Datacenter Manager documentation — Automated Installations — risposte preparate, filtri di destinazione, template, e «a dedicated token mechanism, separate from the normal API tokens».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, lib/pdm-api-types/src/auto_installer.rs — le chiavi dei filtri di destinazione «are JSON Pointers as per [RFC6901], the values globs»; una sola risposta di default.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, server/src/api/auto_installer/mod.rs — controllo del token prima della risposta di default, prima corrispondenza nell\u0026rsquo;ordine del file, first_boot: None, incremento dei contatori, il token monouso del post-hook, le due route raggiungibili senza un login PDM, e i privilegi Sys.Audit/Sys.Modify su /system/auto-installation.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE Roadmap — Proxmox VE 9.2 — preparazione PXE e iPXE, «at least 6 GiB of available memory on the host», e il problema noto di megaraid_sas e NVMe in JBOD.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Bugzilla 8078 — «prepared answer disk setup does not allow to specify multiple udev filters with same name», aperto il 26 settembre 2026, stato NEW al 7 novembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Bugzilla 7699 — «Add on-first-boot parameter to the PDM remote installation», aperto il 12 giugno 2026, stato NEW al 7 novembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox, proxmox-installer-types/src/lib.rs — SystemInfo: prodotto, ISO, DMI e interfacce di rete.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Automated Installation — le opzioni [first-boot] e [network], le informazioni di sistema inviate, e che il token di autenticazione «is stored in plain text inside the prepared ISO».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Bugzilla 8263 — «[Feature Request] auto-installer: client source IP (or X-Forwarded-For) for answer selection and templating», aperto il 31 ottobre 2026, stato NEW al 7 novembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, debian/changelog — 1.1.1: «match prepared answers in the configuration\u0026rsquo;s stable order and let the first match win».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox, proxmox-installer-types/src/answer.rs — AutoInstallerConfig contiene first_boot: Option\u0026lt;FirstBootHookInfo\u0026gt;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-auto-installer/src/bin/proxmox-auto-installer.rs — l\u0026rsquo;eseguibile di primo avvio viene preparato solo quando la risposta ha una sezione first_boot.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-fetch-answer/src/fetch_plugins/http.rs — prima l\u0026rsquo;URL della ISO, poi DHCP, poi DNS; i nomi TXT; il parsing di resolv.conf; dig txt +short con le virgolette tolte; l\u0026rsquo;header Bearer.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-auto-install-assistant/src/main.rs — --pxe-loader implica --pxe, la directory di output, l\u0026rsquo;initrd gzip, /boot rimossa dalla ISO, e il boot.ipxe generato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, server/src/bin/proxmox-datacenter-api/main.rs — PDM_LISTEN_ADDR è l\u0026rsquo;indirizzo IPv6 non specificato su PDM_PORT, 8443, fissato in fase di compilazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy releases — la 2.11.1 ha corretto CVE-2026-27587, un aggiramento del path matcher tramite sequenze di escape.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian sources — caddy — 2.6.2-12+deb13u1 in trixie, 2.11.2-1~bpo13+1 in trixie-backports.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — request_header — «With no prefix, the field is set (overwritten).»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Request matchers — remote_ip è il peer immediato; i match sui percorsi ignorano le maiuscole, sono decodificati dall\u0026rsquo;URL, puliti, con le barre ripetute unite.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — handle — «only the first matching handle block will be evaluated».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Global options — admin di default su localhost:2019; protocols di default h1 h2 h3.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — file_server — hide non va trattato come un confine di sicurezza.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — log — Cookie, Set-Cookie, Authorization e Proxy-Authorization vengono registrati come REDACTED.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd.service — ExecCondition= — con un codice di uscita da 1 a 254 «the remaining commands are skipped and the unit is not marked as failed».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd.path — PathChanged= — «activated if the file which was open for writing gets closed».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncaddyserver/dist, init/caddy.service — ExecStart=/usr/bin/caddy run --environ --config /etc/caddy/Caddyfile.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Command line — --environ stampa l\u0026rsquo;ambiente prima di partire.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Caddyfile concepts, environment variables — {$NAME} viene sostituito prima che il Caddyfile sia analizzato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncaddyserver/caddy, replacer.go — qualsiasi chiave che inizia con env. viene passata a os.Getenv.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndnsmasq manual page — dhcp-match, dhcp-boot, dhcp-host con set:\u0026lt;tag\u0026gt;, enable-tftp, tftp-secure, tftp-mtu, tftp-no-blocksize e i range static.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\niPXE — Configuring ISC dhcpd — if exists user-class and option user-class = \u0026quot;iPXE\u0026quot; passa a iPXE lo script e al firmware il loader.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, unconfigured.sh — proxmox-post-hook gira subito dopo che proxmox-auto-installer riesce, prima del riavvio.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-first-boot/proxmox-first-boot-subscription — «always drop the staged key, regardless of whether activation succeeded».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npdm-devel — \u0026ldquo;add auto-installer integration\u0026rdquo;, v4, 40 patches — la serie che ha aggiunto la funzione, con le note di modifica dalla v3 alla v4.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/proxmox/pdm-unattended-installs-for-many-sites/","summary":"Proxmox Datacenter Manager 1.1 può servire i file di risposta all\u0026rsquo;installer automatico di Proxmox, e questo lo rende il server di installazione naturale per un MSP che segue molti siti di clienti. Il caso d\u0026rsquo;uso è un cliente che voleva ogni sito costruito con i suoi nomi, la sua password di root e le sue chiavi SSH, collegando un server alla VLAN giusta e avviandolo, senza numeri di serie da raccogliere e senza un file di risposta per macchina; questo articolo copre la metà che riguarda avvio e installazione, e lascia da parte l\u0026rsquo;ingresso nel cluster. PDM non sa abbinare una risposta al sito, e non sa dare a un nodo uno script di primo avvio, ed entrambe le cose sono dimostrate dal sorgente stesso di PDM. Qui si costruisce comunque un solo ambiente PXE per ogni sito: un\u0026rsquo;unica immagine di boot con un catch token non segreto, discovery tramite TXT DNS così l\u0026rsquo;immagine non contiene nessun URL, e un proxy Caddy che sostituisce il catch token con il bearer token del sito in base alla subnet di origine. Copre come PDM sceglie una risposta, prepare-iso per iPXE, i record DNS, dnsmasq e il loop di iPXE, un Caddy irrobustito che serve tutta la UI di PDM sulla 443 con la 8443 chiusa da nftables, il log del token usato solo per nome, il webhook post-installazione, l\u0026rsquo;aggiunta di Proxmox Backup Server, e i compromessi che restano.","title":"Un solo ambiente PXE per ogni cliente: installazioni automatiche con Proxmox Datacenter Manager"},{"content":"Reform UK dice di essere il partito della gente comune che lavora e che è stata tradita. Così ho fatto quello che faccio con qualsiasi affermazione del genere. Ho letto cosa il partito ha davvero messo per iscritto, cosa la sua gente ha detto pubblicamente, cosa mostrano i registri su chi lo paga, e cosa hanno trovato i tribunali, le autorità di controllo e i giornalisti. Poi ho messo tutto fianco a fianco.\nQuesto è un articolo d\u0026rsquo;opinione, e argomenta duro. Ma ogni fatto porta una fonte numerata in fondo alla pagina, e dove gli atti si fermano prima di qualcosa, lo dico. Dove un tribunale o un\u0026rsquo;autorità ha dato ragione a Reform, c\u0026rsquo;è anche quello. Un\u0026rsquo;accusa che nasconde i pezzi che le vanno contro non è un\u0026rsquo;accusa.\nLa domanda è: per chi è davvero Reform? Comincia da cosa farebbe alle persone che vivono già qui.\nRevoca, ripresenta domanda o vattene L\u0026rsquo;indefinite leave to remain, il permesso di soggiorno a tempo indeterminato, è lo status che si ottiene dopo anni passati a vivere e lavorare qui legalmente. È quello che permette a un\u0026rsquo;infermiera, a un ingegnere o a un\u0026rsquo;assistente domiciliare di smettere di rinnovare un visto e andare avanti con la propria vita. Reform glielo toglierebbe.\nNon solo smettere di concederne di nuovi. Toglierlo a chi ce l\u0026rsquo;ha già. Sono le parole del partito, nel suo documento programmatico dell\u0026rsquo;aprile 2026:\n\u0026ldquo;Reform will abolish ILR as an immigration category completely, meaning no new awards and those currently holding it will have it rescinded… Anyone currently with ILR will need to reapply for visas that do not offer recourse to welfare.\u0026rdquo;1\nLa sua pagina sulle politiche dice la stessa cosa in meno parole: «abolish ILR and rescind existing awards», un «5 year renewable visa» con «higher salary thresholds», e «no recourse to benefits for foreign nationals»2.\nCosa succede a chi si è stabilito qui Le parole di Reform Il suo status di residente «rescinded»1 Cosa deve fare «reapply for visas that do not offer recourse to welfare»1 Il visto per cui può ripresentare domanda «5 year renewable», con test di lingua e di «good character»2 Lo stipendio che gli servirà soglie «above median UK earnings»1 Quale sia quella soglia non fissata: «determined based on net fiscal cost modelling close to the general election»1 Chi è esente i titolari di visto BN(O), i programmi per l\u0026rsquo;Ucraina, l\u0026rsquo;EU settled status «initially»1 Leggi quella tabella come qualcuno che vive qui da dieci anni. Paghi l\u0026rsquo;imposta sul reddito, la National Insurance e la council tax. Magari hai un mutuo e i figli nella scuola del quartiere. Con questo piano il tuo diritto a restare finisce, e se puoi riguadagnartelo dipende da una soglia di stipendio che il partito non ti dirà fino a poco prima delle elezioni. Se guadagni meno della mediana, come per definizione fa metà di tutti i lavoratori, la tua strada per rientrare è già più stretta di quella da cui sei entrato.\nSopra la mediana è un\u0026rsquo;asticella facile da fissare quando non si applicherà mai a te. Questo è un partito che prende tre sterline su quattro da donatori che vivono all\u0026rsquo;estero, il cui leader ha preso 5 milioni di sterline come regalo personale3 e 135.000 sterline per quattro ore a promuovere l\u0026rsquo;oro4. Nessuno di quelli che fissano quella soglia dovrà mai superarla. L\u0026rsquo;assistente domiciliare che guadagna meno della mediana sì.\nE il test di «good character» di quel visto vale la pena di metterlo a confronto con le persone che l\u0026rsquo;hanno scritto. Lo faccio verso la fine.\nIl documento del partito stesso ammette il punto che dovrebbe fermare tutto questo sul nascere. Parla di «skilled workers being the only group to remain fiscally contributory over the course of their lifetimes»1. Sono le persone che versano più di quanto ricevono, per il calcolo di Reform stessa, e il piano le rimette tutte su un visto rinnovabile.\nPer essere onesti col documento, l\u0026rsquo;espulsione non è automatica. Chi supera i nuovi test può restare. Ma nessuno ha pubblicato quante persone che lavorano e pagano le tasse li fallirebbero, Reform compresa, e nessun ente indipendente ha mai quantificato il costo del piano.\nI numeri usati per venderlo Il primo numero da titolo era 234 miliardi di sterline, citato da Farage nel 2025 come quanto «our changes will save British taxpayers». Full Fact ha scoperto che non era affatto una cifra sui sussidi, e il think tank da cui veniva la ricerca ha detto che «the overall cost estimates should no longer be used»5.\nCosì il documento dell\u0026rsquo;aprile 2026 ne usa uno nuovo, 622 miliardi di sterline. È un modello di Reform stessa, non di qualcuno indipendente, e il documento stesso dà una seconda cifra due righe più sotto: «£154 bn if discounted at the 3.5% rate suggested by the HM Treasury Green Book»1. Il Green Book è il modo in cui il Tesoro dice che va contato ogni costo pubblico. Con il metodo del governo stesso, il numero da titolo si riduce di tre quarti.\nPosso chiedere perché un partito che dice di essere schietto con la gente apre con il numero che il suo stesso documento dice essere il modo sbagliato di contare?\nLa spesa per i sussidi che non toccheranno Reform dice che taglierà la spesa per i sussidi, e nell\u0026rsquo;agosto 2026 ha pubblicato il piano. Fermerebbe Universal Credit, Jobseeker\u0026rsquo;s Allowance, Child Benefit, i servizi gratuiti per l\u0026rsquo;infanzia, l\u0026rsquo;Housing Benefit, la Pension Credit e i sussidi per la disabilità a chiunque non sia cittadino britannico6. Il titolo è un risparmio di 50 miliardi di sterline l\u0026rsquo;anno7.\nPrima di decidere cosa significa, guarda dove va davvero la spesa per i sussidi.\nDove va la spesa per i sussidi, 2025/26 Spesa per i sussidi in Gran Bretagna 2025/26, miliardi di £ Pensione statale 146,1 Altri sussidi ai pensionati 31,6 Sussidi in età da lavoro 126,1 I 50 mld £ di Reform Altro 5,3 protetta dall'impegno sul Triple Lock dove deve cadere il taglio La spesa per i sussidi in Gran Bretagna nel 2025/26, dalle tabelle del DWP stesso. I pensionati ne prendono il 57,5%, e la sola pensione statale il 47,3%. Reform ha blindato la pensione statale, quindi un taglio da 50 miliardi deve uscire quasi interamente dalla colonna da 126 miliardi di chi è in età da lavoro. Quasi metà di tutta la spesa per i sussidi è la pensione statale: 146 miliardi di sterline su 309 miliardi nel 2025/268. Il 2 aprile 2026 Reform si è impegnata a mantenere il Triple Lock9, dopo mesi in cui Farage diceva «It\u0026rsquo;s open for debate» e Tice diceva «we\u0026rsquo;re not guaranteeing the triple lock»9. Il giorno del lancio del piano sul welfare, il partito ha detto che «nothing that we talk about today is about pensioners»10.\nQuindi la pensione statale è al sicuro. Diciamolo chiaramente, perché sono andato a cercare un piano di Reform per tagliarla e non c\u0026rsquo;è. Come spiega l\u0026rsquo;articolo sulle pensioni di questo sito, la pensione statale la pagano le persone che lavorano oggi.\nIl che ci porta all\u0026rsquo;aritmetica. Se la pensione non si tocca, i 50 miliardi escono da tutto il resto. L\u0026rsquo;Institute for Fiscal Studies ha fatto il conto: Reform intende «to save around £50 billion a year, almost entirely from a working-age benefits bill that, in 2030–31, is forecast to be a little over £200 billion»7.\nSu chi ricade Cosa mostrano gli atti Pensionati con la pensione statale protetti, Triple Lock mantenuto9 Pensionati poveri che non sono cittadini britannici perdono la Pension Credit, che è nella lista riservata ai cittadini6 Non cittadini con Universal Credit circa 1,3 milioni, di cui 650.000 non lavorano7 Non cittadini con Universal Credit che lavorano gli altri 650.000 circa, secondo le cifre dell\u0026rsquo;IFS: lavorano, pagano le tasse e perdono comunque l\u0026rsquo;integrazione Cosa prevede l\u0026rsquo;IFS per loro «large overnight cuts to claimants\u0026rsquo; incomes» e «significant increases in hardship»7 Persone disabili con il PIP il Personal Independence Payment abolito per una «health security allowance» che potrebbe escludere fino a due terzi degli attuali beneficiari11 Beneficiari di lungo periodo giudicati abili al lavoro 20 ore a settimana di lavori socialmente utili, o perdono i soldi11 Qualcuno in età da lavoro che ha pagato la NI per decenni perde lo status di residente, perde i sussidi, e niente nei documenti protegge la pensione che ha maturato finché è ancora sotto l\u0026rsquo;età pensionabile L\u0026rsquo;ultima riga è la mia lettura dei due documenti insieme, non qualcosa che Reform abbia detto. Ma è lì che portano. Le FAQ di Reform dicono che gli stranieri «of pension age who\u0026rsquo;ve made sufficient National Insurance Contributions» mantengono il diritto di vivere qui e la loro pensione statale2. Arriva all\u0026rsquo;età pensionabile e sei al sicuro. Abbi quarantacinque anni, con vent\u0026rsquo;anni di contributi, e sei su un visto rinnovabile senza rete di sicurezza.\nQuelli che lavorano già Ecco la parte che la parola «sussidi» serve a nascondere. Universal Credit non è un\u0026rsquo;indennità per chi non lavora. Nell\u0026rsquo;aprile 2026, 3,1 milioni di persone che lo ricevevano lavoravano, il 37,7% di tutti i beneficiari12. Vanno al lavoro, pagano l\u0026rsquo;imposta sul reddito e la National Insurance su quello che guadagnano, e Universal Credit integra stipendi troppo bassi per viverci.\nFai il conto sul gruppo bersaglio di Reform stessa. L\u0026rsquo;IFS stima i non cittadini con Universal Credit in circa 1,3 milioni, di cui 650.000 non lavorano7. Sottrai l\u0026rsquo;uno dall\u0026rsquo;altro e circa 650.000 lavorano. Il piano di Reform ferma il loro Universal Credit, il loro Housing Benefit, il loro Child Benefit e i loro servizi gratuiti per l\u0026rsquo;infanzia6, e l\u0026rsquo;assistenza all\u0026rsquo;infanzia è proprio ciò che permette a un genitore con un salario basso di andare a lavorare.\nPosso chiedere a chi fa risparmiare soldi? Non al contribuente. Un lavoratore che perde l\u0026rsquo;integrazione o prende altre ore che non esistono, o smette di lavorare e costa di più, o se ne va e si porta via le tasse e il lavoro. Quelli a cui conviene sono quelli che pagano stipendi così bassi che lo Stato deve compensarli. Reform non tocca i salari bassi. Tocca il lavoratore.\nÈ un piano che protegge gli elettori che più probabilmente vanno a votare e mette tutto il conto sulle persone in età da lavoro, che lavorino o no. Molti di loro stanno pagando le pensioni che il piano protegge.\nPromesse che non tornano Sappiamo come reggono gli impegni di Reform, perché ne hanno presi abbastanza da poterli verificare. Ecco il curriculum, impegno per impegno:\nL\u0026rsquo;impegno Che fine ha fatto Manifesto 2024: circa 90 miliardi di sterline l\u0026rsquo;anno di tagli alle tasse l\u0026rsquo;IFS: «the sums in this manifesto do not add up», sbagliati «by a margin of tens of billions of pounds per year»13. Tice nell\u0026rsquo;ottobre 2025: «A manifesto is based on a point in time.»14 234 miliardi risparmiati abolendo lo status di residente il think tank da cui veniva: «should no longer be used»5 622 miliardi al suo posto il modello di Reform stessa. Con il metodo del Tesoro stesso, 154 miliardi1 Espellere fino a 600.000 persone per 10 miliardi la ripartizione del partito stesso, 4 miliardi più 1,5 più 2, fa 7,5 miliardi, e nessuno ha fatto quadrare le due cifre15 50 miliardi l\u0026rsquo;anno in meno sul welfare l\u0026rsquo;IFS: quasi tutto dal sostegno a chi è in età da lavoro, e «How much this saves would depend on how many of this group became citizens in response»716 Bollette dell\u0026rsquo;energia tagliate di 200 sterline, poi 150, poi 250 la cifra è cambiata tre volte in un anno17182, e la pagina sulle politiche dice che il costo passa «to the Treasury», quindi lo paghi in tasse invece che in bolletta2 «Reform Councils will freeze, then cut your council tax bills» nemmeno uno l\u0026rsquo;ha fatto. I consigli guidati da Reform l\u0026rsquo;hanno alzata in media del 3,94%19 40 milioni di risparmi sul net zero nel Kent il consiglio li ha poi chiamati «forward-looking assumptions», e nessun revisore li ha certificati20 Il Triple Lock «we\u0026rsquo;re not guaranteeing the triple lock», poi una garanzia nell\u0026rsquo;aprile 20269 Due di queste Reform le ha azzeccate in parte, e giusto è giusto. I suoi consigli hanno davvero aumentato la council tax meno della media nazionale del 4,86%19, e mantenere il Triple Lock è un impegno vero. Ma un impegno che cambia ogni volta che qualcuno controlla i conti non è un piano. È un discorso di vendita, e quelli a cui viene venduto sono quelli che pagheranno quando i conti non tornano.\nE non sono solo i conti a spostarsi. Metti in fila quello che il partito e la sua gente hanno detto, e quando:\nPrima Dopo titolari di EU settled status esenti dal piano sui sussidi, settembre 202521 stranieri, compresi i cittadini UE, privati dei sussidi, agosto 20266 il Triple Lock «open for debate»9 garantito, aprile 20269 un manifesto da 90 miliardi «A manifesto is based on a point in time»14 Jenrick: «put Reform out of business»22 il cancelliere in pectore di Reform23 Farage non si candida nel 2024 si candida, poche settimane dopo un regalo personale da 5 milioni3 Putin, ammirato «as an operator»24 Putin, «a very bad dude»25 La gente cambia idea, e un politico che non lo fa mai è peggio. Ma un partito le cui posizioni si spostano secondo quello che serviva all\u0026rsquo;ultimo sondaggio, all\u0026rsquo;ultimo donatore o all\u0026rsquo;ultimo brutto titolo non ti sta dicendo cosa farà. Ti sta dicendo cosa pensa che lo farà eleggere. La mia opinione, su questo curriculum, è che Reform dirà qualunque cosa serva per vincere il potere, e scoprirai cosa pensa davvero solo dopo.\nDi chi è Reform La maggior parte dei partiti britannici sono club. Il Labour e i Conservatori sono associazioni non riconosciute possedute, di fatto, dai loro iscritti. Reform era una società con degli azionisti, e il suo leader ne possedeva la maggior parte.\nLa scheda di Companies House della società nata come The Brexit Party Limited, poi Reform UK Party Limited, mostra chi la controllava26:\nChi Controllo Dal Al Catherine Blaiklock «significant influence or control» 23 novembre 2018 3 maggio 2019 Nigel Farage «More than 50% but less than 75%» delle azioni, più il diritto di nominare gli amministratori 8 maggio 2019 19 febbraio 2025 Richard Tice «More than 25% but not more than 50%» delle azioni 1º maggio 2019 19 febbraio 2025 Una nuova società a responsabilità limitata da garanzia 75% o più 19 febbraio 2025 oggi La comunicazione sulla quota di Tice è stata depositata il 15 agosto 2024, cinque anni dopo la data che registra26.\nIl 20 febbraio 2025 il presidente del partito ha annunciato: «Nigel Farage has handed over ownership of Reform UK to its members. Reform UK is now a non-profit, with no shareholders, limited by guarantee.»27\nMetà di questo è vera. Adesso non ci sono azionisti. Le azioni della vecchia società sono passate alla nuova per 15 sterline, e 2,97 milioni di sterline di patrimonio netto sono passati per 1 sterlina, quindi nessuno ci ha fatto un colpo di fortuna uscendo28. Questo glielo concedo.\nMa «handed over ownership to its members» non è quello che dice il bilancio certificato della nuova società. Nota 20: «The company has two members, who have equal voting rights. Neither member has individual control of the company and, accordingly, there is no ultimate controlling party.»28\nDue membri. Nel diritto societario, chi possiede e controlla una società limitata da garanzia sono i suoi membri, e questa ne ha due. Il bilancio non li nomina. Le persone che pagano una quota d\u0026rsquo;iscrizione non sono membri della società che gestisce il partito. Tutte insieme ci hanno versato 4,5 milioni di sterline nel 202528, e non la controllano. Di conseguenza, «handed over ownership to its members» descrive qualcosa che il deposito non dice.\nA chi risponde Un partito politico che è un club risponde ai suoi iscritti, perché gli iscritti sono il club. Una società risponde a chi la controlla, ed è questo il punto da tenere a mente. Quando la nuova società è stata costituita, i suoi due garanti erano Farage e l\u0026rsquo;allora presidente, Zia Yusuf29. Yusuf ha lasciato il consiglio nel giugno 2025, e Farage è ancora amministratore30. Il bilancio non dice chi siano adesso i due membri.\nByline Times ha ottenuto lo statuto del partito adottato nel settembre 202531. Ecco cosa dà a chi paga la quota, contro cosa tiene per sé il vertice:\nCosa ottengono gli iscritti Cosa tiene il leader Mozioni al congresso solo consultive, il Consiglio deve soltanto discuterle Votazioni nelle elezioni interne a discrezione assoluta del Consiglio, in base all\u0026rsquo;articolo 4.3 3 seggi su 8 nel Consiglio, eletti 3 seggi che nomina lui, più lui stesso e un presidente che nomina e può licenziare Una sfiducia al leader servono richieste scritte dal 50% degli iscritti, circa 135.000 persone, verificate dal suo stesso presidente, poi decisa dal Consiglio in cui siede lui Riunioni del Consiglio, di norma due l\u0026rsquo;anno tra una e l\u0026rsquo;altra «all powers of the Board are delegated to the party leader who may exercise those powers at his discretion» Ogni riga di quella tabella viene dallo stesso documento, e Byline Times ha dovuto procurarsene una copia per riportarlo31. Ben Habib, ex vicepresidente di Reform stessa, ha detto che «puts Farage\u0026rsquo;s leadership in a virtually unassailable position»32.\nPosso chiedere cosa può fare davvero un iscritto a Reform se il leader sbaglia? Scrivere una lettera, e convincere altri 134.999 a scriverne una anche loro, a un uomo nominato da lui. Questa non è responsabilità, è una cassetta dei suggerimenti. Un partito che vuole governare il paese dovrebbe almeno rispondere ai propri iscritti. Questo risponde al suo leader.\nÈ stato costruito come una società posseduta dall\u0026rsquo;uomo che lo guidava, e per sei anni è stato esattamente questo26. Adesso nessuno incassa dividendi, e non fingerò che lo faccia. Ma una società gestita da una manciata di persone, con clienti paganti al posto degli iscritti, è un modello di business, non una democrazia. I soldi si fanno intorno, non dentro, come mostrano le prossime sezioni.\nI soldi arrivano dall\u0026rsquo;estero Reform è finanziata in modo schiacciante da persone che non vivono qui.\nIl registro della Electoral Commission riporta ogni donazione sopra la soglia di dichiarazione, chi l\u0026rsquo;ha fatta e quando. Non riporta dove vivono i donatori, quindi la residenza viene dalle inchieste giornalistiche. Prendendo i sei donatori indicati come residenti all\u0026rsquo;estero, ecco la quota dei soldi di Reform arrivata da loro3334:\nQuota delle donazioni da donatori che vivono all'estero Donazioni da donatori che vivono all'estero, % del totale Brexit Party, dal 2019 al 2020 75% Reform, 2025 66% Reform, gen-mar 2026 78% Reform, apr-giu 2026 81% Reform, lug 2025-giu 2026 78% Conservatori, 2025-26 3,6% Labour, 2025-26 0,15% registro, sei donatori indicati all'estero il conteggio dell'Independent Quota delle donazioni da donatori indicati come residenti all\u0026rsquo;estero, dal registro della Electoral Commission. Da luglio 2025 a giugno 2026 è il 78%, quasi tutto da due uomini. Il conteggio dell\u0026rsquo;Independent per il 2025-26, con una definizione leggermente diversa, è l'80% per Reform contro il 3,57% per i Conservatori e lo 0,15% per il Labour. Due nomi portano quasi tutto.\nDonatore Dove vive Nel registro, a Reform e al Brexit Party Annunciati nel settembre 2026 Christopher Harborne in Thailandia dagli anni Novanta, cittadino thailandese dal 20113536 25,19 mln £33 36 mln £37 Ben Delo a Hong Kong fino al 202638 8 mln £33 36 mln £37 Sono 72 milioni di sterline in due giorni di settembre, da due miliardari delle cripto, a un solo partito. Tice ha detto che Delo li ha versati in anticipo «so that the Labour Party can\u0026rsquo;t legislate against it»37.\nOgnuna di quelle donazioni era legale, e va detto chiaramente. Un cittadino britannico iscritto nelle liste elettorali del Regno Unito è un donatore ammesso ovunque viva, ed entrambi gli uomini sono cittadini britannici. Channel 4 ha riferito che Harborne «specifically re-registered as a UK resident to cast his vote for the Brexit referendum whilst declaring just a few months later in a UK company documents that he lived in Thailand», cosa che gli esperti hanno definito una «gaping loophole»35. Una falla enorme, sì. Illegale, no.\nQuando nel marzo 2026 il governo si è mosso per limitare a 100.000 sterline l\u0026rsquo;anno le donazioni dei cittadini britannici che vivono all\u0026rsquo;estero39, Delo non ha smesso di donare. Ha cambiato paese. Aveva già dato 4 milioni di sterline da Hong Kong, e ha annunciato che si trasferiva in Gran Bretagna così che il tetto non si applicasse a lui, esortando altri espatriati ricchi a fare lo stesso38.\nVivere qui e pagare le tasse qui non ti garantirà il posto con il piano sull\u0026rsquo;immigrazione di Reform. Non vivere qui non ti impedisce di finanziare il partito che l\u0026rsquo;ha scritto.\nRappresentanza senza tassazione C\u0026rsquo;è un\u0026rsquo;espressione per chi paga le tasse e non ha voce in capitolo: tassazione senza rappresentanza. I finanziamenti di Reform sono il contrario. Una voce, e molto grossa, da persone che non vivono con il risultato.\nNon è una preoccupazione nuova, e non è mia. Il Parlamento se ne è occupato nel 2009. La sezione 10 del Political Parties and Elections Act 2009 dice che un partito non può prendere più di 7.500 sterline da qualcuno a meno che non sia «resident, ordinarily resident and domiciled in the United Kingdom» ai fini dell\u0026rsquo;imposta sul reddito40. Con quella regola Harborne non avrebbe potuto dare un penny oltre le 7.500 sterline.\nNon è mai stata attivata. Legislation.gov.uk elenca ancora la sezione come «Prospective», il che significa che «has never come into force»40. Diciassette anni e quattro governi. Poi, dal 16 gennaio 2024, è stata abolita la vecchia regola per cui i cittadini britannici all\u0026rsquo;estero uscivano dalle liste dopo quindici anni, quindi un cittadino può ora restarci, e continuare a donare, a vita41.\nLa revisione del governo stesso sul denaro straniero in politica, la Rycroft Review, presentata al Parlamento nel marzo 2026, descrive lo schema senza fare nomi:\n\u0026ldquo;wealthy individuals who have chosen to live abroad in order to have their wealth taxed abroad are nevertheless currently entitled to make unlimited donations to UK political parties. Despite choosing to minimise their contribution to the UK Exchequer, these individuals have the opportunity to make potentially game-changing donations into British politics.\u0026rdquo;42\nE sul rischio, dice che queste donazioni «pose an additional risk of foreign money leaching into British politics», perché «tracing the source of funds offered by individuals living abroad is more complex than for domestic donations»42.\nPerché il denaro straniero è trattato come un rischio di corruzione Le regole del Consiglio d\u0026rsquo;Europa sulla corruzione nel finanziamento dei partiti chiedono agli Stati di «specifically limit, prohibit or otherwise regulate donations from foreign donors»43. Quelle regole stanno in uno strumento il cui titolo intero parla di corruzione. Circa il 63% dei paesi vieta del tutto le donazioni straniere ai partiti44. International IDEA, che tiene traccia di queste cose, dà il motivo in una frase che potrebbe essere stata scritta su Reform:\n\u0026ldquo;A party that receives a significant amount of its funds from overseas may be less reliant on generating funds at home, thus weakening the ties between it and the citizens it should represent.\u0026rdquo;44\nCi sono condanne vere in cui il denaro straniero ha comprato esiti politici. Negli Stati Uniti, Lev Parnas è stato condannato per aver usato i soldi di un ricco russo per fare donazioni illegali45, e Imaad Zuberi ha preso 12 anni per aver incanalato denaro straniero nelle campagne elettorali46. Qui, un ex leader di Reform in Galles sta scontando dieci anni e mezzo per tangenti riconducibili a un amico di Vladimir Putin, di cui parlo più avanti.\nOra il lato equo, perché conta. Nessuno di quei casi riguarda un cittadino britannico all\u0026rsquo;estero che dona legalmente a un partito. I consulenti giuridici del Consiglio d\u0026rsquo;Europa stesso dicono che i cittadini all\u0026rsquo;estero in generale «should not be restricted» se possono votare in patria47, e la Rycroft Review ha giudicato un divieto «overly heavy-handed»42. Ha anche concluso che non ci sono prove che le elezioni del 2024 siano state falsate da interferenze straniere42. Gli espatriati hanno legami veri qui. La famiglia, le pensioni, una casa in cui intendono tornare.\nQuindi il problema non è chi dona. È quanto.\nPaese I cittadini all\u0026rsquo;estero possono donare? Limite Irlanda sì 3.100 € l\u0026rsquo;anno a un partito48 Canada cittadini e residenti permanenti 1.775 C$ l\u0026rsquo;anno49 Stati Uniti sì limiti federali ai contributi50 Regno Unito, fino a marzo 2026 sì nessuno Ogni democrazia paragonabile che permette ai propri cittadini all\u0026rsquo;estero di donare limita quanto possono dare. Fino a quest\u0026rsquo;anno, la Gran Bretagna no. Un voto da Bangkok è una voce, uguale alla mia. 36 milioni di sterline in un giorno non sono una voce. Sono il bilancio di un partito.\nChi conta come britannico, e chi paga per deciderlo Metti fianco a fianco le due metà di questo articolo. Reform traccia la linea su chi appartiene a questo paese sempre più stretta. Lo status di residente sparisce. I sussidi diventano solo per i cittadini6. Quando la gente ha chiesto cosa dovrebbe fare una famiglia residente, un parlamentare di Reform ha suggerito di chiedere la cittadinanza10. Il suo candidato alle suppletive di Gorton and Denton è andato oltre: «It takes more than a piece of paper to make somebody \u0026lsquo;British\u0026rsquo;.»51\nPoi guarda chi paga il partito che traccia quella linea. Un uomo che vive in Thailandia da trent\u0026rsquo;anni e ha la cittadinanza thailandese36. Un uomo che ha donato da Hong Kong, poi si è trasferito qui quando un tetto gli si è messo di traverso38. I loro passaporti britannici sono ciò che rende legali quei soldi. Secondo la logica di Reform stessa, ci vuole più di un pezzo di carta.\nL\u0026rsquo;infermiera che vive e paga le tasse qui da dieci anni deve dimostrare di appartenere a questo paese. Il donatore che se n\u0026rsquo;è andato trent\u0026rsquo;anni fa no, purché le carte siano in ordine. Non penso che questo sia un partito per i britannici. Penso che sia un partito che decide chi conta come britannico, ed è pagato da persone che non vivono qui.\nIn cosa trafficano i donatori Entrambi i grandi donatori dicono di non volere niente in cambio. Harborne ha definito i suoi 36 milioni «a philanthropic gift to our country», e ha detto «My competitive spirit inspired me to match it»52. Farage l\u0026rsquo;ha detta più breve: «You know what Ben Delo and Christopher Harborne want? Nothing.»53\nNon ti dirò cosa vuole qualcuno. Ti metterò davanti cosa possiedono, cosa è stato trovato contro quelle attività, e cosa Reform ha detto e fatto proprio su quei settori. I puntini li unisci tu.\nChristopher Harborne Cosa possiede Cosa mostrano gli atti Tether, la più grande stablecoin il 12%, per sua stessa ammissione in una causa per diffamazione negli Stati Uniti54 QinetiQ, un fornitore del Ministero della Difesa il 14,98%, tramite una società del Delaware55. Il MoD ha prorogato il suo contratto di collaudo da 1,5 miliardi con QinetiQ nel maggio 202556 AML Global, un intermediario di carburante per aerei è l\u0026rsquo;unica persona con controllo significativo57. Il Guardian riporta oltre 140 milioni di dollari di contratti militari statunitensi58 Altre donazioni politiche circa 1,79 milioni di sterline ai Conservatori33, e 1 milione all\u0026rsquo;ufficio privato di Boris Johnson59 Tether, la società, ha un curriculum tutto suo. Tienilo separato da Harborne, che è un azionista di minoranza e qui non è stato accusato di niente.\nLa procuratrice generale di New York: «Bitfinex and Tether recklessly and unlawfully covered-up massive financial losses.» Hanno pagato 18,5 milioni di dollari senza ammettere illeciti60. L\u0026rsquo;autorità di vigilanza statunitense sulle materie prime ha multato Tether per 41 milioni di dollari e ha accertato che aveva abbastanza riserve a copertura dei suoi token «for only 27.6% of the days» in un campione di 26 mesi61. L\u0026rsquo;Ufficio delle Nazioni Unite contro la droga e il crimine: «USDT on the TRON blockchain has become a preferred choice for crypto money launderers in East and Southeast Asia.»62 Tether lo contesta. Quando la National Crime Agency ha smantellato una rete di riciclaggio che aveva comprato una banca per aiutare la guerra della Russia, il Guardian ha riferito che la «vast majority» delle cripto sequestrate era emessa da Tether, e ha aggiunto che «there is no suggestion that Harborne himself is implicated»63. La risposta dei suoi avvocati è che dare la colpa a un investitore di Tether per quello che gli utenti fanno con i suoi token è «akin to claiming the US Treasury is an accomplice in money laundering because it prints the US dollar»63. È un argomento giusto su Harborne. Non è granché come risposta su Tether.\nBen Delo Delo ha cofondato BitMEX, una piattaforma di scambio di cripto. Nel 2022 si è dichiarato colpevole a New York di «willfully failing to establish, implement, and maintain an anti-money laundering… program at BitMEX», e ha pagato una multa di 10 milioni di dollari «representing pecuniary gain derived from the offense»64.\nDeliberatamente significa che sapeva che l\u0026rsquo;obbligo c\u0026rsquo;era e ha scelto di non rispettarlo. Le parole del procuratore federale stesso: «Arthur Hayes and Benjamin Delo built a company designed to flout those obligations; they willfully failed to implement and maintain even basic anti-money laundering policies.» Il verdetto del Dipartimento di Giustizia sul risultato: «As a result of its willful failure to implement AML and KYC programs, BitMEX was in effect a money laundering platform.»64 Tra il 2014 e il 2020 non ha presentato nemmeno una segnalazione di operazione sospetta, neanche dopo che nel 2018 gli era stato detto che vi passavano fondi rubati con un attacco informatico64. BitMEX stessa è stata poi multata per 100 milioni di dollari65.\nL\u0026rsquo;ammissione di colpa non è una condanna per riciclaggio, e lui non è stato accusato di aver riciclato personalmente i soldi di nessuno. Nel marzo 2025 Donald Trump gli ha concesso la grazia66. Delo adesso la chiama «a regulatory failing that isn\u0026rsquo;t even a crime in the UK»67.\nCosa Reform ha detto e fatto sui loro settori L\u0026rsquo;interesse dei donatori La posizione di Reform, con parole o fatti suoi Le stablecoin, che una sterlina digitale di Stato potrebbe scalzare Farage ha fatto pressione sul Governatore della Bank of England perché abbandonasse il «Britcoin», e ha detto di essere «prepared to go to prison» per fermarlo68 Tether Farage su LBC: Tether «is about to be valued as a $500 billion company», e la Gran Bretagna dovrebbe «embrace» la società69 Il settore delle cripto Farage, a un pubblico delle cripto: «When it comes to your industry… then I am your champion.»69 Soldi delle cripto in politica «We are the first political party in Britain who can accept donations in bitcoin and other cryptocurrencies.»70 Tasse sulle cripto un impegno a tagliare l\u0026rsquo;imposta sulle plusvalenze sulle cripto dal 24% al 10%, e una riserva in bitcoin alla Bank of England70 Il tetto sui donatori all\u0026rsquo;estero e il divieto di donazioni in cripto Tice: Reform lo ribalterebbe, «overturn it»71 Difesa «incentives and tax breaks to boost the UK defence industry»58 Reform dice che Harborne «had not discussed defence spending, defence policy or foreign policy» con il partito58. I suoi avvocati dicono che i suoi interessi d\u0026rsquo;affari sono «unconnected in any way whatsoever with his political affiliations»58. Non ho prove del contrario e non ne sto rivendicando nessuna. Sto indicando la tabella.\nIl regalo da 5 milioni di sterline Il 5 aprile 2024, secondo gli avvocati di Harborne stesso, lui ha dato personalmente 5 milioni di sterline a Nigel Farage72. Poche settimane dopo Farage è tornato sulla decisione di non candidarsi alle elezioni politiche3. Il regalo non è stato dichiarato. Lo ha rivelato il Guardian nell\u0026rsquo;aprile 2026.\nLe sue spiegazioni sono arrivate in sequenza:\nQuando Cosa Farage ha detto che erano i 5 milioni Aprile 2026, al Telegraph soldi per la sua sicurezza personale3 Maggio 2026, al Sun dati su una «unconditional basis», «a reward for campaigning for Brexit for 27 years»73 Luglio 2026 qualcosa che poteva «spend on Ferraris»74 Agosto 2026 «If I\u0026rsquo;ve made one sin, it\u0026rsquo;s that I haven\u0026rsquo;t filled in a piece of paper. I\u0026rsquo;ve broken no law.»75 Il commissario per gli standard ha aperto un\u0026rsquo;indagine il 13 maggio 2026 per «Failure to register an interest»76. Il 7 luglio Farage si è dimesso dal seggio per forzare un\u0026rsquo;elezione suppletiva. L\u0026rsquo;indagine è stata sospesa, poi riaperta il 14 agosto, il giorno in cui è stata annunciata la sua rielezione75. Ci sono state anche segnalazioni su George Cottrell, amico di Farage e truffatore condannato, che secondo le rivelazioni del Sunday Times aveva pagato lavori sui social media, alloggio e sicurezza prima delle elezioni del 2024. Il commissario non ha confermato se quei pagamenti facciano ora parte dell\u0026rsquo;indagine77. Jenrick ha definito il procedimento «a bit of a kangaroo court. It\u0026rsquo;s a stitch up.»78\nNon c\u0026rsquo;è ancora nessuna conclusione. Farage dice che non serviva alcuna dichiarazione, e alla fine potrebbe avere ragione. Ma rileggi le sue spiegazioni giù per quella tabella. La sicurezza, poi una ricompensa, poi le Ferrari. Ognuna è uscita solo dopo che la precedente veniva smontata pezzo per pezzo.\nI donatori che nessuno controlla La legge fa una sola domanda a una società che dona: è registrata qui e svolge attività qui? Non chiede da dove vengono i soldi, se la società se li può permettere, o chi ci sia davvero dietro. Due donatori mostrano cosa passa.\nUn trust da 10 miliardi di dollari, uno studio di progettazione e l\u0026rsquo;Iran Sasan Ghandehari è un miliardario britannico nato in Iran, che si dice sia residente fiscale in Svizzera e stia spostando la residenza nel Regno Unito per poter donare. Il suo impegno con Reform: «one or two million, it\u0026rsquo;s going to be more», e «maybe number two, number three. It\u0026rsquo;s going to be regular payments.»79 L\u0026rsquo;HP Trust della sua famiglia, che lui valuta circa 10 miliardi di dollari, ha pagato 50.482,16 sterline per l\u0026rsquo;accredito di Farage a Davos nel gennaio 202680, il viaggio in cui Farage ha promesso di «fight the globalists»81.\nPoi c\u0026rsquo;è la ditta.\nInterior Architecture Landscape Ltd Cosa ha dato a Reform 200.000 sterline in sette donazioni, da giugno ad agosto 202582 Cosa mostra Companies House uno studio di architettura del paesaggio; controllato dal 2021 da John Richard Simpson; prima di lui, da dicembre 2020 a maggio 2021, da Richard Darby83 Cosa hanno trovato il FT e il Guardian il FT: Darby aveva lavorato per HP Trust, e la ditta era indebitata senza traccia di clienti; il Guardian: l\u0026rsquo;HMRC aveva presentato contro di essa un\u0026rsquo;istanza di liquidazione84 Cosa ha trovato il Guardian Simpson aveva rilevato Orico General Trading, una società di Dubai posseduta da HP Trust che spediva apparecchiature per telecomunicazioni in Iran85 Cosa dicono loro l\u0026rsquo;avvocato di Ghandehari: la famiglia era cliente della ditta ma «not responsible for its donations». La ditta: Simpson «exercises genuine control over the company\u0026rsquo;s affairs» e le donazioni venivano da attività britanniche legittime8485 E il progetto che Orico riforniva. Secondo una sentenza arbitrale francese riportata dal Guardian, l\u0026rsquo;Ori Group di HP Trust deteneva il 49% di un\u0026rsquo;impresa iraniana di fibra ottica tra il 2013 e il 2016. L\u0026rsquo;altro 51% apparteneva ad Astan Quds Razavi, la fondazione religiosa che gli Stati Uniti hanno sanzionato nel 2021 perché controllava «major parts» dell\u0026rsquo;economia iraniana a beneficio dell\u0026rsquo;allora Guida suprema85. Gli avvocati di Ghandehari dicono che il progetto era stato approvato dalle autorità francesi e americane e doveva ampliare l\u0026rsquo;accesso all\u0026rsquo;informazione, che è finito con il sequestro dei beni della sua famiglia in Iran, e che lui non va in Iran da trent\u0026rsquo;anni. Le sanzioni sono arrivate cinque anni dopo la fine dell\u0026rsquo;impresa, e niente indica che dei soldi dati a Reform qualcosa venisse dall\u0026rsquo;Iran.\nQuindi non dirò che è così. Quello che dirò è questo. Farage tiene una linea dura su Teheran. Il suo pass per Davos è stato pagato da un trust che faceva affari con la fondazione della Guida suprema, e 200.000 sterline sono arrivate al suo partito da una ditta il cui proprietario ha chiuso la società di forniture di quel trust a Dubai. Un deputato laburista ha chiesto a Companies House di verificare chi la possieda davvero84. Reform vuole che si controllino le carte di ogni immigrato. Non trovo nessuna dichiarazione pubblica di Reform su cosa abbia controllato di questi soldi.\nDitte sull\u0026rsquo;orlo del baratro Byline Times ha trovato almeno sette società che hanno dato a Reform 485.000 sterline in tutto mentre rischiavano la cancellazione dal registro, lo scioglimento o erano in evidenti difficoltà finanziarie86. FK Building è il caso più chiaro, perché i suoi stessi depositi raccontano la storia:\nData FK Building Ltd 26 agosto 2025 Companies House emette un avviso di cancellazione dal registro87 6 ottobre 2025 depositato in ritardo il bilancio, che mostra passività nette per 290.543 sterline87 7 ottobre 2025 cancellazione sospesa87 8 ottobre 2025 dà 100.000 sterline a Reform88 Febbraio 2026 le società sorelle FK Group, FK Construction e FK Facades entrano in amministrazione controllata con debiti per oltre 19 milioni di sterline; 54 posti di lavoro passano a Keenan Holdings, posseduta da Deborah Keenan, che si dice sia la figlia del fondatore86899091 6 luglio 2026 FK Building va in liquidazione; la dichiarazione degli stessi amministratori mostra un ammanco di 3,1 milioni di sterline, di cui 409.647 dovute all\u0026rsquo;HMRC92 16 ottobre 2026 FK Resolv, il ramo del gruppo per la sicurezza e la messa a norma degli edifici, passa da FK Group a FKR Group Ltd, società costituita il 25 giugno 2026 e posseduta dall\u0026rsquo;amministratore di FK Building, Francis Anthony Keenan9394 La donazione era lecita. La Electoral Commission dice che le donazioni «are not the subject of an investigation» e ha chiesto una regola per cui una società donatrice debba davvero fare utili86. Spostare personale e una controllata in una società di famiglia dopo un\u0026rsquo;amministrazione controllata è lecito, e gli amministratori devono renderne conto ai creditori. Ma guarda dove è finito tutto. Finché la regola non cambia, una società che non riesce a pagare il fisco può comunque pagare Reform. I creditori, tra cui l\u0026rsquo;HMRC, hanno le società vuote e un buco da 3,1 milioni di sterline. I Keenan hanno il personale e il ramo della messa a norma. Reform ha le 100.000 sterline.\nLa notorietà paga Qui devo essere schietto con te, perché la storia ovvia non è proprio quella vera.\nSono andato a cercare il partito che paga i suoi dirigenti, e i depositi non mostrano niente del genere. Farage è registrato come «Unpaid Leader»4. Tice ha prestato al partito circa 1 milione di sterline senza interessi e ne ha trasformato 613.000 in donazioni3395. Il partito sedeva su un avanzo di 7,66 milioni di sterline nel 202528. Non risulta che i soldi delle quote finiscano in tasca a qualcuno.\nI soldi stanno in quello che la notorietà rende fuori dal partito. Il registro degli interessi di Farage stesso496:\nChi ha pagato Farage Per cosa Importo GB News conduzione, 2025 circa da 330.000 a 370.000 £ Direct Bullion «brand ambassador», 4 ore 135.000 £ Direct Bullion «up to four hours» al mese per tre mesi, maggio 2026 270.000 £ Cameo video personalizzati, 2025 62.868 £ Blockworks, una società di media sulle cripto 2 ore 30.000 £ Club for Growth, Washington un discorso, più un viaggio a Palm Beach da 9.466 £ 27.857 £ Direct Bullion gli ha pagato 685.500 sterline dal dicembre 2024, e Byline Times ha trovato che il marketing della società dell\u0026rsquo;oro collegava un governo Reform a disordini sociali ed esortava gli spettatori a comprare oro97. Il suo compenso da GB News va nella sua società personale, Thorn In The Side Ltd, cosa che il Guardian nota essere «not illegal»98. Quella società ha 3,1 milioni di sterline di patrimonio netto e paga a Farage 10.000 sterline l\u0026rsquo;anno per affittargli il suo stesso studio99.\nIl commissario per gli standard ha accertato che ha violato il codice dei parlamentari 17 volte registrando in ritardo 384.000 sterline di questi compensi, e ha accettato che fosse «inadvertent because of staffing and other administrative issues»100.\nUn po\u0026rsquo; di soldi del partito sono andati a persone vicine. I rendiconti di spesa del partito stesso mostrano 440.571 sterline pagate a cinque ditte gestite da persone interne e collaboratori. 202.124 sterline sono andate a Oak Hall Studios, gestita da David Bull, che poi è diventato presidente del partito. Jupiter Visual Communications ha ricevuto 125.672 sterline e poi ne ha restituite 50.000101102. Nessuno ha dimostrato che qualcuno di quei lavori non sia stato fatto o sia stato pagato troppo, e non sto dicendo che sia così.\nQuindi «mucca da mungere» è l\u0026rsquo;immagine sbagliata. Quella giusta è una piattaforma. Il partito è ciò che fa valere Nigel Farage 135.000 sterline per quattro ore.\nCripto: pagato per promuovere, gli elettori pagano il prezzo Il compenso di Blockworks qui sopra non era un caso isolato. Ecco il giro delle cripto intorno a Reform, dal registro di Farage stesso, dai tribunali e dai documenti del partito stesso:\nCosa Gli atti Rapporto con Reform BTC Inc ha pagato a Farage 7.410 sterline per circa 11 ore, settembre 2025103 organizza la conferenza Bitcoin in cui Reform ha lanciato la sua proposta di legge sulle cripto104 Blockworks ha pagato a Farage 30.000 sterline per 2 ore, ottobre 2025105 una società di media sulle cripto che paga il leader del partito Zebu Group ha pagato a Farage 20.000 sterline per 2 ore il 22 ottobre 2025106 lo stesso giorno in cui ha detto a Reuters «not that I\u0026rsquo;m aware of» alla domanda se le aziende delle cripto finanzino Reform107 Stack BTC plc una società che detiene bitcoin; la società di Farage ne possiede circa il 6,3%, comprato a 5 e 10 penny per azione108109 il leader del partito è azionista: «I have long been one of the UK\u0026rsquo;s few political advocates for Bitcoin» «Farage coin», «NIG Finance», «Stonks Finance», «Trump Mania» memecoin promosse con i suoi video Cameo a pagamento, da 72 sterline a clip; ognuna di quelle a cui il Guardian ha potuto dare un prezzo ha poi perso valore110 i testimonial a pagamento del leader del partito Il token CEL di Celsius un Cameo da 133 sterline che diceva ai suoi creatori di «fight» per esso110. A parte, il fondatore di Celsius è stato condannato a 12 anni per frode, e il prezzo del CEL era stato sostenuto «at times» con i «customer deposits»111 il testimonial a pagamento del leader del partito Tether l\u0026rsquo;ONU stima 37 miliardi di dollari di perdite per truffe nell\u0026rsquo;Asia orientale e sudorientale, in un mercato che secondo l\u0026rsquo;ONU gira sulle stablecoin; Tether dice di aver congelato oltre 5 miliardi di dollari e di collaborare con 340 forze dell\u0026rsquo;ordine112113 posseduta al 12% dal più grande donatore di Reform La proposta di legge di Reform sulle cripto lanciata alla conferenza Bitcoin, poi tolta dal sito del partito il 30 maggio 2026104 la politica del partito stesso, ritirata senza spiegazioni Donazioni in cripto la revisione del governo avverte che le cripto potrebbero «channel foreign money into the political system»; la Electoral Commission dice che «Reform has not shared any crypto wallet address with us»114115 il partito si è organizzato per accettarle Il portavoce di Farage dice che quello che la gente fa poi con un video Cameo «is clearly outside Mr Farage\u0026rsquo;s knowledge or control»110, e ogni compenso qui sopra è stato dichiarato. Reform non ha dichiarato nessuna donazione in cripto, e i grandi regali di Harborne e Delo sono arrivati in contanti. Nessuno ha accertato che Farage abbia violato una regola.\nOra guarda chi paga. Le persone in questo paese hanno perso 879,8 milioni di sterline in truffe sugli investimenti nel 2025, in media 25.612 sterline a testa, «often representing pension savings». Gli over 60 sono quelli che più probabilmente le denunciano116. Nel 2024 le cripto erano l\u0026rsquo;investimento coinvolto nel 66 per cento delle denunce, e le persone tra i 55 e i 64 anni sono quelle che hanno perso di più117. Il consiglio della FCA stessa sulle cripto è lungo una riga: «you should be prepared to lose all your money»118.\nQuindi il leader di un partito che dice di parlare per i pensionati è pagato da società delle cripto, ha azioni in un\u0026rsquo;azienda di bitcoin, e ha venduto video per monete che poi sono crollate, mentre le persone che perdono la pensione nelle cripto sono proprio la fascia d\u0026rsquo;età che dice di difendere. Non serve che abbia truffato qualcuno perché la cosa puzzi. Basta che continui a venderla.\nTice: immobili, tasse e una società da 28.864 sterline che ne ha date 500.000 Richard Tice è il vice leader di Reform e il deputato di Boston and Skegness. Prima della politica guidava società immobiliari: co-amministratore delegato del Sunley Group di famiglia per 14 anni, poi amministratore delegato di CLS Holdings dal 2010 al 2014119. Dopo è venuta la sua attività immobiliare, Quidnet.\nQuidnet REIT, che controlla lui, ha registrato una perdita ante imposte di 690.000 sterline nel 2025 con i suoi edifici affittati al 52% e 13,4 milioni di sterline di debito bancario, e ha comunque pagato 359.501 sterline di dividendi quell\u0026rsquo;anno e altrettanti nel gennaio 2026120. Da deputato ne riceve un compenso trimestrale121.\nSulle tasse, ci ha detto esattamente come la pensa:\n\u0026ldquo;How many friends of yours would voluntarily choose to pay more tax than they are legally obliged to do?… Don\u0026rsquo;t morally or voluntarily give more tax to incompetent, wasteful hard-left, socialist governments.\u0026rdquo;122\nEra la sua risposta alle notizie secondo cui le sue società avevano evitato quasi 600.000 sterline di imposta sulle società grazie alla struttura REIT. Un secondo articolo diceva che circa 91.000 sterline non erano state trattenute sui dividendi pagati a lui e al suo trust nel Jersey. Tice l\u0026rsquo;ha definito un «technicality» e ha detto che l\u0026rsquo;HMRC ha ricevuto nel complesso la cifra giusta123. Non c\u0026rsquo;è nessun accertamento dell\u0026rsquo;HMRC contro di lui, e lui dice che tutte le tasse sono state pagate.\nLa società che ha dato mezzo milione Britain Means Business Ltd, ex Leave Means Leave, ha Tice come unico amministratore e controllore124. Nel giugno 2024 ha dato a Reform 500.000 sterline in una sola settimana33. Il suo stesso bilancio depositato ne indica il patrimonio netto in 28.864 sterline alla fine del 2023 e 10.479 sterline alla fine del 2024, con un dipendente124.\nBritain Means Business Cifra Data a Reform, 9 e 11 giugno 2024 500.000 £ Patrimonio netto, fine 2023 28.864 £ Patrimonio netto, fine 2024 10.479 £ Data a Reform in precedenza come Leave Means Leave, marzo 2020 990.000 £ Posso chiedere dove una società che valeva 28.864 sterline alla fine del 2023 abbia trovato 500.000 sterline sei mesi dopo? Il suo bilancio non lo dice. La Electoral Commission ha segnalato le donazioni alla Metropolitan Police nel febbraio 2025, e la Met sta indagando su possibili reati ai sensi della sezione 61 del Political Parties, Elections and Referendums Act, che riguarda l\u0026rsquo;elusione delle regole su chi può donare. Due persone sono state interrogate con le garanzie di legge e nessuno è stato arrestato125. Secondo le notizie, una donatrice, Fiona Cottrell, ha dato a Britain Means Business 1 milione di sterline quel giugno e metà è poi finita a Reform125. Byline Times chiede che fine abbia fatto il resto95. La risposta di Tice: «as far as I\u0026rsquo;m concerned, she\u0026rsquo;s a permissible donor and that\u0026rsquo;s the end of it.»126\nTice ha definito l\u0026rsquo;indagine «a politically motivated smear campaign»127. Quando l\u0026rsquo;ha detto, andava avanti da 17 mesi.\nLe compagnie che frequenta Chi In comune con Tice Cosa mostrano gli atti Arron Banks ha cofondato Leave.EU; Tice ne è stato nel consiglio dal 2016 al 2017128 Leave.EU è stata multata dalla Electoral Commission, multa ridotta in appello a 66.000 sterline. Nessun accertamento nomina Tice129 George Cottrell nessuna società in comune ha versato un prestito da 78.100 sterline nella società di Tice, Tisun Investments, nel dicembre 2024. Il commissario per gli standard ha rifiutato di indagare130 Fiona Cottrell nessuna società in comune ha dato a Reform 750.000 sterline in tre donazioni33 Nicholas Tribe, Anthony Yiannakis, John Purcell tre o quattro delle sue società immobiliari ciascuno131 nessuna donazione e nessun precedente con le autorità. Un consiglio in comune è solo un consiglio in comune È anche lui sotto indagine. L\u0026rsquo;elenco del commissario per gli standard riporta «Richard Tice MP (opened 20 August 2026) Rule 13 Disclosing details in relation to an investigation»76, dopo che lui aveva reso pubblica su X una segnalazione precedente e aveva definito il gruppo che c\u0026rsquo;era dietro un «anti semitic anti Israel lobby group»132. Nessun esito ancora.\nJenrick: fuori dagli affari, dentro al governo Nell\u0026rsquo;agosto 2024 Robert Jenrick ha detto: «I want to put Reform out of business. I want to make them redundant.»22 Nell\u0026rsquo;aprile 2025: «I want to send Nigel Farage back to retirement.»133\nIl 15 gennaio 2026 Kemi Badenoch lo ha cacciato dal governo ombra per quella che ha chiamato «irrefutable evidence that he was plotting» di passare a un altro partito134. Si è unito a Reform lo stesso giorno, ha detto «I want Nigel to be prime minister», e ha rifiutato di dimettersi e affrontare un\u0026rsquo;elezione suppletiva a Newark135. Un mese dopo Reform lo ha indicato come suo cancelliere dello Scacchiere23.\nPrima Adesso «put Reform out of business»22 la scelta di Reform per cancelliere23 «send Nigel Farage back to retirement»133 «I want Nigel to be prime minister»135 un ministro conservatore «the two main parties are rotten… They both broke Britain»136 Nove mesi. Tanto è durato «out of business».\nWestferry Nel gennaio 2020, da ministro dell\u0026rsquo;Edilizia abitativa, Jenrick ha approvato il progetto Westferry Printworks di Richard Desmond a est di Londra. I suoi stessi funzionari hanno annotato la tempistica: «SoS is/was insistent that decision issued this week ie tomorrow - as next week the viability of the scheme is impacted by a change in the London CIL regime.»137 Il cambio dell\u0026rsquo;imposta sarebbe costato al progetto circa 40 milioni di sterline138. Desmond ha dato ai Conservatori 12.000 sterline due settimane dopo l\u0026rsquo;approvazione139. I due si erano seduti insieme a una cena di raccolta fondi, dove, con le parole di Jenrick ai Comuni, Desmond «did bring out his iPhone and show me some images of the development»137.\nQuando la cosa è finita in tribunale, Jenrick ha ammesso che la decisione era «unlawful by reason of apparent bias» ed è stata annullata139. Ha detto: «We don\u0026rsquo;t believe there was any bias.»140 Non è mai stata emessa alcuna conclusione ai sensi del codice ministeriale e il Primo ministro ha considerato chiusa la questione137. Questi sono gli atti: un\u0026rsquo;ammissione di parzialità apparente, e nessun accertamento di parzialità effettiva.\nDa allora Una segnalazione della Electoral Commission su 37.500 sterline date alla sua campagna per la leadership conservatrice del 2024, che si sospetta provenissero da una fonte straniera, è arrivata alla Met il 6 gennaio 2026, nove giorni prima che cambiasse partito. La Met sta indagando. Jenrick definisce la notizia «entirely false», opera di «an establishment determined to stop Reform»141. Nessuno è stato incriminato. A una cena ha raccontato che a Handsworth, Birmingham, «I didn\u0026rsquo;t see another white face. That\u0026rsquo;s not the kind of country I want to live in»142. Al congresso di Reform nel settembre 2026 una manifestante è stata trascinata fuori per i capelli e colpita. Jenrick: «Oh boohoo… come on, get a life.»143 Poi: «He should be given a medal for what he did.»144 Da ministro dell\u0026rsquo;immigrazione ha detto ai Comuni che il 71% degli stranieri detenuti per reati sosteneva di essere vittima di schiavitù moderna. Il presidente della UK Statistics Authority ha detto che i dati dell\u0026rsquo;Home Office stesso indicavano circa un quinto145. Farage a Bruxelles Farage ha passato vent\u0026rsquo;anni da eurodeputato, dal 1999 al 2020, in un Parlamento da cui voleva far uscire la Gran Bretagna. Su quanto rendesse è stato chiaro. Nel 2009, quando gli hanno chiesto quanto avesse ricevuto in rimborsi e indennità dal 1999: «It is a vast sum… I don\u0026rsquo;t know what the total amount is but - oh lor - it must be pushing £2 million.»146 Con le sue indennità pagava la moglie146.\nGli atti Fonte 40.000 € trattenuti dallo stipendio dal gennaio 2018, soldi pagati a Christopher Adams come suo assistente mentre Adams era il responsabile nazionale delle candidature dell\u0026rsquo;UKIP, cosa che «cannot be proved by Farage» fonte del Parlamento, il Guardian147 Ha partecipato al 37% delle votazioni ed era 748º su 751 eurodeputati VoteWatch, il Guardian147 Due anni di uffici da Rock Services, una società di Arron Banks, dichiarati il 1º luglio 2019, dopo che l\u0026rsquo;uso era finito e sei settimane dopo l\u0026rsquo;apertura di un\u0026rsquo;indagine sul sostegno di Banks le sue stesse dichiarazioni148 Un\u0026rsquo;auto con autista, l\u0026rsquo;affitto di una casa a Chelsea da 4,4 milioni di sterline e viaggi negli Stati Uniti, che secondo le notizie valevano fino a 450.000 sterline da Banks, mai dichiarati fatture di Channel 4, l\u0026rsquo;Independent149 La sua unica causa davanti alla giustizia UE, contro una sanzione di 10 giorni per aver chiamato il presidente del Consiglio un «damp rag», respinta come «manifestly inadmissible» con le spese a suo carico Tribunale dell\u0026rsquo;Unione europea150 Ogni volta, la sua parte l\u0026rsquo;ha chiamata persecuzione. Sui 40.000 euro il suo gruppo ha parlato di «a vindictive campaign by the European parliament of selective persecution of Eurosceptic MEPs»147. Farage sul sostegno di Banks: «it\u0026rsquo;s a purely private matter»151. Non ha mai contestato i 40.000 euro in tribunale. I soldi sono stati recuperati.\nGiusto è giusto, però, e una di quelle lamentele ha vinto. Nel 2016 il Parlamento ha chiesto al partito europeo ADDE, dominato dall\u0026rsquo;UKIP, di restituire 172.654,92 euro. Nel 2019 il Tribunale dell\u0026rsquo;Unione europea ha annullato quella decisione, perché un membro del collegio che decideva aveva accusato pubblicamente l\u0026rsquo;UKIP di «fraudulent manipulation» in anticipo, e il tribunale ha giudicato la sua imparzialità «seriously compromised»152. Su quella, «vindictive» è stato confermato. La fondazione del partito, IDDE, ha invece accettato che 33.863,50 euro non fossero ammissibili e ha perso la propria causa, dopo che il Parlamento aveva segnalato all\u0026rsquo;ufficio antifrode dell\u0026rsquo;UE «serious allegations regarding the establishment of a system whereby donations were received in exchange for the award of contracts»153. Le conclusioni dell\u0026rsquo;ufficio antifrode non sono state pubblicate.\nPutin, Trump e un leader corrotto Nathan Gill ha guidato Reform in Galles dal marzo 2021. Nel novembre 2025 è stato condannato a dieci anni e mezzo dopo essersi dichiarato colpevole di otto capi d\u0026rsquo;accusa per corruzione. Il giudice ha stabilito che «The architect of these bribes was Oleg Voloshyn, a former pro-Russian Ukrainian MP», e che Viktor Medvedchuk, «a close friend of Vladimir Putin», era «the ultimate source of the requests and the money you received»154. I reati risalivano al 2018 e 2019, quando era eurodeputato del Brexit Party. Il tribunale non si è pronunciato su Reform, e Reform ha definito la sua condotta «reprehensible, treasonous and unforgivable»155. Farage l\u0026rsquo;ha chiamato una «bad apple», una mela marcia25.\nLe parole di Farage stesso su Putin si sono spostate a seconda del vento:\nQuando Farage su Putin 2014 il leader mondiale che ammirava di più: «As an operator, but not as a human being, I would say Putin.»24 Giugno 2024 «We provoked this war. It\u0026rsquo;s – you know, of course it\u0026rsquo;s [Putin\u0026rsquo;s] fault, he\u0026rsquo;s used what we\u0026rsquo;ve done as an excuse.»156 Ottobre 2025 «Obviously, Putin is a very bad dude»25 Su Trump gli atti sono più stabili. Farage ha parlato a quindici eventi legati a Trump dalle elezioni del 2024 secondo il conteggio di DeSmog, tra cui la convention repubblicana e il CPAC157. Ha testimoniato davanti al Congresso degli Stati Uniti nel settembre 2025158 e ha pubblicato dallo Studio Ovale: «It\u0026rsquo;s good to be back in the Oval Office.»159 Il suo registro mostra compensi e viaggi da enti conservatori statunitensi come Club for Growth e Hillsdale College4. Delo, il donatore, ha una grazia di Trump66.\nQuello che gli atti non mostrano sono soldi americani nel partito. Nel registro non c\u0026rsquo;è nessuna donazione del governo statunitense o legata a Trump, DeSmog stessa dice che non c\u0026rsquo;è alcun indizio («no suggestion») di finanziamenti diretti, ed Elon Musk, dopo mesi di chiacchiere, non ha dato niente e poi ha detto al mondo che «Farage doesn\u0026rsquo;t have what it takes»160. C\u0026rsquo;è un\u0026rsquo;indagine di polizia in corso su un presunto tentativo di far entrare soldi americani, di cui parlo più avanti.\nChi altro c\u0026rsquo;è nella stanza I soldi dei donatori non vanno solo nel partito. Pagano il posto del leader alle tavole degli altri. Ecco i viaggi negli atti ufficiali, e chi li ha pagati:\nViaggio Chi ha pagato Valore Fonte Farage al secondo insediamento di Trump, gennaio 2025 Christopher Harborne 27.616,76 £ Electoral Commission161 Farage e due collaboratori negli Stati Uniti, novembre 2025, «speaking engagement and charity event», che si dice fosse a Mar-a-Lago Bassim Haidar, un donatore di Reform 54.921,02 £ registro di Farage162, DeSmog163 Farage negli Emirati, dicembre 2025, «to attend the F1 and for meetings» il governo di Abu Dhabi e Abu Dhabi F1 10.000 £ registro di Farage164 Tice in Israele, settembre 2025, «meetings with President and Foreign Minister» RFOI Ltd 6.250 £ per due registro di Tice165 Una delegazione di Reform in Israele, novembre 2025, con il presidente del partito, un membro del consiglio e il capo di gabinetto di Tice il Ministero degli Esteri israeliano 4.861,27 £ a testa registro della London Assembly166, Lancashire Lead167, Novara168 Sono Washington, Palm Beach, Abu Dhabi e Israele, tutti nel giro di dodici mesi, e nemmeno uno pagato dalle persone per cui Reform dice di parlare.\nLa stanza americana I legami con il mondo MAGA non si fermano all\u0026rsquo;agenda dei discorsi di Farage. Paul Marshall e Legatum, i proprietari di GB News, hanno anche fondato e sostengono l\u0026rsquo;Alliance for Responsible Citizenship. La sua conferenza di Londra nel febbraio 2025 aveva Farage come oratore principale insieme allo speaker della Camera statunitense Mike Johnson, al segretario all\u0026rsquo;Energia di Trump Chris Wright e a Vivek Ramaswamy, con Peter Thiel che si dice si sia collegato in video169. Un elenco di donatori ottenuto da DeSmog ci mette Ben Delo, accanto ai donatori di Trump Ken Griffin e Anthony Pratt170.\nE Tether, posseduta al 12% dal più grande donatore di Reform, è legata al governo di Trump. Cantor Fitzgerald, guidata da Howard Lutnick, oggi segretario al Commercio di Trump, quando è stato concluso l\u0026rsquo;accordo, ha negoziato una quota di circa il 5%171, e il nuovo ramo americano di Tether è guidato da Bo Hines, che veniva dal consiglio sulle cripto di Trump stesso172. Questi sono legami della società, non di Harborne personalmente. Ma la società è la sua.\nLa stanza israeliana Il viaggio di Tice è stato pagato da RFOI Ltd, Reform Friends of Israel. È una società a responsabilità limitata privata, costituita nel giugno 2025 e registrata come attività di pubbliche relazioni173.\nRFOI Ltd su Companies House Amministratore e persona con controllo significativo, dal 16 giugno all'8 dicembre 2025 Roy Zabludowicz, il 75% o più dei diritti di voto173 La sua uscita depositata l'11 febbraio 2026, due mesi dopo la data che registra173 Amministratori dall'8 dicembre 2025 Jason Pearlman e Lois Perry173 Jason Pearlman consulente per i media del presidente israeliano Rivlin, poi vicedirettore della Henry Jackson Society dal 2018174, poi consulente per i media del presidente Herzog per due mandati175. Farage ha definito il suo ingresso «a real coup»176 La Henry Jackson Society il datore di lavoro di Pearlman dal 2018, un think tank transatlantico di politica estera e sicurezza174. Il suo cofondatore e direttore esecutivo, Alan Mendoza, è entrato in Reform nel novembre 2025 come consigliere principale per gli affari globali, cosa che Farage ha definito «an excellent addition»177178 Lois Perry leader dell\u0026rsquo;UKIP da maggio a giugno 2024, poi dal dicembre 2024 direttrice esecutiva di Heartland Institute UK/EU, il ramo europeo di un think tank statunitense negazionista sul clima, lanciato con Farage come «special guest of honour»179180 Chi la controlla adesso la società dichiara che non c\u0026rsquo;è nessuna persona da registrare173 Un Roy Zabludowicz con lo stesso mese e anno di nascita amministratore di due società Tamares, insieme a Chaim Zabludowicz181 Chaim «Poju» Zabludowicz guida il Tamares Group, ha fondato e presieduto il BICOM, che fa pressione sul governo britannico per conto di Israele, e ha dato ai Conservatori circa 380.000 sterline. L\u0026rsquo;azienda di famiglia è stata costruita intorno a Soltam, un fornitore israeliano della difesa182. Declassified UK dice che il Roy Zabludowicz di RFOI «appears to be» suo figlio183, e mi fermo alle loro parole.\nGuarda chi la gestisce adesso. Un amministratore viene dall\u0026rsquo;ufficio presidenziale israeliano, passando per la Henry Jackson Society, il cui capo è ora il consigliere principale di Reform per gli affari globali. L\u0026rsquo;altra guida il ramo europeo di un think tank americano che Farage ha aiutato a lanciare. La società degli Amici di Israele di Reform è il punto in cui la stanza israeliana e quella americana si incontrano.\nQuindi RFOI è un\u0026rsquo;altra società privata. Un solo uomo la controllava quando ha pagato il viaggio, e da quando si è fatto da parte dichiara che non la controlla nessuno. Puoi vedere chi ha volato. Non puoi vedere chi ha pagato. Penso che sia proprio questo il suo scopo: una società che esiste per nascondere chi paga i viaggi di Reform in Israele. Niente nei suoi depositi mi dà motivo di pensarla diversamente.\nDue mesi dopo il governo israeliano ha pagato una delegazione di Reform tutta sua. Novara, citando Declassified UK, stima la spesa totale del ministero per quel viaggio di sei giorni in oltre 50.000 sterline, con le alture del Golan nell\u0026rsquo;itinerario168. C\u0026rsquo;è andato il leader del consiglio del Lancashire di Reform, e per questo è stata annullata una riunione della giunta della contea167. C\u0026rsquo;è andato anche un membro di Reform della London Assembly166. È la lista degli ospiti di un governo straniero che va dal presidente del partito e dal suo consiglio giù fino agli enti locali ai due capi del paese, il County Hall del Lancashire e il City Hall di Londra.\nNel giugno 2026 Tice ha definito la petizione alla base di un dibattito ai Comuni sull\u0026rsquo;influenza filoisraeliana «antisemitic in its very motivation and at its core». Una segnalazione secondo cui avrebbe dovuto dichiarare il viaggio prima di parlare è stata aperta a luglio184, e il 27 ottobre 2026 il commissario per gli standard l\u0026rsquo;ha accolta come violazione del codice, giudicata involontaria185.\nUn partito che metterebbe un\u0026rsquo;assistente domiciliare di quarantacinque anni su un visto rinnovabile prende i voli del suo vice leader da una società in cui nessuno può guardare dentro, e quelli del suo presidente da un governo straniero. Posso chiedere chi decide la politica estera in un governo Reform? Non gli elettori, stando a questi atti.\nLa stanza russa Nel registro di Reform non ci sono soldi russi, e non fingerò che ci siano. Quello che c\u0026rsquo;è:\nQuestione Cosa c\u0026rsquo;è negli atti L\u0026rsquo;altra parte Il regalo da 5 milioni di Harborne a Farage il segretario alla Difesa ha chiesto a Farage di confermare che niente di quei soldi «derived from transactions with Russian state-linked energy companies», precisando che lo scopo della lettera «is not to make allegations»186 la società di carburanti di Harborne, AML Global, dice di aver «complied fully with all UK and international sanctions»186 I contratti di carburante militare statunitensi di AML Global le raffinerie nominate hanno ricevuto oltre 62 milioni di tonnellate di greggio russo, iraniano o venezuelano, secondo il conteggio di Unearthed187 Unearthed stessa dice che «there is no suggestion that the company has breached UK or international sanctions»187 Il soggiorno di Tice in Costa Azzurra, agosto 2025 1.400 sterline di ospitalità da Lubov Chernukhin, il cui marito è stato viceministro delle Finanze russo fino al 2004188 lei dice che la coppia non ha legami con il regime di Putin e ha condannato la guerra188 Niente di tutto questo è un accertamento contro qualcuno, e la colonna di destra è lì perché tu possa pesarlo. Mettilo accanto a Nathan Gill e al «As an operator… Putin» di Farage, ed è la frase del segretario alla Difesa che resta: un partito «under a Russian cloud that only transparency can lift»186.\nUna storia russa che vedrai ripetere sui proprietari di GB News è falsa. L\u0026rsquo;affermazione che il fondatore di Legatum avesse legami con l\u0026rsquo;intelligence russa è stata giudicata «a complete fabrication» da un tribunale statunitense, e una giuria gli ha riconosciuto 8 milioni di dollari contro l\u0026rsquo;investigatore che c\u0026rsquo;era dietro189. Non appartiene a questo articolo né a nessun altro.\n«Non abbiamo donatori residenti in Gran Bretagna» Nel settembre 2026 Channel 4 News e Verbatim hanno trasmesso un\u0026rsquo;inchiesta sotto copertura. Un giornalista che si spacciava per il figlio di un ricco americano ha incontrato il responsabile delle politiche di Reform, James Orr, e un collaboratore di alto livello, Dan Jukes, e si è accordato perché una società statunitense pagasse tre sondaggi commissionati dal partito, circa 32.500 sterline190191. Un attore che interpretava il padre è stato poi portato a incontrare Farage per una donazione molto più grande che sarebbe partita dagli Stati Uniti190.\nOrr, davanti alla telecamera, ha detto ad alta voce quello che si dice sottovoce: «we just don\u0026rsquo;t have British-resident donors, British entities, that would support us.»191 Farage è stato filmato mentre diceva di uno dei sondaggi: «It worked. Boom.»192\nCosa è successo Quando Messa in onda 3 settembre 2026 Reform: «a hoax perpetuated by foreign-funded climate-change activists»193 4 settembre Orr e Jukes si fanno da parte, e il presidente del partito dice che non c\u0026rsquo;è nessuna possibilità, «no chance», che tornino192 4 settembre La Met: «potential offences requiring investigation», confluite nella sua indagine già aperta sulle donazioni194 9 settembre L\u0026rsquo;indagine interna di Reform, condotta dal suo stesso avvocato e dal suo segretario generale, ha concluso: «no breach of electoral law by Reform UK»195 7 ottobre Farage l\u0026rsquo;ha chiamata «loose pub talk» e «a clear case of entrapment»196. Il partito nega ogni illecito, e nessuno è stato incriminato. Ma un partito che si assolve tramite i propri dirigenti, mentre un\u0026rsquo;indagine penale sugli stessi fatti è ancora aperta, non ha chiarito niente.\nUnire i puntini Ecco tutto quanto su una pagina. Le linee continue sono negli atti ufficiali: un registro, un deposito, un accertamento di un tribunale o di un\u0026rsquo;autorità, o le parole di qualcuno. Le linee tratteggiate sono inchieste di una testata con nome e cognome. Le accuse non hanno nessuna linea.\nUnire i puntini Paul Marshall\u0026#160;(GBR) 40% di GB News Legatum\u0026#160;(ARE) 40% di GB News GB News persi 131 mln £ Conferenza ARC Marshall, Legatum Gov. Abu Dhabi\u0026#160;(ARE) ha pagato viaggio Farage Bassim Haidar\u0026#160;(IRL) nato NGA, viaggio USA Tether, 12% quota di Cantor Howard Lutnick\u0026#160;(USA) Chris Harborne\u0026#160;(THA) 25,2 mln £ + 36 mln £ QinetiQ, 14,98% fornitore del MoD Nigel Farage\u0026#160;(GBR) regalo 5 mln £, 585k £ Trump e MAGA\u0026#160;(USA) 15 eventi Contro il Britcoin meno tasse sulle cripto Heartland\u0026#160;(USA) negazionismo climatico Nick Candy\u0026#160;(GBR) tesoriere Nathan Gill\u0026#160;(GBR) in carcere, tangenti Reform UK 75-80% dall'estero Colpevole per BitMEX grazia di Trump Ben Delo\u0026#160;(GBR, ex-HKG) 8 mln £ + 36 mln £ Henry Jackson Society capo: consigliere Reform Min. israeliano\u0026#160;(ISR) ha pagato viaggio Reform nov 2025, 50k+ £ 4.861 £ a testa Chi è andato David Bull, presidente Gawain Towler, consiglio capo di gabinetto di Tice Atkinson, Lancashire Wilson, Londra Richard Tice\u0026#160;(GBR) vice leader RFOI Limited Reform Friends of Israel Amministratori RFOI Roy Zabludowicz\u0026#160;(GBR) fino a dic 2025, 75%+ Jason Pearlman\u0026#160;(GBR) ex-Herzog, ex-HJS Lois Perry\u0026#160;(GBR) Heartland UK/EU Britain Means Business 500k £ a Reform Indagine della Met aperta, nessuna accusa Società cripto 57k £ a Farage Stack BTC: suo il 6,3% Ghandehari\u0026#160;(CHE) HP Trust, ~10 mld $ pass Davos, 50k £ IAL Ltd studio di paesaggistica 200k £ a Reform Famiglia Keenan\u0026#160;(GBR) personale e FK Resolv FK Building Ltd 100k £ a Reform all'HMRC 410k £ atti ufficiali inchiesta di una testata Chi finanzia Reform, chi finanzia il canale che la trasmette, chi paga i suoi viaggi, quali società delle cripto pagano il suo leader, cosa possiedono, e dove le posizioni di Reform li toccano. Ogni linea ha la sua fonte nella tabella qui sotto. Una linea è un fatto su un collegamento, non un accertamento di illeciti. Collegamento Come lo sappiamo Legatum, una società di Dubai, e Paul Marshall possiedono ciascuno circa il 40% di GB News, che ha perso 131 milioni di sterline Wikipedia197, Left Foot Forward198 GB News paga Farage per condurre, 585.000 sterline da luglio 2024 a dicembre 2025 registro degli interessi4, The New World199 Tice ha condotto su GB News The New World199 Marshall e Legatum sostengono la conferenza ARC, dove Farage ha parlato Left Foot Forward169, DeSmog170 Harborne paga il viaggio di Farage all\u0026rsquo;insediamento di Trump Electoral Commission161 Bassim Haidar, un donatore di Reform, paga il viaggio di Farage negli Stati Uniti, che si dice fosse a Mar-a-Lago registro di Farage162, DeSmog163 Il governo di Abu Dhabi contribuisce al viaggio di Farage negli Emirati registro di Farage164 Una società guidata da Howard Lutnick, oggi segretario al Commercio di Trump, ha negoziato una quota di Tether The Block171 Farage, e il tesoriere Nick Candy, parlano a eventi di Trump e del mondo MAGA; Farage da Heartland, che organizza un panel al congresso di Reform DeSmog157 L\u0026rsquo;amministratrice di RFOI Lois Perry guida Heartland UK/EU DeSmog179 Harborne dà a Reform e al Brexit Party 25,19 milioni di sterline, più 36 milioni annunciati registro della Electoral Commission33, BBC37 Harborne dà personalmente a Farage 5 milioni di sterline, non dichiarati Guardian, data dei suoi avvocati72 Harborne possiede il 12% di Tether il suo stesso atto in un tribunale statunitense54 Harborne possiede il 14,98% di QinetiQ, un fornitore del MoD comunicazione alla borsa55, MoD56 Farage fa pressione contro il Britcoin e promuove Tether Guardian68, Byline Times69 Reform promette tagli alle tasse sulle cripto e di ribaltare il tetto alle donazioni The Block70, Guardian71 Delo dà 8 milioni di sterline, più 36 milioni annunciati, dopo essersi trasferito per aggirare il tetto registro33, Searchlight38 Delo si è dichiarato colpevole per BitMEX, graziato da Trump Dipartimento di Giustizia statunitense6466 Farage parla a eventi MAGA ed è pagato da enti conservatori statunitensi registro degli interessi4, DeSmog157 La società di Tice, Britain Means Business, dà 500.000 sterline con uno stato patrimoniale sotto le 29.000 sterline registro33, Companies House124 La Met indaga sulle donazioni passate per quella società e sull\u0026rsquo;inchiesta sotto copertura comunicati della Met tramite PA125194 Gill, ex leader di Reform in Galles, corrotto con soldi riconducibili a un alleato di Putin motivazioni della sentenza154 RFOI Ltd, all\u0026rsquo;epoca controllata da un solo uomo, paga il viaggio di Tice in Israele registro di Tice165, Companies House173 L\u0026rsquo;amministratore di RFOI Jason Pearlman era vicedirettore della Henry Jackson Society, il cui capo Alan Mendoza è diventato consigliere principale di Reform per gli affari globali Henry Jackson Society174, City AM177 Il ministero degli Esteri israeliano paga una delegazione di Reform in Israele registro della London Assembly166 L\u0026rsquo;HP Trust di Ghandehari paga 50.482,16 sterline per il pass di Farage a Davos registro di Farage80 IAL Ltd dà a Reform 200.000 sterline; l\u0026rsquo;ha controllata un ex collaboratore di HP Trust, e il suo proprietario ha rilevato la società di forniture di HP Trust a Dubai Electoral Commission82, Companies House83, FT e Guardian8485 FK Building dà a Reform 100.000 sterline il giorno dopo la sospensione della sua cancellazione, poi va in liquidazione con debiti verso l\u0026rsquo;HMRC Electoral Commission88, Companies House8792 I posti di lavoro e il ramo della messa a norma passano a società possedute dalla famiglia Keenan Companies House919493 BTC Inc, Blockworks e Zebu pagano a Farage 57.410 sterline di compensi; la sua società possiede il 6,3% di Stack BTC registro di Farage103105106108 Leggi la colonna di destra dall\u0026rsquo;alto in basso. Niente di quello è una mia opinione. L\u0026rsquo;opinione è quello che dà la somma della colonna di sinistra, e ti darò la mia alla fine.\n«Le mele marce non ci sono più» Nel giugno 2024 Channel 4 ha filmato un attivista di Reform che faceva porta a porta a Clacton mentre rivolgeva a Rishi Sunak un insulto razzista e suggeriva di usare i migranti per il «target practice», il tiro al bersaglio200. Farage ha detto che l\u0026rsquo;uomo era «an actor by profession»201. L\u0026rsquo;Ofcom ha respinto oltre 270 reclami contro Channel 4, perché a suo giudizio non sollevavano questioni sostanziali («not raise substantive issues warranting further investigation»)202, e non è mai stata prodotta nessuna prova che fosse un infiltrato. Farage ha poi fatto una promessa: «Have we had a few bad apples? We have… the bad apples are gone. We\u0026rsquo;ll never have them back.»203\nDue anni dopo ITV ha messo un giornalista dentro il partito per un anno. Il suo programma, Undercover: A Year in Reform, ha filmato un consigliere e vicesindaco di Solihull che chiamava le famiglie asiatiche «absolute parasites» e diceva «stick them on planes and f*** them off to Pakistan», un consigliere di Bromley che diceva che i bambini neri erano «like f****** animals», e un attivista che diceva «you cannot be a Muslim and British… it\u0026rsquo;s like oil and water»204205. La risposta di Reform: «There is no room for racism in Reform UK», e «a handful of individuals who do not share our values will initially make it through vetting.»206\nUna manciata. Ecco cosa c\u0026rsquo;era negli atti prima di ITV, ogni caso riportato da una testata nazionale:\nChi Ruolo Cosa ha detto Cosa è successo Ian Cooper leader di Reform del consiglio della contea di Staffordshire «No foreign national or first generation migrant should be allowed to sit in Parliament» iscrizione revocata207 Chris Parry candidato sindaco Lammy «must go home to the Caribbean»; poi ha paragonato un gruppo di volontari ebrei a «Islamists on horseback» tenuto dopo la prima, sospeso dopo la seconda208 Sarah Pochin deputata «adverts full of black people, full of Asian people» Farage l\u0026rsquo;ha definito «ugly», nessun provvedimento209 Senga Beresford deputata scozzese ha risposto «yes» a «deport the lot of them», a proposito dei musulmani il leader scozzese: «something fruity in the past», nessun provvedimento210 Stuart Prior consigliere post che chiamavano i bianchi «the master race» (nega che l\u0026rsquo;account fosse suo) espulso211 Glenn Gibbins consigliere di Sunderland i nigeriani andrebbero «melted down» per «fill in the pot holes» sospeso, riammesso, poi incriminato dalla polizia212 E dal vertice, con le parole del leader stesso. Sui musulmani nel 2024: «I\u0026rsquo;m afraid I found some of the recent surveys saying that 46% of British Muslims support Hamas.»213 Nel marzo 2026, su un iftar pubblico del Ramadan, l\u0026rsquo;evento era «the attempt to overtake, intimidate and dominate our way of life», e «we have to stop this kind of mass demonstration»214.\nNessun tribunale e nessuna autorità ha stabilito che Reform come partito sia razzista. L\u0026rsquo;Ofcom e la polizia dell\u0026rsquo;Essex hanno archiviato le questioni del 2024, una segnalazione all\u0026rsquo;autorità per l\u0026rsquo;uguaglianza non ha portato a niente, e il caso Gibbins deve ancora andare a processo212. Le accuse sugli anni di scuola di Farage sono contestate e lui le nega. Ma l\u0026rsquo;opinione pubblica si è fatta un\u0026rsquo;idea sua: YouGov ha trovato che il 47% degli adulti pensa che Reform sia in generale razzista, e il 69% degli adulti delle minoranze etniche215216.\nSospesi per bigottismo, di nuovo dentro per l\u0026rsquo;estate Le sospensioni vengono annunciate. Le riammissioni no. Gli atti mostrano uno schema:\nChi Sospeso per Rientrato Tom Pickup, Lancashire un gruppo WhatsApp in cui un membro invocava un «mass Islam genocide»; i suoi commenti «inappropriate» reintegrato nel gruppo dopo tre mesi, poi nominato assessore all\u0026rsquo;assistenza sociale per adulti217218 Paul Cutts, Doncaster post che «targeted the Muslim faith in a derogatory way» reintegrato nel gruppo in circa sei settimane219 Glenn Gibbins, Sunderland il post sui nigeriani riammesso con un «final written warning», poi incriminato220212 Ben Rowe, Plymouth post in cui diceva che «the Jews» stavano «forcing other races on our societies» riammesso con un «final written warning»220 Ora confronta come il partito tratta la slealtà. Rupert Lowe, un deputato che aveva rotto con la dirigenza, è stato sospeso, denunciato alla polizia dal partito ed espulso. Il Crown Prosecution Service non ha formulato alcuna accusa221. Nel Kent, i consiglieri che avevano rotto con il loro leader dopo un video trapelato sono stati espulsi per «undermining the interests of the party»222.\nITV ha filmato come appare tutto questo da dentro. Il direttore della comunicazione del partito, Ed Sumner, ha detto al giornalista sotto copertura di essere pronto a «defend the indefensible», ha definito un candidato «clearly a racist» e ha detto che si aspettava che fosse cacciato. L\u0026rsquo;istruzione di Farage sullo stesso candidato: «He must apologise to Lammy, if David Lammy\u0026rsquo;s taken offence.»223 È rimasto al suo posto. Un dirigente, a cui era stato detto che un consigliere aveva un profilo su un sito di incontri per nazionalisti bianchi: «It\u0026rsquo;s not a resignation issue, is it?»224\nI post razzisti prendono tre mesi e una via di ritorno. La slealtà ti fa buttare fuori. Nessun filmato mostra qualcuno che dice che le sospensioni sono di facciata, e non sostengo che ce ne sia uno. Basta la tabella. Un partito che punisse il razzismo come punisce il dissenso avrebbe una tabella molto più corta.\nTutto è una diffamazione Ognuna di queste storie ha avuto la stessa risposta. Era una diffamazione, una bufala, un infiltrato, l\u0026rsquo;establishment. Così ho contato. Dodici volte il partito o i suoi dirigenti hanno liquidato una notizia pubblicamente, ed ecco cosa è successo dopo:\nNotizia Come l\u0026rsquo;hanno chiamata Cosa è successo dopo L\u0026rsquo;attivista di Clacton, 2024 «an actor by profession»201 tolto dalla campagna; l\u0026rsquo;Ofcom ha respinto oltre 270 reclami202 Il regalo da 5 milioni a Farage, 2026 «There is no case to answer»; «a stitch up»78225 ammette di averlo ricevuto e di non averlo dichiarato; indagine sugli standard aperta76 Il consigliere di Sunderland, 2026 Tice: «all of this smearing and this sneering»226 incriminato dalla polizia e sospeso di nuovo212 La donazione per la leadership di Jenrick, 2026 «just a smear… put out by the Conservative Party»227 aperta un\u0026rsquo;indagine della Met141 L\u0026rsquo;indagine della Met sulle donazioni, 2026 Tice: «a politically motivated smear campaign»127 già aperta da 17 mesi, due persone interrogate con le garanzie di legge125 L\u0026rsquo;inchiesta sotto copertura sulle donazioni, 2026 «a hoax», «yet another establishment attack», «entrapment»193196 due collaboratori fuori in un giorno; indagine della Met in cinque192194 L\u0026rsquo;inchiesta sotto copertura di ITV, 2026 «no depth that the establishment won\u0026rsquo;t sink to»228 consiglieri dimessi o sospesi229 La BBC su Coutts, 2023 Farage ha detto che la banca era «very, very dishonest»230 aveva ragione lui: la BBC si è scusata231 Lowe, 2025 Lowe: «a sinister attempt to weaponise the criminal justice system against me»232 aveva ragione lui: nessuna accusa221 Altre tre sono ancora aperte. Sette su dodici hanno retto almeno in parte. Due smentite erano giuste. Nemmeno un reclamo presentato dal partito contro un\u0026rsquo;emittente è stato accolto.\nLe parole si ripetono tra persone diverse e anni diversi: «the establishment», «plant», «election interference». Quando è uscito il video di ITV, Reform ha denunciato i giornalisti alla polizia. La News Media Association l\u0026rsquo;ha definito «a sinister approach that stifles public-interest reporting» e ha detto che le accuse non devono essere «used to intimidate journalists or deflect attention from the issues their reporting has exposed»233. L\u0026rsquo;NUJ l\u0026rsquo;ha definita «a thinly-masked Strategic Lawsuit Against Public Participation (SLAPP) style move»234. La polizia dell\u0026rsquo;Hampshire ha detto che stava esaminando il materiale, e la Met ha detto di non essere a conoscenza di denunce corrispondenti233.\nPerché funziona, e perché non basta La ricerca ha un nome per questo. Chiamare falsa una storia vera dà a un politico «the liar\u0026rsquo;s dividend», il dividendo del bugiardo235. Uno studio su oltre 15.000 persone pubblicato sull\u0026rsquo;American Political Science Review ha trovato che le false accuse di disinformazione aumentano il sostegno a un politico, e più di quanto farebbero il silenzio o le scuse. Ha anche trovato che la tattica fallisce in gran parte contro le prove video236. Il che forse spiega perché la risposta al video di ITV è stata la polizia.\nLo standard che chiunque ricopra una carica pubblica sottoscrive sono i Seven Principles of Public Life. Responsabilità: chi ricopre una carica pubblica «must submit themselves to the scrutiny necessary to ensure this». Onestà: «should be truthful»237. Il codice di condotta dei parlamentari è costruito su questi principi238. Chiamare qualcosa una diffamazione non è una violazione su cui il commissario per gli standard possa intervenire, e non dico che lo sia. Dico che è l\u0026rsquo;opposto di sottoporsi al controllo.\nFarage sa com\u0026rsquo;è una vera smentita, perché ne ha fatta una. Quando la BBC ha sbagliato la sua storia su Coutts, lui si è fatto dare il suo fascicolo dalla banca, l\u0026rsquo;ha dimostrato, e la BBC si è scusata231. È così che si risponde a una diffamazione: con le prove. La Society of Editors l\u0026rsquo;ha detto in una frase: «If a council believes a report is inaccurate, it should challenge it with evidence.»239 Quando le prove ci sono, vengono prodotte. Quando non ci sono, ti becchi «establishment».\nPerché li vedi così tanto Reform ha cinque deputati su 650. Dalla televisione non lo diresti.\nLa Cardiff University conta cosa coprono i principali telegiornali della sera. I loro numeri240241242:\nMisura Reform Confronto Edizioni del BBC News at Ten in cui compare il partito, primo semestre 2025 25% Lib Dem, 72 deputati: 17% Tema principale di un servizio, BBC e ITV alle dieci, 2025 69 servizi Conservatori 45, Lib Dem 14, Verdi 4 Partito d\u0026rsquo;opposizione più citato, settembre 2025 Reform, 37 Conservatori, l\u0026rsquo;opposizione ufficiale, 25 Farage all\u0026rsquo;ITV News at Ten, settembre 2025 49 citazioni Badenoch 33, Davey 10 La ragione della BBC sono i sondaggi242. Va bene. Allora applicala a tutti allo stesso modo. Gli stessi ricercatori hanno trovato che i Verdi sono passati dall'11% al 17% nei sondaggi nel secondo semestre 2025, e la loro copertura non si è mossa242. Una regola che solleva sempre e solo un partito non è una regola.\nE quello che passa in quel tempo d\u0026rsquo;antenna è il messaggio, non il curriculum. La maggior parte delle cose emerse in questo articolo è stata riportata da qualche parte, alcune dalla BBC. Quello che nessuno in onda fa è sommarle. La difesa abituale è l\u0026rsquo;imparzialità, e le regole della BBC stessa la smontano: «Achieving impartiality does not preclude making evidence-based judgements or making an editorial judgement to focus scrutiny on a particular position», e «false equivalence does not achieve impartiality and should be avoided»243. Fai lo stesso controllo su ogni partito, con le stesse colonne e lo stesso standard di prova, e quella è imparzialità. Non farlo su nessuno non è neutralità. Lascia solo il curriculum non raccontato. E le persone lasciate disinformate sono proprio quelle su cui si regge il metodo di Reform, gli elettori che le servono facili da guidare, che ogni sera si prendono lo slogan e mai le prove.\nE non è nemmeno una novità. Farage è stato a Question Time 38 volte, quasi tutte prima ancora di sedere ai Comuni. Ogni nome sopra di lui nella classifica di tutti i tempi è un deputato o un ministro di lungo corso, e con 1,9 presenze l\u0026rsquo;anno ha la frequenza più alta di tutti244245.\nUn canale di propaganda tutto suo Poi c\u0026rsquo;è GB News, posseduta e pagata in gran parte da Dubai. Ne parlo più sotto. Andrew Neil, che ha aiutato a fondarla, dice che ora fa per Reform la parte che Fox News fa per Trump: «they have turned GB News into the Reform channel»199.\nEsponente di Reform Cosa gli dà GB News Nigel Farage, leader un programma tutto suo, 585.000 sterline di compensi da luglio 2024 a dicembre 2025, e la sua società possiede quasi mezzo milione di azioni di GB News199 Lee Anderson, deputato 100.000 sterline l\u0026rsquo;anno oltre allo stipendio da deputato per un programma il venerdì sera199 Richard Tice, vice leader conduttore199 Matt Goodwin conduttore, che ha condotto un programma sull\u0026rsquo;elezione suppletiva di Gorton and Denton quattro giorni prima di essere annunciato come candidato di Reform in quella stessa elezione199 Ben Habib e Rupert Lowe, dopo aver lasciato Reform gli inviti si sono fermati appena ciascuno ha fondato un partito suo246 The New World ha messo 20 giornalisti esperti davanti a ore della sua programmazione, due per programma, e ha trovato «a systemic use of Reform politicians, candidates and supporters»199. Uno dei revisori ha definito il programma di Farage stesso «Farage propaganda dressed up as a panel show»199.\nQuindi chiamiamolo per quello che è. Un canale che paga il leader del partito, il suo vice e uno dei suoi deputati per condurre, invita i suoi candidati, scarica chi se ne va, e mette un solo ospite di parere opposto per parlargli sopra non è un canale di notizie con una tendenza. È un canale di propaganda di Reform con una licenza di trasmissione. È la mia opinione, e le prove sono nella tabella qui sopra.\nPosseduta e pagata da Dubai Reform parla della Gran Bretagna ai britannici. Guarda chi possiede il canale che la vende.\nProprietario di All Perspectives Ltd, la capogruppo di GB News Dove Quota Legatum Limited, una società d\u0026rsquo;investimento privata fondata dal neozelandese Christopher Chandler Dubai, Emirati Arabi Uniti circa il 40%197247 Sir Paul Marshall, gestore di hedge fund, proprietario anche di The Spectator e UnHerd Londra circa il 40%197 Dirigenti, redattori e conduttori, tra cui la società di Farage il resto197199 Il presidente di GB News, Alan McCormick, è socio di Legatum197. La maggior parte dei 60 milioni di sterline raccolti per lanciare il canale è venuta da Legatum, Marshall e Discovery197.\nE non ha mai fatto un utile. Ha perso 22 milioni di sterline nell\u0026rsquo;anno fino a maggio 2025, su ricavi di 26,2 milioni, e 131 milioni dal lancio nel 2021. I proprietari hanno messo altri 17,7 milioni quell\u0026rsquo;anno per tenerlo in onda198248. Nessuna azienda gira in perdita così per cinque anni per fare soldi. Gira per quello che compra.\nOra mettilo accanto alla legge sulle donazioni ai partiti. Una società può dare soldi a un partito politico britannico solo se è registrata ai sensi del Companies Act, costituita nel Regno Unito e svolge attività nel Regno Unito249. Legatum non è niente di tutto questo. Non potrebbe dare a Reform nemmeno un penny.\nNon ne ha bisogno. I soldi di una società di Dubai coprono le perdite di un canale che paga il leader di Reform, il suo vice e uno dei suoi deputati, manda in onda i suoi candidati, e passa le serate sui temi di Reform. Niente di tutto questo è una donazione, quindi niente compare nel registro della Electoral Commission. Farage dichiara i suoi compensi come redditi, ed è tutto quello che il sistema vede mai4.\nNon sto dicendo che qualcuno ricicli denaro. È un reato, nessuno ne è stato accusato, e non lo dirò. Ma un percorso che permette a soldi dall\u0026rsquo;estero di arrivare al leader di un partito e al suo messaggio, senza nessuna donazione nel registro, è esattamente il tipo di cosa che andrebbe indagata e verificata, se non altro per esserne sicuri. Quello che sto dicendo è che l\u0026rsquo;effetto è lo stesso, ed è legale. I soldi che la legge ferma alla porta d\u0026rsquo;ingresso di un partito arrivano al leader del partito e al messaggio del partito attraverso un canale televisivo, e le regole sulle donazioni non li vedono mai. La presidente della Electoral Commission ha detto ai parlamentari che le regole sono deboli e superate246. Ecco com\u0026rsquo;è fatto «deboli e superate».\nPosso chiedere perché un partito che vuole limitare chi conta come britannico, e vuole regole su chi può restare, non ha problemi a farsi portare in onda da soldi del Golfo? I due più grandi donatori si sono costruiti la vita in Thailandia e a Hong Kong. Due quinti dell\u0026rsquo;emittente sono posseduti a Dubai. Gli elettori a cui si dice di mettere la Gran Bretagna al primo posto sono le uniche persone della catena che non hanno voce su niente di tutto questo.\nE l\u0026rsquo;autorità di vigilanza? L\u0026rsquo;Ofcom ha multato GB News per 100.000 sterline nell\u0026rsquo;ottobre 2024 per aver dato a Rishi Sunak una tribuna senza contraddittorio prima di un\u0026rsquo;elezione, citando «the seriousness and repeated nature of this breach»250. GB News ha portato l\u0026rsquo;Ofcom davanti all\u0026rsquo;High Court per i programmi di Jacob Rees-Mogg e ha vinto nel febbraio 2025251. Dopo di che, l\u0026rsquo;Ofcom ha lasciato cadere la sua indagine sull\u0026rsquo;uso di Farage da parte di GB News246. Quindi il leader di un partito in testa ai sondaggi è pagato per condurre il notiziario, su un canale finanziato in parte da Dubai, e nessuno controlla.\nMettilo accanto al resto di questo articolo. I soldi del partito vengono dall\u0026rsquo;estero. Il reddito del suo leader viene da un canale finanziato in parte dall\u0026rsquo;estero. Il canale manda in onda il partito, e la BBC segue i sondaggi che quel tempo d\u0026rsquo;antenna aiuta a costruire. Nessuno deve dare un ordine perché tutto questo funzioni.\nLo stesso copione Niente di tutto questo è nuovo. È il copione del mondo MAGA, e Reform lo segue pagina per pagina.\nL\u0026rsquo;autore di quel copione ci ha detto per chi è. Festeggiando la vittoria in Nevada nel febbraio 2016, Donald Trump ha passato in rassegna i gruppi che lo avevano votato: «We won with highly educated. We won with poorly educated.» Poi: «I love the poorly educated!»252 Otto anni dopo lo studio del Pew Research Center sugli elettori verificati ha trovato che gli elettori senza laurea lo hanno sostenuto con 14 punti di vantaggio, mentre i laureati hanno sostenuto Harris con 16253.\nLa Gran Bretagna non è diversa. Alle elezioni del 2024 Reform ha preso il 23% dei voti tra le persone il cui titolo di studio più alto sono i GCSE o meno, contro l'8% tra i laureati254. Due anni dopo è in testa nel primo gruppo con il 40%, ed è quinta tra i laureati con il 14%255.\nQuindi lo dico chiaro. Il voto di Reform è costruito sulle persone con meno istruzione formale, e il suo metodo dipende dal fatto che siano facili da guidare. Un numero che non controlleranno. Un capro espiatorio consegnato già pronto. Il grido di diffamazione nel momento in cui qualcuno controlla. Non è un caso di chi si trova ad apprezzare Farage. È il modello di business, lo stesso che Trump ha detto ad alta voce, e chi lo gestisce conta sul fatto che le persone che sta usando non leggano mai oltre il titolo.\nLa mossa MAGA La versione di Reform La stampa è «the enemy of the American People»256 giornalisti denunciati alla polizia, cronisti esclusi dal congresso233257 Ogni inchiesta è «fake news» ogni inchiesta è una «smear», una «hoax», un «plant»193201 «Drain the swamp» mentre lo finanziano i miliardari «the establishment» mentre lo finanziano due miliardari delle cripto37 Una grazia per un boss delle cripto il boss delle cripto che finanzia Reform ha quella grazia66 Le cripto come causa «When it comes to your industry… then I am your champion»69 Un numero grosso, non importa se torna 234 miliardi, poi 622 miliardi, poi 154 miliardi con il metodo del Tesoro stesso51 Farage ha parlato a quindici eventi legati a Trump da quando è stato eletto nel luglio 2024, secondo il conteggio di DeSmog, e ha detto alla nuova sezione britannica del CPAC nel luglio 2026 «I\u0026rsquo;ve spoken at over 10 CPACs in America»157. Ecco l\u0026rsquo;elenco:\nQuando Dove Cos\u0026rsquo;è Luglio 2024 Milwaukee la Republican National Convention Agosto 2024 Arizona Arizona Liberty Network Settembre 2024 Chicago la raccolta fondi per il 40º anniversario dell\u0026rsquo;Heartland Institute, come oratore principale Novembre 2024 Pennsylvania un comizio della campagna di Trump Dicembre 2024 Londra il lancio di Heartland UK/EU, guidata da Lois Perry di RFOI Dicembre 2024 New York New York Young Republicans Club Febbraio 2025 Londra Alliance for Responsible Citizenship Febbraio 2025 Washington CPAC Giugno 2025 Londra un panel di Heartland sull\u0026rsquo;energia a Westminster Settembre 2025 Washington National Conservatism, insieme a Russell Vought, uno degli architetti del Project 2025 Ottobre 2025 Michigan Hillsdale College Marzo 2026 Washington Club for Growth, che ha raccolto 163 milioni di dollari per i candidati repubblicani nel 2024 Giugno 2026 Londra Alliance for Responsible Citizenship Luglio 2026 Londra CPAC Great Britain, come ospite principale Luglio 2026 Washington un evento per l\u0026rsquo;Independence Day, «Redcoats and Rebels» Aggiungi l\u0026rsquo;insediamento e due incontri a Mar-a-Lago, a cui ha partecipato senza parlare157. Più o meno negli stessi due anni ha nominato il suo collegio, Clacton, ai Comuni sei volte, e ha usato un quarto dei suoi interventi lì per sostenere gli attacchi di Trump alla politica del governo britannico157.\nDiversi di quegli organizzatori hanno contribuito a scrivere il Project 2025, il progetto per il secondo mandato di Trump. Heartland è uno di loro. Ha anche organizzato un panel al congresso di Reform del 2025 e dice di consigliare il partito sulla politica climatica157. E non è solo Farage. DeSmog elenca il responsabile delle politiche di Reform James Orr, il tesoriere Nick Candy, i deputati Danny Kruger e Suella Braverman, Zia Yusuf e Matt Goodwin come persone che hanno tutte parlato per gruppi MAGA. Orr presiede il ramo britannico della Edmund Burke Foundation, che organizza le conferenze National Conservatism, e Yusuf ha parlato alla Heritage Foundation, l\u0026rsquo;ente che ha riunito il Project 2025, promettendo «mass deportations» in stile Trump157.\nPiù di dieci CPAC nella sua carriera. Sei citazioni del suo collegio da quando è stato eletto. Non ci è andato per il clima. Ci è andato a imparare il mestiere.\nEcco come funziona il mestiere. Trova persone che sono state tradite, e hanno tutto il diritto di essere arrabbiate. Dagli qualcuno da incolpare che è più povero di loro. Dagli un numero. Quando il numero crolla, dagliene un altro. Quando qualcuno controlla, chiamala diffamazione e chiama chi controlla l\u0026rsquo;establishment. E manda il conto alle stesse persone a cui hai detto che stavi combattendo per loro. In America ha funzionato. Reform scommette che funzioni qui, e la scommessa è che tu non legga mai un documento programmatico, un deposito di Companies House o un registro degli interessi.\nQuesto articolo è la lettura.\nSupererebbero il loro stesso test di buona condotta? Reform vuole che ogni migrante residente superi un test di «good character» per continuare a vivere qui2. L\u0026rsquo;Home Office ne ha già uno, per chi chiede di diventare britannico, e le sue linee guida per i funzionari spiegano cosa lo fa fallire258. Quindi ecco un esperimento mentale. Facciamo passare gli esponenti di Reform stessa per il test dell\u0026rsquo;Home Office stesso.\nIl test dell\u0026rsquo;Home Office Cosa dicono le linee guida Cosa contengono gli atti Criminalità rifiutare se qualcuno «not respected or are not prepared to abide by the law», per esempio con una condanna258 l\u0026rsquo;ex leader di Reform in Galles, dieci anni e mezzo per corruzione154 Notorietà comprende il «publicly expressing unsavoury views on a subject such as race, religion or sexuality»258 «46% of British Muslims support Hamas»213; «I didn\u0026rsquo;t see another white face»142; «adverts full of black people»209 Franchezza «Concealment of information or lack of frankness will raise doubt about, and therefore reflect poorly on, the applicant\u0026rsquo;s character»258 un regalo da 5 milioni non dichiarato3; 17 registrazioni in ritardo100; due anni di sostegno di Arron Banks dichiarati dopo che era finito148 Rispetto della legge come sopra258 una decisione da ministro dell\u0026rsquo;Edilizia abitativa ammessa come «unlawful by reason of apparent bias»139 Solidità finanziaria «they have failed to pay taxes for which they were liable»258 nessun accertamento dell\u0026rsquo;HMRC contro Tice, quindi su questo passa Un funzionario deve essere ragionevole, e le linee guida lo dicono258. Non ogni riga affonderebbe da sola una domanda, e questi sono cittadini britannici che non sosterranno mai il test. È proprio questo il punto. Stanno scrivendo un test di buona condotta per infermiere e ingegneri che i loro stessi dirigenti farebbero fatica a superare, e non dovranno mai sostenerlo.\nNessuna accusa non è un certificato di buona salute Ogni volta che una di queste storie si spegne, qualcuno dice «be\u0026rsquo;, nessuno è stato incriminato». Quindi cerchiamo di essere precisi su cosa significa.\nUna decisione di non procedere non è un accertamento di innocenza. Il Crown Prosecution Service formula un\u0026rsquo;accusa solo quando ci sono prove sufficienti per una prospettiva realistica di condanna e l\u0026rsquo;azione penale è nell\u0026rsquo;interesse pubblico259. Un caso che non supera quel test non è stato processato. Nessuno è stato assolto. Semplicemente non è mai stato portato davanti a un tribunale.\nE la maggior parte di quello che c\u0026rsquo;è in questo articolo non è ancora arrivata a quel punto. L\u0026rsquo;indagine della Met sulle donazioni è aperta. Due persone sono state interrogate con le garanzie di legge e non è stata presa alcuna decisione sull\u0026rsquo;incriminazione125. Le indagini sugli standard su Farage e Tice sono aperte76. La donazione a Jenrick è sotto indagine141. Gibbins va a processo il 9 novembre212.\nMa una parte è arrivata davanti a un tribunale o a un\u0026rsquo;autorità, ed è la parte che nessuno può chiamare diffamazione. Metti gli accertamenti fianco a fianco:\nChi Rapporto con Reform Accertamento Nathan Gill ha guidato Reform in Galles l\u0026rsquo;Old Bailey, novembre 2025: condannato a dieci anni e mezzo per corruzione, soldi riconducibili a un amico di Putin154 Ben Delo secondo donatore per importo tribunale federale statunitense, 2022: si è dichiarato colpevole di non aver deliberatamente effettuato i controlli antiriciclaggio; poi graziato da Trump6466 BitMEX la piattaforma cofondata da Delo Dipartimento di Giustizia statunitense, gennaio 2025: multata per 100 milioni di dollari ai sensi del Bank Secrecy Act65 Tether posseduta al 12% dal più grande donatore procuratrice generale di New York e CFTC, 2021: un accordo da 18,5 milioni di dollari, e una multa da 41 milioni per aver dichiarato in modo inesatto le sue riserve6061 Crispin Odey ha dato a Reform 10.000 sterline nel 2023 la FCA e l\u0026rsquo;Upper Tribunal, settembre 2026: interdetto dai servizi finanziari come «unfit» e multato per 1,53 milioni di sterline; la FCA non si è pronunciata sulle accuse alla base, che lui nega260 Reform UK il partito stesso la Electoral Commission, settembre 2022: reati legati al rendiconto delle spese elettorali del 2019; nessuna sanzione261 Robert Jenrick la scelta di Reform per cancelliere l\u0026rsquo;High Court, 2020: ha ammesso che la sua decisione su Westferry era «unlawful by reason of apparent bias»139 Richard Tice vice leader il commissario per gli standard, ottobre 2026: ha violato il codice dei parlamentari non dichiarando il viaggio in Israele pagato da RFOI in un dibattito sull\u0026rsquo;influenza filoisraeliana; giudicato «inadvertent»185 Andy Osborn presidente di Reform per il North East Cambridgeshire, poi consigliere di contea Westminster Magistrates\u0026rsquo; Court, aprile 2026: condannato ai sensi del Representation of the People Act per aver pubblicato una dichiarazione falsa su un candidato rivale, multato e dichiarato ineleggibile262 Kent County Council guidato da Reform dal 2025 l\u0026rsquo;Information Commissioner, luglio 2026: ha violato la legge sulla libertà d\u0026rsquo;informazione sugli atti della sua campagna di «efficiency», e gli è stato ordinato di rispondere di nuovo263 Da un leader gallese all\u0026rsquo;elenco dei donatori fino ai conti del partito stesso, c\u0026rsquo;è un accertamento a ogni livello. Uno di questi è sfortuna. Dieci sono un tipo.\nNon ti dirò che qualcuno è colpevole di qualcosa che un tribunale non ha accertato. Ti dirò cosa penso, e tu puoi pesarlo. Un partito che risponde a ogni domanda con «diffamazione», si assolve tramite il suo stesso avvocato mentre la polizia sta ancora indagando, riammette i razzisti ed espelle i critici non ha dimostrato di non avere niente da chiarire. Ha dimostrato che non ha intenzione di farlo.\nPer chi è davvero Reform? Non per te. Non lo è mai stato.\nReform è una truffa, e nemmeno furba. Dice ai lavoratori che è il loro partito, poi scrive un piano che toglie lo status di residente all\u0026rsquo;infermiera che paga le tasse qui da dieci anni, carica tutto il taglio dei sussidi sulle persone in età da lavoro, e fissa un\u0026rsquo;asticella di stipendio che i suoi stessi donatori non dovranno mai superare. Questo non è difendere i lavoratori. È usarli.\nSegui i soldi e vanno in una sola direzione. Entrano da un cittadino thailandese a Bangkok, e da un boss delle cripto che ha ammesso di aver gestito deliberatamente una piattaforma che il governo statunitense ha chiamato «in effect a money laundering platform», ha avuto la grazia da Trump, e ha cambiato paese per aggirare un tetto alle donazioni. Salgono a un leader che si è intascato 5 milioni di sterline mai dichiarati, e 135.000 sterline per quattro ore a piazzare oro. Quattro ore. Nessun mestiere, nessun prodotto, nessuna fatica. Solo chiacchiere, e molte di queste fesserie, a una tariffa che l\u0026rsquo;infermiera che lui vuole su un visto rinnovabile impiegherebbe anni a guadagnare. Escono verso ditte gestite da persone interne al partito. E il conto arriva a te.\nQuindi chiediti a chi risponde un partito quando tre sterline su quattro vengono da due uomini che vivono all\u0026rsquo;estero. Non ai suoi iscritti, che non controllano nemmeno la società. Non ai suoi elettori, la cui ricompensa è un visto rinnovabile e un taglio ai sussidi. Risponde alle persone che possono chiudere il rubinetto. Guarda per cosa si batte Reform: nessuna sterlina digitale che minacci Tether, cripto tassate al 10%, il tetto sui donatori all\u0026rsquo;estero ribaltato, agevolazioni fiscali per l\u0026rsquo;industria della difesa. Ognuna di queste cose combacia con quello che possiedono i suoi finanziatori.\nNon posso mostrarti un ordine dato, e non sostengo che ne sia stato dato uno. Non mi serve. Un partito che vive dei soldi di due uomini non ha bisogno che gli si dica cosa vogliono. Lo sa già. È così che appare un burattino quando è fatto bene. Nessuno deve tirare i fili, perché il burattino si muove da solo.\nParlano di riprendere il controllo. Poi l\u0026rsquo;hanno consegnato a un uomo a Bangkok e a un uomo che è tornato a casa solo per poter continuare a pagare, e l\u0026rsquo;hanno fatto per i soldi.\nQueste non sono persone con dei principi. Il suo cancelliere in pectore l\u0026rsquo;anno scorso voleva farlo chiudere. La linea del suo leader su Putin si sposta col vento. Il suo vice ti dice di non dare, «morally or voluntarily», più tasse di quanto la legge ti obbliga. Le persone con dei principi non fanno dietrofront su due piedi ogni volta che un donatore, un sondaggio o un titolo ne ha bisogno. Le persone con un prezzo sì, e il registro ti mostra chi lo sta pagando.\nE guarda il doppio standard, perché è tutto il partito in una tabella.\nCosa Reform pretende da un migrante residente Cosa c\u0026rsquo;è negli atti della cerchia di Reform stessa superare un test di «good character» o perdere il diritto di restare il suo ex leader in Galles, dieci anni e mezzo per aver preso tangenti riconducibili a un amico di Putin nessun precedente penale un amico di Farage, condannato per frode telematica negli Stati Uniti, che ha pagato social media, alloggio e sicurezza intorno alla sua campagna del 2024 e ha prestato alla società di Tice 78.100 sterline rispettare la legge il suo secondo donatore per importo, che ha ammesso di non aver deliberatamente effettuato i controlli antiriciclaggio richiesti dalla legge americana, e se n\u0026rsquo;è andato con la grazia di Trump franchezza con le autorità un leader con 5 milioni non dichiarati e 17 registrazioni in ritardo guadagnare sopra la mediana o andartene un leader pagato 135.000 sterline per quattro ore di chiacchiere Nessuna di quelle persone passerebbe davanti al funzionario che Reform vuole piazzare sopra l\u0026rsquo;infermiera. Una regola per lei. Un\u0026rsquo;altra per loro. Non è una svista. È il progetto.\nE nessuno di loro ha mai dovuto fare un giorno di lavoro onesto e faticoso per produrre qualcosa che puoi prendere in mano. Guarda cosa c\u0026rsquo;è in questo articolo. Il leader è pagato per parlare. Il vice fa i soldi con immobili e dividendi. Il cancelliere in pectore ha fatto carriera in politica. Dai a uno qualsiasi di loro una cassetta degli attrezzi e una settimana in un cantiere, in un reparto o su una linea di produzione, e vedi fin dove li portano le chiacchiere. Eppure sono questi gli uomini che dicono a un\u0026rsquo;assistente domiciliare che deve dimostrare di essersi guadagnata il posto.\nEd ecco la parte che dovrebbe fermarti sul colpo. Tante delle persone che fanno quella fatica, che costruiscono, riparano, sollevano e assistono per vivere, li stanno votando. Il voto più forte di Reform è tra le persone con meno titoli di studio255, quelle che più probabilmente fanno proprio quel lavoro. Gli stanno vendendo un partito da uomini che non saprebbero fare il loro lavoro, pagato da uomini che non vivono qui, che taglierebbe il sostegno e lo status delle persone che lavorano sulla linea accanto a loro. Sono i tacchini che votano per il Natale. E il motivo per cui non vedono il forno è che Reform gli ha dato qualcuno da odiare al suo posto. I musulmani in preghiera. Facce nere in una pubblicità. L\u0026rsquo;infermiera migrante nel reparto accanto. Punta la rabbia della gente contro chi lavora accanto a loro e smettono di guardare chi gli sta svuotando le tasche. È la truffa al suo meglio, e gira sul bigottismo che il partito alimenta apposta. Le persone che deruba sono quelle che lo applaudono.\nE molti di loro prendono proprio i sussidi che Reform taglierebbe. Reform è in testa tra gli elettori disabili264. I collegi che cerca di strappare al Labour sono in misura sproporzionata quelli in cui la gente dipende di più dai sussidi legati alla salute265. Ogni deputato di Reform ha una maggioranza più piccola del numero di persone che ricevono il PIP nel suo stesso collegio266, e il PIP è il sussidio che Reform abolirebbe per un\u0026rsquo;indennità che potrebbe tagliare fuori fino a due terzi di chi lo riceve11. Fanno la fila per votare via il proprio sostegno, e applaudono mentre lo fanno.\nE quando avranno bisogno di assistenza, chi pensa Reform che se ne occuperà? Nel 2023 tre infermieri su dieci dell\u0026rsquo;NHS in Inghilterra e più di un terzo dei medici dell\u0026rsquo;NHS non erano cittadini britannici267. L\u0026rsquo;assistenza sociale ha perso 130.000 lavoratori britannici dal 2020/21268, e per anni il vuoto è stato colmato da persone reclutate all\u0026rsquo;estero per fare quel lavoro, 105.000 nel solo 2023/24269. Sono le persone che Reform rimetterebbe su un visto rinnovabile con un\u0026rsquo;asticella di stipendio sopra la mediana. Espelli chi assiste e l\u0026rsquo;elettore disabile di Reform non perde solo un sussidio. Perde la persona che viene a lavarlo, a dargli da mangiare e a tirarlo fuori dal letto. Nessuno in Reform ha detto chi li sostituirà, perché nessuno in Reform avrà mai bisogno di qualcuno che non può pagarsi.\nChiamiamolo per quello che è. Un partito che riprende i consiglieri a pochi mesi da post razzisti, ne promuove uno a gestire l\u0026rsquo;assistenza sociale per adulti, e butta fuori i suoi critici in pochi giorni, è un partito razzista, qualunque cosa dica il suo ufficio stampa. Gli è stato detto. È stato filmato. Ha scelto.\nE ogni volta che viene beccato, grida alla diffamazione. Sette delle dodici storie che ha chiamato diffamazioni hanno retto. Gridare alla diffamazione per una storia che si rivela vera non è una difesa. È ammettere che non hai nient\u0026rsquo;altro.\nPatriottismo? Ma per favore. Un partito finanziato da Bangkok e Hong Kong, in fila ai comizi MAGA, che butterebbe fuori persone che vivono, lavorano e pagano le tasse qui mentre i miliardari che se ne sono andati decenni fa lo tengono in vita. Quello non è patriottismo. È una bandiera avvolta intorno a un conto in banca.\nE votarlo non è patriottismo nemmeno quello. Un patriota si prende cura delle persone che mandano avanti questo paese, l\u0026rsquo;infermiera, l\u0026rsquo;ingegnere, l\u0026rsquo;assistente domiciliare, qualunque passaporto avessero all\u0026rsquo;inizio. Dare il tuo voto a un partito che li caccerebbe, pagato da uomini che non vivono qui, non è amare il tuo paese. È farsi usare contro di esso. Né gli uomini al vertice né le persone che ce li mettono sono patrioti, qualunque bandiera sventolino.\nQuindi, per chi è davvero Reform? Per i nomi nel registro. Leggilo. Se il tuo non c\u0026rsquo;è, non ci sono nemmeno i tuoi interessi.\nReform UK — The Cost of the Boriswave — documento programmatico del partito, aprile 2026: i titolari di ILR «will have it rescinded», soglie di stipendio «above median UK earnings», «£154 bn if discounted at the 3.5% rate suggested by the HM Treasury Green Book».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nReform UK — Policies (archived 19th October 2026) — «abolish ILR and rescind existing awards», «5 year renewable visa», i pensionati con National Insurance sufficiente mantengono la residenza e la pensione statale.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage was given undisclosed £5m by crypto billionaire in 2024 — 29 aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Members\u0026rsquo; Financial Interests: Nigel Farage — consultato tramite l\u0026rsquo;API degli interessi, 28 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFull Fact — Daily Mail corrects report about Reform UK\u0026rsquo;s disputed immigration savings — 3 ottobre 2025; il think tank ha detto che «the overall cost estimates should no longer be used».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuronews — Reform UK pledges to strip all foreign nationals of benefits — 17 agosto 2026; i sussidi nella lista riservata ai cittadini, compresa la Pension Credit.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIFS — Reform UK\u0026rsquo;s plan for welfare: IFS response (archived) — 17 agosto 2026; «almost entirely from a working-age benefits bill», 1,3 milioni di non cittadini britannici con Universal Credit.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — Benefit expenditure and caseload tables 2026 — Spring Forecast 2026; 2025/26 Gran Bretagna, totale 309,06 mld £, pensionati 177,65 mld £, pensione statale 146,07 mld £, età da lavoro 126,08 mld £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Farage guarantees the triple lock on pensions — 2 aprile 2026, con le precedenti dichiarazioni «open for debate» e «we\u0026rsquo;re not guaranteeing the triple lock».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSTV News — Reform\u0026rsquo;s welfare pledges aim to please pensioners — 17 agosto 2026; «nothing that we talk about today is about pensioners».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Week — Are welfare cuts Reform\u0026rsquo;s stumbling block? — agosto 2026; il PIP sostituito da una «health security allowance» che «could exclude up to two-thirds of current recipients», 20 ore di lavori socialmente utili.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — Universal Credit statistics, 29th April 2013 to 14th May 2026 — «3.1 million people on Universal Credit in any employment … in April 2026, which was 37.7% of all people on Universal Credit».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIFS — Reform UK manifesto: initial reaction (archived) — giugno 2024; citato in The Irish Times, 17th June 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Reform to U-turn on £90 billion tax cuts — ottobre 2025; Tice a Times Radio: «A manifesto is based on a point in time.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIrish News (PA) — Reform could deport 600,000 asylum seekers under immigration plan — 26 agosto 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBig Issue — Reform UK\u0026rsquo;s £50 billion benefits plan — agosto 2026; Tom Waters dell\u0026rsquo;IFS.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEnergy Live News — Reform promises to scrap green levies and VAT on energy bills — 17 marzo 2026, circa 200 £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEnergy Live News — Reform UK say they will cut bills by £150 with levy change — 7 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFull Fact — Did Reform UK break its promises on council tax? — 9 aprile 2026, aggiornato il 6 maggio 2026: 3,94% contro 4,86%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via inkl) — Reform-run Kent council accused of fabricating £40m net zero savings — febbraio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Reform defends savings claim amid questions on scope of welfare plans — 22 settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Jenrick says he wants to put Reform UK out of business — 28 agosto 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform UK names Robert Jenrick as pick for chancellor — 17 febbraio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHuffPost UK — Farage says Putin is his most admired leader — 31 marzo 2014.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Farage calls Putin \u0026lsquo;very bad dude\u0026rsquo; — 16 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — 11694875, persons with significant control — la società nata come The Brexit Party Limited; le quote di Farage e Tice fino al 19 febbraio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Nigel Farage hands ownership of Reform to members, says party — 20 febbraio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Reform UK Party Limited (16260766), filing history — bilancio certificato 2025, depositato il 30 settembre 2026: nota 20 «two members», nota 19 i trasferimenti da 15 £ e 1 £, entrate dalle quote 4.524.299 £, avanzo 7.660.122 £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via inkl) — Not-for-profit appears to own Reform UK despite Farage\u0026rsquo;s \u0026ldquo;democratisation\u0026rdquo; pledge — febbraio 2025; Farage e Zia Yusuf sono i garanti della nuova società.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Reform UK Party Limited (16260766), officers — Farage amministratore dal 18 febbraio 2025; Yusuf dimesso il 5 giugno 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Chairman Farage: how Reform UK operates as a democratic party in name only — 18 agosto 2026; lo statuto adottato nel settembre 2025, articoli 4.3 e 6.20.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Nigel Farage sets up a new private company for Reform UK — febbraio 2025; Habib al FT: «puts Farage\u0026rsquo;s leadership in a virtually unassailable position».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donations register — donazioni e prestiti a Reform UK e Brexit Party (PP7931), consultato il 28 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent (via inkl) — Data reveals the percentage of Reform donors recently based overseas — 27 ottobre 2026; 80% per Reform, 3,57% Conservatori, 0,15% Labour.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChannel 4 News — How a crypto billionaire used \u0026lsquo;gaping loopholes\u0026rsquo; to bankroll Reform — 27 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Christopher Harborne, the mystery billionaire bankrolling Reform UK — 25 aprile 2026; cittadinanza thailandese nel 2011 come Chakrit Sakunkrit.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Second crypto billionaire matches £36m Reform donation — 12 settembre 2026; Tice: «so that the Labour Party can\u0026rsquo;t legislate against it».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSearchlight — Crypto billionaire quits Hong Kong to bankroll Reform UK — 9 aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Cap on donations from overseas electors and ban on crypto donations — 25 marzo 2026; 100.000 sterline l\u0026rsquo;anno.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPolitical Parties and Elections Act 2009, section 10 — «resident, ordinarily resident and domiciled in the United Kingdom», stato «Prospective».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNewcastle City Council — Elections Act 2022: overseas electors — il limite dei 15 anni abolito dal 16 gennaio 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Rycroft Review — countering foreign financial influence and interference in UK politics — marzo 2026, paragrafi 39, da 51 a 53.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCouncil of Europe — Recommendation Rec(2003)4 on common rules against corruption in the funding of political parties — articolo 7, donazioni da donatori stranieri.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInternational IDEA — written submission to the Australian Parliament — 2017; il 63% dei paesi vieta le donazioni straniere ai partiti.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNHPR (NPR/AP) — Lev Parnas sentenced to 20 months — 29 giugno 2022.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCourthouse News — Trump donor sentenced to 12 years for unlawful campaign contributions — 18 febbraio 2021.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nVenice Commission and OSCE/ODIHR — Guidelines on Political Party Regulation, 2nd edition — dicembre 2020, paragrafi 229 e 230.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ngov.ie — Political donations — i cittadini irlandesi all\u0026rsquo;estero possono donare; limite di 3.100 € l\u0026rsquo;anno a un partito.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElections Canada — contribution limits 2026 — solo cittadini e residenti permanenti, 1.775 $.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Federal Election Commission — Foreign nationals — i cittadini statunitensi all\u0026rsquo;estero possono donare entro i limiti federali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEastern Eye — Reform candidate faces backlash over comments on British identity — 28 gennaio 2026, che cita scritti precedenti di Matt Goodwin.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYorkshire Post — Yorkshire-born billionaire Christopher Harborne donates £36m to Reform — 12 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAl Jazeera — Second crypto billionaire donates record sum to Reform UK — 12 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nReason (Volokh Conspiracy) — Cryptocurrency trader\u0026rsquo;s defamation lawsuit against Wall Street Journal can go forward — Delaware Superior Court, dicembre 2024: «Harborne owned 12% of Bitfinex and its sister company Tether».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQinetiQ — Holding(s) in Company, 9th June 2026 — Klear Kite LLC, «ultimately controlled by Christopher Harborne», 14,98%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Major £1.5 billion defence contract with British firm — 23 maggio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — AML Global Payments LLP (OC305889), persons with significant control.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Arms and the £5m man: Christopher Harborne\u0026rsquo;s military empire — 30 agosto 2026, con le risposte di Reform e dei suoi avvocati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — The £1m man: why did Boris Johnson take his donor to Ukraine? — 10 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNew York Attorney General — Bitfinex and Tether settlement — 23 febbraio 2021.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCFTC — Tether and Bitfinex ordered to pay fines — 15 ottobre 2021; riserve «for only 27.6% of the days».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUNODC — Casinos, Money Laundering, Underground Banking, and Transnational Organized Crime in East and Southeast Asia — gennaio 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Cryptocurrency linked to Farage donor used for Russian war effort — 21 novembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Department of Justice, SDNY — Founders of cryptocurrency exchange plead guilty to Bank Secrecy Act violations (archived) — 24 febbraio 2022.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Department of Justice — BitMEX fined $100 million for violating the Bank Secrecy Act — gennaio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Department of Justice — Clemency grants by President Donald J. Trump — Benjamin Delo, 27 marzo 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — British crypto billionaire Ben Delo says he has given £4m to Reform UK — 8 aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage trying to block Britcoin plans — 18 giugno 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Crypto investor donates £9 million to Reform UK after Nigel Farage plugs his company — 4 dicembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Block — Nigel Farage pledges UK bitcoin reserve and crypto capital gains tax cut — maggio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Political donations in cryptocurrency blocked — 25 marzo 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Farage said he would need \u0026lsquo;a million a year\u0026rsquo; to stand as an MP in 2024 — 15 luglio 2026; il regalo datato 5 aprile 2024 dagli avvocati di Harborne.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProtos — Farage says £5m Harborne gift was reward for Brexit — 14 maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Tories ask HMRC to investigate Farage over £5m gift — 22 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Standards watchdog investigation into Nigel Farage\u0026rsquo;s financial gifts — 14 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nParliamentary Commissioner for Standards — allegations currently under investigation — consultato il 28 ottobre 2026: Farage (aperta il 13 maggio 2026, Rule 5), Tice (aperta il 20 agosto 2026, Rule 13).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage questions claim of second standards investigation — 1º settembre 2026; Cottrell «paid for social media work, accommodation and security before the 2024 election».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Farage concluded he faced stitch-up amid probe into £5m gift, Jenrick says — 9 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Reform gains financial backing from another billionaire — luglio 2026, che cita il Telegraph; residenza fiscale svizzera e il trasferimento previsto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 14397 — Sasan Ghandehari, «Accreditation (£50,482.16) cost for me and one staffer», Davos, gennaio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via inkl) — Nigel Farage\u0026rsquo;s trip to Davos hosted and paid for by family trust of billionaire — gennaio 2026; «the $10bn family trust of an Iranian-born billionaire».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donations from Interior Architecture Landscape Ltd — sette donazioni per un totale di 200.000 £, 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Interior Architecture Landscape Ltd (08363406), persons with significant control.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Labour MP calls for Companies House to probe origins of £200,000 gift to Reform — febbraio 2026, che cita il FT e le dichiarazioni dell\u0026rsquo;avvocato di Ghandehari e della ditta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIran International — Reform UK donor had ties to Iran supreme leader-linked foundation, Guardian reports — 23 ottobre 2026, che riporta l\u0026rsquo;inchiesta del Guardian su una sentenza arbitrale francese; Ori Group 49%, Astan Quds Razavi 51%; Orico General Trading; la risposta degli avvocati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Reform UK donations from collapsing firms are \u0026ldquo;not under investigation\u0026rdquo;, says elections watchdog — 3 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Building Limited (12545681), filing history.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donation C0835464 — FK Building Ltd, 100.000 £, 8 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Group Limited (07732053) — in amministrazione controllata; lo stesso per FK Construction (09890502) e FK Facades (02874877).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBuilding — More than 50 jobs saved after administrators appointed at facades firm FK Group — 54 posti di lavoro trasferiti a Keenan Holdings.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Keenan Holdings Limited (11920973), persons with significant control — Deborah Ruth Keenan, 75% o più.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Building Limited, insolvency — liquidazione volontaria dei creditori dal 6 luglio 2026; situazione patrimoniale: ammanco 3.149.939 £, HMRC 25.618 £ e 384.029 £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Resolv Ltd (08222605), persons with significant control — FK Group cessata, notificata FKR Group Limited, 16 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FKR Group Limited (17302053) — costituita il 25 giugno 2026; Francis Anthony Keenan, 75% o più.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Reform UK accounts raise fresh questions about origins of Richard Tice donations — 7 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Nigel Farage declares £270,000 payment for promoting gold bullion.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Gold firm that employs Nigel Farage predicts unrest and violence under a Reform government — 25 agosto 2026; 685.500 sterline dal dicembre 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage uses private company to pay less tax on GB News earnings — 5 settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Thorn In The Side Ltd (07650770) — bilancio al 31 maggio 2025: patrimonio netto 3.144.967 £; nota 8, uno studio affittato da un amministratore a 10.000 £ l\u0026rsquo;anno.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nParliamentary Commissioner for Standards — rectification, Mr Nigel Farage MP — 20 gennaio 2026; diciassette violazioni della Rule 5, «inadvertent».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Reform UK paid £440,000 to firms linked to party insiders — 14 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — spending search — rendiconti delle spese elettorali di Reform UK, sommati per fornitore: 440.571,23 £ su cinque ditte; la donazione da 50.000 £ di Jupiter è la C0836534.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13453 — BTC Inc, 7.410 £, ricevute il 22 settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProtos — Reform UK pulls crypto bill from website — rimossa il 30 maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13771 — Blockworks Inc, 30.000 £, 2 ore, 13 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13773 — Zebu Group Ltd, 20.000 £, 2 ore, 22 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Nigel Farage took £50,000 from crypto firms, then said he was not aware of the industry funding his party — 22 maggio 2026; la risposta a Reuters riguardava i donatori del partito, non i suoi compensi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 15047 — «Shares in Stack BTC PLC that are wholly owned by Thorn in the Side Ltd.»; vedi anche la voce 15050.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nStack BTC plc — Strategic investment by Nigel Farage MP (Investegate) — l\u0026rsquo;annuncio della società e la citazione di Farage.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage Cameo videos backed cryptocurrencies that collapsed in value — 19 marzo 2026; la risposta del portavoce.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Attorney, Southern District of New York — Founder of Celsius sentenced to 12 years for fraud and market manipulation — 8 maggio 2025; «At times, they used customer deposits to fund these market purchases.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUNODC — Inflection Point (2025) — perdite «up to an estimated US $37 billion» nell\u0026rsquo;Asia orientale e sudorientale.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTether — freezes and law enforcement support — dati di Tether stessa: oltre 5 miliardi di dollari congelati, più di 340 forze dell\u0026rsquo;ordine.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Rycroft Review (PDF) — «there is a risk that cryptoassets are used as the vehicle to channel foreign money into the political system in the UK»; raccomandazione 3, una moratoria.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — The elections watchdog doesn\u0026rsquo;t know where Reform UK\u0026rsquo;s crypto donations are coming from — 16 marzo 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCity of London Police — UK victims lost £2.4 million every day to investment fraud in 2025 — aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPolice Professional — investment fraud figures for 2024 — cripto «66 per cent of all reports»; «Those aged 55-64 suffered the greatest financial losses».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFCA — Crypto basics — «you should be prepared to lose all your money».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — CLS Holdings plc (02714781), officers — Tice amministratore dall'11 maggio 2010 al 7 aprile 2014.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Quidnet REIT Ltd (09718143), filing history — bilancio 2025, depositato il 29 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Members\u0026rsquo; Financial Interests: Richard Tice — compenso di Quidnet REIT, partecipazioni azionarie.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Richard Tice defends company\u0026rsquo;s tax arrangements — 15 marzo 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Tice company did not withhold tax on dividends — 12 aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Britain Means Business Ltd (10893794) — ex Leave Means Leave Ltd; bilancio da microimpresa, patrimonio netto 28.864 £ (2023) e 10.479 £ (2024).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSTV News (ITV/PA) — Met Police investigate donations by Richard Tice company to Reform UK — 26 luglio 2026; segnalazione della Electoral Commission nel febbraio 2025, due persone interrogate con le garanzie di legge.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Police investigate £500,000 in donations to Reform UK from Richard Tice firm.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nShropshire Star (PA) — Tice claims politically motivated smear amid scrutiny of Reform UK finances — luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Leave.EU Group Ltd (09763501), officers — Tice amministratore dal 29 gennaio 2016 al 25 maggio 2017.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFull Fact — EU referendum Electoral Commission fines — la multa da 70.000 £ a Leave.EU ridotta in appello a 66.000 £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Richard Tice, Reform loan and George Cottrell: standards watchdog — 29 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Richard Tice, appointments — co-amministratori nelle società Quidnet, Enjoyouretirement e Galecroft.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Standards watchdog investigating Reform\u0026rsquo;s Richard Tice — 3 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Robert Jenrick rules out Tory pact with Reform UK — 25 aprile 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Robert Jenrick defects to Reform after Tory sacking — 15 gennaio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Robert Jenrick joins Reform UK — 15 gennaio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Read in full: Robert Jenrick\u0026rsquo;s speech — gennaio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Jenrick releases documents on Westferry decision — 24 giugno 2020.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Richard Desmond housing project unlawfully approved — 27 maggio 2020.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Westferry: Jenrick admits decision was unlawful — 11 giugno 2020; «unlawful by reason of apparent bias», la donazione da 12.000 £ di Desmond.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Westferry approval to be quashed — 27 maggio 2020.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Police investigate £37,500 donation to Jenrick leadership campaign — 8 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Jenrick complained of not seeing another white face in Handsworth — 6 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — Robert Jenrick on protester at Reform conference — 6 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHuffPost UK — Jenrick says Reform supporter who attacked woman should get a medal — 10 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — Statistics Authority on Jenrick\u0026rsquo;s modern slavery claim — 6 luglio 2023.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Observer — Ukip leader Nigel Farage boasts of his £2m in expenses — 24 maggio 2009.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage\u0026rsquo;s EU salary docked over claim he misspent public funds — 12 gennaio 2018; la classifica di VoteWatch e la risposta dell\u0026rsquo;EFDD.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuropean Parliament — Declaration of financial interests, Nigel Farage, revision 4 — datata 1º luglio 2019.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — EU authorities asked to investigate Farage over Arron Banks gifts — 19 maggio 2019.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEU General Court — Case T-564/11, Farage v Parliament and Buzek — ordinanza del 5 settembre 2012.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — Farage referred to advisory committee over Banks support — 21 maggio 2019.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCourt of Justice of the EU — press release 138/19, Case T-48/17 ADDE v Parliament — 7 novembre 2019; la decisione del 2016 annullata per mancanza di imparzialità.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEU General Court — Case T-118/17, IDDE v Parliament — sentenza dell'8 febbraio 2018, punti 6, 9 e 55.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJudiciary of England and Wales — R v Nathan Gill, sentencing remarks — 21 novembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAl Jazeera — Ex-leader of Reform UK in Wales jailed for 10 years over pro-Russia bribes — 21 novembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Nigel Farage says the West provoked Russia to invade Ukraine — 21 giugno 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Nigel Farage has spoken at 15 Donald Trump and MAGA events since the 2024 election — 20 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS House Judiciary Committee — Europe\u0026rsquo;s Threat to American Speech and Innovation — 3 settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGazette — Clacton MP meets Donald Trump — 4 settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nITV News (archived) — Elon Musk says Nigel Farage doesn\u0026rsquo;t have what it takes to lead Reform — 5 gennaio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donation V0598867 — da Christopher Harborne a Nigel Farage, 27.616,76 £, accettata il 17 gennaio 2025, «Second inauguration of Donald Trump».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13939 — Bassim Haidar, «Flights for me (£19,072.01) and two staffers (£35,849.01)», Stati Uniti, dal 6 al 9 novembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Nigel Farage\u0026rsquo;s donor-funded flights to Donald Trump — 26 gennaio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 14207 — Emirati, dal 6 all'8 dicembre 2025, «To attend the F1 and for meetings»; governo di Abu Dhabi 1.000 £, Abu Dhabi F1 9.000 £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13577 — Richard Tice, Israele, dal 26 al 30 settembre 2025, donatore RFOI Ltd, 6.250 £, «Education and meetings with President and Foreign Minister».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLondon Assembly — Alex Wilson, gifts and hospitality — «Reform UK Delegation to Israel including flights, accommodation and meals», Ministero degli Esteri israeliano, 4.861,27 £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLancashire Lead — Reform UK\u0026rsquo;s Lancashire leader takes Israel trip, cancelled meetings — 30 novembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNovara Media — Israel spent £50k on lobbying trips for Reform — 9 luglio 2026, che cita Declassified UK; delegati e itinerario.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Kemi Badenoch and Nigel Farage to speak at climate denial festival — febbraio 2025, il programma della conferenza ARC.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Revealed: the Trump donors, Reform-backing billionaires and oil companies funding the Alliance for Responsible Citizenship — 24 giugno 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Block — Lutnick\u0026rsquo;s Cantor Fitzgerald negotiated a 5% ownership stake in Tether, WSJ.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFortune — Tether names Bo Hines to run its US stablecoin — 12 settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — RFOI Limited (16521255), persons with significant control — e officers; codice SIC 70210, pubbliche relazioni.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHenry Jackson Society — Henry Jackson Society appoints Jason Pearlman as new Deputy Director — 2 marzo 2018; «three and a half years as international media adviser to Israel\u0026rsquo;s President Reuven Rivlin».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJewish News — Jason Pearlman steps down as President\u0026rsquo;s media adviser.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJewish News — Nigel Farage\u0026rsquo;s party launching Reform Jewish Alliance and Friends of Israel groups — febbraio 2026; Farage su Pearlman, «a real coup».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCity AM — Top foreign policy analyst and Tory councillor jumps ship to Reform — novembre 2025; Mendoza, capo della Henry Jackson Society, entra in Reform «as its chief adviser on global affairs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFitzrovia News — Second Westminster Conservative councillor defects to Reform UK — 20 novembre 2025; Mendoza «co-founder and executive director»; Farage: «an excellent addition».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Lois Perry — lancio di Heartland Institute UK/Europe, dicembre 2024, Farage «special guest of honour».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — Lois Perry — leader dell\u0026rsquo;UKIP da maggio a giugno 2024; direttrice esecutiva di Heartland Institute UK/EU.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Tamares Real Estate Investments (UK) Limited (02792424), officers — Roy Zabludowicz, nato nel marzo 1990, amministratore dal 18 giugno 2021, insieme a Chaim Zabludowicz.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — Poju Zabludowicz — Tamares, BICOM, Soltam, donazioni ai Conservatori.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeclassified UK — Friends of Israel groups have funded 56 trips for British politicians — 26 novembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJTA — Reform UK deputy leader faces inquiry over Israel visit — 4 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nParliamentary Commissioner for Standards — Mr Richard Tice MP, rectification, Rule 6 — pubblicato il 27 ottobre 2026; «the failure to declare this interest was a breach of Rule 6».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — John Healey asks Nigel Farage if any of gift may have come from Russia-linked profits — 22 maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUnearthed (Greenpeace) — Christopher Harborne, jet fuel and Russian, Iranian oil — 1º luglio 2026, con The Times.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Richard Tice stayed with Tory donor Lubov Chernukhin — 10 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNZ Herald — False Russian spy claim against top NZ businessman Christopher Chandler — e Law.com, il verdetto da 8.000.001 $, 22 ottobre 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCNN — Reform UK faces criminal investigation — 9 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAl Jazeera — Why is Farage\u0026rsquo;s Reform accused of violating UK foreign funding rules? — 4 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Irish Times — Nigel Farage aides step down after undercover report — 4 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuronews — Reform UK reported to police over claims of illegal donations — 4 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChannel 4 News — Met Police launch criminal investigation into Reform UK donations — 9 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHeart (Global) — Reform UK internal inquiry clears own adviser — 7 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Farage on foreign funding claims — settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — GB News — «Marshall and Legatum jointly own the company through All Perspectives Ltd., in which they each own around 40%»; il presidente Alan McCormick «a partner at Legatum»; il round di lancio da 60 milioni di sterline.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — GB News reveals £22 million in new losses — marzo 2026; perdita di 22 mln £ nel 2024/25, oltre 130 mln £ dal lancio, altri 17,7 mln £ da All Perspectives, ricavi 26,2 mln £.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe New World — The GB News Files (PDF) — marzo 2026; 20 revisori; i 585.000 £ e le azioni di Farage, i 100.000 £ di Anderson, il programma di Goodwin sulla suppletiva, Andrew Neil.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform canvasser filmed by Channel 4 — 27 giugno 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHuffPost UK — Reform activists did not commit a criminal offence, police say — 3 luglio 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Ofcom will not investigate Channel 4 over Reform UK undercover sting — 3 luglio 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Farage claims bad apples are gone from Reform UK — 30 giugno 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nITV News (archived) — Inside Reform: councillors\u0026rsquo; extreme and racist views on camera — 14 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Undercover footage shows Reform activist claiming Muslims cannot be British — 17 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Reform UK should take immediate action against racism, Burnham says — ottobre 2026, con la dichiarazione di Reform.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star — Reform UK kick Staffordshire County Council leader out of party — 5 dicembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe JC — Reform mayoral candidate suspended after likening Jewish security group to Islamists on horseback — marzo 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Nigel Farage on Sarah Pochin\u0026rsquo;s adverts remarks — ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe National — Scottish Reform UK MSP who backed deporting Muslims elected — 8 maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform councillor expelled over posts — 11 maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Reform councillor charged over pothole post — luglio 2026; processo fissato per il 9 novembre 2026, l\u0026rsquo;accusa respinta dall\u0026rsquo;imputato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage under fire after saying Muslims do not share British values — 26 maggio 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage condemned over call to ban public prayer for Muslims — 19 marzo 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — Do Britons think Reform UK are racist? — settembre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — What do Britain\u0026rsquo;s ethnic minorities think of British politics? — ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform councillor\u0026rsquo;s whip restored — 10 febbraio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBlog Preston — Politician in charge of Lancashire\u0026rsquo;s care homes — giugno 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Doncaster Reform councillor suspended over posts — 15 febbraio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNovara Media — Reform quietly readmits suspended councillors — 16 giugno 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — No charges to be brought against ex-Reform MP Rupert Lowe — 14 maggio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Four Reform councillors suspended after footage of tense meeting leaked — 20 ottobre 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIBTimes UK — ITV Exposure: Reform UK, Farage, Parry and vetting — 16 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Daily Britain — ITV undercover Reform UK documentary — 19 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBreakingNews.ie (PA) — Farage insists no case to answer on undeclared £5 million gift — 6 maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNewswav — Reform accused of failing to condemn racism after councillor\u0026rsquo;s Nigerians post — maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNation.Cymru (PA) — Jenrick blames Tory smear amid probe into leadership campaign donations — maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIBTimes UK — Reform UK investigates members after ITV undercover report — 15 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Reform councillors and the ITV sting — ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGB News — Nigel Farage responds to Coutts — 4 luglio 2023.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — BBC apologises to Nigel Farage over Coutts report — 24 luglio 2023.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Spectator — Lowe brands Farage a \u0026lsquo;viper\u0026rsquo; after charges dropped — 14 maggio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNation.Cymru (PA) — Reform UK branded \u0026lsquo;sinister\u0026rsquo; for reporting journalists to police — 22 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPress Gazette — Reform says it has reported ITV to the police — 21 ottobre 2026, con la dichiarazione dell\u0026rsquo;NUJ.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChesney and Citron — Deep Fakes: A Looming Challenge for Privacy, Democracy, and National Security — California Law Review, 2019.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSchiff, Schiff and Bueno — The Liar\u0026rsquo;s Dividend: Can Politicians Claim Misinformation to Evade Accountability? — American Political Science Review, 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCommittee on Standards in Public Life — The Seven Principles of Public Life.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons — Code of Conduct for Members, HC 1083 — «inspired and informed by the Seven Principles of Public Life».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSociety of Editors — Society calls for reversal of Reform UK ban in Derbyshire — 1º ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe London Economic — Reform become most referenced opposition party on BBC and ITV News at Ten — 15 dicembre 2025; Cardiff University, settembre 2025: Reform 37, Conservatori 25; Farage 49 su ITV.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe London Economic — Reform, with 0.7% of all MPs, featured in 25% of BBC\u0026rsquo;s recent 10pm news bulletins — 2 novembre 2025; studio «Enhancing Impartiality» della Cardiff University, primi sei mesi del 2025, Lib Dem 17%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNation.Cymru — Why isn\u0026rsquo;t the Greens\u0026rsquo; growing success reflected in media coverage? — 28 febbraio 2026, dei ricercatori della Cardiff University Maxwell Modell, Matt Walsh e Stephen Cushion; servizi di apertura nel 2025, la motivazione della BBC basata sui sondaggi, Verdi dall'11% al 17%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC Editorial Guidelines — Impartiality — principi 2.2.6 e 2.2.7.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — List of Question Time episodes, highest appearance makers — Farage 38 presenze, 1,9 l\u0026rsquo;anno; Clarke 1,4, Williams 1,7, Campbell 1,6, Harman 1,3, Kennedy 1,4.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe London Economic — Nigel Farage set for 38th appearance on Question Time — 2 dicembre 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProspect — GB News seems to have become Reform TV, and Ofcom hasn\u0026rsquo;t stopped it — Alan Rusbridger, 21 marzo 2026; Marshall e Legatum, Habib e Lowe, l\u0026rsquo;Ofcom che lascia cadere l\u0026rsquo;indagine su Farage.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — Legatum — «a private investment firm, headquartered in Dubai», fondata nel 2006 dal neozelandese Christopher Chandler, comproprietaria di GB News.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Nerve — For GB News\u0026rsquo;s funders, a £130m loss is a small price to pay for vast influence — 131 mln £ persi dalla metà del 2021, 22 mln £ nell\u0026rsquo;anno fino a maggio 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPolitical Parties, Elections and Referendums Act 2000, section 54 — una società donatrice ammessa deve essere registrata ai sensi del Companies Act 2006, «incorporated within the United Kingdom», e svolgere «business in the United Kingdom».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfcom — Ofcom fines GB News £100,000 — 31 ottobre 2024; Rules 5.11 e 5.12, «the seriousness and repeated nature of this breach».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMishcon de Reya — High Court quashes Ofcom\u0026rsquo;s decisions against GB News — sentenza del 28 febbraio 2025 sui programmi di Rees-Mogg.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSnopes — Did Trump say \u0026lsquo;I love the poorly educated\u0026rsquo;? — discorso per la vittoria ai caucus del Nevada, 23 febbraio 2016; attribuzione giudicata corretta. Vedi anche The Week.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPew Research Center — Behind Trump\u0026rsquo;s 2024 victory: voting patterns of validated voters — giugno 2025; gli elettori senza laurea hanno preferito Trump di 14 punti, i laureati Harris di 16.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — How Britain voted in the 2024 general election — Reform al 23% tra chi ha i GCSE o meno, all'8% tra chi ha un livello d\u0026rsquo;istruzione più alto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — How would Britain vote two years since the 2024 election? — 2026; Reform al 40% tra chi ha i GCSE o meno, quinta con il 14% tra i laureati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGood Morning America (ABC) — Trump calls media \u0026rsquo;enemy of the American people\u0026rsquo; — 17 febbraio 2017.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMiddle East Eye — Reform UK bans Middle East Eye journalist from party conference — 2 settembre 2026; esclusi anche Anna Isaac e Peter Geoghegan del Guardian.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Office — Nationality: good character requirement, version 7.0 — linee guida per i funzionari pubblicate il 30 aprile 2026: criminalità, notorietà, «lack of frankness», solidità finanziaria.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCrown Prosecution Service — The Code for Crown Prosecutors — il Full Code Test: una prospettiva realistica di condanna, poi l\u0026rsquo;interesse pubblico.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFCA — Upper Tribunal upholds Crispin Odey ban — settembre 2026, «unfit to work in financial services», multa di 1.529.374 £; e la Decision Notice, marzo 2025. Le 10.000 £ di Odey a Reform UK del 4 agosto 2023 sono la voce C0572678 della Electoral Commission.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission (via Wired-Gov) — Investigations concluded, 27th September 2022 — Reform UK, «Failure to deliver a complete campaign spending report» e «Late payment of claims», «No sanction».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLocal Government Lawyer — Reform member found guilty over false statements about rival — aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInformation Commissioner — decision notice IC-411617-G3G8, Kent County Council — 16 luglio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGB News — With Reform UK leading among disabled voters — Opinium, marzo 2025: Reform 29%, Labour 20% tra gli intervistati disabili (un sottocampione di 407).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPoliticsHome — Labour seats at risk from Reform have higher rates of people relying on disability benefits — 3 giugno 2025; analisi di Trussell, 140 collegi su 247 nel terzo più alto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Spectator Australia — Can Reform really end benefits Britain? — agosto 2026; «every Reform MP has an electoral majority smaller than the number of PIP claimants living in their constituency».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via Eastern Eye) — One in five NHS staff in England are non-UK nationals — dati NHS Digital per settembre 2023: 20,4% del personale, 30% di infermieri e health visitor, 36,3% dei medici.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLocalGov — Social care vacancy rate falls to decade low but challenges ahead — 24 giugno 2026, Skills for Care: posti occupati da cittadini britannici in calo di 130.000 dal 2020/21.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCare Provider Alliance — The size and structure of the adult social care sector and workforce in England, July 2025 — sintesi del rapporto di Skills for Care: le assunzioni dall\u0026rsquo;estero sono scese da 105.000 nel 2023/24 a 50.000 nel 2024/25.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/politics/who-is-reform-actually-for/","summary":"Un articolo d\u0026rsquo;opinione su Reform UK, costruito con i suoi stessi documenti e con gli atti pubblici. Il suo piano per revocare il permesso di soggiorno a tempo indeterminato a chi vive, lavora e paga le tasse qui. Un piano sul welfare che risparmia la pensione statale e taglia il sostegno a chi è in età da lavoro. Una società del partito posseduta dal leader fino al 2025, e uno statuto che lascia agli iscritti una cassetta dei suggerimenti. I beneficiari di Universal Credit che lavorano e i caregiver che il piano escluderebbe. Dal 75 all'80% delle donazioni da donatori che vivono all\u0026rsquo;estero, un test di domicilio che il Parlamento ha approvato nel 2009 e non ha mai attivato, e cosa dicono di quel tipo di denaro il Consiglio d\u0026rsquo;Europa e la revisione del governo stesso. Gli interessi dei donatori: Tether, QinetiQ, le cripto, e un\u0026rsquo;ammissione di colpevolezza e una grazia negli Stati Uniti. Il regalo da 5 milioni di sterline, i guadagni di Farage e il suo curriculum da eurodeputato, gli immobili e le tasse di Tice, la giravolta di Jenrick e Westferry, i legami con Putin e Trump, chi ha pagato i viaggi all\u0026rsquo;insediamento di Trump, a Mar-a-Lago, ad Abu Dhabi e in Israele, RFOI Ltd, il trust Ghandehari e le ditte quasi fallite che hanno dato 485.000 sterline, le società cripto che pagano Farage e i pensionati che perdono soldi nelle truffe cripto, lo spazio che Reform ottiene sulla BBC e la sua poltrona fissa su GB News, il curriculum su razzismo e disciplina, e 7 «diffamazioni» su 12 che si sono rivelate vere. Poi la domanda del titolo.","title":"Per chi è davvero Reform? I soldi, gli uomini e il curriculum"},{"content":"Lo stesso Budget, un\u0026rsquo;altra cucina Il Budget 2026 è stato venduto come «breathing space», un po\u0026rsquo; di respiro1. Questo articolo lo legge per una sola famiglia e nient\u0026rsquo;altro. C\u0026rsquo;è un pezzo gemello, Breathing Space For Whom?, su cosa fa alle grandi aziende e alle tasse che ci stanno dietro.\nUna coppia, tutti e due di 67 anni o più e oltre l\u0026rsquo;età della pensione statale, che vive solo della nuova pensione statale piena. Sono £241,30 a settimana a testa2, £25.095 l\u0026rsquo;anno in due. Si scaldano a gas, 13.375 kWh l\u0026rsquo;anno, perché è quello che consuma una casa normale con una caldaia a gas. Hanno un\u0026rsquo;auto a benzina, 4.000 miglia l\u0026rsquo;anno. Council tax dalla fascia A alla D, in Inghilterra. Nessun reddito da risparmi, nessuna pensione privata, nessun affitto.\nSia chiaro che reddito è. La pensione statale è una prestazione, e l\u0026rsquo;HMRC la mette tra le prestazioni statali su cui si paga l\u0026rsquo;imposta sul reddito3. Loro non pagano niente, per un solo motivo. L\u0026rsquo;imposta sul reddito si calcola persona per persona, quindi ognuno ha la propria Personal Allowance di £12.5704, e la nuova pensione statale piena è di £12.547,60 l\u0026rsquo;anno2. Senza altri redditi, ogni pensione resta £22,40 sotto la soglia. E la pensione non è nemmeno un salvadanaio in cui hanno messo da parte e che li stava aspettando. La descrizione del governo stesso è che è «unfunded», a ripartizione, «Pay As You Go», e che «State Pension payments paid to current pensioners are financed from National Insurance contributions paid by current workers»5. Loro hanno pagato per i pensionati prima di loro, e chi lavora oggi paga per loro. Ogni modifica che questo Budget le fa è una decisione su quanto un gruppo di persone paga a un altro.\nLa domanda è: un Budget venduto come «respiro» gliene dà un po\u0026rsquo;? Un po\u0026rsquo;, una volta. Poi comincia a riprenderselo, e il cambiamento più grande al loro reddito arriva solo nel 2030.\nIl registro per una coppia di pensionati Ogni misura per le famiglie del Budget che li tocca, dal documento stesso del Tesoro:\nMisura Quando Vale per loro? Valore annuo Household Energy Payment di £100, fasce dalla A alla D gennaio 2027 Sì +£100, una volta IVA allo 0% sull\u0026rsquo;elettricità, prorogata di tre mesi da aprile a luglio 2027 Sì, 2.500 kWh a 28p, nessuna tariffa notturna per auto elettrica circa +£11, una volta Taglio di 5p dell\u0026rsquo;accisa sul carburante prorogato di sei mesi fino a luglio 2027 Sì, auto a benzina circa +£12, una volta Quota fissa del gas spostata nel prezzo unitario fine 2027, o dopo Sì, e chi consuma molto ci perde −£44 Gas Shipper Obligation spostata sulla fiscalità generale prevista per il 2028 Sì, e ogni pensione è sotto la soglia esente circa +£5 Quota fissa dell\u0026rsquo;elettricità, 54,83p al giorno al tetto, £200 l\u0026rsquo;anno «details next year» Resta com\u0026rsquo;è £0 Tetto di £2 sul biglietto dell\u0026rsquo;autobus 2027 No, viaggiano già gratis £0 Pension Credit No, il loro reddito è troppo alto £0 Winter Fuel Payment, £100 a testa invariato Sì, ma non è nuovo £0 di differenza Imposta sul reddito fino ad aprile 2030 Nessuna, £22,40 sotto la soglia a testa £0 Triple Lock corretto aprile 2030 Sì aumenti più bassi dal 2030 L\u0026rsquo;elettricità la comprano tutta a tariffa piena. Senza auto elettrica non c\u0026rsquo;è nessuna tariffa notturna conveniente, quindi ognuno dei 2.500 kWh tipici di Ofgem6 costa circa 28p. Sono £700 l\u0026rsquo;anno di consumi e £200 di quota fissa, e il 5% di IVA su £900 per tre mesi fa circa £11.\nFacciamo la somma. Nel 2027 la coppia sta circa £123 meglio, quasi tutto grazie al pagamento di £100. Quando arriva la riforma del gas stanno circa £39 l\u0026rsquo;anno peggio, ogni anno. I £123 spariscono in poco più di tre anni.\nCosa fa il Budget a una coppia di pensionati col gas Coppia di pensionati col gas, variazione in £ Household Energy Payment di £100, solo 2027 +£100 IVA 0% sull'elettricità, tre mesi del 2027 +£11 Taglio accisa, altri sei mesi fino a luglio 2027 +£12 Gas Shipper Obligation cancellata, l'anno +£5 Quota fissa del gas nel prezzo unitario, l'anno −£44 Ogni anno dal 2028, tutte le misure −£39 Ogni misura che cambia i soldi della coppia. Tre sono una tantum nel 2027. Le due che restano sono un piccolo guadagno sul prelievo sul gas e una perdita più grande sulla quota fissa del gas, così dal 2028 sono sotto di £39 l\u0026rsquo;anno. Le una tantum sono finite entro la prima primavera. Quello che resta è la riforma del gas, e va nella direzione sbagliata.\nLa riforma del gas funziona al contrario per loro Spostare la quota fissa del gas nel prezzo unitario aiuta una casa che usa poco gas. Danneggia quella che ne usa tanto, e questa coppia ne usa tanto.\nLa quota fissa del gas è di £108 l\u0026rsquo;anno per il cliente tipico1, 29,68p al giorno al tetto di ottobre7. Il Budget chiede a Ofgem di recuperarla «through gas unit rates instead»1. Spalmata sui 9.500 kWh tipici di Ofgem6, aggiunge circa 1,14p a ogni kWh.\nGas usato in un anno Quota fissa oggi Ripagata col prezzo unitario Differenza 9.500 kWh, tipico Ofgem £108 £108 £0 13.375 kWh, questa coppia £108 £153 −£44 Una coppia che scalda bene la casa paga £44 in più l\u0026rsquo;anno. È esattamente quello che una coppia di pensionati dovrebbe fare d\u0026rsquo;inverno. Il Tesoro lo sa. Scrive che «a number of households may be less able to make the most of the reform» e promette una «targeted mitigation»1. Non dice cos\u0026rsquo;è questa mitigazione, chi la riceve, né quando.\nQuindi a chi la riforma costa viene detto che l\u0026rsquo;aiuto arriva, senza dettagli. A chi la riforma conviene, come me, il vantaggio arriva da solo.\nIl prelievo sull\u0026rsquo;idrogeno, al contrario La Gas Shipper Obligation era un prelievo previsto sulle bollette del gas per pagare l\u0026rsquo;idrogeno. Il Budget lo cancella e paga l\u0026rsquo;idrogeno con la fiscalità generale1. Per una famiglia con uno stipendio, il conto si sposta solo dal contatore alla busta paga.\nPer questa coppia è un vero guadagno, e bisogna riconoscerlo. Un prelievo su ogni unità di gas li avrebbe fatti pagare in base a quanto gas bruciano, e ne bruciano tanto. La stima del governo stesso era «approximately £2.60 - £4.50» l\u0026rsquo;anno sulla bolletta media del gas domestico8, che con il loro consumo fa circa £5. Con la sola pensione statale piena non pagano nessuna imposta sul reddito, quindi la versione a carico della fiscalità generale non costa loro niente in modo diretto. Pagano comunque l\u0026rsquo;IVA e tutte le altre tasse che la finanziano, ma molto meno di quanto avrebbero pagato al contatore.\nQuesto non rende l\u0026rsquo;idrogeno una scommessa migliore. Vuol dire che il costo si è spostato dalla famiglia che brucia gas alla famiglia che prende uno stipendio.\nL\u0026rsquo;auto a benzina ha il taglio, e continua a pagare a miglio L\u0026rsquo;auto a benzina qualcosa la ottiene. Il taglio di 5p dell\u0026rsquo;accisa sul carburante, che doveva finire a gennaio, è prorogato «by a further six months to 1 July 2027»1.\nProroga dell\u0026rsquo;accisa, auto a benzina Valore Miglia l\u0026rsquo;anno 4.000 Consumo, una normale utilitaria a benzina 45 mpg, ipotizzato Litri l\u0026rsquo;anno circa 404 Litri nei sei mesi in più circa 202 Prezzo alla pompa oggi, benzina £1,97 al litro Spesa di carburante l\u0026rsquo;anno circa £796 Taglio di 5p più l\u0026rsquo;IVA che ci si paga sopra 6p al litro, circa il 3% del prezzo alla pompa Risparmio da questo Budget circa £12, una volta Quindi su una spesa di carburante di circa £796 l\u0026rsquo;anno, a £1,97 al litro, la proroga vale £12. Anche con il taglio, quasi £800 l\u0026rsquo;anno finiscono nel serbatoio.\nE una tassa a miglio la pagano già. Si chiama accisa sul carburante. La benzina paga 52,95p al litro9, e sull\u0026rsquo;accisa si paga anche l\u0026rsquo;IVA. A 45 mpg fa:\nTassa a miglio Auto a benzina, accisa Auto elettrica, eVED da aprile 2028 Per miglio circa 5,3p, 6,4p con IVA 3p10 Su 4.000 miglia circa £214, £257 con IVA £120 Quindi la nuova Electric Vehicle Excise Duty non è una tassa a miglio che arriva per la prima volta. Chi guida a benzina ne paga una a ogni pieno da quando esiste l\u0026rsquo;accisa sul carburante, e a circa il doppio della tariffa eVED. Il taglio di 5p del Budget la riduce per sei mesi. Non la ferma.\nTenere la gente legata al petrolio è una cattiva politica, e l\u0026rsquo;ho già detto. Per questa famiglia resta comunque un beneficio piccolo e reale.\nTroppo per il Pension Credit, non abbastanza per tutto il resto Ecco quella che in nessuna bolletta si vede. Il Pension Credit porta il reddito di una coppia fino a «£363.25 if you have a partner»11. Questa coppia ha £482,60 a settimana in due. Sono £119,35 a settimana sopra, quindi non possono chiederlo, e non ricevono niente di quello che ne dipende.\nReddito settimanale della coppia Importo Nuova pensione statale piena, per due £482,60 Il Pension Credit porta una coppia fino a £363,25 Sopra la soglia di £119,35 Troppo benestanti per l\u0026rsquo;aiuto pensato per i pensionati più poveri. Sempre con un reddito fisso. E quel reddito deve coprire una bolletta del gas che il Budget ha appena fatto salire. Il Winter Fuel Payment li raggiunge, «£100 if you and the person you live with were both born between 28 September 1946 and 27 June 1960»12, £200 in due. Questo Budget non lo cambia.\nNon gli serve nemmeno il tetto di £2 sul biglietto dell\u0026rsquo;autobus. L\u0026rsquo;età per l\u0026rsquo;abbonamento gratuito dipende da dove vivi13:\nDove Autobus gratis da Scozia, Galles, Irlanda del Nord 60 Londra, solo dentro Londra 60 Inghilterra fuori Londra età della pensione statale, da 66 a 67 L\u0026rsquo;articolo prende la più alta, perché è quella con cui vive gran parte dell\u0026rsquo;Inghilterra. L\u0026rsquo;età della pensione statale sale da 66 a 67 «between 2026 and 2028»14, quindi in Inghilterra l\u0026rsquo;abbonamento ora arriva a 67 anni, sette anni dopo che un pensionato di Cardiff o di Glasgow ha il suo. Questa coppia ha già passato quell\u0026rsquo;età, quindi viaggia gratis. È un beneficio vero. Solo che non è nuovo, e una coppia inglese lo ha aspettato più di tutti.\nLa patente, gli occhiali, e chi paga Stare sopra la soglia del Pension Credit costa più dell\u0026rsquo;integrazione in sé, perché tanti altri aiuti ne dipendono. Gli occhiali sono il caso più chiaro.\nUn esame della vista NHS è gratuito per «anyone aged 60 or over». Gli occhiali no. Un buono ottico NHS per pagarli va, tra gli altri, a chi riceve «Pension Credit Guarantee Credit»15. Questa coppia non può avere il Pension Credit, quindi niente buono, e gli occhiali se li pagano. L\u0026rsquo;unica strada che resta è l\u0026rsquo;NHS Low Income Scheme, con prova dei mezzi: un modulo da compilare, che può dare un aiuto parziale o niente.\nE la patente sta per appoggiarsi proprio su questo. Il Department for Transport ha messo in consultazione l\u0026rsquo;«Introducing mandatory eyesight testing for older drivers», per i «drivers aged 70 and over» come «part of the driving licence renewal process», al posto del «current self-declaration system»16. La consultazione si è chiusa l'11 maggio 2026 e l\u0026rsquo;esito non è ancora uscito. Non dice chi paga. L\u0026rsquo;organismo degli optometristi dice chiaramente che «Any additional costs to cover the administration of this must be funded by the driver»17.\nGuidatore anziano, sopra la soglia del Pension Credit Chi paga Esame della vista gratuito con l\u0026rsquo;NHS dai 60 anni15 Gli occhiali che l\u0026rsquo;esame dice che servono loro, niente buono15 Qualsiasi costo amministrativo di un controllo obbligatorio della vista per la patente non deciso, gli optometristi dicono il guidatore17 Niente di tutto questo è nel Budget, ed è proprio questo il punto. Una coppia con un reddito fisso tiene l\u0026rsquo;auto perché è così che va a fare la spesa e dal medico. Lo Stato si sta muovendo verso l\u0026rsquo;obbligo di dimostrare la vista per tenerla, e gli occhiali che fanno passare l\u0026rsquo;esame escono dalla stessa pensione statale da cui esce la bolletta del gas.\nProtetti dal congelamento, finché dura Quei £22,40 di margine sotto una soglia congelata sono l\u0026rsquo;unica cosa che tiene una pensione statale, da sola, fuori dall\u0026rsquo;imposta sul reddito.\nSu di loro il drenaggio fiscale funziona in modo diverso. Chi lavora lo paga in contanti ogni anno, perché ogni aumento cade in uno scaglione che avrebbe dovuto spostarsi. Questa coppia per ora non paga niente, perché tutto il loro reddito sta sotto la soglia. Quello che il congelamento gli toglie è il margine. Applica la regola di indicizzazione della legge stessa18 ai dati di inflazione di settembre dell\u0026rsquo;ONS19 e la soglia sarebbe questa:\nAnno fiscale Personal Allowance, indicizzata Congelata Margine su una pensione statale, indicizzata Margine, congelata 2026-27 £16.080 £12.570 £3.532 £22 2027-28 £16.650 £12.570 £3.663 −£417 La riga 2027-28 presume che il Triple Lock paghi solo l\u0026rsquo;inflazione di settembre del 3,5%, che è il minimo che può pagare. Questo porta la nuova pensione statale piena a £249,75 a settimana, £12.987 l\u0026rsquo;anno, e mette ognuno di loro £417 sopra la soglia congelata. Al 20% sono circa £83 a testa, £167 per la coppia, ogni anno, in tasse che esistono solo per via del congelamento. Con l\u0026rsquo;indicizzazione, una pensione statale non si sarebbe nemmeno avvicinata all\u0026rsquo;imposta sul reddito.\nQuindi su un pensionato il drenaggio non si vede come una bolletta. Si vede come un nuovo sgravio. Il Budget introduce una Pension Tax Allowance da aprile 2027, così che i pensionati «with incomes at or under the value of the full new State Pension will not be brought into paying tax because of State Pension uprating in this Parliament»1.\nÈ una toppa su un buco scavato dal congelamento, ed è la cosa giusta da fare. Ora leggi le date:\nFino a Pension Tax Allowance «6 April 2027 until 5 April 2030»1 Personal Allowance congelata a £12.570 5 aprile 20314 La tutela finisce un anno prima del congelamento. Per il 2030-31 il Tesoro dice solo che «will consider arrangements beyond April 2030 in the usual way»1. Quindi una coppia che vive solo della pensione statale ha un anno in cui, con le regole scritte oggi, il congelamento potrebbe farli entrare nell\u0026rsquo;imposta sul reddito, e il rimedio è la promessa di pensarci più avanti.\nAggiungi una pensione aziendale di £790, e il drenaggio fiscale se la prende Ora diamo a uno dei due una pensione dal lavoro. L\u0026rsquo;iscrizione automatica li ha raggiunti quattro anni prima della pensione, e il datore di lavoro ha versato solo quello che la legge gli imponeva, che da aprile 2019 è il 3% della retribuzione utile20. Quattro anni al minimo di legge comprano una rendita di circa £790 l\u0026rsquo;anno. Tanta gente che va in pensione oggi ha più o meno questo, perché il minimo è tutto quello che ha mai avuto ed è arrivato troppo tardi per costruire qualcosa di più grande.\nL\u0026rsquo;altro partner resta com\u0026rsquo;è. Ecco quanto valgono i £790 per chi li ha:\nAnno fiscale Reddito Sopra la soglia Imposta sul reddito Rendita di £790, quanto resta 2026-27 £13.337,60 £767,60 £153,52 £636,48 2026-27, se la soglia fosse stata indicizzata £13.337,60 £0 £0 £790 2027-28, congelata, Pension Tax Allowance £13.777 £1.207 da £158 a £241 da £549 a £632 2027-28, se la soglia fosse stata indicizzata £13.777 £0 £0 £790 dal 2030-31, senza Pension Tax Allowance almeno £13.777 almeno £1.207 almeno £241 al massimo £549 Leggi prima le righe indicizzate. Con la soglia tenuta al passo con i prezzi, £16.080 quest\u0026rsquo;anno e £16.650 il prossimo, la rendita non è tassata per niente, e resterebbero ancora £2.700 o più di margine. Ogni sterlina di tasse in questa tabella è drenaggio fiscale e nient\u0026rsquo;altro. Nessuna aliquota è salita. La soglia è rimasta ferma mentre la pensione statale le saliva incontro.\nQuest\u0026rsquo;anno i £790 portano il loro reddito £767,60 sopra la soglia congelata, e il 20% di quella cifra fa £153,52.\nDa aprile 2027 la Pension Tax Allowance non li salva. Vale solo per i pensionati il cui reddito «regardless of source, is below or at the value of the full new State Pension», e per chiunque sia «just above» viene «gradually withdrawn through a taper»1. Il Tesoro non ha pubblicato la curva di riduzione, quindi l\u0026rsquo;imposta sta tra £158, che è il 20% della sola rendita, e £241, che è il 20% di tutto quello che supera la soglia congelata. Da aprile 2030 la Pension Tax Allowance finisce e il congelamento no, quindi sono £241 o più, e crescono a ogni aumento della pensione statale.\nNon riceveranno una cartella per questo. L\u0026rsquo;HMRC riscuote l\u0026rsquo;imposta dovuta su una pensione statale attraverso la pensione privata: «you\u0026rsquo;ll usually pay more tax to include any tax you need to pay on your State Pension. Your tax code will change to collect this»21. Quindi la rendita arriva già tagliata, e £83 dei £241 sono la pensione statale tassata attraverso di essa. È il 31% in meno su una rendita di £790, non il 20% dell\u0026rsquo;aliquota base che sembrerebbe.\nPosso chiedere perché chi ha fatto quello che gli è stato detto, è rimasto nel piano aziendale per i quattro anni in cui c\u0026rsquo;era per lui e ha risparmiato, si ritrova con la pensione statale tassata attraverso i suoi risparmi? Il datore di lavoro ha versato il minimo perché il minimo è tutto quello che doveva versare. Il governo ha congelato la soglia perché il congelamento fa cassa senza finire in un titolo di giornale. Tra tutti e due, ogni anno se ne va quasi un terzo di una piccola pensione, e una soglia indicizzata l\u0026rsquo;avrebbe lasciata intatta fino all\u0026rsquo;ultimo penny.\nIl Triple Lock salta nel 2030 Il cambiamento più grande al reddito di questa coppia non è nel registro, perché non comincia prima di aprile 2030.\nFino ad allora la pensione statale cresce «by the highest of 2.5%, inflation or earnings growth»1. Da aprile 2030 cresce «by the highest of 2.5%, inflation, or the amount required to maintain its value relative to earnings as reached in April 2029»1. Il Tesoro lo chiama togliere il «ratchet», il meccanismo a cricchetto. Quanto vale per il Tesoro, con le sue parole:\nTriple Lock corretto, riduzione della spesa per la pensione statale Stima del Tesoro Entro la fine degli anni 2030 £15 miliardi l\u0026rsquo;anno Entro la fine degli anni 2040 £50 miliardi l\u0026rsquo;anno Quei soldi non vengono dal nulla. Vengono dagli aumenti della pensione statale che altrimenti sarebbero stati pagati, cioè dal reddito di ogni pensionato che ci vive. Il Budget dice che finanzierà un National Care Service con l\u0026rsquo;assistenza alla persona «free at the point of use»1, e può darsi che valga la pena averlo. Ma a pagarlo sono le stesse persone che ne avranno bisogno, e la coppia di questo articolo paga per prima, in ogni aumento dal 2030 che sarà più piccolo di quanto sarebbe stato.\nNiente per la caldaia Questa è la casa che i soldi per l\u0026rsquo;isolamento e le pompe di calore aiuterebbero di più.\nUna coppia che usa 13.375 kWh di gas l\u0026rsquo;anno è esattamente il destinatario del Warm Homes Plan. Questo Budget toglie £1 miliardo dal suo fondo per gli investimenti per pagare la difesa1. Tiene il contributo per le pompe di calore a £400 milioni l\u0026rsquo;anno1, a £7.500 per pompa di calore22. E lascia che l\u0026rsquo;IVA sull\u0026rsquo;installazione di isolamento, pompe di calore, pannelli solari e batterie torni dallo 0% al 5% da aprile 202723.\nCosa taglierebbe la loro bolletta per sempre Cosa fa il Budget Isolamento IVA di nuovo al 5%, contributo Warm Homes tagliato di £1 miliardo Pompa di calore contributo fermo, IVA di nuovo al 5% Pannelli solari e batteria IVA di nuovo al 5% Con un reddito fisso e senza risparmi, niente di tutto questo si compra senza aiuto. Quindi la coppia tiene la caldaia a gas, continua a bruciare 13.375 kWh, paga il prezzo unitario più alto della riforma della quota fissa, e aspetta i £100 del prossimo inverno.\nCon un reddito fisso non se ne esce lavorando di più Una famiglia che lavora può prendere più lavoro, cambiare impiego, o mettere i propri soldi in pannelli solari e una batteria. Una coppia di pensionati con un reddito fisso non ha niente di tutto questo. Il loro reddito si muove quando il governo lo muove, e dal 2030 si muoverà di meno. La loro bolletta la fa un mercato che questo Budget sovvenziona invece di sistemare, e l\u0026rsquo;unica riforma che tocca direttamente la loro bolletta gli costa £44 l\u0026rsquo;anno con la «targeted mitigation» lasciata in bianco.\nQuello di cui hanno bisogno è la cosa che nessuno in questo Budget è disposto a pagare una volta sola: la casa isolata e la caldaia sostituita, così la bolletta scende e resta giù. Quello che ricevono invece sono £100, pagati da tutti, fatti passare per la council tax verso le stesse compagnie energetiche, e da ripagare l\u0026rsquo;anno dopo. Questo non è respiro. È essere tenuti sullo stesso vecchio gas, allo stesso vecchio prezzo, un inverno alla volta.\nHM Treasury — Budget 2026: Breathing Space for Today, Fresh Hope for the Future — il rapporto del Budget presentato al Parlamento il 28 ottobre 2026. Triple Lock 1.28, 1.29, 5.23 e Box 5A; Pension Tax Allowance 3.19 e 6.182; misure sull\u0026rsquo;energia da 3.4 a 3.9 e da 6.24 a 6.27; accisa sul carburante 3.13 e 6.211; Warm Homes Plan e Boiler Upgrade Scheme 4.36.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — The new State Pension: what you\u0026rsquo;ll get — «The full rate of new State Pension is £241.30 a week.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Income Tax: taxable and tax-free state benefits — la pensione statale è elencata tra le prestazioni statali tassabili.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — Maintaining the Personal Allowance and basic rate limit until 5 April 2031 — Personal Allowance ferma a £12.570 «until 5 April 2031».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — Third State Pension age review: independent report call for evidence — il National Insurance Fund paga la pensione statale; «this is unfunded and is often referred to as a “Pay As You Go” system».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Summary of changes to the energy price cap, revised TDCV — consumo tipico dal 1 luglio 2026: «2,500 kWh of electricity, 9,500 kWh of gas».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Changes to energy price cap between 1 October and 31 December 2026 — quota fissa del gas 29,68p al giorno e prezzo unitario 7,97p/kWh IVA inclusa; prezzo unitario dell\u0026rsquo;elettricità 26,32p/kWh e quota fissa 54,83p al giorno, senza IVA fino al 31 marzo 2027.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Gas Shipper Obligation analytical annex — «approximately £2.60 - £4.50» l\u0026rsquo;anno sulla bolletta media del gas domestico, dal 2028 al 2037.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Tax on shopping and services: Fuel Duty — benzina, gasolio, biodiesel e bioetanolo «52.95 pence per litre».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHM Treasury — Electric Vehicle Excise Duty (eVED) — 3p a miglio per le auto elettriche, 1,5p per le ibride plug-in, dal 1 aprile 2028.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Pension Credit: what you\u0026rsquo;ll get — porta «your joint weekly income to £363.25 if you have a partner».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Winter Fuel Payment: how much you\u0026rsquo;ll get — £100 a testa per una coppia nata tra il 28 settembre 1946 e il 27 giugno 1960 che non riceve una prestazione qualificante.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Apply for an older person\u0026rsquo;s bus pass — «free travel when you reach the State Pension age» in Inghilterra; a 60 anni a Londra, in Galles, in Scozia e in Irlanda del Nord.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — State Pension age timetable — «The State Pension age for men and women will now increase to 67 between 2026 and 2028.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNHS — Free NHS eye tests and optical vouchers — esami della vista gratuiti per chiunque abbia 60 anni o più; buoni per gli occhiali a chi riceve il Pension Credit Guarantee Credit e ad altri gruppi elencati, non per la sola età.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDepartment for Transport — Introducing mandatory eyesight testing for older drivers — consultazione dal 7 gennaio all'11 maggio 2026, esito atteso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAssociation of Optometrists — response on mandatory eyesight testing for older drivers — maggio 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIncome Tax Act 2007, section 57 — la Personal Allowance si indicizza con «the consumer prices index for the September before the start of a tax year» e si arrotonda «up to the nearest amount which is a multiple of £10».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nONS — CPI annual rate, all items, series D7G7 — settembre 2021 3,1%, 2022 10,1%, 2023 6,7%, 2024 1,7%, 2025 3,8%, 2026 3,5%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Workplace pensions: what you, your employer and the government pay — da aprile 2019 il minimo che versa il datore di lavoro è il 3%, con un contributo minimo totale dell'8%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Tax when you get a pension: how your tax is paid — se hai una pensione privata, «Your tax code will change to collect» l\u0026rsquo;imposta sulla tua pensione statale.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Boiler Upgrade Scheme: what you can get — £7.500 per una pompa di calore aria-acqua o geotermica.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — VAT on energy-saving materials and heating equipment (VAT Notice 708/6) — aliquota zero «from 1 May 2023 to 31 March 2027», per isolamento, pompe di calore, pannelli solari e batterie.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/politics/breathing-space-on-a-state-pension/","summary":"Cosa fa il Budget 2026 per una coppia che vive solo della nuova pensione statale piena, £25.095 l\u0026rsquo;anno in due, che scalda la casa a gas con 13.375 kWh l\u0026rsquo;anno e usa un\u0026rsquo;auto a benzina per 4.000 miglia. Un registro dal documento stesso del Tesoro: il pagamento una tantum di £100 per l\u0026rsquo;energia domestica, l\u0026rsquo;IVA allo 0% sull\u0026rsquo;elettricità, il taglio dell\u0026rsquo;accisa sul carburante, la quota fissa del gas spostata nel prezzo unitario, che a chi usa molto gas costa soldi, e la Gas Shipper Obligation spostata sulla fiscalità generale, che per una volta aiuta. Poi le cose che in bolletta non si vedono: un reddito di £119 a settimana troppo alto per il Pension Credit e per l\u0026rsquo;aiuto sugli occhiali che ne dipende, un controllo obbligatorio della vista per i guidatori anziani in consultazione, il drenaggio fiscale che non toglie contanti ma il margine sotto la Personal Allowance, una Pension Tax Allowance che lo tampona ma scade un anno prima del congelamento e tassa una rendita aziendale di £790 che l\u0026rsquo;indicizzazione avrebbe lasciato stare, la correzione del Triple Lock da aprile 2030 che vale £15 miliardi l\u0026rsquo;anno al Tesoro entro la fine degli anni 2030, e i soldi per l\u0026rsquo;isolamento e le pompe di calore che li avrebbero aiutati di più, tagliati o tassati.","title":"Respiro con la pensione statale: il Budget 2026 per una coppia di pensionati con il gas"},{"content":"Un bilancio di respiro, letto dalla mia cucina Il bilancio 2026 è stato presentato oggi con il titolo Breathing Space for Today, Fresh Hope for the Future1. La promessa è aiuto con le bollette, aiuto per chi guida e aiuto per il commercio di strada, pagato dalle banche e da chi ha risparmi e redditi da affitto.\nCosì ho fatto quello che faccio con qualsiasi bolletta. Ho letto il documento e l\u0026rsquo;ho messo a confronto con casa mia.\nLa casa è piuttosto normale per chi fa il mio lavoro. Uno che paga l\u0026rsquo;aliquota del 40%. Lavoro da casa, ma la mia metà va ancora in ufficio in auto, quindi l\u0026rsquo;auto elettrica fa circa 20.000 miglia l\u0026rsquo;anno. Pannelli solari sul tetto e una batteria in garage, e ogni unità che importiamo entra a una tariffa notturna di 7p. Il gas è ancora allacciato, ma è sceso all\u0026rsquo;acqua calda e a un po\u0026rsquo; di riscaldamento, circa 5.350 kWh l\u0026rsquo;anno. Fascia di council tax da A a D, in Inghilterra. Nessun reddito da risparmi e nessun reddito da affitti, perché un mutuo grande come il nostro non lascia niente da parte.\nNiente di quell\u0026rsquo;attrezzatura è arrivato da un sussidio. Ho messo soldi miei per abbassare la mia bolletta: il solare, la batteria, l\u0026rsquo;auto elettrica, e un anno dopo l\u0026rsquo;altro a ridurre il gas. L\u0026rsquo;ho fatto per stare in piedi da solo, non nella speranza di un contributo, e non ne chiedo uno adesso. Quello che mi aspetto è di non dover pagare di più per averlo fatto.\nLa domanda è: una casa così ricava qualcosa da questo bilancio, a parte un conto delle tasse? Quasi niente. Ecco i calcoli.\nOgni cifra qui sotto viene dal documento stesso del Tesoro, da Ofgem, dall\u0026rsquo;HMRC o dai documenti di consultazione del governo, non dal discorso e non dalla stampa. Un riassunto del bilancio che gira oggi ha sbagliato diverse cose, e dove l\u0026rsquo;ha fatto l\u0026rsquo;ho detto.\nIl conto per una casa come la mia Ecco ogni misura per le famiglie nel bilancio che potrebbe toccare questa casa, e quanto vale qui. Il più sono soldi in entrata, il meno sono soldi in uscita.\nMisura Quando Vale qui? Valore annuo Pagamento energia domestica da £100, fasce da A a D in Inghilterra gennaio 2027 Sì +£100, una volta IVA allo 0% sull\u0026rsquo;elettricità, prorogata di tre mesi da aprile a luglio 2027 Sì, ma tutto quello che importiamo è a 7p notturni pochi pound, una volta Quota fissa del gas, 28,75p al giorno, spostata nel prezzo per unità fine 2027, o dopo Sì, e chi consuma poco ci guadagna +£46 Quota fissa dell\u0026rsquo;elettricità, 56,61p al giorno, £207 l\u0026rsquo;anno «details next year» Resta esattamente com\u0026rsquo;è £0 Gas Shipper Obligation spostata sulla fiscalità generale prevista dal 2028 Fuori dalla bolletta, sulle tasse circa £0, pagato in un altro modo Taglio di 5p dell\u0026rsquo;accisa sul carburante prorogato fino a luglio 2027 No, è un\u0026rsquo;auto elettrica £0 Rimborso chilometrico esentasse fino a 55p e 35p aprile 2027 No, il pendolarismo non conta2 £0 Tetto di £2 al biglietto dell\u0026rsquo;autobus 2027 Niente autobus £0 Colonnine pubbliche locali più economiche primavera 2027 No, si ricarica a casa £0 Imposta su risparmi e redditi immobiliari su di 2 punti aprile 2027 Niente risparmi, niente affitti £0 Cash ISA mantenuto a £20.000 2027 No, non resta niente da risparmiare £0 Lifetime ISA, Your First Home 2027 No, la casa ce la siamo già guadagnata £0 Electric Vehicle Excise Duty a 3p per miglio, 20.000 miglia aprile 2028 Sì −£600, cresce con il CPI Soglie dell\u0026rsquo;imposta sul reddito congelate, drenaggio fiscale fino ad aprile 2031 Sì fino a −£3.544 quest\u0026rsquo;anno, −£4.112 nel 2027-28 Fai la somma. Nel 2027 la casa sta un po\u0026rsquo; più di £100 meglio, e quasi tutto è un unico pagamento da £100. Da aprile 2028 le misure annuali si assestano a circa £554 l\u0026rsquo;anno in meno, ogni anno, in crescita con l\u0026rsquo;inflazione. La sola eVED si prende £50 al mese, quindi i £100 spariscono due mesi dopo che parte, e non tornano più. E questo prima del drenaggio fiscale, che da solo può costare fino a £3.544 quest\u0026rsquo;anno a chi paga il 40%.\nUn risparmio sul gas, e nessuno sull\u0026rsquo;elettricità Riconosciamo il merito dove c\u0026rsquo;è. Questo è un guadagno vero, e va contro la mia posizione di partenza.\nLe quote fisse del gas valgono £108 l\u0026rsquo;anno per la bolletta tipica, secondo la cifra stessa del Tesoro1. Il tetto di Ofgem di ottobre mette la quota fissa del gas a 29,68p al giorno, che fa gli stessi £1083. La paghi sia che bruci tanto gas sia che non ne bruci quasi per niente, che è esattamente il verso sbagliato per una casa che il gas lo sta riducendo.\nIl bilancio chiede a Ofgem di abolirla nelle bollette domestiche, «aiming for delivery by the end of 2027 or as soon as possible after then», con i fornitori che recuperano il costo «through gas unit rates instead»1.\nI dettagli non sono ancora fissati, quindi questa è una stima, non un preventivo. Se quei £108 si spalmano sui 9.500 kWh della famiglia tipica di Ofgem4, aggiungono circa 1,14p a ogni kWh. A 5.350 kWh questa casa ne ripaga circa £61 attraverso il prezzo per unità e smette di pagare £108 di quota fissa. Sono circa £47 l\u0026rsquo;anno in meno al tetto. La tariffa di questa casa applica 28,75p al giorno, £105 l\u0026rsquo;anno, e con lo stesso conto viene fuori circa £46 l\u0026rsquo;anno in meno.\nGas usato in un anno Quota fissa oggi Recuperata nel prezzo per unità Differenza 5.350 kWh, il consumo di questa casa, al tetto £108 £61 +£47 9.500 kWh, tipico per Ofgem £108 £108 £0 14.000 kWh, una grande casa vecchia £108 £160 −£52 Il pareggio è la casa tipica. Chi consuma meno ci guadagna, e chi scalda a gas una casa grande e piena di spifferi ci perde, cosa che il Tesoro ammette quando dice che «a number of households may be less able to make the most of the reform» e promette una «targeted mitigation»1. Per questo è una riforma giusta, e premia le famiglie che hanno già ridotto i consumi. I £46 me li prendo.\nOra l\u0026rsquo;altra. Per una casa con solare e batteria, la quota fissa che conta non è quella del gas. È la quota fissa dell\u0026rsquo;elettricità. Questa casa paga 56,61p al giorno, contro i 54,83p del tetto di ottobre3, e fanno £207 l\u0026rsquo;anno, quasi il doppio della quota del gas. Più energia produci e accumuli da solo, più quella quota fissa diventa una parte grande della bolletta elettrica, perché si paga per intero sia che importi 3.000 kWh sia che ne importi 30. Ai 7p che questa casa paga per l\u0026rsquo;energia notturna, £207 di quota fissa sono il prezzo di circa 2.950 kWh di elettricità, pagati prima che entri una sola unità.\nNemmeno l\u0026rsquo;IVA allo 0% sull\u0026rsquo;elettricità fa molto qui. L\u0026rsquo;IVA si applica sui 7p, quindi è sempre stata solo 0,35p per kWh. La proroga di tre mesi vale circa £2,50 sulla quota fissa e 35p ogni 100 kWh importati. Il risparmio era l\u0026rsquo;energia notturna a buon mercato. Il taglio dell\u0026rsquo;IVA è il resto spicciolo.\nIl bilancio non la sposta nel prezzo per unità. Si impegna solo a «reform electricity standing charges», con i dettagli «next year»1. Così la riforma premia la famiglia che ha tagliato il gas, e lascia la famiglia che produce la propria elettricità a pagare la quota fissa più grande della sua bolletta, intatta.\nL\u0026rsquo;onere sull\u0026rsquo;idrogeno si è spostato, non è sparito Il bilancio elenca l\u0026rsquo;abolizione della Gas Shipper Obligation come «providing savings for businesses and households»1. Non è un risparmio. È la stessa bolletta, mandata a un altro indirizzo.\nLa Gas Shipper Obligation era un onere previsto. Non era ancora partito. La sua stessa consultazione la descrive come «a funding mechanism for the Hydrogen Production Business Model»5, a carico degli shipper del gas e trasferito per unità di gas, con una stima del governo del costo per la famiglia media di «approximately £2.60 - £4.50» l\u0026rsquo;anno tra il 2028 e il 20376. Sul consumo di gas di questa casa fa circa £2 l\u0026rsquo;anno.\nIl bilancio la cancella prima che arrivasse mai in bolletta. Al suo posto: «Hydrogen Allocation Round 1 funding will be met with a £27 million uplift to DESNZ RDEL in 2027-28», e il governo finanzierà con soldi pubblici i futuri contratti sull\u0026rsquo;idrogeno «if the government commits to them and subject to value for money»1.\nQuindi l\u0026rsquo;idrogeno si paga comunque. Sono £27 milioni l\u0026rsquo;anno prossimo dalla fiscalità generale, e la promessa di «publicly fund» i contratti futuri non ha nessun tetto. Lo stiamo ancora pagando tutti, attraverso la dichiarazione dei redditi invece che attraverso il contatore.\nE da quale delle due parti paghi conta. Un onere su ogni unità di gas ti fa pagare in base a quanto gas bruci, quindi una casa che ha ridotto il gas all\u0026rsquo;acqua calda ne paga pochissimo. La fiscalità generale ti fa pagare in base al reddito. Per chi paga il 40% e usa poco gas è il verso sbagliato: i £2 escono dalla bolletta del gas, e una parte del costo rientra all\u0026rsquo;aliquota più alta. Chi ci guadagna sono i grandi consumatori di gas, prima di tutto i grandi siti industriali, perché erano loro quelli a cui l\u0026rsquo;onere per unità avrebbe chiesto di più.\nIl riassunto che gira oggi ha sbagliato altre due cose. L\u0026rsquo;onere non è mai stato nella bolletta di nessuno, perché non era ancora partito. E non va alle compagnie di petrolio e gas.\nQuesti sono gli undici progetti del primo round, dall\u0026rsquo;elenco stesso del governo7:\nProgetto Sviluppatore principale Capacità Barrow Green Hydrogen Carlton Power 21,0 MW Bradford Low Carbon Hydrogen Hygen 24,5 MW Cromarty Hydrogen Scottish Power e Storegga 10,6 MW Green Hydrogen 3 HYRO 10,6 MW HyBont Marubeni Europower 5,2 MW HyMarnham JG Pears e GeoPura 9,3 MW Langage Green Hydrogen Carlton Power 7,0 MW Tees Green Hydrogen EDF Renewables Hydrogen 5,2 MW Trafford Green Hydrogen Carlton Power 10,5 MW West Wales Hydrogen MorGen Energy e Trafigura 14,2 MW Whitelee Green Hydrogen Scottish Power 7,1 MW Sono tutti idrogeno elettrolitico, ricavato dall\u0026rsquo;elettricità. Gli sviluppatori sono società elettriche, rami delle rinnovabili e case di trading. BP, Shell e il resto del Mare del Nord non ci sono.\nL\u0026rsquo;idrogeno è la scommessa sbagliata Il primo round è stato chiuso a «a weighted average strike price of £241/MWh» e pagherà «over £2 billion of revenue support»7 per 125 MW di produzione.\nMetti quel prezzo di esercizio in termini domestici. £241 al MWh sono 24,1p al kWh. Il gas al tetto di ottobre costa 7,97p al kWh, IVA inclusa3. Quindi l\u0026rsquo;idrogeno viene comprato a tre volte quello che una famiglia paga per il gas che dovrebbe sostituire, e i £2 miliardi servono a coprire la differenza, perché da solo non riuscirebbe a vendere al prezzo di mercato. A questo serviva la Gas Shipper Obligation. Era un sussidio per un combustibile che non sa competere, e spostarlo sulla fiscalità generale tiene il sussidio e cambia solo chi firma l\u0026rsquo;assegno.\nAllora cosa sta comprando il contribuente?\nRiguarda l\u0026rsquo;elenco. Ognuno di quei progetti fa idrogeno a partire dall\u0026rsquo;elettricità. Quindi il piano è prendere elettricità, perderne una buona parte per trasformare l\u0026rsquo;acqua in un gas, portare il gas in giro con i tubi e bruciarlo. Intanto la stessa elettricità messa in una pompa di calore esce come quasi tre volte tanto calore:\nCosa fa 1 kWh di elettricità Risultato Fa girare una pompa di calore aria-acqua, mediana di 742 case britanniche 2,8 kWh di calore, 280%8 Produce idrogeno da bruciare invece per il calore serve «five to six times more electricity» per lo stesso calore9 Queste cifre vengono dalla ricerca, non da me. Una rassegna di 32 studi indipendenti ha trovato il riscaldamento a idrogeno meno efficiente e più caro per unità di calore delle pompe di calore, e secondo quanto riportato «makes absolutely no sense for heating homes and buildings»9. Una pompa di calore supera il 100% di efficienza perché sposta il calore invece di produrlo. L\u0026rsquo;idrogeno non può arrivarci mai, perché parte dall\u0026rsquo;elettricità e ne perde un po\u0026rsquo; a ogni passaggio.\nQuindi l\u0026rsquo;idrogeno è uno spreco di tempo e di soldi, e questo paese dovrebbe andare elettrico al 100%: pompe di calore e il resto dell\u0026rsquo;attrezzatura che tira fuori più di un\u0026rsquo;unità di calore da ogni unità di energia, e auto elettriche in strada. Il bilancio fa il contrario. Tiene fermo il contributo per le pompe di calore, taglia un miliardo da Warm Homes e promette di finanziare con soldi pubblici ogni futuro contratto sull\u0026rsquo;idrogeno che il governo firmerà, senza alcun limite scritto.\nLa tassa sulla strada che pesa più di tutto il resto Ora la misura che costa davvero soldi a questa casa, e il bilancio è piuttosto franco sul perché c\u0026rsquo;è. Elenca la Electric Vehicle Excise Duty come parte del «strengthening the tax base \u0026hellip; to respond to the long-term decline in fuel duty receipts»1.\nL\u0026rsquo;eVED è stata annunciata nel bilancio 2025 e questo bilancio la conferma, con uno strumento di stima del chilometraggio e un «eVED Connect» facoltativo che legge le miglia direttamente dall\u0026rsquo;auto1. L\u0026rsquo;aliquota è «3 pence per mile for BEVs» e «1.5 pence per mile for PHEVs», dal 1 aprile 2028, in crescita con il CPI dal 2029-3010.\nA 20.000 miglia l\u0026rsquo;anno fanno £600. Ogni anno, indicizzati. La maggior parte di quelle miglia è il tragitto verso un ufficio, e i rimborsi chilometrici esentasse che il bilancio alza non coprono i viaggi «to and from your work, unless it\u0026rsquo;s a temporary place of work»2. Quindi il pendolarismo prende la nuova tassa e nessuno sgravio.\nMettilo accanto alla voce dell\u0026rsquo;accisa sul carburante. Il taglio di 5p ora è stato prorogato per la sesta volta1:\nStesso bilancio, due auto Benzina o diesel Questa auto elettrica Taglio di 5p dell\u0026rsquo;accisa e rinvio RPI, £1.355 milioni lo riceve £0 eVED da aprile 2028 non si paga 3p a miglio, £600 l\u0026rsquo;anno a 20.000 miglia La casa che ha fatto quello che il governo chiedeva è quella da cui ora il governo torna a prendere il gettito.\nAlmeno il taglio dell\u0026rsquo;accisa aiuta le persone a passare a qualcosa di più economico? Guarda dove vanno i soldi per i trasporti nella Tabella 6.11:\nMisura sui trasporti nella Tabella 6.1 Costo Spinge verso Taglio di 5p dell\u0026rsquo;accisa e rinvio RPI £1.355 milioni, due anni benzina e diesel Rimborsi chilometrici esentasse più alti £230 milioni, due anni guidare più miglia per lavoro Tetto di £2 al biglietto dell\u0026rsquo;autobus £230 milioni, due anni, dai budget per l\u0026rsquo;energia l\u0026rsquo;autobus Colonnine pubbliche locali più economiche, metodo non ancora deciso £100 milioni, due anni, poi niente l\u0026rsquo;elettrico Abolizione del Carbon Price Support £235 milioni, cinque anni dal 2028 generazione fossile più economica Non risolve il passaggio a trasporti più economici. Paga le persone perché restino sul petrolio. L\u0026rsquo;accisa sul carburante è un segnale di prezzo, e con il diesel «exceeding £2 per litre in October 2026»1 il Tesoro ha scelto di smussarlo di nuovo invece di spendere i soldi per uscirne. Il tetto sugli autobus e le colonnine insieme prendono circa un quarto di quello che prende la pompa di benzina, e i soldi per le colonnine non sono nemmeno ancora un programma. Sono £100 milioni per «reduce costs for local, lower-powered public chargers» dalla primavera 2027, che valgono «around £150 per year» per chi ricarica in strada, con il Department for Transport che dovrà «set out next steps in due course». Permettere a quei conducenti di usare la tariffa di casa su una colonnina pubblica, che risolverebbe davvero il problema, è una task force incaricata «to explore» una «complex proposal that will take time to consider»1. Ogni proroga rende più difficile chiudere la successiva, e le famiglie che hanno già lasciato il petrolio sono quelle che ne pagano la tassa chilometrica.\nIl drenaggio fiscale, l\u0026rsquo;aumento delle tasse che nessuno annuncia La tassa più grande per chi paga il 40% non ha bisogno di nessun nuovo annuncio, e può già costare quasi sei volte quello che costerà l\u0026rsquo;eVED. È il drenaggio fiscale.\nLa Personal Allowance e il limite dell\u0026rsquo;aliquota base sono stati fissati «at their 6 April 2021 levels», e ora sono mantenuti «until 5 April 2031»11. Sono dieci anni a £12.570 e una soglia dell\u0026rsquo;aliquota alta di £50.270, mentre il bilancio stesso dice che «consumer prices today are around 33% higher than the 2020 average»1. Ogni aumento di stipendio che si limita a tenere il passo con i prezzi spinge più del tuo reddito nella fascia del 40%. Il tuo stipendio non vale di più, e ci paghi più tasse.\nIl drenaggio fiscale, con le cifre stesse del governo Soglie fissate a livelli del 6 aprile 2021 Congelate fino al 5 aprile 2031, dieci anni Prezzi dal 2020 circa il 33% più alti Gettito extra dalla sola proroga 2028–2031 £3.365m, £7.780m, poi £12.435m l\u0026rsquo;anno Persone trascinate nell\u0026rsquo;imposta sul reddito entro il 2030-31 700.000 La riga del gettito è la stima del Tesoro stesso11, e mostra il drenaggio che cresce, perché ogni anno di congelamento si somma a quello prima.\nAllora dove sarebbero le soglie se non fossero mai state congelate? La legge dice già come calcolarlo. Entrambe salgono ogni aprile con l\u0026rsquo;indice dei prezzi al consumo «for the September before the start of a tax year», la Personal Allowance arrotondata per eccesso alle £10 successive12 e il limite dell\u0026rsquo;aliquota base alle £100 successive13. Ecco quella regola applicata alle cifre di settembre dell\u0026rsquo;ONS stesso, 3,1%, 10,1%, 6,7%, 1,7%, 3,8% e 3,5%14:\nAnno fiscale Personal Allowance, indicizzata Soglia aliquota alta, indicizzata Congelata a Imposta in più, chi paga il 40% 2022-23 £12.960 £51.860 £12.570 e £50.270 £396 2023-24 £14.270 £57.170 £12.570 e £50.270 £1.720 2024-25 £15.230 £61.030 £12.570 e £50.270 £2.684 2025-26 £15.490 £62.090 £12.570 e £50.270 £2.948 2026-27 £16.080 £64.480 £12.570 e £50.270 £3.544 2027-28 £16.650 £66.750 £12.570 e £50.270 £4.112 La soglia dell\u0026rsquo;aliquota alta dovrebbe essere £64.480 oggi, non £50.270. Sono £14.210 di reddito ora tassati al 40% che la legge altrimenti avrebbe tassato al 20%, o per niente.\nLa colonna dell\u0026rsquo;imposta in più vale per chi paga il 40% e guadagna sopra la soglia indicizzata e sotto £100.000. Ogni pound in più di Personal Allowance fa risparmiare 40p e ogni pound in più di fascia base fa risparmiare 20p, quindi il 2026-27 è £3.510 al 40% più £10.700 al 20%. Somma i cinque anni fino ad aprile 2027 e fa £11.292, prima che venga annunciata una sola tassa nuova. È solo imposta sul reddito, e lascia fuori la National Insurance, perché indicizzare il limite superiore della NI avrebbe messo più dello stesso reddito all\u0026rsquo;aliquota dell'8% invece che del 2%, che va nell\u0026rsquo;altro verso.\nNessuno si alza ogni anno ad annunciarlo. È la tassa che chi paga il 40% paga con più regolarità, ed è quella che questo bilancio ha scelto di lasciare com\u0026rsquo;è.\nE i redditi bassi la pagano per primi In pound, la fascia del 40% è quella che perde di più con il congelamento. Ma guarda chi colpisce più forte. Ecco la stessa regola applicata a quattro lavoratori nel 2026-27, solo imposta sul reddito:\nLavoratore, 2026-27 Imposta pagata oggi Se le soglie avessero tenuto il passo In più all\u0026rsquo;anno Quota dello stipendio Part-time, £16.000 £686 £0 £686 4,3% Tempo pieno al National Living Wage, £23.132 £2.112 £1.410 £702 3,0% £40.000 £5.486 £4.784 £702 1,8% Chi paga il 40%, £70.000 £15.432 £11.888 £3.544 5,1% Il part-time è quello da guardare. Chiunque guadagni tra £12.570 e £16.080 ora paga l\u0026rsquo;imposta sul reddito su soldi che la legge avrebbe lasciato stare, e il documento di policy prevede che il congelamento porti «700,000 individuals into Income Tax by 2030 to 2031»11. Chi paga il 40% può assorbire £3.544 e brontolare. £686 su £16.000 non erano mai di troppo. E la National Insurance parte dalle stesse £12.570 congelate, quindi i redditi bassi pagano anche quella.\nOra il titolo che il bilancio vuole che tu veda. Il National Living Wage sale a £13,21 l\u0026rsquo;ora ad aprile 2027, «equivalent to an increase of £910 in the gross annual earnings of a full-time worker»1, dagli attuali £12,7115. In quello stesso anno, il 2027-28, la Personal Allowance congelata toglie a quello stesso lavoratore £816 di imposta sul reddito in più di quanto avrebbe fatto la legge. L\u0026rsquo;aumento è vero. Il Tesoro se ne è già speso la maggior parte.\nPoi le persone che ha scelto di proteggere. Da aprile 2027 una nuova Pension Tax Allowance fa sì che i pensionati «with incomes at or under the value of the full new State Pension will not be brought into paying tax because of State Pension uprating in this Parliament»1. È un rimedio al congelamento, ed è un rimedio giusto. Posso chiedere perché si ferma ai pensionati? Un lavoratore con lo stesso reddito, che per averlo fa una settimana piena, non riceve nessuno sgravio.\nAiuto con la bolletta, o un sussidio a un mercato che non funziona? Comincia da cos\u0026rsquo;è davvero il pagamento da £100. Il riassunto che gira oggi lo chiamava un versamento sul conto in banca. Il bilancio lo chiama un «£100 council tax rebate for households in bands A to D»1, erogato dai comuni da gennaio 2027. In ogni caso, finisce nella bolletta dell\u0026rsquo;energia.\nE né questo né l\u0026rsquo;IVA allo 0% cambiano quanto costa l\u0026rsquo;energia. La bolletta resta della stessa grandezza. Il contribuente ne paga solo una parte. Allora dove va una bolletta? La ripartizione di Ofgem della bolletta tipica da luglio 20264:\nDove va la bolletta tipica, da luglio a settembre 2026 Quota Energia all\u0026rsquo;ingrosso, compresi i contratti per differenza 45% Reti 25% Costi operativi, di morosità e di settore 16% Costi delle politiche 6% IVA 5% Margine di profitto del fornitore (EBIT) 2,6% Margine di sicurezza e livellamento 1,5% Sette pound su dieci vanno ai produttori e alle società di rete. Un margine di profitto per il fornitore è scritto nel tetto stesso. Quindi i £3.685 milioni sono soldi pubblici, raccolti con la fiscalità generale con l\u0026rsquo;aiuto di una sovrattassa sulle banche, e ogni pound finisce in quelle stesse mani private. Non è un aiuto con l\u0026rsquo;energia. È un sussidio al mercato dell\u0026rsquo;energia, fatto passare per la council tax perché sembri un aiuto.\nUn sussidio per cosa, esattamente? Secondo il Tesoro stesso, i prezzi dell\u0026rsquo;energia domestica sono più alti del 73% rispetto alla media del 20201, e il debito energetico delle famiglie «has almost tripled to over £5 billion»1. Un mercato che ha accumulato tanto debito delle famiglie da quando la Russia ha invaso l\u0026rsquo;Ucraina è un mercato che non funziona. Questo bilancio non lo ripara. Paga il conto per lui quest\u0026rsquo;inverno, e dovrà pagarlo di nuovo il prossimo, perché nel prezzo non si è mosso niente.\nMettilo accanto a quello che lo stesso bilancio chiede indietro ai produttori. L\u0026rsquo;Electricity Generator Levy passa dal 45% al 55% fino a marzo 2028, e nella Tabella 6.1 raccoglie £95 milioni1. Nei prossimi sei anni il contribuente mette £3.685 milioni nelle bollette da cui quei produttori vengono pagati. Il prelievo sugli extraprofitti ne riprende £95 milioni. Fa quasi 39 a 1.\nChe le banche ne paghino £1.475 milioni con la sovrattassa è la parte giusta, e lo dico. Ma un sussidio che lascia il prezzo dov\u0026rsquo;è non compra niente che duri. L\u0026rsquo;unico aiuto per l\u0026rsquo;energia che dura è quello di «Niente per il tetto» qui sotto, quello che fa sì che una casa ne abbia bisogno di meno.\nA chi vanno invece i soldi Se non a questa casa, allora a chi? La tabella delle stime del bilancio stesso, la Tabella 6.1, dà il costo di ogni misura dal 2026-27 al 2031-321, quindi non serve tirare a indovinare. Ecco i regali più grandi, sommati sui sei anni.\nChi prende i soldi nel bilancio 2026 Costo per il Tesoro in sei anni, dal 2026-27 al 2031-32, £ milioni Sussidio alle bollette 3.685 Automobilisti: accise, rimborsi km 2.510 10.000 industrie 2.320 Bruciare rifiuti, CO2 senza prezzo 1.505 Founders' Relief 1.285 Piccoli negozi di strada 1.165 Trading Allowance a £3.000 745 a nome delle famiglie grandi imprese e ricchi piccole imprese I regali più grandi nella Tabella 6.1 del bilancio 2026, sommati dal 2026-27 al 2031-32. In blu ciò che si paga a nome delle famiglie, in rosa ciò che va alle grandi imprese e ai ricchi, in oro alle piccole imprese. 10.000 industrie ricevono quasi quanto tutti gli automobilisti del paese. La barra delle famiglie sembra il regalo più grande di tutti. La sezione qui sopra spiega dove finiscono davvero quei soldi.\nGuarda però le barre rosa.\n10.000 industrie, £2.320 milioni. Da aprile 2027 il British Industrial Competitiveness Scheme esenta le «eligible businesses \u0026hellip; from the indirect costs of the Renewables Obligation, Feed in Tariffs and Capacity Market schemes»1, tagliando le loro bollette elettriche «by up to 25%». Nel solo 2027-28 fanno £1.235 milioni, in media circa £123.500 per impresa, contro £100 per famiglia. Quegli stessi tre schemi restano su ogni kWh che questa casa importa. Termovalorizzazione, £1.505 milioni. Il rinvio del prezzo del carbonio sulla combustione dei rifiuti. Questa merita più di una riga, quindi ha i suoi paragrafi qui sotto. Founder, £1.285 milioni. Un nuovo Founders\u0026rsquo; Relief: «a 10% CGT rate on up to £10 million of lifetime gains for qualifying founders of high-growth, innovative companies»1. La riga sulla termovalorizzazione nella Tabella 6.1 è lunga nove parole: «Delay the inclusion of energy from waste in the ETS»1. Ecco cosa c\u0026rsquo;è dietro.\nBruciare rifiuti e il prezzo del carbonio Il piano del 2024 piena inclusione nello UK Emissions Trading Scheme «from 2028»16 Cosa si sarebbe pagato solo la CO2 fossile, la plastica in ciò che si brucia16 Deciso il 27 agosto 2026 «will not take place in 2028», nessuna nuova data17 Perso dal Tesoro, dal 2028-29 al 2031-32 £1.505 milioni1 Le centrali elettriche sono già dentro lo schema, con «the power sector in scope of the UK ETS»16, e fino al 2028 pagano in più il Carbon Price Support, «£18/tCO2e on fossil-fuel powered electricity generation»1. Un inceneritore che brucia plastica non ne paga niente, e non c\u0026rsquo;è una data per quando lo farà.\nPer essere onesti su chi ci guadagna, non sono solo gli operatori. Il costo del carbonio sarebbe stato «passed through to local authorities», e l\u0026rsquo;ente per il riciclo dei comuni ha accolto il rinvio come «some immediate relief»17. È giusto, perché un comune non ha prodotto la plastica che gli viene consegnata. Ma la consultazione stessa del governo aveva già trovato la risposta. Proponeva di dividere il costo attraverso la Extended Producer Responsibility sugli imballaggi, lo schema che fa pagare gli imballaggi a chi li mette sul mercato, e stimava che «between 20-30% of fossil waste by weight that is incinerated is within scope»16. In altre parole, far pagare chi ha fatto la plastica.\nInvece non paga nessuno. Gli operatori lo evitano, i produttori di imballaggi lo evitano, e i £1.505 milioni escono dalla parte del Tesoro. Il carbonio sale comunque su per il camino.\nPoi i data center. Un nuovo Data Centre Covenant chiede loro di pagare «their fair share of energy». Tutti i data center sono «encouraged to meet the tests», e solo quelli strategici che cercano un sostegno rafforzato sono obbligati1. In cambio una Ministerial Control Centre «accelerate time to power», riservando capacità futura di rete e «reallocating capacity released when other projects leave the connections queue»1. I più grandi nuovi consumatori di elettricità del paese vengono spostati avanti nella coda in cui aspettano tutti gli altri, con test che la maggior parte di loro deve solo essere incoraggiata a rispettare.\nLo sgravio per i founder ha senso solo accanto a quello che nella stessa tabella si fa a chi costruisce imprese normali.\nLa piccola impresa paga la grande idea Nella Tabella 6.1 ci sono due scambi, ed entrambi fanno pagare una piccola impresa.\nDue scambi: chi paga chi Titolari che vendono, founder che crescono Limite a vita della BADR dimezzato £1.085 mln tolti Nuova Founders' Relief al 10% £1.285 mln dati Venditori online, negozi di strada Le piattaforme riscuotono l'IVA £1.270 mln tolti Sgravio a negozi e pub £1.165 mln dati raccolto regalato Due scambi nella Tabella 6.1, sommati su sei anni, in rosa ciò che si raccoglie e in blu ciò che si regala. Lo sgravio tolto ai titolari che vendono va ai founder ad alta crescita, e lo sgravio sulle imposte locali del commercio di strada è pagato dai venditori online. Il primo scambio sono i founder contro i titolari. Il Business Asset Disposal Relief è lo sgravio che usano un idraulico, un negozio o una piccola azienda meccanica quando il titolare vende o va in pensione. È già al 18% sulle cessioni dal 6 aprile 202618. Questo bilancio dimezza il suo limite a vita «from £1 million to £500,000 from April 2027», raccogliendo £1.085 milioni1. Nella stessa tabella, il Founders\u0026rsquo; Relief dà il 10% fino a £10 milioni alle «high-growth, innovative companies» e costa £1.285 milioni.\nBusiness Asset Disposal Relief Founders\u0026rsquo; Relief Per chi è chiunque venda un\u0026rsquo;impresa che ne ha diritto i founder di «high-growth, innovative companies» Aliquota 18% 10% Limite a vita tagliato da £1 milione a £500.000 £10 milioni Effetto su sei anni raccoglie £1.085 milioni costa £1.285 milioni La difesa del Tesoro è che «three-quarters of BADR claimants will still receive relief on their entire gain»1. È vero, ed è proprio il punto. Il quarto che lo perde è quello che ha costruito, in una vita di lavoro, qualcosa che vale più di mezzo milione, e il suo sgravio è andato a persone le cui plusvalenze arrivano a dieci milioni.\nIl secondo scambio è il commercio di strada contro i venditori online. Lo sgravio sulle imposte locali per negozi, pub e ristorazione è vero e benvenuto: 70.000 imprese in più che non pagano nessuna business rate, a un costo di £1.165 milioni sulle tre misure. Il Tesoro dice chiaramente come si paga: «by ensuring businesses with significant sales online pay the VAT they owe, by requiring online marketplaces to collect it on their behalf»1. Questo raccoglie £1.270 milioni.\nQuindi le piccole imprese del commercio di strada vengono pagate dalle piccole imprese online. Nessuno di grande ci mette niente.\nVia Warm Homes, dentro le armi Il riordino più grande di questo bilancio non sta in nessuna bolletta. È la difesa.\nA giugno il governo ha annunciato £15 miliardi per il Defence Investment Plan tra il 2026-27 e il 2029-30. Questo bilancio trova gli ultimi £4,7 miliardi «further reducing departmental capital budgets by 1% from 2027‑28 to 2029‑30 to raise £3 billion» e prendendo £1,7 miliardi dalla riserva di capitale del Tesoro1. Paga il budget per le costruzioni di ogni dipartimento.\nLa quota del dipartimento dell\u0026rsquo;energia è quella che cade su una casa come la mia:\nTagliato al dipartimento dell\u0026rsquo;energia per finanziare la difesa Importo Contributo in conto capitale del Warm Homes Plan £1 miliardo Progetti sull\u0026rsquo;idrogeno £500 milioni Cattura, utilizzo e stoccaggio del carbonio £200 milioni Great British Energy £200 milioni È l\u0026rsquo;elenco stesso del Tesoro1. Due righe non le contesto. L\u0026rsquo;idrogeno e la cattura del carbonio sono uno spreco di soldi pubblici, e per le ragioni di «L\u0026rsquo;idrogeno è la scommessa sbagliata» qui sopra, tagliarne £500 milioni e £200 milioni è la scelta giusta. Andavano tagliati per intero. La cattura del carbonio esiste per tenere acceso ancora un po\u0026rsquo; il fossile, e un governo serio sulle bollette tasserebbe quel settore, non lo pagherebbe per tenerlo in piedi.\nLa riga di Warm Homes è il contrario. Il governo dice che «remains committed to heat pump deployment» nello stesso paragrafo in cui toglie un miliardo al Warm Homes Plan. Dice anche che la maggior parte dei fondi del piano per le famiglie a basso reddito e l\u0026rsquo;edilizia sociale «is protected», ed è giusto ricordarlo. Ma far sì che una casa abbia bisogno di meno energia è l\u0026rsquo;unico tipo di sostegno energetico che non va mai ripagato l\u0026rsquo;inverno dopo, ed è proprio quello che è stato tagliato per pagare questo.\nSe i soldi del contributo se ne vanno, l\u0026rsquo;obbligo non dovrebbe andarsene con loro. Esiste già una regola per le case in affitto privato in Inghilterra e Galles: «Private landlords of all tenancies will be required to comply with the higher standard by 1 October 2030», un obiettivo EPC C19. Ma leggi il dettaglio:\nCase in affitto privato, lo standard del 2030 Cosa dice la regola Scadenza 1 ottobre 2030 Il massimo che un proprietario deve spendere «up to £10,000 per property», in media £5.400 Pompa di calore o solare obbligatori? nessuno dei due, la misura secondaria si sceglie «at the discretion of the landlord» È uno standard con un limite di spesa e un menù. Tagliare il contributo Warm Homes avrebbe dovuto venire con il contrario: un obbligo per cui ogni casa in affitto privato abbia isolamento, pompa di calore e solare entro il 2030, o non si può più affittare. Il proprietario incassa l\u0026rsquo;affitto. L\u0026rsquo;inquilino paga la bolletta dell\u0026rsquo;energia. Senza un requisito vincolante il proprietario non ha motivo di spendere soldi che fanno risparmiare solo qualcun altro, e l\u0026rsquo;inquilino resta a pagare le bollette e, con le sue tasse, anche il sussidio su di esse.\nPoi l\u0026rsquo;obiettivo. Il governo spiegherà «how we will meet our NATO commitment of spending 3.5% of GDP on defence by 2035, with a target date for 3% in 2030»1. In più, il National Wealth Fund e la British Business Bank «deploy up to £5 billion over the next four years into defence, dual use and other sectors»1, e UK Export Finance riceve più capacità «to support UK defence exports»1.\nIn parte lo sostengo, e lo dico chiaramente. La Russia ha invaso l\u0026rsquo;Ucraina. La causa è la guerra di Putin, ed è giusto che l\u0026rsquo;Ucraina si difenda. I £500 milioni in più per la difesa aerea ucraina quest\u0026rsquo;inverno1 sono soldi che non rimpiango.\nMa guarda a chi vanno davvero i soldi. Queste sono le statistiche ufficiali accreditate del Ministry of Defence per il 2025/2620:\nSpesa del MoD con l\u0026rsquo;industria, 2025/26 Cifra Pagato all\u0026rsquo;industria, britannica e straniera £43,4 miliardi Quota che va a soli dieci fornitori 40% BAE Systems da sola poco più di £7,3 miliardi, 16,5% Quota più alta di un singolo fornitore dal 2007/08 Pagato con contratti senza gara 47%, £20,5 miliardi Quindi paghiamo tutti le tasse alle aziende di armi? Sì, secondo il conto stesso del MoD. E quasi metà si spende senza gara.\nE una parte esce direttamente dal paese. Ecco quei dieci fornitori dalla tabella dati del MoD, con la sede di ciascuno21:\nI dieci maggiori fornitori del MoD, 2025/26 £ milioni Britannico? BAE Systems PLC 7.258 Sì Babcock International Group PLC 3.288 Sì Rolls-Royce Holdings PLC 1.562 Sì QinetiQ Group PLC 1.114 Sì Airbus Group SE 834 No, europeo, registrato nei Paesi Bassi Leonardo SpA 778 No, Italia Thales 736 No, Francia Serco Group PLC 726 Sì Leidos Holdings Inc. 646 No, Stati Uniti The Boeing Company 597 No, Stati Uniti Metà dei primi dieci sono stranieri, e insieme hanno preso £3.591 milioni, un quinto di quello che hanno ricevuto i dieci. E non finisce con i primi dieci. Più in basso nella stessa tabella ci sono la holding industriale dello Stato spagnolo, Sociedad Estatal de Participaciones Industriales, con £389 milioni, e l\u0026rsquo;agenzia per le partecipazioni dello Stato francese, l\u0026rsquo;Agence des participations de l\u0026rsquo;État, con £300 milioni21. Sono soldi della difesa britannica pagati direttamente a due governi stranieri.\nE i due nomi britannici più grandi della lista? Vale la pena chiedersi cosa ne fanno. Ecco i loro bilanci:\nDai loro bilanci BAE Systems, 2025 Babcock, anno a marzo 2026 Pagato dal MoD, 2025/2621 £7.258m £3.288m Ricerca e sviluppo £407m autofinanziati22 £203,3m spesati23 Dividendi pagati £1.027m £36,7m Riacquisto di azioni proprie £502m £155,3m Restituito agli azionisti £1.529m £192,0m BAE ha restituito ai suoi azionisti £1.529 milioni in un solo anno, quasi quattro volte i £407 milioni che ha messo nella propria ricerca. Ha anche preso £29 milioni di crediti d\u0026rsquo;imposta per ricerca e sviluppo22, con il contribuente che ci mette di nuovo la sua parte. Il MoD le ha pagato £7,3 miliardi in un anno, e gli azionisti ne hanno portati via £1,5 miliardi.\nBabcock è al contrario, e bisogna essere giusti. Ha speso in ricerca più di quanto abbia restituito. Prende anche il 63,5% dei suoi ricavi mondiali dal MoD20, il che la rende un\u0026rsquo;azienda che di fatto è il contribuente a tenere in piedi. Un\u0026rsquo;azienda così dipendente dai soldi pubblici dovrebbe essere gestita per il pubblico che la paga.\nPoi ci sono i soldi che non toccano mai un appaltatore. Il MoD ha fatto passare £744 milioni attraverso le Foreign Military Sales, «a mechanism used to purchase equipment from the US Government», pagati oltre i £43,4 miliardi, e £469 milioni erano per Boeing20. Sono le nostre tasse che entrano nel programma di armamenti di un altro governo, e secondo me finanziano proprio quell\u0026rsquo;instabilità globale da cui poi ci dicono che dobbiamo spendere di più per difenderci. Il nuovo Multilateral Defence Mechanism del bilancio è costruito per il «joint procurement across partners»1, il che significa più ordini all\u0026rsquo;estero, non meno.\nLa mia posizione è semplice. Neanche un pound dei soldi della difesa britannica dovrebbe andare a un appaltatore straniero. Se questo paese spenderà il 3,5% di tutto quello che guadagna per la difesa, ogni pound dovrebbe costruire competenze, fabbriche e posti di lavoro qui, e pagare le tasse qui. Costruiscilo qui o non comprarlo.\nPosso chiedere perché il MoD non lo conta nemmeno? Le sue stesse statistiche danno il totale pagato alle «UK and foreign owned organisations» come un\u0026rsquo;unica cifra, senza separare le due20. Non puoi far scendere un numero che nessuno pubblica.\nQuello che manca del tutto è qualunque sforzo per ridurre la spesa. Ho cercato in tutte le 162 pagine:\nParola nel bilancio 2026 Quante volte compare defence più di 120 diplomacy 0 ceasefire 0 de-escalation 0 C\u0026rsquo;è un capitolo intero su come far crescere l\u0026rsquo;industria della difesa, finanziarla con capitali privati ed esportarne di più, e neanche una riga su come ridurne il bisogno. Una corsa agli armamenti che nessuno cerca di fermare ha un solo gruppo di vincitori, ed è elencato nelle tabelle dei fornitori del MoD, non in una cucina in Inghilterra.\nNiente per il tetto Il kWh più economico è quello che una casa non deve mai comprare. L\u0026rsquo;isolamento nel sottotetto e il solare sul tetto continuano a ripagarsi ogni inverno, molto dopo che un pagamento da £100 è stato speso. Allora cosa fa per loro un bilancio venduto come quello che abbassa le bollette?\nAlza l\u0026rsquo;IVA.\nL\u0026rsquo;installazione di materiali per il risparmio energetico in casa ha aliquota zero «from 1 May 2023 to 31 March 2027», e l\u0026rsquo;elenco comprende isolamento, pannelli solari, batterie e pompe di calore24. Questo bilancio la lascia scadere. Il paragrafo 6.215 si intitola «Revert to reduced rate on energy saving materials (ESMs) as planned», e dal 1 aprile 2027 torna al 5%, con le batterie termiche aggiunte all\u0026rsquo;elenco come unica novità1. Su un lavoro da £10.000 tra solare e batteria sono £500 in più.\nQuindi nello stesso documento l\u0026rsquo;IVA esce dall\u0026rsquo;elettricità che compri e rientra sull\u0026rsquo;attrezzatura che ti evita di comprarla.\nPoi conta le parole. In 162 pagine, «insulation» compare zero volte. «Rooftop» e «solar panel» compaiono zero volte. Le pompe di calore hanno due menzioni, ed entrambe sono nel paragrafo che toglie £1 miliardo al Warm Homes Plan per pagare la difesa1.\nE il contributo per le pompe di calore? Il Boiler Upgrade Scheme paga «£7,500 towards an air source heat pump»25, e il bilancio vuole «maintain the Boiler Upgrade Scheme at current funding levels of £400 million in 2027‑28 and rising broadly in line with inflation thereafter»1. Non tagliato, quindi, ma nemmeno aumentato. £400 milioni a £7.500 l\u0026rsquo;una fanno al massimo circa 53.000 pompe di calore l\u0026rsquo;anno. Il Tesoro conta circa 29 milioni di famiglie nel Regno Unito1. A questo ritmo, arrivare a tutte richiederebbe più di 500 anni.\nI soldi per l\u0026rsquo;energia nel bilancio 2026 Cifra su sei anni Cosa resta dopo l\u0026rsquo;inverno Pagamento da £100 e IVA allo 0% sull\u0026rsquo;elettricità £3.685 milioni spesi niente, sono finiti Contributo in conto capitale del Warm Homes Plan £1 miliardo tagliato meno case isolate IVA su isolamento, solare e batterie dallo 0% di nuovo al 5% più caro farlo da soli Avendo pagato il mio, vedo esattamente cosa manca. Se un governo volesse le bollette più basse per sempre, isolerebbe ogni casa che ne ha bisogno e metterebbe il solare su ogni tetto che lo regge, a cominciare da ogni casa nuova costruita da qui in avanti. Fallo una volta, per bene, e l\u0026rsquo;aiuto non va più ricomprato l\u0026rsquo;inverno dopo. Questo bilancio paga l\u0026rsquo;inverno e tassa la soluzione.\nNo, vendere le tue cose su eBay non viene tassato Molte persone hanno letto la regola sui marketplace online come la fine della vendita delle proprie cose vecchie su eBay o Vinted senza una bolletta IVA. Non è così, e il bilancio lo dice con queste parole.\nDa ottobre 2027 le piattaforme riscuotono l\u0026rsquo;IVA «on sales by UK VAT-registered businesses and any other UK business with a minimum annual sales threshold per platform of £90,000». Le regole «will not apply to non-business (i.e. personal) sales, second-hand goods, or business-to-business transactions»1.\nLa confusione nasce da tre soglie diverse che vengono citate come se fossero un\u0026rsquo;unica regola:\nRegola Soglia Cosa significa Nuova riscossione dell\u0026rsquo;IVA da parte delle piattaforme un\u0026rsquo;impresa che vende £90.000 l\u0026rsquo;anno su una piattaforma la piattaforma riscuote l\u0026rsquo;IVA che l\u0026rsquo;impresa doveva già Segnalazione delle piattaforme all\u0026rsquo;HMRC, dal 2024 30 vendite, o circa £1.700, in un anno la piattaforma ti segnala. Non è una tassa Attività commerciale o no i nove «badges of trade» dell\u0026rsquo;HMRC decide se devi qualcosa di tasse Sulla segnalazione l\u0026rsquo;HMRC è diretto: «A platform reporting your details to HMRC does not automatically mean you owe tax»26. Le piattaforme non ti segnalano se «make fewer than 30 sales of goods in a calendar year» e «receive less than 2,000 euros (about £1,700)»26. E dal suo stesso ufficio stampa: «if you are not trading and just occasionally sell unwanted items online – there is no tax due»27.\nAllora chi è un venditore ad alto volume? Non c\u0026rsquo;è un numero di oggetti. Se svolgi un\u0026rsquo;attività commerciale lo decidono i badges of trade dell\u0026rsquo;HMRC, che comprendono «profit-seeking motive», «the number of transactions», «the nature of the asset» e «changes to the asset», e l\u0026rsquo;HMRC stesso dice che «the presence or absence of a particular badge is unlikely, by itself, to provide a conclusive answer»28. Svuotare il sottotetto non è un\u0026rsquo;attività commerciale, anche quando supera le 30 vendite o le £1.700 e ti fa segnalare. Comprare merce per rivenderla con un guadagno lo è.\nNota cos\u0026rsquo;è davvero quel test di segnalazione. Sono meno di 30 vendite e meno di circa £1.700, quindi superarne una qualsiasi ti fa segnalare. Vendi la tua vecchia auto su eBay per più di £1.700 e quella sola vendita basta. Non farti prendere dal panico se succede. Essere segnalato non è una bolletta fiscale, e l\u0026rsquo;HMRC elenca la Capital Gains Tax come dovuta su «most personal possessions worth £6,000 or more, apart from your car»29. Un\u0026rsquo;auto che hai usato tu ne è fuori.\nMa la segnalazione riguarda te, non l\u0026rsquo;auto, e il fatto che l\u0026rsquo;auto sia esente non rende esente con lei tutto il resto che hai venduto quell\u0026rsquo;anno. Ogni altra vendita si giudica da sola, esattamente come è sempre stato. Le tue cose che non ti servono più non sono ancora un\u0026rsquo;attività commerciale, e un singolo bene sotto le £6.000 è fuori dalla Capital Gains Tax29. Qualunque cosa tu abbia comprato per rivenderla con un guadagno è attività commerciale, però, e una volta segnalato l\u0026rsquo;HMRC ha le tue vendite davanti. Se una parte è attività commerciale, le prime £1.000 l\u0026rsquo;anno sono esentasse, che salgono a £3.000 dal 6 aprile 2027 con questo bilancio1. Quindi annota cos\u0026rsquo;era ogni cosa: tua, o comprata per rivenderla.\nE per il sottotetto, lo spreco è la segnalazione stessa. Chi svuota la propria casa si vede mandare i dati all\u0026rsquo;HMRC, la piattaforma paga per compilare la segnalazione e l\u0026rsquo;HMRC paga per elaborarla, e sulle vendite personali non riscuote niente, perché non è dovuto niente. È spesa pura, e finisce comunque sulle tue tasse.\nQuindi lo spavento per questo bilancio era niente. La preoccupazione per il prossimo no. Il meccanismo ora è costruito. Le piattaforme segnalano i venditori all\u0026rsquo;HMRC dal 2024, e da ottobre 2027 riscuoteranno l\u0026rsquo;IVA alla fonte per i venditori che sono imprese. L\u0026rsquo;esenzione per le vendite personali è una riga in un bilancio, e una riga in un bilancio si può togliere nel successivo senza dover costruire niente di nuovo. Una volta posato il tubo, allargarlo è una modifica di una riga. Non scommetterei che l\u0026rsquo;esenzione duri solo perché oggi c\u0026rsquo;è.\nLa cosa vera in quella parte del bilancio è lo scambio di cui sopra.\nIl respiro è una cosa che si paga Respiro è una bella parola per un bilancio. Suona come un sollievo. Leggi le stime e si descrive meglio come un insieme di decisioni su chi deve trattenere il fiato.\nLa casa di cui ho fatto i conti qui ha fatto le cose che questo paese dice di volere. È passata all\u0026rsquo;elettrico. Produce e accumula la propria energia. Ha quasi rinunciato al gas. Le sue 20.000 miglia l\u0026rsquo;anno vanno a elettricità, in buona parte dal suo stesso tetto, e non hanno bisogno di niente dalla pompa di benzina.\nQuesta è autosufficienza, e la ricompensa è una tassa a miglio e una soglia congelata, con £100 per addolcirla il primo inverno. Il bilancio in certi punti è ragionevole. È giusto che le banche finanzino una parte del pagamento per l\u0026rsquo;energia, e giusto che chi usa poco gas smetta di pagare una quota fissa per un gas che quasi non usa. Ma lo schema sotto è abbastanza chiaro. L\u0026rsquo;aiuto va dove la bolletta fa più rumore: il grande consumatore industriale, il founder con dieci milioni di plusvalenze, il data center che ha bisogno della rete domani, l\u0026rsquo;azienda di armi con un contratto su cui a nessun altro è stato permesso di fare un\u0026rsquo;offerta. La famiglia silenziosa che si è sistemata da sola è da dove arriva il gettito, proprio perché non si lamenta e non può spostarsi.\nE quel respiro lo paghi più di una volta. Paghi con le tue tasse il sussidio sulla bolletta, paghi la bolletta, e l\u0026rsquo;inverno dopo paghi di nuovo tutte e due, perché niente in questo bilancio punta al motivo per cui la bolletta è alta. Lo stesso vale per il taglio dell\u0026rsquo;accisa sul carburante, prorogato di nuovo perché il petrolio che sostiene non è mai stato sostituito, e per i contratti sull\u0026rsquo;idrogeno che vanno pagati ogni anno perché il combustibile non sta in piedi da solo. Una soluzione si paga una volta. Un sussidio si paga ogni anno, dalle stesse persone, finché la causa resta dov\u0026rsquo;è. Questa è la scelta che fa questo bilancio, riga dopo riga: trattenere il fiato per un altro inverno invece di liberare le vie respiratorie.\nIl motivo per cui la causa non viene mai risolta è che il costo non cade mai su chi potrebbe risolverla. Questo bilancio non sposta il peso su chi beneficia dei sussidi, quindi loro non hanno motivo di cambiare niente. Il proprietario che non vuole mettere a norma una casa continua a incassare l\u0026rsquo;affitto mentre l\u0026rsquo;inquilino paga la bolletta e il contribuente paga il sussidio su di essa. Le compagnie petrolifere non hanno motivo di investire nella tecnologia pulita finché il Tesoro tiene il loro prodotto a buon mercato alla pompa. E il settore del gas va avanti con lo stesso modello di spreco, brucialo una volta e comprane altro, quando i tubi già sotto terra potrebbero essere l\u0026rsquo;inizio di un teleriscaldamento che sposta calore invece di combustibile. Nessuno fa la cosa costosa e sensata finché qualcun altro lo paga per continuare con quella economica e sprecona. E ogni scambio in questo bilancio va nello stesso verso. Il governo si assicura che le grandi aziende stiano bene, e il piccolo paga.\nSo quanto costa questo bilancio a questa casa, e vedo a quanto è prezzato sulla copertina del documento. Non sono lo stesso numero. La differenza è il motivo per leggere le stime da sé invece del discorso, perché nessuno di quelli che hanno scritto il discorso le leggerà al posto tuo.\nHM Treasury — Budget 2026: Breathing Space for Today, Fresh Hope for the Future — il documento di bilancio presentato al Parlamento il 28 ottobre 2026. Misure sull\u0026rsquo;energia ai paragrafi da 3.2 a 3.9 e Box 3.A, carburante, rimborsi chilometrici e ricarica dei veicoli elettrici da 3.12 a 3.16, eVED 1.30 e 2.38, BADR 2.53, BICS 4.24 e 6.31, la Gas Shipper Obligation 4.22 e 6.27, data center 4.137 e 4.138, il Warm Homes Plan e il Boiler Upgrade Scheme 4.36, difesa 2.5, 2.6, da 5.28 a 5.36 compreso il Multilateral Defence Mechanism a 5.30, e da 6.134 a 6.141, materiali per il risparmio energetico 6.215, Founders\u0026rsquo; Relief 6.257, Trading Allowance 6.254, marketplace online 6.154, National Living Wage 3.18, Pension Tax Allowance 3.19 e 6.182, Carbon Price Support 4.25, stime alla Tabella 6.1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Claim tax relief for your job expenses: vehicles you use for work — «This does not include travelling to and from your work, unless it\u0026rsquo;s a temporary place of work.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Changes to energy price cap between 1 October and 31 December 2026 — quota fissa del gas 29,68p al giorno e prezzo per unità 7,97p/kWh IVA al 5% inclusa; elettricità senza IVA dal 1 ottobre 2026 al 31 marzo 2027.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Summary of changes to the energy price cap, 1 July to 30 September 2026, revised TDCV — consumo domestico tipico dal 1 luglio 2026: «2,500 kWh of electricity, 9,500 kWh of gas».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Funding mechanism for the Hydrogen Production Business Model: proposed design of the Gas Shipper Obligation — la consultazione, da gennaio ad aprile 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Gas Shipper Obligation analytical annex — «approximately £2.60 - £4.50» l\u0026rsquo;anno sulla bolletta media del gas domestico tra il 2028 e il 2037, con un modello volumetrico, a prezzi 2023.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Hydrogen Production Business Model / Net Zero Hydrogen Fund: HAR1 successful projects — gli undici progetti, i loro sviluppatori e la capacità, il prezzo di esercizio medio ponderato di £241/MWh e «over £2 billion of revenue support».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEnergy Systems Catapult — Heat pumps shown to be three times more efficient than gas boilers — la sperimentazione Electrification of Heat finanziata dal governo, 742 pompe di calore installate: «The median SPF observed in ASHP systems \u0026hellip; was 2.80 (280%)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJan Rosenow, \u0026ldquo;Is heating homes with hydrogen all but a pipe dream? An evidence review\u0026rdquo;, Joule, 2022 — 32 studi indipendenti; citazioni come riportate da IEEE Spectrum, 4 ottobre 2022.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHM Treasury — Electric Vehicle Excise Duty (eVED) — documento di policy, 13 luglio 2026: 3p a miglio per le auto a batteria e a idrogeno, 1,5p per le ibride plug-in, dal 1 aprile 2028.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — Maintaining the Personal Allowance and basic rate limit until 5 April 2031 — documento di policy del bilancio 2025: soglie fissate «at their 6 April 2021 levels», mantenute «until 5 April 2031», 700.000 persone portate nell\u0026rsquo;imposta sul reddito entro il 2030-31, e l\u0026rsquo;impatto della proroga sui conti pubblici.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIncome Tax Act 2007, section 57 — la Personal Allowance è indicizzata con «the consumer prices index for the September before the start of a tax year» e arrotondata «up to the nearest amount which is a multiple of £10».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIncome Tax Act 2007, section 21 — il limite dell\u0026rsquo;aliquota base è indicizzato nello stesso modo e arrotondato «up to the nearest amount which is a multiple of £100».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nONS — CPI annual rate, all items, series D7G7 — settembre 2021 3,1%, 2022 10,1%, 2023 6,7%, 2024 1,7%, 2025 3,8%, 2026 3,5%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — National Minimum Wage and National Living Wage rates — £12,71 l\u0026rsquo;ora per i lavoratori dai 21 anni in su dal 1 aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK ETS Authority — UK Emissions Trading Scheme scope expansion: waste, consultation, 2024 — inclusione della termovalorizzazione e dell\u0026rsquo;incenerimento «from 2028», solo CO2 fossile, e ripartizione del costo tramite la Extended Producer Responsibility sugli imballaggi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLARAC — UK ETS will not be extended to waste incineration in 2028 — 27 agosto 2026, l\u0026rsquo;associazione dei comuni per il riciclo sul rinvio; vedi anche LocalGov, 27 agosto 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Business Asset Disposal Relief — «18% on all gains on qualifying assets disposed of from 6 April 2026».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Improving the energy performance of privately rented homes: government response — aggiornato il 21 gennaio 2026: conformità «by 1 October 2030», proprietari tenuti a «invest up to £10,000 per property», in media £5.400, la misura secondaria «at the discretion of the landlord».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMinistry of Defence — MOD trade, industry and contracts 2026 — statistiche ufficiali accreditate, 1 ottobre 2026: £43,4 miliardi con l\u0026rsquo;industria nel 2025/26, 40% con dieci fornitori, BAE Systems 16,5%, pagamenti senza gara 47% (£20,5 miliardi); Foreign Military Sales £744 milioni, di cui £469 milioni Boeing; nessuna ripartizione della spesa tra proprietà britannica e straniera; i pagamenti del MoD a Babcock pari al 63,5% dei suoi ricavi mondiali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMinistry of Defence — Data tables relating to MOD trade, industry and contracts 2026 — Tabella 4a, holding del settore privato pagate £50 milioni o più nel 2025/26. Il paese è quello in cui ciascuna holding ha sede o è registrata.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBAE Systems — Preliminary results announcement 2025 — 18 febbraio 2026: R\u0026amp;S autofinanziata «£407m», «dividends increased to £1,027m», riacquisto di azioni «at a cost of £502m», «the Group returned £1,529m to shareholders», crediti d\u0026rsquo;imposta per ricerca e sviluppo £29m.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBabcock International — Annual Report and Financial Statements 2026 — anno al 31 marzo 2026: «Total research and development costs expensed in the period was £203.3 million», «£36.7 million dividends paid» e «£155.3 million purchase of own shares».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — VAT on energy-saving materials and heating equipment (VAT Notice 708/6) — «A zero rate applies to the installation of certain specified energy-saving materials from 1 May 2023 to 31 March 2027», per isolamento, pannelli solari, batterie e pompe di calore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Boiler Upgrade Scheme: what you can get — £7.500 per una pompa di calore aria-acqua o geotermica, £5.000 per una caldaia a biomassa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — Selling goods or services on a digital platform — le soglie di segnalazione di 30 vendite e €2.000, e che la segnalazione «does not automatically mean you owe tax».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — No tax changes for online sellers — comunicato stampa, 4 dicembre 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC Business Income Manual — BIM20205, the badges of trade — i nove badges, e che nessuno da solo è decisivo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Capital Gains Tax: what you pay it on — i beni tassabili comprendono «most personal possessions worth £6,000 or more, apart from your car».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/politics/breathing-space-for-whom/","summary":"Cosa fa davvero il bilancio 2026 per chi paga l\u0026rsquo;aliquota del 40%, lavora da casa, ha un\u0026rsquo;auto elettrica che fa 20.000 miglia l\u0026rsquo;anno per il pendolarismo della sua metà, ha fotovoltaico e batteria e ha ridotto il gas all\u0026rsquo;acqua calda e a un po\u0026rsquo; di riscaldamento. Un conto voce per voce, dal documento stesso del Tesoro: il pagamento da £100 per l\u0026rsquo;energia domestica, l\u0026rsquo;IVA allo 0% sull\u0026rsquo;elettricità, la quota fissa del gas spostata nel prezzo per unità mentre resta quella più alta dell\u0026rsquo;elettricità, la Gas Shipper Obligation tolta dalla bolletta del gas e messa sulla fiscalità generale, e chi paga, perché l\u0026rsquo;idrogeno ricavato dall\u0026rsquo;elettricità perde contro una pompa di calore al 280%, la tassa chilometrica eVED su un pendolarismo da 20.000 miglia, e il drenaggio fiscale delle soglie congelate dal 2021 al 2031, calcolato rispetto a dove le avrebbe messe la legge, per chi paga il 40% e per i redditi bassi che colpisce per primi. Poi a chi vanno invece i soldi, dalle stime del bilancio stesso: 10.000 industrie energivore, gli operatori della termovalorizzazione, i founder ad alta crescita contro i normali titolari che vendono, le piccole imprese del commercio di strada pagate dai piccoli venditori online, i data center in testa alla coda per la rete, e il riarmo finanziato in parte tagliando il Warm Homes Plan, con le cifre del MoD su quanto va a BAE Systems e quanto si spende senza gara. Cosa non fa per isolamento e solare sul tetto, dove l\u0026rsquo;IVA torna al 5%, e che fine ha fatto il contributo per le pompe di calore. E cosa significa la nuova regola IVA sui marketplace online per chi vende le proprie cose su eBay.","title":"Respiro per chi? Il bilancio 2026 visto da una casa con auto elettrica, fotovoltaico e batteria"},{"content":"Meno byte arrivano al drive VDO è lo strato di deduplicazione e compressione del kernel Linux. Sta sotto un volume group e lavora a blocchi da 4 KiB. Ogni blocco che ha già visto, lo memorizza una volta sola.\nCosa significa per l\u0026rsquo;hardware è semplice. Al drive arrivano meno byte. Ho scritto attraverso VDO un mix al 75% duplicato e al 50% comprimibile, 30 secondi alla volta, e i contatori del drive stesso dicevano che aveva ricevuto dal 23 al 28% di ciò che il guest aveva scritto. Sei cloni completi del disco di un template hanno aggiunto in tutto 8 blocchi di dati. Trentadue kilobyte.\nByte arrivati al drive Senza VDO, qualsiasi dato 100% VDO, 4k casuale, 75% dup 28% VDO, 128k, 75% dup 23% VDO, 128k, dati casuali 100% Quota dei byte del guest arrivati al drive, esecuzioni da 30 s, media di due. Mix: 75% duplicato, 50% comprimibile. Byte scritti dal guest contro byte ricevuti dal drive, 30 secondi per ogni carico di lavoro, media di due esecuzioni. Senza VDO il drive riceve tutto. Con VDO riceve circa un quarto di un mix realistico, e tutto dei dati completamente casuali. Meno byte significa meno usura, e meno lavoro per qualsiasi cache sul drive o sul controller davanti a esso. Per arrivarci costa CPU e latenza, e su un drive veloce quel costo è misurato più sotto contro la stessa Optane senza VDO. Sui dischi rotanti lenti lo stesso costo sparisce dentro i tempi di seek, ed è lì che la cosa si fa interessante.\nDue regole danno forma a tutto ciò che segue. Lo stack è thick su thick: niente sopra VDO, e VDO stesso, può promettere più spazio di quello che ha il drive. E i metadati propri di VDO, l\u0026rsquo;indice e i journal, possono vivere su NVMe mentre i dati vivono su qualcosa di più lento.\nOgni numero qui viene da un solo host Proxmox VE 9.2, un Ryzen 7 5700G con 16 CPU, kernel 7.0.14-25-pve, LVM 2.03.31 e gli strumenti vdo 8.3.1.1 di Debian, su due drive Intel Optane cancellati al termine.\nCos\u0026rsquo;è VDO e dove si trova Il kernel descrive dm-vdo come un target device-mapper che «provides block-level deduplication, compression, and thin provisioning»1. Ogni blocco da 4 KiB in arrivo viene sottoposto a hash. Se un blocco identico è già memorizzato, VDO registra un riferimento invece di una copia. I blocchi che non sono duplicati passano per LZ4 e vengono impacchettati in più d\u0026rsquo;uno per blocco fisico, e i blocchi fatti solo di zeri non vengono memorizzati affatto2.\nÈ LVM a guidare il tutto. lvcreate --type vdo crea un VDO pool, che contiene i blocchi reali, e sopra di esso un VDO LV con la dimensione virtuale che chiedi2. Sul VDO LV va un volume group thick, e Proxmox lo usa come normale storage lvm.\nThick su thick: LVM su VDO Dischi VM: LV thick ciò che vedono i guest Volume group vdovg, 35 GiB ciò che legge Proxmox: storage lvm Proxmox non vede niente sotto questa linea VDO LV vdolv, 35 GiB virtuali dedup, LZ4, blocchi di zeri scartati VDO pool vdopool, 40 GiB i blocchi reali: li legge vdostats Il drive: nvme8n1 35 GiB virtuali, mai più di quanto contiene Proxmox vede un normale volume group thick. VDO sta sotto il suo volume fisico, dimensionato in modo da non poter mai promettere più di quanto contiene il drive. Strato Nome nel laboratorio Cosa fa Dischi delle VM vm-9901-disk-0 e così via LV thick, creati da Proxmox Volume group vdovg, 35 GiB LVM normale, ciò che legge lo storage lvm di Proxmox VDO LV vdolab/vdolv, 35 GiB virtuali dedup, LZ4, blocchi di zeri scartati VDO pool vdolab/vdopool, 40 GiB i blocchi reali, i metadati e l\u0026rsquo;indice di VDO Fisico nvme8n1 VG vdolab Thick su thick, o niente VDO è un thin provisioner a pieno titolo: al VDO LV si può dare qualsiasi dimensione virtuale. Fallo più grande di quanto il pool possa contenere e il volume group sopra è thick su una promessa, cioè thin su thin spostato di uno strato più in basso. L\u0026rsquo;ho fatto proprio così nella prima build, un VDO LV da 120 GiB su un pool da 40 GiB, e Proxmox mostrava un terzo dello storage libero mentre VDO era pieno.\nQuindi dimensiona il VDO LV su ciò che il pool può davvero indirizzare, non di più. lvcreate stampa quella cifra, «can address 36.00 GB» su questo pool da 40 GiB, e la block map di VDO per lo spazio logico esce dallo stesso spazio, quindi gli ho dato 35 GiB.\nPoi l\u0026rsquo;ho dimostrato nel modo più duro. Un solo disco di VM che prende ogni extent che Proxmox gli concede, 34 GiB, riempito da cima a fondo con dati casuali su cui VDO non può fare niente:\n# vdostats --human-readable Device Size Used Available Use% Space saving% vdolab-vdopool-vpool 40.0G 38.1G 1.9G 95% 0% Il disco si è esaurito alla sua fine, come deve fare un disco thick. VDO aveva ancora 1,9 GiB liberi, più dell'1 GiB che a Proxmox restava da allocare. La cifra di Proxmox è il limite reale, e VDO non può esaurirsi per primo.\nCiò a cui rinunci è l\u0026rsquo;overcommit: lo spazio che la deduplicazione risparmia si presenta come drive che non viene mai scritto, non come dischi in più per Proxmox. È lo scambio giusto per questo post, che parla dell\u0026rsquo;hardware. E non metterci sopra nemmeno un pool lvmthin. Due strati thin sono due libri contabili3.\nQuanto costa prima di memorizzare un byte VDO tiene un indice di deduplicazione, l\u0026rsquo;indice UDS, sul pool stesso. Un pool da 40 GiB vuoto riportava 4,0 GiB usati e 36,0 GiB disponibili. vdolistmetadata, dallo stesso pacchetto vdo, elenca ogni blocco di metadati sul dispositivo, e ne spiega quasi tutto:\nRegione Blocchi da 4 KiB Dimensione Indice UDS 679.127 2,59 GiB Recovery journal 32.768 128 MiB Reference count e journal, 18 slab 6.372 25 MiB Spazio troppo piccolo per un diciannovesimo slab 336.555 1,28 GiB Totale circa 4,0 GiB La riga degli avanzi vale la pena conoscerla: gli slab sono da 2 GiB, quindi dimensiona il pool in slab interi più l\u0026rsquo;overhead, altrimenti il resto rimane semplicemente inutilizzato.\nLa RAM è l\u0026rsquo;altro conto. Si paga che il pool sia occupato o fermo:\nCosto Regola da lvmvdo(7) Questo pool da 40 GiB Fisso 38 MiB 38 MiB Cache della block map 1,15 MiB per MiB di cache, minimo 150 MiB 150 MiB (128 MiB di default) Spazio fisico 268 MiB per TiB 11 MiB Indice UDS (dense) minimo 250 MiB, il default 256 MiB Totale circa 455 MiB L\u0026rsquo;indice dense di default copre una finestra di deduplicazione di circa 256 GiB, visto che un indice dense con 1 GiB di RAM «maintains a 1 TiB deduplication window»2. La cache della block map da 128 MiB è dimensionata per un «efficient access to 100 GB of logical space at a time», e la documentazione del kernel la indica come il valore più importante da regolare quando il working set cresce1.\nCostruire lo stack Lasciare che LVM veda un PV su un LV Il volume group sta su un LV, e di default LVM ignora gli LV come volumi fisici. devices/scan_lvs lo attiva, e il riferimento di LVM porta con sé l\u0026rsquo;avvertenza che va insieme: «Caution is required to avoid using PVs that belong to guest images stored on LVs»4. Altrimenti un guest che usa LVM dentro il proprio disco si vedrebbe comparire i suoi volume group sull\u0026rsquo;host.\nQuindi cambia anche il filtro. Stessa modifica. Il filtro di serie su questo host rifiutava solo gli zvol ZFS e i dispositivi RBD. Ho aggiunto un rifiuto per ogni disco di VM di Proxmox:\n# lvmconfig devices/global_filter devices/scan_lvs global_filter=[\u0026#34;r|/dev/zd.*|\u0026#34;,\u0026#34;r|/dev/rbd.*|\u0026#34;,\u0026#34;r|/dev/mapper/.*-(vm|base)--[0-9]+--disk--[0-9]+|\u0026#34;] scan_lvs=1 Lo stesso riferimento dice che scan_lvs «does not enable autoactivation of layered VGs»4. A Proxmox non serve. Il suo plugin LVM attiva ogni disco con lvchange -aey quando la VM si avvia5. L\u0026rsquo;ho provato nello stato in cui lo lascia un boot, tutto disattivato e poi le stesse esecuzioni udev di pvscan: il VG sotto VDO è salito, e qm start ha attivato da sé il disco della VM. Il tranello sta sotto. Con il VG sotto VDO incompleto, lo stesso qm start falliva con «Volume group “vdovg” not found».\nIl VDO pool, thick, con le impostazioni sulla riga di creazione Il formattatore è nel pacchetto vdo di Debian6:\n# apt install vdo Poi il pool. -L è lo spazio reale, -V la dimensione virtuale, tenuta dentro ciò che il pool può indirizzare. La disposizione dei thread e la dimensione del discard vanno sulla stessa riga, perché nessuna delle due si può cambiare dopo senza fermare tutte le VM sul pool:\n# pvcreate /dev/nvme8n1 Physical volume \u0026#34;/dev/nvme8n1\u0026#34; successfully created. # vgcreate vdolab /dev/nvme8n1 Volume group \u0026#34;vdolab\u0026#34; successfully created # lvcreate -y --type vdo -L 40G -V 35G -n vdolv vdolab/vdopool /dev/nvme8n1 --vdosettings \u0026#34;logical_threads=4 physical_threads=4 hash_zone_threads=2 cpu_threads=3 bio_threads=2 ack_threads=1 max_discard=4096\u0026#34; Wiping vdo signature on /dev/vdolab/vdopool. The VDO volume can address 36.00 GB in 18 data slabs, each 2.00 GB. It can grow to address at most 16.00 TB of physical storage in 8192 slabs. If a larger maximum size might be needed, use bigger slabs. Logical volume \u0026#34;vdolv\u0026#34; created. # dmsetup table vdolab-vdopool-vpool 0 73402368 vdo V4 /dev/dm-7 10485760 4096 32768 16380 deduplication on compression on maxDiscard 4096 ack 1 bio 2 bioRotationInterval 64 cpu 3 hash 2 logical 4 physical 4 La disposizione dei thread è quella misurata più sotto per un host con 16 CPU; max_discard=4096 ha una sezione tutta sua.\nIl volume group e lo storage di Proxmox # pvcreate /dev/vdolab/vdolv Physical volume \u0026#34;/dev/vdolab/vdolv\u0026#34; successfully created. # vgcreate vdovg /dev/vdolab/vdolv Volume group \u0026#34;vdovg\u0026#34; successfully created # pvesm add lvm vdo-lvm --vgname vdovg --content images,rootdir --on-volume-remove discard=1 # pvesm status | grep -E \u0026#34;Name|vdo-lvm\u0026#34; Name Type Status Total (KiB) Used (KiB) Available (KiB) % vdo-lvm lvm active 36696064 0 36696064 0.00% on-volume-remove discard=1 conta, ed è trattato più sotto.\nQuanto ha risparmiato la deduplicazione Ho scritto cose che un host Proxmox memorizza davvero e dopo ognuna ho letto i contatori di blocchi di VDO. logical blocks used è ciò che hanno scritto gli strati sopra; data blocks used è ciò che VDO ha memorizzato. Entrambi sono blocchi da 4 KiB.\nCosa è stato scritto Blocchi logici aggiunti Blocchi di dati aggiunti Risparmiato Rootfs di Rocky Linux 10, ext4 su un disco da 4 GiB 114.505 60.537 47% Sei cloni completi (qm clone --full, circa 4 s ciascuno) 6.291.456 8 99,9999% ISO di Proxmox Datacenter Manager 1.1, 1,36 GiB 356.172 351.965 1,2% La sua ricostruzione -auto, quasi gli stessi byte 356.399 40 99,99% 4 GiB di zeri 1.048.575 0 100% 1 GiB di dati casuali 262.143 262.144 0% Ogni clone ha scritto tutti i 4 GiB, zeri compresi, perché un clone completo su un LV thick copia ogni blocco. VDO ha memorizzato gli zeri come niente e il resto come riferimenti.\nVDO è bravissimo con i dati che ha già visto. E con il niente. È inutile su dati già compressi o cifrati, ed è per questo che la prima ISO, quasi tutta squashfs, ha risparmiato l'1,2%.\nCon il template e i suoi sei cloni al loro posto, Proxmox mostrava lo storage all'80,01% usato, 28 GiB di dischi thick su 35. Il drive conteneva 4,3 GiB, e la maggior parte era l\u0026rsquo;indice. Su uno storage thick il punto è proprio questo: Proxmox conta ciò che è stato allocato, e il drive porta ciò che è davvero diverso.\nCosa riceve davvero il drive Il risparmio su disco è un\u0026rsquo;istantanea. All\u0026rsquo;hardware importa il flusso. Così ho misurato i byte che arrivavano al drive durante la scrittura: fio per 30 secondi, il contatore di scrittura del drive da /sys/block prima e dopo, la stessa Optane con e senza VDO, due volte ciascuno.\nCosa è stato confrontato sulla Optane Optane, senza VDO VDO, 16 thread fio, 30 s LV normale nvme8n1: contatore di scrittura letto qui fio, 30 s LV in vdovg VDO LV: dedup, LZ4 VDO pool nvme8n1: contatore di scrittura letto qui I due stack dietro ogni cifra con e senza VDO sulla Optane: gli stessi job di fio, lo stesso drive, il contatore di scrittura letto in fondo. Il contatore è onesto. Su tutta la serie di prove ha sommato 794 GB, e anche i «Data Units Written» SMART del drive si sono mossi di 794 GB.\nCarico di lavoro, 30 s Senza VDO Con VDO, 16 thread Byte che arrivano al drive Scrittura casuale 4k, QD32, 4 job, 75% dup, 50% compress 582.013 IOPS, p99 244 µs 460.887 IOPS, p99 1,05 ms 28% Scrittura 128k, QD8, 75% dup, 50% compress 2.345 MiB/s, p99 490 µs 2.179 MiB/s, p99 1,02 ms 23% Scrittura casuale 4k, QD32, 4 job, dati casuali 571.721 IOPS da 272.366 a 381.005 IOPS dal 59 al 100% Scrittura 128k, QD8, dati casuali 2.346 MiB/s da 1.051 a 1.854 MiB/s 100% Su un mix realistico, VDO ha mantenuto dal 79 al 93% del throughput del drive nudo e gli ha mandato un quarto dei byte. Su dati completamente casuali non risparmia niente e costa parecchio, e le due esecuzioni erano così in disaccordo che do solo l\u0026rsquo;intervallo.\nLa latenza di coda è l\u0026rsquo;elaborazione di VDO stesso, non il drive. Un p99 di circa un millisecondo, contro un quarto di millisecondo a nudo.\nL\u0026rsquo;Optane non ha nessuna cache da alleggerire Questi drive lo dicono da soli: vwc 0 da nvme id-ctrl, write through in /sys/block. Un\u0026rsquo;Optane scrive sul posto senza staging in DRAM o SLC, quindi su questo hardware il guadagno sono i byte e l\u0026rsquo;usura, non una cache del drive che si riempie più lentamente. Un SSD NAND con una cache SLC, o un controller RAID con una cache write-back, è dove meno byte comprano anche reattività. È la sezione sul RAID6 più sotto.\nAllineare i thread di VDO alle CPU Di serie LVM dà a VDO dieci thread: uno logical, uno physical, uno hash zone, due CPU, quattro di bio submission, uno di acknowledgement. Su un host con 16 CPU questo lascia ferma la maggior parte della macchina mentre il lavoro sulla block map di VDO fa la coda dietro un unico thread logical.\nLa documentazione del kernel spiega le manopole1. I thread logical possiedono ciascuno «a disjoint section of the block map», quelli physical «a disjoint section of the data blocks», ed entrambi «can increase throughput», mentre i thread in eccesso «can waste resources and increase contention». I thread logical arrivano fino a 60, quelli physical fino a 16, e il pool ha bisogno di almeno uno slab per thread physical. Con 18 slab questo ha spazio.\nDisposizione logical physical hash cpu bio ack Totale Default di LVM 1 1 1 2 4 1 10 Allineata a 16 CPU 4 4 2 3 2 1 16 Il doppio 8 8 4 6 2 2 30 Ogni disposizione ha eseguito gli stessi job di fio due volte, alternati, con dati casuali, più tutti e sette i dischi clone letti insieme come quando sette VM si avviano insieme:\nTest, media di due esecuzioni Default Allineata a 16 CPU Il doppio Scrittura casuale 4k, QD32, 4 job 292.466 IOPS 365.314 IOPS 302.461 IOPS p99 scrittura casuale 4k, 4 job da 2,1 a 3,7 ms da 1,5 a 1,6 ms da 2,1 a 2,2 ms Scrittura sequenziale 1M 1.153 MiB/s 1.729 MiB/s 1.507 MiB/s Lettura casuale 4k, QD32, 4 job 507.450 IOPS 503.827 IOPS 485.263 IOPS Sette dischi clone letti insieme 7,5 s 3,1 s 3,4 s Allineata al numero di CPU vince quasi tutto: un quarto in più di scritture parallele, la metà in più sulle scritture sequenziali, sette dischi letti 2,4 volte più in fretta, e una coda più stretta. Raddoppiare ancora è peggio su tutta la linea. È la contesa da cui mette in guardia la documentazione. I default erano anche i meno stabili, con la lettura dei sette dischi che oscillava da 6,1 a 8,8 s tra un\u0026rsquo;esecuzione e l\u0026rsquo;altra.\nPer questo la regola è un thread VDO per CPU, distribuiti tra i tipi come sopra, con i thread physical limitati dal numero di slab.\nQuanto costa VDO su hardware veloce La stessa Optane senza VDO, contro VDO con i thread allineati, dati casuali, media di due esecuzioni:\nTest Optane, senza VDO VDO, 16 thread Scrittura casuale 4k, QD1 42.294 IOPS, 19,4 µs 55.806 IOPS, 12,1 µs Scrittura casuale 4k, QD32 142.416 IOPS 144.292 IOPS Scrittura casuale 4k, QD32, 4 job 572.293 IOPS 365.314 IOPS Lettura casuale 4k, QD1 55.276 IOPS, 14,4 µs 27.988 IOPS, 31,4 µs Lettura casuale 4k, QD32, 4 job 586.463 IOPS 503.827 IOPS Scrittura sequenziale 1M, QD8 2.348 MiB/s 1.729 MiB/s Sette dischi template letti insieme 11,1 s 3,1 s Leggila senza giri di parole. Una singola lettura casuale attraverso VDO richiede più del doppio del tempo. Le scritture casuali parallele perdono più di un terzo, quelle sequenziali un quarto. Su un drive così veloce, i 17 µs di lavoro extra di VDO per ogni lettura sono la maggior parte della lettura.\nLa scrittura QD1 più veloce attraverso VDO non è un pasto gratis. Tutt\u0026rsquo;altro. VDO conferma una scrittura prima che sia sul drive, e la documentazione del kernel è chiara: «unflushed writes may or may not persist after a crash»1. Quel numero misura una conferma. Un guest che fa flush, come fa ogni filesystem, ottiene la durabilità che chiede.\nLa riga dei sette dischi è quella che VDO vince nettamente, e vale la pena essere chiari sul perché. Sette copie normali devono leggere 28 GiB di byte reali, zeri compresi. VDO legge un solo insieme di blocchi condivisi e salta gli zeri.\nQuindi sulla flash veloce VDO scambia latenza con byte. Ognuno di quei microsecondi però è un costo fisso, e non cresce quando il drive sotto diventa più lento.\nMettere i metadati di VDO su NVMe VDO non ha un dispositivo separato per i metadati. Tutto vive sull\u0026rsquo;unico LV del pool. Ma il sorgente di dm-vdo mostra che la disposizione è fissa, e un LV si può costruire con pezzi su drive diversi.\nIl codice di formattazione mette le radici della block map dall\u0026rsquo;inizio della regione dati, poi lo slab summary e il recovery journal dalla fine, e riempie il mezzo con gli slab7. L\u0026rsquo;indice UDS sta prima di tutto, subito dopo il blocco di geometria. vdolistmetadata lo ha confermato sul pool del laboratorio:\nBlocchi Cosa Dove si trova da 0 a 679.188 geometria, indice UDS, super block, radici della block map i primi 2,59 GiB dentro ogni slab da 2 GiB dati, foglie della block map, 130 blocchi di reference e uno slab journal da 224 blocchi sparsi per il pool da 10.452.928 a 10.485.695 recovery journal gli ultimi 128 MiB, quasi da 10.485.696 a 10.485.759 slab summary gli ultimissimi 256 KiB Quindi costruisci l\u0026rsquo;LV del pool in tre pezzi: la testa su NVMe, il mezzo sul drive lento, la coda su NVMe. VDO con i metadati su NVMe Dischi VM: LV thick ciò che vedono i guest Volume group vdovg ciò che legge Proxmox VDO LV, 35 GiB virtuali dedup, LZ4, zeri scartati testa mezzo: gli slab coda LV del VDO pool, tre segmenti Drive lento: nvme8n1 dati, reference count NVMe: nvme6n1 indice, radici, recovery journal L\u0026rsquo;intero stack con i metadati separati. Proxmox vede lo stesso volume group; sotto, l\u0026rsquo;LV del pool è fatto di tre segmenti su due drive. Poi convertilo in un VDO pool, cosa che lvmvdo(7) documenta per un LV esistente2. Qui nvme6n1 fa la parte della NVMe e nvme8n1 quella del drive lento:\n# lvcreate -y -L 3G -n splitpool vdolab /dev/nvme6n1 Logical volume \u0026#34;splitpool\u0026#34; created. # lvextend -l +9408 vdolab/splitpool /dev/nvme8n1 Size of logical volume vdolab/splitpool changed from 3.00 GiB (768 extents) to 39.75 GiB (10176 extents). Logical volume vdolab/splitpool successfully resized. # lvextend -l +64 vdolab/splitpool /dev/nvme6n1 Size of logical volume vdolab/splitpool changed from 39.75 GiB (10176 extents) to 40.00 GiB (10240 extents). Logical volume vdolab/splitpool successfully resized. # lvconvert -y --type vdo-pool -n splitlv -V 35G vdolab/splitpool --vdosettings \u0026#34;logical_threads=4 physical_threads=4 hash_zone_threads=2 cpu_threads=3 bio_threads=2 ack_threads=1 max_discard=4096\u0026#34; WARNING: Converting logical volume vdolab/splitpool to VDO pool volume with formatting. THIS WILL DESTROY CONTENT OF LOGICAL VOLUME (filesystem etc.) The VDO volume can address 36.00 GB in 18 data slabs, each 2.00 GB. It can grow to address at most 16.00 TB of physical storage in 8192 slabs. If a larger maximum size might be needed, use bigger slabs. Logical volume \u0026#34;splitlv\u0026#34; created. Converted vdolab/splitpool to VDO pool volume and created virtual vdolab/splitlv VDO volume. Poi controlla che VDO abbia messo i metadati dove stanno gli extent:\n# vdolistmetadata /dev/mapper/vdolab-splitpool_vdata | grep -v \u0026#34;slab [0-9]* \\(reference\\|journal\\)\u0026#34; 0 .. 0: geometry block 1 .. 679127: index 679128 .. 679128: super block 679129 .. 679188: block map tree roots 10452928 .. 10485695: recovery journal 10485696 .. 10485759: slab summary Un extent è 1.024 blocchi. La testa su NVMe sono gli extent da 0 a 767, blocchi da 0 a 786.431, che copre l\u0026rsquo;indice e le radici, con circa 420 MiB di dati del primo slab che si aggiungono al viaggio. La coda su NVMe sono gli extent da 10.176 a 10.239, blocchi da 10.420.224 in poi, che copre il recovery journal e lo slab summary.\nI metadati di VDO alle estremità, su NVMe extent da 0 a 767 extent da 768 a 10.175 da 10.176 a 10.239 NVMe (nvme6n1) drive lento (nvme8n1) NVMe (nvme6n1) indice UDS, super block, radici della block map 18 slab: dati, foglie block map, reference count, slab journal recovery journal, slab summary Non in scala: la testa è 3 GiB, il mezzo 36,75 GiB, la coda 256 MiB. L\u0026rsquo;LV del pool in tre segmenti. I metadati fissi di VDO stanno alle due estremità, quindi le due estremità vanno su NVMe e gli slab vanno sul drive lento. Quanta parte del lavoro di VDO si sposta con loro, per esecuzione da 30 secondi, contata per dispositivo:\nCarico di lavoro I/O di scrittura NVMe I/O di scrittura sul drive dati Quota NVMe Scrittura casuale 4k, 75% dup, 50% compress da 388.430 a 538.223 da 3,42 a 3,63 milioni dal 10 al 13% Scrittura 128k, 75% dup, 50% compress da 458.214 a 634.167 da 3,30 a 3,53 milioni dal 12 al 15% Scrittura casuale 4k, dati casuali da 181.457 a 384.507 da 3,25 a 8,49 milioni dal 4 al 5% Lettura casuale 4k 0 scritture, 2% delle letture 0 Circa un decimo delle operazioni di scrittura: il recovery journal, gli aggiornamenti dell\u0026rsquo;indice, e quella fetta dello slab 0 sulla testa NVMe. Sono scritture di metadati piccole e sparse, il tipo che un disco rotante gestisce peggio. Su NVMe non sono niente.\nDue limiti. I metadati per slab, reference count, slab journal e foglie della block map, vivono dentro gli slab, e restano con i dati. E non ho provato a far crescere un pool diviso. Il journal viene posizionato dalla fine, quindi dopo qualsiasi lvextend lancia di nuovo vdolistmetadata e guarda dove è finito prima di fidarti.\nVDO su bcache: una NVMe, due lavori bcache è l\u0026rsquo;altro modo di mettere la flash davanti ai dischi lenti. È quello che uso già sotto Ceph sui drive rotanti, con ogni impostazione spiegata nel post su bcache. Quindi la domanda è cosa fa VDO a una cache bcache quando ci sta sopra.\nUna sola NVMe fa entrambi i lavori della flash, divisa in due partizioni:\nDispositivo Dimensione Lavoro nvme8n1p1 32 GiB cache bcache, writeback nvme8n1p2 8 GiB testa e coda di VDO: indice, radici, recovery journal, slab summary nvme6n1 349 GiB dispositivo di backing di bcache, dove vivono i dati /dev/bcache0 349 GiB il mezzo del VDO pool, gli slab Entrambi i drive sono di nuovo Optane, quindi nvme6n1 fa le veci del disco rotante. Tienilo a mente per ogni cifra qui sotto. Il dispositivo di backing qui è veloce, quindi questo misura cosa arriva alla cache, non quanto ci mette un mandrino a svuotarla.\nVDO su bcache: una NVMe, due lavori Dischi VM: LV thick ciò che vedono i guest Volume group vdovg ciò che legge Proxmox VDO LV, 35 GiB virtuali dedup, LZ4, zeri scartati testa mezzo: gli slab coda LV del VDO pool, tre segmenti bcache0, writeback un quarto dei byte del guest p1: la cache nvme6n1: dati cache da 32 GiB, backing da 349 GiB p2: metadati di VDO p1 e p2: una sola Optane, nvme8n1 VDO su bcache. Le estremità del pool vanno alla partizione dei metadati, gli slab passano per bcache, ed entrambe le partizioni condividono una sola Optane. Le partizioni e il cache set, con le impostazioni di quel post:\n# sgdisk --zap-all /dev/nvme8n1 # sgdisk -n 1:0:+32G -c 1:bcache-cache -n 2:0:+8G -c 2:vdo-meta /dev/nvme8n1 # blockdev --rereadpt /dev/nvme8n1 # apt install bcache-tools # make-bcache -C /dev/nvme8n1p1 -B /dev/nvme6n1 --writeback # B=/sys/block/bcache0/bcache # echo 0 \u0026gt; $B/sequential_cutoff # echo 40 \u0026gt; $B/writeback_percent # echo 81920 \u0026gt; $B/writeback_rate # echo 20480 \u0026gt; $B/writeback_rate_minimum # CS=/sys/fs/bcache/47bac36f-a1d5-4e8e-8695-2e7ff944172d # echo 0 \u0026gt; $CS/congested_read_threshold_us # echo 0 \u0026gt; $CS/congested_write_threshold_us Quelle righe echo durano fino al prossimo riavvio. La regola udev nel post su bcache è il modo per renderle permanenti.\nPoi il pool, diviso come sopra, con nvme8n1p2 per le due estremità e bcache0 per il mezzo:\n# pvcreate /dev/bcache0 /dev/nvme8n1p2 # vgcreate vdolab /dev/bcache0 /dev/nvme8n1p2 # lvcreate -y -L 3G -n vdopool vdolab /dev/nvme8n1p2 # lvextend -l +9408 vdolab/vdopool /dev/bcache0 # lvextend -l +64 vdolab/vdopool /dev/nvme8n1p2 # lvconvert -y --type vdo-pool -n vdolv -V 35G vdolab/vdopool --vdosettings \u0026#34;logical_threads=4 physical_threads=4 hash_zone_threads=2 cpu_threads=3 bio_threads=2 ack_threads=1 max_discard=4096\u0026#34; # lvs -a --segments -o lv_name,lv_size,segtype,seg_start_pe,seg_size_pe,devices vdolab LV LSize Type Start SSize Devices vdolv 35.00g vdo 0 8960 vdopool(0) vdopool 40.00g vdo-pool 0 10240 vdopool_vdata(0) [vdopool_vdata] 40.00g linear 0 768 /dev/nvme8n1p2(0) [vdopool_vdata] 40.00g linear 768 9408 /dev/bcache0(0) [vdopool_vdata] 40.00g linear 10176 64 /dev/nvme8n1p2(768) vdolistmetadata ha stampato gli stessi intervalli di blocchi della build divisa, quindi l\u0026rsquo;indice e i due journal stanno su nvme8n1p2. vdovg e lo storage di Proxmox vanno sopra esattamente come prima.\nCosa arriva alla cache Il confronto è un LV da 8 GiB direttamente su bcache0 contro un LV da 8 GiB in vdovg, gli stessi job di fio per 30 secondi, due volte, con la cache svuotata e pulita tra un\u0026rsquo;esecuzione e l\u0026rsquo;altra. I contatori dei dispositivi in /sys/class/block dicono dove sono andati i byte.\nCosa è stato confrontato su bcache solo bcache VDO su bcache fio, 30 s LV da 8 GiB su bcache0 bcache0, writeback p1: la cache nvme6n1: dati fio, 30 s LV da 8 GiB in vdovg VDO LV e pool, 16 thread bcache0, writeback p2: meta p1: la cache nvme6n1: dati I due stack dietro le cifre di bcache. Stessa cache, stesso drive di backing; l\u0026rsquo;unica differenza è VDO sopra. 75% dup, 50% compress, 30 s Solo bcache VDO su bcache Scrittura casuale 4k, QD32, 4 job 212.222 e 205.585 IOPS 390.206 e 304.757 IOPS p99 1,89 e 2,04 ms 1,45 e 2,54 ms Scritto dal guest 24,29 e 23,53 GiB 44,67 e 34,88 GiB Scritto nella cache bcache 25,00 e 24,26 GiB 11,48 e 10,44 GiB Scritto sulla partizione dei metadati di VDO 1,18 e 0,59 GiB Scritture in cache per byte del guest 103% 26 e 30% Rimasto dirty in cache alla fine 6,0 e 6,5 GiB 5,5 e 5,2 GiB Scrittura 128k, QD8 2.001 e 1.985 MiB/s 1.878 e 1.416 MiB/s Scritture in cache per byte del guest, 128k 101% 24 e 27% bcache da solo si è fermato a circa 210.000 scritture piccole al secondo, e ha scritto ogni byte nella cache più un 3% suo. Metti VDO davanti e la cache ha preso un quarto dei byte. Nella prima esecuzione la stessa cache ha poi portato 390.206 scritture al secondo, quasi il doppio, e ha finito comunque con meno dati dirty in attesa del drive lento. Il limite era la cache. VDO lo ha spostato.\nLa seconda esecuzione è quella onesta per un pool che è già stato usato. Di default fio inizializza i suoi generatori allo stesso modo a ogni esecuzione8, quindi la seconda esecuzione ha scritto dati che l\u0026rsquo;indice aveva già visto, puntando a blocchi che nel frattempo erano stati scartati. VDO tratta l\u0026rsquo;indice come suggerimenti e legge ogni blocco candidato per verificare che sia davvero un duplicato prima di condividerlo9. Durante un test di sola scrittura, quella seconda esecuzione ha riletto 7,11 GiB dalla cache e 1,20 GiB dal drive dati. La prima 0,12 GiB. Un consiglio scaduto non è gratis, e su un pool dove le VM vanno e vengono ce ne sarà sempre un po'.\nI dati casuali sono l\u0026rsquo;altra faccia:\nDati casuali, 30 s Solo bcache VDO su bcache Scrittura casuale 4k, QD32, 4 job 205.984 e 203.066 IOPS 203.186 e 85.882 IOPS p99 2,04 e 2,15 ms 5,7 e 17,7 ms Scrittura 128k, QD8 2.038 e 2.017 MiB/s 878 e 357 MiB/s Lettura casuale 4k, QD1 36.609 e 36.639 IOPS, 21,6 µs 26.345 e 26.202 IOPS, 33,6 e 33,7 µs Lettura casuale 4k, QD32, 4 job 471.585 e 471.730 IOPS 335.461 e 336.941 IOPS Niente da risparmiare, quindi VDO è puro overhead, e nell\u0026rsquo;esecuzione con l\u0026rsquo;indice scaduto ha più che dimezzato le scritture piccole. Ogni lettura in entrambe le colonne è venuta dalla cache. I 12 µs di VDO in più sono lo stesso costo fisso che aggiunge sull\u0026rsquo;Optane nuda.\nQuindi dove i dati si ripetono, i due si sommano bene. La cache riceve un quarto dei byte, regge un picco più a lungo, e ha meno da riscrivere sui dischi rotanti. Dove non si ripetono, bcache sta meglio da solo.\nSu RAID6 hardware con HDD: ragionato, non misurato Non ho un host RAID6 con HDD su cui provare, quindi questa sezione è un ragionamento costruito sulle misure di sopra. Misura il tuo array prima di farci affidamento.\nVDO su RAID6 con HDD, ragionato Dischi VM: LV thick ciò che vedono i guest Volume group vdovg ciò che legge Proxmox VDO LV, thick dedup, LZ4, zeri scartati testa mezzo: gli slab coda LV del VDO pool, tre segmenti Disco virtuale RAID6 un quarto dei byte del guest Cache write-back del controller quattro volte il margine HDD un seek inghiotte i 17 µs di VDO NVMe indice e journal lontano dai mandrini Lo stack su cui ragiona questa sezione, non uno che ho misurato: gli slab sul disco virtuale RAID6 dietro la cache del controller, indice e journal su una NVMe. Su RAID6 con HDD Cosa cambia VDO Scritture che arrivano all\u0026rsquo;array circa un quarto, su un mix come quello misurato Cache write-back del controller si riempie a un quarto della velocità, quindi regge un picco circa quattro volte più a lungo Costo in CPU di VDO 17 µs per lettura, persi dentro un seek da 5 a 10 ms Scritture del recovery journal circa un decimo degli I/O di scrittura, piccole e con flush: mettile su NVMe Ricerche nell\u0026rsquo;indice tieni d\u0026rsquo;occhio dedupe advice timeouts in vdostats; su storage lento VDO può rinunciare a cercare e scrivere comunque il duplicato Leggere un clone dall\u0026rsquo;inizio alla fine più lento: i suoi blocchi puntano a quelli del template, sparsi per l\u0026rsquo;array Le prime due righe sono la risposta sull\u0026rsquo;hardware. Finché la cache del controller, con batteria o su flash, ha spazio, il guest vede la latenza della cache. Quando si riempie, il guest vede i mandrini. Mandale un quarto dei byte e la stessa cache dà circa quattro volte il margine, e ha un quarto da svuotare. La sezione su bcache qui sopra è proprio questo, misurato con una cache software al posto di quella del controller.\nLa terza è il motivo per cui VDO sta meglio sui dischi lenti che su quelli veloci. Sull\u0026rsquo;Optane VDO ha raddoppiato la latenza di lettura. Su drive da 7.200 rpm lo stesso costo fisso sparisce dentro un solo seek.\nLe ultime tre sono i costi. Una tempesta di boot di cloni identici diventa più veloce, ma un clone letto da cima a fondo diventa più lento, perché la deduplicazione lo sparpaglia. E anche le piccole scritture di VDO stesso finiscono sull\u0026rsquo;array, che è la ragione per la disposizione divisa di sopra: indice e journal su NVMe, slab sul RAID6.\nCancellare un disco: fai fare il discard a Proxmox Rimuovere un LV libera i suoi extent in LVM. Non dice a VDO che i blocchi sono inutilizzati, quindi VDO li tiene. La documentazione del kernel dice perché conta: «If the vdo is thinly provisioned, discarding unused blocks is essential to prevent the target from running out of space»1. Su uno storage thick non può esaurirsi, ma i blocchi non scartati sono comunque spazio sul drive tenuto per dati che non sono di nessuno.\nL\u0026rsquo;opzione on-volume-remove discard=1 sullo storage è la soluzione. Proxmox la descrive come l\u0026rsquo;invio di «discard (TRIM) requests before removal»5:\nCancellazione Blocchi VDO liberati storage lvm normale, un disco con 1 GiB 0 con on-volume-remove discard=1, lo stesso 262.140, l\u0026rsquo;intero 1 GiB Su un disco grande però è lento. Cancellare il disco da 34 GiB della prova di riempimento ha richiesto a Proxmox 262,6 s, mentre blkdiscard sullo stesso tipo di dati ha fatto 15 GiB in 2,25 s. Quindi per qualsiasi cosa grande, prima blkdiscard sul disco e poi cancellalo.\nConta anche la dimensione del discard. Il max_discard di default di VDO è un blocco da 4 KiB per richiesta1:\nDiscard di 15 GiB di dati casuali Tempo trascorso CPU (sys) max_discard=1, il default 8,06 s 8,06 s max_discard=4096, 16 MiB 2,25 s 0,00 s Dentro i guest, attiva l\u0026rsquo;opzione Discard del drive perché il loro TRIM arrivi allo storage10, e lancia fstrim a intervalli regolari.\nDove si guadagna il suo posto Adatto Non adatto molte VM dagli stessi pochi template database e lavori legati alla latenza a profondità elevata RAID6 con HDD dietro una cache write-back del controller un host tutto NVMe che ha bisogno di ogni microsecondo dati su dischi rotanti con una NVMe per i metadati di VDO dati già compressi: media, backup, ISO bcache davanti a dati su dischi rotanti, dove i dati si ripetono bcache davanti a dati che non si ripetono drive dove il limite è la resistenza alle scritture dischi dei guest cifrati, che non si deduplicano mai un host con mezzo gigabyte di RAM libera per pool un pool piccolo, dove l\u0026rsquo;indice si mangia un decimo Impostazione Default Impostala a Modificarla dopo Dimensione virtuale VDO -V quella che chiedi non più di quanto il pool può indirizzare solo crescere, mai ridurre Thread di VDO 10, uno logical uno per CPU, distribuiti come sopra solo con le VM del pool ferme max_discard 1, cioè 4 KiB 4096, cioè 16 MiB solo con le VM del pool ferme on-volume-remove sullo storage non impostato discard=1 sì, pvesm set Discard su ogni disco virtuale spento acceso sì, per disco scan_lvs e il filtro 0, nessun rifiuto dei dischi delle VM 1, dischi delle VM rifiutati sì, in lvm.conf Niente di tutto ciò è difficile. Niente di tutto ciò è il default.\nLa scrittura più economica è quella che non mandi mai Ciò che mi colpisce di VDO è quanto venga venduto male. Si presenta come un modo per mettere su un disco più di quanto il disco contenga, ed è la cosa meno utile che fa. L\u0026rsquo;ho fatto per sbaglio nella prima build, e Proxmox mostrava un terzo dello storage libero mentre VDO era pieno. L\u0026rsquo;overcommit è un prestito, e il drive lo richiede indietro a piena velocità di scrittura.\nIl valore vero sta nella riga che la maggior parte della gente non misura mai. Un quarto dei byte che arrivano al drive è un quarto dell\u0026rsquo;usura e una cache del controller che dura quattro volte tanto. Non è capacità. È l\u0026rsquo;hardware che fa meno lavoro per lo stesso risultato, che è l\u0026rsquo;unico tipo di risparmio che non torna a morderti.\nCosta CPU, e sulla flash veloce costa latenza, ed entrambi sono fissi. È questo lo scambio, detto chiaro: tempo di processore speso perché la parte lenta e costosa della macchina lavori meno. Su dischi rotanti dietro un controller RAID o un bcache, con indice e journal su una NVMe, i conti tornano bene. Su un host tutto Optane per lo più no.\nE non si gestisce da solo. Ogni default che conta è sbagliato per questo lavoro: dieci thread su sedici CPU, una dimensione del discard che brucia un core, una dimensione virtuale che puoi impostare a qualsiasi cosa, e niente nella configurazione dello storage che dica a Proxmox di restituire lo spazio. Niente di tutto ciò è nascosto. È tutto nella documentazione.\nQuindi costruiscilo thick, una volta, come si deve, con le impostazioni sulla riga di creazione e i metadati dove devono stare. Fallo e il drive fa un quarto del lavoro. Saltalo e hai comprato un altro strato che promette più di quello che ha.\nLinux kernel documentation — dm-vdo — il target «provides block-level deduplication, compression, and thin provisioning»; «If the vdo is thinly provisioned, discarding unused blocks is essential to prevent the target from running out of space»; «unflushed writes may or may not persist after a crash»; la cache della block map da 128 MB supporta un «efficient access to 100 GB of logical space at a time»; i parametri dei thread, i loro limiti e le indicazioni di tuning; maxDiscard «in 4096-byte blocks».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nlvmvdo(7) — Support for Virtual Data Optimizer in LVM — VDO pool e VDO LV, la conversione di un LV esistente con lvconvert --type vdo-pool, l\u0026rsquo;uso di memoria, l\u0026rsquo;indice dense e la sua finestra di 1 TiB per GiB di RAM, e «You cannot reduce the size of a VDOPoolLV».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — drivers/md/dm-thin.c — disable_discard_passdown_if_not_supported() disattiva il passdown del discard quando il dispositivo dati non può accettare un intero chunk thin, che è ciò che fa il default di VDO sotto un thin pool.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLVM2 — conf/example.conf.in — devices/scan_lvs: «Caution is required to avoid using PVs that belong to guest images stored on LVs» e «This option does not enable autoactivation of layered VGs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-storage — LVMPlugin.pm — la proprietà on-volume-remove, «Use \u0026lsquo;discard=1\u0026rsquo; to issue discard (TRIM) requests before removal»; i volumi vengono attivati uno per uno con lvchange -aey invece che con vgchange -aly.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian trixie — package vdo — «Management tools for Virtual Data Optimizer», versione 8.3.1.1-1, che fornisce vdoformat, vdostats e vdolistmetadata.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — drivers/md/dm-vdo/encodings.c — vdo_initialize_layout() crea la partizione della block map all\u0026rsquo;inizio, le partizioni dello slab summary e del recovery journal alla fine, e lo slab depot con ciò che resta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfio documentation — randrepeat — «Seed all random number generators in a predictable way so the pattern is repeatable across runs. Default: true.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — Design of dm-vdo — «vdo treats the locations in the index as hints, and reads each indicated block to verify that it is indeed a duplicate before sharing the existing block with a new one.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE documentation — Qemu/KVM Virtual Machines, Trim/Discard — «For the guest to be able to issue TRIM commands, you must enable the Discard option on the drive.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/proxmox/vdo-dedup-for-local-lvm/","summary":"VDO è lo strato di deduplicazione e compressione del kernel. Sotto un volume group LVM thick dà ai dischi locali di Proxmox VE una sola copia scritta di ogni blocco che le VM condividono, così al drive arrivano molti meno byte. Qui lo costruisco thick su thick su un host Proxmox VE 9, con VDO dimensionato sullo spazio che ha davvero così che niente sopra di lui possa fare overcommit, l\u0026rsquo;impostazione scan_lvs di lvm.conf e il suo filtro, e i thread di VDO allineati al numero di CPU. Misuro quanto ha risparmiato la deduplicazione su un template e sei cloni completi, due ISO, zeri e dati casuali, quanti byte ha davvero ricevuto il drive rispetto a ciò che ha scritto il guest, e quanto costa VDO rispetto alla stessa Intel Optane senza VDO. Poi costruisco il pool con l\u0026rsquo;indice e i journal di VDO su NVMe e i dati su un secondo dispositivo, dimostro la disposizione con vdolistmetadata, misuro come si divide l\u0026rsquo;I/O, poi metto VDO sopra bcache con una NVMe partizionata tra la cache di bcache e i metadati di VDO, e misuro quanti byte arrivano alla cache con e senza VDO. Ragiono su cosa significa tutto questo su RAID6 hardware con HDD, e tratto il discard alla cancellazione.","title":"VDO sotto lo storage LVM locale di Proxmox: meno byte arrivano al drive"},{"content":"Due impostazioni che hai scelto una volta e poi dimenticato Proxmox VE 9 fa due cose utili per te senza che tu lo chieda. Dà a un guest Fisher-Price OS (Windows) le funzioni paravirtuali di cui ha bisogno per girare come si deve su KVM, e carica microcode della CPU aggiornato all\u0026rsquo;avvio.\nTutte e due sono automatiche. Tutte e due dipendono anche da una decisione che hai preso una volta, magari anni fa, e che da allora non hai più guardato.\nLa prima dipende dal tipo di OS che hai scelto quando la VM è stata creata. Scegli una delle voci Microsoft Windows e Proxmox aggiunge gli enlightenment Hyper-V a ogni avvio. Lasciala su Other, cosa facile da fare quando importi un disco o cloni qualcosa di vecchio, e il guest non ne riceve nessuno. Si avvia, gira, è più lento, e niente te lo dice.\nLa seconda dipende da come l\u0026rsquo;host è arrivato alla versione 9. L\u0026rsquo;installer della 9.0 abilita il componente firmware di Debian e installa il pacchetto di microcode per la tua CPU. Un host aggiornato dalla 8.x tiene i repository che aveva, e sulla maggior parte di essi questo significa nessun pacchetto di microcode. Su un host AMD Zen 5 con kernel 6.17.9 o più recente non è una lacuna teorica: i guest che usano i tipi di CPU EPYC smettono di avviarsi.\nDue default, due scelte dimenticate Una VM: decide il tipo di OS Tipo di OS, scelto una volta Microsoft Windows Other o Linux flag hv_ aggiunti a ogni avvio nessuno e nessun avviso Un host: decide come è arrivato alla 9 host Proxmox VE 9 installer 9.x aggiornato dalla 8.x pacchetto microcode installato nessun pacchetto pve8to9 avvisa soltanto Entrambi i default dipendono da una scelta fatta molto prima che qualcosa vada storto. In ciascun caso il percorso di destra è quello di cui niente ti avverte. Il resto di questo post li prende uno alla volta: cos\u0026rsquo;è, la regola esatta che applica Proxmox, come attivarlo dove manca e come dimostrare che ha preso. Le regole vengono dal codice di qemu-server e pve-manager su un host 9.2 in produzione, non dalla memoria, perché due di esse non sono quelle che la maggior parte della gente immaginerebbe.\nCos\u0026rsquo;è davvero un enlightenment Un sistema operativo guest scritto per hardware reale spende un sacco di fatica in cose che dentro una VM sono uno spreco. Programma i timer attraverso chip emulati, gira a vuoto su lock tenuti da una vCPU che non è nemmeno schedulata, e fa scattare i watchdog quando l\u0026rsquo;host gli ruba qualche millisecondo.\nLa paravirtualizzazione risolve il problema facendo sapere al guest che è un guest e lasciandolo parlare direttamente con l\u0026rsquo;hypervisor. Linux lo fa con le interfacce proprie di KVM. Il Fisher-Price OS (Windows) parla un solo dialetto paravirtuale, quello di Hyper-V, quindi KVM implementa quel dialetto e dice al guest che sta girando su un hypervisor compatibile con Hyper-V. Ogni pezzo di quel dialetto si chiama enlightenment.\nNiente di tutto ciò è attivo se qualcosa non lo chiede. La documentazione di QEMU è chiara: «No Hyper-V enlightenments are enabled by default by either KVM or QEMU»1. Su Proxmox, chi lo chiede è qemu-server, e lo chiede solo quando il tipo di OS è una delle voci Microsoft Windows.\nPuoi vedere la differenza su qualsiasi host. Questa è una VM Linux sul mio nodo 9.2, ostype: l26, tipo di CPU host:\n# qm showcmd 101 --pretty | grep -- -cpu -cpu host,+kvm_pv_eoi,+kvm_pv_unhalt \\ Due flag KVM per la gestione paravirtuale di interrupt e spinlock propria di Linux, e nessun flag hv_. Giusto per Linux. Sbagliato per un guest che capisce solo Hyper-V.\nCosa fa ogni enlightenment, dalle descrizioni di QEMU1:\nFlag Cosa riceve il guest Cosa risparmia hv_time clock di riferimento Hyper-V e pagina TSC letture del timestamp senza exit hv_relaxed l\u0026rsquo;indicazione di disattivare i timeout del watchdog falsi timeout quando una vCPU viene deschedulata hv_vapic pagina VP assist per l\u0026rsquo;APIC end-of-interrupt senza exit hv_spinlocks spinlock paravirtuali, numero di tentativi prima di avvisare l\u0026rsquo;host girare a vuoto su un lock il cui detentore non sta girando hv_vpindex il proprio indice di processore virtuale prerequisito per i quattro successivi hv_runtime quanto ha girato davvero ogni vCPU una visione onesta del tempo rubato hv_synic, hv_stimer controller di interrupt e timer sintetici hardware timer emulato hv_ipi invio di IPI a molte vCPU con una sola hypercall un exit APIC per ogni CPU destinataria hv_reset reset attraverso l\u0026rsquo;hypervisor hv_evmcs VMCS enlightened, solo Intel virtualizzazione annidata più veloce hv_tlbflush shoot-down paravirtuale del TLB attendere vCPU che non stanno girando Il tipo di OS è l\u0026rsquo;interruttore La regola vive in una sola funzione, get_hyperv_enlightenments in CPUConfig.pm di qemu-server2. Prima il tipo di OS viene trasformato in un numero di versione: win11 diventa 11, win10 diventa 10, w2k8 e wvista diventano entrambi 6, e i tipi XP e 2003 diventano 5. Linux, Other e tutto il resto diventano 0.\nPoi i cancelli vengono applicati in ordine.\nQuali flag hv_ aggiunge qemu-server, cancello per cancello Dal tipo di OS ai flag hv_, nell'ordine in cui gira il codice Versione del tipo di OS sotto 6? sì stop: niente aggiunto Firmware OVMF e versione sotto 8? sì stop: niente aggiunto macchina 2.3, poi 2.6 o successiva aggiunge spinlocks vapic time reset vpindex runtime versione 7 o superiore aggiunge relaxed synic stimer ipi host Intel, versione 11, macchina 11.0+pve2 aggiunge evmcs L\u0026rsquo;ordine in cui qemu-server li applica. Una versione sotto 6 si ferma al primo cancello, e un guest UEFI più vecchio del tipo 8.x si ferma al secondo, senza che venga aggiunto niente. Leggere una regola è una cosa. Eseguirla è meglio. Così ho caricato il CPUConfig.pm installato su due host 9.2, il mio nodo AMD Ryzen per le righe AMD e un nodo Intel Celeron N5100 per quelle Intel, e ho chiamato quella funzione con ogni combinazione:\nTipo di OS Firmware Versione macchina Host Enlightenment aggiunti l26 o other qualsiasi qualsiasi qualsiasi nessuno wxp (5) SeaBIOS 11.0 qualsiasi nessuno w2k8 (Vista/2008) SeaBIOS 11.0 qualsiasi spinlocks, vapic, time, reset, vpindex, runtime win7 SeaBIOS 11.0 qualsiasi i sei sopra più relaxed, synic, stimer, ipi win7 OVMF 11.0 qualsiasi nessuno win10 OVMF 11.0+pve2 Intel tutti e dieci, senza evmcs win11 OVMF 11.0+pve1 Intel tutti e dieci, senza evmcs win11 OVMF 11.0+pve2 Intel tutti e dieci più evmcs win11 SeaBIOS 11.0+pve2 AMD tutti e dieci, senza evmcs Tre cose lì dentro vale la pena saperle prima di avvicinarti alla GUI.\nUn guest UEFI con un tipo di OS più vecchio di 8.x non riceve niente. Il codice esce subito quando il firmware è OVMF e la versione è sotto 8. Un guest 7/2008r2 che hai spostato su UEFI ha perso in silenzio tutti gli enlightenment che aveva.\nhv_evmcs vuole tre cose insieme. Un host Intel, il tipo di OS 11/2022/2025, e la versione macchina 11.0+pve2 o successiva. Un guest 10/2016/2019 non lo riceve mai di default, per quanto nuova sia la sua versione macchina.\nIl vendor dell\u0026rsquo;host viene letto quando la VM si avvia. Il controllo chiama read_cpuinfo sul nodo che fa l\u0026rsquo;avvio, non su quello dove la VM è stata creata. In un cluster misto Intel e AMD la stessa VM riceve hv_evmcs su un nodo e non sull\u0026rsquo;altro, deciso da capo a ogni avvio a freddo.\nI cancelli più vecchi sulla versione macchina (2.3, 2.6, 2.12, 3.1) contano solo per VM fissate su macchine del lontano passato di QEMU. Tutto ciò che creeresti oggi li supera.\nQuindi scegli il tipo di OS più vicino al guest, non il più nuovo della lista. Un guest 10/2016/2019 va su 10/2016/2019. La documentazione di Proxmox dà un secondo motivo per cui il tipo conta oltre a questi flag: imposta anche cose come se l\u0026rsquo;RTC virtuale gira sull\u0026rsquo;ora locale3.\nPerché le tue VM più vecchie perdono il fix di luglio hv_evmcs di default è una novità. È arrivato in qemu-server 9.2.0 il 15 luglio 2026, per «mitigate guest freezes and 100% CPU usage seen on certain Intel CPUs with Windows guests that use Virtualization-Based Security (VBS)»4, ed è legato alla versione macchina 11.0+pve2.\nQuel legame è la fregatura, perché Proxmox fissa la versione macchina di ogni VM con un tipo di OS Microsoft Windows nel momento in cui viene creata. La documentazione ne dà il motivo: «Windows is sensitive to changes in the virtual hardware - even between cold boots»3. È una decisione sensata. Significa anche che una VM creata a giugno 2026 sta su 11.0+pve1 o più vecchia, e ci resterà finché qualcuno non la sposta.\nQualcuno la sposterà per te? No. Il nuovo default si applica alle VM nuove e a quelle che aggiorni di proposito, e a nient\u0026rsquo;altro.\nSe hai host Intel con guest 11/2022/2025 con VBS attivo, e qualcuno di questi si è bloccato al 100% di CPU, questa è la prima cosa da controllare:\nqm config \u0026lt;vmid\u0026gt; | grep -E \u0026#39;^(ostype|machine):\u0026#39; Un ostype: win11 con una riga machine: sotto pc-q35-11.0+pve2 va portato su per ricevere il fix. Spostarlo cambia l\u0026rsquo;hardware virtuale che il guest vede, che è proprio ciò da cui il pinning protegge. Quindi fallo in una finestra di manutenzione, dopo aver fatto un backup o uno snapshot, da Hardware → Machine → Edit, spunta Advanced, e scegli la versione.\nSe invece la riga inizia con pc-i440fx-, la versione è il problema minore: quel guest non dovrebbe stare su i440fx, per i motivi in Usa sempre Q35, non i440fx, e Impostarlo, e dimostrare che ha preso qui sotto se ne occupa.\nDue default collegati sono arrivati negli stessi mesi e vale la pena conoscerli mentre ci sei. qemu-server 9.1.12 ha disattivato i flag cet-ibt e cet-ss per il tipo 11/2022/2025, perché con QEMU 11.0 e i kernel 7.x che li esponevano, i guest con VBS non si avviavano4. E la 9.1.14 ha esposto la proprietà level della CPU, che la documentazione descrive come «a known workaround for Hyper-V boot failures of Windows guests on recent Intel hosts when the CPU type is host or max»3.\nIl lato QEMU, rilascio per rilascio qemu-server costruisce la riga di comando. pve-qemu-kvm è il QEMU che la esegue, e il fix di luglio ha bisogno di tutti e due.\nLa versione macchina 11.0+pve2 si può scegliere solo quando è installato un binario QEMU 11.0, perché qemu-server rifiuta qualsiasi versione macchina più nuova del QEMU che trova sull\u0026rsquo;host5. Il +pve2 è il contatore di revisione di qemu-server, non di QEMU, quindi qualsiasi build 11.0 lo soddisfa. Il giorno in cui è uscita la 9.2.0, la coppia era questa:\nPacchetto Versione Rilasciato Cosa porta qemu-server 9.2.0 15 luglio 2026 il default hv-evmcs e la macchina 11.0+pve2 pve-qemu-kvm 11.0.2-1 1º luglio 2026 QEMU 11.0.2, l\u0026rsquo;attuale quel giorno pve-qemu-kvm, minimo 11.0.0-1 5 maggio 2026 la prima build di QEMU 11.0 apt si assicurerà che tu li abbia entrambi? No. qemu-server 9.2.0 non dichiara niente di più forte di pve-qemu-kvm (\u0026gt;= 7.1~)6, quindi un nodo con QEMU fermo alla 10.x prende il nuovo qemu-server senza fiatare e poi non può offrire la versione macchina da cui dipende il fix. Controllali entrambi, su ogni nodo. Questo è il mio host 9.2 oggi, ben oltre tutti e due:\n# pveversion -v | grep -E \u0026#39;^(qemu-server|pve-qemu-kvm):\u0026#39; pve-qemu-kvm: 11.0.3-4 qemu-server: 9.2.11 Ogni rilascio di QEMU da quando Proxmox VE 9.0 è uscito con la 10.0.27 ha portato correzioni proprie per i guest Fisher-Price OS (Windows). Queste sono quelle che toccano il guest, dal changelog del pacchetto Proxmox8 e dai changelog upstream di QEMU9:\nQEMU Build Proxmox Cosa ha corretto per il guest 10.0 10.0.2-1, 17 giugno 2025 il bug del «PCI Label Id», innocuo in inglese ma capace di bloccare le installazioni localizzate 10.1 10.1.2-3, 17 novembre 2025 una regressione degli appunti VNC che rompeva il puntatore del mouse 10.1 10.1.2-5, 22 dicembre 2025 backup di una VM con disco TPM che si bloccavano, un fix di io_uring 11.0 11.0.0-1, 5 maggio 2026 una regressione nell\u0026rsquo;export FUSE che swtpm usa per lo stato del TPM 11.0 11.0.2-1, 1º luglio 2026 enlightenment Hyper-V riconosciuti come flag CPUID, così un modello di CPU personalizzato può portarli QEMU 11.0 ha anche rotto qualcosa: ha cominciato a esporre cet-ibt e cet-ss, ed è questo che ha impedito l\u0026rsquo;avvio ai guest con VBS e ha spinto qemu-server 9.1.12 a disattivarli, come visto sopra.\nLe correzioni al guest agent negli stessi rilasci sono un\u0026rsquo;altra faccenda. QEMU 10.1, 10.2 e 11.0 hanno corretto ciascuno parti della gestione VSS e del freeze del filesystem del guest agent, compreso l\u0026rsquo;«Access denied Event ID 8194» che la 11.0 ha curato9. Niente di questo arriva con pve-qemu-kvm. L\u0026rsquo;agent per quel guest viene distribuito sulla ISO dei driver virtio-win10, quindi cambia solo quando aggiorni l\u0026rsquo;agent dentro la VM.\nI due flag che puoi impostare a mano Proxmox non ti lascia aggiungere flag di CPU arbitrari a una VM. Hardware → Processors → Edit, spunta Advanced, e Extra CPU Flags offre una lista fissa, definita in CPUFlags.pm11. Due voci di quella lista sono enlightenment, e sono le due che Proxmox non imposta di default, o non impostava fino a luglio.\nFlag La descrizione di Proxmox Quando impostarlo hv-tlbflush «Improve performance in overcommitted Windows guests. May lead to guest bluescreens on old CPUs.» Facoltativo. Prova prima su una VM e tienila d\u0026rsquo;occhio. hv-evmcs «Improve performance for nested virtualization. Only supported on Intel CPUs.» Hyper-V annidato, WSL2 o VBS dentro il guest, su Intel. Già attivo per 11/2022/2025 su 11.0+pve2. Sono stati resi entrambi opzionali in qemu-server 6.0-6 il 23 luglio 2019, descritti nel changelog come «sometimes problematic»4. hv-tlbflush è rimasto così per sette anni. È un indizio onesto di quanti test vuole prima che tu lo distribuisca su un cluster.\nLa nota di QEMU stesso su hv-evmcs è che è solo Intel, e che «some virtualization features (e.g. Posted Interrupts) are disabled when hv-evmcs is enabled»1. Attivarlo a mano su un guest che non fa virtualizzazione annidata non ti compra niente e ti costa quello.\nImpostarlo, e dimostrare che ha preso Per una VM nuova: Create VM → OS, imposta Type su Microsoft Windows e Version sulla corrispondenza più vicina.\nPer una esistente: Options → OS Type → Edit, scegli la versione, OK. Proxmox fissa la versione macchina quando passi una VM esistente a un tipo Microsoft Windows, come fa alla creazione4, quindi aspettati che cambi anche la riga machine: nella configurazione.\nE mettila su q35. Un guest enlightened non ha niente da fare su pc-i440fx. È il chipset senza bus PCIe, e i motivi vanno ben oltre il passthrough; sono tutti in Usa sempre Q35, non i440fx.\nIl wizard non ti fermerà, e per la maggior parte dei tipi Microsoft Windows ti ci metterà lui. La documentazione di Proxmox chiama l\u0026rsquo;Intel 440FX «the default»3, e i default per OS della GUI lo sovrascrivono per una sola voce: 11/2022/2025 riceve machine: 'q35' e bios: 'ovmf'12. Ogni altro tipo Microsoft Windows eredita i default generici, che non impostano nessuna macchina. Così un guest 10/2016/2019 creato cliccando Next finisce su i440fx, enlightened e sul chipset sbagliato allo stesso tempo.\nTipo di OS scelto nel wizard Macchina che riceve Firmware che riceve 11/2022/2025 q35 OVMF 10/2016/2019 e ogni tipo Microsoft Windows più vecchio i440fx SeaBIOS Other, Linux i440fx SeaBIOS Cambialo nella scheda System prima di finire il wizard. Per una VM che esiste già, cambiare chipset è un cambiamento all\u0026rsquo;hardware virtuale più grosso di un aggiornamento della versione macchina, quindi valgono le stesse regole di finestra di manutenzione e backup, e il post su q35 spiega cosa ne fa il guest.\nPoi fermala come si deve. Gli enlightenment sono argomenti sulla riga di comando di QEMU, e quella riga viene costruita solo quando parte il processo QEMU. Un riavvio da dentro il guest tiene lo stesso processo, quindi tiene i vecchi flag. Spegni, aspetta stopped, poi Start.\nDimostralo dall\u0026rsquo;host, perché è lì che sta la risposta:\nqm showcmd \u0026lt;vmid\u0026gt; --pretty | grep -o \u0026#34;hv_[a-z_]*[=0-9a-fx]*\u0026#34; | sort -u Questo stampa ciò che qemu-server passerà a QEMU al prossimo avvio. Un guest 11/2022/2025 su 11.0+pve2 su Intel dovrebbe elencarne undici: hv_evmcs, hv_ipi, hv_relaxed, hv_reset, hv_runtime, hv_spinlocks=0x1fff, hv_stimer, hv_synic, hv_time, hv_vapic e hv_vpindex. Lo stesso guest su AMD ne elenca dieci. Un risultato vuoto significa che il tipo di OS non è un Microsoft Windows, oppure che è un tipo precedente a 8.x su UEFI.\nSe un guest non si avvia dopo la modifica, rimetti il tipo di OS su Other per un avvio, per includere o escludere gli enlightenment come causa. Gira senza. Gira solo peggio.\nMicrocode: cosa corregge e da dove arriva Il secondo default sta sotto l\u0026rsquo;hypervisor, non sopra.\nIl microcode della CPU è il firmware del vendor per il processore stesso. Gli aggiornamenti correggono vulnerabilità di sicurezza e bug gravi della CPU, e la guida di amministrazione di Proxmox fa il punto che conta per chiunque si preoccupi del costo in velocità: «a patched microcode is usually still more performant than an unpatched microcode where the kernel itself has to do mitigations»13.\nCi sono tre posti da cui può arrivare, e sono indipendenti.\nFonte Applicato Chi lo distribuisce Sul mio host 9.2 oggi Aggiornamento BIOS/UEFI della scheda a ogni accensione, persistente il vendor della scheda o del server quello che portava l\u0026rsquo;ultimo BIOS Debian non-free-firmware all\u0026rsquo;inizio del boot, dall\u0026rsquo;initramfs Debian intel-microcode 3.20251111.1~deb13u1, amd64-microcode 3.20250311.1 Repository di Proxmox VE all\u0026rsquo;inizio del boot, dall\u0026rsquo;initramfs Proxmox amd64-microcode 3.20251202.1~bpo13+1, nessun pacchetto Intel La strada del BIOS è quella che Proxmox chiama raccomandata13. La strada del caricamento precoce è la rete di sicurezza per quando il vendor della scheda ha smesso di distribuire aggiornamenti del BIOS, cosa che su qualsiasi macchina di qualche anno di solito ha già fatto.\nQuella terza riga mi ha sorpreso. Proxmox porta nel proprio repository un amd64-microcode più nuovo di quello che Debian ha in trixie14, con la stessa priorità di pin, quindi apt sceglie quello di Proxmox. Su un host AMD con il repository di Proxmox configurato, è quella la versione che finirai per eseguire, e come mostra la sezione successiva, è la versione che conta.\nDove viene applicato il microcode durante un boot Un boot, da sinistra a destra Accensione microcode del BIOS Bootloader carica l'initramfs Avvio kernel agg. precoce Host attivo partono i guest Car. tardivo bloccato persistente, vendor scheda dall'initramfs, Debian o Proxmox blacklist in /etc/modprobe.d Il caricamento precoce avviene prima che il kernel abbia avviato qualsiasi altra cosa. Il caricamento tardivo su un sistema in funzione è la strada che Debian blocca, e resta bloccata. Il caricamento precoce è ciò che questo post configura. Il microcode va nell\u0026rsquo;initramfs e il kernel lo applica all\u0026rsquo;inizio del boot, prima che giri qualsiasi altra cosa.\nIl caricamento tardivo lo applica a un sistema in funzione. La documentazione del kernel ha una sezione intitolata «Why is late loading dangerous?» e dalla 5.19 non è abilitato di default15. Anche Debian lo blocca. Questo è il file sul mio host, alla lettera:\n# cat /etc/modprobe.d/amd64-microcode-blacklist.conf # The microcode module attempts to apply a microcode update when # it autoloads. This is not always safe, so we block it by default. blacklist microcode Lascialo stare. L\u0026rsquo;host qui sopra ce l\u0026rsquo;ha al suo posto e mostra comunque un aggiornamento precoce riuscito, quindi non è d\u0026rsquo;intralcio a niente.\nEntrambe le strade richiedono un riavvio. Non c\u0026rsquo;è modo di evitarlo.\nEd è solo x86. La guida di Proxmox dice chiaramente che «There is no equivalent operating-system-level microcode package for arm64»13.\nPerché un host aggiornato non ne ha «Non-free» in non-free-firmware riguarda la licenza, non i soldi né un abbonamento Proxmox. Il wiki di Debian lo spiega: la parte del kernel è software libero, ma i dati di aggiornamento del vendor sono «opaque», «and its contents are unknown to Debian»16. Ecco perché vive in un componente a sé, e perché un sistema Debian non lo riceve se il componente non è attivato.\nL\u0026rsquo;installer di Proxmox VE 9.0 lo attiva. Le note di rilascio dicono che la ISO «Install the microcode package matching the current platform», e che «installations now have the non-free-firmware repository enabled»7. Un aggiornamento non fa né l\u0026rsquo;una né l\u0026rsquo;altra cosa, perché tiene le righe di repository che avevi sulla 8.x.\nInstallazione 9.x pulita Aggiornato dalla 8.x non-free-firmware abilitato dall\u0026rsquo;installer quello che aveva la 8.x, spesso assente Pacchetto di microcode installato per la CPU rilevata nessuno, finché non aggiungi il componente Cosa te lo dice non serve niente pve8to9, come FAIL e WARN, e solo se lo lanci Aggiornamenti successivi apt full-upgrade e un riavvio lo stesso, una volta installato il pacchetto Il checker lo segnala, e più forte di quanto mi aspettassi. Eccolo sul mio nodo Intel, che è arrivato dalla 8.x:\n# pve8to9 | grep -i -B1 -A2 microcode PASS: Legacy file \u0026#39;/etc/sysctl.conf\u0026#39; is not present. INFO: Checking if matching CPU microcode package is installed. FAIL: unable to determine installed intel-microcode version. WARN: The matching CPU microcode package \u0026#39;intel-microcode\u0026#39; could not be found! Consider installing it to receive the latest security and bug fixes for your CPU. apt install intel-microcode SKIP: NOTE: Expensive checks, like CT cgroupv2 compat, not performed without \u0026#39;--full\u0026#39; parameter Il FAIL è un effetto collaterale: la ricerca della versione registra un fallimento per qualsiasi pacchetto non installato, prima che il controllo del microcode arrivi al proprio avviso17. In ogni caso, pve8to9 è un checker, non un cancello. Non esegue l\u0026rsquo;aggiornamento e non può fermarne uno, quindi l\u0026rsquo;aggiornamento gli passa dritto accanto.\nConta nella pratica? Ecco due casi in cui sì, e il primo è il mio.\nQuel nodo Intel è un Celeron N5100. La sua lista di sorgenti conteneva già non-free-firmware, quindi il pacchetto era a un comando di distanza, e fino al 27 ottobre 2026 nessuno l\u0026rsquo;aveva lanciato. Il kernel se n\u0026rsquo;era accorto anche se nessun altro lo aveva fatto:\n# dmesg | grep -i microcode [ 0.000000] x86/CPU: Running old microcode [ 0.497219] microcode: Current revision: 0x0000001d # lscpu | grep -i \u0026#39;old microcode\u0026#39; Vulnerability Old microcode: Vulnerable Il kernel tiene «a table of released microcode», e una CPU che si è avviata con qualcosa di più vecchio «will say \u0026lsquo;Vulnerable\u0026rsquo;»18. Quanto è vecchio, vecchio? Le note di rilascio di Intel rispondono per questo chip19:\nRevisione Rilascio Intel Su questo host 0x1d microcode-20210608 ciò che carica oggi il firmware della scheda 0x2400001f microcode-20220207 0x24000023 microcode-20220510 uscito sei mesi prima che venisse compilato il BIOS di questa scheda 0x24000024 microcode-20230214 0x24000026 microcode-20240312 in intel-microcode 3.20251111.1~deb13u1 di Debian Il BIOS è la versione 5.19, datata 8 novembre 2022, e carica ancora il primo microcode che Intel abbia mai rilasciato per quel componente, con due più nuovi già usciti quando è stato compilato. È esattamente il caso per cui esiste la strada del caricamento precoce: quattro aggiornamenti fermi in un pacchetto che l\u0026rsquo;host vedeva già. L\u0026rsquo;ho installato mentre scrivevo questo, e cosa ha fatto è sotto Attivarlo, perché mostra un tranello.\nIl secondo caso è di AMD. I componenti Zen 5 hanno un bug nell\u0026rsquo;istruzione RDSEED20. Le note di rilascio della 9.1 di Proxmox registrano cosa succede dopo: i kernel dalla 6.17.9 in poi, «without active microcode update will disable the RDSEED32 CPU-bit, and will fail to run Qemu guests with a CPU type that exposes that bit (for example EPYC or EPYC-v4)»21. Il fix è amd64-microcode 3.20251202.1~bpo13+1 o più recente, che è la versione del repository di Proxmox e non di Debian.\nC\u0026rsquo;è un secondo tranello dentro quello. Sulle schede Zen 5 il cui BIOS precede il fix per la vulnerabilità Entrysign di AMD, il kernel rifiuta il nuovo microcode e registra No sha256 digest for patch ID, e il consiglio di Proxmox è un aggiornamento del BIOS21. Quindi su quell\u0026rsquo;hardware la strada del sistema operativo funziona solo dopo che il vendor della scheda ha fatto la sua parte.\nAttivarlo Prima annota dove sei. Sull\u0026rsquo;host, come root:\npveversion grep -m1 vendor_id /proc/cpuinfo # GenuineIntel or AuthenticAMD grep microcode /proc/cpuinfo | uniq # revision running now dpkg -l intel-microcode amd64-microcode 2\u0026gt;/dev/null | grep ^ii dmesg | grep -i microcode lscpu \u0026gt; /root/lscpu-before.txt # vulnerabilities and mitigations Se dpkg mostra già il pacchetto giusto come ii, l\u0026rsquo;host è a posto e puoi saltare al controllo del risultato.\nAbilita il componente. L\u0026rsquo;apt di trixie preferisce il formato deb822 .sources, e la guida di aggiornamento di Proxmox indica apt modernize-sources per convertire i vecchi file a una riga, tenendo gli originali come .bak22. Poi aggiungi non-free-firmware alla riga Components: sia della stanza principale sia di quella di sicurezza in /etc/apt/sources.list.d/debian.sources. Questo è il file sul mio host, che viene dall\u0026rsquo;installer:\nTypes: deb URIs: http://deb.debian.org/debian/ Suites: trixie trixie-updates Components: main contrib non-free-firmware Signed-By: /usr/share/keyrings/debian-archive-keyring.gpg Types: deb URIs: http://security.debian.org/debian-security/ Suites: trixie-security Components: main contrib non-free-firmware Signed-By: /usr/share/keyrings/debian-archive-keyring.gpg Entrambe le stanze, perché Debian distribuisce il microcode a stable per tutte e due le strade. L\u0026rsquo;archivio di sicurezza ha intel-microcode 3.20250812.1~deb13u1 mentre l\u0026rsquo;archivio principale è passato a 3.20251111.1~deb13u123, e tu vuoi il più nuovo dei due.\nInstalla quello che corrisponde alla CPU.\napt update apt install intel-microcode # Intel apt install amd64-microcode # AMD Solo quello del tuo vendor. Da lì in poi il nuovo microcode arriva con i normali apt full-upgrade, e ogni nuova versione richiede un riavvio come la prima.\nInstallarlo ricostruisce l\u0026rsquo;initramfs, perché è lì che il microcode precoce deve stare. Il kernel lo legge da un archivio non compresso all\u0026rsquo;inizio dell\u0026rsquo;initrd, come kernel/x86/microcode/GenuineIntel.bin o AuthenticAMD.bin15, e lo script di installazione del pacchetto fa scattare il trigger dell\u0026rsquo;initramfs per metterlo lì24. Questo è il mio nodo Intel che prende il pacchetto mentre scrivevo questo post:\n# grep -A6 \u0026#39;Setting up intel-microcode\u0026#39; /var/log/apt/term.log Setting up intel-microcode (3.20251111.1~deb13u1) ... intel-microcode: microcode will be updated at next boot Processing triggers for man-db (2.13.1-1) ... Processing triggers for initramfs-tools (0.148.4) ... update-initramfs: Generating /boot/initrd.img-7.0.14-24-pve Running hook script \u0026#39;zz-proxmox-boot\u0026#39;.. Re-executing \u0026#39;/etc/kernel/postinst.d/zz-proxmox-boot\u0026#39; in new private mount namespace.. zz-proxmox-boot è l\u0026rsquo;hook di Proxmox. Su un host le cui partizioni EFI sono gestite da proxmox-boot-tool copia la nuova immagine; questo non ne ha da sincronizzare.\nOra guarda quale immagine ha generato. Senza un kernel indicato, update-initramfs -u ricostruisce solo la più recente: «The default is the latest kernel version»25. Lo stesso nodo, subito dopo:\n# uname -r 7.0.14-23-pve # for f in /boot/initrd.img-*; do echo \u0026#34;$f: $(lsinitramfs $f 2\u0026gt;/dev/null | grep -c GenuineIntel.bin)\u0026#34;; done /boot/initrd.img-7.0.12-1-pve: 0 /boot/initrd.img-7.0.14-11-pve: 0 /boot/initrd.img-7.0.14-12-pve: 0 /boot/initrd.img-7.0.14-19-pve: 0 /boot/initrd.img-7.0.14-23-pve: 0 /boot/initrd.img-7.0.14-24-pve: 1 /boot/initrd.img-7.0.14-8-pve: 0 Un\u0026rsquo;immagine su sette contiene il microcode, e non è quella con cui l\u0026rsquo;host sta girando.\nProssimo avvio L\u0026rsquo;initramfs ha il microcode Revisione su cui finisce la CPU 7.0.14-24, la voce predefinita sì 0x24000026 del pacchetto 7.0.14-23, fissata o voce di riserva no 0x1d del BIOS qualsiasi più vecchia no 0x1d del BIOS Quindi ricostruisci ogni immagine dopo l\u0026rsquo;installazione, e di nuovo dopo ogni aggiornamento del microcode, perché ognuno fa scattare la stessa ricostruzione della sola più recente. Poi rilancia il ciclo di sopra per dimostrarlo:\nupdate-initramfs -u -k all Riavvia e controlla. Questo è il mio host AMD 9.2 dopo che è stato installato il pacchetto del repository di Proxmox:\n# grep microcode /proc/cpuinfo | uniq microcode\t: 0xa500012 # dmesg | grep -i microcode [ 0.587928] microcode: Current revision: 0x0a500012 [ 0.587930] microcode: Updated early from: 0x0a50000d Updated early from è la riga che lo dimostra. La guida di amministrazione di Proxmox mostra ancora la dicitura più vecchia, microcode updated early to revision13; il kernel attuale stampa le due righe sopra26. Qualunque delle due forme significa che ha funzionato.\nL\u0026rsquo;assenza di quella riga non è di per sé un guasto. Compare solo quando il pacchetto contiene qualcosa di più nuovo sia della revisione integrata nella CPU sia di quella caricata dal BIOS. Un pacchetto copre moltissimi modelli di CPU, e la guida ha ragione a dire che la sua data non ti dice quando il tuo modello ha ricevuto qualcosa l\u0026rsquo;ultima volta13.\nDistribuirlo su un cluster La modifica dei repository e l\u0026rsquo;installazione possono andare su tutti i nodi insieme. Non cambia niente fino a un riavvio. I riavvii vanno un nodo alla volta, e ogni nodo è sano prima che il successivo venga spento.\nUn riavvio a rotazione per il microcode, un nodo per passata Per nodo, poi il successivo Controllo quorum, Ceph OK Manutenzione guest spostati noout facoltativo Riavvio controlla dmesg Attesa OSD up e in Rilascio unset, ritorno nodo successivo, stessi passi Un nodo per passata. I due passi Ceph valgono solo per i cluster iperconvergenti, e la coppia noout è facoltativa. Passo Comando Fatto quando Cluster sano pvecm status, ceph -s quorum presente, HEALTH_OK Svuota il nodo ha-manager crm-command node-maintenance enable \u0026lt;node\u0026gt;, migra a mano i guest non HA nessun guest rimasto Facoltativo, Ceph ceph osd set noout flag visibile in ceph -s Riavvia, verifica dmesg | grep -i microcode nuova revisione visibile Ceph ripreso ceph -s tutti gli OSD up e in, HEALTH_OK Rilascia node-maintenance disable \u0026lt;node\u0026gt;, ceph osd unset noout guest HA tornati indietro La modalità di manutenzione HA registra da dove veniva ogni guest HA e ce lo riporta quando il nodo esce dalla manutenzione27. I guest non HA sono affar tuo.\nSu noout le opinioni divergono, ed entrambe le parti hanno un punto. Ceph segna rapidamente down un OSD che tace, ma lo segna out solo dopo mon_osd_down_out_interval, che di default è dieci minuti28, ed è l\u0026rsquo;out che fa partire il ribilanciamento. Un riavvio normale torna ben prima. Un server con un POST lungo, un prompt del firmware o un controller RAID lento potrebbe non farcela. Impostare noout impedisce che un riavvio lento si trasformi in un ribilanciamento. Il prezzo è ricordarsi di toglierlo, e un noout dimenticato nasconde un guasto vero più avanti.\nFai tutto il cluster in un\u0026rsquo;unica finestra. Nodi con revisioni di microcode diverse sono esattamente la situazione in cui un guest con tipo di CPU host, che vede direttamente le funzioni della CPU fisica, può migrare live su un nodo che riporta un insieme diverso.\nQuando un aggiornamento del microcode va storto Raro, ma succede, e la guida di Proxmox lo tratta come si deve13.\nSituazione Fai così Perché Sospetti il nuovo microcode avvia una volta con dis_ucode_ldr disattiva il loader solo per quell\u0026rsquo;avvio29 La vecchia revisione va, la nuova no installa la versione precedente e bloccala un purge può lasciare in funzione una revisione del BIOS ancora più vecchia Qualche settimana dopo apt-mark unhold, poi full-upgrade una correzione altrove può risolverlo con la stessa versione di microcode Per l\u0026rsquo;avvio singolo: menu di GRUB (tieni premuto Shift se è nascosto), E sulla voce Proxmox, aggiungi dis_ucode_ldr alla riga che inizia con linux, poi Ctrl+X. Un host su systemd-boot invece di GRUB è trattato nel capitolo sul bootloader della guida di amministrazione.\nIl downgrade, su Intel:\napt list -a intel-microcode # what versions exist apt install intel-microcode=\u0026lt;version\u0026gt; # pick the earlier one apt-mark hold intel-microcode # stop the next upgrade undoing it reboot Su AMD metti amd64-microcode. Downgrade, mai purge.\nUn default è una promessa a chi ha preso la strada prevista Nessuno dei due è un bug. Proxmox ha fatto la cosa sensata entrambe le volte: attivare la funzione dove è sicuro, lasciarla spenta dove potrebbe non esserlo, e fissare l\u0026rsquo;hardware virtuale su cui il guest è schizzinoso. L\u0026rsquo;installer è stato corretto, il checker dell\u0026rsquo;aggiornamento lo segnala, il changelog dice cosa è cambiato e quando. Proxmox ha fatto la sua parte.\nMa un default è una promessa fatta a chi ha fatto le cose nel modo che il vendor si aspettava. Installazione pulita, tipo di OS corretto, VM creata dopo luglio. Chiunque abbia un parco macchine con una storia, cioè chiunque faccia girare qualcosa di serio, sta in parte fuori da quella promessa, e la lacuna non si annuncia. Si presenta come un guest un po\u0026rsquo; lento, un blocco VBS che nessuno collega a una versione macchina, o un nodo Zen 5 dove i guest EPYC non partono dopo un aggiornamento del kernel.\nLe note di rilascio descrivono cosa riceve una nuova installazione. Non dicono niente di cosa stanno davvero eseguendo i tuoi host, e sono domande diverse. L\u0026rsquo;unico modo per rispondere alla seconda è andare a guardare: qm showcmd sui guest, dmesg sugli host, la riga della macchina nella configurazione. Niente di tutto ciò richiede più di un minuto per macchina.\nQuel minuto è il lavoro. Proxmox ti dà gli strumenti per controllare, e per questo la distanza tra ciò che davi per scontato e ciò che sta girando tocca a te colmarla, non a loro.\nQEMU documentation — Hyper-V Enlightenments — «No Hyper-V enlightenments are enabled by default by either KVM or QEMU»; descrizioni per ogni flag; hv-evmcs «The feature is Intel-only» e «some virtualization features (e.g. Posted Interrupts) are disabled when hv-evmcs is enabled».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — CPUConfig.pm — get_hyperv_enlightenments: i cancelli su OVMF e versione, le protezioni sulla versione macchina, e il controllo GenuineIntel per hv_evmcs. Eseguito qui da qemu-server 9.2.11.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE admin guide — Qemu/KVM Virtual Machines — «You can choose between the default Intel 440FX or the Q35 chipset» e «switch from the default SeaBIOS to OVMF»; «For Windows guests, the machine version is pinned during creation, because Windows is sensitive to changes in the virtual hardware - even between cold boots»; la proprietà level e i default cet-ibt/cet-ss per quei guest.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — Debian changelog — la 9.2.0 (15 luglio 2026) abilita hv-evmcs per i guest 11/2022/2025 su Intel dalla macchina 11.0+pve2; la 9.1.14 espone level; la 9.1.12 disattiva cet-ibt e cet-ss; pinning al passaggio a un tipo di OS Microsoft Windows (gennaio 2025); la 6.0-6 (23 luglio 2019) «Make sometimes problematic \u0026lsquo;hv-tlbflush\u0026rsquo; and \u0026lsquo;hv-evmcs\u0026rsquo; CPU flags optional».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — Machine.pm — can_run_pve_machine_version restituisce falso quando il major.minor QEMU della macchina è più nuovo del binario installato; le revisioni +pveN sono elencate nello stesso file.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server 9.2.0 — debian/control — al commit «bump version to 9.2.0» del 15 luglio 2026, la dipendenza di runtime è pve-qemu-kvm (\u0026gt;= 7.1~).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE Roadmap — 9.0, Installation ISO — «Install the microcode package matching the current platform… This also means that installations now have the non-free-firmware repository enabled.»; lo stesso rilascio elenca «QEMU 10.0.2»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-qemu — Debian changelog — 10.0.2-1 (17 giugno 2025) «update QEMU and downstream patches for 10.0.2 release», che porta la correzione upstream della 10.0 qui sotto; 10.1.2-3 «a regression with VNC clipboard breaking mouse pointer in Windows guests»; 10.1.2-5 il fix di io_uring per «backup with TPM disk potentially getting stuck»; 11.0.0-1 «regression when using fuse export for swtpm»; 11.0.2-1 «recognize Hyper-V enlightenments in the list of supported CPUID flags».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU upstream changelogs, 10.0 — «Workaround \u0026lsquo;PCI Label Id\u0026rsquo; Windows bug, which is normally harmless but on localized versions can lead to guest hangs»; 10.1, 10.2 e 11.0 per le correzioni VSS e freeze del guest agent, compresa «Fix guest-fs-freeze cause “Access denied Event ID 8194” in Event Viewer».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Qemu-guest-agent — per quel guest, «First you have to download the virtio-win driver iso».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — CPUFlags.pm — la lista dei flag per VM, con le descrizioni di hv-tlbflush e hv-evmcs citate sopra.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager — OSDefaults.js — la voce win11 imposta machine: 'q35' e bios: 'ovmf'; le altre voci Microsoft Windows ereditano generic, che non imposta nessuna macchina.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE admin guide — CPU Microcode Updates — aggiornamenti precoci dal sistema operativo, la strada BIOS/UEFI come raccomandata, arm64 senza pacchetto per il sistema operativo, la procedura dis_ucode_ldr, e downgrade invece di purge.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE pve-no-subscription repository for trixie — contiene amd64-microcode 3.20251202.1~bpo13+1 e nessun intel-microcode, letto il 27 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — The Linux Microcode Loader — «Since kernel 5.19, late loading is not enabled by default», e la sezione «Why is late loading dangerous?».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian Wiki — Microcode — i dati di aggiornamento forniti dal vendor della CPU, «opaque», «is non-free, and its contents are unknown to Debian».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager — pve8to9.pm — check_cpu_microcode_package registra l\u0026rsquo;avviso; la ricerca $get_pkg che chiama prima registra «unable to determine installed $pkg version.» come fallimento per qualsiasi pacchetto non installato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — Old Microcode — «The kernel keeps a table of released microcode. Systems that had microcode older than this at boot will say \u0026lsquo;Vulnerable\u0026rsquo;.» (virgolette interne cambiate da doppie a singole)\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIntel — Linux Processor Microcode Data Files, release notes — le righe JSL per 06-9c-00/01, «Celeron N4500/N4505/N5100/N5105», nei rilasci dal 20210608 al 20240312; 0x24000026 letto dall\u0026rsquo;intestazione di 06-9c-00 nel pacchetto di Debian.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD security bulletin AMD-SB-7055 — il problema RDSEED sui processori Zen 5.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE Roadmap — 9.1 known issues, AMD Zen5 CPU issue with RDSEED — il fallimento all\u0026rsquo;avvio dei guest, la versione del pacchetto corretta, e il messaggio No sha256 digest sulle schede senza il fix BIOS per Entrysign.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Upgrade from 8 to 9 — apt modernize-sources converte in deb822 e tiene i vecchi file con il suffisso .bak.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian packages — intel-microcode in trixie — le versioni stable e security, verificate con apt-cache policy sull\u0026rsquo;host.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian sources — intel-microcode.postinst — dpkg-trigger --no-await update-initramfs, poi «microcode will be updated at next boot»; amd64-microcode fa lo stesso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian manual — update-initramfs(8) — per -k, «The default is the latest kernel version», e «all» opera «on all installed kernel versions that already have an initramfs (with -d or -u)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — arch/x86/kernel/cpu/microcode/core.c — stampa «Current revision: 0x%08x» e «Updated early from: 0x%08x».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE admin guide — High Availability, maintenance mode — i servizi HA vengono spostati altrove, e riportati indietro «automatically once the maintenance mode is disabled and the node is back online».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph documentation — Configuring Monitor/OSD Interaction — mon_osd_down_out_interval, «The number of seconds Ceph waits before marking a Ceph OSD Daemon down and out», default 10 minuti.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — kernel parameters — dis_ucode_ldr: «Disable the microcode loader.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/proxmox/hyper-v-enlightenments-and-microcode/","summary":"Proxmox VE 9 attiva gli enlightenment Hyper-V per i guest Fisher-Price OS (Windows) e installa il microcode della CPU sugli host nuovi, ma solo se alla VM è stato dato un tipo di OS Microsoft Windows e l\u0026rsquo;host viene dall\u0026rsquo;installer 9.x. Qui trovi cosa fanno gli enlightenment, le regole esatte con cui qemu-server li sceglie (misurate su un host 9.2 in produzione), perché il pinning della versione della macchina tiene le VM più vecchie fuori dal fix hv-evmcs di luglio 2026, la build di pve-qemu-kvm che serve a quel fix e cosa ha corretto per quei guest ogni rilascio di QEMU dalla 10.0, perché vanno su q35 e mai su i440fx (dove il wizard ne mette ancora la maggior parte), i due flag che puoi impostare a mano, come dimostrare cosa sta eseguendo una VM, da dove arriva il microcode (firmware della scheda, Debian e il repository di Proxmox stesso), perché un host aggiornato non ne ha (con un nodo Intel indietro di quattro rilasci Intel come esempio), la ricostruzione dell\u0026rsquo;initramfs che l\u0026rsquo;installazione innesca e i kernel più vecchi che quella ricostruzione salta, il guasto RDSEED di Zen 5 che ne segue, come attivarlo, un riavvio a rotazione su un cluster Ceph, e il rollback di un aggiornamento difettoso.","title":"Due default di Proxmox VE 9 che forse non hai: enlightenment Hyper-V e microcode della CPU"},{"content":"La mappa di Google, i miei autovelox, un\u0026rsquo;app sola Sullo schermo dell\u0026rsquo;auto volevo una cosa sola. La mappa di Google, il traffico di Google e le indicazioni svolta per svolta di Google, con sopra i miei dati sugli autovelox, che mi avvisassero solo per gli autovelox puntati davvero sul mio lato della strada.\nSu Android Auto non ho trovato niente che lo facesse. Google Maps ha la mappa e i percorsi, ma non c\u0026rsquo;è modo di caricarci dentro un proprio database di autovelox. Quindi me lo sto costruendo.\nSi chiama AutoNavAlerts. È un\u0026rsquo;app di navigazione per Android Auto costruita sul Navigation SDK di Google, con sopra un sistema di avvisi per autovelox e punti di interesse. La prima fonte di autovelox è PocketGPSWorld, con il mio abbonamento a pagamento. Il codice è pubblico con licenza Apache 2.01 su github.com/damo2929/AutoNavAlerts.\nQuesta è la prima parte di una serie. Racconta cosa fa l\u0026rsquo;app, cosa Google permette e non permette a un\u0026rsquo;app di terze parti sullo schermo dell\u0026rsquo;auto, e come è stata costruita, perché quasi ogni riga è stata scritta da Claude, il modello di intelligenza artificiale di Anthropic, mentre io fissavo le regole, la collaudavo e mi prendevo la responsabilità del risultato. Quest\u0026rsquo;ultima parte è una storia a sé.\nÈ la versione 0.1.0. Si installa a mano, non è sul Play Store, e ha fatto un solo viaggio vero. Leggila come un diario di lavoro, non come il lancio di un prodotto.\nCosa fa oggi Ecco cosa c\u0026rsquo;è nella build di prova e a cosa serve ogni parte:\nArea Cosa fa Navigazione Mappa di Google con traffico, ricerca dei luoghi, anteprima del percorso con l\u0026rsquo;orario di arrivo, svolta per svolta sullo schermo dell\u0026rsquo;auto, sulla barra laterale e sul display del conducente Guida verso un contatto Di\u0026rsquo; o scrivi un nome e gli indirizzi salvati del contatto compaiono sopra i risultati di Places. A Google va solo l\u0026rsquo;indirizzo che scegli Convive con la tua musica Solo modelli di navigazione, così la musica tiene la sua scheda a schermo diviso. La voce degli avvisi abbassa la musica, non la mette mai in pausa Avvisi autovelox Tre fasi per autovelox, solo per quelli rivolti nella tua direzione di marcia, sulla strada che stai percorrendo Zone di velocità media Una zona parte solo quando davanti a te c\u0026rsquo;è un altro autovelox con lo stesso limite, e finisce all\u0026rsquo;ultimo autovelox Pannello velocità La tua velocità e il limite della strada, sempre affiancati, in basso a destra Limiti di velocità offline Un solo download dei limiti OpenStreetMap per il Regno Unito: 1.326.619 strade in 29 MB sul telefono. Niente da cercare mentre guidi Percorsi per auto elettriche Il percorso più veloce e quello a basso consumo di Google affiancati, e scegli tu Dati autovelox Il tuo abbonamento PocketGPSWorld, controllato ogni giorno, mai sostituito mentre navighi. Oppure importa file iGO, KML, GPX, OV2 o CSV Segnala un autovelox Un tocco in auto salva posizione, direzione e limite, con un commento vocale facoltativo. Revisione e invio si fanno sul telefono, mai durante la guida Gli avvisi degli autovelox sono il motivo per cui l\u0026rsquo;app esiste, quindi si prendono la sezione successiva.\nUn autovelox conta solo se è rivolto verso di te Un avviso che scatta per la carreggiata opposta è peggio di nessun avviso. Ti abitua a ignorarlo. Quindi la prima regola ferrea del progetto è che un autovelox avvisa solo quando è rivolto nella tua direzione di marcia, e quella regola non viene mai allentata, mai aggirata con un valore predefinito e mai abbandonata quando i dati sono scomodi.\nCome una posizione diventa un avviso autovelox Ingressi Quattro controlli, a ogni posizione Uscite velocità e GPS auto se l'auto li condivide GPS del telefono 10 posizioni al secondo i tuoi set di autovelox sul telefono 1. abbastanza vicino 2. davanti a te 3. rivolto verso di te 4. sulla tua strada banner sulla mappa dell'auto avviso vocale, musica abbassata autovelox evidenziato sulla mappa un controllo fallito: nessun avviso; se rivolto altrove, disegnato attenuato con la freccia Come una posizione diventa un avviso. Fino a dieci posizioni al secondo passano quattro controlli; solo un autovelox che li supera tutti e quattro viene annunciato a voce e mostrato come avviso. Il motore gira a ogni posizione rilevata, fino a dieci al secondo. Per ogni autovelox vicino si fa quattro domande, in ordine:\nControllo Passa quando Perché c\u0026rsquo;è Abbastanza vicino entro la distanza di attivazione più 200 m, al massimo 3 km nessun lavoro sprecato su autovelox a chilometri di distanza Davanti a te rotta verso l\u0026rsquo;autovelox entro 45° dalla tua direzione un autovelox alle spalle è passato Rivolto verso di te la direzione dell\u0026rsquo;autovelox entro 45° dalla tua, o dalla rotta verso l\u0026rsquo;autovelox in curva la carreggiata opposta resta muta Sulla tua strada entro 50 m dal percorso davanti, o un corridoio di 40 m che si allarga con la distanza in guida libera la strada parallela resta muta I 45° non sono generosi. I file TomTom di PocketGPSWorld danno la direzione di un autovelox in otto punti cardinali, quindi 22,5° se ne vanno nei dati prima di tutto il resto. La direzione GPS costa qualche grado in più, e la curva della strada qualche altro ancora. Ecco perché a nient\u0026rsquo;altro è permesso di eroderli.\nUn autovelox che non supera il controllo di direzione viene comunque disegnato sulla mappa, attenuato, con una freccia che mostra dove guarda. Lo vedi. Solo che non ti parla.\nTre fasi di avviso a 70 mph Preavviso predefinito: 15 secondi alla tua velocità, qui 70 mph tu, 70 mph autovelox rivolto verso di te carreggiata opposta, rivolto altrove: attenuato, muto 1° avviso a 469 m, 15 s 2° avviso a 235 m, 7,5 s passaggio 100 yd (91 m) non in scala; minimi di 242 m e 142 m separano i primi due a bassa velocità Le tre fasi a 70 mph con il preavviso predefinito di 15 secondi. Le prime due sono calcolate sulla tua velocità; l\u0026rsquo;avviso di passaggio è fisso a 100 yard e non si può disattivare finché l\u0026rsquo;audio è attivo. Le fasi sono a tempo, non a distanze fisse. Il primo avviso arriva 15 secondi prima alla tua velocità attuale e il secondo a metà di quel tempo, entrambi con un minimo perché non si accalchino mai sul terzo. Il terzo è fisso a 100 yard, ed è obbligatorio ogni volta che l\u0026rsquo;audio è attivo. La distanza di attivazione cresce soltanto durante un avvicinamento, quindi frenare forte non accorcia l\u0026rsquo;avviso che ti spettava già.\nCosa Google lascia fare a un\u0026rsquo;app sullo schermo dell\u0026rsquo;auto Qui diventa interessante, perché un\u0026rsquo;app di terze parti su Android Auto non è Google Maps. Gira dentro le regole fissate dalla Car App Library di Android Auto, che dà alle app «a set of visual templates approved for driver safety»2, e dentro quello che il Navigation SDK sceglie di esporre.\nTre lacune hanno dato forma all\u0026rsquo;app più di qualunque cosa io abbia scelto di costruire:\nCosa Google Maps in auto Un\u0026rsquo;app sul Navigation SDK Segnalare un incidente, la polizia o lavori in corso integrato non offerto. La documentazione di Google: «real-time disruptions are not available on Android Auto»3 Il limite di velocità della strada mostrato solo la percentuale di quanto lo superi, e solo mentre lo superi4 Il tocco sui controlli della mappa dell\u0026rsquo;SDK non pertinente nessuno. Android Auto «limits screen surface interaction to a series of SurfaceCallback methods»2 Prendi il limite di velocità. Google lo conosce. Google dice a un\u0026rsquo;app di quanto lo stai superando, come percentuale e come gravità, e niente del tutto mentre sei sotto. Posso chiedere perché un conducente può conoscere il limite solo quando lo sta già infrangendo? Una risposta non l\u0026rsquo;avrò, quindi l\u0026rsquo;app ci gira intorno. Mentre sei sopra, ricava il limite dalla tua velocità e dalla percentuale. Sotto, usa l\u0026rsquo;autovelox a cui ti stai avvicinando, poi il download di OpenStreetMap, e mostra un trattino invece di niente quando non ha alcun limite.\nLa segnalazione degli incidenti ha la stessa forma. Le API di segnalazione esistono nella vista di navigazione del telefono e non in quella dell\u0026rsquo;auto. Qualcuno l\u0026rsquo;ha già chiesto a Google5, e la richiesta è ancora aperta. L\u0026rsquo;app controlla le API in fase di esecuzione, quindi se un SDK futuro le aggiunge, il pulsante di segnalazione di Google compare senza alcuna modifica al mio codice. Un job di GitHub Actions controlla ogni trimestre e apre una issue il giorno in cui succede.\nLa regola sul tocco mi ha fregato per bene. La mappa dell\u0026rsquo;SDK per l\u0026rsquo;auto disegna da sé la scheda di arrivo, l\u0026rsquo;intestazione, il pulsante per ricentrare, il tachimetro e la barra del viaggio. Nessuno di questi può ricevere un tocco, perché nessun tocco arriva alla vista dell\u0026rsquo;SDK. Sembrano pulsanti e non fanno nulla. Quindi sono tutti spenti, e l\u0026rsquo;app disegna i propri controlli dove un tocco arriva davvero.\nPorta la tua chiave, porta i tuoi dati Due decisioni tengono quest\u0026rsquo;app onesta su soldi e licenze, ed entrambe sono volute.\nNon c\u0026rsquo;è una chiave Maps integrata. Google Maps Platform richiede «a billing-enabled Cloud project»6, e il Navigation SDK richiede un progetto in cui sia abilitato7. Se distribuissi una chiave, la guida di tutti verrebbe addebitata a me, oppure la chiave finirebbe in giro e verrebbe addebitata a me lo stesso. Quindi ogni utente porta la sua chiave, nel suo account Google Cloud. L\u0026rsquo;app sul telefono può crearne una con il tuo account Google, oppure la incolli tu. Viene salvata cifrata sul telefono. Non c\u0026rsquo;è alcun ripiego, e l\u0026rsquo;app non fa una sola chiamata all\u0026rsquo;SDK finché la tua chiave non c\u0026rsquo;è.\nNell\u0026rsquo;app non ci sono dati sugli autovelox. PocketGPSWorld concede il suo database in licenza per uso individuale, marca ogni download con il nome dell\u0026rsquo;iscritto e vieta di metterlo dove possa arrivarci chiunque non sia l\u0026rsquo;acquirente. Quindi l\u0026rsquo;app non lo distribuisce, non lo ospita e non lo sincronizza tra telefoni. Accedi con il tuo abbonamento, e il telefono scarica la tua copia marcata in una memoria privata esclusa dai backup. Al banco erano 19.826 autovelox in 33 set, un set per file, mai uniti.\nLa sincronizzazione automatica è educata. Legge il feed RSS pubblico di PocketGPSWorld una volta al giorno8 e accede solo quando c\u0026rsquo;è una nuova versione. Non sostituisce mai gli autovelox mentre stai navigando.\nUna clausola della loro licenza non è del tutto risolta da questo, quella sull\u0026rsquo;incorporare i dati in un\u0026rsquo;applicazione. Per il mio uso personale lo accetto. Prima che l\u0026rsquo;app vada a chiunque altro, PocketGPSWorld riceverà un\u0026rsquo;email con la domanda.\nDue giorni, 87 commit, e prima un documento di progetto Ora la parte su cui si discuterà. Questo codice non l\u0026rsquo;ho scritto io. L\u0026rsquo;ha scritto Claude, tramite Claude Code, con due modelli, Claude Fable e Claude Opus. Io ho scritto i requisiti, preso ogni decisione, gestito il banco di prova, guidato l\u0026rsquo;auto e rivisto quello che tornava indietro. Ogni commit con modifiche scritte dall\u0026rsquo;IA porta una riga finale che lo dice, e lo dice anche il README.\nQuesti sono i numeri, letti dal repository:\nMisura Valore Commit 87, dalle 22:10 dell'11 ottobre alle 12:44 del 13 ottobre 2026 Commit con una riga di coautore Claude 83 (56 Fable, 27 Opus) Kotlin nell\u0026rsquo;app e nella sua libreria di base 15.334 righe Test unitari 211, in 3.464 righe DESIGN.md, la specifica 1.763 righe, scritte prima di qualunque codice Il documento di progetto è venuto prima, ed è la cosa più utile che posso dire a chiunque lo faccia. La sua prima riga dice che nessun codice si scrive finché non è approvato, e ogni modifica successiva si fa prima lì. Ogni classe ha un compito scritto accanto. Ogni soglia ha una ragione. Ogni regola che ho fissato è segnata come mia, con la data.\nConta perché un modello dimentica. Una sessione lunga viene riassunta, e il riassunto tiene il succo e perde il dettaglio, e il dettaglio è dove stanno i bug. Lo stesso AGENTS.md del repository lo dice chiaro: non fidarti di un riassunto di questi file a memoria o da una sessione precedente. L\u0026rsquo;agente torna al documento. Ogni volta.\nDue agenti hanno anche lavorato in parallelo sulla seconda fase, uno sulle indicazioni, la mappa e le schermate, l\u0026rsquo;altro su posizione, avvisi, voce e marcatori sulla mappa. Ognuno aveva una lista scritta di file, e le interfacce tra loro erano fissate in anticipo: aggiungere, non rinominare. Si sono uniti senza intoppi perché il confine era stato deciso prima che uno dei due partisse, non scoperto dopo.\nOgni regola ferrea nasce da qualcosa che ho visto Il progetto ha una lista di regole ferree, e nessuna è nata davanti a una lavagna. Ognuna è nata guardando la cosa girare sul Desktop Head Unit9, l\u0026rsquo;emulatore di Google per lo schermo dell\u0026rsquo;auto sul PC, o in auto, e vedendola fare qualcosa di sbagliato.\nRegola ferrea Cosa ho visto che l\u0026rsquo;ha resa una regola Un autovelox avvisa solo quando è rivolto verso di te gli avvisi per la carreggiata opposta sono rumore che ti insegna a ignorare gli avvisi Niente sullo schermo dell\u0026rsquo;auto che non funzioni due pulsanti di stop a schermo, uno dei due morto Nessuna funzione mostrata due volte quella stessa coppia, più due pulsanti per ricentrare, due indicatori di velocità Un solo annulla, quello di Google la scheda nell\u0026rsquo;angolo con la X è di Android Auto, disegnata dal viaggio che l\u0026rsquo;app pubblica, quindi il pulsante di stop dell\u0026rsquo;app se n\u0026rsquo;è andato Niente tremolio sullo schermo dell\u0026rsquo;auto la schermata Altro che sobbalzava con l\u0026rsquo;auto ferma, perché rimandava una schermata identica ogni secondo e Android Auto anima ogni aggiornamento Ogni pulsante sul lato destro i pulsanti della mappa stavano in alto a sinistra finché lo schermo dell\u0026rsquo;auto non comunicava le sue dimensioni; ora una colonna sul bordo destro fin dall\u0026rsquo;inizio, niente di nostro a sinistra Nessuna chiave Maps integrata, mai la guida di nessuno viene addebitata a qualcun altro Il tremolio è il mio preferito, perché è così piccolo e sarebbe arrivato in produzione. Una riga GPS dal vivo si aggiornava una volta al secondo. A ogni aggiornamento veniva rimandata tutta la schermata, invariata, e l\u0026rsquo;host la animava, così ogni riga sotto ballava mentre l\u0026rsquo;auto era ferma. La correzione è un solo confronto: ridisegna solo quando una riga è cambiata. La regola è più grande della correzione. Una schermata che sta ferma deve sembrare ferma, e si verifica con una raffica di screenshot che devono essere identici.\nQuesto è il vero lavoro quando il codice lo scrive un\u0026rsquo;IA. Non si stanca e non le pesa riscrivere, ma lo schermo dell\u0026rsquo;auto non lo vede. Tu sì. Scrivere ciò che hai visto come regola, con la data, è quello che gli impedisce di tornare tre sessioni dopo.\nCosa ha sbagliato il codice, e come è stato scoperto Parecchio. Niente di esotico, e ogni errore è stato scoperto facendolo girare, non leggendolo:\nDifetto Cosa faceva Come è stato scoperto Percorso agganciato al tratto sbagliato Il percorso di Google da un\u0026rsquo;auto parcheggiata andava a nord, faceva inversione a una rotatoria e tornava a sud sulla stessa strada. Il matcher fissava l\u0026rsquo;auto al tratto verso nord a 10 m di distanza, quindi ogni autovelox verso sud risultava «fuori strada» di oltre un chilometro. Non avvisava niente una guida simulata al banco; il registro degli avvisi diceva offRoad lateral=1204 per ogni autovelox Watchdog della voce troppo corto concedeva 1,5 s più 70 ms per carattere. I numeri richiedono più tempo per essere pronunciati, quindi ogni avviso di seconda fase veniva troncato a metà frase le registrazioni vocali di una prova al banco Un limite di frequenza nel motore con una finestra di tre secondi, di due autovelox allo stesso incrocio, uno andava perso per sempre seguendo gli avvisi rimasti muti nel primo viaggio vero Una direzione vecchia l\u0026rsquo;emulatore riporta una rotta di 0° qualunque cosa tu faccia, quindi su una strada verso sud ogni autovelox falliva il controllo di direzione una corsa simulata lungo la A61 Cambi di limite annunciati come avvisi autovelox un cambio di limite più avanti veniva accodato come avviso autovelox di prima fase il registro vocale al banco Il secondo merita una pausa. Ogni singolo test passava. Il codice era corretto secondo il suo stesso metro. Aveva solo un timeout scelto da qualcuno che non aveva mai sentito un telefono leggere una distanza ad alta voce. Il test che lo scopre è una voce vera, cronometrata, in una corsa vera.\nIl primo viaggio vero Il 12 ottobre ho messo una build di rilascio sul telefono e l\u0026rsquo;ho portata in giro sulla XPENG G6 con Android Auto senza fili. Due cose sono andate storte. Un percorso impostato da fermo si cancellava da solo pochi secondi dopo la partenza. E alcuni avvisi venivano pronunciati e altri no, senza uno schema che riuscissi a vedere.\nPoi il problema peggiore. Non era rimasto niente da leggere. Il ColorOS del mio telefono butta via le righe di log dell\u0026rsquo;app, quindi il viaggio non ha lasciato alcuna prova. Era l\u0026rsquo;app, l\u0026rsquo;SDK di Google o Android Auto stesso? Non sapevo dirlo.\nQuindi la correzione per il primo viaggio non è stata una modifica al codice. È stata la prova. L\u0026rsquo;app ora scrive sempre due log sul telefono, uno per percorsi e mappa e uno per ogni decisione sugli avvisi, a blocchi di 15 secondi, più un registratore di viaggio facoltativo che salva ogni posizione così un viaggio si può riprodurre al banco. Poi le ipotesi sono state corrette, ognuna scritta per fare meno e registrare di averlo fatto. Ogni modo in cui la guida può terminare ora registra chi l\u0026rsquo;ha terminata.\nDa allora, al banco, Android Auto ha chiamato lo stop una volta, 2 minuti e 35 secondi dentro una guida assistita. In quel momento stavo cliccando in giro sull\u0026rsquo;head unit, quindi molto probabilmente era la X sulla sua scheda. Non è successo con nessuno che toccasse lo schermo. Il prossimo viaggio lo chiarirà, perché questa volta il viaggio lascia una traccia.\nCosa viene dopo La lista del banco è ancora lunga. I prossimi viaggi verificano il pulsante annulla, le curve e i contromano, il passaggio tra il GPS dell\u0026rsquo;auto e quello del telefono, e se il display del conducente della G6 mostra davvero le schede di svolta di un\u0026rsquo;app di terze parti.\nLe parti successive della serie entrano come si deve nella matematica del motore degli avvisi, nei trucchi per il limite di velocità, nei formati di PocketGPSWorld e nel banco stesso: come si collauda un\u0026rsquo;app Android Auto senza auto, con un GPS scriptato e un emulatore convinto che ogni strada vada a nord.\nLa macchina scrive, lo standard è tuo Ho sentito parlare molto di IA che scrive codice, quasi sempre da chi la vende o da chi ne ha paura. Quello che ho trovato è più noioso di entrambe le cose, e più utile.\nScrive in fretta e non si annoia. Riscrive una schermata per la quarta volta senza un sospiro. Quello che non fa è accorgersi che la schermata Altro trema, o che una frase è stata troncata, o che un pulsante morto sta accanto a uno vivo. L\u0026rsquo;auto non la vede. Quelle cose toccava a me vederle, e l\u0026rsquo;unico motivo per cui sono corrette è che le ho scritte una per una come regole che deve leggere prima di toccare qualsiasi cosa.\nPer questo la responsabilità non si sposta. Il codice è mio perché lo standard a cui è tenuto l\u0026rsquo;ho fissato io e in auto ci sono io. Niente di ciò che l\u0026rsquo;ha tenuto onesto è un metodo da IA. Scrivere la specifica prima del codice, mettere per iscritto ciò che impari e tenere le prove invece di tirare a indovinare è come l\u0026rsquo;ingegneria fatta bene si è sempre fatta. Lo strumento non lo cambia. Fa solo scoprire prima chi se lo stava saltando.\nApache License, Version 2.0 — la licenza con cui è pubblicato il codice di AutoNavAlerts.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: Android Auto — la Car App Library fornisce «a set of visual templates approved for driver safety», e «Android Auto limits screen surface interaction to a series of SurfaceCallback methods».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: real-time disruptions — «real-time disruptions are not available on Android Auto».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: speed alerts — onSpeedingUpdated(float percentageAboveLimit, SpeedAlertSeverity speedAlertSeverity): la percentuale oltre il limite e una gravità, non il limite stesso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ngooglemaps/flutter-navigation-sdk issue #726 — «Incident reporting on Android Auto \u0026amp; CarPlay», aperta il 17 giugno 2026, ancora aperta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle Maps Platform — Get started — «you must create a billing-enabled Cloud project and enable the desired APIs or SDKs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: set up your project — «A Google Cloud console project with the Navigation SDK enabled.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPocketGPSWorld — il database britannico degli autovelox da cui l\u0026rsquo;app si sincronizza, con l\u0026rsquo;abbonamento personale di ciascun utente.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — Test using the Desktop Head Unit — l\u0026rsquo;emulatore di Google per lo schermo di Android Auto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/android/autonavalerts-part-one-a-sat-nav-of-my-own/","summary":"AutoNavAlerts è un\u0026rsquo;app di navigazione per Android Auto che sto costruendo sul Navigation SDK di Google: la mappa, il traffico, la ricerca e le indicazioni svolta per svolta di Google, con sopra un sistema di avvisi degli autovelox che carica il mio abbonamento PocketGPSWorld e avvisa solo per gli autovelox rivolti nella mia direzione di marcia. La prima parte racconta cosa fa oggi, cosa Google permette a un\u0026rsquo;app di terze parti sullo schermo dell\u0026rsquo;auto e cosa trattiene (segnalazione degli incidenti, il limite di velocità, il tocco sui suoi controlli), perché ogni utente porta la sua chiave Maps e i suoi dati sugli autovelox, e come il codice è stato scritto con Claude: prima un documento di progetto, 87 commit in meno di due giorni, le regole ferree nate al banco di prova, i bug scritti dagli agenti e come è stato scoperto ciascuno, e il primo viaggio vero in auto.","title":"AutoNavAlerts, parte prima: un navigatore tutto mio per Android Auto"},{"content":"Quando chiedi una pagina non gira niente Questa settimana il progetto PHP ha rilasciato le correzioni per PHP2Shell, e il suo avviso diceva che l\u0026rsquo;attacco può scattare \u0026ldquo;before any application code runs\u0026rdquo;1. Ho scritto cosa significa per PHP in PHP: ventinove anni a lasciare la porta aperta. Questo articolo parla dell\u0026rsquo;altra metà della risposta. E se non girasse proprio niente?\nÈ così che funziona questo blog. Quando hai chiesto questa pagina, nessun mio programma si è avviato, ha letto un database, ha controllato un login o ha costruito dell\u0026rsquo;HTML. Ti è stato rimandato un file che esisteva già. Tutto qui.\nEcco come si presenta quella differenza, misurata lo stesso giorno, su un WordPress di serie installato da zero in laboratorio e su questo sito così com\u0026rsquo;è online adesso:\nWordPress 7.1.3 di serie Questo sito Route della REST API 133 0 Route REST che accettano scritture 62 0 Metodi XML-RPC 80 0 File eseguiti sul server 1.514 PHP 0 File scrivibili dall\u0026rsquo;utente che serve il sito 3.785 su 3.785 nessuno: non gira niente che possa scrivere Database 12 tabelle, account applicativo con tutti i privilegi nessuno Pagina di login wp-login.php, attiva nessuna; il percorso restituisce 404 Un POST, PUT o DELETE sulla home page PHP gira e genera comunque la pagina rifiutato all\u0026rsquo;edge con 405; non gira niente Nessuno di quegli zeri è un\u0026rsquo;impostazione che ho spento. Sono zeri perché la cosa che contano qui non esiste. Non puoi attaccare una pagina di login che non è mai stata costruita.\nCosa mette su internet un WordPress di serie Non volevo sostenerlo a memoria, quindi l\u0026rsquo;ho misurato. Le immagini container ufficiali wordpress e mariadb, avviate in podman sulla mia macchina e legate a localhost, installate senza aggiungere niente: nessun plugin oltre a quelli inclusi, il tema predefinito, un amministratore. WordPress 7.1.3 su PHP 8.3.36. Poi ho contato a cosa risponde.\nCosa risponde a una richiesta: WordPress contro un sito statico Una richiesta WordPress Una richiesta a questo sito internet web server PHP esegue codice, a ogni richiesta Core di WordPress: 1.514 file PHP più ogni plugin e tema 133 route REST, 80 metodi XML-RPC tutti i file scrivibili dallo stesso utente database, ALL PRIVILEGES pagina di login, admin, cron, upload internet edge di Cloudflare viene rimandato un file 6.343 file, costruiti in anticipo nessun nostro codice gira POST, PUT, DELETE: 405 niente sul server su cui scrivere nessun database nessuna pagina di login, nessun admin, nessun cron Cosa risponde a una richiesta. Su WordPress, ogni visualizzazione di pagina fa girare PHP attraverso il core, i plugin e un database, su file che lo stesso utente può riscrivere. Qui viene rimandato un file finito e non gira niente. La REST API è la superficie singola più grande. Cinque namespace, 133 route, 257 coppie di route e metodo, e 62 route che accettano una scrittura di qualche tipo. È arrivata nel core con WordPress 4.7, \u0026ldquo;with REST API endpoints for posts, comments, terms, users, meta, and settings\u0026rdquo;2. E ti dicono di non spegnerla: \u0026ldquo;You should not disable the REST API; doing so will break WordPress Admin functionality that depends on the API being active.\u0026rdquo;3 Quindi resta accesa.\nCosa è esposto di default Cosa dice la documentazione di WordPress stessa XML-RPC, 80 metodi attivo di default dalla 3.5: \u0026ldquo;Enable XML-RPC by default, remove Writing Settings option\u0026rdquo;4 la REST API, 133 route \u0026ldquo;content that is public on your site is generally publicly accessible via the REST API\u0026rdquo;5 l\u0026rsquo;elenco degli utenti GET /wp/v2/users restituisce nome visualizzato, slug, link e avatar di ogni autore nella vista predefinita6 wp-login.php e xmlrpc.php \u0026ldquo;xmlrpc.php is a frequent brute‑force target\u0026rdquo;; \u0026ldquo;Apply rate limits to /wp-login.php and /xmlrpc.php globally.\u0026rdquo;7 wp-cron.php \u0026ldquo;WP-Cron works by checking, on every page load, a list of scheduled tasks to see what needs to be run.\u0026rdquo;8 l\u0026rsquo;editor di temi e plugin \u0026ldquo;This is often the first tool an attacker will use if able to login, since it allows code execution.\u0026rdquo;9 L\u0026rsquo;elenco degli utenti merita una seconda occhiata. Nel mio laboratorio, una richiesta anonima a quell\u0026rsquo;endpoint ha restituito l\u0026rsquo;unico account amministratore, con nome visualizzato e slug. Qualcuno che non ha mai fatto login scopre quali sono gli account del sito prima di aver provato qualsiasi cosa, su un\u0026rsquo;installazione da zero, per progetto. Nessuno ha dovuto configurarlo male.\nPoi i file. L\u0026rsquo;immagine ufficiale fa girare Apache come www-data, e www-data possiede tutta la web root. Tutti i 3.785 file, compresi i 1.514 file PHP, sono scrivibili dallo stesso utente che esegue il codice. Ogni file. Il codice compreso. wp-config.php, con dentro la password del database, sta nella web root con modo 644. L\u0026rsquo;account di database che usa WordPress ha ALL PRIVILEGES sul suo database.\nÈ il modello a processo unico dell\u0026rsquo;articolo su PHP, attivo e non modificato, dall\u0026rsquo;immagine ufficiale. Non è un sito gestito male. È il punto di partenza da cui comincia ogni sito WordPress, prima che entri il primo plugin.\nE i plugin sono da dove arriva la maggior parte del problema. Patchstack ha contato 11.334 nuove vulnerabilità nell\u0026rsquo;ecosistema WordPress nel 2025. \u0026ldquo;91% of new vulnerabilities were found in plugins, and 9% were found in themes. There were only 6 vulnerabilities reported in the WordPress core.\u0026rdquo;10 Quasi la metà non aveva una correzione nel momento in cui è stata resa pubblica, e il tempo mediano fino allo sfruttamento di massa, per quelle che interessavano agli attaccanti, è stato di cinque ore10.\nCosa mette su internet questo sito Questo blog è 6.343 file. Eccolo tutto, per tipo:\nTipo di file Numero Cos\u0026rsquo;è .html 3.486 le pagine, in cinque lingue .xml 1.576 feed RSS e sitemap .svg 1.181 diagrammi, copertine, icone .png 46 screenshot .json 10 l\u0026rsquo;indice di ricerca e i timbri di build .js 4 piccoli script che girano nel tuo browser, non sul server .css, font e il resto 40 stili, e file allegati agli articoli Eseguiti sul server 0 Ci sono alcuni file .py e .sh lì dentro. Sono script allegati agli articoli perché i lettori li scarichino, e il server li manda come testo. Niente sul server li esegue. Sul server non c\u0026rsquo;è niente con cui eseguirli.\nÈ pubblicato su Cloudflare come asset statici, senza nessuno script Worker. La configurazione di deploy non ha un entry point, e la documentazione di Cloudflare dice cosa significa: \u0026ldquo;The main key is optional for assets-only Workers.\u0026rdquo;11 Quando un percorso richiesto corrisponde a un file, \u0026ldquo;that file will be served\u0026rdquo; senza invocare codice Worker, e \u0026ldquo;If no Worker script is present, a 404 Not Found response is returned.\u0026rdquo;12 E non costa niente: \u0026ldquo;Requests to static assets are free and unlimited.\u0026rdquo;13\nCloudflare è una scelta, non un requisito. Il risultato è una cartella di file, e qualsiasi server HTTPS capace di mandare un file può servirlo: nginx, Caddy, un Apache che serve solo file statici, o un bucket di object storage dietro una CDN. I link sono relativi, quindi la stessa build si serve invariata dalla radice di un dominio o da una sottodirectory; è stato verificato servendo il sito costruito sotto /preview/ e confermando che tutti i 592 riferimenti locali su sei pagine si risolvevano. Cambiare host significa copiare una cartella. L\u0026rsquo;unico pezzo specifico di Cloudflare è il file _headers; altrove, gli stessi header vanno nella configurazione del server. Quello che si porta dietro è la proprietà che conta. Qualunque cosa lo serva deve solo mandare file, quindi non deve mai eseguire il tuo codice.\nQuindi il sito online risponde così:\n$ for m in POST PUT DELETE; do curl -s -o /dev/null -w \u0026#34;$m %{http_code}\\n\u0026#34; -X $m https://blogs.damiendye.uk/en/; done POST 405 PUT 405 DELETE 405 $ for p in wp-login.php xmlrpc.php wp-admin/ wp-json/; do curl -s -o /dev/null -w \u0026#34;%{http_code} $p\\n\u0026#34; https://blogs.damiendye.uk/$p; done 404 wp-login.php 404 xmlrpc.php 404 wp-admin/ 404 wp-json/ Non risponde niente. È il progetto.\nGli header di sicurezza escono con ogni file da un file di testo semplice _headers nel repository, che Cloudflare legge al deploy14. La Content Security Policy blocca ogni script, stile, immagine, font e connessione su quest\u0026rsquo;unica origine. Sarò franco sulla lacuna: script-src e style-src portano ancora 'unsafe-inline', perché il tema scrive nella pagina alcuni piccoli script. È il lavoro in sospeso su quel file, ed è scritto nel repository esattamente come tale.\nE pubblicare non ha bisogno di una porta. Su WordPress, pubblicare è una scrittura via HTTP: l\u0026rsquo;editor, la REST API e XML-RPC esistono perché è così che gli articoli arrivano sul server, e ognuno di loro è una via d\u0026rsquo;ingresso. Qui scrivo un articolo come file di testo e lo pusho in un repository Git, e la build carica i file finiti attraverso l\u0026rsquo;API di deploy di Cloudflare. Niente di ciò che serve il sito accetta una scrittura dal web, perché a niente serve. Anche il repository è privato. Chiedilo a GitHub senza le mie credenziali e la risposta è un 404, quindi i sorgenti, le bozze e la cronologia non sono su internet nemmeno loro.\nLa superficie d\u0026rsquo;attacco è un conteggio, non una sensazione OWASP definisce la superficie d\u0026rsquo;attacco come \u0026ldquo;the sum of all paths for data/commands into and out of the application, and the code that protects these paths\u0026rdquo;15, e dice che il modo per ridurla è \u0026ldquo;turning off features and interfaces that aren\u0026rsquo;t being used\u0026rdquo;15. Il National Cyber Security Centre britannico la mette in modo più brusco: \u0026ldquo;If would-be attackers can\u0026rsquo;t reach an interface, they can\u0026rsquo;t attack it.\u0026rdquo;16 Il suo schema Cyber Essentials ne fa un requisito: \u0026ldquo;remove or disable unnecessary software (including applications, system utilities and network services)\u0026rdquo;17.\nQuindi conta le vie, per quello che sono e non per quante sono:\nVia d\u0026rsquo;ingresso o d\u0026rsquo;uscita WordPress Sito statico login e tentativi di indovinare le password wp-login.php, XML-RPC nessuna interfaccia di amministrazione /wp-admin/, con un editor di codice nessuna API programmabile REST e XML-RPC, con scritture nessuna codice lato server per ogni richiesta core, tema, ogni plugin nessuno database sì, raggiungibile da tutto quanto sopra nessuno storage scrivibile sul server uploads, e nell\u0026rsquo;immagine di serie, tutto nessuno job pianificati fatti scattare dai visitatori wp-cron.php al caricamento della pagina nessuno codice di terzi che devi tenere aggiornato ogni plugin e tema, sul server gli strumenti di build, fuori dal server cosa ottiene un attaccante con una sessione rubata il sito niente in cui entrare Nove righe. Nessuna di loro esegue codice sul server. Tutte per lo stesso motivo. Il lavoro è stato fatto prima che qualcuno chiedesse una pagina.\nLa penultima riga è il rovescio onesto della medaglia, e il resto di questo articolo parla di quello. Un sito statico esegue comunque del codice. Solo che lo esegue da un\u0026rsquo;altra parte, una volta, prima di pubblicare.\nCome Hugo tiene onesta la build Hugo è \u0026ldquo;a static site generator written in Go\u0026rdquo;18, quindi il programma che fa la build è a sua volta memory safe e compilato, e dopo l\u0026rsquo;articolo su PHP questo conta. La sua pagina sulla sicurezza traccia la linea esattamente dove la traccia questo articolo: il risultato \u0026ldquo;runs directly in the browser\u0026rdquo;, ma \u0026ldquo;during development and site building, the hugo executable itself is the runtime environment.\u0026rdquo;19 E sul servizio, chiaro e tondo: \u0026ldquo;We have no online production server\u0026rdquo;19. Bene.\nDentro la build, è blindato di default. \u0026ldquo;Hugo\u0026rsquo;s built-in security policy, which restricts access to os/exec, remote communication, and similar operations, is configured via allowlists. By default, access is restricted.\u0026rdquo;20\nL\u0026rsquo;impostazione predefinita di Hugo Cosa impedisce \u0026ldquo;No arbitrary commands\u0026rdquo;19 un template non può lanciare comandi sulla macchina exec.allow limitato a Sass, Go, Git, Node e PostCSS20 solo strumenti nominati, con flag fissi funcs.getenv limitato a ^HUGO_ e ^CI$20 i template non possono leggere i tuoi segreti dall\u0026rsquo;ambiente i fetch remoti rifiutano host che sono indirizzi IP o localhost20 un template non può entrare nella tua rete i moduli verificati contro go.sum19 una dipendenza manomessa fa fallire la build Questo sito ne allarga una apposta. Aggiunge le variabili di commit della CI a funcs.getenv, così il timbro di build in /en/version.json può registrare quale commit ha costruito il sito online. È una scelta fatta e scritta, che è il senso di una allowlist. Per questo non è un buco. È una decisione.\nDove si sposta il rischio: la build Togli il server e il rischio non sparisce. Si sposta su quello che costruisce i file. Il framework SLSA nomina con precisione le due minacce: una \u0026ldquo;build integrity threat\u0026rdquo;, in cui un avversario introduce \u0026ldquo;behavior to an artifact without changing its source code\u0026rdquo;, e una \u0026ldquo;dependency threat\u0026rdquo;, \u0026ldquo;compromising some other artifact that the former depends on at build time\u0026rdquo;21.\nDove gira il codice: WordPress, questo sito e una build offline DOVE GIRA IL CODICE COSA RAGGIUNGE IL PUBBLICO WordPress il server pubblico, a ogni richiesta PHP, plugin, database Questo sito il container di build di Cloudflare, a ogni push solo file statici Costruito offline una macchina che possiedi, una volta sola solo file statici la build si fida comunque di Hugo, del tema e della macchina su cui gira Dove gira il codice in ogni modello. WordPress lo fa girare sul server pubblico per ogni visitatore. Questo sito lo fa girare una volta per push nel container di build di Cloudflare. Con la build offline, gira una volta su una macchina che possiedi. Questo sito sta nella riga di mezzo, e non ho intenzione di fingere il contrario. Fa la build nel container di Cloudflare a ogni push sul repository. Quel container non è il server che ti risponde, e sparisce quando la build finisce. Ma per la durata della build, gli si affida tutto quello che finisce sul sito.\nE la build aveva due lacune, che ho trovato tutte e due scrivendo questo articolo. Una è chiusa. L\u0026rsquo;altra è una scelta.\nLacuna Perché conta Stato il binario di Hugo era preso sulla fiducia: il download dello script stesso non aveva controllo del checksum, e in CI saltava comunque il download e usava la copia installata dall\u0026rsquo;immagine di build di Cloudflare un binario sostituito costruirebbe quello che gli pare chiusa, 23 ottobre 2026: la build scarica sempre Hugo da sé, lo verifica contro lo SHA-256 pubblicato della release22, e rifiuta di costruire se non corrisponde il tema segue il suo ramo master upstream a ogni build un cambiamento upstream può alterare il sito online senza un commit qui aperta, per scelta; la soluzione è fissarlo a un commit, o spostarlo in un modulo Hugo coperto da go.sum19 La prima è il genere di cosa che trovi solo leggendo il tuo script di build riga per riga. Lo script controllava la versione. Ma una stringa di versione è qualcosa che un binario dice di sé. Non prova niente sui byte. Adesso i byte vengono controllati:\nFetching Hugo Extended 0.167.0... Hugo verified: sha256 0163f5c3deddac1f494a1629ddc40c65d18de9d5794facd98f7f96ac2c7d8957 E una copia dello stesso tarball con un byte in più viene rifiutata:\nRefusing to build: hugo_extended_0.167.0_linux-amd64.tar.gz does not match the release checksum expected 0163f5c3deddac1f494a1629ddc40c65d18de9d5794facd98f7f96ac2c7d8957 got 92682d765d9d34bc53d6f818d56e598d34b5b8267a1cc3b9971da0f53c792251 Il tema è un compromesso deliberato, aggiornamento contro riproducibilità, ed è scritto come tale. Ma è esattamente la minaccia sulle dipendenze descritta da SLSA, e la cosa onesta è dirlo. Nessuna delle due lacune ha mai esposto il sito online a un visitatore. Entrambe erano fiducia riposta nella build, e preferisco elencarle piuttosto che lasciarle trovare a un lettore.\nAnche il checksum ha un limite. Prova che il file che hai scaricato è il file sulla pagina della release. Non prova chi ce l\u0026rsquo;ha messo: tra i file della release non ci sono firme22. È integrità, non autenticità, ed è il massimo che il progetto offre oggi.\nCostruirlo offline, una volta La versione più rigorosa toglie la build dalle macchine di chiunque altro. Fai la build su una macchina che possiedi e controlli, verifica quello che hai costruito e carica solo i file finiti. Niente su internet esegue mai la tua build, e l\u0026rsquo;host non vede altro che il risultato.\nPasso Perché installa la release esatta di Hugo e verificala contro lo SHA-256 pubblicato sai quale binario ha costruito il tuo sito fissa il tema e i moduli a dei commit, e fai commit di go.sum la build cambia solo quando la cambi tu costruisci in una directory di output pulita, senza --buildDrafts quello che pubblichi è quello che volevi pubblicare cerca qualsiasi cosa eseguibile nell\u0026rsquo;output prima che parta un sito statico non deve contenere niente che il server eseguirebbe carica solo la directory di output, con una credenziale che può solo fare deploy l\u0026rsquo;host non tiene mai i tuoi sorgenti, i tuoi strumenti o la tua cronologia servilo da un host che non esegue codice per i file statici al momento del servizio non resta niente da aggiornare Sono pochi comandi, non un progetto. E cambia dove deve trovarsi un attaccante per farti del male. Per cambiare un sito WordPress gli basta una richiesta al server. Per cambiare questo tipo di sito gli serve la tua macchina di build. È un bersaglio molto più piccolo, ed è uno che puoi staccare dalla presa.\nDiecimila pagine, misurate La superficie d\u0026rsquo;attacco è un costo dell\u0026rsquo;eseguire codice a ogni richiesta. L\u0026rsquo;elettricità è un altro, e anche il disco. Quindi li ho messi entrambi sotto lo stesso carico: 10.000 richieste della home page, dieci alla volta, dallo stesso portatile, in HTTP semplice su localhost così che nessuna delle due parti pagasse il TLS. Da un lato il WordPress di serie del laboratorio. Dall\u0026rsquo;altro, i veri file costruiti di questo sito serviti da nginx in un container, perché sull\u0026rsquo;edge di Cloudflare non posso mettere un contatore. Ho letto il tempo di CPU usato da ogni container dal suo cgroup prima e dopo ogni esecuzione, tre esecuzioni ciascuno.\n10.000 richieste di pagina WordPress 7.1.3 di serie Questo sito su nginx Tempo di CPU, tre esecuzioni 409 s, 530 s, 575 s 0,15 s, 0,18 s, 0,19 s Tempo di CPU per pagina da 41 a 57 ms da 15 a 19 µs Pagine al secondo da 168 a 236 da 23.679 a 28.044 Memoria sotto carico da 302 a 310 MiB, più 145 MiB per il database 15 MiB Richieste fallite 0 0 Sono da due a tremila e cinquecento volte il tempo di processore per le stesse diecimila pagine. Ognuno di quei secondi di CPU è stato preso dalla presa e trasformato in calore. Il lato statico ha servito tutte le 10.000 pagine più o meno nel tempo di processore che WordPress ha speso su tre o quattro delle sue.\nIl disco racconta la stessa storia:\nSu disco e in memoria WordPress di serie Questo sito Immagini container per farlo girare 803 MB WordPress, 334 MB MariaDB 166 MB nginx, o niente del tutto su Cloudflare Il sito vero e proprio 115 MB di web root, per un sito vuoto 114 MB, cinque lingue, ogni articolo e diagramma Database 163 MB di file che contengono 0,72 MB di dati nessuno Memoria a riposo 170 MiB, più 139 MiB per il database 13 MiB I dati di WordPress sono un\u0026rsquo;installazione da zero con un articolo di esempio. Quelli statici sono questo blog intero.\nPer essere onesti con WordPress, un plugin di cache a pagina intera chiuderebbe buona parte del divario di CPU. Ma guarda cos\u0026rsquo;è quella soluzione. È una copia statica di ogni pagina, messa davanti al PHP così che il PHP non giri. La cura è proprio la cosa che questo articolo sostiene, imbullonata di fianco alla cosa contro cui argomenta, con la pagina di login, l\u0026rsquo;API e il database tutti ancora lì dietro.\nA cosa rinunci L\u0026rsquo;elenco onesto, perché un sito statico non è lo strumento giusto per tutto:\nRinunci a Cosa fa invece questo sito commenti niente; i lettori possono mandare un\u0026rsquo;email ricerca lato server un indice JSON costruito con il sito, cercato nel tuo browser moduli che inviano al server niente login e aree riservate niente; qui è tutto pubblico modifica nel browser gli articoli sono file di testo in un repository git pubblicazione istantanea senza build una build richiede un minuto o due Se ti servono un negozio, un\u0026rsquo;area riservata o degli account utente, ti serve qualcosa che giri su un server, e questo articolo non ti dice il contrario. Quello che ti dice è che un blog, un sito vetrina o un insieme di documentazione non ha bisogno di niente di tutto questo. La maggior parte dei siti WordPress è una di queste tre cose. Sii onesto su quale sia il tuo.\nCostruiscilo una volta e servilo morto Quello che non mi va giù è quanto rischio ci si porta dietro senza nessun motivo. Una pagina aziendale che cambia due volte l\u0026rsquo;anno, con un database, una pagina di login, un\u0026rsquo;API con 62 route scrivibili e un esecutore di job pianificati che parte ogni volta che qualcuno visita. Tutto lì per produrre lo stesso HTML che ha prodotto ieri. Ogni giorno.\nNon è una decisione tecnica. È un\u0026rsquo;abitudine, ed è un\u0026rsquo;abitudine che qualcuno fattura. Hosting, plugin, componenti aggiuntivi di sicurezza, la pulizia quando va male. Il prezzo è un piano WordPress gestito. Il costo è ognuna di quelle vie tenuta aperta, e aggiornata, e sorvegliata, per contenuti che potevano essere una cartella di file.\nLo standard a cui tengo questo sito è semplice. Non gira niente che non serva. Ogni lacuna è scritta dove la troverà la prossima persona, comprese le due nella build, e una di quelle è già chiusa. Non è questione di essere furbi. Uno standard è quello che mantieni quando nessuno controlla, e nessuno controlla un blog fino al giorno in cui comincia a servire il codice di qualcun altro.\nQuindi costruiscilo una volta, verifica quello che hai costruito, e servilo morto. Quello che resta da attaccare è sulla tua macchina, che è dove deve stare.\nPHP — News archive 2026, 21st October — \u0026ldquo;We consider the risk highest for mod_php, with a demonstrated exploit where an unauthenticated request can trigger the attack before any application code runs\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress 4.7 release notes — \u0026ldquo;WordPress 4.7 comes with REST API endpoints for posts, comments, terms, users, meta, and settings.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress REST API Handbook — Frequently Asked Questions — \u0026ldquo;You should not disable the REST API; doing so will break WordPress Admin functionality that depends on the API being active.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress 3.5 release notes — \u0026ldquo;Enable XML-RPC by default, remove Writing Settings option\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress REST API Handbook — \u0026ldquo;content that is public on your site is generally publicly accessible via the REST API\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress REST API reference — Users — GET /wp/v2/users, contesto predefinito \u0026ldquo;view\u0026rdquo;; name, slug, link, avatar_urls nel contesto view.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Brute force attacks — \u0026ldquo;xmlrpc.php is a frequent brute‑force target\u0026rdquo;; \u0026ldquo;Apply rate limits to /wp-login.php and /xmlrpc.php globally.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress Plugin Handbook — Cron — \u0026ldquo;WP-Cron works by checking, on every page load, a list of scheduled tasks to see what needs to be run.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Hardening WordPress — l\u0026rsquo;editor della Dashboard \u0026ldquo;is often the first tool an attacker will use if able to login, since it allows code execution.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — State of WordPress Security in 2026 — dati 2025: 11.334 nuove vulnerabilità; 91% plugin, 9% temi, 6 nel core; 46% non corrette in tempo per la divulgazione; mediana di 5 ore fino allo sfruttamento di massa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Wrangler configuration — \u0026ldquo;The main key is optional for assets-only Workers.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Workers static assets — un file corrispondente \u0026ldquo;will be served\u0026rdquo; senza invocare codice Worker; \u0026ldquo;If no Worker script is present, a 404 Not Found response is returned.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Static assets billing and limitations — \u0026ldquo;Requests to static assets are free and unlimited.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Static assets headers — header impostati da \u0026ldquo;a plain text file called _headers\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOWASP — Attack Surface Analysis Cheat Sheet — \u0026ldquo;the sum of all paths for data/commands into and out of the application, and the code that protects these paths\u0026rdquo;; si riduce con \u0026ldquo;turning off features and interfaces that aren\u0026rsquo;t being used\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Making compromise difficult, 2.2 Reduce attack surface — \u0026ldquo;If would-be attackers can\u0026rsquo;t reach an interface, they can\u0026rsquo;t attack it.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Cyber Essentials: Requirements for IT infrastructure v3.2 — \u0026ldquo;remove or disable unnecessary software (including applications, system utilities and network services)\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo — Introduction — \u0026ldquo;Hugo is a static site generator written in Go, optimized for speed and designed for flexibility.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo — Security model — \u0026ldquo;during development and site building, the hugo executable itself is the runtime environment\u0026rdquo;; \u0026ldquo;We have no online production server\u0026rdquo;; \u0026ldquo;No arbitrary commands\u0026rdquo;; un checksum go.sum che non corrisponde fa fallire la build.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo — Configure security — \u0026ldquo;By default, access is restricted\u0026rdquo;; allowlist predefinite per exec, getenv e http.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSLSA v1.2 — Threats — minaccia all\u0026rsquo;integrità della build: \u0026ldquo;behavior to an artifact without changing its source code\u0026rdquo;; minaccia sulle dipendenze: \u0026ldquo;compromising some other artifact that the former depends on at build time\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo v0.167.0 release — 36 asset tra cui hugo_0.167.0_checksums.txt (SHA-256); nessun file di firma, SBOM o attestazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/security/a-static-site-has-nothing-to-break-into/","summary":"Questo blog è costruito con Hugo e servito come 6.343 file semplici, senza che nessun mio codice giri su alcuna richiesta. Di fronte, un WordPress 7.1.3 di serie misurato in un laboratorio podman: 133 route REST, 62 delle quali accettano scritture, 80 metodi XML-RPC, 1.514 file PHP, ognuno dei suoi 3.785 file scrivibile dall\u0026rsquo;utente stesso del web server, e un account di database con tutti i privilegi. Questo articolo conta entrambe le superfici d\u0026rsquo;attacco, spiega cosa fa il modello di sicurezza di Hugo al momento della build, ammette dove si sposta il rischio quando al momento del servizio non gira niente, comprese due lacune nel modo in cui era costruito questo sito, una delle quali ora chiusa, e spiega come costruire un sito statico offline, una volta sola, e caricare nient\u0026rsquo;altro che i file finiti.","title":"In un sito statico non c'è niente da scassinare"},{"content":"PHP2Shell, questa settimana Il 21 ottobre 2026 il progetto PHP ha pubblicato quattro release in un colpo solo, 8.5.12, 8.4.27, 8.3.36 e 8.2.35, per correggere due falle critiche nell\u0026rsquo;interprete stesso1. Non in WordPress. Non in un plugin. In PHP.\nEntrambe hanno un punteggio di 9,2 su CVSS 4.0. Entrambe permettono l\u0026rsquo;esecuzione remota di codice senza login. I ricercatori che le hanno trovate hanno descritto la portata senza giri di parole: «Every PHP version released in the last decade is affected by at least one of these vulnerabilities, going back to version 5.4.»2\nL\u0026rsquo;advisory del progetto PHP dice il resto:\nCosa dice l\u0026rsquo;advisory Cosa significa per te «unauthenticated remote code execution» a nessuno serve un account sul tuo sito «risk highest for mod_php» la configurazione Apache vecchio stile più diffusa è quella messa peggio «before any application code runs» il tuo codice, per quanto attento, non ha mai voce in capitolo «There are no complete mitigations, updating is the only safe choice.» nessuna modifica alla configurazione ti salva «PHP 8.1 and older no longer receive updates» buona parte del web non riceve nessuna correzione Ed era già in uso prima che qualcuno venisse avvisato. La rete di honeypot di Amazon ha registrato un tentativo il 17 ottobre, quattro giorni prima della divulgazione3. watchTowr l\u0026rsquo;ha visto in circolazione il 21, e proof of concept funzionanti erano pubblici entro poche ore dalla patch4.\nTutti e due sono bug di memory safety. Uno sta nel modo in cui l\u0026rsquo;interprete fa pulizia dopo aver esaurito la memoria. L\u0026rsquo;altro è un use-after-free: la memoria di una richiesta viene liberata e poi letta di nuovo, e la richiesta successiva sullo stesso worker può vederla56. Tieni a mente questo secondo. Torna più avanti.\nNiente di tutto questo è nuovo. È proprio il punto dell\u0026rsquo;articolo. PHP2Shell non è un incidente capitato a un linguaggio attento. È l\u0026rsquo;ultima pagina di un registro lungo quasi trent\u0026rsquo;anni, e ogni numero che contiene è pubblico.\nUn solo processo tiene tutto Da novembre 2014 ad aprile 2017 ho lavorato come ingegnere Linux di terzo livello sulla piattaforma cloud e hosting di Pulsant. Parte di quel lavoro era configurare ambienti PHP-FPM per clienti e-commerce e ottimizzarli perché andassero veloci.\nLe violazioni di PHP erano comuni. Non occasionali. Comuni. E si riducevano a due cause: un deployment fatto male, e nessuna separazione tra front end e back end.\nIl linguaggio rende la seconda il default. Un tipico sito PHP è un solo processo. Il template della pagina, la logica di business e l\u0026rsquo;SQL vivono tutti nello stesso gestore di richieste, spesso nello stesso file. Quel processo gira con un solo utente del sistema operativo. Può leggere la password del database, perché la password sta in un file accanto al codice. E di solito può scrivere nella propria web root, perché è così che funzionano upload e aggiornamenti.\nUn processo che tiene tutto, contro livelli con i propri confini Il solito deployment PHP Livelli con i propri confini internet un worker, un utente del SO template HTML logica di business SQL, scritto nello stesso file wp-config.php: password del DB uploads/: scrivibile il codice stesso: scrivibile un bug raggiunge tutto database, pieni diritti internet front end genera pagine, nessuna credenziale servizio di back end utente suo, non scrive il suo codice risponde solo a un'API stretta database, privilegio minimo A sinistra, il solito sito PHP: tutto in un worker, un utente, un bug di distanza da tutto quanto. A destra, livelli con i propri confini: il front end non tiene credenziali e il back end non può riscrivere sé stesso. Non è la mia opinione su come si fa il deployment di PHP. È quello che documentano PHP e WordPress.\nFonte Cosa dice Manuale PHP, modulo Apache quando PHP gira come modulo Apache «it inherits Apache\u0026rsquo;s user permissions», e «a malicious script could access and modify the database, even without a username and password»7 Manuale PHP, installazione Apache «The mod_php approach embeds PHP directly into every Apache httpd worker process.»8 WordPress, wp-config il file «is located in the root of your WordPress file directory and contains … database connection information»9 WordPress, permessi dei file wp-config.php «is initially created with 644 permissions, and it\u0026rsquo;s a hazard to leave it like that»10 WordPress, hardening l\u0026rsquo;utente del database «only needs» SELECT, INSERT, UPDATE e DELETE, poi «it is NOT recommended to revoke these privileges»11 Rileggi l\u0026rsquo;ultima riga. Il vendor ti dice come sarebbe il privilegio minimo, poi ti dice di non applicarlo, perché gli aggiornamenti cambiano lo schema.\nConfronta la versione divisa. Il front end genera le pagine e non tiene segreti. Il back end è un servizio separato con il suo utente, un\u0026rsquo;API stretta e nessun accesso in scrittura al proprio codice. L\u0026rsquo;account del database può fare quello che serve al back end e nient\u0026rsquo;altro. Le linee guida di OWASP dicono la stessa cosa con parole loro: «The application\u0026rsquo;s backend database should be isolated from other servers», su «a dedicated internal network segment»12. Il manuale di PHP stesso dice che le applicazioni «should never connect to the database as its owner or a superuser»13.\nNiente di esotico. È com\u0026rsquo;è fatto un processo come si deve. Il motivo per cui conta qui è semplice. Nel modello diviso, un bug nel front end dà a chi attacca un front end. Nel solito modello PHP, un bug in qualunque punto gli dà i template, il codice, le credenziali e i dati, tutto in una volta.\nPHP-FPM aiuta, e la guida di installazione di PHP ora lo indica come il modo consigliato per far girare PHP sotto Apache8. I suoi pool possono avviare worker «with different uid/gid/chroot/environment»14. Ma un pool per sito è sempre un sito per processo, che tiene tutto quello che quel sito ha. È un muro migliore tra un cliente e l\u0026rsquo;altro. Non è un muro dentro l\u0026rsquo;applicazione.\nTieni a mente questa immagine in ogni sezione che segue. Ogni bug del registro atterra su quel processo.\nVentinove anni di CVE Il National Vulnerability Database elenca ogni CVE registrata contro l\u0026rsquo;interprete PHP sotto un solo identificatore di prodotto, cpe:2.3:a:php:php. Chiediglielo, e risponde 75715.\nCVE dell'interprete PHP per anno, con la quota di corruzione della memoria CVE registrate contro l'interprete PHP, per anno di pubblicazione tutte le CVE: 757 corruzione della memoria: almeno 288 40 80 120 114 120 1997 2002 2007 2012 2016 2021 2026 Ogni CVE contro l\u0026rsquo;interprete PHP per anno di pubblicazione, con sovrapposta la quota di corruzione della memoria. Contate dall\u0026rsquo;API di NVD il 23 ottobre 2026. Quel conteggio riguarda solo l\u0026rsquo;interprete. Niente WordPress, niente Drupal, niente plugin, niente framework. Solo il programma che esegue il tuo PHP.\nPeriodo CVE Corruzione della memoria Cosa succedeva dal 1997 al 2006 93 3 primo web, poca classificazione 2007 114 19 il Month of PHP Bugs dal 2008 al 2014 187 54 rumore di fondo costante dal 2015 al 2017 208 122 gli anni di unserialize e della memoria dal 2018 al 2023 100 63 meno, ancora per lo più memoria dal 2024 al 2026 55 27 PHP2Shell cade in questa finestra Totale 757 288 Spiccano due picchi. Il primo è marzo 2007, quando un ex membro del team di sicurezza di PHP organizzò il Month of PHP Bugs, rendendo pubbliche falle nello Zend Engine, nel core di PHP e nelle sue estensioni «on a day by day basis»16. Aveva fondato il PHP Security Response Team, poi l\u0026rsquo;aveva lasciato, e aveva detto perché: «I dislike the ways bugs are handled»17. Quando il fondatore del team di sicurezza di un progetto se ne va e pubblica un bug al giorno, ti dice com\u0026rsquo;erano le cose all\u0026rsquo;interno.\nIl secondo picco è il 2016: 120 CVE, 65 di corruzione della memoria. Ne parlo più sotto.\nIl dato sulla memoria è un minimo, non una stima. NVD etichetta parecchi bug più vecchi come «Other» invece che con un tipo di debolezza, compresi alcuni degli use-after-free della prossima sezione. Il dato vero è più alto. Uso quello che posso dimostrare.\nIl motore è scritto in C È qui che l\u0026rsquo;argomento della memory safety va fatto con attenzione, perché uno sviluppatore PHP farà notare, giustamente, che il suo codice non chiama mai malloc. Gli script PHP non gestiscono la memoria a mano. Non puoi scrivere un buffer overflow in PHP come puoi farlo in C.\nNon ne hai bisogno. L\u0026rsquo;interprete che esegue il tuo script è scritto in C, e le sue estensioni sono scritte in C. Ogni byte di input non fidato che il tuo sito riceve, ogni header, ogni upload, ogni campo di un form, ogni cookie, viene analizzato da quel C prima che il tuo codice lo veda. Quando quel C sbaglia, il tuo PHP attento non conta. PHP2Shell l\u0026rsquo;ha dimostrato: l\u0026rsquo;advisory dice che l\u0026rsquo;attacco può scattare «before any application code runs»1.\nIl registro mostra cosa ha sbagliato quel C:\nClasse CWE Cos\u0026rsquo;è CVE dell\u0026rsquo;interprete PHP CWE-119 errori nei buffer di memoria, generici 93 CWE-125 lettura fuori dai limiti 50 CWE-190 integer overflow 35 CWE-189 errori numerici, etichetta più vecchia 33 CWE-416 use after free 27 CWE-787 scrittura fuori dai limiti 26 CWE-476 dereferenziazione di puntatore nullo 20 Sono le classi che le agenzie di sicurezza intendono quando parlano di memory safety. A novembre 2022 la NSA ha consigliato alle organizzazioni «to consider making a strategic shift from programming languages that provide little or no inherent memory protection, such as C/C++, to a memory safe language when possible»18. A dicembre 2023 la CISA, con il National Cyber Security Centre del Regno Unito tra i coautori, ci ha messo un numero: «two-thirds of reported vulnerabilities in memory unsafe programming languages still relate to memory issues»19.\nNessuno dei due documenti nomina PHP. Non serve. Nominano il linguaggio con cui PHP è costruito.\nL\u0026rsquo;esempio ripetuto peggiore è unserialize(), la funzione che trasforma una stringa salvata di nuovo in oggetti PHP. Ha avuto la stessa classe di bug, nello stesso punto, più di una volta:\nCVE Dove Cosa registra NVD CVE-2014-8142 process_nested_data use-after-free in unserialize20 CVE-2015-0231 la stessa funzione «exists because of an incomplete fix for CVE-2014-8142»21 CVE-2015-2787 gestione di __wakeup use-after-free in unserialize CVE-2016-5771 SPL, con garbage collection use-after-free in unserialize22 CVE-2016-5773 ZipArchive, con garbage collection use-after-free in unserialize Il manuale di PHP lo sa. La pagina della funzione porta l\u0026rsquo;avvertenza: «Do not pass untrusted user input to unserialize() regardless of the options value of allowed_classes.»23 È un linguaggio che ti dice che una delle sue funzioni integrate non è sicura da usare sulla cosa che la maggior parte del codice web maneggia tutto il giorno.\nPoi c\u0026rsquo;è PHP-FPM, il gestore di processi che la guida di installazione di PHP consiglia al posto di mod_php. Nell\u0026rsquo;ottobre 2019, la CVE-2019-11043 ha mostrato che «in certain configurations of FPM setup it is possible to cause FPM module to write past allocated buffers … opening the possibility of remote code execution»24. La configurazione in questione era una configurazione nginx comune. È stata corretta il 24 ottobre 201925. La CISA l\u0026rsquo;ha poi aggiunta al suo catalogo delle vulnerabilità di cui è noto lo sfruttamento, segnalata come usata in campagne ransomware26.\nLa PHP Foundation ha commissionato un vero audit di sicurezza del codice sorgente dell\u0026rsquo;interprete, e le va dato merito. I risultati, pubblicati il 10 aprile 2025, hanno trovato 27 problemi, 17 dei quali con implicazioni di sicurezza27. È una buona pratica e dovrebbe essere la norma. Sono anche 17 in più, in un audit di un codice che aveva già quasi tre decenni di segnalazioni pubbliche di bug.\nIl linguaggio ha fatto gli stessi errori un piano più su Il C è uno strato. Il linguaggio sopra ha fatto lo stesso tipo di errore nel suo design: fidarsi di input di cui non aveva motivo di fidarsi, e metterci anni a smettere.\nFunzionalità Cosa faceva Disattivata di default o deprecata Rimossa Tempo register_globals trasformava i parametri della richiesta in variabili dello script off nella 4.2.0, 22 aprile 200228 5.4.0, 1 marzo 201229 dieci anni magic quotes faceva l\u0026rsquo;escape dell\u0026rsquo;input in automatico, e male deprecate nella 5.3.0, 30 giugno 2009 5.4.0, 1 marzo 201230 tre anni preg_replace /e valutava la sostituzione come codice PHP deprecato nella 5.5.0, 20 giugno 201331 7.0.0, 3 dicembre 201532 due anni e mezzo allow_url_include permetteva a include di prendere codice dalla rete deprecato nella 7.4.033 metadati phar deserializzati in automatico all\u0026rsquo;accesso al file corretto nella 8.034 0 == \u0026quot;foobar\u0026quot; risultava vero corretto nella 8.035 register_globals merita una riga a parte. Per anni, qualunque parametro della richiesta, diciamo ?admin=1, diventava una variabile nel tuo script, e se il tuo codice controllava $admin prima di assegnarlo, chi attaccava l\u0026rsquo;aveva già assegnato per te. Il manuale di PHP stesso ha definito il suo spegnimento «the most controversial change in PHP»29. Dieci anni da disattivato di default a sparito. Ecco quanto il progetto ha tollerato una funzionalità che sapeva pericolosa, perché toglierla avrebbe rotto dei siti.\nIl caso phar è lo stesso schema uno strato più in basso. Nel 2018 Sam Thomas ha mostrato a Black Hat che normali operazioni sui file con un percorso phar:// deserializzavano metadati forniti da chi attacca, portando il problema di unserialize() in funzioni che nessuno considerava pericolose36. PHP 8.0, a fine 2020, ha smesso di farlo in automatico, «to fix potential security vulnerabilities due to object instantiation, autoloading, etc.»34.\nPoi il type juggling. L\u0026rsquo;operatore == di PHP converte i tipi prima di confrontare, quindi le stringhe che sembrano numeri vengono confrontate come numeri. L\u0026rsquo;RFC che ne ha corretto una parte in PHP 8.0 l\u0026rsquo;ha detto chiaro: «This results in many surprising comparison results, the most notable of which is that 0 == “foobar” returns true.»35\nQuella correzione era reale. Era anche parziale. Ecco lo stesso controllo eseguito nei container ufficiali php:7.4-cli e php:8.5-cli, il secondo alla 8.5.12, la release corretta per PHP2Shell questa settimana, con i due output affiancati:\n$ php -r \u0026#39;var_dump(0 == \u0026#34;foobar\u0026#34;);\u0026#39; bool(true) # 7.4.33 bool(false) # 8.5.12 $ php -r \u0026#39;var_dump(\u0026#34;0e462097431906509019562988736854\u0026#34; == \u0026#34;0e830400451993494058024219903391\u0026#34;);\u0026#39; bool(true) # 7.4.33 bool(true) # 8.5.12 Due stringhe diverse, uguali. Entrambe iniziano con 0e seguito da cifre, quindi PHP le legge entrambe come zero per dieci elevato a qualcosa, e zero è uguale a zero. Entrambe hanno la forma di un hash MD5. Confronta un hash di password salvato con == invece di === o hash_equals(), e qualunque input il cui hash per caso inizi così risulta corrispondente. È documentato da anni. Funziona ancora nella release più recente.\nEcco il linguaggio in un esempio. Una correzione entrata, metà del problema lasciata indietro, e la versione sicura che richiede di sapere che esiste un operatore diverso.\nUna shell, quasi ogni anno La domanda che vale la pena fare a qualunque piattaforma non è quanti bug ha avuto. È quanto spesso qualcuno avrebbe potuto prendersi l\u0026rsquo;intero server senza password e senza che nessuno cliccasse niente.\nNVD dà un punteggio a ogni CVE. Filtra le 757 per il punteggio che significa esattamente questo, attacco via rete, nessun privilegio, nessuna interazione dell\u0026rsquo;utente, impatto alto su riservatezza e integrità, e ne ottieni 17215.\nValutazioni di compromissione completa senza autenticazione per anno, e sfruttamento confermato per anno Compromissione remota completa, senza login né azione dell'utente CVE dell'interprete PHP, CVSS rete, nessun privilegio, nessuna interazione, impatto alto: 172 20 40 60 65 1997 2002 2007 2012 2016 2021 2026 Sfruttamento confermato: PHP e applicazioni PHP nel KEV della CISA voci aggiunte per anno, 81 in tutto; il catalogo è partito a novembre 2021 16 2021 16 2022 10 2023 8 2024 11 2025 20 2026 Sopra: CVE dell\u0026rsquo;interprete classificate come compromissione remota completa senza login e senza azione dell\u0026rsquo;utente. Sotto: PHP e applicazioni PHP aggiunte ogni anno al catalogo CISA delle vulnerabilità di cui è noto lo sfruttamento. 172 distribuite su 23 dei 28 anni che hanno almeno una CVE di PHP. Solo cinque sono vuoti. Il solo 2016 ne ha 65.\nUn punteggio di gravità è una valutazione, non un\u0026rsquo;intrusione. Quindi la seconda metà del quadro è il catalogo Known Exploited Vulnerabilities della CISA, che elenca solo falle con sfruttamento confermato in circolazione26. Delle sue 1.754 voci al 21 ottobre 2026, 81 sono PHP stesso o applicazioni scritte in PHP:\nAnno di inserimento PHP e applicazioni PHP Catalogo intero 2021 16 311 2022 16 555 2023 10 187 2024 8 186 2025 11 245 2026, fino al 21 ottobre 20 270 Il 2026 è già l\u0026rsquo;anno peggiore per PHP nel catalogo, e PHP2Shell non c\u0026rsquo;è ancora. Tre di quest\u0026rsquo;anno sono nel core di WordPress: due aggiunte il 21 luglio, e una remote file inclusion il 25 settembre.\nVoci KEV note per l\u0026rsquo;uso da parte di ransomware Cosa CVE-2019-11043 buffer overflow di PHP-FPM CVE-2024-4577 iniezione di argomenti in PHP-CGI CVE-2021-3129 Laravel Ignition CVE-2018-7600, CVE-2018-7602 Drupal E il catalogo sottostima PHP di molto. È costruito attorno ai sistemi federali americani e richiede una CVE più uno sfruttamento confermato. Contiene 3 voci di plugin WordPress. L\u0026rsquo;ecosistema dei plugin WordPress ha registrato 11.334 vulnerabilità nel solo 202537. Le 81 sono la parte che qualcuno di ufficiale ha messo per iscritto.\nWordPress lo moltiplica WordPress è il 39,6% di tutti i siti web, e il 58,3% dei siti il cui content management system si riesce a identificare38. PHP è il linguaggio lato server del 69,3% dei siti in cui lo si può vedere39. Quindi qualunque sia il registro di PHP, WordPress lo porta a una parte molto grande del web, e poi ci aggiunge il suo.\nIl core non è il problema principale. I plugin sì.\n2024 2025 Nuove vulnerabilità nell\u0026rsquo;ecosistema WordPress, Patchstack 7.96640 11.33437 Nei plugin 96% 91% Nel core 7 6 Non corrette in tempo per la divulgazione pubblica 33% 46% Tempo mediano allo sfruttamento di massa, bug molto sfruttati 5 ore Wordfence, con il suo database, ne ha contate 8.223 per il 2024, un aumento del 68% sul 2023, e ha trovato che «Roughly 35% of the vulnerabilities disclosed in 2024 remain unpatched in 2025»41. Database diversi, totali diversi, stessa forma.\nFermati un momento sui numeri del 2025. Quasi metà delle vulnerabilità non aveva una correzione dello sviluppatore nel momento in cui sono state rese pubbliche. E per quelle che chi attacca prende davvero di mira, l\u0026rsquo;intervallo mediano tra divulgazione e sfruttamento di massa è di cinque ore. La maggior parte della gente non controlla gli aggiornamenti dei plugin ogni cinque ore. La maggior parte della gente non può.\nIl modello dei plugin è il moltiplicatore. La sicurezza di un sito dipende dall\u0026rsquo;autore meno attento di qualunque cosa ci sia installata, e Wordfence ha trovato che «over one third of developers are unreachable or unresponsive» quando li si avvisa di una falla41. Patchstack ha contato 1.614 plugin e temi tolti dal repository nel 2024 per problemi di sicurezza che nessuno ha corretto40. E per via del modello a processo unico, ogni plugin gira con i pieni diritti del sito.\nGli incidenti sono una lunga lista. Questi sono quelli con fonti primarie alle spalle:\nAnno Cosa Scala 2011 TimThumb, uno script per immagini incluso in molti temi, permetteva a chi attacca di «upload and execute arbitrary PHP code»42 «many commercial and free themes» 2014 RevSlider, dietro la campagna SoakSoak43 «compromising over 100,000 WordPress sites» 2016 Mossack Fonseca, lo studio dei Panama Papers: il suo sito «may have been breached via a vulnerable version of Revolution Slider»44 il sito usava una versione sfruttabile; come siano usciti i dati non è mai stato dimostrato 2017 iniezione di contenuti tramite REST API in WordPress 4.7.0 e 4.7.1, attiva di default45 66.000 pagine defacciate indicizzate da Google secondo il conteggio di Sucuri46; 1.893.690 secondo quello di Wordfence quattro giorni dopo47 2020 WP File Manager, esecuzione di codice senza autenticazione, sfruttata prima che esistesse una patch48 «over 700,000 active installations» 2025 SureTriggers, creazione di account admin senza autenticazione49 «exploitation attempts observed within hours after disclosure» Con la riga del 2016 sono stato attento. Wordfence ha mostrato che il sito dello studio usava una versione dello slider banalmente sfruttabile. Non ha mostrato che è così che i documenti sono stati presi, e non ho intenzione di affermare più di quanto dicano le prove.\nCome il malware resta Entrare è metà del lavoro. Restare è l\u0026rsquo;altra metà, e PHP lo rende facile per un motivo che riporta dritto all\u0026rsquo;immagine del processo unico.\nL\u0026rsquo;interprete esegue qualunque file .php riesca a raggiungere. La web root di solito è scrivibile dallo stesso utente che esegue il codice. Quindi, appena chi attacca ha un qualsiasi modo di scrivere un file, un form di upload, un bug in un plugin, un file manager, può scrivere uno script che gira ogni volta che qualcuno lo richiede. Quella è una web shell: un file piccolo, piazzato nel tuo sito, che prende comandi.\nLa CISA dice da anni in quali linguaggi sono scritte per lo più: «The most commonly observed web shells are written in languages that are widely supported, such as PHP and ASP.»50 Le linee guida congiunte della NSA e dell\u0026rsquo;Australian Signals Directorate le chiamano «a long-standing, pervasive threat that continues to evade many security tools», e difficili da rilevare perché sono «easily modified by attackers and often employ encryption, encoding, and obfuscation»51.\nI numeri delle bonifiche mostrano quanto spesso ci sono:\nFonte Risultato Sucuri, 2022, 43.374 siti bonificati «69.63% of compromised websites were found to have at least one backdoor»; 1.188.864 backdoor rimosse52 Sucuri, 2022 «90% of credit card skimmers were found in the form of malicious PHP code»52 Sucuri, 2023, 39.594 siti bonificati «49.21% of compromised websites were found with at least one website backdoor»; WordPress il 95,5% delle infezioni53 Wordfence, 2024 «just under one million distinct sites infected with malware»41 Quindi nell\u0026rsquo;anno di bonifiche più recente, metà dei siti violati aveva ancora una via per rientrare piazzata sul disco. Ripristini il database, aggiorni il plugin, e chi attacca rientra dal file che ha lasciato.\nNon esiste una soluzione furba. Esiste quella noiosa e fatta come si deve, e la NSA l\u0026rsquo;ha messa per iscritto: «web applications should not have permission to write directly to a web accessible directory or modify web accessible code»51. Quella sola frase è il modello a livelli separati dell\u0026rsquo;inizio di questo articolo, detto da un\u0026rsquo;agenzia di intelligence.\nDove si sbaglia Il controllo che lo ferma l\u0026rsquo;utente di runtime può scrivere il codice codice di proprietà di un utente di deploy separato, in sola lettura per l\u0026rsquo;utente di runtime gli upload finiscono dentro la web root salvare gli upload «outside of the webroot», o su un altro server54 PHP esegue qualunque cosa negli upload nessuna esecuzione di script sui percorsi di upload a livello di web server, e «disable per directory configuration overrides on upload directories»54 nessuno nota un file nuovo monitoraggio dell\u0026rsquo;integrità dei file contro una copia nota e pulita51 l\u0026rsquo;account del database può fare tutto privilegio minimo sull\u0026rsquo;utente del database13 La guida di hardening di WordPress, per quel che vale, non parla mai di impedire a PHP di girare nella directory degli upload11. È per questo che la tabella cita OWASP e la NSA.\nNota cosa non c\u0026rsquo;è in quella tabella. Le impostazioni di hardening di PHP stesso. Il manuale è onesto al riguardo. disable_functions «can be circumvented and should not be considered a sufficient security measure for shared hosting environments», e open_basedir «is just an extra safety net, that is in no way comprehensive, and can therefore not be relied upon when security is needed»55. Quando la documentazione di un linguaggio ti dice che le sue manopole di sicurezza non sono confini di sicurezza, credici. Per questo il confine deve venire da fuori del processo.\nPerfino php.net è stato violato Se l\u0026rsquo;infrastruttura del progetto stesso fosse solida, potresti sostenere che il registro dipende da un problema difficile gestito bene. È stata violata due volte.\nQuando Cosa è successo dal 22 al 24 ottobre 2013 «JavaScript malware was served to a small percentage of php.net users»; «two servers were compromised», metodo «unknown at this time»56 28 marzo 2021 «two malicious commits were pushed to the php-src repo» a nome di due sviluppatori del core57 Quella del 2021 è quella che conta. Qualcuno ha inserito codice nell\u0026rsquo;albero dei sorgenti del linguaggio stesso, spacciandosi per le persone che lo mantengono. È stato scoperto. La risposta del progetto vale la pena di citarla perché è quella giusta, detta chiaramente: «maintaining our own git infrastructure is an unnecessary security risk», e i repository sono passati su GitHub57.\nMerito a chi spetta: è stata una buona decisione, presa in fretta e spiegata apertamente. Ma guarda cosa ammette. Per anni, il sorgente canonico di un linguaggio che fa girare la maggior parte del web ha vissuto su un\u0026rsquo;infrastruttura gestita in proprio che il progetto stesso ha deciso essere un rischio che non doveva portarsi dietro.\nMetà del web usa una versione che nessuno aggiorna Tutto quanto sopra presume che il sito sia aggiornato. Moltissimi non lo sono.\nphp.net al momento supporta quattro rami. La 8.2 riceve solo correzioni di sicurezza, fino al 31 dicembre 2026. La 8.3, la 8.4 e la 8.5 sono il resto58. Tutto ciò che è più vecchio è a fine vita: la 8.1 dal 31 dicembre 2025, la 8.0 da novembre 2023, la 7.4 da novembre 202259.\nOra la quota misurata di quello che gira davvero:\nQuanto PHP gira su versioni che php.net non corregge più Versione di PHP in uso, per stato del supporto di php.net Siti PHP (W3Techs) 48,3% 18,0% 33,7% Installazioni WordPress 34,7% 23,5% 41,8% non supportato ora 8.2, non supportata dal 31 dicembre 2026 8.3 e successive Versione di PHP in uso per stato del supporto. Siti PHP dalle quote di versione di W3Techs; installazioni WordPress dalle statistiche di wordpress.org stesso. Entrambe lette il 23 ottobre 2026. Non supportato oggi Non supportato dal 1 gennaio 2027 Siti PHP, W3Techs6061 48,3% circa 66% Installazioni WordPress, wordpress.org62 34,7% circa 58% La sola PHP 7.4, fuori supporto da quasi quattro anni, è circa un quinto di tutti i siti PHP che mostrano la loro versione. La pagina dei requisiti di WordPress chiede PHP 8.3, poi dice che WordPress «also works with PHP 7.4+», notando che quelle versioni «have reached their official End Of Life»63. Un vendor che gira ancora su una versione morta è un vendor che ha deciso di non farti spostare.\nDue avvertenze oneste. W3Techs vede la versione solo sui siti che la dichiarano. E alcune distribuzioni Linux portano le correzioni nelle vecchie build di PHP, quindi «non supportato da php.net» non sempre vuol dire «non corretto». Ma PHP2Shell è la prova del nove. Stavolta il progetto ha pubblicato patch dei sorgenti per 7.4, 8.0 e 8.11, e qualcuno deve comunque compilarle, distribuirle e installarle. Su un hosting condiviso che gira su una versione che non appartiene a nessuno, quel qualcuno è nessuno.\nIo ci ho rinunciato. Dovresti valutare di andartene anche tu. Scrivevo PHP. Dopo Pulsant ho rinunciato al linguaggio, per i problemi che causava e il lavoro che quei problemi generavano. Non un singolo brutto incidente. Anni delle stesse due cause, sito dopo sito, e la bonifica che ricadeva su chiunque fosse di turno.\nQuindi lo dico chiaro. Se la scelta è tua, valuta di andartene. Oggi esistono strumenti migliori per questo, e Go è il primo che ti indicherei.\nNon perché è di moda. Perché toglie, di default, la maggior parte di quello che questo articolo ha contato:\nIl solito sito PHP Un servizio Go Memory safety motore scritto in C, 288 CVE di corruzione della memoria memory safe per progetto; la NSA e la CISA lo nominano entrambe1819 Eseguire il codice analizzato e compilato di nuovo a ogni richiesta se OPcache non è caricato, un\u0026rsquo;estensione che prima della 8.5 aggiungi tu; poi eseguito da un interprete scritto in C; un JIT dalla 8.0, spento di default6465 compilato una volta, in anticipo, in codice macchina nativo66 Servire una richiesta il web server passa ogni richiesta a un interprete un solo binario compilato risponde da sé all\u0026rsquo;HTTP Un file lasciato nella web root un file .php gira appena qualcuno lo richiede niente esegue un file dal disco per via del suo percorso Output HTML echo scrive grezzo; l\u0026rsquo;escape è una funzione che devi ricordarti html/template fa l\u0026rsquo;escape di default, in base al contesto67 SQL i prepared statement esistono in PDO, se li usi il modo documentato passa i parametri come argomenti68 Falle note in ciò da cui dipendi lo scopri dalle notizie govulncheck segnala solo quelle che il tuo codice chiama davvero69 Dove stanno i pezzi codice, configurazione e upload in un unico albero scrivibile un binario in sola lettura, con configurazione e upload altrove Compilato conta due volte. È più veloce: i programmi Go «are compiled ahead of time to native machine code», senza una macchina virtuale sotto, e uno dei suoi obiettivi di progetto dichiarati è «to approach the performance of C for comparable programs»66. Ed è più sicuro, perché non c\u0026rsquo;è un interprete nel percorso della richiesta che analizza codice a runtime, e nessun motore in C da 757 CVE tra la rete e il tuo programma. PHP, lasciato a sé stesso, fa il contrario. Senza OPcache carica, analizza e compila ogni script a ogni richiesta, senza motivo, migliaia di volte al minuto su un sito trafficato. OPcache esiste per fermare questo, «removing the need for PHP to load and parse scripts on each request»64. Ma non è attivo di serie. Fino alla 8.4 compresa è un\u0026rsquo;estensione condivisa separata che qualcuno deve caricare con zend_extension e configurare. Solo PHP 8.5 lo integra: «The Opcache extension is now always built into the PHP binary and is always loaded»70. L\u0026rsquo;RFC del progetto per quella modifica dice «running PHP in production without OPcache is generally considered a mistake»71. W3Techs mette la 8.5 sul 4,5% dei siti PHP 860, quindi per quasi tutto quello che gira oggi la soluzione al compilare ogni script a ogni richiesta è ancora un\u0026rsquo;aggiunta che qualcuno ha dovuto ricordarsi. E anche quando è caricato, quello che mette in cache è bytecode che l\u0026rsquo;interprete in C deve eseguire. Go fa la compilazione una volta, prima ancora che il programma veda una richiesta.\nPiù veloce e più sicuro, a patto che sia scritto come si deve. Quest\u0026rsquo;ultima condizione è tutto il contenuto dei prossimi paragrafi.\nIl pacchetto di template di Go riassume il suo design in una riga: genera «HTML output safe against code injection», e «The escaping is contextual, so actions can appear within JavaScript, CSS, and URI contexts.»67 La sua guida ai database è altrettanto chiara: «You can avoid an SQL injection risk by providing SQL parameter values as sql package function arguments.»68 Quelli sono i default. In PHP sono cose che devi sapere di dover andare a prendere.\nLa riga che sottolineerei è quella del file lasciato. Metà dei siti violati che Sucuri ha bonificato nel 2023 aveva ancora una backdoor sul disco53, e funziona solo perché l\u0026rsquo;interprete esegue qualunque script riesca a raggiungere. Un servizio compilato non va in cerca di script. Non c\u0026rsquo;è niente a cui un file lasciato lì possa attaccarsi.\nOra la parte onesta, perché un linguaggio non è una cura. Go è più memory safe, non perfettamente. Il suo stesso modello di memoria dice che una data race su uno slice, una map o un valore interface «can in turn lead to arbitrary memory corruption»72, e Go fornisce lo strumento per scovarla. Compila con -race, o esegui go test -race, e il binario viene compilato con un rilevatore che segnala una race nel momento in cui avviene. Trova le race a runtime e non in fase di compilazione, e «can\u0026rsquo;t find races in code paths that are not executed», quindi va messo in ogni esecuzione dei test e sotto un carico realistico73. PHP non ha niente di simile. Tenere la memoria di una richiesta lontana dalla successiva è lasciato interamente al motore, e PHP2Shell è quel motore che sbaglia: memoria liberata da una richiesta, letta dalla successiva sullo stesso worker6. A parte questo, Go ferma la classe di corruzione della memoria che questo articolo ha contato, e rende il modo sicuro quello facile per altre due. Non ferma un controllo di login rotto, un test dei permessi mancante o una query costruita incollando stringhe se insisti a farlo. Go pubblica anche i suoi advisory di sicurezza, tramite il suo database delle vulnerabilità69. E un servizio Go che gira come root da una directory scrivibile ha comunque un deployment fatto male.\nQuello che cambia è il default. Il default di PHP è un processo unico che tiene tutto. Il default di Go è un programma che fa un solo lavoro, che è la divisione dell\u0026rsquo;inizio di questo articolo con la maggior parte del lavoro già fatta. Se Go non va bene per il tuo team, Rust è l\u0026rsquo;altra via d\u0026rsquo;uscita. Entrambi compilano in anticipo in codice nativo. Rust gira «with no runtime or garbage collector»74, e compilatore e runtime di Go sono «implemented in Go and assembler, without C» dalla Go 1.575.\nAnche C# e Java sono nella lista memory safe delle agenzie18, ma non sono una via d\u0026rsquo;uscita dal problema da cui è partito questo articolo. Ognuno gira su una macchina virtuale scritta in C++. HotSpot di OpenJDK è «around 3000 C/C++ header and source files, comprising more than 1.2 million lines of code»76, e il garbage collector e il compilatore JIT di .NET sono sorgenti C++ nell\u0026rsquo;albero di CoreCLR77. È la stessa forma di PHP: un grosso motore nativo tra la rete e il tuo codice. E Java carica codice in un\u0026rsquo;applicazione in esecuzione per progetto. Il suo class loader standard esiste «to load classes and resources from a search path of URLs referring to both JAR files and directories»78, e Log4Shell l\u0026rsquo;ha trasformato in esecuzione remota di codice: chi controllava un messaggio di log «can execute arbitrary code loaded from LDAP servers»79. È finito dritto nel catalogo della CISA26. È la stessa porta di PHP, con più cerimonie davanti.\nQuindi scegli Go o Rust. Sposta prima il back end, un endpoint alla volta, e lascia il front end PHP senza niente che valga la pena rubare finché non può andarsene anche lui.\nSe fai ancora il deployment così, puoi chiamarti un professionista? Sopra ci sono abbastanza prove perché questa abbia smesso di essere un\u0026rsquo;opinione. Quindi ecco la domanda, posta direttamente. Se fai ancora il deployment di PHP come un unico processo che tiene il codice, le credenziali e una web root scrivibile, puoi chiamarti un professionista?\nDipende da quale di tre persone sei. E sapere quale non è qualcosa che ti capita. Assicurarti di saperlo è il lavoro.\nHai un vincolo reale, e l\u0026rsquo;hai messo per iscritto. Un prodotto da cui l\u0026rsquo;azienda dipende esiste solo in PHP. Una migrazione è stata preventivata ed è nel budget dell\u0026rsquo;anno prossimo. Va bene. Questo è professionale, a patto che il motivo sia su carta con una data accanto, che l\u0026rsquo;utente di runtime non possa scrivere il codice, che gli upload non possano essere eseguiti, che l\u0026rsquo;account del database sia ridotto all\u0026rsquo;osso e che tu abbia applicato la patch per PHP2Shell questa settimana. Stai correndo un rischio noto di proposito, con i muri che puoi metterci attorno.\nNessuno te l\u0026rsquo;ha mai detto. Nessuno ti ha mostrato il registro, e il tutorial su cui hai imparato metteva tutto in una directory. È una lacuna, e tutti hanno lacune. Smette di essere una lacuna nel momento in cui hai letto fin qui.\nLo sai, e lo costruisci lo stesso. Hai visto i numeri, o abbastanza di loro. Sai che la password del database sta nella web root e che la web root è scrivibile. Fai il deployment così perché è più veloce, perché il cliente non pagherà per qualcosa di meglio, e perché nessuno ti ha mai chiesto di giustificarlo. È il caso a cui mira questa domanda. La mancanza non è la lacuna nelle tue conoscenze. È costruire sopra una lacuna che hai già visto e che non sei mai tornato a chiudere.\nCi siamo passati tutti. Restarci per scelta è la parte che non si può difendere.\nLa porta è sempre stata aperta Quello che mi colpisce leggendo questo registro non è che PHP abbia dei bug. Ogni linguaggio ne ha. È quanto poco sia mai stato una sorpresa.\nIl progetto sapeva che register_globals era pericoloso nel 2002 e l\u0026rsquo;ha tolto nel 2012. Il suo manuale ti dice di non fidarti di unserialize(), di non fidarti di disable_functions, di non fidarti di open_basedir. La sua stessa documentazione dice che uno script sotto mod_php può raggiungere il database senza password. Le agenzie dicono da anni che il linguaggio con cui è costruito è da dove vengono due terzi dei bug di memoria. Ogni avvertenza è lì, per iscritto, da parte di chi dovrebbe saperlo.\nE ha continuato a vincere lo stesso, perché era economico. Economico da ospitare, economico da imparare, economico da vendere a un cliente che voleva un sito web entro venerdì. Una directory, un processo, una password in un file, e un sito che funzionava. Il prezzo era un piano di hosting condiviso. Quello che costava non è mai comparso in fattura: le bonifiche, le backdoor lasciate sul disco, i numeri di carta dei clienti sottratti da PHP malevolo, la finestra di cinque ore tra la divulgazione e l\u0026rsquo;attacco.\nÈ la parte per cui non ho pazienza. Non i bug. La decisione, presa più e più volte da gente che sapeva come stavano le cose, che la via economica andava bene perché nessuno controllava. Uno standard è la cosa che mantieni quando nessuno controlla. La divisione tra front end e back end, il codice in sola lettura, l\u0026rsquo;account del database ridotto all\u0026rsquo;osso: niente di tutto ciò è nuovo, niente è costoso, e tutto avrebbe trasformato buona parte degli incidenti qui sopra in niente di cui valga la pena scrivere.\nPHP2Shell non è la fine di questo registro. È solo la voce di questa settimana. Il linguaggio lo correggerà, gli hosting distribuiranno l\u0026rsquo;aggiornamento prima o poi, e la quota di versioni salirà come fa sempre, lentamente. Quello che decide se il prossimo ti costerà qualcosa non è PHP. È se hai costruito i muri che non ti ha mai dato, o se sei passato a qualcosa che li ha già.\nPHP — News archive 2026, 21st October — «PHP 8.5.12, 8.4.27, 8.3.36 and 8.2.35 fix two critical vulnerabilities that can allow unauthenticated remote code execution»; «We consider the risk highest for mod_php, with a demonstrated exploit where an unauthenticated request can trigger the attack before any application code runs»; «There are no complete mitigations, updating is the only safe choice.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWiz Research — PHP2Shell — 21 ottobre 2026; «Every PHP version released in the last decade is affected by at least one of these vulnerabilities, going back to version 5.4»; «All of the disclosed vulnerabilities are memory-safety issues».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAWS Security Blog — PHP2Shell exploitation prior to public disclosure in MadPot — un tentativo di sfruttamento registrato il 17 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nwatchTowr — PHP2Shell FAQ — sfruttamento osservato in circolazione il 21 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2026-109618 — la gestione dell\u0026rsquo;errore di memoria esaurita lascia dati della richiesta inizializzati a metà che la pulizia tratta come validi; esecuzione remota di codice.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2026-109619 — memoria della richiesta usata dopo essere stata liberata; esecuzione remota di codice; colpite le versioni dalla 5.4.0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Installed as an Apache module — «When PHP is used as an Apache module it inherits Apache\u0026rsquo;s user permissions»; «a malicious script could access and modify the database, even without a username and password».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Apache 2.x on Unix systems — «The mod_php approach embeds PHP directly into every Apache httpd worker process.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — wp-config.php — si trova nella radice della directory di WordPress e contiene le informazioni di connessione al database.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Changing file permissions — wp-config.php «is initially created with 644 permissions, and it\u0026rsquo;s a hazard to leave it like that».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Hardening WordPress — privilegi del database, permessi dei file; nessuna indicazione su come bloccare l\u0026rsquo;esecuzione di PHP negli upload.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOWASP — Database Security Cheat Sheet — «The application\u0026rsquo;s backend database should be isolated from other servers»; un segmento di rete interno dedicato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Database design — «Applications should never connect to the database as its owner or a superuser.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — FastCGI Process Manager — pool che avviano worker «with different uid/gid/chroot/environment».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD CVE API, virtualMatchString=cpe:2.3:a:php:php — interrogata il 23 ottobre 2026: 757 CVE. Corruzione della memoria contata come CWE-119, 120, 121, 122, 125, 129, 131, 189, 190, 191, 415, 416, 476, 680, 787, 824, 843 o 908: 288. Compromissione remota completa contata come CVSS 3.x AV:N/PR:N/UI:N/C:H/I:H, oppure CVSS 2 via rete, nessuna autenticazione, impatto completo su riservatezza e integrità dove non esiste un punteggio 3.x: 172.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMonth of PHP Bugs, php-security.org, Wayback Machine — «During March 2007 old and new security vulnerabilities in the Zend Engine, the PHP core and the PHP extensions will be disclosed on a day by day basis.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Register — Stefan Esser interview, 7th February 2007 — fondatore dell\u0026rsquo;Hardened-PHP Project, da poco uscito dal PHP Security Response Team: «I dislike the ways bugs are handled».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNSA — Software Memory Safety, November 2022, Wayback Machine — «a strategic shift from programming languages that provide little or no inherent memory protection, such as C/C++, to a memory safe language when possible.» Inoltre: «Examples of memory safe language include C#, Go, Java®, Ruby™, Rust®, and Swift®.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA and partners — The Case for Memory Safe Roadmaps, December 2023 — scritto insieme, tra gli altri, all\u0026rsquo;NCSC del Regno Unito; «two-thirds of reported vulnerabilities in memory unsafe programming languages still relate to memory issues.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2014-8142 — use-after-free in process_nested_data durante unserialize.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2015-0231 — use-after-free in unserialize che «exists because of an incomplete fix for CVE-2014-8142».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2016-5771 — use-after-free in SPL innescato tramite unserialize e garbage collection.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — unserialize — «Do not pass untrusted user input to unserialize() regardless of the options value of allowed_classes.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2019-11043 — «in certain configurations of FPM setup it is possible to cause FPM module to write past allocated buffers … opening the possibility of remote code execution.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP 7 ChangeLog — corretto il 24 ottobre 2019 nelle 7.3.11, 7.2.24 e 7.1.33, bug #78599.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Known Exploited Vulnerabilities catalogue — feed JSON versione 2026.10.21, 1.754 voci; 81 per PHP o applicazioni scritte in PHP per vendor e prodotto; uso da parte di ransomware come registrato nel feed.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe PHP Foundation — PHP core security audit results, 10th April 2025 — «The audit identified 27 issues, with 17 having security implications».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP 4 ChangeLog — 4.2.0, 22 aprile 2002: «register_globals defaults to \u0026lsquo;off\u0026rsquo; now».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Using Register Globals, Wayback Machine — «DEPRECATED as of PHP 5.3.0 and REMOVED as of PHP 5.4.0»; «the most controversial change in PHP».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Magic Quotes, Wayback Machine — «DEPRECATED as of PHP 5.3.0 and REMOVED as of PHP 5.4.0».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Deprecated features in PHP 5.5.x, Wayback Machine — «The preg_replace() /e modifier is now deprecated.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Pattern Modifiers, Wayback Machine — e «DEPRECATED in PHP 5.5.0, and REMOVED as of PHP 7.0.0.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Deprecated features in PHP 7.4 — «The allow_url_include ini directive is deprecated.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Backward incompatible changes in PHP 8.0 — i metadati phar «will no longer be automatically unserialized, to fix potential security vulnerabilities due to object instantiation, autoloading, etc.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP RFC — Saner string to number comparisons — implementata in PHP 8.0; «the most notable of which is that 0 == “foobar” returns true.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSam Thomas, Black Hat USA 2018 — It\u0026rsquo;s A PHP Unserialization Vulnerability Jim, But Not As We Know It — le operazioni sui file su percorsi phar:// deserializzano i metadati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — State of WordPress Security in 2026 — dati 2025: 11.334 nuove vulnerabilità, 91% nei plugin, 6 nel core, 46% non corrette in tempo per la divulgazione, mediana di 5 ore allo sfruttamento di massa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — WordPress — «58.3% of all the websites whose content management system we know. This is 39.6% of all websites.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — PHP — «PHP is used by 69.3% of all the websites whose server-side programming language we know.» Letto il 23 ottobre 2026. Versioni principali tra i siti PHP: la 8 è il 65,3%, la 7 il 26,9%, la 5 il 7,7%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — State of WordPress Security in 2025 — dati 2024: 7.966 nuove vulnerabilità, 96% nei plugin, 7 nel core, 33% non corrette in tempo per la divulgazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — 2024 Annual WordPress Security Report — 8.223 vulnerabilità, un aumento del 68%; «Roughly 35% of the vulnerabilities disclosed in 2024 remain unpatched in 2025»; «just under one million distinct sites infected with malware».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMark Maunder — Zero day vulnerability in many WordPress themes, 1st August 2011 — timthumb.php incluso in «many commercial and free themes»; chi attaccava poteva «upload and execute arbitrary PHP code».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — RevSlider vulnerability leads to massive WordPress SoakSoak compromise, 15th December 2014 — «compromising over 100,000 WordPress sites».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — Mossack Fonseca breach, Revolution Slider possible cause, 7th April 2016, Wayback Machine — «may have been breached via a vulnerable version of Revolution Slider».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — Content injection vulnerability in WordPress REST API, 1st February 2017 — «allows an unauthenticated user to modify the content of any post or page»; attiva di default su 4.7.0 e 4.7.1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — WordPress REST API vulnerability abused in defacement campaigns, 6th February 2017 — «Google alone shows 66,000+ pages compromised», per una sola campagna.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — Rapid growth in REST API defacements, 10th February 2017, Wayback Machine — le pagine defacciate indicizzate da Google sono passate «from 1,496,020 to 1,893,690»; il conteggio precedente di Sucuri era 66.000.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — 700,000 WordPress users affected by zero-day in File Manager plugin, 1st September 2020, Wayback Machine — «a WordPress plugin with over 700,000 active installations».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — SureTriggers vulnerability exploited within 4 hours, 10th April 2025 — creazione di un amministratore senza autenticazione; «exploitation attempts observed within hours after disclosure».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Compromised Web Servers and Web Shells, TA15-314A — «The most commonly observed web shells are written in languages that are widely supported, such as PHP and ASP.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNSA and ASD — Detect and Prevent Web Shell Malware, April 2020, Wayback Machine — «web applications should not have permission to write directly to a web accessible directory or modify web accessible code»; il monitoraggio dell\u0026rsquo;integrità dei file come ripiego.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — 2022 Website Threat Research Report — 43.374 siti bonificati; 69,63% con almeno una backdoor; 1.188.864 backdoor rimosse; 90% degli skimmer di carte in PHP malevolo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — 2023 Hacked Website and Malware Threat Report — 39.594 siti bonificati; 49,21% con almeno una backdoor; WordPress il 95,5% delle infezioni.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOWASP — File Upload Cheat Sheet — salvare gli upload «outside of the webroot»; «disable per directory configuration overrides on upload directories».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Description of core php.ini directives — disable_functions «can be circumvented»; open_basedir «can therefore not be relied upon when security is needed».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP — News archive 2013, 24th October — malware servito dal 22 al 24 ottobre 2013; due server compromessi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP internals — Changes to Git commit workflow, 28th March 2021 — due commit malevoli inseriti in php-src; il server git.php.net dismesso e GitHub reso canonico.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP — Supported versions — la 8.2 riceve correzioni di sicurezza fino al 31 dicembre 2026; 8.3, 8.4 e 8.5 supportate. Letto il 23 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP — Unsupported branches — 8.1 a fine vita il 31 dicembre 2025, 8.0 il 26 novembre 2023, 7.4 il 28 novembre 2022.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — PHP version 8 — quote delle sottoversioni all\u0026rsquo;interno di PHP 8; combinate con le quote delle versioni principali danno il 48,3% dei siti PHP su versioni non supportate.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — PHP version 7 — la 7.4 è il 73,4% dei siti PHP 7.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Statistics — versioni di PHP dei siti WordPress che riportano a wordpress.org; 34,7% sotto la 8.2. Letto il 23 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Requirements — «PHP version 8.3 or greater»; funziona con la 7.4+, che ha «reached their official End Of Life».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — OPcache introduction — «OPcache improves PHP performance by storing precompiled script bytecode in shared memory, thereby removing the need for PHP to load and parse scripts on each request.» Fino a PHP 8.4, un\u0026rsquo;estensione condivisa caricata tramite zend_extension.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — OPcache runtime configuration — opcache.jit disponibile dalla PHP 8.0.0, default «disable».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Frequently Asked Questions — «Go programs are compiled ahead of time to native machine code»; il runtime «does not include a virtual machine»; «One of Go\u0026rsquo;s design goals is to approach the performance of C for comparable programs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — package html/template — «implements data-driven templates for generating HTML output safe against code injection»; «The escaping is contextual, so actions can appear within JavaScript, CSS, and URI contexts.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Avoiding SQL injection risk — «You can avoid an SQL injection risk by providing SQL parameter values as sql package function arguments.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Vulnerability management — un database di vulnerabilità curato; govulncheck «only surfaces vulnerabilities that actually affect you, based on which functions in your code are transitively calling vulnerable functions».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Backward incompatible changes in PHP 8.5 — «The Opcache extension is now always built into the PHP binary and is always loaded. The INI directives opcache.enable and opcache.enable_cli are still honored.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP RFC — Make OPcache a non-optional part of PHP — implementata in PHP 8.5; «running PHP in production without OPcache is generally considered a mistake».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — The Go Memory Model — le race su valori di più parole «can in turn lead to arbitrary memory corruption»; ThreadSanitizer tramite go build -race segnala le race.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Data Race Detector — esegui i test con go test -race; «The race detector only finds races that happen at runtime, so it can\u0026rsquo;t find races in code paths that are not executed.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRust — rust-lang.org — «Rust is blazingly fast and memory-efficient: with no runtime or garbage collector».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo 1.5 Release Notes — «The compiler and runtime are now implemented in Go and assembler, without C.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenJDK — The HotSpot Group — «around 3000 C/C++ header and source files, comprising more than 1.2 million lines of code».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndotnet/runtime — src/coreclr — il garbage collector (gc/gc.cpp) e il JIT (jit/compiler.cpp) sono in C++.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJava SE 21 — URLClassLoader — «to load classes and resources from a search path of URLs referring to both JAR files and directories».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2021-44228 — «An attacker who can control log messages or log message parameters can execute arbitrary code loaded from LDAP servers»; aggiunta al KEV della CISA il 10 dicembre 2021.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/security/php-twenty-nine-years-of-leaving-the-door-open/","summary":"PHP2Shell, reso pubblico il 21 ottobre 2026, è un\u0026rsquo;esecuzione remota di codice senza autenticazione nell\u0026rsquo;interprete PHP stesso, in ogni versione fino alla 5.4, sfruttata prima che esistesse la patch. È l\u0026rsquo;ultima voce di un lungo elenco: 757 CVE contro l\u0026rsquo;interprete dal 1997, almeno 288 di corruzione della memoria e 172 classificate come compromissione remota completa senza login. Questo articolo conta quell\u0026rsquo;elenco da NVD e dal catalogo KEV della CISA, spiega perché un motore in C e un linguaggio che ci ha messo dieci anni a togliere register_globals fanno lo stesso errore due volte, guarda cosa fa WordPress ai numeri, come le web shell restano al loro posto e come fermarle, le due volte in cui è stato violato php.net stesso, la quota del web che gira ancora su versioni che nessuno aggiorna, e perché il deployment abituale, un unico processo che tiene i template, la logica, l\u0026rsquo;SQL e la password del database, trasforma ognuno di quei bug in tutto. E perché, avendo io stesso rinunciato a PHP, penso che dovresti valutare di lasciarlo per un linguaggio memory safe come Go.","title":"PHP: ventinove anni a lasciare la porta aperta"},{"content":"Ogni nome che la tua macchina ha cercato oggi, l\u0026rsquo;ha creduto, e su questo ho scritto un intero articolo. Questo parla di cosa succede alla posta dopo la ricerca. In breve: viene spedita a un server scelto dal DNS, su un canale cifrato solo se nessuno si oppone, con dentro un messaggio che chiunque sul percorso può leggere e modificare, e quasi nessuna delle protezioni inventate per impedirlo è attiva.\nNon è una cosa rotta. Sono sette, e ognuna è progettata in modo che, quando è sbagliata, la posta passi comunque. Nessun errore. La fattura arriva. Il reset della password arriva. Solo che arrivano anche a qualcuno, o passano da qualcuno, che non avrebbe mai dovuto vederli, e da nessuna parte c\u0026rsquo;è scritto.\nQuesto articolo è l\u0026rsquo;argomento per fare giusta ognuna di quelle impostazioni, con le prove di quanto vale ciascuna. I tre articoli dopo lo costruiscono su server veri: Postfix, Microsoft 365 e Stalwart. Questo è il perché.\nL\u0026rsquo;attacco che lo standard descrive e poi vieta Parti dal tubo tra due server di posta, perché è quello che quasi tutti credono già risolto. STARTTLS è il comando che porta una connessione SMTP a TLS. Quasi tutti i server di posta lo supportano, quasi tutta la posta è cifrata in transito, e sembra un problema risolto finché non leggi come viene offerto il passaggio.\nIl server che riceve annuncia STARTTLS nel suo saluto. Il server che spedisce vede l\u0026rsquo;offerta e la accetta. Niente firma quell\u0026rsquo;offerta e niente la protegge. Quindi una macchina sul percorso tra i due può cancellare la riga, ed ecco il risultato, catturato in laboratorio da un mittente con l\u0026rsquo;impostazione predefinita opportunistica di sempre:\n~\u0026gt; EHLO client.test [stripped] STARTTLS removed from the greeting *** Host did not advertise STARTTLS -\u0026gt; MAIL FROM:\u0026lt;carol@sender.test\u0026gt; -\u0026gt; Please pay invoice 1042 to sort code 20-00-00, account 12345678. \u0026lt;- 250 2.0.0 Ok: queued as D6A84132069C Il mittente non ha visto STARTTLS offerto, quindi ha fatto quello che opportunistico vuol dire: ha spedito lo stesso, in chiaro. La macchina in mezzo ha letto tutto, fattura e coordinate bancarie comprese. La posta è stata consegnata. Nessun errore è arrivato a nessuno.\nQuell\u0026rsquo;attacco non me lo sono inventato. La RFC 3207, lo standard che definisce STARTTLS, lo descrive con precisione nelle sue Security Considerations:\nA man-in-the-middle attack can be launched by deleting the \u0026ldquo;250 STARTTLS\u0026rdquo; response from the server. This would cause the client not to try to start a TLS session.1\nLa stessa sezione dà la difesa, ed è quella ovvia: poter richiedere TLS. «both clients and servers MUST be able to be configured to require successful TLS negotiation … for selected hosts before messages can be successfully transferred.»1 Quindi configura il ricevente perché lo richieda, e la sessione privata di STARTTLS viene rifiutata:\n[stripped] STARTTLS removed from the greeting *** Host did not advertise STARTTLS -\u0026gt; MAIL FROM:\u0026lt;carol@sender.test\u0026gt; \u0026lt;** 530 5.7.0 Must issue a STARTTLS command first Solo che non puoi, non su un MX pubblico, perché lo stesso standard lo vieta:\nA publicly-referenced SMTP server MUST NOT require use of the STARTTLS extension in order to deliver mail locally.2\nLeggi le due citazioni insieme. Lo standard descrive un attacco man-in-the-middle, ti dice che la difesa è richiedere TLS, e poi ti dice che il tuo server di posta pubblico non ha il permesso di richiederlo. Rileggilo. Quella regola è stata scritta nel 2002 per far scorrere la posta tra server che non sapevano ancora tutti fare TLS. È ancora in vigore, ed è il motivo per cui gran parte di internet accetta ancora posta in chiaro, e per cui togliere STARTTLS funziona ancora oggi.\nEsiste anche la versione competente dell\u0026rsquo;attaccante. Un ricevente che richiede TLS non ti salva, perché l\u0026rsquo;attaccante non deve per forza inoltrare la sessione in chiaro. Può leggere il testo in chiaro declassato del mittente e aprire una sua connessione TLS perfettamente valida verso il ricevente, che vede un certificato buono ed è contento. In laboratorio ho mostrato entrambe le metà: la rimozione che espone il mittente, e un semplice client TLS che il ricevente severo accetta senza protestare. La policy del ricevente non può fermarlo. Lo ferma solo il mittente che si rifiuta di spedire senza TLS autenticato, e questo è tutto il motivo di DANE3 e MTA-STS,4 che arrivano più avanti in questo articolo.\nSette impostazioni, e come ognuna fallisce aperta Il tubo è uno dei due problemi. L\u0026rsquo;altro è l\u0026rsquo;identità: un messaggio che arriva cifrato sta comunque solo dichiarando di venire da chi dice. Quindi in gioco ci sono sette impostazioni, divise tra questi due compiti, e la cosa che hanno in comune è la prima da imparare.\nSette impostazioni, due domande, e cosa fa ognuna quando è sbagliata IL TUBO È PRIVATO? trasporto: tra i due server di posta IL MITTENTE È VERO? identità: da chi dice di venire il messaggio STARTTLS cifra, se nessuno interferisce sbagliato: tolto, si va in chiaro MTA-STS policy HTTPS: TLS obbligatorio sbagliato: «testing» non impone niente DANE / TLSA DNSSEC fissa la chiave del server sbagliato: record scaduto, consegna ferma TLS-RPT i mittenti segnalano TLS falliti assente: fallimenti invisibili SPF quali host possono spedire sbagliato: ~all è un'alzata di spalle DKIM firma sul messaggio sbagliato: niente selettore, niente da verificare DMARC cosa fare se falliscono entrambi sbagliato: p=none per sempre Sotto entrambi: IPv6. Un MX senza record AAAA non riceve posta da un mittente solo IPv6. Ognuna di queste può essere sbagliata mentre la posta continua a scorrere, ed è per questo che nessuno se ne accorge Eccole una per una: cosa protegge, e cosa fa quando è impostata male. Guarda l\u0026rsquo;ultima colonna. Dice quasi sempre che la posta passa.\nImpostazione Compito Cosa protegge Impostata male, e… STARTTLS trasporto cifra il salto tra due server tolta dal saluto, si spedisce in chiaro MTA-STS trasporto una policy pubblicata via HTTPS che dice che TLS è obbligatorio lasciata in testing, non impone niente DANE / TLSA trasporto DNSSEC fissa la chiave del server, così TLS non si può declassare un record scaduto, e la posta verso di te resta in coda TLS-RPT trasporto i mittenti ti segnalano i TLS falliti5 non pubblicato, e i fallimenti sono invisibili SPF identità quali server possono spedire per un dominio ~all è un\u0026rsquo;alzata di spalle, non un rifiuto DKIM identità una firma sul messaggio nessun selettore pubblicato, niente da verificare DMARC identità cosa fare quando SPF e DKIM falliscono p=none guarda, e non fa niente Sei di queste sette, impostate male, consegnano comunque la posta. DANE è l\u0026rsquo;eccezione. È l\u0026rsquo;unica impostazione dell\u0026rsquo;elenco che fallisce chiusa: sbagliala e la tua posta si ferma invece di uscire allo scoperto. Tieni a mente questa cosa, perché si scopre che è il motivo per cui la gente ne ha paura, e il motivo per cui è quella che vale di più.\nDue parole su ciascuna delle tre d\u0026rsquo;identità, perché il resto della serie si appoggia su di loro. SPF elenca i server autorizzati a spedire per un dominio, e finisce con una regola: -all vuol dire «nessun altro», ~all vuol dire «nessun altro, ma consegnalo lo stesso». DKIM aggiunge una firma crittografica sul messaggio, così qualsiasi modifica si vede, purché il dominio abbia davvero pubblicato una chiave con cui verificarla. DMARC lega le due e dice al ricevente cosa fare quando falliscono, e se sono allineate con l\u0026rsquo;indirizzo From: che il lettore vede davvero. Sono le RFC 7208, 6376 e 7489, e ognuna meriterebbe un articolo a sé.6 7 8\nDMARC da solo fa passare una fattura manomessa Il livello d\u0026rsquo;identità ha un buco proprio dove costa di più, e vale la pena mostrarlo, perché «abbiamo DMARC a reject» è la frase che si dice quando ci si crede coperti.\nDMARC passa se uno qualsiasi tra SPF e DKIM passa ed è allineato al dominio del From:. Uno dei due, non entrambi. Quindi prendi un vero messaggio firmato di un dominio, cambia le coordinate bancarie nel corpo, e rispediscilo dallo stesso posto:\nDMARC ha fatto passare la fattura alterata. Scartare sul fallimento DKIM no COSA È STATO SPEDITO COSA È ARRIVATO Fattura 1042, firmata DKIM sort code 20-00-00, 12345678 alterata Stesso messaggio, stessa firma sort code 40-11-22, 87654321 SPF: pass spedita dall'indirizzo elencato DKIM: fail l'hash del corpo non combacia DMARC: pass basta un passaggio allineato COSA FA IL RICEVENTE Solo DMARC Consegnata. Le nuove coordinate arrivano identiche a quelle vere. Scarta se DKIM fallisce 554 5.7.1 DKIM signature does not verify Catturato in laboratorio: Rspamd 3.12.1 gli ha dato R_SPF_ALLOW, R_DKIM_REJECT e DMARC_POLICY_ALLOW. DMARC chiede se almeno un controllo è passato. Una fattura modificata dall\u0026rsquo;indirizzo giusto ne passa uno SPF passa ancora, perché arriva da un server autorizzato. La firma DKIM ora fallisce, perché il corpo è stato cambiato. Ma a DMARC basta un passaggio allineato, e SPF gliel\u0026rsquo;ha dato, quindi DMARC passa e il messaggio con il nuovo numero di conto viene consegnato identico all\u0026rsquo;originale. L\u0026rsquo;ho catturato in laboratorio: Rspamd gli ha dato R_SPF_ALLOW, R_DKIM_REJECT e DMARC_POLICY_ALLOW, e da solo l\u0026rsquo;avrebbe consegnato. L\u0026rsquo;unica cosa che l\u0026rsquo;ha fermato è stata una regola che rifiuta senza appello una firma rotta. Un dominio a p=reject non è protetto contro la manomissione che quella firma doveva cogliere. Vale la pena saperlo prima di dire che il lavoro è fatto.\nDANE vale quanto il DNSSEC che ha sotto Ora le impostazioni di trasporto che fermano davvero l\u0026rsquo;attaccante competente, perché spostano la decisione sul mittente. DANE è la più forte. Permette a un dominio di pubblicare nel DNS, in un record TLSA, l\u0026rsquo;impronta della chiave che il suo server di posta presenterà, così un server mittente può rifiutare tutto ciò che non corrisponde.9 Nessuna autorità di certificazione di mezzo, nessuna fiducia in chiunque abbia risposto all\u0026rsquo;handshake TLS. Il proprietario del dominio dice «questa è la mia chiave», e la cosa finisce lì.\nSolo che le risposte DNS si possono falsificare, quindi un\u0026rsquo;impronta pubblicata in DNS semplice non vale niente: lo stesso attaccante che toglie STARTTLS può darti un\u0026rsquo;impronta falsa che corrisponde a una chiave falsa. DANE significa qualcosa solo quando il DNS in cui sta è firmato con DNSSEC, così l\u0026rsquo;impronta stessa non si può falsificare. Questa è tutta la catena, ed è il motivo per cui questo articolo sta in una serie che è cominciata con DNSSEC. Se non l\u0026rsquo;hai ancora incontrato, le basi sono in /it/dns/dnssec-the-root-is-signed-you-are-not/, e la versione in una riga è: la root è firmata, ogni TLD che conti è firmato, e poi tutto si ferma di colpo sui nomi che la gente usa davvero.\nUn record TLSA vale solo quanto la firma sopra di lui FIRMATA: alpha.test NON FIRMATA: plain.test Trust anchor di test. l'unica chiave data al resolver DS 38044 alpha.test firmata, garantita dal genitore RRSIG _25._tcp.mail.alpha.test TLSA 3 1 1 093a80cac907a52e… deve combaciare chiave pubblica di mail.alpha.test SHA-256 093a80cac907a52e… plain.test niente DS, niente firme nessuno garantisce _25._tcp.mail.plain.test TLSA 3 1 1 0f09fe00d00d74c1… chiunque può falsificarlo Ignorato dal mittente nessuna policy DANE restituita COME SI LEGGE 3 1 1 3: la chiave del server stesso, nessuna CA. 1: solo la chiave pubblica. 1: SHA-256. Rinnova il certificato sulla stessa chiave e il record non deve mai cambiare. Entrambe le zone pubblicano un record TLSA. Solo una delle due può dimostrarlo Il diagramma mostra due domini che pubblicano entrambi un record TLSA. Uno sta in una zona firmata, con una catena di firme ininterrotta dalla root fino all\u0026rsquo;impronta, quindi un mittente può fidarsi. L\u0026rsquo;altro sta in una zona non firmata, quindi la sua impronta è solo una serie di byte che chiunque potrebbe aver scritto, e un mittente corretto la ignora del tutto e non ottiene nessuna protezione DANE. Stesso record, pubblicato in due modi. Solo uno può dimostrare di essere vero.\nIl record da pubblicare è 3 1 1: la chiave del server stesso invece di quella di una CA, la chiave pubblica invece dell\u0026rsquo;intero certificato, con hash SHA-256. Il numero in mezzo è quello che ripaga nella gestione, perché fissare la chiave invece del certificato significa che il record sopravvive a ogni rinnovo purché tu tenga la stessa chiave. L\u0026rsquo;articolo su Postfix ha la procedura completa e la trappola in cui cade la gente, cioè che il modo abituale di rinnovare i certificati crea una chiave nuova ogni volta e rompe il record in silenzio. Per adesso, la cosa da portarsi via è che 3 1 1 più il riuso della chiave è un record che pubblichi una volta e lasci stare.\nLe regole della casa, e quanto costa ciascuna Tutto quello che c\u0026rsquo;è sopra diventa un breve elenco di regole, e i prossimi tre articoli ci tengono legati dei server veri. Non sono ammorbidite, e non sono gratis. Eccole con il conto allegato, perché una regola di cui nascondi il costo è una regola che non hai davvero deciso di rispettare.\nRegola Cosa ferma Cosa ti costa Niente testo in chiaro in entrata lettura e manomissione sul salto in entrata un mittente il cui server non sa fare TLS non ti raggiunge Niente testo in chiaro in uscita lo stesso sul salto in uscita la posta verso un server senza TLS resta in coda invece di partire DANE o MTA-STS in uscita il man-in-the-middle competente un record scaduto dalla loro parte mette in coda la tua posta verso di loro IPv6 su ogni MX essere irraggiungibile da un mittente solo IPv6 record AAAA e un server dual-stack da mantenere Relay solo con login il tuo server che ripulisce lo spam degli altri niente invio da ovunque per IP; gli utenti devono autenticarsi Un login spedisce come se stesso un dipendente che si spaccia per un collega regole per utente, imposte in envelope e intestazione Rifiuta i domini mittente sconosciuti backscatter e mittenti inesistenti falsificati niente di legittimo; questi non hanno mai avuto un mittente vero Rifiuta i fallimenti SPF e DKIM spoofing e manomissione la posta inoltrata senza SRS viene respinta Il costo dell\u0026rsquo;inoltro è quello che morde, ed è reale: rifiuta sulla base del solo SPF e un messaggio inoltrato da un posto che non è nel record SPF del mittente viene rifiutato, perché per il ricevente un inoltratore è identico a un falsario. Ci sono rimedi, SRS e ARC,10 e l\u0026rsquo;articolo su Postfix mostra il fallimento. La posizione onesta è che queste regole respingono un po\u0026rsquo; di posta che un server più permissivo avrebbe consegnato. È proprio lo scopo. Parte di quella posta andava respinta, e il resto ti sta dicendo di una configurazione d\u0026rsquo;inoltro che contava sul fatto che nessuno controllasse.\nFallisce aperta, ed ecco la prova L\u0026rsquo;affermazione su cui si regge tutto questo articolo è che queste impostazioni falliscono aperte, in silenzio, quindi non puoi distinguere una che funziona da una rotta guardandola. Non è una preoccupazione teorica. Costruendo il server Postfix per il prossimo articolo, ognuno di questi fallimenti è successo, e ognuno era un\u0026rsquo;impostazione che sembrava configurata e non faceva niente.\nCinque modi in cui il laboratorio è fallito aperto, e quello chiuso L'IMPOSTAZIONE, E QUANDO MORDE COSA HA FATTO DAVVERO Postfix: dane la destinazione non pubblica TLSA FALLISCE APERTA ripiega sull'opportunistico: in chiaro Postfix: controllo login-mismatch sulla porta 25, senza login FALLISCE APERTA saltato con un avviso nel log: dominio falsificato Rspamd: local_addrs in local.d per restringere l'elenco FALLISCE APERTA unito, non sostituito: 10/8 e fd00::/8 non controllati Solo DMARC DKIM fallisce, SPF passa FALLISCE APERTA fattura alterata consegnata TLSA in una zona non firmata identico a quello vero FALLISCE APERTA ignorato: niente DANE TLSA firmato, certificato sbagliato il record è scaduto FALLISCE CHIUSA in coda: niente spedito Ogni riga è una cattura dal laboratorio, non la lettura del manuale. La posta ha continuato a scorrere in cinque di questi sei casi. È questo il problema Sei impostazioni reali, ognuna dalla costruzione del server Postfix per il prossimo articolo. Cinque sono fallite aperte: hanno consegnato la posta, senza errori, con tutta l\u0026rsquo;aria di funzionare a dovere. La sesta, il record DANE scaduto, è fallita chiusa. È quella di cui tutti hanno paura, ed è l\u0026rsquo;unica che ha protetto il messaggio invece di farlo trapelare. La lezione sta lì nell\u0026rsquo;ultima colonna del diagramma: l\u0026rsquo;impostazione che la gente evita perché potrebbe fermare la posta è l\u0026rsquo;unica che si comporta come dovrebbe un controllo di sicurezza.\nOgni riga è una cattura, non la lettura di un manuale. Il modo di distinguere un\u0026rsquo;impostazione che funziona da una rotta è spedire il messaggio che dovrebbe fermare e guardare cosa torna indietro, e lo dico una volta qui e lo dimostro tre volte nel resto della serie.\nAllora chi lo fa davvero? Un conto è dire che le impostazioni contano. Un altro è chiedersi se le organizzazioni la cui posta conta di più le hanno attivate. Quindi l\u0026rsquo;ho fatto, con nient\u0026rsquo;altro che DNS in sola lettura e un resolver che valida, il 22 ottobre 2026: ventisei domini che ricevono posta, le banche, i grandi provider, gli specialisti tedeschi e le autorità di certificazione, ognuno controllato per le sette cose di questo articolo.11\nDominio MX con AAAA DNSSEC DANE (TLSA) MTA-STS DMARC SPF Banche britanniche barclays.co.uk no no no no reject -all hsbc.co.uk no no no no reject no lloydsbank.com no no no no reject -all natwest.com no no no no reject no santander.co.uk no no no no reject no nationwide.co.uk no no no no reject no monzo.com tutti no no no reject no starlingbank.com no no no no reject no Provider di posta gmail.com tutti no no enforce no senza all outlook.com no no no enforce no -all yahoo.com no no no testing reject senza all icloud.com no no no no quarantine senza all fastmail.com no no no testing no ~all proton.me no sì sì enforce quarantine ~all Provider tedeschi posteo.de no sì sì enforce no ~all mailbox.org tutti sì sì enforce reject ~all gmx.de no sì sì no quarantine senza all web.de no sì sì testing quarantine senza all t-online.de no no no testing no ~all Autorità di certificazione letsencrypt.org tutti no no no reject -all digicert.com tutti no no no quarantine no sectigo.com no no no no reject -all globalsign.com tutti no no no reject no Settore pubblico britannico hmrc.gov.uk no no no enforce reject no nhs.uk no no no no reject -all ncsc.gov.uk no no no enforce reject -all Leggi prima la colonna DMARC, perché è quella quasi tutta piena. Quasi tutti questi pubblicano una policy DMARC, e quasi tutte le banche sono a reject. DMARC è l\u0026rsquo;impostazione che viene fatta, perché è quella che chiede un revisore e quella che un fornitore ti può vendere, ed è visibile: la puoi cercare e spuntare una casella. È anche, da sola, l\u0026rsquo;impostazione che più sopra in questo articolo ha fatto passare una fattura manomessa.\nOra leggi la colonna DANE, l\u0026rsquo;unica impostazione qui che non si può declassare né falsificare. Cinque domini su ventisei. Ognuno è un provider tedesco o Proton. Nemmeno una banca britannica. Nemmeno una delle autorità di certificazione, le aziende il cui intero mestiere è garantire per le chiavi. La protezione più forte contro l\u0026rsquo;attacco esatto con cui si è aperto questo articolo la applica una manciata di persone a cui importa, e nessuno di quelli che sono solo in regola.\nLe banche sono la riga più netta. Otto, tutte con DMARC a reject, e tra tutte: niente DANE, nessun MTA-STS in enforce, e una sola, Monzo, raggiungibile via IPv6. Due delle quattro autorità di certificazione non pubblicano nessun record SPF sul proprio dominio principale. Nemmeno HMRC e NatWest. Non sono piccole realtà che non ci sono mai arrivate. Sono le organizzazioni che ti mandano la posta che hai più paura che qualcuno falsifichi, e la protezione che hanno è il distintivo che sembra più forte e fa di meno.\nLa colonna IPv6 è un piccolo scandalo a sé. Venti dei ventisei non hanno nessun record AAAA sul server di posta, quindi un mittente su una rete solo IPv6 non li può raggiungere, e quel numero va in una sola direzione. Ho scritto /it/networking/we-never-ran-out-of-addresses/ sul rifiuto del settore di finire quel lavoro, ed eccolo di nuovo, stavolta sul percorso della posta. Ha la stessa forma del censimento gov.uk in /it/dns/dnssec-the-root-is-signed-you-are-not/: la parte difficile è stata fatta anni fa, i registri la regalano, e chi dovrebbe usarla per primo non l\u0026rsquo;ha fatto. Il gov.uk centrale non è nemmeno nella tabella, perché non pubblica nessun MX. Non riceve posta. È un modo come un altro di superare il test.\nSe ancora non lo fai, puoi definirti un professionista? Ogni standard citato in questo articolo, e il censimento sotto, puntano in una direzione: questo non è un problema di ricerca, è un problema di accensione, e l\u0026rsquo;accensione non la fa chi è nella posizione migliore per farla. Quando le prove sono così sbilanciate, la domanda smette di essere accademica e diventa una a cui devi rispondere sui tuoi server. Se gestisci la posta di un\u0026rsquo;organizzazione che maneggia i soldi o la salute di altre persone, e il tuo MX non fa DANE, non impone MTA-STS e non è raggiungibile via IPv6, puoi chiamarlo un lavoro da professionista?\nCi sono tre risposte oneste, e reggono solo le prime due. Sì, con un motivo scritto e una data accanto: sei su una piattaforma che non offre ancora DANE, l\u0026rsquo;hai segnalato, e c\u0026rsquo;è una riga nel piano del prossimo anno. È un professionista che gestisce un vincolo reale, e va bene. Sì, perché non lo sapevi, e ora lo sai, e questa settimana vai a vedere a che punto è il tuo server. Nessuno nasce sapendolo. E no: sapevi abbastanza da sentirti a disagio, hai letto fin qui, e chiuderai la scheda senza cambiare niente, perché la posta scorre e nessun errore salta fuori e nessuno ti obbliga. Quest\u0026rsquo;ultima non è una lacuna di conoscenza. È la decisione di lasciare rotta una cosa di cui sei responsabile perché rotta fa meno rumore.\nLo standard non ti obbliga a farlo. È tutto il problema, ed è anche tutto il punto. Sapere non è una cosa che ti capita, e nessuno verrà a dirti che il tuo server di posta spedisce in chiaro da due anni senza che te ne accorgessi. Per questo, assicurarti di sapere è il lavoro, e non è di nessun altro.\nUno standard è una promessa che mantieni quando nessuno guarda I pezzi di tutto questo sono stati finiti anni fa. STARTTLS è del 2002, SPF, DKIM e DMARC hanno dieci anni o più, DANE per la posta è stato specificato nel 2015, MTA-STS nel 2018. Niente di questo sta dietro una licenza, niente richiede un fornitore, e i registri che porterebbero i record DNSSEC li regalano. L\u0026rsquo;ingegneria difficile è fatta. Quello che resta è la parte facile, quella che è facile solo se qualcuno si prende la briga: attivarlo, controllare che sia davvero attivo, e tenerlo attivo quando il certificato si rinnova e il record deve seguirlo.\nQuest\u0026rsquo;ultima parte è tutto, in realtà. Uno standard non è il documento. Il documento esiste da vent\u0026rsquo;anni e la posta va ancora in chiaro. Uno standard è una cosa che mantieni quando non c\u0026rsquo;è nessun messaggio d\u0026rsquo;errore a costringerti, quando la posta scorrerebbe uguale se la lasciassi decadere in silenzio, quando l\u0026rsquo;unico che lo saprebbe mai sei tu. Ognuna di queste impostazioni fallisce aperta proprio perché nessuno sia costretto a preoccuparsene. Il che vuol dire che preoccuparsene è tutto il lavoro.\nNon ricevi una ricompensa. La fattura che non è stata alterata è identica a quella che lo è stata. Il reset della password che nessuno ha letto in transito è identico a quello che qualcuno ha letto. L\u0026rsquo;unica differenza sta nei giorni in cui qualcuno ci ha provato, e in quei giorni chi ha attivato tutto e ha controllato che funzionasse non scopre mai di essere stato attaccato, perché non ha funzionato. Ecco com\u0026rsquo;è fare il lavoro come si deve visto da fuori: non succede niente, per motivi che nessuno vede.\nQuindi fai giusta ogni impostazione lo stesso. Non perché qualcuno controlla, perché nessuno lo fa. Fallo perché sei tu che hai detto che la posta era sicura, e da queste parti vale ancora qualcosa.\nRFC 3207 §6 — SMTP Service Extension for Secure SMTP over TLS, Security Considerations: «A man-in-the-middle attack can be launched by deleting the “250 STARTTLS” response from the server», e che client e server «MUST be able to be configured to require successful TLS negotiation … for selected hosts».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3207 §4 — «A publicly-referenced SMTP server MUST NOT require use of the STARTTLS extension in order to deliver mail locally. This rule prevents the STARTTLS extension from damaging the interoperability of the Internet\u0026rsquo;s SMTP infrastructure.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7672 — sicurezza SMTP tramite DANE TLS opportunistico, che definisce il record 3 1 1 per la posta e gli attacchi di declassamento a cui resiste.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8461 — SMTP MTA Strict Transport Security (MTA-STS).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8460 — SMTP TLS Reporting (TLS-RPT).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7208 — Sender Policy Framework (SPF), per autorizzare l\u0026rsquo;uso dei domini nella posta, versione 1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6376 — firme DomainKeys Identified Mail (DKIM).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7489 — Domain-based Message Authentication, Reporting, and Conformance (DMARC).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6698 e RFC 7671 — il record TLSA di DNS-Based Authentication of Named Entities (DANE), e l\u0026rsquo;aggiornamento operativo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8617 — Authenticated Received Chain (ARC), che permette a un inoltratore di garantire che l\u0026rsquo;autenticazione era passata prima di lui.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMisurato il 22 ottobre 2026 con DNS in sola lettura verso un resolver che valida (1.1.1.1), e un recupero HTTPS di ogni policy MTA-STS. Per ogni dominio: se ogni host MX pubblica un record AAAA; se la ricerca MX è stata validata (il flag AD); se _25._tcp.\u0026lt;mx\u0026gt; contiene un record TLSA in una zona firmata; la modalità MTA-STS pubblicata; la policy DMARC su _dmarc.\u0026lt;domain\u0026gt;; e il qualificatore all del record SPF sul dominio principale. Non è stato spedito niente a nessuno di questi server.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/email/why-every-mail-setting-has-to-be-right/","summary":"Ogni livello della sicurezza email è progettato per ripiegare sul funzionare invece di fallire in modo sicuro. Togli la riga STARTTLS dal saluto e un mittente opportunistico prosegue in chiaro, cosa che la RFC 3207 descrive come un attacco e che, su un server pubblico, ti vieta di contrastare. Questo articolo cattura quel man-in-the-middle in laboratorio, poi passa in rassegna le sette impostazioni che proteggono un messaggio in transito, mostrando per ognuna cosa protegge, cosa no e come fallisce aperta quando è sbagliata. Da lì a DANE: perché un record TLSA non vale niente senza DNSSEC sotto, perché contano 3 1 1 e il riuso della chiave, e perché un record scaduto è l\u0026rsquo;unico errore che chiude invece di aprire. Poi un censimento in sola lettura di banche britanniche, grandi provider di posta e autorità di certificazione, contando quanti fanno davvero qualcosa di tutto questo.","title":"Perché ogni impostazione della posta deve essere giusta"},{"content":"Installa Postfix dalla tua distribuzione, accetta i valori predefiniti, e hai un server di posta che spedisce la tua posta in chiaro a qualsiasi server che non offre TLS, e accetta posta da chiunque dica di essere chiunque. Il main.cf fornito da Debian imposta entrambi i livelli TLS a may. Niente controlla SPF. Niente controlla DKIM. Un dominio mittente che non esiste viene accettato.\nNon è un bug. È quello che gli standard chiedevano vent\u0026rsquo;anni fa, ed è come gira ancora oggi una grandissima parte dei server di posta su internet.\nQuesto articolo costruisce l\u0026rsquo;altro tipo. Prende le regole della casa dall\u0026rsquo;articolo principale di questa serie e le mette tutte in un Postfix funzionante, con la risposta che ognuna produce quando rifiuta qualcosa. L\u0026rsquo;argomento a favore delle regole sta in quell\u0026rsquo;articolo e non lo ripeterò. Questo è la costruzione.\nRegola Il Postfix di Debian così com\u0026rsquo;è Questa configurazione Cosa ottiene una violazione Niente testo in chiaro in entrata TLS offerto, mai richiesto encrypt su ogni listener 530 5.7.0 Must issue a STARTTLS command first Niente testo in chiaro in uscita TLS se offerto, in chiaro se no encrypt, DANE o MTA-STS dove pubblicati in coda, dsn=4.7.4 o dsn=4.7.5 IPv6 su tutto inet_protocols = all lo stesso, più AAAA su ogni MX ogni test qui sotto è girato su entrambe le famiglie Relay solo con login relay per mynetworks la porta 25 non fa mai relay, 587 e 465 vogliono un login 554 5.7.1 … Relay access denied Un login spedisce come se stesso non controllato envelope e From: entrambi legati al login 553 5.7.1 … not owned by user Il dominio mittente deve esistere non controllato reject_unknown_sender_domain, codice 550 550 5.1.8 … Domain not found SPF fallito, DKIM fallito non controllato Rspamd, con rifiuti forzati 554 5.7.1 SPF hard fail / DKIM signature does not verify Ogni risposta in questo articolo è stata catturata da un server in funzione, su IPv4 e IPv6. Diverse impostazioni si sono rivelate inutili finché non se ne impostava anche un\u0026rsquo;altra. Le ho trovate tutte guardandole non fare niente. Sono segnalate più sotto, perché sono quelle che ti morderanno.\nIl laboratorio Una rete isolata, ogni host su entrambe le famiglie DNS E POLICY rete maillab: 10.89.50.0/24 e fd89:50::/64, interna lab-ns BIND 9.20.30, firma test. .10 e ::10 lab-resolver unbound 1.26.1, valida .11 e ::11 lab-tlspol postfix-tlspol 1.14.4 .25 e ::25 lab-alpha Postfix 3.10.13 alpha.test .20 e ::20 lab-bravo Stalwart 0.16.27 bravo.test .21 e ::21 lab-plain Postfix, senza TLS plain.test .22 e ::22 lab-client swaks, mittente di prova sender.test .50 e ::50 SERVER DI POSTA CA usa e getta per i certificati. Ogni test di questi articoli è girato su entrambe le famiglie. Tutto quello che c\u0026rsquo;è nell\u0026rsquo;articolo è girato prima qui. Niente qui dentro può raggiungere internet, quindi niente qui dentro è nemmeno un\u0026rsquo;ipotesi su internet Componente Versione Compito Postfix 3.10.13, Debian trixie l\u0026rsquo;MX e il server di submission per alpha.test Dovecot 2.4.1 password per i login, ogni protocollo di posta spento Rspamd, Redis 3.12.1, 8.0.2 SPF, DKIM, DMARC, firma DKIM postfix-tlspol 1.14.4 policy in uscita da TLSA e MTA-STS BIND, unbound 9.20.30, 1.26.1 una zona privata test. firmata, e un resolver che la valida Dominio A cosa serve alpha.test il server che costruisce questo articolo bravo.test Stalwart, che ha un articolo tutto suo plain.test il cattivo vicino: zona non firmata, niente STARTTLS sender.test SPF -all, DKIM, DMARC p=reject: per falsificare, manomettere e inoltrare Ogni listener ascolta su entrambe le famiglie, e ogni MX ha un record A e un AAAA. Qui IPv6 non è un extra. Un server di posta senza è un difetto, e dimostrare che questo ce l\u0026rsquo;ha è semplice: esegui ogni controllo due volte.\nFase per fase Una sessione SMTP è una sequenza fissa, e ogni regola di questa configurazione ha un posto naturale in essa. L\u0026rsquo;ordine conta per un motivo: rifiuta appena le prove lo permettono. Un dominio mittente che non esiste si conosce a MAIL FROM, quindi non c\u0026rsquo;è motivo di prendersi il corpo prima di rifiutarlo. Un corpo manomesso si conosce solo dopo DATA, quindi è lì che viene rifiutato.\nDove morde ogni regola, e cosa ha detto il server FASE LA REGOLA, E LA RISPOSTA CATTURATA IN LABORATORIO EHLO STARTTLS AUTH MAIL FROM RCPT TO DATA nessun AUTH offerto prima di TLS smtpd_tls_auth_only = yes saltalo e non viene accettato nient'altro 530 5.7.0 Must issue a STARTTLS command first solo 587 e 465; la porta 25 non ha login 554 5.7.1 Client host rejected: Access denied il dominio mittente deve esistere 550 5.1.8 Sender address rejected: Domain not found il nostro dominio richiede un login 554 5.7.1 Our own domain: send through submission il login deve possedere l'indirizzo 553 5.7.1 not owned by user alice@alpha.test la porta 25 non fa mai relay 554 5.7.1 Relay access denied Rspamd: SPF, DKIM, DMARC 554 5.7.1 SPF hard fail / DKIM does not verify l'intestazione From: deve essere il login 554 5.7.1 You may only send as your own address Postfix trattiene i rifiuti di MAIL FROM fino a RCPT TO, quindi quelle tre risposte arrivano un passo dopo. Ogni regola ha una fase. Rifiuta appena le prove lo permettono Il resto dell\u0026rsquo;articolo segue quelle fasi in ordine: TLS in entrata, TLS in uscita, login e relay, indirizzi mittente, poi cosa fa Rspamd con il corpo.\nNiente testo in chiaro in entrata Una riga:\nsmtpd_tls_security_level = encrypt Un client che prova a saltare STARTTLS non ottiene altro che il rifiuto:\n\u0026lt;- 220 mail.alpha.test ESMTP Postfix -\u0026gt; MAIL FROM:\u0026lt;carol@sender.test\u0026gt; \u0026lt;** 530 5.7.0 Must issue a STARTTLS command first Ora leggi cosa dice il manuale stesso di Postfix su quell\u0026rsquo;impostazione:\nAccording to RFC 2487 this MUST NOT be applied in case of a publicly-referenced SMTP server. Instead, this should be used on dedicated servers, for example submission (port 587).1\nRFC 2487 è il vecchio numero della RFC 3207, e quella regola è il motivo per cui la maggior parte degli host MX su internet accetta ancora posta in chiaro. Io la applico comunque a un MX pubblico. Di proposito. L\u0026rsquo;articolo principale spiega perché penso che la regola sia sbagliata, e il costo è reale: un mittente il cui server non sa fare TLS non ti può raggiungere. Nel 2026 è un server da cui non vuoi ricevere posta.\nNiente testo in chiaro in uscita Questa è la metà che la maggior parte delle guide sbaglia, perché l\u0026rsquo;impostazione ovvia non fa quello che il nome lascia intendere.\nPostfix ha un livello di sicurezza dane. Impostalo e ti aspetteresti che la posta esca autenticata. Non è così. Ecco cosa dice postconf(5) che fa quando l\u0026rsquo;altro capo non pubblica niente:\nWhen DNSSEC-validated TLSA records are not found the effective tls security level is \u0026ldquo;may\u0026rdquo;.2\nmay è TLS opportunistico, che il TLS_README descrive senza giri di parole: «Otherwise, messages are sent in the clear.»3 La maggior parte di internet non pubblica record TLSA. Quindi smtp_tls_security_level = dane da solo significa DANE per la manciata di domini che lo fanno, e testo in chiaro per tutti gli altri il cui server non offre STARTTLS. Opportunistico, con un nome migliore.\nIl rimedio è fare di encrypt il pavimento e alzare ogni destinazione sopra di esso quando pubblica qualcosa di meglio. Ad alzare ci pensa postfix-tlspol. È un piccolo policy server, con licenza MIT, che Postfix interroga per ogni dominio destinatario tramite un socketmap. Cerca prima record TLSA utilizzabili in una zona firmata e poi MTA-STS, e risponde con la policy che Postfix deve usare:\nsmtp_dns_support_level = dnssec smtp_tls_security_level = encrypt smtp_tls_mandatory_protocols = \u0026gt;=TLSv1.2 smtp_tls_policy_maps = socketmap:inet:[fd89:50::25]:8642:QUERYwithTLSRPT Tre policy, e nessuna è in chiaro DOMANDA COSA PUBBLICA IL DOMINIO POLICY USATA DA POSTFIX postfix-tlspol per dominio destinatario, su DNSSEC TLSA utilizzabile in una zona firmata MTA-STS, enforce policy recuperata via HTTPS Nessuno dei due quasi tutta internet dane-only la chiave del server deve combaciare secure match=… certificato CA, solo MX elencati encrypt TLS obbligatorio, non autenticato E QUANDO NON SI PUÒ RISPETTARE, LA POSTA ASPETTA nessuno STARTTLS offerto: dsn=4.7.4 la chiave non combacia: dsn=4.7.5 Il livello dane di serie aggiungerebbe una quarta riga: niente TLSA, spedisci in chiaro. Questa configurazione la lascia fuori Il suo README è preciso su cosa restituisce: farà «Verify TLSA records for correctness and supported parameters, only then the dane-only policy (Mandatory DANE) will be returned.»4 Interrogato sui tre domini del laboratorio, ha detto esattamente questo:\nlevel=INFO msg=\u0026#34;Evaluated policy\u0026#34; origin=network domain=alpha.test policy=dane-only ttl=214 level=INFO msg=\u0026#34;Evaluated policy\u0026#34; origin=network domain=bravo.test policy=dane-only ttl=198 level=INFO msg=\u0026#34;No policy found\u0026#34; origin=network domain=plain.test ttl=1800 Nessuna policy per plain.test vuol dire che Postfix ripiega sul pavimento encrypt, e plain.test non offre STARTTLS. La posta aspetta:\npostfix/smtp[194]: 78598130DA54: to=\u0026lt;someone@plain.test\u0026gt;, relay=mail.plain.test[fd89:50::22]:25, delay=0.02, delays=0.01/0.01/0.01/0, dsn=4.7.4, status=deferred (TLS is required, but was not offered by host mail.plain.test[fd89:50::22]) E il caso che dimostra che DANE sta facendo qualcosa. All\u0026rsquo;inizio della costruzione, Stalwart su bravo.test serviva ancora il suo certificato di avvio, mentre la zona pubblicava il record TLSA di quello vero. Un server con un certificato perfettamente valido, solo non quello per cui il proprietario del dominio aveva garantito:\npostfix/smtp[196]: server certificate verification failed for mail.bravo.test[fd89:50::21]:25: num=65:no matching DANE TLSA records postfix/smtp[196]: 79160130DA56: to=\u0026lt;someone@bravo.test\u0026gt;, relay=mail.bravo.test[10.89.50.21]:25, delay=5.9, delays=0/0.01/5.9/0, dsn=4.7.5, status=deferred (Server certificate not verified) In coda è la risposta giusta in entrambi i casi. Un messaggio in coda viene ritentato per giorni, il che lascia all\u0026rsquo;altra parte il tempo di sistemare le cose, e non si perde niente. Un messaggio spedito in chiaro non si può ritirare. Per questo, aspettare è sempre il fallimento più economico.\nIl resolver fa parte della catena di fiducia smtp_dns_support_level = dnssec fa chiedere a Postfix risposte validate al suo resolver, e poi gli fa credere al bit AD del resolver, il flag che dice «ho controllato le firme». Postfix da solo non valida niente. Si fida. Qualsiasi resolver sia indicato in /etc/resolv.conf adesso decide se la tua posta è autenticata.\nTroverai consigli secondo cui glibc butta via quel bit a meno che resolv.conf non contenga options trust-ad. L\u0026rsquo;ho provato, e su questo Postfix non fa differenza: DANE ha trovato la corrispondenza con l\u0026rsquo;opzione e senza. Il sorgente spiega il perché. Postfix imposta il flag da solo ogni volta che chiede DNSSEC:\nif (DNS_WANT_DNSSEC_VALIDATION(flags)) flags |= (RES_USE_EDNS0 | RES_TRUSTAD); Viene da src/dns/dns_lookup.c.5 Quindi quello che conta non è un\u0026rsquo;opzione del resolver. È a quale resolver punti. Deve validare, e il percorso per arrivarci deve essere uno di cui ti fidi, il che in pratica vuol dire che gira sul server di posta stesso o su una rete che nessun altro può raggiungere. Un resolver pubblico dall\u0026rsquo;altra parte di internet ti imposterà volentieri il bit AD. Lo farà anche chiunque stia tra te e lui.\nDANE: pubblica la chiave, non il certificato Un record TLSA fissa cosa deve vedere un server mittente quando si connette. Quello da usare è 3 1 1, e ognuno dei tre numeri è una scelta:\nCampo Valore Significato Perché questo Usage 3, DANE-EE corrisponde al certificato del server stesso nessuna CA nella catena di cui fidarsi o che possa fallire Selector 1, SPKI hash della sola chiave pubblica sopravvive a ogni rinnovo con la stessa chiave Matching 1, SHA-256 un digest, non la chiave intera ogni client DANE deve supportarlo La RFC 7672 dà il motivo di quella combinazione in una riga:\nthis record type works for all clients and need not change across certificate renewals with the same key.6\nL\u0026rsquo;hash è una sola pipeline, eccola contro il certificato del laboratorio e il record servito dalla zona firmata:\n$ openssl x509 -in mail.alpha.test.crt -noout -pubkey \\ | openssl pkey -pubin -outform DER | sha256sum 093a80cac907a52eb41d17df20163c95f2e15d6702c76f65174d7fc32460c69f - $ dig +dnssec _25._tcp.mail.alpha.test TLSA ;; flags: qr rd ra ad; QUERY: 1, ANSWER: 2, AUTHORITY: 0, ADDITIONAL: 1 _25._tcp.mail.alpha.test. 165 IN TLSA 3 1 1 093A80CAC907A52EB41D17DF20163C95F2E15D6702C76F65174D7FC3 2460C69F Il laboratorio ha dimostrato la parte del «need not change» per caso. A metà strada, i controlli più severi sui certificati di Python 3.13 hanno rifiutato i certificati del laboratorio perché mancava un authority key identifier, quindi sono stati riemessi tutti. Stesse chiavi private, certificati nuovi. Non è cambiato nemmeno un record TLSA, e nemmeno un mittente DANE se n\u0026rsquo;è accorto.\nOra la trappola. Quasi tutti rinnovano i certificati con certbot, in automatico, ogni poche settimane. Dalla documentazione stessa di certbot:\nNot reusing private keys is the default behavior of Certbot.7\nQuindi il rinnovo predefinito crea una chiave nuova ogni volta. Il record TLSA smette di corrispondere, e ogni mittente che controlla DANE comincia a mettere in coda la tua posta il giorno del rinnovo. Dalla tua parte non si rompe niente. Niente te lo dice. Esegui certbot con --reuse-key e il record sopravvive a ogni certificato che ci metti dietro. Quando la chiave deve davvero cambiare, c\u0026rsquo;è un ordine da seguire:\nStessa chiave: niente da fare. Chiave nuova: quattro passi, in ordine RINNOVO SULLA STESSA CHIAVE Rinnova il certificato stessa chiave privata TLSA invariato 093a80… prima e dopo Niente da pubblicare nessuno se ne accorge CAMBIO DI CHIAVE 1. Nuovo TLSA accanto al vecchio 2. Aspetta due TTL le cache tengono il vecchio 3. Cambia la chiave il server presenta la nuova 4. Togli il vecchio solo ora, mai prima Salta il passo 2 e ogni mittente DANE con il vecchio record in cache mette in coda la tua posta finché non scade. Riusa la chiave al rinnovo e il record TLSA sopravvive a ogni certificato che ci metti dietro Il passo due è quello che la gente salta. Il risultato è posta in coda finché il vecchio record non scade da ogni cache, e a metterla in coda sono proprio i mittenti che fanno sicurezza come si deve.\nNessuno fa relay senza login Fare relay vuol dire spedire posta oltre, verso un dominio di cui non sei la destinazione. Un open relay è il modo in cui lo spam viene ripulito usando la reputazione di qualcun altro. Il vecchio modo per chiuderne uno era fidarsi di un intervallo di indirizzi, così tutto ciò che arrivava dalla rete dell\u0026rsquo;ufficio poteva fare relay. È fiducia basata sul posto. Su una rete con WiFi ospiti, utenti VPN e il portatile compromesso di turno, il posto vale pochissimo.\nQuindi nessun indirizzo è fidato tranne la macchina stessa:\nmynetworks = 127.0.0.0/8 [::1]/128 smtpd_relay_restrictions = reject_unauth_destination La porta 25 è per la posta che arriva per questo dominio e nient\u0026rsquo;altro. Non fa mai relay, per nessuno:\n\u0026lt;** 554 5.7.1 \u0026lt;someone@plain.test\u0026gt;: Relay access denied Gli utenti spediscono tramite submission: porta 587 con STARTTLS, o 465 con TLS dal primo byte. Entrambe vogliono un login prima di fare qualsiasi cosa. Dovecot controlla le password, con ogni protocollo di posta spento così non fa nient\u0026rsquo;altro, e Postfix lo interroga tramite un socket. Il listener di submission in master.cf:\nsubmission inet n - y - - smtpd -o smtpd_tls_security_level=encrypt -o smtpd_sasl_auth_enable=yes -o smtpd_tls_auth_only=yes -o smtpd_client_restrictions=permit_sasl_authenticated,reject -o smtpd_sender_restrictions=reject_sender_login_mismatch -o smtpd_relay_restrictions=permit_sasl_authenticated,reject smtpd_tls_auth_only vuol dire che il server non offre nemmeno AUTH finché TLS non è attivo, così una password non attraversa mai il cavo in chiaro. Righe AUTH nella risposta a un EHLO in chiaro: zero. Un client che si connette alla 587 e prova a spedire senza login non va da nessuna parte:\n\u0026lt;** 554 5.7.1 \u0026lt;unknown[fd89:50::50]\u0026gt;: Client host rejected: Access denied Un login possiede i suoi indirizzi Un login dimostra chi sei. Non dice niente su quali indirizzi puoi usare come mittente. Senza quel legame, qualsiasi utente sul server può spedire come il direttore finanziario, e la posta verrà firmata e consegnata come se fosse vera. Postfix lega le due cose con una mappa da indirizzo a proprietario:\nalice@alpha.test alice@alpha.test bob@alpha.test bob@alpha.test postmaster@alpha.test alice@alpha.test reject_sender_login_mismatch sulle porte di submission lo impone sul mittente dell\u0026rsquo;envelope. Collegato come alice, tentando di spedire come bob:\n\u0026lt;** 553 5.7.1 \u0026lt;bob@alpha.test\u0026gt;: Sender address rejected: not owned by user alice@alpha.test Questo copre l\u0026rsquo;envelope. Non copre l\u0026rsquo;intestazione From:, che è l\u0026rsquo;indirizzo che il destinatario vede davvero, e postconf(5) lo dice nelle note proprio su questa restrizione:\nto enforce that the From: header address matches the envelope sender (MAIL FROM) address, use an external filter such as a Milter8\nRspamd qui è già il milter, quindi il controllo dell\u0026rsquo;intestazione è una breve regola Lua che confronta l\u0026rsquo;utente collegato con l\u0026rsquo;indirizzo From:, più un rifiuto forzato sul simbolo che solleva:\nrspamd_config.AUTH_FROM_NOT_LOGIN = { callback = function(task) local user = task:get_user() if not user then return false end local from = task:get_from(\u0026#39;mime\u0026#39;) if not from or not from[1] or not from[1].addr then return true, \u0026#39;no From address\u0026#39; end if string.lower(from[1].addr) ~= string.lower(user) then return true, from[1].addr .. \u0026#39; is not \u0026#39; .. user end return false end, score = 0.0, description = \u0026#39;Authenticated user sent with a From: address that is not their own\u0026#39;, group = \u0026#39;headers\u0026#39;, } Alice che spedisce con MAIL FROM:\u0026lt;alice@alpha.test\u0026gt; e From: bob@alpha.test:\n\u0026lt;** 554 5.7.1 You may only send as your own address Un nome visualizzato va bene, e così un cambio di maiuscole. Alice \u0026lt;ALICE@alpha.test\u0026gt; passa, perché il confronto è sull\u0026rsquo;indirizzo e ignora le maiuscole.\nIl controllo che si spegne da solo Ecco la prima delle impostazioni che in silenzio non fanno niente. Il modo ovvio per impedire agli estranei di falsificare il tuo stesso dominio sulla porta 25 è mettere lì anche i controlli di login-mismatch. Postfix accetta la configurazione, parte, e scrive nel log:\nwarning: restriction `reject_authenticated_sender_login_mismatch\u0026#39; ignored: no SASL support warning: restriction `reject_unauthenticated_sender_login_mismatch\u0026#39; ignored: no SASL support Sulla porta 25 SASL è spento, giustamente, perché lì nessuno fa login. Quindi il controllo viene saltato. La posta viene accettata. L\u0026rsquo;unica prova è un avviso in un log che nessuno legge, e senza quel controllo chiunque su internet potrebbe mandare MAIL FROM:\u0026lt;alice@alpha.test\u0026gt; a questo server e farlo consegnare ai colleghi di alice come se l\u0026rsquo;avesse scritto lei.\nIl rimedio è rifiutare per nome i nostri domini sulla porta 25, perché la posta che parte da noi non arriva mai legittimamente lì:\nsmtpd_sender_restrictions = reject_non_fqdn_sender, reject_unknown_sender_domain, check_sender_access texthash:/etc/postfix/own_domains con own_domains che contiene una riga, alpha.test REJECT Our own domain: send through submission with a login. Provato dall\u0026rsquo;esterno:\n\u0026lt;** 554 5.7.1 \u0026lt;alice@alpha.test\u0026gt;: Sender address rejected: Our own domain: send through submission with a login Domini mittente che non esistono Se il dominio in MAIL FROM non esiste, non gli si potrà mai rispedire niente, e da lì non è mai arrivato niente di legittimo. reject_unknown_sender_domain rifiuta la posta quando quel dominio non ha «no DNS MX and no DNS A record».9 Il codice di risposta predefinito di Postfix per questo è 450, un fallimento temporaneo, che invita il falsario a riprovare più tardi. L\u0026rsquo;ho cambiato in 550.\npostconf(5) è brusco su quell\u0026rsquo;impostazione: «Do not change this unless you have a complete understanding of RFC 5321.»10 Giusto. Ecco il ragionamento. Un 4xx dice al mittente di mettere in coda e riprovare, il che è giusto quando la risposta potrebbe cambiare. Un dominio che adesso non ha record non ne farà spuntare nei prossimi cinque minuti. Postfix separa questo dal caso in cui la risposta non è ancora nota: un errore DNS viene gestito da unknown_address_tempfail_action, che mette ancora in coda. Cambiare il codice cambia solo il caso che ha una risposta.\nIl laboratorio ha provato tutti e tre, più quello che interessa alla regola IPv6. La formulazione di postconf dice «A record», e un dominio il cui unico indirizzo è un record AAAA non deve essere trattato come mancante:\nDominio mittente Il DNS dice Risposta nosuch-lab.co.uk NXDOMAIN 550 5.1.8 \u0026lt;someone@nosuch-lab.co.uk\u0026gt;: Sender address rejected: Domain not found v6only-lab.co.uk solo AAAA, niente A, niente MX accettato dnsfail-lab.co.uk SERVFAIL 450 4.1.8 … Sender address rejected: Domain not found, ritentato dopo sender.test MX, A, AAAA accettato In pratica «A record» comprende AAAA, e un dominio solo IPv6 è al sicuro. Il rifiuto arriva a MAIL FROM, prima che il mittente abbia spedito un solo byte del corpo. Postfix per impostazione predefinita tiene un rifiuto di MAIL FROM fino al primo RCPT TO, quindi la risposta arriva un passo dopo di quanto ti aspetteresti, ed è per questo che il diagramma delle fasi la mostra lì.\nSPF, DKIM e DMARC, con i denti Questi tre sono trattati a dovere nell\u0026rsquo;articolo principale. In una riga ciascuno: SPF dice quali server possono spedire per un dominio, DKIM firma il messaggio così le modifiche si vedono, e DMARC dice cosa fare quando falliscono e se corrispondono al dominio From: visibile. La regola della casa è rifiutare su un SPF hard fail e su una firma DKIM presente che non si verifica. La posta non firmata non è un fallimento DKIM. Di quella si occupa DMARC p=reject sul dominio del mittente.\nRspamd fa tutti e tre in un solo milter, più la firma DKIM della posta in uscita. Postfix gli passa ogni messaggio, e se Rspamd non risponde, la posta aspetta invece di passare senza controlli:\nsmtpd_milters = inet:127.0.0.1:11332 non_smtpd_milters = $smtpd_milters milter_default_action = tempfail Rspamd lavora a punteggi, ed è la prima cosa da capire. Così com\u0026rsquo;è, niente viene rifiutato perché SPF è fallito. Niente. Ogni risultato aggiunge o toglie qualche punto, e il messaggio viene rifiutato quando il totale supera 15. Il modulo force_actions è quello che trasforma un singolo risultato in una decisione:\nrules { SPF_FAIL_REJECT { action = \u0026#34;reject\u0026#34;; expression = \u0026#34;R_SPF_FAIL\u0026#34;; message = \u0026#34;SPF hard fail: this host is not allowed to send for that domain\u0026#34;; } DKIM_FAIL_REJECT { action = \u0026#34;reject\u0026#34;; expression = \u0026#34;R_DKIM_REJECT\u0026#34;; message = \u0026#34;DKIM signature does not verify: the message was changed or forged\u0026#34;; } DMARC_REJECT { action = \u0026#34;reject\u0026#34;; expression = \u0026#34;DMARC_POLICY_REJECT\u0026#34;; message = \u0026#34;DMARC policy of the sender\u0026#39;s domain says reject\u0026#34;; } } Cinque messaggi da sender.test, spediti dal client del laboratorio. Il record SPF permette ip6:fd89:50::50 e nient\u0026rsquo;altro, quindi lo stesso client che spedisce via IPv4 è un server non autorizzato per quel dominio. Che è anche esattamente l\u0026rsquo;aspetto di un messaggio inoltrato:\nCaso Spedito come SPF DKIM DMARC Punteggio Rspamd Risposta A firmato, dall\u0026rsquo;indirizzo IPv6 elencato pass pass pass 3,59 su 15 accettato B firmato, poi coordinate bancarie cambiate pass fail pass 2,30 su 15 554 5.7.1 DKIM signature does not verify C non firmato, da IPv4 fail nessuno reject 5,00 su 15 554 5.7.1 SPF hard fail D firmato e intatto, da IPv4 fail pass pass 2,30 su 15 554 5.7.1 SPF hard fail E non firmato, dall\u0026rsquo;indirizzo IPv6 elencato pass nessuno pass 3,80 su 15 accettato Guarda il caso B. È una fattura con sort code e numero di conto cambiati dopo la firma. Frode sulle fatture, in altre parole. SPF è passato, perché arrivava dal server giusto. DMARC è passato, perché SPF è passato ed era allineato al dominio From:. Sui suoi punteggi Rspamd gli ha dato 2,30 su 15 e l\u0026rsquo;avrebbe consegnato. L\u0026rsquo;unica cosa che l\u0026rsquo;ha fermato è stato il rifiuto forzato sulla firma rotta. DMARC da solo fa passare un messaggio manomesso purché uno dei due controlli sopravviva, e vale la pena saperlo prima di dichiarare protetto un dominio perché il suo DMARC dice reject.\nIl caso D è il costo, e va detto chiaramente. Un messaggio firmato correttamente e intatto viene rifiutato perché arriva da un server che non è nel record SPF. È quello che fa l\u0026rsquo;inoltro: l\u0026rsquo;inoltratore rispedisce il tuo messaggio dal proprio indirizzo. Rifiutare sulla base del solo SPF vuol dire che la posta inoltrata da domini con -all viene respinta. SRS sull\u0026rsquo;inoltratore lo risolve, e lo risolverebbe anche fidarsi di DKIM più che di SPF, ma la regola della casa è la regola della casa, e il costo si mette per iscritto.\nIl default che si fida di ogni rete privata La seconda impostazione che in silenzio non fa niente. Rspamd salta SPF e alcuni altri controlli per gli indirizzi che considera locali, e l\u0026rsquo;elenco fornito in options.inc è questo:\nlocal_addrs = [192.168.0.0/16, 10.0.0.0/8, 172.16.0.0/12, fd00::/8, 169.254.0.0/16, fe80::/10]; Ogni intervallo privato, entrambe le famiglie. Se il tuo MX sta dietro un load balancer, un NAT o un proxy su un indirizzo privato, SPF viene saltato in silenzio per tutto. In laboratorio, che è tutto indirizzamento privato, SPF non è mai fallito finché non ho cambiato questo.\nIl rimedio ovvio non funziona. Rspamd ha due directory per le impostazioni locali, e le sue FAQ spiegano la differenza: local.d «Merges with defaults. Collections and lists are combined», mentre override.d «Replaces defaults.»11 Un elenco più ristretto in local.d/options.inc viene unito a quello fornito, il che vuol dire che non restringe niente. Deve andare in override.d/options.inc:\nlocal_addrs = [127.0.0.0/8, ::1]; e rspamadm configdump options è il modo di controllare cosa ha davvero ottenuto Rspamd, invece di cosa pensi di aver scritto.\nAnche il greylisting è spento in questa configurazione. Manda un rifiuto temporaneo ai mittenti sconosciuti e li accetta al nuovo tentativo, il che ferma un po\u0026rsquo; di spam, ma il greylisting di Rspamd risponde prima che SPF e DMARC abbiano detto la loro, quindi durante i test vedi una messa in coda dove ti aspettavi un verdetto.12 I test qui sopra hanno senso solo con il greylisting spento.\nI tuoi bounce, rifiutati dal tuo stesso DMARC L\u0026rsquo;ultima trappola è saltata fuori quando Stalwart in laboratorio ha rifiutato un bounce da questo server. Postfix spedisce i bounce con un mittente envelope vuoto e From: MAILER-DAEMON@mail.alpha.test. Senza mittente envelope, l\u0026rsquo;unico controllo SPF che resta è sul nome che il server ha dato in HELO, mail.alpha.test, che non aveva un record SPF. Il bounce non era nemmeno firmato. Quindi DMARC è ripiegato sulla policy di alpha.test, ha trovato p=reject, e il server ricevente ha fatto esattamente quello che il dominio gli diceva:\nsmtp.dmarc-fail … domain = \u0026#34;alpha.test\u0026#34;, policy = \u0026#34;reject\u0026#34;, result = DMARC check failed (dmarc.fail) { causedBy = Policy not aligned } La policy del dominio stava buttando via i suoi stessi avvisi di mancata consegna. Ogni nome host MX ha il suo record SPF, e questo lo risolve:\nmail IN TXT \u0026#34;v=spf1 a -all\u0026#34; Sei impostazioni che sembrano fatte Le trappole qui sopra hanno la stessa forma. Ognuna è un\u0026rsquo;impostazione che sembra fatta, non produce errori, e non fa niente.\nSembra fatta Cosa succede davvero Trovata con smtp_tls_security_level = dane testo in chiaro ovunque non sia pubblicato un TLSA la lettura di postconf(5) controlli di login-mismatch sulla porta 25 saltati, un avviso nel log l\u0026rsquo;invio di un falso local_addrs ristretto in local.d unito al default, niente ristretto rspamadm configdump DMARC p=reject sul mittente la posta manomessa passa se passa SPF il caso B rinnovi con certbot chiave nuova, il TLSA smette di corrispondere la lettura della documentazione di certbot DMARC p=reject sul tuo dominio i tuoi stessi bounce rifiutati un bounce rifiutato Due sono nella documentazione, se leggi il paragrafo giusto della pagina giusta. Le altre quattro sono saltate fuori solo spedendo il messaggio che la regola doveva fermare e guardando cosa tornava indietro. Rileggere la configurazione ed essere d\u0026rsquo;accordo con essa non ne ha trovata nessuna. Se da questo articolo ti porti via un\u0026rsquo;abitudine, porta via questa, perché ogni riga qui si può copiare in un server e non funzionare lo stesso.\nI valori predefiniti sono una decisione di qualcun altro Ogni rifiuto in questo articolo è un\u0026rsquo;impostazione che Postfix ha da anni. Persino DANE, la cosa più recente qui, c\u0026rsquo;è dalla 2.11.13 Niente di questo è nuovo, niente è costoso, e il server sotto è lo stesso software libero di sempre. La distanza tra un server di posta che fa passare una fattura alterata e uno che la rifiuta a DATA è una pagina di configurazione e un pomeriggio di test.\nE allora perché così poca internet gira così? Perché decidono i valori predefiniti, e i valori predefiniti sono stati scelti per assicurarsi che la posta passasse su un internet dove TLS era l\u0026rsquo;eccezione. Allora erano una scelta ragionevole. Lasciali come sono adesso e hai consegnato le tue decisioni di sicurezza a una scelta che qualcuno ha fatto nel 2002, per una rete che non esiste più, su posta che non era tua.\nGestire un server di posta è la decisione di essere responsabile di ciò che ci passa. Quelle impostazioni sono la decisione messa per iscritto. I valori predefiniti sono quello che ottieni quando nessuno l\u0026rsquo;ha presa.\npostconf(5): smtpd_tls_security_level — il livello encrypt: «According to RFC 2487 this MUST NOT be applied in case of a publicly-referenced SMTP server.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): smtp_tls_security_level — il livello dane: «When DNSSEC-validated TLSA records are not found the effective tls security level is “may”.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPostfix TLS_README: Opportunistic TLS — «The SMTP transaction is encrypted if the STARTTLS ESMTP feature is supported by the server. Otherwise, messages are sent in the clear.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostfix-tlspol su GitHub — policy server MTA-STS e DANE per Postfix con licenza MIT: «Verify TLSA records for correctness and supported parameters, only then the dane-only policy (Mandatory DANE) will be returned.» Qui è usata la versione 1.14.4.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSorgente di Postfix, src/dns/dns_lookup.c — «Automatically turns on the RES_TRUSTAD flag on systems that support this flag», e il codice che lo fa quando si chiede la validazione DNSSEC.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7672 §3.1.1 — sicurezza SMTP tramite DANE TLS opportunistico. I record TLSA per i server SMTP «should, in most cases, be “DANE-EE(3) SPKI(1) SHA2-256(1)” records».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGuida utente di Certbot, opzioni da riga di comando — --reuse-key: «When renewing, use the same private key as the existing certificate. (default: False)», e sotto --no-reuse-key: «Not reusing private keys is the default behavior of Certbot.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): reject_known_sender_login_mismatch — «to enforce that the From: header address matches the envelope sender (MAIL FROM) address, use an external filter such as a Milter».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): reject_unknown_sender_domain — rifiuta quando il dominio di MAIL FROM ha «no DNS MX and no DNS A record», o un MX malformato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): unknown_address_reject_code — predefinito 450: «Do not change this unless you have a complete understanding of RFC 5321.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFAQ di Rspamd: la differenza tra local.d e override.d — local.d «Merges with defaults. Collections and lists are combined»; override.d «Replaces defaults. Entire sections are overwritten.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nModulo greylisting di Rspamd — «The greylisting module triggers a soft reject action, which is intended to be interpreted by the MTA as a temporary rejection».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPostfix TLS_README: DANE — «Postfix ≥ 2.11 supports the new dane and dane-only security levels».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/email/postfix-dane-done-properly/","summary":"Così com\u0026rsquo;è, Postfix spedisce in chiaro quando l\u0026rsquo;altro capo non offre TLS e accetta posta da chiunque dica di essere chiunque. Questa è l\u0026rsquo;altra configurazione: Postfix 3.10.13 con Dovecot per i login, Rspamd per SPF, DKIM e DMARC, e postfix-tlspol per DANE e MTA-STS. Niente testo in chiaro in entrata o in uscita, la porta 25 non fa mai relay, un login possiede i suoi indirizzi nell\u0026rsquo;envelope e nell\u0026rsquo;intestazione From, i domini mittente che non esistono vengono rifiutati, e un messaggio manomesso o falsificato non supera mai DATA. Ogni risposta è stata catturata in laboratorio su IPv4 e IPv6, insieme alle sei impostazioni che in silenzio non fanno niente finché non se ne imposta anche un\u0026rsquo;altra, al default di certbot che rompe DANE al rinnovo, e a quanto ti costa tutto questo in posta inoltrata.","title":"Postfix, DANE e ogni impostazione fatta come si deve"},{"content":"Gli ultimi due articoli hanno costruito un server di posta che rispetta un insieme di regole, una volta con quattro pacchetti e una volta con un solo binario. Quasi nessuno lo fa. Si paga Microsoft, si punta il dominio su Exchange Online e gli si lascia fare tutto. Quindi la domanda onesta qui non è «come lo costruisco» ma «se ho già pagato la piattaforma su cui gira gran parte del paese, posso farle rispettare le stesse regole?»\nLa risposta, dalla documentazione di Microsoft e da uno sguardo in sola lettura al DNS di tenant reali, è: alcune bene, diverse per niente, e la piattaforma non ti dice quali sono quali. Questa è l\u0026rsquo;edizione Fisher-Price della sicurezza della posta. Gli angoli sono arrotondati, gli attrezzi taglienti sono messi via, e alcuni dei controlli a cui metteresti mano davvero non ci sono da attivare. Ogni affermazione è citata su una pagina Microsoft verificata il 22 ottobre 2026, e ogni risultato DNS è riproducibile con dig.\nIl quadro dei voti Ecco le regole della casa dall\u0026rsquo;articolo principale, /it/email/why-every-mail-setting-has-to-be-right/, confrontate con ciò che Exchange Online permette davvero a un amministratore.\nRegola Exchange Online Verdetto Niente testo in chiaro in ingresso TLS si può pretendere solo per connettore partner, per dominio o IP nominati nessun interruttore per tutto il tenant Niente testo in chiaro in uscita opportunistico di default; il TLS forzato richiede un connettore per destinazione non è il default DANE in uscita attivo di default; esiste una modalità Mandatory, per connettore bene MTA-STS in uscita sempre attivo, validato automaticamente bene IPv6 in ingresso per dominio accettato, opt-out del tenant o di Microsoft fermo nei fatti Scartare domini mittente sconosciuti nessun controllo documentato assente Il relay richiede un login SMTP AUTH, ma basic auth attiva fino a fine 2026, e il relay per IP invia come qualsiasi indirizzo fatto a metà Un login invia come se stesso SMTP AUTH impone Send As; Direct Send non richiede alcuna autenticazione un buco Rifiutare SPF fallito non rifiutato; un\u0026rsquo;impostazione spenta di default lo segna come spam no Rifiutare DKIM fallito nessun controllo rifiuta sulla sola DKIM no DANE + DNSSEC in ingresso GA, ma opt-in, e non sull\u0026rsquo;host che usano tutti i tenant iniziato, incompiuto Cinque di queste sono un no secco o un\u0026rsquo;assenza. La forma è di tre colonne: le cose che decide Microsoft e fa bene, la manciata che ti è permesso attivare, e quelle che semplicemente non ci sono da accendere.\nCosa decide Microsoft, cosa puoi attivare, e cosa non puoi avere DECIDE MICROSOFT, E FA BENE DANE in uscita, attivo MTA-STS in uscita, attivo L'host di posta Il filtro spam Consegna affidabile Non hai mai dovuto chiedere. Era già giusto. PUOI ATTIVARE DMARC del mittente (attivo) TLS obbligatorio a un partner IPv6, per dominio Rifiutare Direct Send (opt-in) Passare all'host firmato Un elenco breve, e quasi tutto opt-in. NON SI PUÒ ATTIVARE TLS in ingresso da tutti Rifiutare un SPF hard fail Rifiutare una DKIM fallita Scartare un mittente ignoto DNSSEC sull'host che usi I controlli che volevi di più. Dietro il vetro. I controlli che vorresti di più contro le minacce dell\u0026rsquo;articolo principale sono quelli nella colonna di destra Continua a leggere per sapere perché ognuno sta dove sta, perché le ragioni sono più gravi dei verdetti.\nCosa fa bene, detto chiaramente Prima il merito, perché è meritato. Sul percorso in uscita, Exchange Online è davvero buono. La validazione DANE è attiva di default dal 2022, la validazione MTA-STS è automatica con «nothing administrators need to do to apply it»,1 e una modalità DANE Mandatory per connettore è arrivata all\u0026rsquo;inizio del 2026.2 È più di quanto la maggior parte dei server gestiti in proprio offra appena installata.\nDANE in ingresso con DNSSEC è diventato disponibile in GA il 28 ottobre 2024, e i record TLSA si validano su un tenant passato al nuovo host.34 Quindi la funzionalità esiste. Il problema è tutto ciò che le sta intorno, che è il resto di questo articolo.\nNiente testo in chiaro in ingresso: non c\u0026rsquo;è l\u0026rsquo;interruttore La prima regola della casa è che il server rifiuta la posta che arriva in chiaro. Su Exchange Online non c\u0026rsquo;è modo di pretenderlo da ogni mittente. Il TLS si può esigere, ma solo su un connettore partner, limitato a domini o intervalli IP nominati, e il parametro «applies only to Partner type connectors».5 Per tutti gli altri il default è opportunistico.6 Puoi pretendere TLS dai tuoi partner nominati. Non puoi pretenderlo da internet in generale, che è proprio l\u0026rsquo;insieme di mittenti di cui parla la regola. Non è documentata l\u0026rsquo;esistenza di alcun controllo per pretendere TLS in ingresso su tutto il tenant.\nScartare domini mittente sconosciuti: non documentato affatto La build con Postfix rifiuta la posta il cui dominio mittente non esiste, al MAIL FROM, prima del corpo. Ho cercato l\u0026rsquo;equivalente in Exchange Online nella documentazione su anti-spam, autenticazione e anti-phishing, e non c\u0026rsquo;è. La cosa più vicina è l\u0026rsquo;autenticazione composita, e Microsoft è esplicita: «a composite authentication failure doesn\u0026rsquo;t directly result in a message being blocked».7 Quindi lo dirò con cautela: Microsoft non documenta alcun controllo che scarti la posta da un dominio mittente inesistente. Se nel filtraggio succede qualcosa di non documentato, da fuori non lo vedo, e non lo vedi nemmeno tu, che è un po\u0026rsquo; il punto.\nRifiutare i fallimenti SPF e DKIM: no, e no Questa è quella che dovrebbe fermare di colpo un amministratore. La regola della casa è rifiutare un messaggio che fallisce SPF in modo netto, o la cui firma DKIM è presente e non si verifica. Exchange Online non fa né l\u0026rsquo;una né l\u0026rsquo;altra cosa alla porta.\nPer SPF c\u0026rsquo;è un\u0026rsquo;impostazione, sepolta nel filtro antispam avanzato. È «Off» di default, e quando è attiva non rifiuta il messaggio: segna la posta da un mittente non elencato «as high confidence spam».8 Rileggilo. La cosa più forte che Exchange Online farà contro qualcuno che falsifica un dominio il cui SPF dice -all è archiviarlo nella posta indesiderata, e anche questo è spento appena installato. Per DKIM non c\u0026rsquo;è proprio niente: nessuna impostazione rifiuta un messaggio solo perché la sua firma non si è verificata. Una firma fallita alimenta DMARC e il punteggio composito, e finisce lì.\nIl rifiuto avviene in un caso: quando il dominio del mittente pubblica DMARC p=reject, Exchange Online lo rispetta di default e rifiuta in fase SMTP con 550 5.7.1.9 Bene, e attivo di default, ma dipende interamente dal fatto che il mittente abbia fatto la cosa giusta. I controlli che le altre build usavano per proteggere la tua posta in ingresso, rifiutare su SPF fallito e rifiutare su firma rotta, non ci sono da attivare.\nIPv6: due anni dopo, l\u0026rsquo;NCSC non è raggiungibile così IPv6 è obbligatorio in questa serie. Exchange Online lo supporta in ingresso, per dominio accettato, dopo un opt-in, e con Microsoft che esclude automaticamente «a small percentage of our customers».10 Quel rollout è stato annunciato a ottobre 2024 come un lavoro da tre a sei mesi. Così ho letto il record AAAA sull\u0026rsquo;host di posta di ventidue organizzazioni britanniche che usano Microsoft 365. Nove, due anni dopo, non ne hanno.\nNiente IPv6 sul loro MX Ha IPv6 hmrc.gov.uk ons.gov.uk ncsc.gov.uk met.police.uk nhs.net cam.ac.uk, ucl.ac.uk, kcl.ac.uk lloydsbank.com jisc.ac.uk, ja.net mod.uk, justice.gov.uk ofcom.org.uk ico.org.uk gov.wales vodafone.co.uk, bt.com sheffield.gov.uk, birmingham.gov.uk La casella del National Cyber Security Centre non è raggiungibile via IPv6, e nemmeno quelle di HMRC, del servizio di posta dell\u0026rsquo;NHS, del Ministero della Difesa, dell\u0026rsquo;Information Commissioner o di Lloyds Bank.4 Se ciascuna sia stata esclusa da Microsoft o non abbia mai aderito, dal DNS non si capisce. Il risultato è lo stesso, e tutte e ventidue sono sul vecchio host di posta che, come stiamo per vedere, non può essere firmato.\nDNSSEC: non previsto per l\u0026rsquo;host che usi davvero Qui la documentazione e il DNS smettono di andare d\u0026rsquo;accordo, ed è la scoperta più netta dell\u0026rsquo;articolo. DANE in ingresso richiede DNSSEC, e DNSSEC richiede che l\u0026rsquo;host di posta stia in una zona firmata. Ogni normale tenant Exchange Online ha il suo MX puntato su un host sotto mail.protection.outlook.com. Ho verificato se quella zona è firmata, e si può dimostrare che non lo è:\n$ dig @1.1.1.1 +dnssec DS protection.outlook.com ;; flags: qr rd ra ad; ANSWER: 0 protection.outlook.com. 60 IN NSEC \\000.protection.outlook.com. NS RRSIG NSEC L'host che usano tutti non può essere firmato; su quello che può, non è passato nessuno DOVE STA OGNI TENANT IL NUOVO HOST, SE MIGRI *.mail.protection.outlook.com Zona non firmata NSEC dimostra: nessun DS Qui DANE non può funzionare Nessun record TLSA da pubblicare Microsoft: nessun piano per firmarla *.mx.microsoft Zona firmata con DNSSEC DS presente, la catena si valida TLSA 3 1 1, DANE funziona Opt-in, modifica MX manuale Nessun tenant UK è passato Una dichiarazione firmata che la delega non è firmata. Quasi tutti i tenant sono a sinistra La zona padre è firmata, e restituisce un record NSEC autenticato che dimostra che non c\u0026rsquo;è alcun DS per protection.outlook.com. È una dichiarazione firmata che la delega non è firmata. Quindi ogni MX *.mail.protection.outlook.com, cioè quasi ogni tenant Microsoft 365 al mondo, sta in una zona non firmata e non può fare DANE.\nLa nuova infrastruttura firmata vive sotto un nome diverso, mx.microsoft, e passarci è una modifica manuale e opt-in. Quanti l\u0026rsquo;hanno fatto? Su circa trentacinque domini britannici che ho campionato, nessuno ci era. I tenant che ho trovato sull\u0026rsquo;host firmato erano tutti olandesi. E il post di Microsoft dell\u0026rsquo;aprile 2026 dice che il piano non è sistemare l\u0026rsquo;host che usano tutti:\nCurrently, there are no plans to enable DNSSEC on the mail flow domain mail.protection.outlook.com.2\nQuindi: DNSSEC e DANE sono disponibili su un nuovo host, se aderisci e migri, e l\u0026rsquo;host su cui sta davvero ogni tenant esistente, per dichiarazione della stessa Microsoft, non sarà firmato. La funzionalità è uscita. Il default non si è spostato, e non si sposterà.\nI due domini più grandi di Microsoft mostrano la divisione, e uno dei due fa peggio dei tenant a cui fa la predica:\nmicrosoft.com outlook.com Host di posta mail.protection.outlook.com olc.protection.outlook.com Zona firmata no no Policy DMARC p=reject p=none MTA-STS enforce enforce IPv6 sull\u0026rsquo;MX sì no outlook.com, il servizio di posta per i consumatori, pubblica DMARC p=none: chiede al mondo di controllare la sua posta e poi di non fare niente in caso di fallimento, che è l\u0026rsquo;impostazione che l\u0026rsquo;articolo principale chiama un\u0026rsquo;alzata di spalle.4 Il dominio aziendale di Microsoft fa meglio. Nessuno dei due host è firmato.\nLa documentazione litiga con se stessa Quando la documentazione di un fornitore si contraddice su un controllo di sicurezza, non è una pignoleria. È un cliente a cui vengono dette due cose incompatibili su qualcosa che decide se la sua posta è al sicuro, e io ci faccio caso come farei con qualunque fornitore pagato per farlo bene. Tre esempi, tutti da pagine pubblicate da Microsoft, tutte online il 22 ottobre 2026.\nCosa Una pagina dice Un\u0026rsquo;altra dice Qualificatore SPF all consigliato -all hard fail consigliato soft fail MX wildcard in MTA-STS pubblica mx: *.mail.protection.outlook.com le wildcard «must not be used» DNSSEC sull\u0026rsquo;host principale promuove DANE e DNSSEC «no plans to enable DNSSEC on mail.protection.outlook.com» La pagina su SPF consiglia -all, «hard fail».11 Il post su Direct Send consiglia «a Soft Fail SPF configuration».12 Sono entrambi attuali, e un cliente che segue l\u0026rsquo;uno viene ripreso dall\u0026rsquo;altro. Su MTA-STS, la pagina sul traffico in ingresso dice a un tenant di pubblicare mx: *.mail.protection.outlook.com, dice sulla stessa pagina che «wildcards or \u0026lsquo;*\u0026rsquo; must not be used as the MX prefix in all MTA-STS scenarios»,1 e poi stampa un esempio che usa esattamente quella wildcard. Non chiedo a Microsoft di inventare niente. Chiedo perché la pagina che spiega a un cliente come proteggere il suo flusso di posta non riesce a mettersi d\u0026rsquo;accordo con se stessa sull\u0026rsquo;unica riga che fa la protezione.\nPoi il buco di Direct Send, che è la regola sull\u0026rsquo;identità, la regola sei, che cede proprio all\u0026rsquo;ingresso.\nUna porta controlla chi sei; l'altra no INVIO AUTENTICATO DIRECT SEND SMTP AUTH, porta 587 Serve un login Send As è imposto Il mittente sbagliato è rifiutato: 5.7.60 … send as this sender La porta che ti controlla Nessuna autenticazione Attivo di default Reject Direct Send è opt-in E controlla solo la busta, mai il From visibile La porta che non lo fa L\u0026rsquo;invio autenticato rifiuta un mittente falso. L\u0026rsquo;altra porta non chiede niente C\u0026rsquo;è un modo per inviare posta dentro un tenant come uno dei suoi utenti senza alcuna autenticazione, perché «does not require any form of authentication»,12 ed è attivo di default. L\u0026rsquo;impostazione per spegnerlo, RejectDirectSend, è spenta di default, controlla solo il mittente della busta e non il From: visibile, e diciotto mesi dopo ha ancora «no fixed date for General Availability».12 Una piattaforma a pagamento ha messo in produzione un modo non autenticato per falsificare il dominio stesso di un tenant, l\u0026rsquo;ha lasciato attivo di default, e la soluzione è un interruttore opt-in senza data di uscita e con un vuoto in ciò che controlla. È il tono che riservo a un fornitore che si difende dicendo che è difficile. Non è difficile. Per questo non farò finta che lo sia. È un default impostato male e lasciato così.\nSi può costruire bene su questo? Per lo più no Ecco quindi il bilancio onesto, e non è che Microsoft 365 sia una cattiva posta. Consegna in modo affidabile, la sua sicurezza in uscita è davvero buona, e per un\u0026rsquo;organizzazione senza competenze di posta è più sicuro del server che altrimenti avrebbe configurato male. Tutto vero, e tutto fuori dal punto che questa serie sta facendo.\nIl punto è il controllo, e sui controlli che contano di più contro le minacce dell\u0026rsquo;articolo principale, Exchange Online non te lo dà. Non puoi pretendere TLS in ingresso da internet, rifiutare un SPF hard fail, rifiutare una firma falsificata, o scartare la posta da un dominio che non esiste. L\u0026rsquo;unica protezione del trasporto che non si può falsificare, DANE con DNSSEC, è spenta sull\u0026rsquo;host su cui sei e non è previsto che ci arrivi. E il buco non autenticato nella porta d\u0026rsquo;ingresso è attivo di default senza una data per chiuderlo.\nEcco cosa vuol dire edizione Fisher-Price. Non che sia per bambini, ma che gli attrezzi taglienti ti sono stati tolti, ti vengono dati quelli arrotondati, e ti dicono che è per il tuo bene. Il che, per tante realtà, è vero. Per tante organizzazioni lo è davvero. Per chiunque abbia letto fin qui e capito a cosa servivano gli attrezzi taglienti, è una piattaforma che ha deciso al posto tuo quali impostazioni di sicurezza puoi toccare. Quelle che volevi di più stanno dietro il vetro.\nLa paghi in ogni caso. Il minimo che puoi fare è sapere quali di queste regole ha deciso, in silenzio, che non puoi rispettare.\nMicrosoft Learn — Enhance mail flow with MTA-STS — validazione MTA-STS automatica in uscita; inoltre «MTA-STS policy files aren\u0026rsquo;t something that Exchange Online can host», e le indicazioni contraddittorie sulle wildcard.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — Modernizing DNS security for Exchange Online mail flow (23 aprile 2026) — le modalità DANE/MTA-STS per connettore, e «Currently, there are no plans to enable DNSSEC on the mail flow domain mail.protection.outlook.com.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — General Availability of Inbound SMTP DANE with DNSSEC (28 ottobre 2024).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDNS verificato il 22 ottobre 2026 con dig @1.1.1.1 +dnssec contro un resolver che valida. protection.outlook.com restituisce un NSEC autenticato che dimostra l\u0026rsquo;assenza di DS (non firmata); mx.microsoft è firmata e i suoi tenant pubblicano record TLSA 3 1 1 che si validano. Record AAAA letti sull\u0026rsquo;host MX *.mail.protection.outlook.com di ventidue organizzazioni britanniche; nove, tra cui ncsc.gov.uk, hmrc.gov.uk, nhs.net e mod.uk, non ne hanno.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — New-InboundConnector — il parametro RequireTLS «applies only to Partner type connectors», limitato da SenderDomains o dall\u0026rsquo;IP del mittente.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Exchange Online uses TLS to secure email connections — «By default, Exchange Online always uses opportunistic TLS», e invia senza cifratura se il destinatario non la offre.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Email authentication in EOP — «a composite authentication failure doesn\u0026rsquo;t directly result in a message being blocked.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Advanced Spam Filter settings — l\u0026rsquo;impostazione «SPF record: hard fail» è «Off» di default e segna la posta corrispondente come spam ad alta confidenza invece di rifiutarla.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Configure DMARC to validate the From address — con Honor DMARC attivo di default, una policy del mittente p=reject è «Rejected during SMTP (550 5.7.1)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — IPv6 updates for Exchange Online (30 ottobre 2024) — il rollout da tre a sei mesi, e l\u0026rsquo;esclusione automatica di «a small percentage of our customers».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Set up SPF — «For Microsoft 365 domains, we recommend -all (hard fail).»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — Introducing more control over Direct Send (28 aprile 2025, modificato il 20 maggio 2026) — Direct Send «does not require any form of authentication»; RejectDirectSend è False di default, controlla solo il mittente della busta, e «There is no fixed date for General Availability»; e il consiglio di un SPF soft fail.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/email/microsoft-365-the-fisher-price-it-edition/","summary":"La maggior parte delle organizzazioni non gestisce un proprio server di posta. Paga Microsoft, ed Exchange Online fa il lavoro. Questo articolo misura Microsoft 365 con esattamente le stesse regole della casa che le build con Postfix e Stalwart hanno rispettato, usando solo la documentazione di Microsoft e il DNS in sola lettura su tenant reali. Alcune regole le rispetta bene: DANE e MTA-STS in uscita sono attivi di default, e DANE in ingresso con DNSSEC è finalmente in GA. Diverse non può rispettarle affatto. Non esiste un modo documentato per pretendere TLS in ingresso da ogni mittente, nessun modo per rifiutare un SPF hard fail alla porta, niente che rifiuti per una firma DKIM fallita da sola, e nessun controllo che scarti la posta da un dominio mittente inesistente. DNSSEC non è esplicitamente previsto per l\u0026rsquo;host di posta che ogni tenant usa davvero. Il rollout IPv6 che doveva durare sei mesi ha lasciato la casella dell\u0026rsquo;NCSC irraggiungibile via IPv6 due anni dopo. E la documentazione si contraddice su wildcard, su SPF e su DNSSEC. Questa è la piattaforma su cui gira gran parte della posta del paese, e questo è ciò che ti lascia fare e ciò che non ti lascia fare.","title":"Microsoft 365: l'edizione Fisher-Price dell'IT"},{"content":"La configurazione Postfix dell\u0026rsquo;ultimo articolo è fatta di quattro pacchetti collegati tra loro, con un socket per il milter, un socket SASL e un socketmap che li tengono al passo. Stalwart fa tutto in un solo binario. Proprio tutto.\nQuattro pacchetti collegati, contro un solo binario QUATTRO PACCHETTI, COLLEGATI UN SOLO BINARIO Postfix 3.10 MTA, TLS, relay Dovecot 2.4 login SASL Rspamd 3.12, Redis SPF, DKIM, DMARC postfix-tlspol 1.14 DANE, MTA-STS socket sasl milter socketmap Stalwart 0.16.27 SMTP in entrata e uscita IMAP e JMAP SPF, DKIM, DMARC, ARC firma DKIM DANE e MTA-STS report TLS il filtro antispam script Sieve l'archivio della posta niente da collegare Quattro pacchetti e i socket tra loro, contro un solo processo che contiene già tutto SMTP, IMAP e JMAP, l\u0026rsquo;archivio della posta, SPF, DKIM, DMARC, ARC, firma DKIM, DANE, MTA-STS, report TLS, un filtro antispam e un motore Sieve, in un solo processo che avvii una volta. Nessun milter da collegare, nessun policy daemon su un socket, nessun secondo pacchetto che deve andare d\u0026rsquo;accordo con il primo. Per ogni regola di questa serie che su Postfix richiedeva uno strumento separato, Stalwart ha già la risposta dentro.\nÈ un vantaggio reale, e questo articolo non finge il contrario. Ma «già dentro» e «sicuro di default» sono affermazioni diverse, e la distanza tra le due è tutto questo articolo. Ho tenuto Stalwart 0.16.27 esattamente alle regole della casa rispettate dalla configurazione Postfix, nello stesso laboratorio, e ho catturato ogni risposta. Le regole si attivano tutte. Attivarle è un altro discorso.\nLe impostazioni sono un database, non un file Parti dalla cosa che sorprende tutti, perché dà forma a tutto il resto. Postfix si configura in main.cf, un file di testo che puoi leggere, confrontare e copiare sul server successivo. Stalwart ha un solo file di configurazione, ed eccolo tutto:\n{\u0026#34;@type\u0026#34;:\u0026#34;RocksDb\u0026#34;,\u0026#34;path\u0026#34;:\u0026#34;/var/lib/stalwart/\u0026#34;} Indica il database. Ogni altra impostazione, i listener, la policy TLS, le regole antispam, gli script Sieve, vive dentro quel database, e la cambi tramite l\u0026rsquo;API JMAP o con stalwart-cli, seguita da un reload:\nstalwart-cli apply --file house-policy.json stalwart-cli create Action/ReloadSettings C\u0026rsquo;è anche un\u0026rsquo;interfaccia web.1 La configurazione è lo stato di un servizio in esecuzione, non un file su disco, e questo taglia in due sensi. Ottieni un\u0026rsquo;API viva e nessun daemon da ricaricare a mano. Perdi quello che un file di testo ti dà gratis: un diff, un commento, un commit, una copia buona nota da ridistribuire. Chi usa Stalwart in modo dichiarativo finisce per tenere sotto controllo di versione il file di piano che apply consuma, che è l\u0026rsquo;istinto giusto, ed è anche esattamente la configurazione su file che all\u0026rsquo;inizio non aveva.\nCosa accetta così com\u0026rsquo;è Prima che entrino le regole, ecco Stalwart che fa quello che fa appena installato. È la base onesta, e non è rassicurante.\nCosì com\u0026rsquo;è, Stalwart… una sessione in chiaro, senza STARTTLS accettata una fattura firmata e manomessa accettata un messaggio che fallisce SPF accettato una falsificazione del suo stesso dominio accettata un dominio mittente che non esiste accettato consegna a un server solo in chiaro spedita in chiaro un open relay sulla porta 25 rifiutato un login con il mittente envelope sbagliato rifiutato un login che falsifica l\u0026rsquo;intestazione From: accettato in uscita verso un certificato non valido, al nuovo tentativo accettato Due di quei rifiuti sono le uniche buone notizie della colonna, e un utente collegato potrebbe comunque falsificare il From: visibile.\nNiente di questo è esclusivo di Stalwart. È lo stesso insieme di default permissivi con cui esce quasi ogni server di posta, per lo stesso motivo vecchio di vent\u0026rsquo;anni, ed è tutto l\u0026rsquo;argomento dell\u0026rsquo;articolo principale di questa serie: /it/email/why-every-mail-setting-has-to-be-right/. Un server che fa tutto non è un server che fa tutto in modo sicuro. Quello resta da configurare a te.\nQuattro posti dove mettere una regola Qui il design a binario unico diventa davvero diverso da usare. Su Postfix, quasi ogni regola in entrata è una riga smtpd_*_restrictions o un milter. Su Stalwart, lo stesso insieme di regole finisce in quattro meccanismi separati, e ti servono tutti e quattro.\nUn binario, quattro posti dove configurare una regola IL MECCANISMO COSA IMPONE, E LA RISPOSTA Listener di rete NetworkListener La submission sulla 587 fa TLS; il relay richiede un login. 503 5.5.1 You must authenticate first. Espressione della fase MAIL MtaStageMail Niente TLS, mittente sconosciuto, o mittente non del login. 550 5.7.1 Sender address not allowed. Tag antispam, su reject SpamTag SPF hard fail, DMARC reject, host mittente che non si risolve. 550 5.7.1 … excessive spam score. Script Sieve di sistema SieveSystemScript DKIM deve verificarsi; il From deve essere il login. 503 5.5.3 … does not verify / send as your own. Un solo binario, ma una regola può essere un\u0026rsquo;impostazione del listener, un\u0026rsquo;espressione, un tag antispam o uno script Sieve Un linguaggio di espressioni, una mappa da tag ad azione e uno script Sieve sono tre sintassi diverse, e questo prima delle impostazioni dei listener. Un binario, quattro cose da imparare. Ma con la policy applicata, le catture si allineano regola per regola con la configurazione Postfix:\nRegola La risposta di Stalwart Niente testo in chiaro in entrata 550 5.7.1 Sender address not allowed. Relay sulla porta 25 550 5.1.2 Relay not allowed. Relay sulla 587 senza login 503 5.5.1 You must authenticate first. Login che spedisce come un altro mittente envelope 501 5.5.4 You are not allowed to send from this address. Login che falsifica l\u0026rsquo;intestazione From: 503 5.5.3 You may only send as your own address Un messaggio firmato, intatto, allineato accettato Un messaggio firmato e manomesso 503 5.5.3 DKIM signature does not verify Un SPF hard fail 550 5.7.1 … excessive spam score. Ogni risposta viene dal server di laboratorio in funzione, su IPv4 e IPv6. Le regole tengono. Ora i tre punti in cui arrivarci mi ha insegnato qualcosa.\nIl fallimento DKIM richiede uno script Sieve, non l\u0026rsquo;impostazione ovvia Stalwart ha un risultato DKIM integrato e un tag antispam per una firma fallita, DKIM_REJECT, e la cosa ovvia è rifiutare su quello. Non coglie il caso che conta. Quando un messaggio firmato ha il corpo modificato in transito, che è il caso della frode sulle fatture a cui tutta la serie continua a tornare, il verificatore DKIM di Stalwart segnala il risultato come neutral, non fail. Leggendo il sorgente di mail-auth, una discrepanza nell\u0026rsquo;hash del corpo finisce nel gruppo neutral, quindi il tag di rifiuto non scatta mai e il messaggio manomesso viene consegnato.2\nQuindi la regola DKIM è invece uno script Sieve, che guarda direttamente il risultato della verifica e rifiuta tutto ciò che non è un pass pulito o una reale assenza di firma:\nif anyof (string :is \u0026#34;${env.dkim.result}\u0026#34; \u0026#34;neutral\u0026#34;, string :is \u0026#34;${env.dkim.result}\u0026#34; \u0026#34;fail\u0026#34;, string :is \u0026#34;${env.dkim.result}\u0026#34; \u0026#34;permerror\u0026#34;) { ereject \u0026#34;DKIM signature does not verify: the message was changed or forged\u0026#34;; stop; } La posta non firmata lascia il risultato vuoto e non viene toccata, perché non firmata non è un fallimento DKIM; di quella si occupa DMARC a p=reject. Con lo script al suo posto, la fattura manomessa viene rifiutata a DATA:\nB REFUSED (503, b\u0026#39;5.5.3 DKIM signature does not verify: the message was changed or forged\u0026#39;) Lo stesso script porta anche la regola sull\u0026rsquo;intestazione From:, perché anche confrontare l\u0026rsquo;intestazione con il login è un lavoro per Sieve. Due regole, uno script, e nessuna delle due è l\u0026rsquo;impostazione a cui penseresti per prima.\nIl controllo sui mittenti sconosciuti è più debole di quanto sembri Su Postfix, un dominio mittente che non esiste viene rifiutato a MAIL FROM, prima che sia spedito un byte del corpo, con un pulito 550 5.1.8 Domain not found. Stalwart arriva allo stesso rifiuto, ma più tardi e in modo più fragile.\nIl controllo è un tag antispam, FROMHOST_NORES_A_OR_MX, che scatta quando il dominio del mittente non risolve in nessun record A e nessun MX. Il rifiuto quindi arriva dopo che è stato ricevuto l\u0026rsquo;intero messaggio, come rifiuto per punteggio antispam:\n550 5.7.1 Message rejected due to excessive spam score. È la risposta giusta per una strada più lunga, e contano due cose. Primo, leggendo il sorgente del filtro antispam, il controllo gira solo quando l\u0026rsquo;indirizzo del mittente supera un test «è valido», dove valido vuol dire che il dominio sta sotto un public suffix noto, quindi un dominio di primo livello inventato salta del tutto il controllo su A e MX. Secondo, ed è quello che morde: la ricerca tratta un errore DNS diversamente da un\u0026rsquo;assenza DNS. Un dominio che risponde SERVFAIL, invece di un pulito «nome inesistente», non riceve nessun tag, e il messaggio viene accettato. Postfix lo mette in coda. Stalwart lo fa entrare. È un fallimento aperto proprio sul caso ambiguo per cui esiste un controllo di sicurezza, e l\u0026rsquo;unico punto di questa configurazione in cui Stalwart è misurabilmente meno sicuro dell\u0026rsquo;equivalente Postfix.\nIPv6 è un ripiego finché non lo cambi IPv6 è obbligatorio in questa serie, nei due sensi. Stalwart ascolta su entrambe le famiglie senza storie. Il tranello è in uscita: la route di serie risolve prima IPv4, quindi una destinazione dual-stack viene raggiunta via IPv4 e IPv6 resta sempre solo un ripiego. Nello stesso laboratorio, Postfix usava IPv6. Stalwart usava v4 finché la route non è stata impostata per preferire v6:\n\u0026#34;ipLookupStrategy\u0026#34;: \u0026#34;v6ThenV4\u0026#34; Dopo di che, la consegna a un server dual-stack passa su IPv6, come confermano i log che raggiungono l\u0026rsquo;indirizzo v6. È una sola impostazione. Non è nemmeno il default, e rispetto all\u0026rsquo;obbligo IPv6 il default è al contrario.\nMTA-STS impone, e respinge troppo presto Stalwart pubblica la sua policy MTA-STS, un tocco davvero carino: non serve un web server separato come nginx per la configurazione Postfix. Ma esce in modalità testing, che non impone niente, e viene servita con il certificato dell\u0026rsquo;host di posta invece che con uno che corrisponda al nome dell\u0026rsquo;host della policy, quindi un recupero che verifica fallisce finché non sistemi entrambe le cose. Imposta la modalità a enforce e carica un certificato per l\u0026rsquo;host mta-sts, e la policy viene servita e controllata a dovere:\nmta-sts.policy-fetch strict = true mta-sts.authorized Anche il lato che spedisce impone, e rifiuta una destinazione la cui policy non elenca il suo MX. Ma rifiuta nel modo sbagliato: una discrepanza è un fallimento permanente al primo tentativo, e il messaggio viene respinto. La RFC 8461 è esplicita sul fatto che non dovrebbe:\nIn all cases, MTAs SHOULD treat such failures as transient errors and retry delivery later.3\nStalwart recupera di nuovo la policy prima di fallire, quindi la regola rigida dello standard, cioè controllare prima se c\u0026rsquo;è una policy nuova, è rispettata. Il SHOULD più morbido, trattare il fallimento come temporaneo e riprovare, no. Il costo è un messaggio respinto dove una messa in coda sarebbe stata più gentile, su un fallimento che di solito è passeggero.\nTLS in uscita: obbligatorio, e poi più forte dove si può Come la configurazione Postfix, il lato in uscita fa di encrypt il pavimento e alza ogni destinazione sopra di esso quando la destinazione se lo merita. Il MtaTlsStrategy di Stalwart imposta un livello per ogni meccanismo, e la policy della casa è:\nMeccanismo Impostazione della casa Effetto STARTTLS require mai spedire in chiaro, a nessuno DANE optional autentica dove è pubblicato un TLSA firmato MTA-STS optional rispetta una policy in enforce dove ne è pubblicata una Certificati non validi spento un certificato che non si verifica mette la posta in coda require su STARTTLS è il pavimento che manca al default di serie: appena installata, la strategia in uscita ripiegava sull\u0026rsquo;accettare un certificato non valido al nuovo tentativo. Con il pavimento impostato, una destinazione che non offre un TLS utilizzabile va in coda, non viene declassata.\nDANE c\u0026rsquo;è, ma il laboratorio non ha potuto dimostrarlo Il controllo in uscita più forte, DANE, è integrato come il resto, e il suo TLS in uscita fallisce chiuso come deve: puntato verso un server di cui non riusciva a verificare il certificato, Stalwart ha rifiutato e trattenuto il messaggio invece di spedirlo in chiaro. Quello che il laboratorio isolato non ha potuto fare è mostrare DANE che riesce, ed è un limite reale che vale la pena registrare.\nStalwart attiva DANE solo quando può validare da solo la chiave della root DNS, tramite una connessione al resolver che non sia UDP semplice. Una root privata di laboratorio non può offrirlo, quindi disattiva DANE e scrive un avviso in un percorso che per default non esiste. Facile da non vedere. Peggio, per una zona firmata segnala poi i record TLSA come «not DNSSEC signed» quando la vera causa è il suo stesso resolver. Il messaggio dà la colpa alla cosa sbagliata.\nStalwart fornisce una diagnostica di consegna in sola lettura proprio per questo: un endpoint che esegue tutto il percorso in uscita e non spedisce mai un messaggio. Trasmette ogni passo mentre procede:\nGET /api/live/delivery/\u0026lt;domain\u0026gt;?timeout=20 Passo Cosa riporta Ricerca MX i server di posta, e se la ricerca è stata validata MTA-STS la policy recuperata, e se l\u0026rsquo;MX è autorizzato TLS-RPT l\u0026rsquo;indirizzo di report che il dominio pubblica TLSA i record DANE, e se sono firmati DNSSEC Connect, EHLO, STARTTLS la sessione fino a TLS, con il cifrario Verifica DANE, QUIT la corrispondenza del certificato, poi una chiusura pulita Niente MAIL FROM, niente RCPT TO, niente consegnato. È il controllo da eseguire contro un vero dominio DANE per vedere il caso positivo che questo laboratorio non può mostrare.\nDimostrare il caso positivo di DANE vuol dire eseguirlo contro veri domini che pubblicano DANE da un\u0026rsquo;istanza collegata a internet. È l\u0026rsquo;unico test di questa serie che un laboratorio isolato non può fare, e il limite onesto di quello che un laboratorio ti può mostrare.\nAllora già dentro è meglio? Ecco la cosa intorno a cui gira tutto l\u0026rsquo;articolo. Già dentro vuol dire meno da installare, meno da collegare, meno da tenere allineato tra le versioni, e c\u0026rsquo;è un valore reale in un solo processo dove il risultato SPF è semplicemente lì per il controllo DKIM ed entrambi sono lì per lo script Sieve, senza socket in mezzo. Per una piccola installazione che vuole una sola cosa da far girare e aggiornare, è davvero una buona risposta, e niente di quello che c\u0026rsquo;è sopra è un motivo per non usarlo.\nMa ogni parte difficile di questa serie è sopravvissuta al trasloco in un solo binario. I default escono ancora permissivi. Le regole vanno ancora trovate e attivate, su quattro meccanismi invece di uno. Il rifiuto dei fallimenti DKIM richiede ancora uno script scritto a mano. Il controllo sui mittenti sconosciuti fallisce ancora aperto su un errore DNS. MTA-STS respinge ancora quando dovrebbe mettere in coda. Niente di questo è diventato più facile perché il codice vive in un solo processo. Sono proprietà del problema, non della confezione.\nMetti in fila le due configurazioni e lo schema è chiaro:\nConfigurazione Postfix Stalwart Parti da far girare 4 pacchetti, 3 socket 1 binario Configurazione main.cf, un file di testo un database, tramite un\u0026rsquo;API SPF, DKIM, DMARC milter Rspamd integrati DANE, MTA-STS in uscita postfix-tlspol integrati Pubblicazione MTA-STS nginx separato integrata Rifiuto fallimento DKIM force action di Rspamd uno script Sieve (il tag integrato non lo coglie) Mittente sconosciuto 550 a MAIL FROM 550 dopo DATA, fallisce aperto su SERVFAIL Discrepanza MTA-STS in uscita mette in coda, ritenta respinge al primo tentativo IPv6 in uscita usato di default ripiego finché non si passa a v6 prima Default così come sono permissivi permissivi Che è la conclusione onesta, la stessa a cui era arrivato l\u0026rsquo;articolo su Postfix per un\u0026rsquo;altra strada. Quello che rende sicura la posta non è il numero di binari. È qualcuno che decide che ogni regola conta, trova dove vive, la attiva, e spedisce il messaggio che dovrebbe fermare per controllare che l\u0026rsquo;abbia fatto. Stalwart ti permette di fare tutto questo, in un solo processo, tramite un\u0026rsquo;API ordinata. Lasciato a se stesso, accetterà anche una sessione in chiaro, un mittente falsificato e una fattura alterata, esattamente come tutto il resto. Il binario è uno. Il lavoro no.\nDocumentazione di Stalwart — configurazione tramite l\u0026rsquo;API di gestione JMAP e stalwart-cli, con le impostazioni conservate nell\u0026rsquo;archivio dati invece che in un file. Qui è usata la versione 0.16.27.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nmail-auth, la libreria che Stalwart usa per DKIM — il suo verificatore DKIM segnala una discrepanza nell\u0026rsquo;hash del corpo come risultato neutral invece che come fallimento, ed è per questo che un rifiuto basato solo sul tag di fallimento non coglie un corpo manomesso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8461 §5 — SMTP MTA Strict Transport Security: su un fallimento nella validazione della policy, «In all cases, MTAs SHOULD treat such failures as transient errors and retry delivery later», e un messaggio «MUST NOT be permanently failed» prima che il mittente abbia controllato se c\u0026rsquo;è una policy aggiornata.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/email/stalwart-dane-and-the-rest-built-in/","summary":"Stalwart è un intero server di posta in un solo binario: SMTP, IMAP e JMAP, SPF, DKIM, DMARC, ARC, DANE, MTA-STS, report TLS, un filtro antispam e l\u0026rsquo;archivio della posta, senza milter da collegare e senza policy daemon da far girare accanto. Questo articolo lo tiene alle stesse regole della casa della configurazione Postfix e cattura ogni risposta in laboratorio. Le regole si attivano tutte, ma la storia sta nei dettagli: le impostazioni vivono in un database invece che in un file, i default così come sono accettano testo in chiaro e una fattura manomessa, ogni regola finisce in uno diverso di quattro meccanismi di configurazione, il rifiuto dei fallimenti DKIM richiede uno script Sieve perché il controllo integrato segnala un corpo manomesso come neutral, il controllo sui mittenti sconosciuti gira solo dopo che è arrivato tutto il messaggio e fallisce aperto su un errore DNS, e il mittente MTA-STS respinge al primo tentativo dove lo standard dice di mettere in coda. Già dentro vuol dire davvero meno cose da collegare. Non vuol dire sicuro di default.","title":"Stalwart: DANE e tutto il resto, già dentro"},{"content":"Una password per tutta la casa Una password WiFi è condivisa da tutto ciò che si è mai collegato. I portatili, i telefoni, la TV, la telecamera del campanello con un firmware che nessuno ha aggiornato da quando è stata montata, l\u0026rsquo;ospite a cui l\u0026rsquo;hai data a Natale, e ogni telefono che quell\u0026rsquo;ospite ha avuto da allora. Stanno tutti sulla stessa rete. Ognuno può parlare con tutti gli altri.\nDividerla nel modo solito vuol dire più SSID. Uno per lo staff, uno per l\u0026rsquo;IoT, uno per gli ospiti, ognuno con la sua password e la sua VLAN. Funziona. Poi una password trapela, e tocca girare per ogni dispositivo di quell\u0026rsquo;SSID con quella nuova, che è esattamente il lavoro che non viene mai fatto.\nUna porta cablata libera è peggio. Nessuna password. Ti colleghi e sei sulla VLAN su cui era impostata la porta.\nL'802.1X con i certificati ribalta la cosa. Ogni dispositivo porta il suo certificato e dimostra cos\u0026rsquo;è prima che passi un solo pacchetto, e poi è la rete, non il dispositivo e non chi ha distribuito la password, a decidere dove va. Un SSID. Ogni porta dello switch uguale. Il portatile finisce sulla VLAN dello staff, la telecamera su quella IoT, e un dispositivo a cui non hai mai rilasciato un certificato non finisce da nessuna parte.\nUna password condivisa Un SSID per VLAN 802.1X, un SSID Chi entra Chiunque abbia la password Chiunque abbia la password di quell\u0026rsquo;SSID Solo un dispositivo con un certificato rilasciato da te Quale VLAN Tutti su una Quella dell\u0026rsquo;SSID a cui si sono collegati Quella che il server RADIUS indica per quel dispositivo Escludere un dispositivo perso Cambiare la password ovunque Cambiare la password di quell\u0026rsquo;SSID ovunque Revocare un certificato Porte cablate Aperte Aperte Stesso controllo del WiFi SSID da trasmettere 1 Uno per VLAN 1 È quello che costruisce questo articolo. step-ca rilascia i certificati e ci scrive dentro il ruolo di ogni dispositivo, FreeRADIUS controlla ogni certificato rispetto alla CA e alla sua lista di revoca, ne legge il ruolo e risponde con una VLAN, e lo switch o l\u0026rsquo;access point mette il dispositivo dove gli è stato detto. L\u0026rsquo;hardware è Netgear o TP-Link, che parla con FreeRADIUS su TLS dove può. Tutto è girato qui prima di avvicinarsi a hardware vero: la CA e il server RADIUS in container, e la porta dello switch e la rete WiFi nei simulatori.\nQuattro parti, e solo una decide L'802.1X definisce tre ruoli1. Il supplicant è il dispositivo che chiede di entrare. L\u0026rsquo;authenticator è la porta dello switch o l\u0026rsquo;access point. L\u0026rsquo;authentication server è RADIUS. Aggiungi la CA che ha rilasciato i certificati e il sistema è tutto lì.\nChi fa cosa in un login 802.1X Dispositivo supplicant Switch o AP authenticator inoltra, non decide FreeRADIUS sceglie la VLAN step-ca certificati e CRL EAP-TLS la porta si apre RadSec VLAN 10 CRL, HTTPS certificato, rilasciato una volta Lo switch o l\u0026rsquo;AP fa solo da tramite. EAP viaggia dal dispositivo a FreeRADIUS dentro EAPOL e poi dentro RADIUS, e la risposta torna indietro con la VLAN in tre attributi. step-ca non vede mai un login: ha firmato i certificati prima e pubblica la lista di revoca. Lo switch e l\u0026rsquo;AP non decidono nulla. Fanno da tramite. Finché il dispositivo non si è autenticato, la porta lascia passare EAP e nient\u0026rsquo;altro. L\u0026rsquo;authenticator incapsula quell\u0026rsquo;EAP in RADIUS, lo manda al server e agisce in base alla risposta. Un Access-Accept apre la porta. Se l\u0026rsquo;Accept porta gli attributi di tunnel, la porta o il client WiFi va sulla VLAN che indicano. L\u0026rsquo;RFC 3580 stabilisce quali sono i tre attributi, presi in prestito dagli attributi di tunnel di RADIUS23:\nAttributo Valore Significato Tunnel-Type VLAN (13) Questo tunnel è una VLAN Tunnel-Medium-Type IEEE-802 (6) Su una rete 802 Tunnel-Private-Group-Id \u0026quot;10\u0026quot; L\u0026rsquo;ID della VLAN, inviato come stringa Quindi la marca dello switch conta meno di quanto penseresti. La decisione sta su una macchina che gestisci tu. Ogni produttore che fa VLAN dinamiche legge gli stessi tre attributi. L\u0026rsquo;RFC dice chiaramente che l\u0026rsquo;ID della VLAN è «encoded as a string»3, ed è per questo che è tra virgolette.\nPerché i certificati, e perché solo TLS 1.3 Esistono diversi metodi EAP, e la maggior parte di quelli in uso è una password avvolta in TLS. Per una persona funziona. Per una telecamera è inutile, perché non c\u0026rsquo;è nessuno che digiti qualcosa, e una password condivisa da mille telecamere è di nuovo la password del WiFi.\nMetodo Cosa identifica il dispositivo Se il dispositivo si fida del server sbagliato Escludere un dispositivo EAP-TLS Il suo certificato e la sua chiave privata Il server vede il certificato, che è comunque pubblico Revocare il certificato PEAP con MS-CHAPv2 Nome utente e password Il server cattura un handshake che si può crackare fino alla password Cambiare la password EAP-TTLS con PAP Nome utente e password Al server viene mandata la password stessa Cambiare la password Quella colonna centrale è il motivo dell\u0026rsquo;EAP-TLS. MS-CHAPv2 è rotto da più di dieci anni. L\u0026rsquo;advisory di Microsoft stessa dice che «an attacker who obtained the MS-CHAP v2 authentication traffic could then use the exploit code to decrypt a user\u0026rsquo;s credentials»4. Avvolgerlo in PEAP lo protegge solo se ogni dispositivo controlla con chi sta parlando, e come mostra la sezione sui dispositivi, molti non lo fanno. Con EAP-TLS nello scambio non c\u0026rsquo;è nessun segreto da rubare. La chiave privata non lascia mai il dispositivo5. Niente da crackare.\nTLS 1.2 manda il certificato via etere L\u0026rsquo;EAP-TLS su TLS 1.2 ha un difetto facile da non vedere. Il dispositivo manda il suo certificato prima che inizi la cifratura. In chiaro. Chiunque ascolti il WiFi lo può leggere, e siccome questo articolo scrive il ruolo del dispositivo nel certificato, può leggere anche quello.\nMisurato qui, cercando il nome del dispositivo e il suo ruolo in ogni messaggio EAP inviato dal dispositivo:\nProva TLS Nome del dispositivo in chiaro Ruolo OU=staff in chiaro Identità laptop1 1.2 Sì Sì Identità laptop1 1.3 Sì, nell\u0026rsquo;identità No Identità anonymous 1.3 No No TLS 1.3 lo risolve. L\u0026rsquo;RFC 9190 dice che con TLS 1.3 «the use of privacy is mandatory and does not cause any additional round trips»6. L\u0026rsquo;identità esterna viaggia ancora in chiaro, quindi non dovrebbe nominare il dispositivo nemmeno lei. L\u0026rsquo;RFC raccomanda un\u0026rsquo;identità anonima6. Qui non serve una vera, perché FreeRADIUS legge chi è il dispositivo dal certificato. Con anonymous all\u0026rsquo;esterno, l\u0026rsquo;ultima riga è quello che ottiene chi intercetta: niente.\nQuindi questa configurazione usa solo TLS 1.3. FreeRADIUS è bloccato su quella versione a entrambi gli estremi. Un dispositivo che non la parla non entra. Ha un costo, e lo si conta nella sezione sui dispositivi invece di nasconderlo. La configurazione di FreeRADIUS stessa ti dice ancora di fermarti a 1.2, in maiuscolo, perché «most EAP supplicants WILL NOT DO TLS 1.3 PROPERLY»7. Va riconosciuto: quella configurazione è la documentazione più onesta di tutto questo articolo, e quasi ogni trappola qui sotto ci è scritta da qualche parte, se leggi i commenti. Su una rete in cui i dispositivi li scegli tu, è un motivo per scegliere dispositivi migliori.\nMettere il ruolo nel certificato La VLAN la decide cos\u0026rsquo;è il dispositivo, e il certificato è il posto dove scriverlo. step-ca ce lo può scrivere con un template, lo stesso meccanismo che l\u0026rsquo;articolo sui certificati client usa per il punto di distribuzione della CRL. L\u0026rsquo;avvio della CA stessa è trattato in step-ca in un container, e qui si riparte da lì con una CA chiamata Home Network CA.\nOgni certificato di dispositivo riceve il suo ruolo nell\u0026rsquo;unità organizzativa (OU) del suo subject. Il template prende il ruolo dalla richiesta e rifiuta tutto ciò che non è nella lista8:\n{{- $roles := list \u0026#34;staff\u0026#34; \u0026#34;iot\u0026#34; \u0026#34;media\u0026#34; }} {{- if not (has .Insecure.User.role $roles) }} {{- fail \u0026#34;role must be one of staff, iot or media\u0026#34; }} {{- end }} { \u0026#34;subject\u0026#34;: { \u0026#34;commonName\u0026#34;: {{ toJson .Subject.CommonName }}, \u0026#34;organizationalUnit\u0026#34;: {{ toJson .Insecure.User.role }} }, \u0026#34;sans\u0026#34;: {{ toJson .SANs }}, \u0026#34;keyUsage\u0026#34;: [\u0026#34;digitalSignature\u0026#34;], \u0026#34;extKeyUsage\u0026#34;: [\u0026#34;clientAuth\u0026#34;], \u0026#34;crlDistributionPoints\u0026#34;: [\u0026#34;http://ca.home.example/1.0/crl\u0026#34;] } Dagli un provisioner tutto suo, così i dispositivi non escono mai da quello generico admin, con un anno come durata massima dei certificati che firma:\nstep ca provisioner add network --type JWK --create \\ --x509-max-dur 8760h --x509-default-dur 24h \\ --x509-template templates/device.tpl --x509-template copia il template dentro ca.json invece di puntare al file, quindi modificare device.tpl dopo non cambia nulla finché non esegui di nuovo step ca provisioner update network --x509-template templates/device.tpl. Poi rilascia il certificato di ogni dispositivo con il suo ruolo:\nstep ca certificate laptop1 laptop1.crt laptop1.key \\ --provisioner network --not-after 8760h --set role=staff $ openssl x509 -in laptop1.crt -noout -subject -ext extendedKeyUsage subject=OU=staff, CN=laptop1 X509v3 Extended Key Usage: TLS Web Client Authentication Un ruolo mancante o sconosciuto non ottiene niente:\n$ step ca certificate norole norole.crt norole.key --provisioner network The request could not be completed: role must be one of staff, iot or media. .Insecure.User si chiama così perché è qualunque cosa mandi chi fa la richiesta. Qui va bene. Il provisioner network ha una password, ce l\u0026rsquo;hai solo tu, e chiunque possa firmare con quello può già fare qualsiasi certificato voglia, quindi un ruolo che si è scritto da solo non gli dà niente in più.\nAnche il server RADIUS ha bisogno di un certificato, così i dispositivi possono controllare con chi stanno parlando. Viene dal provisioner admin come ogni altro certificato di server, e vive le 24 ore predefinite, rinnovato da step ca renew --daemon come fa l\u0026rsquo;articolo su step-ca per ogni servizio che non sa fare ACME. I dispositivi controllano il nome e la CA, non il numero di serie. Un rinnovo quotidiano per loro non cambia niente.\nCertificato Provisioner Durata Extended key usage Contiene radius.home.example admin 24 ore, rinnovato ogni giorno Server e client Il nome che i dispositivi controllano laptop1 network 1 anno Solo client OU=staff cam1 network 1 anno Solo client OU=iot tv1 network 1 anno Solo client OU=media switch1, ap1 nas 1 anno Solo client OU=nas, per RadSec; vedi sotto FreeRADIUS: decidere la VLAN FreeRADIUS 3.2.10, nell\u0026rsquo;immagine container ufficiale del progetto. Tre pezzi di configurazione fanno il lavoro: il modulo EAP, una policy che sceglie la VLAN e una lista di eccezioni.\nIl modulo EAP Solo EAP-TLS, solo TLS 1.3, e la CRL controllata a ogni login:\neap { default_eap_type = tls tls-config tls-common { certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt check_crl = yes ca_path_reload_interval = 300 tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; } tls { tls = tls-common } } File Contiene radius.crt Il certificato del server, poi l\u0026rsquo;intermedio di step-ca, come lo scrive step ca certificate radius.key La sua chiave privata; come tutto qui, leggibile dall\u0026rsquo;utente freerad o FreeRADIUS non parte ca/ La radice, l\u0026rsquo;intermedio e la CRL dell\u0026rsquo;intermedio, con gli hash fatti da openssl rehash ca/ Quella riga centrale ha bloccato il primo avvio qui, anche se non per la chiave: Permission denied sul certificato radice, perché ogni file era uscito dalla CA leggibile solo dal proprietario. FreeRADIUS gira come freerad, quindi tutti e tre devono essere leggibili da quell\u0026rsquo;utente.\ncheck_crl = yes controlla il certificato del dispositivo rispetto alla CRL dell\u0026rsquo;intermedio. Non controlla l\u0026rsquo;intermedio stesso, quindi a differenza di nginx nell\u0026rsquo;articolo sui certificati client, FreeRADIUS non ha bisogno della CRL della radice. check_all_crl lo attiva, se lo vuoi7. ca_path_reload_interval conta più di quanto sembri, e ha una sezione tutta sua più sotto.\nLa policy Ogni certificato che questa CA ha mai rilasciato passerebbe il controllo TLS. Compresi i server web che hanno avuto il loro via ACME. Quindi la policy scarta tutto ciò che non è fatto per questo lavoro: niente uso client-auth, o niente ruolo, e viene rifiutato.\nCome FreeRADIUS sceglie la VLAN Handshake TLS 1.3, CRL Uso client-auth? Nella lista dispositivi? Ruolo nel certificato? Niente ruolo: reject Reject Vince la lista: cam1, VLAN 99 staff, 10 iot, 20 media, 30 sì no nessuno no sì Prima si interroga la lista per dispositivo, che vince quando ha una risposta. Altrimenti è il ruolo nel certificato a scegliere la VLAN. Un certificato senza nessuno dei due viene rifiutato, ed è questo che impedisce ai certificati dei server web della CA di entrare in rete. vlan_by_certificate { if (\u0026amp;TLS-Client-Cert-X509v3-Extended-Key-Usage-OID !~ /1\\.3\\.6\\.1\\.5\\.5\\.7\\.3\\.2/) { reject } device_vlan if (!\u0026amp;reply:Tunnel-Private-Group-Id) { if (\u0026amp;TLS-Client-Cert-Subject =~ /\\/OU=([^\\/]+)/) { switch \u0026#34;%{1}\u0026#34; { case \u0026#34;staff\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;10\u0026#34; } } case \u0026#34;iot\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;20\u0026#34; } } case \u0026#34;media\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;30\u0026#34; } } case { reject } } } else { reject } } update reply { \u0026amp;Tunnel-Type := VLAN \u0026amp;Tunnel-Medium-Type := IEEE-802 } } Quello va in policy.d/vlan, e una riga, vlan_by_certificate, va in cima alla sezione post-auth di sites-available/default. Il post-auth è dove i dettagli del certificato sono disponibili, una volta finito l\u0026rsquo;handshake TLS9.\nLa lista delle eccezioni Il ruolo decide la maggior parte dei dispositivi. Non tutti. La lista è per i pochi che non dovrebbe decidere: una telecamera che ha cominciato a comportarsi in modo strano e va messa in quarantena prima di capire perché, o un dispositivo prestato per una settimana. È un modulo passwd che legge un file a due colonne, con chiave il common name del certificato:\npasswd device_vlan { filename = ${modconfdir}/device_vlan/devices format = \u0026#34;*TLS-Client-Cert-Common-Name:=Tunnel-Private-Group-Id\u0026#34; delimiter = \u0026#34;,\u0026#34; } # certificate CN,VLAN cam1,99 L\u0026rsquo;= davanti all\u0026rsquo;attributo lo mette nella risposta invece che negli elementi di controllo10. Spostare un dispositivo è una riga in un file di testo, senza certificati da rilasciare di nuovo e niente da toccare sul dispositivo.\nVLAN Ruolo Cosa ci sta 10 staff Portatili e telefoni di cui ti fidi 20 iot Telecamere, sensori, tutto ciò che chiama casa 30 media TV e streamer 99 Solo lista Quarantena: al massimo internet, niente di locale Dimostrarlo prima di toccare uno switch eapol_test arriva con wpa_supplicant e fa insieme da dispositivo e da switch, parlando direttamente con il server RADIUS. Usalo per primo. Quando più avanti qualcosa non funziona, saprai quale metà guardare.\nnetwork={ key_mgmt=WPA-EAP eap=TLS phase1=\u0026#34;tls_disable_tlsv1_3=0\u0026#34; identity=\u0026#34;anonymous\u0026#34; ca_cert=\u0026#34;/etc/pki/home/root_ca.crt\u0026#34; domain_match=\u0026#34;radius.home.example\u0026#34; client_cert=\u0026#34;/etc/pki/home/laptop1.crt\u0026#34; private_key=\u0026#34;/etc/pki/home/laptop1.key\u0026#34; } eapol_test -c laptop1.conf -a 192.0.2.10 -s \u0026lt;shared secret\u0026gt; Le risposte, dal log di debug di FreeRADIUS:\n(8) Sent Access-Accept (8) Tunnel-Private-Group-Id = \u0026#34;10\u0026#34; (8) Tunnel-Type = VLAN (8) Tunnel-Medium-Type = IEEE-802 Dispositivo Ruolo nel certificato Nella lista Risposta VLAN laptop1 staff No Accept 10 cam1 iot 99 Accept 99 tv1 media No Accept 30 laptop2 staff, revocato No Reject, certificate revoked Nessuna radius.home.example Nessuno No Reject, niente ruolo Nessuna laptop1 con TLS 1.3 disattivato staff No Reject, protocol version Nessuna L\u0026rsquo;ultima riga va saputa prima di andare in produzione. wpa_supplicant 2.11 ha ancora TLS 1.3 disattivato di default per EAP, descritto come «experimental - disabled by default»11. Togli la riga phase1 e un portatile perfettamente a posto viene rifiutato.\nUna porta di switch, simulata eapol_test salta lo switch. Per vedere la metà dello switch, hostapd ha un driver wired che trasforma un\u0026rsquo;interfaccia Linux in una porta 802.1X. Un cavo virtuale la collega a un wpa_supplicant che fa da portatile, e punta allo stesso FreeRADIUS.\ninterface=port1 driver=wired ieee8021x=1 use_pae_group_addr=1 auth_server_addr=192.0.2.10 auth_server_port=1812 auth_server_shared_secret=\u0026lt;shared secret\u0026gt; Come vede la porta un portatile valido e uno revocato:\nport1: CTRL-EVENT-EAP-SUCCESS2 4a:42:cf:cf:09:5a port1: AP-STA-CONNECTED 4a:42:cf:cf:09:5a port1: STA 4a:42:cf:cf:09:5a IEEE 802.1X: authorizing port port1: CTRL-EVENT-EAP-FAILURE2 de:d8:8c:88:6e:f2 port1: IEEE 802.1X: Force disconnection of de:d8:8c:88:6e:f2 after EAP-Failure in 10 ms Attiva la sua gestione delle VLAN dinamiche e riporta la VLAN che ha ricevuto, vlan=10 per il portatile e vlan=99 per la telecamera in quarantena, poi dice could not add dynamic VLAN interface. È una porta Linux che fa la persona onesta: si può aprire e chiudere, ma non può spostarsi da sola su una VLAN. Uno switch gestito fa quella parte in hardware, ed è la metà che coprono le impostazioni dei produttori più sotto.\nRevoca: la CRL che FreeRADIUS ignora con un HUP Un portatile perso è il caso per cui esiste tutto questo. Revocalo nella CA. Il provisioner admin firma un token di revoca per il numero di serie, che funziona senza la chiave del portatile, perché il portatile non ce l\u0026rsquo;avrai:\nSERIAL=$(step certificate inspect laptop2.crt --format json | jq -r .serial_number) TOKEN=$(step ca token \u0026#34;$SERIAL\u0026#34; --revoke --provisioner admin) step ca revoke \u0026#34;$SERIAL\u0026#34; --token \u0026#34;$TOKEN\u0026#34; --reason \u0026#34;laptop lost\u0026#34; Certificate with Serial Number 306546036599704679037436836531698019860 has been revoked. step-ca ricostruisce subito la sua CRL quando generateOnRevoke è attivo, impostato come mostra l\u0026rsquo;articolo sui certificati client. Copiala nella directory ca/ di FreeRADIUS e il portatile è fuori. Solo che non lo è. È rientrato come se niente fosse.\nCosa si è fatto dopo che la nuova CRL è arrivata su disco Portatile revocato Niente Entra ancora kill -HUP Entra ancora. Il log dice HUP - No files changed. Ignoring Atteso oltre ca_path_reload_interval Rifiutato, certificate revoked Riavviato FreeRADIUS Rifiutato, certificate revoked Un HUP ricarica i file di configurazione, e una CRL in ca_path non è uno di questi, quindi FreeRADIUS controlla la sua lista di file di configurazione, non ne trova nessuno cambiato e va avanti con la vecchia CRL in memoria. Quello che la raccoglie è ca_path_reload_interval. Nella configurazione predefinita è spento. Impostalo sotto i 300 secondi e FreeRADIUS ti scavalca all\u0026rsquo;avvio:\nca_path_reload_interval is set too low, reset it to 300 Quindi 300. Una revoca ha effetto entro cinque minuti dall\u0026rsquo;arrivo della nuova CRL. Scaricala con un timer, come l\u0026rsquo;articolo sui certificati client fa già per nginx, ma in questa directory. Riavvia FreeRADIUS se cinque minuti sono troppi per il dispositivo che hai appena perso.\nLa CRL può anche chiudere fuori tutti in un colpo. Quindi, in entrambi i sensi. Entrambi questi casi sono stati provati con certificati validi:\nStato della CRL Cosa dice FreeRADIUS Chi entra Valida Niente Ogni dispositivo valido Assente da ca/ error 3 : unable to get certificate CRL Nessuno Oltre la data di prossimo aggiornamento error 12 : CRL has expired Nessuno La CRL di step-ca dura 24 ore di default. Se il timer che la scarica si ferma, ogni dispositivo della rete fallisce il giorno dopo. allow_expired_crl esiste per ammorbidire la cosa7. Non usarlo. Una rete che fa entrare tutti perché una lista è scaduta ha smesso di controllare qualsiasi cosa, e per questo la soluzione è sorvegliare il timer, non spegnere il controllo.\nRADIUS è ancora MD5 e un segreto condiviso Tutto quello visto finora protegge la conversazione tra il dispositivo e FreeRADIUS. L\u0026rsquo;EAP-TLS va da capo a capo, e lo switch o l\u0026rsquo;AP in mezzo non lo può leggere. Il pacchetto RADIUS che lo trasporta è un\u0026rsquo;altra faccenda.\nIl RADIUS classico è UDP con un segreto condiviso, e il segreto viene usato tramite MD5, il che conterebbe molto meno se il pacchetto non trasportasse niente di valore, ma l\u0026rsquo;Access-Accept per un client WiFi trasporta le chiavi del traffico di quel client. MS-MPPE-Recv-Key e MS-MPPE-Send-Key sono la chiave master che l\u0026rsquo;AP usa per cifrare il traffico di quel client, e l\u0026rsquo;RFC 2548 le protegge con b(1) = MD5(S + R + A) e uno XOR, dove S è il segreto condiviso12. Lì dentro non c\u0026rsquo;è nessuna forward secrecy. Cattura oggi il traffico RADIUS, ottieni il segreto l\u0026rsquo;anno prossimo da un backup di configurazione o dalla running config di uno switch, e ogni chiave catturata si decifra, insieme al traffico WiFi che proteggeva.\nQuindi la domanda non è se il segreto sia abbastanza lungo. È perché le chiavi della rete wireless attraversino il cavo sotto MD5. Non ce n\u0026rsquo;è bisogno.\nMinaccia RADIUS semplice su UDP Con Message-Authenticator obbligatorio RadSec, TLS 1.3, certificati da entrambe le parti Access-Accept falsificato (BlastRADIUS) Possibile sulle richieste senza EAP, MAB compreso Bloccato Bloccato Chiavi WiFi lette da una cattura Chiunque venga mai a sapere il segreto Uguale Servono le chiavi della sessione TLS, che non vengono mai salvate Una macchina sulla rete di gestione che si spaccia per uno switch Le basta il segreto Uguale Le serve un certificato con il ruolo nas, da un indirizzo noto Chi vede quale dispositivo ha fatto login Chiunque sia sul percorso Uguale Nessuno BlastRADIUS, e la riga che lo ferma BlastRADIUS, CVE-2024-3596, permette a un attaccante sul percorso tra switch e server di trasformare un reject in un accept attaccando l\u0026rsquo;MD5 che firma la risposta13. La correzione è l\u0026rsquo;attributo Message-Authenticator su ogni richiesta e ogni risposta13. L\u0026rsquo;RFC 3579 l\u0026rsquo;ha sempre richiesto su tutto ciò che trasporta EAP14, quindi l\u0026rsquo;EAP-TLS non è mai stato il punto debole. Lo era il MAB, perché un controllo dell\u0026rsquo;indirizzo MAC non trasporta EAP e molti switch lo mandavano senza.\nFreeRADIUS 3.2.10 lo richiede di serie, con require_message_authenticator = yes in radiusd.conf. Provato qui con una richiesta MAB costruita a mano:\nRichiesta Risposta Senza Message-Authenticator Nessuna risposta. Registrata come Packet does not contain required Message-Authenticator attribute Con Message-Authenticator Una risposta, Access-Reject per un MAC sconosciuto Lascia quell\u0026rsquo;impostazione com\u0026rsquo;è. La configurazione avverte che metterla a no insieme a limit_proxy_state «will allow MITM attackers to create fake Access-Accept packets to the NAS»15.\nQuesto chiude la falsificazione. Per le chiavi non fa niente.\nRadSec: RADIUS dentro TLS 1.3 Lo standard più alto disponibile è RadSec, RADIUS trasportato su TLS con un certificato a ciascun capo16. Lo switch o l\u0026rsquo;AP dimostra chi è con un certificato, FreeRADIUS dimostra chi è con il suo, e tutta la conversazione RADIUS, chiavi comprese, sta dentro TLS 1.3 con forward secrecy. L\u0026rsquo;IETF lo sta portando sullo standards track; la bozza che sostituirebbe l\u0026rsquo;RFC sperimentale del 2012 «Has enough positions to pass»17.\nGli switch e gli AP ricevono i certificati da step-ca come tutto il resto, da un terzo provisioner il cui template imprime OU=nas e nient\u0026rsquo;altro, il che vuol dire che un certificato di dispositivo non può servire a spacciarsi per uno switch, e un certificato di switch, che non porta nessun ruolo riconosciuto dalla policy delle VLAN, non può servire nemmeno a entrare in rete.\nlisten { ipaddr = * port = 2083 type = auth proto = tcp virtual_server = default clients = radsec tls { certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt require_client_cert = yes check_crl = yes ca_path_reload_interval = 300 verify { tmpdir = ${run_dir} client = \u0026#34;${raddbdir}/nas-only.sh %{TLS-Client-Cert-Filename}\u0026#34; } tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; } } clients radsec { client switch1 { ipaddr = 192.0.2.21 proto = tls secret = radsec } } #!/bin/sh # Accept a RadSec client certificate only if step-ca issued it with the nas role. openssl x509 -in \u0026#34;$1\u0026#34; -noout -subject -nameopt compat | grep -q \u0026#39;/OU=nas/\u0026#39; Il segreto è davvero la parola radsec. Sul serio. Su TLS non fa niente, e l\u0026rsquo;esempio di FreeRADIUS stesso dice «TLS clients MUST have the shared secret set to “radsec”»18. Due cose che sembrano naturali non funzionano, scoperte entrambe a caro prezzo. check_cert_cn = %{client:shortname} al momento dell\u0026rsquo;handshake si espande a niente, quindi ogni switch viene rifiutato con Certificate CN (switch1) does not match specified value (); da qui lo script verify. E il listener non parte con freeradius -X, che disattiva i thread: Threading must be enabled for TLS sockets to function properly. Fai il debug con freeradius -fxx -l stdout.\nProteggere ogni tratto verso FreeRADIUS FreeRADIUS porta 2083 solo OU=nas Omada, hostapd RadSec integrato RadSec, TLS 1.3 Netgear solo UDP radsecproxy stessa VLAN di gestione UDP + Msg-Auth RadSec step-ca rilascia ogni certificato CRL su HTTPS, radice fissata Dove è protetto ogni tratto. L\u0026rsquo;hardware che parla RadSec va dritto a FreeRADIUS su TLS 1.3. L\u0026rsquo;hardware che parla solo UDP parla con radsecproxy sulla stessa VLAN di gestione, e solo quel breve tratto è RADIUS semplice. La CRL arriva da step-ca su HTTPS con la radice fissata. La porta di switch simulata di prima, rifatta per usare RadSec, contro gli stessi test:\nLo switch presenta Da Risultato switch1, OU=nas Il suo indirizzo in lista TLS 1.3 attivo; laptop1 autorizzato sulla VLAN 10, laptop2 revocato rifiutato Il certificato di laptop1 L\u0026rsquo;indirizzo dello switch Rifiutato nell\u0026rsquo;handshake; lo script verify restituisce 1 switch1, OU=nas Un indirizzo non in lista Ignoring request … from unknown client Quale hardware lo sa fare Authenticator RadSec Note hostapd 2.11 Sì, se compilato con il supporto CONFIG_RADIUS_TLS=y è commentato nel suo defconfig19. Il pacchetto di Alpine lo lascia spento e rifiuta la configurazione: unsupported RADIUS type 'TLS'. Compilato con il supporto, ha funzionato al primo colpo AP e switch TP-Link Omada Dal Controller 6.1, con firmware aggiornato «Added support for RadSec (RADIUS over TLS) to secure SSID, MAC-Based, and 802.1X authentications on both APs and Switches»20 Proxy RADIUS di TP-Link Omada No Il proxy del controller stesso «does not support the RadSec feature»21 Netgear M4250 e M4350 Non documentato Il manuale della CLI non nomina RadSec, e limita il segreto condiviso: «The secret must be an alphanumeric value not exceeding 16 characters»22 AP Netgear WAX e WBE Non documentato I manuali descrivono la porta RADIUS come UDP, e il segreto predefinito come sharedsecret23 Posso chiedere perché uno switch venduto come completamente gestito nel 2026 non sappia parlare con il suo server RADIUS su TLS? Non chi l\u0026rsquo;ha deciso. Cosa nel processo gli ha permesso di uscire così, quando il controller di TP-Link, hostapd e un proxy gratuito lo sanno fare tutti. Sedici caratteri alfanumerici casuali sono circa 95 bit, e non è quello che viene crackato. Il punto è che è l\u0026rsquo;unica protezione offerta: nessuna opzione TLS, uno schema MD5 del 1999 a guardia delle chiavi WiFi, e un AP che esce di fabbrica con il segreto impostato sulla parola sharedsecret. Sull\u0026rsquo;hardware Netgear, radsecproxy non è facoltativo.\nradsecproxy, per l\u0026rsquo;hardware che parla solo UDP Dove lo switch o l\u0026rsquo;AP non sa fare RadSec, mettigli accanto radsecproxy. Riceve RADIUS UDP e manda fuori RadSec24, così il tratto in chiaro sono i pochi metri di VLAN di gestione tra lo switch e il proxy, non tutto il percorso fino al server:\nListenUDP *:1812 tls stepca { CACertificateFile /etc/radsecproxy/root_ca.crt CertificateFile /etc/radsecproxy/radsecproxy.crt CertificateKeyFile /etc/radsecproxy/radsecproxy.key TlsVersion TLS1_3 } client switches { host 192.0.2.32/27 type udp secret \u0026lt;long random secret\u0026gt; RequireMessageAuthenticator on } server freeradius { host radius.home.example port 2083 type tls tls stepca secret radsec certificateNameCheck on } realm * { server freeradius } Usa il nome. Non l\u0026rsquo;indirizzo. Con host 10.89.0.100 il proxy ha rifiutato il server, correttamente: No subjectaltname matching address 10.89.0.100. Con il nome si è collegato come TLSv1.3 with cipher TLS_AES_256_GCM_SHA384, e gli stessi dispositivi hanno avuto le stesse risposte passando da lì: laptop1 VLAN 10, cam1 99, tv1 30, laptop2 rifiutato. Una richiesta senza Message-Authenticator si è fermata al proxy: ignoring request from client switches … missing required message-authenticator.\nTieni onesto quel tratto UDP. Corto, e recintato. L\u0026rsquo;indirizzo di gestione dello switch e il proxy stanno su una VLAN di gestione verso cui nessuna VLAN dei client può instradare, e il firewall lo garantisce.\nAnche il download della CRL La CRL è firmata, quindi nessuno ne può falsificare una. Possono però riproporne una più vecchia ancora valida, che nasconde una revoca fatta nel frattempo. Scaricala da step-ca su HTTPS con la sua radice fissata, invece che su HTTP semplice:\ncurl -fsS --cacert /etc/freeradius/certs/eaptls/ca/root_ca.crt --tlsv1.3 \\ -o /tmp/crl.der https://ca.home.example:9000/1.0/crl Con qualsiasi altra radice lo stesso comando fallisce con l\u0026rsquo;exit 60 di curl, e FreeRADIUS tiene la lista che ha.\nDove sta andando L\u0026rsquo;RFC 9765, RADIUS/1.1, toglie del tutto MD5 da RADIUS quando gira su TLS: «the RADIUS shared secret is no longer used, and all MD5-based packet authentication and attribute obfuscation methods are removed»25. È sperimentale. FreeRADIUS 3.2 ce l\u0026rsquo;ha dietro un flag di compilazione, --with-radiusv11, «for testing interoperability»26, e l\u0026rsquo;immagine ufficiale 3.2.10 non è compilata con quello; l\u0026rsquo;opzione non c\u0026rsquo;è nel binario. RadSec con TLS 1.3 è lo standard più alto che puoi mettere in produzione oggi, e RADIUS/1.1 è dove si va dopo.\nLo switch: Netgear e TP-Link Ogni switch gestito che valga la pena di avere fa 802.1X con VLAN dinamiche, e le impostazioni si riducono alle stesse cinque cose qualunque sia il marchio. La differenza tra questi due sta nei dettagli, e un dettaglio sul lato TP-Link cambia il modo in cui cabli una scrivania.\nImpostazione Netgear M4250 e M4350 Switch TP-Link Omada Server RADIUS Security \u0026gt; Management Security \u0026gt; RADIUS \u0026gt; Server Configuration27 Un RADIUS Profile nel controller Omada28 802.1X attivo Security \u0026gt; Port Authentication \u0026gt; Basic \u0026gt; 802.1X Configuration: Dot1x Admin Mode, Authentication Admin Mode27 Authentication \u0026gt; 802.1X, Authentication Type «Port Based»28 VLAN da RADIUS VLAN Assignment Mode, «The default is Disable»27 «enable \u0026lsquo;VLAN Assignment\u0026rsquo;»28 VLAN mancante Non viene creata se Dynamic VLAN Creation Mode non è attivo, spento anche quello di default27 «the switch will create the related VLAN automatically»29 Porte di accesso Control Mode Auto 802.1X Control mode Auto28 Uplink, porta del server RADIUS, porte degli AP Force Authorized 802.1X lasciato spento: «Keep 802.1X authentication disabled on ports connected to the authentication server, the internet and the management computer»29 In entrambi i casi, crea prima le VLAN sullo switch. Una VLAN che esiste perché l\u0026rsquo;ha evocata un login è una VLAN che nessuno ha configurato, e su cui nessuno ha messo una regola di firewall.\nUna VLAN per porta su TP-Link La guida di TP-Link stessa dice «VLAN Assignment takes effect only when the control type is Port Based»29. Port based vuol dire che il primo dispositivo che si autentica decide la VLAN per tutta la porta. Metti su quella porta uno switch da scrivania o un telefono con un PC collegato attraverso, e il secondo dispositivo entra sulla VLAN del primo senza che nessuno gli chieda mai un certificato, il che su una porta dello staff vuol dire che qualsiasi cosa collegata dietro quel telefono è sullo staff.\nQuindi su TP-Link: un dispositivo per porta di accesso. Niente tra la presa a muro e il dispositivo. La modalità MAC-based di Netgear autentica separatamente ogni dispositivo su una porta; il manuale del GS710TUP la descrive come quella che permette «multiple supplicants connected to the same port»30.\nMAB, per la stampante che non sa fare niente di tutto questo Certo hardware non ha nessun client 802.1X. Il MAC Authentication Bypass permette allo switch di mandare l\u0026rsquo;indirizzo MAC del dispositivo a RADIUS sia come nome utente sia come password, ed entrambi i produttori lo supportano insieme all'802.1X sulla stessa porta. Netgear prova prima l'802.1X e poi ripiega: «if a client tries 802.1X authentication… and authentication fails, the interface proceeds with MAB authentication»27. TP-Link manda il MAC come «12 hexadecimal digits, all lowercase and no punctuation»29.\nUn indirizzo MAC non è un\u0026rsquo;identità. Chiunque può impostare la sua scheda di rete sul MAC della stampante con un comando, da un portatile portato da fuori, stando accanto alla stampante di cui ha appena preso in prestito il cavo. Quindi il MAB ha una lista tutta sua, e la policy gli darà sempre e solo la VLAN IoT o la quarantena:\nmab { if (!\u0026amp;EAP-Message \u0026amp;\u0026amp; \u0026amp;User-Name =~ /^[0-9a-f]{12}$/ \u0026amp;\u0026amp; \u0026amp;User-Password == \u0026amp;User-Name) { mab_vlan if (ok \u0026amp;\u0026amp; \u0026amp;reply:Tunnel-Private-Group-Id =~ /^(20|99)$/) { update control { \u0026amp;Auth-Type := Accept } update reply { \u0026amp;Tunnel-Type := VLAN \u0026amp;Tunnel-Medium-Type := IEEE-802 } } else { reject } } } Questo va per primo in authorize, con un modulo passwd chiamato mab_vlan che legge righe mac,vlan esattamente come la lista dei dispositivi. La policy dei certificati è avvolta in if (\u0026amp;EAP-Message) così lascia stare il MAB. Provato:\nRichiesta MAB Voce in lista Risposta aabbccddeeff 20 Accept, VLAN 20 112233445566 Nessuna Reject ccddeeff0011 10, la VLAN dello staff Reject. La policy non mette un MAC sullo staff, qualunque cosa dica la lista Chi falsifica la stampante ottiene la VLAN della stampante e niente di più. È il massimo che un indirizzo MAC dovrebbe mai comprare.\nLe impostazioni degli switch Omada qui sopra sono state verificate anche su un Omada Software Controller simulato, 6.2.14.11, in un container senza hardware dietro. Le stringhe della sua interfaccia inglese nominano ogni impostazione usata qui: l\u0026rsquo;opzione RadSec, dove «a TLS-encrypted transmission tunnel will be established between the client and the RADIUS server», «Enable VLAN Assignment for Wireless Network», «Require Message-Authenticator», «Limit Proxy-State», e l\u0026rsquo;importazione di certificato e chiave del client per RadSec. Un controller configura; non fa passare traffico, quindi questo dimostra che le impostazioni esistono in quella versione e niente di più. Netgear non ha niente di equivalente da far girare, quindi la sua colonna viene dai manuali di Netgear stessa e qui non è stata provata.\nL\u0026rsquo;access point: un SSID, ogni VLAN L\u0026rsquo;access point è dove l\u0026rsquo;SSID unico ripaga. Una rete WPA-Enterprise, e ogni client viene messo sulla VLAN che RADIUS indica per lui. L\u0026rsquo;AP etichetta il traffico di quel client con la sua VLAN e lo manda su per il cavo, quindi la porta dello switch che alimenta l\u0026rsquo;AP deve trasportare, taggata, ogni VLAN che RADIUS potrebbe assegnare. Dimenticane una e il dispositivo si autentica perfettamente e non ottiene mai un indirizzo.\nUn SSID, simulato Prima di fidarsi della parola di uno dei due produttori, tutto è girato su radio simulate. Il mac80211_hwsim di Linux crea schede WiFi virtuali che fanno WPA-Enterprise vero. Il kernel di questa macchina non include il modulo, quindi il test ha avviato lo stesso kernel in una piccola macchina virtuale KVM e l\u0026rsquo;ha caricato lì, dal pacchetto firmato di Fedora stessa, con hostapd 2.11 come access point e tre stazioni wpa_supplicant nei loro network namespace31:\ninterface=wlan0 driver=nl80211 ssid=Home ieee8021x=1 wpa=2 wpa_key_mgmt=WPA-EAP rsn_pairwise=CCMP ieee80211w=1 auth_server_addr=192.0.2.10 auth_server_port=1812 auth_server_shared_secret=\u0026lt;shared secret\u0026gt; dynamic_vlan=2 vlan_tagged_interface=trunk0 vlan_bridge=brvlan dynamic_vlan=2 vuol dire «obbligatorio»: un login senza VLAN nella risposta viene rifiutato invece che lasciato su una VLAN predefinita. Ogni stazione ha fatto login come anonymous su TLS 1.3, e il log dell\u0026rsquo;AP stesso mostra cosa gli ha detto RADIUS:\nwlan0: STA 02:00:00:00:01:00 RADIUS: VLAN ID 10 wlan0: STA 02:00:00:00:02:00 RADIUS: VLAN ID 99 wlan0: STA 02:00:00:00:03:00 RADIUS: VLAN ID 30 WPA: group state machine entering state GTK_INIT (VLAN-ID 10) WPA: group state machine entering state GTK_INIT (VLAN-ID 30) WPA: group state machine entering state GTK_INIT (VLAN-ID 99) Un SSID, tre VLAN laptop1 OU=staff cam1 nella lista tv1 OU=media Access point SSID «Home» VLAN 10, chiave A VLAN 99, chiave B VLAN 30, chiave C Switch porta trunk 10, 30, 99 taggate un solo cavo Un SSID, tre dispositivi, tre VLAN. L\u0026rsquo;AP mette ogni client sulla sua interfaccia VLAN con la sua chiave di gruppo, e manda tutte e tre su per un unico trunk taggato. La porta dello switch che alimenta l\u0026rsquo;AP deve trasportare ogni VLAN che RADIUS può indicare. Stazione Certificato VLAN Bridge Il suo gateway La VLAN della TV laptop1 OU=staff 10 brvlan10 Raggiungibile Nessuna risposta cam1 OU=iot, nella lista 99 brvlan99 Raggiungibile tv1 OU=media 30 brvlan30 Raggiungibile Le righe della chiave di gruppo sono la parte che la gente si perde. I frame broadcast e multicast sul WiFi sono cifrati con una chiave di gruppo condivisa da tutti sulla rete, e se le tre VLAN ne condividessero una, la telecamera potrebbe leggere via etere i broadcast del portatile, qualunque cosa pensi lo switch. hostapd tiene una chiave di gruppo separata per ogni VLAN, e il log mostra che ne avvia una per ciascuna. La stessa prova in WPA3-Enterprise, WPA-EAP-SHA256 con la protezione dei frame di gestione obbligatoria, ha dato le stesse tre VLAN e le stesse tre chiavi di gruppo.\nImpostazione Netgear WAX e WBE TP-Link Omada EAP Sicurezza WPA2 Enterprise o WPA3 Enterprise WPA2-Enterprise o WPA3-Enterprise, compresa una modalità esclusiva con CCMP-128 VLAN da RADIUS Dynamic VLAN, Enable23 «Enable VLAN Assignment for Wireless Network»28 Nessuna VLAN nella risposta Il client va sulla VLAN dell\u0026rsquo;SSID stesso23 Non documentato; qui FreeRADIUS non manda mai un Accept senza Trasporto RADIUS Solo UDP, quindi radsecproxy RadSec dal Controller 6.1 con firmware aggiornato20 Due dettagli di Netgear vanno saputi prima che facciano male. A un client a cui il server RADIUS non dà nessuna VLAN viene «automatically assigned the VLAN ID that you configured for the SSID»23, quindi imposta la VLAN dell\u0026rsquo;SSID sulla quarantena, non sullo staff; qui FreeRADIUS ne manda sempre una, ma il ripiego deve comunque fallire chiudendo. E la VLAN dinamica «is mutually exclusive with a captive portal, NAT mode, wireless client isolation, and a multicast DNS (mDNS) gateway»23, quindi un portale ospiti sullo stesso SSID è escluso.\nWPA3-Enterprise sul WAX620 è la modalità a 192 bit: «the encryption is automatically set to GCMP256»32, con la protezione dei frame di gestione obbligatoria. I client che non sanno fare GCMP-256 non ci entrano. Prova il tuo dispositivo più vecchio prima di passare, come per TLS 1.3.\nI dispositivi, e il controllo che tutti saltano Ogni dispositivo ha bisogno di tre cose: il suo certificato e la sua chiave, il certificato radice, e il nome del server RADIUS che deve aspettarsi. La maggior parte delle guide copre le prime due. Lascia fuori qualcosa nella terza e funziona lo stesso, ed è proprio questo il problema.\nLa terza è quella che impedisce a un dispositivo di fidarsi del server sbagliato. Qui un server RADIUS falso è stato messo in piedi due volte: una con un certificato perfettamente valido della stessa CA, rilasciato a ha.home.example, e una con un certificato autofirmato. Un portatile è stato puntato verso ciascuno con tre impostazioni client diverse:\nIl client controlla Server vero Stessa CA, altro nome Autofirmato La CA e il nome del server Si collega Rifiutato, Domain mismatch Rifiutato Solo la CA Si collega Si collega Rifiutato Niente Si collega Si collega Si collega Guarda la riga centrale. La tua CA firma un certificato per ogni server web della casa. Un dispositivo che controlla solo la CA si fiderà di uno qualsiasi di loro come suo server RADIUS, quindi chiunque metta le mani su una di quelle chiavi, da una macchina di test dimenticata o da un server web che nessuno ha aggiornato, può tirare su un access point con il tuo SSID e i tuoi dispositivi ci si collegheranno senza fiatare. Con EAP-TLS non consegnano nessuna password, ma sono sulla rete dell\u0026rsquo;attaccante e si fidano di lei. TLS 1.3 non cambia questo; le stesse tre righe sono tornate anche con 1.3. Solo il controllo del nome lo fa.\nAndroid ci è arrivato per primo. L\u0026rsquo;opzione «Do not validate» è stata tolta «for security reasons»33, anche se precisa che «saved enterprise configurations that are set up to turn off server certificate validation aren\u0026rsquo;t affected»33. Un telefono vecchio può portarsene dietro una.\nLinux (NetworkManager) macOS, iOS, iPadOS Android Certificato e chiave 802-1x.client-cert, 802-1x.private-key Payload Identity in un profilo di configurazione Installato come certificato Wi-Fi Certificato radice 802-1x.ca-cert Payload Certificate, considerato affidabile tramite PayloadCertificateAnchorUUID34 Campo del certificato CA Nome del server 802-1x.domain-match35 TLSTrustedServerNames34 Campo Dominio; setDomainSuffixMatch nell\u0026rsquo;API36 TLS 1.3 802-1x.phase1-auth-flags tls-1-3-enable TLSMinimumVersion e TLSMaximumVersion \u0026quot;1.3\u0026quot;; il massimo predefinito è \u0026quot;1.2\u0026quot;34 setMinimumTlsVersion(TLS_V1_3), dall\u0026rsquo;API level 34, dove il dispositivo lo supporta36 Su Linux è tutto un comando. È stato verificato con nmcli --offline, che stampa la connessione che creerebbe senza toccare il sistema in esecuzione:\nnmcli connection add type wifi con-name Home ifname \u0026#39;*\u0026#39; ssid Home \\ wifi-sec.key-mgmt wpa-eap 802-1x.eap tls 802-1x.identity anonymous \\ 802-1x.ca-cert /etc/pki/home/root_ca.crt \\ 802-1x.domain-match radius.home.example \\ 802-1x.client-cert /etc/pki/home/laptop1.crt \\ 802-1x.private-key /etc/pki/home/laptop1.key \\ 802-1x.private-key-password-flags not-required \\ 802-1x.phase1-auth-flags tls-1-3-enable Per una porta cablata è lo stesso con type ethernet e senza SSID. Il massimo di TLS di Apple che di default è 1.2 è la trappola da quella parte: un profilo che lo omette produce un Mac che questa rete rifiuta.\nQuanto costa usare solo TLS 1.3 Il limite onesto di questa configurazione sono i dispositivi che non ci arrivano. Una telecamera o una TV con un supplicant integrato di anni fa può riuscire a fare EAP-TLS su 1.2 e mai su 1.3, e non c\u0026rsquo;è nessuna impostazione dalla tua parte che lo risolva. La versione TLS viene concordata prima che FreeRADIUS abbia visto il certificato, quindi non può fare un\u0026rsquo;eccezione per il ruolo IoT.\nQuindi prova ogni dispositivo prima di comprarlo. Non dopo. Puntalo verso un FreeRADIUS solo 1.3 e leggi il log: recv TLS 1.3 Handshake, ClientHello o protocol version ti dice tutto quello che serve. Un dispositivo che fallisce va su una porta cablata con il MAB, oppure non va in rete. Indebolire tutta la rete per adattarla alla cosa peggiore che c\u0026rsquo;è sopra è il modo in cui è nata la password condivisa.\nLa configurazione completa, file per file Tutto quello che c\u0026rsquo;è sopra è ridotto alle righe che dimostrano ciascun punto. Questo è il pacchetto intero. Ogni file qui è girato in laboratorio, da uno step-ca vuoto e un albero FreeRADIUS di serie fino a un portatile sulla VLAN 10, e le copie qui sotto sono quegli stessi file con gli indirizzi del laboratorio sostituiti da quelli della tabella. Prendili in un unico download, eap-tls-configs.tar.gz, o un file alla volta dai link.\nNome Indirizzo Cos\u0026rsquo;è ca.home.example Solo per nome step-ca, porta 9000 radius.home.example 192.0.2.10 FreeRADIUS, RadSec sulla 2083 radsecproxy 192.0.2.11 radsecproxy, UDP in entrata, RadSec in uscita switch1, ap1 192.0.2.21, 192.0.2.31 Hardware che parla RadSec Hardware solo UDP Da 192.0.2.32 a .63 Tramite radsecproxy; l\u0026rsquo;AP Linux più sotto è ap2 sul .33 File Va in Il suo compito step-ca/templates/device.tpl /home/step/templates/ nella CA Ruolo nell\u0026rsquo;OU, solo autenticazione client step-ca/templates/nas.tpl /home/step/templates/ nella CA OU=nas, per RadSec step-ca/setup.sh Da eseguire una volta nella CA Aggiunge i provisioner network e nas step-ca/issue.sh Da eseguire dove step si fida della CA Ogni certificato, e la procedura di revoca freeradius/install.sh Da eseguire da freeradius/ Mette a posto il resto freeradius/mods-available/eap RADDB/mods-available/ EAP-TLS, TLS 1.3, CRL controllata freeradius/mods-available/device_vlan RADDB/mods-available/ Legge la lista per dispositivo freeradius/mods-available/mab_vlan RADDB/mods-available/ Legge la lista MAB freeradius/mods-config/device_vlan/devices RADDB/mods-config/device_vlan/ Nome del certificato verso VLAN freeradius/mods-config/device_vlan/mab RADDB/mods-config/device_vlan/ Indirizzo MAC verso VLAN freeradius/policy.d/vlan RADDB/policy.d/ Sceglie la VLAN per un certificato freeradius/policy.d/mab RADDB/policy.d/ Sceglie la VLAN per un MAC, solo 20 o 99 freeradius/sites-available/default.patch Applicato a RADDB Chiama le due policy freeradius/sites-available/tls RADDB/sites-available/ Listener RadSec e i suoi client freeradius/nas-only.sh RADDB/ Fa entrare solo i certificati OU=nas freeradius/clients.conf RADDB/ UDP per i test sulla macchina stessa systemd/radius-crl-refresh /usr/local/sbin/ Scarica e controlla la CRL systemd/radius-crl-refresh.service /etc/systemd/system/ Lo esegue systemd/radius-crl-refresh.timer /etc/systemd/system/ Ogni ora systemd/radius-cert-renew.service /etc/systemd/system/ Rinnova il certificato del server radsecproxy/radsecproxy.conf /etc/radsecproxy.conf UDP in entrata, RadSec in uscita hostapd/hostapd-wired.conf /etc/hostapd/ Una porta di switch 802.1X Linux hostapd/hostapd-wifi.conf /etc/hostapd/ Un access point Linux, un SSID clients/wpa_supplicant-wired.conf Il dispositivo Login cablato clients/wpa_supplicant-wifi.conf Il dispositivo Login WiFi clients/nmcli.sh Il dispositivo Lo stesso, tramite NetworkManager FreeRADIUS sta in un posto diverso su ogni distribuzione, e ai suoi file non importa quale, perché ogni percorso al loro interno è costruito a partire dalla directory di configurazione. install.sh prende quella directory come RADDB. È stato eseguito su tutte e tre quelle qui sotto, e il controllo di configurazione di FreeRADIUS stesso, -XC, è passato su ognuna. Solo l\u0026rsquo;immagine ufficiale è poi andata avanti a eseguire tutti i test di questo articolo; sulle altre due quel controllo è tutta la prova, in un container, quindi SELinux su una vera macchina Fedora non ne faceva parte.\nImmagine ufficiale Debian 13 Fedora FreeRADIUS 3.2.10 3.2.7 3.2.8 RADDB /etc/freeradius /etc/freeradius/3.0 /etc/raddb Gira come freerad freerad radiusd Servizio Il container freeradius radiusd Provato Tutto quello in questo articolo install.sh e -XC install.sh e -XC Le due unit systemd nominano /etc/freeradius e il servizio freeradius. Su Debian o Fedora, cambia entrambi secondo la tabella. Nient\u0026rsquo;altro si sposta.\nstep-ca Il template dei dispositivi è quello di Mettere il ruolo nel certificato, riga per riga, con un commento in cima. Il template nas è la stessa idea con il ruolo fisso:\nstep-ca/templates/nas.tpl\n{{- /* Certificates for switches, access points and radsecproxy, used for RadSec. OU=nas is what FreeRADIUS checks for; it maps to no VLAN, so a nas certificate cannot get a device on the network. */ -}} { \u0026#34;subject\u0026#34;: { \u0026#34;commonName\u0026#34;: {{ toJson .Subject.CommonName }}, \u0026#34;organizationalUnit\u0026#34;: \u0026#34;nas\u0026#34; }, \u0026#34;sans\u0026#34;: {{ toJson .SANs }}, \u0026#34;keyUsage\u0026#34;: [\u0026#34;digitalSignature\u0026#34;], \u0026#34;extKeyUsage\u0026#34;: [\u0026#34;clientAuth\u0026#34;], \u0026#34;crlDistributionPoints\u0026#34;: [\u0026#34;http://ca.home.example/1.0/crl\u0026#34;] } setup.sh aggiunge entrambi i provisioner. Eseguilo una volta dentro il container di step-ca. Chiede una password per ciascuno, e il blocco CRL che stampa va messo a mano in ca.json:\nstep-ca/setup.sh\n#!/bin/sh # Run inside the step-ca container, as the step user, once. # Adds the two provisioners this post uses. Each asks for a password for # its own key; keep both. set -e step ca provisioner add network --type JWK --create \\ --x509-max-dur 8760h --x509-default-dur 24h \\ --x509-template /home/step/templates/device.tpl step ca provisioner add nas --type JWK --create \\ --x509-max-dur 8760h --x509-default-dur 24h \\ --x509-template /home/step/templates/nas.tpl # Then add this block at the top level of /home/step/config/ca.json and # restart the container: # # \u0026#34;crl\u0026#34;: { # \u0026#34;enabled\u0026#34;: true, # \u0026#34;generateOnRevoke\u0026#34;: true, # \u0026#34;cacheDuration\u0026#34;: \u0026#34;24h\u0026#34;, # \u0026#34;idpURL\u0026#34;: \u0026#34;http://ca.home.example/1.0/crl\u0026#34; # } issue.sh crea ogni certificato di questo articolo, e tiene la procedura di revoca della sezione sulla revoca come commento per il giorno in cui ti serve. Anche quella procedura è stata eseguita su questa CA, su un laptop2 creato apposta:\nstep-ca/issue.sh\n#!/bin/sh # Issue the certificates. Run anywhere the step CLI trusts the CA. set -e # The RADIUS server: default 24 hours, renewed daily by radius-cert-renew.service. step ca certificate radius.home.example radius.crt radius.key --provisioner admin # Devices: a year each, the role decides the VLAN. step ca certificate laptop1 laptop1.crt laptop1.key --provisioner network --not-after 8760h --set role=staff step ca certificate cam1 cam1.crt cam1.key --provisioner network --not-after 8760h --set role=iot step ca certificate tv1 tv1.crt tv1.key --provisioner network --not-after 8760h --set role=media # Switches, APs and radsecproxy, for RadSec. step ca certificate switch1 switch1.crt switch1.key --provisioner nas --not-after 8760h step ca certificate ap1 ap1.crt ap1.key --provisioner nas --not-after 8760h step ca certificate radsecproxy radsecproxy.crt radsecproxy.key --provisioner nas --not-after 8760h # A lost device: revoke by serial, no key needed. # SERIAL=$(step certificate inspect laptop2.crt --format json | jq -r .serial_number) # TOKEN=$(step ca token \u0026#34;$SERIAL\u0026#34; --revoke --provisioner admin) # step ca revoke \u0026#34;$SERIAL\u0026#34; --token \u0026#34;$TOKEN\u0026#34; --reason \u0026#34;laptop lost\u0026#34; FreeRADIUS Esegui install.sh dalla directory freeradius del download. Copia dentro i file, applica la patch al sito predefinito e crea i link. È tutto quello che fa:\nfreeradius/install.sh\n#!/bin/sh # Puts these files into a stock FreeRADIUS 3.2 tree. Run from this # directory. RADDB is /etc/freeradius on the official image, # /etc/freeradius/3.0 on Debian and Ubuntu, /etc/raddb on Fedora. set -eu RADDB=${RADDB:-/etc/freeradius} cp mods-available/eap mods-available/device_vlan mods-available/mab_vlan \u0026#34;$RADDB/mods-available/\u0026#34; mkdir -p \u0026#34;$RADDB/mods-config/device_vlan\u0026#34; cp mods-config/device_vlan/devices mods-config/device_vlan/mab \u0026#34;$RADDB/mods-config/device_vlan/\u0026#34; cp policy.d/vlan policy.d/mab \u0026#34;$RADDB/policy.d/\u0026#34; cp sites-available/tls \u0026#34;$RADDB/sites-available/\u0026#34; cp clients.conf \u0026#34;$RADDB/\u0026#34; install -m 0755 nas-only.sh \u0026#34;$RADDB/nas-only.sh\u0026#34; patch -d \u0026#34;$RADDB\u0026#34; -p0 --forward \u0026lt; sites-available/default.patch for m in eap device_vlan mab_vlan; do ln -sfn ../mods-available/$m \u0026#34;$RADDB/mods-enabled/$m\u0026#34; done ln -sfn ../sites-available/tls \u0026#34;$RADDB/sites-enabled/tls\u0026#34; # The certificates go in $RADDB/certs/eaptls: radius.crt, radius.key, # and ca/ holding root_ca.crt, intermediate_ca.crt and the CRL. All of # it readable by the user FreeRADIUS runs as: freerad, or radiusd on # Fedora. mkdir -p \u0026#34;$RADDB/certs/eaptls/ca\u0026#34; La patch sono due righe nel sito predefinito di serie. È stata fatta sulla 3.2.10 e si applica alla 3.2.7 e alla 3.2.8 con al massimo un offset:\nfreeradius/sites-available/default.patch\n--- sites-available/default +++ sites-available/default @@ -301,6 +301,9 @@ # Make *sure* that \u0026#39;preprocess\u0026#39; comes before any realm if you # need to setup hints for the remote radius server authorize { +\t# MAC Authentication Bypass, policy.d/mab. +\tmab + # # Take a User-Name, and perform some checks on it, for spaces and other # invalid characters. If the User-Name appears invalid, reject the @@ -810,6 +813,9 @@ # Once we KNOW that the user has been authenticated, there are # additional steps we can take. post-auth { +\t# The VLAN for a certificate login, policy.d/vlan. +\tvlan_by_certificate + # # If you need to have a State attribute, you can # add it here. e.g. for later CoA-Request with mods-available/eap sostituisce quello di serie. Tutto quanto:\nfreeradius/mods-available/eap\n# EAP for 802.1X: EAP-TLS only, TLS 1.3 only, CRL checked on every login. # Replaces the stock mods-available/eap. mods-enabled/eap links to it. eap { default_eap_type = tls timer_expire = 60 ignore_unknown_eap_types = no max_sessions = ${max_requests} tls-config tls-common { # The server certificate followed by step-ca\u0026#39;s intermediate, # exactly as \u0026#34;step ca certificate\u0026#34; writes it. certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key # Root, intermediate and the intermediate\u0026#39;s CRL, hashed with # \u0026#34;openssl rehash\u0026#34;. radius-crl-refresh keeps the CRL current. ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt check_crl = yes # A HUP does not reload a CRL. This does, at 300 s, the minimum. ca_path_reload_interval = 300 tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; cipher_list = \u0026#34;DEFAULT\u0026#34; ecdh_curve = \u0026#34;\u0026#34; cache { enable = no } verify { } } tls { tls = tls-common } } policy.d/vlan è la policy di prima con l\u0026rsquo;involucro if (\u0026amp;EAP-Message) di cui parla la sezione MAB:\nfreeradius/policy.d/vlan\n# Called first in post-auth. Picks the VLAN for a certificate login: # the per-device list first, then the role in the certificate\u0026#39;s OU. vlan_by_certificate { # Certificate logins only. MAB is decided in authorize. if (\u0026amp;EAP-Message) { # Only certificates made for this job: client auth, and a role. if (\u0026amp;TLS-Client-Cert-X509v3-Extended-Key-Usage-OID !~ /1\\.3\\.6\\.1\\.5\\.5\\.7\\.3\\.2/) { reject } # 1. The per-device list wins. device_vlan # 2. Otherwise the role in the certificate decides. if (!\u0026amp;reply:Tunnel-Private-Group-Id) { if (\u0026amp;TLS-Client-Cert-Subject =~ /\\/OU=([^\\/]+)/) { switch \u0026#34;%{1}\u0026#34; { case \u0026#34;staff\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;10\u0026#34; } } case \u0026#34;iot\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;20\u0026#34; } } case \u0026#34;media\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;30\u0026#34; } } case { reject } } } else { reject } } update reply { \u0026amp;Tunnel-Type := VLAN \u0026amp;Tunnel-Medium-Type := IEEE-802 } } } policy.d/mab è la policy della sezione MAB, e mods-available/device_vlan e nas-only.sh sono come mostrati prima, tutti e tre con un commento aggiunto. Il modulo della lista MAB e le due liste:\nfreeradius/mods-available/mab_vlan\n# MAC Authentication Bypass: MAC address to VLAN, for kit with no # 802.1X client. The mab policy only accepts VLAN 20 or 99 from here. # mods-enabled/mab_vlan links to it. passwd mab_vlan { filename = ${modconfdir}/device_vlan/mab format = \u0026#34;*User-Name:=Tunnel-Private-Group-Id\u0026#34; delimiter = \u0026#34;,\u0026#34; } freeradius/mods-config/device_vlan/devices\n# Certificate CN,VLAN. Overrides the role in the certificate. # cam1 is quarantined while it is looked at. cam1,99 freeradius/mods-config/device_vlan/mab\n# MAC (12 hex digits, lowercase, no punctuation),VLAN. 20 or 99 only. aabbccddeeff,20 sites-available/tls sostituisce l\u0026rsquo;esempio RadSec di serie. La directory temporanea di verify è ${run_dir}, che esiste già e appartiene all\u0026rsquo;utente con cui gira FreeRADIUS, quindi non c\u0026rsquo;è niente da creare:\nfreeradius/sites-available/tls\n# RadSec: RADIUS over TLS 1.3 on port 2083, for switches, access # points and radsecproxy. Replaces the stock sites-available/tls; # sites-enabled/tls links to it. Requests go to the default site. listen { ipaddr = * port = 2083 type = auth proto = tcp virtual_server = default clients = radsec limit { max_connections = 16 lifetime = 0 idle_timeout = 30 } tls { certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt require_client_cert = yes check_crl = yes ca_path_reload_interval = 300 # Only certificates from step-ca\u0026#39;s nas provisioner. verify { # Where FreeRADIUS writes the certificate for the script to read. tmpdir = ${run_dir} client = \u0026#34;${raddbdir}/nas-only.sh %{TLS-Client-Cert-Filename}\u0026#34; } tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; cipher_list = \u0026#34;DEFAULT\u0026#34; ecdh_curve = \u0026#34;\u0026#34; cache { enable = no } } } # One entry per switch, AP and proxy, by management address. Over TLS # the secret does nothing, and FreeRADIUS requires it to be \u0026#34;radsec\u0026#34;. clients radsec { client switch1 { ipaddr = 192.0.2.21 proto = tls secret = radsec } client ap1 { ipaddr = 192.0.2.31 proto = tls secret = radsec } client radsecproxy { ipaddr = 192.0.2.11 proto = tls secret = radsec } } clients.conf sostituisce quello di serie e fa entrare eapol_test sulla macchina stessa e nient\u0026rsquo;altro. Switch e AP entrano via RadSec o tramite il proxy:\nfreeradius/clients.conf\n# UDP clients. Kit talks RadSec (sites-available/tls) or goes through # radsecproxy, so plain RADIUS is only for testing on this host with # eapol_test. Replaces the stock clients.conf. client localhost { ipaddr = 127.0.0.1 proto = * secret = CHANGE-ME-test-only require_message_authenticator = yes nas_type = other } Prima controlla la configurazione. Poi avvialo in primo piano, con i thread attivi così RadSec funziona:\nfreeradius -XC freeradius -fxx -l stdout Tenerlo aggiornato radius-crl-refresh scarica la CRL con la radice fissata, e rifiuta una lista non firmata dall\u0026rsquo;intermedio o già scaduta, così un download andato male lascia al suo posto la lista vecchia. Non sostituisce mai una lista buona con della spazzatura:\nsystemd/radius-crl-refresh\n#!/bin/sh # Fetch step-ca\u0026#39;s CRL over HTTPS with the root pinned, and put it where # FreeRADIUS reads it. FreeRADIUS picks it up within ca_path_reload_interval. # Installed as /usr/local/sbin/radius-crl-refresh. set -eu CA_URL=\u0026#34;${CA_URL:-https://ca.home.example:9000}\u0026#34; DIR=\u0026#34;${DIR:-/etc/freeradius/certs/eaptls/ca}\u0026#34; TMP=$(mktemp -d) trap \u0026#39;rm -rf \u0026#34;$TMP\u0026#34;\u0026#39; EXIT curl -fsS --cacert \u0026#34;$DIR/root_ca.crt\u0026#34; --tlsv1.3 -o \u0026#34;$TMP/crl.der\u0026#34; \u0026#34;$CA_URL/1.0/crl\u0026#34; openssl crl -inform DER -in \u0026#34;$TMP/crl.der\u0026#34; -out \u0026#34;$TMP/crl.pem\u0026#34; # Refuse a list that is not signed by our intermediate, or already stale. openssl crl -in \u0026#34;$TMP/crl.pem\u0026#34; -noout -CAfile \u0026#34;$DIR/intermediate_ca.crt\u0026#34; 2\u0026gt;\u0026amp;1 | grep -q \u0026#39;verify OK\u0026#39; next=$(date -d \u0026#34;$(openssl crl -in \u0026#34;$TMP/crl.pem\u0026#34; -noout -nextupdate | cut -d= -f2)\u0026#34; +%s) [ \u0026#34;$next\u0026#34; -gt \u0026#34;$(date +%s)\u0026#34; ] install -m 0644 \u0026#34;$TMP/crl.pem\u0026#34; \u0026#34;$DIR/intermediate.crl.pem.new\u0026#34; mv -f \u0026#34;$DIR/intermediate.crl.pem.new\u0026#34; \u0026#34;$DIR/intermediate.crl.pem\u0026#34; openssl rehash \u0026#34;$DIR\u0026#34; systemd/radius-crl-refresh.service\n[Unit] Description=Fetch step-ca\u0026#39;s CRL for FreeRADIUS Wants=network-online.target After=network-online.target [Service] Type=oneshot ExecStart=/usr/local/sbin/radius-crl-refresh systemd/radius-crl-refresh.timer\n[Unit] Description=Fetch step-ca\u0026#39;s CRL for FreeRADIUS every hour [Timer] OnBootSec=1min OnUnitActiveSec=1h RandomizedDelaySec=5min Persistent=true [Install] WantedBy=timers.target Il certificato del server vive 24 ore, quindi si rinnova da solo. Qui il rinnovo ha mantenuto la chiave e i permessi di entrambi i file, il che conta perché FreeRADIUS li legge come freerad. Riavvia FreeRADIUS invece di mandare un HUP. Per lo stesso motivo della CRL:\nsystemd/radius-cert-renew.service\n# Keeps FreeRADIUS\u0026#39;s 24-hour server certificate renewed, and restarts # FreeRADIUS on each renewal so it loads the new one. Once, as root: # step ca bootstrap --ca-url https://ca.home.example:9000 --fingerprint \u0026lt;root fingerprint\u0026gt; # chgrp freerad radius.key \u0026amp;\u0026amp; chmod 0640 radius.key # Renewal rewrites radius.crt and keeps the key and both files\u0026#39; modes. [Unit] Description=Renew FreeRADIUS\u0026#39;s server certificate from step-ca Wants=network-online.target After=network-online.target [Service] ExecStart=/usr/bin/step ca renew --daemon \\ --exec \u0026#34;systemctl restart freeradius\u0026#34; \\ /etc/freeradius/certs/eaptls/radius.crt /etc/freeradius/certs/eaptls/radius.key Restart=on-failure RestartSec=5min [Install] WantedBy=multi-user.target radsecproxy radsecproxy/radsecproxy.conf\n# radsecproxy beside switches and APs that only speak UDP RADIUS. # Takes UDP in on the management VLAN, sends RadSec over TLS 1.3 out. ListenUDP *:1812 LogLevel 3 LogDestination file:///var/log/radsecproxy.log tls stepca { CACertificateFile /etc/radsecproxy/root_ca.crt CertificateFile /etc/radsecproxy/radsecproxy.crt CertificateKeyFile /etc/radsecproxy/radsecproxy.key TlsVersion TLS1_3 } # The kit that only speaks UDP, from 192.0.2.32 to .63 on the management # VLAN. Netgear caps the secret at 16 alphanumeric characters, so use all # 16, random: # openssl rand -base64 32 | tr -dc \u0026#39;A-Za-z0-9\u0026#39; | head -c 16 client switches { host 192.0.2.32/27 type udp secret CHANGE-ME-16chars RequireMessageAuthenticator on } server freeradius { host radius.home.example port 2083 type tls tls stepca secret radsec certificateNameCheck on } realm * { server freeradius } hostapd Una macchina Linux che fa da porta di switch, parlando RadSec. Questo è il file su cui è girata la porta simulata:\nhostapd/hostapd-wired.conf\n# A Linux box as an 802.1X wired port, talking RadSec to FreeRADIUS. # Needs hostapd built with CONFIG_DRIVER_WIRED=y and CONFIG_RADIUS_TLS=y. interface=eth1 driver=wired ieee8021x=1 use_pae_group_addr=1 eap_reauth_period=3600 nas_identifier=switch1 auth_server_addr=192.0.2.10 auth_server_port=2083 auth_server_type=TLS auth_server_shared_secret=radsec auth_server_ca_cert=/etc/hostapd/root_ca.crt auth_server_client_cert=/etc/hostapd/switch1.crt auth_server_private_key=/etc/hostapd/switch1.key logger_syslog=-1 logger_syslog_level=2 E per un access point. Questo passa da radsecproxy su UDP, come farebbe un AP Netgear, ed è il file su cui sono girate le radio simulate:\nhostapd/hostapd-wifi.conf\n# A Linux access point: one WPA2/WPA3-Enterprise SSID, each client on the # VLAN RADIUS names. This one talks UDP to radsecproxy, like the Netgear # APs. For RadSec, build hostapd with CONFIG_RADIUS_TLS=y and use the # auth_server_* block from hostapd-wired.conf instead. interface=wlan0 driver=nl80211 ssid=Home country_code=GB hw_mode=g channel=6 ieee8021x=1 eapol_version=2 wpa=2 # WPA-EAP for WPA2-Enterprise; WPA-EAP-SHA256 with ieee80211w=2 for WPA3-Enterprise. wpa_key_mgmt=WPA-EAP WPA-EAP-SHA256 rsn_pairwise=CCMP ieee80211w=1 nas_identifier=ap2 own_ip_addr=192.0.2.33 auth_server_addr=192.0.2.11 auth_server_port=1812 auth_server_shared_secret=CHANGE-ME-16chars radius_require_message_authenticator=1 # 2 = required: no VLAN in the answer means no network. dynamic_vlan=2 vlan_naming=1 vlan_tagged_interface=eth0 vlan_bridge=brvlan ctrl_interface=/run/hostapd logger_syslog=-1 logger_syslog_level=2 I dispositivi nmcli.sh è il comando della sezione sui dispositivi più il suo gemello cablato. Senza NetworkManager, wpa_supplicant usa questi:\nclients/wpa_supplicant-wired.conf\n# Linux client, wired 802.1X. Run: wpa_supplicant -D wired -i eth0 -c this-file ctrl_interface=/run/wpa_supplicant ap_scan=0 network={ key_mgmt=IEEE8021X eapol_flags=0 eap=TLS phase1=\u0026#34;tls_disable_tlsv1_3=0\u0026#34; identity=\u0026#34;anonymous\u0026#34; ca_cert=\u0026#34;/etc/pki/home/root_ca.crt\u0026#34; domain_match=\u0026#34;radius.home.example\u0026#34; client_cert=\u0026#34;/etc/pki/home/laptop1.crt\u0026#34; private_key=\u0026#34;/etc/pki/home/laptop1.key\u0026#34; } clients/wpa_supplicant-wifi.conf\n# Linux client, WiFi, without NetworkManager. TLS 1.3, anonymous identity, # and the server name checked. ctrl_interface=/run/wpa_supplicant network={ ssid=\u0026#34;Home\u0026#34; key_mgmt=WPA-EAP WPA-EAP-SHA256 ieee80211w=1 eap=TLS phase1=\u0026#34;tls_disable_tlsv1_3=0\u0026#34; identity=\u0026#34;anonymous\u0026#34; ca_cert=\u0026#34;/etc/pki/home/root_ca.crt\u0026#34; domain_match=\u0026#34;radius.home.example\u0026#34; client_cert=\u0026#34;/etc/pki/home/laptop1.crt\u0026#34; private_key=\u0026#34;/etc/pki/home/laptop1.key\u0026#34; } Contro cosa è stato provato ogni file File Eseguito contro Risultato step-ca/ step-ca 0.30.2, una CA nuova Tutti e 7 i certificati rilasciati con i loro ruoli; laptop2 rilasciato e revocato con la procedura freeradius/ 3.2.10, installato da install.sh laptop1 VLAN 10, cam1 99, tv1 30, un certificato nas rifiutato; MAB aabbccddeeff VLAN 20, un MAC sconosciuto rifiutato radius-crl-refresh step-ca su TLS 1.3 CRL installata e con hash; il portatile revocato rifiutato entro cinque minuti, senza riavvio radius-cert-renew.service step ca renew 0.30.2 Certificato rinnovato; chiave e permessi intatti radsecproxy.conf radsecproxy 1.11.2 EAP-TLS attraverso il proxy accettato; MAB con Message-Authenticator VLAN 20, senza scartato hostapd-wired.conf hostapd 2.11, compilato con RadSec VLAN 10, 99 e 30 su TLS 1.3 hostapd-wifi.conf, wpa_supplicant-wifi.conf Radio simulate, tramite radsecproxy Tre stazioni su un SSID, VLAN 10, 99 e 30; il file client così com\u0026rsquo;è e una stazione solo WPA3 sono entrati entrambi wpa_supplicant-wired.conf eapol_test 2.11 Le stesse risposte della tabella più sopra Unit systemd systemd-analyze verify Nessuna lamentela tranne i due programmi non installati qui Cosa chiude fuori tutti Ognuno di questi è stato incontrato o provato mentre si costruiva tutto questo, tranne la VLAN mancante su un trunk, che per mostrarsi ha bisogno di uno switch vero. Quasi tutti falliscono chiudendo. È il modo giusto di fallire, ed è comunque una brutta mattinata.\nGuasto Cosa vedi Soluzione CRL scaduta o mancante Ogni dispositivo rifiutato; CRL has expired o unable to get certificate CRL Scarica la CRL con un timer e monitoralo Nuova CRL non raccolta Un dispositivo revocato entra ancora ca_path_reload_interval = 300, oppure riavvia FreeRADIUS Client con TLS 1.3 spento protocol version, dispositivo rifiutato tls_disable_tlsv1_3=0, tls-1-3-enable o le chiavi del profilo Apple File dei certificati non leggibili da freerad FreeRADIUS non parte, Permission denied Rendili leggibili da freerad, la chiave solo da lui Certificato senza ruolo Rifiutato dalla policy Rilascialo di nuovo dal provisioner network con --set role= VLAN assente sullo switch o sul trunk dell\u0026rsquo;AP Il dispositivo si autentica, non ottiene un indirizzo Crea la VLAN e taggala su ogni trunk che il dispositivo può raggiungere Segreto condiviso RADIUS sbagliato Nessuna risposta; FreeRADIUS registra invalid Message-Authenticator! (Shared secret is incorrect.) e lo switch ritenta finché non si arrende Stesso segreto in clients.conf e sullo switch o sull\u0026rsquo;AP Dispositivo che non controlla il nome del server Niente. Funziona, e funzionerebbe anche con un impostore Imposta il nome del server su ogni dispositivo Richiesta senza Message-Authenticator Scartata in silenzio; lo switch ritenta e si arrende Attivalo sullo switch, o mettici davanti radsecproxy Listener RadSec con freeradius -X Threading must be enabled for TLS sockets freeradius -fxx -l stdout hostapd compilato senza RadSec unsupported RADIUS type 'TLS' Compila con CONFIG_RADIUS_TLS=y, o usa radsecproxy radsecproxy configurato con l\u0026rsquo;indirizzo del server No subjectaltname matching address Usa radius.home.example Perché non è su ogni rete aziendale di default? Niente in questo articolo è nuovo. L\u0026rsquo;EAP-TLS è stato pubblicato nell\u0026rsquo;ottobre 199937. Gli attributi VLAN sono seguiti nel settembre 20033. Entrambi i produttori di switch qui sopra documentano le VLAN dinamiche nei loro manuali, e la CA, il server RADIUS e il proxy sono open source e non costano niente. Prendi la strada commerciale e la stessa cosa diventa una voce di spesa: Cisco mette «RADIUS authentication, authorization, and accounting, including 802.1X, MAC authentication bypass» nel livello Essentials di ISE, con licenza per «concurrent active endpoints», dove un endpoint può essere una delle «printers, fax machines, or other types of network devices»38 sulla rete. In un modo o nell\u0026rsquo;altro, la funzionalità sta dentro l\u0026rsquo;hardware da più di vent\u0026rsquo;anni.\nAllora perché una rete aziendale nel 2026 gira ancora su una password che tutti condividono?\nPosso chiedere perché così tanti amministratori e MSP semplicemente non se ne curano? Non chi. Cosa permette che vada avanti. Ci sono tre risposte oneste, perché ci sono tre casi.\nAlcuni non lo sanno. Che è la mancanza, non la scusa. Sapere cosa sa fare il tuo switch non è una cosa che ti capita. Assicurarti di saperlo è il lavoro, e il manuale che lo dice si scarica gratis.\nAlcuni lo sanno, e lasciano stare. La password condivisa funziona. Nessuno apre un ticket per quella. Un certificato per dispositivo è una serie di incombenze senza niente da mostrare fino al giorno in cui sparisce un portatile, e per questo non si guadagna mai un posto nella lista. Per un MSP i conti sono ancora più semplici: una rete piatta con una password costa meno da supportare, nessun contratto la misura, e il cliente non lo chiede mai. La serie sugli MSP racconta dove portano quegli incentivi, e questo è lo stesso schema su una fattura più piccola. È il caso a cui è rivolta la domanda: l\u0026rsquo;amministratore che ha lo switch che lo fa, ha letto fin qui, e tiene la chiave condivisa perché nessuno gli farà giustificare la scelta.\nAlcuni davvero non possono, per ora. La stampante senza supplicant, la TV che non fa TLS 1.3, la macchina gestionale che il suo produttore non aggiorna. È un vincolo reale e la risposta è sì, è difendibile: MAB su una VLAN recintata, il motivo messo per iscritto, e accanto una data per quando quella macchina se ne va.\nLa mancanza non è avere un buco. Tutti hanno dei buchi. È far girare una rete aziendale sopra uno che non sei mai andato a chiudere, su hardware uscito di fabbrica in grado di chiuderlo.\nTutti hanno usato una password condivisa, una volta. Tenerne una su una rete aziendale per scelta è la parte che non si può difendere.\nPerché Cyber Essentials non lo chiede Perché non è mai stato pensato per farlo. Cyber Essentials è la base sostenuta dal governo britannico, e «a growing number of organisations require suppliers to be certified to bid for work»39. È costruito contro «the most common internet based cyber security threats»39, e i suoi requisiti sono espliciti su dove si ferma. L\u0026rsquo;hardware wireless è fuori ambito dove un attaccante non lo può raggiungere da internet, perché «the Cyber Essentials scheme isn\u0026rsquo;t concerned with attacks that can only be launched within the signal range of the wireless device»40. I suoi cinque controlli sono firewall, configurazione sicura, aggiornamenti di sicurezza, controllo degli accessi degli utenti e protezione dal malware40. Nessuno di questi chiede chi abbia il permesso di entrare in rete, prima di tutto. Il punto più vicino è «change any default or guessable account passwords»40, e una chiave WiFi stampata sul bancone della reception non è un account.\nLe VLAN ci compaiono, una volta. Un «sub-set» di un\u0026rsquo;organizzazione, uno «segregated from the rest of the organisation by a firewall or VLAN»40, può essere valutato da solo. Quindi l\u0026rsquo;unico punto in cui lo schema incontra una VLAN è come modo per tracciare la linea attorno a una parte più piccola della rete.\nNei suoi termini è giusto. È un pavimento contro gli attacchi da internet, e lo dice. Il problema è cosa succede a un pavimento una volta che ha un certificato appeso al muro. Diventa l\u0026rsquo;obiettivo, poi il soffitto, e un\u0026rsquo;azienda lo può superare con ogni dispositivo su un\u0026rsquo;unica rete piatta dietro una password che conosce anche chi fa le pulizie. Chiunque passi davanti all\u0026rsquo;edificio con un portatile è dentro il modello di minaccia che conta e fuori da quello che è stato valutato.\nUna password è una promessa che nessuno mantiene Quello che mi ha colpito, costruendo tutto questo, è quanto poco fosse difficile. Ogni trappola era scritta da qualche parte, in un commento di configurazione o in un manuale del produttore, e ognuna ha ceduto a un pomeriggio in laboratorio.\nEppure la casa gira ancora su una password WiFi scritta su un frigo. Non perché l\u0026rsquo;alternativa sia difficile, ma perché la password è il default, e il default non deve mai giustificarsi. Tutti sanno che è condivisa. Tutti sanno che trapela. Nessuno la cambia, perché cambiarla vuol dire girare per ogni dispositivo del posto con quella nuova, quindi resta la stessa per anni, attraverso ogni ospite, ogni inquilino e ogni telefono finito nel cestino del riciclo con la password ancora salvata, e fa entrare chiunque l\u0026rsquo;abbia mai avuta.\nUn certificato per dispositivo è un\u0026rsquo;idea diversa di cosa serva la rete. La rete dovrebbe sapere cos\u0026rsquo;è una cosa, non solo che qualcuno una volta ci ha digitato la parola giusta. È uno standard a cui ti tieni da solo senza che nessuno controlli, che è l\u0026rsquo;unico tipo che valga la pena di avere. La telecamera non si siede accanto al portatile perché per caso era sullo stesso SSID. Sta dove l\u0026rsquo;hai messa tu, su hardware tuo, sotto una regola che hai scritto tu e che sai leggere. Quando si comporta male, si sposta con una riga in un file di testo. Quando sparisce, un comando la chiude fuori.\nLo scambio sono le incombenze. Una CRL con un timer dietro, certificati con una data sull\u0026rsquo;agenda, dispositivi provati prima di comprarli. Quello è il costo, ed è nel verso giusto: paghi in fatica che vedi, invece che in una password che da anni fa entrare la gente senza dire niente.\nRFC 3748 — Extensible Authentication Protocol (EAP) — EAP e i ruoli di peer, authenticator e authentication server tra cui opera.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2868 — RADIUS Attributes for Tunnel Protocol Support — definisce gli attributi di tunnel che l\u0026rsquo;RFC 3580 riusa per le VLAN.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3580 — IEEE 802.1X RADIUS Usage Guidelines — sezione 3.31, «Tunnel-Type=VLAN (13) Tunnel-Medium-Type=802 Tunnel-Private-Group-ID=VLANID», e «the VLANID integer value is encoded as a string».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Security Advisory 2743314 — «An attacker who obtained the MS-CHAP v2 authentication traffic could then use the exploit code to decrypt a user\u0026rsquo;s credentials.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5216 — The EAP-TLS Authentication Protocol — autenticazione reciproca con certificati su EAP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9190 — EAP-TLS 1.3 — «TLS 1.3 also encrypts certificates and some of the extensions. When using EAP-TLS with TLS 1.3, the use of privacy is mandatory and does not cause any additional round trips»; la sezione 2.1.7 raccomanda NAI anonimi nella risposta di identità.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — mods-available/eap — check_crl, check_all_crl «Check if intermediate CAs have been revoked», allow_expired_crl, e «most EAP supplicants WILL NOT DO TLS 1.3 PROPERLY».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Certificate templates — i dati utente passati con --set sono disponibili nel template come .Insecure.User; avvolgi sempre i valori in toJson.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — dictionary.freeradius.internal — gli attributi TLS-Client-Cert-* che legge la policy, tra cui TLS-Client-Cert-Subject e TLS-Client-Cert-X509v3-Extended-Key-Usage-OID.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — mods-available/passwd — «Attributes marked as \u0026lsquo;=\u0026rsquo; are added to reply_items instead of default configure_items».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nwpa_supplicant — wpa_supplicant.conf — «tls_disable_tlsv1_3=0 - enable TLSv1.3 (experimental - disabled by default)», e domain_match, il «Constraint for server domain name».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2548 — Microsoft Vendor-specific RADIUS Attributes — MS-MPPE-Send-Key e MS-MPPE-Recv-Key, cifrate come «b(1) = MD5(S + R + A) c(1) = p(1) xor b(1)», dove S è il segreto condiviso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBlastRADIUS — CVE-2024-3596; la mitigazione raccomandata è «to mandate that clients and servers always send and require Message-Authenticator attributes for all requests and responses».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3579 — RADIUS Support For EAP — «the Message-Authenticator attribute MUST be used to protect all Access-Request, Access-Challenge, Access-Accept, and Access-Reject packets containing an EAP-Message attribute.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — radiusd.conf — require_message_authenticator e limit_proxy_state; metterli entrambi a «no» «will allow MITM attackers to create fake Access-Accept packets to the NAS!»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6614 — TLS Encryption for RADIUS — RadSec, maggio 2012, Experimental.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIETF — RadSec: RADIUS over TLS and DTLS — status previsto Proposed Standard, rende obsoleti l\u0026rsquo;RFC 6614 e l\u0026rsquo;RFC 7360; stato IESG «Has enough positions to pass» al controllo del 13 ottobre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — sites-available/tls — il listener RadSec, require_client_cert, proto = tls, e «TLS clients MUST have the shared secret set to “radsec”».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhostapd 2.11 source — hostapd/defconfig: «Include support fo RADIUS/TLS into the RADIUS client», #CONFIG_RADIUS_TLS=y.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link — Omada Software Controller 6.1 release note — «Added support for RadSec (RADIUS over TLS) to secure SSID, MAC-Based, and 802.1X authentications on both APs and Switches», con il firmware più recente per AP e switch.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link Omada — 802.1X configuration — RADIUS Proxy: «It does not support the RadSec feature»; con RadSec, «it is recommended to disable Require Message-Authenticator».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — M4250 and M4350 CLI manual — radius server key: «The secret must be an alphanumeric value not exceeding 16 characters»; nessuna menzione di RadSec.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — WAX630 user manual — «Enter the number of the UDP port on the access point that is used to access the RADIUS server», e «By default, the password is sharedsecret.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nradsecproxy — «made to be able to deploy RadSec (RADIUS over TLS) so that all RADIUS communication across network links could be done using TLS, without modifying existing RADIUS software». Provato qui con la 1.11.2.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9765 — RADIUS/1.1 — aprile 2025, Experimental: «the RADIUS shared secret is no longer used, and all MD5-based packet authentication and attribute obfuscation methods are removed.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — ChangeLog — RADIUS/1.1 è «Disabled by default, can be enabled by passing --with-radiusv11 to the configure script. For now, this is for testing interoperability.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — M4250 user manual — VLAN Assignment Mode, «The default is Disable»; Dynamic VLAN Creation Mode; Authentication Order, «if a client tries 802.1X authentication (based on the user and client credentials) and authentication fails, the interface proceeds with MAB authentication.» Il manuale dell\u0026rsquo;M4350 ha lo stesso testo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link Omada — Dynamic VLAN with the VLAN Assignment function of RADIUS — switch: Authentication Type «Port Based», «enable \u0026lsquo;VLAN Assignment\u0026rsquo;», «make sure the 802.1X Control mode is Auto»; access point: «Enable VLAN Assignment for Wireless Network» nel profilo RADIUS.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link — Configuration guide for 802.1X VLAN assignment and MAB — «VLAN Assignment takes effect only when the control type is Port Based»; le VLAN mancanti vengono create automaticamente; il MAB manda il MAC come «12 hexadecimal digits, all lowercase and no punctuation».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — GS710TUP user manual — il controllo di porta MAC-based «allows multiple supplicants connected to the same port».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhostapd — hostapd.conf — VLAN dinamica «parsed from following RADIUS attributes based on RFC 3580 and RFC 2868»; dynamic_vlan «2 = required; reject authentication if RADIUS server does not include VLAN ID»; vlan_tagged_interface e vlan_bridge. Letto dal pacchetto di hostapd 2.11.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — WAX620 user manual — WPA3 Enterprise: «the encryption is automatically set to GCMP256».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPixel Phone Help — Connect to Wi-Fi networks — «The \u0026lsquo;Do not validate\u0026rsquo; setting option used in EAP-PEAP, EAP-TLS and EAP-TTLS configurations has been removed for security reasons.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nApple — WiFi.EAPClientConfiguration — TLSTrustedServerNames, «If a server presents a certificate that isn\u0026rsquo;t in this list, the system doesn\u0026rsquo;t trust it»; TLSMaximumVersion è 1.2 di default.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetworkManager — 802-1x settings — domain-match: «Constraint for server domain name», più ca-cert, client-cert, private-key e phase1-auth-flags.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — WifiEnterpriseConfig — setDomainSuffixMatch; TLS_V1_3 «Added in API level 34», con WifiManager.isTlsV13Supported() che dice «whether or not TLS v1.3 is supported».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2716 — PPP EAP TLS Authentication Protocol — la specifica originale dell\u0026rsquo;EAP-TLS, ottobre 1999, poi sostituita dall\u0026rsquo;RFC 5216.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — ISE licences — Essentials copre «RADIUS authentication, authorization, and accounting, including 802.1X, MAC authentication bypass and easy connect»; «Concurrent active endpoints refer to the total number of supported users and devices… printers, fax machines, or other types of network devices.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — About Cyber Essentials — «A growing number of organisations require suppliers to be certified to bid for work»; protegge da «the most common internet based cyber security threats».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Cyber Essentials: Requirements for IT Infrastructure v3.3 — aprile 2026. I dispositivi wireless sono fuori ambito dove non possono essere attaccati da internet: «the Cyber Essentials scheme isn\u0026rsquo;t concerned with attacks that can only be launched within the signal range of the wireless device»; i cinque controlli tecnici; «change any default or guessable account passwords»; un sub-set «is part of the organisation whose network is segregated from the rest of the organisation by a firewall or VLAN».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/networking/eap-tls-one-ssid-every-device-on-its-vlan/","summary":"802.1X con certificati (EAP-TLS) per le porte cablate dello switch e un unico SSID WPA2/WPA3-Enterprise, dove è il server RADIUS a decidere su quale VLAN finisce ogni dispositivo. step-ca 0.30.2 imprime un ruolo in ogni certificato di dispositivo e rifiuta quelli che non ce l\u0026rsquo;hanno; FreeRADIUS 3.2.10 traduce quel ruolo in una VLAN, lascia che una lista per dispositivo lo scavalchi, e parla solo TLS 1.3. Perché il problema è una password WiFi condivisa, perché i certificati e perché TLS 1.3, la trappola della revoca in cui FreeRADIUS ignora una CRL nuova con un HUP, di cosa si fida un dispositivo che non controlla il nome del server, come proteggere il traffico RADIUS stesso con Message-Authenticator e RadSec su TLS 1.3, radsecproxy per l\u0026rsquo;hardware che parla solo UDP, una porta cablata e una rete WiFi simulate da capo a fondo, le impostazioni Netgear e TP-Link, quelle dei client Linux, Apple e Android, ogni file di configurazione completo e da scaricare, e perché tanti amministratori e MSP ancora non se ne curano e Cyber Essentials non glielo chiede.","title":"Un SSID, ogni dispositivo sulla sua VLAN: 802.1X con i certificati di step-ca"},{"content":" Aggiornamento, 11 ottobre 2026, 16:30: nel frattempo ho installato il BIOS 1.30. Non sistema lo scarto. tscsync allinea ancora i core, ma in due boot con la sincronizzazione il kernel ha abbandonato il TSC comunque, tramite il watchdog del clocksource e non tramite il controllo dei warp: BIOS 1.30: la sincronizzazione regge, il TSC se ne va lo stesso. Con tsc=nowatchdog aggiunto il TSC ha tenuto, e cinque minuti misurati contro l\u0026rsquo;orologio in tempo reale non hanno trovato né warp né deriva: tsc=nowatchdog: cinque minuti, nessun warp. Un boot non è una serie di boot, per questo lo chiamo tiene, non risolto.\nOgni boot, lo stesso avviso Questo stava nel log del kernel del mio ThinkPad E595 a ogni singolo boot:\nTSC synchronization [CPU#0 -\u0026gt; CPU#2]: Measured 6601281288 cycles TSC warp between CPUs, turning off TSC clock. tsc: Marking TSC unstable due to check_tsc_sync_source failed clocksource: Switched to clocksource hpet Niente è andato in crash. Niente è comparso sul desktop. La macchina ha fatto girare in silenzio tutto il suo orologio su un timer più lento dal momento del boot, e avrebbe continuato così per sempre se non stessi leggendo il journal per tutt\u0026rsquo;altro.\nIl Time Stamp Counter (TSC) è un contatore dentro ogni core della CPU che avanza a ritmo fisso. Leggerlo è una sola istruzione. Linux lo usa come orologio principale, ma solo se tutti i core concordano sul conteggio1. Se un core è indietro, il kernel non può fidarsi e ripiega sull\u0026rsquo;High Precision Event Timer (HPET), un dispositivo timer separato. L\u0026rsquo;autore di tscsync ha misurato una lettura dell\u0026rsquo;orologio a circa 1,2 µs sull\u0026rsquo;HPET contro decine di nanosecondi sul TSC, e il kernel e il desktop leggono l\u0026rsquo;orologio decine di migliaia di volte al secondo1. È latenza e batteria, pagate a ogni boot, per niente.\nQuindi di quanto era indietro il core? Più di tre secondi. Su un portatile a 2,1 GHz sono 6,6 miliardi di cicli.\nCosa consegna il firmware Il messaggio nomina la CPU 0 e la CPU 2, ma il guasto non è la CPU 2. Misurato da tscsync dal boot loader, e dal kernel una volta partito, il quadro è sempre lo stesso:\nCore Scarto dalla CPU 0 Cosa significa CPU 0, il processore di boot (BSP) 0 il riferimento, e quello fuori posto CPU da 1 a 7, gli altri core (AP) circa da +6,2 a +6,8 miliardi di cicli concordano tra loro entro 32 cicli Distacco a 2.096 MHz da 2,9 a 3,3 secondi il processore di boot è indietro, a ogni boot Sette core concordano. Uno è in ritardo di tre secondi. Il firmware avvia il processore di boot, ci fa il suo lavoro, e passa il controllo al boot loader senza mai rimettere quel contatore in linea con gli altri.\nIl TSC del processore di boot prima e dopo tscsync Prima: come lo consegna il firmware Dopo: tscsync in modalità sync CPU 0 (BSP) CPU 1 CPU 2 CPU 3 CPU 4 CPU 5 CPU 6 CPU 7 CPU 0 (BSP) CPU 1 CPU 2 CPU 3 CPU 4 CPU 5 CPU 6 CPU 7 CPU 0 indietro di circa 6,8 miliardi di cicli (3,25 s) CPU da 1 a 7 concordi entro 32 cicli BSP spostato avanti, ogni core entro 45 cicli Linux mantiene il clocksource TSC A sinistra: cosa consegna il firmware. I sette processori applicativi concordano entro 32 cicli; il processore di boot è circa 6,8 miliardi di cicli indietro. A destra: dopo che tscsync sposta in avanti il processore di boot in UEFI, ogni core è entro 45 cicli e il controllo dei warp del kernel passa. Perché Linux non può semplicemente sistemarlo? Sulle CPU Intel c\u0026rsquo;è un registro, IA32_TSC_ADJUST, che permette al kernel di spostare il contatore di un core, e il codice di sincronizzazione del kernel lo usa quando c\u0026rsquo;è2. Le CPU AMD Zen non ce l\u0026rsquo;hanno. Senza di esso niente in Linux può riparare lo scarto, e il tentativo nel kernel di scrivere direttamente i contatori (tsc=directsync) è stato respinto upstream come inaffidabile3.\nCosì il kernel fa l\u0026rsquo;unica cosa onesta rimasta. Misura, trova il tempo che va all\u0026rsquo;indietro tra due core, stampa l\u0026rsquo;avviso e smette di usare il TSC2.\nQuaranta boot, quaranta warp Un boot è un aneddoto. Il journal di questa macchina risale al 30 maggio 2026, quindi l\u0026rsquo;ho interrogato.\nBoot Warp, cicli Warp a 2.096 MHz Dal 30 maggio all'11 ottobre 2026 40 su 40 da 6,16 a 9,88 miliardi da 2,94 a 4,72 s Mediana 6,57 miliardi 3,14 s Dopo uno spegnimento completo di circa 27 s 1 6,60 miliardi 3,15 s Con tscsync in modalità sync, BIOS 1.28 1 nessuno registrato TSC mantenuto BIOS 1.30, tscsync spento 1 6,13 miliardi 2,92 s BIOS 1.30, tscsync in modalità sync 2 nessuno registrato TSC abbandonato dal watchdog, vedi sotto BIOS 1.30, modalità sync e tsc=nowatchdog 1 nessuno registrato TSC mantenuto Ogni boot. Avvio a freddo, riavvio, dopo uno spegnimento abbastanza lungo da aspettarsi che qualunque residuo sia sparito. L\u0026rsquo;entità varia, il che torna con quanto ha trovato l\u0026rsquo;autore di tscsync su un Lenovo Legion: lì il warp cresce quasi esattamente con il tempo che la macchina passa nel firmware prima che parta il boot loader3. Un boot che resta più a lungo sul logo esce più indietro.\nLa soluzione allettante è tsc=reliable sulla riga di comando del kernel, che dice a Linux di smettere di controllare. Non farlo. I core sono davvero a tre secondi di distanza, e spegnere il controllo non cambia la cosa; lascia solo che il kernel usi un orologio che salta all\u0026rsquo;indietro quando un task passa da un core all\u0026rsquo;altro. Il README di tscsync dice lo stesso, e nomina gli scatti di audio e video che seguono1.\nPosso chiedere perché esce ancora così? Non chiedo chi. Chiedo cosa, nel processo di Lenovo, ha permesso di far uscire un BIOS che lascia un core tre secondi indietro a ogni boot.\nLa risposta è nelle note di progetto di tscsync, e non è lusinghiera. Il Fisher-Price OS (Windows) scrive da sé i TSC al boot3. Un portatile validato solo su quello passa, perché il sistema operativo rimette in ordine in silenzio dopo il firmware. Linux tiene acceso il suo controllo di sicurezza e riporta quello che ha ricevuto, ed è esattamente per questo che il guasto compare lì e da nessun\u0026rsquo;altra parte.\nLa parte imbarazzante è che, a quanto si legge, questo è già stato sistemato in passato. Gli utenti riportano che Lenovo ha corretto la stessa classe di bug con un aggiornamento del BIOS sui ThinkPad A485, T14s Gen 1 AMD ed E4954. L\u0026rsquo;E495 è il fratello da 14 pollici di questa macchina, e condividono un solo BIOS: il readme di Lenovo per il pacchetto li elenca entrambi5.\nIl mio E595 era alla 1.28 e andava in warp a ogni boot. Da allora Lenovo ha pubblicato la 1.29 e la 1.30, e nessuno dei due elenchi di modifiche dice una parola sul TSC; la 1.30 corregge «system randomly freeze since BIOS V1.27» e alcuni problemi di sicurezza5. Così ho messo la 1.30 e ho misurato di nuovo. Il primo boot, con tscsync spento, ha registrato un warp di 6.126.446.316 cicli: 2,92 secondi, CPU#0 -\u0026gt; CPU#2, come sempre. La 1.30 non lo sistema. I due modelli condividono un solo BIOS, quindi se la segnalazione sull\u0026rsquo;E495 fosse giusta anche questa macchina sarebbe sistemata. La segnalazione non nomina alcuna versione del BIOS e non collega alcun log4.\nLenovo tornerà su un portatile del 2019 per un guasto che il sistema operativo su cui fa i test le nasconde? No.\ntscsync, prima misurato tscsync è un piccolo programma UEFI che parte da GRUB o da systemd-boot appena prima di Linux. Chiede a ogni core il suo TSC tramite i servizi multiprocessore del firmware stesso, calcola lo scarto di ogni core dal processore di boot, sposta in avanti i contatori in ritardo finché non concordano, poi verifica il risultato con un test modellato sul controllo dei warp del kernel1. Non scrive mai su flash, NVRAM o impostazioni del firmware; i contatori che modifica si azzerano allo spegnimento1.\nÈ parecchio da affidare a un boot loader, per questo ho letto prima il codice, al commit 230eaa9, prima di compilarlo. L\u0026rsquo;installazione è stata poi fatta come chiede il progetto:\nPasso Comando Cosa è tornato Build make binari per GRUB e systemd-boot Installazione, sola lettura sudo scripts/install.sh modalità measure, niente scritto nei contatori Spegni, avvia, guarda tscsync-status CPU 0 2.964 ms dietro a tutti e 7 gli AP, gli AP concordi entro i microsecondi Attivazione sudo scripts/set-mode.sh sync ha effetto al boot successivo La modalità measure è la parte da copiare in qualunque strumento del genere. Ti mostra il guasto sul tuo hardware prima di avere il permesso di cambiare qualcosa, e una protezione contro i blocchi la spegne se un boot non arriva mai a Linux1.\nIl primo boot in modalità sync, direttamente da tscsync-status:\nsurvey (read-only): cpu 1 apic 1: offset 6815086011 rtt 126 BAD ... cpu 7 apic 7: offset 6815086010 rtt 378 BAD 0 ok, 7 not ok moving BSP forward by ~6815086010 cycles to match cpu 7: bsp vs cpu 7 apic 0: before 6815086001 after 3 rtt 357 iter 3 warps bsp/ap 0/0 OK AP pass (corrects any AP still off): 7 ok, 0 not ok total 121 ms E il kernel, un secondo dopo:\nclocksource: Switched to clocksource tsc-early tsc: Refined TSC clocksource calibration: 2096.066 MHz clocksource: Switched to clocksource tsc Nessuna riga di warp. Nessun «unstable». /sys/devices/system/clocksource/clocksource0/current_clocksource dice tsc. 121 ms di boot per avere l\u0026rsquo;orologio che l\u0026rsquo;hardware avrebbe dovuto avere fin dall\u0026rsquo;inizio. Questo era sul BIOS 1.28. La 1.30 non è stata altrettanto pulita.\nI 21 nanosecondi che Linux ha scavalcato C\u0026rsquo;è una riga in quel report che sembra peggio di quanto sia, e vale la pena spiegarla invece di nasconderla. La verifica finale di tscsync ha segnalato un core:\ncpu 7 apic 7: offset 45 rtt 357 warps bsp/ap 0/0 BAD 6 ok, 1 not ok RESULT: some APs out of sync (Linux will fall back to HPET) 45 cicli sono circa 21 nanosecondi. tscsync punta a una concordanza entro circa 10 cicli1, quindi secondo il suo stesso obiettivo la CPU 7 ha mancato, e lo ha detto. Poi Linux è partito e non è ripiegato affatto sull\u0026rsquo;HPET.\nI due controlli fanno domande diverse:\nVerdetto di tscsync sullo scarto Test dei warp del kernel Domanda quanto sono distanti i contatori? il tempo va mai all\u0026rsquo;indietro tra i core? Metodo stima da un andata e ritorno cronometrato i core leggono a turno e confrontano con l\u0026rsquo;ultima lettura2 Soglia circa 10 cicli nessuna lettura più bassa della precedente CPU 7 in questo boot 45 cicli, BAD nessun warp, TSC mantenuto Il warps bsp/ap 0/0 sulla stessa riga è tscsync che esegue il test in stile kernel. Non ne ha visto nessuno. Nemmeno il kernel.\nIl progetto sa già che il suo verdetto può essere più severo di quello del kernel. Un IdeaPad nel suo elenco hardware aveva quattro core segnalati tra 28 e 42 cicli che il kernel ha accettato, e dalla 2.1 un andata e ritorno lento viene riportato come UNSURE invece che BAD4. La regola del README per quel caso è quella giusta: decide il controllo del kernel, e se il clocksource è tsc, ha passato1. Un andata e ritorno di 357 cicli non è lento su questa macchina, quindi è uscito BAD. Uno strumento che mostra i suoi calcoli e poi lascia l\u0026rsquo;ultima parola al kernel è il modo giusto.\nBIOS 1.30: la sincronizzazione regge, il TSC se ne va lo stesso Sulla 1.30 ho rimesso tscsync in modalità sync e ho riavviato due volte. Entrambe le volte ha fatto il suo lavoro. Ha spostato in avanti il processore di boot di circa 6,17 miliardi di cicli, ogni core è uscito entro qualche decina di cicli, e il kernel non ha registrato alcun warp. Entrambe le volte Linux è comunque finito sull\u0026rsquo;HPET pochi secondi dopo:\ntsc: Detected 2095.890 MHz processor tsc: Refined TSC clocksource calibration: 2096.053 MHz clocksource: Watchdog remote CPU 5 read timed out clocksource: Marking clocksource tsc unstable due to frequency skew clocksource: Watchdog hpet interval: 495136113ns clocksource: Clocksource tsc interval: 496026671ns tsc: Marking TSC unstable due to clocksource watchdog È un controllo diverso. Il test dei warp gira mentre ogni core si avvia e chiede se il tempo va mai all\u0026rsquo;indietro tra i core. Il watchdog del clocksource continua a girare dopo il boot. Più o meno ogni mezzo secondo confronta di quanto si è mosso il TSC con quanto si è mosso l\u0026rsquo;HPET, e se non concordano oltre un piccolo margine marca il TSC come instabile6. Una volta marcato, resta marcato fino al boot successivo.\nDue controlli del kernel, e quale opzione di boot salta quale Firmware CPU 0 ~3 s indietro tscsync, in UEFI sposta avanti la CPU 0 Linux parte i core si avviano Controllo warp una volta, al boot Watchdog ogni 0,5 s contro HPET Default entrambi attivi: TSC perso sulla 1.30 ✓\u0026#160;controllato ✓\u0026#160;controllato tsc=nowatchdog questo boot: TSC mantenuto ✓\u0026#160;controllato ✗\u0026#160;saltato tsc=reliable sconsigliato: nasconde un warp vero ✗\u0026#160;saltato ✗\u0026#160;saltato Due controlli separati possono abbandonare il TSC. Il controllo dei warp gira una volta, mentre ogni core si avvia; tscsync è ciò che fa passare questa macchina. Il watchdog continua a confrontare con l\u0026rsquo;HPET ogni mezzo secondo. tsc=nowatchdog salta solo il secondo, mentre tsc=reliable li salta entrambi e nasconderebbe un warp vero. Boot sulla 1.30 Controllo dei warp Intervallo HPET Intervallo TSC TSC contro HPET Primo boot con sync passato 495.426.793 ns 495.006.210 ns circa 850 ppm lento Secondo boot con sync passato 495.136.113 ns 496.026.671 ns circa 1.800 ppm veloce Quindi il TSC va alla velocità sbagliata? No. Con la macchina accesa ho cronometrato il TSC contro l\u0026rsquo;orologio raw del kernel basato sull\u0026rsquo;HPET per 30 secondi in finestre da 5 secondi. Ogni finestra è uscita a 2.096,062 MHz, circa 4 parti per milione dalla calibrazione del kernel stesso. Un vero guasto di frequenza non oscilla da lento a veloce tra due boot per poi sparire. Qualcosa disturba una finestra da mezzo secondo all\u0026rsquo;inizio del boot, e la riga remote CPU 5 read timed out subito prima indica un core che per un attimo non risponde. Un firmware che ruba tempo alle CPU ci starebbe. Non l\u0026rsquo;ho dimostrato.\nDue boot sono tutte le prove che ci sono. Non so ancora dire se sia la 1.30, il caso, o qualcosa che la scrittura di tscsync innesca. L\u0026rsquo;unico boot con sync sulla 1.28 ha mantenuto il TSC e i due sulla 1.30 l\u0026rsquo;hanno perso, e non basta per dare la colpa al BIOS.\nPer questo caso c\u0026rsquo;è un\u0026rsquo;opzione del kernel più mirata di tsc=reliable. tsc=nowatchdog spegne il watchdog del clocksource per il TSC e lascia stare il controllo dei warp al boot7. Se tscsync non riuscisse mai a sincronizzare, il kernel prenderebbe comunque il warp e ripiegherebbe sull\u0026rsquo;HPET. Quello era il test successivo. I numeri, e alcune modifiche suggerite ai report di tscsync, sono sull\u0026rsquo;issue tracker del progetto8.\ntsc=nowatchdog: cinque minuti, nessun warp Ho aggiunto tsc=nowatchdog e riavviato. tscsync ha spostato in avanti il processore di boot di 6.207.104.421 cicli, il kernel non ha registrato né warp né skew, e current_clocksource diceva tsc. Primo boot sulla 1.30 a mantenerlo.\nQuesto dimostra solo che era il watchdog ad abbandonare il TSC. Non dimostra che il TSC sia sicuro da usare, e con il watchdog spento nel kernel non lo sorveglia più niente. Così l\u0026rsquo;ho sorvegliato io.\nIl mio controllo di frequenza di prima qui non serviva. Cronometrava il TSC contro CLOCK_MONOTONIC_RAW, che andava bene finché il kernel girava sull\u0026rsquo;HPET. Sul TSC quell\u0026rsquo;orologio è costruito dal TSC, quindi il test confronterebbe il contatore con se stesso. Nemmeno l\u0026rsquo;HPET si può leggere dallo spazio utente, perché il kernel di Fedora è compilato senza CONFIG_HPET_MMAP. L\u0026rsquo;orologio in tempo reale (RTC) sì. Va con un suo quarzo, e il kernel sveglia un programma a ogni scatto del suo contatore dei secondi9.\nCosì ho scritto un piccolo controllo, tsccheck. Si lega alla CPU 0 ed esegue quattro test ogni 15 secondi:\nControllo Come Che aspetto ha un guasto Frequenza cicli di TSC contati tra gli scatti dei secondi dell\u0026rsquo;RTC i MHz che derivano in una direzione Scarto 3.000 andata e ritorno dalla CPU 0 a ogni core, scarto preso dal più veloce uno scarto che cresce Warp in ogni andata e ritorno, un core ha letto meno di un valore già visto? qualunque cosa sopra zero Clocksource lettura di current_clocksource qualunque cosa diversa da tsc L\u0026rsquo;andata e ritorno è il cuore di tutto. La CPU 0 legge il suo contatore e lo passa, l\u0026rsquo;altro core legge il proprio e lo rimanda, e la CPU 0 legge di nuovo. Se i core concordano, la lettura di mezzo deve cadere tra le altre due:\nUn andata e ritorno tra la CPU 0 e un altro core CPU 0 CPU da 1 a 7, una alla volta tempo t0 t1 t2 punto medio scarto scarto = t1 − (t0 + t2) / 2 dal più veloce di 3.000 giri warp se t1 \u0026lt; t0 o t2 \u0026lt; t1 tempo all'indietro: anche uno è un guasto Un andata e ritorno. La lettura dell\u0026rsquo;altro core, t1, è confrontata con il punto medio delle due letture della CPU 0, e il più veloce di 3.000 giri dà lo scarto. Qualunque lettura più bassa di una già vista è un warp, qualunque sia lo scarto. Il ciclo che lo fa:\nfor (int i = 0; i \u0026lt; ITERS; i++) { uint64_t t0 = rdtsc_o(); /* CPU 0 */ atomic_store(\u0026amp;pp.t0, t0); atomic_store(\u0026amp;pp.seq, 2 * i + 1); /* the other core reads t1 now */ while (atomic_load(\u0026amp;pp.seq) != 2 * i + 2) ; uint64_t t2 = rdtsc_o(); /* CPU 0 again */ uint64_t t1 = atomic_load(\u0026amp;pp.t1); if (t1 \u0026lt; t0 || t2 \u0026lt; t1) r.warps++; /* time went backwards */ if (i \u0026gt; 100 \u0026amp;\u0026amp; t2 - t0 \u0026lt; r.rtt) { r.rtt = t2 - t0; r.offset = (int64_t)(t1 - (t0 + (t2 - t0) / 2)); } } Tutto il programma è C semplice per Linux x86-64, senza niente di legato a tscsync o a questo portatile. Serve root per /dev/rtc0, e il terzo argomento è il valore del tuo kernel da journalctl -k -b | grep 'Refined TSC':\ngcc -O2 -Wall -pthread -o tsccheck tsccheck.c sudo ./tsccheck 15 20 2096.073 \u0026#8615; tsccheck.c, l\u0026#39;intero controllo in 161 righe tsccheck.c · 4 kB SHA-256 02eba1966a0097196acd5dfdcad9c4b315cafc1854c60f34c5b56080e6c38408.\nVenti campioni in cinque minuti, subito dopo il boot:\nMisura Risultato Clocksource tsc in tutti i 20 campioni, nessun messaggio del kernel Warp 0 in circa 420.000 andata e ritorno Scarto peggiore dalla CPU 0 85 cicli, circa 41 ns, nessuna tendenza Frequenza su tutta la prova 2.096,027 MHz, tra 2.096,022 e 2.096,031 dal primo minuto in poi Frequenza per finestra da 15 secondi da 2.095,943 a 2.096,104 MHz Frequenza del TSC per finestra da 15 secondi, e su tutta la prova +20 ppm 0 ppm -20 ppm -40 ppm -60 ppm 0 s 60 s 120 s 180 s 240 s 300 s valore del kernel, 2.096,073 MHz 15 s: finestra -11,3 ppm, tutta la prova -11,3 ppm 30 s: finestra -61,1 ppm, tutta la prova -36,2 ppm 45 s: finestra -23,5 ppm, tutta la prova -32,0 ppm 60 s: finestra +15,0 ppm, tutta la prova -20,2 ppm 75 s: finestra -21,6 ppm, tutta la prova -20,5 ppm 90 s: finestra -21,8 ppm, tutta la prova -20,7 ppm 105 s: finestra -19,6 ppm, tutta la prova -20,6 ppm 120 s: finestra -50,5 ppm, tutta la prova -24,3 ppm 135 s: finestra +5,8 ppm, tutta la prova -20,9 ppm 150 s: finestra -20,3 ppm, tutta la prova -20,9 ppm 165 s: finestra -23,6 ppm, tutta la prova -21,1 ppm 180 s: finestra -13,7 ppm, tutta la prova -20,5 ppm 195 s: finestra -29,5 ppm, tutta la prova -21,2 ppm 210 s: finestra -22,3 ppm, tutta la prova -21,3 ppm 225 s: finestra -20,0 ppm, tutta la prova -21,2 ppm 240 s: finestra -24,7 ppm, tutta la prova -21,4 ppm 255 s: finestra -19,1 ppm, tutta la prova -21,3 ppm 270 s: finestra -22,2 ppm, tutta la prova -21,3 ppm 285 s: finestra -62,0 ppm, tutta la prova -23,5 ppm 300 s: finestra +9,2 ppm, tutta la prova -21,9 ppm una finestra da 15 s, 61 ppm lento tutta la prova finora finestra da 15 secondi tutta la prova finora Frequenza contro l\u0026rsquo;RTC, in parti per milione dal valore del kernel. Le singole finestre saltano a coppie; il valore su tutta la prova si appiattisce a 21-22 ppm lento entro il primo minuto e resta lì. Le finestre sembrano peggio di quanto siano. Uno scatto dell\u0026rsquo;RTC in ritardo rende una finestra lunga e la successiva corta, quindi gli errori arrivano a coppie che si annullano: 61 parti per milione (ppm) lento a 30 secondi, 15 ppm veloce a 60. La deriva non si annulla da sola. Il valore su tutta la prova si è mosso appena.\nIl valore su tutta la prova sta 22 ppm sotto i 2.096,073 MHz del kernel per tutti i cinque minuti. È la differenza tra due quarzi, ed è rimasta ferma. chrony, che regola l\u0026rsquo;orologio contro i time server su internet, lo dava lento di 16-19 ppm10. Stessa direzione, stessa entità.\nGli scarti saltano tra gli stessi pochi valori, 10, 21 e 33 cicli da una parte o dall\u0026rsquo;altra, senza nessun core che si allontana. È rumore di un andata e ritorno di circa 550 cicli. La verifica di tscsync ne chiamerebbe comunque alcuni BAD. Il kernel no.\nIl TSC ha tenuto? Sì, su ogni misura che avevo. Cinque minuti dopo un boot non sono comunque una serie di boot. Il prossimo passo è lo stesso controllo dopo un lungo uptime, e di nuovo su qualche altro riavvio.\nLa correzione va nel firmware tscsync non dovrebbe esistere. Lo dice il suo stesso README: i produttori di firmware sono liberi di prendere l\u0026rsquo;approccio e il codice, «which is where this should be fixed»1. Lenovo ha il sorgente. L\u0026rsquo;autore di tscsync aveva solo quello che il suo portatile gli diceva, e 80 boot di log1.\nÈ questo che resta. La correzione ha richiesto che un estraneo all\u0026rsquo;azienda misurasse, diagnosticasse e aggirasse il problema, mentre l\u0026rsquo;azienda che ha venduto l\u0026rsquo;hardware lo validava sull\u0026rsquo;unico sistema operativo che nasconde il guasto. Una macchina che non puoi riparare perché il suo firmware è chiuso non è davvero tua, è in prestito con delle condizioni. Un firmware aperto con aggiornamenti firmati avrebbe permesso di sistemarlo una volta, come si deve, a chiunque avesse avuto voglia di guardarci.\nNel frattempo, ottimo lavoro dall\u0026rsquo;autore di tscsync. Prima la modalità measure, una protezione contro i blocchi, i numeri in chiaro e un verdetto onesto anche quando non è d\u0026rsquo;accordo con il kernel. È così che vanno costruiti gli strumenti di basso livello.\nOgni host KVM con lo stesso firmware Su un portatile questo costa un po\u0026rsquo; di latenza e un po\u0026rsquo; di batteria. Su un hypervisor lo paga anche ogni guest, e niente di quello che segue dipende da Proxmox. Sta tutto nel codice KVM del kernel Linux, quindi è uguale su qualunque host costruito su KVM, qualunque cosa ci sia sopra: Proxmox VE, oVirt, OpenStack, o QEMU e libvirt nudi e crudi11.\nCosa fa KVM quando l\u0026rsquo;host perde il TSC KVM dà ai guest un orologio stabile solo quando l\u0026rsquo;host stesso gira sul TSC. Nel sorgente del kernel il master clock, un unico riferimento di tempo condiviso da ogni vCPU di una VM, si accende solo se host_tsc_clocksource è vero12. Scendi sull\u0026rsquo;HPET e si spegne, e diverse cose cambiano insieme:\nHost sul TSC Host sull\u0026rsquo;HPET, TSC marcato instabile Master clock di KVM12 acceso spento Una vCPU passa a un altro core12 niente da aggiornare un aggiornamento dell\u0026rsquo;orologio forzato su ogni vCPU di quella VM, fino a 10 al secondo Lo scarto del TSC del guest12 lasciato stare riscritto a ogni spostamento, e messo in modalità di recupero PVCLOCK_TSC_STABLE_BIT ai guest12 impostato non impostato clock_gettime() nel guest13 letto nello spazio utente una system call, decisa una volta sola al boot del guest Letture dell\u0026rsquo;orologio del guest tra le vCPU14 indipendenti ogni lettura confrontata con un unico valore globale condiviso L\u0026rsquo;ultima riga è quella che scala male. Senza lo stable bit, il kernel del guest non può fidarsi che l\u0026rsquo;orologio di ogni vCPU concordi con gli altri, quindi ogni lettura viene confrontata con «last_value, a global accumulator» e sostituita con un compare-and-exchange atomico se è più recente14. Ogni vCPU del guest scrive su quell\u0026rsquo;unico valore. Più vCPU leggono l\u0026rsquo;orologio, più fanno la coda lì.\nNiente di tutto questo compare come errore. Il clocksource del guest dice ancora kvm-clock, e niente nel guest ti dirà perché è diventato più lento.\nCome il clocksource dell'host arriva a un guest KVM Host sul TSC Clocksource dell'host: tsc un'istruzione per leggerlo master clock di KVM acceso stable bit impostato per i guest Il guest legge nello spazio utente vDSO, circa 28 ns Host sull'HPET Clocksource dell'host: hpet un viaggio fino al timer master clock di KVM spento niente stable bit, aggiornamenti a ogni spostamento di vCPU Il guest fa una system call un valore condiviso, circa 190 ns Stesso codice del kernel su Proxmox VE, oVirt, OpenStack o QEMU e libvirt da soli Il clocksource dell\u0026rsquo;host decide cosa riceve ogni guest. Sul TSC, i guest leggono l\u0026rsquo;orologio nello spazio utente. Sull\u0026rsquo;HPET, KVM abbandona il master clock, ogni spostamento di vCPU forza aggiornamenti dell\u0026rsquo;orologio, e ogni lettura dell\u0026rsquo;orologio nel guest diventa una system call confrontata con un valore condiviso da tutte le vCPU. Quanto costa, misurato L\u0026rsquo;ho misurato su questo portatile invece di lasciarlo come teoria. Il clocksource dell\u0026rsquo;host si può cambiare mentre gira, e questo spegne il master clock di KVM proprio come fa il ripiego al boot. Un guest usa e getta ha avviato il kernel dell\u0026rsquo;host con 4 vCPU e un initramfs minuscolo il cui unico programma cronometra clock_gettime(). Due prove per modalità, prima l\u0026rsquo;host, poi il guest:\nNanosecondi per lettura dell'orologio, host sul TSC contro host sull'HPET Host scala da 0 a 2.400 ns Host, 1 thread, host sul TSC: 24 ns 24 ns Host, 1 thread, host sull'HPET: 1.542 ns 1.542 ns 1 thread Host, tutti gli 8 core, host sul TSC: 29 ns 29 ns Host, tutti gli 8 core, host sull'HPET: 1.922 ns 1.922 ns tutti gli 8 core Guest, 4 vCPU scala da 0 a 300 ns Guest, 4 vCPU, 1 vCPU, host sul TSC: 28 ns 28 ns Guest, 4 vCPU, 1 vCPU, host sull'HPET: 187 ns 187 ns 1 vCPU Guest, 4 vCPU, tutte e 4 le vCPU, host sul TSC: 31 ns 31 ns Guest, 4 vCPU, tutte e 4 le vCPU, host sull'HPET: 244 ns 244 ns tutte e 4 le vCPU clocksource dell'host tsc clocksource dell'host hpet Nanosecondi per chiamata a clock_gettime(), media di due prove per modalità. L\u0026rsquo;host diventa da 61 a 73 volte più lento sull\u0026rsquo;HPET; il guest circa 7 volte con una vCPU e 8 con tutte e quattro. I pannelli usano scale diverse, perché le barre HPET dell\u0026rsquo;host appiattirebbero quelle del guest. Il guest non paga direttamente il prezzo dell\u0026rsquo;HPET, perché sotto kvm-clock legge ancora il TSC. Quello che perde è la lettura nello spazio utente e l\u0026rsquo;indipendenza tra le vCPU, e già solo questo è sette volte più lento. Con tutte e quattro le vCPU che leggono insieme il costo sale ancora, ed è quel valore globale condiviso al lavoro. Un guest con 32 o 64 vCPU ci fa più coda. Non l\u0026rsquo;ho misurato.\nMettiamoci un numero. Un guest che legge l\u0026rsquo;orologio un milione di volte al secondo su una vCPU ci spende il 2,8% di quella vCPU su un host sano, e il 19% su questo. Database, la Java Virtual Machine (JVM) e qualunque altra cosa che mette il timestamp al proprio lavoro leggono l\u0026rsquo;orologio parecchio.\nQuesta prova inoltre lo sottostima. Cambiare clocksource a mano spegne il master clock ma non marca il TSC come instabile, quindi le riscritture dello scarto nella tabella sopra non sono mai partite. Il ripiego al boot su questo E595 lo marca instabile, e un host in quello stato le paga entrambe.\n\u0026#8615; clockbench.c, il benchmark, da eseguire sull\u0026#39;host o come init di un guest clockbench.c · 2 kB Controllare un host, e i limiti Ho spiegato perché gli orologi dei guest sono fragili fin dall\u0026rsquo;inizio nell\u0026rsquo;articolo su ptp_kvm; questo è lo stesso problema che arriva da sotto. Controlla l\u0026rsquo;host, non il guest:\njournalctl -k -b | grep -iE \u0026#39;TSC warp|TSC unstable\u0026#39; cat /sys/devices/system/clocksource/clocksource0/current_clocksource tscsync parte da GRUB o da systemd-boot1, il che copre la maggior parte degli host KVM. Proxmox VE usa GRUB, oppure systemd-boot su un\u0026rsquo;installazione UEFI con ZFS come root e Secure Boot spento15. Sii però onesto sui limiti prima che si avvicini a un nodo di produzione.\nLimite Cosa farci Solo AMD Zen e Hygon1 gli host Intel con TSC_ADJUST li sistema già il kernel Ogni macchina nel suo elenco hardware è un portatile4 considera un server come non testato e segnalalo La modalità sync rifiuta l\u0026rsquo;hardware fuori elenco a meno che tu non lo accetti esplicitamente1 leggi il perché prima di forzarla Un primo boot con sync può bloccarsi prima la modalità measure, console out-of-band aperta, un nodo alla volta Un aggiornamento del BIOS potrebbe sistemare il guasto rimettilo in measure dopo e controlla1 Una sincronizzazione pulita può comunque perdere il TSC per colpa del watchdog controlla current_clocksource dopo ogni boot; tsc=nowatchdog se la causa è il watchdog, poi misuralo tu Un guasto del firmware che costa a un portatile un po\u0026rsquo; di batteria costa a un hypervisor una fetta di ogni guest che fa girare, ogni secondo in cui è acceso, e chi possiede i guest non ha modo di vederlo. È questo il motivo per controllare current_clocksource su ogni host che gestisci, chiunque l\u0026rsquo;abbia fatto.\ntscsync README — cosa fa, il costo di lettura dell\u0026rsquo;orologio con l\u0026rsquo;HPET, perché tsc=reliable non è una soluzione, il modello di sicurezza e la regola UNSURE.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kernel/tsc_sync.c — la gestione di TSC_ADJUST, il test dei warp e il messaggio «Measured %Ld cycles TSC warp between CPUs, turning off TSC clock.».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ntscsync — docs/DESIGN.md — AMD Zen non ha IA32_TSC_ADJUST, tsc=directsync respinto upstream, Windows scrive da sé i TSC al boot, e il warp che cresce con il tempo passato nel firmware sul Legion Pro 5.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ntscsync — docs/HARDWARE.md — macchine testate, i core dell\u0026rsquo;IdeaPad 5 accettati tra -28 e -42 cicli, e le correzioni del BIOS segnalate su A485, E495 e T14s Gen 1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLenovo — BIOS Update Utility readme, ThinkPad E495/E595, version 1.30 — entrambi i modelli in un solo pacchetto, la cronologia delle versioni fino alla 1.30 (14 maggio 2024), e il suo elenco di modifiche.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — kernel/time/clocksource.c — il watchdog del clocksource, il suo confronto degli intervalli e il messaggio «Marking clocksource %s unstable due to frequency skew».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — kernel-parameters — tsc=reliable disattiva la verifica a runtime e i controlli di stabilità al boot; tsc=nowatchdog disattiva solo il watchdog del clocksource.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ntscsync issue #1 — Lenovo ThinkPad E595 — i report per 1.28 e 1.30, l\u0026rsquo;analisi del watchdog e le modifiche suggerite.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — Real Time Clock (RTC) Drivers for Linux — «The clock can also be set to generate an interrupt upon every clock update, thus generating a 1Hz signal», letto tramite /dev/rtc.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nchrony — chronyc manual — tracking: «The \u0026lsquo;frequency\u0026rsquo; is the rate by which the system\u0026rsquo;s clock would be wrong if chronyd was not correcting it.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKVM — Management Tools — Proxmox VE, oVirt, OpenStack e gli strumenti basati su libvirt, tutti per gestire KVM.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kvm/x86.c — pvclock_update_vm_gtod_copy(): «If the host uses TSC clock, then passthrough TSC as stable to the guest», e PVCLOCK_TSC_STABLE_BIT impostato solo con il master clock.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kernel/kvmclock.c — il guest abilita l\u0026rsquo;orologio in spazio utente VDSO_CLOCKMODE_PVCLOCK solo quando PVCLOCK_TSC_STABLE_BIT è impostato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kernel/pvclock.c — senza PVCLOCK_TSC_STABLE_BIT, ogni lettura viene confrontata con «last_value, a global accumulator» con un compare-and-exchange atomico.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE — Host Bootloader — GRUB di default, systemd-boot per le installazioni UEFI con root su ZFS e Secure Boot spento.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/hardware/sorting-tsc-when-your-firmware-is-broken/","summary":"Per quattro mesi, a ogni boot, il mio ThinkPad E595 ha consegnato a Linux un core della CPU tre secondi indietro rispetto agli altri sette, e il kernel ha abbandonato il TSC per l\u0026rsquo;HPET. Cosa significa l\u0026rsquo;avviso, perché una macchina AMD Zen non ha modo di ripararlo dall\u0026rsquo;interno di Linux, cosa dicono del firmware 40 boot di journal, perché tsc=reliable è la risposta sbagliata, e come tscsync misura e sposta i contatori in UEFI prima che il kernel li veda, compreso l\u0026rsquo;unico core che ha marcato BAD e che Linux ha accettato comunque. Aggiornato per il BIOS 1.30: non sistema lo scarto, e il watchdog del clocksource del kernel ha abbandonato il TSC in due boot anche dopo che tscsync aveva allineato i core. Con tsc=nowatchdog ha tenuto, e un controllo di cinque minuti contro l\u0026rsquo;orologio in tempo reale, sorgente compreso, non ha trovato né warp né deriva. Infine, cosa fa il ripiego su qualunque hypervisor KVM, Proxmox o no: il master clock sparisce, i guest perdono la lettura veloce dell\u0026rsquo;orologio, e su questo portatile una lettura dell\u0026rsquo;orologio nel guest è risultata sette volte più lenta.","title":"Sistemare il TSC quando il firmware è rotto"},{"content":"Perché certificati invece di chiavi SSH si fida al primo utilizzo. Ti colleghi a una macchina nuova, lui ti mostra un\u0026rsquo;impronta e ti chiede se sei sicuro. Nessuno controlla. Tutti scrivono yes. È la stessa abitudine di chi ignora un avviso del browser, ed è esattamente ciò che serve a una macchina messa in mezzo.\nNell\u0026rsquo;altra direzione non va meglio. Ogni server tiene un file authorized_keys per utente, e ognuno cresce. Le chiavi vengono aggiunte e mai tolte. Qualcuno se ne va, e la sua chiave resta su una macchina di cui nessuno si ricorda fino al giorno in cui conta. Ricostruisci un server e ogni client grida che la chiave host è cambiata, così la gente impara a cancellare anche quell\u0026rsquo;avviso.\nUn\u0026rsquo;autorità di certificazione SSH chiude entrambe le questioni. La CA firma la chiave di ogni host, e i client si fidano della CA, non di una lista di impronte. La CA firma la chiave di ogni utente per qualche ora, e i server si fidano della CA, non di una lista di chiavi. Niente da accettare alla prima connessione, niente da ripulire quando qualcuno se ne va, e un certificato utente che muore da solo entro domani.\nÈ una configurazione diversa dal lato X.509 di step-ca trattato in La tua autorità di certificazione: step-ca in un container, ed è per questo che ha un articolo a sé. Stesso container, chiavi diverse, file diversi su ogni macchina. Tutto quello che segue è stato provato con step-ca 0.30.2 e OpenSSH 10.0 in un pod Podman.\nSenza CA Con step-ca Un client incontra un server nuovo Mostra un\u0026rsquo;impronta, tu scrivi yes Controlla il certificato host sulla CA, non dice niente Un server viene ricostruito Ogni client avvisa che la chiave è cambiata Firmi la chiave nuova, i client non se ne accorgono Un utente riceve accesso La sua chiave va in authorized_keys su ogni server La CA firma la sua chiave, ogni server la accetta Un utente se ne va Trovi e cancelli la sua chiave su ogni server Smetti di firmare; il suo certificato è morto entro 16 ore Cosa tiene ogni server Un authorized_keys per utente Una chiave pubblica della CA Chi firma cosa, e chi si fida di cosa step-ca chiave CA host chiave CA utente Client cert utente, 16 ore si fida della CA host Server cert host, 30 giorni si fida della CA utente firma la chiave utente firma la chiave host ssh, nessuna domanda ognuno controlla il cert dell'altro La CA firma entrambi i lati. Il client deve fidarsi solo della chiave della CA host, e il server solo della chiave della CA utente. Nessuno dei due tiene una lista delle chiavi dell\u0026rsquo;altro. Attivare la CA SSH Le chiavi SSH vengono create al primo setup di step-ca, oppure mai. Imposta DOCKER_STEPCA_INIT_SSH=true al primo avvio1, e il log mostra due chiavi in più:\nSSH Host CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... SSH User CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... Chiave Firma Chi se ne fida CA host La chiave host di ogni server Ogni client, in known_hosts CA utente La chiave di login di ogni persona Ogni server, in sshd_config Aggiunge anche un provisioner sshpop, che è quello che più avanti permette a un host di rinnovare da solo il proprio certificato. Se la CA sta già girando senza SSH, non c\u0026rsquo;è nessun interruttore da girare. È una CA nuova.\nFirmare l\u0026rsquo;host Prendi la chiave host che il server ha già, firmala e restituisci il certificato al server:\nstep ssh certificate --host --sign \\ --provisioner admin --provisioner-password-file prov-pass \\ nas.home.example ssh_host_ecdsa_key.pub L\u0026rsquo;ordine conta. Con i flag del provisioner dopo il nome host e il file della chiave, step l\u0026rsquo;ha rifiutato:\ntoo many positional arguments were provided in \u0026#39;step ssh certificate \u0026lt;key-id\u0026gt; \u0026lt;key-file\u0026gt;\u0026#39; Metti tutti i flag prima e firma. Il certificato, come lo legge ssh-keygen -L:\nCampo Valore Tipo ecdsa-sha2-nistp256-cert-v01@openssh.com host certificate Key ID nas.home.example Principal nas.home.example Validità 30 giorni, da 2026-10-09T18:34:30 a 2026-11-08T17:35:30 Il principal è il nome che un client deve usare per collegarsi. Collegati con un nome che non è nel certificato e il client non lo accetterà, quindi firma ogni nome a cui l\u0026rsquo;host risponde.\nIl server Due righe in sshd_config2:\nHostCertificate /etc/ssh/ssh_host_ecdsa_key-cert.pub TrustedUserCAKeys /etc/ssh/ssh_user_ca_key.pub HostCertificate consegna il certificato host ai client, e la sua chiave «must match a private host key already specified»2. TrustedUserCAKeys è la chiave pubblica della CA utente, «trusted to sign user certificates for authentication»2. Lancia sshd -t prima di riavviare. Un errore di battitura in uno dei due percorsi e sshd risponde Could not load host certificate, che è molto meglio scoprire adesso che da una sessione rimasta chiusa fuori.\nSul server di prova non c\u0026rsquo;è proprio nessun authorized_keys. ls /home/damien/.ssh/authorized_keys restituisce No such file or directory, e i login qui sotto funzionano lo stesso.\nL\u0026rsquo;utente La CA crea la coppia di chiavi e la firma in un colpo solo:\nstep ssh certificate damien id_ecdsa \\ --provisioner admin --provisioner-password-file prov-pass Campo Valore Tipo user certificate Principal damien Validità 16 ore Estensioni permit-agent-forwarding, permit-port-forwarding, permit-X11-forwarding, permit-pty, permit-user-rc Sedici ore sono il punto. Coprono una giornata di lavoro e muoiono durante la notte. Revocare un utente è soprattutto questione di non firmare per lui domani.\nIl client Una riga in known_hosts sostituisce ogni impronta che altrimenti accumulerebbe3:\n@cert-authority *.home.example ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAy... Vuol dire: qualsiasi host sotto home.example il cui certificato è firmato da questa chiave è autentico. È il marcatore @cert-authority a farne una riga di CA invece della chiave di un singolo host.\nCosa hanno mostrato le prove Tutte e quattro da un client che non aveva altro che il certificato utente e quell\u0026rsquo;unica riga di known_hosts, con StrictHostKeyChecking=yes, così non si poteva accettare niente al volo:\nProva Risultato Chiave firmata con il suo certificato, come damien logged in as damien, exit 0 Stessa chiave, certificato tolto Permission denied (publickey,password,keyboard-interactive) Certificato usato per entrare come root Permission denied: il certificato nomina solo damien Client senza la riga della CA host Host key verification failed. La terza è quella che sfugge. Un certificato non apre ogni account della macchina, solo i principal scritti dentro. Una chiave nell\u0026rsquo;authorized_keys di qualcuno questo non lo sa fare.\nIl rinnovo Un host rinnova il proprio certificato con la chiave che ha già. È il provisioner sshpop, che «allows a client to renew, revoke, or rekey an SSH certificate using that certificate for authentication with the CA»4. Nessuna password5:\nstep ssh renew --force ssh_host_ecdsa_key-cert.pub ssh_host_ecdsa_key Seriale Valido fino a Firmato 15166325869329416997 2026-11-08 17:35:30 Rinnovato 6678957789797316768 2026-11-08 17:35:59 Un seriale nuovo e altri 30 giorni. Mettilo su un timer settimanale e l\u0026rsquo;host non scade mai. Dopo, ricarica sshd, altrimenti il vecchio certificato resta in memoria.\nGli utenti rinnovano chiedendo di nuovo. Uno step ssh certificate al giorno, o al primo login della giornata, e il lavoro è tutto lì.\nDove non regge Caso Cosa succede Cosa fare CA giù I certificati esistenti continuano a funzionare; nessuno ne riceve uno nuovo Far girare la CA su qualcosa che resta su; gli utenti hanno 16 ore di margine Il certificato host scade I client rifiutano l\u0026rsquo;host, come se fosse uno sconosciuto Un timer di rinnovo, e sshd ricaricato subito dopo Un utente deve andarsene oggi, non domani Il suo certificato funziona finché non scade RevokedKeys in sshd_config accetta una lista di chiavi revocate2 Nome host non tra i principal Il client rifiuta l\u0026rsquo;host Firmare ogni nome a cui risponde CA SSH non creata al setup Non c\u0026rsquo;è modo di aggiungerla Una CA nuova, configurata con SSH attivo Rubate le chiavi SSH della CA Chi le ha può entrare ovunque ed essere qualsiasi host Tenere la CA su una macchina sua, con backup, offline se puoi L\u0026rsquo;ultimo è il compromesso. Ogni file authorized_keys era un piccolo rischio a sé. Adesso c\u0026rsquo;è un unico rischio grande, in un posto solo. È meglio, perché un posto solo si può sorvegliare e blindare, ma solo se qualcuno lo fa.\nFiducia dove si può verificare La richiesta dell\u0026rsquo;impronta e il file authorized_keys hanno una cosa in comune. Entrambi chiedono a una persona di prendere una decisione di fiducia senza alcuna informazione, ogni giorno, per sempre. Le persone non sono brave a farlo e non lo saranno mai, quindi smettono di decidere e cominciano a scrivere yes.\nUna CA sposta quella decisione in un posto solo, una volta, dove può essere presa come si deve. L\u0026rsquo;idea è tutta qui, ed è la stessa che sta dietro a ogni standard che valga qualcosa: fai la cosa con cura una volta, mettila per iscritto, e smetti di chiedere alla gente di farla a mente cento volte a settimana. La macchina controlla la firma. Tu controlli la CA. È una divisione del lavoro che regge.\nsmallstep/certificates — docker/entrypoint.sh — DOCKER_STEPCA_INIT_SSH=true aggiunge --ssh a step ca init.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenBSD manual — sshd_config(5) — HostCertificate: «The certificate\u0026rsquo;s public key must match a private host key already specified by HostKey»; TrustedUserCAKeys: «public keys of certificate authorities that are trusted to sign user certificates for authentication»; RevokedKeys: «Keys listed in this file will be refused for public key authentication».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenBSD manual — sshd(8), SSH_KNOWN_HOSTS FILE FORMAT — il marcatore «@cert-authority» «to indicate that the line contains a certification authority (CA) key».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Provisioners, SSHPOP — «An SSHPOP provisioner allows a client to renew, revoke, or rekey an SSH certificate using that certificate for authentication with the CA.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step ssh renew — il comando usato per rinnovare il certificato host.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/certificates/step-ca-ssh-certificates/","summary":"step-ca 0.30.2 usata come autorità di certificazione SSH, provata con OpenSSH 10.0. Perché i certificati battono authorized_keys e la fiducia al primo uso, come attivare la CA SSH al primo setup di step-ca, firmare una chiave host (e l\u0026rsquo;ordine degli argomenti che la fa inciampare), le due righe di sshd_config e l\u0026rsquo;unica riga @cert-authority in known_hosts, un certificato utente da 16 ore, quattro prove di login tra cui un utente sbagliato e un host non fidato, il rinnovo di un certificato host con sshpop, e dove non regge.","title":"Login SSH firmati da step-ca: basta con authorized_keys"},{"content":"Perché i telefoni sono il caso difficile I default di step-ca sono pensati per i server. Un server si rinnova da solo ogni mattina, e La tua autorità di certificazione: step-ca in un container mostra che funziona per i client ACME e per tutto ciò che sa lanciare step ca renew. Quell\u0026rsquo;articolo tratta anche l\u0026rsquo;avvio della CA, le sue due password e la fiducia nella root, e questo riparte da lì. Un telefono con un certificato client per l\u0026rsquo;app di Home Assistant non sa rinnovare niente, e quando ne sparisce uno devi chiuderlo fuori oggi, non quando il suo certificato scade. Cinque default si mettono di traverso, e nessuno fa rumore. Ti lasciano semplicemente con certificati che muoiono domani e una lista di revoca che rifiuta tutti.\nDefault Cosa fa a un telefono Soluzione I certificati durano al massimo 24 ore Il certificato del telefono muore domani, e l\u0026rsquo;app di Home Assistant non sa rinnovarlo Alzare maxTLSCertDuration in ca.json CRL spenta Revocare un telefono perso non cambia niente da nessuna parte Accendere il blocco crl Lo scope della CRL non corrisponde ai certificati nginx rifiuta ogni telefono, anche quelli buoni Impostare idpURL e aggiungere un template con crlDistributionPoints Nessuna CRL per l\u0026rsquo;intermedia nginx rifiuta ancora ogni telefono Firmare una CRL della root vuota una volta l\u0026rsquo;anno La CRL dura 24 ore Quando scade, nginx torna a rifiutare ogni telefono Aggiornarla con un timer Cloudflare fa la metà CA di tutto questo al posto tuo nel suo piano gratuito, come mostra la versione con Cloudflare. Farlo da te vuol dire fare tutti e cinque i passi. Le prove qui sotto sono state fatte su una CA chiamata Home Assistant CA, che è il nome che compare nell\u0026rsquo;output.\nDefault uno: i certificati durano un giorno Chiedi un anno e la CA dice di no:\nThe request was forbidden by the certificate authority: requested duration of 8760h1m0s is more than the authorized maximum certificate duration of 24h1m0s. È il default giusto per server e client ACME, che rinnovano tutto il giorno senza che nessuno se ne accorga. Il telefono è l\u0026rsquo;eccezione. L\u0026rsquo;app di Home Assistant non ha modo di rinnovare il proprio certificato client, quindi un certificato da 24 ore vuol dire passare da ogni telefono ogni giorno.\nLa durata è un\u0026rsquo;impostazione, e sta nella configurazione di step-ca. Ogni provisioner in ca.json accetta delle claims1:\n\u0026#34;claims\u0026#34;: { \u0026#34;maxTLSCertDuration\u0026#34;: \u0026#34;8760h\u0026#34;, \u0026#34;defaultTLSCertDuration\u0026#34;: \u0026#34;24h\u0026#34; } Claim Significato Impostato a maxTLSCertDuration Il certificato più lungo che questo provisioner firma 8760h, un anno defaultTLSCertDuration Quello che ottieni senza chiedere Lasciato a 24h, così un anno è sempre una scelta voluta minTLSCertDuration Il più corto che firma Lasciato com\u0026rsquo;è Riavvia il container e un anno passa. Un anno è una valutazione, non una regola. Più corto vuol dire meno tempo in cui un certificato rubato è utile, e più giri per casa a reinstallarli.\nDefault due: la CRL è spenta Una lista di revoca dei certificati (CRL) è l\u0026rsquo;elenco firmato dei certificati che la CA ha ritirato. È il modo in cui un telefono perso viene chiuso fuori prima che il suo certificato scada, e step-ca non ne crea una se non glielo dici. La documentazione segna la funzione come sperimentale1.\n\u0026#34;crl\u0026#34;: { \u0026#34;enabled\u0026#34;: true, \u0026#34;generateOnRevoke\u0026#34;: true, \u0026#34;cacheDuration\u0026#34;: \u0026#34;24h\u0026#34; } Campo Cosa fa Default enabled Crea una CRL, punto Spento generateOnRevoke Ricostruisce la lista nel momento in cui un certificato viene revocato Spento cacheDuration Quanto resta valida ogni lista 24 ore1 idpURL L\u0026rsquo;URL che la lista dice di coprire Il nome della CA più /1.0/crl2 Ricordati quelle 24 ore. Tornano.\nDefault tre: una CRL che nessuno accetta Con la CRL accesa, revoca un telefono e controlla entrambi i telefoni con la lista:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl.pem -crl_check phone1.crt phone2.crt CN=phone1 error 44 at 0 depth lookup: different CRL scope error phone1.crt: verification failed CN=phone2 error 44 at 0 depth lookup: different CRL scope error phone2.crt: verification failed Falliscono tutti e due, anche il telefono buono. Metti quella lista davanti a nginx e non entra nessuno.\nIl perché lo dice la lista stessa. step-ca marca ogni CRL con un Issuing Distribution Point critico, che dice «questa lista copre i certificati che puntano qui». I certificati che ha emesso non puntano da nessuna parte:\n$ openssl crl -in crl.pem -noout -text X509v3 Issuing Distribution Point: critical Full Name: URI:https://localhost/1.0/crl $ openssl x509 -in phone1.crt -noout -ext crlDistributionPoints No extensions in certificate OpenSSL non applica una lista il cui scope non corrisponde al certificato. Quindi fallisce in chiusura. Il che è giusto, e non serve a nessuno.\nLa CRL dice di coprire Il certificato dice che la sua CRL sta in Risultato Così com\u0026rsquo;è https://localhost/1.0/crl, critico Da nessuna parte different CRL scope, tutti rifiutati idpURL e un template http://ca.home.example/1.0/crl http://ca.home.example/1.0/crl I telefoni buoni passano, quelli revocati no L\u0026rsquo;URL di default non è nemmeno uno su cui la CA risponde. Lo dice lo stesso sorgente di step-ca: «this is currently using the port 443 by default»2. Due impostazioni lo sistemano, e devono nominare entrambe lo stesso URL. idpURL va nel blocco crl di ca.json, e un template sul provisioner stampa i crlDistributionPoints corrispondenti in ogni certificato3:\n{ \u0026#34;subject\u0026#34;: {{ toJson .Subject }}, \u0026#34;sans\u0026#34;: {{ toJson .SANs }}, \u0026#34;keyUsage\u0026#34;: [\u0026#34;digitalSignature\u0026#34;], \u0026#34;extKeyUsage\u0026#34;: [\u0026#34;serverAuth\u0026#34;, \u0026#34;clientAuth\u0026#34;], \u0026#34;crlDistributionPoints\u0026#34;: [\u0026#34;http://ca.home.example/1.0/crl\u0026#34;] } \u0026#34;options\u0026#34;: { \u0026#34;x509\u0026#34;: { \u0026#34;templateFile\u0026#34;: \u0026#34;templates/leaf-crl.tpl\u0026#34; } } Riemetti i certificati dei telefoni, perché solo i certificati nuovi portano quel campo, e lo stesso controllo dà la risposta giusta:\nCN=phone2 error 23 at 0 depth lookup: certificate revoked error phone2.crt: verification failed phone1.crt: OK Anche la root ha bisogno di una CRL Quel controllo guardava solo il certificato del telefono. nginx guarda tutta la catena. Imposta il flag CRL_CHECK_ALL di OpenSSL4, e la sua documentazione lo dice chiaro: «When using intermediate certificates, their CRLs should be specified in the same file»5. step-ca emette i certificati dalla sua intermedia ed elenca sempre e solo le revoche dell\u0026rsquo;intermedia. Niente dice se l\u0026rsquo;intermedia stessa è ancora buona:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl.pem -crl_check_all phone1.crt O=Home Assistant CA, CN=Home Assistant CA Intermediate CA error 3 at 1 depth lookup: unable to get certificate CRL Quale CRL copre quale certificato CA root fidata così com'è Intermedia firma ogni cert phone1 buono phone2 revocato Server ha.example.com firma nginx controlla ogni anello un anello senza CRL viene rifiutato CRL della root 365 giorni, da OpenSSL CRL di step-ca 24 ore, elenca phone2 copre copre Ogni anello sotto la root ha bisogno di una CRL del certificato sopra di lui. step-ca copre la riga in basso. Niente copre l\u0026rsquo;intermedia finché non firmi tu una CRL della root. La soluzione è una CRL firmata dalla root che non revoca niente. OpenSSL la crea dalla chiave della root e dal file della password della CA, e può durare un anno perché la root non revoca niente giorno per giorno:\n[ca] default_ca = root [root] database = index.txt crlnumber = crlnumber default_md = sha256 default_crl_days = 365 private_key = root_ca_key certificate = root_ca.crt crl_extensions = crl_ext [crl_ext] authorityKeyIdentifier = keyid:always touch index.txt \u0026amp;\u0026amp; echo 1000 \u0026gt; crlnumber openssl ca -config root-crl.cnf -gencrl -passin file:password -out root.crl.pem Le due liste in un file solo, e tutta la catena torna:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl-chain.pem -crl_check_all phone1.crt phone2.crt CN=phone2 error 23 at 0 depth lookup: certificate revoked error phone2.crt: verification failed phone1.crt: OK Segnati una data in agenda tra un anno. Quando la CRL della root scade, ogni telefono viene di nuovo chiuso fuori.\nPubblicare la CRL La CRL deve stare dove punta l\u0026rsquo;URL scritto in ogni certificato. Non sulla CA stessa.\nScelta Perché Un web server davanti, non la porta 9000 La porta 9000 è tutta l\u0026rsquo;API di step-ca, firma compresa. A nessuno serve altro che la lista HTTP semplice, non HTTPS La RFC 5280 dice che un distribution point «SHOULD include at least one LDAP or HTTP URI»6. Scaricarla in HTTPS richiede il controllo di un certificato, che richiede la lista. L\u0026rsquo;HTTP rompe il cerchio Nessuna paura di manomissioni La lista è firmata. Cambia un byte e la firma non torna Rispondono solo i due percorsi delle CRL Tutto il resto è un 404 Entrambi i web server lo fanno in poche righe, ed entrambi passano la lista così com\u0026rsquo;è da step-ca e servono la CRL della root come file:\nserver { listen 80; listen [::]:80; server_name ca.home.example; location = /1.0/crl { proxy_pass https://127.0.0.1:9000; proxy_ssl_trusted_certificate /etc/step/root_ca.crt; proxy_ssl_verify on; proxy_ssl_name localhost; } location = /root.crl { alias /etc/step/root.crl; default_type application/pkix-crl; } location / { return 404; } } http://ca.home.example { handle /1.0/crl { reverse_proxy https://127.0.0.1:9000 { transport http { tls_trust_pool file /etc/step/root_ca.crt tls_server_name localhost } } } handle /root.crl { header Content-Type application/pkix-crl root * /etc/step file_server } handle { respond 404 } } Richiesta nginx Caddy /1.0/crl 200, application/pkix-crl, emittente l\u0026rsquo;intermedia 200, application/pkix-crl, emittente l\u0026rsquo;intermedia /root.crl 200, application/pkix-crl 200, application/pkix-crl /roots.pem, /1.0/sign e il resto dell\u0026rsquo;API 404 404 Entrambi rispondono su IPv6 oltre che su IPv4, ed è giusto così. Caddy ascolta su entrambi per default. nginx ascolta solo dove gli viene detto, quindi listen 80; da solo è solo IPv4 e ha bisogno di listen [::]:80; accanto. Provata su ::1, la lista è tornata con 200 da entrambi una volta che nginx ha avuto quella riga. step-ca ascolta su entrambi già così com\u0026rsquo;è.\nLa prova girava sulle porte 8080 e 8081, quindi l\u0026rsquo;URL nei certificati di prova aveva una porta. In uso è la porta 80 e l\u0026rsquo;URL è esattamente quello che dice il template.\nTenerla fresca Ogni CRL creata da step-ca porta un nextUpdate a 24 ore. Dopo è scaduta, e una lista scaduta fallisce nello stesso modo di una lista mancante:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl-chain.pem -crl_check_all \\ -attime $(( $(date +%s) + 172800 )) phone1.crt error 12 at 0 depth lookup: CRL has expired Quello è il telefono buono. Due giorni dopo. Chiuso fuori, perché niente è andato a prendere una lista nuova.\nPubblicare la CRL e tenerla fresca step-ca :9000, tutta l'API resta dentro nginx o Caddy porta 80, v4 e v6 /1.0/crl, /root.crl il resto 404 La lista scade dopo 24 ore, ogni telefono rifiutato Timer ogni poche ore proxy mTLS ssl_crl, ricaricato CRL scarica ricarica si ferma L\u0026rsquo;API di step-ca resta dentro. Il web server distribuisce solo le due liste, e un timer va a prendere quella fresca e ricarica il proxy. Ferma il timer e la lista scade un giorno dopo, chiudendo fuori ogni telefono. nginx legge ssl_crl solo quando parte o viene ricaricato. Quindi qualcosa deve scaricare la lista, ricostruire il file e ricaricare nginx ogni poche ore, per tutto il tempo che questa cosa resta in funzione, che qualcuno guardi o no.\n#!/bin/sh # Fetch step-ca\u0026#39;s CRL, add the root CRL, and reload nginx only if both parse. set -eu dir=${CRL_DIR:-/etc/nginx/pki} tmp=$(mktemp) trap \u0026#39;rm -f \u0026#34;$tmp\u0026#34; \u0026#34;$tmp.pem\u0026#34;\u0026#39; EXIT curl -fsS --max-time 20 \u0026#34;${CRL_URL:-http://ca.home.example/1.0/crl}\u0026#34; -o \u0026#34;$tmp\u0026#34; openssl crl -inform DER -in \u0026#34;$tmp\u0026#34; -out \u0026#34;$tmp.pem\u0026#34; openssl crl -in \u0026#34;$dir/root.crl.pem\u0026#34; -noout cat \u0026#34;$tmp.pem\u0026#34; \u0026#34;$dir/root.crl.pem\u0026#34; \u0026gt; \u0026#34;$dir/crl-chain.pem.new\u0026#34; mv \u0026#34;$dir/crl-chain.pem.new\u0026#34; \u0026#34;$dir/crl-chain.pem\u0026#34; ${RELOAD:-nginx -s reload} Esecuzione Risultato Normale Lista nuova al suo posto, nginx ricaricato, phone1 200, phone2 revocato 400 CA irraggiungibile curl: (22) The requested URL returned error: 404, exit 22, vecchia lista lasciata dov\u0026rsquo;era, nessun reload Il lavoro vero lo fa set -e. Un download fallito non deve mai scrivere un file vuoto sopra uno buono, perché una lista rotta chiude fuori tutti esattamente come una lista vecchia. Lancialo ogni poche ore da un timer systemd o da cron. Così ha diversi tentativi prima che qualcosa scada. Niente di furbo, ed è il pezzo che tiene la porta funzionante.\nDare a un telefono il suo certificato Un certificato per telefono, col nome del telefono, per un anno:\nstep ca certificate phone1 phone1.crt phone1.key \\ --provisioner admin --provisioner-password-file prov-pass \\ --not-after 8760h --kty EC Il telefono vuole il certificato, la sua chiave e l\u0026rsquo;intermedia in un unico file PKCS12, e step lo costruisce da solo7:\nstep certificate p12 phone1.p12 phone1.crt phone1.key \\ --ca certs/intermediate_ca.crt MAC: sha256, Iteration 2048 PKCS7 Encrypted data: PBES2, PBKDF2, AES-256-CBC, Iteration 2048, PRF hmacWithSHA256 È la cifratura moderna, ed è quella che la documentazione di Home Assistant Companion dice di provare per prima, prima di ripiegare su un contenitore legacy8.\nAl telefono servono tre cose dalla CA, non una:\nFile Da installare come Perché root_ca.crt Certificato CA Così il telefono si fida del certificato server che step-ca ha emesso per il proxy intermediate_ca.crt Certificato CA La catena tra la root e ogni certificato che la CA firma davvero phone1.p12 Certificato utente per VPN e app La chiave del telefono, la cosa che lo fa entrare L\u0026rsquo;app Android di Home Assistant si fida dei certificati CA installati dall\u0026rsquo;utente oltre che di quelli di sistema9, quindi un certificato server di step-ca funziona. Ed è anche la serratura migliore per questo lavoro. Il nome host conta solo dentro casa e per i telefoni, e un dispositivo senza la tua root non si fida nemmeno del server, figuriamoci superarlo.\nQuando il telefono sparisce:\nstep ca revoke --cert phone2.crt --key phone2.key --reason \u0026#34;phone lost\u0026#34; Certificate with Serial Number 89334534279272070053632987406394420097 has been revoked. La lista nuova viene costruita sul momento, e l\u0026rsquo;aggiornamento successivo la mette davanti a nginx.\nUna CA è una promessa che mantieni ogni giorno Facendo girare tutto questo, quello che mi ha colpito è quanto poco del lavoro consista nell\u0026rsquo;emettere certificati. Un comando. Tutto qui. Il lavoro sta tutto nelle promesse che ci stanno attorno: che un telefono revocato resti fuori, che un telefono buono resti dentro, che la lista non sia mai vecchia. step-ca mantiene la prima e lascia il resto a te, e i suoi default danno per scontato che tu sia una flotta di server che si rinnovano da soli ogni mattina.\nNon è un difetto, è il pubblico per cui è stata costruita. Ma è la distanza tra quello che uno strumento fa e quello che viene venduto come capace di fare. «Fatti la tua CA» suona come un container e un pomeriggio. È un container, un pomeriggio, un template, una CRL della root con una data in agenda, e un timer di cui ti dimenticherai l\u0026rsquo;esistenza fino al giorno in cui si ferma.\nFallo lo stesso. Una CA che gestisci tu è una CA che nessun altro può spegnere, rimettere a listino o leggere. Sappi solo che possedere le chiavi vuol dire possedere le faccende, e sono le faccende a tenere la porta chiusa.\nSmallstep — step-ca configuration — maxTLSCertDuration, defaultTLSCertDuration, minTLSCertDuration; il blocco crl è «(experimental)», cacheDuration «Defaults to 24h».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsmallstep/certificates v0.30.2 — authority/tls.go — l\u0026rsquo;Issuing Distribution Point della CRL è idpURL se impostato, altrimenti il nome della CA più /1.0/crl, marcato critico.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Certificate templates — crlDistributionPoints «defines URLs with the certificate revocation list».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnginx — src/event/ngx_event_openssl.c — ssl_crl imposta X509_V_FLAG_CRL_CHECK|X509_V_FLAG_CRL_CHECK_ALL.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnginx — ngx_http_ssl_module, ssl_crl — «When using intermediate certificates, their CRLs should be specified in the same file.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5280 — Internet X.509 PKI Certificate and CRL Profile — sezione 4.2.1.13: il DistributionPointName «SHOULD include at least one LDAP or HTTP URI».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step certificate p12 — impacchetta un certificato, la sua chiave e i certificati CA in un file PKCS12.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Networking, TLS Client Authentication — prima prova il default PKCS12 attuale, il contenitore OpenSSL -legacy solo se quello fallisce.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/android — network_security_config.xml — i trust anchor sono system più user: «Additionally trust user added CAs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/certificates/step-ca-client-certificates-mtls/","summary":"step-ca 0.30.2 usata per emettere certificati client per il TLS reciproco, provata da capo a fondo con nginx 1.30.5 e Caddy 2.11.7. Perché i telefoni sono il caso difficile, alzare in ca.json il limite di 24 ore sui certificati, accendere la CRL, perché fallisce con «different CRL scope» finché idpURL e un template non aggiungono un distribution point corrispondente, la CRL della root che serve a nginx per tutta la catena, la pubblicazione delle CRL in HTTP semplice su IPv4 e IPv6, il job di aggiornamento che impedisce a una CRL scaduta di chiudere fuori tutti, e come emettere, impacchettare, installare e revocare il certificato di un telefono.","title":"Certificati client da step-ca, e i default che chiudono fuori tutti"},{"content":"Stessa serratura, la tua porta L\u0026rsquo;app di Home Assistant su Cloudflare, bloccata a un certificato mette la serratura sull\u0026rsquo;edge di Cloudflare. Il telefono ha un certificato, Cloudflare lo controlla, e tutto ciò che non ne ha uno non arriva mai in casa. Funziona, è gratis, e significa che Cloudflare tiene il cancello e legge il traffico mentre passa.\nQuesta è la stessa serratura con la porta in casa tua. nginx o Caddy controlla il certificato. La tua autorità di certificazione lo emette. Nessun altro sta nel mezzo. La pagina di login resta invisibile a chiunque non abbia un certificato, quindi a cambiare non è se gli estranei entrano. È chi fa il lavoro, e chi si prende il rischio quando qualcosa va storto.\nTutto quello che c\u0026rsquo;è qui è stato costruito e provato: nginx 1.30.5 e Caddy 2.11.7 in Podman, certificati da step-ca 0.30.2, ogni proxy colpito senza certificato, con un certificato valido, con uno revocato e con un upgrade WebSocket, su IPv4 e IPv6. Il backend del test era un piccolo sostituto che rimanda indietro gli header che riceve, quindi i risultati mostrano esattamente cosa riceverebbe Home Assistant.\nCosa cambia quando Cloudflare se ne va mTLS in casa con nginx o Caddy Telefono ha un cert Chiunque altro nessun cert Un flood non serve un cert Rete di casa Router porta 443 nessuno scudo anti-DDoS nginx o Caddy risale alla tua CA? non revocato? IPv4 e IPv6 step-ca Home Assistant si fida del proxy Respinto nell'handshake passa fallisce Adesso arriva tutto al tuo router. Il proxy rifiuta qualsiasi cosa senza un certificato valido prima che Home Assistant la veda. Un flood non ha bisogno di certificati e, senza nessuno a monte che lo assorba, finisce sulla tua linea. Versione Cloudflare nginx o Caddy in casa Chi controlla il certificato L\u0026rsquo;edge di Cloudflare, con una regola WAF Il tuo proxy, durante l\u0026rsquo;handshake TLS Autorità di certificazione Gestita da Cloudflare La tua, step-ca per i certificati client Chi vede il traffico in chiaro Cloudflare, poi Home Assistant Il tuo proxy e Home Assistant, nessun altro Ingresso dall\u0026rsquo;esterno Un tunnel, solo in uscita Un port forward verso il proxy Un DDoS finisce su Cloudflare La tua linea di casa Quanto costa la connessione di uno sconosciuto Niente in casa Un handshake TLS sul proxy, mai un login di Home Assistant IPv4 e IPv6 Entrambi, Cloudflare risponde su tutti e due Entrambi se la linea li ha e il proxy ascolta su entrambi Revoca Integrata, controllata dalla regola nginx controlla una CRL; Caddy tiene una allowlist Quando il fornitore è giù Nessun accesso remoto Non cambia niente Costi di esercizio Piano gratuito Gratis, più il tuo tempo sulla CA Le due righe che contano di più tirano in direzioni opposte. Nessun altro legge il tuo traffico o può spegnerti, e questa è sovranità, l\u0026rsquo;intera ragione per farlo. Ma il port forward è tornato, quindi scansioni e flood colpiscono la tua linea invece di quella di Cloudflare. La differenza rispetto al semplice port forward del confronto nell\u0026rsquo;articolo su Cloudflare è cosa trovano quando arrivano: un proxy che chiude la connessione durante l\u0026rsquo;handshake, non la pagina di login di Home Assistant.\nSii chiaro su cosa ti compra e cosa no. Il tuo reverse proxy non ti dà alcuna protezione DDoS. L\u0026rsquo;mTLS impedisce a uno sconosciuto di entrare. Non fa niente per impedirgli di riempirti la linea, e un flood non ha bisogno di un certificato per riempirla. Cloudflare lo assorbe per te su ogni piano, compreso quello gratuito1. Qui non c\u0026rsquo;è nessuno a monte che lo assorba, quindi un flood abbastanza grande stacca l\u0026rsquo;intera casa da internet, e il proxy può rifiutare solo le connessioni che riesce a vedere.\nnginx o Caddy Entrambi fanno il lavoro. Differiscono in un punto che conta. La revoca.\nLa revoca con nginx e con Caddy nginx: una CRL, scaricata da un timer step-ca revoca, nuova CRL /1.0/crl HTTP semplice Timer scarica, ricarica nginx controlla la catena Caddy: una allowlist, tenuta a mano Tu a ogni riemissione Allowlist cert esatti Ricarica dopo ogni modifica Caddy verifier leaf nginx riceve una CRL da un timer e la controlla a ogni connessione. Caddy non supporta le CRL, quindi la revoca è un elenco di certificati esatti che tieni a mano. nginx 1.30.5 Caddy 2.11.7 Nessun certificato L\u0026rsquo;handshake si completa, 400 No required SSL certificate was sent Handshake rifiutato, curl esce con 55 Certificato revocato Rifiutato, 400 The SSL certificate error Fatto entrare senza problemi con il solo controllo della CA Metodo di revoca Una CRL, controllata su tutta la catena Una allowlist di certificati, il verifier leaf WebSocket per l\u0026rsquo;app Servono gli header Upgrade e Connection Funziona senza configurazione aggiuntiva IPv6 Solo aggiungendo listen [::]:443 Ascolta su entrambi di default Configurazione Circa 30 righe Circa 15 righe La revoca è il punto su cui decidere. La documentazione di Caddy elenca un solo verifier incluso nel Caddy standard, leaf, e controlla se il certificato «is one of a defined set of permitted certificates»2. Non c\u0026rsquo;è CRL e non c\u0026rsquo;è OCSP per i certificati client. Punta Caddy solo alla CA e un telefono revocato entra tranquillo. Il test ha mostrato esattamente questo: phone2, revocato un\u0026rsquo;ora prima, ha avuto un 200. La allowlist chiude la falla. È anche un elenco che tieni a mano, per tutto il tempo che lo usi.\nLa configurazione di nginx map $http_upgrade $connection_upgrade { default upgrade; \u0026#39;\u0026#39; close; } server { listen 443 ssl; listen [::]:443 ssl; server_name ha.example.com; ssl_certificate /etc/nginx/pki/server-chain.pem; ssl_certificate_key /etc/nginx/pki/server.key; ssl_protocols TLSv1.2 TLSv1.3; # The mTLS half: only certificates from our CA, and not revoked. ssl_client_certificate /etc/nginx/pki/client-ca.pem; ssl_verify_client on; ssl_verify_depth 2; ssl_crl /etc/nginx/pki/crl-chain.pem; location / { proxy_pass http://192.0.2.10:8123; proxy_http_version 1.1; proxy_set_header Host $host; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_header X-Forwarded-Proto $scheme; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection $connection_upgrade; } } Riga Perché c\u0026rsquo;è listen [::]:443 ssl Senza, nginx è solo IPv4, e un telefono su una rete IPv6 non ha dove atterrare ssl_verify_client on Niente certificato, niente ingresso. optional lascerebbe passare la richiesta per giudicarla dopo ssl_verify_depth 2 step-ca firma da un intermedio, quindi la catena è telefono, intermedio, radice. Il default di 1 si ferma prima3 ssl_client_certificate L\u0026rsquo;intermedio e la radice in un solo file ssl_crl La CRL di step-ca e una CRL della radice in un solo file. nginx controlla ogni anello della catena, quindi le vuole entrambe Upgrade e Connection L\u0026rsquo;app parla con Home Assistant su un WebSocket. Senza questi l\u0026rsquo;app si carica e poi resta ferma lì Il file della CRL è la parte che richiede attenzione, ed è tutto in Certificati client da step-ca: perché la CRL di step-ca viene rifiutata finché un template non ne corregge l\u0026rsquo;ambito, perché nginx vuole anche una CRL dalla radice, e il timer che la rinnova prima che scada. Salta questo passaggio e nginx chiude fuori ogni telefono, compresi quelli buoni.\nCosa ha restituito il test:\nClient IPv4 IPv6 Nessun certificato 400 No required SSL certificate was sent 400 phone1 200, X-Forwarded-For: 127.0.0.1 200, X-Forwarded-For: ::1 phone2, revocato 400 The SSL certificate error 400 phone1, upgrade WebSocket 200, Upgrade: websocket passato 200, Upgrade: websocket passato Prima che entrasse la riga listen per IPv6, la richiesta IPv6 non si connetteva proprio. curl usciva con 7.\nLa configurazione di Caddy ha.example.com { tls /etc/caddy/pki/server-chain.pem /etc/caddy/pki/server.key { client_auth { mode require_and_verify trust_pool file /etc/caddy/pki/client-ca.pem verifier leaf { file /etc/caddy/pki/allowed-phones.pem } } } reverse_proxy 192.0.2.10:8123 } require_and_verify significa che il certificato deve esserci e deve risalire alla CA2. verifier leaf è la revoca. Entrano solo i certificati presenti in allowed-phones.pem, quindi revocare un telefono significa togliere il suo certificato da quel file e ricaricare.\nClient IPv4 IPv6 Nessun certificato Handshake rifiutato Handshake rifiutato phone1, nell\u0026rsquo;elenco 200, X-Forwarded-For: 127.0.0.1 200, X-Forwarded-For: ::1 phone2, revocato, solo controllo della CA 200 phone2, non nell\u0026rsquo;elenco Handshake rifiutato Handshake rifiutato phone1, upgrade WebSocket su HTTP/1.1 200, Upgrade: websocket passato La allowlist ha una trappola tutta sua, e il test ci è finito dritto dentro. L\u0026rsquo;elenco contiene certificati esatti, non nomi. Riemetti il certificato di un telefono e quello nuovo non è nell\u0026rsquo;elenco. phone1 è stato riemesso a metà dei test e Caddy l\u0026rsquo;ha rifiutato con tls alert bad certificate finché l\u0026rsquo;elenco non è stato ricostruito. Ogni rinnovo adesso è due lavori. Emettere il certificato, poi aggiornare l\u0026rsquo;elenco. Dimentica il secondo e il telefono resta chiuso fuori per niente.\nAll\u0026rsquo;avvio Caddy scrive anche nel log enabling strict SNI-Host enforcement because TLS client auth is configured. È lui che fa la cosa giusta: una richiesta deve chiedere lo stesso nome host nell\u0026rsquo;handshake e nella richiesta HTTP, così nessuno può superare il controllo del certificato per un sito e poi chiederne un altro.\nIl lato Home Assistant Le stesse impostazioni della versione con Cloudflare, puntate a un proxy diverso. In Impostazioni → Sistema → Rete → Server HTTP4:\nImpostazione Valore Perché Fidati di X-Forwarded-For Attivo Senza, Home Assistant rifiuta le richieste che passano da un proxy Proxy fidati Solo l\u0026rsquo;indirizzo del proxy, IPv4 e IPv6, per esempio 192.0.2.20 e 2001:db8::20 Solo quella macchina può dire di inoltrare per conto di qualcuno Abilita il ban degli IP Attivo I ban finiscono sul vero indirizzo del client che il proxy passa avanti URL di Home Assistant, Internet https://ha.example.com L\u0026rsquo;app lo prende come URL esterno Elenca l\u0026rsquo;indirizzo IPv6 del proxy oltre a quello IPv4. Il test mostra nginx che inoltra ::1 come indirizzo del client su IPv6, e nell\u0026rsquo;uso reale inoltra quello da cui è arrivato il telefono. Se Home Assistant si fida solo dell\u0026rsquo;indirizzo IPv4 del proxy, ogni richiesta che gli arriva dal proxy su IPv6 viene rifiutata.\nIl telefono Da step-ca, il telefono ha bisogno di tre file. È tutto spiegato nell\u0026rsquo;articolo sui certificati client di step-ca, e la configurazione della CA stessa in La tua autorità di certificazione.\nFile Da installare come Certificato radice Certificato CA Certificato intermedio Certificato CA Il file PKCS12 del telefono Certificato utente per VPN e app5 Anche il certificato server sul proxy viene da step-ca. L\u0026rsquo;app Android di Home Assistant si fida dei certificati CA installati dall\u0026rsquo;utente6, quindi lo accetta, e questa è una seconda serratura, non un fastidio. Un dispositivo che non ha la tua radice non si fida del server, prima ancora che si ponga la questione del suo certificato.\nPoi imposta il livello di sicurezza della connessione dell\u0026rsquo;app su Most secure, come nella versione con Cloudflare7.\nDove cede Caso Cosa succede Cosa fare La CRL scade nginx rifiuta ogni telefono Rinnovala con un timer, come nell\u0026rsquo;articolo su step-ca Scade la CRL della radice Lo stesso, un anno dopo Una data in agenda Caddy, telefono revocato Entra a meno che non sia fuori dalla allowlist Tieni l\u0026rsquo;elenco, o usa nginx Caddy, telefono riemesso Chiuso fuori finché l\u0026rsquo;elenco non viene aggiornato Aggiorna l\u0026rsquo;elenco a ogni certificato Linea di casa dietro carrier-grade NAT, senza IPv6 Niente può raggiungere il port forward IPv6, o la versione con Cloudflare Un flood diretto alla linea di casa Stacca tutta la casa, non solo Home Assistant La versione con Cloudflare, se ti preoccupa più di una terza parte iPhone, Wear OS Come nella versione con Cloudflare: l\u0026rsquo;app documentata è quella Android, Wear OS vuole il PKCS12 in fase di configurazione5 Provalo prima di farci affidamento Nessuno di questi è nascosto. Ognuno è un lavoro. Scrivilo con accanto una data o un comando e resta un lavoro, non una sorpresa.\nPossedere tutto quanto La versione con Cloudflare e questa tengono fuori lo stesso estraneo. La differenza è di chi ti devi fidare mentre lo fanno.\nCon Cloudflare ti fidi di un\u0026rsquo;azienda che tiene il cancello, decifra il traffico e continua a offrirlo gratis. Con questa ti fidi di te stesso: rinnovare una CRL, tenere in ordine un elenco e accorgerti quando arriva una data. Nessuna delle due è priva di fiducia. Una la affida a qualcuno che non paghi e che non puoi chiamare. L\u0026rsquo;altra la tiene in casa, dove puoi vederla cedere e sistemarla.\nPer la porta d\u0026rsquo;ingresso di una casa, so quale preferisco. Il lavoro è qualche file e un timer. Per questo l\u0026rsquo;unica cosa che chiede davvero è che tu te ne occupi, che è quello che ha sempre voluto dire possedere qualcosa.\nCloudflare — DDoS Protection — rilevamento e mitigazione automatici dei DDoS, «Available on all plans».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — tls directive, client_auth — require_and_verify «Require clients to present a valid certificate that is verified»; «The one verifier, currently, shipped in standard Caddy is leaf», che controlla che il certificato «is one of a defined set of permitted certificates».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnginx — ngx_http_ssl_module — ssl_verify_depth vale 1 di default; ssl_crl: «When using intermediate certificates, their CRLs should be specified in the same file.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant — HTTP integration — reverse proxy, proxy fidati e ban degli IP; impostazioni nell\u0026rsquo;interfaccia dalla 2026.8.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Getting Started, TLS client authentication — da installare come «VPN \u0026amp; app user certificate»; Wear OS vuole il certificato in formato PKCS12 durante la configurazione iniziale.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/android — network_security_config.xml — i trust anchor sono system più user: «Additionally trust user added CAs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Connection security level — Most secure usa un URL non cifrato solo sulla rete di casa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/homeassistant/home-assistant-app-mtls-nginx-caddy/","summary":"Bloccare l\u0026rsquo;app di Home Assistant a un certificato client con nginx o Caddy in casa, con step-ca come autorità di certificazione al posto di Cloudflare. Cosa cambia quando Cloudflare esce dal percorso, una configurazione nginx e una Caddy provate ciascuna senza certificato, con uno valido, con uno revocato e con un upgrade WebSocket su IPv4 e IPv6, perché nginx può controllare una CRL e Caddy può solo tenere una allowlist, le impostazioni dei proxy fidati di Home Assistant, cosa va installato sul telefono e dove il sistema cede.","title":"L'app di Home Assistant bloccata a un certificato, con nginx o Caddy e senza Cloudflare"},{"content":"Perché gestire una CA tua Guarda cosa c\u0026rsquo;è oggi su una rete di casa. Un NAS, Proxmox, Home Assistant, una stampante, la pagina di amministrazione del router. Ognuno serve HTTPS con un certificato autofirmato. Ogni browser che ci passa mostra un avviso. La gente clicca e va avanti. Poi clicca e va avanti sul successivo, e su quello dopo, finché ignorare un avviso di certificato diventa semplicemente quello che si fa. È proprio l\u0026rsquo;abitudine di cui ha bisogno un attaccante.\nUna CA pubblica non lo risolve. Let\u0026rsquo;s Encrypt non emette per localhost «because nobody uniquely owns it»1, e lo stesso vale per qualsiasi nome che esiste solo dentro casa. Anche per un dominio vero, ogni certificato che emette finisce nei log pubblici di Certificate Transparency2. Prendine uno per nas.yourname.uk e il nome del tuo NAS diventa di dominio pubblico.\nUna CA tua risolve entrambe le cose. Firma qualsiasi nome usi dentro casa. Non viene pubblicato niente da nessuna parte. Una volta che ogni dispositivo si fida della sua root, gli avvisi spariscono, e un avviso torna a voler dire qualcosa.\nstep-ca è la CA open source di Smallstep, e gira in un solo container. Tutto quello che segue è stato provato su step-ca 0.30.2 in Podman, con Caddy 2.11.7 e nginx 1.30.5 come client.\nCaso d\u0026rsquo;uso Cosa gli dà step-ca Sezione Ogni dispositivo che si fida dei tuoi certificati Una root da installare, una volta Fidarsi della root HTTPS interno per tutto ciò che parla ACME Lo stesso protocollo di Let\u0026rsquo;s Encrypt, per i nomi interni HTTPS interno con ACME Servizi senza client ACME Certificati che si rinnovano da soli con un timer Servizi che non sanno fare ACME Telefoni e altri certificati client Chiavi che un dispositivo tiene per entrare, e un modo per revocarle Un articolo a sé: i default remano contro Login SSH Certificati al posto di authorized_keys Un articolo a sé: una configurazione diversa Due di questi hanno un articolo a sé, perché ognuno è una configurazione a parte. Certificati client da step-ca tratta telefoni e mTLS, dove vanno cambiati cinque default. Login SSH firmati da step-ca tratta SSH, che usa chiavi diverse e file diversi su ogni macchina.\nAvviarla L\u0026rsquo;immagine si inizializza da sola al primo avvio a partire da alcune variabili d\u0026rsquo;ambiente3. Due di queste decidono cose che poi non si possono cambiare senza ricominciare da capo, quindi impostale dal primo giorno.\nVariabile Cosa fa DOCKER_STEPCA_INIT_NAME Il nome dell\u0026rsquo;emittente su ogni certificato DOCKER_STEPCA_INIT_DNS_NAMES I nomi su cui risponde la CA DOCKER_STEPCA_INIT_ACME=true Aggiunge un provisioner ACME per l\u0026rsquo;HTTPS interno DOCKER_STEPCA_INIT_SSH=true Crea anche le chiavi CA SSH per host e utenti Gli interruttori ACME e SSH li legge l\u0026rsquo;entrypoint dell\u0026rsquo;immagine4. Accendili adesso anche se oggi te ne serve solo uno. Aggiungere SSH dopo vuol dire costruire una CA nuova.\npodman run -d --name step-ca \\ -v step:/home/step \\ -p 9000:9000 \\ -e DOCKER_STEPCA_INIT_NAME=\u0026#34;Home CA\u0026#34; \\ -e DOCKER_STEPCA_INIT_DNS_NAMES=\u0026#34;localhost,ca.home.example\u0026#34; \\ -e DOCKER_STEPCA_INIT_ACME=true \\ -e DOCKER_STEPCA_INIT_SSH=true \\ docker.io/smallstep/step-ca:0.30.2 Crea una root, un\u0026rsquo;intermedia firmata da quella root, le chiavi SSH e tre provisioner, poi resta in ascolto sulla porta 9000:\nX.509 Root Fingerprint: cd2f8d4c60af32a0a534781cd63b4e2a9ce362e2c1ae5983b56a370bfa2c2489 SSH Host CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... SSH User CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... Serving HTTPS on :9000 ... Provisioner Tipo Firma admin JWK Qualsiasi cosa chiedi, con la sua password acme ACME Certificati per i client che dimostrano di possedere il nome sshpop SSHPOP I rinnovi dei certificati host SSH Il provisioner è l\u0026rsquo;idea che la CA ha di «chi sta chiedendo». Ognuno ha le sue regole, e quasi tutto quello che segue consiste nell\u0026rsquo;impostare quelle regole.\nUna CA, cinque usi container step-ca Root, intermedia una root di cui fidarsi acme admin sshpop CRL provisioner Ogni dispositivo root fidata una volta Caddy, ACME 24 h, si rinnova da sé Senza ACME step ca renew --daemon Telefoni 1 anno, revocato via CRL SSH articolo a sé Una root, fidata una volta, e un provisioner per ogni via d\u0026rsquo;ingresso. I client ACME e i servizi rinnovati vivono bene con il default di 24 ore; per i telefoni va cambiato; SSH ha un articolo a sé. Fissa la versione. Il giorno in cui è stato scritto questo articolo latest era la 0.30.2, e una CA è l\u0026rsquo;ultima cosa che vuoi veder cambiare sotto i piedi a un pull.\nDue password, non una La guida Docker di Smallstep dice che una sola password generata copre sia «the encrypted CA keys and the default CA provisioner», conservata in secrets/password3. Su questa immagine non va così. Prova a emettere un certificato con quella password e il provisioner la rifiuta:\nfailed to decrypt JWE: invalid password Lo spiega l\u0026rsquo;entrypoint stesso dell\u0026rsquo;immagine. Genera due password casuali, una per le chiavi della CA e una per il provisioner. Quella del provisioner viene stampata nel log una volta sola, poi distrutta4:\necho \u0026#34;👉 Your CA administrative password is: $(\u0026lt; $STEPPATH/provisioner_password )\u0026#34; ... shred -u $STEPPATH/provisioner_password Password Sblocca Dove finisce secrets/password Le chiavi della root e dell\u0026rsquo;intermedia Nel volume, usata a ogni avvio della CA Password del provisioner Il provisioner admin, che firma ogni certificato che chiedi Il log del primo avvio, e da nessun\u0026rsquo;altra parte Quindi leggi il log al primo avvio e metti quella seconda password in un posto sicuro. Se la perdi non puoi emettere altri certificati senza togliere il provisioner a mano dalla configurazione. Se preferisci sceglierne una tu, imposta DOCKER_STEPCA_INIT_PASSWORD prima del primo avvio; l\u0026rsquo;entrypoint allora la usa per entrambe4.\nFidarsi della root Niente si fida della tua CA finché non glielo dici tu. Una macchina Debian che chiede a Caddy una pagina firmata da step-ca:\n$ curl https://nas.home.example/ curl: (60) SSL certificate problem: unable to get local issuer certificate Copia dentro la root e la stessa richiesta passa:\ncp root_ca.crt /usr/local/share/ca-certificates/home-ca.crt update-ca-certificates $ curl https://nas.home.example/ internal service, certificate from step-ca Il lavoro è tutto qui. Una volta per dispositivo. step certificate install fa la stessa cosa su qualsiasi sistema su cui gira5. Nel trust store va solo la root. L\u0026rsquo;intermedia viaggia con ogni certificato, e serve anche a un telefono che presenterà un certificato client, cosa trattata nell\u0026rsquo;articolo sui certificati client.\nTratta la root come la chiave di casa che ormai è. Chiunque abbia la chiave privata della root può coniare un certificato per qualsiasi nome, e ogni dispositivo che se ne fida ci crederà.\nHTTPS interno con ACME ACME è il protocollo usato da Let\u0026rsquo;s Encrypt, e step-ca lo parla per i nomi interni6. Tutto ciò che ha un client ACME ottiene certificati interni nello stesso modo in cui ottiene quelli pubblici, rinnovi compresi. Per Caddy bastano due righe globali:\n{ acme_ca https://ca.home.example:9000/acme/acme/directory acme_ca_root /etc/caddy/root_ca.crt } nas.home.example { reverse_proxy 192.0.2.30:5000 } Cosa ha scritto Caddy nel log al primo avvio:\n\u0026#34;msg\u0026#34;:\u0026#34;trying to solve challenge\u0026#34;,\u0026#34;identifier\u0026#34;:\u0026#34;nas.home.example\u0026#34;,\u0026#34;challenge_type\u0026#34;:\u0026#34;tls-alpn-01\u0026#34; \u0026#34;msg\u0026#34;:\u0026#34;certificate obtained successfully\u0026#34;,\u0026#34;identifier\u0026#34;:\u0026#34;nas.home.example\u0026#34; Verifica Risultato Challenge tls-alpn-01, a cui Caddy risponde sulla porta 443 Emittente Home CA Intermediate CA Durata 24 ore, dalle 17:31 alle 17:32 del giorno dopo Rinnovo Lo fa Caddy da solo, niente da configurare Un certificato di 24 ore sembra allarmante. Non lo è. Un client ACME rinnova ben prima della scadenza, ogni giorno, senza che nessuno debba intervenire. Una chiave rubata vale un giorno. È il default attorno a cui è stata costruita step-ca, e qui è esattamente quello giusto.\nLa challenge però richiede che la CA raggiunga il nome che sta firmando. step-ca deve risolvere nas.home.example e collegarsi alla porta 443 per tls-alpn-01, o alla porta 80 per http-01. Un DNS interno usato da entrambe le parti è la prima cosa da sistemare.\nServizi che non sanno fare ACME Tanti apparecchi non hanno un client ACME: l\u0026rsquo;interfaccia web di un hypervisor, una stampante, un vecchio appliance. Per questi, emetti il certificato con il provisioner admin e rinnovalo con step ca renew:\nstep ca certificate proxmox.home.example pve.crt pve.key step ca renew --force pve.crt pve.key Seriale Valido fino a Emesso 241943140971… 2026-10-10 17:33:03 Dopo step ca renew 206409156462… 2026-10-10 17:33:06 Seriale nuovo, altre 24 ore, e nessuna password richiesta. È il certificato attuale a dimostrare chi sta chiedendo, ed è proprio questo il punto: il rinnovo non ha bisogno di nessun segreto sulla macchina oltre alla chiave che ha già. Serve però che il certificato sia ancora valido, quindi un rinnovo che perde la sua finestra vuol dire riemetterlo a mano.\nLasciato in esecuzione, si rinnova da solo. Per default --daemon rinnova ai due terzi della durata, e --exec esegue un comando dopo ogni rinnovo, ed è lì che va il reload7:\nstep ca renew --daemon --exec \u0026#34;systemctl reload nginx\u0026#34; pve.crt pve.key Lancialo da una unit systemd e la macchina si arrangia da sola. Dimenticatelo, e in 24 ore il servizio mostra lo stesso avviso di cui volevi liberarti.\nLa CA è la parte facile Avviare step-ca ha richiesto un comando. Far sì che una macchina Debian se ne fidasse, due. A Caddy sono servite due righe e poi non ha più chiesto niente. È la parte che la gente rimanda per anni, convivendo con un avviso del browser su ogni pagina interna, ed è il lavoro più economico di tutta la lista.\nQuello che costa è tutto ciò che un certificato tocca dopo essere stato emesso: la root su ogni dispositivo, i rinnovi che nessuno controlla, quell\u0026rsquo;unico servizio che non sa fare ACME e che bisogna ricordarsi. Niente di tutto questo è difficile. Tutto questo è il tipo di lavoro che viene fatto bene solo quando qualcuno se ne fa carico.\nUna rete di casa è una piccola proprietà. Merita la stessa cosa che riceve una rete fatta come si deve: una root, custodita con cura, fidata di proposito, e un avviso che vuol dire qualcosa quando compare. Per questo la CA non è la parte furba. La parte furba è non cliccare mai più per andare avanti.\nLet\u0026rsquo;s Encrypt — Certificates for localhost — non può emettere per «localhost» «because nobody uniquely owns it, and it’s not rooted in a top level domain».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLet\u0026rsquo;s Encrypt — Certificate Transparency logs — «Let\u0026rsquo;s Encrypt submits all certificates we issue to CT logs.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Run a private CA in Docker — le variabili DOCKER_STEPCA_INIT_*; dice che la password generata vale per «the encrypted CA keys and the default CA provisioner».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsmallstep/certificates — docker/entrypoint.sh — genera due file separati, password e provisioner_password, stampa una volta la password del provisioner e la distrugge; una password fornita viene scritta in entrambi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step certificate install — installa un certificato root nel trust store di sistema.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — ACME basics — il provisioner ACME di step-ca e i tipi di challenge che supporta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step ca renew — con --daemon, «By default, it will renew the certificate before 2/3 of the validity period of the certificate has elapsed»; --exec fornisce «certificate reloads on your services».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/certificates/step-ca-in-a-container/","summary":"step-ca 0.30.2 di Smallstep in un container Podman o Docker come autorità di certificazione per tutto ciò che sta in casa, tutto provato. Perché una CA privata batte i certificati autofirmati e quelli pubblici per i nomi interni, come avviarla con ACME e SSH attivi, le due password che l\u0026rsquo;immagine genera e dove finisce ciascuna, come far fidare ogni dispositivo della root, HTTPS interno per Caddy o qualsiasi altra cosa parli ACME, e step ca renew per i servizi che non lo parlano. I certificati client e SSH hanno ciascuno un articolo a sé.","title":"La tua autorità di certificazione: step-ca in un container"},{"content":"Il problema di raggiungere Home Assistant da fuori Qui Home Assistant manda avanti la casa: le luci, il riscaldamento, il condizionatore, la colonnina per l\u0026rsquo;auto, gli allarmi. L\u0026rsquo;app sul telefono è il modo in cui tutto questo si usa fuori casa, ed è anche il modo in cui la casa sa dove sono i telefoni, perché l\u0026rsquo;app comunica posizione e sensori in background.\nQuindi deve funzionare quando in casa non c\u0026rsquo;è nessuno. La domanda è come.\nLa risposta solita è mettere Home Assistant su internet con un hostname e una pagina di login. Funziona. Significa anche che chiunque sul pianeta può raggiungere la pagina di login, provarci con le password e sondare qualsiasi cosa ci sia dietro. Una pagina di login è una password tra internet e le serrature della tua porta di casa.\nIo non lo volevo. I requisiti erano pochi:\nNessuna pagina di login raggiungibile dal pubblico. Non risponde niente a meno che il dispositivo non sia uno dei nostri. L\u0026rsquo;app di Home Assistant deve continuare a funzionare in background, senza nessuno che debba fare il login. Niente in più che giri sui telefoni. Nessun agente VPN. Il piano gratuito di Cloudflare. Il tunnel c\u0026rsquo;è già. Questi quattro eliminano la maggior parte delle opzioni solite prima ancora di cominciare.\nCosa ti dà davvero ciascuna opzione La documentazione di Home Assistant elenca le vie d\u0026rsquo;accesso: Home Assistant Cloud, una VPN, un reverse proxy o il port forwarding1. Cloudflare aggiunge le sue versioni delle ultime due. Ecco come si comportano rispetto a quei quattro requisiti, cosa può andare storto con ciascuna e quanto costa ciascuna in batteria.\nOpzione Chi può raggiungere la pagina di login L\u0026rsquo;app funziona in background In più sul telefono Quanto costa davvero Rischi Costo in batteria IPv4 e IPv6 Port forward verso Home Assistant Tutti Sì Niente Gratis in bolletta. Ogni scansione e ogni tentativo di password gira su Home Assistant, e un DDoS finisce sulla linea di casa Pagina di login aperta a ogni scanner. Un buco nel router dritto sulla LAN. Una linea di casa dietro carrier-grade NAT non ha porte da inoltrare2. App: funziona su Android e iPhone, è solo un URL Normale IPv4 richiede un indirizzo pubblico tuo, non carrier-grade NAT. IPv6 richiede un\u0026rsquo;apertura nel firewall, e un telefono su un Wi-Fi solo IPv4 non lo raggiunge Solo Cloudflare Tunnel Tutti Sì Niente Gratis. Cloudflare si prende un DDoS, ma ogni tentativo di password gira ancora su Home Assistant Pagina di login aperta a ogni scanner e a ogni lista di password. Una password indovinata e un attaccante ha una macchina sulla tua LAN. App: funziona su Android e iPhone, è solo un URL Normale Entrambi. Cloudflare risponde su tutti e due3, e la casa si collega solo in uscita4 Tunnel più un login di Cloudflare Access Solo dopo un login No, le chiamate in background finiscono sul login Niente Gratis. Gli estranei si fermano a Cloudflare, nessun carico su Home Assistant Posizione e sensori smettono di comunicare senza che nessuno se ne accorga. È pubblicato solo Home Assistant, dietro il login. App: non può inviare l\u0026rsquo;header del service token che Access richiede5 Normale Entrambi, come il tunnel Tunnel più rete privata WARP Nessuno da fuori Sì Agente WARP Gratis. Niente di pubblico da scansionare Usa porte UDP che la rete di un hotel o di un ufficio può bloccare6. Android consente una sola VPN alla volta7. Una route può mettere tutta la LAN su ogni telefono registrato8. App: non le serve niente, ma WARP ha client per Android e iPhone e nessuno per un orologio Wear OS9 Più alto, una VPN sempre attiva Entrambi. L\u0026rsquo;agente raggiunge Cloudflare su tutti e due6 Home Assistant Cloud Chiunque abbia l\u0026rsquo;URL Sì Niente £6,50 al mese o £65 all\u0026rsquo;anno10. I tentativi di password girano ancora su Home Assistant Pagina di login pubblica. La via d\u0026rsquo;accesso la tiene l\u0026rsquo;azienda di qualcun altro: niente accesso quando il loro servizio è giù. Una password indovinata e un attaccante ha una macchina sulla tua LAN. App: funziona su Android e iPhone Normale In casa uno qualsiasi, si collega in uscita a un relay di Nabu Casa11. L\u0026rsquo;IPv6 per il telefono non è documentato Port forward verso nginx o Caddy con un certificato client Solo i dispositivi con un certificato Sì Un certificato e la radice della tua CA Gratis in bolletta. Uno sconosciuto costa un handshake TLS sul proxy, mai un login di Home Assistant, e un DDoS finisce sulla linea di casa Un buco nel router verso il proxy, non verso Home Assistant. La CA la gestisci tu, e una CRL scaduta chiude fuori ogni telefono. App: come la riga del certificato qui sotto Normale Come il port forward. nginx va istruito per ascoltare su IPv6, Caddy lo fa di default Tunnel più certificato client Solo i dispositivi con un certificato Sì Un certificato Gratis. Gli estranei vengono respinti all\u0026rsquo;edge, nessun carico su Home Assistant Un telefono perso entra finché non viene revocato. Semplice HTTPS sulla 443, bloccato solo dove è bloccato il web. È pubblicato solo Home Assistant, e solo per chi ha un certificato. App: supportata su Android; l\u0026rsquo;app per iPhone non è documentata; Wear OS vuole il file PKCS12 in fase di configurazione12 Normale Entrambi, come il tunnel Il tunnel toglie di mezzo anche la questione IPv4 contro IPv6. Cloudflare risponde al telefono su quello che ha, e la casa si collega sempre e solo in uscita, quindi una linea di casa dietro carrier-grade NAT, o una con IPv6 e nessun IPv4 pubblico, funziona come qualsiasi altra. Un port forward richiede un indirizzo IPv4 pubblico tuo, o IPv6 a entrambi i capi. Perché così tante linee di casa non abbiano ancora né l\u0026rsquo;uno né l\u0026rsquo;altro è una storia a parte, in Non abbiamo mai finito gli indirizzi. Abbiamo finito la voglia..\nIl tunnel da solo sistema il router, non l\u0026rsquo;esposizione. cloudflared apre solo connessioni in uscita, quindi non c\u0026rsquo;è una porta in ingresso da inoltrare13, ma l\u0026rsquo;hostname che pubblica serve comunque la pagina di login a chiunque la chieda.\nCloudflare Access risolve il problema? Per un browser sì, ed è così che lo usano i desktop di VDI zero trust senza la bolletta del cloud. Per l\u0026rsquo;app ha la forma sbagliata. Access mette una persona davanti a una pagina di login, e il traffico in background dell\u0026rsquo;app non ha nessuna persona. Il rimedio solito è un service token inviato come header, e l\u0026rsquo;app non può inviarlo. La sua web view non offre modo di aggiungere header alle richieste POST o ai WebSocket, che è come l\u0026rsquo;app parla con Home Assistant, e la discussione degli sviluppatori approda ai certificati client come «a better (more secure) alternative»5.\nWARP lo farebbe, ed è stato escluso perché significa un agente su ogni telefono. Una VPN costa più batteria di un collegamento normale, perché è un tunnel tenuto aperto tutto il giorno, che l\u0026rsquo;app stia parlando o no. Gira su UDP, su porte che la rete di un hotel o di un ufficio può scartare, e questo ti lascia chiuso fuori proprio quando sei via6. E Android fa girare una sola VPN alla volta7, quindi WARP e una VPN di lavoro non possono essere attive insieme. Home Assistant Cloud è un buon servizio e finanzia lo sviluppo, ma è un abbonamento, e l\u0026rsquo;URL serve comunque una pagina di login a chiunque lo trovi. Consegna anche la via d\u0026rsquo;accesso a casa tua all\u0026rsquo;azienda di qualcun altro. Il loro servizio, il loro account, il loro prezzo, le loro condizioni. È una perdita di sovranità, ed è lo scambio che ti chiede ogni offerta cloud: comodità adesso, qualcun altro al comando per sempre.\nCloudflare non è diverso nella sostanza, e sarebbe disonesto far finta di no. Ogni opzione con il tunnel in questa tabella lo mette nel percorso, e termina il TLS sul suo edge, che è il modo in cui la regola WAF riesce a leggere il controllo del certificato. La differenza è quanto tiene in mano. Qui tiene il cancello. Home Assistant, i suoi dati e le sue password restano in casa, e se Cloudflare sparisce la casa continua a funzionare, che è l\u0026rsquo;ultima riga della tabella sotto «Dove cede». Se anche questa è più fiducia di quella che vuoi concedere, la versione con nginx e Caddy fa lo stesso controllo in casa tua, con la tua CA, e in cambio si prende il port forward e i lavori sulla CA.\nResta il certificato client. Il telefono dimostra cos\u0026rsquo;è prima che Home Assistant veda un solo byte.\nQuanto costa davvero essere aperti a internet Gratis in bolletta non vuol dire gratis. Qualsiasi cosa risponda a internet lo paga in carico sulla macchina. Ogni tentativo di password sul login di Home Assistant è un controllo bcrypt a 12 round, e ne esegue uno anche quando il nome utente non esiste, quindi uno sconosciuto che tira a indovinare costa esattamente quanto il tuo login14. Quel carico finisce sulla macchina che manda avanti la casa, giorno e notte, finché gli scanner continuano ad arrivare. E continuano ad arrivare.\nL\u0026rsquo;ho misurato su questa installazione. L\u0026rsquo;hostname è andato online alle 22:38 del 14 ottobre 2026 e non era pubblicato da nessuna parte. Nel giro di due ore Cloudflare aveva registrato ben oltre cento richieste da una ventina di indirizzi in Singapore, Canada, Germania, Paesi Bassi, Grecia e Stati Uniti, quasi tutte di un crawler che percorreva il nuovo nome ancora e ancora. Non posso dimostrare come l\u0026rsquo;abbiano trovato, ma i tempi puntano alla certificate transparency: Let\u0026rsquo;s Encrypt registra ogni certificato che emette15, e gli scanner tengono d\u0026rsquo;occhio quei log. Ognuna di quelle richieste si è fermata all\u0026rsquo;edge. Home Assistant non ne ha visto niente. Neanche un byte.\nUn port forward è ancora peggio, perché mette in gioco il tuo indirizzo di casa. Un DDoS diretto lì riempie la tua banda larga, e a quel punto è tutta la casa a essere fuori da internet, non solo Home Assistant. Dietro il tunnel il flood se lo prende Cloudflare, su ogni piano compreso il Free16, e dal 2017 non ha più cacciato un cliente per la dimensione di un attacco17. Il certificato fa l\u0026rsquo;ultimo passo. Uno sconosciuto viene respinto all\u0026rsquo;edge, e Home Assistant non spende niente per lui.\nPoi c\u0026rsquo;è la rete su cui sta Home Assistant. Non è un\u0026rsquo;app web su un\u0026rsquo;isola. Sta sulla LAN di casa accanto alle telecamere, al NAS e ai portatili, e conserva le credenziali di parecchi di loro. Supera il suo login e hai una macchina dentro casa, non solo una dashboard. Un port forward è un buco nel router puntato dritto su quella macchina. WARP sbaglia nell\u0026rsquo;altro senso, per eccesso di generosità: una route può pubblicare un\u0026rsquo;intera rete privata su ogni telefono registrato, e restringerla è una policy separata che devi ricordarti di scrivere8. Perdi un telefono con quella configurazione e chi lo trova è sulla tua LAN. Il certificato pubblica un solo hostname, ai dispositivi che ne hanno uno, e nient\u0026rsquo;altro sulla rete è raggiungibile da fuori.\nmTLS con il piano gratuito: quale metà è gratis Buona parte dei consigli che si trovano in rete dice che l\u0026rsquo;mTLS su Cloudflare richiede Enterprise. Non è così. Cloudflare vende l\u0026rsquo;mTLS due volte, e solo una delle due richiede Enterprise.\nCertificati client più regola WAF mTLS di Cloudflare Access Piano Free, Pro, Business, Enterprise Solo Zero Trust Enterprise Autorità di certificazione Gestita da Cloudflare (portare la tua è Enterprise) Solo la tua Certificati inclusi 100 attivi per zona Non pertinente Applicato da Una regola WAF personalizzata che scrivi tu Una policy di Access Revoca Integrata, controllata dalla regola La tua CRL e un Worker La prima colonna è quella che vogliamo. Portare la tua CA su Cloudflare è Enterprise. Fuori da Cloudflare non costa niente, e i certificati client da step-ca lo spiegano. Il confronto della stessa Cloudflare lo dice chiaramente: l\u0026rsquo;offerta Application Security include gratis 100 certificati client per zona, mentre l\u0026rsquo;mTLS di Access è una funzione Zero Trust Enterprise18. I piani Free, Pro e Business hanno 100 certificati attivi per zona, e revocarne uno libera subito il suo posto19. Due telefoni ne usano due.\nIl piano gratuito ha anche cinque regole WAF personalizzate20. Qui ne serve una.\nCome funziona il controllo Flusso delle richieste attraverso l'mTLS di Cloudflare fino a Home Assistant Telefono app HA ha un cert Chiunque altro uno scanner senza cert Edge Cloudflare, piano gratuito Handshake mTLS attivo per ha.example.com chiede un cert Regola WAF verificato? non revocato? altrimenti Block Bloccato non arriva mai a HA Rete di casa cloudflared tunnel solo in uscita Home Assistant si fida solo di quel proxy ban degli IP attivo login: 2ª serratura passa fallisce A ogni richiesta: l\u0026rsquo;edge chiede un certificato durante l\u0026rsquo;handshake, la regola WAF blocca tutto ciò che non è verificato o è revocato, e solo allora la richiesta scende lungo il tunnel fino a Home Assistant. Il lavoro lo fa Cloudflare sul suo edge. Quando l\u0026rsquo;mTLS è attivo per un hostname, l\u0026rsquo;handshake TLS chiede un certificato al client21. Questo da solo non blocca niente. Un client che non invia un certificato si connette lo stesso. Arriva semplicemente con il campo di verifica impostato a false.\nIl blocco è la regola WAF. Cloudflare espone il risultato del controllo del certificato come campi del suo linguaggio delle regole22:\n(http.host eq \u0026#34;ha.example.com\u0026#34; and (not cf.tls_client_auth.cert_verified or cf.tls_client_auth.cert_revoked)) Action: Block La seconda riga è lì per un motivo. Un certificato revocato risulta comunque verificato, perché se cert_revoked è true anche cert_verified è true23. Controlla solo il primo campo e un certificato revocato entra dritto. Revocare il certificato di un telefono perso non serve a niente se la regola non lo chiede.\nMerito a chi lo merita: le persone del thread dell\u0026rsquo;app Android di Home Assistant hanno ricavato questa regola e l\u0026rsquo;hanno pubblicata5. Un buon lavoro, e mi ha risparmiato parecchie ricerche.\nIl lato Home Assistant A Home Assistant va detto che sta dietro un proxy, e non è facoltativo. Le richieste da un reverse proxy sono bloccate per scelta progettuale finché Home Assistant non viene istruito a fidarsene24. Il connettore cloudflared del tunnel conta come proxy.\nDalla 2026.8 queste impostazioni stanno nell\u0026rsquo;interfaccia, in Impostazioni → Sistema → Rete → Server HTTP, non in configuration.yaml24. Salvarle riavvia Home Assistant, e poi un amministratore ha cinque minuti per confermare le nuove impostazioni prima che tornino indietro da sole. È una rete di sicurezza che conviene conoscere prima di chiudersi fuori.\nImpostazione Valore Perché Fidati di X-Forwarded-For Attivo Senza, le richieste che passano da un proxy vengono rifiutate Proxy fidati Solo l\u0026rsquo;indirizzo della macchina cloudflared Solo quella macchina può dire di inoltrare per conto di qualcuno Abilita il ban degli IP Attivo, pochi tentativi I ban finiscono sul vero indirizzo del client, non su quello di Cloudflare URL di Home Assistant, Internet https://ha.example.com L\u0026rsquo;app lo prende come URL esterno La voce dei proxy fidati è stretta di proposito. Fidati di un\u0026rsquo;intera sottorete e qualsiasi dispositivo al suo interno può falsificare l\u0026rsquo;indirizzo del client, il che rende inutile l\u0026rsquo;elenco dei ban.\nPoi l\u0026rsquo;app. La documentazione dell\u0026rsquo;app Companion descrive questa configurazione per nome. Se Home Assistant sta dietro un reverse proxy che fa autenticazione TLS del client, l\u0026rsquo;app chiede un certificato, e lo vuole installato come «VPN \u0026amp; app user certificate»12. Su un telefono senza certificato ottieni un errore o una schermata vuota, che è il risultato corretto per un telefono che non dovrebbe entrare.\nImposta il livello di sicurezza della connessione dell\u0026rsquo;app su Most secure. L\u0026rsquo;indirizzo locale in semplice http:// viene allora usato solo sul Wi-Fi di casa, e ovunque altro l\u0026rsquo;app usa l\u0026rsquo;hostname HTTPS o si rifiuta del tutto di connettersi25. Su Android serve il permesso di posizione impostato su «Consenti sempre», che all\u0026rsquo;app serve comunque per la posizione in background.\nCostruirlo, passo per passo Passo Dove Cosa 1 Tunnel di Cloudflare Aggiungi un hostname pubblico, ha.example.com, che punta a Home Assistant sulla LAN. Prima fissa l\u0026rsquo;indirizzo della macchina. Il mio è l\u0026rsquo;indirizzo IPv6 costruito dal suo MAC, quindi non può spostarsi 2 SSL/TLS → Client Certificates Un certificato per telefono. Crea la chiave sulla tua macchina e passa a Cloudflare una CSR, che l\u0026rsquo;API accetta26. La chiave non lascia mai la macchina che l\u0026rsquo;ha creata. Se lasci che sia Cloudflare a creare la chiave, ti viene mostrata una volta sola, mai più19 3 Client Certificates → Hosts Abilita l\u0026rsquo;mTLS per ha 4 Security → WAF → Custom rules Aggiungi la regola di blocco qui sopra 5 SSL/TLS → Edge Certificates Always Use HTTPS attivo, TLS minimo 1.2 6 Home Assistant → Rete Proxy fidato, ban degli IP, URL esterno, poi conferma entro cinque minuti 7 Una macchina Linux Costruisci un file PKCS12 per ogni telefono 8 Ogni telefono Installalo come certificato utente per VPN e app, selezionalo nelle impostazioni del server dell\u0026rsquo;app, poi forza l\u0026rsquo;arresto dell\u0026rsquo;app e riaprila. Imposta l\u0026rsquo;app su Most secure 9 Prova Dati mobili, Wi-Fi spento. L\u0026rsquo;app si connette. Il browser senza certificato viene bloccato Un certificato per telefono, non uno condiviso. Quando un telefono si perde, revochi quel telefono e l\u0026rsquo;altro va avanti.\nIl telefono vuole certificato e chiave in un unico file PKCS12. Cloudflare restituisce il certificato in PEM e la chiave ce l\u0026rsquo;hai già, quindi uniscili:\nopenssl pkcs12 -export -in phone1.pem -inkey phone1.key \\ -name \u0026#34;ha-phone1\u0026#34; -out phone1.p12 È qui che la gente si blocca. Android è pignolo sulla cifratura dentro il file, e la documentazione di Home Assistant dice di provare prima il default attuale e ripiegare su un contenitore legacy con il flag -legacy di OpenSSL solo se viene rifiutato27. Lo stesso consiglio salta fuori nei thread della community, dove un file che si installava senza problemi sui dispositivi Apple veniva rifiutato da Android5. Niente openssl sul portatile? Il modulo cryptography di Python scrive entrambi i contenitori, quello attuale e quello legacy, ed è quello che ha costruito i miei.\nIl percorso nei menu per installarlo cambia tra produttori di telefoni e versioni di Android. La pagina di Google per il Pixel è un punto di partenza28. Qualunque cosa dicano i menu, quello che vuoi è l\u0026rsquo;archivio delle credenziali utente, non quello delle CA.\nCifrare l\u0026rsquo;ultimo tratto Il tunnel finisce su cloudflared, e cloudflared gira in una sua VM in casa. Da lì a Home Assistant la prima versione era HTTP in chiaro attraverso la LAN. Un tratto del percorso senza TLS, dentro la rete che ospita le telecamere. Non abbastanza. Per questo ha avuto un certificato vero, e i pezzi sono qui sotto.\nPezzo Impostazione Perché Add-on Let\u0026rsquo;s Encrypt Challenge DNS, provider dns-cloudflare, un token limitato a Zone, DNS, Edit su quella sola zona29 La challenge HTTP qui non può funzionare. Il validatore non ha un certificato client, quindi la regola WAF lo blocca Server HTTP di Home Assistant Certificato /ssl/fullchain.pem, chiave /ssl/privkey.pem, proxy fidato e ban degli IP nello stesso salvataggio Un riavvio invece di due Ingress del tunnel https://[address]:8123 con originServerName impostato sull\u0026rsquo;hostname30 cloudflared verifica il certificato dell\u0026rsquo;origine invece di sentirsi dire di non guardare DNS interno L\u0026rsquo;hostname risponde con l\u0026rsquo;indirizzo della macchina stessa dentro casa I telefoni in casa ci vanno diretti. L\u0026rsquo;URL della LAN porta :8123; quello esterno no, perché Cloudflare non fa da proxy su quella porta31 Rinnovo Un\u0026rsquo;automazione lancia l\u0026rsquo;add-on ogni notte e riavvia Home Assistant il 1° e il 15 del mese Il server HTTP carica il certificato una volta all\u0026rsquo;avvio e non lo rilegge più32 Due cose hanno morso lungo la strada. Salvare le impostazioni del server HTTP riavvia Home Assistant, e quando torna su parla solo HTTPS, quindi la scheda da cui hai salvato non riesce a riconnettersi. Apri l\u0026rsquo;indirizzo HTTPS, fai il login lì, e la conferma dei cinque minuti la fai da quella parte.\nLa seconda è il rinnovo. Let\u0026rsquo;s Encrypt ti dà novanta giorni e l\u0026rsquo;add-on rinnova quando ne mancano trenta, quindi un riavvio due volte al mese prende sempre il nuovo certificato con settimane di margine. Un riavvio giornaliero sarebbe un fastidio per la casa e non comprerebbe niente.\nCosa mi ha insegnato il telefono Tutto quello che sta sopra è stato scritto prima di avere il telefono in mano. Tre cose sono venute fuori solo dopo.\nIl certificato finisce in Archivio credenziali sotto Credenziali utente, segnato come installato per VPN e app, e il nome che scrivi durante l\u0026rsquo;installazione è il nome che ogni selettore ti mostra da lì in poi33. Installalo due volte e hai due voci. Funzionano entrambe. È così che l\u0026rsquo;ho scoperto.\nPoi i browser. Con il certificato installato, Chrome ha mostrato il selettore di sistema la prima volta che ha raggiunto l\u0026rsquo;hostname, ha inviato il certificato ed è arrivato alla pagina di login. Helium, una build di Chromium senza Google che uso anche io, è andato dritto alla pagina di blocco e non ha mai chiesto niente al keychain. Stesso telefono, stesso certificato, stesso minuto.\nClient Chiede al keychain di Android Cosa ha visto l\u0026rsquo;edge Chrome Sì, con un selettore Certificato verificato, fino a Home Assistant Helium No Bloccato, ogni richiesta App Companion, web view Sì, una volta che l\u0026rsquo;impostazione del server punta al certificato Dashboard caricata App Companion, client nativo Sì, ma solo dopo un arresto forzato Le POST al webhook bloccate fino ad allora, 200 dopo L\u0026rsquo;app è quella che ha fatto perdere tempo. Ha due client: la web view che disegna la dashboard, e uno nativo che invia sensori e posizione al webhook. Imposta il certificato client TLS nelle impostazioni del server e la dashboard funziona subito. Le POST al webhook hanno continuato a essere bloccate all\u0026rsquo;edge, perché il client nativo aveva costruito la sua configurazione TLS all\u0026rsquo;avvio dell\u0026rsquo;app e non la ricostruisce. Forza l\u0026rsquo;arresto dell\u0026rsquo;app, riaprila, e il log dell\u0026rsquo;edge mostra le POST che arrivano a Home Assistant con un 200. Niente nell\u0026rsquo;app te lo dice.\nE l\u0026rsquo;URL. Con il Wi-Fi di casa spento, l\u0026rsquo;app ha provato l\u0026rsquo;hostname sulla porta 8123, perché l\u0026rsquo;URL esterno che avevo scritto si era portato dietro la porta da quello della LAN. Quella porta va a Cloudflare, Cloudflare non ascolta su di essa, e l\u0026rsquo;app è rimasta su timeout di dieci secondi a dire che non riusciva a connettersi. L\u0026rsquo;URL esterno è l\u0026rsquo;hostname nudo. La porta resta dentro.\nDove cede Niente qui è privo di spigoli, quindi eccoli.\nCaso Cosa succede Cosa fare Telefono perso o venduto Il suo certificato funziona finché non viene revocato Revocalo in Client Certificates. La regola controlla la revoca Orologio Wear OS Non può usare il certificato installato sul telefono Fornisci il file PKCS12 durante la configurazione dell\u0026rsquo;orologio stesso12 iPhone La documentazione Companion segna questa sezione come solo Android Provalo prima di farci affidamento Browser del portatile fuori casa Bloccato, nessun certificato Installa un certificato nel browser, o accettalo Un browser che salta il keychain di Android Helium va dritto alla pagina di blocco Chrome o l\u0026rsquo;app. Lato server non si può fare niente Certificato rinnovato su Home Assistant Viene servito quello vecchio fino a un riavvio Il riavvio due volte al mese nell\u0026rsquo;automazione Cloudflare giù Nessun accesso remoto La casa funziona comunque in locale. È proprio per questo che gira in locale Quello del browser è una funzione, non un difetto. Tutto ciò che non ha un certificato è un estraneo, compreso il mio portatile finché non gliene do uno.\nUna chiave, non una password Una password è qualcosa che sai, e tutto ciò che sai può essere indovinato, carpito con il phishing, riusato o trapelato dalla violazione di qualcun altro. Metti una pagina di password su internet e sei entrato in una partita a numeri contro chiunque abbia una botnet e una lista di parole. Puoi vincerla per anni. Basta perderla una volta.\nUn certificato è qualcosa che il dispositivo possiede. Nessuno lo indovina. Nessuno lo prova un milione di volte, perché la richiesta viene scartata all\u0026rsquo;edge prima che ci sia qualcosa contro cui provarlo. La pagina di login c\u0026rsquo;è ancora e conta ancora, ma adesso è la seconda serratura, non l\u0026rsquo;unica.\nQuello che sta dietro quella pagina non è un\u0026rsquo;app web. Sono le serrature, il riscaldamento, la colonnina per l\u0026rsquo;auto e le telecamere. Trattala come la porta di casa, perché è quello che è.\nLa cosa su cui continuo a tornare è che niente di tutto questo costa qualcosa. Cloudflare regala i certificati e la regola con il piano gratuito. Home Assistant documenta il lato app nella sua documentazione Companion. L\u0026rsquo;unica cosa che costa è una serata a leggere i manuali per bene, e per questo il default di una pagina di password rivolta a tutta internet è una scelta che la gente fa non leggendoli.\nHome Assistant — Remote access — Home Assistant Cloud, VPN, reverse proxy e port forwarding come vie d\u0026rsquo;accesso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6598 — IANA-Reserved IPv4 Prefix for Shared Address Space — l\u0026rsquo;intervallo 100.64.0.0/10 per il Carrier-Grade NAT, dove molti clienti condividono un indirizzo pubblico e nessuno di loro ha una porta in ingresso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — IPv6 compatibility — attivo di default su ogni piano; Cloudflare «auto generates AAAA DNS records to allow IPv6 clients to connect» agli hostname in proxy.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Tunnel run parameters, edge-ip-version — cloudflared si collega a Cloudflare su IPv4 di default; 6 o auto gli fa usare IPv6.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/android PR #3593 — Add custom header support — la web view non può aggiungere header alle richieste POST o WebSocket; certificati client suggeriti al posto dei service token; utenti che segnalano problemi di formato dei certificati su Android.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Cloudflare One client firewall requirements — WireGuard su UDP 2408 con ripiego su UDP 500, 1701 e 4500; MASQUE su UDP 443.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — VpnService — «There can be only one VPN connection running at the same time.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Connect an IP/CIDR — «You can connect an entire private network, a subnet, or an application defined by a static IP»; le policy di rete di Gateway per filtrare quel traffico sono un passo separato e consigliato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Download Cloudflare One Client — client per Windows, macOS, Linux, iOS 15+, Android 5.0+ e ChromeOS; nessun client Wear OS in elenco.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNabu Casa — Pricing — Home Assistant Cloud a £6,50 al mese o £65,00 all\u0026rsquo;anno, tasse escluse.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNabuCasa/hass-nabucasa — remote.py — Home Assistant si registra presso Nabu Casa, riceve un server di relay e si collega a esso in uscita.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Getting Started, TLS client authentication — da installare come «VPN \u0026amp; app user certificate»; Wear OS vuole il certificato in formato PKCS12 durante la configurazione iniziale.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Cloudflare Tunnel — cloudflared crea solo connessioni in uscita, quindi sull\u0026rsquo;origine non c\u0026rsquo;è nessun listener in ingresso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant core — auth/providers/homeassistant.py — password con hash bcrypt a 12 round; un nome utente sconosciuto esegue comunque un checkpw fittizio «to make timing the same as if user was found».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLet\u0026rsquo;s Encrypt — Certificate Transparency logs — «submits all certificates we issue to CT logs».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — DDoS Protection — rilevamento e mitigazione automatici dei DDoS, «Available on all plans».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare blog — Unmetered Mitigation — «Cloudflare will no longer terminate customers, regardless of the size of the DDoS attacks they receive, regardless of the plan level they use.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Use mTLS with Cloudflare protected resources — «100 Client Certificates per Zone are included for free»; l\u0026rsquo;mTLS di Access è una «Zero Trust Enterprise only feature».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Create a client certificate — 100 certificati attivi per zona su Free, Pro e Business; la revoca libera il posto; certificato e chiave non vengono più mostrati dopo la creazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — WAF custom rules — tabella di disponibilità: cinque regole personalizzate sul piano Free.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Enable mTLS — attivare l\u0026rsquo;mTLS per hostname, poi farlo rispettare con una regola WAF personalizzata.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Client certificate variables — i campi mTLS disponibili nelle regole WAF personalizzate.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — cf.tls_client_auth.cert_revoked — «When true, the cf.tls_client_auth.cert_verified field is also true.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant — HTTP integration — reverse proxy, proxy fidati e ban degli IP; impostazioni spostate nell\u0026rsquo;interfaccia nella 2026.8, tornano indietro se non confermate entro cinque minuti.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Connection security level — Most secure usa un URL non cifrato solo sulla rete di casa; su Android richiede la posizione su «Consenti sempre».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare API — Create Client Certificate — accetta una csr e validity_days; la chiave privata resta a te.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Networking, TLS Client Authentication — prova prima il default PKCS12 attuale, il contenitore OpenSSL -legacy solo se non funziona.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Pixel Phone Help, Add \u0026amp; remove certificates — installare a mano un certificato su un Pixel.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Let\u0026rsquo;s Encrypt add-on — documentation — challenge DNS; il token Cloudflare «requires only the Zone:DNS:Edit permission»; i certificati si rinnovano solo quando l\u0026rsquo;add-on viene riavviato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Origin configuration parameters — originServerName, l\u0026rsquo;hostname che cloudflared si aspetta nel certificato dell\u0026rsquo;origine.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Network ports — l\u0026rsquo;elenco fisso delle porte HTTP e HTTPS su cui Cloudflare fa da proxy; la 8123 non c\u0026rsquo;è.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/core — components/http/server.py — _create_ssl_context chiama load_cert_chain una sola volta, da async_bind.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — KeyChain — le credenziali installate dall\u0026rsquo;utente e il selettore choosePrivateKeyAlias che un\u0026rsquo;app richiama per sceglierne una.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/homeassistant/home-assistant-app-over-cloudflare-mtls/","summary":"Raggiungere Home Assistant dall\u0026rsquo;app Android fuori casa senza mettere una pagina di login su internet. Come si confrontano le opzioni di accesso remoto per esposizione, costo reale (carico sulla macchina e DDoS oltre alla bolletta), rischio di blocco e batteria, perché Cloudflare Access e i service token non vanno bene per l\u0026rsquo;app, come i certificati client del piano gratuito e una regola WAF personalizzata legano un hostname del tunnel ai soli telefoni che hanno un certificato, quali impostazioni di Home Assistant servono per il reverse proxy, come costruire il file PKCS12, come mettere un certificato Let\u0026rsquo;s Encrypt sull\u0026rsquo;origine e perché il rinnovo richiede un riavvio, cosa hanno fatto gli scanner nelle prime due ore, e cosa hanno fatto con il certificato il telefono, Chrome, Helium e i due client dell\u0026rsquo;app Companion. La versione self-hosted con nginx o Caddy è un articolo a parte.","title":"L'app di Home Assistant su Cloudflare, bloccata a un certificato, con il piano gratuito"},{"content":"Faccio login sul mio portatile con una YubiKey. PIN, tocco, desktop. Nessuna password digitata.\nPoi parte la prima app che vuole un segreto salvato e GNOME tira fuori una finestra: «An application wants access to the keyring \u0026lsquo;Login\u0026rsquo;, but it is locked.» A ogni login. Stessa finestra, stessa domanda, una password che mi era appena stato detto che non mi serviva.\nNessun pezzo singolo è rotto. Ogni parte fa quello per cui è stata costruita. Il guaio è che il portachiavi è stato progettato partendo dal presupposto che un login comporti sempre una password, e un login senza password rompe quel presupposto senza dirlo a nessuno.\nPerché un login con la chiave lascia a secco il portachiavi Il portachiavi di login è dove il desktop conserva i segreti che gli consegnano le app: chiavi del Wi-Fi, chiavi di archiviazione del browser, i token che client di chat, gestori di password e app per videoconferenze usano per restare connessi. Sta su disco cifrato con la tua password di login, e la Secret Service API1 è il modo in cui le app chiedono quello che c\u0026rsquo;è dentro.\nDi solito non lo vedi mai. Digiti la password nella schermata di login, lo stack PAM la verifica sull\u0026rsquo;account, e un modulo del portachiavi più giù nello stesso stack raccoglie in silenzio quella stessa password e la usa per aprire il portachiavi prima ancora che il desktop abbia finito di disegnarsi. Una password, due lavori.\nIl mio stack comincia con questa riga:\nauth sufficient pam_u2f.so cue sufficient vuol dire che una YubiKey andata a buon fine chiude l\u0026rsquo;autenticazione lì su due piedi. È esattamente ciò che Yubico documenta per il login senza password2. Funziona. Vuol dire anche che il passo della password non viene mai eseguito, quindi nello stack non c\u0026rsquo;è nessuna password che il modulo del portachiavi possa raccogliere. Il portachiavi resta bloccato finché qualcosa non lo chiede, e quel qualcosa è la prima app che parte.\nDue modi di entrare, e cosa consegna ciascuno al portachiavi Due modi di entrare, e cosa consegna ciascuno al portachiavi Il portachiavi si apre solo con una password. Un login YubiKey non ne produce mai una, quindi la fornisce lo script. Login con password pam_unix verifica la password pam_oo7 passa la stessa password a oo7-daemon il portachiavi di login si decifra con quella portachiavi aperto, nessuna richiesta Login YubiKey (PIN + tocco) pam_u2f è sufficient, quindi chiude lo stack nessun passo password, nessuna password a oo7-daemon non arriva niente bloccato, richiesta al primo uso Script di avvio automatico PIN + tocco, la chiave dà l'hmac-secret decifra la password salvata, sblocca il portachiavi Le app che leggono il portachiavi aspettano che si apra prima di partire, così nessuna può far comparire prima la richiesta. Un login con password consegna al portachiavi l\u0026rsquo;unica cosa con cui può aprirsi. Un login con la chiave non gli consegna niente. Lo script di avvio automatico a destra è la soluzione che questo post descrive. Le soluzioni abituali, e quanto costa ciascuna Le risposte comuni sono quattro. Ognuna rinuncia a qualcosa.\nSoluzione Cosa ottieni Cosa costa Digitare la password alla richiesta Niente da costruire La richiesta, a ogni login. La chiave non ti ha risparmiato niente Password del portachiavi vuota Richiesta sparita Ogni segreto salvato sta su disco in chiaro Password e chiave al login Vera autenticazione a due fattori, il portachiavi si apre da solo Digitare la password a ogni login, cioè proprio ciò che la chiave doveva evitare Password sigillata nel TPM, sbloccata al login Nessuna richiesta, niente da digitare Chiunque ottenga una sessione su quella macchina ottiene i segreti. Nessun PIN, nessuna chiave coinvolta hmac-secret della YubiKey (questo post) Nessuna richiesta, PIN + tocco, il login con password funziona ancora Un secondo PIN e tocco dopo il login, e uno script da curare La password vuota è quella con cui finisce la maggior parte delle discussioni sui forum, ed è la peggiore del mucchio. La strada del TPM è rispettabile, ma il TPM non ti chiede mai niente, quindi quello che protegge è un disco estratto dal portatile, non una sessione davanti a cui qualcuno si è seduto mentre tu ti facevi un tè. Volevo il portachiavi legato alla stessa cosa a cui è legato il mio login: la chiave, e il PIN che la accompagna.\nLa chiave può custodire un segreto Una chiave FIDO2 fa più che dire sì o no. Lo standard CTAP 2.1 ha un\u0026rsquo;estensione chiamata hmac-secret, che «is used by the platform to retrieve a symmetric secret from the authenticator when it needs to encrypt or decrypt data using that symmetric secret»3.\nIl funzionamento è abbastanza semplice. Quando crei una credenziale, la chiave genera dei valori casuali e li tiene dentro di sé. Più tardi le mandi un salt, e lei ti restituisce un HMAC di quel salt con il suo valore nascosto come chiave. Stessa credenziale, stesso salt, stessa risposta ogni volta. Chiave diversa, niente.\nIl dettaglio che conta qui: la chiave custodisce due di quei valori nascosti, CredRandomWithUV e CredRandomWithoutUV3. UV è la user verification, che su questa chiave vuol dire il PIN. Chiedi con il PIN e ottieni un segreto. Chiedi con il solo tocco e ne ottieni uno completamente diverso. Quindi il PIN non è un controllo avvitato davanti al segreto. Fa parte del segreto.\nElemento Dove vive Da solo ti dà ID della credenziale e salt ~/.local/share/yubikey-keyring/, file in chiaro Niente. Non sono segreti Password del portachiavi cifrata Stessa cartella, password.enc Niente senza il segreto per decifrarla Valore nascosto della credenziale Dentro la YubiKey, non ne esce mai Niente senza il salt e un tocco PIN La tua testa Seleziona il segreto con PIN. PIN sbagliato, nessun segreto, e la chiave conta il tentativo Tutti e quattro insieme restituiscono la password dell\u0026rsquo;account. Togline uno qualsiasi e sei alla richiesta, che è dove saresti stato comunque.\nCosa ho costruito con Claude La password del portachiavi è la mia password dell\u0026rsquo;account, di proposito. Così il login con password continua a funzionare nel modo normale: la digiti nella schermata di login e lo stack PAM apre il portachiavi da solo, nessuno script coinvolto. È la strada della YubiKey quella che ha bisogno di aiuto.\nPezzo Lavoro yubikey-keyring-setup Una volta sola. Crea la credenziale FIDO2 sulla chiave con hmac-secret attivo. Servono il PIN e un tocco yubikey-keyring-reset Chiede la password dell\u0026rsquo;account, la verifica sull\u0026rsquo;account reale con unix_chkpwd prima di toccare qualsiasi cosa, la cifra con il segreto vincolato al PIN, fa il backup del vecchio portachiavi e crea quello nuovo yubikey-keyring-unlock Gira al login. Finestra del PIN, tocco, decifra, sblocca. Due tentativi per il PIN, poi rinuncia e ti lascia la richiesta normale wait-for-keyring Avvolge le voci di avvio automatico di ogni app che legge il portachiavi. Le trattiene fino a 60 secondi finché il portachiavi non è aperto Il segreto esce da fido2-assert4 con -h per hmac-secret, -p per il tocco e -v per il PIN. La password è cifrata con OpenSSL, AES-256 con 200.000 iterazioni di PBKDF2 sul segreto derivato. Al login la password viaggia solo dentro una pipe. Il segreto derivato e, durante un reset, la password digitata stanno per poco in una directory temporanea privata sotto /tmp, che su Fedora è un tmpfs in RAM, e vengono cancellati appena usati. Nessuno dei due finisce mai su una riga di comando dove ps potrebbe vederlo.\nwait-for-keyring è il pezzo che la gente salterebbe. Non farlo. L\u0026rsquo;ordine di avvio automatico non è garantito, e se un\u0026rsquo;app chiede il suo token un secondo prima che io abbia finito di digitare il PIN, GNOME tira su la vecchia richiesta sopra la mia, e la soluzione sembra rotta quando non lo è.\nGli script sono tuoi da prendere: yubikey-keyring.zip, SHA-256 9b3670cf0f38c1b93e7738d2f68abef0380786d918491973e3ebefa5143e6263. Contiene gli script, un installer, un README e il banco di prova descritto più sotto. Dentro non ci sono credenziali, salt o password. Quelli si creano sulla tua macchina quando lanci il setup. Leggi il README, poi lancia test/run.sh prima di lasciare che una qualsiasi parte si avvicini al tuo vero portachiavi.\nCosa è venuto fuori lavorandoci Doveva essere un\u0026rsquo;ora di lavoro. Gran parte della serata se n\u0026rsquo;è andata in cose che la documentazione non menziona.\nIl daemon era cambiato sotto i miei piedi Ogni guida che ho letto su questo problema parla con gnome-keyring-daemon, e ognuna mi avrebbe mandato nella direzione sbagliata, perché il processo che rispondeva sulla mia macchina era oo7-daemon 0.7.0, una beta. Il portatile era passato a Fedora 45 poco prima quella stessa sera, una transazione dnf da 5.464 passi, e oo7 era arrivato con lei.\noo7 è un\u0026rsquo;implementazione in Rust del Secret Service, con il suo server e il suo modulo PAM5. Va detto a suo merito che implementa l\u0026rsquo;interfaccia D-Bus privata di gnome-keyring per lo sblocco con password, così gli strumenti esistenti continuano a funzionare. Quell\u0026rsquo;interfaccia si chiama org.gnome.keyring.InternalUnsupportedGuiltRiddenInterface6. Il nome ti dice quanto fidarti. Funziona, l\u0026rsquo;ho provata, e mi aspetto comunque che un giorno cambi.\nLa prima password che digiti diventa la password del portachiavi Questa ha spiegato l\u0026rsquo;intera serata.\nQuando oo7 parte e non trova un file di portachiavi non ne crea uno, mostra alle app un segnaposto bloccato chiamato login, e la prima password che qualcuno usa per sbloccare quel segnaposto diventa la password del portachiavi, anche se il file vero e proprio viene scritto solo quando un\u0026rsquo;app salva il suo primo segreto.\nIl mio file di portachiavi è stato creato alle 20:45, e il suo primo elemento veniva da un\u0026rsquo;app partita pochi secondi prima. Quindi alle 20:45 ho digitato qualcosa in una richiesta che volevo togliermi di torno, e quello è diventato la password. Niente di ciò che ho provato dopo l\u0026rsquo;ha aperto. Nemmeno il codice di sblocco aveva colpa: l\u0026rsquo;ho dimostrato su un portachiavi usa e getta con una password nota, che si è bloccato, sbloccato e cancellato senza problemi.\nPoi ho controllato il segnaposto su un daemon usa e getta. Prima che il file esista, qualsiasi password lo sblocca, anche una sbagliata. Quindi in quel momento niente ti dice che hai appena impostato una password. Lo scopri al login successivo, quando la password giusta, per quanto ne sai tu, viene rifiutata.\nStato Sblocco con una password qualsiasi Cosa viene scritto Nessun file di portachiavi, segnaposto mostrato Riesce Ancora niente Primo elemento salvato n/d File creato, cifrato con quello che è stato digitato Ogni login successivo Funziona solo la password delle 20:45 n/d Così ho smesso di inseguirlo. Il reset fa il backup del vecchio portachiavi, sblocca il segnaposto con la password dell\u0026rsquo;account, e salva subito un elemento marcatore così il file viene scritto lì su due piedi, con una password che conosco.\nGli strumenti FIDO2 accettano il PIN solo da un terminale fido2-cred e fido2-assert leggono il PIN dal terminale di controllo e da nessun\u0026rsquo;altra parte. Uno script avviato al login non ha un terminale. Quindi c\u0026rsquo;è un piccolo wrapper che lancia lo strumento sotto uno pseudo-terminale, aspetta la parola PIN nel suo output, e ci digita il PIN preso da una finestra di dialogo. Venti righe di Python. Non è bello, ma fa il suo lavoro e il PIN non tocca mai un file o una lista di argomenti.\nProvalo dove non può farti male La cosa più utile che ha fatto Claude Code è stata rifiutarsi di fidarsi dello script di reset sul mio vero portachiavi. Ha eseguito tutto il flusso prima su un secondo oo7-daemon in una sessione D-Bus privata (dbus-run-session), con una home usa e getta, un vecchio portachiavi finto e una password di prova con dentro £, @, \u0026quot; e #.\nLa prima esecuzione è fallita. Bene. Il reset ha spostato il vecchio portachiavi nel suo backup, ha riavviato il daemon, ha visto il segnaposto login di oo7, l\u0026rsquo;ha preso per un portachiavi vero e si è fermato. Sulla mia macchina mi avrebbe lasciato senza alcun portachiavi e con un backup da ripristinare a mano. Ora lo script sblocca il segnaposto invece di rifiutarlo, e se qualcosa fallisce dopo che il backup è stato fatto, rimette a posto da solo il vecchio portachiavi.\nAnche il controllo di sicurezza di Claude Code ha fermato una versione precedente del reset sul portachiavi vero finché non l\u0026rsquo;ho confermata io. Irritante sul momento. Giusta scelta.\nTest, sul daemon usa e getta Risultato Reset da una richiesta nel terminale, vecchio portachiavi salvato Superato Vecchia password sul nuovo portachiavi Rifiutata Daemon nuovo, come al login Parte bloccato Password sbagliata Rifiutata Password corretta, lo stesso percorso di un login con password Sblocca Daemon nuovo, PIN + tocco tramite lo script di sblocco Sblocca Script di sblocco con il portachiavi già aperto Esce subito, nessun tocco richiesto Poi un\u0026rsquo;altra volta sulla cosa vera, con il portachiavi bloccato a mano e lo script di sblocco lanciato come lo lancia il login: PIN, tocco, aperto.\nGli spigoli È una configurazione che funziona, non un prodotto finito, e questi sono i pezzi che conosco.\nDue inserimenti del PIN per ogni login con la chiave. Uno alla schermata di login per PAM, uno per il portachiavi. Sono richieste separate alla chiave e la chiave non le unisce. Un portachiavi con il solo tocco ne risparmierebbe uno, al prezzo di un PIN che dopo il login non protegge niente. Cambia la password dell\u0026rsquo;account e la copia salvata diventa vecchia. Lo script di sblocco te lo dice con una notifica invece di fallire in silenzio. Rilancia il reset ed è sistemato. Perdi la chiave e torni a digitare la password. Non si perde niente, perché la password è ancora quella dell\u0026rsquo;account. Alcune app riscrivono i propri file di avvio automatico. Se una di loro tira di nuovo fuori la richiesta, è per questo, e il wrapper va rimesso. oo7 è una beta, e la chiamata di sblocco passa da un\u0026rsquo;interfaccia con «Unsupported» nel nome. Ogni aggiornamento di oo7 merita un login di prova prima di farci affidamento. Chiusura Il portachiavi non è mai stato rotto. Nemmeno la chiave. Sono stati costruiti su presupposti diversi su cosa sia un login, e nessuno a monte li ha collegati. Il login senza password è documentato da Yubico, incluso nei profili authselect di Fedora e attivato con un solo feature flag. In niente di tutto questo c\u0026rsquo;è scritto che nel momento in cui lo usi, ogni segreto che il tuo desktop custodisce resta chiuso dietro una password che non digiti più.\nPer questo il buco ricade su chi è seduto alla macchina, e la soluzione vale quanto la comprensione che quella persona ha di dove stia davvero il segreto. La risposta facile, una password vuota, è quella verso cui viene indirizzata la maggior parte della gente, e scambia una finestra di dialogo con un file non cifrato di ogni token che possiedi. Non è una soluzione. È arrendersi in silenzio.\nLa forma giusta c\u0026rsquo;era da sempre. La chiave può custodire un segreto, lo standard lo dice parola per parola, e il PIN può far parte di quel segreto invece di essere una porta davanti. Ci sono volute una serata e un banco di prova per collegarla. Non avrebbe dovuto servire né l\u0026rsquo;una né l\u0026rsquo;altro.\nfreedesktop.org, Secret Service API Draft — l\u0026rsquo;API D-Bus che le app desktop usano per salvare e recuperare segreti, implementata sia da gnome-keyring sia da oo7.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYubico, pam-u2f — «For a passwordless experience, where the authenticator PIN can be used in place of the user password», con la riga d\u0026rsquo;esempio auth sufficient pam_u2f.so authfile=/etc/u2f_mappings cue pinverification=1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFIDO Alliance, Client to Authenticator Protocol 2.1, section 12.5 HMAC Secret Extension — «This extension is used by the platform to retrieve a symmetric secret from the authenticator when it needs to encrypt or decrypt data using that symmetric secret», e «The authenticator generates two random 32-byte values (called CredRandomWithUV and CredRandomWithoutUV)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYubico, libfido2 fido2-assert manual — lo strumento da riga di comando usato per richiedere un\u0026rsquo;asserzione, con le opzioni per hmac-secret, presenza dell\u0026rsquo;utente e PIN.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nlinux-credentials/oo7 on GitHub — «server: org.freedesktop.secrets server implementation» e «pam: PAM integration for the server implementation».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\noo7 source, server/src/gnome/internal.rs — l\u0026rsquo;implementazione in oo7 dell\u0026rsquo;interfaccia di sblocco interna di gnome-keyring, compresa UnlockWithMasterPassword.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/random/yubikey-login-locked-keyring/","summary":"Fai login con una YubiKey e GNOME ti chiede comunque una password, perché il portachiavi di login è cifrato con una password che il tuo login non ha mai prodotto. Questo post spiega perché pam_u2f impostato come sufficient lascia a secco il portachiavi, cosa costano le soluzioni abituali (password vuota, digitarla comunque, il TPM), e la soluzione che ho costruito: l\u0026rsquo;hmac-secret FIDO2 della chiave, vincolato a PIN e tocco, che decifra una copia salvata della password dell\u0026rsquo;account e sblocca oo7-daemon al login. Poi cosa è venuto fuori lavorandoci: Fedora 45 aveva sostituito gnome-keyring con oo7, il portachiavi segnaposto di oo7 prende come sua la prima password che digiti, gli strumenti FIDO2 leggono il PIN solo da un terminale, e uno script di reset che mi avrebbe lasciato senza alcun portachiavi, scovato provandolo prima su un daemon usa e getta. Gli script, un installer e quel banco di prova si possono scaricare.","title":"La mia YubiKey mi fa entrare. Al mio portachiavi nessuno l'ha detto."},{"content":"La licenza è già nel firmware Un sacco di gente possiede una licenza del Fisher-Price OS (Windows) senza averne mai visto il product key. È arrivata con la macchina, e la chiave vive nel firmware di quella macchina, in una piccola tabella ACPI chiamata MSDM.\nPoi la macchina smette di essere il posto dove si lavora. O il proprietario vuole quella licenza in una VM che ora affitta da te, oppure la macchina stessa viene cancellata, trasformata in un host Proxmox, e la copia del sistema operativo con cui è stata venduta la si vuole di nuovo come VM sopra di essa.\nDal punto di vista meccanico, è un\u0026rsquo;opzione di QEMU. Ed è proprio questo il problema. QEMU passa qualsiasi tabella a un guest senza controllarla, il guest si attiva con qualunque chiave trovi, e niente in tutto lo stack si chiede se la licenza consenta qualcosa di tutto ciò. Questo post spiega cos\u0026rsquo;è la tabella, come metterla in una VM senza passarne una corrotta, cosa dicono i termini di Microsoft sullo spostarla, e perché una licenza volume non le si avvicina mai.\nCos\u0026rsquo;è la tabella Da OEM Activation 3.0 in poi, chi produce un PC non stampa più la chiave su un\u0026rsquo;etichetta sotto il case, dove chiunque abbia la fotocamera del telefono la può copiare, e la chiave va invece nel firmware della macchina. Gli strumenti di fabbrica di Microsoft «injects the product keys into the firmware», e il passo di validazione verifica «that the MSDM table exists» e che header e voci «comply with the correct formats»1. Una macchina preparata così «activated by using the OA3 DPK in the firmware»2. MSDM è una normale tabella ACPI, e su Linux si legge direttamente dal firmware:\nsudo cat /sys/firmware/acpi/tables/MSDM \u0026gt; msdm.bin Il portatile su cui è stato scritto questo post ne ha una. 85 byte.\nLa specifica pubblicata da Microsoft definisce l\u0026rsquo;header ACPI standard di 36 byte con la firma MSDM, e poi si ferma. Tutto ciò che viene dopo l\u0026rsquo;header è una «Proprietary data structure that contains all the licensing data necessary to enable Windows activation»3.\nByte Contengono Si sa da da 0 a 35 l\u0026rsquo;header ACPI standard: firma MSDM, lunghezza, checksum, OEM ID la specifica di Microsoft da 36 a 55 20 byte di campi: versione, tipo di dato, lunghezza del dato tabelle reali, non una specifica pubblicata da 56 a 84 il product key di 29 caratteri, cinque gruppi da cinque tabelle reali, non una specifica pubblicata QEMU passa qualsiasi cosa gli dai L\u0026rsquo;opzione -acpitable file= di QEMU prende la «whole ACPI table from the specified files, including all ACPI headers (possible overridden by other options)»4, e il guest vede poi una tabella MSDM esattamente come la presenterebbe il firmware di un portatile. L\u0026rsquo;ho verificato con una chiave volutamente falsa. I byte sono usciti dall\u0026rsquo;altra parte identici, dalla firma all\u0026rsquo;ultimo carattere.\nQEMU non rifiuta niente. Ecco cosa fa hw/acpi/core.c con un file rotto5:\nCosa c\u0026rsquo;è di sbagliato nel file Cosa fa QEMU Cosa vede il guest La lunghezza nell\u0026rsquo;header non corrisponde al file avvisa, poi sovrascrive la lunghezza con la dimensione reale un header valido Il checksum non somma a zero lo ricalcola, su ogni tabella, ogni volta un checksum valido Chiave troncata o storpiata niente, i dati dopo l\u0026rsquo;header non sono affar suo una tabella dall\u0026rsquo;aria valida attorno a una chiave rotta Il guest non ha modo di accorgersi della differenza, e nemmeno tu finché qualcuno non apre un ticket di supporto. Il primo a saperlo è un cliente la cui attivazione è fallita.\nQuindi, se sono i clienti a caricarle, controllale prima che QEMU le veda:\n#!/usr/bin/env python3 \u0026#34;\u0026#34;\u0026#34;Refuse anything that is not a well-formed MSDM table before QEMU sees it.\u0026#34;\u0026#34;\u0026#34; import re, struct, sys t = open(sys.argv[1], \u0026#39;rb\u0026#39;).read() fail = lambda why: sys.exit(f\u0026#34;{sys.argv[1]}: {why}\u0026#34;) if len(t) \u0026lt; 56: fail(f\u0026#34;{len(t)} bytes, too short for an MSDM table\u0026#34;) sig, length = t[:4], struct.unpack_from(\u0026#39;\u0026lt;I\u0026#39;, t, 4)[0] if sig != b\u0026#39;MSDM\u0026#39;: fail(f\u0026#34;signature is {sig!r}, not MSDM\u0026#34;) if length != len(t): fail(f\u0026#34;header says {length} bytes, file is {len(t)}\u0026#34;) if sum(t) \u0026amp; 0xff: fail(\u0026#34;checksum does not sum to zero\u0026#34;) ver, _, dtype, _, dlen = struct.unpack_from(\u0026#39;\u0026lt;5I\u0026#39;, t, 36) if (ver, dtype) != (1, 1): fail(f\u0026#34;version {ver}, data type {dtype}: expected 1 and 1\u0026#34;) if dlen != 29 or 56 + dlen != length: fail(f\u0026#34;data length {dlen}: expected 29\u0026#34;) key = t[56:].decode(\u0026#39;ascii\u0026#39;, \u0026#39;replace\u0026#39;) if not re.fullmatch(r\u0026#39;([0-9A-Z]{5}-){4}[0-9A-Z]{5}\u0026#39;, key): fail(\u0026#34;data is not a 5x5 product key\u0026#34;) print(f\u0026#34;OK OEM {t[10:16].decode(errors=\u0026#39;replace\u0026#39;).strip()!r} key *****-*****-*****-*****-{key[-5:]}\u0026#34;) Controlli Confronta il file con Un fallimento significa Firma, lunghezza, checksum l\u0026rsquo;header documentato da Microsoft il file è rotto Versione, tipo di dato, lunghezza del dato, forma della chiave la forma che hanno le tabelle reali guardalo a mano, non «è contraffatto» Non stampa mai la chiave, solo l\u0026rsquo;ultimo gruppo. Un product key in un file di log è un product key che può usare qualcun altro.\nLanciato su una tabella buona e su tre sue copie rotte:\nOK OEM \u0026#39;EXMPLE\u0026#39; key *****-*****-*****-*****-EEEEE bad-sum.bin: checksum does not sum to zero bad-trunc.bin: header says 85 bytes, file is 70 bad-sig.bin: signature is b\u0026#39;SLIC\u0026#39;, not MSDM Dove va, e chi ce la può mettere Dal file caricato dal cliente alla chiave con cui si attiva il guest Tabella del cliente msdm.bin, 85 byte dalla sua macchina Validatore firma, lunghezza, checksum, forma chiave Salvata /etc/pve/priv/ solo root, ogni nodo args della VM -acpitable file= impostati solo da root QEMU riscrive la lunghezza, ricalcola il checksum, non rifiuta niente Guest MSDM in ACPI, l'attivazione legge la chiave Il validatore sta davanti a QEMU perché QEMU ripara un header rotto invece di rifiutarlo. La tabella vive nella metà privata del filesystem del cluster, così segue la VM su qualsiasi nodo e solo root la può leggere. Un product key è un segreto. Non va messo da nessuna parte dove www-data possa leggerlo, e pmxcfs ti dà esattamente un posto in /etc/pve dove non può6:\nDove potrebbe stare la tabella Chi può leggerla Su ogni nodo dove la VM può migrare /etc/pve/priv solo root sì in qualsiasi altro punto di /etc/pve leggibile dal gruppo, compreso il www-data dell\u0026rsquo;interfaccia web sì una directory su un solo nodo quello che imposti tu no Con 85 byte è lontanissima dal limite di 1 MiB per file di pmxcfs7:\nmkdir -p /etc/pve/priv/msdm check-msdm.py upload.bin \u0026amp;\u0026amp; cp upload.bin /etc/pve/priv/msdm/9000.bin qm set 9000 --args \u0026#34;-acpitable file=/etc/pve/priv/msdm/9000.bin\u0026#34; qm set --args sostituisce l\u0026rsquo;intera riga. Se la VM ha già opzioni SMBIOS o firmware in args, scrivile tutte insieme. E siccome args è riservato a root, questo è un lavoro per il tuo provisioning, non qualcosa che un cliente può fare dall\u0026rsquo;interfaccia web. Ed è giusto che sia così. Il cliente fornisce il file, i tuoi strumenti lo controllano e lo collegano.\nLa tabella sposta una chiave, non un diritto Qui la funzionalità richiede la testa sulle spalle. Spostare la tabella MSDM in una VM sposta la chiave. Non la licenza.\nLo dicono i termini stessi di Microsoft, e le righe che contano stanno in una tabella:\nCaso Cosa dice Microsoft Fonte Licenza OEM, spostarla trasferibile a un altro utente «only with the licensed device» termini della licenza OEM8 Licenza OEM, quante installazioni «only one instance of the software for use on one device, whether that device is physical or virtual» termini della licenza OEM8 Licenza OEM, in parole povere «locked» al PC originale «and cannot be transferred to any other PC» blog Microsoft per le piccole imprese9 L\u0026rsquo;eccezione le norme sul trasferimento «do not apply» quando il software è stato acquistato in Germania o in un elenco di altri paesi termini della licenza OEM8 Ospitarla per i clienti il Services Provider License Agreement è per «hosted applications to end customers» SPLA10 Edizioni desktop come VM ospitate «VMs must be hosted by a Qualified Multitenant Hoster (QMTH)» Microsoft Learn11 La tabella viene sempre dalla macchina licenziata del cliente, mai dai tuoi host. Il caso che sta pienamente dentro il testo è il più semplice: la macchina con cui è stata venduta la licenza, che ora fa girare Proxmox, con quella stessa copia del Fisher-Price OS (Windows) spostata in una sola VM sopra di essa. È ancora un\u0026rsquo;istanza su un dispositivo, e i termini OEM lo consentono «whether that device is physical or virtual»8. Una seconda VM, o un\u0026rsquo;altra macchina, e non lo è più.\nIn quel caso la macchina del cliente e l\u0026rsquo;hypervisor sono la stessa scatola, quindi non c\u0026rsquo;è niente da caricare e niente da copiare. Il kernel di Proxmox espone già la tabella MSDM del firmware sotto /sys/firmware/acpi/tables/, leggibile solo da root, e QEMU su Proxmox gira come root, quindi può prendere la tabella direttamente da lì:\nqm set 100 --args \u0026#34;-acpitable file=/sys/firmware/acpi/tables/MSDM\u0026#34; Puntare alla tabella viva invece che a una copia ha due conseguenze. Il percorso viene letto su qualunque nodo la VM si avvii, quindi questa soluzione va su un host standalone e non in un cluster: migra la VM e o prende la tabella di quel nodo, una licenza diversa su una macchina diversa, o non parte affatto, perché QEMU rifiuta un file mancante con can't open file … No such file or directory. Ed è una riga sola, il che la rende una riga sola da incollare su una seconda VM. Quella seconda VM è il caso che i termini non coprono, quindi una VM la riceve e nessun\u0026rsquo;altra.\nQuindi costruisci la funzionalità. Il meccanismo è solido, e ci sono clienti che hanno diritto a usarlo; uno che ha comprato la licenza in Germania potrebbe benissimo essere tra questi. Ma metti il diritto dove deve stare: nei tuoi termini di servizio, il cliente garantisce di avere una licenza che copre l\u0026rsquo;uso nella tua VM, e lo fa prima che il pulsante di caricamento faccia qualsiasi cosa. Il validatore dimostra che la tabella è ben formata. Niente dimostra che sia sua da usare.\nLe licenze volume non si avvicinano mai alla tabella Un cliente con una licenza volume può usare la stessa strada? No. Non c\u0026rsquo;è niente che la tabella debba portare.\nMSDM appartiene al canale OEM e a nient\u0026rsquo;altro. La guida di pianificazione di Microsoft dice che l\u0026rsquo;attivazione OEM «is available only for computers that are purchased through OEM channels and have the Windows operating system preinstalled»12. Le licenze volume si attivano con uno di altri tre modelli, «Multiple Activation Keys (MAK)», «KMS» e «Active Directory-based activation»12, e in ognuno di essi la chiave è installata nel sistema operativo. Niente la legge dal firmware.\nMetodo Dove vive la chiave Con cosa parla il guest In una VM Proxmox OEM, OA 3.0 la tabella MSDM nel firmware i server di attivazione di Microsoft la strada -acpitable vista sopra MAK installata nel guest Microsoft, una volta, scalata dalle attivazioni della chiave funziona con accesso a internet o per telefono KMS una chiave generica (GVLK) nel guest l\u0026rsquo;host KMS del cliente su TCP 1688 serve una rotta fino a lì, e 25 client o 5 server prima che attivi qualcosa Active Directory una GVLK nel guest i domain controller del cliente, almeno ogni 180 giorni serve la VM unita al loro dominio AVMA una chiave generica nel guest la licenza Datacenter dell\u0026rsquo;host Hyper-V non disponibile affatto Quindi per un cliente volume non c\u0026rsquo;è niente da costruire sull\u0026rsquo;hypervisor. La sua chiave va nella sua immagine, e la tua parte è il percorso di rete: la porta 1688 verso il suo host KMS, o una VPN verso i suoi domain controller. Lo slot MSDM resta vuoto, ed è giusto così.\nDue cose fregano la gente. La chiave generica sui supporti volume da sola non attiva niente, perché «the GVLK doesn\u0026rsquo;t work unless a valid KMS host key can be found»12, quindi una VM costruita dalla ISO Enterprise del cliente senza una rotta verso casa resta non attivata. E una licenza volume desktop non è una licenza a sé. I programmi volume «cover upgrades to Windows client operating systems only», e «an existing retail or OEM operating system license is needed for each computer»12. La licenza volume si appoggia su una licenza base, molto spesso proprio la stessa OEM di cui parlava la sezione precedente, e se possa girare nella tua VM resta la questione di hosting in quella tabella, non una questione di attivazione.\nAVMA si merita una riga tutta sua, perché è quella che sembra la risposta. È il modo di Microsoft perché un host attivi i propri guest server, legando «the VM activation to the licensed virtualization host», e richiede «a Windows Server Datacenter edition with the Hyper-V server host role installed»13. Sul resto Microsoft è chiara: «AVMA doesn\u0026rsquo;t work with other server virtualization technologies»13. Su Proxmox i guest server si attivano con le tue chiavi SPLA o con il KMS del cliente.\nNiente nello stack controlla le carte Ogni strato qui fa il suo lavoro e niente di più. Il firmware conserva una chiave. QEMU copia i byte e sistema l\u0026rsquo;header. Il guest legge la chiave e si attiva con quella. Nessuno di loro può dire se la macchina sottostante sia quella con cui è stata venduta la licenza, e nessuno di loro è mai stato pensato per farlo.\nQuindi il controllo ricade su chi gestisce l\u0026rsquo;hypervisor. Una licenza è un accordo tra chi l\u0026rsquo;ha comprata e Microsoft, e la tua piattaforma non ne è parte, ma è la cosa che sposta la chiave, e questo rende la domanda tua che tu l\u0026rsquo;abbia chiesta o no.\nScrivi la risposta prima che il pulsante di caricamento faccia qualsiasi cosa. Una macchina, una VM, la licenza del cliente e la sua parola che copre questo uso. Non costa niente, e protegge te quanto lui. Il software sposterà qualunque chiave gli venga data. Se avrebbe dovuto farlo è una domanda a cui solo una persona può rispondere, quindi assicurati che una persona ci sia.\nMicrosoft Learn, OA 3.0 on the factory floor — «injects the product keys into the firmware»; /Validate verifica «that the MSDM table exists».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Validate an OEM Activation key — «is activated by using the OA3 DPK in the firmware».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, Microsoft Software Licensing Tables (SLIC and MSDM) — tabella 2, offset 36: «Proprietary data structure that contains all the licensing data necessary to enable Windows activation.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU, System Emulation, Invocation — campi di -smbios per tipo; -acpitable «For file=, take whole ACPI table from the specified files, including all ACPI headers»; -boot «Currently Seabios for X86 system support it.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU v11.0.3, hw/acpi/core.c — «ACPI table has wrong length» è un warn_report, poi la lunghezza viene sovrascritta e il checksum ricalcolato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-cluster, src/pmxcfs/pmxcfs.c — i percorsi sotto priv sono mascherati a 0777700, tutto il resto a 0777750.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-cluster, src/pmxcfs/memdb.h — #define MEMDB_MAX_FILE_SIZE (1024 * 1024) // 1 MiB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, Windows 11 OEM licence terms — «you may transfer the license to use the software directly to another user, only with the licensed device»; le norme sul trasferimento «do not apply if you acquired the software in Germany» o nei paesi elencati. Copia d\u0026rsquo;archivio; la pagina viva rifiuta le richieste automatiche.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, small business blog archive — «the OEM Windows license is \u0026rsquo;locked\u0026rsquo; to the original PC it comes with and cannot be transferred to any other PC.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, Services Provider License Agreement — «for service providers and software development companies licensing eligible Microsoft products to provide software services and hosted applications to end customers.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Windows subscription activation for VDA — «VMs must be hosted by a Qualified Multitenant Hoster (QMTH).»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Plan for volume activation — i tre modelli di attivazione volume; le soglie KMS di «at least five computers» per i server e «at least 25 computers» per i client, sulla porta TCP 1688; l\u0026rsquo;attivazione basata su Active Directory che richiede il dominio «at least once every 180 days»; «the GVLK doesn\u0026rsquo;t work unless a valid KMS host key can be found»; le licenze volume «cover upgrades to Windows client operating systems only».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Automatic Virtual Machine Activation in Windows Server — «AVMA requires a Windows Server Datacenter edition with the Hyper-V server host role installed»; «AVMA doesn\u0026rsquo;t work with other server virtualization technologies.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/proxmox/moving-an-oem-licence-into-a-proxmox-vm/","summary":"Una licenza OEM per il Fisher-Price OS (Windows) vive nel firmware del PC come una tabella ACPI chiamata MSDM, e QEMU passa una tabella del genere a un guest senza controllarla. Qui trovi cosa contiene la tabella, un validatore che rifiuta le tabelle malformate prima che QEMU ne ripari in silenzio l\u0026rsquo;header, come custodirle nella metà privata del filesystem del cluster Proxmox, i termini di Microsoft sullo spostamento di una licenza OEM, l\u0026rsquo;unico caso che consentono chiaramente, come prendere la tabella direttamente dall\u0026rsquo;host quando la macchina licenziata è l\u0026rsquo;hypervisor, e perché l\u0026rsquo;attivazione MAK, KMS, Active Directory e AVMA non tocca mai la tabella.","title":"Spostare una licenza OEM in una VM Proxmox, e cosa si sposta con lei"},{"content":"Che cosa vede il tuo cliente quando la tua VM si avvia Vendi macchine virtuali con il tuo nome. Un cliente ne accende una, e la prima cosa sullo schermo è il logo di qualcun altro.\nQuella è una VM Proxmox di serie. Non c\u0026rsquo;è niente di rotto, e Proxmox non sta facendo niente di sbagliato: è il loro prodotto e il loro nome, hanno scritto loro il firmware e l\u0026rsquo;interfaccia in cui compare, e hanno tutto il diritto di metterlo lì, così come un produttore di server mette il proprio marchio sul frontale della macchina. Solo che non è il tuo.\nIl logo è solo l\u0026rsquo;inizio. Ecco che cosa dichiara un guest UEFI di serie sul firmware attuale di Proxmox, pve-edk2-firmware 4.2026.08-1, letto da dentro il guest con dmidecode:\nDove guarda il guest Che cosa legge Di chi è il nome Schermata di avvio il logo di Proxmox Proxmox Vendor del firmware (SMBIOS tipo 0) Proxmox distribution of EDK II Proxmox Versione del firmware 4.2026.08-1 la versione del pacchetto di Proxmox Produttore del sistema (tipo 1) QEMU QEMU Nome del prodotto (tipo 1) Standard PC (Q35 + ICH9, 2009) QEMU Produttore dello chassis (tipo 3) QEMU QEMU Scheda madre (tipo 2) del tutto assente nessuno Interfaccia web di gestione il logo di Proxmox, in alto a sinistra Proxmox E il logo di avvio non si ferma nemmeno al firmware. Il firmware UEFI passa l\u0026rsquo;immagine che ha disegnato al sistema operativo tramite una tabella ACPI chiamata BGRT, la Boot Graphics Resource Table, che esiste per dire «an image was drawn on the screen during boot»1, e il sistema operativo poi la ridisegna sulla propria schermata di avvio. Il Fisher-Price OS (Windows) la mette sopra la sua rotellina, e Microsoft definisce la BGRT «the standard interface that Windows uses to access the logo»2. Il tema Plymouth predefinito di Fedora fa lo stesso su Linux3. Quindi un guest sul firmware di Proxmox mostra il logo di Proxmox due volte prima che qualcuno abbia fatto login.\nNiente di tutto questo è difficile da cambiare. Il difficile è che resti cambiato. Il prossimo apt full-upgrade ne rimetterà a posto metà in silenzio, e la metà che non rimette a posto è quella che dovrebbe preoccuparti, ed è di questo che parla gran parte del post.\nDove entra nell'avvio ogni pezzo del marchio Accensione QEMU costruisce SMBIOS e ACPI dalla config Firmware OVMF disegna il logo integrato, SeaBIOS uno splash Passaggio tabelle SMBIOS, ACPI con BGRT e MSDM Avvio del SO ridisegna il logo del firmware da BGRT Guest avviato legge le stringhe, l'attivazione legge la chiave MSDM config della VM file di pacchetto config della VM file di pacchetto config della VM sta in /etc/pve, sopravvive a ogni upgrade sta sotto /usr/share, apt lo sostituisce Il marchio entra nell\u0026rsquo;avvio in cinque punti. Tre vengono dalla config della VM stessa e sopravvivono a qualunque cosa faccia apt. Due vengono da file di un pacchetto Proxmox, e sono quelli che un aggiornamento si riprende. La tabella MSDM in quel passaggio di consegne non è affatto branding. Porta una chiave di licenza, e spostarne una dentro una VM ha un post tutto suo: Moving an OEM Licence Into a Proxmox VM.\nTutto ciò che sta sotto /usr/share appartiene ad apt Una sola regola decide ogni scelta qui sotto. Un file installato da un pacchetto è un file del pacchetto. Modificalo sul posto e il prossimo aggiornamento di quel pacchetto sovrascrive la tua modifica senza dire una parola, perché per dpkg sta solo rimettendo il proprio file dove l\u0026rsquo;aveva lasciato.\nQuindi ogni pezzo di branding deve vivere da qualche parte che apt non possiede. Un nodo Proxmox ha tre posti così, e ognuno costa qualcosa di diverso:\nDove vive Come ci arriva Sopravvive a un aggiornamento Che cosa ti costa La config della VM in /etc/pve smbios1, e args per tutto il resto Sì, la config non viene mai toccata da un pacchetto args è solo per root, e non si vede nella GUI Un file che dpkg ha avuto ordine di lasciare stare dpkg-divert Sì, la copia del pacchetto finisce invece sotto un nome .distrib Gli aggiornamenti non raggiungono più il file, il che conta quando il file è firmware Una tua directory, fuori dall\u0026rsquo;albero dei pacchetti /usr/local, richiamata da args Sì, nessun pacchetto la possiede Devi metterla su ogni nodo da solo La descrizione che Debian stessa dà di una diversion è la più chiara: «a way of forcing dpkg not to install a file into its location, but to a diverted location»4. Questo copre l\u0026rsquo;interfaccia web. Per il firmware è una di due opzioni, e la più pericolosa.\nLo chassis è una manciata di stringhe e un controllo dei permessi SMBIOS è la tabella con cui una macchina descrive sé stessa: chi l\u0026rsquo;ha fatta, che modello è, il suo numero di serie, che cosa sono la scheda e il case5. La legge dmidecode, la legge ogni strumento di inventario che tu abbia mai puntato su una rete, la legge il pannello informazioni di sistema del Fisher-Price OS (Windows), e lo fa anche la maggior parte dei controlli di licenza che decidono se un software girerà o no su una data macchina. Su una VM la scrive QEMU. Da qui QEMU e Standard PC nella tabella qui sopra.\nIl tipo 1 tramite smbios1 Proxmox espone una sola struttura SMBIOS nella config della VM: il tipo 1, System Information, come smbios16. Accetta manufacturer, product, version, serial, sku, family e uuid.\nIl tranello sta in qemu-server, non nella documentazione. Ogni campo tranne uuid deve corrispondere a uno schema base64, [A-Za-z0-9+\\/]+={0,2}, quindi un valore semplice con uno spazio dentro viene rifiutato e basta. Le stringhe vere vanno codificate in base64 con base64=1 impostato, e qemu-server le decodifica di nuovo prima di costruire la riga di comando di QEMU7. L\u0026rsquo;editor SMBIOS della GUI lo fa a ogni salvataggio, con il commento «smbios values can be arbitrary, so encode and mark config as such»8. Da riga di comando è compito tuo:\nb() { printf %s \u0026#34;$1\u0026#34; | base64 -w0; } qm set 9000 --smbios1 \u0026#34;uuid=$(qm config 9000 | sed -n \u0026#39;s/.*uuid=\\([0-9a-f-]*\\).*/\\1/p\u0026#39;),base64=1,\\ manufacturer=$(b \u0026#39;Example Cloud Ltd\u0026#39;),product=$(b \u0026#39;EC Compute Instance\u0026#39;),\\ version=$(b \u0026#39;2026.10\u0026#39;),family=$(b \u0026#39;General Purpose\u0026#39;),sku=$(b \u0026#39;ec-gp-4c16g\u0026#39;)\u0026#34; Nota l\u0026rsquo;uuid che viene rimesso dentro. È l\u0026rsquo;identità di macchina del guest, e qualunque cosa passi a --smbios1 viene salvata come l\u0026rsquo;intera opzione, quindi leggilo prima e tienilo.\nMetti il marchio sul template, non su ogni VM. Un clone Proxmox riceve un UUID generato da zero e mantiene ogni altro campo di smbios1, quindi ogni clone esce con la propria identità e le tue stringhe9, con un\u0026rsquo;eccezione, più sotto.\nI tipi 0, 2, 3 e 11 tramite args smbios1 si ferma al tipo 1. Il vendor del firmware, la scheda madre, lo chassis e le stringhe OEM passano tutti da args, la riga che Proxmox passa dritta a QEMU e che la sua stessa documentazione definisce «for experts only»6. L\u0026rsquo;opzione -smbios di QEMU accetta i campi di ciascun tipo10:\nargs: -smbios \u0026#39;type=0,vendor=Example Cloud Ltd,version=EC-FW 1.0,date=10/04/2026,uefi=on\u0026#39; -smbios \u0026#39;type=2,manufacturer=Example Cloud Ltd,product=EC Virtual Board,version=1.0\u0026#39; -smbios \u0026#39;type=3,manufacturer=Example Cloud Ltd,version=1.0,asset=EC-ASSET-123,sku=ec-gp\u0026#39; -smbios \u0026#39;type=11,value=example-cloud:instance=123\u0026#39; Avviato su QEMU con quelle righe, il dmidecode del guest legge:\nStruttura Campo Di serie Con il marchio Tipo 0 Vendor Proxmox distribution of EDK II Example Cloud Ltd Tipo 0 Version 4.2026.08-1 EC-FW 1.0 Tipo 1 Manufacturer QEMU Example Cloud Ltd Tipo 1 Product Name Standard PC (Q35 + ICH9, 2009) EC Compute Instance Tipo 1 Family non specificato General Purpose Tipo 2 Manufacturer struttura assente Example Cloud Ltd Tipo 2 Product Name struttura assente EC Virtual Board Tipo 3 Manufacturer QEMU Example Cloud Ltd Tipo 3 Asset Tag non specificato EC-ASSET-123 Tipo 11 String 1 struttura assente example-cloud:instance=123 Lungo la strada sono saltate fuori quattro trappole. Tutte e quattro silenziose.\nFornire il tipo 0 fa sparire «UEFI is supported». OVMF scrive il proprio tipo 0 solo quando QEMU non ne ha fornito uno; il ciclo che percorre le tabelle di QEMU imposta NeedSmbiosType0 = FALSE nel momento in cui incontra un tipo 011. La tua stringa del vendor sostituisce quella di Proxmox, che è lo scopo. Ma il tipo 0 di QEMU sostituisce anche le caratteristiche del firmware di OVMF, e senza uefi=on la riga «UEFI is supported» sparisce da dmidecode. Rimettila con uefi=on. Per i guest UEFI c\u0026rsquo;è comunque una casa migliore per la stringa del vendor, dentro il firmware stesso, più sotto.\nIl tipo di chassis non si può impostare. Il tipo 3 di QEMU accetta manufacturer, version, serial, asset e sku, e nient\u0026rsquo;altro10. Resta Other.\nDue definizioni dello stesso tipo si fondono, e vince quella successiva. qemu-server mette il suo -smbios type=1 presto nella riga di comando e i tuoi args alla fine12, quindi un secondo -smbios type=1,manufacturer=… in args non butta via il primo: QEMU li ha fusi campo per campo, il produttore è venuto da args, e l\u0026rsquo;UUID è rimasto dove l\u0026rsquo;aveva messo smbios1. Questo conta per la quarta trappola.\nLe due metà hanno proprietari diversi. qemu-server controlla i permessi opzione per opzione. smbios1 sta con le opzioni hardware e richiede VM.Config.HWType, mentre args ricade nel caso generico in fondo, che dice «only root can set»13. La scheda madre, lo chassis, il vendor del firmware e le stringhe OEM sono solo tuoi. Il tipo 1 no. Chiunque abbia ricevuto da te i diritti sull\u0026rsquo;hardware può riscriverlo, e su un prodotto in hosting potrebbe benissimo essere il cliente. Se la stringa del produttore conta, impostala anche in args. Vince la definizione successiva.\nIl numero di serie è già nella config La maggior parte di ciò che va nel tipo 1 è già nella config della VM. Il nome è un buon numero di serie, perché qemu-server accetta lì solo un nome DNS14: corto, stampabile, mai una virgola dentro, e l\u0026rsquo;unica cosa della VM che un cliente riconoscerà.\nCampo del tipo 1 Preso da Per una VM da 4 core e 16 GiB chiamata web-01, con tag production;web Serial Number name web-01 SKU Number cores × sockets, e memory ec-4c16g Family la prima voce in tags production UUID l\u0026rsquo;UUID di smbios1 che ha già invariato Manufacturer, Product le tue stringhe fisse Example Cloud Ltd, EC Compute Instance Due cose restano fuori. Il nodo cambia a ogni migrazione, e vmgenid è fatto apposta per cambiare: tutto il suo lavoro è dire al guest che è stato ripristinato da uno snapshot o creato da un template15. Nessuno dei due è un\u0026rsquo;identità.\n#!/bin/bash # /usr/local/sbin/ec-smbios VMID: rebuild smbios1 from the VM\u0026#39;s own config. set -euo pipefail id=$1 cfg=$(qm config \u0026#34;$id\u0026#34; --current) get() { sed -n \u0026#34;s/^$1: //p\u0026#34; \u0026lt;\u0026lt;\u0026lt;\u0026#34;$cfg\u0026#34;; } b() { printf %s \u0026#34;$1\u0026#34; | base64 -w0; } name=$(get name) [ -n \u0026#34;$name\u0026#34; ] || { echo \u0026#34;VM $id has no name to use as a serial\u0026#34; \u0026gt;\u0026amp;2; exit 1; } cores=$(get cores); sockets=$(get sockets); vcpu=$(( ${cores:-1} * ${sockets:-1} )) mem=$(get memory); mem=${mem#current=}; mem=${mem%%,*}; mem=${mem:-512} (( mem % 1024 )) \u0026amp;\u0026amp; size=\u0026#34;${mem}m\u0026#34; || size=\u0026#34;$(( mem / 1024 ))g\u0026#34; tag=$(get tags); tag=${tag%%;*} uuid=$(get smbios1 | grep -o \u0026#39;uuid=[0-9a-fA-F-]*\u0026#39; | cut -d= -f2 || true) uuid=${uuid:-$(cat /proc/sys/kernel/random/uuid)} s=\u0026#34;uuid=$uuid,base64=1,manufacturer=$(b \u0026#39;Example Cloud Ltd\u0026#39;),product=$(b \u0026#39;EC Compute Instance\u0026#39;)\u0026#34; s+=\u0026#34;,serial=$(b \u0026#34;$name\u0026#34;),sku=$(b \u0026#34;ec-${vcpu}c${size}\u0026#34;)\u0026#34; [ -n \u0026#34;$tag\u0026#34; ] \u0026amp;\u0026amp; s+=\u0026#34;,family=$(b \u0026#34;$tag\u0026#34;)\u0026#34; qm set \u0026#34;$id\u0026#34; --smbios1 \u0026#34;$s\u0026#34; I default sono quelli di qemu-server stesso, un core, un socket e 512 MiB16, quindi anche una config che li omette ottiene uno SKU veritiero. Eseguito sulla config della tabella, con qm sostituito da uno script che la serviva, la riga che ha scritto è arrivata a QEMU decodificata come la decodifica qemu-server, e il dmidecode del guest ha restituito web-01, ec-4c16g, production e l\u0026rsquo;UUID che aveva già. Una VM senza nome viene rifiutata invece di ricevere un numero di serie vuoto.\nLa casa ovvia per questo è un hookscript. È quella sbagliata. qemu-server esegue l\u0026rsquo;hook pre-start dentro il lock della config che ha preso per avviare la VM, e costruisce la riga di comando di QEMU dalla config che aveva caricato prima che l\u0026rsquo;hook girasse17. Un hook che riscrive il numero di serie cambia il prossimo avvio, non questo.\nQuindi lancialo dal tuo provisioning, nei quattro momenti in cui i suoi dati di partenza cambiano: creazione, clone, rinomina e ridimensionamento. Il clone è quello che morde. Un clone mantiene ogni campo di smbios1 tranne l\u0026rsquo;UUID9, quindi se lo salti ogni VM costruita da web-template dichiarerà come numero di serie il nome del template.\nIl logo di avvio vive in due posti diversi Quale logo mostri un guest dipende dal suo firmware. I due firmware che Proxmox distribuisce lo prendono da posti completamente diversi:\nSeaBIOS (bios: seabios, il default) OVMF (bios: ovmf, UEFI) Da dove viene il logo un JPEG che QEMU passa all\u0026rsquo;avvio una bitmap compilata dentro il firmware Il file di Proxmox /usr/share/qemu-server/bootsplash.jpg, 640×480 Logo.bmp, 400×120, 8 bit, compilato in OVMF_CODE_4M*.fd Pacchetto proprietario qemu-server pve-edk2-firmware-ovmf Cambiarlo per singola VM args: -boot splash=… args che punta la VM a un altro firmware Cambiarlo senza ricompilare nulla sì no Arriva al sistema operativo del guest tramite BGRT no sì SeaBIOS: un JPEG sulla riga di comando qemu-server mette la stessa opzione -boot su ogni VM che avvia, menu=on,strict=on,reboot-timeout=1000,splash=/usr/share/qemu-server/bootsplash.jpg18. La documentazione di QEMU dice che l\u0026rsquo;immagine viene mostrata «when option splash=sp_name is given and menu=on, If firmware/BIOS supports them. Currently Seabios for X86 system support it»10. OVMF non ne prende nulla tranne splash-time, che usa come timeout del menu di avvio, e in OvmfPkg non c\u0026rsquo;è alcun riferimento al file di splash19.\nSostituirlo è una riga nella config della VM:\nargs: -boot splash=/etc/pve/branding/splash.jpg Un secondo -boot non fa a pugni con il primo. QEMU lo fonde nello stesso modo in cui fonde -smbios, vince il valore successivo, e con due file di splash indicati lo screenshot mostrava il secondo. /etc/pve è la casa giusta per il file, perché è il filesystem del cluster e ogni nodo vede lo stesso splash, e il suo limite di 1 MiB per file è lontanissimo da un JPEG 640×48020.\nL\u0026rsquo;immagine stessa deve rispettare tre condizioni, e sbagliarne una qualsiasi ti costa il logo o i suoi colori:\nCondizione Perché Che cosa succede altrimenti JPEG o BMP a 24 bit QEMU controlla il file prima che la VM parta splash file … format not recognized; must be JPEG or 24 bit BMP JPEG baseline, crominanza 4:2:0 il decoder di SeaBIOS non gestisce altro21 ERR_NOT_SEQUENTIAL_DCT o ERR_NOT_YCBCR_221111, e uno schermo vuoto 640×480, come quello di Proxmox SeaBIOS chiede al VGA BIOS una modalità esattamente della dimensione dell\u0026rsquo;immagine nessuna modalità corrispondente, nessuno splash La maggior parte degli strumenti per immagini scrive baseline 4:2:0 di default, quindi il modo tipico di perdere il logo è una delle opzioni «salva per il web» che attiva in silenzio la codifica progressiva, che appare identica in ogni visualizzatore che hai e lascia SeaBIOS a disegnare il nulla.\nLa trappola dei colori Questa è costata un pomeriggio. Lo stesso JPEG, reso da due build di SeaBIOS 1.17.0, esce in due colori diversi:\nSta in jpeg.c di SeaBIOS. Lo scrittore a 24 bit per pixel ha un ramo little-endian che mette il blu nel primo byte di ogni pixel, e lo scrittore a 32 bit per pixel, PIC_32, non ha quel ramo e lì scrive invece il rosso21. Su un framebuffer little-endian questo scambia rosso e blu. Il blu esce oro, e l\u0026rsquo;arancione uscirebbe blu.\nQuale scrittore gira dipende dalla modalità video che il VGA BIOS offre:\nFirmware Modalità VBE per 640×480 Bit per pixel Colori Il SeaBIOS 1.17.0 precompilato di QEMU upstream, come lo distribuisce pve-qemu-kvm 11.0.3-4 0x111 16 giusti, quantizzati a 65.536 La build seabios 1.17.0-10 di Fedora 44 0x142 32 rosso e blu scambiati I numeri delle modalità sono quelli della tabella di SeaBIOS stesso22, e la riga di Proxmox è stata verificata sui blob esatti del pacchetto: identici byte per byte al precompilato di QEMU rel-1.17.0-0-gb52ca86e094d. Quindi su Proxmox i tuoi colori sono giusti, ma sono solo 65.536, e una sfumatura delicata farà le bande. E se il tuo logo dovesse mai comparire con i colori sbagliati su qualche altro hypervisor, non è colpa del tuo JPEG.\nIl logo UEFI è compilato dentro il firmware I guest UEFI sono la metà più difficile, e su un Proxmox moderno sono la maggior parte dei guest.\nNon c\u0026rsquo;è alcuna opzione di splash da sovrascrivere. Il logo è una bitmap dentro l\u0026rsquo;immagine del firmware, e la build di Proxmox ce la mette con una riga in debian/rules:\ndebian/setup-build-stamp: cp -a debian/Logo.bmp MdeModulePkg/Logo/Logo.bmp Questo copia il loro Logo.bmp da 400×120 a 8 bit sopra quello di TianoCore prima che edk2 venga compilato23. Lo stesso file imposta il vendor del firmware come costante di compilazione, PcdFirmwareVendor=L\u0026quot;Proxmox distribution of EDK II\u0026quot;, ed è da lì che viene il vendor del tipo 0 nella prima tabella23.\nLogo nuovo, firmware nuovo. Il modo di ottenerne uno che si comporti esattamente come quello di Proxmox è compilarlo esattamente come fa Proxmox: il loro albero al tag che corrisponde al pacchetto che distribuiscono, le loro patch, i loro flag, e una sola bitmap cambiata. pve-edk2-firmware 4.2026.08-1 fissa edk2 a 2970e56, che è il tag upstream edk2-stable20260823.\ngit clone https://git.proxmox.com/git/pve-edk2-firmware.git cd pve-edk2-firmware git checkout f37039e52d228a7844a90aa2aaf1e161ebd04fcd # 4.2026.08-1 git submodule update --init --recursive cd edk2 QUILT_PATCHES=../debian/patches quilt push -a cp /path/to/your/Logo.bmp MdeModulePkg/Logo/Logo.bmp . ./edksetup.sh \u0026amp;\u0026amp; make -C BaseTools F=\u0026#34;-DNETWORK_HTTP_BOOT_ENABLE=TRUE -DNETWORK_IP6_ENABLE=TRUE -DNETWORK_TLS_ENABLE -DSECURE_BOOT_ENABLE=TRUE -DPVSCSI_ENABLE=TRUE -DTPM2_ENABLE=TRUE --pcd PcdUninstallMemAttrProtocol=TRUE -DFD_SIZE_4MB\u0026#34; P=(--pcd \u0026#34;PcdFirmwareVendor=LExample Cloud Ltd\\\\0\u0026#34; --pcd \u0026#34;PcdFirmwareVersionString=L4.2026.08-1+ec1\\\\0\u0026#34;) build -a IA32 -a X64 -t GCC -p OvmfPkg/OvmfPkgIa32X64.dsc $F \u0026#34;${P[@]}\u0026#34; -b RELEASE cp Build/Ovmf3264/RELEASE_GCC/FV/OVMF_CODE.fd OVMF_CODE_4M.fd rm -rf Build/Ovmf3264 build -a IA32 -a X64 -t GCC -p OvmfPkg/OvmfPkgIa32X64.dsc $F -DSMM_REQUIRE=TRUE \u0026#34;${P[@]}\u0026#34; -b RELEASE cp Build/Ovmf3264/RELEASE_GCC/FV/OVMF_CODE.fd OVMF_CODE_4M.secboot.fd I flag sono presi da debian/rules così com\u0026rsquo;è a quel commit. Attenzione alla stringa del vendor: il loro Makefile la scrive tra virgolette doppie, la shell di make le toglie, ed edk2 la riceve nuda, quindi qui è passata così, e metterla tra virgolette una seconda volta è un errore di compilazione. Tieni la bitmap a 400×120 e 8 bit come la loro e nient\u0026rsquo;altro si sposta sulla schermata di avvio.\nTi servono entrambe le immagini. qemu-server avvia qualunque VM Q35 con un disco EFI da 4M su OVMF_CODE_4M.secboot.fd, la build con SMM obbligatorio, e usa il semplice OVMF_CODE_4M.fd solo per i440fx24. Su un Proxmox attuale quella secboot è ciò che fa girare quasi ogni guest UEFI.\nCompilata così, senza cambiare nulla dell\u0026rsquo;albero di Proxmox tranne la bitmap e due stringhe, l\u0026rsquo;immagine SMM si avvia così:\nE con essa cambia anche la vista che il guest ha del proprio firmware, senza una sola opzione -smbios sulla riga di comando:\nLetto dentro il guest 4.2026.08-1 di Proxmox Ricompilato dallo stesso albero Vendor del firmware Proxmox distribution of EDK II Example Cloud Ltd Versione del firmware 4.2026.08-1 4.2026.08-1+ec1 «UEFI is supported» presente presente Tabelle ACPI BGRT, WSMT e le altre lo stesso insieme Questo rende il vendor di compilazione la risposta migliore per i guest UEFI. È il tipo 0 di OVMF stesso, quindi il bit UEFI resta al suo posto senza che nessuno debba ricordarsi uefi=on. La via di args per il tipo 0 è per i guest SeaBIOS, e per chi non ricompila affatto il firmware.\nDue modi di dare il nuovo firmware a una VM qemu-server ha cablato nel codice dove cercare il firmware: OVMF.pm contiene una tabella di percorsi sotto /usr/share/pve-edk2-firmware/, indicizzata per tipo di macchina e opzioni di Secure Boot, e non c\u0026rsquo;è alcuna opzione nella config della VM, nella GUI o nell\u0026rsquo;API che scelga un file diverso24. Restano due strade.\nCompilare OVMF con il tuo marchio e le due vie per darlo a una VM L'albero di Proxmox pve-edk2-firmware 4.2026.08-1 Il tuo marchio Logo.bmp + stringa vendor Stessa build, stessi flag OVMF_CODE_4M.fd + .secboot.fd A: divert su ogni nodo ogni VM UEFI lo riceve, config delle VM invariate B: per VM tramite args scegli VM per VM, file di Proxmox intatti apt full-upgrade arriva il firmware nuovo, il tuo resta vecchio hook Post-Invoke versioni diverse: ricompila prima del riavvio Una build, due vie d\u0026rsquo;ingresso. In entrambi i casi, il prossimo aggiornamento installa il nuovo firmware di Proxmox accanto al tuo e lascia il tuo com\u0026rsquo;era, ed è per questo che esiste l\u0026rsquo;hook in fondo. Strada A: fare la diversion su ogni nodo. Di\u0026rsquo; a dpkg che le due immagini di codice di Proxmox ora stanno da un\u0026rsquo;altra parte, e metti le tue dove stavano loro:\nD=/usr/share/pve-edk2-firmware for f in OVMF_CODE_4M.fd OVMF_CODE_4M.secboot.fd; do dpkg-divert --package example-branding --add --rename --divert \u0026#34;$D/$f.distrib\u0026#34; \u0026#34;$D/$f\u0026#34; install -m 0644 \u0026#34;/root/branding/$f\u0026#34; \u0026#34;$D/$f\u0026#34; done Dal suo prossimo avvio, ogni VM UEFI del nodo avvia il tuo firmware. Nessuna modifica alla config delle VM.\nStrada B: puntarci le VM che scegli. Tieni le immagini in una tua directory e sovrascrivi il firmware una VM alla volta. Da quando è passato a -blockdev, qemu-server collega l\u0026rsquo;immagine di codice come un nodo di blocco chiamato pflash0 e lo nomina in -machine24, e QEMU fonde un secondo -machine nello stesso modo in cui fonde -boot, quindi args può aggiungere un nodo suo e puntare pflash0 su quello:\nargs: -blockdev driver=raw,node-name=brandcode,read-only=on,file.driver=file,file.filename=/usr/local/share/example-branding/OVMF_CODE_4M.secboot.fd -machine pflash0=brandcode È stato provato facendo il giro lungo. Il firmware secboot di Proxmox è stato collegato come pflash0 esattamente come lo fa qemu-server, con SMM attivo, poi dopo è stata aggiunta quella riga args, e il guest ha avviato l\u0026rsquo;immagine con il marchio con sia il logo sia la stringa del vendor: è da lì che viene lo screenshot qui sopra.\nStrada A, diversion Strada B, args per VM Quali VM lo ricevono ogni VM UEFI del nodo solo le VM su cui lo imposti I file di Proxmox spostati in .distrib intatti Config della VM invariata una riga args, solo root Il tipo di macchina deve corrispondere gestito, entrambe le immagini sono deviate compito tuo: immagine secboot per Q35 Annullare dpkg-divert --remove --rename cancellare la riga Migrazione anche il nodo di destinazione deve avere la diversion il nodo di destinazione deve avere il file L\u0026rsquo;immagine di codice pesa circa 3,5 MB, contro un limite di 1 MiB per file in pmxcfs20. Per questo non può stare in /etc/pve, e qualunque strada prendi, va messa su ogni nodo. Migra una VM su un nodo che non ce l\u0026rsquo;ha e ottieni uno di due risultati, a seconda della strada: con la strada A tornano il firmware e il logo di Proxmox, con la strada B una VM che non parte affatto perché QEMU non riesce ad aprire un file che non c\u0026rsquo;è.\nL\u0026rsquo;aggiornamento che ti lascia indietro Una diversion è lo strumento giusto per un logo. Il firmware è un\u0026rsquo;altra cosa.\nUna diversion significa che gli aggiornamenti di Proxmox non raggiungono più il file. È esattamente ciò che hai chiesto. Ed è anche esattamente ciò che impedisce alle correzioni di sicurezza di edk2 di arrivare ai tuoi guest: il changelog di Proxmox per la 4.2026.08-1 si apre con «Besides many bug and security fixes» e prosegue elencando una correzione per CVE-2024-1374525, e una build con il tuo marchio della release precedente non ne ha nessuna. Niente te lo dice.\nQuesto è stato provato, non supposto. In un container Debian trixie con il repository di Proxmox è stato installato pve-edk2-firmware-ovmf 4.2025.05-3, entrambe le immagini di codice sono state deviate, e il pacchetto è stato aggiornato alla 4.2026.08-1:\nDopo l\u0026rsquo;aggiornamento Risultato dpkg-query -W pve-edk2-firmware-ovmf 4.2026.08-1 La nuova immagine di Proxmox installata come OVMF_CODE_4M.fd.distrib, hash cambiato L\u0026rsquo;immagine con il marchio invariata, ancora compilata dalla 4.2025.05-3 Qualcosa sulla console in proposito niente, fino all\u0026rsquo;hook qui sotto Quindi aggiungi un hook. apt esegue un elenco di comandi DPkg::Post-Invoke dopo ogni esecuzione di dpkg26. Registra da quale versione di Proxmox hai compilato, e confronta dopo ciascuna:\ncat \u0026gt; /usr/local/sbin/example-branding-check \u0026lt;\u0026lt;\u0026#39;EOF\u0026#39; #!/bin/sh built=$(cat /usr/local/share/example-branding/ovmf.built-from 2\u0026gt;/dev/null) now=$(dpkg-query -W -f \u0026#39;${Version}\u0026#39; pve-edk2-firmware-ovmf 2\u0026gt;/dev/null) [ \u0026#34;$built\u0026#34; = \u0026#34;$now\u0026#34; ] \u0026amp;\u0026amp; exit 0 echo \u0026#34;W: branded OVMF was built from pve-edk2-firmware-ovmf $built, Proxmox now ships $now.\u0026#34; \u0026gt;\u0026amp;2 echo \u0026#34;W: guests still boot the old firmware. Rebuild before the next VM restart.\u0026#34; \u0026gt;\u0026amp;2 exit 0 EOF chmod +x /usr/local/sbin/example-branding-check echo \u0026#39;DPkg::Post-Invoke { \u0026#34;/usr/local/sbin/example-branding-check\u0026#34;; };\u0026#39; \\ \u0026gt; /etc/apt/apt.conf.d/80example-branding Su quello stesso aggiornamento ha stampato:\nW: branded OVMF was built from pve-edk2-firmware-ovmf 4.2025.05-3, Proxmox now ships 4.2026.08-1. W: guests still boot the old firmware. Rebuild before the next VM restart. Esce con 0 di proposito. apt si interrompe se un comando Post-Invoke fallisce26, e un controllo sul branding non è un buon motivo per lasciare un nodo aggiornato a metà. Un avviso ben visibile basta.\nUn\u0026rsquo;ultima cosa. I riavvii. Un guest prende il nuovo firmware solo quando il suo processo QEMU riparte, quindi una ricompilazione richiede uno stop e uno start da Proxmox invece di un riavvio da dentro il guest, ed è esattamente così che anche gli aggiornamenti del firmware di Proxmox stesso arrivano a una VM in esecuzione. Solo che quelli non hanno bisogno che tu ti ricordi prima di ricompilare.\nOppure lascia stare il firmware di Proxmox Ogni via per il logo vista finora cambia il firmware, e la sezione precedente è il conto di quella scelta. Ce n\u0026rsquo;è una che non lo fa, e per questo post ne è stato costruito un prototipo.\nUn dispositivo PCI in QEMU può portare una option ROM, qualunque file indichi con romfile=27, e OVMF esegue il driver EFI che ci trova dentro. La build di Proxmox lo esegue che sia firmato o no: OVMF imposta PcdOptionRomImageVerificationPolicy a 0x00, esegui sempre28. OVMF disegna il proprio logo tardi, nella selezione del dispositivo di avvio29, e costruisce la BGRT solo a ReadyToBoot, l\u0026rsquo;istante prima di passare la mano a un boot loader. E il driver BGRT di edk2 accetta un\u0026rsquo;immagine sostitutiva tramite EDKII_BOOT_LOGO2_PROTOCOL, ricostruendo la tabella a ReadyToBoot ogni volta che l\u0026rsquo;immagine è cambiata30.\nNon serve altro. Il driver aspetta ReadyToBoot a TPL_NOTIFY, che gira prima del gestore TPL_CALLBACK del driver BGRT, pulisce lo schermo, disegna il suo logo e consegna la stessa immagine. Compilato, è un unico file da 8 KB, collegato con una riga:\nargs: -device pci-testdev,romfile=/etc/pve/branding/brandrom.rom Con 8 KB sta comodamente dentro il limite di 1 MiB di pmxcfs20, quindi a differenza di un\u0026rsquo;immagine firmware da 3,5 MB può vivere in /etc/pve e seguire la VM su ogni nodo.\nÈ stato provato contro il firmware di Proxmox così com\u0026rsquo;è, preso da pve-edk2-firmware-ovmf 4.2026.08-1: OVMF_CODE_4M.secboot.fd con le chiavi Microsoft già registrate in OVMF_VARS_4M.ms.fd, su Q35 con SMM, avviato tramite lo shim firmato di Fedora così che Secure Boot fosse attivo e applicato:\nLetto dal guest Senza la ROM Con la ROM Variabile SecureBoot 1 1 Sullo schermo il logo di Proxmox quello di Proxmox per circa 250 ms, poi il tuo Immagine BGRT, 400×120 in posizione (440, 340) quella di Proxmox, SHA-256 be5afe4b… quella della ROM, SHA-256 6c494576… File del firmware modificati nessuno nessuno L\u0026rsquo;ultima riga è il punto. Il firmware di Proxmox è intatto, quindi la loro prossima release di sicurezza arriva ai tuoi guest con il prossimo riavvio, e niente della sezione precedente si applica.\nNon è gratis:\nCosto Perché Il logo di Proxmox si vede per circa un quarto di secondo OVMF lo disegna prima che qualunque driver di option ROM prenda lo schermo; solo una ricompilazione lo evita Il guest vede un dispositivo PCI in più, senza driver la ROM deve viaggiare su un dispositivo, e pci-testdev è quello di QEMU che non fa niente Il tipo 0 dice ancora Proxmox la stringa del vendor è compilata dentro; impostala tramite args con uefi=on, come sopra Solo root è una riga args E la scoperta che ci sta sotto va detta chiaramente. Un driver non firmato è stato eseguito nel firmware su un guest con le chiavi Microsoft registrate e Secure Boot applicato, perché l\u0026rsquo;OVMF di Proxmox non controlla le option ROM. Qui questo è utile. Significa anche che su questo firmware Secure Boot controlla i boot loader, non quello che la config hardware della VM ci collega, e visto che solo root scrive args, la domanda diventa chi ha root sui tuoi nodi.\nÈ un prototipo. È girato su QEMU 10.2.2 con il firmware di Proxmox, non ancora su un nodo Proxmox, e ciò che segue è codice sorgente, non un prodotto:\ngithub.com/damo2929/RebrandPCIRom: il driver della option ROM, il convertitore del logo e la build in container.\nL\u0026rsquo;interfaccia web sono due pacchetti Il logo in alto a sinistra dell\u0026rsquo;interfaccia web non sta in pve-manager. Workspace.js chiede un componente proxmoxLogoSvg con il prefisso pwt, e quello vive in proxmox-widget-toolkit, che il Backup Server e il Mail Gateway condividono31. In pve-manager ci sono solo le icone della scheda:\nChe cosa File Pacchetto Logo dell\u0026rsquo;intestazione, disegnato a 200×35 /usr/share/javascript/proxmox-widget-toolkit/images/proxmox_logo.svg proxmox-widget-toolkit Icona della scheda del browser /usr/share/pve-manager/images/favicon.ico pve-manager Icona 128×128, usata anche come touch icon /usr/share/pve-manager/images/logo-128.png pve-manager Sono tutti e tre file normali, quindi questo è un lavoro per dpkg-divert, e qui il costo della sezione precedente non si applica affatto, perché un logo non ha correzioni di sicurezza da perdere e il guest di nessuno è meno sicuro per colpa di un nodo che serve ancora la favicon del mese scorso.\ndivert() { dpkg-divert --package example-branding --add --rename --divert \u0026#34;$1.distrib\u0026#34; \u0026#34;$1\u0026#34; install -m 0644 \u0026#34;$2\u0026#34; \u0026#34;$1\u0026#34; } divert /usr/share/javascript/proxmox-widget-toolkit/images/proxmox_logo.svg /root/branding/logo.svg divert /usr/share/pve-manager/images/favicon.ico /root/branding/favicon.ico divert /usr/share/pve-manager/images/logo-128.png /root/branding/logo-128.png Provato nello stesso container, su pacchetti veri:\nPasso Risultato Diversion su proxmox-widget-toolkit 5.2.9, installazione del proprio SVG l\u0026rsquo;SVG di Proxmox rinominato in proxmox_logo.svg.distrib Aggiornamento alla 5.2.10 il proprio SVG ancora al suo posto, la copia 5.2.10 di Proxmox in .distrib dpkg --verify proxmox-widget-toolkit nessuna lamentela, dpkg sa della diversion apt-get install --reinstall proxmox-widget-toolkit il proprio SVG ancora al suo posto dpkg-divert --remove --rename l\u0026rsquo;originale di Proxmox di nuovo lì, byte per byte Due cose restano di Proxmox. L\u0026rsquo;immagine dell\u0026rsquo;intestazione è disegnata in un riquadro fisso da 200×35, quindi disegna il tuo SVG in quella forma o verrà schiacciato. E il testo alt dice Proxmox e l\u0026rsquo;immagine porta a https://www.proxmox.com, entrambi scritti nel componente JavaScript invece che in un file che puoi deviare31. Cambiarli significa fare la patch di un bundle minificato che si rompe a ogni aggiornamento. Non ne vale la pena per un testo alternativo.\nChe cosa ti chiedono la licenza e il marchio di Proxmox Proxmox VE è distribuito sotto la AGPL versione 332, e la sezione 13 di quella licenza è la clausola di rete: «if you modify the Program, your modified version must prominently offer all users interacting with it remotely through a computer network … an opportunity to receive the Corresponding Source of your version»33. Cambiare tre immagini conta come modificare il Programma? Quella è una domanda per un avvocato. La risposta economica è mettere le tue immagini e lo script di diversion da qualche parte in pubblico e collegarli dalla pagina di login. Non costa niente e chiude la questione.\nSul marchio è più chiaro. Il media kit di Proxmox dice «Don\u0026rsquo;t alter the logo or incorporate the logo or symbol into your logo»34. Quindi sostituisci il loro del tutto con il tuo, mai una versione ricolorata o rimaneggiata del loro, e tieni Proxmox fuori dal nome del tuo prodotto.\nIl tuo nome sopra significa la tua manutenzione Mettere il marchio su una VM costa poco. Una manciata di stringhe SMBIOS, un JPEG, una bitmap e tre immagini in un\u0026rsquo;interfaccia web: un pomeriggio di lavoro, la maggior parte passato a scoprire dove stanno le cose.\nTenerlo è il lavoro vero. Ed è anche la parte che si salta.\nLe stringhe SMBIOS e lo splash si arrangiano da soli, perché vivono in una config che nessun pacchetto toccherà mai, e il logo dell\u0026rsquo;interfaccia web si arrangia da solo perché a dpkg è stato detto di lui. Il firmware no. Il giorno in cui metti il tuo logo in un\u0026rsquo;immagine firmware, ti prendi in carico un pezzo del processo di rilascio di qualcun altro, e Proxmox compila, prova e distribuisce nuovo firmware con dentro correzioni di sicurezza che i loro clienti ricevono con il prossimo aggiornamento, e i tuoi ricevono quando ti decidi a ricompilare.\nÈ uno scambio che va bene, se fatto sapendolo. Un\u0026rsquo;azienda di hosting i cui guest avviano un firmware indietro di due release perché il logo contava più del changelog non ha costruito un prodotto. Ha costruito un adesivo.\nSe il tuo nome è sulla schermata di avvio, il firmware dietro è tuo da tenere aggiornato, chiunque l\u0026rsquo;abbia scritto. Nessuno controllerà. È proprio per questo che va fatto.\nUEFI Forum, ACPI Specification 6.6, §5.2.23 Boot Graphics Resource Table — «The Boot Graphics Resource Table (BGRT) is an optional table that provides a mechanism to indicate that an image was drawn on the screen during boot». Copia d\u0026rsquo;archivio; la pagina viva restituisce 403 alle richieste automatiche.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Boot screen components — «This is the standard interface that Windows uses to access the logo.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora Project, Changes/FlickerFreeBoot — «a new plymouth theme which incorporates the firmware\u0026rsquo;s bootsplash image»; il plymouth.spec di Fedora rende bgrt il tema predefinito.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian, dpkg-divert(1), trixie — «File diversions are a way of forcing dpkg(1) not to install a file into its location, but to a diverted location.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDMTF, DSP0134 System Management BIOS Reference Specification 3.10.0 — tipo 1 System Information, tipo 2 scheda madre, tipo 3 «the system\u0026rsquo;s mechanical enclosure(s)», tipo 11 «free-form strings defined by the OEM».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE, qm.conf(5) — smbios1: «Specify SMBIOS type 1 fields»; args: «Arbitrary arguments passed to kvm … this option is for experts only.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, the smbios1 format and command-line builder — ogni campo tranne uuid ha lo schema [A-Za-z0-9+\\/]+={0,2}; i valori vengono decodificati quando base64 è impostato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-manager, www/manager6/Parser.js, printQemuSmbios1 — «smbios values can be arbitrary, so encode and mark config as such».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/API2/Qemu.pm, clone — «auto generate a new uuid», gli altri campi di smbios1 vengono mantenuti.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU, System Emulation, Invocation — i campi di -smbios per tipo; -acpitable «For file=, take whole ACPI table from the specified files, including all ACPI headers»; -boot «Currently Seabios for X86 system support it.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/SmbiosPlatformDxe/SmbiosPlatformDxe.c — OVMF aggiunge il proprio tipo 0 solo quando NeedSmbiosType0 è ancora impostato dopo aver percorso le tabelle di QEMU.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, custom args — gli args vengono divisi e accodati alla fine della riga di comando.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/API2/Qemu.pm, config permission checks — smbios1 è un\u0026rsquo;opzione di tipo hardware che richiede VM.Config.HWType; il caso di riserva «catches args, lock, etc.» e termina con «only root can set».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, the name option — format =\u0026gt; 'dns-name'.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, vmgenid — «notify the guest operating system when the virtual machine is executed with a different configuration (e.g. snapshot execution or creation from a template)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer/Memory.pm — memoria default =\u0026gt; 512; cores e sockets hanno default 1 in QemuServer.pm.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, vm_start — lock_config alla riga 5457, exec_hookscript($conf, $vmid, 'pre-start', 1) alla 5581, e config_to_command alla 5634 con lo stesso $conf, non ricaricato nel frattempo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, -boot — menu=on,strict=on,reboot-timeout=1000,splash=/usr/share/qemu-server/bootsplash.jpg.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/Library/QemuBootOrderLib/QemuBootOrderLib.c — OVMF legge etc/boot-menu-wait, il valore di splash-time, e nient\u0026rsquo;altro da -boot.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-cluster, src/pmxcfs/memdb.h — #define MEMDB_MAX_FILE_SIZE (1024 * 1024) // 1 MiB.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSeaBIOS, src/jpeg.c — PIC scrive prima il blu su little-endian, PIC_32 alla riga 946 scrive prima il rosso senza alcun ramo per l\u0026rsquo;endianness; ERR_NOT_SEQUENTIAL_DCT ed ERR_NOT_YCBCR_221111 sono gli unici formati rifiutati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSeaBIOS, vgasrc/svgamodes.c — la modalità 0x111 è 640×480 a 16 bit, 0x142 è 640×480 a 32.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-edk2-firmware, debian/rules at 4.2026.08-1 — cp -a debian/Logo.bmp MdeModulePkg/Logo/Logo.bmp, la stringa PcdFirmwareVendor e i flag di compilazione di OVMF.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer/OVMF.pm — la tabella del firmware cablata sotto /usr/share/pve-edk2-firmware/, la scelta SMM e il nodo di blocco pflash0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-edk2-firmware, debian/changelog — 4.2026.08-1: «Besides many bug and security fixes … fix CVE-2024-13745».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian, apt.conf(5), trixie — «Pre-Invoke, Post-Invoke: This is a list of shell commands to run before/after invoking dpkg(1) … should any fail APT will abort.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU v11.0.3, hw/pci/pci.c — DEFINE_PROP_STRING(\u0026quot;romfile\u0026quot;, PCIDevice, romfile), una proprietà che ha ogni dispositivo PCI.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/OvmfPkgIa32X64.dsc — gEfiSecurityPkgTokenSpaceGuid.PcdOptionRomImageVerificationPolicy|0x00, il file di piattaforma che Proxmox compila.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/Library/PlatformBootManagerLib/BdsPlatform.c — BootLogoEnableLogo (), chiamata da PlatformBootManagerAfterConsole.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, BootGraphicsResourceTableDxe.c — SetBootLogo2 alla riga 239 copia l\u0026rsquo;immagine; il gestore di ReadyToBoot alla 417 disinstalla e reinstalla la tabella «If BGRT data change happens».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-widget-toolkit, src/Logo.js — proxmoxLogoSvg, 200×35, alt: 'Proxmox', con link a proxmox.com; usato da pve-manager Workspace.js con prefix: 'pwt'.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki, FAQ — «Proxmox VE code is licensed under the GNU Affero General Public License, version 3.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGNU Affero General Public License v3, §13 Remote Network Interaction — citata per intero nel testo qui sopra.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox, Media kit — «Don\u0026rsquo;t alter the logo or incorporate the logo or symbol into your logo.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/proxmox/branding-a-proxmox-vm/","summary":"Una VM Proxmox di serie mostra il logo di Proxmox all\u0026rsquo;avvio, scrive Proxmox nella stringa del vendor del firmware e si chiama QEMU in ogni tabella SMBIOS. Qui si sostituisce tutto con il nome del tuo prodotto: SMBIOS tipi 0, 1, 2, 3 e 11 con numero di serie e SKU presi dal nome e dalla dimensione della VM, lo splash di SeaBIOS e la sua trappola dei colori, un OVMF con il tuo marchio compilato dall\u0026rsquo;albero di Proxmox stesso oppure un driver in una option ROM che sostituisce logo e BGRT con Secure Boot attivo senza toccare il firmware, e il logo dell\u0026rsquo;interfaccia web. Ogni modifica è messa dove un aggiornamento non può annullarla in silenzio, e quella che un aggiornamento può lasciare pericolosamente indietro, il firmware, ha un hook che lo dice.","title":"Mettere il proprio marchio su una VM Proxmox, e tenercelo dopo il prossimo aggiornamento"},{"content":"Tutto quello che c\u0026rsquo;è in questo articolo è stato eseguito su un NetBox 4.7.2 sulla mia scrivania, con un parco reale caricato dentro: un sito, un armadio, quattordici apparati, cablati, alimentati e indirizzati tra tre clienti. Ogni schermata è quell\u0026rsquo;istanza, e ogni messaggio di errore è uno che ho ricevuto davvero.\nVa nell\u0026rsquo;ordine in cui lo incontreresti. Cos\u0026rsquo;è la cosa, perché ne vorresti una, il fork di cui sentirai parlare entro una settimana di ricerche, come metterne in piedi uno, l\u0026rsquo;ordine in cui devi riempirlo, e poi cosa ne ricavi. Il lavoro di personalizzazione ed estensione sta alla fine, perché niente di quello ha senso finché non hai visto la forma di ciò che stai estendendo.\nCos\u0026rsquo;è NetBox NetBox è un database con un\u0026rsquo;opinione molto precisa su cosa compone una rete, e un\u0026rsquo;applicazione web sopra. È un\u0026rsquo;applicazione Django su PostgreSQL, è open source sotto Apache 2.0 da quando DigitalOcean l\u0026rsquo;ha pubblicata nel giugno 2016, e oggi il progetto è curato da NetBox Labs insieme a un gruppo di maintainer volontari.12\nSotto ci sono 149 modelli divisi in dieci applicazioni, raggiungibili tramite 146 endpoint REST e un endpoint GraphQL. Contati sull\u0026rsquo;istanza che ho costruito per questo, non letti da una pagina di funzionalità:\nApplicazione Modelli Applicazione Modelli dcim 56 virtualization 7 extras 23 tenancy 6 ipam 18 wireless 3 circuits 11 users 7 vpn 10 core 8 Cinquantasei sono DCIM, il livello fisico: siti, location, rack, device type, apparati, e ogni tipo di porta, alloggiamento e terminazione di cavo che un apparato può avere. Diciotto sono IPAM. Il resto copre circuiti, tunnel e policy IKE, macchine virtuali e cluster, link wireless, tenancy, e i meccanismi che rendono tutto estendibile.\nIl conteggio non è il punto. Lo sono i join, e il modo più rapido per vederlo è la schermata per cui NetBox è più conosciuto.\nParti dall\u0026rsquo;armadio, perché è la schermata che vende la cosa.\nQuell\u0026rsquo;elevazione è disegnata dai dati, non caricata. Ogni apparato è lì perché qualcosa dice che occupa quelle unità rack, rivolto in quel verso, e i colori vengono dal ruolo che gli hai dato. L\u0026rsquo;occupazione dello spazio indica 28,6% perché l\u0026rsquo;ha calcolata NetBox. Nessuno mantiene quel numero.\nNe seguono due cose che valgono più dell\u0026rsquo;immagine.\nPuoi chiedere quali unità sono libere, e avere una risposta su cui agire. Puoi anche prenotare unità prima che ci sia installato qualcosa, che è la differenza tra vendere lo spazio che hai e vendere lo spazio che pensi di avere.\nCosa si rifiuta deliberatamente di fare Un prodotto che sa cosa non è risulta più raro di uno che fa tutto male, e la documentazione di NetBox è schietta in merito. Non fornisce monitoraggio di rete, servizio DNS, RADIUS, gestione della configurazione o gestione delle strutture.1\nPiù importante ancora, contiene lo stato desiderato della tua rete, non il suo stato operativo, e la documentazione dice che l\u0026rsquo;importazione automatica dello stato reale della rete è «strongly discouraged», perché ogni record dovrebbe prima essere verificato da una persona.1\nÈ la decisione su cui poggia tutto il resto, ed è quella con cui la gente discute. L\u0026rsquo;argomento è: una fonte di verità dovrebbe pure essere la verità, quindi scopri la rete e caricala. La risposta è che una rete scoperta ti dice cosa c\u0026rsquo;è, e quello che c\u0026rsquo;è include ogni errore che chiunque abbia mai fatto. Una porta di switch lasciata nella VLAN sbagliata nel 2021 è un fatto. Non è un\u0026rsquo;intenzione.\nNetBox contiene l\u0026rsquo;intenzione. Il tuo monitoraggio contiene la realtà. Il numero interessante è la differenza tra le due, e non puoi calcolare una differenza da un solo dato.\nL\u0026rsquo;altro principio è dichiarato con la stessa chiarezza: potendo scegliere tra una soluzione relativamente semplice all\u0026rsquo;ottanta per cento e una completa molto più complessa, prendi quella semplice.1 Lo sentirai la prima volta che vorrai modellare qualcosa che non modella, e verso la fine c\u0026rsquo;è un\u0026rsquo;intera serie di sezioni su cosa fare quando ci sbatti contro.\nNetBox fa NetBox non fa Registra cosa dovrebbe esserci Interroga cosa c\u0026rsquo;è Contiene la VLAN prevista per una porta Ti dice che la porta è giù Dice a quale cliente appartiene un prefisso Glielo fattura Genera la configurazione di un apparato da un template La spinge sull\u0026rsquo;apparato Traccia il circuito, il fornitore e l\u0026rsquo;impegno contrattuale Monitora il circuito Dice in quale rack sta un apparato, e in quale U Apre l\u0026rsquo;armadio Leggi quella colonna di destra come un elenco di strumenti che ti servono ancora. Leggila male e proverai a far diventare NetBox tutti quanti, ed è così che una fonte di verità diventa un altro sistema di cui nessuno si fida.\nPerché te ne serve uno Chiedi a un managed service provider dove sta il registro autorevole della rete di un cliente, e avrai una risposta. Chiedilo separatamente a due dei suoi tecnici e ne avrai due.\nUno indicherà un foglio di calcolo. Uno indicherà un diagramma salvato l\u0026rsquo;ultima volta da qualcuno che se n\u0026rsquo;è andato nel 2023. Qualcun altro dirà che la documentazione è la configurazione del firewall, il che almeno è onesto, perché una configurazione descrive davvero cosa sta facendo un apparato. Solo che non descrive perché, né chi l\u0026rsquo;ha chiesto, né quale dei quattro clienti dietro quell\u0026rsquo;apparato paga per quella regola.\nIl guasto non è mai il giorno in cui ti accorgi che il registro è sbagliato. È il giorno in cui a qualcuno serve.\nIl momento Cosa devi produrre Quanto costa quando non ci riesci Una trattativa di rinnovo Un conto dettagliato di cosa compra il canone mensile Il preventivo del concorrente è dettagliato, perché lui è andato a contare Un tecnico dà le dimissioni Tutto quello che sapeva, messo per iscritto Sei mesi a scoprirlo, un ticket alla volta Un cliente se ne va Una descrizione del suo parco Tre settimane per metterla insieme, e una referenza che darà onestamente Un auditor fa una domanda sul perimetro Quali sistemi contengono dati personali, e dove si trovano fisicamente A un regolatore viene detto qualcosa che poi si rivela falso Una migrazione va quotata Un conteggio di cosa c\u0026rsquo;è davvero Fai un\u0026rsquo;offerta su una stima e ti mangi la differenza Niente di tutto questo è esotico. È un martedì qualunque.\nQuello che ne ricavi non è documentazione. La documentazione è una cosa che scrivi e poi smetti di mantenere. Quello che ricavi è un database che si rifiuta di contenere una contraddizione, e che risponde a domande che nessuno aveva pensato di fargli in anticipo. Più avanti in questo articolo c\u0026rsquo;è un armadio che risulta pieno al 28,6 per cento di apparati e al 90,7 per cento di potenza. Nessuno era partito per scoprirlo. È saltato fuori inserendo una volta un wattaggio su un device type.\nInsieme arriva l\u0026rsquo;avvertenza onesta, e l\u0026rsquo;ultima sezione parla di quello. Un registro vale solo quanto ti costa tenerlo giusto. Ma l\u0026rsquo;alternativa è un\u0026rsquo;azienda che non sa descrivere sé stessa, e il primo a scoprirlo di solito è un cliente.\nL\u0026rsquo;altro: Nautobot Ci sbatterai contro entro circa una settimana di ricerche, quindi vale la pena sapere cosa è successo.\nNel 2021 Network to Code ha fatto un fork di NetBox e ha chiamato il risultato Nautobot. Non un fork morbido né una distribuzione: un hard fork che diverge da cinque anni. Le sue stesse note di rilascio v1.0 lo descrivono come «a divergent fork of NetBox 2.10», il repository è stato creato il 19 febbraio 2021 e la v1.0.0 è uscita il 26 aprile 2021.3\nLe ragioni dichiarate stanno sul loro blog e vale la pena leggerle con le loro parole piuttosto che con le mie. Tre cose l\u0026rsquo;hanno spinto. Volevano vendere supporto enterprise: «We need to offer high-touch support models with Service Level Agreements (SLAs) we can guarantee. We need flexibility to offer Long-term Support (LTS) for customers who can\u0026rsquo;t upgrade at the pace of a fast moving open source project.» Volevano che la fonte di verità stesse al centro di una piattaforma di automazione invece di servire da documentazione. E «there became a growing divergence in our vision about what a Source of Truth for networking should look like and how to get there».4\nQuella prima ragione ha bisogno della sua data, perché ha smesso di essere vera. Nel febbraio 2021 non c\u0026rsquo;era nessuna azienda dietro NetBox che potesse venderti qualcosa. NetBox Labs è stata fondata solo nel 2023, nata da NS1 dopo che IBM l\u0026rsquo;aveva acquisita, e cofondata dal lead maintainer di NetBox in persona.5\nE non è una terza parte che ha costruito un\u0026rsquo;attività sul progetto di qualcun altro. NetBox Labs è il custode di NetBox: la documentazione del progetto dice «the open source project is stewarded by NetBox Labs and a team of volunteer maintainers».1 Vende NetBox Enterprise per le installazioni gestite in proprio, lo ospita per te come NetBox Cloud, e offre supporto 24/7.6\nQuindi «non puoi comprare supporto per NetBox» era una cosa giusta da dire quando Network to Code ha fatto il fork, e non lo è più adesso. Entrambi i progetti hanno dietro un\u0026rsquo;azienda commerciale che firmerà qualcosa, e nel caso di NetBox quell\u0026rsquo;azienda è proprio quella che cura il progetto.\nLa frase che quasi tutti si perdono è la successiva, ed è il motivo per cui questa non è una storia squallida: «the NetBox project team suggested that we should consider forking.»\nÈ più o meno il fork più civile che si possa avere. Due gruppi volevano cose diverse, l\u0026rsquo;hanno detto per molto tempo, e si sono separati invece di litigare su un\u0026rsquo;unica base di codice. Entrambe le metà sono ancora Apache 2.0. Nessuno ha preso niente che non avesse il diritto di prendere.\nA cosa serviva davvero il fork Le note di rilascio di Nautobot 1.0 elencano cosa aggiungeva rispetto a NetBox 2.10, e l\u0026rsquo;elenco spiega la discussione meglio di qualsiasi post sul blog:3\nCosa aggiunse Nautobot nel 2021 Dove sta NetBox oggi Supporto GraphQL NetBox ce l\u0026rsquo;ha Integrazione Git come fonte di dati NetBox ce l\u0026rsquo;ha, come synchronized data source Single sign-on NetBox ce l\u0026rsquo;ha Secret NetBox ce l\u0026rsquo;ha tramite un plugin Script e report riuniti nei Job NetBox sposta gli script in un plugin nella 4.7 Custom field su tutti i modelli NetBox ha un ampio supporto ai custom field API di plugin per la validazione dei dati NetBox ha le custom validation rule Stati personalizzabili, come oggetti del database Gli stati di NetBox sono ancora un choice set Python Relazioni tra modelli definite dall\u0026rsquo;utente NetBox non ha un equivalente Chiavi primarie UUID NetBox usa chiavi intere Miglioramenti all\u0026rsquo;API dei plugin Il framework dei plugin di NetBox è cresciuto molto da allora Quasi tutta la metà superiore è convergente. Diverse cose che Nautobot ha introdotto nel 2021 sono arrivate in NetBox dopo, che è quello che succede di solito quando due progetti risolvono gli stessi problemi in pubblico.\nLe ultime tre non sono convergenti, e sono architetturali, non cosmetiche. Ho controllato oggi entrambe le basi di codice invece di fidarmi delle note del 2021.\nLo Status di Nautobot è un modello del database, descritto nel suo stesso codice come «Model for database-backend enum choice objects», quindi uno stato è una riga che qualcuno può aggiungere dall\u0026rsquo;interfaccia. Gli stati di NetBox vengono da un choice set Python, ed è per questo che la sezione su FIELD_CHOICES più avanti ne aggiunge uno modificando configuration.py e riavviando. Nautobot ha i modelli Relationship e RelationshipAssociation, quindi puoi definire una relazione tra due tipi di oggetto esistenti senza scrivere codice. La risposta di NetBox a quel problema è un plugin, che ha più avanti una serie di sezioni tutta sua. E le chiavi primarie di Nautobot sono UUID, mentre quelle di NetBox sono interi.\nHanno anche fatto la cosa per cui avevano fatto il fork. Ad oggi Nautobot pubblica la 3.2.x e la 2.4.x lo stesso giorno, che è una vera linea di manutenzione a lungo termine che corre accanto alla corrente, ed era una delle tre ragioni dichiarate.\nQuale dei due Prima i numeri onesti. NetBox ha 21.625 stelle e 3.133 fork; Nautobot ne ha 1.617 e 422.7 Entrambi hanno ricevuto push negli ultimi due giorni, entrambi sono Apache 2.0, ed entrambi ora hanno dietro un\u0026rsquo;azienda commerciale che vende supporto e hosting.\nQuel divario non è un giudizio sulla qualità. Riflette cinque anni di vantaggio e il fatto che la maggior parte di chi cerca una fonte di verità trova prima NetBox. Ma decide la cosa che di solito conta più delle funzionalità, cioè quanti plugin, integrazioni, moduli Ansible, risposte sui forum e colleghi troverai per quello che scegli.\nQuindi: se vuoi un inventario e una fonte di verità che altri sistemi leggono, e vuoi l\u0026rsquo;ecosistema più grande e le assunzioni più facili, la risposta è NetBox, ed è di questo che parla il resto dell\u0026rsquo;articolo. Se la ragione per cui vuoi una fonte di verità è proprio guidarci l\u0026rsquo;automazione, o vuoi stati e relazioni definiti dal tuo team invece che da un file di configurazione e un riavvio, vai a guardare Nautobot per bene prima di decidere.\nNon lasciare che qualcuno ti venda l\u0026rsquo;uno o l\u0026rsquo;altro solo sul supporto. Ormai entrambi i lati ce l\u0026rsquo;hanno coperto, e le differenze che ci saranno ancora tra cinque anni sono quelle nella tabella sopra.\nQuello che non devi fare è sceglierne uno perché qualcuno ti ha detto che l\u0026rsquo;altro è morto. Non lo è nessuno dei due, ed entrambi hanno rilasciato versioni anche questa settimana.\nMetterne in piedi uno Due strade, e per questo le ho provate entrambe. Container se lo vuoi funzionante in venti minuti, pacchetti su un host se deve reggere carichi seri.\nLo stack di container La community mantiene netbox-docker, che è la risposta rapida:8\ngit clone -b release https://github.com/netbox-community/netbox-docker.git cd netbox-docker tee docker-compose.override.yml \u0026lt;\u0026lt;\u0026#39;EOF\u0026#39; services: netbox: ports: - 8000:8080 EOF docker compose pull docker compose up Questo ti dà l\u0026rsquo;applicazione, PostgreSQL, Redis e un worker in background, collegati tra loro. Ho costruito la stessa cosa a mano sotto podman per vedere i pezzi, e vale la pena conoscerli perché due di loro fregano la gente:\nContainer Cosa fa Se lo lasci fuori netbox L\u0026rsquo;applicazione Django dietro gunicorn non funziona niente postgres Il database, 15 o successivo non funziona niente redis / valkey Due database: uno per i task, uno per la cache non funziona niente netbox-worker rqworker, che svuota la coda dei task i webhook non partono mai, i job in background non girano mai, e niente ti avvisa netbox-housekeeping La pulizia periodica i record del change log non scadono mai È la quarta riga quella che conta. Senza worker sembra tutto in salute. Le event rule si accodano e restano lì.\nDue cose mi hanno morso al primo avvio e nessuna delle due sta in un messaggio di errore che cercheresti.\nLa prima migrazione ci mette molto. Non un minuto. Su questa macchina ce ne sono voluti diversi, perché NetBox 4.7 sostituisce django-mptt con ltree di PostgreSQL e ricostruisce ogni tabella gerarchica strada facendo. Il container resta lì ad applicare migrazioni. Lascialo stare.\nSenza API_TOKEN_PEPPERS non puoi creare un token API v2, e l\u0026rsquo;unico segnale è un avviso nel log:\nUserWarning: API_TOKEN_PEPPERS is not defined. v2 API tokens cannot be used. Impostane almeno uno, di almeno cinquanta caratteri, prima di andare a cercare perché l\u0026rsquo;API ti respinge.\nSu un host, dai pacchetti La strada documentata è testata su Ubuntu 24.04. L\u0026rsquo;ho seguita dall\u0026rsquo;inizio alla fine su un\u0026rsquo;installazione pulita, e il risultato è stato questo:\nComponente Cosa mi ha dato la 24.04 Cosa serve a NetBox 4.7 PostgreSQL 16.15 15 o successivo Redis 7.0.15 6.0 o successivo Python 3.12.3 3.12, 3.13 o 3.14 Django 6.1.1 arriva con NetBox NetBox v4.7.2 Quei minimi sono quelli di NetBox, e la 4.7 ha alzato sia la soglia di PostgreSQL sia quella di Redis.9\nL\u0026rsquo;intero lavoro sono cinque passi.\n# 1. the services sudo apt install -y postgresql redis-server sudo -u postgres psql -c \u0026#34;CREATE DATABASE netbox;\u0026#34; sudo -u postgres psql -c \u0026#34;CREATE USER netbox WITH PASSWORD \u0026#39;something-you-generated\u0026#39;;\u0026#34; sudo -u postgres psql -c \u0026#34;ALTER DATABASE netbox OWNER TO netbox;\u0026#34; sudo -u postgres psql -d netbox -c \u0026#34;GRANT CREATE ON SCHEMA public TO netbox;\u0026#34; # 2. the build dependencies sudo apt install -y python3 python3-pip python3-venv python3-dev build-essential libxml2-dev libxslt1-dev libffi-dev libpq-dev libssl-dev zlib1g-dev git # 3. the application, at a release tag rather than at main sudo mkdir -p /opt/netbox \u0026amp;\u0026amp; cd /opt/netbox sudo git clone https://github.com/netbox-community/netbox.git . sudo git checkout v4.7.2 sudo adduser --system --group netbox sudo chown -R netbox /opt/netbox/netbox/media/ /opt/netbox/netbox/scripts/ /opt/netbox/netbox/reports/ # 4. the configuration: five values, no more cd /opt/netbox/netbox/netbox/ sudo cp configuration_example.py configuration.py python3 /opt/netbox/netbox/generate_secret_key.py # run it twice sudo $EDITOR configuration.py # 5. let the upgrade script do the rest sudo /opt/netbox/upgrade.sh Quei cinque valori sono ALLOWED_HOSTS, DATABASES, REDIS, SECRET_KEY e API_TOKEN_PEPPERS. Genera gli ultimi due separatamente e non riusare l\u0026rsquo;uno per l\u0026rsquo;altro. Per questo, esegui il generatore di chiavi due volte e incolla i risultati su righe diverse.\nupgrade.sh crea il virtual environment, installa ogni dipendenza Python, esegue le migrazioni, compila la documentazione per l\u0026rsquo;uso offline e raccoglie i file statici. Quando finisce su una macchina nuova stampa un avviso che sembra allarmante e non lo è:\nWARNING: No existing virtual environment was detected. A new one has been created. Update your systemd service files to reflect the new Python and gunicorn executables. (If this is a new installation, this warning can be ignored.) Poi un superuser, e gira:\nsource /opt/netbox/venv/bin/activate cd /opt/netbox/netbox \u0026amp;\u0026amp; python3 manage.py createsuperuser Per qualsiasi cosa seria, metti gunicorn davanti invece di runserver. La configurazione e i file di unit sono già nel repository, ed è il dettaglio da sapere perché la gente se li scrive da sé:\nsudo cp /opt/netbox/contrib/gunicorn.py /opt/netbox/gunicorn.py sudo cp -v /opt/netbox/contrib/*.service /etc/systemd/system/ sudo systemctl daemon-reload sudo systemctl enable --now netbox netbox-rq netbox.service fa girare gunicorn su 127.0.0.1:8001, netbox-rq.service fa girare il worker, e nginx o Apache vanno davanti per terminare il TLS e servire /static. Due servizi, e il secondo è lo stesso worker di cui ha bisogno lo stack di container.\nL\u0026rsquo;ordine in cui devi riempirlo Un NetBox appena installato è un database vuoto con delle opinioni, e la prima ora con uno di solito si passa a scoprire quali sono. Vai ad aggiungere un apparato, e non te lo lascia fare.\nQuegli asterischi rossi sono tutta la lezione. NetBox non registra una cosa prima che esistano le cose a cui è appesa, e non lo fa per dispetto: un apparato senza tipo è una riga che non sa rispondere a nessuna delle domande per cui esiste un apparato.\nQuindi, invece di tirare a indovinare, ho chiesto al modello quali chiavi esterne sono davvero obbligatorie, e poi ho provato a violare ogni regola tramite l\u0026rsquo;API per vedere cosa torna indietro.\nPOST /api/dcim/device-types/ no manufacturer {\u0026#34;manufacturer\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/dcim/devices/ no device type {\u0026#34;device_type\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/dcim/interfaces/ no device {\u0026#34;device\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/ipam/aggregates/ no RIR {\u0026#34;rir\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/circuits/circuits/ no provider, no type {\u0026#34;provider\u0026#34;: [\u0026#34;This field is required.\u0026#34;], \u0026#34;type\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/virtualization/virtual-machines/ nothing at all {\u0026#34;__all__\u0026#34;: [\u0026#34;A virtual machine must be assigned to a site, cluster, or device.\u0026#34;]} Li ha rifiutati tutti, e ha detto esattamente cosa mancava. Ecco la stessa informazione come elenco di prerequisiti:\nPer creare Serve prima Facoltativo, ma lo vuoi prima Tenant niente un Tenant group Region, Site group niente un genitore dello stesso tipo, si annidano Site niente una Region, un Site group, un Tenant Location un Site una Location genitore, un Tenant Rack type un Manufacturer Rack un Site una Location, Rack group, Rack role, Rack type, Tenant Device type un Manufacturer Device role niente un Device role genitore, si annidano Device un Device role, un Device type, un Site un Rack e una posizione, una Platform, un Tenant Interface, e ogni altro componente un Device Cable due cose su cui terminare un Tenant Aggregate un RIR un Tenant VLAN niente un VLAN group, un Role, un Tenant Prefix niente un Site, una VLAN, un Role, una VRF, un Tenant IP address niente un\u0026rsquo;Interface a cui assegnarlo, un Tenant Circuit un Provider e un Circuit type un Tenant Circuit termination un Circuit un Site su cui atterrare Cluster un Cluster type un Cluster group, un Site, un Tenant Virtual machine un Site, un Cluster o un Device una Platform, un Tenant VM interface una Virtual machine È la seconda colonna quella che ti costa. Prefissi, indirizzi IP, VLAN e tenant non richiedono niente, quindi niente ti impedisce di crearli il primo giorno nell\u0026rsquo;ordine che preferisci. Se servano a qualcosa è un\u0026rsquo;altra questione, perché un indirizzo senza un\u0026rsquo;interfaccia dietro è una riga in un elenco, e un apparato senza tenant è un apparato che dovrai modificare di nuovo più avanti.\nL\u0026rsquo;ordine in cui lavorare davvero Ne esce una sequenza. Seguila dall\u0026rsquo;alto in basso e niente ti respingerà mai.\nPrima, le cose a cui è appeso tutto il resto. Nessuna è entusiasmante e tutte costano poco da sbagliare.\nTenant group, poi tenant. Falli prima di tutto il resto. Ventotto modelli accettano un tenant, tra cui Site, Location e Rack, quindi se i clienti non esistono ancora non puoi assegnarli strada facendo e finirai a fare modifiche di massa dopo. Region e site group. Entrambi facoltativi, entrambi si annidano in sé stessi, e sono indipendenti l\u0026rsquo;uno dall\u0026rsquo;altro. Le region sono per la geografia, i site group per la funzione, e puoi usarne uno, entrambi o nessuno. Site. La radice di quasi tutto. Un site non richiede niente, ed è per questo che è la prima cosa che puoi davvero creare. Location. Queste richiedono un site, e si annidano, quindi una sala che contiene file che contengono pod è un solo modello profondo tre livelli. Rack role e rack group. Entrambi facoltativi. I rack group sono piatti e stanno accanto alle location come secondo asse, comodo per file e pod. Manufacturer, poi rack type. Un rack type richiede un manufacturer. Salta i rack type se non stai modellando gli armadi in sé. Rack. Richiedono un site. Se gli dai anche una location, quella location deve appartenere a quel site, e NetBox lo controlla. Poi il catalogo hardware, non l\u0026rsquo;hardware. Prima di poter aggiungere un singolo apparato ti servono manufacturer, device type, device role e, in pratica, platform.\nManufacturer. Potresti averne già alcuni dal passo 6, perché servono anche ai rack type. E anche ai module type. Device type, ciascuno con il suo manufacturer. Device role, che si annidano, e platform. Questo è il passo che la gente salta, ed è il passo che decide quanta digitazione richiederà il resto del lavoro. Un device type porta con sé le proprie interfacce, porte e alloggiamenti come template, quindi ogni apparato che crei da lì arriva con i componenti giusti già montati. Imposta bene il tipo una volta e metterne quaranta nei rack significa scrivere quaranta nomi.\nPlatform è l\u0026rsquo;intruso in quell\u0026rsquo;elenco, perché un apparato non ne richiede strettamente una. Fallo adesso lo stesso. È quello che porterà il config template e il driver NAPALM più avanti, e tornare indietro a impostarlo su un intero parco è la stessa serata che avresti passato sui tenant.\nPoi gli apparati veri e propri.\nDevice. Ruolo, tipo e site sono tutti obbligatori. Rack e posizione sono facoltativi, e se li indichi devono essere coerenti con il site. Componenti, se il device type non li ha già forniti. Cavi, tra i componenti. Poi l\u0026rsquo;indirizzamento, perché un indirizzo vuole un\u0026rsquo;interfaccia su cui vivere e l\u0026rsquo;interfaccia esiste solo dopo il passo 12.\nRIR, poi aggregate. Role di prefissi e VLAN, VRF, VLAN group e poi VLAN. Prefissi, poi i singoli indirizzi IP. Poi il livello commerciale.\nProvider, provider account e circuit type. Circuiti, poi terminali sui site. E il parco virtuale, che rispecchia quello fisico.\nCluster type e cluster group, poi cluster. Macchine virtuali, che richiedono un site, un cluster o un apparato, poi le loro interfacce. I passi da 1 a 10 sono un pomeriggio e sembrano lavoro d\u0026rsquo;ufficio. Non c\u0026rsquo;è niente di affascinante in nessuno di essi. Sono anche il pomeriggio che decide se il passo 11 richiede una mattina o due settimane.\nLe regole che mordono dopo I campi obbligatori sono la metà facile, perché falliscono subito e ti dicono perché. Quelle che fregano la gente sono le regole di coerenza, che scattano solo quando hai abbastanza dati per contraddirti:\ndevice at Leeds, put in a Manchester rack {\u0026#34;rack\u0026#34;: [\u0026#34;Rack MCR1-A07 (A07) does not belong to site Leeds Edge.\u0026#34;]} device at Leeds, in a Manchester location {\u0026#34;location\u0026#34;: [\u0026#34;Location Hall 2 does not belong to site Leeds Edge.\u0026#34;]} rack at Leeds, in a Manchester location {\u0026#34;__all__\u0026#34;: [\u0026#34;Assigned location must belong to parent site (Leeds Edge).\u0026#34;]} a second device in a unit that is already taken {\u0026#34;position\u0026#34;: [\u0026#34;U39.0 is already occupied or does not have sufficient space to accommodate this device type: MX204 (1.0U)\u0026#34;]} Quell\u0026rsquo;ultima è quella che indicherei se qualcuno mi chiedesse perché darsi pena con tutto questo. NetBox sa che l\u0026rsquo;apparato è 1U, sa cosa c\u0026rsquo;è nell\u0026rsquo;armadio, e non ti lascia registrare due cose nello stesso spazio. Il tuo foglio di calcolo te lo lascerà fare per tutto il pomeriggio senza dire una parola, e lo scoprirai quando qualcuno sarà in sala con una scatola in mano.\nNessuna di queste è configurabile e nessuna dovrebbe esserlo. Sono la differenza tra un registro e un desiderio.\nUsarlo: cosa ti dà ogni schermata Con il parco caricato, ecco cosa ne ricavi davvero. Tutto quello che segue è la stessa istanza: un armadio, quattordici apparati, cablati e indirizzati tra tre clienti.\nUn apparato sono i suoi componenti Entra in uno di quegli hypervisor e la scheda interessante non è il riepilogo, sono le interfacce.\nLeggi una riga da sinistra a destra. L\u0026rsquo;interfaccia, la sua velocità, cosa ci hai scritto, l\u0026rsquo;indirizzo che porta, l\u0026rsquo;etichetta sul cavo, e la porta all\u0026rsquo;altro capo. È una sola query, ed è la risposta alla domanda che tutti fanno davvero, cioè «a cosa è collegato questo».\nNota dove sta l\u0026rsquo;indirizzo. Sta su eno1, non sul server. Sembra pignoleria fino al giorno in cui hai un apparato con un\u0026rsquo;interfaccia di gestione, due interfacce dati e una loopback, e qualcuno chiede quale indirizzo risponde per lui. Un modello che appende gli indirizzi agli apparati non sa dirtelo. Questo sì, e sa anche gestire il caso del tutto normale di quattro indirizzi su un\u0026rsquo;interfaccia.\nSegui il cavo I cavi terminano sui componenti, non sugli apparati. Un\u0026rsquo;interfaccia da un lato, un\u0026rsquo;interfaccia dall\u0026rsquo;altro, oppure una front port, una rear port, una power outlet, una circuit termination. È il dettaglio su cui poggia l\u0026rsquo;intera funzione, ed è il motivo per cui l\u0026rsquo;elenco delle interfacce sopra poteva stampare l\u0026rsquo;altro capo in una sua colonna senza che glielo dicessi.\nModella un cavo da apparato ad apparato e hai fatto un disegno. Terminalo sulle porte e NetBox può percorrerlo.\nUn solo salto qui, perché è un cavo direct attach. Metti dei patch panel in mezzo e li percorre, pannello per pannello, e ti dice cosa c\u0026rsquo;è all\u0026rsquo;altro capo di una tratta che attraversa tre armadi. È il lavoro che altrimenti richiede una torcia e qualcuno che tiene l\u0026rsquo;altro capo di un generatore di tono.\nLa traccia stampa anche la posizione completa di ogni estremità. Site, sala, armadio, lato, unità rack. Se ti è mai capitato di stare al telefono cercando di dire a un tecnico remote hands quale apparato guardare, quella riga è tutto il valore.\nGli indirizzi, come albero e non come scheda L\u0026rsquo;IPAM è la metà per cui la gente arriva.\nIl rientro è calcolato dagli indirizzi stessi. Non dici a NetBox che 10.20.20.0/24 sta dentro 10.20.0.0/16, lo capisce da solo, e continuerà a capirlo quando l\u0026rsquo;anno prossimo qualcuno aggiungerà un /26 lì in mezzo.\nOgni riga porta le cose per cui filtri davvero: la VLAN a cui corrisponde, il ruolo, e il cliente a cui appartiene. Anche l\u0026rsquo;utilizzo è calcolato.\nAprine uno e vedi gli indirizzi che contiene, e i buchi.\nQuelle righe verdi sono lo spazio libero, mostrato in linea con lo spazio usato. C\u0026rsquo;è una chiamata API che ti consegna il prossimo indirizzo libero di un prefisso, ed è l\u0026rsquo;unico pezzo di automazione IPAM che si ripaga subito, perché è la cosa che altrimenti la gente fa strizzando gli occhi davanti a un foglio di calcolo e sperando.\nUn\u0026rsquo;interfaccia accetta tutti gli indirizzi che vuoi, di entrambe le famiglie, e ne nomini uno per famiglia come primario dell\u0026rsquo;apparato.\nDue IPv4 e due IPv6 su una porta, che è un martedì qualunque e una cosa che un modello centrato sull\u0026rsquo;apparato non sa esprimere affatto.\nInserisci gli indirizzi con la maschera della rete su cui stanno, non come /32. NetBox accetterà 10.20.20.11/32 e lo archivierà sotto il prefisso giusto, perché il contenimento si calcola dall\u0026rsquo;indirizzo host. Quello che non farà è correggerti dopo: la maschera viene salvata esattamente come l\u0026rsquo;hai scritta e restituita a chiunque la legga, quindi un /32 su un indirizzo di LAN genera un /32 nella configurazione dell\u0026rsquo;apparato. Il posto dove morde è tre mesi dopo in un config template, non oggi nel modulo.\nUn\u0026rsquo;installazione, tre clienti La maggior parte degli oggetti in NetBox può essere assegnata a un tenant. Un\u0026rsquo;azienda lo usa per le business unit. Se vendi servizi gestiti, ne crei uno per cliente.\nQuel pannello a destra è la risposta a «cosa ha questo cliente», e si è composto da solo. Nessun report, nessun foglio di calcolo, nessuna domanda al tecnico che l\u0026rsquo;ha costruito.\nVale la pena fare attenzione a cosa significa tenancy, perché sbagliarla il primo giorno è un anno di lavoro per disfarla dopo. Un tenant significa che l\u0026rsquo;oggetto è dedicato a quel cliente. Un router che serve solo lui prende il suo tenant. Un firewall che ne serve quattro non appartiene a nessuno di loro, quindi non ne prende nessuno, e la relazione va da un\u0026rsquo;altra parte. Ne parliamo più avanti, perché è il punto in cui quasi tutti scoprono di dover aggiungere qualcosa di proprio.\nMetti i numeri sul device type Questo è il passo che separa un inventario da qualcosa che risponde alle domande, e costa una decina di minuti per device type.\nUn device type può portare il suo peso e, tramite i template delle sue power port, il suo assorbimento. Mettili sul tipo una volta e ogni apparato che creerai da lì li eredita. Lasciali fuori e NetBox ti dirà tranquillamente che un armadio è pieno al 28,6% e nient\u0026rsquo;altro.\nQui ho messo il peso su tutti e cinque i tipi, ho dato a ciascuno due template di power port con un assorbimento massimo e uno allocato, ho dato al tipo della PDU un ingresso e dodici uscite, poi ho creato un power panel e due feed verso l\u0026rsquo;armadio e ho cablato tutto: il PSU1 di ogni apparato alla PDU A, ogni PSU2 alla PDU B, e l\u0026rsquo;ingresso di ogni PDU al suo feed.\nPoi la pagina del rack cambia completamente.\nOccupazione dello spazio 28,6%. Utilizzo della potenza 90,7%.\nQuell\u0026rsquo;armadio è pieno per un terzo di apparati e quasi senza potenza, ed è un fatto del tuo parco che nessun foglio di calcolo ti offrirà mai spontaneamente. È anche il fatto che decide se il prossimo ordine finisce in quel rack o da un\u0026rsquo;altra parte, ed è saltato fuori da dati inseriti una volta sola, sui tipi.\nDue cose che lo lasciano a zero All\u0026rsquo;inizio ho ottenuto 0,0%, due volte, e vale la pena conoscere entrambe le cause perché nessuna delle due produce un errore.\nLe uscite devono fare riferimento all\u0026rsquo;ingresso. Una power outlet su una PDU ha un campo power_port che punta alla porta a monte sullo stesso apparato. Lascialo vuoto e la catena è spezzata: NetBox non ha modo di sapere che quelle dodici uscite sono alimentate da quell\u0026rsquo;ingresso, quindi non somma niente.\nLascia vuoti i campi di assorbimento dell\u0026rsquo;ingresso. Questo è quello controintuitivo. NetBox calcola l\u0026rsquo;assorbimento di una power port da ciò che vi è collegato solo se entrambi i suoi campi di assorbimento sono vuoti:\nif self.allocated_draw is None and self.maximum_draw is None: ...aggregate the downstream power ports... # otherwise return {\u0026#39;allocated\u0026#39;: self.allocated_draw or 0, ...} Avevo gentilmente impostato maximum_draw: 7400 sull\u0026rsquo;ingresso della PDU, perché è il valore nominale della PDU. NetBox quindi mi ha creduto, ha preso allocated_draw come non impostato, e ha riportato zero. Svuotali entrambi e lo calcola da solo:\nmcr1-pdu-a INPUT -\u0026gt; allocated 5340 VA, maximum 8480 VA, across 12 outlets mcr1-pdu-b INPUT -\u0026gt; allocated 5340 VA, maximum 8480 VA, across 12 outlets feed MCR1-A07-A: available 5888 VA (230 V x 32 A x 80% max utilisation) RACK power utilisation: 90.7 % RACK weight: 166.6 kg of 900 kg Quindi la regola è: metti numeri veri sulle foglie, e lascia vuote le porte intermedie così NetBox può sommarle. Un valore definito amministrativamente vince sempre su quello calcolato, il che è il comportamento corretto ed esattamente la cosa sbagliata da fare su una PDU.\nIl raffreddamento, che è nuovo La versione 4.7 ha aggiunto il raffreddamento al DCIM, ed è arrivato con la parte che sta diventando costosa. Un rack porta una capacità di raffreddamento ad aria, ibrida o a liquido e una potenza in kilowatt; un device type porta un metodo di raffreddamento. Sopra ci sono le cooling source per chiller e unità CRAC, i cooling feed che rappresentano un circuito verso un rack, e componenti di intake e outflow sugli apparati stessi per cold plate e collettori.\nL\u0026rsquo;armadio sopra indica Hybrid, 15,00 kW, perché l\u0026rsquo;ho detto io al rack. Se quest\u0026rsquo;anno ricevi apparati raffreddati a liquido, questo è un modello per la cosa che oggi tieni in un foglio di calcolo.\nUn\u0026rsquo;installazione, molti clienti La tenancy è il motivo per cui un provider può far girare un solo NetBox invece di uno per cliente, e vale la pena capire cosa fa e, soprattutto, cosa non fa.\nVentotto modelli di NetBox hanno un campo tenant. Site, location, rack e prenotazioni di rack. Apparati, cavi e virtual device context. Prefissi, indirizzi IP, range, aggregate, VLAN, VLAN group, VRF, route target, ASN. Circuiti e gruppi di circuiti. Cluster e macchine virtuali. Tunnel, L2VPN, LAN e link wireless. Power feed e cooling feed.\nSono tutti i sostantivi fatturabili. Impostalo in modo coerente e «cosa ha questo cliente» smette di essere un\u0026rsquo;indagine.\nMa un tenant è un\u0026rsquo;etichetta, non una serratura. Dice che l\u0026rsquo;oggetto è dedicato a quel cliente. Non impedisce a chiunque possa fare login di leggere tutto, il che va bene dentro una sola azienda e non serve a niente nel momento in cui un cliente ha un account.\nNe seguono due cose, e la seconda è quella che la gente sbaglia.\nUn tenant significa dedicato. Un router che serve un solo cliente prende il suo tenant. Un firewall che ne serve quattro non appartiene a nessuno di loro, quindi non prende niente, e registri invece la relazione sulla cosa che hai effettivamente venduto. Forzare un tenant su apparati condivisi rende silenziosamente sbagliato ogni report costruito sulla tenancy.\nE l\u0026rsquo;accesso è un meccanismo del tutto separato.\nL\u0026rsquo;isolamento sta nei permessi I permessi sugli oggetti di NetBox accettano un vincolo JSON, e il vincolo è un filtro dell\u0026rsquo;ORM di Django. Restringe il queryset prima che venga costruito qualsiasi cosa, quindi ogni vista, esportazione, chiamata API e ricerca ne viene ristretta insieme.\nTre campi fanno il lavoro. I tipi di oggetto a cui si applica, le azioni che concede, e quel vincolo in fondo. Tutto il resto è contabilità.\nEcco l\u0026rsquo;elenco degli apparati visto da un amministratore.\nEd ecco lo stesso URL, la stessa installazione, con l\u0026rsquo;accesso del cliente.\nDue righe invece di quattordici, e guarda il menu a sinistra. Si è ridotto alle quattro cose che quell\u0026rsquo;account può toccare. Nessuno l\u0026rsquo;ha configurato. La navigazione è costruita dagli stessi permessi, quindi un cliente non vede mai un link verso qualcosa che lo respingerebbe.\nI due modi in cui dice no È il dettaglio che vale la pena conoscere, perché i due rifiuti significano cose diverse ed entrambi sono voluti.\nIl token del cliente chiede Ottiene /api/dcim/devices/ 200, una riga su due /api/dcim/devices/1/, il suo 200 /api/dcim/devices/2/, quello di un altro 404 /api/tenancy/tenants/ 403 /api/dcim/sites/, mai concesso 403 nessun token 403 404 significa che il tipo è tuo ma quella riga no. Il vincolo l\u0026rsquo;ha tolta dal queryset, quindi per quanto riguarda la richiesta non esiste. Un 403 lì confermerebbe che esiste, e permetterebbe a un cliente curioso di contare il tuo parco scorrendo gli ID.\n403 significa che il tipo non è mai stato tuo. Tenant e site non sono mai stati concessi, quindi rifiutano e basta, e il cliente non può elencare chi altro c\u0026rsquo;è sulla piattaforma.\nPoi lasciali scrivere La sola lettura è il caso facile. La vera domanda è se ci si può fidare di un cliente con diritti di modifica, quindi ho concesso change con lo stesso vincolo e sono andato a cercare la via d\u0026rsquo;uscita.\nTentativo Risultato Modificare il proprio apparato 200, salvato Modificare l\u0026rsquo;apparato di un altro cliente 404 Modificare il proprio apparato spostandolo sul tenant dell\u0026rsquo;altro cliente 403 Cancellare il proprio apparato 403, la cancellazione non è mai stata concessa È la terza riga quella che conta. Riassegnare il proprio apparato al tenant di qualcun altro è la fuga ovvia, perché l\u0026rsquo;oggetto è dentro il tuo vincolo quando arriva la richiesta e fuori dopo. NetBox valuta il vincolo sullo stato in cui l\u0026rsquo;oggetto verrebbe lasciato, quindi rifiuta. Ho riletto l\u0026rsquo;apparato invece di fidarmi del codice di stato, e il tenant non si era spostato.\nÈ il buco che la maggior parte della multi-tenancy fatta in casa lascia aperto, e di solito lo trova un cliente e non un test.\nVariabili che devono ereditare Ecco la distinzione che la gente sbaglia, e farla giusta risparmia un sacco di modifiche.\nUn custom field è un valore su un oggetto. Lo imposti oggetto per oggetto, e resta lì. Va bene per un fatto sulla cosa in sé: un asset tag, un numero di contratto di assistenza, una data di messa in servizio.\nUn config context è un valore legato a una caratteristica, che tutto ciò che ha quella caratteristica eredita. Va bene per una variabile che deve scendere a cascata: i tuoi server NTP, i tuoi target syslog, la tua community SNMP, il tuo dominio DNS, la tua VLAN di gestione, la tua finestra di backup.\nSe ti ritrovi a impostare lo stesso custom field allo stesso valore su quaranta apparati, volevi un config context.\nUn context è JSON arbitrario, e può essere legato a una region, site group, site, location, device type, ruolo, platform, cluster, cluster type, cluster group, tenant group, tenant o tag. Il tenant è in quell\u0026rsquo;elenco, il che per un provider significa che un fatto vero per un cliente ovunque lo segue su ogni apparato che aggiungerai per lui.\nL\u0026rsquo;unione avviene per chiave, e il peso decide chi vince ciascuna.\nLeggi il pannello di destra accanto a quello di sinistra. La region fornisce quattro chiavi a peso 1000. Il site fornisce una chiave a peso 2000. Il context risultante mantiene intatti il dominio, i server NTP e la community della region, e prende il server syslog del site, perché è l\u0026rsquo;unica chiave contesa.\nScrivi l\u0026rsquo;eccezione, non una copia nuova di tutto con dentro l\u0026rsquo;eccezione. È tutto il valore, ed è il motivo per cui questo scala dove un file di variabili per apparato non scala.\nIl local context batte tutto ciò che sta sopra La pila dell\u0026rsquo;ereditarietà ha una cima, ed è l\u0026rsquo;oggetto stesso. I local context data su un apparato vincono su ogni source context che gli si applica, qualunque sia il loro peso.\nL\u0026rsquo;ho impostato su mcr1-core-01:\n{\u0026#34;syslog_servers\u0026#34;: [\u0026#34;10.20.10.99\u0026#34;], \u0026#34;note\u0026#34;: \u0026#34;this box logs somewhere else\u0026#34;} e il suo context risultante è diventato:\n{ \u0026#34;note\u0026#34;: \u0026#34;this box logs somewhere else\u0026#34;, \u0026#34;domain\u0026#34;: \u0026#34;mcr1.example.net\u0026#34;, \u0026#34;ntp_servers\u0026#34;: [\u0026#34;172.16.10.22\u0026#34;, \u0026#34;172.16.10.33\u0026#34;], \u0026#34;snmp_community\u0026#34;: \u0026#34;n0rthwest\u0026#34;, \u0026#34;syslog_servers\u0026#34;: [\u0026#34;10.20.10.99\u0026#34;] } Il server syslog locale ha battuto sia l\u0026rsquo;override del site a peso 2000 sia la region a peso 1000. Tutto ciò su cui non diceva niente è stato comunque ereditato, quindi il dominio, i server NTP e la community sono passati intatti, e la chiave nuova è stata semplicemente aggiunta.\nÈ la via di fuga per l\u0026rsquo;unico apparato davvero diverso, e il pannello ti dice chiaramente che sovrascrive tutti i source context. Se ti ritrovi a usarlo su molti apparati invece che su uno, hai trovato una caratteristica che quegli apparati condividono e volevi un context legato a quella.\nTre trappole Un context senza ambito è globale. Creane uno e dimentica di assegnarlo a qualcosa, e si applica a ogni apparato e macchina virtuale che hai. È un comportamento documentato e ogni tanto è ciò che vuoi. È anche silenzioso.\nLe chiavi non possono avere trattini se vuoi raggiungerle in modo semplice. I context data sono JSON quindi ntp-servers è perfettamente lecito, ma i nomi di variabile Jinja non sono chiavi JSON. {{ ntp-servers }} viene interpretato come una sottrazione e solleva UndefinedError: 'ntp' is undefined. Scrivi {{ ntp_servers }} contro dati con il trattino e ottieni una stringa vuota, HTTP 200, e nessun avviso da nessuna parte. Usa gli underscore nelle chiavi e il template ovvio funziona.\nUn profilo può fermare i refusi. Un config context profile raggruppa context correlati e impone uno schema JSON sui loro dati al salvataggio. Ne ho dato uno con uno schema che richiede syslog_servers come array di stringhe IPv4, poi ho fatto i due errori che la gente fa davvero:\n{\u0026#34;syslog-server\u0026#34;: [\u0026#34;10.1.1.1\u0026#34;]} singular, by accident 400 Data does not conform to profile schema: \u0026#39;syslog-servers\u0026#39; is a required property {\u0026#34;syslog_servers\u0026#34;: [...], \u0026#34;syslog_port\u0026#34;: 99999} 400 Data does not conform to profile schema: 99999 is greater than the maximum of 65535 Respinti dove qualcuno li ha fatti, invece che quattrocento apparati dopo.\nGenerare la configurazione Context data più un template Jinja ti danno un file di configurazione. L\u0026rsquo;apparato è disponibile come device, il suo context unito è disponibile come variabili normali, e puoi percorrere i suoi componenti.\nTutto quello che c\u0026rsquo;è in quella pagina viene da un posto diverso, ed è proprio questo il punto:\nRiga Da dove viene host-name mcr1-core-01 l\u0026rsquo;apparato domain-name mcr1.example.net il config context regionale location \u0026quot;Manchester DC1 / MCR1-A07 / U39\u0026quot; il site, il rack e la posizione al suo interno server 172.16.10.22 il context regionale, peso 1000 host 10.20.10.99 any notice il local context dell\u0026rsquo;apparato, che batte sia il site sia la region family inet address 10.20.10.11/24 l\u0026rsquo;indirizzo su quell\u0026rsquo;interfaccia, con la maschera come è stata scritta Il template viene risolto prima sull\u0026rsquo;apparato, poi sul ruolo, poi sulla platform, e la richiesta fallisce se nessuno dei tre ne ha uno. Quindi assegni un template a una platform una volta, e ogni apparato che fa girare quel software lo genera da lì, a meno che il suo ruolo o l\u0026rsquo;apparato stesso non dicano altrimenti. A questo serve una platform: il sistema operativo o la famiglia di software del vendor, non l\u0026rsquo;hardware.\nNetBox genera. Non spinge. Portare il risultato sull\u0026rsquo;apparato è compito della tua automazione, e il giorno in cui un bug in un template avrebbe altrimenti riconfigurato quattrocento apparati, sarai contento che siano due sistemi diversi.\nPlugin Un plugin è un\u0026rsquo;applicazione Django installata accanto a NetBox. Può aggiungere modelli, aggiungere pagine, estendere entrambe le API, iniettare contenuto nei template esistenti, aggiungere voci di navigazione, aggiungere code di job in background e caricare altre app Django. C\u0026rsquo;è ben poco che non possa fare, perché sotto è semplicemente Django.\nInstallarne uno sono quattro comandi e un riavvio:\nsource /opt/netbox/venv/bin/activate pip install netbox-topology-views netbox-qrcode # add the package names to PLUGINS in configuration.py, then python3 manage.py migrate python3 manage.py collectstatic --no-input sudo systemctl restart netbox netbox-rq Sullo stack di container gli stessi pacchetti vanno in plugin_requirements.txt e ricostruisci l\u0026rsquo;immagine. In entrambi i casi, fissa le versioni e controlla prima la matrice di compatibilità, perché un plugin che non ha ancora raggiunto una release di NetBox si rifiuterà di avviare l\u0026rsquo;intera applicazione invece di disattivarsi.\nIl catalogo pubblicato ne elenca 31. Questi sono quelli che vale la pena conoscere, con la licenza con cui ciascuno viene effettivamente distribuito:\nPlugin Cosa fa Licenza DNS Zone, record e name server come fonte di verità MIT BGP Sessioni, community e routing policy Apache 2.0 Topology Views Mappe grafiche della topologia costruite dai tuoi cavi Apache 2.0 Floorplan Mappe grafiche di site e location LGPL 3.0 QR Code Codici su rack, apparati e cavi, per le etichette inventario Apache 2.0 ACLs Access list e regole Apache 2.0 Prometheus SD Fornisce a Prometheus l\u0026rsquo;elenco degli host direttamente da NetBox MIT Documents Documenti allegati a circuiti e apparati Apache 2.0 Lifecycle Fine vita dell\u0026rsquo;hardware, licenze e contratti Apache 2.0 Contract Contratti e fatture MIT Reorder Rack Unità rack con drag and drop Apache 2.0 Branching Rami isolati e unibili dei tuoi dati NetBox Limited Use Custom Objects Nuovi tipi di oggetto, definiti dall\u0026rsquo;interfaccia NetBox Limited Use Prometheus SD è la forma onesta di tutta l\u0026rsquo;idea. NetBox sa cosa esiste, quindi lascia che sia NetBox a dirlo al sistema di monitoraggio, e smetti di mantenere un secondo elenco di host che deriva.\nUna cosa da sapere prima di costruire sulle ultime due righe. NetBox in sé è Apache 2.0 e lo è da quando DigitalOcean l\u0026rsquo;ha pubblicato nel 2016, e oggi il progetto è curato da NetBox Labs insieme a un gruppo di maintainer volontari.21 NetBox Branching e NetBox Custom Objects no: sono distribuiti sotto la NetBox Limited Use License 1.0, che concede l\u0026rsquo;uso «only as part of a NetBox installation obtained from NetBox Labs or a NetBox distributor authorized by NetBox Labs, and only for your own internal use», e che non concede il diritto di usare il software «to provide a managed service or software products that includes, integrates with, or extends NetBox in a way that competes with any product or service of NetBox Labs». Se hai installato NetBox Community da GitHub e lo fai girare per conto di clienti, leggi tu stesso i termini prima di metterci dietro uno schema.10 La guida di installazione di NetBox raccomanda entrambi i plugin senza menzionarlo.11\nCustom field Un custom field aggiunge un attributo a un modello esistente. I valori sono salvati come JSON accanto a ogni oggetto, quindi niente migrazione e niente riavvio, e ci sono tredici tipi, compresi i riferimenti a uno o più oggetti verso altri record di NetBox.\nDue campi lì, raggruppati sotto un\u0026rsquo;intestazione «Asset» che ho scelto io. Nota il pannello Dimensions alla loro destra: 9,5 kg, che nessuno ha scritto su questo apparato. È venuto dal device type.\nI custom field sono validati, ed è utile saperlo, perché è una differenza reale rispetto alla strada qui sotto. Ho dato al campo del contratto un\u0026rsquo;espressione regolare e l\u0026rsquo;API l\u0026rsquo;ha fatta rispettare:\nPATCH {\u0026#34;custom_fields\u0026#34;: {\u0026#34;support_contract\u0026#34;: \u0026#34;nonsense\u0026#34;}} {\u0026#34;__all__\u0026#34;: [\u0026#34;Invalid value for custom field \u0026#39;support_contract\u0026#39;: Value must match regex \u0026#39;^[A-Z]{2,4}-[0-9]{6}$\u0026#39;\u0026#34;]} Due cose cambiate nella 4.7 contano su larga scala. Creare un campo con un valore predefinito, o cancellare un campo, deve riscrivere i dati salvati di ogni oggetto a cui si applica, quindi su una tabella grande quel lavoro viene passato a un job in background e il campo indica «provisioning» o «deleting» mentre gira. Un campo è attivo solo quando è active: durante entrambe le operazioni non compare sugli oggetti, nei moduli, nei filtri o in nessuna delle due API. Serve un worker in esecuzione, altrimenti resta in quello stato all\u0026rsquo;infinito.\nUsa un custom field quando aggiungi un fatto sulla cosa in sé. Usa un config context quando il valore deve scendere a cascata. Usa la sezione successiva quando la cosa che ti serve non esiste.\nMenu di selezione personalizzati, e sovrascrivere ciò che arriva di serie Sotto questo titolo vivono due meccanismi diversi e risolvono problemi diversi. Uno è per i tuoi campi. L\u0026rsquo;altro riscrive quelli di NetBox.\nUn choice set, per il tuo campo di selezione Un custom field di tipo «selection» prende le sue opzioni da un choice set, che è un oggetto che gestisci dall\u0026rsquo;interfaccia come qualunque altro. Così «livello di assistenza» diventa un vero menu a tendina invece di testo libero che qualcuno scriverà in tre modi diversi.\nViene fatto rispettare, anche tramite l\u0026rsquo;API:\nPATCH {\u0026#34;custom_fields\u0026#34;: {\u0026#34;support_tier\u0026#34;: \u0026#34;platinum\u0026#34;}} {\u0026#34;__all__\u0026#34;: [\u0026#34;Invalid value for custom field \u0026#39;support_tier\u0026#39;: Invalid choice (platinum) for choice set Support tier.\u0026#34;]} I choice set sono condivisi, quindi un set può alimentare lo stesso campo su più modelli, e cambiare l\u0026rsquo;elenco in un punto lo cambia ovunque.\nFIELD_CHOICES, per i campi di NetBox Questo è quello di cui la gente non sa l\u0026rsquo;esistenza. Diversi campi di scelta integrati di NetBox possono essere estesi o sostituiti da configuration.py, tra cui lo stato dell\u0026rsquo;apparato, del site, del rack, del circuito e molti altri.12\nAggiungi un segno più per aggiungere a ciò che arriva di serie. Lascialo fuori per sostituire l\u0026rsquo;elenco del tutto.\nFIELD_CHOICES = { # add to what NetBox ships with \u0026#39;dcim.Device.status+\u0026#39;: ( (\u0026#39;burn-in\u0026#39;, \u0026#39;Burn-in\u0026#39;, \u0026#39;cyan\u0026#39;), {\u0026#39;value\u0026#39;: \u0026#39;awaiting-rma\u0026#39;, \u0026#39;label\u0026#39;: \u0026#39;Awaiting RMA\u0026#39;, \u0026#39;color\u0026#39;: \u0026#39;orange\u0026#39;, \u0026#39;description\u0026#39;: \u0026#39;Faulty, with the vendor\u0026#39;}, ), # replace the stock list outright \u0026#39;dcim.Site.status\u0026#39;: ( (\u0026#39;surveyed\u0026#39;, \u0026#39;Surveyed\u0026#39;, \u0026#39;purple\u0026#39;), (\u0026#39;building\u0026#39;, \u0026#39;Building out\u0026#39;, \u0026#39;orange\u0026#39;), (\u0026#39;active\u0026#39;, \u0026#39;Active\u0026#39;, \u0026#39;green\u0026#39;), (\u0026#39;closing\u0026#39;, \u0026#39;Closing\u0026#39;, \u0026#39;red\u0026#39;), ), } Ho messo esattamente questo su questa istanza. Lo stato dell\u0026rsquo;apparato è tornato con i sette valori di serie e i miei due:\noffline, active, planned, staged, failed, inventory, decommissioning, burn-in, awaiting-rma e lo stato del site è tornato solo con i miei, l\u0026rsquo;elenco di serie sparito:\nsurveyed, building, active, closing Una scelta può essere una semplice tupla di valore, etichetta e colore, oppure un dizionario che accetta anche una descrizione mostrata come sottotitolo nel modulo. E si comportano ovunque come valori nativi, perché per il resto di NetBox sono valori nativi:\nQuel badge è il mio stato, nel mio colore, che si ordina e si filtra come qualsiasi altro.\nTre cose da sapere prima di usarlo.\nSostituire cancella i valori di serie dal menu, non dal database. Ogni oggetto che ne ha già uno lo mantiene, ma il valore non viene più proposto e non sarà una scelta valida la prossima volta che qualcuno modificherà quell\u0026rsquo;oggetto. Se sostituisci un elenco, controlla che niente stia su un valore che hai appena tolto.\nVive nel file di configurazione, quindi richiede un riavvio e non è qualcosa che un utente dell\u0026rsquo;interfaccia può cambiare. Per un provider è il verso giusto: l\u0026rsquo;insieme di stati che la tua azienda riconosce è una decisione di governance, non da martedì pomeriggio.\nEstendi prima di sostituire. I valori di serie sono ciò che ogni plugin, script e integrazione si aspetta di vedere. Aggiungere non costa niente. Sostituire è una decisione che ti porti dietro per sempre.\nCustom object Ecco una lacuna vera. NetBox modella cluster, macchine virtuali e dischi virtuali. Non modella il datastore su cui quei dischi vivono davvero, e per chiunque usi Proxmox o VMware è l\u0026rsquo;oggetto che collega lo storage che hai comprato al carico di lavoro che lo usa.\nIl plugin Custom Objects ti permette di definire un nuovo tipo di oggetto dall\u0026rsquo;interfaccia o dall\u0026rsquo;API, senza scrivere codice. Quindi:\nSette campi, due dei quali sono tutto il senso. cluster è un riferimento a un singolo oggetto, un vero cluster di NetBox, impostato su protect così nessuno può cancellare un cluster da sotto il suo storage. provisioned_by è un riferimento a più oggetti, gli apparati che lo servono davvero.\nQuesto ti dà un oggetto di prima classe con la sua voce di navigazione, vista elenco, filtri, importazione ed esportazione:\nE siccome i riferimenti sono veri, la relazione compare anche dall\u0026rsquo;altro lato. Apri il cluster e i datastore sono elencati lì.\nUn custom object type eredita quasi tutto ciò che rende un oggetto NetBox un oggetto NetBox: viste elenco e dettaglio, una voce di navigazione, endpoint REST, ricerca full-text, change log, journal, tag, segnalibri, importazione ed esportazione, event rule e notifiche. Niente di tutto ciò ha dovuto essere scritto.\nNon è nemmeno un blob JSON che fa finta di essere una tabella. Il plugin esegue vero DDL, e ciò che compare in PostgreSQL è una vera tabella con veri vincoli:\nTable \u0026#34;public.custom_objects_2\u0026#34; Column | Type | Nullable | Default -----------------+----------+----------+------------------ id | bigint | not null | identity name | varchar | | cluster_id | bigint | | backing | varchar | | capacity_gb | bigint | | thin_provisioned| boolean | | Indexes: \u0026#34;custom_objects_2_name_key\u0026#34; UNIQUE CONSTRAINT, btree (name) Foreign-key constraints: ... FOREIGN KEY (cluster_id) REFERENCES virtualization_cluster(id) ON DELETE RESTRICT Il protect che avevo chiesto è diventato ON DELETE RESTRICT, e funziona: cancellare quel cluster torna con un 409 che nomina ciò che ne dipende.\nDue cose da sapere prima di farci affidamento La validazione è sul modulo, non sull\u0026rsquo;API. È quella che fregherebbe un\u0026rsquo;automazione. Ho dichiarato required, un\u0026rsquo;espressione regolare e limiti numerici sui campi di un custom object type, e poi ci ho scritto tramite la REST API:\nCosa ho dichiarato Cosa ho inviato Risultato validation_regex un valore che non corrisponde a niente 201 Created required: true il campo del tutto omesso 201 Created validation_minimum: 1 un numero negativo 201 Created unique: true un duplicato 400, respinto on_delete_behavior: protect cancellare l\u0026rsquo;oggetto referenziato 409, respinto I due che hanno tenuto sono i due diventati vincoli del database. Gli altri esistono solo sul modulo web, quindi una persona che scrive è vincolata e una sincronizzazione notturna no. Confrontalo con il custom field di base più sopra, dove la stessa espressione regolare era fatta rispettare tramite l\u0026rsquo;API. Finché non cambia, metti tutto ciò da cui dipende una fattura dietro un vero vincolo.\nCancellare un tipo elimina una tabella. Cancellare un campo elimina una colonna. È DDL da un modulo web, eseguito da chiunque abbia il permesso, e la documentazione lo dice chiaramente.13 Limita chi può cancellarli.\nQuando scrivere invece un plugin vero Se l\u0026rsquo;oggetto conta, se l\u0026rsquo;automazione ci scrive, e se ti arrabbieresti a trovarci dentro spazzatura, scrivi il modello da te. Un plugin NetBox minimo è una PluginConfig, un modello, un serializer, un viewset, una tabella, un modulo, qualche vista e una mappa di URL, e sta sotto le duecento righe, per lo più dichiarazioni. Ereditare da PrimaryModel ti dà gratis tag, custom field, change log, journal, export template e ownership, e ogni vincolo che metti sul modello viene fatto rispettare ovunque, perché lo esegue il meccanismo di serializer di NetBox stesso.\nCi sono un template cookiecutter e un tutorial completo sui plugin mantenuti dalla community. Parti da quelli invece che da una directory vuota.\nEd è sotto la licenza che scegli tu, che nessuno potrà cambiare dopo.\nValidazione personalizzata, e classi validator Tutto quello che c\u0026rsquo;è sopra riguarda registrare ciò che c\u0026rsquo;è. Questo riguarda rifiutare di registrare ciò che non dovrebbe esserci.\nNetBox valida ogni oggetto prima di scriverlo, e puoi aggiungere regole tue sopra. Ci sono tre meccanismi, vivono tutti in configuration.py, e insieme coprono quasi tutto ciò di cui ha bisogno uno standard interno.\nUno: regole semplici, niente codice Un validator può essere una semplice mappa da nomi di campo a condizioni. Niente Python, ed è portabile tra installazioni perché sono solo dati.\nCUSTOM_VALIDATORS = { \u0026#39;dcim.site\u0026#39;: ( {\u0026#39;description\u0026#39;: {\u0026#39;required\u0026#39;: True}}, ), \u0026#39;dcim.device\u0026#39;: ( {\u0026#39;name\u0026#39;: {\u0026#39;regex\u0026#39;: r\u0026#39;^[a-z0-9]+-[a-z]+-([0-9]{2}|[a-z])$\u0026#39;}}, ), } Le condizioni disponibili sono min, max, min_length, max_length, regex, required, prohibited, eq e neq. Puoi raggiungere un oggetto correlato con un percorso puntato, quindi region.name su un site è lecito, e puoi fare match su request.user.username, anche se la documentazione giustamente ti dice di usare i permessi per quello.\nEntrambe quelle regole scattano subito:\nPOST a site with no description {\u0026#34;__all__\u0026#34;: [\u0026#34;Custom validation failed for description: [\u0026#39;This field must not be empty.\u0026#39;]\u0026#34;]} POST a device named \u0026#34;Server1\u0026#34; {\u0026#34;__all__\u0026#34;: [\u0026#34;Custom validation failed for name: [\u0026#39;Enter a valid value.\u0026#39;]\u0026#34;]} La seconda è uno standard di nomenclatura, fatto rispettare. Non scritto su una pagina wiki, non nella testa di qualcuno, non una cosa per cui il nuovo arrivato si prende una ramanzina in una review tre settimane dopo. Il database non la accetta.\nDue: una classe validator, quando la regola è una frase Le regole semplici controllano un campo contro una costante. Le vere regole interne di solito sono condizionali: questo conta solo quando quello. Per quelle erediti da CustomValidator, sovrascrivi validate() e chiami fail().\nNe ho messe tre in un modulo in /opt/netbox/netbox/house_rules.py:\nfrom extras.validators import CustomValidator class BillableKitNamesItsCustomer(CustomValidator): \u0026#34;\u0026#34;\u0026#34;Anything in a role we sell has to say whose it is.\u0026#34;\u0026#34;\u0026#34; BILLABLE_ROLES = {\u0026#39;hypervisor\u0026#39;} def validate(self, instance, request): role = getattr(instance, \u0026#39;role\u0026#39;, None) if role and role.slug in self.BILLABLE_ROLES and not instance.tenant: self.fail( f\u0026#34;A {role} is billable kit, so it must name the customer it belongs to.\u0026#34;, field=\u0026#39;tenant\u0026#39;, ) class RackedDeviceNeedsAPosition(CustomValidator): \u0026#34;\u0026#34;\u0026#34;A device in a rack with no rack unit is a device nobody can find.\u0026#34;\u0026#34;\u0026#34; def validate(self, instance, request): if instance.rack and instance.position is None: if instance.device_type and instance.device_type.u_height: self.fail( \u0026#34;A device in a rack needs a rack unit. Somebody has to find it.\u0026#34;, field=\u0026#39;position\u0026#39;, ) class CustomerPrefixNeedsATenant(CustomValidator): \u0026#34;\u0026#34;\u0026#34;A customer prefix that names no customer cannot be billed.\u0026#34;\u0026#34;\u0026#34; def validate(self, instance, request): role = getattr(instance, \u0026#39;role\u0026#39;, None) if role and role.slug == \u0026#39;customer\u0026#39; and not instance.tenant: self.fail( \u0026#34;A customer prefix must be assigned to a tenant.\u0026#34;, field=\u0026#39;tenant\u0026#39;, ) e le ho collegate tramite percorso puntato:\nCUSTOM_VALIDATORS = { \u0026#39;dcim.device\u0026#39;: ( {\u0026#39;name\u0026#39;: {\u0026#39;regex\u0026#39;: r\u0026#39;^[a-z0-9]+-[a-z]+-([0-9]{2}|[a-z])$\u0026#39;}}, \u0026#39;house_rules.BillableKitNamesItsCustomer\u0026#39;, \u0026#39;house_rules.RackedDeviceNeedsAPosition\u0026#39;, ), \u0026#39;ipam.prefix\u0026#39;: ( \u0026#39;house_rules.CustomerPrefixNeedsATenant\u0026#39;, ), } Nota che un modello accetta una tupla di validator, regole semplici e classi mescolate liberamente, e girano tutte. Anche un singolo validator va passato come iterabile, ed è un modo facile per perdere cinque minuti.\nPoi le regole fanno quello che dicono:\nPOST a hypervisor with no tenant {\u0026#34;tenant\u0026#34;: [\u0026#34;A Hypervisor is billable kit, so it must name the customer it belongs to.\u0026#34;]} POST a device into a rack with no position {\u0026#34;position\u0026#34;: [\u0026#34;A device in a rack needs a rack unit. Somebody has to find it.\u0026#34;]} POST a prefix with role \u0026#34;customer\u0026#34; and no tenant {\u0026#34;tenant\u0026#34;: [\u0026#34;A customer prefix must be assigned to a tenant.\u0026#34;]} POST a leaf switch with no tenant accepted, because a leaf switch is not in BILLABLE_ROLES Siccome fail() accetta un field, il messaggio finisce sulla casella giusta del modulo invece che in cima alla pagina, che è la differenza tra una regola che la gente impara e una regola che la gente detesta.\nÈ anche la risposta alla lacuna nella sezione sui custom object. La validazione lì esisteva solo sul modulo web. Un CustomValidator gira nel livello del modello, quindi si applica all\u0026rsquo;interfaccia, alla REST API, alle mutation GraphQL, alle importazioni di massa e a qualsiasi cosa faccia uno script. C\u0026rsquo;è un solo posto dove scrivere la regola e nessun modo per aggirarla.\nTre: protection rule, per la cancellazione CUSTOM_VALIDATORS protegge le scritture. PROTECTION_RULES protegge le cancellazioni, e accetta esattamente le stesse due forme.\nPROTECTION_RULES = { \u0026#39;dcim.device\u0026#39;: ( {\u0026#39;status\u0026#39;: {\u0026#39;eq\u0026#39;: \u0026#39;offline\u0026#39;}}, ), } Questo dice che un apparato può essere cancellato solo quando è offline. Il che produce:\nDELETE an active device {\u0026#34;detail\u0026#34;: \u0026#34;Deletion is prevented by a protection rule: [\\\u0026#34;Custom validation failed for status: [\u0026#39;Ensure this value is equal to offline.\u0026#39;]\\\u0026#34;]\u0026#34;} set it to offline, then DELETE 204 No Content Due tasti di attrito tra qualcuno e un apparato in produzione, ed è l\u0026rsquo;assicurazione più economica dell\u0026rsquo;intera applicazione. Fai in modo che sia il processo di dismissione a sbloccare il pulsante di cancellazione.\nQuella che ti fregherà I dati esistenti non vengono controllati finché non li tocchi di nuovo. Aggiungere una regola non torna indietro a validare ciò che c\u0026rsquo;è già. Resta lì in silenzio finché qualcuno salva un oggetto che la viola, e allora riceve un errore su una decisione con cui non aveva niente a che fare.\nL\u0026rsquo;ho visto succedere. mcr1-hv-06 era stato creato prima che scrivessi tutto questo, come hypervisor senza tenant. Stava lì tranquillissimo. Poi ho modificato la sua descrizione:\nPATCH {\u0026#34;description\u0026#34;: \u0026#34;touching it to trigger revalidation\u0026#34;} {\u0026#34;tenant\u0026#34;: [\u0026#34;A Hypervisor is billable kit, so it must name the customer it belongs to.\u0026#34;]} La modifica non c\u0026rsquo;entrava niente con il tenant. La regola è scattata lo stesso, perché la validazione gira sull\u0026rsquo;intero oggetto.\nÈ il comportamento corretto ed è anche il modo in cui una regola nuova diventa un ticket di assistenza. Prima di attivarne una, esegui una query per gli oggetti che la violerebbero e sistemali prima. L\u0026rsquo;API lo rende facile: la regola è un filtro, quindi chiedi gli apparati con quel ruolo e senza tenant, e hai il tuo elenco.\nAttiva la regola dopo. Così cattura solo errori nuovi, che è il suo scopo.\nGuidarlo da Ansible Una fonte di verità che nessuno legge marcisce. La collection netbox.netbox è il modo in cui la maggior parte della gente lo evita, e funziona in entrambe le direzioni: NetBox dice ad Ansible cosa esiste, e Ansible dice a NetBox cosa ha costruito.\nÈ alla versione 3.23.0, con licenza GPL-3.0, ed è stata scaricata da Galaxy oltre 13,4 milioni di volte. Contiene 91 moduli e un plugin di inventario.14 Tutto quello che segue è stato eseguito sulla stessa istanza, da un container con dentro solo ansible-core 2.21.4, pynetbox 7.8.0 e la collection.\nL\u0026rsquo;inventario è una query, non un file Questa è la metà che si ripaga il primo pomeriggio. nb_inventory costruisce il tuo inventario Ansible direttamente da NetBox:\nplugin: netbox.netbox.nb_inventory api_endpoint: http://netbox:8080 token: \u0026#34;{{ lookup(\u0026#39;env\u0026#39;, \u0026#39;NETBOX_TOKEN\u0026#39;) }}\u0026#34; config_context: false group_by: - sites - device_roles - tenants - racks device_query_filters: - has_primary_ip: true Questo produce quanto segue, senza che nessuno mantenga un elenco di host:\n@sites_manchester-dc1: @device_roles_hypervisor: |--mcr1-core-01 |--mcr1-hv-01 |--mcr1-core-02 |--mcr1-hv-02 |--mcr1-hv-01 |--mcr1-hv-03 |--mcr1-hv-02 |--mcr1-hv-04 ... |--mcr1-hv-05 @racks_MCR1-A07: @tenants_ravenscroft-legal: |--mcr1-core-01 |--mcr1-hv-01 |--mcr1-core-02 |--mcr1-hv-02 ... @tenants_padgate-foods: @device_roles_core-router: |--mcr1-hv-03 |--mcr1-core-01 |--mcr1-hv-04 |--mcr1-core-02 @tenants_hartley-components: |--mcr1-hv-05 Guarda la colonna di destra. Siccome la tenancy è impostata sugli apparati, ottieni gratis un gruppo per cliente, quindi --limit tenants_ravenscroft-legal esegue un play sugli apparati di un solo cliente. Aggiungi un apparato in NetBox ed è nel gruppo all\u0026rsquo;esecuzione successiva. Dismettine uno ed è sparito. Nessuno modifica niente.\nOgni host arriva con quello che NetBox sa di lui:\nansible_host \u0026#34;2001:db8:20:20::11\u0026#34; primary_ip4 \u0026#34;10.20.20.11\u0026#34; primary_ip6 \u0026#34;2001:db8:20:20::11\u0026#34; device_roles [\u0026#34;hypervisor\u0026#34;] sites [\u0026#34;manchester-dc1\u0026#34;] racks [\u0026#34;MCR1-A07\u0026#34;] tenants [\u0026#34;ravenscroft-legal\u0026#34;] device_types [\u0026#34;sys-1029u-tn10rt\u0026#34;] manufacturers [\u0026#34;supermicro\u0026#34;] status {\u0026#34;label\u0026#34;: \u0026#34;Active\u0026#34;, \u0026#34;value\u0026#34;: \u0026#34;active\u0026#34;} Ventidue chiavi in tutto, e una merita attenzione prima che ti sorprenda. ansible_host è l\u0026rsquo;indirizzo IPv6, perché quell\u0026rsquo;apparato ha un v6 primario impostato. L\u0026rsquo;ho confrontato con altri due che hanno solo il v4 e sono tornati in v4, quindi la regola è che il plugin preferisce il v6 dove esiste un v6 primario. Il che è corretto, ed è anche il tipo di cosa che preferiresti scoprire adesso piuttosto che mentre ti chiedi perché un play si collega su un percorso a cui non avevi pensato.\nScrivere indietro I moduli sono l\u0026rsquo;altra direzione, e quello che vale la pena avere è l\u0026rsquo;assegnazione degli IP, perché NetBox sa cosa è libero e il tuo playbook no.\n- name: Rack the device netbox.netbox.netbox_device: netbox_url: \u0026#34;{{ nb_url }}\u0026#34; netbox_token: \u0026#34;{{ nb_token }}\u0026#34; data: name: mcr1-hv-07 device_type: SYS-1029U-TN10RT device_role: Hypervisor site: Manchester DC1 rack: MCR1-A07 position: 14 face: Front tenant: Hartley Components state: present - name: Let NetBox pick the next free address out of the customer prefix netbox.netbox.netbox_ip_address: netbox_url: \u0026#34;{{ nb_url }}\u0026#34; netbox_token: \u0026#34;{{ nb_token }}\u0026#34; data: prefix: 10.20.22.0/24 tenant: Hartley Components assigned_object: device: mcr1-hv-07 name: eno1 state: new Nota cosa non c\u0026rsquo;è. Nessun indirizzo IP. Indichi il prefisso e NetBox ti restituisce il prossimo libero:\nTASK [Let NetBox pick the next free address out of the customer prefix] **** changed: [localhost] \u0026#34;device : mcr1-hv-07 (created)\u0026#34; \u0026#34;interface: eno1 (created)\u0026#34; \u0026#34;address : 10.20.22.1/24 (allocated)\u0026#34; Ed è lì nell\u0026rsquo;interfaccia un secondo dopo, non ancora cablato a niente ma nel rack, con il tenant e con l\u0026rsquo;indirizzo:\nLa trappola in quel playbook Eseguilo una seconda volta senza cambiare una riga e succede questo:\n\u0026#34;device : mcr1-hv-07 (already correct)\u0026#34; \u0026#34;interface: eno1 (already correct)\u0026#34; \u0026#34;address : 10.20.22.2/24 (allocated)\u0026#34; L\u0026rsquo;apparato e l\u0026rsquo;interfaccia sono idempotenti. L\u0026rsquo;indirizzo no, e non è un bug. state: present significa «fallo diventare così». state: new significa «dammene uno nuovo», ogni singola volta, ed è esattamente quello che ha fatto: due indirizzi su un\u0026rsquo;interfaccia dopo due esecuzioni.\nVa bene quando stai davvero mettendo in servizio qualcosa di nuovo, e si mangerà in silenzio un prefisso se lo metti in un job che gira ogni notte. Assegna una volta e registra il risultato, oppure usa state: present con l\u0026rsquo;indirizzo che hai già. Il modulo fa quello che gli hai chiesto. La domanda è se gli hai chiesto quello che intendevi.\nNon c\u0026rsquo;è solo Ansible La collection riceve l\u0026rsquo;attenzione perché Ansible è dove sta già la maggior parte dei team di rete, ma il prodotto è l\u0026rsquo;API e sono tante le cose che la parlano.\nCosa Cos\u0026rsquo;è Licenza pynetbox Il client Python che usa la collection stessa Apache 2.0 terraform-provider-netbox Gestisce oggetti NetBox come risorse Terraform, mantenuto attivamente da e-breuninger MPL 2.0 nornir_netbox NetBox come inventario Nornir, per chi lavora in Python invece che in YAML Apache 2.0 Prometheus SD Fornisce a Prometheus i target da raccogliere direttamente da NetBox MIT go-netbox Un client Go, anche se non viene toccato da maggio 2025 vedi il repository Diode La pipeline di acquisizione di NetBox Labs per inserire dati scoperti NetBox Limited Use Quello di Terraform è la voce interessante per chi gestisce già l\u0026rsquo;infrastruttura in quel modo, perché permette a un solo plan di creare la risorsa cloud e il record NetBox che la documenta, invece di lasciare la seconda metà alla memoria di qualcuno.15\nDiode ha la stessa licenza di Branching e Custom Objects, quindi vale la stessa lettura prima di costruirci sopra.\nCosa compra davvero il pomeriggio Tutto quello che c\u0026rsquo;è sopra mi ha preso una giornata su una macchina, e quasi tutta quella giornata è servita a caricare dati perché le schermate avessero qualcosa dentro. L\u0026rsquo;installazione è venti minuti in entrambi i modi. Le decisioni sono la parte che conta e si prendono tutte nella prima ora: i tenant prima di tutto, i device type prima degli apparati, i numeri sui tipi e non sugli apparati.\nQuello che ottieni in cambio non è documentazione. È una distinzione che nessuno fa finché non ha avuto entrambe le cose: la documentazione è una cosa che scrivi e poi smetti di mantenere. Quello che ottieni è un database che si rifiuta di contenere una contraddizione: non ti lascia mettere due cose in una sola unità rack, o un rack in una location che appartiene a un altro site, o un apparato su un tipo che non esiste. Ognuno di quei rifiuti è una discussione che non farai tra sei mesi.\nE ti dirà cose che nessuno gli ha chiesto. Quell\u0026rsquo;armadio è pieno al 28,6% di apparati e al 90,7% di potenza. Nessuno era partito per scoprirlo. È saltato fuori mettendo una volta un wattaggio su un device type, ed è la differenza tra mettere lì il prossimo ordine e scoprirlo a tue spese.\nL\u0026rsquo;avvertenza onesta è la stessa che ha ogni fonte di verità. Vale solo quanto ti costa tenerla giusta, e l\u0026rsquo;unica versione di tutto questo che sopravvive a un trimestre pieno è quella in cui qualcosa si rompe in modo visibile quando i dati sono sbagliati. Collega il tuo monitoraggio, il tuo provisioning o le tue regole di firewall perché leggano da lì, e una voce sbagliata smette di essere un problema di documentazione a cui qualcuno prima o poi arriverà. Diventa un disservizio alle nove e mezza di un martedì, con un nome sopra. Sembra un costo. È tutto il meccanismo.\nNessuno ti ringrazierà nemmeno. Un registro corretto si vede come la migrazione che ha preso due settimane invece di un trimestre, l\u0026rsquo;audit che ha preso un pomeriggio, il cliente che ha avuto una risposta chiara al telefono. Niente di tutto questo compare in un report accanto al tuo nome.\nFallo lo stesso. L\u0026rsquo;alternativa è un\u0026rsquo;azienda che non sa descrivere sé stessa, e un\u0026rsquo;azienda che non sa descrivere sé stessa non viene gestita. Viene ricordata, da sempre meno persone ogni anno.\nNetBox, Introduction — «Today, the open source project is stewarded by NetBox Labs and a team of volunteer maintainers», e l\u0026rsquo;origine in DigitalOcean nel 2015, open source da giugno 2016.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, LICENSE.txt — Apache License 2.0, copyright DigitalOcean, LLC. Origine e gestione del progetto dall\u0026rsquo;introduzione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNautobot v1.0.0 release notes — «a divergent fork of NetBox 2.10», pubblicate il 26 aprile 2021, e l\u0026rsquo;elenco di cosa aggiungeva rispetto a NetBox 2.10.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetwork to Code, \u0026ldquo;Why Did Network to Code Fork NetBox?\u0026rdquo;, 25 febbraio 2021 — le ragioni legate agli SLA e al supporto a lungo termine, la divergenza di visione, e «the NetBox project team suggested that we should consider forking».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox Labs è stata fondata nel 2023 come spin-out di NS1 dopo la sua acquisizione da parte di IBM, cofondata dal lead maintainer di NetBox Jeremy Stretch, e ha annunciato un Series A da 20 milioni di dollari nell\u0026rsquo;aprile 2023: NetBox Labs, \u0026ldquo;Let\u0026rsquo;s Go: Announcing NetBox Labs\u0026rdquo; e l\u0026rsquo;annuncio del Series A.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox Labs, NetBox Enterprise — l\u0026rsquo;edizione commerciale gestita in proprio, con «24/7 expert assistance from the NetBox Labs team»; NetBox Cloud è l\u0026rsquo;offerta ospitata. I termini specifici degli SLA non sono pubblicati su quella pagina.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nStelle e fork, date di rilascio e licenze di entrambi i progetti lette dall\u0026rsquo;API di GitHub il 30 settembre 2026: netbox-community/netbox e nautobot/nautobot. Le release parallele 3.2.x e 2.4.x di Nautobot sono entrambe datate 28 settembre 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetbox-community/netbox-docker — lo stack di container della community, Apache 2.0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, Installation — la tabella delle versioni supportate, e le note di rilascio della v4.7 per i minimi di PostgreSQL e Redis alzati. Versione ed edizione lette da netbox/release.yaml.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox Limited Use License 1.0 — adottata da netbox-custom-objects e, identica, da netbox-branching. Entrambe le clausole citate sono testuali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, HTTP Server installation, \u0026ldquo;What\u0026rsquo;s Next?\u0026rdquo; — «Some of the most popular plugins include» NetBox Branching, NetBox Custom Objects, NetBox DNS e NetBox BGP, senza alcuna menzione dei termini di licenza.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, Data Validation configuration — FIELD_CHOICES, e il suffisso con il segno più che estende invece di sostituire: «To replace the available choices, specify the app, model, and field name separated by dots \u0026hellip; To extend the available choices, append a plus sign».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetboxlabs/netbox-custom-objects documentation — «Deleting a Custom Object Type drops an entire database table and should be done with caution.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetbox.netbox su Ansible Galaxy e netbox-community/ansible_modules — versione 3.23.0, GPL-3.0, 91 moduli più il plugin di inventario nb_inventory. Numero di download letto da Galaxy il 30 settembre 2026. Tutto ciò che è mostrato è stato eseguito con ansible-core 2.21.4 e pynetbox 7.8.0.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLicenze, attività e numero di stelle letti da ciascun progetto il 30 settembre 2026: pynetbox (Apache 2.0), terraform-provider-netbox (MPL 2.0, v6.0.0-rc.1 sul registry di Terraform), nornir_netbox (Apache 2.0), netbox-plugin-prometheus-sd (MIT), go-netbox (ultimo push il 9 maggio 2025) e Diode, che ha la stessa NetBox Limited Use License 1.0 di Branching e Custom Objects.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/netbox/what-is-netbox/","summary":"Un giro pratico in NetBox 4.7.2 con un parco reale caricato dentro, non una demo vuota. Cosa contiene ogni schermata e cosa ci fai: elevazioni dei rack, tracce dei cavi, l\u0026rsquo;albero IPAM, interfacce dual stack e l\u0026rsquo;armadio che risulta pieno al 90,7 per cento di potenza mentre è pieno solo al 28,6 per cento di apparati. Come metterne in piedi uno come stack di container e su un host dai pacchetti, entrambi provati dall\u0026rsquo;inizio alla fine. L\u0026rsquo;ordine in cui devi riempirlo, ricavato da quali chiavi esterne sono davvero obbligatorie. Come una sola installazione si divide tra clienti, così che l\u0026rsquo;apparato di un altro cliente restituisce 404 e un tipo di oggetto non concesso restituisce 403. I config context e l\u0026rsquo;ereditarietà che li rende più preziosi dei custom field. Aggiungere i tuoi valori ai menu di stato di NetBox. Tre modi per aggiungere l\u0026rsquo;oggetto su cui gira il tuo lavoro, compreso un datastore modellato senza una riga di codice. Come scrivere regole di validazione e classi validator perché il database rifiuti ciò che il tuo standard interno vieta. E la storia del fork del 2021 da cui è nato Nautobot, a cosa serviva e cosa è poi converso. In più il pilotaggio dell\u0026rsquo;intero sistema dalla collection Ansible netbox.netbox, dove l\u0026rsquo;inventario è una query e non un file e un argomento di un modulo assegna in silenzio un indirizzo nuovo a ogni esecuzione.","title":"NetBox: cosa contiene, e come fargli contenere il tuo"},{"content":"Ogni nome che la tua macchina ha risolto oggi, l\u0026rsquo;ha creduto. La tua banca, i tuoi aggiornamenti, il tuo server di posta. Una risposta è arrivata dalla rete e niente, da nessuna parte, ha controllato se venisse dall\u0026rsquo;organizzazione proprietaria del nome o da chiunque sia riuscito a infilare un pacchetto per primo. Su una normale risposta DNS non c\u0026rsquo;è alcuna firma, niente da verificare e niente che si accorgerebbe di un problema. Nel 1983 era un progetto ragionevole, e ha smesso di esserlo molto tempo fa.\nDNSSEC è la correzione esattamente per questo, e non è né nuovo né costoso. Il proprietario della zona firma i propri record. La zona sopra pubblica un hash della sua chiave e firma quello, e così via verso l\u0026rsquo;alto, finché la catena arriva a un\u0026rsquo;unica chiave radice che il tuo resolver conosce dalla nascita. Qualunque cosa controlli la catena sa distinguere una risposta vera da una falsa. È uno standard dal 2005, la radice è firmata dal luglio 2010, e i registry pubblicano i record gratis.1 2\nLa cima dell\u0026rsquo;albero è finita. Per questo articolo ho contato la zona radice live, e 1.351 domini di primo livello su 1.438 sono firmati, compresi tutti i 1.038 generici. Poi crolla. Dei 2.390 domini gov.uk che ancora risolvono, trentanove sono firmati, e nove di questi sono consigli parrocchiali. L\u0026rsquo;MI6 ce l\u0026rsquo;ha fatta. Il National Cyber Security Centre no.\nEcco quanto costa davvero una risposta falsificata e cosa ci fa la firma, contato sulla zona radice live il 27 settembre 2026 e poi giù attraverso il governo, le banche, le distribuzioni da cui installi e le autorità di certificazione. Un comando per dominio, senza il permesso di nessuno, e ogni nome elencato così puoi contestare le mie scelte e non la mia aritmetica. Sotto c\u0026rsquo;è la domanda a cui volevo davvero una risposta. Quarantadue anni dopo che Mockapetris ha messo il DNS per iscritto, il motivo per cui quasi nessuno firma è che quasi nessuno ha mai capito cosa promettesse il DNS?\nCos\u0026rsquo;è DNSSEC, e a cosa serve In una frase: DNSSEC mette una firma crittografica sulle risposte DNS, così un resolver può dimostrare che una risposta viene dal proprietario della zona e non da chi è riuscito a rispondere per primo.\nNon è cifratura, non è un firewall e non è un filtro. È una firma e una catena di chiavi che risale a un\u0026rsquo;unica chiave di cui il tuo resolver già si fida. Tutta l\u0026rsquo;idea è questa.\nOra l\u0026rsquo;attacco, perché il protocollo ha senso solo dopo che hai visto a cosa serve.\nUn resolver che chiede un nome manda una query e aspetta. La risposta viene abbinata su una manciata di campi: il nome richiesto, il tipo, gli indirizzi e le porte di origine e destinazione, e un ID di transazione a 16 bit. Chiunque riesca a produrre un pacchetto che corrisponde a quei campi, prima che arrivi la risposta vera, vince. Il resolver mette in cache il falso e lo consegna a ogni client che lo chiede, per tutto il tempo che ha deciso l\u0026rsquo;attaccante.\nIl lavoro di Dan Kaminsky del 2008 è quello che tutti ricordano a metà.3 La parte che conta non è che il cache poisoning esistesse, perché lo si conosceva da anni. È che lui trovò un modo per ritentare l\u0026rsquo;indovinello all\u0026rsquo;infinito. Chiedi un nome che non esiste, e ogni tentativo fallito non costa niente e ti lascia riprovare subito, quindi l\u0026rsquo;attaccante non corre più una volta sola contro un record in cache che dura un giorno. La risposta del settore fu aggiungere casualità: porte di origine casuali oltre all\u0026rsquo;ID di transazione casuale, che portò l\u0026rsquo;indovinello da uno su 65.536 a qualcosa come uno su due miliardi.\nÈ un numero più grande. Non è una prova.\nIl resolver abbina campi che un attaccante può indovinare SENZA FIRMA: VINCE IL PRIMO PACCHETTO CHE CORRISPONDE resolver chiede, poi aspetta il server vero risponde con i suoi tempi attaccante off-path deve solo arrivare primo Viene accettato se cinque campi corrispondono, e ognuno è indovinabile: nome · tipo · indirizzi · porta di origine · ID di transazione a 16 bit CON LA FIRMA: LA RISPOSTA PORTA LA PROVA Una firma che risale all'unica chiave radice che il resolver aveva già. Indovinando non se ne ottiene una. Il resolver abbina campi che un attaccante può indovinare. La firma sostituisce l\u0026rsquo;indovinare con l\u0026rsquo;aritmetica E da allora la mitigazione si è erosa, perché ognuno di quei campi è un indovinello reso più difficile, non un fatto reso verificabile. La randomizzazione delle porte viene annullata da un NAT che riscrive le porte in modo prevedibile. Gli attacchi a frammentazione aggirano del tutto l\u0026rsquo;abbinamento. Gli attacchi off-path tornano sempre in forme nuove, e ognuno riceve la sua patch.\nLa firma chiude la discussione. Una risposta firmata o si verifica contro una chiave che il resolver può collegare alla radice, o no, e nessuna quantità di tentativi procura a un attaccante una firma valida.\nCosa compra davvero vincere quella gara Siamo concreti, perché «cache poisoning» suona astratto e le conseguenze non lo sono.\nCosa falsificano Cosa ottengono Il record A del tuo sito Il traffico, e un modulo di login che sembra il tuo I tuoi record MX Ogni email in arrivo, compresi i reset delle password Il nome che un\u0026rsquo;autorità di certificazione verifica Un certificato valido per un dominio che non possiedono Il nome da cui le tue macchine scaricano gli aggiornamenti Non arriva niente, e nessuno viene avvisato La tua delega NS Tutto quanto sopra insieme, per quanto dice il TTL La terza riga trasforma un problema DNS in un problema di certificati. Il rilascio a validazione di dominio funziona chiedendoti di pubblicare un record e poi cercandolo. Se un attaccante controlla la risposta che la CA vede durante quella ricerca, la CA gli rilascia documenti veri per il tuo nome, e da lì il lucchetto nel browser è suo. Tutto ciò che a un utente è stato insegnato a controllare dirà che il sito va bene.\nLa quarta riga è quella silenziosa. Una risposta falsa non deve mandare nessuno da nessuna parte. Basta puntare un servizio di aggiornamento verso un buco nero, e niente nello stack è fatto per lamentarsi degli aggiornamenti mai arrivati.\nCosa ci fa la firma Il meccanismo è più semplice della sua fama.\nOgni zona firmata ha una coppia di chiavi. Il proprietario firma ogni insieme di record con la metà privata e pubblica accanto un RRSIG. La metà pubblica va nella zona come DNSKEY. Fin qui non si dimostra niente, perché un attaccante che può falsificare un record A può falsificare anche un DNSKEY da abbinarci.\nQuello che chiude il cerchio è il record DS, e il DS vive nella zona genitore, non nella tua. È un hash della tua chiave, pubblicato e firmato dalla zona sopra di te. Quindi uk garantisce per la tua chiave, la radice garantisce per uk, e il tuo resolver sa dalla nascita una sola cosa: la chiave della radice.2\nOgni genitore garantisce per il figlio, e un DS mancante rompe tutto ciò che sta sotto L'UNICA COSA CHE UN RESOLVER SA DALLA NASCITA la chiave della radice distribuita con il resolver Tutto il resto si impara chiedendo, e lo dimostra il livello superiore. DS per uk uk firmato, e garantito dalla radice DS per la tua zona damiendye.uk firma i suoi record con RRSIG Un DS è un hash della chiave del figlio, pubblicato e firmato dal genitore. Quindi solo il genitore può metterti nella catena. Non tu. E SE MANCA UN DS La catena si ferma lì. Tutto ciò che sta sotto non è verificabile, per quanto bene sia firmata la zona. Ogni genitore garantisce per il figlio, e un solo DS mancante rompe tutto quello che sta sotto Tre tipi di record fanno il lavoro, e vuoi sapere quale è quale, perché solo uno di loro è compito di qualcun altro:\nRecord Vive in Dice DNSKEY la tua zona ecco la mia chiave pubblica RRSIG la tua zona ecco la mia firma su questo insieme di record DS la zona del tuo genitore garantisco io per quella chiave Puoi pubblicare i primi due da solo per tutto il pomeriggio e non cambia niente. Finché il genitore non pubblica un DS, sei una zona firmata che nessuno può verificare, che è la stessa cosa di una zona non firmata con del lavoro in più.\n$ dig +short @127.0.0.53 uk DS 43876 8 2 A107ED2AC1BD14D924173BC7E827A1... $ dig +short @127.0.0.53 damiendye.uk DS 2371 13 2 A5B2825C57899A5A15EE9703832C8358E0D19EF29DC72DD83C691ED77C33BD7F $ dig +short @127.0.0.53 bbc.co.uk DS (nothing) Quella in mezzo è la zona di questo sito. uk garantisce per lei, l\u0026rsquo;algoritmo 13 è ECDSA P-256, e quindi un resolver che valida può ricondurre ogni risposta che la riguarda fino alla radice. bbc.co.uk non restituisce niente, quindi non può.\nUn comando ti dice se una zona è nella catena di fiducia. Se il genitore non pubblica alcun DS per te, non sei firmato, qualunque altra cosa tu abbia configurato, e un resolver che valida tratterà ogni risposta sul tuo dominio come non verificabile.\nQuel record è l\u0026rsquo;intero test.\nCosa non fa Vale la pena dirlo chiaramente, perché venderlo per più di quello che è spiega metà della diffidenza.\nNon Perché Cifra niente Ogni nome che cerchi resta in chiaro. A quello serve DNS over TLS, e non sono intercambiabili Rende sicura una zona compromessa Un attaccante che controlla la gestione del tuo DNS firma i suoi falsi con la tua chiave, senza problemi Protegge l\u0026rsquo;ultimo tratto Tra un resolver che valida e l\u0026rsquo;applicazione, a meno che anche quel tratto sia fidato Impedisce che un nome ti venga tolto Un registrar o un tribunale possono ancora farlo, e la firma resterà perfettamente valida Dice qualcosa sul contenuto Una risposta firmata è autentica, non onesta. Anche il malware può firmare la sua zona, e lo fa Su quell\u0026rsquo;ultima riga la gente inciampa. DNSSEC dimostra che la risposta viene da chi controlla la zona. Non ha la minima opinione sul fatto che sia una persona per bene.\nFa esattamente una cosa. Rende la falsificazione di una risposta aritmeticamente impraticabile, invece che soltanto improbabile.\nCome controllare qualsiasi zona, anche quella degli altri Questa è la parte che rende possibile il resto dell\u0026rsquo;articolo, e basta un comando.\nUna zona è nella catena di fiducia se il suo genitore pubblica un DS per lei. È l\u0026rsquo;intero test, e puoi farlo su chiunque, senza permesso, da qualsiasi macchina:\ndig +short damiendye.uk DS Se torna qualcosa, è firmata. Se non torna niente, non lo è, qualunque altra cosa abbia configurato la zona.\nSe vuoi più di un sì o un no, ce ne sono altri tre che vale la pena conoscere:\nComando Ti dice dig +short \u0026lt;zone\u0026gt; DS Se il genitore garantisce per questa zona delv @1.1.1.1 \u0026lt;zone\u0026gt; A Se la catena si valida da un capo all\u0026rsquo;altro, e se no, dove si rompe resolvectl query \u0026lt;zone\u0026gt; Cosa conclude un resolver che valida, con il verdetto scritto per esteso dig +dnssec \u0026lt;zone\u0026gt; SOA L\u0026rsquo;RRSIG e la sua data di scadenza, che è la cosa da monitorare Due trappole da conoscere prima di fidarti dei tuoi risultati, perché ci sono cascato in entrambe mentre misuravo per questo articolo.\ndig +short … DS stampa una catena di CNAME se il nome è un alias, e un hostname con delle cifre somiglia abbastanza a un record DS da ingannare uno script ingenuo. Un vero DS ha quattro campi: key tag, algoritmo, tipo di digest, digest esadecimale. Controlla quella forma, o conterai come firmate zone che non lo sono.\nUn DS sotto un genitore non firmato non significa niente. La catena deve arrivare alla radice. update.microsoft.com ha un DS, e microsoft.com no, quindi il ramo è comunque non verificabile. Controlla sempre tutto il percorso, non un solo livello.\nTutto quello che è contato nel resto dell\u0026rsquo;articolo è stato misurato così. Nessuno scanner, nessuna dashboard di terzi, nessuna classifica di un vendor. Chiedi al genitore se garantisce per il figlio, e pretendi che la risposta si legga come un DS.\nLa zona radice è finita Ecco dove il sapere comune è semplicemente superato. Si parla ancora di DNSSEC come se il problema fosse l\u0026rsquo;infrastruttura.\nHo scaricato la zona radice live il 27 settembre 2026, seriale 2026092701, e ho contato le deleghe rispetto ai record DS.4\ndeleghe firmate quota gTLD (.com, .org, .dev, tutti) 1.038 1.038 100% TLD IDN 151 136 90,1% ccTLD 248 176 71,0% arpa 1 1 100% Totale 1.438 1.351 93,9% Ogni singolo dominio generico di primo livello è firmato. Tutti i 1.038, nessuna eccezione, perché il Registry Agreement di ICANN lo impone a tutto ciò che è delegato nel programma dei nuovi gTLD. Gli 87 non firmati sono quasi tutti codici nazionali, e l\u0026rsquo;elenco è fatto soprattutto di piccoli territori e di una manciata di stati:\nae ao aq ba bb bo bs cd cf cg ck cu cv cw do eg fk gb gf gh gm gp gq gt gu hm im iq jm jo kh km kn kp mh mk mo mp mq mt mv mw mz ne ni np nr om pa pf pk pn ps qa sd sl sm so st sv sy sz td tg tj tk to va vg vi ye zw C\u0026rsquo;è gb, che è una curiosità più che un problema, visto che nessuno lo usa per niente. Ci sono il Vaticano, la Corea del Nord, Cuba e la Siria. C\u0026rsquo;è tk, che per anni è stato la più grande fonte di domini gratuiti di internet, e con essa una fonte affidabile di abusi.\nQuindi la cima dell\u0026rsquo;albero è fatta. I registry hanno fatto la parte difficile, quella costosa e quella che richiedeva coordinamento internazionale, e l\u0026rsquo;hanno finita. Per questo, niente di quello che c\u0026rsquo;è sotto può essere imputato all\u0026rsquo;infrastruttura.\nNovantaquattro per cento in cima, uno e mezzo in fondo LA CATENA È COSTRUITA la radice firmata dal 2010 1.351 TLD su 1.438 ogni gTLD, senza eccezioni il nome che la gente digita davvero e qui si ferma QUOTA FIRMATA, CONTATA IL 27 SETTEMBRE 2026 TLD nella radice 93,9% Distribuzioni Linux e BSD 20% Banche del Regno Unito 13% Registry di pacchetti 18% Zone Microsoft 15% Autorità di certificazione 11% ogni dominio gov.uk 1,63% 39 firmati, dei 2.390 del registro ufficiale che ancora risolvono Contato, non stimato. La catena è costruita fino al TLD e poi nessuno la usa E poi si ferma di colpo Sotto il TLD, il quadro si capovolge del tutto.\nHo misurato allo stesso modo ogni insieme qui sotto: chiedere al genitore un DS, e accettare solo un record che si legga davvero come tale. Tutto è stato contato il 27 settembre 2026.\nCosa Firmati Quota TLD nella zona radice 1.351 / 1.438 93,9% Distribuzioni Linux e BSD 19 / 96 20% Banche e building society del Regno Unito 13 / 98 13% Registry di pacchetti e supply chain 4 / 22 18% Zone di Microsoft 4 / 26 15% Autorità di certificazione 1 / 9 11% Ogni dominio gov.uk che ancora risolve 39 / 2.390 1,63% Novantaquattro per cento in cima. Uno e mezzo per cento in fondo. La catena di fiducia è una catena con un capo imbullonato al muro e l\u0026rsquo;altro buttato per terra.\nUna nota sul metodo, perché un numero così brutto se la merita. La riga gov.uk è un censimento e non un campione: è ogni dominio di secondo livello nel registro pubblicato dal governo stesso, filtrato ai 2.390 che ancora risolvono. Le altre righe sono elenchi scelti delle organizzazioni la cui falsificazione farebbe davvero male, il che è una questione di giudizio, e qui sotto ho elencato ogni nome così puoi contestare le mie scelte e non la mia aritmetica.\nIl censimento del governo: 39 su 2.390 L\u0026rsquo;elenco ufficiale dei domini gov.uk pubblicato dal governo conta 3.004 nomi di secondo livello. Di questi, 2.390 ancora risolvono. Trentanove sono firmati.\nPrima dei dettagli, una cosa su quel registro. La versione più recente pubblicata da gov.uk è datata 1 ottobre 2016.5 Dieci anni, per l\u0026rsquo;elenco ufficiale dei domini su cui risponde lo Stato britannico. È una piccola scoperta a sé, e la lascio lì.\nOra guarda quali sono i trentanove.\nFirmati Non firmati mi6.gov.uk, sis.gov.uk gchq.gov.uk, mi5.gov.uk nationalcrimeagency.gov.uk ncsc.gov.uk, cyberessentials.ncsc.gov.uk cheltenham.gov.uk, cotswold.gov.uk, somerset.gov.uk, waverley.gov.uk, southribble.gov.uk, sedgemoor.gov.uk, fdean.gov.uk, westoxon.gov.uk birmingham.gov.uk, manchester.gov.uk, leeds.gov.uk, glasgow.gov.uk, sheffield.gov.uk, liverpool.gov.uk, bristol.gov.uk, cardiff.gov.uk, edinburgh.gov.uk, belfast.gov.uk peakdistrict.gov.uk, snowdonia-npa.gov.uk, eryri-npa.gov.uk hmrc.gov.uk, dvla.gov.uk, dwp.gov.uk, nhs.uk, homeoffice.gov.uk, mod.uk, parliament.uk nove consigli parrocchiali e cittadini companieshouse.gov.uk, landregistry.gov.uk, police.uk, met.police.uk, tfl.gov.uk, ons.gov.uk Rileggi la prima colonna. Il Secret Intelligence Service ha firmato la sua zona. Il National Cyber Security Centre no.\nNeanche il GCHQ, che è l\u0026rsquo;organizzazione madre dell\u0026rsquo;NCSC. Neanche lo schema Cyber Essentials, che esiste per certificare che la sicurezza degli altri sia adeguata. Non farò finta che sia qualcosa di diverso da notevole.\nE nove dei trentanove sono consigli parrocchiali e cittadini. Abinger. Aldenham. Ashmansworth. Wheathampstead. Frampton on Severn. Posti con un segretario, un sito web part-time e un bilancio che non coprirebbe un giorno di consulenza a Whitehall. Ce l\u0026rsquo;hanno fatta. HMRC, che custodisce la posizione fiscale di ogni adulto del paese, no.\nPosso chiedere cosa, nel processo, permette tutto questo? Non chi: cosa. Perché l\u0026rsquo;NCSC pubblica linee guida che dicono agli altri di adottare DNSSEC, e l\u0026rsquo;ente che scrive le linee guida non ha fatto quello che le linee guida dicono. O è importante, e allora l\u0026rsquo;ente che lo dice avrebbe dovuto farlo anni fa, o non lo è, e allora le linee guida dovrebbero dire quello.\nLa scusa che verrà offerta sarà la scala e l\u0026rsquo;eredità del passato. Non sopravvive alla prima colonna. somerset.gov.uk è un\u0026rsquo;autorità unitaria che serve 580.000 persone ed è firmata. birmingham.gov.uk è un\u0026rsquo;autorità unitaria che ne serve 1,1 milioni e non lo è. Stesso paese, stesso registry, stessi registrar, stessi soldi disponibili per gli stessi fornitori. Una l\u0026rsquo;ha fatto.\nIl software da cui aggiorni Questa è la parte che dovrebbe preoccuparti più delle banche, ed è quella che quasi nessuno misura.\nOgni macchina che gestisci scarica codice da qualche parte a orari stabiliti, e trova quel posto chiedendo al DNS.\nNovantanove distribuzioni e BSD, novantasei delle quali ancora risolvono. Diciannove sono firmate.\nFirmate (19) debian.org, fedoraproject.org, opensuse.org, gentoo.org, almalinux.org, artixlinux.org, cachyos.org, garudalinux.org, getsol.us, linuxmint.com, q4os.org, system76.com, tails.net, whonix.org, freebsd.org, netbsd.org, hardenedbsd.org, midnightbsd.org, opnsense.org Le grandi commerciali ubuntu.com, canonical.com, redhat.com, suse.com, oracle.com, rockylinux.org, centos.org, eurolinux.com Varianti di Ubuntu kubuntu.org, xubuntu.org, lubuntu.me, ubuntustudio.com, ubuntukylin.com Famiglia Arch archlinux.org, arcolinux.com, endeavouros.com, manjaro.org, blackarch.org Indipendenti e minimali alpinelinux.org, voidlinux.org, nixos.org, devuan.org, slackware.com, antixlinux.com, mxlinux.org, puppylinux.com, tinycorelinux.net, slitaz.org, porteus.org, funtoo.org, calculate-linux.org Orientate al desktop zorin.com, elementary.io, deepin.org, uniontech.com, bodhilinux.com, peppermintos.com, sparkylinux.org, neon.kde.org, nobaraproject.org, ultramarine-linux.org, vanillaos.org, solus-project.com Sicurezza e privacy kali.org, parrotsec.org, qubes-os.org, backbox.org, pentoo.ch, trisquel.info, pureos.net, hyperbola.info, dragora.org Regionali e statali altlinux.org, astralinux.ru, rosa.ru, openkylin.top, openeuler.org, opencloudos.org, openanolis.cn, mageia.org, openmandriva.org, pclinuxos.com Embedded, immutabili, appliance openwrt.org, dd-wrt.com, librecmc.org, raspberrypi.com, armbian.com, flatcar.org, talos.dev, bottlerocket.dev, truenas.com, pfsense.org BSD openbsd.org, dragonflybsd.org, ghostbsd.org E le due che contano di più kernel.org, gnu.org Diciannove su novantasei. E i nomi nell\u0026rsquo;elenco dei non firmati non sono oscuri: Ubuntu, Red Hat, SUSE, Oracle, Arch, Alpine, NixOS, Rocky, ogni variante di Ubuntu, e sia kernel.org sia gnu.org.\nLe distribuzioni dedicate a sicurezza e privacy sono quelle che mi aspettavo diverse, e per lo più non lo sono. Tails e Whonix hanno firmato, e torna. Kali, Parrot, Qubes, Trisquel e PureOS no, e non torna. OpenBSD si è costruita una reputazione di venticinque anni proprio sul fare bene questo genere di cose e non ha firmato openbsd.org, mentre FreeBSD, NetBSD, HardenedBSD e MidnightBSD sì.\nI registry di pacchetti sono quasi un en plein nella colonna sbagliata: npm, crates.io, RubyGems, Packagist, Docker Hub e Quay non sono firmati. pypi.org è l\u0026rsquo;eccezione, e va riconosciuto, perché è anche tra i più attaccati.\nMicrosoft, e il canale degli aggiornamenti Quattro zone Microsoft su ventisei sono firmate, e stanno tutte in un angolo della proprietà:\nFirmate Non firmate live.com, outlook.com, office.com, office365.com microsoft.com, windows.com, windowsupdate.com, update.microsoft.com azure.com, azurewebsites.net, microsoftonline.com, windows.net github.com, npmjs.com, linkedin.com, visualstudio.com, xbox.com, bing.com I nomi di Outlook e Office sono firmati e nient\u0026rsquo;altro, il che sembra la decisione di un team più che di un\u0026rsquo;azienda. Nota cosa c\u0026rsquo;è nella colonna di destra accanto al servizio di aggiornamento: github.com e npmjs.com, due dei più grandi punti di distribuzione del codice su internet, entrambi di proprietà di Microsoft, entrambi non firmati.\n$ dig +short @127.0.0.53 windowsupdate.com DS (nothing) $ dig +short @127.0.0.53 microsoft.com DS (nothing) $ dig +short @127.0.0.53 com DS 19718 13 2 8ACBB0CD28F41250A80A491389424... com è firmato, quindi tecnicamente non c\u0026rsquo;è nessun ostacolo. Microsoft potrebbe pubblicare un DS questo pomeriggio.\nLa risposta di rito sul perché non conti è che il DNS è solo uno strato. I pacchetti di aggiornamento sono firmati, il client controlla la firma, e il traffico passa in TLS. Rompi il DNS e comunque non riesci a far eseguire codice.\nQuella risposta dipende interamente dalla solidità della firma. Non lo è stata.\nQuando Cosa è successo alla fiducia nelle firme di Microsoft 2012 Flame ha falsificato un certificato che risaliva alla Microsoft Root Authority usando una collisione MD5 contro il percorso di registrazione delle licenze di Terminal Services, poi l\u0026rsquo;ha usato su un falso server di aggiornamento6 2021 Netfilter è diventato il primo rootkit trovato con una firma WHQL rilasciata direttamente da Microsoft, dopo aver superato il Windows Hardware Compatibility Program mentre parlava con un server di comando e controllo7 2021 FiveSys, un altro driver certificato WHQL, si è rivelato un rootkit che installava un proprio certificato radice e faceva da proxy al traffico HTTP e HTTPS della macchina7 2022 Driver malevoli firmati da Microsoft sono comparsi in attacchi ransomware, e Microsoft ha revocato le firme e sospeso gli account degli sviluppatori7 2023 Storm-0558 ha ottenuto una chiave di firma consumer di Microsoft da un crash dump, dopo aver compromesso l\u0026rsquo;account di un ingegnere, e ha falsificato token di autenticazione accettati per la posta aziendale di circa 25 organizzazioni, tra cui agenzie governative8 Precisione su quell\u0026rsquo;ultima riga, perché la si esagera spesso. La chiave rubata firmava token di identità, non binari. Sta nella tabella per un altro motivo: la custodia del materiale di firma di Microsoft ha fallito, senza essere scoperta per due anni, passando per un crash dump e un account di ingegnere compromesso.\nLe righe sopra sono i fallimenti della firma del codice, e sono peggio. Due volte in un anno, il programma di certificazione hardware di Microsoft ha messo una firma Microsoft su un rootkit funzionante e l\u0026rsquo;ha distribuito. Non un certificato falso, non una chiave rubata. Il processo legittimo, che firmava malware, esattamente come progettato.\nQuindi la difesa che ti permette di considerare il DNS facoltativo è stata aggirata con la falsificazione, con l\u0026rsquo;abuso del processo e con il furto di chiavi, nell\u0026rsquo;arco di undici anni. Un attaccante con una firma che la macchina accetta non è un esperimento mentale. Per un attore sostenuto da uno Stato è un problema di acquisti, non di ricerca.\nDai a quell\u0026rsquo;attaccante una risposta DNS falsa e il quadro è completo: codice firmato che controlla lui, consegnato da un server che la macchina crede di Microsoft, su una connessione che niente nello stack metterà in discussione. È Flame, con materiale di chiavi migliore.\nDNSSEC è l\u0026rsquo;unico strato di quella catena a cui non interessa di chi sia la chiave di firma in mano all\u0026rsquo;attaccante. Non valida il pacchetto, valida dove è stata mandata la macchina, e fallisce indipendentemente da ogni certificato e firma in gioco. Che è esattamente ciò che vuoi da un secondo strato, ed esattamente il motivo per cui non dovrebbe essere quello spento.\nE c\u0026rsquo;è un attacco più economico che non richiede alcuna chiave. Falsifica la risposta in modo che il servizio di aggiornamento risolva verso un posto inutile, e la macchina semplicemente non si aggiorna mai. Nessun errore su cui l\u0026rsquo;utente agirà, nessun allarme, solo una flotta che resta indietro in silenzio mentre la dashboard dice che va tutto bene. Se volessi un parco macchine pronto da sfruttare tra sei mesi, non ci spingerei niente. Farei solo in modo che non arrivi niente.\nLe banche, al completo Stavolta non un campione. Novantotto banche e building society del Regno Unito, tutte risolvibili quel giorno, dalle grandi catene fino a società con una sola filiale e un nome vittoriano.\nTredici sono firmate.\nFirmate (13) lloydsbank.com, halifax.co.uk, bankofscotland.co.uk, tsb.co.uk, co-operativebank.co.uk, smile.co.uk, monzo.com, aldermore.co.uk, hampshiretrustbank.co.uk, investec.com, handelsbanken.co.uk, allica.bank, weatherbys.bank Grandi catene, non firmate hsbc.co.uk, firstdirect.com, barclays.co.uk, natwest.com, rbs.co.uk, ulsterbank.co.uk, santander.co.uk, nationwide.co.uk, virginmoney.com, clydesdalebank.co.uk, metrobankonline.co.uk, bankofireland.co.uk, aibgb.co.uk, danskebank.co.uk Digitali e challenger, non firmate starlingbank.com, revolut.com, chase.co.uk, marcus.co.uk, atombank.co.uk, zopa.com, tandem.co.uk, kroo.com, monese.com, cashplus.com, anna.money, mettle.co.uk Della grande distribuzione, non firmate tescobank.com, sainsburysbank.co.uk, marksandspencer.com, johnlewisfinance.com PMI e specializzate, non firmate shawbrook.co.uk, paragonbank.co.uk, oaknorth.co.uk, recognisebank.co.uk, redwoodbank.co.uk, ccbank.co.uk, closebrothers.com, unitedtrustbank.co.uk, gbbank.co.uk, cynergybank.co.uk, securetrustbank.com Banche private, non firmate coutts.com, hoaresbank.co.uk, arbuthnotlatham.co.uk, rathbones.com, brownshipley.com, butterfieldgroup.com Building society, non firmate ognuna di quelle testate: coventrybuildingsociety.co.uk, ybs.co.uk, skipton.co.uk, leedsbuildingsociety.co.uk, principality.co.uk, westbrom.co.uk, newcastle.co.uk, thenottingham.com, cumberland.co.uk, progressivebs.co.uk, saffronbs.co.uk, newburybs.co.uk, monbs.com, furnessbs.co.uk, ipswichbuildingsociety.co.uk, leekbs.co.uk, theloughborough.co.uk, mansfieldbs.co.uk, marsdenbs.co.uk, themelton.co.uk, familybuildingsociety.co.uk, penrithbs.co.uk, scottishbs.co.uk, srbs.co.uk, swansea-bs.co.uk, teachersbs.co.uk, thetipton.co.uk, thevernon.co.uk, beverleybs.co.uk, chorleybs.co.uk, dudleybuildingsociety.co.uk, esbs.co.uk, ecology.co.uk, harpendenbs.co.uk, hrbs.co.uk, darlington.co.uk, hanley.co.uk, bathbuildingsociety.co.uk Trentotto building society. Nessuna firmata. Sono le istituzioni che hanno il mutuo su moltissime case.\nDue schemi spiccano nella colonna dei firmati. Lloyds Banking Group ha firmato tre dei suoi marchi, lloydsbank.com, halifax.co.uk e bankofscotland.co.uk, e la Co-operative Bank li ha firmati entrambi. Quindi la decisione si prende una volta, a livello di organizzazione, e poi si applica. Nessun ostacolo dominio per dominio.\nE Monzo ha firmato mentre Starling no. Due banche challenger fondate a un anno di distanza, su infrastrutture moderne comparabili, con lo stesso regolatore e gli stessi registrar a disposizione. Una l\u0026rsquo;ha fatto.\nL\u0026rsquo;unico posto dove lo fanno tutti Guarda gli ultimi due nomi della colonna dei firmati: allica.bank e weatherbys.bank.\n.bank è un dominio di primo livello riservato gestito da fTLD Registry Services, e i suoi requisiti di sicurezza rendono DNSSEC obbligatorio, insieme a TLS e all\u0026rsquo;autenticazione della posta, con una riverifica annuale di ogni registrante.9\nLe stesse istituzioni, due regimi Firmate Su un dominio normale, dove DNSSEC è facoltativo 13 su 98 Su .bank, dove è obbligatorio e ricontrollato ogni anno entrambe Due è un numero piccolo, quindi prendilo come una dimostrazione e non come una statistica. Il requisito resta comunque l\u0026rsquo;unica cosa cambiata.\nÈ la risposta a ogni scusa più avanti in questo articolo, e arriva prima delle scuse. Le stesse banche, gli stessi fornitori, gli stessi budget e le stesse competenze producono il 13% di conformità quando è facoltativo e il 100% quando qualcuno controlla ogni anno. Niente di tecnico si è mosso. Qualcuno ha semplicemente chiesto.\nNessuno controlla i controllori Un\u0026rsquo;autorità di certificazione su nove.\nFirmate Non firmate entrust.com letsencrypt.org, digicert.com, sectigo.com, globalsign.com, identrust.com, buypass.com, zerossl.com, certum.eu Sono le organizzazioni il cui intero mestiere è dimostrare che qualcosa è ciò che dice di essere. Sono anche le organizzazioni che verificano il controllo di un dominio tramite il DNS, chiedendoti di pubblicare un record e poi cercandolo. La ricerca che decide se ottieni un certificato per un dominio è, in otto casi su nove, una ricerca che nessuno può verificare.\nNon è un\u0026rsquo;ipotesi. È lo schema documentato: falsifica la ricerca di validazione, fatti rilasciare il certificato, e ora hai documenti validi per un nome che non possiedi. DNSSEC è una delle poche cose che lo rende materialmente più difficile, e chi ne verrebbe protetto di più non l\u0026rsquo;ha adottato.\nTe lo dico gratis. Se il tuo modello di business è l\u0026rsquo;identità e non hai firmato la tua zona, l\u0026rsquo;argomento che sia difficile non è a tua disposizione.\nE chi sta davvero controllando? Firmare è solo metà della storia. Una zona firmata non protegge nessuno se dall\u0026rsquo;altra parte niente verifica la firma, ed è qui che il quadro peggiora invece di migliorare.\nLa validazione può avvenire in due posti, e non sono equivalenti:\nValidare nel resolver lascia un tratto non autenticato. Validare sul dispositivo no DUE POSTI DOVE CONTROLLARE LA PROVA, E NON SONO LA STESSA COSA Validazione nel resolver la tua applicazione crede al bit un bit AD non autenticato il resolver controlla le firme catena verificata la zona firmata RRSIG e DS Ricevi il verdetto, non la prova, proprio sul tratto di cui tutto questo esiste per non fidarsi. Validazione sul dispositivo la tua applicazione le controlla da sola catena verificata da capo a capo, dove la risposta viene usata la zona firmata RRSIG e DS Niente nel mezzo può mentirti, perché a niente nel mezzo viene chiesto. Quasi tutta la validazione al mondo è quella in alto. Windows non può fare quella in basso a nessuna impostazione. Uno ti consegna un verdetto. L\u0026rsquo;altro ti consegna la prova Quasi tutta la validazione al mondo è del primo tipo. Google, Cloudflare e Quad9 validano tutti, e insieme coprono un numero enorme di utenti. Vale qualcosa. Ma significa che la proprietà che ha la maggior parte delle persone è il mio resolver dice che andava bene.\nCosa sa fare ogni sistema operativo Valida sul dispositivo Predefinito Come ottenerlo Linux con systemd-resolved Sì, del tutto disattivato una riga in un drop-in Linux con unbound o knot-resolver locale Sì, del tutto n/d installalo, punta lo stub verso di lui FreeBSD con local_unbound Sì, del tutto disattivato service local_unbound onestart macOS Ventura e successivi, iOS 16 e successivi Sì disattivato per app o per richiesta, nel codice macOS e iOS precedenti solo API disattivato kDNSServiceFlagsValidate, l\u0026rsquo;app deve chiederlo Android non offerto dalla piattaforma n/d una libreria di terzi, nella tua app Fisher-Price OS (Windows) No. Non può n/d non disponibile a nessun prezzo Due di queste meritano più di una riga.\nApple ha fatto il lavoro in silenzio. iOS 16 e macOS Ventura hanno aggiunto la validazione DNSSEC lato client, con le parole di Apple al WWDC 2022: «iOS 16 and macOS Ventura now support client side DNSSEC validation.»10 È opt-in e non automatica, ma è opt-in alla granularità giusta, così un\u0026rsquo;applicazione a cui importa può chiederla per sessione o per richiesta:\nlet configuration = URLSessionConfiguration.default configuration.requiresDNSSECValidation = true Un vero resolver che valida su un telefono, controllando le firme sul dispositivo, e quasi nessuno l\u0026rsquo;ha visto arrivare. Prima di allora, mDNSResponder esponeva kDNSServiceFlagsValidate per chi fosse disposto a usare l\u0026rsquo;API C.\nAndroid non lo offre. Il resolver DNS è un modulo aggiornabile da Android 10 e ha ottenuto DNS over TLS in Android 9, quindi la piattaforma non è rimasta ferma sul DNS. Ma né la documentazione del resolver AOSP né l\u0026rsquo;API pubblica DnsResolver documentano la validazione DNSSEC, e il motivo per cui librerie come MiniDNS esistono e promettono di portare «DNSSEC close to your application» è che la piattaforma non lo porta. Non ho trovato una fonte primaria che dica in modo netto che sia impossibile, quindi non mi spingo oltre: non offerto, e dovresti scrivertelo da solo.\nE viene scartata anche dove funziona Un\u0026rsquo;altra cosa, da questa macchina, che non mi aspettavo di trovare.\nIl resolver a monte qui valida e lo dice. systemd-resolved, con DNSSEC=no, lo butta via prima che qualsiasi applicazione lo veda:\n# ---- before: stock Fedora, DNSSEC=no ---------------------------------- $ dig @192.0.2.53 damiendye.uk A | grep flags # the upstream ;; flags: qr rd ra ad $ dig @127.0.0.53 damiendye.uk A | grep flags # the local stub ;; flags: qr rd ra # ---- the fix: two lines in a drop-in ---------------------------------- $ sudo mkdir -p /etc/systemd/resolved.conf.d $ printf \u0026#39;[Resolve]\\nDNSSEC=allow-downgrade\\n\u0026#39; \\ | sudo tee /etc/systemd/resolved.conf.d/10-dnssec.conf $ sudo systemctl restart systemd-resolved # ---- after: same query, same stub, nothing else changed --------------- $ resolvectl status | grep -m1 DNSSEC= DNSSEC=allow-downgrade/supported $ dig @127.0.0.53 damiendye.uk A | grep flags ;; flags: qr rd ra ad Stesso nome, stessa risposta, stesso secondo. Prima del drop-in il resolver a monte faceva il lavoro, impostava il bit AD, e il demone locale lo lasciava cadere per terra, quindi il comportamento predefinito non è solo qui non validiamo, è qui non validiamo, e non passeremo il verdetto di chi l\u0026rsquo;ha fatto. Dopo, il bit è tornato e stavolta è nostro e non l\u0026rsquo;affermazione di qualcun altro.\nresolvectl mette il verdetto in parole, e separa i due che contano:\n$ resolvectl query damiendye.uk | tail -2 -- Data is authenticated: yes; Data was acquired via local or encrypted transport: no $ resolvectl query ncsc.gov.uk | tail -2 -- Data is authenticated: no; Data was acquired via local or encrypted transport: no Nota cosa non è il secondo. Non è un errore. Una zona non firmata torna non autenticata invece che bogus, la risoluzione riesce, e niente da nessuna parte si lamenta. È l\u0026rsquo;intero problema dell'1,63% riscritto come comando: attivare la validazione non fa fallire le zone non firmate, le rende visibili, e solo a chi va a cercarle.\nIl sistema operativo client più diffuso fallisce il controllo più elementare Ora l\u0026rsquo;altro capo della scala, e non c\u0026rsquo;è partita.\nIl client DNS di Windows è, nella descrizione stessa di Microsoft, «security-aware» ma «non-validating». Non esegue la validazione DNSSEC. Non può essere fatto per farla. Quello che fa invece è chiedere al server DNS configurato di validare, e poi cercare il bit AD nella risposta.11\nTre cose al riguardo, e nessuna è piccola:\nNon controlla mai una firma. La garanzia più forte disponibile per il sistema operativo client più diffuso al mondo è un singolo bit impostato da qualunque macchina abbia risposto. Di default non fa nemmeno quello. Il client imposta il bit DO e richiede AD solo per i namespace elencati nella Name Resolution Policy Table, un oggetto di Group Policy che qualcuno deve configurare deliberatamente. Senza una regola, la query non porta alcuna aspettativa DNSSEC. Microsoft dice che il bit ha bisogno di IPsec per significare qualcosa. La sua documentazione è esplicita: poiché il client non valida e si appoggia al server, «IPsec is used to establish this trust relationship». Un bit AD che arriva su un collegamento non autenticato è un\u0026rsquo;affermazione di chiunque sia arrivato per primo, che è esattamente l\u0026rsquo;attacco che tutta questa tecnologia esiste per fermare. Quindi sul desktop con la base installata più grande, appena installato: nessuna validazione, nessun requisito AD, e nessun canale autenticato verso il resolver. Il controllo più elementare non è soltanto spento. Non è mai stato implementato.\nE la solita difesa, che i sistemi operativi client semplicemente non fanno questo genere di cose, è morta nel 2022. Apple ha portato la validazione sul dispositivo a ogni iPhone e Mac nello stesso anno in cui Microsoft non l\u0026rsquo;ha fatto. Il confronto non è più desktop contro server, o mobile contro fisso. È un vendor che l\u0026rsquo;ha costruita contro un altro che no.\nConta più dello stesso vuoto su Linux, per via di chi ne è colpito. Un server Linux di solito lo gestisce qualcuno che potrebbe attivare la validazione questo pomeriggio e sa cos\u0026rsquo;è un record DS. Le macchine che non possono validare affatto, a nessuna impostazione, sono quelle sulle scrivanie delle organizzazioni le cui zone risultano non firmate nelle tabelle sopra. systemd-resolved arriva con la funzione spenta, che è una decisione che puoi invertire con una riga.12 Il Fisher-Price OS (Windows) arriva senza la funzione.\nIl servizio che sta in piedi grazie al DNS Finora si è parlato di nomi su internet pubblico. Lo stesso buco esiste dentro l\u0026rsquo;edificio, e lì regge il peso.\nActive Directory non ha un indirizzo fisso per niente. Una macchina unita al dominio non sa dove sta il suo domain controller, quindi lo chiede al DNS. Il processo di localizzazione interroga _ldap._tcp.dc._msdcs.\u0026lt;domain\u0026gt; per i controller e _kerberos._tcp per il KDC, e qualunque cosa torni è ciò contro cui va ad autenticarsi.13\ndig +short _ldap._tcp.dc._msdcs.corp.example SRV Falsifica quella risposta e la macchina porta il suo traffico di autenticazione a un host scelto da te. Siamo onesti su cosa sia e cosa no: Kerberos non darà un ticket a un impostore che non ha le chiavi, quindi da solo non è una presa di controllo del dominio. È una posizione nel percorso, che è il materiale con cui si costruiscono gli attacchi interessanti. Forza il ripiego su NTLM e fanne il relay. Mettiti in mezzo al traffico che doveva andare a un controller. Oppure punta l\u0026rsquo;intero parco macchine verso il nulla e guarda gli accessi fermarsi.\nUn record di localizzazione falso non consegna il dominio, mette l'attaccante nel percorso DOV'È IL MIO DOMAIN CONTROLLER? LA RISPOSTA È SOLO UN RECORD DNS Zona `_msdcs` non firmata server membro _ldap._tcp.dc SRV vince la prima risposta un host scelto da loro ora nel percorso ripiego su NTLM, relay, o niente accessi Kerberos non rilascia ticket a un impostore, quindi non è una presa del dominio. È una posizione. Zona firmata, client che valida server membro controlla la firma falso scartato il tuo controller la risposta firmata Respinto prima che qualcosa tenti di autenticarsi. Windows Server può firmare questa zona e lo può fare dal 2012. Il client che la legge non può ancora validarla. Non una presa di controllo del dominio. Una posizione nel percorso, che è ciò su cui si costruisce il resto Group Policy, script di logon, unità mappate e ogni rapporto di fiducia a valle del logon si trovano tutti allo stesso modo. È l\u0026rsquo;insieme di nomi di maggior valore che la maggior parte delle organizzazioni possiede, ed è lì, non firmato.\nMicrosoft ha costruito la metà server della soluzione, e l\u0026rsquo;ha costruita bene. Una zona integrata in AD può essere firmata, la firma online delle zone dinamiche è arrivata con Windows Server 2012, e poiché la zona vive nella directory le chiavi private di firma si replicano agli altri server DNS attraverso la replica di AD stessa.14 La parte davvero scomoda di DNSSEC, portare le chiavi alle macchine che ne hanno bisogno, qui è stata risolta quattordici anni fa da ciò attraverso cui la zona già si replicava.\nPoi si ferma negli stessi due punti di tutto il resto:\nLe due metà Cosa ha distribuito Microsoft Cosa ottieni appena installato Firmare la zona _msdcs firma online delle zone dinamiche integrate in AD, chiavi replicate da AD stessa niente, finché un amministratore non la firma Controllare la firma il client che non valida della sezione precedente una regola nella policy table più IPsec, o il bit non significa niente Quindi la zona interna che decide quale macchina può essere il tuo domain controller è, nella maggior parte dei casi, non firmata esattamente quanto quella pubblica. La differenza è che nessun esterno può contarla, quindi in questo articolo non c\u0026rsquo;è una tabella che metta in imbarazzo qualcuno. Vai a guardare la tua prima di dare per scontato.\nLo dovrebbe fare il sistema operativo, e dovrebbe essere attivo Il che mi porta alla parte che voglio argomentare invece che contare.\nValidare una risposta DNS è lavoro da sistema operativo. Sta nella stessa categoria del tenere giusto l\u0026rsquo;orologio, avere un archivio di certificati fidati e uno stack TLS, e per le stesse ragioni: ogni applicazione ne ha bisogno, quasi nessuna dovrebbe scriverselo, e il controllo va fatto una volta, in un posto dove si può fare come si deve. Per i certificati abbiamo chiuso questa discussione molto tempo fa. Nessuno distribuisce un client di posta con una sua opinione privata sulle CA radice.\nTre delle quattro piattaforme sopra lo sanno già fare. Nessuna lo fa appena installata:\n$ grep DNSSEC= /usr/lib/systemd/resolved.conf # Fedora 44, systemd 259.9 #DNSSEC=no Quello è il default compilato, scritto commentato perché un amministratore veda cos\u0026rsquo;è. Il manuale di systemd la pensa diversamente, e raccomanda allow-downgrade in generale e true ovunque si possa contare sul resolver a monte.15 Il codice c\u0026rsquo;è, l\u0026rsquo;ancora di fiducia della radice c\u0026rsquo;è, e la documentazione c\u0026rsquo;è e consiglia di attivarlo. Il default dice ancora no.\nPiattaforma Chi deve agire prima che una firma venga controllata systemd-resolved un amministratore, una volta, in un file drop-in macOS 13 e successivi, iOS 16 e successivi l\u0026rsquo;autore di ogni singola applicazione Android l\u0026rsquo;autore di ogni applicazione, con una libreria di terzi Windows nessuno può Quella colonna è l\u0026rsquo;intero problema. Un requisito è una leva, e il conteggio di .bank più sopra mostra cosa fa. Un default è la stessa leva senza che nessuno debba far rispettare niente, perché decide l\u0026rsquo;esito per tutti quelli che non aprono mai il file di configurazione, cioè quasi tutti. Il facoltativo ci ha dato l'1,63% nel governo e il 13% nelle banche. La gente non sceglie una sicurezza che non vede, e avere ragione sulla tecnologia non l\u0026rsquo;ha mai cambiato, nemmeno una volta.\nL\u0026rsquo;obiezione onesta è che validare di default penalizza gli utenti quando a essere rotto è il resolver a monte e non la zona. A questo serve allow-downgrade, ed è un compromesso vero e non gratuito, perché un downgrade è qualcosa che un attaccante può provocare deliberatamente. Anche così, distribuire allow-downgrade invece di un secco no sarebbe un miglioramento enorme, e metterebbe il guasto dove deve stare, su chi nel 2026 fa ancora girare un resolver che non sa gestire DNSSEC.\nAttivare la validazione, e quale parte è di Fedora Quasi tutto quello che segue è di systemd e non di Fedora, e funziona allo stesso modo su Debian, Ubuntu o Arch. Due cose qui sono davvero della distribuzione:\nsystemd upstream Fedora 44, come installata default-dnssec compilato allow-downgrade no File di configurazione principale /usr/lib/systemd/resolved.conf, con ogni default commentato come riferimento distribuisce anche /etc/systemd/resolved.conf con Cache=yes, che lo sostituisce L\u0026rsquo;upstream sceglie allow-downgrade in meson_options.txt, che è l\u0026rsquo;impostazione di compromesso, non quella coraggiosa.16 Fedora lo compila a no e poi distribuisce un secondo file di configurazione principale, e poiché viene usato solo il primo file trovato, quello che documenta i default non è più quello in vigore.15 Quindi non modificare nessuno dei due. La copia del vendor è del pacchetto e un aggiornamento ti restituirà la modifica al mittente; la copia in /etc è un file in cui le altre righe mancano senza dirlo.\nUsa invece un drop-in, che è quello che fa il blocco più sopra. Sovrascrive qualunque file principale abbia vinto, sopravvive agli aggiornamenti dei pacchetti, e contiene solo ciò che hai cambiato. Controlla il risultato con systemd-analyze cat-config systemd/resolved.conf, che stampa ogni file nell\u0026rsquo;ordine in cui viene applicato e chiarisce cosa ha vinto davvero.\nTre impostazioni, e la scelta tra le ultime due è una scelta vera:\nDNSSEC= Cosa fa Cosa ti costa no non valida niente, e scarta anche il verdetto del resolver a monte la falsificazione arriva in silenzio, come oggi allow-downgrade valida, e si fa da parte quando il resolver a monte non ce la fa un attaccante può provocare deliberatamente il passo indietro yes valida, punto, senza ritorno i tuoi nomi se ne vanno con il resolver a monte il giorno che si rompe Parti con allow-downgrade, perché così un resolver rotto non ti costa niente. Passa a yes quando resolvectl status ha detto supported per due settimane e sai cos\u0026rsquo;è davvero il tuo resolver a monte. I dettagli per ogni distribuzione che non è Fedora sono nell\u0026rsquo;articolo su resolved.12\nAllora, cosa sta fermando la gente Bene. I numeri sono i numeri. Perché?\nLe ragioni date sono quattro, e non sono tutte fesserie.\nLa ragione Quanto c\u0026rsquo;è di vero La gestione delle chiavi è difficile Era vero. Ora è in gran parte automatizzata dal provider DNS Può togliere il tuo dominio da internet Vero, ed è quella vera Il supporto di registrar e provider è a macchia di leopardo In gran parte risolto, e facile da verificare prima di impegnarsi Nessun beneficio visibile, nessun obbligo di conformità Vero, e probabilmente decisivo La gestione delle chiavi era un ostacolo vero e per lo più non lo è più. Firmare significava gestire da soli le cerimonie delle chiavi, ricordarsi di rifirmare prima che le firme scadessero, e ruotare le chiavi a mano secondo un calendario da tenere d\u0026rsquo;occhio da soli. Oggi quel lavoro lo fa il provider DNS sulla maggior parte delle piattaforme gestite, e firmare è un interruttore. Non è niente, ma non è più un progetto.\nLa modalità di guasto è l\u0026rsquo;obiezione onesta, ed è l\u0026rsquo;unica delle quattro per cui ho una vera comprensione. Sbaglia DNSSEC e il tuo dominio non si degrada, sparisce. Ogni resolver che valida rifiuta i tuoi record, che è quello che deve fare, e chi non riesce a raggiungerti non può sapere il perché da te, perché dirglielo richiede il DNS.\nTre cose lo rendono peggio di un normale disservizio:\nSi guasta per un orologio, non per una modifica. Le firme hanno una scadenza. Una zona che nessuno tocca da martedì può essere sparita entro domenica perché un job di rifirma ha smesso di girare in silenzio. Si guasta per alcuni e non per altri. Solo i resolver che validano ti rifiutano. Il tuo monitoraggio, se non valida, dirà che il sito sta benissimo mentre una fetta crescente di internet non riesce a raggiungerlo. Si guasta allo strato che usi per sistemare le cose. L\u0026rsquo;accesso remoto, la tua pagina di stato e la tua posta potrebbero stare tutti sotto il nome che è appena sparito. Quella paura è razionale, ha tolto dall\u0026rsquo;aria grandi operatori, e qualsiasi argomentazione onesta a favore di DNSSEC deve farci i conti invece di liquidarla.\nMa nota la sua forma: è la paura di una disciplina operativa che oggi non hai, non la paura della tecnologia.\nIl non firmato fallisce in silenzio sui tuoi utenti. Il configurato male fallisce rumorosamente su di te DUE MODI IN CUI VA MALE, E SE NE PARLA SOLO DI UNO Non firmato Una risposta falsa viene creduta e basta. Niente lo registra. Niente avvisa. Dura quanto il TTL dell'attaccante. Il tuo monitoraggio resta verde. Il costo ricade su chi si è fidato della risposta. Non su di te. Firmato, e rotto Il dominio sparisce del tutto. Fallisce per un orologio, non per una modifica. Solo per i resolver che validano, quindi i tuoi controlli possono sembrare a posto. Il costo ricade su di te, rumorosamente, con il tuo nome sull'incidente. Per questo il secondo ottiene un business case e il primo no. Nessuno viene mai incolpato per un attacco mai rilevato. Il non firmato fallisce in silenzio, sui tuoi utenti. Il configurato male fallisce rumorosamente, su di te E nota chi paga in ciascuna colonna. Una zona non firmata che viene falsificata costa ai tuoi clienti, in silenzio, e nessuno apre mai un incidente perché nessuno lo scopre mai. Una zona firmata che scade costa a te, subito, in pubblico, con il tuo nome sul postmortem. Sono entrambi fallimenti. Solo uno compare negli obiettivi di qualcuno.\nI certificati avevano lo stesso problema e l\u0026rsquo;hanno risolto due volte: il guasto è stato reso visibile, e poi è stato automatizzato. Un avviso del browser ha fatto di un certificato scaduto il problema di tutti, è arrivato il monitoraggio, e poi Let\u0026rsquo;s Encrypt ha reso il rinnovo una cosa che fa un cron job alle tre di notte. Niente di tutto questo ha reso i certificati più facili in linea di principio. Ha reso più difficile dimenticarli.\nIl supporto dei provider merita dieci minuti di verifica invece di supposizioni. Alcuni registrar fanno ancora della pubblicazione di un DS un ticket al supporto. Molti no.\nE l\u0026rsquo;ultima è la risposta vera, che il registry .bank ha già dimostrato più sopra. Per DNSSEC non c\u0026rsquo;è il lucchetto nel browser. Nessun cliente ha mai scelto una banca perché la sua zona era firmata, nessun auditor ti boccia per questo, e nessuna normativa generale nel Regno Unito lo richiede. Il beneficio è del tutto invisibile quando funziona, il costo di sbagliare è un disservizio con il tuo nome sopra, e chi si porta addosso quel disservizio non è chi ne prenderebbe il merito.\nMetti un requisito e un controllo annuale davanti alle stesse istituzioni e la conformità passa dal 13% a tutte, nessuna esclusa. Niente della tecnologia è cambiato tra quei due numeri. Niente dei budget, dei fornitori o delle competenze è cambiato. L\u0026rsquo;unica variabile era se qualcuno sarebbe andato a guardare.\nCon questi incentivi, la cosa sorprendente non è che l'1,63% dei domini governativi sia firmato. È che trentanove lo siano.\nAttivarlo senza toglierti dall\u0026rsquo;aria Tutto il rischio sta in un punto, quindi metti lì lo sforzo. La scadenza delle firme è il guasto che arriva senza che nessuno abbia toccato niente, quindi metti un allarme su quella:\ndig +dnssec damiendye.uk SOA | awk \u0026#39;/RRSIG/ {print \u0026#34;sig expires\u0026#34;, $9}\u0026#39; Trattala come un certificato. Guarda la data, fai scattare l\u0026rsquo;allarme con largo anticipo, e rendi automatico il rinnovo così l\u0026rsquo;allarme è una rete di sicurezza e non una procedura.\nPoi attivalo in un momento tranquillo, su qualcosa che non sia il tuo dominio principale, e lascialo così per due settimane prima di fare quello che conta. Se il tuo DNS sta su una piattaforma gestita, la firma vera e propria è molto probabilmente un interruttore, e l\u0026rsquo;unico passo davvero manuale è depositare il DS presso il tuo registrar.\nÈ lo stesso fallimento di IPv6? È il paragone ovvio, quindi ho misurato entrambi gli standard sulle stesse popolazioni lo stesso giorno. Stesse organizzazioni, stesse persone, due decisioni.\nn DNSSEC firmato IPv6 raggiungibile Banche e building society del Regno Unito 98 13,3% 36,7% Distribuzioni Linux e BSD 96 19,8% 67,7% Ogni dominio gov.uk attivo 2.380 1,6% 31,2% La migrazione difficile batte quella facile, tre a uno e diciannove a uno LE STESSE ORGANIZZAZIONI, ENTRAMBI GLI STANDARD, LO STESSO GIORNO DNSSEC firmato raggiungibile via IPv6 Banche del Regno Unito 98 testate 13,3% 36,7% Linux e BSD 96 testate 19,8% 67,7% Ogni gov.uk attivo 2.380 domini 1,6% 31,2% IPv6 tocca ogni router e host. DNSSEC è un record presso il tuo registrar. Le stesse organizzazioni, entrambi gli standard, misurati lo stesso giorno Diciannove volte più avanti nel governo, sugli stessi domini.\nOra rifletti su quale sia quale. IPv6 tocca ogni router, ogni host e ogni applicazione, e vuole il dual stack in parallelo per anni. Firmare con DNSSEC è un interruttore e un record incollato presso il registrar.\nIl lavoro molto più difficile sta battendo quello facile ovunque abbia guardato. Il che esclude la spiegazione comoda secondo cui gli standard infrastrutturali vanno sempre così, lentamente e controvoglia. DNSSEC non si muove lentamente. Non si muove.\nUna differenza appartiene solo a DNSSEC. Adotta IPv6 e ti torna qualcosa: raggiungibilità, nessun carrier-grade NAT da comprare. Firma la tua zona e personalmente non ci guadagni niente. La protezione va ai tuoi utenti, e solo a quelli dietro un resolver che valida. Ti prendi un rischio permanente di disservizio per conto di persone che non incontrerai mai, ed è una cosa più difficile da mettere davanti a un consiglio di amministrazione di qualsiasi ostacolo tecnico in questo articolo.\nHo scritto altrove la metà IPv6 di questo argomento e non la ripeto qui.17\nÈ che ancora non capiamo il DNS? Quarantadue anni da quando Mockapetris l\u0026rsquo;ha messo per iscritto, nel novembre 1983.18 Sedici da quando la radice è stata firmata.\nCredo che il problema della comprensione sia reale, e credo che sia più specifico del fatto che la gente non sappia come funziona il DNS. Molti ingegneri competenti sanno descrivere benissimo ricorsione, delega e caching. Quello che manca è un passo più in là, ed è il passo che conta.\nQuasi nessuno ha interiorizzato che il DNS è un sistema di autorizzazione.\nViene trattato come un impianto idraulico. Una tabella di ricerca. Qualcosa che trasforma nomi in numeri e appartiene a chi gestisce la rete, archiviato mentalmente accanto al DHCP. E quella cornice è sbagliata in un modo che decide parecchio senza farsi notare, perché in pratica la risposta DNS è ciò che decide verso quale macchina va il tuo traffico, da quale server arrivano i tuoi aggiornamenti, e quale host un\u0026rsquo;autorità di certificazione crede sia tuo. Chi controlla la risposta controlla tutte e tre.\nIl malinteso si vede nello schema di chi ha firmato. Non è il budget, e nemmeno la competenza, e una volta messo in fila è difficile leggerlo come altro che uno schema di cosa ciascuno pensa che il DNS sia:\nChi ha firmato Cos\u0026rsquo;è per loro il DNS Registry e gestori di TLD, il 100% dei gTLD il prodotto stesso Un servizio di intelligence una superficie d\u0026rsquo;attacco, perché il loro modello di minaccia contempla la falsificazione Nove consigli parrocchiali un interruttore offerto dal loro hosting, che qualcuno ha premuto I clienti di un provider DNS un default che hanno ereditato Chi non ha firmato Banche, ministeri, vendor, CA impianto idraulico, un livello sotto i problemi interessanti Chi sta più vicino al DNS come cosa in sé ha firmato tutto. Chi lo consuma come un servizio pubblico no, quasi senza eccezioni, per quante risorse abbia e per quanto si creda attento alla sicurezza. Il GCHQ non ha firmato. Otto autorità di certificazione su nove non hanno firmato. Non sono organizzazioni a corto di persone intelligenti o di modelli di minaccia.\nÈ anche il motivo per cui la risposta del 2008 a Kaminsky fu rendere più difficile l\u0026rsquo;indovinello invece di finire di adottare la cosa che rende l\u0026rsquo;indovinare irrilevante. Rendere più difficile l\u0026rsquo;indovinello è un intervento da idraulico, e come impianto idraulico il settore aveva archiviato il DNS.\nUna generazione ha imparato il DNS come un elenco telefonico, e non ha mai aggiornato la voce quando, in silenzio, è diventato la cosa che decide con chi stai parlando.\nL\u0026rsquo;abbiamo costruito, e poi l\u0026rsquo;abbiamo lasciato lì I registry, gli operatori e chi fa gli standard hanno fatto la parte difficile. L\u0026rsquo;hanno scritto, l\u0026rsquo;hanno discusso nell\u0026rsquo;IETF per un decennio, hanno firmato la radice in una cerimonia con testimoni, e hanno portato il 100% dei domini generici di primo livello a essere firmati. È un pezzo autentico di ingegneria collettiva, ed è finito.\nE poi il resto di noi non ha fatto la sua parte, perché la nostra parte è noiosa, invisibile, porta con sé tutti gli svantaggi personali e nessun merito, e nessuno controlla.\nÈ la forma di ogni standard che nessuno fa rispettare: il costo lo si porta da soli, e il beneficio si vede solo quando abbastanza altri l\u0026rsquo;hanno portato anche loro. Così i registry l\u0026rsquo;hanno portato, e chi pubblica le linee guida su come portarlo no.\nSolo che qui il lavoro era più piccolo di quasi tutti gli altri. La catena era già costruita, e pagata, da qualcun altro. Restava solo un record.\nE se questa è la parte che vediamo Un\u0026rsquo;ultima riflessione, e voglio essere chiaro che è un\u0026rsquo;inferenza e non una misura, perché tutto il resto di questo articolo è contato e questo no.\nDNSSEC è più o meno il controllo di sicurezza più facile da valutare che esista. Non costa niente, il lavoro è un pomeriggio, lo standard è finito da vent\u0026rsquo;anni, e chiunque può verificarlo dall\u0026rsquo;esterno con un comando senza chiedere il permesso. Nessun audit, nessun questionario, nessun NDA. Un dig.\nAllora cosa ti dice l'1,6% sui controlli che da qui fuori non puoi vedere?\nIl controllo Un esterno può verificarlo Costa soldi Visibile quando funziona Un record DS presso il registrar Sì, un comando no no MFA sugli account che contano no sì no Backup ripristinati quest\u0026rsquo;anno, non solo eseguiti no sì no Segmentazione della rete no sì no Ogni riga sotto la prima è più difficile che firmare una zona, costa soldi veri, richiede qualcuno che se ne occupi, e condivide esattamente la proprietà che ha affondato DNSSEC: invisibile quando funziona, e nessuno fuori che controlla. L\u0026rsquo;unica cosa che separa la prima riga dalle altre è che puoi verificarla, gratis, su chiunque, adesso.\nSe un\u0026rsquo;organizzazione non ha fatto la cosa gratuita che richiede un pomeriggio e che uno sconosciuto può verificare con un comando, non sono incline a supporre che abbia fatto le cose costose che richiedono un programma e che può verificare solo qualcuno che lei fa entrare.\nOra, la mossa ovvia è confrontarlo con lo storico delle violazioni, e ci ho provato. Di 23 organizzazioni del Regno Unito con incidenti gravi documentati, 22 non sono firmate.\nQuel numero non dimostra niente e non farò finta del contrario. Con un tasso di base dell'1,6%, un\u0026rsquo;organizzazione firmata in un elenco di 23 è esattamente quello che prevede il caso. Peggio, l\u0026rsquo;insieme dei firmati è fatto di nove consigli parrocchiali e tre parchi nazionali mentre quello dei non firmati comprende ogni grande ministero e ogni grande città, quindi la dimensione determina sia chi viene attaccato sia chi finisce sui giornali. Qualsiasi confronto dei tassi di violazione tra i due gruppi misurerebbe quanto è grande un\u0026rsquo;organizzazione, non se ha firmato.\nQuindi no, non posso mostrarti che le organizzazioni firmate subiscono meno violazioni. Nessuno può, non con dati che chiunque possa ottenere, e chi ti dice il contrario ti prende in giro.\nLe organizzazioni colpite hanno scritto cosa è andato storto Non ti serve la mia inferenza, perché l\u0026rsquo;hanno pubblicato loro stessi, e quello che è andato storto è l\u0026rsquo;elenco qui sopra.\nLa British Library è la migliore di tutte, perché l\u0026rsquo;ha messo per iscritto volontariamente e nei dettagli dopo l\u0026rsquo;attacco ransomware del 2023. La sua stessa revisione nomina le cause: ingresso molto probabilmente attraverso l\u0026rsquo;account di una terza parte su un server Terminal Services senza autenticazione a più fattori, poi infrastruttura vecchia e una segmentazione di rete limitata che hanno permesso agli attaccanti di muoversi per tutta la struttura, con la crescente complessità degli accessi di terzi già segnalata internamente come rischio nel 2022 e ancora lì un anno dopo.19 L\u0026rsquo;ICO è arrivato alle stesse conclusioni.20\nTre righe della tabella sopra, quindi, confermate dall\u0026rsquo;interno dall\u0026rsquo;organizzazione stessa invece che dedotte da me da qui fuori.\nE prima che qualcuno lo usi come bastone, la British Library merita l\u0026rsquo;opposto, e sarò netto sul perché.\nSono stati trasparenti. Quasi nessun altro lo è. Non avevano alcun obbligo di scriverne una parola. Il copione standard dopo un incidente è dire il meno che la legge consente, passare tutto per l\u0026rsquo;ufficio comunicazione, rifiutarsi di confermare qualsiasi cosa di specifico, e aspettare che il ciclo delle notizie passi oltre. È quello che hanno fatto la maggior parte delle organizzazioni nelle colonne dei non firmati qui sopra quando è toccato a loro, ed è il motivo per cui scrivere questa sezione dipende dalla decisione di un\u0026rsquo;unica istituzione di comportarsi diversamente.\nInvece hanno pubblicato una revisione di diciotto pagine che nomina i loro stessi errori, in pubblico, perché altre istituzioni potessero imparare. È il comportamento che vorresti da ogni organizzazione in questo articolo e che non ottieni da quasi nessuna. Il motivo per cui posso mostrarti cosa fallisce davvero dentro un\u0026rsquo;organizzazione violata è che la British Library ha scelto di dirtelo.\nE c\u0026rsquo;è un secondo motivo per cui gli altri stanno zitti, peggiore di una strategia di comunicazione. Alcuni non ci sono più.\nKNP Logistics trasportava merci come Knights of Old dal 1865. Nel giugno 2023 il gruppo Akira è entrato, ha cifrato l\u0026rsquo;azienda e ha chiesto circa cinque milioni di sterline. A settembre il gruppo era insolvente e 730 persone erano senza lavoro.21 Centocinquantotto anni, spariti in quattordici settimane, e lì nessuno sta scrivendo lezioni per te.\nQuindi quando le colonne dei non firmati qui sopra sembrano tranquille, quella tranquillità è fatta di tre cose diverse: organizzazioni non ancora colpite, organizzazioni colpite che hanno detto il meno che la legge consente, e organizzazioni colpite che non esistono più. Solo il primo gruppo ha ancora tempo per agire.\nIl che rende il passo successivo la prova onesta del mio stesso argomento invece di un colpo basso. Ho controllato la loro zona:\n$ dig +short bl.uk DS (nothing) $ dig +short bl.uk DNSKEY (nothing) bl.uk non è firmato. Nemmeno britishlibrary.co.uk. Due anni dopo un attacco ransomware che ha bloccato l\u0026rsquo;istituzione per mesi, dopo una revisione pubblica, dopo una decisione dell\u0026rsquo;ICO, e dopo il giro di attenzione alla sicurezza più accurato che un\u0026rsquo;organizzazione possa ricevere, il controllo gratuito che richiede un pomeriggio e che uno sconosciuto può verificare con un comando non è ancora fatto.\nNon lo leggo come negligenza, e non penso che li renda peggiori delle organizzazioni non firmate che non hanno pubblicato niente. Lo leggo come la prova più forte, in questo articolo, di ciò di cui parla tutto quanto. Se DNSSEC non viene fatto qui, in un\u0026rsquo;organizzazione che è passata per il fuoco, ha scritto le lezioni e ha avuto il regolatore che ci ha messo le mani, allora non viene saltato perché la gente è sbadata. Viene saltato perché niente e nessuno lo mette mai nella lista.\nQuesta è la versione onesta dell\u0026rsquo;argomento. Non le zone non firmate causano le violazioni, che è indimostrabile e probabilmente falso. Piuttosto: i controlli che nessuno fuori può vedere sono, secondo le prove pubblicate dalle organizzazioni che ci sono passate, trascurati quanto l\u0026rsquo;unico controllo che chiunque fuori può vedere. DNSSEC non è la causa. È il campione che ti è permesso prendere.\nEd è per questo che vale la pena prendere la misura. Non perché una zona non firmata sia da sola la fine del mondo, ma perché è una delle pochissime proprietà di sicurezza che un esterno può verificare onestamente, gratis, su chiunque, senza essere fatto entrare. Trattala come un rilevatore di fumo e non come un verdetto, e poi vai a fare le domande più difficili a chi lo fa scattare.\nL\u0026rsquo;unica parte che controlli Il che lascia l\u0026rsquo;unica parte che ognuno di noi controlla davvero. La tua zona. Non quella dell\u0026rsquo;NCSC, non quella di Microsoft, non quella della tua banca.\nVai a chiedere al tuo genitore se garantisce per te:\ndig +short yourdomain.uk DS Se torna vuoto, non sei firmato, e sulla maggior parte dei DNS gestiti nel 2026 la soluzione è un interruttore e un record DS presso il tuo registrar. Attivalo, poi tieni d\u0026rsquo;occhio la scadenza come già fai con i certificati, perché è quella la disciplina di cui ha davvero bisogno tutta la faccenda.\nIl lavoro è tutto qui. Un record, e una data nel tuo monitoraggio.\nQuindi per favore, fai almeno questa. Non perché stia arrivando un regolatore, perché per la maggior parte di voi non arriverà, e non perché qualcuno ti ringrazierà, perché non lo farà. Fallo perché non sta arrivando nessuno, e uno standard che mantieni quando nessuno controlla è l\u0026rsquo;unico tipo che abbia mai valso qualcosa.\nTrentanove segretari parrocchiali e una spia ce l\u0026rsquo;hanno fatta. Datti una mossa e fallo.\nRFC 4033 — «DNS Security Introduction and Requirements», Arends et al., marzo 2005. La specifica DNSSEC attuale, insieme a RFC 4034 e RFC 4035.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIANA root trust anchors — l\u0026rsquo;XML pubblicato da IANA. Il primo digest di chiave porta validFrom=\u0026quot;2010-07-15\u0026quot;, la data in cui la radice è stata firmata; la KSK attuale, key tag 20326, porta validFrom=\u0026quot;2017-02-02\u0026quot;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCERT VU#800113 — «Multiple DNS implementations vulnerable to cache poisoning», l\u0026rsquo;avviso del 2008 sulla tecnica di Kaminsky, e l\u0026rsquo;origine della risposta coordinata con la randomizzazione delle porte di origine.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe root zone file — scaricato il 27 settembre 2026, seriale SOA 2026092701. I conteggi di questo articolo vengono dall\u0026rsquo;analisi diretta delle deleghe NS e dei record DS in quel file.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nList of gov.uk domain names — il registro del governo stesso. Il file più recente pubblicato è datato 1 ottobre 2016 ed elenca 3.004 domini di secondo livello.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Security Response Center — Flame malware collision attack explained — «An attacker took advantage of the Terminal Services licensing system\u0026rsquo;s enrollment process for certificates that chained up to the Microsoft Root Authority which did not require internal access to Microsoft PKI»; il certificato falsificato «could be used to sign code that chained up to the Microsoft Root Authority and worked on all versions of Windows».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSentinelOne — Driving Through Defenses: targeted attacks leverage signed malicious Microsoft drivers, e Bitdefender\u0026rsquo;s FiveSys analysis — driver kernel malevoli con firme rilasciate direttamente da Microsoft attraverso il Windows Hardware Compatibility Program, compresi driver poi usati in attacchi ransomware.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Security Response Center — Results of major technical investigations for Storm-0558 key acquisition — una chiave di firma consumer finita in un crash dump per una race condition, presa dopo la compromissione dell\u0026rsquo;account aziendale di un ingegnere, e usata per falsificare token che il sistema di posta ha accettato per errore per account aziendali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfTLD Registry Services security requirements — il registry di .bank e .insurance. «.BANK domain names must be signed with DNSSEC with strong cryptographic algorithms», insieme a TLS e autenticazione della posta obbligatori, con una riverifica annuale di ogni registrante.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nApple, WWDC 2022 session 10079, \u0026ldquo;Improve DNS security for apps and servers\u0026rdquo; — «iOS 16 and macOS Ventura now support client side DNSSEC validation», attivabile per sessione o per richiesta con requiresDNSSECValidation su URLSessionConfiguration, URLRequest o NWParameters.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Understanding DNSSEC in Windows — il client DNS di Windows «is non-validating, which means it does not perform DNSSEC validation and relies on its local DNS servers»; l\u0026rsquo;aspettativa del bit AD dipende dalla Name Resolution Policy Table, e «IPsec is used to establish this trust relationship» con il server DNS.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nResolved: The Resolver You Are Already Running — lo stato misurato di systemd-resolved, compreso il perché ogni distribuzione principale distribuisce DNSSEC=no al momento della compilazione e come cambiarlo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMS-ADTS: DNS-Based Discovery — la specifica del protocollo di Active Directory per localizzare un domain controller, compresa la query SRV _ldap._tcp.dc._msdcs che un client invia per trovare i controller di un naming context.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Sign DNS zones with DNSSEC on Windows Server e What is DNSSEC on DNS Server in Windows Server? — la firma delle zone è arrivata con Windows Server 2008 R2 ma escludeva gli aggiornamenti dinamici, e Windows Server 2012 ha aggiunto la firma online delle zone dinamiche. Per una zona integrata in Active Directory le chiavi private di firma si replicano agli altri server DNS primari attraverso la replica di Active Directory.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5), systemd 259.9 come distribuito in Fedora 44 — il manuale raccomanda allow-downgrade, e true sui sistemi dove si può contare sul resolver a monte, mentre il default del pacchetto in /usr/lib/systemd/resolved.conf è DNSSEC=no.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd meson_options.txt — option('default-dnssec', type : 'combo', choices : ['yes', 'allow-downgrade', 'no'], value : 'allow-downgrade'). Il default scelto upstream è allow-downgrade; il #DNSSEC=no nel file del vendor di Fedora è ciò che quella build ha impostato al suo posto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWe Never Ran Out Of Addresses — la versione IPv6 di questo argomento, compresi i 463 enti del Regno Unito con allocazioni IPv6 che non annunciano alcun IPv6, e il punto che un CGNAT ha un ordine d\u0026rsquo;acquisto mentre farlo come si deve non ne ha.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 882 — «Domain Names: Concepts and Facilities», P. Mockapetris, novembre 1983. La specifica originale, sostituita da RFC 1034 e RFC 1035 nel 1987.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBritish Library, \u0026ldquo;Learning Lessons from the Cyber-Attack\u0026rdquo;, 8 marzo 2024 — la revisione della Library stessa sull\u0026rsquo;attacco ransomware dell\u0026rsquo;ottobre 2023, che nomina l\u0026rsquo;assenza di autenticazione a più fattori sull\u0026rsquo;account usato per entrare, l\u0026rsquo;infrastruttura vecchia, la segmentazione di rete limitata, e la complessità degli accessi di terzi registrata come rischio nel 2022.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nICO statement on the British Library\u0026rsquo;s 2023 ransomware attack, aprile 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Record — UK logistics firm blames ransomware attack for insolvency, 730 redundancies — KNP Logistics Group, capogruppo della centocinquantottenne Knights of Old, attaccata da Akira nel giugno 2023 dopo che la password di un dipendente era stata forzata senza alcuna autenticazione a più fattori, e insolvente a settembre.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/dns/dnssec-the-root-is-signed-you-are-not/","summary":"La parte difficile di DNSSEC è finita anni fa. Contando sulla zona radice live il 27 settembre 2026, 1.351 domini di primo livello su 1.438 hanno un record DS e tutti i 1.038 gTLD sono firmati. Poi si ferma di colpo. Un censimento di ogni dominio gov.uk del registro ufficiale ne trova 39 firmati su 2.390 che ancora risolvono, nove dei quali sono consigli parrocchiali, mentre HMRC, l\u0026rsquo;NHS, il GCHQ e il National Cyber Security Centre non ci sono. Un\u0026rsquo;autorità di certificazione su nove ha firmato. Una distribuzione Linux o BSD su cinque pure. windowsupdate.com non ha alcun DS. Ecco quanto costa davvero una risposta falsificata, cosa ci fa la firma, perché le solite scuse non reggono il confronto con i numeri, e se, quarantadue anni dopo Mockapetris, il vero problema è che quasi nessuno capisce cosa promette davvero il DNS.","title":"DNSSEC: proteggere il tuo traffico dalla falsificazione"},{"content":"C\u0026rsquo;è un resolver DNS in funzione sulla tua macchina proprio adesso. Non l\u0026rsquo;hai installato tu, probabilmente non l\u0026rsquo;hai mai configurato, e risponde a ogni ricerca di nome che fa il sistema. Su Fedora, Ubuntu e quasi tutto il Linux desktop si chiama systemd-resolved, ed è lì in silenzio dal giorno in cui il sistema è stato installato.\nSa fare tre cose che vale la pena avere. Mette in cache, così la stessa ricerca non attraversa la rete due volte. Convalida DNSSEC, così una risposta falsificata viene respinta invece di essere creduta. E parla DNS over TLS, così la rete locale non può leggere ogni nome che chiedi.\nDi default ne fa esattamente una. Le altre due sono spente, e su alcune distribuzioni sono spente in fase di compilazione, il che vuol dire che l\u0026rsquo;impostazione che cambieresti non è nemmeno quella che ha deciso. Un validatore che non convalida mai non serve a niente e non fa nemmeno arredamento.\nQuesto è ciò che fa davvero, misurato su una macchina Fedora 44 in funzione con systemd 259, e cosa cambia quando accendi le altre due. Compreso quello che la tua distribuzione ha deciso per te in fase di compilazione, e quanto di quella decisione puoi semplicemente scavalcare.\nChi risponde davvero alle tue ricerche Partiamo dal quadro onesto, perché «usa /etc/resolv.conf» su questi sistemi non è vero da anni.\nsystemd-resolved si presenta in quattro modi diversi, e quale usa un programma decide cosa gli torna indietro.1 La strada di glibc è nss-resolve, collegata tramite /etc/nsswitch.conf. Le strade native sono D-Bus e Varlink, che trasportano il verdetto DNSSEC e lo scope dell\u0026rsquo;interfaccia che getaddrinfo non ha modo di esprimere. Poi c\u0026rsquo;è lo stub listener, un vero server DNS sul loopback per tutto ciò che parla DNS grezzo e non sa nulla di quanto sopra.\nQuattro porte, un demone.\nSu questa macchina il collegamento è questo:\n$ ls -l /etc/resolv.conf lrwxrwxrwx. 1 root root 39 May 30 13:56 /etc/resolv.conf -\u0026gt; ../run/systemd/resolve/stub-resolv.conf $ cat /etc/resolv.conf nameserver 127.0.0.53 options edns0 trust-ad search damiendye.uk $ grep ^hosts: /etc/nsswitch.conf hosts: files myhostname mdns4_minimal [NOTFOUND=return] resolve [!UNAVAIL=return] dns resolve in quella riga è nss-resolve. dns subito dopo è il tradizionale nss-dns, lasciato lì come ripiego che scatta solo se resolved non è in funzione per niente.\nQuattro ingressi, un demone, e una decisione di instradamento prima che qualcosa esca dalla macchina COME CHIEDE UN PROGRAMMA COSA FA IL DEMONE DOVE VA nss-resolve glibc, nessun verdetto D-Bus, Varlink nativo, verdetto completo 127.0.0.53 lo stub completo 127.0.0.54 lo stub proxy systemd-resolved 1. hosts e sintetici 2. cache 3. validatore DNSSEC 4. instradamento 5. trasporto lo stub proxy salta 2 e 3 LLMNR su 5355 DNS upstream Quattro ingressi, un demone, e una decisione di instradamento prima che qualcosa esca dalla macchina Gli stub listener sono due, non uno Tutti conoscono 127.0.0.53. Meno gente sa che ce n\u0026rsquo;è un secondo.\n$ ss -lntup | grep \u0026#39;:53 \u0026#39; udp UNCONN 0 0 127.0.0.54:53 0.0.0.0:* udp UNCONN 0 0 127.0.0.53%lo:53 0.0.0.0:* tcp LISTEN 0 4096 127.0.0.54:53 0.0.0.0:* tcp LISTEN 0 4096 127.0.0.53%lo:53 0.0.0.0:* Non sono due indirizzi della stessa cosa. Il secondo, di proposito, fa di meno:2\n127.0.0.53 127.0.0.54 Ruolo Il resolver locale completo Solo modalità proxy Cache Sì No Convalida DNSSEC Sì, se attivata Mai LLMNR e Multicast DNS Sì No Nomi sintetici (localhost, _gateway) Sì No Passa a DNS over TLS Sì Sì Il suo nome sintetico _localdnsstub _localdnsproxy Ti torna indietro Quello che ha deciso resolved Quello che ha detto l\u0026rsquo;upstream La documentazione è schietta sulla seconda colonna. Farà «pass most DNS messages relatively unmodified to the current upstream DNS servers and back, but not try to process the messages locally, and hence does not validate DNSSEC, or offer up LLMNR/MulticastDNS».2\nQuesto rende 127.0.0.54 il bersaglio giusto per un programma che vuole fare la propria convalida, o che ha bisogno della risposta grezza dell\u0026rsquo;upstream invece dell\u0026rsquo;interpretazione di resolved.\nEntrambi gli indirizzi hanno nomi sintetici, _localdnsstub e _localdnsproxy, che si risolvono senza alcuna configurazione.\nQuattro modalità per /etc/resolv.conf, non tre La modalità viene rilevata automaticamente da cosa è il file, e sono quattro.1\n/etc/resolv.conf è Cosa significa Client che scavalcano NSS symlink a run/systemd/resolve/stub-resolv.conf La modalità consigliata. Elenca 127.0.0.53 e i domini di ricerca attuali Passano da resolved symlink a /usr/lib/systemd/resolv.conf Statico, elenca 127.0.0.53, nessun dominio di ricerca Passano da resolved symlink a run/systemd/resolve/resolv.conf Elenca i veri server upstream, sempre aggiornati Scavalcano resolved del tutto un file vero gestito da qualcos\u0026rsquo;altro resolved lo legge da consumatore, non da fornitore Scavalcano resolved del tutto La terza riga frega la gente. Sembra l\u0026rsquo;opzione ordinata, è tenuta aggiornata, e in silenzio significa che ogni programma che legge resolv.conf direttamente parla con il resolver del tuo provider senza cache, senza convalida e senza cifratura, qualunque cosa tu abbia configurato in resolved.conf.\nAnche l\u0026rsquo;opzione trust-ad nel file qui sopra conta. Senza di essa glibc toglie il bit AD dalla risposta prima che il tuo programma la veda, con la ragionevole motivazione che la pretesa di un resolver qualsiasi di aver convalidato qualcosa non vale niente. Con 127.0.0.53 come nameserver la pretesa arriva dalla tua stessa macchina, quindi trust-ad qui è corretto e resolved lo scrive per te.\nSulle teorie del complotto su systemd Prima di qualunque dettaglio, perché questo è l\u0026rsquo;argomento dove saltano sempre fuori.\nSe la tua obiezione a quanto segue è una teoria su Lennart Poettering in persona, sulle intenzioni di Red Hat, o su systemd come complotto per toglierti qualcosa, puoi pure levare le tende, perché le tue fantasie non mi interessano.\nTutto in questo articolo viene da una macchina in funzione: il sorgente, i flag di build, il binario installato, le pagine man e il comportamento misurato. Ogni affermazione ha accanto un comando che puoi lanciare e verificare da te. I flag di build sono pubblici. Il sorgente è pubblico. L\u0026rsquo;unico valore predefinito che secondo me è davvero sbagliato è stato scelto da persone che hanno scritto le loro ragioni dove chiunque può leggerle e contestarle, ed è esattamente quello che faccio più avanti.\nÈ parecchia trasparenza in più di quella che ottieni dalla maggior parte del software che usi senza una parola di lamentela.\nPorta prove o lascia perdere.\nLa cache è la parte che funziona e basta Questa è l\u0026rsquo;unica funzione accesa di default ovunque, ed è quella che si guadagna da vivere senza alcuna configurazione.\nLa misura, su questa macchina, su 32 domini. Svuota la cache, interrogali tutti, interrogali di nuovo, e leggi il tempo di query che riporta dig invece di cronometrare il processo:\n$ resolvectl flush-caches $ for n in $NAMES; do dig +tries=1 @127.0.0.53 \u0026#34;$n\u0026#34; A | grep \u0026#39;Query time\u0026#39;; done mediana media p90 max totale per 32 nomi cache fredda 103,5 ms 106,7 ms 184 ms 238 ms 3.414 ms cache calda 0,0 ms 0,5 ms 1 ms 3 ms 16 ms 3.414 millisecondi contro 16. Questo è tutto l\u0026rsquo;argomento per una cache locale, ed è il motivo per cui è il valore predefinito.\nVale la pena essere onesti su cosa sia quel numero, però. È il risparmio su una serie di trentadue nomi mai cercati prima, contro la stessa serie ripetuta, e nessun carico reale assomiglia all\u0026rsquo;una o all\u0026rsquo;altra. La cifra utile è la coda, non la mediana: la ricerca peggiore di quella serie è costata 238 ms a freddo e 3 ms a caldo. A una pagina che tira dentro otto hostname la tua mediana non interessa, aspetta il più lento.\nLe manopole [Resolve] Cache=yes # yes | no-negative | no CacheFromLocalhost=no # default: do not cache answers from 127.0.0.1 StaleRetentionSec=0 # serve expired records when upstream is down Impostazione Predefinito Cosa fa Cache=yes attivo Mette in cache risposte positive e negative Cache=no-negative Solo risposte positive, per quando sei stufo di aspettare la scadenza di un TTL negativo CacheFromLocalhost=no attivo Nessuna cache quando l\u0026rsquo;upstream è su 127.0.0.1 StaleRetentionSec=0 spento Serve record scaduti quando l\u0026rsquo;upstream smette di rispondere DNSCacheSize=4096 4096 Record tenuti per scope. Solo da systemd 261 in poi La terza riga è quella che morde. Se il tuo upstream è un dnsmasq o un unbound sul loopback, resolved non mette in cache le sue risposte per niente, con la motivazione che la cosa con cui parla è già una cache. Punta resolved su un resolver con filtri su un altro host e hai due livelli di cache. Puntalo su uno sul loopback e ne hai uno.\nStaleRetentionSec= è quella interessante, ed è spenta di default. Impostala, e quando l\u0026rsquo;upstream smette di rispondere resolved continua a servire i record oltre il loro TTL invece di fallire.2 Prova sempre prima l\u0026rsquo;upstream. Non vale per NXDOMAIN, perché un nome che non esiste è una risposta perfettamente valida e non c\u0026rsquo;è niente di scaduto. Per un portatile che entra ed esce dalla copertura, o per una macchina che deve continuare a funzionare durante un guasto del DNS, vale la pena averla:\n[Resolve] StaleRetentionSec=1d systemd 261 ha aggiunto sopra a questo il dimensionamento della cache per protocollo, con DNSCacheSize=, MulticastDNSCacheSize= e LLMNRCacheSize=, ciascuno di default a 4096 record e con un massimo di 2^24.3 Non su questa macchina, che ha la 259, e non su alcuna release stabile attuale di una distribuzione. Vale la pena sapere che sta arrivando, perché finora la dimensione della cache non era regolabile per niente.\nIl demone svuota anche tutto in caso di pressione sulla memoria, il che è sensato e ogni tanto sorprende quando cerchi di capire perché un tasso di cache hit sembra scarso.\nLo split DNS è il motivo per tenerlo Se da qui porti via una cosa sola, porta via questa sezione, perché è la funzione che fa davvero qualcosa che il vecchio stub resolver non sapeva fare.\nIl resolv.conf tradizionale ha una sola lista di nameserver per tutta la macchina. Una lista. Tiri su una VPN e qualcosa deve sovrascriverla, il che vuol dire che o funzionano i tuoi nomi interni e il resto del DNS passa dal resolver aziendale, o il contrario. Una terza possibilità non c\u0026rsquo;è. Il file non sa esprimerla.\nresolved instrada per query e per interfaccia.1 Ogni link ha i suoi server e i suoi domini, e una ricerca viene mandata al link il cui dominio corrisponde meglio al nome, contando le etichette.\nConfigurazione Si scrive Effetto Dominio di ricerca damiendye.uk Suffisso per i nomi a un\u0026rsquo;etichetta, e instrada su questo link le query che corrispondono Dominio di solo instradamento ~internal.example Instrada su questo link le query che corrispondono, mai usato come suffisso Instradamento pigliatutto ~. Manda su questo link tutto ciò che non corrisponde altrove Instradamento predefinito DNSDefaultRoute=yes Prende le query senza corrispondenza, senza rivendicare ~. Quindi un portatile con la VPN di lavoro attiva ottiene questo:\nresolvectl domain tun0 \u0026#39;~corp.example\u0026#39; \u0026#39;~10.in-addr.arpa\u0026#39; resolvectl dns tun0 10.0.0.53 I nomi sotto corp.example e le ricerche inverse per 10.0.0.0/8 scendono nel tunnel. Tutto il resto continua a uscire dal link locale come prima. Il resolv.conf di nessuno è stato riscritto, e quando il tunnel cade le rotte se ne vanno con lui.\nUna query, due link, e una decisione di instradamento presa contando le etichette LA QUERY LA DECISIONE IL LINK db01.corp.example 14.0.10.in-addr.arpa blogs.damiendye.uk Vincono più etichette Ogni link ha i suoi server e domini. tun0 ~corp.example wlp4s0 DefaultRoute La tilde solo instrada. Senza tilde fa anche da suffisso ai nomi a un'etichetta. Una query, due link, e una decisione di instradamento presa contando le etichette Una regola vale la pena dirla chiaramente, perché è quella che la gente usa e sbaglia. ~. su un link significa preferisci questo link per tutto. Implicitamente impedisce anche a qualunque altro link di essere instradamento predefinito. Vuoi che un link prenda gli avanzi senza rivendicare tutto lo spazio dei nomi? Imposta DNSDefaultRoute=yes e lascia stare ~..\nControlla cosa ha deciso invece di darlo per scontato:\n$ resolvectl status Link 3 (wlp4s0) Current Scopes: DNS LLMNR/IPv4 LLMNR/IPv6 Protocols: +DefaultRoute LLMNR=resolve -mDNS -DNSOverTLS DNSSEC=no/unsupported Current DNS Server: 192.0.2.53 DNS Servers: 192.0.2.53 2001:db8:1::53 DNS Domain: damiendye.uk Default Route: yes Ogni indirizzo in questo articolo viene dai range di documentazione, 192.0.2.0/24 e 2001:db8::/32, quindi non incollarli in una configurazione aspettandoti una risposta.4 5 Le cifre e il comportamento sono reali, presi da una macchina in funzione. Gli indirizzi sono sostituti, perché un indirizzo IPv6 globale costruito nel modo solito porta nella metà bassa il MAC dell\u0026rsquo;interfaccia, e pubblicarne uno regala un pezzo di inventario hardware insieme all\u0026rsquo;indirizzo.\nQuel -DNSOverTLS e quel DNSSEC=no sono le prossime due sezioni.\nSa convalidare DNSSEC Upstream il demone è descritto come «a caching and validating DNS/DNSSEC stub resolver».1 La metà che convalida è reale, non è un involucro attorno a qualcos\u0026rsquo;altro, e funziona. Solo che non è accesa.\nAccenderla per link non richiede sudo, perché resolvectl passa da polkit e una sessione locale attiva ha il permesso:\n$ resolvectl dnssec wlp4s0 yes $ resolvectl status wlp4s0 | grep DNSSEC DNSSEC=yes/supported Quel suffisso /supported è resolved che riporta cosa ha trovato sondando l\u0026rsquo;upstream, separatamente da ciò che hai chiesto. yes/supported significa che hai chiesto la convalida e il server è in grado di sostenerla. no/unsupported su un\u0026rsquo;installazione di default significa che nessuno l\u0026rsquo;ha chiesta, quindi nessuno ha sondato.\nUna volta accesa, ogni ricerca torna con un verdetto, e i verdetti sono tre.\nSicuro, non sicuro e falso sono tre risposte diverse IL GENITORE PUBBLICA UN DS, E LE FIRME SI VERIFICANO? SICURO damiendye.uk Firmato, e la catena regge. Dati restituiti. NON SICURO systemd.io Niente DS. Non firmato, niente da controllare. Dati restituiti. FALSO dnssec-failed.org Dice di essere firmato. La prova fallisce. Ricerca rifiutata. Due su tre restituiscono dati. Accendere la convalida non rompe i siti non firmati. Sicuro, non sicuro e falso sono tre risposte diverse, e solo una di esse è un fallimento Eccoli tutti e tre su questa macchina, contro nomi reali:\n$ resolvectl query damiendye.uk -- Data is authenticated: yes; Data was acquired via local or encrypted transport: no $ resolvectl query systemd.io -- Data is authenticated: no; Data was acquired via local or encrypted transport: no $ resolvectl query dnssec-failed.org dnssec-failed.org: resolve call failed: DNSSEC validation failed: missing-key (DNSKEY Missing: no SEP matching the DS found for dnssec-failed.org.) damiendye.uk è firmato, quindi la catena dalla root si convalida e i dati sono autenticati. systemd.io non è firmato, quindi non c\u0026rsquo;è niente da controllare e resolved lo dice onestamente invece di fingere. È il dominio stesso del progetto systemd, un punto su cui tornerò. dnssec-failed.org è pubblicato con firme volutamente rotte. Quello fallisce di netto, con una diagnosi che nomina il problema esatto.\nEcco la distinzione che si perde. Non sicuro non è un fallimento. Una zona non firmata restituisce i dati e ti dice che non è stato possibile verificarli. Viene respinta solo una zona che dichiara di essere firmata e poi non riesce a dimostrarlo.\nLa catena stessa è visibile, se vuoi vederla:\n$ dig +short @127.0.0.53 uk DS 43876 8 2 A107ED2AC1BD14D924173BC7E827A1... $ dig +short @127.0.0.53 damiendye.uk DS 2371 13 2 A5B2825C57899A5A15EE9703832C8358E0D19EF29DC72DD83C691ED77C33BD7F $ dig +short @127.0.0.53 damiendye.uk DNSKEY 256 3 13 oJMRESz5E4gYzS/q6XDrvU1qMPYIjCWz... 257 3 13 mdsswUyr3DPW132mOi8V9xESWE8jTo0d... La root garantisce per uk, uk garantisce per damiendye.uk, e la chiave 257 firma la chiave 256 che firma i record. L\u0026rsquo;algoritmo 13 lì è ECDSA P-256, che è quello che vuoi su una zona nuova invece dell\u0026rsquo;RSA che il DS di uk qui sopra usa ancora.\nAttraverso il semplice stub, un programma che non ha mai sentito parlare di resolved ottiene lo stesso verdetto sotto forma di flag AD:\n$ dig @127.0.0.53 ietf.org A | grep flags ;; flags: qr rd ra ad; $ dig @127.0.0.53 dnssec-failed.org A | grep status ;; -\u0026gt;\u0026gt;HEADER\u0026lt;\u0026lt;- status: SERVFAIL E il demone tiene un conteggio aggiornato, che è il modo più rapido per vedere se la convalida sta facendo qualcosa:\n$ resolvectl statistics DNSSEC Verdicts Secure: 134 Insecure: 62 Bogus: 0 Indeterminate: 2 Quanto costa la convalida Qui ti deluderò, perché ho provato a misurarlo come si deve e non ci sono riuscito.\nA caldo è pulito ed è niente. Gli stessi 32 nomi con la cache piena costano 16 ms senza convalida e 23 ms con. Chiamalo errore di arrotondamento.\nA freddo è dove il costo dovrebbe vedersi, e un singolo client non riesce a isolarlo. Ho fatto il giro in entrambi i sensi e ho avuto risposte contraddittorie: in un ordine la convalida sembrava più lenta del 74%, nell\u0026rsquo;altro sembrava più veloce, il che è impossibile e ti dice cosa si sta misurando davvero. Il giro che parte per secondo approfitta del fatto che il resolver upstream ha già recuperato tutto quello che il primo aveva chiesto. La variabile che domina non è la convalida, è di chi era calda la cache.\nQuindi non ti darò un numero che non posso sostenere. Quello che è vero è il meccanismo, e la documentazione ne descrive la forma chiaramente: la convalida «requires retrieval of additional DNS data, and thus results in a small DNS lookup time penalty».2 Una ricerca convalidata a freddo percorre la catena di delega recuperando DS e DNSKEY a ogni livello prima di poter rispondere, quindi costa viaggi di andata e ritorno in più sui nomi che nessuno ha ancora chiesto, e niente del tutto su quelli che qualcuno ha già chiesto.\nEd è anche per questo che la stessa pagina avverte che spegnere la cache «comes at a performance penalty, which is particularly high when DNSSEC is used».2 Le due funzioni non sono indipendenti. La convalida è sostenibile proprio perché la cache fa sì che la paghi una volta.\nSe vuoi la cifra vera per la tua rete, misurala lì. Un client su una connessione non te la può dare.\nAllora perché la convalida è spenta Perché la tua distribuzione l\u0026rsquo;ha spenta quando ha costruito il pacchetto, e l\u0026rsquo;ha fatto per una ragione che ha messo per iscritto.\nUpstream systemd distribuisce la convalida accesa. L\u0026rsquo;opzione di build lo dice:\noption(\u0026#39;default-dnssec\u0026#39;, type : \u0026#39;combo\u0026#39;, choices : [\u0026#39;yes\u0026#39;, \u0026#39;allow-downgrade\u0026#39;, \u0026#39;no\u0026#39;], value : \u0026#39;allow-downgrade\u0026#39;) e il manuale upstream concorda: DNSSEC= «Defaults to allow-downgrade».6\nOra guarda cosa passa Fedora a quella build:7\n-Ddefault-dnssec=no -Ddefault-dns-over-tls=no -Ddefault-mdns=no -Ddefault-llmnr=resolve E cosa passano Debian e Ubuntu:8\n-Ddefault-dnssec=no -Ddefault-llmnr=no -Ddefault-mdns=no -Ddns-over-tls=openssl Quindi il file /usr/lib/systemd/resolved.conf su una macchina Fedora, quello intestato «Entries in this file show the compile time defaults», riporta #DNSSEC=no. Rileggilo, perché sta facendo una cosa furba: la riga sembra il software che ti dice il proprio valore predefinito, e quello che ti sta davvero mostrando è il flag di build di Fedora, con il vero predefinito di upstream da nessuna parte nella pagina.\nImpostazione Predefinito upstream Build Fedora Build Debian/Ubuntu Risultato su questa macchina DNSSEC= allow-downgrade no no DNSSEC=no DNSOverTLS= no no no (compilato con OpenSSL) -DNSOverTLS MulticastDNS= yes no no -mDNS LLMNR= yes resolve no LLMNR=resolve Ognuno di questi coincide con ciò che resolvectl status stampa su questa macchina. Sorgente, flag di build, sistema in funzione: tutti e tre concordano.\nIl ragionamento di Fedora è nella proposta di modifica ed è di una schiettezza rinfrescante. La funzione «is known to cause compatibility problems with certain network access points», e Fedora «is not prepared to handle an influx of DNSSEC-related bug reports», quindi viene spenta.9\nPosso chiedere perché la risposta a una funzione che si rompe sulle reti scadenti sia disattivarla per tutti, invece di distribuire allow-downgrade come fa upstream e lasciare che si spenga da sola dove deve? Non chi l\u0026rsquo;ha deciso. Cosa, nel processo, ha portato lì. Perché allow-downgrade esiste proprio per il caso del captive portal, è il predefinito di upstream esattamente per quella ragione, e distribuire no al suo posto significa che anche una macchina su una rete perfettamente buona resta senza convalida.\nPer essere giusti con loro, allow-downgrade ha il suo problema, ed è un problema vero. La modalità rileva un resolver che non sa fare DNSSEC e smette in silenzio di convalidare. Un attaccante che può manipolare le tue risposte DNS può far scattare quel rilevamento apposta, e la documentazione lo dice chiaramente: rende la convalida DNSSEC «vulnerable to \u0026lsquo;downgrade\u0026rsquo; attacks».2 Una funzione di sicurezza che qualunque attaccante può spegnere fa meno di quanto sembri.\nQuindi nessuno dei due predefiniti è buono. no non ti dà niente. allow-downgrade ti dà qualcosa che un attaccante può toglierti, e yes ti dà la cosa vera più tutto quello che c\u0026rsquo;è nella prossima sezione.\nQuanto del web è firmato, comunque Prima di spendere molto impegno sulla convalida vale la pena sapere quale frazione delle tue ricerche può proteggere. Così ho chiesto a resolved il verdetto sull\u0026rsquo;apex di trentadue domini che questo argomento chiama direttamente in causa: gli enti che hanno scritto lo standard, le realtà che distribuiscono il resolver, e l\u0026rsquo;infrastruttura che tutti risolvono, che lo vogliano o no.\nSedici su trentadue. La metà.\nFirmati Non firmati Standard e registri ietf.org, iana.org, icann.org, rfc-editor.org, ripe.net, isc.org, nlnetlabs.nl, nic.cz, afnic.fr, verisign.com nessuno Distribuzioni e produttori debian.org, fedoraproject.org, opensuse.org, almalinux.org redhat.com, ubuntu.com, canonical.com, suse.com, rockylinux.org, archlinux.org systemd stesso nessuno systemd.io, freedesktop.org Infrastruttura cloudflare.com, gov.uk github.com, kernel.org, google.com, wikipedia.org, mozilla.org, apache.org, gnu.org, quad9.net Leggi giù per la prima colonna. Ogni singolo ente di standard e registro ha firmato. Dieci su dieci, nessuna eccezione: le persone che hanno scritto DNSSEC, e quelle che gestiscono i registri che pubblicano i record DS per tutti gli altri. Hanno fatto il lavoro sulle proprie zone.\nOra leggi la terza riga. systemd.io non ha DS. Il progetto che ha scritto il resolver con convalida di cui parla tutto questo articolo non ha firmato il proprio dominio, e nemmeno freedesktop.org, dove vive la sua documentazione. Più sotto, anche quad9.net non è firmato, e vale la pena fermarcisi un secondo: un resolver pubblico che si presenta proprio come quello che convalida DNSSEC per te, su una zona che nessuno può convalidare.\nE i produttori si dividono nettamente lungo una linea. Le distribuzioni comunitarie hanno firmato. debian.org, fedoraproject.org, opensuse.org, almalinux.org. Le aziende no. redhat.com, ubuntu.com, canonical.com, suse.com. Sono le quattro organizzazioni che impacchettano e distribuiscono questo resolver alla maggior parte del parco Linux.\nNessun limite tecnologico, lì. Il protocollo è utilizzabile da più di quindici anni, gli strumenti sono gratuiti, e i registri accettano il record DS senza far pagare niente. Te lo dico gratis: chi ha scritto lo standard ha firmato, e la maggior parte di chi distribuisce il software no.\nC\u0026rsquo;è una versione più tagliente dello stesso punto in gov.uk, che è firmato, e poi fa questo:\n$ dig +short @127.0.0.53 www.gov.uk CNAME www-cdn.production.govuk.service.gov.uk. $ dig +short @127.0.0.53 service.gov.uk DS (nothing) uk ha un DS. gov.uk ha un DS. service.gov.uk non ne ha, quindi la catena si ferma lì di colpo, e www.gov.uk si risolve come non sicuro anche se l\u0026rsquo;apex sopra di lui è firmato come si deve. Qualcuno ha fatto il lavoro su gov.uk e poi ha puntato il sito vero e proprio su una delega non firmata. Mezzo lavoro.\nPer questo, se firmi una zona, controlla i nomi che la gente digita davvero. Un apex firmato che fa CNAME verso una zona CDN non firmata non ti compra niente.\nDNS over TLS funziona, a certe condizioni DNS over TLS è implementato, è compilato in ogni build diffusa, e funziona. È spento di default ovunque, upstream compreso, dove DNSOverTLS= «Defaults to no».6\nLa configurazione è di due righe, e la seconda è quella che la gente si perde:\n[Resolve] DNS=9.9.9.9#dns.quad9.net 149.112.112.112#dns.quad9.net DNSOverTLS=yes Quel #dns.quad9.net non è decorazione. Imposta il nome usato per SNI e per convalidare il certificato. Toglilo e il certificato viene «checked against the server\u0026rsquo;s IP».2 Con i grandi provider funziona perché mettono gli indirizzi IP nei SAN dei loro certificati, ma è il controllo più debole, si rompe nel momento in cui un provider smette di farlo, e non ti protegge dall\u0026rsquo;essere rediretto su un indirizzo diverso che per caso ha un certificato valido per sé stesso. L\u0026rsquo;articolo della rivista di Fedora su questo argomento omette l\u0026rsquo;hostname,10 ed è un peccato, perché la sintassi è lì nei commenti del file di configurazione installato.\nRigido e opportunistico sono impostazioni molto diverse Modalità Su un server che supporta DoT Su un server che non lo supporta Autentica il server yes Cifrato Tutte le ricerche falliscono Sì opportunistic Cifrato In chiaro, in silenzio No no In chiaro In chiaro n/d opportunistic sembra la via di mezzo sensata, e per lo più non lo è. La documentazione lo dice senza giri di parole: in quella modalità «the resolver is not capable of authenticating the server, so it is vulnerable to \u0026lsquo;man-in-the-middle\u0026rsquo; attacks»,2 e chiunque possa scartare il tuo traffico sulla porta 853 può forzare il ripiego. Ti protegge dall\u0026rsquo;osservazione passiva su una rete dove nessuno ci sta provando. Contro qualcuno che ci prova, non fa niente.\nyes è l\u0026rsquo;impostazione onesta. Significa anche che quando non riesce a connettersi resti senza DNS del tutto, cosa che vale la pena sapere prima di metterla su una macchina che non puoi raggiungere a piedi.\nHo provato DoT rigido verso Quad9 da questa macchina e la query si è bloccata. Nessun errore, nessun timeout, niente nel journal tra lo svuotamento della cache e il mio ripristino due minuti dopo:\nSep 27 17:12:11 systemd-resolved[40105]: wlp4s0: Bus client set DNS server list to: 9.9.9.9#dns.quad9.net, ... Sep 27 17:12:14 systemd-resolved[40105]: wlp4s0: Bus client set DNSOverTLS setting: yes Sep 27 17:12:15 systemd-resolved[40105]: Flushed all caches. Sep 27 17:14:39 systemd-resolved[40105]: wlp4s0: Bus client set DNS server list to: 192.0.2.53, ... Da qui non posso dirti se la porta 853 sia raggiungibile su quella connessione, perché la shell da cui ho lanciato il test non raggiungeva nemmeno la porta 443 ed era chiaramente filtrata a sua volta. Quello che il log mostra è il modo di fallire: un DoT rigido che non riesce a connettersi non riporta niente di utile. Aspetta. Se lo accendi e il tuo DNS ammutolisce, controlla ss -tn dport = :853 prima di andare a guardare resolved.\nProvarlo come si deve # does the transport actually come up resolvectl flush-caches resolvectl query ietf.org # expect: acquired via ... encrypted transport: yes # is anything still going out in the clear sudo tcpdump -ni any \u0026#39;port 53 and not host 127.0.0.53\u0026#39; Il secondo comando è quello che dice la verità. Con DoT funzionante non dovrebbe uscire niente dalla macchina sulla porta 53, e qualunque cosa esca è un programma che ha trovato il modo di aggirare lo stub.\nDNS over HTTPS qui non esiste Risposta diretta alla domanda: systemd-resolved non supporta DNS over HTTPS. Non in parte, non dietro un flag, non con un\u0026rsquo;opzione di build che nessuno accende. Lì dentro DoH non c\u0026rsquo;è proprio.\nE non lo leggo nella documentazione, che potrebbe semplicemente essere datata. È quello che contiene il binario:\n$ strings /usr/lib/systemd/systemd-resolved | grep -icE \u0026#39;application/dns-message|dns-query|:443\u0026#39; 0 $ grep -oE \u0026#39;name=\u0026#34;DNSOver[A-Za-z]*\u0026#34;\u0026#39; /usr/share/dbus-1/interfaces/org.freedesktop.resolve1.Manager.xml name=\u0026#34;DNSOverTLS\u0026#34; Nessun formato DoH, niente HTTP/2, una sola proprietà di cifratura sull\u0026rsquo;interfaccia D-Bus ed è TLS. L\u0026rsquo;elenco completo delle direttive di resolved.conf upstream arriva a diciassette impostazioni e nessuna nomina HTTPS.6\nÈ stato chiesto. La issue #8639, «Add support for DNS-over-HTTPS to systemd-resolved», è stata aperta il 2 aprile 2018 ed è ancora aperta, con due pull request allegate e niente di unito.11 Otto anni e si continua a contare.\nStesso contenuto, stessa cifratura, porta diversa ENTRAMBI PORTANO LA STESSA QUERY DNS, DENTRO LO STESSO TLS DNS over TLS DNS over HTTPS tcp/853 tcp/443 In systemd-resolved sì, dalla v239 no, per niente Chi osserva vede i nomi no no Una rete può bloccarlo sì, ha la sua porta non senza fatica Puoi verificare il tuo sì no Chiesto nella issue 8639 di systemd, aprile 2018. Ancora aperta. Stesso contenuto, stessa cifratura. La differenza è su quale porta sta, e chi se ne accorge È la scelta sbagliata? Non è ovvio, e l\u0026rsquo;argomento a favore di DoT è decente. Entrambi portano il DNS dentro TLS ed entrambi fermano lo stesso osservatore passivo. Il vantaggio di DoH è che si nasconde sulla porta 443 insieme a tutto il resto, quindi una rete che vuole bloccare il DNS cifrato deve lavorare molto di più. Questo è davvero utile se l\u0026rsquo;avversario è chi gestisce la rete.\nTaglia anche nell\u0026rsquo;altro senso. Dove chi gestisce la rete sei tu, quell\u0026rsquo;indistinguibilità significa che non puoi verificare nemmeno il tuo DNS, e ogni applicazione che si porta dietro il suo client DoH smette di usare il resolver di sistema, ed è così che ti ritrovi un browser che ignora il tuo split DNS, la tua cache e le tue zone interne. Sulla tua attrezzatura, un resolver visibile su una porta nota è una funzione, non un difetto.\nQuindi: se DoT raggiunge il tuo resolver, usalo e non perdi niente. Se la porta 853 è bloccata, resolved non ha risposte e ti serve un proxy DoH davanti, dnscrypt-proxy o cloudflared sul loopback con resolved puntato lì. Cache e convalida restano compito di resolved. Si sposta solo il trasporto.\nCosa installa davvero la tua distribuzione Lo stesso demone si comporta in modo molto diverso a seconda di chi l\u0026rsquo;ha impacchettato. Abilitare il servizio è la metà facile. La metà che si salta è collegarlo agli strumenti di rete che la distribuzione usa davvero, e su una di queste quattro non è collegato per niente finché non lo fai tu.\nInstallato Abilitato nss-resolve collegato La configurazione arriva tramite Supportato Fedora (33+) sì sì sì, in systemd-libs NetworkManager sì Ubuntu sì sì sì netplan, poi NM o networkd sì Debian (12+) pacchetto separato no no, pacchetto separato lo scegli e lo colleghi tu sì RHEL / Rocky / Alma (9, 10) sì no sì NetworkManager, una volta istruito Technology Preview Convalida e cache completa: le impostazioni Sono le stesse quattro righe ovunque, perché resolved.conf è resolved.conf su ogni distribuzione. L\u0026rsquo;unica cosa che cambia è come il resto della configurazione arriva al demone, che è l\u0026rsquo;argomento delle prossime quattro sezioni.\n# /etc/systemd/resolved.conf.d/60-local.conf [Resolve] DNSSEC=allow-downgrade Cache=yes CacheFromLocalhost=no StaleRetentionSec=1d Usa un drop-in invece di modificare /etc/systemd/resolved.conf, perché il file principale ha precedenza più bassa di qualunque drop-in e un aggiornamento di pacchetto può litigarci con te. La numerazione è una convenzione documentata: i produttori prendono da 10 a 40 sotto /usr/, tu prendi da 60 a 90 sotto /etc/, così vince il tuo.6\nDa systemd 261 in poi c\u0026rsquo;è una quinta riga che vale la pena aggiungere, perché fino ad allora la dimensione della cache non era regolabile per niente:\nDNSCacheSize=16384 # systemd 261+; default 4096, max 2^24 Applicalo e verifica che il demone sia d\u0026rsquo;accordo con il file, invece di dare per scontato che l\u0026rsquo;abbia letto:\nsystemd-analyze cat-config systemd/resolved.conf # every fragment, in precedence order systemctl restart systemd-resolved resolvectl status | grep -E \u0026#39;DNSSEC|Protocols\u0026#39; resolvectl statistics # verdicts should start moving DNSSEC=allow-downgrade è l\u0026rsquo;impostazione che metterei su una macchina che non ho intenzione di accudire, per le ragioni della sezione qui sopra. DNSSEC=yes è quella onesta e fallisce chiudendo. Scegli con cognizione di causa.\nCollegarlo allo stack di rete Accendere il servizio è un comando. Far sì che gli strumenti di rete della tua distribuzione gli passino la loro configurazione DNS è la parte che varia, ed è lì che «abilitato» e «funziona come si deve» si separano.\nDa dove arriva la configurazione DNS Per attivare DNSSEC Per dimensionare la cache Collegamenti extra necessari Fedora NetworkManager, in automatico drop-in drop-in nessuno Ubuntu netplan, poi NM o networkd drop-in, o per link nel .network drop-in nessuno Debian lo stack che hai scelto drop-in, o per link nel .network drop-in libnss-resolve, più lo stack qui sotto Famiglia RHEL NetworkManager, una volta istruito drop-in drop-in dns=systemd-resolved Fedora L\u0026rsquo;integrazione più completa delle quattro, e l\u0026rsquo;unica dove tutto è già collegato.\nNetworkManager possiede la rete e passa il DNS a resolved senza che glielo si dica. Su questa macchina non c\u0026rsquo;è nessuna riga dns= in tutto /etc/NetworkManager/ e funziona lo stesso, perché NetworkManager rileva il demone in funzione e lo usa. /etc/resolv.conf è il symlink allo stub, e glibc è collegato perché libnss_resolve.so.2 sta in systemd-libs, che non è opzionale:\n$ rpm -qf /usr/lib64/libnss_resolve.so.2 systemd-libs-259.9-1.fc44.x86_64 $ grep ^hosts: /etc/nsswitch.conf hosts: files myhostname mdns4_minimal [NOTFOUND=return] resolve [!UNAVAIL=return] dns Quindi su Fedora il drop-in qui sopra è tutto il lavoro. Nient\u0026rsquo;altro da collegare.\nUbuntu Abilitato di default, e nss-resolve è collegato allo stesso modo. La differenza è che di solito la configurazione arriva tramite netplan:\nnetwork: version: 2 ethernets: enp1s0: dhcp4: true nameservers: addresses: [9.9.9.9, 149.112.112.112] search: [example.com] Netplan la passa al suo renderer, NetworkManager sul desktop o systemd-networkd sul server, e il renderer la passa a resolved. Nota cosa netplan non sa esprimere. Non c\u0026rsquo;è una chiave netplan per DNSSEC=, e nessuna per DNSOverTLS=. Quelle vanno nel drop-in qui sopra, che è comunque il loro posto.\nSe usi systemd-networkd, le impostazioni per link sono disponibili anche in modo nativo nel file .network, e un\u0026rsquo;impostazione per link batte quella globale:\n# /etc/systemd/network/10-lan.network [Network] DNS=9.9.9.9#dns.quad9.net DNSSEC=yes DNSOverTLS=yes Domains=~. Debian va collegato a mano Questa è quella che davvero non è collegata, e il motivo per cui esiste la sezione qui sopra.\nDa Debian 12 systemd-resolved è un pacchetto separato, e le note di rilascio sono esplicite sull\u0026rsquo;aggiornamento: «The new systemd-resolved package will not be installed automatically on upgrades», e «until it has been installed, DNS resolution might no longer work since the service will not be present on the system.»12 Le stesse note chiudono la questione più ampia: «systemd-resolved was not, and still is not, the default DNS resolver in Debian.»\nInstallarlo vuol dire due pacchetti, non uno, e il secondo è quello che tutti si perdono:\napt install systemd-resolved libnss-resolve systemctl enable --now systemd-resolved libnss-resolve è solo Suggests:, non una dipendenza,13 e Suggests è l\u0026rsquo;unica relazione su cui apt non agisce. Quindi nessuno lo installa.\nIl motivo per cui nessuno se ne accorge è più interessante del motivo per cui nessuno lo installa. Lascialo fuori e glibc raggiunge comunque resolved, perché /etc/resolv.conf punta allo stub e il semplice nss-dns ci parla. Quasi tutto il demone continua a funzionare:\nSenza libnss-resolve Con Cache Sì, tramite lo stub Sì Convalida DNSSEC Sì, avviene nel demone Sì DNS over TLS Sì Sì Il bit AD arriva a glibc Sì, resolv.conf porta trust-ad Sì Sicuro, non sicuro o falso No, un solo bit Sì Indirizzi con scope di link No Sì /etc/hosts letto dal demone No Sì Niente nella colonna di sinistra sembra rotto, quindi niente viene sistemato. Quello che perdi è ciò che il formato DNS non sa trasportare, e il caso più chiaro è un indirizzo con uno scope:\n$ getent hosts _gateway # via nss-resolve fe80::5054:ff:fe12:3456 _gateway $ dig +short @127.0.0.53 _gateway # via the stub, as nss-dns would 192.0.2.1 Stesso nome, stesso demone, due risposte diverse. Un indirizzo IPv6 link-local non ha senso senza l\u0026rsquo;interfaccia a cui è legato, e in una risposta DNS non c\u0026rsquo;è posto per metterla, quindi lo stub può restituire solo l\u0026rsquo;IPv4. L\u0026rsquo;API nativa ha un posto dove metterla e ti dà l\u0026rsquo;indirizzo che volevi davvero.\nLa riga del verdetto è lo stesso problema. AD è un bit, firmato o no. L\u0026rsquo;API nativa distingue sicuro da non sicuro da falso, che è la differenza tra «nessuno ha firmato questo» e «qualcuno ha firmato questo e qualcun altro ci ha messo le mani». Un\u0026rsquo;applicazione a cui importa non può distinguerli passando dal formato DNS.\nQuesto è lo scarto tra il servizio in funzione e il servizio collegato, e resta invisibile finché non lo vai a cercare.\nControlla che sia andato a buon fine:\ngrep ^hosts: /etc/nsswitch.conf # wants \u0026#39;resolve [!UNAVAIL=return] dns\u0026#39; Quattro ingressi su Debian, e quello che non viene installato per te DA DOVE ARRIVA LA CONFIGURAZIONE COME ENTRA IL DEMONE ifupdown, statico ifupdown, DHCP systemd-networkd NetworkManager shim resolvconf = resolvectl resolved 127.0.0.53 E IL PEZZO CHE NESSUNO INSTALLA glibc getaddrinfo() libnss-resolve Solo Suggests:. Senza, glibc funziona lo stesso, ma il verdetto non gli arriva mai. Quattro ingressi su Debian, e quello che non viene installato per te Come il resto della tua rete lo raggiunge dipende da quale degli stack di Debian usi.\nIl pacchetto dichiara Provides: resolvconf e Conflicts: resolvconf, openresolv,13 quindi si prende per intero l\u0026rsquo;interfaccia resolvconf. /usr/sbin/resolvconf diventa un symlink a resolvectl, che è un binario multi-chiamata: invocato con quel nome parla il protocollo di resolvconf(8) e spinge tutto quello che riceve direttamente in resolved.14 Tutto ciò che chiama già resolvconf -a continua quindi a funzionare senza modifiche, con systemd-resolved come unico backend supportato.\nNon tutta l\u0026rsquo;interfaccia sopravvive, e i buchi falliscono rumorosamente, non in silenzio:\nOpzione di resolvconf Sotto systemd-resolved -a \u0026lt;iface\u0026gt; Registra il DNS per link letto da stdin. È quella che conta -d \u0026lt;iface\u0026gt; Annulla la registrazione, come resolvectl revert -x Tradotta in un dominio di instradamento ~. -p Segna il link come non instradamento predefinito (systemd 257+) -f Rende -a e -d silenziosi su un\u0026rsquo;interfaccia che non c\u0026rsquo;è -m Accettata e ignorata in silenzio -u, -i, -I, -l, -r, -R, -v, -V Non supportate. Il comando fallisce Una trappola da conoscere prima di mettersi a fare debug: lo shim scrive /etc/resolv.conf solo quando quel file è un symlink a /run/systemd/resolve/resolv.conf, e non quando è un file statico.14\nifupdown, il predefinito su un\u0026rsquo;installazione server di Debian. La stanza dns-nameservers in /etc/network/interfaces è sempre stata implementata dagli hook del vecchio pacchetto resolvconf, e systemd-resolved va in conflitto con quel pacchetto e non installa hook propri in /etc/network/if-up.d/. Per un\u0026rsquo;interfaccia statica, non fare affidamento sulla stanza. Imposta i server sul link in modo esplicito e lascia che sia resolved a possederli:\n# /etc/network/interfaces auto enp1s0 iface enp1s0 inet static address 192.0.2.10/24 gateway 192.0.2.1 up /usr/sbin/resolvconf -a $IFACE \u0026lt;\u0026lt;\u0026lt; \u0026#39;nameserver 192.0.2.53\u0026#39; down /usr/sbin/resolvconf -d $IFACE DHCP su ifupdown è già gestito. isc-dhcp-client installa degli hook intitolati al demone, /etc/dhcp/dhclient-enter-hooks.d/resolved-enter e /etc/dhcp/dhclient-exit-hooks.d/resolved,15 quindi i server DNS di un lease finiscono sul link giusto senza niente da configurare.\nsystemd-networkd è l\u0026rsquo;opzione più pulita e non ha bisogno di alcuno shim, perché le due metà sono lo stesso progetto. DNS per link, DNSSEC e DoT sono chiavi native nel file .network, esattamente come nell\u0026rsquo;esempio di Ubuntu qui sopra.\nNetworkManager, su un desktop Debian, va istruito una volta:\n# /etc/NetworkManager/conf.d/10-resolved.conf [main] dns=systemd-resolved Scegline uno e sappi quale hai scelto. Il modo di fallire qui non è un demone che rifiuta di partire, sono due stack che credono entrambi di possedere /etc/resolv.conf, il che si presenta come DNS intermittente e ti fa perdere un pomeriggio. resolvectl status dice su quale link sono finiti i server. Se la risposta è nessuno, niente sta alimentando il demone, e il bug è quello.\nRHEL, Rocky e Alma Ed ecco quella da leggere due volte. Il pacchetto c\u0026rsquo;è, nss-resolve è disponibile, NetworkManager può guidarlo, e la documentazione di Red Hat dice questo:\nsystemd-resolved is an unsupported Technology Preview.16\nQuella formulazione è nelle note di rilascio di RHEL 9 dalla 9.0 ed è ancora lì alla 9.8. Technology Preview significa nessuno SLA di produzione, e Red Hat sconsiglia esplicitamente di usarlo in produzione.\nE non è nemmeno abilitato. Su questi sistemi resolv.conf è di NetworkManager, quindi accenderlo è un\u0026rsquo;impostazione di NetworkManager e non basta abilitare la unit:\n# /etc/NetworkManager/conf.d/10-resolved.conf [main] dns=systemd-resolved systemctl enable --now systemd-resolved systemctl reload NetworkManager resolvectl status # confirm NM actually handed the servers over Dopo di che il drop-in qui sopra si applica senza modifiche, e convalida e cache si comportano esattamente come su Fedora.\nQuindi su RHEL hai una decisione che sulle altre non esiste. Vuoi un resolver locale con convalida, cache e split DNS su una macchina RHEL supportata? Allora la risposta supportata non è questa. È unbound, o dnsmasq tramite il dns=dnsmasq di NetworkManager stesso, entrambi soluzioni su cui Red Hat ci mette davvero la faccia.\nL\u0026rsquo;etichetta non è un giudizio sul codice. È un giudizio su cosa Red Hat è disposta a coprire con uno SLA, e un resolver con cache e convalida è una cosa su cui i clienti aprono ticket. Comprensibile. Ma se compri RHEL per il supporto, far girare la risoluzione dei nomi su un componente non supportato è una decisione da prendere di proposito e mettere per iscritto, non una in cui scivolare perché era nel repository.\nNiente è davvero menomato, ed ecco come dimostrarlo Vale la pena mettere alla prova la premessa, perché «la mia distro l\u0026rsquo;ha disattivato, dovrò ricompilare» è il riflesso, e qui è sbagliato.\nsystemd ha due tipi del tutto diversi di opzione di build, e se ne parla come se fossero uno solo:17\nOpzione di build Tipo Upstream Fedora Debian e Ubuntu Modificabile a runtime resolve capacità attivo compilato true no, ed entrambe lo compilano nss-resolve capacità enabled compilato, sta in systemd-libs enabled, distribuito come libnss-resolve no, ed entrambe lo compilano dns-over-tls capacità auto auto, diventa OpenSSL openssl no, ed entrambe lo includono openssl capacità enabled enabled enabled no, ed entrambe lo attivano default-dnssec solo predefinito allow-downgrade no no sì, in un drop-in default-dns-over-tls solo predefinito no no predefinito upstream sì, in un drop-in default-mdns solo predefinito yes no no sì, in un drop-in default-llmnr solo predefinito yes resolve no sì, in un drop-in Leggi l\u0026rsquo;ultima colonna. Ogni impostazione di cui questo articolo si è lamentato sta nella metà bassa, e ognuna è un valore predefinito, non una capacità. Il codice è compilato in entrambe. Nessuno ha tolto niente.\nLa prova è più indietro in questo articolo e non ha richiesto un compilatore. Sul pacchetto Fedora di serie, con DNSSEC=no incorporato, un solo comando ha acceso la convalida e ha funzionato per intero: una zona firmata autenticata, una non firmata riportata onestamente, una rotta rifiutata con una diagnosi precisa. Se fosse stata esclusa dalla compilazione, resolvectl status non avrebbe mai detto yes/supported.\nQuindi controlla la tua build prima di metter mano a una toolchain:\n# is the crypto there at all systemctl --version | tr \u0026#39; \u0026#39; \u0026#39;\\n\u0026#39; | grep -E \u0026#39;^[+-](OPENSSL|GNUTLS|GCRYPT)$\u0026#39; # ask for the feature and read back what the daemon says it can do resolvectl dnssec \u0026lt;link\u0026gt; yes resolvectl status \u0026lt;link\u0026gt; | grep DNSSEC # yes/supported means the code is there Su questa macchina Fedora il risultato è -GCRYPT +GNUTLS +OPENSSL, che basta e avanza: DNSSEC ha bisogno di una di queste e DoT è compilato contro OpenSSL.\nCosa tolgono davvero le distribuzioni C\u0026rsquo;è una cosa che entrambe tolgono, e non è nell\u0026rsquo;elenco di cui si lamenta qualcuno.\nUpstream compila dentro il binario un elenco di server DNS di ripiego: Cloudflare, Google e Quad9.17 Sia Fedora sia Debian compilano con -Ddns-servers= vuoto, e puoi verificarlo sul binario installato invece di fidarti della mia parola:\n$ strings /usr/lib/systemd/systemd-resolved | grep -ciE \u0026#39;quad9|one\\.one\\.one|dns\\.google\u0026#39; 0 Niente. Nessun hyperscaler incorporato nell\u0026rsquo;eseguibile.\nÈ l\u0026rsquo;unico punto in cui entrambe le distribuzioni hanno migliorato upstream, e merita di essere detto chiaramente visto quanto di questo articolo parla di predefiniti che ritengo sbagliati. Una macchina che perde la configurazione DNS dovrebbe fallire in modo evidente e aspettarti. Non dovrebbe mandare in silenzio ogni nome che cerchi a un resolver in un\u0026rsquo;altra giurisdizione che non hai mai scelto. Vuoi un ripiego? Imposta FallbackDNS= e scegli tu chi è.\nSe ti serve davvero una ricompilazione Esiste un caso reale: una build minimale o embedded in cui qualcuno ha passato -Ddns-over-tls=false e il trasporto manca davvero. Controlla prima con i comandi qui sopra, perché è raro e sembra identico all\u0026rsquo;impostazione semplicemente spenta.\nSe ti serve, ricompila il pacchetto, mai make install:\n# Fedora dnf download --source systemd rpmbuild --rebuild --define \u0026#39;_with_upstream 1\u0026#39; systemd-*.src.rpm # Debian and Ubuntu apt source systemd cd systemd-*/ \u0026amp;\u0026amp; editor debian/rules # change the -Ddefault-* flags dpkg-buildpackage -us -uc -b Non ho eseguito nessuno dei due su questa macchina, quindi prendili come la forma del lavoro, non come una ricetta collaudata. Conta il principio. systemd è il PID 1, e un make install fatto a mano sopra la copia della tua distribuzione lo toglie dal gestore di pacchetti: niente più aggiornamenti di sicurezza, e il prossimo aggiornamento ti contende i file. Ricompilare il pacchetto conserva entrambe le cose. Per quasi tutti la risposta onesta è che un drop-in di quattro righe fa lo stesso lavoro in venti secondi, ed è per questo che questa sezione esiste soprattutto per dissuaderti.\nTre configurazioni che vale la pena usare Non un menu di ogni opzione. Tre posizioni, ognuna delle quali difenderei davvero.\nPortatile, reti ostili Server, la tua rete Rigida Da cosa ti difendi Il bar e il portale dell\u0026rsquo;albergo Niente di locale; l\u0026rsquo;upstream convalida già Un percorso di resolver di cui non ti fidi DNSSEC= allow-downgrade no yes DNSOverTLS= opportunistic no yes StaleRetentionSec= 1d 1d non impostato Sopravvive a un captive portal Sì n/d No Sopravvive a un .arpa filtrato Sì Sì No Sopravvive alla porta 853 bloccata Sì n/d No Un attaccante può declassarla Sì, entrambe le impostazioni n/d No Un portatile su reti che non controlli. Cifra il trasporto, e accetta il rischio di declassamento in cambio del fatto che funzioni ancora dietro un captive portal.\n# /etc/systemd/resolved.conf.d/60-local.conf [Resolve] DNS=9.9.9.9#dns.quad9.net 149.112.112.112#dns.quad9.net DNSOverTLS=opportunistic DNSSEC=allow-downgrade Cache=yes StaleRetentionSec=1d Un server su una rete che gestisci tu, con convalida a monte. È già successo un salto più in là. Non farlo due volte, e non prendere una dipendenza da un resolver pubblico.\n[Resolve] DNSSEC=no DNSOverTLS=no Cache=yes CacheFromLocalhost=no StaleRetentionSec=1d Una macchina dove vuoi la cosa vera. Rigida su entrambi i fronti, niente che un attaccante possa declassare, e hai verificato che l\u0026rsquo;upstream regga.\n[Resolve] DNS=9.9.9.9#dns.quad9.net 149.112.112.112#dns.quad9.net DNSOverTLS=yes DNSSEC=yes Cache=yes Quella terza romperà il DNS inverso se qualcosa sul tuo percorso filtra .arpa, si romperà del tutto se la porta 853 è bloccata, e fallisce chiudendo invece che in silenzio. Queste sono le condizioni. Conoscile prima di metterla in produzione, non dopo, perché una macchina che non riesce a risolvere niente è un lungo viaggio in macchina se non sta nella stanza accanto.\nQualunque scegli, applicala e poi controlla cosa ha deciso davvero il demone, non cosa hai scritto tu:\nsystemd-analyze cat-config systemd/resolved.conf # every file, in order systemctl restart systemd-resolved resolvectl status # the state it is really in resolvectl status qui è l\u0026rsquo;oracolo, così come la build è l\u0026rsquo;oracolo per un sito Hugo. Un\u0026rsquo;impostazione in un file è un\u0026rsquo;intenzione. Quello che stampa status è ciò che sta succedendo.\nGli altri verbi vale la pena conoscerli, perché insieme rispondono a quasi ogni domanda che avrai su questo demone senza leggere un log:\nComando Cosa ti dice resolvectl status Server, domini e protocolli per link, e lo stato attuale di DNSSEC e DoT resolvectl query NAME La risposta, il protocollo usato, il verdetto DNSSEC, e se è arrivata dalla cache resolvectl statistics Hit contro miss della cache, e il conteggio aggiornato di sicuri/non sicuri/falsi resolvectl show-cache Tutto ciò che è in cache al momento, per scope resolvectl flush-caches Svuota la cache senza riavviare il demone resolvectl dns LINK ... Imposta i server su un link a runtime, senza file di configurazione resolvectl dnssec LINK yes Accende la convalida su un link, per provare prima di consolidare resolvectl domain LINK ~x Imposta i domini di instradamento e di ricerca su un link resolvectl revert LINK Butta via ogni modifica a runtime su quel link resolvectl show-server-state Il sondaggio delle funzioni per server: cosa risulta supportare ogni upstream resolvectl monitor Guarda query e risposte in diretta, che è meglio che tirare a indovinare Tutto ciò che sta in quel blocco centrale vale solo a runtime e non sopravvive al link che torna su, il che lo rende il modo giusto per provare un\u0026rsquo;impostazione prima di scriverla in un drop-in. Significa anche che nmcli device reapply annullerà in silenzio le tue prove, quindi controlla status dopo, non prima.\nI predefiniti sono una presa di posizione, non un incidente Tre funzioni nella scatola. Una accesa.\nViene la tentazione di leggerci della pigrizia. Non lo è. Ognuno di quei predefiniti è stato discusso da persone che vedevano la coda dei bug dall\u0026rsquo;altra parte della decisione, e Fedora almeno ha scritto onestamente di non poter reggere il carico di supporto. È un vincolo reale e non farò finta che non lo sia.\nMa un predefinito è una presa di posizione, e questo dice che una ricerca che nessuno può verificare è una base accettabile su cui costruire. Abbiamo lo standard dal 2005. I registri pubblicano i record gratis, il resolver sulla tua macchina implementa tutto, e il motivo per cui resta fermo è che troppa parte di internet non ha mai firmato niente, quindi accenderlo fa della tua la macchina che sembra rotta. È la forma di ogni standard che nessuno fa rispettare. Fare le cose come si deve è un costo che porti da solo, e il beneficio arriva solo quando abbastanza altri l\u0026rsquo;hanno portato anche loro.\nEd è per questo che il censimento è la parte su cui andrei davvero ad agire. Non le impostazioni. Le impostazioni sono venti minuti. Il censimento dice che le organizzazioni che pubblicano le linee guida, distribuiscono il resolver e ospitano il codice sorgente del mondo per lo più non hanno firmato le proprie zone, e che gov.uk ha firmato l\u0026rsquo;apex e poi ha puntato l\u0026rsquo;unico sito che nessuno può evitare di usare su una delega non firmata. Qualcuno ha fatto la parte difficile e poi non ha mai controllato il nome che la gente digita.\nPuoi sistemare solo la tua. Se gestisci una zona, firmala, deposita il DS, poi vai a cercare il nome www come farebbe un visitatore e verifica che la catena regga fino in fondo. È un pomeriggio. Fallo e l\u0026rsquo;argomento a favore della convalida smette di essere teorico per chiunque risolva il tuo nome, che è l\u0026rsquo;unica parte di tutto questo che ciascuno di noi può davvero aggiustare.\nsystemd-resolved.service(8) — «implements a caching and validating DNS/DNSSEC stub resolver»; le quattro interfacce client, i due stub listener, i record sintetici, le regole di instradamento e le quattro modalità di /etc/resolv.conf.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5), come distribuito in systemd 259.9 su Fedora 44 — DNSSEC=, DNSOverTLS=, Cache=, CacheFromLocalhost=, StaleRetentionSec= e la descrizione dello stub proxy 127.0.0.54.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5) — DNSCacheSize=, MulticastDNSCacheSize= e LLMNRCacheSize=, «Each defaults to 4096», aggiunte in systemd 261.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5737 — «IPv4 Address Blocks Reserved for Documentation»: 192.0.2.0/24, 198.51.100.0/24 e 203.0.113.0/24.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3849 — 2001:DB8::/32 riservato alla documentazione, «to reduce the likelihood of conflict and confusion when relating documented examples to deployed systems».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5), upstream latest — DNSSEC= «Defaults to allow-downgrade», DNSOverTLS= «Defaults to no», la convenzione di numerazione dei drop-in, e l\u0026rsquo;elenco completo delle direttive, senza alcuna opzione DNS over HTTPS.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora systemd.spec, rawhide — i flag di build meson -Ddefault-dnssec=no, -Ddefault-dns-over-tls=no, -Ddefault-mdns=no, -Ddefault-llmnr=resolve.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian systemd packaging, debian/rules — -Ddefault-dnssec=no, -Ddefault-llmnr=no, -Ddefault-mdns=no, -Ddns-over-tls=openssl. Il systemd di Ubuntu deriva da questo pacchetto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora Change: systemd-resolved — Fedora 33 lo ha reso il resolver predefinito; cambia il predefinito «from the upstream default DNSSEC=allow-downgrade to DNSSEC=no» perché la funzione «is known to cause compatibility problems with certain network access points» e Fedora «is not prepared to handle an influx of DNSSEC-related bug reports».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora Magazine — Use DNS over TLS — la configurazione DNSOverTLS=yes consigliata, data con indirizzi IP nudi e senza la forma SNI #hostname.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd issue #8639 — «Add support for DNS-over-HTTPS to systemd-resolved», aperta il 2 aprile 2018, ancora aperta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian 12 release notes, 5.2.3 — «The new systemd-resolved package will not be installed automatically on upgrades»; «until it has been installed, DNS resolution might no longer work»; «systemd-resolved was not, and still is not, the default DNS resolver in Debian.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian systemd packaging, debian/control — la stanza di systemd-resolved: Provides: resolvconf, Conflicts: resolvconf, openresolv, Replaces: resolvconf, e libnss-resolve elencato solo sotto Suggests:.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolvconf(1), the resolvectl compatibility mode — resolvectl «is a multi-call binary. When invoked as \u0026lsquo;resolvconf\u0026rsquo; \u0026hellip; it is run in a limited resolvconf(8) compatibility mode»; systemd-resolved «is the only supported backend»; quali opzioni sono supportate, ignorate o rifiutate; e la regola per cui /etc/resolv.conf viene scritto solo quando è un symlink a /run/systemd/resolve/resolv.conf.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian isc-dhcp-client file list — installa /etc/dhcp/dhclient-enter-hooks.d/resolved-enter e /etc/dhcp/dhclient-exit-hooks.d/resolved.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRHEL 9.4 release notes, Technology Previews — «Note that systemd-resolved is an unsupported Technology Preview.» Riportato invariato da RHEL 9.0 fino alla 9.8.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd meson_options.txt — la separazione tra opzioni di capacità (resolve, nss-resolve, dns-over-tls, openssl) e opzioni di valore predefinito (default-dnssec, default-dns-over-tls, default-mdns, default-llmnr), e l\u0026rsquo;elenco di ripiego dns-servers compilato nel binario.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/dns/resolved-the-resolver-you-are-already-running/","summary":"systemd-resolved gira in questo momento sulla maggior parte dei desktop Linux: mette in cache ogni ricerca e non ne convalida nessuna. Qui si percorre il cammino della risoluzione, da nss-resolve ai due stub listener, si misura quanto vale la cache su una macchina vera, si attiva DNSSEC mostrando i tre verdetti che può restituire, e si spiega perché la convalida è spenta di default quando upstream la distribuisce accesa. Poi un censimento di quanto poco del web sia davvero firmato, DNS over TLS con la sua trappola tra modalità rigida e opportunistica, e il supporto a DNS over HTTPS chiesto dal 2018 e che ancora non esiste. Si chiude con cosa installano Fedora, Ubuntu, Debian e la famiglia RHEL, come collegarlo in ciascuna, e perché le funzioni che la tua distribuzione ha disattivato sono valori predefiniti e non codice mancante.","title":"Resolved: il resolver che stai già usando"},{"content":"C\u0026rsquo;è un modo per qualsiasi cosa sulla tua rete di cercare un nome senza che il tuo server DNS senta mai la domanda. Nessuna impostazione cambiata sulla macchina, nessun diritto di amministratore, niente che troveresti in un log. La ricerca esce come una normale richiesta HTTPS sulla porta 443, va a un resolver da qualche parte su internet, e torna con una risposta che il tuo resolver si sarebbe rifiutato di dare.\nLa blocklist non scatta mai. Il feed delle minacce non riceve mai la query. La riga di log che saresti andato a cercare non è mai stata scritta.\nSi chiama DNS over HTTPS, DoH in breve, ed è stato costruito per una buona ragione. Il DNS normale viaggia in chiaro sulla porta 53, quindi il bar, l\u0026rsquo;aeroporto e il tuo provider internet possono leggere ogni nome che risolvi e cambiare le risposte se gli va. DoH avvolge la ricerca nella stessa cifratura del resto del web e la nasconde nella folla. Come misura di privacy per una persona su una rete ostile, fa esattamente quello che dice.\nIl guaio è che la cosa che sconfigge e la cosa su cui fai affidamento sono la stessa cosa.\nIl tuo resolver non è solo un servizio di ricerca. È un punto di controllo: dove a un dominio noto come cattivo si risponde con niente, dove una query verso un server di comando compare in un log, dove il Protective DNS rifiuta il dominio del malware prima che la connessione venga aperta. DoH toglie la ricerca al tuo resolver e la consegna a uno che non hai mai scelto, e ogni controllo che avevi appeso a quel resolver se ne va con lei.\nIl DNS normale passa dal tuo resolver. DoH ci gira intorno. Stesso portatile, stessa domanda. Una risposta passa i tuoi controlli, l'altra non li incontra mai. DNS normale, porta 53 DNS over HTTPS, porta 443 Portatile chiede un nome Il tuo resolver blocklist e feed di minacce controllati query registrata per il client nome cattivo: risposta NXDOMAIN Internet solo se ha passato i controlli Portatile chiede un nome Il tuo resolver mai interpellato niente da bloccare niente da registrare HTTPS verso un resolver scelto da lui Il resolver di un altro risponde a tutto Il firewall vede una connessione web cifrata in più. Ne vede migliaia al minuto, e sul filo questa è uguale alle altre. Lo stesso portatile che fa la stessa domanda. A sinistra passa per il tuo resolver, che controlla il nome, lo registra e solo dopo chiede a internet. A destra esce dritto via HTTPS verso un resolver scelto dal client. Il tuo resolver non la sente mai, quindi non c\u0026rsquo;è niente da bloccare e niente da registrare, e al confine è una connessione web cifrata in più tra migliaia. Questo non è un argomento contro la cifratura del DNS. Il DNS cifrato è giusto, e l\u0026rsquo;ultima sezione di questo articolo spiega come gestirlo. È un argomento su chi sceglie il resolver, perché quella scelta è tutta la partita, e DoH è stato progettato per toglierla a te e darla al browser, all\u0026rsquo;app e, se non stai attento, all\u0026rsquo;attaccante.\nCos\u0026rsquo;è davvero DoH Togli il marchio e DoH è una normale richiesta web che per caso porta una domanda DNS.\nIl DNS ordinario è un piccolo messaggio binario mandato via UDP o TCP alla porta 53. DoH mette quello stesso messaggio, o una sua versione JSON, dentro una richiesta HTTPS a un server web che parla il protocollo; la risposta è una risposta HTTPS1. Questa è tutta l\u0026rsquo;idea.\nL\u0026rsquo;RFC 8484 l\u0026rsquo;ha standardizzato nell\u0026rsquo;ottobre 2018, e l\u0026rsquo;intento non è mai stato nascosto. Lo scopo, dice la sua stessa introduzione, è «allowing web applications to access DNS information via existing browser APIs»1.\nAPI del browser esistenti. Una pagina web. Nessuno l\u0026rsquo;ha scoperto anni dopo come un effetto collaterale imbarazzante. Sta nel primo paragrafo dello standard, scritto come obiettivo.\nEcco una ricerca fatta alla maniera DoH, da riga di comando, contro un resolver pubblico, chiedendo example.com:\n$ curl -s -H \u0026#39;accept: application/dns-json\u0026#39; \\ \u0026#39;https://cloudflare-dns.com/dns-query?name=example.com\u0026amp;type=A\u0026#39; {\u0026#34;Status\u0026#34;:0,\u0026#34;TC\u0026#34;:false,\u0026#34;RD\u0026#34;:true,\u0026#34;RA\u0026#34;:true,\u0026#34;AD\u0026#34;:true,\u0026#34;CD\u0026#34;:false, \u0026#34;Question\u0026#34;:[{\u0026#34;name\u0026#34;:\u0026#34;example.com\u0026#34;,\u0026#34;type\u0026#34;:1}], \u0026#34;Answer\u0026#34;:[{\u0026#34;name\u0026#34;:\u0026#34;example.com\u0026#34;,\u0026#34;type\u0026#34;:1,\u0026#34;TTL\u0026#34;:146, \u0026#34;data\u0026#34;:\u0026#34;23.192.228.80\u0026#34;}]} Nessun client speciale. Nessuna porta tranne la 443. Una sola richiesta HTTPS, della stessa forma di quella che scarica una pagina web, e un nome risolto da una macchina dall\u0026rsquo;altra parte del mondo che non ha mai sentito parlare della tua rete né delle tue regole. Google gestisce lo stesso endpoint, e così Quad9, e decine di altri.\nOra guarda cosa vede il tuo firewall. Una connessione TLS a un server web sulla 443, che non può leggere dentro perché è proprio lo scopo del TLS, e che non può distinguere dalle centinaia di altre che si aprono ogni secondo verso reti di distribuzione dei contenuti, strumenti di analisi e pubblicità. La domanda DNS è sparita. È uscita dall\u0026rsquo;edificio vestita da traffico web e nessuno alla porta ha potuto vederla in faccia.\nSul filo, una ricerca DoH è una domanda DNS sigillata in una richiesta web. Stessa domanda. Una è scritta sulla busta, l'altra è sigillata tre strati dentro. DNS normale, porta 53 DoH, porta 443 Query DNS name=badsite.example type=A Il firewall la legge tutta. Vede il nome, lo controlla, lo blocca o lo registra. Record TLS (tutto ciò che vede il firewall) Richiesta HTTP a un server web Query DNS (sigillata) name=badsite.example type=A Sulla porta 443 il firewall vede solo lo strato esterno. Una connessione TLS a un server web, come una pagina, una pubblicità o un beacon di analisi. Il nome non affiora mai. Una query DNS normale è scritta sulla busta: il firewall legge il nome e agisce. Una query DoH è la stessa domanda sigillata dentro una richiesta HTTP dentro un record TLS, e tutto quello che il firewall vede è lo strato esterno, una connessione a un server web sulla 443 uguale a tutte le altre. Il nome non affiora mai dove un controllo potrebbe raggiungerlo. Ci sono tre modi in cui un client può far viaggiare una ricerca DNS, e vale la pena metterli fianco a fianco, perché la differenza è tutto l\u0026rsquo;articolo.\nTrasporto Porta Il tuo resolver la vede Rifiutabile al confine Cifrato DNS normale 53 (UDP/TCP) Sì, se la costringi a passarci Sì, chiudi la 53 in uscita No DNS over TLS (DoT) 853 Solo se punta al tuo Sì, chiudi la 853 in uscita Sì DNS over HTTPS (DoH) 443 Solo se punta al tuo No, la 443 non la puoi chiudere Sì Il DNS normale è leggibile e bloccabile, ed è esattamente per questo che era facile da controllare e facile da spiare. DoT cifra la ricerca ma tiene una porta sua, quindi puoi ancora rifiutarla al confine. DoH è quello senza appiglio: cifrato come DoT, ma sulla sola porta che non puoi mai chiudere, quindi l\u0026rsquo;unica leva rimasta è quale resolver ha scelto il client, ed è la leva di cui parla questo articolo.\nChi sceglie il resolver Il motivo per cui conta è che una macchina moderna ha cinque cose diverse che possono decidere ognuna dove va il DNS, e di serie tu ne controlli esattamente una.\nCinque cose su una macchina possono scegliere un resolver. Tu ne imposti una. Chi decide dove va la ricerca Livello Chi sceglie il resolver Tuo di serie? Sistema operativo La tua rete, via DHCP o router advertisement Sì Browser Il predefinito del produttore, salvo tua policy Solo se imposti la policy Applicazione o sua libreria Chi ha scritto il codice, alla build No Script su una pagina web Chi gestisce il sito, o uno script che carica No Malware Chi lo gestisce, nel codice, spesso per indirizzo No Gli ultimi tre non hanno bisogno di diritti di amministratore, di impostazioni cambiate, né di niente che vedresti nel sistema. Cinque livelli su una macchina, ognuno in grado di scegliere il proprio resolver. Il sistema operativo usa quello che ti dà la rete, e quello è tuo. Il browser usa quello predefinito del suo produttore, a meno che la tua policy dica altro. Un\u0026rsquo;applicazione, uno script su una pagina web e il malware scelgono ognuno per conto proprio e non hanno bisogno di niente da te per farlo. Il sistema operativo chiede al resolver che la tua rete ha distribuito via DHCP o router advertisement. Quello è tuo, ed è il modello che tutto quello più vecchio del 2019 circa dava per scontato: un resolver, distribuito dalla rete, ed è per questo che i controlli DNS a livello di rete hanno funzionato per trent\u0026rsquo;anni.\nIl browser l\u0026rsquo;ha rotto. Firefox e Chrome hanno entrambi il meccanismo per fare il proprio DoH, verso un resolver scelto dal produttore, scavalcandoti, e si fanno da parte solo quando riconoscono una rete gestita. E un\u0026rsquo;applicazione può portarsi il proprio client DoH e un resolver scritto nel codice, deciso al momento della build; non legge il tuo DHCP e non chiede. Tanto software legittimo lo fa già.\nUno script su una pagina web è quello che dovrebbe fermarti, perché non ha bisogno di niente di installato. Quel comando curl qui sopra è una sola richiesta HTTPS, e un browser fa richieste HTTPS di mestiere. Poche righe di JavaScript su qualsiasi pagina che un utente apre possono mandare ricerche a un endpoint DoH pubblico, perché i grandi provider accettano di proposito le richieste cross-origin così le web app possono usarli, lo scopo dichiarato nell\u0026rsquo;RFC 8484. La pagina che stai leggendo potrebbe risolvere nomi attraverso un resolver in un altro paese in questo momento e tu vedresti una connessione HTTPS in più.\nE il malware sceglie il proprio resolver per il motivo ovvio: non vuole che tu veda dove chiama. Si porta il resolver nel codice, spesso lo raggiunge per indirizzo così non c\u0026rsquo;è nessuna ricerca iniziale da intercettare, e non ha bisogno del tuo permesso per niente di tutto questo.\nRileggi quella colonna. Gli ultimi tre non hanno bisogno di diritti di amministratore, di nessuna impostazione cambiata, né di niente che si veda nel sistema operativo. Il controllo che hai passato anni a costruire, un resolver, una blocklist, un log, dava per scontato che la prima riga fosse l\u0026rsquo;unica. Non lo è più da anni.\nLo stesso trucco che temevano i produttori di browser Il caso della pagina web non è né teorico né recente. È il modo in cui si abusa degli helper di protocollo: una pagina web emette dei byte, qualcosa più a valle agisce su di essi, e non può capire che vengono dalla pagina di un attaccante invece che da un client vero, perché sul filo sono identici. Con DoH il pezzo a valle è un resolver pubblico, che risponde senza modo di sapere che il JavaScript che chiede viene da una pagina di phishing, e il tuo resolver, quello con la blocklist e il log, non è mai stato sul percorso per dire la sua. Non un buco aperto nei tuoi controlli, ma una strada costruita intorno a loro, asfaltata con la stessa cifratura che dici a tutti di usare.\nÈ già il canale di chi scrive malware Non serve immaginare come viene usato. È documentato da anni, da ricercatori con nome e cognome, su campioni veri, e la direzione è una sola: da un bot criminale nel 2019 a uno strumento di intelligence di stato l\u0026rsquo;anno dopo, e sempre più affollato da allora, con nuove backdoor che arrivano ancora nel 2026.\nCampione Segnalato Autore Cosa trasportava DoH Godlua 1 luglio 20192 Botnet criminale La ricerca del nome del suo server di comando PsiXBot 6 settembre 20193 Criminale (infostealer) La risoluzione del dominio di comando e controllo, via il DoH di Google OilRig (APT34) 2° trimestre 20204 Allineato allo stato iraniano Dati rubati, esfiltrati via DoH verso Google e Cloudflare ChamelDoH 16 giugno 20235 ChamelGang (APT) Tutto il suo canale di comando, DNS TXT via DoH verso Google e Cloudflare BRICKSTORM 4 dicembre 20256 Backdoor legata alla Cina C2 sepolto sotto HTTPS e TLS annidato, DoH tra gli strati Dohdoor 26 febbraio 20267 Non determinato (UAT-10027) Ricerche C2 mandate al DoH di Cloudflare sulla 443 Godlua, il primo caso ampiamente segnalato, era una backdoor per Linux e Windows la cui analisi registra che «uses DNS over HTTPS to get the C2 name to ensure secure communication between the bots, the Web Server and the C2»2. Su una rete che sorveglia la porta 53, risolvere il nome del tuo server di comando è un regalo a chi difende. Via DoH non c\u0026rsquo;è niente da sorvegliare.\nLa frase di Proofpoint su PsiXBot è quella da citare, un fornitore di threat intelligence che dice ad alta voce la parte che di solito si tace. Usare DoH per il comando e controllo, hanno scritto, «should be a warning shot for the cybersecurity community as there are no simple solutions to help identify an infected host or the process of receiving instructions»3. Nessuna soluzione semplice, detto da chi di mestiere le trova.\nPoi OilRig ha alzato il livello. La descrizione di Kaspersky è esattamente il cambiamento di cui parla questo articolo: «instead of plain text requests to port 53, they would use port 443 in encrypted packets», con uno strumento che «allows DoH queries to Google and Cloudflare services»4. Un\u0026rsquo;operazione di intelligence nazionale, che usa i provider DoH pubblici come tubo per portare fuori dati rubati oltre qualsiasi cosa sorvegliasse il DNS.\nE non si è fermata lì. Si è diffusa. Nel 2023 ChamelGang aveva una backdoor Linux in C++, ChamelDoH, che faceva passare tutto il suo canale di comando via DoH, mandando query DNS TXT ai propri nameserver attraverso Google e Cloudflare; il ricercatore che l\u0026rsquo;ha trovata ha notato che sia il rilevamento sia la prevenzione «become difficult», perché il trasporto cifrato non si può intercettare e una richiesta malevola non si distingue da una vera5. Nel dicembre 2025 la CISA ha smontato BRICKSTORM, una backdoor legata alla Cina che impila HTTPS, WebSocket e TLS annidato e «also uses DNS-over-HTTPS (DoH)» per seppellire il suo C2 nel normale traffico web6. Nel febbraio 2026 era ormai solo mestiere: Cisco Talos ha preso Dohdoor, che «securely sends encrypted DNS requests to Cloudflare\u0026rsquo;s DNS server over HTTPS port 443» per trovare il suo server di comando, entrando col phishing in scuole e ospedali americani7.\nQuesta è la forma. Non una tecnica che ha avuto il suo momento ed è sparita, ma una che ogni anno passa in più mani. Il problema peggiora, non migliora, e una nuova famiglia ormai arriva puntuale.\nUna sola proprietà ha fatto il lavoro in ognuno di questi casi: la ricerca è uscita come HTTPS sulla 443 e il resolver di chi difendeva non l\u0026rsquo;ha mai vista. Non una debolezza che qualcuno potrebbe scoprire un giorno. Una funzione che gli attaccanti hanno usato più e più volte, diversi di loro stati.\nE sia chiaro perché quella tabella si riempie, anno dopo anno. Ogni famiglia che ci compare passa da una porta che gli autori di DoH erano stati avvisati di lasciare aperta, nel testo stesso dello standard, e l\u0026rsquo;hanno lasciata aperta comunque8. Non è stata una svista. È stata miopia, scelta di proposito, da persone tra cui c\u0026rsquo;era il tecnologo dell\u0026rsquo;ICANN. Quindi la chiamo per quello che è: su questo, l\u0026rsquo;ICANN ha spianato la strada al crimine informatico. Avvisati nel testo stesso dello standard di cosa si sarebbe rotto, i suoi ci hanno messo la firma lo stesso, e la tabella qui sopra è quello che è passato dal varco. Il crimine non è una sorpresa. È il conto di una decisione, e di chi era quella decisione è il resto di questo articolo.\nE con tutto questo, DoH non compra nemmeno la cosa che la gente pensa: la protezione da una risposta falsificata. Cifrare il tratto verso un resolver non vuol dire autenticare quello che il resolver restituisce, e un server DoH può comunque restituire un record falsificato. Lo standard lo ammette, dicendo che la regola contro i server non configurati «does not guarantee protection against invalid data»9.\nL\u0026rsquo;unico meccanismo che autentica una risposta DNS è DNSSEC, e DoH non lo è. Peggio, per quasi tutti i client DNSSEC viene validato nel resolver ricorsivo, non sul dispositivo: il client si fida semplicemente della parola del resolver che la risposta è stata verificata. Quindi DNSSEC ti ha sempre protetto solo quanto ti fidavi del resolver che faceva il controllo, e la vera mossa di DoH è consegnare quella fiducia a un operatore remoto che non puoi vedere né verificare.\nPer questo DoH può renderti più probabile, non meno, finire su un sito falsificato: le difese locali che avrebbero preso una risposta dirottata, il feed di Protective DNS, il filtraggio dell\u0026rsquo;operatore stesso, sono proprio le cose che hai aggirato, e quello che resta è la parola di un operatore remoto, presa sulla fiducia.\nDoH sposta di chi ti fidi per la risposta. Non elimina il bisogno di fidarsi di qualcuno. Di qualcuno bisogna fidarsi per la risposta. DoH cambia solo chi, e lo dà a uno che non puoi verificare. Il tuo resolver Un resolver DoH remoto Il tuo dispositivo Resolver che controlli Valida DNSSEC per te Ha la tua blocklist e il log Puoi ispezionarlo e verificarlo Se mente, è tuo e puoi controllare Il tuo dispositivo tubo cifrato Resolver che non controlli Valida DNSSEC, e ti fidi sulla parola Non puoi vederlo né verificarlo La tua blocklist locale è fuori percorso Se falsifica, niente in locale lo nota La cifratura protegge il tubo, non la verità della risposta. DNSSEC si verifica nel resolver, quindi del resolver ti fidi in ogni caso. DoH lo rende solo uno che non vedi. DoH non elimina il bisogno di fidarsi di un resolver per la risposta, lo sposta e basta. Il tuo resolver valida DNSSEC, porta la tua blocklist e si può verificare; un resolver DoH remoto valida al posto tuo e tu prendi per buona la sua parola, su un tubo cifrato che protegge il tratto e non dice niente sul fatto che la risposta sia vera. Da cosa DoH dice di proteggere Lo fa? Ascolto sul tratto verso il resolver Sì, la ricerca è cifrata Manomissione su quel tratto Sì Un record falsificato dal resolver stesso No, è il lavoro di DNSSEC, non di DoH Un resolver malevolo, costretto o compromesso No, adesso ti fidi di lui completamente Blocco di malware, tracker e ordini dei tribunali No, li aggira E niente di questo è un\u0026rsquo;idea nuova in cui DoH è inciampato per caso. Filtrare i domini malevoli nel resolver è esattamente quello che OpenDNS fa da quasi vent\u0026rsquo;anni, bloccando phishing e malware per milioni di utenti prima che la risposta li raggiungesse, il modello che Cisco ha pagato per avere nel 201510. Due decenni di sicurezza a livello di resolver che proteggeva persone che non avevano mai configurato niente, e DoH ha minato l\u0026rsquo;intero modello in un colpo solo: punta l\u0026rsquo;app sul suo resolver, e OpenDNS, o qualsiasi cosa avesse scelto la tua rete, non è più sul percorso.\nPerché la vecchia risposta ha smesso di funzionare Finché il DNS stava sulla porta 53, la risposta di rete era semplice. Costringi ogni client a usare il tuo resolver, e blocca la porta 53 in uscita ovunque altro al confine. Una macchina che cercava un server DNS esterno veniva rifiutata, quindi doveva passare dal tuo, quindi i tuoi controlli si applicavano a tutto. Rozzo, e funzionava.\nDoH lo ammazza in una mossa usando la 443. Non puoi bloccare la 443 in uscita. È il web. Quindi la porta che chiuderesti per costringere il DNS a passare dal tuo resolver è quella che non puoi mai chiudere, e la cifratura che impedisce al tuo ISP di curiosare impedisce anche a te di distinguere una ricerca DoH dal caricamento di una pagina.\nLe due cose che useresti per riprendere il controllo, chiudere la porta e leggere il traffico, sono sparite tutte e due per progetto. Battere esattamente queste due, nelle mani di una rete ostile, è ciò per cui DoH è stato costruito.\nE leggere il traffico non è la via d\u0026rsquo;uscita che sembra, perché c\u0026rsquo;è un solo modo per farlo: rompere e ispezionare tutto. Per vedere il DNS dentro una connessione sulla 443 devi fare man-in-the-middle su ogni connessione HTTPS della rete, mettere il tuo certificato radice su ogni dispositivo, e decifrare e ricifrare tutto. È quello a cui un numero crescente di amministratori ora ricorre, per riprendersi la visibilità che una sola regola del firewall gli dava gratis.\nEd è uno scambio molto peggiore: hai indebolito il TLS per tutto, messo un apparato di decifratura sul percorso di ogni login e di ogni sessione bancaria, e costruito un unico bersaglio che compromette tutto, una postura contro cui US-CERT ha messo in guardia apertamente11. Il controllo proporzionato è stato rotto, quindi resta quello sproporzionato.\nEd ecco la trappola. Il meccanismo che protegge un giornalista sul WiFi di un aeroporto da una rete ostile è lo stesso che protegge il malware sulla tua rete da te, e il protocollo non sa distinguere i due. Un resolver che viene aggirato non sa se è un censore o un team di sicurezza. Sa solo che è stato tagliato fuori.\nLa risposta giusta è sempre stata DNS over TLS Ecco la parte che scopre il gioco. Cifrare il DNS non ha mai avuto bisogno di niente di tutto questo. È stato fatto due anni prima di DoH, in un modo che lasciava chi gestisce la rete in grado di fare il suo lavoro.\nDNS over TLS, RFC 7858, è del maggio 2016. Il suo abstract dice a cosa serve nella prima riga: a «provide privacy for DNS», una cifratura che «eliminates opportunities for eavesdropping and on-path tampering with DNS queries in the network»12. Questa è tutta la causa della privacy, soddisfatta: il bar e l\u0026rsquo;ISP lasciati fuori esattamente come con DoH, perché la ricerca è cifrata da un capo all\u0026rsquo;altro.\nEd era firmato anche da Paul Hoffman, che poi ha firmato anche lo standard DoH1. Non due campi rivali, quindi. Le stesse persone, che avevano già risolto la privacy, che la risolvevano di nuovo in un altro modo.\nChi è Hoffman conta, perché dice da dove viene tutto questo. Non è uno spettatore nel DNS: il suo nome è su più di ottanta RFC, tra cui lo standard sulla terminologia DNS, e fa questo lavoro come tecnologo all\u0026rsquo;ICANN13. Quindi lo standard che ha nascosto il DNS sulla 443 è stato scritto in parte da dentro l\u0026rsquo;ICANN, l\u0026rsquo;ente americano che decide cosa va nella radice.\nE l\u0026rsquo;ICANN non è il custode disinteressato che la parola fa pensare. Ho messo in fila la sua storia a parte: costruito in California, responsabile verso la California, e disposto a usare la sua posizione sullo spazio dei nomi per i propri scopi. Questa non è stata una campagna per la privacy partita dai margini. È stato l\u0026rsquo;establishment che tiene la radice, che rispondeva una seconda volta a una causa di privacy già soddisfatta nel 2016, in un modo che toglieva di mezzo l\u0026rsquo;operatore di rete.\nQuindi chiediti cosa ha aggiunto il secondo modo, perché non era la privacy.\nStandard Anno Porta Cifra il DNS L\u0026rsquo;operatore vede ancora che è DNS DNS over TLS (RFC 7858) 2016 853 Sì Sì DNS over HTTPS (RFC 8484) 2018 443 Sì No La privacy l'ha risolta DoT nel 2016. DoH è arrivato due anni dopo e ha aggiunto solo l'aggiramento. DNS cifrato: cosa è venuto prima, e cosa dopo Mag 2016 DNS over TLS (RFC 7858), porta 853 Cifra il DNS. L'operatore vede ancora che è DNS. Privacy risolta. Ott 2018 DNS over HTTPS (RFC 8484), porta 443 Stesso autore. Stessa cifratura. L'operatore non lo vede più. Lug 2019 Godlua: il primo malware a nascondere il C2 in DoH Lug 2019 ISPA bolla Mozilla «Internet Villain» per DoH, poi ritira Set 2019 PsiXBot risolve i domini C2 con il DoH di Google Feb 2020 Firefox attiva DoH di serie negli USA, resolver Cloudflare Q2 2020 OilRig (APT34) esfiltra dati via DoH La privacy era completa nel 2016. Tutto sotto il secondo punto è aggiramento e ciò per cui è servito. Niente richiedeva un nuovo standard di privacy. L\u0026rsquo;ordine è l\u0026rsquo;argomento. DNS over TLS ha risolto il problema della privacy nel 2016, su una porta che l\u0026rsquo;operatore di rete può ancora governare. DNS over HTTPS è arrivato due anni dopo dallo stesso autore principale, non ha aggiunto niente alla privacy tranne il passaggio alla porta 443, e tutto quello che sta sotto quel secondo punto è aggiramento e ciò per cui l\u0026rsquo;aggiramento è stato usato. L\u0026rsquo;unica casella che è cambiata è l\u0026rsquo;ultima. DoT gira sulla sua porta, la 853, quindi l\u0026rsquo;operatore vede che è DNS e decide cosa farne: permetterlo verso il resolver autorizzato, rifiutarlo altrove. DoH mette la stessa ricerca cifrata sulla 443 e la mescola al web, dove l\u0026rsquo;operatore non può distinguerla.\nStessa privacy, stessa cifratura. L\u0026rsquo;unica differenza tra i due standard è se chi gestisce la rete può ancora vedere il proprio DNS. Questa non è una funzione di privacy. La privacy è arrivata nel 2016. È una funzione di aggiramento, ed è l\u0026rsquo;unica cosa che DoH aggiunge.\nE lo sapevano. È documentato, non dedotto. Le Operational Considerations dell\u0026rsquo;RFC 8484 lo dicono chiaramente: «Filtering or inspection systems that rely on unsecured transport of DNS will not function in a DNS over HTTPS environment due to the confidentiality and integrity protection provided by TLS»8.\nQuei sistemi sono gli strumenti di sicurezza che già proteggevano gli utenti: il blocco di malware e server di comando, i feed di Protective DNS, i filtri per la sicurezza dei minori, l\u0026rsquo;ispezione aziendale. Lo standard li nomina, nel suo stesso testo, come le cose che smettono di funzionare. Rompere strumenti che già difendevano le persone è stata una scelta, fatta a occhi aperti e distribuita attiva di serie. Conoscere l\u0026rsquo;effetto e sceglierlo comunque è una decisione di cui si può chiedere conto.\nPer questo la cornice della privacy non sopravvive alla cronologia. Una volta che DoT esiste, la privacy non può essere il motivo di DoH, perché la privacy era già fatta, dallo stesso autore, due anni prima. Quindi la privacy era la cortina di fumo.\nToglila e guarda cosa ha messo davvero in moto il secondo standard: una corsa agli armamenti. Ha preso un controllo che era una riga del firewall e l\u0026rsquo;ha trasformato in un inseguimento permanente, resolver contro blocklist contro nuovi resolver, con l\u0026rsquo;operatore che perde di default, e una manciata di aziende americane che alla fine tengono il testo in chiaro.\nChiamalo pure effetto collaterale di una funzione di privacy, se vuoi. Sulle prove, con DoT già distribuito e lo standard stesso che ammetteva che avrebbe rotto il filtraggio, è lo scopo, e la privacy era la parola dipinta sulla scatola. Ed è stato spinto forte sotto quella parola, da chi ci ha guadagnato.\nHanno spinto e distribuito DoH Cos\u0026rsquo;altro sono Mozilla Coautore dell\u0026rsquo;RFC 8484, poi ha attivato DoH di serie per Firefox negli USA14, resolver Cloudflare Google Distribuisce DoH in Chrome, gestisce un grande resolver DoH pubblico, ed è un\u0026rsquo;azienda pubblicitaria Cloudflare Il resolver predefinito di Firefox negli USA, quindi riceve quelle query Chi lo vendeva come privacy erano i produttori di browser, e i beneficiari non erano solo gli utenti.\nPosso chiedere perché, se lo scopo era la privacy, la risposta non è stata lo standard di DNS cifrato che esisteva già e teneva dentro l\u0026rsquo;operatore, ma un secondo costruito in modo che l\u0026rsquo;operatore non potesse vederlo? Non chiedo chi l\u0026rsquo;ha approvato. Chiedo quale parte della «privacy» richiedesse di tagliare fuori l\u0026rsquo;unica persona responsabile della rete.\nPerché il vero bersaglio è quello, ed è l\u0026rsquo;amministratore di rete: il professionista responsabile della sicurezza e dell\u0026rsquo;incolumità della rete, trattato come avversario di default. DoH non toglie nemmeno la sorveglianza di cui si lamentava la causa della privacy. Come ha spiegato Bert Hubert di PowerDNS, il DNS era «typically provided by the operator of a network», e spostarlo di default a una terza parte è «a net-negative for privacy for everyone», perché quella terza parte «gets a complete log per device of all DNS queries, in a way that can even be tracked across IP addresses»15.\nLe ricerche non sono nascoste. Sono consegnate a un operatore di resolver americano invece che all\u0026rsquo;amministratore, e l\u0026rsquo;amministratore è l\u0026rsquo;unica parte tolta di mezzo. Lo sanno anche i produttori. La logica «riconosci una rete gestita e fatti da parte» della prossima sezione esiste proprio perché l\u0026rsquo;impostazione predefinita scavalca l\u0026rsquo;amministratore, e hanno distribuito l\u0026rsquo;interruttore invece di cambiare l\u0026rsquo;impostazione predefinita.\nOra chiediti chi guadagna a far passare il DNS oltre l\u0026rsquo;operatore. Il volto della campagna è il giornalista sul WiFi ostile dell\u0026rsquo;aeroporto, e quella persona esiste. Esiste anche l\u0026rsquo;industria della pubblicità e del tracciamento, i cui domini passano oltre la blocklist di una rete nel momento in cui un\u0026rsquo;app o un browser li risolve via DoH.\nIl blocco a livello di rete, il Pi-hole, la blocklist aziendale, il resolver che filtra, funziona rispondendo al nome di un tracker con niente. DoH è il modo in cui il nome riceve comunque una risposta. E il più grande operatore di un resolver DoH pubblico è Google16, un\u0026rsquo;azienda pubblicitaria che distribuisce DoH anche nel proprio browser17.\nUna funzione di privacy, venduta dall\u0026rsquo;azienda che vende il tracciamento, il cui progetto sconfigge lo strumento che la gente usa per bloccarlo. Pensala come vuoi. Io ho deciso.\nAnche la versione rozza di questa obiezione è stata messa in piazza. Nel luglio 2019 l\u0026rsquo;associazione di categoria degli ISP britannici ha candidato Mozilla a «Internet Villain» per un DoH che avrebbe permesso di «bypass UK filtering obligations and parental controls, undermining internet safety standards in the UK»18. Hanno scelto un bersaglio goffo e una cornice peggiore, sono stati sommersi dalle critiche e l\u0026rsquo;hanno ritirata.\nTogli la politica, però, e l\u0026rsquo;osservazione sotto era corretta, e regge che il controllo aggirato sia un filtro per i minori, una blocklist aziendale o un Pi-hole in una stanza di casa. DoH è costruito per far passare il DNS oltre chiunque gestisca la rete.\nE non è una cosa da poco, perché DoH ora è il più difficile dei tre da bloccare. DoT sta sulla 853, dove una rete può ancora rifiutarlo. DoH no, quindi di tutti i modi in cui il DNS può lasciare una rete è quello senza appiglio, il che lo rende il rischio singolo più grande di tutti.\nQuesto arriva fino alla legge, non solo alla sicurezza. Nel Regno Unito il blocco che ha valore legale lo fa l\u0026rsquo;ISP tramite DNS: la lista dell\u0026rsquo;Internet Watch Foundation sul materiale pedopornografico e le ingiunzioni sul copyright che l\u0026rsquo;High Court emette in base alla sezione 97A sono applicate con il filtraggio DNS e IP sul resolver che viene dato al cliente19.\nFai passare la metà DNS intorno a questo via DoH e il blocco non si applica a quel client. Un tribunale può ordinare che un sito venga bloccato, a una rete si può dire di farlo rispettare, e un browser che risolve via DoH trova l\u0026rsquo;indirizzo lo stesso, su un canale che la rete non può vedere né chiudere. Far rispettare una legge informatica o un ordine di un tribunale a livello di rete, che è dove si è sempre fatto, diventa quasi impossibile.\nEd è qui che il conto arriva a tutti, non solo alla rete. Rompi il controllo proporzionato, quello chirurgico che bloccava un dominio preciso nel resolver su ordine di un tribunale, e lo stato non si arrende. Prende uno strumento più rozzo. L\u0026rsquo;Online Safety Act del Regno Unito è quello strumento: doveri ampi per le piattaforme, verifiche dell\u0026rsquo;età obbligatorie, e Ofcom dietro con le multe, un regime che tocca ogni utente e ogni servizio del paese20.\nNon sto difendendo la legge. Sto indicando da dove è venuta la pressione per farla. Quando lo strumento mirato che faceva rispettare la legge sulla rete smette di funzionare, non ottieni meno controllo, ottieni un controllo più rozzo, più ampio, più invadente puntato su tutti, perché la versione mirata non regge più. È il prezzo di aver rotto un controllo di base, e chi l\u0026rsquo;ha rotto non è chi lo paga.\nE all\u0026rsquo;ICANN non potrebbe importare di meno, perché dalla California non è un problema loro. Quando un blocco fallisce o una piattaforma viola i suoi doveri, non è l\u0026rsquo;ICANN che finisce in tribunale, è l\u0026rsquo;operatore, la piattaforma, l\u0026rsquo;azienda, davanti a Ofcom e alle multe. Le conseguenze cadono su tutti quelli a valle di una decisione di cui l\u0026rsquo;ente che l\u0026rsquo;ha presa non deve mai rispondere.\nRompi il controllo chirurgico e lo stato prende la mazza. Pagano tutti. Rompi il controllo proporzionato, e uno più rozzo ne prende il posto Il controllo chirurgico Blocca un dominio preciso nel resolver, su ordine del giudice Preciso, proporzionato, puntato solo sul bersaglio DoH lo rompe la ricerca non passa più dal resolver Lo strumento rozzo L'Online Safety Act: verifiche dell'età per tutti, doveri per ogni piattaforma, Ofcom con le multe Puntato sull'intero paese Rompi lo strumento mirato e lo stato non si arrende. Prende quello ampio, puntato su tutti, perché la versione mirata non regge più. E chi ha rotto lo strumento mirato non è chi paga quello ampio. Il controllo chirurgico bloccava un dominio preciso nel resolver su ordine di un tribunale. DoH lo rompe, quindi lo stato prende lo strumento rozzo: l\u0026rsquo;Online Safety Act, puntato su ogni utente e ogni piattaforma del paese. Rompi lo strumento mirato e non ottieni meno controllo, ne ottieni uno più ampio che nessuno può puntare. Metti in fila le conseguenze e hanno tutte la stessa forma: una cosa che la rete faceva rispettare nel resolver, e non può più.\nCosa faceva rispettare la rete Come si faceva Con DoH Blocco di malware e server di comando blocklist del resolver e feed di minacce aggirato; Godlua, PsiXBot e OilRig hanno fatto esattamente questo Blocco di pubblicità e tracker Pi-hole o un resolver che filtra aggirato; il nome del tracker si risolve lo stesso Ordini dei tribunali e la lista IWF filtraggio DNS dell\u0026rsquo;ISP il blocco basato sul DNS non si applica a quel client DoT era la risposta onesta. Cifra il tuo DNS e lascia l\u0026rsquo;operatore in grado di fare il suo lavoro. DoH ha tenuto la cifratura e ci ha aggiunto sopra una cosa: l\u0026rsquo;operatore non può più vederlo. Tutto il resto viene da quella sola scelta.\nFatto negli USA, conteso ovunque altrove Niente di tutto questo si ferma alla Manica, e leggerlo come un problema britannico lo riduce a una frazione della sua dimensione. La stessa forma attraversa tutta l\u0026rsquo;Europa e arriva in Australia. Uno strumento legale da una parte, un blocco DNS sulla rete dall\u0026rsquo;altra.\nIn Australia la Federal Court ordina agli ISP di disattivare l\u0026rsquo;accesso ai siti esteri che violano il copyright in base alla sezione 115A del Copyright Act21. Il Portogallo salta del tutto il tribunale: un memorandum amministrativo con cui i titolari dei diritti segnalano a un ente chiamato MAPINET, e gli ISP bloccano via DNS entro quindici giorni lavorativi22. Leggi diverse, un unico presupposto portante, ed è il presupposto che DoH fa crollare sotto tutte loro. Che il client risolva tramite il resolver che gli è stato dato.\nQuindi guarda cosa fa uno stato quando quel presupposto cade. Smette di appoggiarsi all\u0026rsquo;ISP e comincia a ordinare ai resolver pubblici stessi di dare la risposta sbagliata. Non è una previsione. È una pila di sentenze, e si sta alzando.\nPaese L\u0026rsquo;ordine di blocco Il resolver pubblico Cosa è successo Italia il Piracy Shield dell\u0026rsquo;AGCOM, nomi bloccati entro 30 minuti obbligato a filtrare, 1.1.1.1 compreso Cloudflare ha rifiutato, è stata multata di €14.247.698, e ha fatto ricorso23 Francia ingiunzione di Canal+ sullo streaming sportivo Google, Cloudflare e OpenDNS tutti nominati Cloudflare risponde con un HTTP 451, Google fa fallire la query in silenzio, OpenDNS si è spento per il paese24 Belgio oltre 100 domini di pirateria sportiva gli stessi tre resolver Cloudflare obbedisce con un 451, Google resta in silenzio, OpenDNS ha lasciato anche il Belgio24 Germania Universal Music contro Cloudflare ordinato in primo grado, 1.1.1.1 compreso ribaltato in appello, Colonia ritiene il resolver «passive, automatic and neutral»25 Paesi Bassi il blocco dinamico di BREIN a livello di ISP, non ancora il resolver Ziggo, KPN e gli altri bloccano via DNS e IP, aggiornato su richiesta26 Leggila come una cosa sola, non cinque. Poche aziende americane hanno riscritto il DNS per tutto il pianeta di propria autorità, hanno rotto il controllo proporzionato che ognuno di questi paesi aveva costruito, e hanno lasciato ai tribunali il compito di capire cosa fare con le macerie. Le risposte che quelle aziende danno, trascinate davanti a un giudice diverso ogni pochi mesi, ti dicono esattamente quanto pesa per loro il resto del mondo. Una fa ricorso e grida alla censura. Una fa fallire la ricerca e non dice niente all\u0026rsquo;utente. E OpenDNS, il resolver che ha filtrato il malware in silenzio per vent\u0026rsquo;anni e che questo articolo ha già indicato come il modello da copiare, non discute nemmeno. Si spegne per la Francia e il Portogallo piuttosto che servirli a quelle condizioni27.\nFermati su quest\u0026rsquo;ultima. È il buon esempio di tutto questo pezzo che esce dalla stanza. Il servizio che proteggeva persone che non avevano mai configurato niente ora trova più facile abbandonare un intero paese che servirlo, e il motivo risale dritto a una decisione di progetto presa in California da persone che non hanno mai dovuto pensare a un tribunale francese o portoghese.\nQuesto è lo schema, e lo nomino. È quello che l\u0026rsquo;ingegneria delle piattaforme americane fa a tutto ciò che non sono gli Stati Uniti. Costruisce per il proprio mercato, distribuisce il risultato al mondo come impostazione predefinita, e tratta ogni legge degli altri paesi, ogni autorità di regolazione, ogni comunità lasciata a valle del cambiamento come un pasticcio che deve sistemare qualcun altro.\nE il governo di casa sostiene le aziende fino in fondo. Nel febbraio 2025 la Casa Bianca ha firmato un memorandum che presentava le leggi digitali degli altri paesi come «overseas extortion» ai danni delle aziende americane, nominando il Regno Unito e l\u0026rsquo;UE e indicando al rappresentante per il commercio i dazi come risposta28. Sei mesi dopo, un\u0026rsquo;autorità di regolazione americana ha scritto a una dozzina di aziende tecnologiche americane avvertendole che rispettare l\u0026rsquo;Online Safety Act del Regno Unito o il Digital Services Act dell\u0026rsquo;UE poteva di per sé violare la legge americana29. Rileggilo. Il paese le cui aziende hanno rotto i controlli ora dice a quelle aziende che rispettare la risposta di un\u0026rsquo;altra democrazia al danno è il reato.\nQuesto dice tutto. Una legge approvata da un parlamento eletto a Westminster o a Bruxelles viene riscritta, da Washington, come un attacco all\u0026rsquo;America, e alle aziende viene detto di ignorarla. Non è che hanno pesato il resto del mondo e hanno scelto contro. Il resto del mondo sulla bilancia non c\u0026rsquo;è mai stato.\nIl rimedio non è vietare la cifratura Quindi la conclusione pigra è «blocca DoH», ed è sbagliata, nello stesso modo in cui «blocca ICMP» è sbagliato sul firewall. Non vuoi indietro il DNS non cifrato. Le ricerche in chiaro sulla porta 53 sono un\u0026rsquo;esposizione vera, e tornarci per riavere visibilità è scambiare un buco con un altro.\nLa cosa che hai perso davvero non era la cifratura. Era la scelta del resolver. Quindi riprenditi quella e lascia la cifratura esattamente dov\u0026rsquo;è.\nTieni la cifratura. Riprenditi la scelta del resolver. Cifrato per tutto il percorso. Una sola macchina parla DNS col mondo. Client 53, DoT o DoH, solo al tuo resolver DDR gli dice dove andare Il tuo resolver serve lui stesso DoH e DoT blocklist, feed minacce, log canarino: risposta NXDOMAIN Confine solo questo Upstream o le radici client dritto a 53, 853 o a un resolver DoH pubblico: rifiutato Niente qui spegne la cifratura. L'unica cosa tolta al client è il diritto di scegliere il resolver di qualcun altro. La disposizione corretta. I client possono usare DNS normale, DNS over TLS o DNS over HTTPS, ma solo verso il tuo resolver, che ora li serve tutti e tre. Quel resolver tiene la blocklist e il log ed è l\u0026rsquo;unica macchina a cui è permesso mandare DNS di qualsiasi tipo oltre il confine. La porta 53, la porta 853 e i resolver DoH pubblici noti sono rifiutati per tutto il resto. Niente qui spegne la cifratura. L\u0026rsquo;unica cosa tolta al client è il diritto di scegliere il resolver di qualcun altro. La forma è la stessa che sistema il DNS in un dominio Active Directory: l\u0026rsquo;argomento non è mai «spegni la funzione», è «decidi chi può guidarla». Ecco cosa vuol dire, pezzo per pezzo.\nGestisci tu il DNS cifrato. Metti su un resolver che serve DoH e DoT, non solo la porta 53, così un client che vuole la cifratura la ottiene da te. Non puoi dire ai client «niente DoH» e farlo sul serio senza offrire un resolver cifrato tuo. Dagliene uno, e tieni su di esso la blocklist, il feed delle minacce e i log come prima.\nPubblicizzalo, così i client lo trovano di proposito. Discovery of Designated Resolvers (RFC 9462) permette a un client di interrogare un nome speciale, scoprire il resolver cifrato della propria rete, e passare automaticamente a DoH o DoT verso di esso30. Un client che conosce DDR allora cifra il suo DNS e usa il tuo: la privacy che voleva l\u0026rsquo;utente e il controllo che serviva a te, in una mossa.\nRispondi all\u0026rsquo;interruttore del browser stesso. Firefox controlla un dominio canarino, use-application-dns.net, prima di attivare DoH di serie: rispondi con NXDOMAIN o SERVFAIL e Firefox torna al resolver di sistema31. Due limiti onesti, entrambi con le parole di Mozilla. Il canarino «only applies to users who have DoH enabled as the default option. It does not apply for users who have made the choice to turn on DoH by themselves»31. Quindi è un segnale per spegnere l\u0026rsquo;impostazione predefinita, non un lucchetto, e non fa niente sull\u0026rsquo;app e sul malware, che al browser non hanno mai chiesto niente.\nImposta la policy del browser dove gestisci la macchina. Su un dispositivo tuo, non affidarti al canarino. Il DnsOverHttpsMode di Chrome accetta off, automatic e secure, e la documentazione di Google dice che quando non è impostato, «for managed devices DNS-over-HTTPS queries will not be sent»32; Chrome disattiva il proprio DoH automatico appena vede una policy aziendale17. Puntalo al tuo resolver, oppure impostalo su off e lascia che sia DDR a portare la cifratura. Firefox ha le manopole corrispondenti Enabled, ProviderURL e Locked33. Macchina gestita, decisione gestita, e la riga che puoi davvero chiudere.\nRifiuta le alternative al confine. Le regole sono brevi, e dicono tutte la stessa cosa: DNS di qualsiasi tipo, verso l\u0026rsquo;esterno, solo dal tuo resolver.\nRegola Da Effetto Blocca la porta 53 in uscita Tutto tranne il tuo resolver Niente DNS normale verso l\u0026rsquo;esterno Blocca la porta 853 in uscita Tutto tranne il tuo resolver Niente DoT verso un resolver esterno Blocca l\u0026rsquo;HTTPS verso gli indirizzi dei resolver DoH pubblici Tutto tranne il tuo resolver Taglia fuori i provider DoH più noti Punta l\u0026rsquo;upstream del tuo resolver al Protective DNS Il tuo resolver Domini di malware rifiutati prima della connessione Non prenderai ogni endpoint DoH per indirizzo, e non puoi, perché uno nuovo è solo un server web e i server web non finiscono mai. Quindi fermati su quanto costa ora quel blocco. Per fare con DoH quello che block 53 outbound faceva gratis, devi scaricare una lista di indirizzi di server DoH che qualcun altro continua a scansionare per te: le blocklist mantenute esistono perché è l\u0026rsquo;unico modo rimasto, e una di queste risolve di nuovo ogni dominio DoH pubblico noto nei suoi IP attuali ogni ora, con un job programmato, e pubblica le modifiche34. Questo è lo scambio che l\u0026rsquo;aggiramento ha imposto.\nBloccare il DNS esterno Allora, sulla porta 53 Ora, DoH sulla 443 La regola una riga: blocca la 53 in uscita abbonarsi a una blocklist di IP di server DoH Completezza completa nel momento in cui la salvavi mai completa; continuano a comparire nuovi endpoint Manutenzione nessuna riscansionata ogni ora, scaricata e riapplicata Cosa serve il firewall il firewall più un feed mantenuto da qualcun altro Un controllo che era una riga statica ora è un abbonamento a un bersaglio mobile, all\u0026rsquo;inseguimento di server web che chiunque può mettere su più in fretta di quanto una lista riesca a nominarli. Il Protective DNS chiude l\u0026rsquo;altro capo: punta l\u0026rsquo;upstream del tuo resolver a un servizio che filtra come il PDNS dell\u0026rsquo;NCSC, che «was built to hamper the use of DNS for malware distribution and operation»35, e i domini cattivi vengono rifiutati prima che la connessione si apra, per ogni client che passa dal tuo resolver, cioè, una volta messe queste regole, tutti.\nMettile accanto alle cinque righe di prima, e ognuna ha un controllo che la chiude. Questo è il test di un rimedio: non «abbiamo bloccato DoH», ma «per ogni cosa che può scegliere un resolver, cosa le impedisce di scegliere quello sbagliato».\nChi sceglie il resolver Cosa lo chiude Sistema operativo DDR lo punta al tuo resolver; lascialo così Browser Policy sulle macchine gestite; il canarino sulle altre Applicazione / libreria Blocco al confine su 53, 853 e resolver DoH pubblici Script su una pagina web Lo stesso blocco al confine; Protective DNS sul tuo upstream Malware Lo stesso blocco al confine, più il Protective DNS che rifiuta il dominio Niente di tutto questo spegne un solo bit di cifratura. I client hanno ancora DoH, solo che lo ottengono da te, e quelli che provano a ottenerlo da qualche altra parte sbattono contro un muro. La privacy è intatta e il controllo è tornato. Per questo l\u0026rsquo;unica cosa che qualcuno ha perso è la libertà di scegliere un resolver che non hai mai approvato, e quella libertà non è mai stata sua su una rete di cui sei tu il responsabile.\nPosso chiedere cosa ha scelto quel resolver Ecco la domanda da fare a chiunque ti dica che la rete va bene così com\u0026rsquo;è.\nQuando una macchina sulla tua rete risolve un nome, cosa ha deciso quale resolver rispondesse? Se la risposta onesta è «quello che è stato dato al sistema operativo», bene, ma solo se hai chiuso le altre quattro righe di quella tabella, perché altrimenti è «quello che è stato dato al sistema operativo, a meno che il browser, un\u0026rsquo;app, una pagina web o qualcosa di peggio abbia scelto diversamente, nel qual caso non ne ho idea e non ho traccia». Questa non è una configurazione DNS. È una speranza, e la speranza non prende niente.\nNon chiedo chi gestisce il resolver. Chiedo cosa, su ogni macchina, può sceglierlo, e se sapresti nominare il resolver a cui è andata ogni ricerca di ieri. Su una rete dove DoH non è gestito non puoi, e il vuoto è ogni app che si porta il suo resolver, ogni pagina che un utente apre, e ogni pezzo di malware che ha letto le stesse ricerche che ho appena linkato. Tre attori di minaccia con un nome hanno costruito i loro canali su questo esatto vuoto, e uno risponde a un governo.\nUn protocollo che toglie alla rete la scelta del resolver sarebbe sempre stato un regalo per chiunque la rete cercasse di sorvegliare, e fingere il contrario perché il marketing diceva «privacy» è il modo in cui un controllo che contava viene spento di serie e nessuno registra il giorno in cui è successo.\nCifra il tuo DNS. Gestisci tu il resolver. Pubblicizzalo, rispondi al canarino, imposta la policy, chiudi il confine. Tieni la cifratura e tieni la scelta. Puoi avere entrambe, e se gestisci reti per mestiere, avere entrambe è il lavoro.\nLa privacy era la parola sulla scatola Quindi diamo merito a chi lo merita. Grazie all\u0026rsquo;ICANN, l\u0026rsquo;ente americano che tiene la radice e che ha scritto questo da dentro, per aver applicato ancora una volta il copione della tecnologia americana: prendere un problema già risolto, avvolgere il rimedio in una parola virtuosa, e accentrare il risultato su una manciata di aziende americane che alla fine tengono il testo in chiaro.\nEd è sempre l\u0026rsquo;America. L\u0026rsquo;ente che tiene la radice, il resolver su cui ora puntano di serie due browser, l\u0026rsquo;azienda pubblicitaria che gestisce il più grande pubblico, il paese in cui finisce il testo in chiaro: americani, ogni volta. È uno schema, non una serie di sfortune.\nLa privacy era la cortina di fumo. Il DNS era cifrato, privato e ancora governabile sulla porta 853 nel 2016, e tutti quelli che contavano lo sapevano. Quello che l\u0026rsquo;establishment ci ha messo sopra è stato un protocollo costruito per accecare l\u0026rsquo;unica persona responsabile della rete, una corsa agli armamenti permanente di blocklist riscansionate ogni ora, e ordini dei tribunali che si fermano di colpo al browser.\nSe sia stata incompetenza o avidità lascio decidere a te, anche se la documentazione che ho linkato punta in una direzione. In ogni caso ha battuto il buon senso.\nE decisioni come questa sono il motivo per cui le richieste di togliere la radice all\u0026rsquo;ICANN continuano a tornare, e per cui colpiscono nel segno: così che la comunità internazionale abbia voce, invece di un\u0026rsquo;istituzione di un solo paese che decide il DNS per tutti gli altri e lo chiama custodia.\nTutto questo lo facevamo con una riga.\nRFC 8484 — DNS Queries over HTTPS (DoH), ottobre 2018. L\u0026rsquo;introduzione dichiara l\u0026rsquo;obiettivo di «allowing web applications to access DNS information via existing browser APIs in a safe way consistent with Cross Origin Resource Sharing (CORS)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n360 Netlab — An Analysis of Godlua Backdoor, 1 luglio 2019. Registra che il campione «uses DNS over HTTPS to get the C2 name to ensure secure communication between the bots, the Web Server and the C2», il primo malware ampiamente segnalato ad abusare di DoH.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProofpoint — PsiXBot Now Using Google DNS over HTTPS, 6 settembre 2019. Descrive il malware che risolve domini C2 scritti nel codice attraverso il servizio DoH di Google, e avverte che «should be a warning shot for the cybersecurity community as there are no simple solutions to help identify an infected host or the process of receiving instructions».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKaspersky Securelist — APT trends report Q2 2020. Su OilRig (APT34): lo strumento DNSExfiltrator «allows the threat actor to use the DNS over HTTPS (DoH) protocol [\u0026hellip;] instead of plain text requests to port 53, they would use port 443 in encrypted packets [\u0026hellip;] which allows DoH queries to Google and Cloudflare services».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Hacker News — ChamelDoH: New Linux Backdoor Utilizing DNS-over-HTTPS Tunneling for Covert CnC, 16 giugno 2023, sulla scoperta di Stairwell (Daniel Mayer). L\u0026rsquo;impianto Linux in C++ di ChamelGang è «a tool for communicating via DNS-over-HTTPS (DoH) tunneling», che manda richieste DNS TXT a nameserver malevoli attraverso provider DoH legittimi così che «both detection and prevention become difficult».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Malware Analysis Report: BRICKSTORM Backdoor, AR25-338a, 4 dicembre 2025. «For C2, BRICKSTORM uses multiple layers of encryption (HTTPS, WebSockets, nested Transport Layer Security [TLS]) to hide its communications with the cyber actors\u0026rsquo; C2 server. It also uses DNS-over-HTTPS (DoH)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco Talos — New Dohdoor malware campaign, 26 febbraio 2026. La backdoor, attribuita all\u0026rsquo;attore UAT-10027, «securely sends encrypted DNS requests to Cloudflare\u0026rsquo;s DNS server over HTTPS port 443» per risolvere il suo server di comando, e prende di mira istruzione e sanità negli USA tramite phishing.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8484, sezione 10, Operational Considerations: «Filtering or inspection systems that rely on unsecured transport of DNS will not function in a DNS over HTTPS environment due to the confidentiality and integrity protection provided by TLS.» L\u0026rsquo;effetto sul filtraggio di rete è dichiarato nello standard stesso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8484, sezione 9, Security Considerations: un server DoH «can give a client invalid data in response to a DNS query», e anche se lo standard vieta le risposte da server non configurati, «this prohibition does not guarantee protection against invalid data, but it does reduce the risk.» DoH protegge il trasporto, non l\u0026rsquo;autenticità del record; quello è il lavoro di DNSSEC.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenDNS — un resolver DNS ricorsivo fondato da David Ulevitch nel 2005/2006, che offre filtraggio di sicurezza (blocco di phishing e malware) e filtraggio dei contenuti nel resolver per utenti domestici e aziende; acquisito da Cisco nel 2015 e ora parte di Cisco Umbrella. La sicurezza DNS a livello di resolver esiste da molto prima di DoH.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS-CERT / CISA — HTTPS Interception Weakens TLS Security, allerta TA17-075A, 16 marzo 2017. Avverte che intercettare l\u0026rsquo;HTTPS presentando un certificato considerato attendibile localmente e decifrando il traffico indebolisce la sicurezza, perché molti prodotti di intercettazione non verificano correttamente i certificati e abbassano le protezioni della connessione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7858 — Specification for DNS over Transport Layer Security (TLS), maggio 2016. L\u0026rsquo;abstract: «This document describes the use of Transport Layer Security (TLS) to provide privacy for DNS. Encryption provided by TLS eliminates opportunities for eavesdropping and on-path tampering with DNS queries in the network.» Firmato anche da P. Hoffman (ICANN), coautore anche dell\u0026rsquo;RFC 8484. DoT usa la porta dedicata 853.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPaul Hoffman (engineer) — «the author or co-author of over 80 Requests for Comments (RFCs)» e «currently a technologist at ICANN»; il suo profilo sul datatracker IETF elenca il curriculum, tra cui l\u0026rsquo;RFC 7858 (DoT), l\u0026rsquo;RFC 8484 (DoH) e l\u0026rsquo;RFC 8499 (terminologia DNS).\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Register — Firefox now defaults to DNS-over-HTTPS for US netizens, 25 febbraio 2020. «Mozilla has started rolling out encrypted DNS-over-HTTPS (DoH) by default for US users», con «the DNS resolver in Firefox to Cloudflare by default».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBert Hubert (PowerDNS) — Centralised DoH is bad for Privacy, in 2019 and beyond, RIPE Labs. Il DNS è «typically provided by the operator of a network»; il DoH centralizzato «by default» è «a net-negative for privacy for everyone», perché la terza parte «gets a complete log per device of all DNS queries, in a way that can even be tracked across IP addresses».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — DNS-over-HTTPS (DoH) — JSON API. Google Public DNS, uno dei più grandi resolver pubblici, gestisce un endpoint DoH (dns.google) accanto al supporto DoH di Chrome.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChromium Blog — A safer and more private browsing experience with Secure DNS, maggio 2020. «If you are an IT administrator, Chrome will disable Secure DNS if it detects a managed environment via the presence of one or more enterprise policies.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTechCrunch — Internet group brands Mozilla \u0026lsquo;internet villain\u0026rsquo; for supporting DNS privacy feature, 5 luglio 2019 (copia Wayback). La candidatura dell\u0026rsquo;ISPA diceva che DoH avrebbe permesso di «bypass UK filtering obligations and parental controls, undermining internet safety standards in the UK»; la candidatura e la categoria Internet Villain sono state ritirate dopo le critiche.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWeb blocking in the United Kingdom — la lista dell\u0026rsquo;Internet Watch Foundation sulle immagini di abusi su minori e le ingiunzioni sul copyright in base alla sezione 97A del Copyright, Designs and Patents Act 1988 sono applicate dagli ISP; «The technical measures used to block sites include DNS hijacking, DNS blocking, IP address blocking, and Deep packet inspection.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoverno del Regno Unito — Online Safety Act: explainer. «The Online Safety Act 2023 [\u0026hellip;] puts a range of new duties on social media companies and search services», con le «strongest protections [\u0026hellip;] designed for children», tra cui l\u0026rsquo;obbligo di impedire ai minori l\u0026rsquo;accesso a contenuti dannosi e non adatti all\u0026rsquo;età; fatto rispettare da Ofcom.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCopyright Act 1968 (Australia), sezione 115A, «Injunctions relating to online locations outside Australia»: la Federal Court può ordinare a un fornitore di servizi di trasmissione di «take reasonable steps to disable access to the online location», la forma australiana del blocco dei siti a livello di ISP via DNS e IP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEDRi — Portugal: \u0026ldquo;Voluntary\u0026rdquo; agreement against copyright infringements. In base a un protocollo d\u0026rsquo;intesa del 2015, i titolari dei diritti segnalano a MAPINET, che inoltra all\u0026rsquo;autorità IGAC, e «IGAC then contacts Internet Service Providers (ISPs) to restrict access to the websites through \u0026lsquo;Domain Name System (DNS) blocking\u0026rsquo;» entro 15 giorni lavorativi, senza ordine di un tribunale.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — Italy Fines Cloudflare €14 Million for Refusing to Filter Pirate Sites on Public 1.1.1.1 DNS. Con il Piracy Shield italiano, l\u0026rsquo;AGCOM (delibera 49/25/CONS) ha ordinato ai fornitori DNS, compreso il resolver pubblico di Cloudflare, di bloccare; Cloudflare, definendolo «unreasonable and disproportionate», ha rifiutato ed è stata multata di €14.247.698, contro cui ha fatto ricorso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — DNS Piracy Blocking Orders: Google, Cloudflare, and OpenDNS Respond Differently, 11 maggio 2025. Con le ingiunzioni di Canal+ sullo streaming sportivo in Francia e in Belgio ai resolver pubblici è stato ordinato di bloccare: Cloudflare risponde con un HTTP 451, Google rifiuta la query in silenzio, e OpenDNS «pulled the plug» su entrambi i paesi piuttosto che obbedire.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — Cloudflare Applauds Court for Rejecting DNS Piracy Blocking Order. In Universal Music contro Cloudflare (il caso DDL-Music) un tribunale di primo grado aveva ordinato a Cloudflare di bloccare sul suo resolver 1.1.1.1; l\u0026rsquo;Oberlandesgericht di Colonia ha rifiutato di estendere l\u0026rsquo;obbligo al resolver, che «contributes to the connection of internet domains in a purely passive, automatic and neutral manner».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — Dutch ISPs Must Block Pirate Bay Proxies and Mirrors Again, Court Rules, 15 ottobre 2020. BREIN ha un ordine di blocco «dynamic» contro Ziggo, KPN e altri; il tribunale considera il blocco DNS una misura «clear and verifiable», e nuovi domini e proxy vengono aggiunti alla blocklist dell\u0026rsquo;ISP su richiesta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nComplete Music Update — OpenDNS pulls plug on France and Portugal after web-blocking injunctions. OpenDNS di Cisco: «Due to a court order in France issued under the French Sport code and a court order in Portugal issued under the Portuguese Copyright Code, the OpenDNS service is not currently available to users in France [\u0026hellip;] and in Portugal.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe American Presidency Project — White House Fact Sheet: Directive to Prevent the Unfair Exploitation of American Innovation, 21 febbraio 2025. Il memorandum incarica il rappresentante per il commercio degli Stati Uniti di valutare dazi in risposta alle imposte e alle regole sui servizi digitali di altri paesi, comprese quelle dell\u0026rsquo;UE e del Regno Unito, presentate come governi stranieri che si appropriano della «America\u0026rsquo;s tax base».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nA\u0026amp;O Shearman — FTC chairman warns major tech companies of censorship in EU DSA and UK Online Safety Act, sulle lettere del 21 agosto 2025: «Compliance with the requirements of non-US laws, such as the requirements in the EU Digital Services Act (DSA) and UK Online Safety Act, may result in companies censoring content», cosa che secondo l\u0026rsquo;autorità potrebbe essere in conflitto con la legge americana.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9462 — Discovery of Designated Resolvers (DDR), novembre 2023. Definisce come un client scopre «a resolver\u0026rsquo;s encrypted DNS configuration» e passa a usarla, interrogando _dns.resolver.arpa per il Designated Resolver della rete.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMozilla — Canary domain — use-application-dns.net. «The canary domain only applies to users who have DoH enabled as the default option. It does not apply for users who have made the choice to turn on DoH by themselves.» Una risposta diversa da NOERROR con un record A/AAAA, come NXDOMAIN o SERVFAIL, segnala a Firefox di disattivare il DoH dell\u0026rsquo;applicazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — DnsOverHttpsMode policy. Valori off, automatic e secure; «If this policy is unset, for managed devices DNS-over-HTTPS queries will not be sent.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMozilla — Policy templates: DNSOverHTTPS. Enabled attiva o disattiva DoH, ProviderURL imposta il resolver, Locked «prevents the user from changing DNS over HTTPS preferences», ExcludedDomains e Fallback regolano il resto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndibdot/DoH-IP-blocklists — una lista mantenuta dei nomi di dominio e degli indirizzi IPv4/IPv6 risolti dei server DoH pubblici, per il blocco sul firewall; lo script di ricerca «runs automatically every hour via GitHub actions» e aggiorna le liste di indirizzi quando cambiano. jameshas/Public-DoH-Lists è un secondo equivalente generato automaticamente. Che queste debbano esistere, ed essere riscansionate di continuo, è il punto.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Protective Domain Name Service (PDNS). «PDNS was built to hamper the use of DNS for malware distribution and operation [\u0026hellip;] a recursive resolver which prevents access to domains known to be malicious.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/dns/dns-over-https-walks-past-your-controls/","summary":"DNS over HTTPS cifra le tue ricerche, e questo è un bene, e le manda a un resolver scelto dal client sulla porta 443, e questo è il problema. Il tuo resolver non vede mai la query, quindi la blocklist che avrebbe applicato, il feed di minacce che avrebbe colpito e la riga di log che avrebbe scritto spariscono tutti. Questo articolo percorre il meccanismo: perché una connessione web cifrata tra migliaia è invisibile al confine, chi su una macchina può scegliere un resolver che tu non hai mai scelto (il sistema operativo, il browser, qualsiasi app, qualsiasi script su qualsiasi pagina web, e il malware), e i casi documentati, dal JavaScript di una pagina che interroga un endpoint DoH pubblico che accetta richieste cross-origin, a Godlua e PsiXBot che nascondono il loro canale di comando dentro DoH, fino all\u0026rsquo;APT OilRig che esfiltra dati attraverso di esso. Poi la tesi che la storia della privacy è una copertura: DNS over TLS cifrava già il DNS nel 2016, su una porta che l\u0026rsquo;operatore di rete può ancora governare, quindi l\u0026rsquo;unica cosa che DoH aggiunge è battere l\u0026rsquo;amministratore, ed è per questo che i produttori di browser che l\u0026rsquo;hanno scritto e distribuito, e l\u0026rsquo;azienda pubblicitaria che gestisce il più grande resolver DoH pubblico, sono quelli che ci hanno guadagnato. Poi il rimedio, che non è vietare la cifratura. Gestisci il tuo resolver DoH e DoT, pubblicizzalo con Discovery of Designated Resolvers, rifiuta al confine la porta 53, la porta 853 e i resolver DoH pubblici noti, e rispondi al dominio canarino di Firefox così il browser si fa da parte. Tieni la cifratura. Riprenditi la scelta del resolver. Si chiude sulle conseguenze: lo stesso blocco basato sul DNS funziona in tutta Europa e in Australia, e i tribunali in Italia, Francia, Belgio e Germania ora ordinano ai resolver pubblici stessi di bloccare, con Cloudflare multata e in appello, Google che rifiuta in silenzio e OpenDNS che si spegne per interi paesi. Lo schema sotto è un progetto americano imposto al mondo, e un governo americano che presenta le leggi degli altri paesi come estorsioni alle aziende americane e le avverte di non rispettarle.","title":"DNS over HTTPS passa dritto oltre i tuoi controlli"},{"content":"Clicchi un link a un giornale locale e si carica il titolo, poi la foto, poi i primi tre paragrafi, e hai cominciato a leggere prima che succeda qualsiasi altra cosa. Poi la pagina diventa bianca. Oppure si trasforma in un mucchio di link senza stile con il logo stirato su tutta la larghezza dello schermo. Oppure sale un riquadro che ti chiede di accettare il tracciamento o pagare 2,99 £ al mese, senza un terzo pulsante.\nL\u0026rsquo;articolo era sulla tua macchina. Il server dell\u0026rsquo;editore te l\u0026rsquo;aveva già mandato tutto, testo e fogli di stile, e il tuo browser l\u0026rsquo;aveva già disegnato. A portartelo via è stato codice che l\u0026rsquo;editore ha scelto di eseguire dopo, sul tuo computer, comprato da un fornitore commerciale il cui prodotto consiste nel riprendersi quello che è appena stato consegnato.\nA casa faccio girare un Pi-hole1, che blocca gli host di pubblicità e tracciamento per ogni dispositivo della rete. Su un elenco crescente di siti di notizie britannici questo bastava a farsi distruggere la pagina. Così il 22 settembre 2026 ho costruito un\u0026rsquo;estensione Chrome per fermarlo, chiamata Keep The Page. Il codice è su GitHub in damo2929/browserplugin, con licenza MIT, e questo è cosa fa, cosa ho trovato dentro quelle pagine mentre la costruivo, e le correzioni che hanno peggiorato le cose prima che arrivasse quella giusta.\nNon aggira un paywall. Se il server l\u0026rsquo;articolo non l\u0026rsquo;ha mai mandato, qui niente lo farà comparire. The Times è rimasto chiuso ed è giusto così. Quello che tiene è ciò che ti era già stato mandato.\nL\u0026rsquo;articolo arriva, poi se ne va Visti da fuori, funzionano tutti allo stesso modo. L\u0026rsquo;HTML arriva completo, e poi uno script, di solito caricato da un host che appartiene a un fornitore e non al giornale, decide che non meriti di vederlo, e lo toglie.\nCosa toglie, e come, dipende da quale fornitore ha comprato l\u0026rsquo;editore. Questi sono i quattro che ho incontrato, ciascuno letto da una pagina viva durante la costruzione:\nEditore Cosa arriva Cosa fa poi la pagina a se stessa Newsquest (269 testate)2 l\u0026rsquo;articolo intero costruisce un muro, esegue un payload eval, apre una finestra confirm() notebookcheck.net l\u0026rsquo;articolo intero cancella \u0026lt;body\u0026gt; dopo circa 7 secondi, poi finestre di dialogo, poi un ciclo di ricaricamenti National World (The Scotsman, Yorkshire Post)3 l\u0026rsquo;articolo più circa 68KB del suo CSS cancella ogni \u0026lt;link\u0026gt; e \u0026lt;style\u0026gt; ogni 100ms, per sempre Reach plc (Mirror, Daily Record, Manchester Evening News, Liverpool Echo e altri)4 l\u0026rsquo;articolo intero lo copre con «accetta il tracciamento o paga 2,99 £/mese» Il 269 non viene da un comunicato stampa, che dice «more than 200 brands». È il conteggio dei domini sui certificati TLS di Newsquest stessa, l\u0026rsquo;elenco che serviva all\u0026rsquo;estensione per sapere dove girare.\nQuello di National World è quello che dovrebbe preoccupare di più gli editori, perché rompe la pagina per motivi che con la pubblicità non c\u0026rsquo;entrano niente. Lo strip dei fogli di stile ha un compagno che va a riprendere il CSS dall\u0026rsquo;host del fornitore. Il mio Pi-hole blocca quell\u0026rsquo;host. Così lo strip è partito e il ripristino non è mai arrivato, e l\u0026rsquo;impaginazione stessa del giornale è rimasta per sempre dipendente dalla raggiungibilità di un fornitore di pubblicità. Non è un muro. È un editore che consegna l\u0026rsquo;aspetto del proprio sito a una terza parte senza accorgersene.\nPosso chiedere perché il foglio di stile di un giornale debba aspettare il server di un\u0026rsquo;azienda pubblicitaria prima di avere il permesso di restare sulla pagina? Non c\u0026rsquo;è nessun motivo che riguardi il lettore. Nessuno.\nPerché lo chiamo malware Uso la parola di proposito, come descrizione di cosa fa il codice, e non come una conclusione legale su qualcuno. I payload anti-adblock rientrano nel significato comune per quattro motivi, e ciascuno l\u0026rsquo;ho osservato direttamente:\nCriterio Cosa ho visto Gira senza consenso, contro il tuo interesse nessuno l\u0026rsquo;ha chiesto, e il suo lavoro è toglierti contenuti che hai già Distrugge dati che ti sono già stati consegnati l\u0026rsquo;articolo e il suo CSS arrivano intatti, poi codice nella pagina li cancella Offuscato per resistere alla lettura tabelle di stringhe permutate come o[293 * (r + 450) % e], eseguite tramite eval Elude il blocco e punisce le interferenze CNAME cloaking per schivare le blocklist DNS, controlli anti-manomissione che degenerano in una finestra di dialogo o in un ciclo di ricaricamenti L\u0026rsquo;offuscamento non è minificazione. Il codice minificato è piccolo. Questo è codice disposto in modo che tu non possa cercarci dentro con grep cosa fa, e il payload passa poi per eval così niente su disco corrisponde a ciò che viene eseguito.\nIl cloaking è una tecnica nota con una sua letteratura di ricerca5. Il loader viene scaricato da quello che sembra un sottodominio del giornale, e quel nome risolve sul fornitore:\na02342.\u0026lt;publisher-domain\u0026gt; -\u0026gt; cdn-52-x.privacy-mgmt.com (Sourcepoint) fb.html-load.com -\u0026gt; adshield-fallback-dev-wskxz.b-cdn.net Il sottodominio è casuale per ogni testata. Per questo una blocklist che elenca host non riesce a stargli dietro, ed è proprio lo scopo.\nE il codice tratta l\u0026rsquo;essere disturbato come una prova di colpa. Le stringhe d\u0026rsquo;errore decodificate nel payload che i manutentori delle liste di filtri attribuiscono ad Ad-Shield6 sono letteralmente Vital API blocked e Vital API blocked (eval). Il loader di Sourcepoint scrive un attributo, lo rilegge subito, e lancia un errore se il valore è cambiato:\nz.call(O,\u0026#39;src\u0026#39;,G), O[x](\u0026#39;src\u0026#39;) !== G \u0026amp;\u0026amp; throw E … catch (W) { try { await l(W) } catch (x) { o(W) } } // o() raises the dialog Sourcepoint lo ha venduto apertamente. La sua stessa documentazione diceva «on average about 30% of messaged users will turn off their adblockers»7. Quindi non sto descrivendo uno script canaglia che qualcuno ha infilato di nascosto. È un prodotto, comprato e messo in opera di proposito dall\u0026rsquo;editore.\nI muri consenso-o-paga sono un\u0026rsquo;altra categoria e non li chiamo malware. Non distruggono ciò che è stato consegnato e non si nascondono dalle blocklist. Sono coercitivi in un altro modo, ed è la sezione successiva.\nAccetta 1.467 partner o paga 2,99 £ Il muro sulle testate di Reach è Quantcast Choice, ora gestito da InMobi8 e servito da cmp.inmobi.com. Dà due scelte. Accetta, o paga 2,99 £ al mese. Non c\u0026rsquo;è un «no» gratuito.\nAccettare condivide i tuoi dati con 1.467 partner elencati e scrive un cookie euconsent-v2 che dura 13 mesi. Nessuno legge un elenco di 1.467 aziende, nessuno potrebbe valutare cosa ciascuna farebbe con i dati anche se lo leggesse, e il numero da solo ti dice che tipo di consenso ti stanno chiedendo.\nIl GDPR britannico dice che il consenso deve essere dato liberamente, e che quando giudichi se lo è stato, guardi se il servizio è stato reso condizionato al consenso a un trattamento di cui non ha bisogno9. L\u0026rsquo;ICO ha pubblicato indicazioni secondo cui il consenso-o-paga può essere lecito10, indicazioni che ora dice essere in revisione, e il Comitato europeo per la protezione dei dati ha detto che per le grandi piattaforme che offrono solo le due opzioni, nella maggior parte dei casi non lo sarà11. Non farò finta che il regolatore l\u0026rsquo;abbia vietato. Non l\u0026rsquo;ha fatto.\nQuindi ecco dove mi colloco, chiaramente. Ho scelto di togliere il muro e di rifiutare il consenso. Questo vuol dire che leggo l\u0026rsquo;articolo sul ramo gratuito senza pagare e senza consegnare i miei dati a 1.467 aziende. È una decisione. L\u0026rsquo;estensione lo dice nella sua stessa pagina delle impostazioni, e non la travesto da qualcosa di neutro. Un consenso che non puoi rifiutare è un prezzo, e non pagherò un prezzo travestito da domanda.\nTogliere il riquadro è il terzo facile del lavoro. Gli altri due terzi sono in Rispondere come si deve alla domanda sul consenso, perché un banner che cancelli senza rispondere torna ogni volta.\nUn giorno, otto commit È stata costruita tutta in un giorno. Ci sono state alcune ore a frugare nelle pagine prima che si facesse qualsiasi commit, poi otto commit tra le 20:32 e le 22:50. L\u0026rsquo;ho costruita con Claude Code, e gran parte della fatica di leggere riga per riga script inline offuscati l\u0026rsquo;ha fatta l\u0026rsquo;agente mentre io guardavo cosa facevano le pagine sullo schermo. Quella divisione ha funzionato bene, e dove è andata storta è qui sotto, perché è andata storta in un modo che vale la pena conoscere.\nOra Commit 20:32 primo commit: Newsquest, notebookcheck, National World, Reach, Page Six 20:46 il fornitore dietro ogni meccanismo, scritto nel README 20:56 50 link dalla prima pagina di Google News, come campione non scelto 21:02 rispondere all\u0026rsquo;API del consenso con ogni finalità negata 21:11 link social disinnescati 22:50 protezioni attivabili, MSN e Bing, rifiuto del consenso con un clic, 77 test È un\u0026rsquo;estensione Manifest V3 con due permessi, declarativeNetRequest e storage, e non ha permessi sugli host né accesso alla rete per conto suo, quindi non può scaricare niente, riscrivere una risposta o parlare con un server al posto tuo. Quel vincolo ha dato forma al progetto più di qualsiasi altra cosa, perché il lavoro interessante deve avvenire dentro la pagina.\nDue mondi, un attributo che scende e un evento che sale Il codice della pagina e le impostazioni dell'estensione vivono in mondi diversi Storage dell'estensione chrome.storage.local protezioni canali di tracciamento impostazioni social ultimi 50 errori letto e scritto dalla pagina delle opzioni Mondo isolato bridge.js social.js portal.js può leggere chrome.storage non può toccare le funzioni della pagina Mondo della pagina (MAIN) walls.js guard.js portal-early.js avvolge setTimeout, cookie, __tcfapi, window.adLight nessun chrome.* Giù: un attributo sull'elemento html, solo ciò che è disattivato \u0026lt;html data-ktp-off=\"cookies,dom\"\u0026gt; installazione di default: niente scritto Su: un evento ktp-report detail: una stringa JSON un oggetto non passa in modo affidabile Chrome esegue gli script delle estensioni in due mondi. Il mondo della pagina raggiunge il JavaScript della pagina ma non ha API dell\u0026rsquo;estensione. Il mondo isolato può leggere le impostazioni ma non può toccare le funzioni della pagina. Tutto passa dall\u0026rsquo;uno all\u0026rsquo;altro come un attributo che scende e un evento che sale. Il mondo MAIN di Chrome condivide l\u0026rsquo;ambiente JavaScript della pagina12. Uno script lì può sostituire setTimeout, avvolgere document.cookie o definire window.adLight prima che lo faccia la pagina, che è esattamente ciò che serve per combattere questi muri. In pratica non può chiamare chrome.storage. Il mondo isolato può, ma non vede le funzioni della pagina. Così un piccolo ponte legge le impostazioni e le scrive su \u0026lt;html\u0026gt;, e gli errori risalgono come un CustomEvent il cui detail è una stringa JSON, perché un oggetto non attraversa quel confine in modo affidabile.\nL\u0026rsquo;attributo che scende elenca solo ciò che hai disattivato. Un\u0026rsquo;installazione di default non scrive niente sulla pagina. Conta perché un marcatore permanente su \u0026lt;html\u0026gt; è esattamente il tipo di cosa che questi SDK cercano, e vuol dire che un guasto dello storage fallisce verso la difesa della pagina invece che lontano da essa.\nTrova il cancello, non combattere il muro La correzione per Newsquest sono due passaggi di ragionamento ed è quella con cui è stato misurato tutto il resto.\nIl loro intero muro sta dietro un solo flag nella pagina:\nvar adLight = false; // line 1647 if (adLight !== true) { …} // line 2020: loader, eval payload, confirm() adLight è il flag «light ads» degli abbonati. Se è vero, il muro non si costruisce mai. Così l\u0026rsquo;estensione definisce window.adLight come true a document_start, prima che giri lo script della pagina, con un setter che ignora qualunque cosa ci venga scritta:\nObject.defineProperty(window, \u0026#39;adLight\u0026#39;, { configurable: false, enumerable: true, get() { return true; }, set() { /* ignore the page\u0026#39;s \u0026#34;false\u0026#34; */ } }); Un var in cima a uno script non ridefinisce una proprietà che l\u0026rsquo;oggetto globale ha già. Le assegna solo un valore13. Così il var adLight = false della pagina gira, finisce sul setter, e non fa niente. Il loader del muro non parte mai, il payload eval non arriva mai e non c\u0026rsquo;è nessun controllo anti-manomissione da far scattare, perché niente è stato manomesso. Il flag ha semplicemente detto sì.\nÈ l\u0026rsquo;unica proprietà in tutta l\u0026rsquo;estensione che non è configurabile. Deve esserlo, per sopravvivere alla dichiarazione. Tutto il resto è configurable: true, così nessuna pagina si vede mai sequestrare per sempre una delle sue API.\nCopre 269 testate e non si può disattivare nelle impostazioni, che dicono perché: gira prima che chrome.storage possa rispondere, e una volta impostata non si può annullare. Una casella di spunta sarebbe decorazione.\nOgni correzione che ha peggiorato le cose Questa è la sezione utile, perché ogni errore qui è la cosa ovvia da provare.\nCosa ho provato Cosa è successo Bloccare l\u0026rsquo;host del loader l\u0026rsquo;host è un CNAME first-party casuale per ogni testata; e un fetch fallito è esso stesso il segnale di rilevamento Proteggere setAttribute sugli script iniettati ha fatto scattare il controllo di rilettura di Sourcepoint, che ha aperto la finestra che doveva fermare Rispondere al confirm() con Annulla in questo SDK Annulla vuol dire ricarica, quindi ha causato un ciclo infinito di ricaricamenti Fotografare \u0026lt;body\u0026gt; a DOMContentLoaded per ripristinarlo dopo il muro svuota durante il parsing, quindi la fotografia era di un body vuoto Proteggere remove() e removeChild() il muro ripulisce la pagina con un solo innerHTML = '', non nodo per nodo Proteggere tutto insieme su notebookcheck il muro è passato a una finestra di dialogo, poi a un ciclo di ricaricamenti; decisamente peggio che non fare niente Reindirizzare l\u0026rsquo;host del fornitore a uno stub locale una regola redirect con il solo declarativeNetRequest ha invalidato l\u0026rsquo;intero ruleset, uccidendo in silenzio la regola per Newsquest su 269 siti Far girare le protezioni della pagina su ogni sito prototipi globali modificati su ogni pagina che visitavo, compresa la mia banca Quella del redirect merita un secondo sguardo. Chrome dà a una regola block un accesso implicito e vuole il permesso sull\u0026rsquo;host per qualsiasi cosa di più14. La sua documentazione dice che le regole statiche non valide vengono ignorate15. Quello che ho visto io era peggio: è sparito l\u0026rsquo;intero file, senza nessun errore sulla pagina, e la regola 1 ha semplicemente smesso di esistere su 269 siti. Le due regole per MSN ora vivono in un ruleset tutto loro proprio per questo, così una modifica sbagliata a uno non può tirare giù l\u0026rsquo;altro.\nIl ciclo di ricaricamenti ha insegnato l\u0026rsquo;altra regola dura. location.reload non si può intercettare. L\u0026rsquo;oggetto Location è non falsificabile nello standard HTML16, quindi i suoi metodi sono non scrivibili e non configurabili, e provarci ti dà:\nObject.defineProperty(location,\u0026#39;reload\u0026#39;,...) -\u0026gt; TypeError: Cannot redefine property: reload Qualsiasi muro il cui percorso di fallimento sia «ricarica la pagina» non si può fermare una volta che è su quel percorso. Niente può. L\u0026rsquo;unica soluzione è assicurarsi che non ci arrivi mai. Che è la stessa lezione di adLight, imparata nel modo doloroso: ogni tentativo di combattere un muro già in esecuzione ha peggiorato le cose, e ogni correzione che ha funzionato ha impedito al muro di partire.\nIl danno l\u0026rsquo;ha fatto un solo timer notebookcheck non ha adLight. Il muro gira sempre. Con il tracciamento attivo, l\u0026rsquo;estensione ha mostrato cosa programmava:\ndropped setTimeout(7005ms) scheduled from eval \u0026lt;- the body.remove() dropped setTimeout(1251ms) / 105ms / 0ms x8 dropped setInterval(15000ms) Uno di quei timer fa tutto il danno: quello a 7 secondi che toglie \u0026lt;body\u0026gt;. Tutto ciò che viene dopo è una reazione, perché la pagina bianca lancia un\u0026rsquo;eccezione, l\u0026rsquo;eccezione apre la finestra di dialogo, la finestra ricarica la pagina e tutto ricomincia da capo con una nuova serie di timer.\nQuindi la correzione è una regola sola. Scarta un timer se è stato programmato da codice passato per eval, se la pagina porta la firma di questo SDK e se il gestore è una funzione. Lo stack ti dice da dove arriva una chiamata, e eval ci lascia il suo segno.\nbefore: 4 page loads, 3 confirms, reload loop after: 1 page load, 0 confirms, alive 40,378ms, content intact Un timer, e tutto ciò che ne segue notebookcheck: un timer fa il danno, il resto è reazione Così com'è servito articolo e CSS arrivano, disegnati loader da html-load.com payload eval programma i timer 7,0s: parte il timer body.remove() pagina bianca: errore, confirm() pagina ricaricata e ricomincia 4 caricamenti, 3 finestre, ciclo di ricarica Con l'estensione articolo e CSS arrivano, disegnati loader da html-load.com payload eval programma i timer ogni timer da eval scartato subito 1 caricamento, 0 finestre, viva a 40 secondi notebookcheck senza e con l\u0026rsquo;estensione. Niente a valle del timer dei 7 secondi va corretto, perché niente di tutto ciò accade una volta scartato quel timer. A quel punto nella build c\u0026rsquo;erano altri due meccanismi, un redirect del loader verso uno stub e un elemento esca per assorbire le scritture del muro. Funzionavano entrambi, ed entrambi curavano i sintomi di quell\u0026rsquo;unico timer, cosa diventata ovvia solo quando la regola sul timer è stata provata da sola e si è rivelata sufficiente. Così sono usciti tutti e due, e toglierli ha fatto cadere un permesso e con lui ogni permesso sugli host. Verifica sempre se l\u0026rsquo;ultima modifica da sola fa il lavoro prima di tenerti l\u0026rsquo;impalcatura attorno.\nLa firma è l\u0026rsquo;attributo data-sdk sul tag del loader, e corrisponde a una forma, l/\u0026lt;n\u0026gt;.\u0026lt;n\u0026gt;, invece che a una versione. In un giorno ne sono comparse tre. Si aggancia e non memorizza mai un risultato negativo, perché il tag del loader potrebbe non essere ancora stato analizzato quando vengono programmati i primi timer, e un «no» ricordato la disarmerebbe per sempre su una pagina che il muro ce l\u0026rsquo;ha.\nLa sonda diceva tutto a posto. Lo schermo no. The Scotsman e Yorkshire Post sono stati dati per sistemati sulla base di una sonda che misurava il testo. La pagina ne aveva 8.808 caratteri, 22 elementi sotto \u0026lt;body\u0026gt;, stabili a 2, 8 e 16 secondi. Con quella misura era intatta.\nNon lo era. La stavo guardando, e ogni foglio di stile era sparito, i link erano un elenco nudo, il logo SVG riempiva lo schermo e c\u0026rsquo;era una barra di scorrimento orizzontale. Tutte le parole c\u0026rsquo;erano, ed era tutto ciò che quella sonda poteva vedere. Ho dovuto indicare lo schermo e dirlo.\nCosa misurava la sonda, e cosa c'era sullo schermo Yorkshire Post, prima della correzione: la stessa pagina, misurata in due modi Cosa misurava la sonda innerText.length8.808 figli del body22 a 2s, 8s, 16sinvariato Verdetto: intatta Cosa c'era sullo schermo document.styleSheets.length0 link come elenco nudo, logo a tutta larghezza, una barra di scorrimento orizzontale Verdetto: rotta Scartato lo strip in fase di programmazione: 2 fogli di stile, 532 regole, la pagina si visualizza La stessa pagina, misurata in due modi. La lunghezza del testo diceva che la pagina stava bene. Il conteggio dei fogli di stile diceva che era rotta, e il conteggio dei fogli di stile aveva ragione. La causa era lo strip della prima tabella, e non corrispondeva alla regola sui timer, perché è un normale script inline e non eval. Quindi la firma è il suo stesso sorgente: un lavoro ripetuto il cui corpo chiama querySelectorAll('link,style') e poi remove(). Niente di legittimo fa una cosa del genere. Viene scartato al momento della programmazione, non viene mai tolto niente e non c\u0026rsquo;è niente da ripristinare. Yorkshire Post è passato da 0 fogli di stile a 2, con 532 regole, e si è visualizzato.\nTrovarlo ha richiesto uno stack trace, non un\u0026rsquo;ipotesi. Modifica Element.prototype.remove perché registri lo stack ogni volta che toglie uno STYLE o un LINK, e al primo tentativo ha indicato lo script inline e il forEach.\nDopo di che, document.styleSheets.length è entrato in ogni controllo. Una pagina che non ne ha nessuno è rotta per quanto testo abbia. Misurare diventa più difficile di quanto penseresti, e queste sono le trappole in cui la build è caduta quel giorno:\nTrappola Cosa diceva Cosa era vero lunghezza del testo come controllo di resa «intatta» markup senza stile un solo campione dopo il caricamento muri di Reach «non presenti» su otto testate il muro vive circa 600ms ed era già stato spazzato via console vuota dopo la navigazione «la protezione non scatta» i messaggi del caricamento non sopravvivono alla navigazione campioni a 1s e 4s notebookcheck sano si svuota tra 5 e 8 secondi cssRules contate tra origini diverse ESPN aveva 5 regole i fogli di altre origini lanciano un\u0026rsquo;eccezione, quindi il conteggio risulta basso La soluzione per quello dei 600ms è interrogare ogni 100ms dal momento in cui la pagina si carica. Su Wales Online il muro è comparso a 425ms ed era sparito a 1.129ms.\nPoi i controlli sono stati fatti sul serio. 52 articoli su 26 domini, due per sito, scelti per coprire ogni meccanismo: 52 su 52 con i fogli di stile, nessun muro rimasto sullo schermo, nessun ciclo di ricaricamenti. Poi 50 link presi direttamente dalla prima pagina di Google News UK, non scelti da me: 45 si sono visualizzati normalmente, 2 erano host che il mio Pi-hole blocca di proposito, 1 era il vero paywall di The Times, e 2 erano lo stesso articolo finito lì due volte perché Google ricostruisce l\u0026rsquo;ordine dei link a ogni caricamento. Nessuno con zero fogli di stile. In quel giro sono saltate fuori tre testate di National World che non avevo mai provato e che portavano lo stesso SDK, e tutte e tre si sono visualizzate, che è proprio lo scopo di cercare una forma invece di un elenco di siti.\nCi sono 77 test unitari, nel repository con tutto il resto. Su questa macchina non c\u0026rsquo;è Node, quindi girano su gjs, e caricano il vero walls.js su un DOM sostitutivo, così sotto test ci sono gli schemi di produzione. Ognuno è stato verificato rompendo la cosa che protegge e guardandolo diventare rosso. Provano solo le decisioni. Superarli non vuol dire che una pagina si visualizzi, e The Scotsman è il motivo per cui quella frase sta nel README.\nRispondere come si deve alla domanda sul consenso Cancellare un banner del consenso lascia la domanda senza risposta. Questo ha due conseguenze, e la prima è che il banner viene ricostruito a ogni caricamento della pagina. E un editore che trattiene i contenuti finché l\u0026rsquo;API del consenso non risponde resterà semplicemente appeso, mentre un fornitore che non riceve risposta può trattare la domanda come mai fatta. Il silenzio non è un rifiuto.\nQuindi l\u0026rsquo;estensione risponde, in quest\u0026rsquo;ordine:\nRifiuta, rispondi no, non salvare niente, e solo allora togli A un banner del consenso si risponde, non lo si cancella e basta Sullo schermo c'è il contenitore del fornitore del consenso #qc-cmp2-container #onetrust-consent-sdk sp_message_container 1. Premi il loro rifiuto Reject all, Decline, Only essential, Continue without accepting solo etichetta intera, max 40 caratteri corrisponde ad Accept: la build fallisce 2. Rispondi all'API: no __tcfapi ogni finalità, funzionalità e fornitore negati tcString \"\" tcloaded 3. Non salvare mai il record euconsent-v2 addtl_consent OptanonConsent didomi_token cookie e localStorage scritture scartate Ancora sullo schermo al giro dopo? sì: toglilo, sblocca lo scorrimento no: il rifiuto resta Tre risposte e un ripiego. Il pulsante di rifiuto viene premuto se c\u0026rsquo;è, all\u0026rsquo;API del consenso si dice no a tutto, il record non viene mai salvato, e solo un banner ancora in piedi al giro successivo viene tolto. Prima preme il loro pulsante di rifiuto. Solo pulsanti la cui etichetta intera sia un rifiuto: «Reject all», «Decline», «Only essential», «Continue without accepting» e pochi altri, ciascuno ancorato, e qualunque cosa oltre i 40 caratteri ignorata. Un test unitario gli passa «I Accept», «Accept All», «Agree and close», «Allow all», «Got it», «Subscribe» e «Pay £2.99/mo» e fa fallire la build se uno qualsiasi corrisponde. Cliccare il pulsante sbagliato darebbe il consenso al posto tuo, ed è l\u0026rsquo;unica cosa che questo progetto non deve mai fare. Su msn.com, premere «Reject All» ha tolto di mezzo il banner di Microsoft e non è tornato al ricaricamento, perché Microsoft tiene il rifiuto sui propri server.\nRisponde no all\u0026rsquo;API del consenso. Il framework dell\u0026rsquo;IAB dà a ogni pagina che chiede il consenso una funzione chiamata __tcfapi per chiedere a cosa hai acconsentito17. Dove ne esiste una, l\u0026rsquo;estensione risponde con ogni finalità, ogni funzionalità speciale e ogni fornitore negati, una stringa di consenso vuota e eventStatus: 'tcloaded', che vuol dire che la risposta è definitiva. Compare solo dove sulla pagina c\u0026rsquo;è già un framework di consenso, così un sito che non ha mai chiesto non la vede.\nNon salva mai il record. document.cookie e localStorage scartano in silenzio euconsent-v2, addtl_consent, OptanonConsent, didomi_token e gli altri, così un consenso che non hai mai dato non viene mai scritto e mai riproposto a 1.467 partner alla pagina successiva. La legge britannica già richiede il consenso prima che qualcosa venga salvato sul tuo dispositivo per questo scopo18. L\u0026rsquo;estensione fa rispettare il no.\nOgni nome in quell\u0026rsquo;elenco è ancorato a entrambe le estremità, e dietro c\u0026rsquo;è una storia. I cookie di Sourcepoint cominciano con _sp_. Uno schema pigro come sp_ corrisponde anche a sp_dc e sp_t di Spotify, che sono la sessione di login, e mi avrebbe scollegato da Spotify a ogni pagina. Anche questo lo fissa un test.\nTogliere è il ripiego. Solo per un banner ancora sullo schermo dopo il clic, e solo un banner che si vede davvero. Diversi fornitori lasciano nella pagina un contenitore permanente che ci sia o no un banner. euronews tiene un host Didomi ad altezza zero, e strapparlo via rompe la pagina senza alcun guadagno. Quello di Reach stava tre livelli sotto \u0026lt;body\u0026gt; dentro due contenitori che di per sé non sono fissi, quindi il controllo deve scendere fino al riquadro che lo è.\nPulsanti di condivisione, e un portale che ignora le proprie impostazioni Su queste pagine ci sono altre due cose che esistono per servire qualcun altro e non il lettore, e richiedevano un trattamento diverso dai muri.\nPulsanti di condivisione e di follow. Ogni link a Facebook, Instagram, X, TikTok o LinkedIn viene riscritto in http://localhost/removeme, con l\u0026rsquo;originale parcheggiato in un attributo così non si perde niente. Poi un secondo passaggio cancella ciò che è chiaramente arredo (un\u0026rsquo;icona senza testo, «Share on X», qualunque cosa in un contenitore che si chiama share o social) e nasconde il resto. Il marcatore c\u0026rsquo;è perché un solo selettore mostri tutto ciò che sta per andarsene, e una modalità di sola marcatura si ferma dopo il primo passaggio così puoi guardare prima di fidarti su un sito.\nLa versione ingenua rompe le pagine in tre modi, e ognuno ora è un test:\nVersione ingenua Cosa rompe Cosa si fa invece a[href*=\u0026quot;x.com\u0026quot;] corrisponde anche a netflix.com, linux.com, phoenix.com analizzare l\u0026rsquo;host e confrontare etichette intere togliere ogni link social sparisce «Continue with Facebook» e la gente resta chiusa fuori link di login, OAuth, legali e per sviluppatori lasciati in pace togliere un link dentro una frase le parole se ne vanno con lui nascondere di default; un\u0026rsquo;opzione lo scioglie e tiene le parole Quest\u0026rsquo;ultimo è un compromesso che ho fatto sapendolo. Una chiusura della BBC con l\u0026rsquo;opzione attiva si legge «follow BBC Manchester on , , and .». L\u0026rsquo;ho guardata e ho scelto comunque di nascondere. L\u0026rsquo;opzione per tenere le parole c\u0026rsquo;è per chi non è d\u0026rsquo;accordo.\nMSN e Bing. Gli stessi web component fanno girare entrambi, circa 160 shadow root sulla prima pagina. Una semplice query sul documento ha trovato 1 link. Percorrere gli shadow root ne ha trovati 73, comprese le tessere di Facebook e X. Qualunque cosa non li percorra non ne vede quasi niente.\nMSN ha le sue impostazioni dei contenuti. Sono tenute sui server di Microsoft legate a un ID anonimo, non in un cookie, quindi spariscono dopo una pulizia dei cookie, in un nuovo profilo e in incognito. A Bing non arrivano proprio. E con tutte disattivate e 11.700 pixel di scorrimento, questo era quello che restava nel feed:\nInterruttore di MSN, disattivato Ancora sulla pagina Casual Games la tessera dei giochi Shopping tessere pubblicitarie di Booking, Temu ed eBay Comments 501 link ai commenti Weather, Finance, Sports spariti, fino alla prossima pulizia dei cookie Un interruttore con scritto Comments che lascia sulla pagina 501 link ai commenti è un\u0026rsquo;affermazione fatta all\u0026rsquo;utente, e falsa. Così l\u0026rsquo;estensione li toglie da sé, puntando ai nomi stabili dei componenti di MSN invece che ai nomi delle classi, che cambiano a ogni build.\nUna cosa che ho imparato lì e che vale ben oltre MSN: togliere un\u0026rsquo;immagine dalla pagina non ne ferma il caricamento. Chrome avvia il fetch quando viene impostato src, anche per un\u0026rsquo;immagine mai messa nella pagina19. Quando uno script di contenuto vede una scheda, la sua miniatura è già in viaggio. Quindi i dati del feed vengono bloccati ai due endpoint che li servono, e mai gli host delle immagini, perché th.bing.com serve anche la ricerca immagini di Bing.\nE il feed di MSN lampeggia ancora sullo schermo per un attimo prima di sparire. Quattro tentativi di nasconderlo prima risultavano tutti funzionanti alla misura e nessuno ha fermato il lampo, il che vuol dire che ciò che viene disegnato non è ciò che l\u0026rsquo;estensione nasconde. La pagina delle impostazioni lo dice chiaramente. Preferisco che lo dica piuttosto che lasci intendere un caricamento pulito che non dà.\nCosa non fa Non farà Perché aprire un vero paywall se il server trattiene l\u0026rsquo;articolo, resta trattenuto tirare a indovinare su un sito un dominio entra solo dopo che il suo muro è stato visto lì; due siti di News Corp che si presumeva fossero come Page Six non lo erano, e sono stati tolti di nuovo toccare un sito senza firma sulla BBC ogni aggancio è installato e non viene registrato niente, nessun timer scartato, nessun nodo toccato chiamare casa nessun permesso sugli host, nessun accesso alla rete, nessuna telemetria; il log degli errori resta nel tuo browser fingere il lampo di MSN non è risolto, e una variante di Ad-Shield, wp-ls/…, non corrisponde ancora; la sua pagina si visualizzava bene, quindi è messa per iscritto invece che corretta a naso Una pagina che ti è stata mandata è tua Una volta che un server ha mandato una pagina al tuo browser, quella copia sta sulla tua macchina. Eseguirci sopra del codice dopo per portartela via non è un modello di business che riconosco. È il vecchio trucco di venderti qualcosa e poi tenerci sopra una mano.\nI giornali una volta erano una cosa che compravi e poi possedevi: qualcuno all\u0026rsquo;angolo della strada ne aveva una pila, gli davi i soldi, e il giornale veniva a casa con te ed era tuo da leggere, piegare, prestare o usare per accendere il fuoco. Nessuno veniva a casa tua un\u0026rsquo;ora dopo a ritagliare la seconda pagina perché avevi saltato le pubblicità. La versione web ha dato via il giornale per niente e poi ha venduto il lettore. Prima agli inserzionisti, poi ai 1.467 partner, e ora a un fornitore il cui intero prodotto è decidere se ti sei comportato abbastanza bene da tenerti quello che ti è stato dato.\nLa parte che non riesco a mandare giù è il foglio di stile. Un giornale che lascia decidere al server di un\u0026rsquo;azienda pubblicitaria se la propria impaginazione sopravvive ha regalato la propria prima pagina. Non l\u0026rsquo;avrà saputo, perché nessuno all\u0026rsquo;interno bloccava l\u0026rsquo;host, quindi il primo a scoprirlo è stato un lettore con un Pi-hole, davanti a una pagina piena di link nudi e a una finestra di dialogo che gli diceva che la colpa era sua. Non lo era.\nIl giornalismo ha un prezzo e non ho alcun problema a pagarlo. Quello che non farò è lasciare che uno script decida cosa ho già. Quella linea si traccia nel mio browser, non nel loro.\nPi-hole documentation — «The Pi-hole® is a DNS sinkhole that protects your devices from unwanted content, without installing any client-side software.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNewsquest — About us — «We are the leading local news publisher in the UK with a portfolio of more than 200 brands.» I marchi non sono domini, da qui il conteggio più alto ricavato dai certificati.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDaily Business, 18 dicembre 2024 — «National World, owner of The Scotsman and Yorkshire Post, has reached agreement on a £65.1 million takeover by Irish publisher Media Concierge.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nReach plc — About us, archiviata il 5 settembre 2026 — «120+ brands, from household names like the Mirror, Express, Daily Record and Daily Star, to local titles like MyLondon, BelfastLive and the Manchester Evening News».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDimova et al., «The CNAME of the Game: Large-scale Analysis of DNS-based Tracking Evasion», PETS 2021 — il CNAME cloaking «effectively bypasses antitracking measures that rely on fixed hostname-based block lists.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nuBlockOrigin/uAssets issue #30988, archiviata dai manutentori sotto l\u0026rsquo;etichetta «Ad-Shield», con il messaggio servito da error-report.com: «Failed to load website properly since html-load.com is blocked.» Vedi anche Jacob Desforges, «Ad-Shield ad reinsertion», 12th April 2026. L\u0026rsquo;attribuzione è della comunità delle liste di filtri; il fornitore non rivela niente.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSourcepoint — Anti-adblock FAQs, archiviata il 25 maggio 2022 — «Historical experience shows on average about 30% of messaged users will turn off their adblockers.» La stessa pagina chiede se «a CNAME applied to a 1st-party subdomain» impedirebbe il blocco dello script di rilevamento.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAdExchanger, 16 agosto 2023 — «InMobi acquired Quantcast’s consent management platform, called Quantcast Choice».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK GDPR, Article 7 — «utmost account shall be taken of whether, inter alia, the performance of a contract, including the provision of a service, is conditional on consent». Recital 42: il consenso non è dato liberamente «if the data subject has no genuine or free choice».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nICO — Consent or pay, pubblicata il 23 gennaio 2025 — «“Consent or pay” models can be compliant with data protection law if you can demonstrate that people can freely give their consent». La pagina ora dice che le indicazioni sono in revisione dopo il Data (Use and Access) Act.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEDPB Opinion 08/2024, adottato il 17 aprile 2024 — «In most cases, it will not be possible for large online platforms to comply with the requirements for valid consent if they confront users only with a binary choice». Riguarda le grandi piattaforme online, non i giornali regionali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChrome for Developers — content_scripts manifest key — «Choosing the “MAIN” world means the script will share the execution environment with the host page\u0026rsquo;s JavaScript.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nECMAScript — CreateGlobalVarBinding — «If a binding already exists, it is reused and assumed to be initialized.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChrome for Developers — declarativeNetRequest — «provides implicit access to allow , allowAllRequests and block rules», e altrimenti «you must request host permissions before you can perform any action on a host.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChrome for Developers — declarativeNetRequest — «Errors and warnings about invalid static rules are only displayed for unpacked extensions. Invalid static rules in packed extensions are ignored.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHTML Standard — the Location interface marca i suoi membri [LegacyUnforgeable], che in Web IDL vuol dire «the property will be non-configurable and will exist as an own property on the object itself».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIAB Tech Lab — TCF v2 CMP API — «Every consent manager MUST provide the following API function: __tcfapi(command, version, callback, parameter)».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPECR, regulation 6 — «a person must not store information, or gain access to information stored, in the terminal equipment of a subscriber or user», con il consenso come condizione nella Schedule A1, come modificata dal Data (Use and Access) Act 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHTML Standard — update the image data — gira «whenever that element is created or has experienced relevant mutations», anche quando viene impostato il suo src; essere nel documento non è una condizione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/random/the-news-site-sent-me-the-article-then-deleted-it/","summary":"Newsquest, National World, Reach e altri mandano al tuo browser l\u0026rsquo;articolo completo con i suoi fogli di stile, poi eseguono codice commerciale anti-adblock e di consenso che svuota la pagina, cancella ogni foglio di stile ogni 100ms o la copre con una scelta tra 1.467 partner di tracciamento e 2,99 £ al mese. Qui trovi cosa fa quel codice, i quattro motivi per cui lo chiamo malware, e l\u0026rsquo;estensione Chrome che ho costruito in un giorno per tenermi la pagina: bloccare il flag adLight di Newsquest prima che il muro si costruisca, scartare i timer programmati da eval, fermare lo strip dei fogli di stile al momento della programmazione, e rifiutare il consenso come si deve rispondendo no all\u0026rsquo;API TCF, premendo il pulsante di rifiuto del fornitore stesso e non salvando mai il record. Poi le correzioni che hanno peggiorato le cose, la sonda che diceva che una pagina rotta stava bene, i pulsanti di condivisione e il feed di MSN, e cosa l\u0026rsquo;estensione non fa.","title":"Il sito di notizie mi ha mandato l'articolo, poi l'ha cancellato"},{"content":"Dal carbone a niente in quattordici anni La dashboard della National Grid di Kate Morley ti lascia scegliere la finestra e guardare i numeri muoversi.1 I dati partono dal 2012, che per caso è il picco del carbone, quindi la colonna di tutto il periodo racchiude l\u0026rsquo;intera pulizia in un solo dato.\nTutto il periodo (2012–) Ultimo anno Ultima settimana Ultimo giorno Intensità di carbonio 251 g/kWh 124 g/kWh 98 g/kWh 67 g/kWh Carbone 12,4% 0,0% 0,0% 0,0% Gas 33,5% 27,0% 21,2% 15,9% Eolico 19,5% 34,8% 46,0% 64,1% Solare 3,7% 7,4% 8,3% 11,1% Nucleare 18,3% 12,0% 12,0% 12,9% Totale fossili 45,8% 27,0% 21,2% 15,9% Totale rinnovabili 24,4% 43,6% 55,8% 76,6% Domanda 32,6 GW 30,9 GW 28,4 GW 25,8 GW Prezzo £70,13/MWh £92,77/MWh £125,01/MWh £27,18/MWh L\u0026rsquo;eolico è ora la prima fonte singola di elettricità in Gran Bretagna. Il 34,8% su un anno intero, contro il 27% del gas e il 12% del nucleare. Non in una giornata buona. Dodici mesi.\nIl carbone è a zero. Non basso. Zero, per un anno. L\u0026rsquo;ultima centrale ha chiuso il 30 settembre 2024, centoquarantadue anni dopo che la prima al mondo aveva aperto a Londra nel gennaio 1882, il che significa che questo paese ha inventato l\u0026rsquo;elettricità da carbone e poi ha impiegato quasi un secolo e mezzo per decidersi a spegnerla.1 L\u0026rsquo;intensità di carbonio si è dimezzata rispetto alla media dei quattordici anni, da 251 a 124. Metà, in quattordici anni.\nLa domanda che è sparita Guarda di nuovo la riga della domanda. 32,6 GW sulla media lunga, 30,9 nell\u0026rsquo;ultimo anno. Scende da vent\u0026rsquo;anni, circa 5 TWh all\u0026rsquo;anno dal 2005.\n2005 2023 Domanda domestica 126 TWh 93 TWh Domanda industriale 117 TWh 86 TWh Famiglia media 4.662 kWh (2007) 3.449 kWh Le famiglie sono scese di 33 TWh in quel periodo mentre il paese collegava un milione e mezzo di auto elettriche e un quarto di milione di pompe di calore.2 Le regole Ecodesign dell\u0026rsquo;UE hanno fatto buona parte del lavoro; le sole norme sull\u0026rsquo;illuminazione hanno risparmiato 81 TWh in tutta l\u0026rsquo;UE nel 2020.3 L\u0026rsquo;efficienza non ha solo assorbito le auto elettriche, le ha sommerse.\nDue avvertenze, perché su questo si esagera spesso. Anche la domanda industriale è scesa, da 117 TWh a 86, e per lo più sono fabbriche che chiudono, non fabbriche che diventano più furbe. E il calo è finito. Il 2024 è stato il primo anno in quasi due decenni in cui la domanda è tornata a salire.2\nLe auto che dovevano farla saltare Ecco il parco che la rete ha assorbito, preso direttamente dalle tabelle di immatricolazione della DVLA. Veicoli elettrici a batteria immatricolati in Gran Bretagna alla fine di ogni anno.4\nAnno Auto Furgoni Autobus Mezzi pesanti Moto Totale 2015 20.472 4.786 194 314 917 26.756 2017 41.222 6.401 303 283 1.046 49.334 2019 89.581 10.479 504 269 2.790 103.724 2021 374.597 28.245 1.295 331 9.118 413.908 2023 916.576 64.988 3.188 732 14.142 1.000.092 2024 1.266.421 84.959 4.821 983 14.039 1.371.779 2025 1.708.499 111.837 7.450 1.472 13.460 1.843.395 Le auto sono cresciute di ottantatré volte in dieci anni, l\u0026rsquo;intero parco di sessantanove volte. Il milionesimo veicolo elettrico è arrivato a fine 2023 a quota 1.000.092, che è quanto di più vicino al bersaglio una statistica possa arrivare. Nessuno l\u0026rsquo;aveva pianificato.\nTre cose in quella tabella che non vedi in un titolo.\nI camion hanno appena cominciato. 1.472 mezzi pesanti elettrici in tutta la Gran Bretagna, e il numero è persino sceso tra il 2015 e il 2020, fino a 253. Le auto sono sempre state la parte facile. Questa è la parte difficile e non è davvero cominciata.\nLe moto elettriche vanno all\u0026rsquo;indietro. 14.142 nel 2023, poi 14.039, ora 13.460. Due anni di calo, l\u0026rsquo;unica categoria che si restringe mentre tutto il resto cresce.\nLe percentuali rallentano e il metallo no. La crescita delle auto è stata del 114% nel 2020 e del 35% nel 2025. Ma il 2025 ha messo su strada 442.000 auto contro le 350.000 del 2024. Una percentuale in calo di un numero grande batte ancora una percentuale grande di un numero piccolo.\nPer dove si va, i Future Energy Scenarios 2025 di NESO portano la Gran Bretagna a 31 milioni di veicoli elettrici entro il 2050 nello scenario Holistic Transition, 33,4 milioni in Electric Engagement e 36,1 milioni in Hydrogen Evolution.5 L'1,84 milioni di oggi è circa il sei per cento del percorso.\nUn dettaglio che vale la pena notare in quegli scenari: la flessibilità disponibile dalla ricarica intelligente quest\u0026rsquo;anno è scesa, da 16 GW a 10 GW. Batterie più grandi significano ricariche meno frequenti e più lunghe, e meno da spostare in giro.5\nLa domanda che non si è mai presentata C\u0026rsquo;è una seconda cosa che spinge giù la domanda, però, e non è l\u0026rsquo;efficienza.\nAutoconsumo Solare, senza batteria 30–40% Solare più batteria 80–90%6 Due milioni di impianti solari nel Regno Unito ormai, 22,3 GW in tutto, e più del 30% dei nuovi sistemi viene installato con una batteria, contro il 10% di cinque anni fa.6 Metti un accumulo dietro i pannelli e la maggior parte di ciò che produce il tetto non attraversa mai il contatore.\nQuell\u0026rsquo;energia non è risparmiata. Ha solo smesso di essere contata. Il contatore è l\u0026rsquo;unica cosa cambiata.\nAnno Capacità solare aggiunta 2021 ~0,4 GW 2022 ~0,5 GW 2023 1,9 GW 2024 2,3 GW 2025 2,6 GW Sei volte tanto in cinque anni, e la forma ti dice perché. Il 2021 e il 2022 sono piatti. Poi sono arrivate le bollette, la gente ha fatto i conti, e il solare ha smesso di essere una scelta ambientale ed è diventato una scelta economica.\nCasa nostra è da qualche parte in quella tabella. Nove kilowatt sul tetto, trenta kilowattora di batteria sotto, due auto e il condizionatore che si bevono la produzione del giorno. Dal punto di vista della National Grid questo indirizzo si sta restringendo in silenzio da anni. Dal punto di vista della fisica no. L\u0026rsquo;energia ha solo smesso di comparire sul grafico di qualcuno.\nLa guerra alla cosa che ha funzionato Niente di tutto questo è successo per caso, e c\u0026rsquo;è un tentativo in corso di fermare il resto.\nReform ha conquistato dieci consigli inglesi nel maggio 2025 e ha detto che avrebbe usato «every lever» per bloccare nuovi progetti eolici, solari e di batterie. Carbon Brief ha stimato la capacità a rischio in circa 6 GW: 5.076 MW di impianti a batteria, 786 MW di solare e 56 MW di eolico in quelle dieci aree.7 Il portavoce del partito per l\u0026rsquo;energia ha scritto agli sviluppatori nel Lincolnshire per dire loro «this is war», e ha mandato un preavviso formale agli amministratori delegati di SSE Renewables, Octopus Energy, Centrica ed Equinor che un governo Reform avrebbe stracciato i loro contratti.7\nMettere alla prova l\u0026rsquo;argomento dei terreni agricoli La ragione dichiarata sono i terreni agricoli e la sicurezza alimentare. L\u0026rsquo;affermazione si può verificare, quindi verifichiamola.\nUso del suolo Superficie Quota del Regno Unito Solare a terra, settembre 2024 21.200 ha ~0,1%8 Lo stesso, studio da satellite 15.580–17.364 ha 0,06–0,07%9 Campi da golf 125.000 ha ~0,5%10 70 GW di solare entro il 2035 n/d meno dell'1% dei terreni agricoli10 Il solare copre circa un decimo dell\u0026rsquo;uno per cento di questo paese. Il golf ne copre circa cinque volte tanto, e in tutti gli anni in cui qualcuno si è preoccupato ad alta voce della sicurezza alimentare britannica nessuno ha mai scritto a un circolo di golf per dichiarargli guerra. Nemmeno una lettera.\nSotto il rumore c\u0026rsquo;è un argomento vero, e merita di essere detto chiaramente. Il CPRE ha trovato che il 59% dei più grandi parchi solari inglesi sta su terreni agricoli produttivi, e che il 31% di quella superficie è classificato come il migliore e più versatile.11 La qualità del terreno è un punto legittimo. La quantità no, ed è proprio l\u0026rsquo;argomento della quantità quello che viene fatto.\nE guarda di nuovo che cosa c\u0026rsquo;è davvero in quei 6 GW. Il solare ne vale 786 MW. Le batterie 5.076 MW, più di quattro quinti della capacità contesa.7 L\u0026rsquo;argomento dei terreni agricoli punta al numero più piccolo. Il vero bersaglio è l\u0026rsquo;accumulo, e l\u0026rsquo;accumulo non coltiva niente.\nMettere alla prova l\u0026rsquo;argomento degli incendi Gli impianti a batteria vengono respinti per rischio incendio. Non solo dove governa Reform, per correttezza. Questa è un\u0026rsquo;opposizione locale diffusa più che la campagna di un partito, e sta funzionando. Più di 900 opposizioni a un impianto vicino ad Allerton Bywater, a Leeds. Un sito nella cintura verde vicino a Eaglesham bocciato per timori di incendi al litio dopo 250 opposizioni. Un progetto da 49,9 MW nel Devon respinto contro la raccomandazione dello stesso funzionario urbanistico.12\nAllora mettiamo gli incendi accanto alle opposizioni.\nNumero Incendi di batterie di rete nel Regno Unito, di sempre 3 noti13 Corea del Sud, gruppo 2017–2019 2814 Database mondiale degli incidenti EPRI, dal 2011 ~95 voci14 Opposizioni a un solo impianto di Leeds 900+12 Una sola domanda urbanistica a Leeds ha raccolto più opposizioni di quanti incendi di batterie di rete siano stati registrati in tutto il mondo dal 2011. Tre in questo paese, di sempre. Uno di questi era un sito ancora in costruzione.13\nE 27 dei 30 incidenti mondiali del 2018 e 2019 erano in Corea del Sud. Un solo gruppo nazionale, abbastanza grave da bloccare il loro mercato dell\u0026rsquo;accumulo, e il motivo stesso per cui il database esiste.14 Toglili e il quadro mondiale è ancora più scarno.\nNel frattempo il tasso è crollato. I guasti all\u0026rsquo;anno sono rimasti più o meno stabili mentre la capacità installata passava da 11 GWh nel 2018 a oltre 300 GWh nel 2024. È un calo del 99% del tasso di guasto per unità installata, perché le norme si sono messe al passo.14 Nel 2024, lo 0,3% dei progetti ha avuto un guasto sfociato in un incendio con problemi di sicurezza.14 Ne ho parlato, insieme all\u0026rsquo;incendio di Moss Landing che tutti citano, nel pezzo sull\u0026rsquo;energia dispersa.\nPoi c\u0026rsquo;è il perché si guastano, che è la parte che dovrebbe chiudere la discussione.\nCausa principale Quota dei guasti Integrazione, assemblaggio e costruzione 36%15 Esercizio 29% Progettazione 21% Difetto di fabbricazione 4% L'89% degli incidenti non parte affatto dalla batteria.15 Solo tre in tutto il database risalgono a un difetto di cella o di modulo. Quello che va storto davvero è il resto dell\u0026rsquo;impianto: cablaggi DC e AC, la climatizzazione, lo stesso sistema antincendio. E il 72% dei guasti avviene durante la costruzione, la messa in servizio o nei primi due anni.15\nQuindi non è la chimica. È il montaggio. Assemblaggio scadente, scorciatoie nell\u0026rsquo;installazione, messa in servizio fatta con il monitoraggio non ancora attivo, così una perdita o un guasto di isolamento ha il tempo di trasformarsi in qualcosa che richiede un\u0026rsquo;autopompa prima che un solo allarme sia suonato in un posto dove un essere umano possa sentirlo. Lavoro fatto male, in altre parole.\nConta perché cambia la risposta. Se il litio fosse intrinsecamente incline a prendere fuoco, avresti ragione a tenerlo lontano dal paese. Non lo è. È un problema di qualità del mestiere e di ispezione, che è il genere di cosa che sappiamo già come sistemare. Come qualsiasi altro impianto elettrico: norme serie, collaudo serio, qualcuno di competente che controlla il lavoro.\nIl che riporta alle regole urbanistiche, dove c\u0026rsquo;è una lacuna vera che vale la pena colmare. I consigli non hanno alcun obbligo di legge di consultare i vigili del fuoco su una domanda di BESS, quindi alcuni chiedono un piano completo di gestione antincendio e altri considerano la sicurezza del tutto fuori dall\u0026rsquo;urbanistica.12\nL\u0026rsquo;obiezione è «queste cose prendono fuoco». I dati dicono che prendono fuoco le cose installate male. Uno è un argomento per negare il permesso. L\u0026rsquo;altro è un argomento per ispezionare il cantiere. Colma la lacuna e togli l\u0026rsquo;argomento. Lasciala aperta e continua a funzionare come argomento.\nVale la pena dire che finora niente di tutto questo ha funzionato granché. Un anno dopo, quei consigli hanno scoperto che bloccare il grande solare è più facile da dire in un comunicato stampa che da fare in una commissione urbanistica, e diversi impianti sono passati comunque.7\nSegui i soldi Quanto a da dove arriva il copione, i finanziamenti sono agli atti.\nGruppo Soldi ricevuti Da Heartland Institute $676.000+ (1998–2007) ExxonMobil16 Heartland Institute altre somme non dichiarate fondazioni legate ai Koch16 GWPF / Net Zero Watch $500.000+ un fondo legato ai Koch17 GWPF / Net Zero Watch $210.525 Sarah Scaife Foundation, tramite il suo ramo statunitense17 Heartland è un\u0026rsquo;organizzazione americana di negazione climatica che ha aperto una sede nel Regno Unito, con Nigel Farage ospite d\u0026rsquo;onore all\u0026rsquo;inaugurazione.16 La Global Warming Policy Foundation fa campagna qui come Net Zero Watch, un ente di beneficenza registrato che conduce le sue campagne tramite una società privata.17\nSoldi fossili americani, argomenti americani, un partito britannico che li ripete contro una tecnologia in cui questo paese è dimostrabilmente bravo. I puntini li lascio unire a te.\nGli argomenti arrivano con un presidente attaccato.\nL\u0026rsquo;affermazione Che cosa dicono le prove Il rumore delle turbine causa il cancro Del tutto infondato. Nessuna prova che il suono danneggi la salute.18 L\u0026rsquo;eolico in mare uccide le balene NOAA e National Marine Fisheries Service non trovano alcuna prova scientifica. Gli spiaggiamenti sono collisioni con navi, attrezzi da pesca e acque più calde.18 Costruirle produce «tremendous fumes» Una turbina ripaga l\u0026rsquo;energia usata per costruirla in 5–8 mesi. L\u0026rsquo;eolico emette 37 volte meno CO₂ del gas e 77 volte meno del carbone.19 Quest\u0026rsquo;ultima merita una pausa, perché si rovescia pulita. L\u0026rsquo;eolico ha la più piccola impronta di carbonio di qualsiasi tecnologia di generazione misurata dal Department of Energy statunitense.19 Le mediane dell\u0026rsquo;IPCC danno all\u0026rsquo;eolico a terra 11 g/kWh e al carbone 820. Le ho messe in fila nel pezzo sull\u0026rsquo;energia dispersa. La cosa accusata di inquinare è quella che inquina meno.\nQuella sugli uccelli almeno parte da qualcosa di vero, quindi mettila accanto alle altre cose che uccidono uccelli.\nCausa di morte degli uccelli negli Stati Uniti All\u0026rsquo;anno Turbine eoliche 140.000–330.00018 Edifici ~600 milioni18 Gatti oltre 2 miliardi18 Le turbine valgono qualcosa come un uccello su seimila. Nessuno è mai andato in televisione a parlare dei gatti. I gatti vanno bene, a quanto pare.\nE l\u0026rsquo;argomento del benessere animale non è venuto da qualcuno che osserva gli uccelli. È stato coordinato da un think tank conservatore finanziato da un gruppo di settore sostenuto da ExxonMobil, Chevron e Marathon Oil.18 Stessi soldi della tabella sopra, consegna diversa.\nChe è il terzo canale. I think tank lo scrivono, i giornali lo stampano, e online viene spostato in volume. Uno studio della Brown University ha trovato che account bot erano responsabili di quasi il 40% dei tweet che definivano falsa la scienza del clima.20 Non pretendo di sapere chi li gestisce, e quello studio riguarda la negazione climatica in generale, non il solare britannico in particolare. Ma lo schema regge da qualunque parte lo prendi: le affermazioni sono sbagliate, sono vecchie, e sono state pagate.\nParlare la stessa lingua Ecco la parte che secondo me sfugge. Chiediti perché Heartland ha aperto una sede a Londra e non a Lione o a Lipsia.\nPerché qui funziona così com\u0026rsquo;è scritto. Nessuna traduzione, nessuna localizzazione, nessun adattamento dell\u0026rsquo;argomento a un paese che misura le cose nel sistema metrico e scalda le case con una rete di teleriscaldamento. Il comunicato stampa arriva in inglese e va in pagina lo stesso giorno.\nDietro c\u0026rsquo;è una struttura mappata, non solo un vocabolario comune.\nIl ponte Atlas Network, Washington DC sostiene oltre 450 organizzazioni in oltre 90 paesi21 Finanziato tramite Donors Trust e la Charles Koch Foundation21 55 Tufton Street, Westminster GWPF, l\u0026rsquo;IEA, TaxPayers\u0026rsquo; Alliance, Centre for Policy Studies, Adam Smith Institute, Civitas21 Collegamenti USA–UK mappati da DeSmog ~2.00021 I negazionisti del clima si sono presentati in massa al congresso di Reform nel settembre 2025.21 Niente di tutto ciò ha richiesto di tradurre una sola parola.\nE il traffico va in entrambe le direzioni. È documentato che canali Telegram britannici di estrema destra hanno amplificato disinformazione sull\u0026rsquo;integrità delle elezioni americane. Lo stesso tubo, puntato dall\u0026rsquo;altra parte.22 I ricercatori descrivono pubblicazioni in lingua inglese che fissano narrazioni poi riprese e ripetute dai media in altre lingue, il che ci mette primi in fila invece che ultimi.22\nUn lettore francese o tedesco riceve un ritardo e un traduttore, e la traduzione è un filtro. Qualcuno deve decidere che l\u0026rsquo;affermazione vale la pena di essere portata, e controllarla abbastanza da metterci il proprio nome. Noi la riceviamo cruda, alla velocità di un retweet, da un mercato dei media quaranta volte più grande del nostro che già consumiamo per svago.\nÈ questa la vera vulnerabilità. Non che gli americani discutano della loro rete. Possono farci quello che vogliono. È che noi sentiamo ogni parola, nella nostra lingua, sulla nostra rete, da gente che non l\u0026rsquo;ha mai vista.\nCarbonio economico, corrente cara Una cosa non è migliorata. L\u0026rsquo;elettricità è costata in media £92,77/MWh nell\u0026rsquo;ultimo anno contro £70,13 sull\u0026rsquo;intero periodo dei dati. Circa un terzo in più, mentre il carbonio si dimezzava.1\nAvrai letto che la colpa è delle rinnovabili. L\u0026rsquo;avrai letto parecchio.\nStampa nazionale britannica, 2025 Editoriali che criticano le rinnovabili 4223 Primo anno in cui gli editoriali contro superano quelli a favore dal 201423 Editoriali sul clima di destra che respingono l\u0026rsquo;azione climatica 81%23 Editoriali critici che puntano sul costo 86%23 Quindi l\u0026rsquo;argomento è il costo. Non gli uccelli, non il paesaggio, non l\u0026rsquo;intermittenza. Il costo, in sette casi su otto.\nLa dashboard chiude la questione, perché pubblica prezzo e mix insieme ogni mezz\u0026rsquo;ora. Ecco il 20 settembre 2026, dall\u0026rsquo;ora del tè in poi.1\nOra Prezzo Gas Quota gas Carbonio Solare Eolico 16:00 −£19,03 2,85 GW 11,3% 71 g/kWh 6,33 11,30 16:30 £38,19 3,74 GW 15,1% 88 g/kWh 5,19 10,84 17:00 £103,70 4,46 GW 18,3% 109 g/kWh 4,06 10,21 17:30 £134,16 6,23 GW 25,6% 133 g/kWh 2,64 9,68 18:00 £175,57 7,96 GW 32,2% 150 g/kWh 1,53 8,96 19:30 £195,65 8,87 GW 39,9% 162 g/kWh 0,02 6,99 Il sole è tramontato. Il gas è triplicato, da 2,85 GW a 8,87. E il prezzo è passato da meno diciannove sterline a quasi duecento in tre ore e mezza. Più £57 nella mezz\u0026rsquo;ora fino alle quattro e mezza, altre £65 per le cinque, altre £41 per le sei. Nel frattempo l\u0026rsquo;intensità di carbonio è più che raddoppiata.\nPrendi l\u0026rsquo;intera giornata invece della parte interessante, e la relazione tiene su tutti e quarantotto i periodi di regolamento.\n20 settembre 2026, tutte le 48 mezz\u0026rsquo;ore La quota del gas è andata dal 7,4% al 39,9% Il prezzo è andato da −£19,03 a £195,65 Escursione totale £214,68/MWh Correlazione, quota del gas contro prezzo r = 0,933 Mezz\u0026rsquo;ore a prezzo negativo 18, dall'01:00 alle 16:00 Zero virgola novantatré, in un giorno, con i contratti del gas fissati. E per nove ore di quel giorno la Gran Bretagna ha pagato la gente perché si prendesse l\u0026rsquo;elettricità. Gas al 7,4%, solare vicino ai 10 GW, prezzo sotto zero.\nPoi il sole è tramontato ed è costata £195,65. Stessi cavi. Stessi parchi eolici. Stesso paese.\nIl meccanismo è il prezzo marginale. Il prezzo all\u0026rsquo;ingrosso è fissato dal costo di esercizio dell\u0026rsquo;impianto più caro necessario in quella mezz\u0026rsquo;ora, e quasi sempre è il gas. Durante la crisi il gas ha fissato il prezzo il 98% delle volte fornendo circa il 40% dell\u0026rsquo;elettricità; nel 2021, il 97% delle volte con il 37% della generazione.24 La proporzione più alta di qualsiasi paese europeo.\nQuota della generazione Quota della fissazione del prezzo Gas 27,0% ultimo anno1 97–98% dei periodi24 Eolico, solare, nucleare, idroelettrico, biomasse 73,0% il resto Una cosa in quei dati va detta con onestà, però, perché qualcuno la noterà. La media di tutto il periodo è £70,13/MWh con un mix più sporco di quello di oggi, più economica delle £92,77 dell\u0026rsquo;ultimo anno. Non è l\u0026rsquo;eolico che alza i prezzi. È che dal 2012 al 2020 il gas costava poco. Tra un\u0026rsquo;epoca e l\u0026rsquo;altra domina il prezzo del gas; dentro una singola giornata domina il meteo. Entrambi puntano allo stesso colpevole.\nQuindi un quarto del mix dà il prezzo a tutto. L\u0026rsquo;eolico potrebbe essere gratis al punto di generazione, e in buona parte lo è di fatto, e il numero in bolletta non si muoverebbe, perché l\u0026rsquo;ultimo impianto a gas in coda fissa ancora la tariffa.\nNon sono le rinnovabili a rendere cara l\u0026rsquo;energia. È un disegno di mercato degli anni Novanta che incontra una rete che non assomiglia più agli anni Novanta.\nIl controfattuale lo sigilla. Prendi un picco del prezzo del gas, del tipo che abbiamo già vissuto, e simulalo su due reti diverse.24\nLo stesso picco del gas colpisce una rete con… Le bollette domestiche salgono del obiettivi rinnovabili 2030 raggiunti 8% nessuna rinnovabile sostenuta da CfD 45% Stesso picco. Stesso gas. L\u0026rsquo;unica differenza è quanto eolico e solare se ne stanno lì senza curarsi di quanto costa il gas. Più rinnovabili, colpo più piccolo. Di un fattore cinque e mezzo.\nQuindi i parchi eolici sono il motivo per cui l\u0026rsquo;ultima crisi è stata sopportabile, non il motivo per cui è successa. Tre prove separate, una sola risposta: dentro una giornata il prezzo segue l\u0026rsquo;inverso del vento, tra un\u0026rsquo;epoca e l\u0026rsquo;altra segue il prezzo del gas, e nella simulazione sono le rinnovabili ad attutire il picco. La causa è il gas. Non è un caso dubbio, e non è davvero discutibile.\nLa cosa che avrebbe sistemato quella sera Ora metti tutto questo accanto alle diciotto mezz\u0026rsquo;ore dello stesso giorno in cui il prezzo stava sotto zero. È esattamente la forma di problema che una batteria risolve. Caricala mentre la rete paga la gente perché si prenda l\u0026rsquo;energia, rimandala fuori nel picco dell\u0026rsquo;ora del tè, e l\u0026rsquo;ultimo impianto a gas in coda non viene mai chiamato. Lo spread del 20 settembre era di £214,68 al megawattora. Le batterie esistono per mangiarsi spread così.\nIl che ci riporta a quei 5.076 MW di impianti a batteria nei dieci consigli, e al partito che ha promesso ogni leva contro di loro. Bloccare l\u0026rsquo;accumulo non rinvia soltanto un po\u0026rsquo; di riduzione del carbonio. Protegge il margine del gas, mezz\u0026rsquo;ora per mezz\u0026rsquo;ora, proprio nelle sere in cui il gas vale di più.\nSe sia questa l\u0026rsquo;intenzione, segui i soldi. È l\u0026rsquo;effetto in ogni caso, e i finanziamenti dietro l\u0026rsquo;argomento, come da tabella più su, appartengono al settore che incassa la differenza.\nGli oneri, e chi ha controllato i numeri E gli oneri, visto che vengono citati come la pistola fumante:\nVoce della bolletta, 2025 Importo Quota Oneri di sistema sull\u0026rsquo;elettricità £148,45 17% della bolletta elettrica25 Oneri di sistema sul gas £50,86 6% della bolletta del gas25 Diciassette per cento, e da aprile 2026 il governo ha spostato il 75% della Renewables Obligation dalle bollette alla fiscalità generale, circa £92 all\u0026rsquo;anno del taglio medio di £150.25 Soldi veri, su cui vale la pena discutere, e per niente l\u0026rsquo;evento principale. L\u0026rsquo;evento principale è il 27% della generazione che dà il prezzo all\u0026rsquo;altro 73%.\nNon ti dirò quanti di quei 42 editoriali fossero menzogne, perché dimostrare l\u0026rsquo;intenzione non è una cosa che posso fare da una scrivania. Quello che si può mostrare è il tasso di errore, ed è scarso. Un reclamo contro un solo pezzo del Daily Mail ha individuato quindici errori di fatto; il regolatore ha imposto una rettifica.26 Il Mail on Sunday e il Times hanno scritto entrambi che NESO aveva stabilito che il costo del net zero sarebbe stato di £4,5 trilioni entro il 2050. NESO non aveva stabilito niente del genere, ed era la terza volta che i giornali travisavano quello stesso ente.26\nPrima che qualcuno mi citi il basso numero di reclami accolti: la commissione reclami dell\u0026rsquo;IPSO non comprende scienziati professionisti, non consulta esperti sulle questioni tecniche, e tratta abitualmente un numero sbagliato come un\u0026rsquo;opinione.26 Un reclamo accolto su quindici errori misura il regolatore, non l\u0026rsquo;articolo.\nTrai le tue conclusioni. La mia è che l\u0026rsquo;argomento contro le rinnovabili più ripetuto dalla stampa britannica è quello che crolla più in fretta quando lo metti accanto al contatore della rete stessa.\nE il prezzo del gas non lo fissiamo noi Ecco che cosa è successo davvero al gas, sul riferimento europeo TTF.27\nPrezzo del gas TTF Media prima del 2021 ~€20/MWh Dicembre 2021 €180 Marzo 2022 €220 Picco di agosto 2022 ~€340 Inizio 2026 €35–45 Metà settembre 2026 €83,40 Diciassette volte il livello normale al picco. E guarda l\u0026rsquo;ultima riga. Il gas questo mese è salito a €83 per timori su forniture e stoccaggi, ed è esattamente il motivo per cui una domenica sera senza vento la rete britannica ha prezzato £179,70/MWh. La catena è corta: si muove il mercato europeo del gas, il gas fissa il prezzo britannico, la tua bolletta segue.\nNota anche che «tornato alla normalità» non lo è. La soglia di oggi a €35–45 è ancora il doppio di prima della crisi, e schizza su una voce.\nNessuna di quelle decisioni viene presa qui, e la nostra esposizione cresce.28\nApprovvigionamento di gas del Regno Unito Quota della domanda coperta dal Mare del Nord, 2025 circa metà Gas importato, 2025 464 TWh di cui gasdotto norvegese 69% delle importazioni di cui GNL 31% delle importazioni GNL come quota dell\u0026rsquo;offerta totale oggi 14% Quota GNL entro il 2030 oltre il 25% Quota GNL entro il 2035 vicina al 50% La produzione del Mare del Nord cala del 12–13% all\u0026rsquo;anno ed è prevista in calo del 78% entro il 2035 rispetto al 2025.28 Il vuoto lo riempiono le metaniere dal Qatar e dagli Stati Uniti, comprate su un mercato spot mondiale contro acquirenti asiatici che possono superare la nostra offerta in qualsiasi mattina fredda vogliano.\nQuindi l\u0026rsquo;argomento secondo cui dovremmo tenere la rete a gas per il bene delle bollette è al rovescio. Il gas è la parte che non controlliamo, prezzata da eventi su cui non abbiamo influenza, da giacimenti che si stanno esaurendo. Vento e sole sono la parte che succede qui per niente una volta montati gli impianti.\nQuanto costa e quanto viene fatto pagare C\u0026rsquo;è una differenza tra quanto costa una cosa e quanto te la fanno pagare, e tutta questa faccenda sta in quel divario.\nIl costo di gestire questa rete è sceso. Metà del carbonio, niente carbone, un terzo della generazione che ora viene dal tempo atmosferico, che arriva gratis e non manda fatture. Questo è il costo. Il prezzo è andato dall\u0026rsquo;altra parte, perché abbiamo tenuto una regola degli anni Novanta che lascia all\u0026rsquo;impianto più caro del sistema il compito di fissare la tariffa per tutto il resto, e poi abbiamo importato il combustibile per quell\u0026rsquo;impianto da un mercato dove un\u0026rsquo;ondata di freddo in Asia sposta quanto paga un pensionato di Barnsley per stare al caldo.\nNessuno lo nasconde. È scritto, nei dati di regolamento ogni mezz\u0026rsquo;ora, gratis, su un sito che una donna mantiene da sola.\nQuello a cui continuo a tornare è chi ci guadagna dalla confusione. Perché le persone che ti dicono che sono stati i parchi eolici sono, se segui i soldi a ritroso, finanziate dalla cosa che è stata davvero. Non è una coincidenza e non è incompetenza. È il trucco più vecchio che ci sia: far arrabbiare il pubblico con la parte più economica del sistema così nessuno guarda la più cara.\nE la parte sotto attacco è l\u0026rsquo;unica che possediamo per intero. Una turbina a gas ha bisogno di una metaniera dal Qatar e di un prezzo fissato a Rotterdam. Un parco eolico al largo dell\u0026rsquo;Humber ha bisogno di manutenzione. Una delle due è sovranità e l\u0026rsquo;altra è un ordine permanente di pagamento, e sembra che stiamo per convincerci a rinunciare alla prima per proteggere la seconda.\nL\u0026rsquo;abbiamo costruita. Funziona. Qualcuno dovrebbe dirlo alla gente.\nFonti Kate Morley — National Grid: Live — il mix di generazione, l\u0026rsquo;intensità di carbonio, la domanda e il prezzo della Gran Bretagna, selezionabili sull\u0026rsquo;ultimo giorno, settimana, anno e sull\u0026rsquo;intero periodo dei dati dal 2012; anche la chiusura dell\u0026rsquo;ultima centrale a carbone il 30 settembre 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDrax — 2024, the year GB electricity demand turned a corner — vent\u0026rsquo;anni di domanda in calo, il carico aggiunto da veicoli elettrici e pompe di calore, e l\u0026rsquo;inversione del 2024.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuropean Commission — Light sources, energy label and ecodesign — i regolamenti di progettazione ecocompatibile per l\u0026rsquo;illuminazione e gli 81 TWh di elettricità risparmiati in tutta l\u0026rsquo;UE nel 2020.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDepartment for Transport — Vehicle licensing statistics data tables, VEH0141 — i veicoli plug-in immatricolati alla fine di ogni trimestre per tipo di carrozzeria e di alimentazione. I dati sopra sono la colonna dei veicoli elettrici a batteria per la Gran Bretagna al quarto trimestre di ogni anno.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNational Energy System Operator — Future Energy Scenarios — la diffusione dei veicoli elettrici fino al 2050 nei vari percorsi, la capacità vehicle-to-grid, e la revisione della flessibilità della ricarica intelligente.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMCS — UK homes installing a small-scale renewable every 90 seconds — i totali delle installazioni certificate, il traguardo dei due milioni e la capacità installata, e la quota di nuovi impianti solari abbinati a un accumulo a batteria.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCarbon Brief — Reform-led councils threaten 6GW of solar and battery schemes across England — la capacità presente nei dieci consigli conquistati nel maggio 2025, l\u0026rsquo;impegno «every lever», le lettere agli sviluppatori e agli amministratori delegati delle società energetiche, e che cosa è successo davvero agli impianti da allora.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — Planning for solar farms — il solare a terra copriva circa 21.200 ettari a fine settembre 2024, circa lo 0,1% della superficie totale del Regno Unito.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLancaster University — Researchers use satellite imagery to shed light on UK solar farm land use — la misura da satellite che porta l\u0026rsquo;uso del suolo dei parchi solari a 15.580–17.364 ettari, dallo 0,06% allo 0,07% della superficie del Regno Unito.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFriends of the Earth — Fact check: British farming and renewables — la superficie dei campi da golf rispetto al solare, e la quota di terreni agricoli implicata dall\u0026rsquo;obiettivo di 70 GW entro il 2035.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCPRE — Two-thirds of mega solar farms built on productive farmland — il 59% dei più grandi parchi solari operativi in Inghilterra su terreni agricoli produttivi, il 31% di quella superficie classificato come il migliore e più versatile.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — Battery energy storage systems — opposizioni e dinieghi urbanistici, compresi gli impianti di Allerton Bywater, Eaglesham e del Devon, la fuga termica come meccanismo d\u0026rsquo;incendio, e l\u0026rsquo;assenza di qualsiasi obbligo di legge per i consigli di consultare i vigili del fuoco su una domanda di BESS.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — Battery energy storage systems — gli incendi documentati di BESS di rete nel Regno Unito, compresi Liverpool nel settembre 2020 e un sito dell\u0026rsquo;Essex in costruzione nel febbraio 2025, e la nota che non esiste un registro pubblico affidabile del numero di incidenti.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEPRI — BESS Failure Incident Database — il registro mondiale dei guasti su scala di rete dal 2011, il gruppo sudcoreano del 2017–2019, il calo del tasso di guasto per unità installata rispetto alla crescita della capacità, e l\u0026rsquo;avvertenza che il database registra solo gli incidenti resi pubblici.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUtility Dive — Cells and modules not responsible for most battery energy storage system failures — l\u0026rsquo;analisi EPRI delle cause principali: integrazione, assemblaggio e costruzione al 36% dei guasti, esercizio 29%, progettazione 21%, difetti di fabbricazione 4%; l'89% degli incidenti non originato dalla batteria; e la concentrazione dei guasti in costruzione, messa in servizio e nei primi due anni di esercizio.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — What is the Heartland Institute? — l\u0026rsquo;inaugurazione della sede britannica, i partecipanti, e i finanziamenti di Heartland da ExxonMobil e da fondazioni legate ai Koch.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nopenDemocracy — Net Zero Watch: how dark oil money is funding influential UK climate sceptics — i finanziamenti di GWPF e Net Zero Watch canalizzati tramite gli American Friends of the GWPF, compresi i pagamenti della Sarah Scaife Foundation.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nClimate Power — Fact check: Trump\u0026rsquo;s wind turbine claims — le affermazioni su cancro e balene rispetto alla posizione di NOAA e National Marine Fisheries Service, le stime dello US Fish and Wildlife Service sulle collisioni degli uccelli con le turbine messe a confronto con edifici e gatti, e l\u0026rsquo;origine dell\u0026rsquo;argomento del benessere animale nel lavoro di think tank finanziati dai fossili.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCNN — Fact check: five things Trump got wrong about wind turbines — l\u0026rsquo;affermazione su «tremendous fumes» e sull\u0026rsquo;impronta di carbonio rispetto alla posizione del Department of Energy, il ritorno energetico in cinque–otto mesi per una turbina media, e le emissioni dell\u0026rsquo;eolico a confronto con gas e carbone.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInstitute at Brown for Environment and Society — Shadowy Twitter bots spread climate disinformation — la quota di tweet che descrivono come falsa la scienza del clima riconducibili ad account bot. Nota: è uno studio del 2021 sulla negazione climatica in generale, non sulle rinnovabili britanniche in particolare.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — 55 Tufton Street e Mapped: how a US-UK network pushes climate science denial — il gruppo di Westminster e i suoi membri, la portata dell\u0026rsquo;Atlas Network e il suo finanziamento tramite Donors Trust e la Charles Koch Foundation, i circa duemila collegamenti transatlantici mappati, e la presenza di gruppi negazionisti al congresso di Reform del 2025.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDFRLab — UK-based far-right Telegram channels amplified disinformation targeting US election integrity — l\u0026rsquo;amplificazione transatlantica documentata in entrambe le direzioni, e il ruolo delle pubblicazioni in lingua inglese nel fissare narrazioni poi ripetute dai media che lavorano in altre lingue.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPress Gazette — Record opposition to climate action in UK national newspapers in 2025 — il numero di editoriali che criticano le energie rinnovabili, il primo anno dal 2014 in cui hanno superato quelli favorevoli, la quota di editoriali sul clima di destra che respingono l\u0026rsquo;azione climatica, e il costo come linea d\u0026rsquo;attacco dominante.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCarbon Brief — Q\u0026amp;A: Why does gas set the price of electricity, and is there an alternative? — il prezzo marginale in Gran Bretagna, la quota di periodi di regolamento in cui il gas fissa il prezzo rispetto alla sua quota di generazione, e l\u0026rsquo;effetto simulato di un picco del prezzo del gas con e senza rinnovabili sostenute da CfD nel sistema.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — What costs make up an electricity bill? — gli oneri di sistema nelle bollette di elettricità e gas in valore e in quota, la Renewables Obligation come principale singolo onere, e il trasferimento del 75% del suo costo alla fiscalità generale da aprile 2026.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCarbon Commentary — Climate misinformation and press regulation — le quindici inesattezze individuate in un solo articolo del Daily Mail contro una sola rettifica imposta, il ripetuto travisamento dei risultati di NESO sul costo del net zero, e la composizione e l\u0026rsquo;approccio della commissione reclami dell\u0026rsquo;IPSO sulle questioni tecniche.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTrading Economics — EU natural gas (TTF) price history — il riferimento olandese TTF dal livello di base prima del 2021, attraverso il picco 2021–22, fino al massimo di agosto 2022 e ai livelli attuali, compreso il movimento di settembre 2026 per timori su forniture e stoccaggi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nICIS — Ebbing North Sea gas production to raise UK gas prices and exposure to LNG imports — la produzione del Mare del Nord che copre circa metà della domanda nel 2025, il volume e la ripartizione delle importazioni, il ritmo di declino dell\u0026rsquo;UKCS, e la dipendenza prevista dal GNL al 2030 e al 2035.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/energy/the-grid-we-did-fix/","summary":"La Gran Bretagna ha dimezzato l\u0026rsquo;intensità di carbonio della sua elettricità in quattordici anni, ha passato un anno intero senza carbone e ha fatto dell\u0026rsquo;eolico la sua prima fonte singola. Nel frattempo la domanda è scesa per vent\u0026rsquo;anni mentre il paese collegava 1,8 milioni di veicoli elettrici. Ecco che cosa mostrano i numeri, comprese le parti che rovinano la storia.","title":"La rete che abbiamo sistemato"},{"content":"Il numero che tutti citano e nessuno legge Il Lawrence Livermore ha pubblicato da poco il suo grafico dei flussi energetici per il 2024. Dice che l\u0026rsquo;America ha consumato 94,61 quad di energia e ne ha buttati via 62,27.1\nBene. Un quad è un quadrilione di British thermal unit. Non c\u0026rsquo;entrano i soldi. In questo articolo non c\u0026rsquo;è denaro da nessuna parte, e se l\u0026rsquo;occhio continua a leggerlo come una valuta, al mio è successo lo stesso. Gli americani tengono la contabilità energetica nazionale in quad e il resto di noi lavora in wattora, quindi ecco la conversione che gli dà un senso: un quad vale circa 293 TWh, appena più di quanto l\u0026rsquo;intera rete elettrica del Regno Unito eroghi in un anno.\nEnergia dispersa è il nome educato di quei 62,27. La parte che non ha fatto nessun lavoro utile. Calore su per un camino, calore da un radiatore, calore da uno scarico. Quasi tutto è calore di scarto prodotto bruciando qualcosa.\nOra attenzione alle unità, perché all\u0026rsquo;inizio l\u0026rsquo;avevo sbagliato io e lo sbaglia gran parte di internet. 62,27 sono quad, non percentuale. Mettili accanto ai 32,34 quad che hanno fatto qualcosa di utile e la quota è il 65,8%. Due terzi di tutto ciò che è stato trivellato, scavato, pompato e spedito, andato via come aria calda.\n2024 In reti britanniche Energia in ingresso 94,61 quad 27.726 TWh 102 anni Dispersa 62,27 quad 18.249 TWh 67 anni Servizi energetici 32,34 quad 9.477 TWh 35 anni L\u0026rsquo;ultima colonna è quella che mi ha colpito. La rete della Gran Bretagna eroga circa 271 TWh all\u0026rsquo;anno.2 Quindi l\u0026rsquo;energia dispersa dall\u0026rsquo;America nel solo 2024 equivale a sessantasette anni dell\u0026rsquo;intera rete britannica, buttati via come calore, in dodici mesi.\nDetto in un altro modo: fai girare l\u0026rsquo;elettricità di questo paese da oggi fino al 2093 e non avresti ancora prodotto quanto gli Stati Uniti hanno sprecato l\u0026rsquo;anno scorso.\nQuel numero viene citato ovunque. Il modo in cui il grafico conta non viene citato quasi mai. Ed è quella la parte interessante.\nUna nota di servizio, visto che è un pezzo sull\u0026rsquo;America scritto da uno dello Yorkshire. Dove gli americani dicono gasoline e gas station, io dico petrol e forecourt; in italiano è sempre benzina e distributore. E il condizionatore resta il condizionatore.\nEolico e solare contano al 100% Ecco la parte che frega la gente. Il Livermore usa la convenzione della Energy Information Administration, e con quella quattro fonti entrano senza alcuna perdita di conversione.3\nFonte Come entra nel grafico Dove vanno le perdite Carbone, gas, petrolio energia del combustibile in ingresso ~60–70% in dispersa Nucleare energia termica in ingresso ~67% in dispersa Eolico a terra elettricità in uscita niente in dispersa Solare utility e su tetto elettricità in uscita niente in dispersa Idroelettrico elettricità in uscita niente in dispersa Una centrale a gas viene contata sull\u0026rsquo;energia contenuta nel gas, quindi i due terzi che butta via come calore finiscono nel blocco della dispersa. Una turbina viene contata sull\u0026rsquo;elettricità che consegna. Non c\u0026rsquo;è una riga «energia nel vento» contro cui perdere.\nQuindi, su questo grafico, ogni terawattora che passa da una centrale termica a un parco eolico fa due lavori insieme. Aggiunge all\u0026rsquo;utile, toglie dalla dispersa. Conta due volte.\nIl che significa che l\u0026rsquo;argomento secondo cui eliminare eolico e solare ridurrebbe lo spreco corre all\u0026rsquo;indietro proprio dentro il diagramma su cui viene costruito. Me l\u0026rsquo;hanno proposto sul serio persone che dovrebbero saperne di più. Non è un caso dubbio. È il segno invertito.\nDove sta davvero lo spreco Dividi il grafico per settore e smette di essere un\u0026rsquo;astrazione.1\nSettore Energia in ingresso Dispersa Utile Efficienza Residenziale 11,23 3,93 7,30 65% Commerciale 9,49 3,32 6,17 65% Industriale 26,39 13,46 12,93 49% Trasporti 28,29 22,35 5,94 21% Le centrali elettriche perdono altri 19,21 quad su per le torri di raffreddamento prima che qualcosa arrivi a quei quattro settori.\nI trasporti sono di gran lunga i peggiori. Prendono la quota più grande dell\u0026rsquo;energia e ne trasformano il 21% in movimento. Quei 22,35 quad sprecati sono il 36% di tutto ciò che l\u0026rsquo;America butta via. Più di un terzo dello spreco nazionale, in un solo settore.\nUn motore a benzina trasforma forse il 16–25% del carburante in moto. Il resto è calore e rumore.4\nUtile alle ruote Perso come calore Motore a benzina 16–25% 75–84% Trazione elettrica (dalla batteria alle ruote) 87–91% 9–13% Non è un guadagno marginale. È la differenza tra una macchina che soprattutto scalda il cielo e una che soprattutto muove l\u0026rsquo;auto. Stesso viaggio, fisica diversa.\nE vale lungo tutta la catena, non solo per il veicolo. Portare il carburante liquido fino al distributore costa energia prima che se ne bruci una goccia.\nPassaggio Energia persa per arrivarci Raffinazione del greggio 7–15% dell\u0026rsquo;ingresso5 Petroliera, oleodotto, autocisterna in aggiunta Trasmissione e distribuzione della rete ~5%6 Petroliere come quota della flotta mondiale ~28% in tonnellaggio di portata lorda7 Greggio e prodotti trasportati via mare, all\u0026rsquo;anno ~4,4 miliardi di tonnellate7 Il trasporto su strada vale circa metà della domanda mondiale di petrolio. Elettrificalo e una bella fetta della flotta di petroliere non ha più niente da trasportare.\nConviene essere onesti qui, perché esagerare è il modo in cui si perde una discussione che si stava vincendo. Le perdite di rete sono reali e sono calore resistivo. Un\u0026rsquo;auto elettrica paga in inverno il riscaldamento dell\u0026rsquo;abitacolo che un motore ottiene gratis. Ma quel calore gratis è gratis solo perché il motore ha già buttato via tre quarti del carburante. È gratis come è gratis il caldo di una casa in fiamme.\nLa cosa più grande che l\u0026rsquo;America potrebbe fare I veicoli leggeri valgono il 58,5% dell\u0026rsquo;energia dei trasporti, la parte che si elettrifica senza aspettare nuove tecnologie.8 Fai i conti cambiando la trazione e lasciando tutto il resto com\u0026rsquo;è.\nTrasporto leggero su strada Quad Energia in ingresso oggi 16,55 Lavoro utile effettivamente prodotto 3,47 Stesso lavoro con una trazione elettrica 4,09 di elettricità …prodotta da gas, con l\u0026rsquo;efficienza di un ciclo combinato 9,08 primari …prodotta da eolico, solare o idroelettrico 4,09 primari Energia risparmiata da 7,5 a 12,5 quad Anche ricaricandole tutte da turbine a gas, risparmi circa sette quad e mezzo. Da eolico e solare sono dodici e mezzo. Dall\u0026rsquo;otto al tredici per cento di tutto ciò che gli Stati Uniti bruciano, con un solo cambio.\nÈ il più grande guadagno di efficienza disponibile in tutto il grafico, e non richiede invenzioni, né svolte, né progetti pilota, né fisica nuova, perché ogni singolo veicolo necessario è già costruito e venduto oggi in volume. Le auto esistono. È tutto qui il trucco.\nSolo che un motore migliore non sistema l\u0026rsquo;urbanistica Un\u0026rsquo;auto elettrica deve comunque percorrere la distanza, ed è qui che sta l\u0026rsquo;altra metà del problema.\nStati Uniti Europa Miglia in auto per persona, all\u0026rsquo;anno ~12.400 ~6.2009 Quota di spostamenti quotidiani in auto 85% 50–65%9 Spostamenti sotto il miglio fatti in auto ~70% ~30%9 Posti auto per auto ~8 non contati9 Guarda la terza riga, perché toglie di mezzo la scusa della geografia. Circa il 30% degli spostamenti quotidiani è sotto il miglio su entrambe le sponde dell\u0026rsquo;Atlantico. Stesse commissioni, stesse distanze. Gli americani ne fanno in auto sette su dieci. Gli europei ne fanno sette su dieci a piedi, in bici o con un mezzo.\nNon è stata la geografia. Nemmeno il clima. È stata la zonizzazione, che ha messo le case qui e i negozi tre miglia più in là, sostenuta da minimi obbligatori di parcheggio che hanno finito per costruire quasi otto posti per ogni auto del paese.9 Tra gli anni Venti e gli anni Sessanta le città americane sono state ricostruite attorno all\u0026rsquo;automobile e buona parte dell\u0026rsquo;Europa occidentale le ha copiate. Dalla fine degli anni Sessanta l\u0026rsquo;Europa si è fermata e ha cominciato a disfarlo.9\nQuindi i dodici quad e mezzo sono il tetto della sola elettrificazione. Dimezza anche le miglia e dimezzi quello che resta. Una è un lavoro di ingegneria e l\u0026rsquo;altra è un lavoro di pianificazione, e quello di pianificazione è l\u0026rsquo;unico da cui nessuno può uscire con un singolo acquisto.\nE il passeggero-chilometro più economico è quello condiviso C\u0026rsquo;è una terza leva, e l\u0026rsquo;America ha più o meno smesso di tirarla.\nModo Energia per passeggero-chilometro Auto a benzina da 1,9 a 3,5 MJ10 Ferrovia elettrica urbana, affollata da 0,3 a 0,6 MJ10 Da quattro a sei volte meglio, prima che qualcuno cambi una trazione. Un\u0026rsquo;auto con un solo occupante emette 7,7 volte la CO₂ per passeggero-miglio di un pullman pieno.10\nOra la situazione attuale.\nStati Uniti Europa Quota di passeggeri-miglio sul trasporto pubblico 0,40%11 molte volte tanto Spostamenti fatti in auto 95%11 dal 50 al 65% Binari elettrificati 1,7% (le Americhe)11 ~57% nell\u0026rsquo;UE11 Zero virgola quattro per cento. Non un sistema di trasporto con una componente pubblica. Un paese che guida, con qualche autobus dentro.\nE l'1,7% di elettrificazione significa che la ferrovia americana è ancora, in modo schiacciante, diesel. Quindi ogni argomento per spostare merci e passeggeri sulla rotaia viene fatto su una rete che va ancora a petrolio. Elettrifica i binari e ottieni lo spostamento modale e il cambio di combustibile con lo stesso lavoro.\nEcco la parte onesta, perché taglia nell\u0026rsquo;altra direzione e qualcuno la tirerà fuori. Il trasporto pubblico è efficiente solo quando è pieno. L\u0026rsquo;occupazione degli autobus negli Stati Uniti cala da decenni, e l\u0026rsquo;energia per passeggero-miglio sugli autobus è salita del 63% dal 1970.10 Un autobus quasi vuoto su un giro di cinquanta minuti attorno a un quartiere residenziale è peggio dell\u0026rsquo;auto che doveva sostituire. È un numero vero, e grosso.\nMa guarda che cosa rende vuoto un autobus. Nessuno abita a distanza pedonale dalla fermata, niente per cui valga la pena camminare dall\u0026rsquo;altra parte, e un assetto urbano che mette otto posti auto davanti a ogni porta. Gli autobus vuoti non sono un fatto sugli autobus. Sono un fatto su ciò che è stato costruito attorno alla fermata.\nIl che porta alla cosa che toglie davvero la gente dalle auto, e lì il divario è più ampio di quanto suggerisca la quota modale.\nStati Uniti Europa Città con una metropolitana 13 6012 Città con una rete tranviaria 30 molte di più12 Crescita della lunghezza delle linee metro dal 2000 riferimento tre volte più veloce12 Tredici. In un paese di trecentoquaranta milioni di persone. L\u0026rsquo;Europa ne ha sessanta, e dall\u0026rsquo;inizio del secolo posa nuovi binari tre volte più in fretta, quindi il divario si allarga invece di chiudersi.\nAnche il modo conta. Uno studio sulle città europee ha trovato che le metropolitane tolgono la gente dalle auto in un modo che le reti tranviarie in gran parte non fanno, il che torna con quello che ti aspetteresti: una metro è più veloce dell\u0026rsquo;auto nell\u0026rsquo;ora di punta e un tram di solito no.12 La velocità è tutto il prodotto. Costruisci qualcosa di più lento dell\u0026rsquo;auto e hai costruito un sussidio per chi non ha scelta, non un\u0026rsquo;alternativa per chi ce l\u0026rsquo;ha.\nÈ l\u0026rsquo;unica voce davvero costosa della lista. La riforma urbanistica costa volontà politica e una riscrittura. Le gallerie costano miliardi. Ma comprano quello che le altre due non possono. Sposti persone attraverso una città densa con l\u0026rsquo;elettricità, a 0,3–0,6 MJ per passeggero-chilometro, e più in fretta di quanto avrebbero fatto in auto. A quel punto lasciare l\u0026rsquo;auto a casa smette di essere un sacrificio e diventa la mossa ovvia. È allora che la gente lo fa davvero.\nIl che significa che le soluzioni sono la stessa soluzione con cappelli diversi. L\u0026rsquo;elettrificazione toglie da 7,5 a 12,5 quad alla trazione. La zonizzazione abbassa le miglia. La densità è ciò che rende il trasporto pubblico degno di esistere, e il trasporto pubblico è ciò che rende la densità vivibile. Tira una leva e ottieni il valore di una leva. Tirale tutte e tre e si moltiplicano.\nL\u0026rsquo;America al momento sta discutendo della prima.\nNessuna di queste cose parte, però, senza il passo più economico di tutti, che sembra anche il più difficile. Qualcuno deve dire ad alta voce che c\u0026rsquo;è un problema.\nLa diagnosi non manca. Viene pubblicata ogni anno da un laboratorio federale, gratis, su un sito pubblico, in un diagramma abbastanza chiaro da leggersi in un minuto. Sessantacinque virgola otto per cento sprecato. I trasporti un terzo del totale. Ventuno per cento di efficienza sul blocco più grande della pagina. Nessuno deve commissionare uno studio o aspettare la scienza. La scienza è uscita ad agosto. La gente ha letto il numero del titolo, l\u0026rsquo;ha capito male, ed è andata avanti.\nÈ questa la parte che dovrebbe bruciare. Nessun paese spende miliardi per scavare sotto le proprie città per sistemare una cosa che ritiene a posto, e l\u0026rsquo;America ha archiviato in silenzio 22,35 quad sprecati all\u0026rsquo;anno sotto «a posto». Non discussi e respinti. Semplicemente mai messi sul tavolo.\nGli avanzi devono andare da qualche parte Il calore è uno spreco solo se non c\u0026rsquo;è un posto dove metterlo. È una decisione urbanistica, non un vuoto tecnologico, ed è stata presa per lo più decenni fa.\nQuota di domanda di calore coperta dal teleriscaldamento Danimarca ~66%13 Svezia, Finlandia, Polonia, Paesi baltici oltre il 50% Media UE ~13% Regno Unito ~3%14 Stati Uniti solo campus, ospedali e centri cittadini In Europa, al 2025, circa 111.650 siti commerciali e industriali funzionano a CO₂ transcritica, all\u0026rsquo;incirca un terzo di tutta la distribuzione alimentare.15 Il data centre di Meta a Odense immette dal 2019 circa 100.000 MWh all\u0026rsquo;anno nella rete locale. È calore che altrimenti sarebbe finito in un dry cooler. Invece scalda 12.000 abitazioni.13\nNel Regno Unito abbiamo circa 14.000 reti di calore e coprono ancora solo il 3% della domanda.14 Quattordicimila e quasi niente da mostrare, perché sono piccole, frammentate e per lo più attaccate all\u0026rsquo;edilizia popolare. Ofgem ne ha preso la regolazione a gennaio e la zonizzazione parte quest\u0026rsquo;anno. Obiettivo 7% entro il 2035, circa un quinto del calore degli edifici entro il 2050.16\nLa Danimarca non sta facendo qualcosa di furbo che noi non sappiamo fare. La Danimarca ha messo i tubi sotto le strade. Noi no. Tutto qui. È quella la differenza.\nPompe di calore, e il refrigerante che nessuno si aspetta Stessa logica in piccolo. Un riscaldatore resistivo non può superare un coefficiente di prestazione (COP) di 1,0. È la definizione stessa della cosa. Una pompa di calore sposta il calore invece di produrlo, quindi fa meglio.\nSistema COP Condizioni Elemento resistivo (PTC) 1,0 al massimo qualsiasi Pompa di calore per auto 2,0–3,2 da 0 a 15 °C Unità a propano R290 di Hyundai/Kia 3,8 dichiarato −15 °C Unità VW R-744 (CO₂) 3,1 −20 °C17 L\u0026rsquo;ADAC ha messo alla prova 28 auto elettriche in un test invernale a −7 °C. I modelli con pompa di calore hanno perso in media il 22% di autonomia in meno di quelli solo resistivi.18\nLa riga R-744 è quella che merita un secondo sguardo. È l\u0026rsquo;anidride carbonica stessa, usata come refrigerante, nelle VW ID.3 e ID.4. La maggiore densità del vapore in aspirazione mantiene alta la capacità man mano che fa più freddo, che è esattamente quando la vuoi.17\nE la CO₂ per uso frigorifero è un sottoprodotto della produzione di ammoniaca, etanolo e fertilizzanti, catturata e ripulita invece di essere sfiatata.19 Un flusso di scarto che fa il riscaldamento e il raffrescamento, con un potenziale di riscaldamento globale di 1 contro i 1.430 dell\u0026rsquo;R-134a. Quando perde, non succede niente.\nNon è cattura del carbonio e non farò finta che lo sia; la carica è sotto il chilo. Il punto è più stretto e migliore. Il fluido di lavoro è qualcosa di cui avevamo già troppo.\nQuello che uso io Impianto Specifiche Perché Impianto solare 9 kW il tetto è esposto nel verso giusto, quindi usalo Batteria 30 kWh sposta la produzione del giorno alla sera Auto elettriche MG4, Xpeng G6 ricaricate dall\u0026rsquo;impianto, non al distributore Condizionatore autoalimentato va con quello che producono i pannelli Controllo Home Assistant sposta i carichi grossi nella fascia economica Niente di esotico in quella lista e niente di nuovo. Stesso principio di abbinare il supporto di storage al profilo di IO. Metti l\u0026rsquo;energia dove si guadagna da vivere, misura quello che ottieni davvero, e smetti di fidarti dell\u0026rsquo;etichetta sulla scatola.\nLa parte che mi ha sorpreso è quanto del risparmio sia venuto dal non spostare carburante in giro. Niente petroliera, niente distributore, nessuna raffineria che si prende la sua parte lungo la strada. I pannelli sono a nove metri dall\u0026rsquo;auto.\nIl grafico è uno specchio Il Livermore pubblica questi grafici da anni e sono buoni. Costruiti onestamente, davvero utili, gratuiti. Valgono un\u0026rsquo;ora del tempo di chiunque.1\nMa un diagramma di Sankey non ha opinioni. Ti mostra che cosa un paese ha deciso di fare con la propria energia, disegnato in scala. Il 65,8% non è una legge della fisica. È un\u0026rsquo;immagine di scelte su motori, tubi e pianificazione, prese una alla volta in circa settant\u0026rsquo;anni, e sarebbe diversa se le scelte fossero state diverse.\nIl grafico della Danimarca è diverso perché la Danimarca ha scavato.\nFonti Lawrence Livermore National Laboratory — Energy Flow Charts — i diagrammi di Sankey annuali dell\u0026rsquo;energia statunitense, compreso il grafico 2024 e il suo totale di 94,6 quadrilioni di BTU.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKate Morley — National Grid: Live — la domanda elettrica della Gran Bretagna, in media 30,9 GW nell\u0026rsquo;ultimo anno, pari a circa 271 TWh all\u0026rsquo;anno. Ho scritto di che cosa mostra quella dashboard in La rete che abbiamo sistemato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHawai\u0026rsquo;i State Energy Office — Statewide Energy Flowchart — espone la metodologia EIA usata dal Livermore, con cui solare distribuito, idroelettrico, eolico a terra e solare utility entrano assumendo un\u0026rsquo;efficienza di generazione del 100%, senza perdite termiche rappresentate.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEVreporter — Understanding the complete efficiency picture of electric vehicles — l\u0026rsquo;efficienza dal serbatoio alle ruote e dalla batteria alle ruote per le trazioni a combustione ed elettriche.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nConcawe — EU refinery energy systems and efficiency — l\u0026rsquo;energia per uso proprio delle raffinerie come quota del greggio in ingresso, dal 3–4% della distillazione semplice al 7–10% e oltre degli impianti a conversione completa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Energy Information Administration — How much electricity is lost in transmission and distribution? — le perdite annuali di trasmissione e distribuzione negli Stati Uniti, in media circa il 5% dell\u0026rsquo;elettricità trasmessa tra il 2018 e il 2022.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUNCTAD — World seaborne trade — la quota delle petroliere nella flotta mondiale per tonnellaggio di portata lorda, e i volumi di greggio e prodotti raffinati trasportati via mare.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Energy Information Administration — Light-duty vehicles\u0026rsquo; share of transportation energy use — i veicoli leggeri al 58,5% dell\u0026rsquo;energia dei trasporti statunitensi, camion medi e pesanti e autobus al 23,9%, e l\u0026rsquo;aereo unico altro modo sopra il 5%.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCar dependency — Wikipedia e CNN — This little-known rule shapes parking in America — i chilometri in auto pro capite negli Stati Uniti rispetto all\u0026rsquo;Europa, la quota di spostamenti quotidiani e sotto il miglio fatti in auto sulle due sponde dell\u0026rsquo;Atlantico, gli otto posti auto circa per auto prodotti dai minimi di parcheggio, e la divergenza delle politiche urbane dalla fine degli anni Sessanta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBureau of Transportation Statistics — Energy intensity of passenger modes e Public transport versus private cars: a passenger-kilometre energy comparison — l\u0026rsquo;energia per passeggero-chilometro delle auto a benzina rispetto alla ferrovia elettrica urbana affollata, il rapporto di emissioni tra un\u0026rsquo;auto con un solo occupante e un pullman pieno, e l\u0026rsquo;aumento dell\u0026rsquo;energia per passeggero-miglio degli autobus con il calo dell\u0026rsquo;occupazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTransportation in the United States — Wikipedia e Statista — Share of the rail network which is electrified in Europe — la quota statunitense di passeggeri-miglio sul trasporto pubblico e in auto privata, e i binari elettrificati come quota della rete nell\u0026rsquo;UE rispetto alle Americhe.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nStreetsblog USA — Other countries are building transit while the US falls behind e Metros reduce car use in European cities but trams do not — il numero di città americane ed europee con reti metropolitane e tranviarie, il ritmo con cui è cresciuta la lunghezza delle linee metro dal 2000 sulle due sponde, e il risultato secondo cui le metropolitane sostituiscono i viaggi in auto dove le reti tranviarie in gran parte no.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nState of Green — Utilising excess heat to warm up Danish homes — la quota del teleriscaldamento danese sulla domanda di calore domestico, e il recupero del calore in eccesso dei data centre, compresi i dati di esportazione di Odense.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGreater London Authority — Heat networks data report, February 2026 — il parco frammentato delle reti di calore britanniche e la loro quota attuale della domanda di calore.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nATMOsphere — European transcritical CO₂ installations — 111.650 siti commerciali e industriali europei a CO₂ transcritica nel 2025, circa un terzo dei punti vendita alimentari.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDepartment for Energy Security and Net Zero — Heat Network Zoning: government response — il quadro della zonizzazione, la regolazione Ofgem da gennaio 2026, e gli obiettivi per il 2035 e il 2050.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNaturalRefrigerants.com — CO₂ heat pumps found to offer high efficiency at low ambient temperature in electric vehicles — le prestazioni delle pompe di calore R-744 per auto a bassa temperatura ambiente, e le implementazioni sulle VW ID.3 e ID.4.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInsideEVs — For maximum winter EV driving range, you want a car with this feature — il test invernale ADAC su 28 auto elettriche e la differenza di perdita di autonomia a −7 °C.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNaturalRefrigerants.com — FAQs — la CO₂ per uso frigorifero come sottoprodotto recuperato della produzione di ammoniaca, alcol e fertilizzanti, e il suo potenziale di riscaldamento globale di 1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/energy/rejected-energy-what-the-livermore-chart-shows/","summary":"Il Lawrence Livermore pubblica ogni anno un diagramma di Sankey che mostra dove va l\u0026rsquo;energia americana. Nel 2024, 62,27 quad su 94,61 non hanno prodotto alcun lavoro utile. Che cosa significa energia dispersa e che cos\u0026rsquo;è un quad, perché il metodo stesso del grafico fa sì che le rinnovabili riducano lo spreco invece di aggiungerne, perché i trasporti da soli valgono più di un terzo del totale nazionale, e le tre cose che lo risolverebbero davvero.","title":"Energia dispersa: che cosa mostra davvero il grafico di Livermore"},{"content":"Webex mette un banner giallo in cima alla finestra. Offline - No internet connection. I servizi telefonici risultano disconnessi, non si sincronizza niente e non riesci a entrare nella riunione iniziata novanta secondi fa.\nNon è un fastidio quando quella cosa è il tuo telefono di lavoro. Webex è dove arrivano le mie chiamate e la mia linea VoIP passa da lì, quindi un client che non si autentica è un telefono da scrivania che non squilla, una riunione a cui non partecipo e un collega che trova la segreteria. Mi ha fermato il lavoro. Non rallentato, non degradato. Fermato.\nE non stava a me né causarlo né evitarlo. Una giornata di lavoro è andata storta per un controllo qualità che non è stato fatto, presso un fornitore che viene pagato, su un prodotto venduto con un contratto di supporto e su una piattaforma che la sua stessa pagina dei requisiti dichiara supportata. Non ho configurato male niente. Ho installato il pacchetto del vendor, dal repository del vendor, su una piattaforma che il vendor elenca, e non riusciva ad aprire una connessione TLS. Poi ho passato una serata del mio tempo a capire perché, tempo che chi ha firmato il pacchetto non ha speso.\nLa macchina non è offline. Il browser lì accanto carica le pagine. La posta arriva, il terminale scarica da un remote, e se chiedi al sistema operativo se raggiunge internet ti risponde di sì. Lo conferma anche Webex, nel suo stesso log, undici secondi prima di dirti il contrario.\nQuello che è successo davvero è che la copia di OpenSSL che Cisco spedisce dentro Webex non trova nemmeno un\u0026rsquo;autorità di certificazione, perché è stata compilata per cercarle in /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl. Quella è una directory su un container di build di Cisco. Sul tuo computer non è mai esistita e non esisterà mai. Ogni connessione TLS dell\u0026rsquo;applicazione fallisce alla verifica del certificato, il token di login non si può rinnovare, un timer di quindici secondi scade e l\u0026rsquo;interfaccia ricorre all\u0026rsquo;unica spiegazione per cui ha una stringa.\nQuindi il banner sbaglia in un modo preciso e poco utile. Dà la colpa alla tua rete. Il guasto è un percorso dentro la loro build.\nÈ la versione 46.8.0.35631, su Fedora 44, kernel 7.2.4. È una piattaforma supportata. Cisco pubblica i requisiti di sistema per Linux e spedisce un .rpm firmato, webex-46.8.0.35631-1.x86_641. Quello che segue è come dimostrarlo in una decina di minuti, perché nessuno dei fix ovvi funziona, quello che funziona, e poi la parte che conta più di tutto il resto: non è un bug sottile. È una build che nessuno ha mai eseguito su una macchina diversa da quella che l\u0026rsquo;ha compilata.\nCosa ti sta dicendo davvero il banner Webex gestisce lo stato di connettività con una macchina a stati composita, sette sotto-macchine ognuna con i propri timer. All\u0026rsquo;avvio si inizializzano così:\nConnectivityStateMachine::ConnectivityBanner - Initializing with state: Connected ConnectivityStateMachine::Network - Initializing with state: NoNetwork ConnectivityStateMachine::Services - Initializing with state: Connected ConnectivityStateMachine::Mercury - Initializing with state: Disconnected ConnectivityStateMachine::Authentication - Initializing with state: UserNotAuthenticated ConnectivityStateMachine::Syncing - Initializing with state: Synced ConnectivityStateMachine::Survivability - Initializing with state: SurvivabilityHide Quaranta millisecondi dopo il sistema operativo risponde, e l\u0026rsquo;applicazione lo annota:\nNetworkManagerPowerNetworkWatcher.cpp:93 onConnectivityCheckSuccess:: The host is connected to a network, that appears to be able to reach the full Internet. Quella riga sta nello stesso file, nella stessa sessione, del banner che dice che non c\u0026rsquo;è connessione a internet. L\u0026rsquo;applicazione lo sapeva. Aveva la risposta in mano alle 08:25:12.131 e alle 08:25:27.132 ha mostrato il contrario.\nIn mezzo, questo:\nOra Cosa è successo 08:25:12.131 Il sistema operativo conferma la piena raggiungibilità di internet 08:25:12.218 Rilevamento proxy: nessuno configurato, connessione diretta 08:25:12.241 La prima richiesta HTTPS fallisce, errorCode: 167772294 Error in SSL handshake 08:25:12.569 Il rinnovo del token di accesso CloudApps fallisce, stesso codice 08:25:12.571 Il rinnovo del token di accesso Kms fallisce, stesso codice 08:25:15.684 Nuovo tentativo, falliscono entrambi 08:25:21.745 Nuovo tentativo, falliscono entrambi 08:25:27.132 Scade il timer di quindici secondi, il banner passa a NoInternet 08:26:12.091 Scadono i timer di sessanta secondi, i servizi scendono a DisconnectedShortTerm La sotto-macchina Authentication non esce mai da UserNotAuthenticated, quindi Services si considera disconnessa, quindi scatta il banner. Ogni passaggio è un comportamento corretto, dato l\u0026rsquo;input. È l\u0026rsquo;input a essere sbagliato, e l\u0026rsquo;input è un numero: 167772294, su ogni richiesta fallita, dalla prima all\u0026rsquo;ultima.\nQuel numero è tutto l\u0026rsquo;articolo. Tienilo a mente.\nTre percorsi, nessuno dei quali esiste Webex non usa l\u0026rsquo;OpenSSL di sistema. Si porta il suo, insieme alla sua libcurl, e la libcurl si collega a quello incluso invece che al tuo:\n$ ldd /opt/Webex/bin/libcurl.so | grep -E \u0026#39;ssl|crypto\u0026#39; libssl.so.3 =\u0026gt; /opt/Webex/bin/../lib/libssl.so.3 libcrypto.so.3 =\u0026gt; /opt/Webex/bin/../lib/libcrypto.so.3 Fin qui tutto bene. Includere una libreria TLS è una scelta difendibile e molti vendor lo fanno. Quello che conta è cosa ci è stato cucito dentro, e OpenSSL te lo dice se glielo chiedi:\n$ strings /opt/Webex/lib/libcrypto.so.3 | grep -E \u0026#39;OPENSSLDIR|ENGINESDIR|MODULESDIR\u0026#39; OPENSSLDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl\u0026#34; ENGINESDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/lib/engines-3\u0026#34; MODULESDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/lib/ossl-modules\u0026#34; Tre. Non un\u0026rsquo;impostazione sfuggita. L\u0026rsquo;intero prefisso di installazione, trascinato dalla macchina che l\u0026rsquo;ha compilato, in una libreria che arriva al cliente come pacchetto firmato su una piattaforma supportata.\nOPENSSLDIR si imposta una volta sola, in fase di configure, con --openssldir, e la documentazione di build di OpenSSL è chiarissima su a cosa serve: «Directory for OpenSSL configuration files, and also the default certificate and key store.»2 Tutto ciò che riguarda la fiducia dipende da lì. Il file CA predefinito è cert.pem lì dentro e la directory CA predefinita è certs lì dentro3. /workspace è una cache di build di Conan. Conan è il package manager C++ con cui compila Cisco, e salva ogni pacchetto sotto un hash dei suoi input di build4. L\u0026rsquo;hash cisco8ee8b59cf93de è un dato su un container che probabilmente è stato cancellato pochi minuti dopo la fine della build.\nChiedi alla libreria cos\u0026rsquo;è, e non è nemmeno l\u0026rsquo;OpenSSL standard:\nVERSION CiscoSSL 3.5.5.8.5.4 27 Jan 2026 BUILT_ON built on: Wed Feb 25 06:29:18 2026 UTC PLATFORM platform: conan-Release-Linux-x86_64-gcc-13 DIR OPENSSLDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl\u0026#34; Un fork interno mantenuto, con un suo schema di versioni, compilato a febbraio, spedito ad agosto, e che si porta ancora dietro la directory di lavoro in cui è stato fatto.\nDove ogni copia di OpenSSL sulla macchina cerca i suoi trust anchor Una macchina, due copie di OpenSSL, e solo una sa dove sono i certificati A runtime nessuna delle due viene informata. Ognuna ha la risposta in una stringa compilata, decisa da chi ha fatto la build. La copia di sistema: OpenSSL 3.5.8, Fedora 44 OPENSSLDIR compilato /etc/pki/tls la directory c'è cert.pem \u0026#8594; tls-ca-bundle.pem certs/ \u0026#8594; anchor con hash la catena è verificata su anchor reali L'handshake si completa. Ogni altro programma funziona. Ecco perché l'utente è sicuro che la rete vada bene. La copia spedita con Webex: CiscoSSL 3.5.5.8.5.4 OPENSSLDIR compilato /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl directory assente su ogni macchina cliente cert.pem \u0026#8594; assente certs/ \u0026#8594; assente lo store carica zero trust anchor L'handshake fallisce: errore 0x0A000086, decimale 167772294. Il banner mostrato all'utente dice che la rete non va. Due copie di OpenSSL sulla stessa macchina. A nessuna delle due viene detto a runtime dove sta la fiducia. Ognuna ha una stringa compilata dentro, e una di quelle stringhe nomina una directory che è esistita solo sull\u0026rsquo;host di build di qualcun altro. Non prendere strings per una risposta. Chiedilo alla libreria strings trova del testo in un file. Non dimostra che la libreria lo usi. Quindi carica la libreria spedita e chiediglielo direttamente: bastano una dozzina di righe di Python e niente root:\nimport ctypes c = ctypes.CDLL(\u0026#34;/opt/Webex/lib/libcrypto.so.3\u0026#34;) for f in (\u0026#34;X509_get_default_cert_file\u0026#34;, \u0026#34;X509_get_default_cert_dir\u0026#34;, \u0026#34;X509_get_default_cert_file_env\u0026#34;, \u0026#34;X509_get_default_cert_dir_env\u0026#34;): getattr(c, f).restype = ctypes.c_char_p print(f\u0026#34;{f:34} {getattr(c, f)().decode()}\u0026#34;) X509_get_default_cert_file /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl/cert.pem X509_get_default_cert_dir /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl/certs X509_get_default_cert_file_env SSL_CERT_FILE X509_get_default_cert_dir_env SSL_CERT_DIR Eccolo, dalla bocca della libreria stessa. Quando qualcosa dentro Webex chiede a questa copia di OpenSSL il trust store predefinito, riceve un file e una directory che non esistono. È quello che fa SSL_CTX_set_default_verify_paths, ed è quello che fa quasi ogni client se non gli è stato detto altro.\nLe ultime due righe meritano attenzione, perché sono la via d\u0026rsquo;uscita: la libreria lascia che SSL_CERT_FILE e SSL_CERT_DIR sovrascrivano entrambi i valori5. Ricordati anche questo. Diventerà importante, e non nel modo che ti aspetti.\nRiprodurre l\u0026rsquo;esatto codice di errore Una dimostrazione a occhio non è una dimostrazione. Prendi libssl.so.3 e libcrypto.so.3 così come vengono spediti, fai un handshake vero verso un host vero usando solo i valori predefiniti della libreria, e guarda cosa torna indietro.\nIl caso interessante è quello in cui i predefiniti puntano al nulla. SSL_CERT_FILE e SSL_CERT_DIR sovrascrivono esattamente i due valori che un OPENSSLDIR mancante lascia appesi, quindi puntarli a un percorso inesistente riproduce con precisione la condizione del pacchetto spedito:\n$ SSL_CERT_FILE=/nonexistent/cert.pem SSL_CERT_DIR=/nonexistent/certs python3 tls.py set_default_verify_paths -\u0026gt; 1 set_fd -\u0026gt; 1 SNI -\u0026gt; 1 SSL_connect -\u0026gt; -1 SSL_get_error -\u0026gt; 1 verify result 20: unable to get local issuer certificate err: 0xa000086 error:0A000086:SSL routines::certificate verify failed 0x0A000086 in decimale è 167772294.\nÈ il numero di ogni riga fallita nel log di Webex, e non viene da Webex. Viene dalla libreria TLS di Cisco, eseguita fuori dalla loro applicazione, che fallisce per un solo motivo: non aveva nessun trust anchor con cui verificare la catena. Stessa libreria, stesso errore, nessuna applicazione di mezzo.\nPunta le stesse due variabili al bundle vero di Fedora e lo stesso percorso di codice va fino in fondo:\n$ SSL_CERT_FILE=/etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem python3 tls.py SSL_connect -\u0026gt; 1 SSL_get_error -\u0026gt; 0 verify result 0: ok Tra le due esecuzioni la rete non è cambiata in nulla. È cambiato il percorso di un file.\nOgni passaggio di rete riesce. Quello che fallisce legge un file locale. Quattro passaggi attraversano la rete e riescono. Il quinto legge un file e no. Eseguito con libssl.so.3 e libcrypto.so.3 spedite, fuori da Webex, solo con i predefiniti della libreria. connessione TCP :443 ok ClientHello, SNI ok ServerHello, catena ok, catena ricevuta verifica la catena nessun anchor caricato cosa riporta la libreria SSL_connect -\u0026#62; -1 verify result 20: unable to get local issuer certificate err: 0xa000086 error:0A000086:SSL routines::certificate verify failed 0x0A000086 in decimale è 167772294, il numero di ogni riga fallita nel log di Webex. L'applicazione non ha mai scritto la parola «certificato». Ha registrato «Error in SSL handshake» e un intero decimale, e l'interfaccia l'ha trasformato in «Offline - No internet connection», l'unica cosa che la macchina chiaramente non era. Qui non c'è nessun guasto di rete. Mancava solo una directory. Quattro passaggi attraversano la rete e riescono, compresa la ricezione dell\u0026rsquo;intera catena di certificati del server. Il passaggio che fallisce apre un file locale. All\u0026rsquo;utente viene mostrato un messaggio sulla sua connessione a internet. Perché niente ti ha avvisato Due cose cospirano per rendere tutto silenzioso, e solo una è colpa di Cisco.\nCosa non dice mai una parola Progettato da Perché resta zitto Caricare un trust store che non c\u0026rsquo;è OpenSSL, di proposito SSL_CTX_set_default_verify_paths restituisce 1 che i percorsi esistano o no. «A missing default location is still treated as a success»3 Non avere niente su cui ripiegare Cisco, e a ragione Certificati validati, self-signed rifiutati, retry SSL disattivato, quindi non esiste una modalità degradata che mascheri il guasto La prima è ragionevole. Un programma che porta i propri anchor separatamente non dovrebbe essere costretto a preoccuparsene, quindi la chiamata riesce, lo store è vuoto e da nessuna parte nello stack qualcosa dice ho caricato zero autorità di certificazione. La prima cosa che se ne accorge è un fallimento di verifica mezzo secondo dopo. Ho eseguito quella chiamata sulla libreria spedita con i percorsi puntati a /nonexistent e ha restituito 1. È nell\u0026rsquo;output qui sopra.\nLa seconda è una policy che arriva dal servizio, e il log la registra:\nWdm.cpp:1162 parseDeviceJson: Adding policy \u0026lt;\u0026lt; allowSelfSignedCertificate with value: false NetworkManager.cpp:1738 onConfigReady: ...httpRequestSSLRetryEnabled: 0 HttpRequestManager.cpp:1883 rawHttpRequest: {\u0026#34;validateCertificates\u0026#34;:\u0026#34;true\u0026#34;,\u0026#34;useClientCertificate\u0026#34;:\u0026#34;false\u0026#34;} Quei tre flag sono l\u0026rsquo;unico motivo per cui questo guasto è un\u0026rsquo;interruzione e non qualcosa di molto peggio, e vale la pena soffermarcisi invece di passare oltre.\nRagionaci. La libreria inclusa carica zero trust anchor, e niente sotto il livello delle policy se ne sarebbe mai accorto, perché il fallimento è silenzioso per progetto fino in fondo. A trasformarlo in un banner sono stati tre flag. Ribaltane uno qualsiasi nel modo in cui molti client li spediscono e la stessa build non fallisce affatto. Si connette, a chiunque abbia un certificato qualsiasi, perché non ha niente con cui verificarlo.\nLo stesso trust store rotto, a un flag di policy da un guasto molto diverso Il percorso della fiducia è rotto in entrambe le colonne. Solo la policy decide come lo scopri. In comune: l'OPENSSLDIR compilato non esiste, quindi lo store carica zero autorità di certificazione Come lo spedisce Webex validateCertificates: true allowSelfSignedCertificate: false httpRequestSSLRetryEnabled: 0 Niente con cui verificare, quindi rifiuta. Handshake fallito. Banner. Perdi una giornata. Rumoroso, e innocuo. Uno qualsiasi impostato al contrario validateCertificates: false o self-signed ammessi o retry senza verifica Niente con cui verificare, quindi procede. Handshake completato. Con chiunque. Silenzioso, e non innocuo. A separare i due esiti è un valore di policy di un altro team, a valle del difetto, per motivi estranei. Il percorso della fiducia non proteggeva nessuno. Era rotto ovunque; restava solo da vedere come sarebbe fallito. La differenza tra «Webex oggi è offline» e «Webex si è fidato di chiunque abbia risposto» è un valore di policy impostato da un altro team, a valle del difetto, per motivi che non c\u0026rsquo;entrano niente. Il problema è come si manifesta. L\u0026rsquo;utente vede «Offline - No internet connection». Il log riporta «Error in SSL handshake» e un intero decimale. La parola certificato non compare da nessuna parte dove l\u0026rsquo;utente o un tecnico di supporto di primo livello guarderanno mai, e l\u0026rsquo;unico indizio diagnostico è un numero da convertire in esadecimale prima che significhi qualcosa.\nI fix che non hanno funzionato Falliscono entrambi quelli ovvi, per motivi diversi, ed entrambi vale la pena conoscerli.\nModificare l\u0026rsquo;openssl.cnf spedito Webex spedisce un file di configurazione in /opt/Webex/lib/openssl.cnf, e così com\u0026rsquo;è attiva un solo provider:\n[provider_sect] fips = fips_sect Solo FIPS. Non il provider default, che è dove vivono i normali algoritmi TLS6. Rimetterlo è una modifica di una riga e non cambia assolutamente niente, perché l\u0026rsquo;OpenSSL incluso quel file non lo legge mai. Cerca openssl.cnf dentro OPENSSLDIR7, e OPENSSLDIR è il percorso che non esiste. Il file sta nella directory di installazione con un\u0026rsquo;aria autorevole. Nessuno lo legge.\nÈ un secondo difetto nascosto dietro il primo. Anche se il problema del percorso venisse risolto domani puntando OPENSSLDIR a /opt/Webex/lib, questa configurazione verrebbe caricata e attiverebbe solo FIPS. E il modulo FIPS stesso viene caricato da MODULESDIR, il terzo percorso morto dello stesso albero, quindi nemmeno il fips.so spedito in /opt/Webex/lib può essere trovato. Tre percorsi, un prefisso sbagliato, e ognuno rotto in un modo che nasconde il successivo.\nImpostare le variabili d\u0026rsquo;ambiente La libreria rispetta SSL_CERT_FILE e SSL_CERT_DIR. L\u0026rsquo;ho dimostrato sopra. L\u0026rsquo;esecuzione riuscita è lì. Quindi la mossa ovvia è impostarle nel desktop entry, ed è quello che è stato provato:\nExec=env OPENSSL_CONF=/opt/Webex/lib/openssl.cnf \\ SSL_CERT_FILE=/etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem \\ SSL_CERT_DIR=/etc/pki/tls/certs/ /opt/Webex/bin/CiscoCollabHost %U Nessun cambiamento. E il motivo non è che Webex ignori le variabili. Il motivo è che il processo non le ha mai ricevute:\n$ tr \u0026#39;\\0\u0026#39; \u0026#39;\\n\u0026#39; \u0026lt; /proc/20293/environ | grep -E \u0026#39;SSL|OPENSSL|CURL\u0026#39; $ tr \u0026#39;\\0\u0026#39; \u0026#39;\\n\u0026#39; \u0026lt; /proc/20293/environ | wc -l 99 Novantanove variabili nel processo Webex in esecuzione, e nessuna delle tre impostate. Perché su questa macchina ci sono due desktop entry con lo stesso nome:\nFile Cosa esegue la sua riga Exec Scritto da /usr/share/applications/webex.desktop la riga env con le tre variabili qui sopra, per intero l\u0026rsquo;.rpm, poi modificato a mano ~/.local/share/applications/webex.desktop /opt/Webex/bin/CiscoCollabHost %U, senza nessun ambiente il launcher di Webex stesso E la specifica non lascia dubbi su quale vinca: «The base directory defined by $XDG_DATA_HOME is considered more important than any of the base directories defined by $XDG_DATA_DIRS.»8 $XDG_DATA_HOME è ~/.local/share. La copia dell\u0026rsquo;utente oscura quella del pacchetto, ogni volta, su ogni desktop che segue la specifica9.\nQuindi Webex installa una seconda copia del proprio launcher nella tua home, ed è quella che il desktop esegue. Modifica pure il file del pacchetto quanto vuoi. Stai modificando un documento che nessuno legge.\nDue desktop entry con lo stesso nome, e vince quello che Webex scrive per sé L'ambiente era impostato nel file che il desktop non legge mai Due entry, un nome. L'ordine di ricerca è scritto, e non favorisce la copia del pacchetto. Modificato a mano, e scavalcato /usr/share/applications/webex.desktop Exec=env OPENSSL_CONF=... SSL_CERT_FILE=... mai letto finché esiste l'altro file Scritto da Webex, e vince ~/.local/share/applications/webex.desktop Exec=/opt/Webex/bin/CiscoCollabHost %U nessun ambiente impostato scartato lanciato Specifica XDG base directory: the base directory defined by $XDG_DATA_HOME is considered more important than any of the base directories defined by $XDG_DATA_DIRS. La prova, dal processo in esecuzione e non da un ragionamento: tr '\\0' '\\n' \u0026#60; /proc/20293/environ | grep -E 'SSL|OPENSSL' \u0026#8594; nessun output, 99 variabili, nessuna di queste Il fix era vero, il file era vero, e il processo a cui era destinato partiva da tutt'altra parte. L\u0026rsquo;ambiente era impostato nel file che il desktop non legge mai. Webex scrive la propria entry nella directory dati dell\u0026rsquo;utente, la specifica dice che quella ha la precedenza su quella del pacchetto, e la prova è il processo in esecuzione: novantanove variabili d\u0026rsquo;ambiente e nessuna delle tre. Il fix che funziona Se la libreria pretende un percorso, dagli il percorso. Crea la directory che è stata compilata per cercare e riempila di symlink verso quella vera:\n#!/bin/bash # Point the bundled CiscoSSL at the system trust store by building the # directory it was compiled to look for. Tested: Fedora 44, Webex 46.8.0.35631. set -euo pipefail OPENSSLDIR=$(strings /opt/Webex/lib/libcrypto.so.3 \\ | grep -oP \u0026#39;(?\u0026lt;=OPENSSLDIR: \u0026#34;)[^\u0026#34;]+\u0026#39;) [ -n \u0026#34;$OPENSSLDIR\u0026#34; ] || { echo \u0026#34;no OPENSSLDIR found in the shipped library\u0026#34;; exit 1; } for p in /etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem \\ /etc/ssl/certs/ca-certificates.crt \\ /etc/pki/tls/certs/ca-bundle.crt \\ /etc/ssl/cert.pem; do [ -f \u0026#34;$p\u0026#34; ] \u0026amp;\u0026amp; { CA_BUNDLE=\u0026#34;$p\u0026#34;; break; } done [ -n \u0026#34;${CA_BUNDLE:-}\u0026#34; ] || { echo \u0026#34;no system CA bundle found\u0026#34;; exit 1; } echo \u0026#34;OPENSSLDIR: $OPENSSLDIR\u0026#34; echo \u0026#34;CA bundle: $CA_BUNDLE\u0026#34; sudo mkdir -p \u0026#34;$OPENSSLDIR\u0026#34; sudo ln -sf \u0026#34;$CA_BUNDLE\u0026#34; \u0026#34;$OPENSSLDIR/cert.pem\u0026#34; sudo ln -sf \u0026#34;$(dirname \u0026#34;$CA_BUNDLE\u0026#34;)\u0026#34; \u0026#34;$OPENSSLDIR/certs\u0026#34; sudo tee \u0026#34;$OPENSSLDIR/openssl.cnf\u0026#34; \u0026gt; /dev/null \u0026lt;\u0026lt;\u0026#39;CONF\u0026#39; openssl_conf = openssl_init [openssl_init] providers = provider_sect [provider_sect] default = default_sect fips = fips_sect [default_sect] activate = 1 CONF echo \u0026#34;done. now restart Webex\u0026#34; Riavvialo, e la stessa sequenza di avvio produce il risultato opposto. Stesso binario. Stesse righe di log. Il rinnovo del token, che prima falliva in sessanta millisecondi, ora finisce in trecentotrenta:\nAuthTokenRequester.cpp:579 Managed to fetch a new Kms access token. AuthTokenRequester.cpp:579 Managed to fetch a new CloudApps access token. AuthTokenSupervisor.cpp:310 Auth tokens refreshed. Expires in [64799 secs]. AuthenticationManager.cpp:1860 onUserAuthenticated: User authenticated. ConnectivityStateMachine::Authentication - UserNotAuthenticated -\u0026gt; UserAuthenticated Autenticato in circa 750 ms, quindi il timer di quindici secondi non scatta mai e il banner non compare. I servizi telefonici passano da Disconnected a Connecting, uno stato che la sessione rotta non aveva mai raggiunto in un minuto di tentativi.\nPrima Dopo Controllo di rete passa passa Prima richiesta HTTPS 167772294 Error in SSL handshake HTTP 200 Token CloudApps fallito ottenuto Token Kms fallito ottenuto Autenticazione bloccata su UserNotAuthenticated UserAuthenticated Banner a 15 s «Offline - No internet connection» nessuno Servizi telefonici mai tentati in connessione Tempo per autenticarsi mai ~750 ms Nota cosa fa il fix al tuo filesystem, perché dovrebbe darti fastidio. Crea sulla tua macchina una directory di primo livello chiamata /workspace, un nome per cui il Filesystem Hierarchy Standard non ha posto10, con dentro il percorso di una cache Conan e l\u0026rsquo;hash di build di un\u0026rsquo;azienda da cui hai comprato del software. È questa la forma del rimedio che Cisco ti ha lasciato: montare l\u0026rsquo;ambiente di build di qualcun altro alla radice del tuo.\nE si romperà anche. In tre modi:\nQuando si rompe Perché Cosa fai Un aggiornamento di Webex cisco8ee8b59cf93de deriva dagli input di build, quindi una dipendenza ricompilata vuol dire una directory nuova Rilanci lo script; legge il percorso dal nuovo binario invece di dare per scontato quello vecchio Un cambio di distribuzione La destinazione del symlink è una scelta della distribuzione, non uno standard11 La ripunti; lo script prova quattro percorsi noti Una reinstallazione /workspace non è nel backup, non è pacchettizzato e non appartiene a niente Lo rilanci, ogni volta, per sempre Niente di tutto questo è manutenzione. Sei tu che fai le veci di un passaggio della pipeline di build di qualcun altro, a tempo indeterminato, gratis. Correggere un difetto a runtime, su ogni macchina che possiedi, perché il vendor non l\u0026rsquo;ha voluto correggere una volta sola in fase di build.\nConoscevano la regola e l\u0026rsquo;hanno applicata a metà build Ecco cosa trasforma questo da segnalazione di bug in un\u0026rsquo;argomentazione.\nLeggi la sezione dinamica dei binari spediti:\n$ readelf -d /opt/Webex/bin/libcurl.so | grep RUNPATH 0x1d (RUNPATH) Library runpath: [$ORIGIN:$ORIGIN/../lib] $ readelf -d /opt/Webex/bin/CiscoCollabHost | grep RUNPATH 0x1d (RUNPATH) Library runpath: [$ORIGIN/../lib] $ORIGIN si espande al momento del caricamento nella directory che contiene l\u0026rsquo;oggetto stesso12. È lo strumento giusto per un bundle rilocabile e l\u0026rsquo;hanno usato come si deve. Dovevano: Webex spedisce lo stesso albero due volte, una in /opt/Webex e una in ~/.local/share/WebexLauncher/46.8.0.35631_9e6196c9-…/, e un launcher sceglie tra i due all\u0026rsquo;avvio. Due prefissi, una build, e il linker trova le sue librerie in entrambi.\nQuindi chi ha fatto questo pacchetto aveva capito il problema alla perfezione. I percorsi assoluti non sopravvivono alla spedizione. L\u0026rsquo;hanno risolto per il codice.\nPoi hanno lasciato i percorsi dei dati come stringhe assolute che nominano il container che li ha compilati. Stessa build. Stesso pomeriggio.\nUn percorso nel bundle si riloca da solo. L'altro nomina una macchina in un data centre chissà dove. Sapevano che il bundle doveva spostarsi. L'hanno applicato solo al codice. Entrambi i valori sono fissati in build, dalle stesse persone, lo stesso giorno. Uno si espande al caricamento, l'altro mai. Da dove viene il codice: registrato come espressione relativa RUNPATH in libcurl.so $ORIGIN:$ORIGIN/../lib /opt/Webex/lib risolto ~/.local/share/WebexLauncher/46.8.0.35631_.../lib risolto anche questo Corretto, e voluto. Lo stesso albero è spedito due volte in due prefissi diversi e il linker lo trova in entrambi. Da dove viene la fiducia: registrato come la directory di lavoro di qualcuno OPENSSLDIR in libcrypto.so.3 /workspace/.conan2/p/b/cisco8ee.../p/ssl percorso inesistente non risolto ENGINESDIR e MODULESDIR: stesso albero, stesso esito Tre percorsi assoluti dentro un container di build, spediti a ogni cliente, su un prodotto con contratto di supporto. Tra le due metà di questa figura c'è solo una persona che esegue l'artefatto su una macchina che non l'ha compilato. Questo è tutto il difetto. Non un bug difficile. Uno mai testato. La stessa build, lo stesso giorno, gli stessi ingegneri. Il percorso di ricerca delle librerie è registrato come un\u0026rsquo;espressione che si risolve ovunque finisca l\u0026rsquo;albero. Il percorso della fiducia è registrato come la directory di lavoro di qualcuno. Quindi non si può archiviare sotto non lo sapevano. In $ORIGIN non ci si inciampa per caso. Lo usi perché hai capito che un percorso assoluto cucito in un artefatto spedito è un difetto, e l\u0026rsquo;hai capito abbastanza bene da andarlo a correggere nel linker. Poi la stessa build scrive tre percorsi assoluti nelle stesse librerie, e le spedisce.\nConoscere la regola e applicarla a metà build è peggio che non conoscerla. Non conoscerla è un problema di formazione, e la formazione si può correggere. Questo è un pacchetto che aveva dentro l\u0026rsquo;idea giusta, nero su bianco, nell\u0026rsquo;header ELF dove chiunque poteva leggerla, ed è uscito dalla porta rotto lo stesso. Il che ti dice che niente a valle del compilatore guardava il risultato. Niente di niente.\nIl container c\u0026rsquo;era già Da dove venga /workspace non è un mistero, e non devi tirare a indovinare. È nell\u0026rsquo;header del pacchetto:\n$ rpm -qi webex | grep -E \u0026#39;Build Host|Build Date|Vendor\u0026#39; Build Date : Sat 08 Aug 2026 20:47:43 BST Build Host : c964ea9239ae Vendor : Cisco c964ea9239ae non è un hostname che qualcuno abbia digitato. Sono dodici caratteri esadecimali, che è quello che un container riporta come hostname quando nessuno ne imposta uno. Quindi il pacchetto è stato compilato dentro un container, da un\u0026rsquo;azienda che ha chiaramente le immagini, il registry e l\u0026rsquo;orchestrazione per farlo, e tre artefatti distinti su questa macchina lo dicono in modo indipendente:\nProva, letta dal pacchetto installato Valore Cosa dimostra Build Host nell\u0026rsquo;header RPM c964ea9239ae l\u0026rsquo;ID di un container, non una macchina di build OPENSSLDIR in libcrypto.so.3 /workspace/.conan2/… un percorso che esiste solo dentro quel container PLATFORM nella stessa libreria conan-Release-Linux-x86_64-gcc-13 una toolchain Conan in container Requires nell\u0026rsquo;RPM glibc \u0026gt;= 2.28 una soglia ABI scelta di proposito, e molto vecchia Poi l\u0026rsquo;hanno firmato. La build è finita alle 20:47:43 e la firma porta la data delle 21:02:07 della stessa sera, key ID 9995e5bbb5ccde3c. Quindici minuti. Quindi esiste un cancello di rilascio, qualcuno o qualcosa lo gestisce, e quello che attesta è chi ha fatto il pacchetto, non se il pacchetto funziona. Una firma è una dichiarazione sulla provenienza. Non è mai stata una dichiarazione di idoneità, e un processo che ha l\u0026rsquo;una e non l\u0026rsquo;altra ha le priorità al contrario.\nPerché il passaggio mancante è quello economico. Il container è già nella pipeline. Prendi l\u0026rsquo;artefatto appena uscito, avvia un\u0026rsquo;immagine pulita di ogni distribuzione che dichiari di supportare, installalo, lancialo e leggi le prime cento righe del log:\ndocker run --rm fedora:44 sh -c \u0026#39; dnf -y install ./webex-46.8.0.35631-1.x86_64.rpm \u0026amp;\u0026amp; timeout 25 /opt/Webex/bin/CiscoCollabHost \u0026amp; sleep 20 grep -c \u0026#34;Error in SSL handshake\u0026#34; ~/.local/share/Webex/current_log.txt\u0026#39; Diverso da zero, ogni volta, su questa build. L\u0026rsquo;installazione è di 1,1 GB, quindi diciamo un minuto per target con la cache calda. Sei distribuzioni sono sei minuti di una macchina già accesa, su hardware che Cisco possiede già, in una pipeline che esiste già. Non è stato eseguito. Nemmeno una volta.\nEd è questa la risposta a quella cosa che si dice ancora su Linux, che supportare più distribuzioni è difficile. Ha smesso di esserlo il giorno in cui è arrivato questo tooling, e il tooling è lo stesso con cui compilano. Un\u0026rsquo;immagine base per target. Lo stesso artefatto in ognuna. La matrice è un ciclo.\nUna pipeline che compila in un container e non ne esegue mai il risultato in uno non è una pipeline. È un compilatore con un cron job davanti e una chiave di firma dietro, e qualunque cosa produca è un tentativo.\nCompilano in un container e non ne eseguono mai il risultato in uno Il container è già nella pipeline. Lo usano solo per la metà che conviene al vendor. Ogni valore qui sotto è letto dal pacchetto installato sulla macchina, non dedotto. Build, dentro un container Build Host: c964ea9239ae /workspace/.conan2/p/b/... conan-Release-Linux-x86_64-gcc-13 tre prove distinte di un container Firma e pubblicazione build 20:47:43 firma 21:02:07 quindici minuti, e un cancello di rilascio che attesta chi, mai se Cliente dnf install webex lo apre «Offline - No internet» Il passaggio che nella pipeline non c'è da nessuna parte docker run --rm fedora:44 sh -c 'dnf -y install ./webex.rpm \u0026amp;\u0026amp; CiscoCollabHost \u0026amp; sleep 20; grep -c \"Error in SSL handshake\" ~/.local/share/Webex/current_log.txt' Stessa infrastruttura. Un'immagine per distribuzione. Meno di un minuto ciascuna, e su questa build fallisce a gran voce. Compilare per più distribuzioni non è più difficile da quando esiste questo tooling, lo stesso con cui compilano. Una pipeline che compila in un container e non vi esegue mai il risultato è un compilatore tra un cron job e una chiave di firma. Tre prove indipendenti nel pacchetto spedito che la build è avvenuta in un container, una firma apposta quindici minuti dopo la build, e l\u0026rsquo;unico passaggio che non compare da nessuna parte: eseguire il pacchetto finito in un\u0026rsquo;immagine pulita di ogni piattaforma per cui viene venduto come supportato. Perché una release del 2026 è compilata contro una libc del 2018? Il pacchetto dichiara di cosa ha bisogno, e la riga interessante è la prima:\n$ rpm -q --requires webex | grep glibc glibc \u0026gt;= 2.28 glibc 2.28 è uscita il 1° agosto 201813. È la versione di Red Hat Enterprise Linux 814, una release il cui supporto completo è finito nel 2024. Questo è un prodotto del 2026, compilato nel 2026, che punta alla libreria C del 2018. E poi si porta una propria copia da 2,5 MB di libstdc++.so.6 nella home dell\u0026rsquo;utente, perché il runtime C++ che va con una base così vecchia non riesce a reggere il codice.\nPerché qualcuno dovrebbe ancora farlo? Perché non vogliono linkare staticamente.\nÈ tutto qui. Nel momento in cui linki dinamicamente la libreria C dell\u0026rsquo;host, la distribuzione più vecchia che sei disposto a supportare diventa un vincolo sulla macchina su cui compili. Non puoi usare un simbolo di cui il target più vecchio non ha mai sentito parlare, quindi inchiodi la build a un\u0026rsquo;immagine base antica e resti lì. Ogni anno il divario cresce. Ogni nuova funzionalità del linguaggio o di una libreria arriva con una discussione su se la soglia si possa spostare. Spedisci la tua libstdc++ per tappare il peggio, e adesso mantieni anche un runtime privato.\nQuel compromesso aveva senso quando un host di build era una macchina fisica in un rack che qualcuno doveva reinstallare. Non ha più senso da un decennio. Se devi proprio linkare una libc dell\u0026rsquo;host, un container per target ti dà una build vera su una versione vera di ogni piattaforma, e nessuna vincola le altre.\nMa guarda cosa ha comprato davvero qui la disciplina dei target vecchi. È conservatorismo ABI a caro prezzo: una soglia di otto anni fa, un runtime C++ incluso, una matrice di supporto congelata attorno. E il client continua a non partire. Perché quello che si è rotto è un percorso di file, e nessuna attenzione alle versioni dei simboli protegge un percorso di file. Hanno pagato la tassa di compatibilità e la tassa del bundling, e hanno saltato l\u0026rsquo;unico controllo che non costa niente. Entrambi i conti. Nessun prodotto.\nHanno pagato per un bundle autosufficiente e non l\u0026rsquo;hanno avuto Il modo collaudato di spedire software commerciale su Linux è dipendere il meno possibile dall\u0026rsquo;host. Statico dove puoi, un albero autosufficiente dove non puoi, e nessuna ipotesi sulla distribuzione sottostante. Non è elegante e nessuno finge che lo sia. Esiste per via dell\u0026rsquo;alternativa. Un binario che ha bisogno di una certa versione di una certa libreria in un certo posto trasforma la macchina di ogni cliente in un ticket di supporto.\nCisco ha preso la seconda strada e ha incluso tutto. Ecco il conto:\nCosa contiene il bundle Dimensione o numero Oggetti condivisi in /opt/Webex/lib 150 La loro libcurl, CiscoSSL, zlib-ng, ICU, Kerberos, client CUPS, hunspell e motore di inferenza tutti Installato in /opt/Webex 1,1 GB Una seconda copia in ~/.local/share/WebexLauncher, per utente 1,1 GB Su disco per un client di chat e chiamate 2,2 GB Due gigabyte di dipendenze. Questo è il prezzo pieno del bundling: il download, il disco, la duplicazione, il peso di sicurezza di essere l\u0026rsquo;unico che può correggere qualsiasi cosa lì dentro, tutto quanto. Paghi questo e quello che compri è un programma a cui non importa cosa ha installato l\u0026rsquo;host, che si comporta allo stesso modo su Fedora, Debian, Arch e qualunque cosa un cliente abbia standardizzato quest\u0026rsquo;anno, e che non può essere rotto da un aggiornamento di distribuzione di cui non ha mai sentito parlare.\nSolo che gli importa. Gli importa moltissimo di una directory, ed è una directory su un server di build.\nHanno spedito il loro Kerberos, il loro ICU e il loro correttore ortografico, e non sono riusciti a spedire un percorso funzionante verso i certificati. Lo scopo stesso del bundle è essere autosufficiente, e non lo è proprio nell\u0026rsquo;unico aspetto che gli impedisce di funzionare. Ognuno di quegli 1,1 GB viene trovato correttamente tramite $ORIGIN. La quarantina di byte che conta di più no.\nEd è questo che mi fa arrabbiare. Il bundling è l\u0026rsquo;opzione costosa. Si sono presi la spesa, hanno fatto l\u0026rsquo;ingegneria difficile, hanno sistemato la rilocazione per centocinquanta librerie su due prefissi di installazione. Poi hanno puntato l\u0026rsquo;unica parte che decide se tutto il resto funziona verso una macchina che nessun cliente ha mai posseduto.\nE nessuno l\u0026rsquo;ha documentato Accanto al primo c\u0026rsquo;è un secondo fallimento, ed è quello che avrebbe intercettato il primo.\nChiedi al pacchetto che documentazione spedisce:\n$ rpm -qd webex | wc -l 0 $ rpm -qc webex | wc -l 0 Nessun file di documentazione. E nessun file di configurazione. Zero voci marcate %config in un pacchetto che spedisce un openssl.cnf. Non è una questione estetica. Un RPM marca un file come %config perché il package manager conservi quello che l\u0026rsquo;amministratore ha cambiato, salvando un .rpmsave invece di sovrascriverlo1516. /opt/Webex/lib/openssl.cnf è spedito come file normale, quindi il prossimo aggiornamento sovrascrive qualsiasi modifica tu ci abbia fatto e non ti dice niente. L\u0026rsquo;unico file che un cliente potrebbe legittimamente dover ritoccare è quello che il packaging tratta come usa e getta.\nNiente di pubblicato dice quale trust store usa il client, quali variabili d\u0026rsquo;ambiente rispetta o da dove legge la sua configurazione TLS. Non c\u0026rsquo;è una pagina da consultare. Non è mai stata scritta. L\u0026rsquo;unico modo in cui ho stabilito tutto questo è stato strings, readelf, ldd e ctypes sui binari spediti. Fare reverse engineering di un prodotto supportato per rispondere a una domanda a cui la documentazione avrebbe dovuto rispondere in una frase.\nEd ecco perché conta più di quanto sembri. Scrivere quella documentazione è già di per sé un test. Metti chiunque presso il vendor davanti a una pagina bianca intitolata da dove Webex per Linux legge i certificati CA, e la prima cosa che deve fare è andare a guardare. Nel momento in cui guarda, trova /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl, e la cosa successiva che gli esce è una domanda. I percorsi di configurazione documentati non sono burocrazia a beneficio del cliente. Sono l\u0026rsquo;audit più economico che un vendor possa fare sulla propria build, e saltarli è il modo in cui un percorso del genere sopravvive fino a una release.\nNiente di tutto ciò è una grande richiesta. Di\u0026rsquo; dove sta la tua configurazione. Di\u0026rsquo; quali variabili d\u0026rsquo;ambiente rispetti. Marca i tuoi file di configurazione come configurazione, così un aggiornamento non se li mangia. Così il cliente che incontra un guasto ha un posto dove guardare che non sia un editor esadecimale.\nNessuno l\u0026rsquo;ha eseguito Il passaggio mancante è stato nominato abbastanza volte qui sopra. Quello che vale la pena chiedersi è perché sia mancato su questa piattaforma e non sulle altre.\nNon su Fedora, comunque. Su macOS e sul Fisher-Price OS (Windows) questa classe di guasto non può presentarsi allo stesso modo, perché quelle piattaforme hanno uno stack TLS di sistema con un trust store gestito dal sistema operativo. Linux non ha niente del genere. OpenSSL è il trust store, e quindi chi lo spedisce è responsabile di dove guarda. Così l\u0026rsquo;unica piattaforma dove la libreria inclusa regge davvero il peso è la piattaforma che è stata spedita senza test, il che è una decisione su quali clienti meritino uno smoke test.\nL\u0026rsquo;intera indagine ha richiesto una serata: leggere il log, notare che il rilevamento di rete passava prima che il banner dicesse il contrario, estrarre il percorso compilato dal binario, riprodurre l\u0026rsquo;esatto codice di errore sulla libreria spedita. Tutto fatto con un agente AI che si occupava della correlazione dei log e del test con ctypes mentre io capivo cosa chiedergli. Lo dico per un solo motivo: la diagnosi che un vendor non ha mai fatto prima di firmare questo pacchetto e metterlo nel proprio repository è ora alla portata di una serata per qualsiasi cliente con la pazienza di guardare. Gli ingegneri di Cisco hanno Claude a disposizione come chiunque altro, e l\u0026rsquo;avrebbe costruito come si deve. Non puoi chiedergli di cucire /workspace/.conan2 in un artefatto spedito senza che ti dica cosa succederà quando l\u0026rsquo;artefatto lascia il workspace. Gli strumenti per intercettarlo non sono più scarsi, e nemmeno le conoscenze. Quello che manca è qualcuno presso il vendor il cui lavoro fosse guardare.\nIntanto il percorso di supporto per chi incontra questo problema è un banner che dice che la sua internet non funziona. Riavvierà il router. Chiamerà il suo provider. Aprirà un ticket che non porta da nessuna parte, perché il sintomo che Cisco ha scelto di mostrare punta lontano da Cisco.\nQuesta è la lista completa di quello che è andato storto. Vale la pena dire come sarebbe stato fatto bene, perché ogni voce ha una risposta assodata che precede questo prodotto.\nCome andava costruito Basta con quello che è andato storto. Ecco lo standard, e non c\u0026rsquo;è niente di nuovo. È quello che spedire un binario sul computer di qualcun altro ti chiede da vent\u0026rsquo;anni.\nParti dalla decisione che Cisco ha preso bene in linea di principio e male nell\u0026rsquo;esecuzione: quanto dell\u0026rsquo;host sei disposto a far dipendere. Linkare staticamente è la risposta più forte, e vale la pena essere concreti, perché «basta linkarlo staticamente» viene sventolato da chi non ha mai dovuto farlo e liquidato da chi non ci ha mai provato.\nCosa elimina Cosa costa RUNPATH, e ogni modo di sbagliarlo, perché al caricamento non c\u0026rsquo;è nessuna ricerca glibc non si linka staticamente in modo pulito: la risoluzione di nomi e utenti passa da dlopen, quindi il binario cerca comunque i moduli NSS dell\u0026rsquo;host17 La soglia glibc, così la distribuzione più vecchia smette di dettare su cosa puoi compilare Le parti LGPL comportano un obbligo di relinking, quindi restano dinamiche o spedisci il necessario per rifare il link Le rotture da aggiornamento di distribuzione, da libreria rinominata o da cache ldconfig vecchia Ogni patch è tua: nessun aggiornamento di sicurezza della distribuzione arriva ai tuoi clienti dlopen di un .so versionato da una directory che potrebbe non esserci Un download più grande, e nessuna condivisione di pagine tra processi E una riga nella colonna di sinistra che le altre si limitano a sostenere: l\u0026rsquo;artefatto prodotto dalla tua pipeline è l\u0026rsquo;artefatto che il cliente esegue, byte per byte. Lo testi e hai testato la cosa che hai spedito. È la proprietà di cui tutto questo articolo racconta l\u0026rsquo;assenza.\nSulla colonna di destra vale la pena essere onesti. Costi veri, e il motivo per cui si ricorre a musl o si accetta un ibrido. Ma guarda la terza riga. Avere ogni patch a proprio carico vale identicamente per quello che Cisco ha già fatto: un albero incluso di 150 librerie è lo stesso impegno senza nessuna delle garanzie al caricamento. Si sono impegnati a gestire ogni patch in ogni caso e non hanno avuto niente in cambio.\nQuindi la regola è semplice, ed è la regola che hanno infranto: tutto quello che non puoi linkare dentro, devi trovarlo con un percorso relativo al binario. $ORIGIN per il codice, e la stessa disciplina, deliberatamente, per ogni percorso di dati che la libreria andrà a cercare. In questo caso sono quattro e ognuno ha un aggancio documentato:\nCosa va a cercare la libreria Cosa è stato spedito Cosa avrebbe dovuto essere Trust anchor OPENSSLDIR/cert.pem, fissato in fase di build spedito nell\u0026rsquo;albero, oppure SSL_CERT_FILE impostato all\u0026rsquo;avvio5 Configurazione OPENSSLDIR/openssl.cnf, stesso percorso, mai trovato OPENSSL_CONF, puntato alla copia nel pacchetto5 Provider, FIPS compreso MODULESDIR, assoluto, quindi fips.so è irraggiungibile OPENSSL_MODULES, «the directory from which cryptographic providers are loaded»5 Engine ENGINESDIR, assoluto OPENSSL_ENGINES, oppure niente, visto che OpenSSL 4.0 ha rimosso del tutto il supporto agli engine5 Quattro percorsi, quattro variabili d\u0026rsquo;ambiente, tutte in una sola pagina di manuale che la loro stessa libreria si porta dietro. Se una qualsiasi stringa nel tuo artefatto inizia con / ed è stata decisa in fase di build, è un difetto che aspetta che un cliente lo trovi. Non esiste una terza opzione in cui un percorso di build assoluto vada bene.\nI fix per questo caso, e il controllo che lo intercetta Dal principio a questo difetto specifico. Sei modifiche, nessuna delle quali richiede ricerca:\nFix Sforzo Perché è giusto Impostare --openssldir=/opt/Webex/lib/ssl e spedire l\u0026rsquo;albero un flag di configure Il percorso allora esiste nel pacchetto, che è a cosa serve il flag2 Impostare SSL_CERT_FILE/SSL_CERT_DIR in CiscoSSLUtils all\u0026rsquo;avvio, provando i percorsi noti delle distribuzioni una dozzina di righe Standard, documentato, già supportato dalla loro stessa libreria5 Spedire loro stessi il bundle CA dentro il pacchetto solo packaging Controllo totale della fiducia, al prezzo di doverlo tenere aggiornato Correggere openssl.cnf perché attivi il provider default una riga Serve comunque, e oggi è nascosto dal guasto del percorso6 Marcare openssl.cnf come %config una riga di spec Impedisce a un aggiornamento di mangiarsi in silenzio la modifica di un amministratore15 Pubblicare i percorsi e le variabili rispettate una pagina L\u0026rsquo;audit più economico che esista, e trova questo guasto mentre la scrivi Il primo è il fix da un flag e avrebbe fatto uscire il prodotto funzionante. È un solo valore in uno script di build, impostato una volta, che hanno sbagliato perché niente a valle l\u0026rsquo;ha mai controllato.\nIl controllo è più piccolo del fix:\n# in CI, on the packaged artefact, in a clean container test -d \u0026#34;$(strings lib/libcrypto.so.3 | grep -oP \u0026#39;(?\u0026lt;=OPENSSLDIR: \u0026#34;)[^\u0026#34;]+\u0026#39;)\u0026#34; \\ || { echo \u0026#34;shipping a trust store path that does not exist\u0026#34;; exit 1; } Una riga. Avrebbe fatto fallire questa release a gran voce, a febbraio, sulla macchina che l\u0026rsquo;ha fatta, nel container che l\u0026rsquo;ha fatta, prima che il pacchetto venisse firmato. Il motivo per cui non c\u0026rsquo;è non è la difficoltà e non è il costo. È che nessuno è stato incaricato di scriverlo, e quindi verificare che l\u0026rsquo;artefatto pacchettizzato si comportasse da software non era compito di nessuno.\nCosa costa a tutti gli altri un processo di build trasandato Tutto quello che c\u0026rsquo;è sopra è il processo di build di un solo prodotto visto dall\u0026rsquo;interno, e non te lo ripercorrerò. La domanda che vale la pena farsi è se quel livello di cura si fermi probabilmente a un solo team.\nQuindi metti accanto il registro esterno. La CISA mantiene un catalogo delle vulnerabilità note per essere sfruttate attivamente. Non teoriche, non valutate a punteggio. Osservate mentre vengono usate contro le persone. Al 14 settembre 2026 contiene 1.710 voci18:\nVendor Voci nel catalogo KEV Microsoft 388 Cisco 98 Apple 94 Adobe 81 Google 74 Oracle 46 Fortinet 30 VMware 26 Seconda, dietro un monopolio dei sistemi operativi e davanti a tutti gli altri. L\u0026rsquo;aggiunta più recente per Cisco è entrata il 14 settembre 2026, il giorno prima che questo articolo fosse scritto.\nAvevo contato lo stesso file tre settimane prima per /it/random/is-your-msp-lying-to-you-part2/: versione 2026.08.27, 1.685 voci, Cisco a 96. Due in più da allora, in ventuno giorni.\nSiamo onesti su cosa quella tabella dimostra e non dimostra da sola. Una grande base installata in posti di valore attira attenzione, e l\u0026rsquo;attenzione trova i bug, quindi qualsiasi vendor di quelle dimensioni avrà una lista lunga. Il numero è un indizio, non un verdetto.\nLa composizione è più difficile da liquidare del totale. Venticinque delle novantotto voci di Cisco riguardano le linee di sicurezza: i firewall, le appliance, i concentratori VPN, i gateway di posta e web, i servizi di identità. E le quattro voci più recenti aggiunte contro di loro, una dopo l\u0026rsquo;altra, sono Secure Firewall Management Center due volte, Secure Firewall ASA e Secure Email Gateway, quest\u0026rsquo;ultima il 14 settembre 202618. Non gli switch. Non il kit di collaboration. I prodotti venduti apposta per essere la cosa che tiene al sicuro tutti gli altri.\nChe è la frase verso cui tutto questo articolo stava camminando, quindi eccola detta chiaramente. Questa è un\u0026rsquo;azienda il cui mestiere è vendere appliance di sicurezza, e non riesce a far verificare un certificato a un client desktop. Non un caso difficile. Non un attacco nuovo. L\u0026rsquo;operazione di sicurezza più di routine dell\u0026rsquo;informatica, eseguita da ogni browser a ogni caricamento di pagina, in una libreria di cui hanno fatto il fork loro stessi, e l\u0026rsquo;hanno spedita puntata a una directory che non è mai esistita sulla macchina di un cliente. Poi l\u0026rsquo;hanno firmata.\nQuello che questo articolo aggiunge è un campione del processo che c\u0026rsquo;è dietro. Non una vulnerabilità. Un semplice difetto di packaging, la classe di guasto meno sottile che esista, su una piattaforma supportata, che qualsiasi smoke test avrebbe intercettato se qualcuno si fosse preso la briga di eseguirlo, e spedito lo stesso. Se una pipeline di build mette questo davanti a un cliente pagante, non è ovvio cosa fermerebbe. Non ha fermato niente.\nPosso chiedere perché questo è stato firmato? Posso chiedere perché un pacchetto che non riesce a completare un handshake TLS è stato firmato e pubblicato per una piattaforma che la vostra stessa pagina dei requisiti elenca come supportata? Non chi l\u0026rsquo;ha firmato. Un nome non mi interessa e non è una questione di persone. Cosa l\u0026rsquo;ha permesso, perché qualcosa l\u0026rsquo;ha permesso, quindici minuti dopo la fine della build, e qualunque cosa sia è ancora in funzione oggi.\nOra la versione senza giri di parole. Questo non è un progetto che ho tirato giù da una forge accettando il rischio. È pagato. Dietro c\u0026rsquo;è un contratto, una linea di supporto, una pagina dei requisiti che fa un\u0026rsquo;affermazione su Linux e una chiave di firma che attesta che il pacchetto viene da Cisco ed è adatto all\u0026rsquo;installazione. Ognuna di queste è una dichiarazione fatta a un cliente, e su questa release ognuna non valeva niente, perché il risultato non è mai stato aperto.\nE lo standard mancato qui non è il mio. È il loro. Le quattro variabili che avrebbero portato quei percorsi sono documentate in una pagina di manuale che spedite dentro il bundle. Il vostro stesso formato di packaging ha un marcatore %config che non avete usato e una sezione di documentazione che avete lasciato vuota. La vostra stessa build girava in un container che non avete mai usato per eseguire il risultato. Non sto chiedendo a un\u0026rsquo;azienda di networking e collaboration di inventare niente. Sto chiedendo perché non ha letto i propri manuali.\nQuindi la scusa che non accetto è che sia difficile. Non è difficile per nessuno, e di certo non è difficile per un\u0026rsquo;azienda che lo fa tutti i giorni, a questa scala, per questi soldi. Chi fa questo mestiere tutti i giorni non ha scuse, ed essere grandi non è una scusa.\nE posso chiederne un\u0026rsquo;altra, perché è quella che conta davvero. Vendete firewall. Vendete un gateway di posta, un concentratore VPN, un servizio di identità, un centro di gestione per tutto questo, e il discorso di vendita di ognuno è che voi lo capite meglio del vostro cliente. Quindi come fa un\u0026rsquo;azienda che si presenta come un\u0026rsquo;autorità sulla sicurezza di rete a spedire un client che non sa validare un certificato? Non che lo valida male in modo ingegnoso. Che non riesce nemmeno a cercarne uno, perché la directory non c\u0026rsquo;è mai stata.\nNon c\u0026rsquo;è nessuna versione di quella risposta che voglia sentire che inizi con il team desktop separato dal team delle appliance. Sono la stessa firma, la stessa pipeline, la stessa dichiarazione pubblicata su una piattaforma supportata e lo stesso passaggio mancante alla fine, che è aprire la scatola. Se la validazione dei certificati non viene controllata prima della spedizione nel prodotto dove la rottura è rumorosa e innocua, non ho motivo di credere che venga controllata nel prodotto dove la rottura è silenziosa e costosa.\nE la parte onesta, detta chiaramente. Niente di tutto questo mi ha sorpreso. Da questo vendor mi aspetto ormai questo standard, ed è per questo che, dove la scelta è mia, non compro il loro kit e non ci costruisco sopra. Non è una preferenza di marchio. È lo stesso giudizio che darei su qualsiasi fornitore: ho misurato il loro lavoro, più di una volta, e continua a tornare uguale. Il catalogo qui sopra è una misura. Quello che è servito per scrivere la prima metà di questo articolo è un\u0026rsquo;altra.\nIl motivo per cui usavo Webex è che la scelta non era mia, e vale la pena dirlo, perché è la posizione in cui si trova la maggior parte di chi legge. Raramente puoi evitare un vendor di cui hai già preso le misure. Qualcun altro firma il contratto, il kit arriva, e il primo a scoprire cosa è stato saltato nella build sei tu, alla tua scrivania, con una riunione che sta per iniziare.\nSpedire qualcosa che non hai mai eseguito Ci sarà una spiegazione interna. Uno sprint pieno, una pipeline passata di mano, una piattaforma senza responsabile. Nessuna merita di essere ascoltata, perché ognuna descrive la stessa cosa: il lavoro non è stato fatto e niente nel processo richiedeva che lo fosse.\nC\u0026rsquo;è un vecchio standard nei mestieri che non è mai arrivato nel software: non te ne vai dal lavoro finché non hai fatto funzionare la cosa. Riempi l\u0026rsquo;impianto e controlli ogni giunto. Dai tensione al quadro e provi ogni circuito. Non perché dubiti del tuo lavoro. Perché il cliente lo userà, e scoprirlo davanti a lui non è un risultato professionale. Nessuno ti guarda mentre lo fai. Lo fai lo stesso. È tutto il significato della parola.\nIl software ha passato trent\u0026rsquo;anni a sostenere di essere diverso, che la build è il prodotto consegnato e l\u0026rsquo;installazione è un problema di qualcun altro, che una pipeline verde è la stessa cosa di un prodotto che funziona, e non lo è. Una build che non è mai stata eseguita fuori dal container che l\u0026rsquo;ha prodotta non è stata finita, è stata abbandonata nel punto in cui finirla diventa noioso. Tutto quello che c\u0026rsquo;è a valle è un\u0026rsquo;affermazione su un lavoro che non è stato fatto.\nIl fix è un flag di configure. Il controllo è una riga di shell. Quello che è interessante non è il costo di nessuno dei due; il numero interessante è quante persone hanno digitato le loro credenziali in una finestra di Webex, l\u0026rsquo;hanno vista dire che la loro internet non funzionava, e ci hanno creduto, perché glielo diceva Cisco e Cisco è un\u0026rsquo;azienda di networking. Ecco cosa ha comprato davvero il test mancante: non un bug, una bugia che il prodotto racconta con sicurezza, a ogni avvio, a persone che non hanno modo di saperne di più.\nEd è questa la linea da tracciare prima di chiudere la scheda, perché le due metà di questo articolo non sono due argomenti. Un percorso di fiducia che punta a un container di build e un bypass dell\u0026rsquo;autenticazione su un\u0026rsquo;appliance di frontiera sono lo stesso difetto con una posta diversa. Entrambi sono un valore che nessuno ha controllato, in un artefatto che nessuno ha eseguito, firmato da un processo che attesta la provenienza e non l\u0026rsquo;idoneità. Quello che avevo davanti era del tipo innocuo. Si è rotto rumorosamente, sulla mia scrivania, e sono stato il primo a saperlo. L\u0026rsquo;altro tipo non te lo fa questo favore.\nLo stesso controllo mancante con due poste diverse, e solo uno te lo dice Un controllo mancante, due poste. Solo uno ti dice che c'è. Stesso fallimento: un valore non controllato, in un artefatto mai eseguito, firmato da un processo che attesta la provenienza Il tipo che si rompe rumorosamente cos'era un percorso di trust store inesistente chi l'ha trovato il cliente, al primo avvio quanto è costato una serata, una scrivania chi l'ha saputo io, subito Finisce scritto in pubblico. Il tipo che non rompe niente cos'era una lunghezza mai controllata chi l'ha trovato chi è andato a cercarlo quanto è costato un incidente chi l'ha saputo il cliente, dal rapporto Finisce come 1 delle 98 di Cisco nel catalogo. Un processo che non intercetta la colonna di sinistra non avrebbe mai intercettato quella di destra. La differenza è fortuna, non diligenza. Il difetto di questo articolo e le voci di quel catalogo sono lo stesso fallimento con vestiti diversi. Uno si è annunciato sulla mia scrivania al primo avvio. L\u0026rsquo;altro tipo si annuncia prima a qualcun altro. Nessuno in Cisco ha deciso di spedire un firewall sfruttabile, così come nessuno ha deciso di spedire un client che non raggiunge internet. Non è una difesa. È l\u0026rsquo;accusa. Nessuno dei due ha bisogno di essere deciso, ed è proprio questo il problema: entrambi sono ciò che esce dall\u0026rsquo;altra parte quando una pipeline compila, firma e pubblica senza che nessuno sia reso responsabile di aprire il risultato. Un processo che non intercetta una directory che non esiste non avrebbe mai intercettato una lunghezza non controllata, e un vendor che ti vende l\u0026rsquo;appliance che sorveglia il tuo perimetro non ha diritto a quel processo.\nQuindi quando il nome di un vendor continua a comparire in quella lista, resisti alla spiegazione comoda che sono semplicemente grandi e molto presi di mira. La scala spiega il volume. Non spiega il tipo. Guarda invece cosa fa il loro processo di build con le cose noiose, perché le cose noiose si misurano dall\u0026rsquo;esterno, da te, oggi, sul kit che hai già.\nControlla i tuoi bundle. strings, readelf e venti minuti ti diranno quali dei tuoi vendor spediscono un percorso verso una macchina che non vedrai mai. Quello che stai misurando davvero non è il percorso. È se lì qualcuno stava guardando, e se la risposta è no su una cosa così economica da intercettare, sai già qual è sulle cose che non lo sono.\nCisco — Webex App system requirements — l\u0026rsquo;elenco delle piattaforme supportate, Linux compreso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — INSTALL.md, --openssldir — «Directory for OpenSSL configuration files, and also the default certificate and key store.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — SSL_CTX_load_verify_locations(3) — il file CA predefinito è cert.pem e la directory CA predefinita certs, entrambi dentro la directory OpenSSL predefinita; e sui valori di ritorno, «A missing default location is still treated as a success.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nConan 2 — conan cache — i binari dei pacchetti stanno sotto un percorso con hash nella cache locale, che è da dove viene /workspace/.conan2/p/b/\u0026lt;hash\u0026gt;/p.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — openssl-env(7) — SSL_CERT_DIR e SSL_CERT_FILE «specify the default directory or file containing CA certificates».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — provider(7) — il provider predefinito e cosa resta non disponibile con una configurazione che lo omette.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — config(5) — il file di configurazione che OpenSSL carica all\u0026rsquo;inizializzazione, e dove viene cercato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfreedesktop.org — XDG Base Directory Specification — «The base directory defined by $XDG_DATA_HOME is considered more important than any of the base directories defined by $XDG_DATA_DIRS.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfreedesktop.org — Desktop Entry Specification — dove vengono cercati i file .desktop e come uno ne oscura un altro con lo stesso nome.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFilesystem Hierarchy Standard 3.0 — le directory che un filesystem root dovrebbe contenere, /workspace esclusa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nupdate-ca-trust(8) — come viene prodotto su Fedora e affini il bundle consolidato sotto /etc/pki/ca-trust/extracted.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nld.so(8) — $ORIGIN si espande nella directory che contiene il programma o l\u0026rsquo;oggetto condiviso, ed è ciò che rende rilocabile un albero incluso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nglibc timeline — «2018-08-01 GLIBC 2.28 — The GNU C Library version 2.28 is now available».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nglibc — Release wiki — la tabella versione-distribuzione; Red Hat Enterprise Linux 8 ha glibc 2.28.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRPM — spec file reference — %config e cosa fa il package manager con un file marcato come configurazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora packaging guidelines — configuration files — quando un file spedito va marcato %config.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nglibc FAQ — perché un binario glibc linkato staticamente ha comunque bisogno a runtime dei moduli NSS dell\u0026rsquo;host.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Known Exploited Vulnerabilities Catalog — contato dal feed JSON pubblicato, versione del catalogo 2026.09.14, 1.710 voci.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/certificates/webex-certificates-on-a-build-server/","summary":"Webex 46.8.0.35631 su Fedora 44 resta dietro un banner giallo che dice «Offline - No internet connection» mentre ogni altro programma sulla macchina raggiunge internet senza problemi. Ha fermato del tutto la linea VoIP. La rete non c\u0026rsquo;entrava: Cisco include un proprio fork di OpenSSL e l\u0026rsquo;ha compilato con OPENSSLDIR impostato su /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl, una directory che esiste in un container di build e da nessun\u0026rsquo;altra parte, quindi non carica nessun trust anchor e ogni handshake fallisce. L\u0026rsquo;articolo va in ordine: cos\u0026rsquo;è davvero lo stato rotto, chiedere alla libreria spedita dove pensa che stiano i suoi certificati, riprodurre l\u0026rsquo;esatto codice di errore fuori da Webex, perché niente ti avvisa, i due fix che non funzionano e perché, e quello che funziona. Poi il processo di build: hanno usato $ORIGIN per il codice e lasciato assoluti tre percorsi di dati, l\u0026rsquo;header RPM riporta l\u0026rsquo;ID di un container, quindi il container era già nella pipeline e non è mai stato usato per eseguire il risultato, il pacchetto richiede una glibc del 2018 perché non vogliono linkare staticamente, 2,2 GB vengono spediti due volte, e non c\u0026rsquo;è né documentazione né un solo file marcato come configurazione. Poi come andava costruito, i sei fix e il controllo di una riga che lo intercetta. E infine il confronto: Cisco ha 98 voci nel catalogo CISA delle vulnerabilità sfruttate, seconda solo a Microsoft, e un percorso di fiducia che nessuno ha controllato e un bypass che nessuno ha controllato sono lo stesso difetto con una posta diversa.","title":"Webex cerca i tuoi certificati su un server di build di Cisco"},{"content":"Una VPN non è un prodotto. Sono due lavori imbullonati insieme, e la tua macchina ha già un programma per ciascuno.\nIl primo lavoro è creare un collegamento virtuale: un\u0026rsquo;interfaccia che sembra una scheda di rete, prende pacchetti IP e li consegna altrove. Il secondo è portare i byte di quel collegamento da un capo all\u0026rsquo;altro. Compri un\u0026rsquo;appliance VPN e compri entrambi i lavori con una licenza pinzata sopra; fallo da te e ognuno è un programma già installato. Su Linux ci sono due modi per fare il primo lavoro, e questo articolo li costruisce tutti e due: pppd, che porta con sé un intero protocollo di collegamento (indirizzi negoziati, un controllo di vitalità, il framing), e un dispositivo tap, che non porta niente ed è un buco nel kernel in cui spingi dei frame. Compromessi diversi, non concorrenti, e la seconda metà li mette fianco a fianco.\nQuel protocollo è PPP, e il motivo per cui funziona è scritto nel suo primo paragrafo: PPP è un protocollo di collegamento per link punto-punto1, e non specifica di cosa sia fatto il link. Un modem e una linea telefonica erano la risposta originale. Non sono mai stati l\u0026rsquo;unica. PPTP ha messo PPP dentro GRE2. L2TP lo ha messo dentro UDP3. PPPoE lo ha messo dentro frame Ethernet. Ognuno di questi è lo stesso protocollo con un corriere diverso, e a nessuno è servito cambiare PPP per farlo.\nQuindi la domanda non è se puoi far girare PPP su un socket TCP o UDP, ma su quale, e quanto costa. La risposta breve, con i passaggi mostrati: usa UDP. Far girare un protocollo a flusso dentro un flusso affidabile è l\u0026rsquo;unico errore qui che sulla scrivania sembra a posto e su un collegamento vero va in pezzi.\nUna VPN sono due lavori. Li hai già entrambi. Togli il marketing da qualsiasi tunnel e succedono tre cose: qualcosa presenta un\u0026rsquo;interfaccia virtuale e trasforma i pacchetti in un flusso di byte, qualcosa porta quel flusso attraverso una rete che già funziona, e qualcosa lo cifra, oppure niente lo fa.\nOgni tunnel è una metà di collegamento, un trasporto e un po' di crittografia Sempre le stesse tre parti. Cambiano solo il trasporto e la crittografia. TUNNEL COLLEGAMENTO TRASPORTO CRITTOGRAFIA PPP dial-up, 1994 PPP modem e linea telefonica nessuna PPPoE PPP frame Ethernet nessuna PPTP PPP GRE MPPE: rotto, lascia stare L2TP su IPsec PPP UDP IPsec Qui, costruzione uno PPP su una pty socket UDP, via netcat DTLS Qui, costruzione due dispositivo tun o tap socket UDP, via socat DTLS WireGuard interfaccia del kernel UDP Noise, niente da negoziare Ogni tunnel di questa lista ha la stessa forma. Le differenze sono in quale trasporto finiscono i byte, e se qualcosa li cifra. PPP fa la metà del collegamento dal 1994, ed è per questo che compare sotto tre di questi senza essere stato riprogettato per nessuno. Un dispositivo tun o tap fa la stessa metà senza alcun protocollo, ed è la seconda costruzione di questo articolo. PPP fa la metà del collegamento come si deve: negoziazione degli indirizzi, un controllo di vitalità, compressione delle intestazioni, più protocolli di livello rete su un solo link, un passo di autenticazione se lo vuoi. Un sacco di lavoro finito che se ne sta in /usr/sbin a non fare niente. Quello che non fa è preoccuparsi del trasporto: dagli un file descriptor che muove byte in entrambe le direzioni e ci gira sopra. Netcat è un programma il cui unico scopo è essere quel file descriptor.\nLa cifratura è la parte che nessuno ti regala, ed è la parte su cui si spende la maggior parte di questo articolo, perché netcat non ha risposta e far finta del contrario è il modo in cui la gente costruisce cose che non dovrebbe.\nLe fasi, e perché vanno in quest\u0026rsquo;ordine Tutto quello che segue è costruito per fasi, ognuna aggiunge una cosa a quella prima. Non è un espediente didattico. È così che dovresti costruirlo, perché quando la fase sei si rompe devi sapere se la fase due funziona ancora, e lo sai solo se la fase due è stata, almeno una volta, una cosa che hai fatto girare da sola.\nSei fasi, ognuna aggiunge una cosa che puoi provare da sola Costruiscila in quest'ordine, e puoi sempre ridiscenderla 1 Raw, su TCP pppd con una pty, o un dispositivo tap, e un semplice listener netcat. Funziona sul banco. Si scioglie su un percorso vero: due timer di ritrasmissione in lotta. 2 Raw, su UDP Stesso link, trasporto a datagrammi. Un datagramma perso è un pacchetto perso e basta. Questa è la base. Tutto quello che sta sopra è facoltativo; questa no. 3 TLS, su TCP ncat, stunnel o openssl attorno al trasporto. Verifica il certificato su entrambi i capi, o hai cifratura senza identità e nessun controllo d'accesso. 4 DTLS, su UDP socat o openssl, e la forma a cui puntare: cifrata, autenticata, ancora a datagrammi. Un pacchetto perso resta perso invece di far litigare due stack. 5 Compresso zstd tra l'interfaccia e il trasporto. Tieni la finestra tra i frame dove il trasporto consegna in ordine; un frame autonomo per datagramma, più un dizionario, dove no. 6 Entrambi, in quest'ordine Prima comprimi, poi cifri. Mai il contrario: il testo cifrato non si comprime. E conosci il prezzo: comprimere prima di cifrare rivela la lunghezza. Va bene sul tuo traffico. Sei fasi, ognuna aggiunge una cosa a quella sotto. Il raw su TCP è da dove partono tutti, ed è l\u0026rsquo;unico gradino che è un vicolo cieco: funziona sul banco e si scioglie su un percorso vero. Il raw su UDP è la base su cui poggia tutto il resto. Poi la cifratura, poi la compressione, poi tutte e due insieme. Ogni fase è un collegamento che puoi tirare su, pingare e lasciare acceso, così quando la cima della scala si comporta male puoi ridiscenderla un gradino alla volta. Il collegamento stesso si costruisce allo stesso modo, ed è il ragionamento dietro la rampa di un secondo più avanti: un tunnel parte raw, dimostra di saper portare un frame, e solo dopo diventa furbo. Una costruzione che accende tutto insieme si rompe come un blocco unico, e passi la serata a indovinare quale strato è stato.\nQuello che pppd vuole davvero è un file descriptor pppd è stato scritto per le porte seriali, quindi la lettura ingenua è che gliene serva una. Non è così. Gli serve un dispositivo terminale, e se ne crea uno da solo:\npty script — Specifies that the command script is to be used to communicate rather than a specific terminal device. Pppd will allocate itself a pseudo-tty master/slave pair and use the slave as its terminal device. The script will be run in a child process with the pseudo-tty master as its standard input and output.4\nRileggilo: c\u0026rsquo;è dentro tutta la costruzione. pppd crea uno pseudo-terminale, tiene lo slave e passa il master a un comando come stdin e stdout. Cosa fa quel comando con i byte non è affare di pppd. Fai girare lì nc e finiscono in un socket.\npppd, uno pseudo-terminale, netcat e un socket Un pacchetto, da ppp0 a ppp0, e ogni mano da cui passa HOST A HOST B ppp0 interfaccia del kernel pppd framing HDLC coppia pty slave a pppd master al figlio ncat stdin e stdout coppia pty master al figlio slave a pppd ncat stdin e stdout pppd framing HDLC ppp0 interfaccia del kernel il socket: TCP o UDP I due riquadri in mezzo sono l'unica parte che scegli. Tutto il resto non cambia che il trasporto sia una linea telefonica, una console seriale, un flusso TCP, datagrammi UDP o una sessione TLS: per questo cambiare trasporto dopo costa una parola. Uno pseudo-terminale non ha il pin di carrier-detect, quindi pppd aspetta una portante che non arriva. L'opzione `local` lo evita. pppd parla HDLC asincrono nel lato slave di uno pseudo-terminale che si è allocato da solo. Il comando indicato da pty eredita il lato master come stdin e stdout. Netcat copia lo stdin in un socket e il socket nello stdout, così le due istanze di pppd parlano tra loro attraverso la coppia pty e la rete senza che nessuna delle due sappia che esiste un socket. C\u0026rsquo;è una seconda strada, notty, che usa invece lo stdin e lo stdout di pppd stesso. Ma avvia un processo di smistamento dei caratteri da cui passa ogni byte, quindi «increases the latency and CPU overhead»4. Usa pty, a meno che tu non abbia un motivo per non farlo.\nTre fatti pratici prima del primo comando, tutti verificati sulla macchina su cui è stato scritto questo articolo, Fedora 44, ppp-2.5.1-7.fc44:\n$ pppd --version pppd version 2.5.1 $ ls -l /usr/bin/pppd /dev/ppp -rwxr-xr-x. 1 root root 393784 Jan 17 2026 /usr/bin/pppd crw-------. 1 root root 108, 0 Sep 14 08:34 /dev/ppp $ pppd noauth nodetach pty \u0026#39;true\u0026#39; pppd: using the noauth option requires root privilege Serve root. Non c\u0026rsquo;è modo di evitarlo. Su Fedora il binario non è setuid, /dev/ppp ha modo 0600 ed è di root, e comunque le opzioni che ti servono sono privilegiate. È una cosa che fai girare come root o sotto un file unit, non qualcosa che un utente fa così, per caso. Questo conta più avanti, quando arriviamo a cosa significa per la tua politica di egress.\nIl lato kernel è modulare. ppp_generic fa l\u0026rsquo;interfaccia, ppp_async il framing con byte-stuffing che serve a una pty, e ppp_deflate/bsd_comp/ppp_mppe la compressione e la cifratura; si caricano su richiesta. Se ppp_async manca da un\u0026rsquo;immagine container ridotta all\u0026rsquo;osso, il collegamento sale e non porta niente: una mezz\u0026rsquo;ora pessima se non sai dove guardare.\nLe linee di controllo del modem non esistono su una pty. Senza un pin di carrier-detect, pppd aspetta una portante che non arriva mai. Il rimedio è una parola, local, che gli dice di ignorare le linee di controllo del modem4. Lasciala fuori e non succede niente, senza un errore che valga la pena leggere.\nNetcat non è un programma solo Prima della costruzione, la trappola che mangia più tempo: «netcat» sono almeno quattro programmi con opzioni incompatibili, e quale ti tocca dipende dalla distribuzione. Su questa macchina /usr/bin/nc è un link simbolico a /usr/bin/ncat, la riscrittura di Nmap. Quindi un comando copiato da una pagina wiki di quindici anni fa fallisce per motivi che con PPP non c\u0026rsquo;entrano niente.\nImplementazione In ascolto su una porta UDP Resta su dopo che il peer si disconnette Ncat (Nmap) ncat -l 443 -u -k / --keep-open netcat di OpenBSD nc -l 443 -u -k netcat tradizionale nc -l -p 443 -u no GNU netcat nc -l -p 443 -u no Per questo, controlla quale hai prima di dare la colpa a pppd:\nreadlink -f \u0026#34;$(command -v nc)\u0026#34; nc --version 2\u0026gt;\u0026amp;1 | head -1 || nc -h 2\u0026gt;\u0026amp;1 | head -1 Qui sotto userò ncat in modo esplicito. È quello con TLS integrato, il che conta più avanti, ed essere espliciti vuol dire che i comandi non significano in silenzio qualcos\u0026rsquo;altro sulla tua macchina.\nFase uno: la costruzione su TCP, perché è quella che provano tutti per prima Un capo ascolta, l\u0026rsquo;altro si connette. Gli indirizzi qui sono dell\u0026rsquo;intervallo per la documentazione, quindi incollali dritti in un laboratorio e niente di instradabile si fa male. La porta è la 443 dall\u0026rsquo;inizio alla fine, ed è voluto: la 443 in uscita è aperta di default su quasi ogni rete. Avvolgi il trasporto in TLS qualche fase più giù e il traffico che ci passa sopra non si distingue da una qualsiasi sessione HTTPS. Mettere un listener lì richiede root, che il capo lontano (la macchina dell\u0026rsquo;attaccante, o un relay) ha. È tutto l\u0026rsquo;argomento dell\u0026rsquo;egress in un numero di porta, e ci tornerò.\nSul capo in ascolto:\npppd nodetach noauth local passive \\ nodefaultroute noipdefault \\ 192.0.2.1:192.0.2.2 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat --listen --keep-open 443\u0026#39; Sul capo che si connette:\npppd nodetach noauth local \\ nodefaultroute noipdefault \\ 192.0.2.2:192.0.2.1 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat 198.51.100.10 443\u0026#39; Ogni parola lì sopra fa un lavoro, e una di loro, noauth, fa danni in silenzio. Il tunnel non ha controllo d\u0026rsquo;accesso, e la cosa ha una sezione tutta sua più avanti.\nOgni parola della riga di pppd, e cosa fa La riga di comando della costruzione UDP, parola per parola nodetach primo piano: vedi l'output e puoi metterlo sotto un supervisore noauth niente autenticazione del peer: è questo il buco; il tunnel non ha controllo d'accesso local ignora le linee di controllo del modem che una pty non ha. Senza, non sale niente passive aspetta un pacchetto LCP valido invece di uscire: comportamento da socket server nodefaultroute non prendere la route di default quando IPCP finisce. La route che vuoi la aggiungi tu noipdefault non offrire l'indirizzo della macchina come capo locale 192.0.2.1:192.0.2.2 locale:remoto, fissati: pppd rifiuta ogni altra risposta durante IPCP lcp-echo-interval / -failure il controllo di vitalità: ha una sezione sua più sotto mtu / mru 1400 lascia spazio a quello che il trasporto avvolge attorno a ogni frame pty '...' il comando il cui stdin e stdout diventano il link: qui, un socket netcat Il capo che si connette usa la stessa riga senza `passive`: inizia invece di aspettare. Ogni opzione della riga, e cosa fa. Quella da tenere d\u0026rsquo;occhio è noauth: elimina l\u0026rsquo;autenticazione del peer, quindi il listener accetta chiunque arrivi. nodefaultroute e noipdefault evitano che il collegamento riscriva di nascosto il tuo instradamento, local lo fa salire su una pty, e la coppia local:remote fissata impedisce a pppd di accettare una risposta diversa durante IPCP. Il capo che si connette usa la stessa riga senza passive. Tira su entrambi i capi e ottieni un ppp0 su ciascuno, una route punto-punto verso l\u0026rsquo;indirizzo lontano, e un\u0026rsquo;interfaccia che puoi pingare, attraverso cui puoi instradare e su cui puoi fare tcpdump. Quella è una VPN: nessun pacchetto installato, nessun demone configurato, nessuna chiave scambiata. Che è proprio il problema, e ci tornerò.\nCosa ha negoziato, e come guardarlo Aggiungi debug e pppd registra lo scambio del protocollo di controllo, che vale la pena leggere una volta anche se non lo rileggerai mai più. Il collegamento sale per fasi, e ogni fase può fallire per conto suo.\nLCP, poi l'autenticazione, poi un protocollo di controllo per famiglia di indirizzi Tre fasi, e ognuna fallisce per un motivo suo 1 LCP: il collegamento stesso MRU, la mappa dei caratteri di controllo, un magic number contro il loopback, e se uno dei due capi vuole che l'altro si autentichi. Se fallisce qui, il trasporto non passa i byte in modo pulito nelle due direzioni. Controlla il socket, non le opzioni PPP. 2 Autenticazione: facoltativa PAP manda una password in chiaro. CHAP fa una sfida e una risposta MD5. Qui saltata. Entrambi provano chi è il peer. Nessuno cifra un solo byte di quello che segue. 3a IPCP L'indirizzo IPv4 a ciascun capo. 3b IPV6CP Gli identificatori di interfaccia a 64 bit. Questi due sono indipendenti. IPv6 può salire mentre IPv4 sta ancora discutendo, e un errore in uno non butta giù l'altro. L'interfaccia comincia a portare traffico per una famiglia appena il suo protocollo di controllo ha finito. LCP sistema il collegamento stesso: quanto può essere grande un frame, quali caratteri di controllo vanno sottoposti a escape, e un magic number che rileva una linea in loopback. L\u0026rsquo;autenticazione è facoltativa e qui viene saltata. Poi un protocollo di controllo per ogni livello di rete: IPCP per IPv4, IPV6CP per IPv6. Sono indipendenti, quindi un collegamento può portare IPv6 mentre IPv4 sta ancora discutendo, e un guasto in uno non butta giù l\u0026rsquo;altro. I due strumenti di debug utili sono già installati e non li usa nessuno:\n# log every frame in both directions to a file pppd ... debug record /tmp/ppp-trace # then read it back in a human-readable form pppdump -h /tmp/ppp-trace | less record scrive una cattura con timestamp di ogni byte, pppdump la trasforma in qualcosa di leggibile4, e con tcpdump -ni ppp0 vedi entrambi i lati: il framing sotto e i pacchetti sopra.\nIl frame sul filo, e perché 0x7E è dappertutto PPP su una linea seriale (e per pppd una pty lo è) usa il framing HDLC asincrono, e capirlo fa la differenza tra mettere a punto la cosa e tirare a indovinare. Ogni frame comincia e finisce con lo stesso byte: «Each frame begins and ends with a Flag Sequence, which is the binary sequence 01111110 (hexadecimal 0x7e)»5. Se 0x7e segna un confine non può comparire dentro un frame, quindi viene sottoposto a escape. Lo stesso vale per il byte di escape 0x7d, e per qualsiasi altra cosa che uno dei due capi abbia chiesto.\nIl frame, il byte di flag, e quanto costa l'escape Un frame, e i due byte che non possono mai comparire al suo interno 0x7E flag 0xFF indirizzo 0x03 controllo protocollo 1 o 2 byte payload: il tuo pacchetto IP fino alla maximum receive unit concordata FCS CRC a 16 bit 0x7E flag L'ESCAPE, L'UNICA REGOLA CHE C'È Ogni byte scambiabile per un confine diventa 0x7D seguito dal byte originale in XOR con 0x20. payload 0x7E trasmesso come 0x7D 0x5E payload 0x7D trasmesso come 0x7D 0x5D Quei due sono obbligatori. Il resto lo decide la mappa asincrona dei caratteri di controllo: 32 bit, uno per carattere. Mappa a zero: il default di pppd, e corretto su un socket Escape di due byte su 256. Un overhead che non misurerai mai. Un socket è un percorso pulito a 8 bit e non serve altro. Tutti e 32 segnati: l'impostazione prudente da modem Su payload compressi o cifrati circa un byte su otto è sotto 0x20, e raddoppia. Circa il 12% del link, per niente. Il frame è flag, indirizzo, controllo, protocollo, payload, frame check sequence, flag. Ogni byte al suo interno che potrebbe essere scambiato per un confine viene sostituito da 0x7D seguito dal byte originale in XOR con 0x20. L\u0026rsquo;ACCM decide quanti altri byte ricevono lo stesso trattamento: zero su un percorso pulito a 8 bit, trentadue se uno dei due capi chiede il default prudente che presume un modem che si mangia i caratteri di controllo. La regola dell\u0026rsquo;escape è precisa: «Each Flag Sequence, Control Escape octet, and any octet which is flagged in the sending Async-Control-Character-Map (ACCM), is replaced by a two octet sequence consisting of the Control Escape octet followed by the original octet exclusive-or\u0026rsquo;d with hexadecimal 0x20»5.\nQuell\u0026rsquo;ultima parte è la manopola di regolazione. L\u0026rsquo;ACCM è di 32 bit, uno per carattere di controllo, e un 1 significa «fai l\u0026rsquo;escape di questo». Chiedili tutti e, su payload cifrati dove i byte sono di fatto casuali, circa un byte su otto è sotto 0x20: più o meno il 12% di overhead per niente.\nIl pppd moderno qui fa già la cosa giusta. Leggi la pagina di manuale invece del folklore:\nIf no asyncmap option is given, the default is zero, so pppd will ask the peer not to escape any control characters.4\nQuindi asyncmap 0 è il default, non un trucco, e un socket è un percorso pulito a 8 bit che non ha bisogno di escape oltre ai due byte obbligatori. Lascialo stare; imposta dei bit solo quando qualcosa nel mezzo si mangia davvero i caratteri di controllo: un terminal server, un concentratore seriale, un proxy di console fatto male. La frame check sequence alla fine è un CRC a 16 bit, ed è la cosa che fa funzionare la costruzione su UDP, che è la prossima.\nTCP su TCP è il trasporto sbagliato La costruzione qui sopra funziona. Su un banco di laboratorio, in loopback o su una LAN tranquilla, funziona benissimo, ed è proprio per questo che la gente la mette in produzione.\nPoi incontra un percorso vero con perdite vere. E crolla in un modo che sembra qualsiasi cosa tranne quello che è.\nIl problema sono due timer di ritrasmissione indipendenti impilati uno sull\u0026rsquo;altro, con quello esterno che nasconde la perdita a quello interno. Olaf Titz ha scritto la spiegazione definitiva, e comincia proprio da questa costruzione:\nA frequently occurring idea for IP tunneling applications is to run a protocol like PPP, which encapsulates IP packets in a format suited for a stream transport (like a modem line), over a TCP-based connection. […] Unfortunately, it doesn\u0026rsquo;t work well. Long delays and frequent connection aborts are to be expected.6\nUn pacchetto perso, due trasporti, due esiti molto diversi Un pacchetto sparisce. Cosa fa dopo ciascun trasporto. TRASPORTO TCP: il tunnel nasconde la perdita 1 Il trasporto perde un segmento. 2 Il trasporto lo ritrasmette. I byte arrivano tardi, non mancano: ed è tutto il problema. 3 Il TCP incapsulato non vede il trasporto. Legge il ritardo come congestione, raddoppia il timer e ritrasmette dati già in viaggio sotto di lui. 4 Ora il trasporto deve l'originale e un duplicato, su un link che ha appena dimostrato di perdere pacchetti. La coda cresce più in fretta di quanto gli strati la svuotino. Il throughput crolla molto prima del link. TRASPORTO UDP: la perdita arriva allo strato che ne è padrone 1 Il trasporto scarta il pacchetto e non dice niente. 2 Il frame PPP dentro non supera il checksum e viene scartato. Il prossimo byte di flag risincronizza. 3 Il TCP incapsulato vede una perdita vera, perché per una volta gli è stata detta la verità sul percorso. 4 Dimezza la finestra e ritrasmette una volta. Il controllo di congestione fa esattamente il lavoro per cui è nato. Un pacchetto perso costa un pacchetto. Il TCP di trasporto garantisce la consegna, quindi un segmento perso viene ritrasmesso e i byte arrivano tardi invece di non arrivare. Il TCP incapsulato dentro vede solo il ritardo, decide che la rete è congestionata, rallenta e ritrasmette gli stessi dati, che ora il trasporto deve consegnare anch\u0026rsquo;essi. Il timer di ogni strato cerca di risolvere un problema che appartiene già all\u0026rsquo;altro, e la coda cresce più in fretta di quanto entrambi riescano a svuotarla. Un trasporto UDP scarta il pacchetto, il TCP interno vede una perdita vera, e il suo controllo di congestione fa il lavoro per cui è stato progettato. Ecco la forma. Entrambi i TCP impostano un timer di ritrasmissione dal loro tempo di andata e ritorno. Quando il trasporto perde un segmento lo ritrasmette, così i dati della connessione interna arrivano in ritardo. E il TCP interno, che non può vedere il trasporto, legge il ritardo come congestione e ritrasmette anche lui. Ora il trasporto ha l\u0026rsquo;originale e un duplicato da consegnare su un collegamento che sta già perdendo pacchetti. Il timer interno raddoppia, la coda esterna cresce, e il throughput crolla molto prima del collegamento. Niente nei log dice perché.\nNon è una sottigliezza di efficienza. È la differenza tra un tunnel che si degrada con garbo e uno che smette di passare traffico forse al 2% di perdita mentre ping sullo stesso percorso sembra ancora a posto. È il motivo per usare UDP, e per tenere TCP di riserva solo per un percorso che non lascia passare nient\u0026rsquo;altro.\nQuindi usa UDP, come default, non come preferenza.\nFase due: la costruzione su UDP, che è la base Stesso pppd, trasporto diverso. L\u0026rsquo;unico cambiamento è nel comando pty.\nCapo in ascolto:\npppd nodetach noauth local passive \\ nodefaultroute noipdefault \\ 192.0.2.1:192.0.2.2 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat --udp --listen 198.51.100.10 443\u0026#39; Capo che si connette:\npppd nodetach noauth local \\ nodefaultroute noipdefault \\ 192.0.2.2:192.0.2.1 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat --udp 198.51.100.10 443\u0026#39; Due cose di un listener UDP che ti fregheranno, e nessuna delle due è un problema di PPP.\nIl listener non può rispondere finché nessuno gli parla. Un socket UDP non ha una connessione da accettare, quindi netcat non può sapere dove mandare le risposte finché non arriva un datagramma. Si aggancia al primo indirizzo e porta sorgente che sente e parla con quello. Questo significa che il capo che si connette deve mandare per primo, e pppd lo fa da solo, perché il capo non passivo comincia subito a sparare configure-request LCP. Significa anche che se la porta sorgente del client cambia, il trasporto sta parlando in silenzio con il posto sbagliato. Dietro un NAT con un timeout UDP breve, è un tunnel che muore ogni pochi minuti senza un motivo visibile.\n--keep-open non fa quello che vuoi su UDP. Il -k di Ncat mantiene un listener TCP pronto ad accettare dopo che un peer se n\u0026rsquo;è andato. Su UDP non c\u0026rsquo;è niente da accettare, quindi ripartire vuol dire riavviare il trasporto, ed è a questo che servono persist e holdoff, più giù.\nEntrambe sono argomenti a favore di socat, che gestisce i peer UDP con più cura, e di un supervisore invece di fidarsi che resti su da solo.\nPerché PPP sopravvive a un datagramma perso L\u0026rsquo;obiezione ovvia a un trasporto UDP è che PPP si aspetta un flusso di byte e UDP non lo è: i datagrammi arrivano interi o non arrivano, e possono arrivare fuori ordine. Funziona lo stesso, grazie a due byte che il framing si è sempre portato dietro.\nUn datagramma perso costa un frame, e il prossimo byte di flag recupera il link I confini non si allineano, e non importa FRAME PPP COME LI HA SCRITTI pppd 7E frame A + FCS 7E frame B + FCS 7E frame C + FCS 7E frame D + FCS COSA HA MANDATO DAVVERO IL TRASPORTO: netcat legge un buffer, non un frame datagramma 1 datagramma 2: perso datagramma 3 datagramma 4 Il frame B perde il centro, il checksum fallisce e viene scartato. Il frame C perde i byte iniziali e fa la stessa fine. Due frame persi sono due pacchetti IP persi. Lo strato sopra li ritrasmette, e sa che il percorso ha perso qualcosa: proprio il segnale che un trasporto TCP avrebbe nascosto consegnandoli in ritardo. Netcat legge quello che c\u0026rsquo;è nel buffer e lo scrive in un datagramma, quindi i confini dei frame e quelli dei datagrammi non hanno niente a che fare tra loro. Perdi un datagramma e il ricevente vede un frame a cui mancano dei byte: la frame check sequence fallisce e il frame viene scartato, esattamente come su una linea seriale rumorosa. Il prossimo 0x7E risincronizza il flusso. Un frame perso costa un pacchetto, e lo strato sopra lo ritrasmette: è il segnale di perdita di cui il TCP interno aveva bisogno e che su un trasporto TCP non ha mai ricevuto. PPP su HDLC asincrono è stato progettato per una linea che corrompe i byte. Ogni frame porta una frame check sequence a 16 bit; un frame che non la supera viene scartato, e il prossimo byte di flag risincronizza il ricevente. Il riordino è più raro della perdita e produce lo stesso risultato: una FCS sbagliata, un frame scartato, una risincronizzazione.\nQuindi un datagramma perso costa un frame PPP, cioè un pacchetto IP, la condizione normale di ogni rete mai costruita. Il proprietario del pacchetto lo ritrasmette, e il controllo di congestione vede una perdita vera e reagisce correttamente. Questo è tutto l\u0026rsquo;argomento a favore di UDP: lascia che il traffico dentro il tunnel scopra la verità sul percorso.\nPerò non lasciare che i frame diventino così grandi da dover essere frammentati dal trasporto. A quel punto un frammento perso uccide l\u0026rsquo;intero datagramma e il tuo tasso di perdita effettivo si moltiplica. Tieni l\u0026rsquo;MTU di PPP ben sotto l\u0026rsquo;MTU del percorso.\nIndirizzi, route, e IPv6 fatto come si deve ppp0 è un\u0026rsquo;interfaccia punto-punto (niente subnet, niente ARP), quindi local:remote è tutto l\u0026rsquo;indirizzamento e attraverso di essa instradi in modo esplicito. Per un singolo host che deve raggiungere una rete dietro il capo lontano:\n# on the client, after the link is up ip route add 203.0.113.0/24 via 192.0.2.1 dev ppp0 Perché il capo lontano inoltri per conto del client, i soliti due passi:\nsysctl -w net.ipv4.ip_forward=1 nft add rule inet nat postrouting oifname \u0026#34;eth0\u0026#34; ip saddr 192.0.2.2/32 masquerade proxyarp farà rispondere il server alle richieste ARP per il client sul suo stesso segmento4, cosa carina finché un secondo client non vuole lo stesso. Poi fai la parte che quasi tutti saltano. Fai girare IPv6 sopra: un collegamento punto-punto senza NAT, senza dominio di broadcast e senza scarsità di indirizzi è il posto più facile della tua rete per fare IPv6 come si deve:\npppd nodetach noauth local \\ +ipv6 ipv6 ::1,::2 \\ nodefaultroute noipdefault \\ 192.0.2.2:192.0.2.1 \\ pty \u0026#39;ncat --udp 198.51.100.10 443\u0026#39; +ipv6 abilita IPV6CP; ipv6 \u0026lt;local\u0026gt;,\u0026lt;remote\u0026gt; imposta i due identificatori di interfaccia a 64 bit4, il collegamento sale con indirizzi link-local, e tu aggiungi un /64 globale sopra7. IPV6CP è indipendente da IPCP8, quindi noip non porta altro che IPv6: una cosa ragionevole da costruire nel 2026, in una parola.\nTenerlo su quando il trasporto muore in silenzio Questo è il guasto che fa perdere un pomeriggio, quindi ha una sezione tutta sua.\nUn trasporto TCP che muore male (il capo lontano spento, una voce della tabella NAT scaduta, un middlebox che ha smesso di inoltrare) non si chiude. Niente FIN, niente RST, niente di niente. Netcat se ne sta lì con un socket che non consegnerà mai più un byte, pppd se ne sta lì con una pty che non vedrà mai più un frame, e ip link riporta allegramente ppp0 come UP. Un trasporto UDP non ha alcuno stato di connessione, quindi non si accorge mai di niente.\nPPP ha la risposta già dentro, ed è disattivata di default:\nlcp-echo-interval 10 lcp-echo-failure 3 Questo manda un echo LCP ogni dieci secondi e butta giù il collegamento dopo tre senza risposta4: trenta secondi per accorgersi di un trasporto morto, esattamente nel caso che nomina la pagina di manuale, «no hardware modem control lines»4, cioè ogni pty mai creata. Poi decidi cosa succede dopo:\npersist maxfail 0 holdoff 5 Rilevare un trasporto morto in trenta secondi, e ricostruirlo Un trasporto può morire senza chiudersi. Ecco come PPP se ne accorge, e riparte. Il trasporto muore in silenzio capo lontano spento · voce NAT sparita · un middlebox smette di inoltrare Nessuno lo segnala niente FIN, niente RST · ip link dice ancora ppp0 UP · UDP non ha stato Il rilevatore lcp-echo-interval 10 lcp-echo-failure 3 echo ogni 10 s, giù dopo 3 mancati: 30 s La ricostruzione persist maxfail 0 holdoff 5 riparti, mai arrendersi, 5 s tra un tentativo e l'altro Un solo supervisore unit systemd, Restart=always, pppd rilancia il comando pty: netcat e socket nuovi insieme Imposta l'echo su entrambi i capi. Un echo dimostra solo il percorso da cui è tornata la risposta. Metti `ip route` in /etc/ppp/ip-up.d/ e le route IPv6 in /etc/ppp/ipv6-up.d/, così l'instradamento si riapplica a ogni ritorno del link, invece di impostarlo una volta a mano e perderlo alla prima riconnessione. lcp-echo-interval 10 lcp-echo-failure 3 è il rilevatore: un echo ogni dieci secondi, collegamento giù dopo tre mancati. persist maxfail 0 holdoff 5 è la ricostruzione: riparti, non arrenderti mai, aspetta cinque secondi così un percorso che sfarfalla non diventa una fork bomb, e pppd rilancia il comando pty, quindi arrivano anche un netcat e un socket nuovi. Imposta l\u0026rsquo;echo su entrambi i capi; un solo supervisore, una unit systemd con Restart=always, è meglio di due processi che litigano. Metti ip route in /etc/ppp/ip-up.d/ così l\u0026rsquo;instradamento torna con il collegamento. Non ha cifratura e non ha autenticazione Tutto quello che c\u0026rsquo;è sopra è un tunnel funzionante. Non è un tunnel sicuro, e la lacuna non è un dettaglio.\nNon c\u0026rsquo;è cifratura. Non una cifratura debole. Nessuna. Ogni pacchetto che ci fai passare è sul filo in chiaro, avvolto in un frame HDLC che qualsiasi strumento di cattura decodifica a colpo d\u0026rsquo;occhio. tcpdump ti mostrerà il contenuto del tunnel di qualcun altro con la stessa facilità del tuo.\nNon c\u0026rsquo;è autenticazione del peer. noauth lo dice chiaramente. Un listener netcat accetta qualsiasi cosa arrivi sulla porta: la prima connessione o il primo datagramma da qualunque parte. Chi arriva per primo si prende un collegamento instradato dentro la tua rete. PPP l\u0026rsquo;autenticazione ce l\u0026rsquo;ha (PAP in chiaro, CHAP come challenge-response9), ed entrambi dimostrano chi è il peer senza cifrare un solo byte di quello che segue: con CHAP qui ottieni un tunnel che sa con chi sta parlando e continua a pubblicarne il contenuto a chiunque stia sul percorso.\nNella famiglia PPP c\u0026rsquo;è un\u0026rsquo;opzione di cifratura: MPPE10, il modulo che sta in ppp_mppe.ko. Non prenderla in considerazione: è RC4 con la chiave derivata dallo scambio MS-CHAPv2, rotto pubblicamente da oltre dieci anni, ed è il motivo per cui PPTP è morto. Costruirci sopra un tunnel nuovo nel 2026 significa scegliere un cifrario notoriamente rotto al posto di uno funzionante che non costa niente.\nQuindi il riassunto onesto, finora: un collegamento instradato senza riservatezza e senza controllo d\u0026rsquo;accesso. Va bene in laboratorio, va bene dentro un collegamento già cifrato, non va bene da nessun\u0026rsquo;altra parte. Il rimedio è cifrare il trasporto: le prossime due sezioni, e il motivo per usare ncat invece di qualsiasi netcat abbia messo la tua distribuzione.\nFase tre: avvolgere il trasporto in TLS La risposta pulita lascia pppd esattamente com\u0026rsquo;è e sostituisce il trasporto con uno che fa TLS. pppd non viene mai a sapere che è cambiato qualcosa.\nPrima il certificato. Uno autofirmato basta, a patto che il client lo verifichi. Una sessione TLS non verificata è una conversazione cifrata con qualcuno che non hai identificato, e questo non ferma nessuno:\nopenssl req -x509 -newkey rsa:4096 -days 825 -nodes \\ -keyout tunnel.key -out tunnel.crt \\ -subj \u0026#34;/CN=tunnel.example.net\u0026#34; \\ -addext \u0026#34;subjectAltName=DNS:tunnel.example.net\u0026#34; Ncat Ncat ha TLS integrato. Sa anche concatenarsi attraverso un proxy, --proxy host:port --proxy-type http|socks4|socks511, quindi il trasporto può terminare su un relay invece che sul capo lontano del tunnel. È il punto su cui gira la sezione sull\u0026rsquo;egress. Capo in ascolto:\npppd nodetach noauth local passive \\ nodefaultroute noipdefault 192.0.2.1:192.0.2.2 \\ lcp-echo-interval 10 lcp-echo-failure 3 mtu 1400 mru 1400 \\ pty \u0026#39;ncat --listen --keep-open --ssl --ssl-cert tunnel.crt --ssl-key tunnel.key 443\u0026#39; Capo che si connette:\npppd nodetach noauth local \\ nodefaultroute noipdefault 192.0.2.2:192.0.2.1 \\ lcp-echo-interval 10 lcp-echo-failure 3 mtu 1400 mru 1400 \\ pty \u0026#39;ncat --ssl --ssl-verify --ssl-trustfile tunnel.crt tunnel.example.net 443\u0026#39; --ssl-verify è la parola che conta. Senza, --ssl ti dà cifratura contro chi ascolta passivamente e niente contro chi risponde per primo sulla porta; con essa, Ncat verifica la fiducia e il nome di dominio rispetto al file di trust12. Però Ncat non ha un controllo del certificato client lato server, quindi il server non può identificare il client. Abbinalo a CHAP, oppure usa uno dei due successivi.\nStunnel Il wrapper tradizionale, e quello che fa l\u0026rsquo;autenticazione reciproca come si deve:\n[ppp] accept = 443 connect = 127.0.0.1:6001 cert = /etc/stunnel/tunnel.crt key = /etc/stunnel/tunnel.key CAfile = /etc/stunnel/clients.crt verify = 2 verify = 2 richiede un certificato client firmato da una CA presente in CAfile: il controllo d\u0026rsquo;accesso che la costruzione con netcat non ha mai avuto. Il client fa girare stunnel in modalità client, e il comando pty di pppd si connette al lato in chiaro locale.\nSocat socat fa tutto in un solo processo per capo, con la verifica attiva di default:\n# listening end pppd ... pty \u0026#39;socat - OPENSSL-LISTEN:443,reuseaddr,cert=tunnel.pem,cafile=clients.crt,verify=1\u0026#39; # connecting end pppd ... pty \u0026#39;socat - OPENSSL:tunnel.example.net:443,cafile=tunnel.crt,verify=1\u0026#39; socat non è installato sulla macchina su cui è stato scritto questo articolo, quindi quella parte viene dalla sua documentazione: controlla le tue opzioni. È quello che sceglierei io, perché è l\u0026rsquo;unico dei quattro che parla anche DTLS.\nOpenssl, quando non c\u0026rsquo;è nient\u0026rsquo;altro openssl c\u0026rsquo;è su ogni macchina che abbia TLS, e s_server/s_client sanno portare una pipe:\n# listening end pppd ... pty \u0026#39;openssl s_server -quiet -accept 443 -cert tunnel.crt -key tunnel.key\u0026#39; # connecting end pppd ... pty \u0026#39;openssl s_client -quiet -verify_return_error -CAfile tunnel.crt -connect tunnel.example.net:443\u0026#39; -quiet sopprime il banner che altrimenti finirebbe nel tuo flusso PPP, e -verify_return_error fa sì che un errore di verifica chiuda la connessione invece di avvisare e andare avanti. Sono strumenti di debug e si comportano da tali, ma su una macchina dove non puoi installare niente tirano su un collegamento.\nIn chiaro, TLS su TCP, o DTLS su UDP Stessa metà di collegamento ai due capi. Cambia solo il mezzo. pppd o tap0 netcat liscio, UDP ncat --udp --listen 6000 pppd o tap0 In chiaro sul filo, e il listener prende chi arriva per primo alla porta. Niente riservatezza, niente controllo d'accesso. pppd o tap0 TLS su TCP: ncat, stunnel o openssl ncat --ssl --ssl-verify --ssl-trustfile tunnel.crt host 6000 pppd o tap0 Protetto, e il certificato dice chi è il capo lontano. Ma il trasporto è di nuovo TCP, ed è l'unica forma che comprime il flusso. pppd o tap0 DTLS su UDP: socat o openssl socat - OPENSSL-DTLS-CLIENT:host:6000,cafile=tunnel.crt,verify=1 pppd o tap0 Cifrato, autenticato, e ancora a datagrammi. Un pacchetto perso resta perso invece di far litigare due stack. Punta qui. Lo stesso pppd su entrambi i capi dall\u0026rsquo;inizio alla fine: cambia solo il comando pty. Netcat liscio ti dà un collegamento senza niente a proteggerlo. TLS su TCP protegge i byte e reintroduce il problema del TCP di trasporto. DTLS su UDP è la forma a cui puntare: cifrato, autenticato, e ancora un trasporto a datagrammi, così un pacchetto perso resta un pacchetto perso invece di diventare una lotta di ritrasmissioni tra due stack. Fase quattro: DTLS, perché il trasporto deve restare UDP Ecco la parte scomoda, e il motivo per cui questa sezione è separata. Ogni opzione TLS qui sopra gira su TCP, quindi avvolgere il trasporto in TLS annulla l\u0026rsquo;argomento a favore di UDP e ti restituisce il crollo. Cifratura e trasporto giusto non dovrebbero essere un compromesso. DTLS è TLS su datagrammi, ed è quello che vuoi: mantiene la protezione del record layer, abbandona le garanzie di ordine e di ritrasmissione, e lascia persi i pacchetti persi, che è esattamente quello che la frame check sequence di PPP è fatta per assorbire.\nNcat non lo sa fare. socat e openssl sì:\n# listening end pppd ... pty \u0026#39;socat - OPENSSL-DTLS-LISTEN:443,cert=tunnel.pem,cafile=clients.crt,verify=1\u0026#39; # connecting end pppd ... pty \u0026#39;socat - OPENSSL-DTLS-CLIENT:tunnel.example.net:443,cafile=tunnel.crt,verify=1\u0026#39; E con il solo openssl, dove -dtls seleziona qualsiasi versione di DTLS:\n# listening end pppd ... pty \u0026#39;openssl s_server -quiet -dtls -accept 443 -cert tunnel.crt -key tunnel.key\u0026#39; # connecting end pppd ... pty \u0026#39;openssl s_client -quiet -dtls -verify_return_error -CAfile tunnel.crt -connect tunnel.example.net:443\u0026#39; Attento al dimensionamento dei frame. Un record DTLS non può essere frammentato come un record TLS si distribuisce su un flusso TCP, quindi tutto deve stare nell\u0026rsquo;MTU del percorso in un colpo solo.\nLa pila dell'overhead, e l'MTU interno che resta Scendi dall'MTU del percorso, e usa quello che resta intestazione IP20 (v4) / 40 (v6) intestazione UDP8 record DTLS + tag≈ 30 framing PPP / Ethernetpochi MTU interno, quello che il tunnel può portare: punta a 1400, minimo 1280 Un record DTLS non si frammenta come un record TLS su un flusso TCP, quindi tutto questo deve stare nell'MTU del percorso. Stessa forma di OpenVPN dal 2001: trasporto a datagrammi, DTLS, interfaccia virtuale sopra. Non eccentrico; solo scomposto. Scendi da 1500: 20 byte di intestazione IPv4 o 40 di IPv6, 8 di UDP, circa 30 per il record DTLS e il suo tag, qualcuno per il framing, e il resto è l\u0026rsquo;MTU interno che il tunnel può portare. Punta a 1400 su un percorso normale; 1280 è il minimo sicuro se qualcosa nel mezzo è a sua volta un tunnel. Questa forma (un trasporto a datagrammi, DTLS, un\u0026rsquo;interfaccia virtuale sopra) è più o meno quello che OpenVPN fa dal 2001. Non è eccentrica; è solo scomposta. Mettere a punto la costruzione PPP: MTU, compressione, e cosa aiuta davvero Quattro manopole, tutte opzioni di pppd. La costruzione con tap nella prossima sezione non ne ha nessuna, perché non ha nessuno dei meccanismi che configurano.\nQuattro manopole di pppd: una da impostare, una da lasciare, due da spegnere Una da impostare, una da lasciare, due da spegnere IMPOSTALA MTU e MRU Entrambi i capi, con margine: 1400 semplice, 1280 sotto un tunnel. Un frame frammentato perde un pacchetto intero. LASCIALA ACCM Già a zero di default, giusto su un socket pulito. Toccala solo se qualcosa mangia i caratteri di controllo. SPEGNILE novj compressione delle intestazioni Van Jacobson Risparmia un arrotondamento su un link veloce, costa CPU per pacchetto, si rompe con le perdite. Spenta sopra il modem. SPEGNILE nodeflate nobsdcomp Il payload è già TLS/DTLS: comprimere testo cifrato è lavoro puro e, oltre un confine di sicurezza, un attacco. Nessuna rende il tunnel più veloce. PPP non è il collo di bottiglia: PPPoE fa 2 Gbit con lo stesso demone, perché i suoi dati restano nel kernel. Qui il costo è la pty: ogni byte va nello spazio utente e torna. È colpa dello pseudo-terminale, non di PPP. MTU e MRU è quella che conta: impostali entrambi su entrambi i capi con un margine, perché un frame che il trasporto deve frammentare perde un intero pacchetto a ogni perdita. L\u0026rsquo;ACCM è già a zero e corretto su un socket pulito. Spegni la compressione delle intestazioni di Van Jacobson con novj oltre la velocità di un modem: fa risparmiare un errore di arrotondamento, costa CPU per pacchetto e si rompe con le perdite. Spegni deflate/bsdcomp: il payload è già cifrato, e comprimere attraverso un confine di sicurezza è un attacco, non una funzione. Niente di tutto questo rende il tunnel più veloce, e il motivo conta perché la colpa se la prende PPP e non dovrebbe. PPP non è il collo di bottiglia. PPPoE porta 2 Gbit con lo stesso demone, perché il suo percorso dati non lascia mai il kernel: ppp_generic e pppoe fanno il framing e l\u0026rsquo;inoltro, e pppd gestisce solo il piano di controllo. Quello che qui ti costa è la pty: ogni byte passa nello spazio utente, attraverso netcat, in un socket e ritorno, un giro che PPPoE non fa mai. Quello appartiene allo pseudo-terminale, non a PPP.\nChe è un buon momento per guardare l\u0026rsquo;altro modo di farlo, dove una pty non c\u0026rsquo;è proprio.\nL\u0026rsquo;altro modo: un dispositivo tap, e niente PPP Tutto finora ha usato PPP per la metà del collegamento. C\u0026rsquo;è un secondo modo per creare un\u0026rsquo;interfaccia virtuale, e non serve alcun protocollo.\nIl driver TUN/TAP del kernel ti dà un\u0026rsquo;interfaccia e un file descriptor legati insieme: scrivi un pacchetto nel descriptor e compare sull\u0026rsquo;interfaccia come se arrivasse da un cavo; leggi e ottieni un pacchetto che il kernel voleva mandare. Questa è l\u0026rsquo;intera interfaccia13, ed è in Linux dal 1999.\nip tuntap add dev tap0 mode tap user damien group damien ip link set tap0 mtu 1400 up ip addr add 192.0.2.1/30 dev tap0 Un dispositivo tap è un'interfaccia da un lato e un file descriptor dall'altro Nessun demone, nessun protocollo, nessuno pseudo-terminale. Un file descriptor. KERNEL tap0 un'interfaccia normale, con indirizzo e route /dev/net/tun TUNSETIFF dà il nome al dispositivo il tuo processo socat, o cinquanta righe di Python che tengono il fd socket UDP un frame per datagramma la rete e il capo lontano una lettura = un frame Cosa manca rispetto a PPP: nessuna dimensione di frame negoziata, nessun controllo di vitalità, niente indirizzi, niente autenticazione. Configuri a mano entrambi i capi e non ne discutono mai. Nessuno sorveglia il link, quindi nessuno ti dirà che è morto. Nessun demone e nessun protocollo. Il kernel presenta tap0 come un\u0026rsquo;interfaccia normale e passa l\u0026rsquo;altro lato al processo che ha aperto /dev/net/tun. Una lettura restituisce esattamente un frame Ethernet; una scrittura ne inietta esattamente uno. Tutto quello che pppd negoziava (indirizzi, dimensioni dei frame, vitalità) ora lo configuri a mano su entrambi i capi, e i due capi non ne discutono mai. Due dettagli in quel primo comando valgono più di quanto sembri.\nuser damien rende il dispositivo persistente e non privilegiato. Creato così, sopravvive al processo che lo usa, e un utente indicato può aprirlo senza essere root. Root crea il dispositivo una volta; la cosa che spala i frame non ha bisogno di root. Tieni a mente questo per la sezione sull\u0026rsquo;egress.\nmode tun è l\u0026rsquo;altra metà dello stesso driver, ed è quella che la maggior parte della gente vuole davvero. Tun porta pacchetti IP. Tap porta frame Ethernet. La differenza conta abbastanza da avere una sezione sua, più giù.\nQuello a cui rinunci rispetto a PPP è tutto ciò che PPP negozia: niente LCP, quindi nessuna dimensione di frame concordata e nessun controllo di vitalità, niente IPCP/IPV6CP, quindi entrambi i capi configurati a mano, niente autenticazione, niente compressione delle intestazioni. Un dispositivo tap è un buco nel kernel, e il protocollo che ci passa è quello che ci metti tu. Quello che guadagni è nessun overhead di framing, nessun escape, nessun canale di controllo, e un\u0026rsquo;interfaccia che si può mettere in bridge.\nTap su UDP, dove un datagramma è un frame Questa è la corrispondenza più pulita di tutto l\u0026rsquo;articolo, e viene fuori dal progetto stesso. Un dispositivo tap è un dispositivo a datagrammi (una read() restituisce esattamente un frame) e un socket UDP è un socket a datagrammi, una sendto() per datagramma. Quindi un frame va in un datagramma, arriva come frame, e non c\u0026rsquo;è niente da delimitare, bufferizzare o risincronizzare. Perdi un datagramma e hai perso un frame, che è comunque l\u0026rsquo;aspetto di un pacchetto scartato.\nCon socat, entrambi i capi sono un comando ciascuno:\n# listening end socat TUN:192.0.2.1/30,tun-type=tap,tun-name=tap0,iff-up UDP-LISTEN:443 # connecting end socat TUN:192.0.2.2/30,tun-type=tap,tun-name=tap0,iff-up UDP:198.51.100.10:443 socat non è installato sulla macchina su cui è stato scritto questo articolo, quindi quei due vengono dalla sua documentazione e non da un\u0026rsquo;esecuzione qui: controlla i nomi degli indirizzi della tua versione prima di fidarti. Vale la pena averlo: è l\u0026rsquo;unico strumento in questo articolo che fa tun, tap, TLS e DTLS in un solo processo.\nDove non puoi installare niente, tutto il lavoro sta in una cinquantina di righe senza dipendenze oltre la libreria standard. Il cuore è questo, con IFF_NO_PI che spegne l\u0026rsquo;intestazione di quattro byte che il driver altrimenti metterebbe davanti:\nTUNSETIFF, IFF_TAP, IFF_NO_PI = 0x400454CA, 0x0002, 0x1000 # IFF_TUN is 0x0001 def open_tap(name): fd = os.open(\u0026#34;/dev/net/tun\u0026#34;, os.O_RDWR) fcntl.ioctl(fd, TUNSETIFF, struct.pack(\u0026#34;16sH\u0026#34;, name.encode(), IFF_TAP | IFF_NO_PI)) return fd # ... learn the peer from the first datagram (UDP has no accept), then shovel: while True: ready, _, _ = select.select([tap, sock], [], []) if tap in ready and peer: sock.sendto(os.read(tap, MTU), peer) # one read = one frame = one datagram if sock in ready: frame, src = sock.recvfrom(MTU) peer = src # last speaker wins — see the note below if frame: os.write(tap, frame) Il file completo (analisi degli argomenti, IPv6 tramite getaddrinfo, il datagramma di lunghezza zero che dice a un listener UDP dove rispondere, e la compressione che aggiunge la prossima sezione) è nel bundle:\n\u0026#8615; tapcat.py: tutto quanto, un centinaio di righe tapcat.py · 6 kB peer = src a ogni datagramma è la parte da leggere due volte. Chi ha mandato l\u0026rsquo;ultimo frame diventa il peer. Comodo dietro un NAT la cui porta sorgente continua a spostarsi, e una porta aperta su una rete non fidata, dove chiunque possa mandare un datagramma alla porta si prende il tunnel. Va bene dentro una sessione DTLS, che è dove si va a parare; non va bene da solo. La metà socket dello script è stata provata qui in loopback IPv6: l\u0026rsquo;apertura arriva, il listener impara il peer, un frame attraversa e la risposta torna indietro; la metà tap richiede root, l\u0026rsquo;unica parte che non ho potuto far girare.\nSu TCP il framing devi inventartelo da solo Ora sostituisci il trasporto con TCP e guarda comparire un intero problema che PPP aveva risolto in silenzio nel 1994.\nTCP è un flusso di byte senza confini di record e senza alcuna promessa su come i byte siano raggruppati all\u0026rsquo;arrivo: due frame scritti uno dopo l\u0026rsquo;altro possono arrivare in una sola lettura, un frame in tre. Il ricevente si ritrova con un mucchio di byte senza sapere dove finisce un frame, e un dispositivo tap accetta solo frame interi.\nUn datagramma per frame, o un prefisso di lunghezza da inventare Una lettura da un dispositivo tap è un frame. Mantenerlo così è compito del trasporto. SU UDP: il confine è gratis datagramma = frame A datagramma = frame B datagramma = frame C datagramma = frame D Una lettura, un datagramma, una scrittura dall'altra parte. Niente da delimitare, da bufferizzare o da risincronizzare. SU TCP: i confini spariscono e devi rimetterli tu un flusso di byte: due frame possono arrivare in una lettura, un frame in tre len frame A len frame B len frame C len frame D Due byte di lunghezza big-endian davanti a ogni frame, e un ricevente che legge la lunghezza e poi esattamente quei byte. Funziona, ma non si riprende. HDLC si risincronizza al prossimo 0x7E perché un flag non è ambiguo; un flusso a lunghezza che perde il segno legge ogni lunghezza successiva in mezzo a un frame. Aggiungi marcatore e checksum per rimediare e hai rifatto HDLC. Su UDP, un frame è un datagramma e il confine viene gratis. Su TCP i confini spariscono, quindi chi manda deve aggiungere un prefisso di lunghezza a ogni frame e chi riceve deve ricomporli in base a quello. PPP non ha questo problema perché si porta il suo framing (un byte di flag a ogni capo e un checksum), che è anche ciò che gli permette di risincronizzarsi dopo un danno. Un flusso con prefisso di lunghezza non può: sfasa un byte e ogni frame dopo è sbagliato. Quindi su TCP scrivi il tuo framing. Due byte di lunghezza big-endian davanti a ogni frame sono la risposta solita:\n# sending sock.sendall(struct.pack(\u0026#34;!H\u0026#34;, len(frame)) + frame) # receiving def recv_exactly(sock, n): buf = b\u0026#34;\u0026#34; while len(buf) \u0026lt; n: chunk = sock.recv(n - len(buf)) if not chunk: raise ConnectionError(\u0026#34;carrier closed\u0026#34;) buf += chunk return buf length = struct.unpack(\u0026#34;!H\u0026#34;, recv_exactly(sock, 2))[0] frame = recv_exactly(sock, length) Funziona, ed è strettamente peggio della versione UDP. È di nuovo il problema TCP su TCP; aggiunge due byte e un ciclo di riassemblaggio per frame; e non ha modo di riprendersi da un errore, perché un flusso con prefisso di lunghezza che perde il segno legge ogni lunghezza successiva in mezzo a un frame. HDLC si risincronizza al prossimo 0x7E; questo no, a meno di reinventare HDLC, e peggio. Terzo argomento a favore di UDP, e il più forte: su un trasporto a datagrammi non c\u0026rsquo;è un problema di framing, perché il trasporto ha già l\u0026rsquo;unica funzione che ti serviva.\nTun o tap: livello 3, a meno che tu non abbia davvero bisogno del livello 2 Lo stesso driver ti dà due dispositivi, e la gente sceglie continuamente quello sbagliato perché un tutorial ha detto tap.\ntun tap Cosa passa pacchetti IP frame Ethernet Overhead per pacchetto nessuno intestazione Ethernet di 14 byte ARP, DHCP, broadcast no sì, tutto quanto, attraverso il tunnel Protocolli non IP no sì Può entrare in un bridge no sì Equivale a un collegamento punto-punto, come ppp0 un cavo di rete Tun è un collegamento instradato, come l\u0026rsquo;interfaccia PPP della prima metà: due indirizzi, una route, pacchetti che entrano ed escono. Tap è un cavo Ethernet virtuale, quindi ogni broadcast, ogni richiesta ARP e ogni briciola di rumore multicast del segmento ora attraversa il tuo tunnel e brucia banda.\nCambia una riga nello script per passare dall\u0026rsquo;uno all\u0026rsquo;altro:\nIFF_TUN = 0x0001 # instead of IFF_TAP Usa tap quando hai davvero bisogno del livello 2. I motivi veri ci sono: un protocollo che non è IP, un heartbeat di cluster che si aspetta di vedere i broadcast, un server DHCP che deve raggiungere i client attraverso il tunnel, o mettere in bridge due segmenti per farne uno.\nQuest\u0026rsquo;ultimo è il caso comune, e quello a cui stare attenti:\nip link add br0 type bridge ip link set tap0 master br0 ip link set eth1 master br0 ip link set br0 up Ora il segmento remoto fa parte di quello locale: i suoi broadcast, il suo spanning tree, il suo via vai di MAC e, se qualcuno è stato distratto, il suo server DHCP. Mettere in bridge due sedi che usano entrambe 192.168.1.0/24 è un brutto pomeriggio; uno che torna in loop sullo stesso segmento è una brutta settimana. Di default usa tun, passa a tap quando sai nominare la cosa di livello 2 che ti serve, e fai il bridge solo dopo aver controllato cosa fa broadcast su entrambi i lati.\nGli stessi wrapper, un processo per capo La costruzione con tap ha lo stesso buco di quella con PPP: il trasporto è in chiaro e il listener accetta chi arriva per primo. Il rimedio è lo stesso, e con socat si riduce a un comando per capo, perché crea il dispositivo e termina la sessione DTLS in un solo processo:\n# listening end socat TUN:192.0.2.1/30,tun-type=tap,tun-name=tap0,iff-up \\ OPENSSL-DTLS-LISTEN:443,cert=tunnel.pem,cafile=clients.crt,verify=1 # connecting end socat TUN:192.0.2.2/30,tun-type=tap,tun-name=tap0,iff-up \\ OPENSSL-DTLS-CLIENT:tunnel.example.net:443,cafile=tunnel.crt,verify=1 Questa è la costruzione corretta più corta di tutto l\u0026rsquo;articolo. Un\u0026rsquo;interfaccia virtuale, un trasporto a datagrammi, autenticazione reciproca con certificati e cifratura. Due comandi. Nessun demone, nessuna negoziazione di protocollo.\nverify=1 non è facoltativo: è lo stesso punto di --ssl-verify, e con il comportamento di peer = src visto sopra, una parte non identificata è a un datagramma dal prendersi il tuo tunnel. Se sei bloccato con lo script Python, non ficcarci dentro TLS: puntalo su una porta di loopback e metti il wrapper davanti, oppure usa socat. Un wrapper TLS fatto a mano attorno a un tunnel fatto a mano sono due occasioni per sbagliare la parte interessante.\nFase cinque: comprimere il flusso con zstd C\u0026rsquo;è un\u0026rsquo;altra cosa che vale la pena mettere nel backend, e a differenza delle opzioni di compressione di pppd può ripagare davvero: comprimere i frame con zstd prima che entrino nel trasporto.\nLa parola importante lì è frame, al plurale. Comprimi il flusso, non ogni pacchetto per conto suo. È l\u0026rsquo;effetto misurato più grande di tutto l\u0026rsquo;articolo.\nIl traffico di rete è ripetitivo in un modo che si vede solo tra un pacchetto e l\u0026rsquo;altro: le stesse intestazioni, gli stessi nomi host e le stesse chiavi JSON, ancora e ancora. Un compressore che riparte da zero a ogni frame di 1.400 byte non vede niente di tutto ciò; uno che mantiene la sua finestra tra un frame e l\u0026rsquo;altro lo vede tutto.\nComprimi prima di cifrare, e tieni la finestra se il trasporto lo consente L'ordine è fisso. La modalità è la scelta. tap0una lettura, un frame comprimizstd, livello 1 cifraDTLS, o TLS trasportoUDP, o TCP Mai al contrario. FLUSH_BLOCK: tieni la finestra Emette tutto finora, tiene la storia. Ogni frame è codificato rispetto a quelli prima. Nessuna latenza in più: un frame dentro, un frame fuori. 5,0% sul traffico ripetitivo · 7,5% sui log Serve ogni frame consegnato, in ordine. Quindi: TCP, o TLS su TCP. Non UDP, non DTLS. FLUSH_FRAME: buttala a ogni pacchetto Ogni datagramma è un frame zstd completo e si decodifica da solo: il datagramma N va anche se da 1 a N-1 sono persi. L'unica modalità per un trasporto a datagrammi. 14,8% sullo stesso traffico · 24,2% sui log Un dizionario addestrato ne recupera gran parte: 5,3% e 15,1%, e resta tollerante alle perdite. La compressione va tra il dispositivo tap e il trasporto, e prima della cifratura, perché il testo cifrato non si comprime. FLUSH_BLOCK è la modalità che conta: emette tutto quello che c\u0026rsquo;è finora, quindi un frame dentro dà un frame fuori senza latenza aggiunta, mantenendo la storia della compressione per il frame successivo. FLUSH_FRAME butta via quella storia a ogni pacchetto, ed è ciò che lo rende sicuro su un trasporto con perdite e ciò che lo rende tre volte peggiore sul filo. Su una Fedora attuale non serve installare niente: Python 3.14 ha portato zstd nella libreria standard14; questa macchina ha la 3.14.7 con zstd 1.5.7:\nfrom compression.zstd import ZstdCompressor, ZstdDecompressor # Python 3.14+ _c, _d = ZstdCompressor(level=1), ZstdDecompressor() # FLUSH_BLOCK: emit everything so far, keep the window for the next frame. out = _c.compress(frame, mode=ZstdCompressor.FLUSH_BLOCK) frame = _d.decompress(out) Un compressore per direzione, vivo per tutta la durata del collegamento. Un FLUSH_BLOCK per frame, così un frame esce nel momento in cui arriva senza niente in buffer, e il capo lontano restituisce un frame per blocco.\nQuanto vale la finestra, misurato Numeri da questa macchina. Stessi frame da 1.400 byte, stesso livello 1, e l\u0026rsquo;unica differenza è se il compressore mantiene la sua storia:\nTraffico nel tunnel flusso, FLUSH_BLOCK per pacchetto, FLUSH_FRAME per pacchetto con dizionario addestrato Chiamate API e telemetria ripetitive 5,0% 14,8% 5,3% Righe di log 7,5% 24,2% 15,1% Testo semplice e file di configurazione 37,8% 51,3% 45,3% Byte casuali, al posto di TLS 100%+ 100,7% n/d Il throughput al livello 1 è stato di 205 MB/s sul testo e oltre 1 GB/s sul traffico ripetitivo: più è comprimibile, più è veloce, perché c\u0026rsquo;è meno da codificare.\nIl traffico di log scende al 7,5% della sua dimensione originale, contro il 24,2% per pacchetto: un fattore tre, stessi dati, stesso livello, grazie a un\u0026rsquo;opzione. E il livello giusto è l'1: il livello 3 ha guadagnato circa un punto percentuale, il livello 9 un altro facendo scendere il throughput da 211 MB/s a 61.\nIl rovescio, ed è lo stesso rovescio di tutto il resto qui Una finestra condivisa significa che ogni frame dipende da quelli prima: perdine uno e la storia del decompressore non corrisponde più, e niente di quello che segue si decodifica. Quindi la compressione del flusso ha bisogno di un trasporto che consegni tutto in ordine: TCP, o TLS su TCP, non UDP né DTLS. È l\u0026rsquo;unico argomento onesto a favore del trasporto TCP in tutto l\u0026rsquo;articolo. Se quello che passa nel tuo tunnel è davvero comprimibile (syslog, replica di database in chiaro, telemetria, un\u0026rsquo;API chiacchierona), una sessione TLS con flusso compresso sposta un terzo dei byte che sposterebbe un trasporto a datagrammi, e su un percorso decente questo può battere la penalità delle ritrasmissioni. Misuralo sul tuo traffico.\nSu UDP, dove un dizionario fa il lavoro della finestra Dove il trasporto è UDP o DTLS, e di default dovrebbe esserlo, non puoi mantenere una finestra: ogni datagramma sta in piedi da solo, il che significa FLUSH_FRAME e la colonna più debole qui sopra. Un dizionario addestrato dà al compressore il contesto tra pacchetti che avrebbe dato una finestra, senza alcuna dipendenza tra datagrammi15:\n# capture a few thousand real frames off the link first, one per file zstd --train frames/* -o tunnel.dict --maxdict=110000 from compression.zstd import ZstdCompressor, ZstdDecompressor, ZstdDict d = ZstdDict(open(\u0026#34;tunnel.dict\u0026#34;, \u0026#34;rb\u0026#34;).read()) _c = ZstdCompressor(level=1, zstd_dict=d) # load it ONCE, not per frame out = _c.compress(frame, mode=ZstdCompressor.FLUSH_FRAME) Sul traffico ripetitivo questo ha portato la compressione per pacchetto dal 14,8% al 5,3%, recuperando il 96% del divario con la compressione del flusso completa pur restando tollerante alle perdite; sulle righe di log il 55% del divario, sul testo generico il 44%.\nCi sono tre regole che vengono con questo. Entrambi i capi devono caricare lo stesso dizionario o non si decodifica niente: verificato qui, un frame compresso con il dizionario solleva ZstdError senza di esso. Addestralo su una cattura del traffico vero, perché un dizionario è un\u0026rsquo;ipotesi a priori e una sbagliata ti costa: il dizionario del testo ha reso un testo diverso leggermente peggiore. E caricalo una volta in un compressore a lunga vita; passarlo a ogni chiamata ha misurato 5 MB/s, e non è un refuso.\nIl byte di intestazione, e la rampa di un secondo Due piccole cose che evitano che tutto questo sia fragile.\nOgni datagramma porta un\u0026rsquo;intestazione di un byte, e indica la modalità invece di dire solo «compresso»: 0x00 il frame così com\u0026rsquo;è, 0x01 un frame zstd autonomo, 0x02 un blocco di un flusso che continua. Un ricevente può allora decodificare qualunque cosa abbia scelto il capo lontano senza essere configurato per corrispondere, e già questo vale il byte.\nIn modalità frame chi manda invia la forma compressa solo quando è davvero più piccola, perché comprimere non è sempre un guadagno: i byte casuali sono usciti al 100,7%, e un ACK TCP di 64 byte si comprime a 73, cioè l\u0026rsquo;intestazione zstd di dieci byte su un pacchetto che non ha niente da spremere. Il conteggio dei pacchetti su un collegamento vero è dominato dai pacchetti piccoli, quindi senza quel controllo gonfieresti la maggior parte del traffico per rimpicciolirne la minoranza. In modalità flusso invia sempre la forma compressa, perché saltarne una manderebbe fuori passo le due finestre.\nE il collegamento parte raw: per il primo secondo ogni frame esce non compresso, qualunque cosa dicano le impostazioni, e ogni direzione accelera per conto suo:\nRAMP = 1.0 # seconds of raw frames before compression starts def pack(self, frame): if self.c is None or time.monotonic() - self.started \u0026lt; RAMP: return RAW + frame out = self.c.compress(frame, mode=ZstdCompressor.FLUSH_BLOCK) return ZSTD + out if len(out) \u0026lt; len(frame) else RAW + frame È l\u0026rsquo;idea delle fasi dall\u0026rsquo;inizio dell\u0026rsquo;articolo applicata a un singolo collegamento. Il tunnel sale sul percorso più semplice che ha, dimostra di saper portare un frame, e solo dopo comincia a fare qualcosa di furbo. Quando si rompe, sai in quale secondo si è rotto.\nFase sei: compresso e cifrato, e cosa costa l\u0026rsquo;ordine L\u0026rsquo;ordine conta, e ne funziona solo uno: prima comprimi, poi cifri. Il testo cifrato non si comprime, come mostra la riga del 100,7%, ed è anche il motivo per cui TLS 1.3 ha tolto la propria compressione, lasciando il tuo strato come l\u0026rsquo;unico posto dove farla. Quell\u0026rsquo;ordine ha un problema noto, lo stesso che ho sollevato contro deflate: comprimere prima di cifrare fa trapelare il testo in chiaro attraverso la lunghezza del testo cifrato, e dove un attaccante può iniettare dati scelti da lui accanto a un segreto e osservare le dimensioni, quella fuga è stata un attacco funzionante più di una volta: CRIME e BREACH contro TLS16, e VORACLE esattamente contro questa forma17.\nNon è un motivo per non comprimere mai. È un motivo per sapere in quale caso ti trovi:\nUn collegamento che porta il tuo traffico tra due macchine tue (replica, backup, log, telemetria) non ha testo in chiaro scelto dall\u0026rsquo;attaccante che viaggia insieme a dei segreti. Comprimilo, e comprimi il flusso. Un collegamento che porta la navigazione arbitraria degli utenti, dove i contenuti web di qualcun altro e le tue credenziali viaggiano insieme, è il caso per cui è stato scritto VORACLE. Lasciala spenta. Il motivo per cui mi sento a mio agio a metterla nella costruzione con tap e non in quella con PPP non è di principio: qui scegli deliberatamente un algoritmo moderno, per traffico che hai guardato, mentre il deflate di pppd comprime tutto di default con uno del 1996, che il caso sia adatto o no.\nCosa guadagna la costruzione con tap, e a cosa rinuncia Metti le due metà fianco a fianco, perché non sono in concorrenza. Sono compromessi diversi.\npppd su un socket tap o tun su un socket Framing integrato (HDLC, si risincronizza dopo un danno) nessuno su UDP perché non serve; da inventare su TCP Impostazione degli indirizzi negoziata da IPCP e IPV6CP configurata a mano su entrambi i capi Vitalità echo LCP, integrato nessuna; la aggiungi tu o il collegamento muore in silenzio Autenticazione PAP o CHAP disponibili, entrambi deboli nessuna Livello solo 3 3 con tun, 2 con tap Bridging no sì, con tap Overhead flag, intestazione e FCS per frame, più l\u0026rsquo;escape niente, o 14 byte con tap Compressione deflate e BSD, attive di default, del 1996 nessuna, o zstd per frame che aggiungi e controlli tu Serve root sì, sempre per creare il dispositivo; non per usarlo Parti in movimento un demone, vecchio di trent\u0026rsquo;anni un file descriptor PPP ti dà un collegamento negoziato che si sorveglia da solo e te lo fa pagare con un protocollo. Un dispositivo tap ti dà un buco grezzo gratis, e le parti che mancano le metti tu o ne fai a meno. Per un tunnel lasciato acceso, il controllo di vitalità mancante è quello che morde: pppd si accorge di un trasporto morto in trenta secondi e lo ricostruisce, la costruzione con tap non si accorge di niente perché niente al suo interno sta guardando. Aggiungi un keepalive, fallo girare sotto qualcosa che lo riavvia, oppure usa la costruzione che ne ha già uno.\nQuando è lo strumento giusto, e quando no Non è mai davvero lo strumento giusto, e non ho intenzione di far finta del contrario. Tutto quello che c\u0026rsquo;è sopra funziona, e niente di tutto ciò è quello che dovresti far girare in produzione. La versione onesta di una guida include la parte in cui metti giù l\u0026rsquo;attrezzo, e questa è quella parte.\nQuello per cui è davvero buono è mostrarti come funziona una cosa. Una VPN smontata nei suoi pezzi e, nella prossima sezione, come si comporta davvero l\u0026rsquo;egress una volta che qualcuno è dentro la tua rete con root. Questi sono i motivi per averlo letto. I casi ristretti qui sotto sono reali, ma non sono il motivo per cui l\u0026rsquo;articolo esiste.\nPrendi la costruzione con PPP quando:\nIl trasporto non è affatto IP: una console seriale, un USB gadget, un collegamento radio, una named pipe, un canale SSH. A pppd non importa su cosa viaggino i byte, e un dispositivo tap qui non ti può aiutare. Stai salvando qualcosa: una macchina con una console seriale, niente rete, e un lavoro da finire stasera. PPP su quella console è un collegamento instradato, installato su entrambi i capi senza niente da copiare. Vuoi che il collegamento si arrangi da solo. Echo LCP, negoziazione degli indirizzi e riavvio sono gratis; scriverli tu è il modo in cui la costruzione con tap diventa un piccolo prodotto inaffidabile. Prendi la costruzione con tap quando:\nTi serve il livello 2: un protocollo non IP, un heartbeat di cluster che vuole i broadcast, DHCP attraverso il tunnel, o due segmenti che devono diventare uno. Vuoi il minor numero di parti in movimento: su UDP con DTLS sono due comandi, nessun demone, nessuna negoziazione, niente di cui fare l\u0026rsquo;escape. Root scarseggia. Crea il dispositivo una volta con user, e il processo che sposta i frame non avrà mai più bisogno di privilegi. Sono entrambi lo strumento giusto quando stai imparando. Ogni strato è visibile e sostituibile separatamente, e non c\u0026rsquo;è modo migliore di capire cosa fa un prodotto VPN che costruirne uno dai pezzi e guardare ognuno di essi salire.\nNessuno dei due è lo strumento giusto quando vuoi una VPN. Per quello, usa WireGuard. È nel kernel, una frazione del codice, fa la crittografia come si deve senza niente da negoziare e niente da sbagliare, ed è un protocollo a datagrammi per progetto. ssh -w ti dà un dispositivo tun su una sessione SSH esistente in un comando, e OpenVPN è la versione matura e verificata della forma DTLS-su-tap vista sopra. Tutti e tre fanno questo meglio di qualsiasi cosa costruita qui.\nCostruisci queste cose perché vuoi sapere cosa c\u0026rsquo;è dentro la cosa che compri. Non perché fosse furbo.\nCosa mostra davvero: l\u0026rsquo;egress dal lato dell\u0026rsquo;attaccante Questo è il motivo per leggere un articolo di costruzione che ti è appena stato detto di non usare. Giralo e guarda dall\u0026rsquo;interno della tua rete, come la persona che ci è appena atterrata con root. Ogni violazione vera finisce lì, con una chiave rubata, una fuga da un container, un servizio non aggiornato, un insider. La domanda che a quel punto decide quanto sarà brutta la giornata non è «cosa possono far girare», perché possono far girare qualsiasi cosa. È «cosa può uscire, e l\u0026rsquo;avevi deciso prima che arrivassero?»\nSe l\u0026rsquo;uscita è aperta di default, la risposta è tutto, e ormai c\u0026rsquo;è poco che tu possa fare. Niente qui era esotico. pppd, ncat, socat e ip sono pacchetti firmati della distribuzione già presenti sulla macchina; lo shim per il tap sono cinquanta righe di libreria standard. Una porta in uscita consentita (ed è la 443, quella che ogni rete apre di default) e c\u0026rsquo;è un collegamento instradato dalla tua rete a quella di qualcun altro, cifrato, autenticato, che sopravvive ai riavvii, che porta IPv4 e IPv6, e che al tuo confine non si distingue da una qualsiasi sessione HTTPS che i tuoi utenti aprono diecimila volte al giorno. Fallo tap, mettilo in bridge, e quello che è uscito dall\u0026rsquo;edificio non è una route. È il segmento.\nNon c\u0026rsquo;è niente che uno scanner possa prendere: nessuna firma di malware perché non c\u0026rsquo;è malware, nessun protocollo strano perché è un normale handshake TLS verso la 443, nessun binario insolito perché ognuno l\u0026rsquo;ha installato il tuo stesso gestore di pacchetti. Il proxy registra una connessione e un conteggio di byte, ed entrambi sembrano lavoro.\nE la destinazione non è nemmeno fissa. Un socket non deve terminare dove finiscono i pacchetti, perché il trasporto può essere puntato attraverso un proxy: un relay che non è altro che due connessioni e una pipe, che la prossima sezione costruisce con una riga di shell. ncat accetta --proxy con --proxy-type http, socks4 o socks5, quindi la sessione TLS che vede il tuo confine termina dovunque l\u0026rsquo;attaccante le abbia detto di connettersi attraverso: un jump host interno, un endpoint SaaS consentito che per caso inoltra CONNECT, un relay nel cloud. E il tunnel prosegue da lì verso un posto che non vedi mai. HTTP CONNECT e SOCKS fanno entrambi questo per progetto, perché è a questo che serve un proxy. Quindi una voce della allow-list per una destinazione di cui ti fidi è sempre e solo fiducia nella destinazione e in tutto ciò verso cui inoltrerà, che non controlli e non puoi elencare. L\u0026rsquo;endpoint nel log del tuo firewall è il proxy. Non è mai stato il capo lontano.\nQuindi la verità scomoda: una volta che qualcuno è dentro con root e l\u0026rsquo;uscita è permissiva, il tunnel non è la cosa che puoi impedire. I pezzi sono installati, l\u0026rsquo;uscita è aperta, e non porta nemmeno dove sembra. La tua unica occasione per renderlo difficile era prima che l\u0026rsquo;attaccante arrivasse, al confine, decidendo cosa può uscire.\nQuesto è l\u0026rsquo;egress default-deny, ed è tutta la lezione. Uscita bloccata di default; una allow-list corta e con nomi, dove una persona ha giustificato ogni destinazione e porta; tutto il resto rifiutato, registrato e segnalato. Non perché fermi di colpo un attaccante determinato (una destinazione consentita è un tunnel consentito) ma perché l\u0026rsquo;alternativa è non avere alcuna decisione da far rispettare. Una politica di egress scritta come una lista di porte consentite è una politica sui numeri di porta. Non è mai stata una politica su cosa esce, e una volta che qualcuno ha root, i numeri di porta sono tutto ciò che protegge.\nÈ la stessa conclusione dell\u0026rsquo;articolo su ping, che costruisce il tunnel con l\u0026rsquo;echo ICMP, e dell\u0026rsquo;articolo sui protocol helper, dove è il tuo firewall ad aprire i buchi da solo. Tre vie d\u0026rsquo;ingresso, una conclusione: il controllo che pensavi di avere era sui protocolli, e nessuno di questi protocolli è quello che dice di essere. Il confine, deciso in anticipo e in default-deny, è l\u0026rsquo;unico controllo che sia mai stato reale.\nUn proxy sono due connessioni e una pipe Vale la pena vedere quanto poco sia un relay, perché spiega perché non puoi ragionare sul capo lontano partendo da quello vicino. Un proxy non è software speciale. È una connessione unita a un\u0026rsquo;altra da una pipe. La forma più antica usa una named pipe, una FIFO, per portare la direzione di ritorno: un ncat ascolta, un altro si connette in avanti, e la FIFO collega il percorso di risposta tra i due.\nmkfifo backpipe ncat -l 7000 0\u0026lt;backpipe | ncat farend.example.net 7100 1\u0026gt;backpipe Leggila come un impianto idraulico: l\u0026rsquo;output del listener scorre nel secondo ncat e prosegue verso il capo lontano, e le risposte tornano attraverso la FIFO al client. Due socket, una pipe, entrambe le direzioni, e la connessione del client termina qui, sul relay, mentre i pacchetti proseguono verso farend e ritorno. Ho fatto girare esattamente questo in loopback con un terzo ncat che faceva da echo al capo lontano, e una riga mandata dentro è tornata indietro dopo aver fatto tutto il giro.\nUn relay sono due socket uniti da una pipe, quindi l'endpoint si sposta Una connessione entra, un'altra esce, una pipe in mezzo. Questo è un proxy. client apre una sessione TLS RELAY: la destinazione registrata al confine ncat -l 7000 termina il client ncat farend apre un nuovo salto capo lontano il vero altro lato stdout backpipe (FIFO) riporta indietro le risposte client → relay relay → capo lontano La connessione del client finisce sul relay. I pacchetti no. Il tuo firewall ha registrato una connessione a questa macchina. Dove inoltra lo decide lei, e concatenarne tre mette il vero capo lontano a tre pipe di distanza: ogni log mostra solo una connessione locale ordinata verso il successivo. Un relay sono due socket e una pipe. Il listener termina la connessione del client. Un secondo netcat apre una connessione nuova in avanti, e la FIFO porta la direzione di ritorno tra i due. La sessione TLS del client finisce qui, sul relay, e comincia un nuovo salto: quindi la destinazione che il tuo confine ha registrato è questa macchina, e i pacchetti proseguono dovunque lei li inoltri. Concatenane tre e il capo lontano è a tre pipe di distanza, con il firewall di ogni salto che vede solo un\u0026rsquo;ordinata connessione locale verso il successivo. Ncat fa la stessa cosa in un solo processo, lanciando la connessione in avanti per ogni client che arriva:\nncat -l 7000 --keep-open --sh-exec \u0026#39;ncat farend.example.net 7100\u0026#39; Stessa forma, meno pezzi: il socket del listener è unito a quello dell\u0026rsquo;ncat lanciato tramite la pipe che la shell mette tra i due. Concatenane tre e il tunnel attraversa tre reti, terminando e ripartendo a ogni salto, con il firewall di ogni salto che registra un\u0026rsquo;ordinata connessione locale verso il successivo e niente oltre.\nQuesto è tutto il trucco, ed è il motivo per cui il log del confine non è una prova della destinazione. Ogni relay è il capo lontano per quanto può capire la macchina prima di lui, e il vero altro capo è a chissà quante pipe di distanza, dove nessuno guardava.\nOra metti quei relay su macchine che non sono dell\u0026rsquo;attaccante.\nRelay in catena su host compromessi ripuliscono l'endpoint Ogni salto è la macchina di qualcun altro, e ogni proprietario vede solo il mezzo attaccante l'unica macchina sua relay 1 rete di un'altra azienda relay 2 una VPS dirottata relay 3 un router di casa destinazione dove era diretto vede: 1←→2 vede: 2←→3 vede: 3←→dest Nessun salto vede oltre i suoi due vicini. Nessuna origine, nessuna destinazione, solo il mezzo. Il traffico si ripulisce attraverso una fila di sistemi altrui, ognuno con lo stesso relay di due socket e una pipe sotto il controllo dell'attaccante. Per questo l'uscita di un host compromesso porta spesso a un'altra vittima: vent'anni di C2. Ogni salto è un host compromesso (la macchina di un\u0026rsquo;altra azienda, una VPS dirottata, un router di casa) che fa girare lo stesso relay di due socket e una pipe sotto il comando e controllo dell\u0026rsquo;attaccante. Nessun salto può vedere oltre i suoi due vicini: il proprietario del relay 2 vede una connessione dal relay 1 e una verso il relay 3, e nient\u0026rsquo;altro. Il traffico viene ripulito attraverso una fila di sistemi di altre persone, ed è per questo che l\u0026rsquo;uscita di un host compromesso porta così spesso a un\u0026rsquo;altra vittima invece che all\u0026rsquo;attaccante. Ogni proprietario lungo quella catena vede solo una connessione dal salto prima al salto dopo: nessuna origine, nessuna destinazione, solo il mezzo. Non è un\u0026rsquo;idea nuova che sto regalando a qualcuno. È così che funzionano da vent\u0026rsquo;anni le catene di pivot e le reti C2, ed è il motivo per cui il traffico in uscita di un host compromesso porta così spesso a un\u0026rsquo;altra vittima invece che all\u0026rsquo;attaccante. I tuoi log mostrano che hai parlato con una macchina in un data center da qualche parte. Di chi sia, e verso cosa inoltri, non ci è mai stato scritto.\nIl peso difensivo sta in una riga: non puoi attribuire né fidarti di una destinazione che non hai limitato in anticipo. Quando il traffico sta già uscendo, l\u0026rsquo;indirizzo verso cui esce non ti dice quasi niente, perché è un relay sulla macchina di qualcun altro e il vero endpoint è ripulito dietro di esso.\nIl collegamento non è mai stato il prodotto Quello che mi colpisce, dopo aver smontato tutto questo, è quanto poco ne sia nuovo e quanto ne venga venduto.\nL\u0026rsquo;RFC 1661 è del 1994. pppd c\u0026rsquo;è in ogni distribuzione Linux da trent\u0026rsquo;anni, i moduli del kernel sono otto file in una directory, e tutto ciò che fa di una VPN una VPN (un\u0026rsquo;interfaccia virtuale, un collegamento negoziato, un trasporto cifrato, una route) sono quattro programmi e un certificato. Niente di tutto ciò è difficile o segreto. Hanno documentato ogni byte e l\u0026rsquo;hanno regalato, e tra te e quella roba è cresciuta un\u0026rsquo;industria che vende gli stessi quattro pezzi in una scatola con una licenza per postazione e un contratto di assistenza che scade. I pezzi non sono migliorati. Sono stati impacchettati.\nNon è un argomento per far girare questa roba in produzione. Ti ho appena detto di non farlo. È un argomento per sapere cosa c\u0026rsquo;è nella scatola che compri, perché il giorno in cui il fornitore cambia le licenze, viene acquisito o mette fine al tuo modello, la differenza tra un brutto trimestre e un brutto anno è se qualcuno da voi sa di cosa era fatta quella cosa.\nPrenditi una serata e costruisci il tunnel con i pezzi. Guarda LCP che negozia, rompi il collegamento e guardalo tornare, togli il certificato e guarda cosa si ferma. Poi rileggi la scheda tecnica del tuo fornitore di VPN e guarda quanta ne riconosci.\nLa stessa serata ti compra anche l\u0026rsquo;altra metà. Se un collegamento instradato fuori dalla tua rete sono quattro programmi installati e un certificato, la persona che ha appena preso root su una delle tue macchine non è frenata da quanto sia difficile costruire il tunnel. Non è difficile. È frenata solo da quello che tu hai deciso, prima che arrivasse, che poteva uscire. Costruiscilo una volta e smetti di pensare all\u0026rsquo;egress come a qualcosa che fa rispettare un prodotto, e cominci a pensarlo come una decisione che hai preso oppure no.\nNon c\u0026rsquo;è molto di magico. Quasi tutto è il 1994 con una mano di vernice, e il 1994 non ha niente che non va. Funzionava, era documentato, e gira ancora.\nRFC 1661 — The Point-to-Point Protocol (PPP), 1994. Definisce il collegamento, LCP e la famiglia di protocolli di controllo di rete che ci stanno sopra.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2637 — Point-to-Point Tunneling Protocol (PPTP), che porta PPP dentro GRE.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3931 — Layer Two Tunneling Protocol versione 3, il discendente in standards track del protocollo che porta PPP dentro UDP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npppd(8) — la pagina di manuale del demone PPP. Fonte per pty, notty, local, passive, noipdefault, proxyarp, record, receive-all, le opzioni di echo LCP e il default di asyncmap: «If no asyncmap option is given, the default is zero, so pppd will ask the peer not to escape any control characters.» Le citazioni qui sono state lette da man pppd su ppp 2.5.1.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1662 — PPP in HDLC-like Framing. La flag sequence, la regola di octet-stuffing e l\u0026rsquo;Async-Control-Character-Map: «Each frame begins and ends with a Flag Sequence, which is the binary sequence 01111110 (hexadecimal 0x7e).»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOlaf Titz, Why TCP Over TCP Is A Bad Idea — la spiegazione di riferimento dell\u0026rsquo;accumulo delle ritrasmissioni, che comincia proprio da questa costruzione. L\u0026rsquo;URL originale non serve più l\u0026rsquo;articolo; questa è una cattura dell\u0026rsquo;Internet Archive.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5072 — IP Version 6 over PPP. IPV6CP e gli identificatori di interfaccia a 64 bit, indipendenti da IPCP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1332 — The PPP Internet Protocol Control Protocol (IPCP), che negozia gli indirizzi IPv4 ai due capi del collegamento.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1994 — PPP Challenge Handshake Authentication Protocol (CHAP). Dimostra l\u0026rsquo;identità del peer; non cifra niente.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3079 — Deriving Keys for use with Microsoft Point-to-Point Encryption (MPPE). La costruzione RC4 con chiave derivata dallo scambio MS-CHAP, e il motivo per cui PPTP non è un\u0026rsquo;opzione praticabile.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNcat Users\u0026rsquo; Guide — connecting through a proxy — --proxy e --proxy-type per HTTP CONNECT e SOCKS 4/5, così il trasporto TLS termina sul proxy, non sul capo lontano del tunnel.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNcat Users\u0026rsquo; Guide — le opzioni --ssl, --ssl-verify e --ssl-trustfile, e le modalità di ascolto e UDP. Versione provata qui: Ncat 7.92.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUniversal TUN/TAP device driver — la documentazione del kernel stesso per /dev/net/tun, TUNSETIFF e la differenza tra tun e tap.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPEP 784 — Adding Zstandard to the standard library, ed è per questo che compression.zstd non richiede alcun pacchetto su Python 3.14. Misurato qui con Python 3.14.7 e zstd 1.5.7.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nzstd(1) — la modalità --train e --maxdict, per costruire il dizionario che entrambi i capi devono caricare.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7457 — Summarizing Known Attacks on TLS and DTLS, che copre CRIME e la forma generale di una fuga di lunghezza da compressione prima della cifratura.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenVPN — the VORACLE attack — la stessa fuga contro una VPN che comprime prima di cifrare, e il motivo per cui OpenVPN ora sconsiglia la compressione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/networking/a-vpn-out-of-parts-and-what-egress-really-is/","summary":"Una VPN sono due lavori: qualcosa che crea un collegamento virtuale e qualcosa che trasporta i byte. PPP fa il primo dal 1994 e non gli importa quale sia il secondo: per questo PPTP, L2TP e ogni linea dial-up che tu abbia mai usato sono lo stesso protocollo su trasporti diversi. Netcat è un trasporto. Qui lo costruisco in entrambi i modi. Prima pppd: l\u0026rsquo;opzione pty e cosa fa con uno pseudo-terminale, la versione TCP che tutti provano per prima, perché un protocollo a flusso dentro TCP si scioglie appena c\u0026rsquo;è perdita, la versione UDP che è quella da usare, il framing HDLC asincrono e l\u0026rsquo;ACCM che decide quanta banda se ne va nell\u0026rsquo;escape dei caratteri di controllo, indirizzi, instradamento e IPV6CP, e come tenere su il collegamento quando il trasporto muore senza avvisarti. Poi lo stesso tunnel senza PPP: un dispositivo tap, un datagramma per frame su UDP, il prefisso di lunghezza che su TCP devi inventarti da solo, tun contro tap, e il bridging. Poi la parte a cui netcat non sa rispondere: avvolgere il trasporto in TLS con ncat, stunnel e openssl, e in DTLS con socat, che è la forma che vuoi davvero. Non è mai davvero lo strumento giusto, ed è proprio questo il punto: mostra come si comporta l\u0026rsquo;egress quando un attaccante ha root dentro la tua rete e l\u0026rsquo;uscita non era bloccata di default, e perché il default-deny al confine è l\u0026rsquo;unico controllo che sia mai stato reale.","title":"Una VPN fatta di pezzi: PPP, dispositivi tap e netcat"},{"content":"Sul tuo firewall c\u0026rsquo;è una funzione che legge l\u0026rsquo;interno dei pacchetti, ci trova scritti un indirizzo IP e un numero di porta e apre per loro un varco in ingresso. Nessuna regola. Nessuna richiesta di modifica. Nessuna voce di log che guarderesti mai. Sulla maggior parte degli apparati che ce l\u0026rsquo;hanno è attiva di default, e lo è da quasi venticinque anni, mentre il settore che l\u0026rsquo;ha messa lì ha passato gli ultimi venti a concludere in silenzio che andrebbe spenta: nei documenti degli standard, nei default del kernel e in quattro tornate separate di patch d\u0026rsquo;emergenza ai browser.\nSi chiama helper di protocollo, oppure Application Level Gateway, ALG, session helper, fixup, motore di ispezione, helper di conntrack. È la stessa cosa. Esiste perché il NAT ha rotto una manciata di protocolli che scrivono indirizzi dentro il proprio payload, e qualcuno ha deciso che la soluzione meno peggiore fosse insegnare al traduttore a leggere e riscrivere quel payload al volo.\nEcco la parte che dovrebbe farti fermare.\nL\u0026rsquo;helper non può sapere chi ha scritto il testo. Legge byte da una connessione e agisce subito, senza chiedere niente a nessuno. Non ha modo di sapere se la stringa PORT 192,168,1,29,4,0 l\u0026rsquo;ha prodotta un vero client FTP durante un vero trasferimento, o un modulo nascosto in una pagina web che un tuo utente ha aperto per sbaglio. In rete sono identiche, perché in rete sono identiche. Così un estraneo su internet che riesce a convincere qualcosa nella tua rete a emettere i byte giusti (un browser, un client di chat, qualunque cosa mandi quello che gli si dice) sceglie quale porta in ingresso apre il tuo firewall, e verso cosa.\nNon è un bug nel parser di un fornitore. È quello che la funzione fa: un dispositivo di sicurezza che prende istruzioni di configurazione da dati non fidati e le applica immediatamente. Le segnalazioni di bug e le CVE sono dettagli sopra questa forma.\nSamy Kamkar ha dimostrato la versione via browser nel gennaio 20101, una molto migliore nell\u0026rsquo;ottobre 20202, e tre mesi dopo Armis l\u0026rsquo;ha estesa in modo che la porta aperta non debba nemmeno stare sulla macchina che ha cliccato: può stare sulla stampante, sulla telecamera o su un controllore logico due VLAN più in là3. Nel frattempo l\u0026rsquo;IETF ha messo per iscritto che dovrebbero essere spenti di default4, Linux li ha spenti nel kernel5, e i produttori di browser hanno distribuito un elenco di porte bloccate che ricalca quasi riga per riga l\u0026rsquo;elenco dei moduli conntrack di Linux6. Ognuna di queste è una correzione applicata da un\u0026rsquo;altra parte, perché la cosa che andava davvero corretta sta in una scatola che nessuno aggiornerà mai.\nLa conclusione a cui sono arrivato è che gli helper di protocollo dovrebbero essere spenti di default ovunque, e spenti davvero su ogni rete di cui sei responsabile. Non regolati. Non limitati alle sottoreti fidate come prima mossa. Spenti, con le due o tre eccezioni autentiche messe per iscritto e datate, esattamente come documenteresti qualsiasi altra regola in ingresso, perché è quello che sono.\nQuello che segue è il meccanismo, gli attacchi nell\u0026rsquo;ordine in cui sono stati scoperti, la posizione rispetto alla conformità (nel Regno Unito è il mancato rispetto puro e semplice di un controllo che potresti già avere certificato) e i comandi per sistemare le cose.\nCosa ci guadagna un estraneo Comincia dal risultato, perché il meccanismo interessa di più una volta che hai visto il conto. Qualcuno apre un link. Il suo contributo è tutto lì. La pagina esegue JavaScript che parla con il server dell\u0026rsquo;attaccante, e quel server modella la conversazione (la imbottisce, la misura, ne conferma alcune parti e altre no) finché un segmento arriva al tuo firewall con l\u0026rsquo;aspetto esatto del messaggio di apertura di una chiamata VoIP. Il firewall ci crede, perché crederci è la funzione. Crea una mappatura in ingresso, e l\u0026rsquo;attaccante si ricollega direttamente attraverso di essa.\nNella versione del 2020 la porta si apre sulla macchina che ha cliccato, quindi ogni servizio in ascolto su quell\u0026rsquo;host è raggiungibile da internet finché la mappatura resta in vita2. La condivisione file. Il desktop remoto che nessuno voleva lasciare in ascolto. Sul Fisher-Price OS (Windows), Armis ha fatto notare l\u0026rsquo;ovvio: raggiungi la porta della condivisione file e sei a un host non aggiornato dalla strada che ha percorso WannaCry3.\nLa versione del 2021 è peggiore, ed è la parte che dovrebbe farti decidere. Siccome l\u0026rsquo;helper H.323 gestisce l\u0026rsquo;inoltro di chiamata, un solo messaggio può nominare un terzo indirizzo invece di uno dei due capi della connessione, quindi l\u0026rsquo;attaccante non è più limitato alla macchina che ha cliccato e può percorrere la tua rete interna, aprendo una porta su ogni indirizzo e leggendo qualunque cosa risponda. Armis ha dimostrato proprio questo: porta 80 su un intervallo di indirizzi, banner raccolti, un obiettivo scelto, poi aperta la porta di stampa raw della stampante e inviato un lavoro. La seconda dimostrazione ha raggiunto un controllore logico sulla sua porta di gestione senza autenticazione e ne ha riscritto il programma3.\nSu nessuno di quei dispositivi è stata sfruttata una vulnerabilità. Funzionavano tutti esattamente come previsto, e l\u0026rsquo;unica cosa che ha ceduto è il perimetro, che ha ceduto facendo esattamente ciò per cui era configurato. Pensa anche a chi sta dentro quel perimetro. Non solo il tuo personale: un ospite sulla rete guest, il portatile di un consulente, chiunque abbia un browser. L\u0026rsquo;attacco non ha bisogno di credenziali, di un punto d\u0026rsquo;appoggio o di malware, perché il veicolo è il browser, ed è già installato e già considerato affidabile.\nUn firewall serve a garantire che niente all\u0026rsquo;esterno avvii una conversazione con qualcosa all\u0026rsquo;interno a meno che tu non l\u0026rsquo;abbia deciso. L\u0026rsquo;helper è l\u0026rsquo;eccezione, concessa sulla base di una stringa in un pacchetto.\nChe cos\u0026rsquo;è davvero un helper di protocollo Un NAT semplice è una cosa stupida e onesta. Arriva un pacchetto, riscrive indirizzo e porta di origine nell\u0026rsquo;intestazione, scrive una riga perché la risposta possa essere girata indietro, e lo inoltra. Non guarda mai sotto l\u0026rsquo;intestazione di trasporto, e non sa né gli importa se i byte dentro sono una richiesta web, una query a un database o la foto di un cane.\nFunziona finché un protocollo non scrive un indirizzo nel proprio payload. FTP lo fa, in chiaro nel flusso dei comandi: ricollegati a me a questo indirizzo, su questa porta. SIP lo fa nei campi Via, Contact e SDP, H.323 lo fa, e IRC lo fa per i trasferimenti diretti. Sono stati tutti progettati quando l\u0026rsquo;indirizzo di un host era il suo indirizzo e ogni macchina poteva raggiungere ogni altra, e con quella premessa ha senso. Metti un traduttore sul percorso e l\u0026rsquo;indirizzo nel payload diventa una bugia.\nUn traduttore semplice legge l'intestazione. Un helper legge il payload e apre un buco su ciò che trova. Stesso punto del percorso. Uno dei due legge la lettera oltre alla busta. Un traduttore semplice Un helper di protocollo Il pacchetto in arrivo [IP hdr 192.168.1.29:51000] [ payload ] Il pacchetto in arrivo [IP hdr 192.168.1.29:51000] [ PORT 192,168,1,29,4,0 ] Cosa fa Riscrive indirizzo e porta di origine nell'intestazione Corregge i checksum Scrive una riga perché la risposta possa tornare indietro Lo inoltra Cosa fa Tutto questo, e poi legge il payload e ci trova un indirizzo e una porta riscrive anche quelli, e sposta i numeri di sequenza scrive una seconda riga: consenti questa connessione in ingresso Tabelle che tiene Solo la tabella di traduzione. Una riga, un flusso, reversibile. Niente nel payload può aggiungere una riga. Tabelle che tiene Tabella di traduzione, e una tabella delle expectation. Una riga nella seconda è una regola firewall in ingresso. La seconda tabella è tutto l'argomento. Dice: quando arriva da fuori una connessione che corrisponde a questo schema, falla passare. Nessuno l'ha scritta, nessuno l'ha approvata. Due dispositivi nello stesso punto del percorso. Il traduttore semplice riscrive l\u0026rsquo;intestazione e non legge mai il payload. L\u0026rsquo;helper legge il payload, riscrive l\u0026rsquo;indirizzo che ci trova e aggiunge una riga a una seconda tabella che consente più tardi una connessione in ingresso. Quella seconda tabella è l\u0026rsquo;argomento di questo articolo. Così è stato inventato l\u0026rsquo;helper. Legge il payload, trova l\u0026rsquo;indirizzo, lo riscrive con quello pubblico, e poi fa la parte che tutti saltano: crea una regola che consente la connessione in ingresso che il payload ha appena descritto. Netfilter chiama quella regola expectation. Cisco la chiama pinhole, o NAT door7. Palo Alto la chiama dynamic NAT pinhole8. Juniper la chiama gate. Parola diversa, oggetto identico: un buco aperto nel perimetro sulla base di qualcosa letto in un pacchetto.\nL\u0026rsquo;IETF ha dato un nome allo schema prima che la maggior parte di questi prodotti esistesse. Un ALG, dice la RFC 2663, è un «application specific translation agent» che «may interact with NAT to set up state [\u0026hellip;] modify application specific payload and perform whatever else is necessary to get the application running across disparate address realms»9. Leggilo pensando a un avversario: whatever else is necessary, guidato da application specific payload. E nel febbraio 2002 la tassonomia dei middlebox dell\u0026rsquo;IETF chiamava il meccanismo per quello che è, osservando che alcuni ALG creano problemi di frammentazione «although in this case the problem is arguably the result of a deliberate layer violation (e.g., mucking with the application data stream of an FTP control connection by twiddling TCP segments on the fly)»10.\nUna violazione di livello deliberata. Segmenti TCP rimaneggiati al volo. È il meccanismo, chiamato per nome da chi l\u0026rsquo;ha catalogato ventiquattro anni fa, e ogni attacco qui ci passa dritto attraverso.\nL\u0026rsquo;expectation è tutto il problema Un\u0026rsquo;expectation è una connessione pre-autorizzata: una tupla di indirizzo di origine, porta di origine, indirizzo di destinazione, porta di destinazione e protocollo, con alcuni campi compilati e altri lasciati come jolly, più un timer. Quando arriva un pacchetto che corrisponde, il firewall lo tratta come collegato a un flusso già consentito invece che come una nuova connessione in ingresso, lo lascia passare e consuma l\u0026rsquo;expectation. Su un sistema sano l\u0026rsquo;elenco è vuoto, ed è proprio questo il punto: le expectation dovrebbero essere rare, di breve durata e innescate da qualcosa che un host interno ha davvero chiesto.\nUn'expectation è una regola in ingresso con degli spazi vuoti, e gli spazi vuoti sono il modello di sicurezza Un oggetto, cinque campi e un timer. Quali campi restano vuoti è l'intero modello di sicurezza. expect proto=tcp src=\u0026lt;chi può collegarsi\u0026gt; sport=\u0026lt;qualsiasi\u0026gt; dst=\u0026lt;dove arriva\u0026gt; dport=\u0026lt;quale porta\u0026gt; timeout=300 Helper Chi può collegarsi Dove arriva Quale porta Caso peggiore FTP il server, vincolato il client, vincolato dal payload qualsiasi porta su un host IRC qualsiasi indirizzo il client, vincolato dal payload qualsiasi porta, da chiunque H.323 qualsiasi indirizzo dal payload dal payload qualsiasi porta su qualsiasi host Blu: fissato dal firewall in base alla connessione che vede.\u0026#160;\u0026#160;Oro: fornito dal payload.\u0026#160;\u0026#160;Rosa: lasciato aperto, per progetto. 1. Quali campi sono jolly? Un'origine jolly significa che il buco non è riservato al capo remoto della conversazione che l'ha creato. Chiunque arrivi per primo alla tua interfaccia esterna può prenderselo. L'helper IRC deve farlo, perché il protocollo davvero non può sapere chi si collegherà, che è una descrizione onesta di un protocollo che non andrebbe aiutato affatto. 2. Chi ha fornito i valori? Non il firewall. Li ha forniti il payload, e il payload l'ha scritto qualunque capo della conversazione l'helper stesse leggendo in quel momento. In quella frase non c'è nessuna autenticazione. 3. Verso chi può puntare il buco? Nella maggior parte degli helper, l'host che l'ha creato. In H.323, qualunque cosa dica il payload, perché l'inoltro nomina una terza parte. Un\u0026rsquo;expectation è una regola del firewall con alcuni campi lasciati vuoti e un timer. Tre domande decidono se è sicura, e sono le tre giuste da porre a qualsiasi helper su qualsiasi piattaforma. Due di quelle risposte sono peggiori di quanto ci si aspetti. I valori vengono dal payload e non dal firewall, quindi vengono da qualunque capo della conversazione l\u0026rsquo;helper stesse leggendo. E nell\u0026rsquo;helper IRC l\u0026rsquo;indirizzo di origine è un jolly per progetto, perché il protocollo non può sapere chi si collegherà: «creates expectations whose destination address is the client address and source address is any address»11.\nEcco la frase da portarti dietro. Un\u0026rsquo;expectation è una regola del firewall in ingresso, creata alla velocità della linea, da una parte non fidata, senza traccia di chi l\u0026rsquo;abbia chiesta o perché. Tienila a mente fino alla sezione su Cyber Essentials, perché lì è tutto l\u0026rsquo;argomento.\nCome previsto: FTP dice PORT, e il firewall ci crede Prendi l\u0026rsquo;helper più semplice e guardalo lavorare correttamente, perché l\u0026rsquo;attacco è la stessa sequenza con un partecipante sostituito. L\u0026rsquo;FTP attivo usa due connessioni. Il client apre una connessione di controllo verso il server sulla porta 21 e gli dà comandi in ASCII semplice, e quando serve un trasferimento apre un socket in ascolto e manda un comando PORT che indica l\u0026rsquo;indirizzo e la porta a cui ricollegarsi; a quel punto è il server a collegarsi in ingresso. È il protocollo come specificato, e funziona così dal 1985. In rete sono sei numeri, quattro per l\u0026rsquo;indirizzo e due per la porta, byte alto per primo:\nPORT 192,168,1,29,4,0 Cioè 192.168.1.29, porta 1024, perché 4 × 256 + 0 = 1024.\nFTP attivo attraverso un helper: quattro passi, tutti corretti, e solo due cose controllate FTP attivo, che funziona esattamente come specificato, e cosa è stato controllato prima di aprire il buco Client FTP 192.168.1.29 Firewall + helper 203.0.113.10 Server FTP 198.51.100.7 1\u0026#160;\u0026#160;connessione di controllo in uscita verso la porta 21: consentita, è partita dall'interno 2\u0026#160;\u0026#160;il client si mette in ascolto, poi scrive il proprio indirizzo nel flusso PORT 192,168,1,29,4,0 3\u0026#160;\u0026#160;l'helper agisce riscrive l'indirizzo, crea l'expectation PORT 203,0,113,10,4,0 expect src=198.51.100.7 dst=192.168.1.29 dport=1024 4\u0026#160;\u0026#160;il server si collega in ingresso, l'expectation corrisponde, i dati passano Guarda cosa ha verificato il firewall prima che il passo quattro diventasse possibile. Che i byte fossero su una connessione verso la porta 21. Che cominciassero con i quattro caratteri PORT. È tutto, perché è tutto quello che c'è da controllare. FTP non porta firma, né chiave di sessione, né nient'altro da verificare. FTP attivo attraverso un helper, corretto a ogni passo. Nota cosa ha verificato il firewall prima di aprire il buco: che i byte fossero sulla porta 21 e cominciassero con PORT. Nient\u0026rsquo;altro, perché non c\u0026rsquo;è nient\u0026rsquo;altro da controllare. L\u0026rsquo;helper osserva quel flusso, individua PORT, riscrive l\u0026rsquo;indirizzo da quello privato a quello pubblico regolando i numeri di sequenza perché la stringa ha cambiato lunghezza, e crea un\u0026rsquo;expectation che consente la connessione in ingresso del server sulla porta indicata. Davvero utile, del tutto ragionevole dati i vincoli del 1994, e corretto a ogni passo.\nNon è stato controllato nient\u0026rsquo;altro, perché non c\u0026rsquo;è nient\u0026rsquo;altro da controllare: FTP non ha una firma da offrire, né una chiave di sessione, né autenticazione di alcun tipo, e l\u0026rsquo;helper legge un flusso di cui non è una delle parti.\nIn quel codice c\u0026rsquo;è un\u0026rsquo;altra cosa, ed è un avvertimento che gli autori hanno scritto a sé stessi. Se l\u0026rsquo;indirizzo nel comando PORT non è quello del client (se il client chiede al server di collegarsi da tutt\u0026rsquo;altra parte), l\u0026rsquo;helper di Linux per default rifiuta, e il commento nel sorgente dice perché: «DMZ machines opening holes to internal networks, or the packet filter itself»12. Imposta il parametro del modulo loose e quel rifiuto sparisce. Chi ha scritto l\u0026rsquo;helper sapeva esattamente cosa gli si poteva far fare. Ha distribuito il default sicuro e un interruttore, e venticinque anni dopo l\u0026rsquo;interruttore è ancora lì.\nNon come previsto: gli stessi byte, da una pagina web Un helper legge un flusso di byte e cerca uno schema. Non verifica, e strutturalmente non può verificare, che la cosa all\u0026rsquo;altro capo sia il client che finge di essere. Samy Kamkar ha pubblicato la conseguenza nel gennaio 2010 e l\u0026rsquo;ha chiamata NAT Pinning1. Il meccanismo è imbarazzante per quanto è piccolo: metti un modulo in una pagina web, puntalo al server dell\u0026rsquo;attaccante sulla porta 6667 e costruisci il corpo in modo che contenga una richiesta di chat diretta.\nPRIVMSG samy :^ADCC CHAT samy 3325256705 22^A Il browser lo invia, convinto di fare una POST HTTP. L\u0026rsquo;helper IRC del router, che osserva una connessione sulla porta 6667, vede passare DCC CHAT con un indirizzo e una porta e fa ciò per cui è costruito. L\u0026rsquo;indirizzo è 198.51.100.1 scritto come un unico numero decimale, che è il modo in cui il protocollo lo codifica, e la porta è la 22; niente in quella stringa è stato scelto dalla vittima. La variante FTP è la stessa idea puntata sulla porta 21, usando invece una riga di risposta in modalità passiva1.\nNiente cross-site scripting. Niente request forgery nel senso solito. Nessuna vulnerabilità nel browser. Il browser ha fatto quello che fanno i browser, il firewall ha fatto quello per cui era configurato, e il risultato è un port forward verso l\u0026rsquo;attaccante.\nDue colonne che l'helper non sa distinguere, perché in rete non c'è niente da distinguere Il protocollo come progettato, e una pagina web. L'helper vede un'unica immagine. Un client vero Un modulo nascosto in una pagina Cosa lo avvia Una persona apre un client FTP o IRC e si collega Il client apre un socket e lo indica nel flusso PORT 192,168,1,29,4,0 Cosa lo avvia Una persona apre una pagina. Il suo contributo è tutto lì. Un modulo invia al server dell'attaccante sulla stessa porta PORT 192,168,1,29,4,0 Cosa controlla l'helper la porta di destinazione corrisponde\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì parola chiave all'inizio dei dati\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì la sintassi è valida\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì indirizzo e porta presenti\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì Cosa controlla l'helper la porta di destinazione corrisponde\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì parola chiave all'inizio dei dati\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì la sintassi è valida\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì indirizzo e porta presenti\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;sì si apre una porta in ingresso, identica, in entrambe le colonne A cambiare sono le tre cose che l'helper non può vedere. Se c'era di mezzo un client. Se l'utente lo voleva. Chi ha scelto indirizzo e porta. Nessuna di queste lascia traccia in rete, quindi nessuna cura nel parser le può recuperare. Entrambe le colonne sono ben formate. Lo stesso helper, lo stesso confronto con lo schema, la stessa expectation, e nessun client FTP o IRC in tutta la scena. Ogni controllo che l\u0026rsquo;helper esegue è soddisfatto allo stesso modo in entrambe le colonne, perché in rete non c\u0026rsquo;è nessuna differenza da trovare. Era il 2010. Sedici anni fa. I produttori di browser hanno aggiunto le porte IRC al loro elenco di blocco, il che ha chiuso quella porta in particolare e ha lasciato la stanza su cui si apriva esattamente com\u0026rsquo;era.\nDillo senza giri di parole, perché si perde sotto i nomi dei fornitori e i numeri di CVE. Gli attacchi non sfruttano un difetto degli helper. Usano gli helper correttamente. Ogni pacchetto è ben formato e ogni controllo passa onestamente. La funzione fa il suo lavoro, e il problema è proprio il suo lavoro.\nAllineare i byte dove l\u0026rsquo;helper li leggerà Tra il NAT Pinning e qualcosa di molto peggio c\u0026rsquo;era un ostacolo vero, e il modo per aggirarlo è la cosa più ingegnosa di tutta la storia. La maggior parte degli helper non cerca uno schema in un punto qualsiasi del flusso: controlla che la parola chiave stia all\u0026rsquo;inizio della parte dati di un pacchetto, che è come appare un vero messaggio di protocollo e come non appare mai il corpo di una richiesta HTTP, perché un corpo arriva dopo una pila di intestazioni che l\u0026rsquo;attaccante non controlla. Samy cita il comportamento del kernel stesso: il gestore rinuncia a meno che il metodo non compaia all\u0026rsquo;inizio dei dati2.\nQuindi l\u0026rsquo;attaccante ha bisogno che il browser emetta un segmento il cui primissimo byte sia la parola chiave. Non può scrivere le intestazioni, ma può scrivere il corpo e farlo lungo quanto vuole, e questo trasforma il problema in aritmetica.\nSpostare il confine del segmento finché la parola chiave cade dove legge l'helper L'helper legge il primo byte di un segmento. Quindi l'attaccante sposta dove si spezzano i segmenti. Come lo invierebbe il browser segmento 1 POST / HTTP/1.1 Host: ... segmento 2 ...headers... PORT 192,168,... segmento 3 ...1,29,4,0 padding padding La parola chiave sta a metà del segmento due, quindi l'helper la oltrepassa e non fa niente. Dopo che l'attaccante fissa la dimensione del segmento, o conferma solo parte del flusso segmento 1 POST / HTTP/1.1 Host: ... segmento 2 ...headers and padding... segmento 3 PORT 192,168,1,29,4,0 Ora la parola chiave è il primo byte di un segmento. L'helper la legge e apre la porta. Le due leve, e nessuna è un attacco a TCP. Il server dell'attaccante è un capo della connessione, quindi annuncia la dimensione massima di segmento che userà lo stack della vittima, e decide quanta parte del flusso confermare. Ne conferma una parte e la vittima ritrasmette dall'offset scelto dall'attaccante. Entrambe sono TCP ordinario e conforme agli standard, usato deliberatamente. Perché conta l\u0026rsquo;imbottitura. L\u0026rsquo;helper legge una parola chiave di protocollo solo quando è il primo byte di un segmento, quindi un attaccante che controlla solo il corpo deve spostare il confine del segmento finché non cade lì. Entrambe le leve sono TCP ordinario, usato di proposito. Il browser manda una richiesta grande con un delimitatore riconoscibile sepolto nel corpo; il server dell\u0026rsquo;attaccante la intercetta, misura quanti byte di intestazioni sono arrivati prima, e ora conosce l\u0026rsquo;offset. Poi annuncia una dimensione di segmento che mette il byte desiderato su un confine, oppure manda una conferma parziale in modo che la vittima ritrasmetta partendo esattamente da lì; e Armis aggiunge che anche la finestra TCP in quelle conferme si può costruire ad arte, «in order to fully control how the TCP stream is to be segmented»3. Il trucco è tutto qui, e non usa altro che il capo remoto di una connessione aperta dal browser della vittima stessa.\nUna volta ottenuto, il browser è un generatore di pacchetti puntato verso l\u0026rsquo;interno del tuo firewall. Deve solo mettere i trenta byte giusti all\u0026rsquo;inizio di un segmento.\nIl lavoro del 2021 ha saltato quasi tutta l\u0026rsquo;aritmetica. Una connessione relay del browser su TCP trasporta un campo nome utente controllato dall\u0026rsquo;attaccante, inviato presto, che accetta a capo e byte nulli; Armis ha mostrato una cattura in cui quel campo è \\r\\nPORT 192,168,1,29,4,0\\r\\n3. Peggio, quel percorso non consultava affatto l\u0026rsquo;elenco delle porte bloccate del browser, quindi l\u0026rsquo;unica mitigazione che il settore aveva distribuito due volte veniva semplicemente aggirata.\nNAT Slipstreaming, dall\u0026rsquo;inizio alla fine Metti insieme i pezzi ed ecco l\u0026rsquo;attacco completo, in ordine.\nDal clic alla connessione in ingresso in sei passi, nessuno dei quali è una vulnerabilità Sei passi. Quattro sono normale web e TCP. Uno è il tuo firewall. Uno è l'attaccante. 1 La vittima apre una pagina Una pubblicità, un link in un messaggio, qualsiasi cosa. Il coinvolgimento dell'utente è tutto qui. web normale 2 La pagina scopre l'indirizzo interno Glielo consegna l'interfaccia multimediale del browser, o lo restringe misurando i tempi degli indirizzi gateway comuni. web normale 3 L'attaccante misura il percorso Una richiesta sovradimensionata con un marcatore, e una cattura al capo remoto per vedere dove cadono le interruzioni. TCP normale 4 La pagina invia il payload vero Imbottito in modo che la parola chiave cada su un confine di segmento, esattamente come mostra il diagramma precedente. TCP normale 5 Il tuo firewall apre la porta L'helper riconosce il messaggio, ci riscrive l'indirizzo, e scrive l'expectation. il tuo firewall 6 L'attaccante si collega in ingresso Al tuo indirizzo pubblico, sulla porta mappata. L'expectation corrisponde e il firewall lo inoltra all'interno. il tuo firewall Conta le vulnerabilità sfruttate sulla macchina della vittima. Non ce ne sono. Il browser era aggiornato. Il sistema operativo era aggiornato. Non è stato installato niente e non è stata usata nessuna credenziale. Pochi secondi, un clic, e l'unico componente che avrebbe potuto rifiutare era quello costruito per rifiutare. La catena completa, dal clic alla connessione in ingresso. I passi da uno a quattro sono normale comportamento web e TCP. Il passo cinque è la funzione del firewall che lavora esattamente come documentato, ed è l\u0026rsquo;unico componente che avrebbe potuto rifiutare. Tempo totale: secondi. Interazione dell\u0026rsquo;utente: un clic. Vulnerabilità sfruttate sulla macchina della vittima: nessuna.\nLa cronologia della divulgazione è una prova di per sé. Samy ha pubblicato il 31 ottobre 2020, e tra il 6 gennaio e il 26 febbraio 2021 Chrome, Edge, Safari e Firefox hanno tutti distribuito mitigazioni3, registrate come CVE-2020-16043, CVE-2021-23961 e CVE-2021-1799.\nQuattro produttori di browser hanno distribuito patch d\u0026rsquo;emergenza per una funzione dei firewall. Armis spiega il perché con parole sue: «While the underlying issue of this attack is the way NATs are implemented (in various ways in routers and firewalls, throughout numerous vendors and applications), the easiest and fastest way to mitigate was through a patch to browsers»3.\nNon è una correzione. Sono altri quattro settori che mettono sacchi di sabbia davanti alla porta di qualcun altro, perché la porta in sé non sarebbe mai stata sostituita.\nL\u0026rsquo;inoltro di chiamata H.323 punta a qualsiasi cosa nella tua rete La maggior parte degli helper limita il danno senza volerlo. L\u0026rsquo;helper FTP vincola la destinazione dell\u0026rsquo;expectation al client che l\u0026rsquo;ha creata, quindi il peggio che ottiene un attaccante è una porta sulla macchina che ha cliccato: grave, ma sopportabile.\nH.323 è catastrofico, e il motivo è una funzione di telefonia.\nUn centralino deve supportare l\u0026rsquo;inoltro di chiamata, e una chiamata inoltrata è per definizione una chiamata verso qualcuno che non è sulla linea. Quindi la segnalazione deve nominare un terzo endpoint, e l\u0026rsquo;helper deve aprirgli un percorso, altrimenti l\u0026rsquo;inoltro attraverso il NAT non funziona proprio. Ogni implementazione seria lo supporta, e l\u0026rsquo;helper di netfilter documenta il comportamento in modo esplicito, con tanto di diagramma13. Armis ha letto il codice e ha riassunto la conseguenza in una frase: «a single H.323 packet sent over TCP port 1720 that initiates call forwarding can open a pinhole (named an expectation in the conntrack subsystem) to any TCP port of any internal IP on the network»3.\nVincolata a un host, o puntata a qualsiasi cosa nella rete La maggior parte degli helper raggiunge solo la macchina che ha cliccato. Uno di loro non ha limiti. FTP, SIP, IRC H.323, con inoltro di chiamata L'expectation dice dst = l'host la cui connessione l'ha creata L'expectation dice dst = qualunque indirizzo il payload abbia indicato la macchina che ha cliccato 192.168.1.29 la stampante porta 9100 la telecamera password di default il controllore nessuna autenticazione Raggio d'azione Una macchina. Ogni porta su di essa, per la vita della regola, che è già abbastanza grave ma si sopravvive. Il dispositivo è gestito, aggiornato e fa girare qualcosa che registra log. Raggio d'azione Ogni indirizzo della rete, un messaggio ciascuno. Percorri l'intervallo, leggi i banner, scegli un bersaglio. Nessuno di quei dispositivi ha fatto una richiesta o aperto un browser. L'inoltro di chiamata è tutta la differenza, ed è una funzione, non un difetto. Una chiamata inoltrata va a qualcuno che non è sulla linea, quindi la segnalazione nomina una terza parte e l'helper esegue. Perché un helper sta in una categoria diversa da tutti gli altri. Vincola l\u0026rsquo;expectation all\u0026rsquo;host che l\u0026rsquo;ha creata e l\u0026rsquo;attaccante raggiunge una macchina. Lascia che l\u0026rsquo;inoltro di chiamata nomini una terza parte, come richiede il protocollo, e percorre tutto il tuo intervallo di indirizzi. Qualsiasi porta TCP. Qualsiasi indirizzo interno. Da un solo pacchetto, che l\u0026rsquo;attaccante ha fatto mandare a un browser.\nCosì l\u0026rsquo;attacco smette di riguardare la macchina della vittima e diventa una scansione delle porte della tua rete interna, eseguita da internet, con i risultati letti su connessioni che il tuo stesso firewall sta autorizzando. Il punto sono i dispositivi che trova, perché non sono aggiornati, spesso non si possono aggiornare, e l\u0026rsquo;intero modello di sicurezza della maggior parte di essi è sta all\u0026rsquo;interno. Armis ci ha messo un numero: un anno dopo la pubblicazione, il 97% dei controllori industriali vulnerabili a una serie di falle critiche non era ancora stato aggiornato3. Questa è la realtà che «all\u0026rsquo;interno» sta reggendo.\nQuindi H.323 è quello da sistemare per primo, su ogni piattaforma, perché arriva oltre la vittima; ed è anche quello che non usa quasi nessuno, il che ne fa il miglioramento di sicurezza più economico di tutti. Spegnilo. Non ti chiamerà nessuno.\nL\u0026rsquo;helper può scattare per un messaggio che non hai mandato tu Una variante merita una sezione a sé, perché demolisce l\u0026rsquo;ipotesi a cui ci si aggrappa quando si cerca un motivo per non agire: va bene, ma l\u0026rsquo;innesco deve venire dall\u0026rsquo;interno, quindi controlla i browser e controlli il problema.\nNo.\nNel luglio 2022 David Leadbeater ha trovato due difetti nell\u0026rsquo;helper IRC di Linux14. Il modulo cerca la stringa \\1DCC in qualsiasi punto del flusso invece di controllare che sia un messaggio correttamente delimitato al posto giusto, e il suo controllo sull\u0026rsquo;indirizzo confronta con l\u0026rsquo;indirizzo del server di chat invece che con l\u0026rsquo;host dietro il traduttore, quindi l\u0026rsquo;indirizzo pubblicamente noto di un server pubblico lo soddisfa. Metti insieme le due cose e un attaccante manda al client della vittima un ping da client a client (una cosa del tutto normale da ricevere da qualsiasi altro utente) con dentro una richiesta di trasferimento diretto:\nPRIVMSG ExampleUser :^APING ^ADCC CHAT x 3325256705 22^A Per le regole del protocollo, il client risponde a un ping rimandando indietro il payload, quindi il client della vittima invia diligentemente quella stringa in uscita, e l\u0026rsquo;helper, che osserva il flusso in uscita, ci trova DCC e apre la porta.\nUna porta aperta da un messaggio che la vittima non ha mai scritto Nessuno all'interno ha cliccato niente. È stato il client della vittima a emettere l'innesco, su richiesta. Il client della vittima 192.168.1.29 Firewall + helper IRC legge il flusso Un estraneo qualsiasi altro utente, qualsiasi rete 1\u0026#160;\u0026#160;un normale ping, con una richiesta di chat diretta nascosta nel payload PRIVMSG ExampleUser :^APING ^ADCC CHAT x 3325256705 22^A 2\u0026#160;\u0026#160;il protocollo dice di rispondere a un ping rimandando il payload, e lui lo fa 3\u0026#160;\u0026#160;entrambi i controlli dell'helper passano, e nessuno dei due avrebbe dovuto cerca la parola chiave in qualsiasi punto del flusso, non all'inizio di un messaggio delimitato convalida l'indirizzo rispetto al server di chat, non rispetto all'host dietro il traduttore 4\u0026#160;\u0026#160;l'expectation esiste, e la porta 22 è aperta in ingresso verso la vittima Ogni cosa in quella sequenza ha seguito la sua specifica. L'estraneo ha mandato un messaggio lecito. Il client ha risposto come richiede il protocollo. L'helper ha trovato lo schema per cui era scritto. Nessun utente ha deciso niente, e niente in nessun log sembrerà minimamente strano. L\u0026rsquo;innesco non deve venire da qualcuno di cui ti fidi, né da un browser, né da qualcosa che un utente ha fatto di proposito. Ogni software qui ha seguito la sua specifica, e il risultato è una porta aperta e niente di strano in nessun log. Nessuno all\u0026rsquo;interno ha fatto niente di sbagliato e nessuno ha cliccato. Il client ha seguito la specifica, e la specifica insieme all\u0026rsquo;helper ha prodotto un buco in ingresso verso la porta 22 di una macchina dentro la rete. È diventata la CVE-2022-2663, e la descrizione nel database nazionale delle vulnerabilità è di una chiarezza ammirevole: «A firewall may be able to be bypassed when users are using unencrypted IRC with nf_conntrack_irc configured»15.\nNota la parola unencrypted. Tieni a mente anche questa.\nLa raccomandazione dell\u0026rsquo;autore stesso è il punto a cui il resto di questo articolo arriva da un\u0026rsquo;altra direzione: «Potentially entirely deprecate and remove nf_conntrack_irc, it\u0026rsquo;s unclear it has much use anymore»14.\nI parser sono l\u0026rsquo;altra metà del problema Tutto quello visto finora riguarda helper che funzionano correttamente. C\u0026rsquo;è un secondo problema, separato: sono parser di protocollo scritti in C, nel percorso veloce di un dispositivo di sicurezza, su dati forniti da estranei, con il tasso di bug che ti aspetteresti. E non è un problema di Linux o dei router economici: compare presso ogni fornitore, nel codice che fanno pagare di più.\nCVE Componente Cosa fa un pacchetto costruito ad arte CVE-2018-0051 Junos SIP ALG Manda in crash il demone di flusso su SRX e MX; registra anche che il SIP ALG è attivo di default tranne sui modelli di fascia alta CVE-2018-15454 Cisco ASA / FTD SIP inspection Riavvia il dispositivo o satura la CPU CVE-2022-2663 Linux nf_conntrack_irc Apre porte attraverso il firewall, come sopra CVE-2023-22412 Junos SIP ALG «Specific SIP messages» mandano in crash il demone di flusso, in modo ripetibile CVE-2023-22415 Junos H.323 ALG Scrittura fuori dai limiti causata da «specific H.323 packets» CVE-2024-21616 Junos SIP ALG Un pacchetto SIP esaurisce il pool NAT, quindi il traffico legittimo smette di essere tradotto CVE-2024-26851 Linux nf_conntrack_h323 Shift di bit fuori intervallo nella decodifica della bitmap H.323 CVE-2024-39551 Junos H.323 ALG Memoria esaurita da «specific packets» finché il traffico si ferma Ognuna è raggiungibile dalla rete senza autenticazione, da chiunque riesca a far arrivare un pacchetto all\u0026rsquo;interfaccia esterna, cioè da chiunque. E leggi la formulazione: specific SIP messages, specific H.323 packets, a specific SIP packet. Non è un protocollo che cede sotto carico. È qualcuno che costruisce un pacchetto di proposito.\nFermati sul caso Cisco. La CVE-2018-15454 è stata pubblicata il 31 ottobre 2018 con gravità 8,6, era sfruttata attivamente, e l\u0026rsquo;avviso diceva che l\u0026rsquo;aggiornamento software non era ancora disponibile16. La mitigazione di Cisco, nel loro stesso avviso, è no inspect sip. Quindi la risposta del fornitore a una falla sfruttata attivamente nella funzione è stata spegnere la funzione, il che pone la domanda su cui è costruito il resto di questo articolo. Se spegnerla è una risposta accettabile durante un incidente, su che base resta accesa per tutto il resto del tempo?\nUn helper funziona solo se non cifri Questa parte dovrebbe chiudere da sola la discussione, ed è quella che riceve meno attenzione. Un helper di protocollo legge il tuo payload e non può leggerne uno cifrato. Quindi un helper fa qualcosa solo sul traffico che hai scelto di lasciare in chiaro, e mantenere l\u0026rsquo;helper funzionante significa mantenere in chiaro quel traffico.\nOgni protocollo dell\u0026rsquo;elenco ha una modalità cifrata da ben più di dieci anni. FTP ha TLS dal 200517; attivalo e gli scambi PORT e PASV diventano invisibili e l\u0026rsquo;helper non fa niente. SIP ha TLS fin dalla specifica di base, con il media cifrato accanto. H.323 ha il suo allegato di sicurezza. La chat ha TLS da moltissimo tempo, e il consiglio ufficiale per la CVE-2022-2663 era, testualmente, di usarlo in modo che l\u0026rsquo;helper non possa vedere le tue richieste di trasferimento15.\nL'helper ha bisogno del testo in chiaro, quindi tenere l'helper significa tenere il testo in chiaro Puoi avere la cifratura o puoi avere l'helper. Una terza colonna non c'è. Canale di controllo cifrato Helper funzionante Cosa vede l'helper 17 03 03 01 a4 9c 2f e1 8b 44 d0 ... ciphertext Né parola chiave, né indirizzo, né porta. Cosa vede l'helper REGISTER sip:example ... Contact: 192.168.1.29:5060 E lo vede anche ogni altro dispositivo tra te e loro. Cosa ti costa L'helper non fa proprio niente, quindi gli endpoint devono risolvere da soli il proprio problema di traduzione: cosa che ognuno di questi protocolli sa fare da dieci anni. Cosa ti costa Credenziali di registrazione, chi ha chiamato chi, e ogni indirizzo interno, in chiaro, attraverso ogni rete tra i due capi. Nessuna delle quali controlli tu. La modalità cifrata esiste da tanto così FTP su TLS dal 2005\u0026#160;\u0026#160;\u0026#183;\u0026#160;\u0026#160;SIP su TLS con media cifrato dalla specifica di base\u0026#160;\u0026#160;\u0026#183;\u0026#160;\u0026#160;chat su TLS da decenni\u0026#160;\u0026#160;\u0026#183;\u0026#160;\u0026#160;H.323 ha il suo allegato di sicurezza Quindi la versione onesta di «ci serve l'helper SIP» è una frase che nessuno dice ad alta voce. Eccola: ci serve che la segnalazione delle chiamate attraversi reti non fidate in chiaro, perché una scatola non nostra possa riscriverla. Lo scambio che nessuno mette per iscritto. Un helper funziona solo sul payload che riesce a leggere, quindi le due colonne si escludono a vicenda. Quella di destra è quello che un SIP ALG funzionante ti chiede di accettare. Quindi la versione onesta di «ci serve il SIP ALG» è: ci serve che la nostra segnalazione delle chiamate viaggi in chiaro su reti non fidate, così che un middlebox che non controlliamo possa riscriverla. Dillo così in una revisione di progetto e guarda quanta strada fa.\nC\u0026rsquo;è una versione più tagliente, ed è il motivo per cui la questione non è in bilico. Lasciare un helper attivo è un incentivo permanente contro la cifratura: il giorno in cui qualcuno attiva SIP su TLS, le chiamate si rompono per colpa dell\u0026rsquo;helper, quindi la modifica viene annullata e il traffico in chiaro resta un altro anno. Chiedi com\u0026rsquo;è andata a chiunque ci abbia provato dietro un firewall di fascia consumer.\nOgni altro protocollo su internet è andato nella direzione opposta: traffico web cifrato di default, DNS cifrato, trasporto della posta cifrato, QUIC che cifra persino l\u0026rsquo;intestazione di trasporto perché i middlebox non possano leggerla. L\u0026rsquo;era dei middlebox sull\u0026rsquo;internet aperta è finita anni fa, e gli ultimi posti che contano su un dispositivo nel percorso che legge il payload sono quelli dove qualcuno ha lasciato acceso un helper.\nIPsec è quello in cui l\u0026rsquo;helper non sa leggere niente Il che porta alla domanda ovvia sul protocollo che non è altro che cifratura. La risposta è peggiore di quanto penseresti.\nESP non ha numeri di porta, essendo un protocollo IP a sé stante, e un traduttore smista il traffico di ritorno in base alla porta. Quindi con due client dietro un indirizzo diretti allo stesso gateway non c\u0026rsquo;è niente che permetta di distinguere i loro pacchetti in ingresso. La RFC 3715 lo ha messo per iscritto nel marzo 2004: un NAT non può imparare la mappatura per ispezione, e «it is possible that the NAT will deliver the incoming IPsec packets to the wrong destination»18.\nCosì i fornitori hanno costruito un helper. Osserva lo scambio IKE su UDP 500, i cui primi pacchetti sono in chiaro, raccoglie i cookie e il security parameter index, e apre un gate in modo che l\u0026rsquo;ESP in ingresso con quel valore raggiunga l\u0026rsquo;host giusto all\u0026rsquo;interno. Juniper lo descrive senza giri di parole: «When ESP traffic hits the IKE ALG gates, sessions are created to capture subsequent ESP traffic»19. inspect ipsec-pass-thru di Cisco fa lo stesso per ESP e AH «associated with an IKE UDP port 500 connection», con una mappa di default che non fissa alcun limite alle connessioni ESP per client20.\nStesso oggetto, stessa autorità, solo che l\u0026rsquo;helper non confronta nemmeno una parola chiave. Non può analizzare l\u0026rsquo;ESP, perché l\u0026rsquo;ESP è la parte cifrata; smista pacchetti in base a un numero di 32 bit che ha visto passare in chiaro. La sezione della RFC 3715 che ne parla si intitola, senza ironia, «Helper Incompatibilities», e registra che lo smistamento per cookie «results in problems with re-keying» e che i dispositivi che analizzano i payload ISAKMP «may not handle all payload ordering combinations»18. Un\u0026rsquo;ipotesi al posto di una regola, e un parser fatto a mano nel percorso dei pacchetti, messo per iscritto ventidue anni fa.\nLa correzione è arrivata dieci mesi dopo, nel protocollo: la RFC 3947 fa sì che i due capi rilevino un traduttore durante lo scambio delle chiavi, e la RFC 3948 incapsula l\u0026rsquo;ESP in UDP 4500 così che le porte ci siano di nuovo21. Juniper poi dice ad alta voce la parte che di solito si tace: «IKE NAT-T traffic on floating port 4500 is not processed in an IKE ALG»19. Fallo come si deve e l\u0026rsquo;helper viene aggirato del tutto, che è la stessa frase dell\u0026rsquo;FTP passivo e di ICE.\nIl Linux mainline questo non l\u0026rsquo;ha mai adottato. Tra i protocolli conntrack non c\u0026rsquo;è un modulo ESP, e una patch del 2021 che aggiungeva il tracciamento basato sullo SPI è passata per la revisione sulla lista netfilter e non è mai stata integrata22. I fornitori che lo distribuiscono lo distribuiscono fuori dall\u0026rsquo;albero ufficiale, sulle scatole che hanno meno probabilità di essere aggiornate.\nFallisce Cyber Essentials, punto per punto Fin qui è stato un argomento di sicurezza. Per chiunque si certifichi nel Regno Unito è anche un argomento di conformità, e non c\u0026rsquo;è nessuna interpretazione ingegnosa di mezzo: sono tre punti contro tre punti. Cyber Essentials è lo schema sostenuto dal governo britannico ed erogato tramite IASME, il suo primo controllo tecnico riguarda i firewall, e il documento dei requisiti attuale è la versione 3.3, aprile 2026. Ecco cosa ti obbliga a fare, testualmente23:\nblock unauthenticated inbound connections by default ensure inbound firewall rules are approved and documented by an authorised person, and include the business need in the documentation remove or disable unnecessary firewall rules, when they are no longer needed Tre requisiti sui firewall, e cosa fa un helper rispetto a ciascuno Cyber Essentials, controllo uno, firewall. Tre obblighi, e la risposta di un helper a ciascuno. Cosa dice il documento dei requisiti Cosa fa un helper di protocollo Esito \"block unauthenticated inbound connections by default\" Il primo obbligo, e il motivo per cui esiste il controllo. Ne consente una, sulla base di una stringa in un pacchetto. La parte che ha fornito la stringa non si è autenticata con niente. fallisce \"ensure inbound firewall rules are approved and documented by an authorised person, and include the business need\" Scritta alla velocità della linea da un modulo del kernel. Nessuno l'ha approvata, nessuno l'ha vista, nessun documento, nessuna esigenza registrata. fallisce \"remove or disable unnecessary firewall rules, when they are no longer needed\" Il che presuppone che qualcuno le abbia ritenute necessarie. Rimosse da un timer. Un timer non è una revisione, e nessuno ha mai valutato se la regola fosse necessaria fin dall'inizio. fallisce È il primo dei cinque controlli tecnici, non un caso limite nel quinto. Si applica, nelle parole dello schema stesso, a firewall perimetrali, computer desktop, portatili, router e server. I tre requisiti sui firewall dei controlli tecnici di Cyber Essentials, e cosa fa un helper di protocollo rispetto a ciascuno. Tre requisiti, tre mancanze, sul primo dei cinque controlli. Un\u0026rsquo;expectation esiste proprio per consentire una connessione in ingresso che altrimenti sarebbe bloccata, e la parte i cui dati l\u0026rsquo;hanno generata non si è autenticata con niente, quindi il primo punto fallisce in pieno. La regola l\u0026rsquo;ha scritta alla velocità della linea un modulo del kernel, quindi non c\u0026rsquo;è un documento, nessuna esigenza aziendale registrata e nessuna persona autorizzata in tutta la catena: chiedi il registro di approvazione della regola che ha lasciato arrivare una connessione alla porta 9100 della tua stampante e non ce l\u0026rsquo;hai, e non puoi crearlo, perché è esistita per novanta secondi diciotto mesi fa. E le regole di un helper vengono rimosse da un timer, che non è una revisione.\nTre requisiti, tre mancanze, sul primo controllo di cinque, che si applica nelle parole stesse dello schema a «boundary firewalls, desktop computers, laptops, routers, servers»23, cioè a tutto quello che possiedi.\nSii onesto su cosa significa, perché non sono io l\u0026rsquo;ente di certificazione. Un valutatore lavora sul questionario e sulle prove che gli dai, e quel questionario chiede se blocchi di default le connessioni in ingresso non autenticate e se le tue regole in ingresso sono documentate e approvate. Rispondi sì con un helper attivo e la risposta non è vera. Potresti benissimo passare lo stesso. Passare e rispettare non sono la stessa cosa, e la differenza viene fuori dopo un incidente.\nEd è solo formulato con insolita chiarezza: uno standard del settore delle carte di pagamento, il questionario di un cliente e il modulo di proposta del tuo assicuratore chiedono tutti la stessa cosa con altre parole. Quindi questa è la sezione da portare a chi firma il certificato. Non gli attacchi e non le CVE. Tre punti, e la risposta onesta a ciascuno.\nIl settore l\u0026rsquo;ha già deciso, vent\u0026rsquo;anni fa Niente di tutto questo è nuovo o contestato. Quello che colpisce è da quanto tempo la decisione è presa mentre i default andavano avanti come se niente fosse.\nVenticinque anni della stessa conclusione, e l'unica riga che non compare mai La conclusione è arrivata nel 2007. I default non si sono mossi. Quando Cosa è successo Chi poteva agire gen 2001 La RFC 3027 cataloga ogni protocollo che il NAT rompe, e cosa deve fare un ALG per ciascuno ente degli standard feb 2002 La RFC 3234 chiama il meccanismo «a deliberate layer violation» e avverte di nuovi punti di attacco ente degli standard gen 2007 RFC 4787, una Best Current Practice: gli ALG NAT per protocolli UDP SHOULD essere spenti ente degli standard gen 2010 NAT Pinning: un modulo nascosto in una pagina web apre una porta in ingresso sulla macchina di chi la visita un ricercatore 2012 netfilter acquisisce un meccanismo di collegamento esplicito e un interruttore per fermare l'assegnazione automatica il kernel apr 2016 Linux cambia il default: gli helper non fanno niente senza una regola esplicita. Arriva in 4.7 il kernel ott 2020 NAT Slipstreaming, poi la variante di gennaio 2021 che raggiunge ogni dispositivo della rete ricercatori nov 2020 Quattro produttori di browser distribuiscono mitigazioni; lo standard web acquisisce un elenco di porte vietate i browser ago 2022 L'helper IRC si rivela capace di scattare su un messaggio che la vittima non ha mai scritto un ricercatore 2023\u0026#8211;24 Altre quattro vulnerabilità ALG nella linea di firewall di punta di un solo fornitore ricercatori Ora leggi la colonna «chi poteva agire», e nota chi non c'è mai. In venticinque anni, nessuna riga è un fornitore di firewall che distribuisce un aggiornamento per spegnere la funzione sugli apparati già installati. L'ente degli standard l'ha chiesto, il kernel è cambiato a monte, e nessuno dei due arrivava alle scatole. Venticinque anni della stessa conclusione, raggiunta da persone che non potevano correggere la cosa che andava corretta. L\u0026rsquo;unica riga che non compare mai è un fornitore di firewall che spegne la funzione sugli apparati già installati. La RFC 3027 ha catalogato ogni protocollo che il NAT rompe nel gennaio 200124. La RFC 3234 ha inserito gli ALG nella tassonomia dei middlebox un anno dopo ed è stata netta sul costo di aggiungere scatole a un percorso: «creates extra points of attack, reduces or eliminates the ability to perform end to end encryption, and complicates trust models»10. Poi, nel gennaio 2007, la RFC 4787 (una Best Current Practice, non un suggerimento) ha stabilito come il NAT è tenuto a comportarsi, e il requisito dieci diceva questo:\nREQ-10: To eliminate interference with UNSAF NAT traversal mechanisms and allow integrity protection of UDP communications, NAT ALGs for UDP-based protocols SHOULD be turned off.4\nSpenti. Diciannove anni fa, con il motivo dichiarato: gli helper intralciano i meccanismi che funzionano davvero, e ti impediscono di proteggere il tuo stesso traffico. La stessa sezione osserva, con stanchezza, che alcuni prodotti hanno gli ALG «turned on permanently»4.\nTre anni dopo il NAT Pinning ha mostrato una pagina web che apre una porta1. Netfilter ha risposto nel 2012 con il target CT, che collega un helper a un flusso nominato tramite una regola esplicita, e con un interruttore per fermare del tutto l\u0026rsquo;assegnazione automatica11. Poi il 25 aprile 2016 il kernel ha cambiato il suo default, con un messaggio di commit che vale la pena leggere per intero per quanto suona stanco:\nFour years ago we introduced a new sysctl knob to disable automatic helper assignment [\u0026hellip;] This knob kept this behaviour enabled by default to remain conservative. This measure was introduced to provide a secure way to configure iptables and connection tracking helpers through explicit rules. Give the time we have waited for this, let\u0026rsquo;s turn off this by default now, worse case users still have a chance to recover the former behaviour by explicitly enabling this back through sysctl.5\nÈ arrivato in Linux 4.7, e da allora una macchina con quei moduli caricati non ne fa niente finché non scrivi una regola che ne collega uno a un flusso. Tutto il resto è nel diagramma qui sopra, fino allo standard stesso della piattaforma web che ha acquisito l\u0026rsquo;elenco delle porte25.\nOra guarda l\u0026rsquo;elenco per quello che manca. In venticinque anni nessuna riga è un fornitore di firewall che spinge un aggiornamento del firmware per spegnerli sugli apparati già installati. L\u0026rsquo;ente degli standard l\u0026rsquo;ha chiesto. Il kernel l\u0026rsquo;ha fatto a monte. I browser ne hanno pagato il prezzo. Le scatole sono andate avanti.\nE l\u0026rsquo;elenco delle porte bloccate è il segnale rivelatore. Le porte 69, 137, 161, 554, 1719, 1720, 1723, 5060, 5061, 6566 e 10080 ci sono tutte6: TFTP, NetBIOS, SNMP, RTSP, H.323 due volte, PPTP, SIP due volte, il protocollo degli scanner e il protocollo di backup Amanda. Elenca i moduli helper in un albero del kernel Linux e scoprirai di aver letto due volte lo stesso elenco. Non è una coincidenza, e non è un controllo di sicurezza: è un settore che mantiene una lista nera di porte permanente e in crescita perché un altro non vuole cambiare un default.\nSotto la maggior parte dei marchi c\u0026rsquo;è Linux Il dettaglio di netfilter è la parte importante, non una digressione a forma di Linux. Una quota molto grande delle scatole che fanno NAT su questo pianeta sono Linux con netfilter sotto un\u0026rsquo;interfaccia del fornitore: ogni derivato di OpenWrt, cioè la maggior parte del mercato dei router consumer e per piccole imprese, la maggior parte dei router forniti dai provider, buona parte degli apparati per il NAT di classe carrier, e molti dispositivi commerciali la cui interfaccia web non lascia intuire cosa c\u0026rsquo;è sotto. L\u0026rsquo;helper che analizza il tuo SIP è molto spesso lo stesso nf_conntrack_sip.c che c\u0026rsquo;è nel kernel mainline, compilato da qualcun altro e pilotato da un menu.\nLe prove sono nella ricerca stessa. Quando Samy è andato a cercare il SIP ALG in un router Netgear ha estratto il firmware e ha trovato un modulo del kernel che conteneva ftp_decode e sip_decode2. L\u0026rsquo;elenco dei prodotti testati da Armis includeva OpenWrt e VyOS più una categoria chiamata semplicemente «various consumer grade Linux routers», e l\u0026rsquo;analisi di H.323 che ha prodotto la scoperta sull\u0026rsquo;host interno qualsiasi veniva dalla lettura del sorgente di netfilter, poi confermata su firewall commerciali di tre fornitori3.\nIl default del kernel non arriva fino a te. Linux 4.7 ha spento l\u0026rsquo;assegnazione automatica degli helper nel 2016, ma solo se il kernel è abbastanza recente e nessuno l\u0026rsquo;ha riaccesa. Armis ha trovato VyOS che reimpostava esplicitamente nf_conntrack_helper a 1, e ha notato che molti prodotti basati su Linux la riattivano «as it is still useful for many users»3. Un kernel del 2014 in un prodotto del 2026 ha il comportamento del 2014, e un kernel attuale con l\u0026rsquo;interruttore girato ha lo stesso. Nessuna delle due cose compare in una scheda tecnica.\nConoscere il modello di netfilter ti dice cosa chiedere a ogni altra scatola. Le tre domande della sezione sulle expectation non sono domande su Linux. Sono le domande. Ogni fornitore ha lo stesso oggetto con un nome diverso, la documentazione quasi mai ti dà le risposte, e sapere cosa fa l\u0026rsquo;implementazione di riferimento è il modo per capire cosa testare.\nFai bene il lavoro su Linux, poi leggi ogni altro fornitore alla luce di quello.\nGli helper di Linux, come si deve Comincia da cosa è effettivamente caricato:\nlsmod | grep -E \u0026#39;nf_conntrack|nf_nat\u0026#39; I moduli helper sono quelli con il nome di un protocollo (nf_conntrack_ftp, _sip, _h323, _irc, _tftp, _pptp, _snmp, _amanda, _sane, _netbios_ns e _talk), ciascuno con un nf_nat_* corrispondente dove gli indirizzi vengono riscritti. Poi controlla l\u0026rsquo;assegnazione automatica, l\u0026rsquo;interruttore che decide se un modulo caricato fa qualcosa da solo:\nsysctl net.netfilter.nf_conntrack_helper Zero è quello che vuoi, ed è il default da Linux 4.7 in poi5. Uno significa che ogni helper caricato è attivo su ogni flusso che corrisponde alla sua porta, da qualsiasi indirizzo: il comportamento del 2015, e quello che gli attacchi di questo articolo presuppongono.\nPoi guarda conntrack -L expect su un firewall in produzione. Con gli helper spenti resta vuoto; con gli helper accesi, mettici accanto una cattura e guarda le righe comparire mentre la gente usa la rete. Vale la pena farlo una volta: niente rende l\u0026rsquo;idea più in fretta che vedere comparire e sparire davanti a te un permesso in ingresso che non hai scritto.\nSe l\u0026rsquo;assegnazione automatica è spenta e vuoi comunque un helper su un flusso specifico, il modo approvato è una regola esplicita, che lo vincola a una destinazione e a una porta:\niptables -t raw -A PREROUTING -p tcp --dport 21 -d 192.0.2.10 -j CT --helper ftp L\u0026rsquo;equivalente in nftables dichiara un oggetto ct helper e lo collega con ct helper set nella catena prerouting, che è la stessa disciplina con una sintassi migliore.\nNota cos\u0026rsquo;è quella regola: un\u0026rsquo;eccezione in ingresso documentata, approvata e giustificata da un\u0026rsquo;esigenza aziendale, scritta da una persona, dove un auditor può leggerla. Cosa che la versione automatica non potrebbe mai essere.\nSe li vuoi eliminati e non solo dormienti, e su un firewall dovresti, impedisci del tutto il caricamento dei moduli:\nfor m in ftp sip h323 irc tftp pptp snmp amanda sane netbios_ns talk; do echo \u0026#34;install nf_conntrack_$m /bin/false\u0026#34; done \u0026gt; /etc/modprobe.d/no-conntrack-helpers.conf install ... /bin/false invece di blacklist è voluto: blacklist blocca il caricamento solo tramite alias, e qualsiasi cosa chieda il modulo per nome lo ottiene comunque. E se lo strato firewall di una distribuzione li carica per te (firewalld lo fa quando una zona ha attivo il servizio FTP o TFTP), è quello lo strato da sistemare, perché te li rimetterà gentilmente al loro posto.\nOgni altro marchio, e come spegnerlo Controlla la tua versione invece di fidarti di qualcosa trovato su internet, compreso questo articolo; questi default cambiano tra una release e l\u0026rsquo;altra e tra un modello e l\u0026rsquo;altro.\npfSense e OPNsense sono la prova che la discussione è chiusa. Non c\u0026rsquo;è un SIP ALG da disattivare, perché non ce n\u0026rsquo;è mai stato uno da attivare. Sono tra le distribuzioni firewall più diffuse che esistano, gestiscono la telefonia di moltissime organizzazioni, e se un helper fosse davvero necessario per il VoIP moderno questo non sarebbe possibile. Il proxy FTP ha fatto la stessa fine: Netgate l\u0026rsquo;ha tolto dal sistema base nel gennaio 2015.\nIl progetto di OpenBSD è quello che tutti gli altri avrebbero dovuto copiare. pf non riscrive i payload nel percorso di inoltro, mai. Se vuoi un aiuto per l\u0026rsquo;FTP esegui ftp-proxy, un demone separato in spazio utente, e scrivi una regola divert-to esplicita che gli manda la connessione di controllo26. Ne derivano subito tre proprietà: è spento a meno che tu non lo accenda deliberatamente, vede solo il traffico che hai nominato in una regola, e un suo bug manda in crash un processo in spazio utente invece del percorso dei pacchetti. Ecco com\u0026rsquo;è un opt-in quando qualcuno lo progetta invece di avvitarlo sopra.\nOpenWrt non distribuisce i moduli ALG, e l\u0026rsquo;assegnazione automatica resta spenta se li installi.\nCisco ASA e FTD hanno motori di ispezione nella policy globale di default, e no inspect sip è il consiglio di Cisco stessa durante un incidente:\npolicy-map global_policy class inspection_default no inspect sip no inspect h323 h225 no inspect h323 ras no inspect skinny Su FTD è configure inspection sip disable dalla CLI del dispositivo16. L\u0026rsquo;IPsec pass-through è quello che Cisco ha fatto giusto: inspect ipsec-pass-thru non è affatto nella policy di default, quindi a meno che qualcuno non l\u0026rsquo;abbia aggiunto deliberatamente non c\u0026rsquo;è niente da togliere20.\nCisco IOS e IOS XE lo hanno attivo di default anche loro («NAT support for SIP is enabled by default on port 5060», nelle parole di Cisco stessa7), e lo stesso vale per H.323:\nno ip nat service sip tcp port 5060 no ip nat service sip udp port 5060 no ip nat service h225 Juniper SRX attiva SIP e H.323 sui modelli branch e non su quelli di fascia alta, il che già da solo ti dice cosa ne pensano gli ingegneri di Juniper. Scopri a che punto sei con show security alg status, poi:\nset security alg h323 disable set security alg sip disable set security alg ftp disable set security alg ike-esp-nat disable FortiGate ispeziona il VoIP di default tramite il profilo VoIP, con un session helper del kernel sotto. La sequenza documentata da Fortinet rimuove prima l\u0026rsquo;helper27:\nconfig system session-helper show delete \u0026lt;the sip entry\u0026gt; end config system settings set default-voip-alg-mode kernel-helper-based end Leggi il numero della voce nel tuo output di show invece di copiarne uno; cambia tra modelli e release, e Fortinet avverte che spesso serve un riavvio.\nCheck Point è quello scomodo da verificare, perché non c\u0026rsquo;è un singolo interruttore. L\u0026rsquo;helper è una proprietà dell\u0026rsquo;oggetto servizio nella regola, quindi il servizio SIP predefinito ti dà il gestore del protocollo e tutto ciò che fa. Evitarlo significa creare un tuo servizio UDP o TCP semplice sulla porta 5060 con il tipo di protocollo impostato su nessuno, messo sopra qualsiasi cosa usi ancora quelli predefiniti. «L\u0026rsquo;ALG è attivo?» non è quindi una domanda a cui una pagina di impostazioni possa rispondere. Per questo, stai attento ad accettare la parola di chiunque ti dica che è disattivato.\nPalo Alto ti dà un interruttore per applicazione, e la loro stessa documentazione dice che il SIP ALG «creates dynamic NAT pinholes»8. Objects, Applications, cerca sip, spunta Disable ALG, commit.\nMikroTik distribuisce dieci helper sotto /ip firewall service-port (SIP, H.323, FTP, IRC, TFTP, PPTP, RTSP e altri), documentati con una riga ciascuno, senza alcun avviso di sicurezza nella pagina. Prima elencali, poi disattiva quello che trovi:\n/ip firewall service-port print /ip firewall service-port set [find name=sip] disabled=yes /ip firewall service-port set [find name=h323] disabled=yes /ip firewall service-port set [find name=ftp] disabled=yes Router consumer e forniti dal provider. Cerca «SIP ALG», «SIP helper», «VoIP passthrough», «IPsec passthrough» o «application layer gateway», di solito sotto le impostazioni NAT avanzate. Su molti router forniti dal provider l\u0026rsquo;impostazione non c\u0026rsquo;è proprio, il che ti dice se quella scatola appartiene a una rete di cui sei responsabile.\nQualunque sia la piattaforma, chiudi allo stesso modo: dimostralo. Metti una cattura sull\u0026rsquo;interfaccia esterna, manda dall\u0026rsquo;esterno una riga PORT o REGISTER costruita ad arte alla porta interessata, e conferma che non si apre niente. Un\u0026rsquo;impostazione che non hai testato è una convinzione.\nQuasi tutto quello che si rompe è già morto Sii onesto sul costo, perché è la base su cui chiedi a qualcuno di farlo. Spegnere l\u0026rsquo;helper SIP su una rete con telefoni configurati male può rompere le chiamate, di solito con audio in una sola direzione o registrazioni che cadono. Spegnere l\u0026rsquo;helper FTP rompe l\u0026rsquo;FTP in modalità attiva in uscita. Spegnere l\u0026rsquo;helper H.323 rompe H.323, se ne hai ancora. Aspettati almeno una di queste cose se lo fai con un\u0026rsquo;unica modifica su una rete che nessuno guarda da anni.\nOra rileggi l\u0026rsquo;elenco, e nota che quasi ogni protocollo servito da un helper è uno che il resto del settore ha già sepolto. H.323 ha perso contro SIP vent\u0026rsquo;anni fa. PPTP è indifendibile dal 1998, un caso che ho argomentato a lungo in IPsec Was a Good Idea. I trasferimenti diretti di IRC appartengono a un decennio di cui nessuno ha nostalgia. Il servizio nomi NetBIOS, le versioni di SNMP con community string, il protocollo di rilevamento degli scanner e il vecchio protocollo di backup sono reliquie da rete locale mai pensate per attraversare un perimetro. L\u0026rsquo;FTP in chiaro è sparito del tutto dai browser: Firefox l\u0026rsquo;ha rimosso nel luglio 2021 e Chrome quell\u0026rsquo;ottobre, entrambi perché l\u0026rsquo;uso era trascurabile e la sicurezza non valeva la manutenzione28.\nQuindi «non possiamo spegnere l\u0026rsquo;helper, qualcosa si romperà» di solito è un argomento per tenere in vita artificialmente un protocollo morto, per giustificare una funzione che apre porte agli estranei. Spegnerlo non rompe la tua rete. Mette in luce l\u0026rsquo;unica cosa al suo interno che andava ritirata anni fa, un\u0026rsquo;informazione che volevi comunque.\nSIP è l\u0026rsquo;eccezione autentica, e l\u0026rsquo;unica. Tutto il resto dell\u0026rsquo;elenco è una discussione che dovresti essere contento di perdere, e niente di tutto ciò è irrisolvibile, perché ogni protocollo coinvolto ha risolto il proprio problema di traduzione anni fa, nel protocollo, dove deve stare.\nCosa fare invece La risposta del middlebox e la risposta degli endpoint, una accanto all'altra Lo stesso problema, risolto due volte. Una risposta ha messo la decisione nel mezzo. Decide una scatola nel percorso Decidono i due capi Come funziona Un dispositivo legge il payload mentre passa Riscrive l'indirizzo che ci trova scritto Apre un buco in ingresso per la connessione descritta Nessuno ai due capi sa che è successo Come funziona Ogni capo chiede a un server come appare dall'esterno Ognuno offre ogni percorso che ha: locale, tradotto, via relay I due capi provano i percorsi l'uno contro l'altro Tengono aperto quello che funziona con il proprio traffico Cosa ti chiede Il payload leggibile, quindi niente cifratura sul canale di controllo. Quel dispositivo preciso in quel percorso preciso. Un solo traduttore, quindi uno carrier-grade a valle lo rompe. E fiducia in chi ha scritto il testo, che è la parte a cui nessuno ha pensato fino al 2010. Cosa ti chiede Accesso in uscita, e nient'altro. Funziona attraverso traduttori che non possiedi e non vedi, attraverso due di essi impilati, attraverso una rete mobile, e con il canale di controllo cifrato da un capo all'altro, perché niente nel mezzo lo legge. Per il trasferimento di file è ancora più semplice: modalità passiva, dove il client apre entrambe le connessioni in uscita e per un helper non resta niente da fare. La colonna di destra non è una proposta. È quello che il tuo browser fa già. Ogni videochiamata fatta in un browser viene negoziata così, attraverso ogni tipo di traduttore, senza nessun ALG nel percorso. Lo stesso problema, risolto due volte. Una risposta ha messo la decisione in una scatola nel mezzo. L\u0026rsquo;altra ha lasciato che i due capi se la sbrigassero tra loro, che è quello che ogni browser fa già per ogni videochiamata. FTP. Modalità passiva, nella specifica dal 1985 e default in ogni client da vent\u0026rsquo;anni: entrambe le connessioni si aprono in uscita e non resta niente da fare per un helper. E se nel 2026 sposti file tra organizzazioni, FTP non è il protocollo giusto: SFTP e FTPS sono cifrati, e nessun helper tocca né l\u0026rsquo;uno né l\u0026rsquo;altro.\nSIP e tutto il resto del tempo reale. L\u0026rsquo;endpoint chiede a un server su internet come appaiono dall\u0026rsquo;esterno il suo indirizzo e la sua porta pubblici, offre ogni percorso candidato che ha, e i due capi li provano l\u0026rsquo;uno contro l\u0026rsquo;altro e ne tengono uno che funziona, con un relay dove non esiste un percorso diretto. È STUN, TURN e ICE, ed è quello che ogni browser sulla terra fa per ogni videochiamata, attraverso ogni tipo di traduttore, senza nessun ALG nel percorso. Se il tuo centralino non sa farlo nel 2026, il problema è il tuo centralino.\nIPsec. Il NAT traversal, cioè la RFC 3947 e la RFC 3948: i due capi si accorgono del traduttore durante lo scambio delle chiavi e incapsulano l\u0026rsquo;ESP in UDP 4500 per il resto della sessione21, senza nessun gate su nessuna scatola in mezzo.\nH.323. Ritiralo. SIP ha vinto quella discussione intorno al 2005, quindi non c\u0026rsquo;è nessuna migrazione da pianificare, solo una cancellazione. I trasferimenti diretti, TFTP, SNMP, NetBIOS, il rilevamento degli scanner e il protocollo di backup fanno la stessa fine: nessuno di loro ha ragione di attraversare un perimetro.\nIPv6. Niente di tutto questo esiste lì, perché non c\u0026rsquo;è traduzione e quindi niente che un helper possa riscrivere. Un host ha il suo indirizzo, l\u0026rsquo;indirizzo nel payload è vero, e un firewall stateful permette quello che gli hai detto e nient\u0026rsquo;altro. Ogni problema di questo articolo discende dalla traduzione degli indirizzi, e quella discende dal non aver adottato IPv6, un argomento che ho trattato altrove e che non ripeterò.\nOra la parte su cui non intendo essere diplomatico.\nSe qualcuno ti dice di accenderli (un fornitore, un installatore di telefonia, un servizio gestito, un integratore su un contratto quadro) non è un ingegnere di rete e non è uno specialista di sicurezza. Può essere bravissimo nella cosa che fa davvero, e non sarà questa. La risposta corretta a un centralino che ha bisogno che un firewall gli riscriva la segnalazione è sistemare il centralino, e chiunque ti dica di aprire invece il tuo perimetro a un parser che confronta stringhe o non sa cos\u0026rsquo;è un\u0026rsquo;expectation o non gli importa. Non siamo dilettanti allo sbaraglio. C\u0026rsquo;è un modo giusto di farlo nei documenti di standard track dal 2007, e «basta attivare l\u0026rsquo;helper SIP» è il suono di qualcuno che afferra qualunque cosa chiuda il ticket oggi.\nChiedigli, lì nella stanza, a cosa è impostato il jolly dell\u0026rsquo;indirizzo di origine dell\u0026rsquo;expectation. Se la domanda arriva come una sorpresa, hai la tua risposta, e non è mai stata una questione di protocollo.\nSe li usi ancora, puoi definirti un professionista? È una domanda vera e merita una risposta vera, quindi eccone tre, perché i casi sono tre. Dipende dal fatto che tu sappia, e sapere non è una cosa che ti capita. Assicurarti di sapere è il lavoro.\nSe su un perimetro di cui sei responsabile c\u0026rsquo;è un helper SIP, H.323 o FTP attivo, e non sai dire senza andare a cercarlo cos\u0026rsquo;è un\u0026rsquo;expectation, quali dei suoi campi sono jolly, chi fornisce i valori e cosa dichiara la tua domanda di certificazione sulle regole in ingresso, allora no. Non su questo. Non hai scelto una configurazione, hai ereditato un default e non l\u0026rsquo;hai mai letto. La mancanza non è la lacuna; tutti hanno lacune e io ho avuto questa. È costruire un perimetro sopra una lacuna che non hai mai colmato, e poi firmare qualcosa che dice che il perimetro è solido.\nSe sai esattamente cosa fa, ed è attivo perché un ente regolatore nomina il protocollo, o l\u0026rsquo;apparato di un partner non termina nient\u0026rsquo;altro, o il centralino viene sostituito a marzo e questo deve reggere fino ad allora, allora sì, ovviamente, e stai facendo il lavoro come si deve. Sono vincoli reali e ho dovuto aggirarne di peggiori. Quello che lo rende professionale invece che negligente è che hai messo per iscritto quale helper, su quale interfaccia, per quale flusso, perché, e la data in cui viene tolto. Che è proprio la documentazione che il controllo sui firewall chiedeva comunque.\nIl caso indifendibile è quello di mezzo. Sapere abbastanza da sentirsi a disagio, e lasciarlo lì perché nessuno ti ha costretto a giustificarlo. Quella non è ingegneria. È un\u0026rsquo;abitudine con un numero di change attaccato, ed è così che una funzione che una Best Current Practice ti ha detto di spegnere nel gennaio 2007 è ancora accesa nel 2026.\nQuesto conta soprattutto quando paghi qualcuno per il suo giudizio, perché il giudizio non lo puoi ispezionare alla consegna. Quindi ispezionalo prima di firmare. Chiedi cosa fa la loro configurazione standard con gli helper di protocollo e perché, chiedi cosa succede se qualcuno sulla rete guest apre un link, e chiedi quali dispositivi interni sarebbero raggiungibili con l\u0026rsquo;helper H.323 lasciato acceso; poi guarda se rispondono «solo la macchina che ha cliccato», perché è la risposta sbagliata che dà una persona che sembra competente. In due minuti saprai se ti stanno dicendo qualcosa o se ti stanno leggendo un copione, e due minuti sono un test molto più economico di un incidente.\nSe la risposta torna indietro come un\u0026rsquo;alzata di spalle e firmi lo stesso, anche quella è una decisione. Solo che non è più loro: è diventata tua.\nNessuno è mai stato costretto a giustificarlo Voglio essere giusto con le persone che hanno costruito queste cose, perché se lo meritano. Nel 1994 l\u0026rsquo;helper era una risposta ragionevole a un problema reale. Gli indirizzi stavano finendo, il NAT era la soluzione pragmatica, una manciata di protocolli importanti non gli sopravviveva, e le opzioni erano cambiare ogni client FTP sulla terra o insegnare alla scatola a leggere. Hanno insegnato alla scatola a leggere, hanno distribuito i default più sicuri a cui riuscivano a pensare, e hanno scritto nel sorgente avvertimenti su cosa le si poteva far fare. Quegli avvertimenti sono ancora lì. Ne ho citato uno.\nQuello che è andato storto dopo non è un fallimento tecnico. È che niente in questo settore ha mai obbligato qualcuno a riguardarla. L\u0026rsquo;IETF ha detto di spegnerli e non aveva il potere di costringere nessuno. Il kernel ha cambiato il suo default e non poteva raggiungere i dispositivi già distribuiti. I ricercatori l\u0026rsquo;hanno dimostrato quattro volte in sedici anni, e ogni volta la correzione è finita da qualche parte che non era il firewall. Nel frattempo il default è rimasto acceso, non perché qualcuno lo difendesse, ma perché un default su cui nessuno discute sopravvive all\u0026rsquo;infinito, e nessun reparto da nessuna parte ha come compito quello di far finire le cose.\nÈ questo lo schema, ed è più grande di una funzione del firewall. Questo mestiere è eccellente nel mantenere e senza speranza nel fermare. La manutenzione ha un budget, del personale, si fattura ed è sicura; il ritiro ha bisogno di una persona che metta il suo nome su una modifica che non porta niente se va bene e che porta il suo nome ovunque se va male. Così la cosa resta, e un giorno qualcuno scopre che apre porte verso la tua stampante.\nIl segnale rivelatore, per me, è quella frase nella documentazione stessa di Cisco: l\u0026rsquo;ALG crea una NAT door. Una porta. Non un filtro. Non un controllo. Una porta, nel muro che hai pagato, aperta da chiunque le faccia arrivare un pacchetto con le parole giuste all\u0026rsquo;inizio; e la risposta consolidata è stata chiedere a chi passa di non provare la maniglia.\nLa tua puoi chiuderla oggi pomeriggio, ed è questa la parte con cui vale la pena finire. Non gli attacchi; gli attacchi sono solo quello che succede quando nessuno lo fa. Vai a guardare cosa permette in ingresso il tuo perimetro che non hai mai messo per iscritto, decidi se lo volevi, e togli quello che non volevi, mettendo una data accanto a quello che hai tenuto.\nÈ tutto quello che un perimetro è sempre stato: un elenco di cose che qualcuno ha scelto di permettere, e di cui sapeva dire il perché. Qualsiasi cosa ci sia sopra che nessuno ha scelto non è sicurezza. È arredamento.\nSamy Kamkar — NAT Pinning, 5 gennaio 2010. L\u0026rsquo;attacco originale dal browser all\u0026rsquo;ALG, che usa un modulo nascosto per far emettere a un browser un DCC CHAT IRC o una riga di risposta FTP 227, così che l\u0026rsquo;helper del router apra una porta in ingresso. «No XSS or CSRF required.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSamy Kamkar — NAT Slipstreaming, 31 ottobre 2020, aggiornato a gennaio 2021. Riassunto dall\u0026rsquo;autore come la possibilità per «an attacker to remotely access any TCP/UDP service bound to a victim machine, bypassing the victim\u0026rsquo;s NAT/firewall (arbitrary firewall pinhole control), just by the victim visiting a website». Contiene la tecnica del confine di segmento, la nota secondo cui il gestore SIP «will bail unless the method (eg, REGISTER) occurs at the start of the data portion of the packet», e l\u0026rsquo;analisi del firmware Netgear.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBen Seri e Gregory Vishnepolsky, Armis — NAT Slipstreaming v2.0, 26 gennaio 2021. La primitiva dell\u0026rsquo;inoltro di chiamata H.323, l\u0026rsquo;aggiramento tramite relay dell\u0026rsquo;elenco di porte limitate dei browser, l\u0026rsquo;elenco dei prodotti testati (OpenWrt, VyOS, router Linux consumer, FortiGate, Cisco ASAv e csr1000v, HPE vsr1000, SonicWall TZ300), la cronologia della divulgazione e la conclusione che «resolving the issue will require a fundamental change of their implementations by various router/firewall vendors».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4787 — Network Address Translation (NAT) Behavioral Requirements for Unicast UDP, gennaio 2007, BCP 127. La sezione 7 contiene il REQ-10, e l\u0026rsquo;osservazione che «Certain NATs have these ALGs turned on permanently, others have them turned on by default but allow them to be turned off».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPablo Neira Ayuso — netfilter: nf_ct_helper: disable automatic helper assignment, commit 3bb398d9, 25 aprile 2016, distribuito in Linux 4.7. Cambia il default di nf_conntrack_helper da attivato a disattivato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSorgente di Chromium — net/base/port_util.cc. Il suo array kRestrictedPorts include 69, 137, 139, 161, 554, 1719, 1720, 1723, 5060, 5061, 6566 e 10080. L\u0026rsquo;annuncio delle porte SIP di Adam Rice, 5 novembre 2020: «a carefully-crafted HTTP request to port 5060 on an attacker\u0026rsquo;s server can fool some NAT devices into treating it as a SIP packet and setting up port forwarding.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — SIP ALG Hardening for NAT and Firewall, IP Addressing Configuration Guide, Cisco IOS XE 17.x. «SIP ALG creates a firewall pinhole or a Network Address Translation (NAT) door based on the first value in the Via header field.» Il supporto NAT per SIP è «enabled by default on port 5060». Vedi anche Using Application-Level Gateways with NAT, che indica SIP e H.323 come attivi di default.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPalo Alto Networks — Disable the SIP Application-level Gateway (ALG). «SIP ALG creates dynamic NAT pinholes but may interfere with VoIP applications that have NAT traversal capabilities, causing communication failures.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2663 — IP Network Address Translator (NAT) Terminology and Considerations, agosto 1999. La sezione 2.9 è dove viene definito l\u0026rsquo;Application Level Gateway.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3234 — Middleboxes: Taxonomy and Issues, febbraio 2002. La frase sulla violazione di livello è nella sezione 2.11; il costo delle scatole aggiuntive nel percorso è nella sezione 5.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEric Leblond, Pablo Neira Ayuso, Patrick McHardy, Jan Engelhardt e Mr Dash Four — Secure use of iptables and connection tracking helpers. «This system relies on parsing of data coming either from the user or the server. It is therefore vulnerable to attack.» Fonte della citazione sul jolly IRC; documenta la sysctl nf_conntrack_helper e il target CT --helper.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSorgente del kernel Linux — net/netfilter/nf_conntrack_ftp.c. Il parametro del modulo loose è falso per default e protegge il caso in cui l\u0026rsquo;indirizzo di PORT non è quello del client; il commento indica il rischio come «DMZ machines opening holes to internal networks, or the packet filter itself».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetfilter — H.323 conntrack/NAT helper, dell\u0026rsquo;autore del modulo. Include lo scenario di inoltro di chiamata che permette a una sessione di riferirsi all\u0026rsquo;indirizzo di una terza parte.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDavid Leadbeater — NAT-Again: IRC NAT helper flaws, agosto 2022. Dimostra l\u0026rsquo;innesco tramite l\u0026rsquo;eco del ping, nota che può anche fare scansioni, smascherare utenti nascosti e disconnetterli indicando la porta 0, e raccomanda: «Potentially entirely deprecate and remove nf_conntrack_irc, it\u0026rsquo;s unclear it has much use anymore.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCVE-2022-2663 — «An issue was found in the Linux kernel in nf_conntrack_irc where the message handling can be confused and incorrectly matches the message. A firewall may be able to be bypassed when users are using unencrypted IRC with nf_conntrack_irc configured.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — advisory for CVE-2018-15454, 31 ottobre 2018. La mitigazione indicata è no inspect sip su ASA e configure inspection sip disable su FTD; NVD registra che al momento della pubblicazione «Software updates that address this vulnerability are not yet available.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4217 — Securing FTP with TLS, ottobre 2005.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3715 — IPsec-Network Address Translation (NAT) Compatibility Requirements, marzo 2004. La sezione 2.1 punto (f) tratta la scelta dello SPI rispetto al NAT; la sezione 2.3 si intitola Helper Incompatibilities e contiene le righe citate sullo smistamento per cookie IKE e sull\u0026rsquo;analisi dei payload ISAKMP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — IKE and ESP ALG, Application Layer Gateways User Guide. Fonte della descrizione del gate, della nota secondo cui il traffico NAT-T sulla porta 4500 non viene elaborato dall\u0026rsquo;ALG, e dell\u0026rsquo;avvertimento che quando due client condividono un indirizzo tradotto il dispositivo «will be unable to distinguish and route return traffic properly».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — IPsec Pass Through Inspection, ASA Firewall CLI Configuration Guide 9.20. «IPsec Pass Through application inspection provides convenient traversal of ESP (IP protocol 50) and AH (IP protocol 51) traffic associated with an IKE UDP port 500 connection.» Non è nella policy di default; la _default_ipsec_passthru_map fornita «sets no maximum limit on ESP connections per client».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3947 — Negotiation of NAT-Traversal in the IKE, e RFC 3948 — UDP Encapsulation of IPsec ESP Packets, entrambe gennaio 2005.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCole Dishington — netfilter: nf_conntrack: Add conntrack helper for ESP/IPsec, maggio 2021, terza revisione. Esaminata su netfilter-devel e non integrata; net/netfilter nel mainline non contiene ancora un nf_conntrack_proto_esp.c.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC e IASME — Cyber Essentials: Requirements for IT Infrastructure v3.3, aprile 2026. Il controllo 1, Firewalls, si applica a «boundary firewalls, desktop computers, laptops, routers, servers, IaaS, PaaS, SaaS»; i tre requisiti citati sono parole sue.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3027 — Protocol Complications with the IP Network Address Translator, gennaio 2001. «The purpose of this document is to identify the protocols and applications that break with NAT enroute.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWHATWG Fetch — pull request 1109, la modifica allo standard che ha aggiunto le voci delle porte vietate in tutti i browser.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenBSD — ftp-proxy(8). Le connessioni di controllo ci arrivano solo perché ce le hai mandate tu: «FTP control connections should be redirected into the proxy using the pf(4) divert-to command, after which the proxy connects to the server on behalf of the client.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFortinet — Technical Tip: Disabling VoIP Inspection. Documenta la rimozione della voce SIP da config system session-helper, set default-voip-alg-mode kernel-helper-based, e nota che riattivarlo richiede un riavvio.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMozilla — Stopping FTP support in Firefox 90, 20 luglio 2021, e Google — Deprecations and removals in Chrome 95, ottobre 2021: «Use of FTP in the browser is sufficiently low that it is no longer viable to invest in improving the existing FTP client.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/networking/protocol-helpers-turn-them-off/","summary":"Un helper di protocollo (SIP ALG, helper FTP, H.323 ALG, helper di conntrack, chiamalo come lo chiama il tuo fornitore) legge il payload di una connessione, ci trova scritti un indirizzo e una porta e apre per loro un varco in ingresso. Non può sapere se quel testo viene da un vero client FTP o da un modulo nascosto in una pagina web, perché dentro non c\u0026rsquo;è niente che lo dica. Samy Kamkar ha dimostrato il caso del browser nel 2010. NAT Slipstreaming l\u0026rsquo;ha dimostrato di nuovo nel 2020, e nel 2021 Armis l\u0026rsquo;ha esteso fino a raggiungere qualsiasi dispositivo della tua rete, non solo la macchina che ha cliccato. L\u0026rsquo;IETF ha chiesto che fossero spenti di default nel 2007, Linux li ha spenti nel 2016, e i produttori di browser hanno finito per distribuire un elenco di porte bloccate che sembra la directory dei moduli conntrack. Questo articolo segue il meccanismo diagramma per diagramma: la tabella delle expectation, il trucco dell\u0026rsquo;allineamento dei segmenti, l\u0026rsquo;inoltro di chiamata H.323, l\u0026rsquo;helper IRC che scatta sul messaggio di qualcun altro. Esamina anche l\u0026rsquo;helper IPsec pass-through, che l\u0026rsquo;ESP non lo sa leggere affatto e smista i pacchetti in ingresso in base a uno SPI visto passare in chiaro, mette il tutto a confronto con il controllo firewall di Cyber Essentials che palesemente non rispetta, e dà i comandi per spegnere tutto su Linux, Cisco, Juniper, FortiGate e MikroTik.","title":"Il tuo firewall prende istruzioni da estranei. Spegni gli helper di protocollo."},{"content":"IPsec è stata una buona idea. Metti la cifratura al livello di rete, sotto tutto, e ogni protocollo che gira su IP eredita riservatezza e integrità senza che nessuno glielo dica. Nessuna libreria da collegare. Nessun certificato per applicazione. Niente da riscrivere in quello che hai già rilasciato. Il pacchetto parte protetto e arriva protetto, e i router in mezzo lo trasportano senza sapere né curarsi di cosa c\u0026rsquo;è dentro.\nQuel progetto si regge su un\u0026rsquo;unica ipotesi, ed è scritta nello standard, non sottintesa: l\u0026rsquo;indirizzo di un pacchetto identifica la macchina da cui è partito. Un\u0026rsquo;associazione di sicurezza si cerca in base all\u0026rsquo;indirizzo di destinazione, al numero di protocollo e allo SPI1. L\u0026rsquo;Authentication Header va oltre e firma l\u0026rsquo;header IP stesso, sorgente e destinazione comprese2. Per IPsec l\u0026rsquo;indirizzo non è un metadato di instradamento. È parte dell\u0026rsquo;identità e parte del controllo di integrità.\nPoi questo settore ha passato trent\u0026rsquo;anni a togliere l\u0026rsquo;indirizzo.\nPrima il NAT, per far stare un ufficio dietro una sola linea. Poi il NAT di operatore, per far stare diverse centinaia di case dietro un solo indirizzo, perché attivare IPv6 era lavoro e comprare un apparato era un acquisto. Che è tutto l\u0026rsquo;argomento di We Never Ran Out of Addresses. We Ran Out of Effort. e qui non ci torno sopra. Per questo articolo conta la conseguenza. L\u0026rsquo;unica cosa su cui IPsec è stato costruito è l\u0026rsquo;unica cosa che la rete d\u0026rsquo;accesso moderna non fornisce più.\nCosì IPsec è stato rattoppato. Avvolgi il pacchetto cifrato in UDP, così un traduttore ha una porta da riscrivere. Azzera il checksum, così niente lo riconvalida. Manda un pacchetto da un byte ogni venti secondi, per sempre, così una tabella nell\u0026rsquo;apparato di qualcun altro non si dimentica che esisti. Sposta l\u0026rsquo;identità dall\u0026rsquo;indirizzo a un nome. Abbandona l\u0026rsquo;Authentication Header, perché per costruzione non può sopravvivere a un header riscritto. Quando un hotel blocca UDP, avvolgi tutto anche in TCP3.\nOgnuna di queste è una correzione reale, standardizzata e supportata dai vendor. Messe insieme sono un protocollo tenuto in piedi dalle proprie impalcature. E l\u0026rsquo;impalcatura è l\u0026rsquo;argomento: non passi un quarto di secolo a puntellare qualcosa perché è solido alla base.\nLa conclusione a cui sono arrivato è che IPsec va ritirato del tutto. Non messo a punto, non riproposto con cifrari migliori, non tenuto per il site-to-site perché quella parte funziona ancora. Ritirato, con le date, come PPTP avrebbe dovuto essere ritirato un decennio prima che qualcuno ci arrivasse. Quello che segue sono le prove, i diagrammi, la documentazione dei vendor che dice tutto questo con le parole dei vendor stessi e, siccome la maggior parte di chi legge deve ancora tenere in piedi queste cose lunedì, un metodo pratico per diagnosticare i guasti di IPsec nel frattempo.\nQuanto ti costa davvero, in ticket Prima degli standard, ecco il conto, nell\u0026rsquo;ordine in cui lo incontrerai.\nIl tunnel cade a orario. Ogni ora, oppure ogni otto, oppure dopo venti minuti senza traffico. Torna su quando qualcuno apre un file, quindi metà degli utenti non lo segnala mai e l\u0026rsquo;altra metà lo segnala come «la VPN è lenta». Nessuno ha cambiato niente.\nDue persone nella stessa casa non riescono a collegarsi entrambe. La seconda sale, la prima cade. Chiamano il service desk separatamente, quindi i ticket non si incontrano mai e per due settimane nessuno nota lo schema.\nLe cose piccole funzionano e quelle grandi si bloccano. Il login funziona. Teams funziona. Il ping funziona. La copia di un file si ferma sempre nello stesso punto, e aprire una pagina grande in un\u0026rsquo;applicazione interna resta lì finché non va in timeout.\nIl tunnel è su e non passa traffico. Entrambi i lati dicono established. Entrambi i lati sono soddisfatti di sé. Non si muove niente.\nNiente riesce a entrare. Il site-to-site verso la filiale passata a un operatore in fibra alternativo non si stabilisce più nella direzione in cui si stabiliva, e nessuno sa dire perché, solo che «gli è cambiato l\u0026rsquo;IP».\nAttivare la QoS ha rotto la cifratura. Qualcuno ha dato priorità alla voce, e ora l\u0026rsquo;altro lato scarta pacchetti come replay.\nNessuno di questi è un errore di configurazione nel senso comune. Ognuno è IPsec che incontra la rete com\u0026rsquo;è adesso. Il resto di questo articolo spiega perché, in ordine, e come dimostrare quale hai.\nIPsec non è trasportato dalla rete. È la rete. Parti da cosa era, perché il progetto è davvero buono e i guasti hanno senso solo rispetto a quello.\nESP non è un protocollo che gira sopra TCP o UDP. È un protocollo di trasporto, protocollo IP numero 50, appoggiato direttamente su IP nello stesso posto di TCP e UDP. AH è il protocollo 51. Nessuno dei due ha un campo porta, perché nessuno dei due ne ha bisogno: sull\u0026rsquo;internet per cui IPsec è stato progettato, l\u0026rsquo;indirizzo di destinazione nomina già esattamente una macchina, e lo SPI nell\u0026rsquo;header ESP dice quale associazione di sicurezza su quella macchina. Indirizzo più protocollo più SPI. Quella terna è la chiave di ricerca1.\nIl progetto come specificato: l'indirizzo nomina la macchina, quindi non servono porte e ognuno dei due lati può iniziare IPsec come specificato: l'indirizzo è l'identità Host A 203.0.113.10 Router solo inoltro Host B 198.51.100.7 ognuno dei due può iniziare Cosa esce dalla macchina header IP esterno src 203.0.113.10 verso 198.51.100.7 protocollo 50 = ESP SPI 4 B sequenza 4 B contenuto cifrato il tuo pacchetto, illeggibile in transito ICV 16 B Ricerca dell'associazione = indirizzo di destinazione + protocollo + SPI. Nessun campo porta, perché non serve. Tre cose che questo progetto presume, tutte vere nel 1995: L'indirizzo sul pacchetto è la macchina. Niente nel percorso riscrive un header. Si può chiamare l'uno o l'altro lato. L'Authentication Header va ancora oltre e firma l'header esterno stesso, sorgente e destinazione comprese, così chi riceve può dimostrare che gli indirizzi non sono stati toccati lungo la strada. Non in scala. L'overhead di ESP varia con il cifrario; le cifre qui sono AES-GCM in modalità tunnel su IPv4. Il progetto come specificato. ESP sta direttamente su IP come protocollo 50, senza porte, perché non gli servono: l\u0026rsquo;indirizzo di destinazione nomina l\u0026rsquo;host e lo SPI nomina l\u0026rsquo;associazione su quell\u0026rsquo;host. AH firma l\u0026rsquo;header IP stesso. Entrambi i lati hanno un indirizzo reale e raggiungibile, ognuno dei due può iniziare la conversazione, e niente in mezzo ha bisogno di capire il contenuto. Guarda cosa ti dà. Nessuna porta di handshake da esporre, nessun livello di sessione da sbagliare, nessuna applicazione che debba aderire. Può iniziare chiunque dei due lati. Il centro della rete è stupido, che è esattamente quello che il centro di una rete dovrebbe essere. Un router inoltra il protocollo 50 nello stesso modo in cui inoltra il protocollo 6, e il fatto che non possa leggere il contenuto è lo scopo, non un limite.\nÈ un progetto pulito. Nel 2026 è anche la descrizione di un\u0026rsquo;internet che la maggior parte di chi legge non può comprare.\nPoi qualcuno ha messo un traduttore in ogni percorso Un NAT riscrive l\u0026rsquo;indirizzo sorgente, e spesso la porta sorgente, così più macchine possono condividere un indirizzo. Fa solo questo. Contro IPsec è quasi una demolizione completa, e l\u0026rsquo;IETF è stata abbastanza onesta da pubblicare un intero documento che ne elenca i pezzi: RFC 3715, IPsec-Network Address Translation (NAT) Compatibility Requirements4. Sedici incompatibilità distinte. Ecco quelle che contano.\nAH è finito, per costruzione. Con le parole stesse dell\u0026rsquo;RFC 3715: «Since the AH header incorporates the IP source and destination addresses in the keyed message integrity check, NAT or reverse NAT devices making changes to address fields will invalidate the message integrity check.»4 Non c\u0026rsquo;è rimedio e non ci sarebbe mai stato. Un protocollo che firma l\u0026rsquo;header non può attraversare un apparato il cui unico lavoro è riscrivere l\u0026rsquo;header. AH non è stato aggirato. È stato abbandonato.\nNon ci sono porte da tradurre. Un NAT che traduce le porte ha bisogno di una porta. ESP non ce l\u0026rsquo;ha. Cisco lo ha scritto chiaro nella guida di configurazione dei Catalyst: «If PAT found a legislative IP address and port, it would drop the Encapsulating Security Payload (ESP) packet.»5 Il pacchetto non viene rifiutato per una policy. Viene scartato perché l\u0026rsquo;apparato non ha dove scrivere la cosa che deve scrivere.\nL\u0026rsquo;identità smette di corrispondere al pacchetto. Ancora dall\u0026rsquo;RFC 3715: «Where IP addresses are used as identifiers in Internet Key Exchange Protocol (IKE) Phase 1 or Phase 2, modification of the IP source or destination addresses by NATs or reverse NATs will result in a mismatch between the identifiers and the addresses in the IP header.»4 Uno schema di identità che nomina le macchine per indirizzo non sopravvive a un apparato che di mestiere rinomina le macchine.\nDue macchine possono scegliere lo stesso SPI. Lo SPI lo sceglie chi riceve e deve essere unico solo per lui. Metti due host dietro un indirizzo e il traduttore ha due associazioni e niente per distinguerle.\nNiente può entrare per primo. Un NAT costruisce la sua tabella dai pacchetti in uscita. Non c\u0026rsquo;è un pacchetto in uscita finché qualcuno non inizia, e su un link con NAT può iniziare solo chi sta dentro. Metà della simmetria del protocollo è sparita.\nUn traduttore nel percorso rompe cinque cose insieme, e ogni correzione costa qualcosa Un traduttore nel percorso, e cinque cose si rompono insieme Host 192.0.2.20 Traduttore riscrive la sorgente in 203.0.113.5 Gateway 198.51.100.7 da questo lato non può iniziare niente Cosa distrugge la riscrittura 1 L'header firmato non corrisponde più. AH copre gli indirizzi sorgente e destinazione, quindi il controllo di integrità fallisce per costruzione. Non c'è rimedio: AH non si può usare attraverso un traduttore. 2 Nessuna porta da riscrivere. ESP è il protocollo IP 50 e non ha campo porta, quindi un traduttore di porte non ha niente su cui lavorare e scarta il pacchetto. 3 L'identità non corrisponde più. Lo scambio di chiavi nominava il peer per indirizzo. L'indirizzo nell'header adesso è di qualcun altro. 4 Due host scelgono lo stesso SPI. Lo sceglie chi riceve e garantisce che sia unico solo per sé, quindi il traduttore ha due associazioni che non sa distinguere. 5 Metà simmetria è sparita. La tabella nasce dai pacchetti in uscita, quindi può iniziare solo chi sta dentro. Il compromesso, e quanto costa ogni sua parte Avvolgi l'intero pacchetto ESP in UDP sulla porta 4500, così il traduttore ha qualcosa che capisce. Abbandona del tutto l'Authentication Header, perché niente può salvarlo. Azzera il checksum UDP, perché un checksum su indirizzi riscritti fallirebbe e basta. Sposta l'identità dall'indirizzo a un nome che il peer dichiara al suo posto. Manda un byte ogni venti secondi, per sempre, così una tabella altrui non si dimentica di te. Funziona, e non è in discussione. Il punto è che niente di solido ha bisogno di cinque concessioni per attraversare un apparato. Lo stesso tunnel con un traduttore nel percorso. Si rompono cinque cose insieme: l\u0026rsquo;header firmato non corrisponde più, non c\u0026rsquo;è una porta da riscrivere per il traduttore, l\u0026rsquo;identità non corrisponde più all\u0026rsquo;indirizzo sorgente, due host possono scegliere lo stesso SPI, e niente all\u0026rsquo;esterno può iniziare una conversazione. La riga sotto è quello che il settore ha fatto al riguardo, e ogni correzione è qualcosa a cui si rinuncia. La correzione era reale, e ogni sua parte è costata qualcosa Il NAT traversal funziona. Non è in discussione e non fingerò il contrario. Ho fatto girare parecchi tunnel attraverso parecchi NAT. Quello che voglio mettere agli atti è il conto, perché lo pagano tutti ogni giorno e quasi nessuno lo dettaglia.\nIl meccanismo è l\u0026rsquo;RFC 3948: rileva un traduttore durante lo scambio delle chiavi, poi metti l\u0026rsquo;intero pacchetto ESP dentro un datagramma UDP sulla porta 4500, così il traduttore ha qualcosa che capisce6. La descrizione di Cisco del formato sul filo è esatta: dopo la cifratura, «a UDP header and a non-IKE marker (which is 8 bytes in length) are inserted between the original IP header and ESP header»5. Quella di Juniper è più breve e dice la stessa cosa: «NAT-T encapsulates both IKE and ESP traffic within UDP with port 4500 used as both the source and destination port.»7\nOra il conto dettagliato.\nL\u0026rsquo;Authentication Header non c\u0026rsquo;è più. Non deprecato con garbo. Inutilizzabile. L\u0026rsquo;RFC 8221 dice ormai chiaramente che usare ESP e AH insieme è NOT RECOMMENDED8, e la ragione onesta è che l\u0026rsquo;unica cosa che AH faceva e ESP no è proprio l\u0026rsquo;unica cosa che il NAT distrugge.\nIl checksum UDP viene azzerato apposta. Lo richiede l\u0026rsquo;RFC 3948: con gli indirizzi riscritti, un checksum calcolato su di essi fallirebbe, quindi la risposta dello standard è smettere di calcolarlo. «If the protocol header after the ESP header is a UDP header, set the checksum field to zero in the UDP header.»6 Un livello di rilevamento degli errori tolto per tenere in piedi un livello di riscrittura degli indirizzi.\nOra mandi pacchetti per tenere calda una tabella. L\u0026rsquo;RFC 3948 definisce un keepalive come un byte, 0xFF, mandato quando non è uscito nient\u0026rsquo;altro per un intervallo configurabile il cui valore predefinito è venti secondi6. Juniper dà la ragione senza fronzoli: «Because NAT devices age out stale UDP translations, keepalive messages are required between the peers.»7 Quindi un portatile su un treno, che non sta facendo niente, trasmette ogni venti secondi, per sempre, perché altrimenti una tabella in un apparato che non appartiene a nessuno dei due lati si dimentica che esiste. Moltiplica per una flotta. È la radio che si sveglia, la batteria che scende e la rete mobile che trasporta traffico il cui unico scopo è evitare una dimenticanza.\nOra metti a firewall due porte invece di un protocollo, e la lista di restrizioni di Cisco richiede che le regole di traduzione statica per la 500 e la 4500 siano entrambe a posto prima che qualcosa funzioni5.\nE leggi il resto di quella lista di restrizioni, perché è il vendor che ti descrive la forma della cosa. Policy NAT dinamiche: non supportate. Traffico IPv6: incompatibile con la funzione. IPsec e NAT sullo stesso apparato: non possono funzionare entrambi5. Non è una guida di configurazione. È un elenco dei posti dove l\u0026rsquo;impalcatura non arriva.\nNon c\u0026rsquo;è niente di elegante in tutto questo, e non è colpa di nessuno in particolare. È quello che succede quando tieni in vita un protocollo di livello 3 su una rete che ha smesso di rispettare il livello 3.\nIl NAT di operatore ha tolto quello che restava Il NAT normale ha tolto l\u0026rsquo;indirizzo alla macchina e l\u0026rsquo;ha dato alla sede. Il traduttore era ancora tuo, quindi potevi inoltrare una porta, fissare una mappatura, allungare un timer o mettere il concentratore davanti.\nIl NAT di operatore toglie l\u0026rsquo;indirizzo alla sede e lo dà a diverse centinaia di sconosciuti, e il traduttore appartiene al tuo ISP. Tutto quello che prima potevi farci, adesso non puoi.\nE sii chiaro su cosa c\u0026rsquo;è davvero nel percorso, perché è la parte che la gente sbaglia. Il router di casa fa ancora NAT. Non è stato spento. Traduce ancora il tuo portatile su 192.168.1.20 nell\u0026rsquo;indirizzo che ha la linea, solo che ora la linea ha 100.64.12.7, che è spazio condiviso, non un indirizzo pubblico. Poi l\u0026rsquo;operatore lo traduce di nuovo. Quindi il pacchetto attraversa due traduttori prima di arrivare su internet, e questo è il caso normale, non uno insolito.\nNAT di operatore significa due traduzioni, due timer e nessun indirizzo raggiungibile in nessuna delle due Il NAT di operatore sono due traduzioni, non una Portatile 192.168.1.20 Router di casa traduzione uno La linea 100.64.12.7 Traduttore dell'operatore traduzione due, in 203.0.113.9 tuo, e l'unica tabella che puoi vedere suo, condiviso da centinaia di case, invisibile per te niente da internet può raggiungere nessuno dei due indirizzi Due tabelle, due timer, vince il più corto. Il tuo keepalive deve battere quello che scade per primo, e tu ne puoi leggere uno solo. Quello che conta è quello che non puoi vedere. Il port forwarding va e non serve a niente. Il router inoltra contento una porta da un indirizzo che internet non raggiunge. UPnP e PCP segnalano successo e aprono una porta su un corridoio. Per questo «ho inoltrato la 500 e la 4500 e non sale lo stesso» è un ticket così comune e così fuorviante. Il responder non c'è più. Due filiali su fibra residenziale non possono proprio chiamarsi. Qualcosa in mezzo deve presentarle, e ora dipendi da un'azienda che non hai mai scelto. L'identità non è l'indirizzo. Più abbonati arrivano all'altro lato come un indirizzo, quindi qualunque cosa li distingua, non è il campo che IPsec doveva usare. E c'è un tetto pubblicato: sulle piattaforme SRX più grandi Juniper indica non più di 1.000 tunnel da un singolo indirizzo tradotto. La conferma più rapida non costa niente: leggi l'indirizzo WAN nel router. Se comincia con 100.64, è lo spazio condiviso riservato dall'RFC 6598, sei dietro un NAT di operatore e metà delle impostazioni è decorativa. Una linea business con un vero indirizzo statico ha una traduzione e un endpoint raggiungibile. È quello che il canone mensile in più ti sta davvero vendendo: la cosa che ogni macchina aveva gratis. Il pacchetto viene tradotto due volte: una dal router di casa, una dall\u0026rsquo;operatore. Nessuno dei due indirizzi che porta è raggiungibile dall\u0026rsquo;esterno. Significa due tabelle di mappatura con due timer indipendenti di cui ne vedi solo uno, un port forwarding che riesce e non ottiene niente, nessun ruolo di responder, e un\u0026rsquo;identità del peer che non può più essere un indirizzo. Sei in doppio NAT, e solo una delle tabelle è tua. Due traduzioni significano due tabelle di mappatura, due timer di scadenza e due occasioni perché la mappatura sparisca. Il tuo keepalive deve battere quella che scade per prima, e tu ne puoi leggere esattamente una. Peggio, le due interagiscono: il router di casa può avere una sua idea su IPsec e provare ad aiutare con un application gateway, quindi la porta sorgente che il tuo client crede di usare non è quella che esce di casa, e non è nemmeno quella che esce dall\u0026rsquo;operatore.\nIl port forwarding funziona ancora, e non fa assolutamente niente. È il ticket che si mangia più tempo. Qualcuno inoltra UDP 500 e 4500 sul router di casa, il router accetta, la pagina delle impostazioni dice che la regola è attiva, e niente può usarla, perché inoltra da un indirizzo che internet non raggiunge. UPnP e PCP si comportano allo stesso modo: il client chiede una mappatura, il router la concede, e la porta si apre su un corridoio. Tutto segnala successo e niente funziona. L\u0026rsquo;apparato ti dirà qualunque cosa tu voglia sentirti dire.\nIl modo più rapido per chiudere la questione non costa niente. Leggi l\u0026rsquo;indirizzo WAN nel router. Se comincia con 100.64, è lo spazio condiviso riservato dall\u0026rsquo;RFC 6598, sei dietro un NAT di operatore, e metà di quella pagina di impostazioni è decorativa.\nIl ruolo di responder non esiste più. Un apparato dietro CGNAT non può essere il lato che qualcuno chiama. Il site-to-site tra due filiali su fibra residenziale, normale, economico ed esattamente quello che vuole una piccola azienda, richiede che almeno un lato abbia un indirizzo reale, oppure una terza parte in mezzo che li presenti. Quella terza parte è un\u0026rsquo;azienda da cui ora dipendi perché il tuo ISP non ti ha voluto dare un indirizzo.\nIl timer è di qualcun altro. L\u0026rsquo;RFC 4787 dice agli operatori di NAT che una mappatura UDP «MUST NOT expire in less than two minutes» e ne raccomanda cinque o più9. È il minimo e il consiglio, non una promessa, e non puoi ispezionare cosa fa davvero il tuo operatore. Per questo il keepalive smette di essere un\u0026rsquo;opzione di regolazione. È portante, su un timer che stai indovinando.\nL\u0026rsquo;identità del tuo peer non può essere il suo indirizzo. Diversi abbonati raggiungono l\u0026rsquo;altro lato come un unico indirizzo. Qualunque cosa usi il concentratore per distinguerli, non è l\u0026rsquo;header IP, che è proprio la cosa che IPsec era stato progettato per usare.\nC\u0026rsquo;è un tetto rigido, e i vendor lo pubblicano. Juniper documenta che su SRX5400, SRX5600 e SRX5800 «the total number of tunnels from a given public translated IP cannot exceed 1000 tunnels»7. Leggilo da operatore, non come una riga di specifica. Il tuo concentratore VPN ha un limite per indirizzo condiviso, la condivisione la fa un operatore con cui non hai nessun contratto, e quanto sei vicino a quel limite dipende da quanti dei tuoi utenti capitano dietro lo stesso indirizzo. Non c\u0026rsquo;è un contatore da guardare. C\u0026rsquo;è solo il giorno in cui comincia a non funzionare per alcuni e non per altri.\nTutto in questa sezione discende da una decisione che questo paese ha preso e ha continuato a prendere. Ho già scritto quell\u0026rsquo;argomento per intero altrove e non lo ripeto. Il punto qui è più stretto: l\u0026rsquo;ipotesi centrale di IPsec è stata cancellata dalla rete d\u0026rsquo;accesso, e da allora IPsec vive di espedienti.\nE nemmeno la rete solo IPv6 lo salva Qui devo essere onesto contro il mio stesso argomento, perché la risposta ovvia a tutto quanto sopra è: va bene, allora dai a ogni macchina un vero indirizzo IPv6 e IPsec torna a funzionare come specificato.\nFunziona, tra due lati che ce l\u0026rsquo;hanno entrambi. Non è la rete su cui sta la maggior parte delle persone.\nLe reti d\u0026rsquo;accesso solo IPv6 che esistono davvero, quelle mobili in particolare, raggiungono l\u0026rsquo;internet IPv4 attraverso il NAT64, che non è affatto un NAT nel senso comune. È un traduttore di protocollo, che riscrive un pacchetto IPv6 in un pacchetto IPv4. E l\u0026rsquo;RFC 6146 dice cosa trasporterà, e dice cosa non trasporterà, senza alcuna ambiguità:\n«The current specification only defines how stateful NAT64 translates unicast packets carrying TCP, UDP, and ICMP traffic. Multicast packets and other protocols, including the Stream Control Transmission Protocol (SCTP), the Datagram Congestion Control Protocol (DCCP), and IPsec, are out of the scope of this specification.»10\nIPsec, nominato esplicitamente, fuori ambito. E i pacchetti che trasportano qualunque cosa fuori da quell\u0026rsquo;elenco «SHOULD be discarded»10.\nQuindi su un telefono o un portatile solo IPv6 che cerca di raggiungere un concentratore IPv4, e lo sono quasi tutti, ESP nativo non viene scartato da un firewall né storpiato da un traduttore. Non viene proprio mai trasportato. Il traduttore sta facendo esattamente quello che il suo standard gli dice di fare.\nLa risposta del settore a questo è, inevitabilmente, un altro strato: 464XLAT, che dà al dispositivo uno stack IPv4 locale e traduce due volte, fuori da IPv4 e di nuovo dentro, così le cose che il NAT64 non può trasportare funzionano lo stesso11. È già nell\u0026rsquo;elenco delle aggiunte nell\u0026rsquo;articolo su IPv6 e non lo ridiscuto. Quello che vale la pena dire qui è la forma: un protocollo che si è rotto sul NAT nel 2004 si rompe anche sulla traduzione costruita per la transizione a IPv6 nel 2011, ed entrambe le volte la risposta è avvolgerlo in qualcos\u0026rsquo;altro.\nQuesto è l\u0026rsquo;esame che un protocollo deve passare per stare nel 2026. Funziona sulla rete che la gente ha davvero, dietro l\u0026rsquo;indirizzo condiviso di un operatore, su una rete mobile solo IPv6, attraverso un hotel che fa passare solo TCP 443? Qualunque cosa costruita su una porta UDP li passa tutti e tre senza che nessuno glielo dica. IPsec ha bisogno di un espediente diverso per ciascuno, e per il terzo ha bisogno anche dell\u0026rsquo;incapsulamento TCP3.\nNiente porte significa anche niente secondo link Ecco un guasto che non c\u0026rsquo;entra niente con il NAT, è puramente moderno e non se ne parla quasi mai.\nRouter e switch distribuiscono il traffico su percorsi paralleli. Link aggregation, equal-cost multipath: funzionano entrambi allo stesso modo, calcolando un hash sulla quintupla. Indirizzo sorgente, indirizzo di destinazione, protocollo, porta sorgente, porta di destinazione. ESP non ha porte. Quindi ogni pacchetto di un tunnel tra gli stessi due indirizzi dà lo stesso hash, e l\u0026rsquo;intero tunnel finisce su un solo link membro, indipendentemente da quanti ne hai comprati.\nDue link da 10G e un tunnel IPsec ti danno 10G. Quattro ti danno 10G. Gli apparati funzionano esattamente come progettati.\nL\u0026rsquo;espediente ha la solita forma. Certo silicio può fare l\u0026rsquo;hash sullo SPI, dato che ogni SPI nomina un\u0026rsquo;associazione e quindi un flusso, ma è una funzione che devi aver comprato, non qualcosa che puoi dare per scontato su un percorso che non è tuo. C\u0026rsquo;è una bozza IETF attiva il cui unico scopo è avvolgere ESP in ancora un altro header UDP perché i router normali possano farne l\u0026rsquo;hash, e dice perché in una frase: «Although the ESP SPI field within the IPsec packets can be used as the load-balancing key, but it cannot be used by legacy switches and routers.»12 Anche la sua definizione del problema è altrettanto diretta su cosa fa la gente invece: «Many cloud service providers allow customers to establish multiple IPsec VPN tunnels in parallel to enable ECMP and increase aggregate bandwidth. However, this approach is not ideal, as each tunnel typically requires its own public IP address, leading to higher public IP consumption and increased operational overhead.»12\nFermati un attimo su questo. Il modo raccomandato per far andare più veloce un collegamento cifrato è costruirne diversi, ognuno dei quali brucia un indirizzo IPv4 pubblico, durante una carenza di indirizzi, perché il protocollo non ha un numero di porta su cui fare l\u0026rsquo;hash. Nel frattempo un tunnel basato su UDP ottiene il multipath gratis, da hardware uscito quindici anni fa, perché ha una porta come tutto il resto dell\u0026rsquo;internet moderna.\nNon è un problema legacy che aspetta di invecchiare. È un limite attivo sulle nuove installazioni, oggi, esattamente alle velocità che la gente sta comprando adesso.\nLa tassa sull\u0026rsquo;MTU, e chi la paga Ogni tunnel costa byte. IPsec costa più della maggior parte, e il modo in cui fallisce quando li finisce è il peggior tipo di guasto: intermittente, dipendente dalla dimensione e invisibile a ogni test che qualcuno fa per primo.\nQuanto spende ogni tunnel per pacchetto prima che entrino i tuoi dati Byte persi prima dei tuoi dati, in scala header, per pacchetto totale ESP nativo tunnel, AES-GCM IP 20 ESP 8 IV 8 trailer + tag 18 54 B ESP in UDP porta 4500, per il NAT IP 20 UDP 8 ESP 8 IV 8 trailer + tag 18 62 B L2TP/IPsec AES-CBC, NAT-T IP 20 UDP 8 ESP 8 IV 16 UDP 8 L2TP 6 PPP 4 trailer + tag 18 88 B PPTP GRE, protocollo 47 IP 20 GRE 16 PPP 4 nessun tag di integrità 40 B WireGuard una porta UDP IP 20 UDP 8 header 16 tag 16 60 B I blocchi ombreggiati sono il prezzo del traduttore altrui. Nella riga L2TP, tre stanno dentro la cifratura: un secondo header UDP, un livello di sessione e il framing di un modem dial-up. PPTP costa meno perché non protegge niente. I 40 byte non comprano integrità, e MS-CHAPv2 è stato ridotto a una sola operazione DES nel 2012. Il prezzo non è la misura. La misura è cosa comprano i byte. Una configurazione d'esempio ciascuna, su IPv4. Le cifre esatte cambiano con cifrario, modalità e famiglia di indirizzi. Byte spesi su ogni pacchetto prima che entri un solo dato tuo, per una configurazione d\u0026rsquo;esempio ciascuna. ESP nativo è snello. Avvolgerlo per il NAT costa otto byte in più. L2TP/IPsec porta un header UDP, un header L2TP e un header PPP dentro la cifratura: framing da modem, cifrato, nel 2026. PPTP sembra economico perché non porta affatto un tag di autenticazione, ed è proprio quello il suo problema. Fai il conto per una configurazione invece di andare a occhio. ESP in modalità tunnel su IPv4 con AES-GCM: 20 byte di header IP esterno, 8 di header ESP, 8 di nonce, almeno 2 di trailer, 16 di tag di integrità. 54 byte prima che entri un solo pezzo del tuo pacchetto. Avvolgilo per il NAT traversal e l\u0026rsquo;header UDP lo porta a 62. Su un percorso da 1500 byte restano 1438, e appena qualcosa a monte usa PPPoE a 1492 scendi ancora.\nPoi la parte che lo rende un guasto invece di un problema di aritmetica. Un mittente scopre che un pacchetto era troppo grande solo ricevendo indietro un errore ICMP: Fragmentation Needed su IPv4, Packet Too Big su IPv6. Se qualcosa nel percorso scarta quegli errori, il mittente non lo scopre mai, e continua a mandare pacchetti che continuano a morire. È il classico buco nero: l\u0026rsquo;handshake si completa perché gli handshake sono piccoli, e il trasferimento si blocca perché i trasferimenti non lo sono.\nCisco mantiene un intero documento su questo fin dall\u0026rsquo;epoca di GRE e IPsec, ed è ancora una delle spiegazioni migliori dell\u0026rsquo;interazione nella biblioteca di chiunque13. Il motivo per cui va mantenuto è che la gente continua a bloccare ICMP in blocco e poi si chiede perché i tunnel si comportano in modo strano.\nHo già scritto le due metà di questo argomento e reggono anche qui senza ripeterle: quali messaggi ICMP sono portanti e quale no, in Ping: The Diagnostic Tool That Opens a Whole Lot More, e come trovare esattamente l\u0026rsquo;hop che si mangia il tuo traffico, in The Firewall Is Eleven Hops Away. La versione breve per questo articolo: gli errori sono il meccanismo, l\u0026rsquo;echo no, e una policy di confine che scarta tutto ICMP ha rotto la tua VPN in un modo di cui verrà incolpata la VPN.\nE anche la tua stessa Quality of Service può romperlo Ancora uno, perché frega bravi ingegneri che stanno facendo la cosa giusta.\nESP porta un numero di sequenza e chi riceve tiene una finestra anti-replay che sulle piattaforme Cisco è di 64 pacchetti per impostazione predefinita14. Ora dai priorità alla voce sul router che trasmette. Il low-latency queueing fa quello che hai chiesto e riordina i pacchetti rispetto alla sequenza in cui sono stati cifrati. Se un pacchetto è fuori dalla finestra quando arriva, l\u0026rsquo;altro lato lo scarta come replay, e il contatore che sale è un contatore di sicurezza.\nLe parole di Cisco: «Certain QoS features, such as Low Latency Queueing (LLQ), could cause IPsec packet delivery to become out-of-order and dropped by the receiving endpoint due to a replay check failure.»14 La loro risposta è allargare la finestra a 1024 dove la piattaforma lo supporta, oppure adottare un\u0026rsquo;estensione con più spazi di numeri di sequenza che mappa le classi QoS su spazi di sequenza separati dentro un\u0026rsquo;unica associazione14.\nQuindi: attivare una funzione standard della tua rete rompe il tuo tunnel, e il rimedio è un\u0026rsquo;altra estensione di protocollo. È la stessa forma di tutto quanto sopra.\nL2TP: framing da modem, cifrato, nel 2026 L2TP non è un protocollo di sicurezza e non ha mai preteso di esserlo. L\u0026rsquo;RFC 2661 è un protocollo di tunneling per trasportare sessioni PPP, pubblicato nel 1999, senza alcuna riservatezza propria: la sua stessa sezione sulla sicurezza ti rimanda a IPsec per la protezione a livello di pacchetto15. Quell\u0026rsquo;abbinamento è l\u0026rsquo;RFC 3193, e il risultato è lo stack nel diagramma sopra: un header IP esterno, un header UDP per il NAT traversal, ESP, poi dentro la cifratura un altro header UDP sulla porta 1701, un header L2TP e un header PPP.\nPPP. Il framing dei modem dial-up, trasportato dentro un tunnel cifrato, su internet, nel 2026, perché è quello che L2TP è stato scritto per trasportare.\nConta quanto costa in un esempio pratico, IP esterno 20, UDP 8, header ESP e IV 24, UDP interno 8, L2TP 6, PPP 4, trailer e tag 18, e stai spendendo circa 88 byte per pacchetto per spostare dati che ESP nativo sposta con 54. Trentaquattro byte, a ogni pacchetto, per un livello di sessione che non aggiunge niente che volevi e un livello di collegamento progettato per una linea telefonica.\nL\u0026rsquo;overhead è il meno.\nMoltiplica il problema del NAT invece di dividerlo. L2TP/IPsec usa per convenzione ESP in modalità transport, che è la modalità che il NAT danneggia di più, e il risultato noto è che molte implementazioni non riescono proprio a supportare due client dietro un indirizzo. Due persone in una casa, o quaranta in un ufficio, o diverse centinaia dietro l\u0026rsquo;indirizzo condiviso di un operatore. L\u0026rsquo;altro lato vede un indirizzo e non riesce a distinguere le sessioni, quindi la seconda connessione sostituisce la prima. È il ticket dall\u0026rsquo;inizio di questo articolo, e non è un bug nel prodotto di nessuno: è il problema dell\u0026rsquo;identità per indirizzo che arriva nel posto dove la incontra il maggior numero di persone.\nE sul campo di solito viene installato con un unico segreto condiviso per tutti. Siccome il segreto è configurato nel profilo del client e distribuito con le istruzioni di installazione, la chiave pre-condivisa sta nel documento di onboarding, nella pagina del wiki, nell\u0026rsquo;email ai nuovi assunti e in ogni portatile che sia mai uscito dall\u0026rsquo;azienda. Non è un secondo fattore. È una password che autentica il gateway davanti a nessuno in particolare e che non è mai stata cambiata nemmeno una volta.\nL2TP non è un protocollo invecchiato male. È un protocollo che trasportava la cosa sbagliata fin dal primo giorno, ed è stato imbullonato a IPsec per compensare quello che non sapeva fare per niente.\nPPTP non è mai stato sicuro, ed è ancora in vendita PPTP merita due paragrafi, non una sezione, e il motivo per cui li ottiene è che la gente lo spedisce ancora.\nNon è mai stato uno standard. L\u0026rsquo;RFC 2637 è Informational. Un protocollo di un vendor messo per iscritto, non qualcosa che l\u0026rsquo;IETF abbia mai raccomandato. Trasporta PPP dentro GRE, protocollo IP 47, che come ESP non ha porte, quindi ha bisogno di una gestione speciale tutta sua in ogni NAT del percorso: la casella «PPTP passthrough», che su moltissimi router domestici supporta esattamente una sessione alla volta.\nLa sicurezza è finita pubblicamente nel 2012. Marlinspike e Hulton hanno mostrato che la sicurezza di MS-CHAPv2 si riduce a una singola operazione DES indipendentemente dalla lunghezza della password, hanno costruito chapcrack per estrarre l\u0026rsquo;handshake e lo hanno collegato a un servizio di cracking che restituiva la chiave entro un giorno per venti dollari: un tasso di successo del 100%, non una probabilità16. La loro conclusione è stata che il traffico PPTP va considerato non cifrato. Apple ha dato ragione a loro con i fatti e ha tolto PPTP dal client integrato in macOS Sierra e iOS 10 nel 2016, e pubblica ancora l\u0026rsquo;avviso17.\nDieci anni dopo, PPTP è ancora una voce di menu sui router venduti quest\u0026rsquo;anno, ancora nelle pagine di istruzioni dei vendor, ancora la cosa che qualcuno attiva perché è quella che funziona al primo colpo. Funziona al primo colpo perché non sta facendo il suo lavoro.\nTutto quello che si fa chiamare VPN IPsec «VPN IPsec» non è un protocollo. È una famiglia, e la lunghezza dell\u0026rsquo;elenco qui sotto è l\u0026rsquo;argomento, perché non ci sono due prodotti che implementano lo stesso sottoinsieme, e gli spazi tra quei sottoinsiemi sono dove vive davvero ogni lavoro di interoperabilità che tu abbia mai odiato.\nPezzo Cosa aggiunge A che punto è ESP, protocollo IP 50 La cifratura e l\u0026rsquo;integrità vere e proprie RFC 4303: attuale18 AH, protocollo IP 51 Integrità anche sull\u0026rsquo;header IP RFC 4302: inutilizzabile attraverso il NAT2 IKEv1 Lo scambio di chiavi originale Deprecato, RFC spostate a Historic19 IKEv2 Lo scambio di chiavi attuale RFC 729620 IPComp, protocollo IP 108 Comprime prima di cifrare, con associazioni proprie RFC 317321 PF_KEY v2 Un\u0026rsquo;API del kernel perché un demone possa caricare le chiavi RFC 236722 NAT traversal Avvolge ESP in UDP 4500 perché un traduttore se la cavi RFC 3947 / 39486 Incapsulamento TCP Per le reti che bloccano anche UDP RFC 9329, che sostituisce l\u0026rsquo;RFC 82293 Frammentazione IKEv2 Perché lo scambio di chiavi stesso ha superato l\u0026rsquo;MTU RFC 738323 MOBIKE Perché il tunnel sopravviva al cambio di indirizzo RFC 455524 Dead peer detection Un battito cardiaco, perché nient\u0026rsquo;altro te lo dice RFC 370625 XAUTH Autenticazione dell\u0026rsquo;utente: password, token, RADIUS Mai stato un RFC. Bozza scaduta, 200126 Mode-Config Dà al client un indirizzo, i DNS e le rotte Mai stato un RFC nemmeno lui26 L2TP/IPsec Trasporta PPP dentro il tunnel RFC 2661 + RFC 319327 GRE o VTI su IPsec Ti dà un\u0026rsquo;interfaccia instradabile su cui far girare un protocollo Architettura del vendor sopra ESP DMVPN mGRE più NHRP più IPsec, così gli spoke si trovano tra loro Architettura del vendor, NHRP RFC 233228 GETVPN Chiavi di gruppo senza alcun tunnel a coppie GDOI, RFC 640729 PPTP La cosa che IPsec doveva sostituire RFC 2637: Informational, mai uno standard30 Ora guarda le due righe in grassetto, perché sono quelle che dovrebbero fermarti.\nPer buona parte di due decenni, il modo standard di far accedere un utente a una VPN IPsec aziendale è stato XAUTH, il tuo nome utente e la tua password, il tuo token, il tuo server RADIUS, con Mode-Config che consegnava al client indirizzo, server DNS e rotte. Insieme sono l\u0026rsquo;intera esperienza di accesso remoto. Ogni client «Cisco IPsec», ogni icona VPN in una barra delle applicazioni, ogni insieme di istruzioni per collegarsi.\nNessuno dei due è uno standard. XAUTH era una bozza internet individuale scaduta nel 2001 e archiviata senza mai diventare un RFC26. La ragione dichiarata vale la pena di leggerla, perché è un comitato che spiega perché non avrebbe fatto il suo lavoro: la bozza registra che il gruppo di lavoro IPSRA non avrebbe accettato alcun protocollo che estendesse ISAKMP o IKE, e che il gruppo di lavoro IPsec rifiutava qualunque cosa riguardasse l\u0026rsquo;accesso remoto26. Quindi la parte più diffusa del protocollo VPN più diffuso è rimasta senza casa, implementata comunque da ogni vendor secondo la propria lettura di una bozza scaduta, e distribuita a milioni di utenti.\nIKEv2 alla fine li ha sistemati entrambi, ed è giusto dirlo: l\u0026rsquo;autenticazione è passata a EAP e i payload di configurazione del client sono entrati nella specifica principale20. Ma leggi le date. La funzione più usata del protocollo VPN più usato ha girato su una bozza scaduta per circa un decennio prima di avere uno standard, e la base installata ha continuato a far girare la versione della bozza per anni dopo. Una famiglia di protocolli non si guadagna il merito di aver standardizzato alla fine la parte che tutti stavano già usando.\nQuesta è la famiglia che stai facendo girare. Una parte è in standards track e attuale. Una parte è Historic. Una parte non è mai arrivata a essere niente. E un prodotto che dice «VPN IPsec» nella scheda tecnica non ti ha detto quasi niente su quali di queste diciotto cose fa, ed è per questo che collegarne due tra loro richiede due settimane, un foglio di calcolo di proposte e una telefonata a qualcuno che l\u0026rsquo;ha già fatto.\nIl Fisher-Price OS (Windows) non ha mai davvero interoperato Questa è la parte in cui qualcuno dice che il problema in realtà è Linux, quindi facciamola con le fonti.\nPer impostazione predefinita, il client Windows non si collega affatto a un server IPsec che sta dietro un NAT. Non «fa fatica». Si rifiuta. La soluzione è un valore di registro chiamato AssumeUDPEncapsulationContextOnSendRule sotto HKEY_LOCAL_MACHINE\\SYSTEM\\CurrentControlSet\\Services\\PolicyAgent, impostato a 1 se il server è dietro un traduttore o a 2 se lo sono entrambi i lati, su ogni client e sul server, seguito da un riavvio31. Le parole di Microsoft: «By default, Windows Vista and Windows Server 2008 don\u0026rsquo;t support Internet Protocol security (IPsec) network address translation (NAT) Traversal (NAT-T) security associations to servers that are located behind a NAT device.»31\nDue cose su questo. La prima è che Microsoft è coautrice dello standard di NAT traversal che si rifiuta di usare. Il suo nome è sull\u0026rsquo;RFC 3947 e sull\u0026rsquo;RFC 39486. La seconda è che la pagina che ti dice di modificare il registro è stata rivista l\u0026rsquo;ultima volta a febbraio 202631. Vent\u0026rsquo;anni dopo, una modifica al registro su ogni endpoint è ancora la risposta, e viene ancora mantenuta come risposta.\nE leggi la frase che Microsoft mette subito sopra: «If you must use IPsec for communication, use public IP addresses for all servers that you can connect to from the Internet.»31\nÈ questo intero articolo, nella documentazione del vendor. Non mettere IPsec dietro il NAT. Dai a ogni macchina un indirizzo reale. Lo hanno scritto, e poi il settore ha passato due decenni a fare il contrario e a fatturare la differenza.\nNon si ferma al NAT. Vai a leggere cosa deve documentare un gateway open source per accettare un client Windows.\nIl certificato del gateway ha bisogno di un extended key usage che esiste per questo e per nient\u0026rsquo;altro. serverAuth, OID 1.3.6.1.5.5.7.3.1, più IP Security IKE Intermediate, OID 1.3.6.1.5.5.8.2.232. Bisogna dire alla tua CA di emettere un OID di cui la maggior parte degli strumenti non ha mai sentito parlare, altrimenti la connessione fallisce con un errore di policy e nessun messaggio utile. Serve un secondo valore di registro prima che il client offra una crittografia decente. strongSwan documenta l\u0026rsquo;aggiunta di NegotiateDH2048_AES256 sotto Rasman\\Parameters per ottenere AES-256-CBC e un gruppo da 2048 bit33. Leggilo al contrario, che è il verso che conta: senza una modifica al registro, la proposta predefinita è più debole di così. Il rekeying avviato dal server viene rifiutato dai client dietro NAT, e l\u0026rsquo;espediente documentato è disattivare il rekeying sul gateway e lasciare che sia il client ad avviarlo33. Estensioni IKEv2 standard semplicemente assenti: niente redirezione IKE, niente round di autenticazione multipli33. Nessuno di questi è un bug di Linux. Ognuno è un progetto open source che mette per iscritto cosa deve fare per accomodare la lettura di un vendor di uno standard che quel vendor ha contribuito a scrivere.\nQuesto è lo schema, e ha trent\u0026rsquo;anni. PPTP era il protocollo di Microsoft, messo per iscritto come Informational e mai standardizzato30. MS-CHAPv2 e MPPE erano l\u0026rsquo;autenticazione e la cifratura di Microsoft, ed entrambi sono stati rotti in pubblico16. SSTP è un tunnel Microsoft che nessun altro termina. DirectAccess era IPsec, ed era Windows a entrambi i capi per progetto, e ora è stato deprecato e viene rimosso, con i clienti spinti verso Always On VPN34. Nessuno di questi è mai stato un protocollo su cui il resto di noi potesse incontrarsi a metà strada. Erano un protocollo a cui aderivi, e se non avevi il sistema operativo giusto a entrambi i capi ti toccavano la modifica al registro, l\u0026rsquo;OID strano e la pagina con l\u0026rsquo;espediente.\nQuindi lasciami essere chiaro, visto che è il mio blog. Il Fisher-Price OS (Windows) non è mai stato un vero pari in uno stack di protocolli aperto, perché essere un pari non è mai stato il suo scopo. Nasconde la macchina a chi la usa come obiettivo di progetto, e uno stack che non puoi vedere è uno stack che non puoi far interoperare. Se è l\u0026rsquo;unico sistema operativo che hai mai amministrato, le sezioni sopra sulla lettura dei contatori del kernel e sull\u0026rsquo;osservazione del filo ti saranno sembrate un\u0026rsquo;altra lingua, ed è quello il divario: non una preferenza, un divario.\nNiente di tutto questo deve costarti qualcosa. Ogni diagnostica in questo articolo gira da qualunque Unix sulla rete, puntata su quello che è rotto, e non le importa minimamente cosa gira dall\u0026rsquo;altra parte. E se quel sistema operativo è l\u0026rsquo;unico che hai, la sezione diagnostica qui sotto porta anche gli strumenti per lui: la cattura, le due cmdlet e i codici di errore con quello che ognuno ti sta dicendo davvero. Un tunnel rotto va comunque sistemato lunedì. Poi il sostituto che sostengo alla fine ha un unico client, che si comporta allo stesso modo su ogni piattaforma, compresa quella, ed è la prima volta in trent\u0026rsquo;anni che questo vale per una VPN.\nIl registro delle deprecazioni si legge come un necrologio Metti da parte gli espedienti e leggi soltanto cosa hanno fatto gli enti di standardizzazione a questa famiglia nel corso degli anni. Non opinioni. Livelli di requisito, in RFC pubblicati.\nCosa A che punto è adesso Fonte IKEv1 Deprecato; RFC 2407, 2408 e 2409 spostate a Historic RFC 9395, 202319 DES in ESP MUST NOT RFC 82218 3DES in ESP SHOULD NOT RFC 82218 HMAC-MD5-96 MUST NOT RFC 82218 ESP insieme ad AH NOT RECOMMENDED RFC 82218 ESP con sola cifratura Dimostrato insicuro, e rotto in pratica nel 2007 Degabriele e Paterson35 IPsec su un nodo IPv6 Declassato da MUST a SHOULD RFC 6434, 201136 PPTP Mai uno standard; solo Informational RFC 263730 La penultima riga è quella che metterei davanti a chiunque mi dica che IPsec va bene e il problema è la rete. IPv6 originariamente imponeva IPsec: era la storia della sicurezza, scritta nei requisiti dei nodi. Nel 2011 l\u0026rsquo;IETF ha cambiato idea: «Previously, IPv6 mandated implementation of IPsec and recommended the key management approach of IKE. This document updates that recommendation by making support of the IPsec Architecture a SHOULD for all IPv6 nodes.»36\nPerfino la famiglia di indirizzi che avrebbe restituito a IPsec tutto quello che il NAT gli aveva tolto ha smesso di richiederlo quindici anni fa. Non è la rete che delude IPsec. Sono le persone che hanno progettato la rete che hanno deciso che non si era guadagnato l\u0026rsquo;obbligo.\nLa complessità era stata segnalata nel 1999, per iscritto Niente di tutto questo è senno di poi, ed è questo che lo rende degno di essere messo per iscritto.\nNel 1999 Niels Ferguson e Bruce Schneier ricevettero l\u0026rsquo;incarico di valutare IPsec. Il loro rapporto è breve, chiaro e vale la pena di leggerlo tutto. Si apre con «IPsec was a great disappointment to us. Given the quality of the people that worked on it and the time that was spent on it, we expected a much better result.»37 Ne nomina la causa: «Our main criticism of IPsec is its complexity. IPsec contains too many options and too much flexibility; there are often several ways of doing the same or similar things. This is a typical committee effect.»37\nE faceva tre raccomandazioni che oggi si leggono come un elenco di cose successe comunque, vent\u0026rsquo;anni dopo e nel modo difficile:\nEliminare la modalità transport. «We therefore recommend that transport mode be eliminated.»37 La modalità transport è quella che usa L2TP/IPsec, ed è la modalità che il NAT danneggia di più. Eliminare AH. «We conclude that eliminating transport mode allows the elimination of the AH protocol as well, without loss of functionality.»37 Lo ha eliminato invece il NAT, per una ragione peggiore. Mai permettere la cifratura senza autenticazione. Avvertivano che gli amministratori «will be quite likely to configure ESP for only encryption, believing that it provides security.»37 Otto anni dopo quell\u0026rsquo;ultima ha smesso di essere un avvertimento. Degabriele e Paterson pubblicarono attacchi che «break any RFC-compliant implementation of IPsec making use of encryption-only ESP», con il solo testo cifrato, senza bisogno d\u0026rsquo;altro che della capacità di osservare il traffico e iniettare pacchetti35. La previsione era agli atti pubblici da otto anni e lo standard permetteva ancora quella configurazione.\nIl verdetto di quel rapporto del 1999 è la frase su cui continuo a tornare: «We have found serious security weaknesses in all major components of IPsec. As always in security, there is no prize for getting 90% right; you have to get everything right.»37\nAltri due dati, e poi lo lascio stare.\nLogjam, 2015. Il gruppo che lo ha scoperto ha scansionato un campione dell'1% di IPv4 alla ricerca di IKE e ha trovato che l'86,1% dei server IKEv1 e il 91,0% dei server IKEv2 supportavano l\u0026rsquo;Oakley Group 2 da 1024 bit, e che il 66,1% dei server IKEv1 analizzati lo preferiva. La loro conclusione: il precalcolo contro un secondo gruppo da 1024 bit «would allow decryption of traffic to 66% of IPsec VPNs», e i documenti di intelligence pubblicati sullo sfruttamento delle VPN sono «consistent with having achieved such a break»38. L\u0026rsquo;agilità crittografica, la cosa di cui IPsec ha più di tutto, è ciò che ha permesso a quasi tutti di restare sullo stesso gruppo debole per quindici anni.\nCVE-2016-1287. Un buffer overflow nel codice IKEv1 e IKEv2 dei Cisco ASA, raggiungibile mandando pacchetti UDP costruiti ad arte, che dava esecuzione di codice remoto prima dell\u0026rsquo;autenticazione39. Pensa a dove sta quell\u0026rsquo;apparato. È il dispositivo che hai esposto deliberatamente all\u0026rsquo;intera internet, che fa girare il protocollo più carico di opzioni di tutta l\u0026rsquo;infrastruttura, con un riassemblatore di frammenti davanti al parser, e che tiene le chiavi di tutto quello che c\u0026rsquo;è dentro. La complessità di cui avvertivano Ferguson e Schneier non è un\u0026rsquo;astrazione. È superficie d\u0026rsquo;attacco, sull\u0026rsquo;unica macchina che non puoi mettere dietro niente.\nDiagnosticarlo finché lo usi ancora Non puoi spegnere tutto questo oggi pomeriggio, quindi ecco come lavorarci. Questo è il metodo, nell\u0026rsquo;ordine che costa meno, con quello che ogni risultato significa davvero.\nSei modi in cui si arrende, messi sul percorso dove succede ognuno Dove vive davvero ogni guasto Client policy e rotte Router di casa traduzione uno Operatore traduzione due Internet filtri e MTU Gateway selector e identità 1 2 3 4 5 6 1 Niente sul filo. Il traffico non è mai arrivato a IPsec. Smetti di guardare la crittografia. ip xfrm policy e la rotta, e qualunque cosa stia facendo il firewall dell'host. 2 500 nei due versi, mai la 4500. NAT traversal non negoziato. tcpdump -ni eth0 'udp port 500 or udp port 4500 or ip proto 50' ESP nudo non sopravvive. 3 Muore se inattivo, torna all'uso. Una mappatura è scaduta in uno dei due traduttori. Il tuo keepalive perde contro un timer che non puoi leggere. Accorcialo, e non fidarti del predefinito. 4 Uscita che sale, entrata ferma. ESP muore in una direzione, in transito. ip -s xfrm state su entrambi i lati, poi trova l'hop che se lo mangia. 5 Login ok, trasferimenti bloccati. Path MTU, e gli errori ICMP non tornano. ping -M do -s 1400 scendendo, poi limita la dimensione del segmento e correggi la regola ICMP. 6 Tutti e due su, non passa niente. Traffic selector, policy o instradamento: non le chiavi. E se un secondo utente ha buttato giù il primo, è l'identità del peer, non la capacità. Una cattura di trenta secondi al confine risponde alle prime tre. Falla prima di aprire una console. I sei guasti nell\u0026rsquo;ordine in cui verificarli, con il sintomo, il controllo e cosa significa la risposta. Ogni riga è un livello diverso dello stack che si arrende, e alle prime tre si risponde guardando il filo per trenta secondi, ed è per questo che è la prima cosa da fare, non l\u0026rsquo;ultima. Guarda prima il filo, non la console Entrambe le console ti diranno quello che credono. Il filo ti dice quello che è successo. Una cattura al confine, trenta secondi, risponde alle prime tre domande in un colpo solo:\ntcpdump -ni eth0 \u0026#39;udp port 500 or udp port 4500 or ip proto 50 or ip6 proto 50\u0026#39; Niente in uscita: il problema sta prima di IPsec, cioè instradamento, policy o un firewall dell\u0026rsquo;host. Smetti di guardare la crittografia. Solo in uscita, niente di ritorno: i tuoi pacchetti escono e le loro risposte non arrivano. Filtraggio lungo il percorso, un peer morto, o l\u0026rsquo;altro lato che rifiuta in silenzio. UDP 500 in entrambe le direzioni ma la 4500 non compare mai: il NAT traversal non è stato negoziato. O un lato lo ha disattivato, o il rilevamento è fallito. Protocollo 50 sul filo mentre un lato è dietro NAT: la negoziazione ha deciso che non c\u0026rsquo;era un traduttore quando invece c\u0026rsquo;è. Non tornerà mai su. Leggere il fallimento dello scambio di chiavi IKEv2 ti dice perché ha rifiutato, e i nomi delle notify sono abbastanza specifici da permettere una diagnosi solo con quelli. Aiuta avere davanti prima la forma dell\u0026rsquo;intero scambio, perché ogni notify qui sotto appartiene a un gradino preciso.\nLo scambio IKEv2 passo per passo, e quale guasto vive a ogni passo Ogni passo dello scambio, e il guasto che ci vive Client dietro un traduttore Gateway indirizzo reale Cosa fallisce qui richiesta IKE_SA_INIT: UDP 500 niente indietro: 809 ERROR_VPN_TIMEOUT risposta IKE_SA_INIT: UDP 500 NO_PROPOSAL_CHOSEN, INVALID_KE_PAYLOAD NAT rilevato, entrambi passano alla 4500 nessun passaggio: proto 50 muore al traduttore IKE_AUTH: UDP 4500, cifrato troppo grande, frammento perso, ritrasmette, timeout risposta IKE_AUTH: CHILD_SA creata AUTHENTICATION_FAILED: 13801, 13806 ESP in UDP 4500: il tuo traffico TS_UNACCEPTABLE: su, e non si muove niente keepalive: 1 byte ogni 20 s, per sempre nessun keepalive: la mappatura scade a riposo Il passaggio è il cardine. Sopra è tutto UDP 500. Sotto è tutto UDP 4500. Se il passaggio non avviene mai stai mettendo il protocollo 50 in un traduttore che non ha niente da riscrivere, e non tornerà mai. Il guasto di dimensione vive in un gradino. IKE_AUTH porta la catena di certificati, quindi è l'unico messaggio grande della scala. Una chiave pre-condivisa che si collega dove un certificato non ci riesce è un frammento perso, non un certificato sbagliato. Creata non vuol dire funzionante. L'associazione figlia può esistere e non portare niente, se i due lati non concordano su quale traffico copre. Ogni guasto nella colonna di destra arriva al client come timeout, qualunque cosa fosse davvero. Lo scambio dal primo pacchetto allo stato stabile, con il guasto che vive su ogni passo. Il passaggio da 500 a 4500 è il cardine: tutto sopra è una porta, tutto sotto è un\u0026rsquo;altra, e se il passaggio non avviene stai mettendo il protocollo 50 dentro un traduttore che non può trasportarlo. IKE_AUTH è l\u0026rsquo;unico messaggio grande qui, ed è per questo che una chiave pre-condivisa può collegarsi dove un certificato non ci riesce: è un frammento perso, non un certificato sbagliato. Notify Cosa significa davvero Dove guardare NO_PROPOSAL_CHOSEN Nessuna delle combinazioni di cifrario, integrità, DH e PRF offerte è accettabile per l\u0026rsquo;altro lato Entrambi gli elenchi di proposte; aspettati un algoritmo deprecato da una parte INVALID_KE_PAYLOAD Gruppo Diffie-Hellman non corrispondente: ne hai offerto uno, lui ne vuole un altro Il gruppo DH, la prima cosa nella proposta AUTHENTICATION_FAILED Chiave, certificato o identità sbagliati: una chiave pre-condivisa diversa, un certificato scaduto, o un ID che non è quello che il peer si aspetta L\u0026rsquo;identità, non solo il segreto TS_UNACCEPTABLE I traffic selector non si sovrappongono: hai chiesto di proteggere sottoreti che il peer non proteggerà La configurazione dei selector di entrambi i lati INVALID_SPI È arrivato un pacchetto per un\u0026rsquo;associazione che non esiste più, di solito dopo un riavvio da un lato solo Se un lato ha fatto il rekey o si è riavviato Le indicazioni di Juniper sulla Fase 2 dicono la stessa cosa sulla più comune: «no proposal chosen» significa che «the device did not accept any of the IKE Phase 2 proposals that the peer sent», e la soluzione è una proposta accettabile per entrambi, non un riavvio ripetuto40.\nSu strongSwan, lo stato di tutto in un comando:\nswanctl --list-sas # what is established, and what it negotiated swanctl --log # the negotiation as it happens Su Cisco, show crypto ikev2 sa e show crypto ipsec sa, con debug crypto ikev2 quando non vuole salire41. Su Junos, show security ike security-associations e show security ipsec security-associations, con la negoziazione in show log kmd-logs42.\nIl NAT traversal è stato davvero negoziato? Questo è il controllo che la gente salta, e spiega una bella fetta dei «funziona dall\u0026rsquo;ufficio e non da casa».\nOgni lato manda gli hash degli indirizzi e delle porte che crede siano in gioco. Se l\u0026rsquo;hash che l\u0026rsquo;altro lato calcola dal pacchetto ricevuto non corrisponde a quello che hai mandato, c\u0026rsquo;è un traduttore tra voi, ed entrambi i lati passano a UDP 4500. Se il rilevamento fallisce, perché un lato ha il traversal disattivato o qualcosa in mezzo storpia lo scambio, entrambi i lati continuano con ESP nudo, che non sopravviverà al traduttore.\nQuindi: vedi la porta 4500 nella cattura, da entrambe le direzioni, o non sta avvenendo nessun traversal. Non fidarti di quello che dice la console.\nPoi controlla che il keepalive stia davvero girando e che il suo intervallo sia sotto quello a cui il tuo operatore fa scadere le mappature. Il valore predefinito è venti secondi6; il minimo dello standard per gli operatori di NAT è due minuti9; cosa fa il tuo operatore in particolare, non lo puoi vedere. Se il tunnel muore dopo un periodo di inattività e si riprende con il traffico, è questo il colpevole ogni volta.\nI contatori del kernel che quasi nessuno legge Su Linux il livello di trasformazione tiene una ripartizione completa degli errori, ed è il modo più rapido per trasformare «non funziona» in una causa precisa. I contatori sono documentati dal kernel stesso43.\ncat /proc/net/xfrm_stat # error counters, by cause ip -s xfrm state # per-SA packet and byte counters ip xfrm policy # what should be protected, and in which direction Si legge meglio come un percorso che come un elenco. Il pacchetto passa per cinque fasi, e ognuna ha il suo contatore:\nCinque fasi, e il contatore che nomina quella in cui è morto il tuo pacchetto Segui un pacchetto, e lascia che il contatore nomini la fase in cui è morto La tua policy questo traffico va protetto? XfrmOutPolBlock lo stai scartando tu, apposta, nella policy La tua associazione cifra, sigilla, numera XfrmOutNoStates la policy corrisponde e non c'è un'associazione che lo porti Il percorso traduttore, MTU, filtri non sale niente, su nessuno dei due lati qui vivono NAT, MTU e filtraggio, e nessun contatore ne vede niente La loro associazione dest + protocollo + SPI XfrmInNoStates \u0026#183; XfrmInStateProtoError \u0026#183; XfrmInStateSeqError è arrivato e la crittografia non ha funzionato: SPI sbagliato, chiave sbagliata, fuori finestra La loro policy andava protetto? XfrmInTmplMismatch \u0026#183; XfrmInNoPols la crittografia andava bene e la policy non era d'accordo sul fatto che lo fosse La fase tre non ha contatore. Tutto quello che un quarto di secolo di traduzione ha fatto a questo protocollo succede lì, e il livello di trasformazione di nessuno dei due lati ne vede un solo pacchetto. È tutto il motivo per cui una cattura viene prima di una console. Le fasi quattro e cinque sono guasti opposti. La quattro significa che la crittografia non ha funzionato. La cinque che ha funzionato, e qualcosa non era d'accordo sul farlo. Si guardano quasi sempre nell'ordine sbagliato, perché la cinque sembra un guasto crittografico e non lo è. I nomi dei contatori sono di Linux. Su Junos le stesse fasi si leggono da show security ipsec statistics; sul Fisher-Price OS (Windows), da Get-NetIPsecQuickModeSA e dal log di Windows Firewall with Advanced Security. Cinque fasi, e il contatore che nomina quella in cui è morto il tuo pacchetto. La fase tre è l\u0026rsquo;unica senza alcun contatore: lì vivono il traduttore, l\u0026rsquo;MTU e ogni filtro in mezzo, e il livello di trasformazione di nessuno dei due lati ne vede un solo pacchetto. È tutto l\u0026rsquo;argomento per prendere una cattura prima di una console. Le fasi quattro e cinque sono guasti opposti e quasi sempre vengono guardate nell\u0026rsquo;ordine sbagliato. Guarda quale si muove mentre il guasto succede:\nContatore Descrizione del kernel Cosa significa in pratica XfrmInNoStates «No state is found i.e. Either inbound SPI, address, or IPsec protocol at SA is wrong» I loro pacchetti arrivano per un\u0026rsquo;associazione che tu non hai: di solito un rekey o un riavvio da un lato solo XfrmInStateSeqError «Sequence error i.e. Sequence number is out of window» Riordino o problemi con la finestra anti-replay; vedi l\u0026rsquo;interazione con la QoS sopra XfrmInStateProtoError «Transformation protocol specific error e.g. SA key is wrong» Le chiavi non coincidono: l\u0026rsquo;associazione è sopravvissuta a un rekey da un lato solo XfrmInTmplMismatch «No matching template for states e.g. Inbound SAs are correct but SP rule is wrong» L\u0026rsquo;associazione è giusta e la policy è sbagliata XfrmInNoPols «No policy is found for states e.g. Inbound SAs are correct but no SP is found» Arriva traffico protetto che nessuno ha chiesto di proteggere XfrmOutPolBlock «Policy discards» Lo stai scartando tu stesso, apposta, nella policy XfrmOutNoStates «No state is found» Il traffico ha corrisposto a una policy senza un\u0026rsquo;associazione che lo trasporti: il tunnel non è mai salito XfrmInTmplMismatch e XfrmInNoPols sono i due da riconoscere a vista, perché entrambi significano che la crittografia va bene e la policy no, che è l\u0026rsquo;opposto di dove guardano tutti per primo.\nDice che è su e non si muove niente Entrambi i lati stabiliti, nessun traffico. Leggi i contatori per associazione in entrambe le direzioni:\nip -s xfrm state Byte in uscita che salgono, in entrata fermi: stai cifrando e mandando, e non torna niente. O il tuo ESP non li raggiunge o il loro non raggiunge te. Chiedi all\u0026rsquo;altro lato il suo contatore in uscita; se sale anche quello, i pacchetti muoiono lungo il percorso e la domanda successiva è dove, che è una domanda di TTL, non di crittografia. Entrambi fermi: niente viene offerto al tunnel. Instradamento o policy, non IPsec. In una configurazione route-based controlla che la rotta punti davvero all\u0026rsquo;interfaccia del tunnel; in una policy-based controlla i selector. Entrambi che salgono, applicazioni ancora rotte: non è il tunnel. Vai a guardare cosa c\u0026rsquo;è dall\u0026rsquo;altra parte. Le indicazioni di Juniper per questo caso sono lo stesso istinto nel loro linguaggio: se sulla sessione sale solo il contatore dei pacchetti in uscita, verifica con il peer se il traffico viene ricevuto44.\nLe cose piccole funzionano, quelle grandi si bloccano MTU. È sempre l\u0026rsquo;MTU. Il test richiede dieci secondi:\nping -M do -s 1400 10.0.0.1 # inside the tunnel, do-not-fragment set ping -M do -s 1300 10.0.0.1 # step down until it succeeds Il punto in cui comincia a riuscire ti dice la dimensione utilizzabile reale. Poi fai in modo che TCP lo scopra da solo, limitando la dimensione di segmento annunciata al percorso invece di sperare che ogni errore ICMP sopravviva al viaggio:\nnft add rule inet filter forward tcp flags syn tcp option maxseg size set rt mtu E sistema anche la causa di fondo, che è quasi sempre una regola ICMP troppo larga su un confine da qualche parte. Scarta l\u0026rsquo;echo se vuoi. Ho sostenuto altrove che si merita di essere scartato. Ma tieni Fragmentation Needed e Packet Too Big. Sono il meccanismo, non una cortesia.\nCade a orario Cronometra i guasti. L\u0026rsquo;intervallo da solo nomina la causa.\nUn periodo fisso che corrisponde a una durata configurata: rekey. L\u0026rsquo;associazione scade e la negoziazione della sostituta fallisce o va in corsa. Controlla le durate di entrambi i lati; valori diversi sono normali e vanno bene, ma una durata hard su un lato più corta della durata soft dell\u0026rsquo;altro produce esattamente questo. Dopo un periodo senza traffico, di nuovo su al primo uso: è scaduta una mappatura NAT. L\u0026rsquo;intervallo del keepalive, o la sua assenza. Il dead peer detection che lo abbatte mentre il link sta bene: si perdono le sonde, non è il peer che è morto, spesso perché le sonde sono l\u0026rsquo;unico traffico e la mappatura è già sparita. Il secondo utente uccide il primo Due peer che raggiungono il concentratore dallo stesso indirizzo, autenticandosi con la stessa identità. Il gateway può scegliere tra tenere la vecchia associazione o sostituirla, e un comportamento predefinito comune è sostituirla. Quindi la seconda connessione vince e la prima muore in silenzio.\nDai a ogni peer un\u0026rsquo;identità davvero unica invece di un indirizzo o di un nome condiviso, e imposta il gateway perché tenga più associazioni dallo stesso indirizzo invece di presumerne una per peer. Poi provalo nell\u0026rsquo;unico modo che conta: due client, un indirizzo, nello stesso momento. Se il tuo test di accettazione non ha mai avuto due utenti dietro un NAT, non hai provato il caso in cui si trova la maggior parte dei tuoi utenti.\nGli stessi guasti, sul Fisher-Price OS (Windows) Ogni controllo sopra gira da una macchina Unix, e se ne hai una su quella rete usala, perché ti dirà la verità più in fretta e non le importa cosa gira dall\u0026rsquo;altra parte. Ma molti lettori hanno un client che non si collega, un sistema operativo che gli nasconde la macchina apposta, e nient\u0026rsquo;altro da guardare. Quindi ecco di nuovo lo stesso metodo, nello stesso ordine, con gli strumenti che quel sistema operativo distribuisce davvero.\nGuarda il filo. Non c\u0026rsquo;è tcpdump, ma c\u0026rsquo;è una cattura. Lanciala con privilegi elevati, riproduci il guasto, fermala:\nnetsh wfp capture start cab=on file=ipsec netsh wfp capture stop Questo scrive un .cab. Dentro c\u0026rsquo;è la traccia di cosa hanno fatto davvero la piattaforma di filtraggio e lo scambio di chiavi mentre il guasto succedeva, che è più di quanto ammetterà ciascuna delle due console. Per uno sguardo dal vivo invece di un archivio, lo stesso insieme di comandi stampa sulla console con file=-: netsh wfp show state «Displays the current state of WFP and IPsec», e netsh wfp show ikeevents «Displays recent Internet Key Exchange (IKE) epoch events matching the specified parameters», filtrato su un solo peer45.\nnetsh wfp show state file=- netsh wfp show ikeevents remoteaddr=203.0.113.5 file=- show ikeevents è la cosa più vicina, qui, al log dello scambio che ogni altro stack scrive senza che glielo chieda nessuno. Vale la pena sapere che c\u0026rsquo;è. Altrimenti l\u0026rsquo;interfaccia ti consegna un numero di tre cifre e nient\u0026rsquo;altro, e stai diagnosticando uno scambio di chiavi a tentativi.\nLeggi le associazioni, e leggile tutte e due. Gli equivalenti di ip -s xfrm state e swanctl --list-sas sono due cmdlet, e la divisione tra loro è tutta la diagnosi:\nGet-NetIPsecMainModeSA Get-NetIPsecQuickModeSA Main mode è lo scambio di chiavi. Quick mode trasporta i pacchetti. Microsoft descrive il rapporto in modo chiaro: «There is only one main mode SA between a pair of computers, but there can be many quick mode SAs»46. Quindi main mode presente con quick mode vuoto è lo stesso guasto di un IKE_SA su senza un CHILD_SA sotto, e significa la stessa cosa: i due lati si sono accordati su come parlarsi e poi non si sono accordati su cosa proteggere. Guarda i traffic selector, non i cifrari.\nLeggi i log, nei due posti dove si nascondono. I fallimenti a livello di connessione finiscono nel log Applicazione sotto la sorgente RasClient, e la nota di Microsoft stessa su come leggerli è la parte utile: «All error messages return the error code at the end of the message»47. Quel numero è la diagnosi, e la prossima sezione dice cosa significano i numeri. Le decisioni di policy e filtraggio finiscono da tutt\u0026rsquo;altra parte, sotto Registri applicazioni e servizi, nei canali di Windows Firewall with Advanced Security. Due log, due team, un guasto.\nRaccogli tutto come si deve quando devi scalare. Il pacchetto supportato è TSS: TSS.ps1 -Scenario NET_VPN sul client, TSS.ps1 -Scenario NET_RAS sul server, avviato prima di riprodurre il guasto e fermato dopo48. Imparalo prima che qualcuno te lo chieda.\nQuando resta su «connessione in corso» e poi va in timeout È il guasto che riempie i ticket, e la parola nell\u0026rsquo;errore è una bugia. Comincia dando un nome al codice. Il codice è specifico anche quando il messaggio è inutile.\nUn timeout di connessione è una di tre cose, e nessuna è un orologio Cosa il client chiama timeout, e cosa era davvero Il client dice: timeout 809, 718, 828, 930, 638: cinque codici, una parola, e nessuno è un orologio È una di tre cose, e un test ti dice quale Non arriva niente il caso del silenzio Test: cattura sul client. UDP 500 esce e non torna niente? Filtraggio nel percorso, o NAT traversal mai negoziato, quindi la 4500 non è mai partita. Arriva, troppo grande il caso del frammento Test: una chiave pre-condivisa si collega dove un certificato no? IKE_AUTH porta la catena, quindi si frammenta, e il frammento si perde nel percorso. Non è il tunnel il caso del livello sbagliato Test: il gateway registra un errore di autenticazione nello stesso secondo? 930 è RADIUS. 812 è il metodo di autenticazione. 13801 e 13806 sono certificati. Nessuna delle tre è un timer. Allungare il timeout è l'unica cosa che l'interfaccia ti invita a fare, e l'unica che non ne ha mai sistemata nessuna. La parola c'è perché il livello che segnala il guasto non vede abbastanza lontano da dire di più. Prova in quest'ordine. Il primo costa trenta secondi di cattura, il secondo un tentativo di connessione, il terzo un log. Cinque codici di errore portano la parola timeout e nessuno di loro è un orologio. È una di tre cose e un solo test le separa: una cattura dice se è tornato indietro qualcosa, un tentativo di connessione con una chiave pre-condivisa dice se lo scambio del certificato era semplicemente troppo grande per arrivare, e il log del gateway dice se il tunnel è mai stato il problema. Provale in quest\u0026rsquo;ordine, perché è anche l\u0026rsquo;ordine di quanto costano. Codice Nome in raserror.h Cosa è successo davvero 809 ERROR_VPN_TIMEOUT Non è tornato indietro niente. La causa dichiarata da Microsoft: «the UDP 500 or 4500 ports on the VPN server or firewall are blocked»47, ma bloccate copre tre cose diverse e solo una è una regola di deny. Di solito la 4500 non è mai stata mandata, perché il NAT traversal non è mai stato negoziato, o l\u0026rsquo;helper che lo trasportava è stato spento. Continua a leggere prima di chiedere una modifica al firewall 789 ERROR_OAKLEY_GENERAL_PROCESSING «The L2TP connection attempt failed because the security layer encountered a processing error during initial negotiations»: credenziali o certificati, non la rete 718 ERROR_PPP_TIMEOUT La parte IPsec ha funzionato. PPP dentro il tunnel L2TP non ha avuto risposta 828 ERROR_IDLE_TIMEOUT «The connection was terminated because of idle timeout»: un\u0026rsquo;impostazione lato server, voluta 930 ERROR_AUTH_SERVER_TIMEOUT RADIUS non ha risposto in tempo. Non c\u0026rsquo;entra niente con IPsec 638 ERROR_REQUEST_TIMEOUT Quello generico. Trattalo come nessuna informazione e vai sul filo Ognuno di questi viene dall\u0026rsquo;elenco di errori di Microsoft stessa49. Ora rileggi l'809. Si chiama ERROR_VPN_TIMEOUT, e la causa documentata è una porta bloccata. Il client non va in timeout perché l\u0026rsquo;altro lato è lento. Va in timeout perché l\u0026rsquo;altro lato è muto, e il silenzio è l\u0026rsquo;unico modo di fallire che un protocollo senza porte e senza visibilità sull\u0026rsquo;handshake può segnalare.\nAttento però a quella parola, bloccate, perché porta più di quanto riesca a reggere. Tre cose diverse la indossano, e solo una è una regola di deny.\nNessuno ha mai mandato la 4500 per cominciare. Il NAT traversal non è stato negoziato, quindi il client ha continuato a parlare ESP, ed ESP non dà a un traduttore niente da riscrivere. Il comportamento predefinito di quella piattaforma basta da solo: senza il valore di registro, non forma affatto un\u0026rsquo;associazione NAT-T verso un server dietro un traduttore31. Quindi la 4500 non è bloccata. Non è mai stata tentata.\nL\u0026rsquo;helper che prima ci metteva una toppa è stato spento. Firewall e router domestici hanno helper per protocollo, il passthrough IPsec sugli apparati consumer e dietro tutta la famiglia degli application-layer gateway, che leggono un protocollo che il NAT non sa gestire e aprono il percorso di ritorno per lui. Su Linux la forma automatica di tutto questo è stata disattivata per impostazione predefinita dal kernel 4.7 «for security reasons», e da allora l\u0026rsquo;indicazione è collegare un helper deliberatamente con una regola o non collegarlo affatto; gli helper interessati comprendono quello per PPTP50.\nE spegnerli è stata la scelta giusta. Un helper è un pezzo del tuo firewall che analizza un contenuto e poi apre un buco in base a quello che ha letto. NAT Slipstreaming è il conto di tutto questo: un browser che visita una pagina, traffico modellato in modo che l\u0026rsquo;helper SIP o H.323 del router lo legga come una chiamata, e un varco aperto attraverso il NAT, nella versione del 2021 verso qualunque indirizzo interno, non solo verso la macchina che ha caricato la pagina51. Spegnere gli helper chiude questo. Fa anche smettere di funzionare il tuo IPsec. Sono vere tutte e due le cose insieme, e la seconda non è un argomento per annullare la prima.\nChe è, di nuovo, l\u0026rsquo;articolo in miniatura. Il protocollo funzionava solo perché apparati in mezzo leggevano traffico che non era loro e aprivano buchi per conto suo, e il settore ha passato l\u0026rsquo;ultimo decennio a decidere, giustamente, di smettere di farlo.\nQuindi affronta le cause in quest\u0026rsquo;ordine, la più economica per prima.\nUno: non torna indietro niente. Cattura sul client, o chiedi al gateway. Se UDP 500 esce e non torna niente, è filtraggio o raggiungibilità e nessun timer lo sistemerà. Se la 500 si completa in entrambe le direzioni e la 4500 non compare mai, il NAT traversal non è stato negoziato. E se uno dei due lati è dietro un traduttore, sei di nuovo al valore di registro di prima in questo articolo: AssumeUDPEncapsulationContextOnSendRule, 1 o 2, su entrambe le macchine, poi un riavvio31. Senza, il client rifiuta per progetto e lo segnala come timeout.\nDue: la risposta è troppo grande per arrivare. Questo si mangia interi pomeriggi. L\u0026rsquo;autenticazione con certificato rende grande il secondo scambio, perché porta una catena, e uno scambio grande si frammenta. I frammenti vengono scartati dagli stessi middlebox di tutto il resto di questo articolo, il client ritrasmette nello stesso buco, e poi si arrende e dice timeout. Il segnale è diagnostico da solo: una chiave pre-condivisa si collega e un certificato no. Non è un guasto del certificato. È un guasto di dimensione, perché lo scambio con chiave pre-condivisa è abbastanza piccolo da starci. La frammentazione IKEv2 standard esiste proprio per questo23, e strongSwan registra quando questa piattaforma l\u0026rsquo;ha avuta: «IKEv2 fragmentation is supported since the v1803 release of Windows 10 and Windows Server»33. Qualunque cosa più vecchia, o un gateway con la frammentazione disattivata, e ti stai affidando a un percorso che trasporti un datagramma UDP frammentato. Parecchi non lo fanno.\nTre: si collega, poi cade a orario. Cronometralo. Se muore dopo un periodo fisso di inattività, è l'828 ed è configurazione, non un guasto: -IdleDisconnectSeconds sul server, con -SALifeTimeSeconds, -MMSALifeTimeSeconds e -SADataSizeForRenegotiationKilobytes come gli altri tre orologi che possono chiudere una sessione52. L\u0026rsquo;ultimo la chiude in base al volume invece che al tempo, ed è per questo che una sessione può morire puntualmente durante la copia di un file grande e mai durante una giornata di email. E se muore al rekey con il client dietro NAT, è il guasto di interoperabilità documentato di prima: il client rifiuta un rekey avviato dal server con l\u0026rsquo;errore Microsoft 13863, e la risposta lato gateway è smettere di avviarlo e lasciarlo fare al client33.\nQuattro: non è affatto il tunnel. 930 è RADIUS. 812 è un metodo di autenticazione che il server non ha accettato47. 13801 e 13806 sono certificati: extended key usage sbagliato, scaduto, root mancante, o un nome del server che non corrisponde al subject del certificato47. La negoziazione del tunnel è andata bene in tutti e quattro i casi, e se passi il pomeriggio sui cifrari non ne troverai nessuno.\nEcco la cosa da portarsi via da quella tabella. Sei codici di errore, cinque con la parola timeout nel nome, e nessuno di loro è davvero un timeout. Sono una porta bloccata, un frammento perso, una decisione di policy e un server RADIUS, tutti con la stessa parola addosso, perché il livello che segnala il fallimento non vede abbastanza di quello che è successo per dire qualcosa di più utile. Allungare il timer non ne sistema nessuno, e allungare il timer è proprio quello che l\u0026rsquo;interfaccia ti invita a fare.\nCosa usare invece Non fingerò che il sostituto sia esotico. È nel kernel e ci sta da anni.\nWireGuard è una porta UDP, una chiave per peer, nessuna negoziazione di cifrari e nessuna agilità di protocollo. La posizione dell\u0026rsquo;autore su questo è voluta e dichiarata: «It intentionally lacks cipher and protocol agility. If holes are found in the underlying primitives, all endpoints will be required to update. As shown by the continuing torrent of SSL/TLS vulnerabilities, cipher agility increases complexity monumentally.»53 Quella sola decisione cancella NO_PROPOSAL_CHOSEN, INVALID_KE_PAYLOAD, gli attacchi di downgrade e la scoperta di Logjam in un colpo solo, perché non c\u0026rsquo;è niente da negoziare e niente da declassare.\nÈ onesto anche sul compromesso, e lo sono anch\u0026rsquo;io: niente agilità significa che quando una primitiva cade davvero, aggiorni l\u0026rsquo;intera flotta invece di cambiare una riga di configurazione. È un costo operativo reale ed è quello giusto da pagare.\nIl resto si allinea con l\u0026rsquo;elenco sopra quasi voce per voce. Avere una porta UDP significa che NAT e CGNAT lo trattano come qualunque altro flusso, ed ECMP e LAG ne fanno l\u0026rsquo;hash come di qualunque altro flusso. Il roaming è integrato, non imbullonato: un pacchetto autenticato da un nuovo indirizzo sposta l\u0026rsquo;endpoint del peer, quindi un telefono che passa dal WiFi alla rete mobile non rinegozia niente. Non risponde niente a un pacchetto non autenticato, quindi uno scanner trova una porta chiusa dove con IPsec troverebbe un concentratore con cui parlare. Ed è meno di 4.000 righe di codice53 contro uno stack che ha bisogno di un documento che elenchi le sue sedici incompatibilità con un solo middlebox.\nSulle prestazioni è semplicemente risultato più veloce di entrambe le configurazioni IPsec con cui è stato confrontato, 1.011 Mbit/s contro 881 e 825, con una latenza più bassa53. Non ritirerei un protocollo per un benchmark. Lo cito perché l\u0026rsquo;ultimo argomento rimasto in piedi per IPsec di solito sono le prestazioni, e non è vero nemmeno quello.\nPer portare una persona a un\u0026rsquo;applicazione, invece di una rete a una rete, la risposta non è affatto un tunnel. Identità alla porta d\u0026rsquo;ingresso, l\u0026rsquo;applicazione pubblicata attraverso di essa, niente di instradato. L\u0026rsquo;ho costruito con Proxmox e Cloudflare Access in Zero Trust VDI Without the Cloud Bill, e il punto rilevante per questo articolo è che un utente che ha bisogno di tre applicazioni interne non ha bisogno di una rotta verso tutta la tua infrastruttura.\nE di\u0026rsquo; la parte scomoda sull\u0026rsquo;hardware. Sì, esistono NIC e ASIC con offload ESP, ed è un argomento genuino per IPsec su apparati specifici a velocità specifiche. È un argomento sul silicio che qualcuno ti ha già venduto, non sul fatto che il protocollo sia giusto. Per questo invecchia, e invecchia in fretta. PPTP è sopravvissuto esattamente allo stesso modo, esattamente per tutto il tempo in cui è esistita la casella.\nRitirarlo come si deve Il ritiro è un piano con le date, non una sensazione. Ecco quello su cui metterei il mio nome.\nFerma subito le nuove installazioni IPsec. Non «preferisci le alternative». Ferma. Ogni nuovo tunnel è un tunnel che qualcuno dovrà migrare più avanti, e quelli costruiti oggi gireranno ancora nel 2035 a meno che qualcuno non dica di no questa settimana.\nFai prima l\u0026rsquo;accesso remoto, perché è lì che ogni guasto di questo articolo colpisce più forte: il CGNAT, l\u0026rsquo;indirizzo condiviso, i keepalive, il secondo utente nella stessa casa, il buco nero dell\u0026rsquo;MTU sulla rete di un hotel qualunque. È anche il più facile da spostare, perché gli endpoint sono gestiti e il cambiamento è un client.\nPoi il site-to-site su internet pubblica, che è lo stesso insieme di problemi con meno endpoint e una finestra di manutenzione.\nLascia per ultimi i tunnel di cui non possiedi entrambi i capi: un partner, un regolatore, il servizio gestito di un operatore. Quelli si spostano quando si sposta il contratto, e il modo per farli spostare è il punto successivo.\nSmetti di comprare apparati il cui unico tunnel è IPsec. Mettilo nella gara. Una riga che chiede un tunnel moderno, basato su porte e capace di roaming è una riga a cui un vendor risponde oppure no, ed è così che l\u0026rsquo;argomento della base installata alla fine perde. Quell\u0026rsquo;argomento è l\u0026rsquo;unico che tiene in vita tutto questo, e lo sconfigge sempre e solo l\u0026rsquo;acquisto.\nScrivi quali tunnel restano e perché, e metti una data su ciascuno. Un protocollo che nessuno ha avuto in carico per dieci anni è il modo in cui PPTP è arrivato al 2026. Un inventario con le date è la differenza tra ritirare qualcosa e semplicemente non sopportarlo.\nSe lo stai ancora installando, puoi chiamarti un professionista? È una domanda vera e risponderò onestamente, perché è quella verso cui il resto di questo articolo stava camminando.\nDipende da se lo sai. E saperlo non è qualcosa che ti succede. Assicurarti di saperlo è il lavoro.\nSe quest\u0026rsquo;anno stai mettendo in piedi un nuovo servizio di accesso remoto IPsec e non sai dire, senza cercare niente, perché ESP non ha porte, cosa gli fa una linea residenziale sotto NAT di operatore, perché una rete NAT64 non lo trasporterà affatto, o a cosa serve davvero quel pacchetto da un byte ogni venti secondi, allora no. Non su questo, non ancora. Non stai scegliendo un protocollo. Stai ripetendo una forma, perché l\u0026rsquo;ultimo era fatto così e nessuno nella stanza ha chiesto perché, te compreso. La mancanza non è la lacuna. Tutti hanno lacune. La mancanza è costruire sopra una lacuna che non sei mai andato a colmare. Per questo chi lo eredita nel 2035 si ritrova un decennio di ticket che erano tutti evitabili il giorno in cui l\u0026rsquo;hai disegnato.\nLasciami dare il nome giusto a questa cosa, perché la versione educata circola da vent\u0026rsquo;anni e non ha cambiato niente. Chi installa un protocollo che non sa spiegare non è un ingegnere. È un esecutore. Legge i gobbi, l\u0026rsquo;architettura di riferimento del vendor, l\u0026rsquo;ultima richiesta di modifica, un diagramma che qualcuno ha disegnato nel 2014 e che nessuno ha più aperto, e li legge con vera convinzione, e dietro la recita non c\u0026rsquo;è comprensione da nessuna parte. Da fuori sembra esattamente competenza. Continua a sembrare esattamente competenza fino al primo guasto che i gobbi non coprono, e da quel momento è l\u0026rsquo;unica cosa nella stanza che conta.\nI gobbi sono anche il motivo per cui questo protocollo è ancora qui. Nessuno nel 2026 si è messo davanti a una lavagna a sostenere IPsec nel merito. È stato installato di nuovo perché era sul gobbo, e il gobbo l\u0026rsquo;ha scritto un vendor il cui interesse è che tu continui a comprare l\u0026rsquo;apparato che lo termina. È così che qualcosa sopravvive di vent\u0026rsquo;anni al proprio necrologio: non perché viene difeso, ma perché non gli si chiede mai, nemmeno una volta, di giustificarsi in una stanza dove qualcuno saprebbe vedere la differenza.\nE questo va detto. Ad alta voce, nella stanza, sul momento, non mormorato in corridoio dopo. Se qualcuno mette la parola professionista accanto al proprio nome, la parola arriva con un invito a fargli domande, e fare domande non è maleducato. Ricevere la domanda e avere una risposta è tutta la differenza tra la parola e un biglietto da visita.\nConta di più quando stai pagando. Una società di consulenza, un MSP, il ramo professional services di un vendor, l\u0026rsquo;integratore dell\u0026rsquo;accordo quadro: quello che stai comprando è giudizio, e il giudizio è l\u0026rsquo;unica cosa che non puoi ispezionare alla consegna. Quindi ispezionalo prima. Chiedi perché questo protocollo e non un altro. Chiedi cosa gli succede su una linea con NAT di operatore, su una rete mobile solo IPv6, su un percorso che scarta i frammenti in silenzio. Chiedi quali di queste cose hanno incontrato di persona e cosa hanno fatto. Saprai entro due minuti se ti stanno dicendo qualcosa o se ti stanno leggendo qualcosa, e due minuti sono un test parecchio più economico di quattro anni di ticket. E se la risposta sono i gobbi e firmi lo stesso, anche quella è una decisione: solo che adesso è tua invece che loro.\nSe sai dire tutto questo, e lo stai installando lo stesso perché un regolatore lo nomina per protocollo, perché gli apparati del partner non terminano nient\u0026rsquo;altro, o perché il sostituto è nel budget dell\u0026rsquo;anno prossimo e questo deve funzionare a marzo, allora sì, ovviamente, e stai facendo il lavoro come si deve. I vincoli sono reali e ho costruito aggirando di peggio. Quello che separa i due casi non è il protocollo sul diagramma. È se hai scritto il perché, e se c\u0026rsquo;è una data accanto.\nLa posizione indifendibile è quella di mezzo. Saperne abbastanza da sentirsi a disagio, e costruirlo lo stesso perché nessuno ti ha fatto giustificare. Non è ingegneria. È abitudine, con un numero di modifica attaccato, ed è esattamente il modo in cui L2TP è finito in una scheda tecnica stampata quest\u0026rsquo;anno.\nQuindi faccelo a te stesso, prima che chiuda la gara e non dopo. Professionista non è una parola su quali protocolli conosci. È una parola su se sai difendere quello che hai scelto, ad alta voce, davanti a qualcuno che conosce i modi in cui si guasta. Se sai farlo, installa quello che i vincoli richiedono e dormi tranquillo. Se non sai farlo, hai appena trovato cosa andare a leggere stasera, e non è un insulto. Tutti sono stati esecutori una volta, senza eccezioni, io compreso. La parte che non è difendibile è scegliere di restarlo e chiamarla carriera.\nUna buona idea ha il diritto di finire Voglio essere giusto con IPsec, perché se lo merita.\nEra l\u0026rsquo;istinto giusto. La sicurezza sta in basso nello stack, dove tutto la eredita e nessuna applicazione deve essere creduta sulla parola per farla bene. Legare l\u0026rsquo;associazione all\u0026rsquo;indirizzo non era un errore nel 1995: l\u0026rsquo;indirizzo era la macchina, e costruire su quello era corretto. Chi l\u0026rsquo;ha scritto erano persone serie che risolvevano un problema reale, e il paper di WireGuard, fra tutti i documenti, è quello che lo dice meglio: la stratificazione di IPsec è solida, tutto è al posto giusto, alla perfezione accademica53.\nE poi il terreno si è mosso. Non perché IPsec abbia fatto qualcosa di sbagliato, ma perché questo settore ha deciso che gli indirizzi erano un costo da gestire invece di una cosa che ogni macchina riceve, e ha costruito venticinque anni di traduzione per evitare l\u0026rsquo;alternativa. Le fondamenta di IPsec sono state tolte in silenzio, e invece di ammetterlo ci abbiamo messo degli spessori. Incapsulamento UDP. Poi i keepalive. Poi l\u0026rsquo;incapsulamento TCP per le reti che bloccano UDP. Poi un altro header UDP perché un router trovi qualcosa su cui fare l\u0026rsquo;hash. Ogni correzione ragionevole da sola; la pila di tutte quante è un protocollo tenuto in piedi da persone pagate per tenerlo in piedi.\nQuesta è la parte su cui vale la pena arrabbiarsi, e non riguarda davvero IPsec. Il nostro settore è bravissimo a mantenere le cose e pessimo a farle finire. La manutenzione è fatturabile, messa a budget, ha personale ed è sicura. Il ritiro è una decisione che qualcuno deve firmare, con il proprio nome sopra, e nessuna ricompensa immediata. Così PPTP è vissuto quattordici anni dopo la prova che non valeva niente, L2TP viene ancora distribuito su apparati venduti quest\u0026rsquo;anno, e IKEv1 ha continuato a negoziare tunnel per un decennio dopo essere diventato Historic. Non perché qualcuno li abbia difesi. Perché a nessuno è mai stato chiesto di ucciderli.\nNon c\u0026rsquo;è nessun premio per fare giusto il 90%. Ferguson e Schneier lo hanno scritto di IPsec nel 1999, e quello che è successo da allora sono trent\u0026rsquo;anni di settore che sbaglia l\u0026rsquo;ultimo 10% in un modo nuovo ogni volta e chiama la toppa una soluzione.\nUna buona idea ha ancora il diritto di finire. Sapere quando smettere di mantenere qualcosa è un\u0026rsquo;abilità, ed è quella in cui questo mestiere è il peggiore. Qualcuno deve essere quello che dice che un protocollo ha fatto il suo tempo, scrive la data e si prende le conseguenze di essere stato quello che l\u0026rsquo;ha detto. Altrimenti nel 2040 staremo ancora mandando un pacchetto da un byte ogni venti secondi, per tenere calda una tabella in un apparato che non è nostro, su una rete che ci ha tolto gli indirizzi e ci ha fatto pagare il privilegio.\nRFC 4301 — Security Architecture for the Internet Protocol, dicembre 2005. Definisce l\u0026rsquo;associazione di sicurezza e la terna su cui viene cercata: indirizzo di destinazione, protocollo di sicurezza e SPI.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4302 — IP Authentication Header, dicembre 2005. Il controllo di integrità di AH copre i campi immutabili dell\u0026rsquo;header IP, indirizzi sorgente e destinazione compresi.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9329 — TCP Encapsulation of Internet Key Exchange Protocol (IKE) and IPsec Packets, novembre 2022, che sostituisce l\u0026rsquo;RFC 8229. Esiste perché i middlebox sulle reti pubbliche bloccano UDP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3715 — IPsec-Network Address Translation (NAT) Compatibility Requirements, marzo 2004. Sedici incompatibilità elencate, tra cui: «Since the AH header incorporates the IP source and destination addresses in the keyed message integrity check, NAT or reverse NAT devices making changes to address fields will invalidate the message integrity check» e «Where IP addresses are used as identifiers in Internet Key Exchange Protocol (IKE) Phase 1 or Phase 2, modification of the IP source or destination addresses by NATs or reverse NATs will result in a mismatch between the identifiers and the addresses in the IP header.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Configuring IPsec NAT-Traversal, Security Configuration Guide, Cisco IOS XE 17.15.x (Catalyst 9300 Switches). «If PAT found a legislative IP address and port, it would drop the Encapsulating Security Payload (ESP) packet»; l\u0026rsquo;header UDP e un marcatore non-IKE da 8 byte vengono inseriti tra l\u0026rsquo;header IP esterno e l\u0026rsquo;header ESP; l\u0026rsquo;elenco delle restrizioni comprende regole statiche sia per la porta 500 sia per la 4500, nessun supporto per policy NAT dinamiche, niente IPv6, e il fatto che IPsec e NAT non possono funzionare entrambi sullo stesso apparato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3948 — UDP Encapsulation of IPsec ESP Packets, gennaio 2005, con la negoziazione nell\u0026rsquo;RFC 3947. Definisce il keepalive come «a one-octet-long payload with the value 0xFF», mandato «if no other packet to the peer has been sent in M seconds. M is a locally configurable parameter with a default value of 20 seconds», e richiede che il checksum UDP venga azzerato: «If the protocol header after the ESP header is a UDP header, set the checksum field to zero in the UDP header.» Microsoft, Cisco, F-Secure, Nortel e SafeNet compaiono tutte tra gli autori dell\u0026rsquo;RFC 3947 e dell\u0026rsquo;RFC 3948.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — Route-Based and Policy-Based VPNs with NAT-T, Junos OS IPsec VPN User Guide. «NAT-T encapsulates both IKE and ESP traffic within UDP with port 4500 used as both the source and destination port»; «Because NAT devices age out stale UDP translations, keepalive messages are required between the peers»; e su SRX5400, SRX5600 e SRX5800, «the total number of tunnels from a given public translated IP cannot exceed 1000 tunnels.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8221 — Cryptographic Algorithm Implementation Requirements and Usage Guidance for ESP and AH, ottobre 2017. ENCR_DES MUST NOT, ENCR_3DES SHOULD NOT, AUTH_HMAC_MD5_96 MUST NOT; ESP combinato con AH è NOT RECOMMENDED.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4787 — Network Address Translation (NAT) Behavioral Requirements for Unicast UDP, gennaio 2007. REQ-5: «A NAT UDP mapping timer MUST NOT expire in less than two minutes», con «a default value of five minutes or more for the NAT UDP mapping timer is RECOMMENDED».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6146 — Stateful NAT64: Network Address and Protocol Translation from IPv6 Clients to IPv4 Servers, aprile 2011. «The current specification only defines how stateful NAT64 translates unicast packets carrying TCP, UDP, and ICMP traffic. Multicast packets and other protocols, including the Stream Control Transmission Protocol (SCTP), the Datagram Congestion Control Protocol (DCCP), and IPsec, are out of the scope of this specification.» I pacchetti che trasportano qualunque altra cosa «SHOULD be discarded».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6877 — 464XLAT: Combination of Stateful and Stateless Translation, aprile 2013. Dà a un dispositivo solo IPv6 uno stack IPv4 locale, così il traffico che il NAT64 non può trasportare funziona lo stesso.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIETF — draft-xu-ipsecme-esp-in-udp-lb, Encapsulating IPsec ESP in UDP for Load-balancing. «Although the ESP SPI field within the IPsec packets can be used as the load-balancing key, but it cannot be used by legacy switches and routers»; «Many cloud service providers allow customers to establish multiple IPsec VPN tunnels in parallel to enable ECMP and increase aggregate bandwidth. However, this approach is not ideal, as each tunnel typically requires its own public IP address, leading to higher public IP consumption and increased operational overhead.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Resolve IPv4 Fragmentation, MTU, MSS, and PMTUD Issues with GRE and IPsec. Il riferimento di lunga data su overhead dei tunnel, path MTU discovery e cosa si rompe quando gli errori ICMP non tornano indietro.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Troubleshoot IPsec Anti-Replay Check Failures. «Certain QoS features, such as Low Latency Queueing (LLQ), could cause IPsec packet delivery to become out-of-order and dropped by the receiving endpoint due to a replay check failure.» Finestra predefinita di 64 pacchetti; 1024 sulle piattaforme più recenti; il rimedio alternativo sono più spazi di numeri di sequenza per associazione.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2661 — Layer Two Tunneling Protocol \u0026ldquo;L2TP\u0026rdquo;, agosto 1999. Un protocollo di tunneling per PPP senza alcuna riservatezza propria a livello di pacchetto; la sua sezione sulla sicurezza rimanda a IPsec.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMoxie Marlinspike e David Hulton — Divide and Conquer: Cracking MS-CHAPv2 with a 100% Success Rate, 2012; lo strumento è su github.com/moxie0/chapcrack. La sicurezza di MS-CHAPv2 si riduce a una singola operazione DES indipendentemente dalla lunghezza della password; resoconto dell\u0026rsquo;epoca su The Register. La loro conclusione è stata che il traffico PPTP va considerato non cifrato.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nApple — If you see a \u0026ldquo;VPN Using PPTP May Not Be Secure\u0026rdquo; alert. PPTP è stato tolto dal client integrato in macOS Sierra e iOS 10, nel 2016.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4303 — IP Encapsulating Security Payload (ESP), dicembre 2005. Protocollo IP 50; l\u0026rsquo;header ESP porta lo SPI e il numero di sequenza e non ha alcun campo porta.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9395 — Deprecation of the Internet Key Exchange Version 1 (IKEv1) Protocol and Obsoleted Algorithms, aprile 2023. «Internet Key Exchange Version 1 (IKEv1) has been deprecated, and RFCs 2407, 2408, and 2409 have been moved to Historic status.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7296 — Internet Key Exchange Protocol Version 2 (IKEv2), ottobre 2014. Lo scambio di chiavi attuale, e la fonte dei nomi delle notify nella tabella diagnostica.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3173 — IP Payload Compression Protocol (IPComp), settembre 2001. Un proprio numero di protocollo IP e proprie associazioni, negoziate insieme a ESP.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2367 — PF_KEY Key Management API, Version 2, luglio 1998. L\u0026rsquo;interfaccia del kernel che un demone delle chiavi usa per installare le associazioni.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7383 — IKEv2 Message Fragmentation, novembre 2014. «This document describes a way to avoid IP fragmentation of large Internet Key Exchange Protocol version 2 (IKEv2) messages.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4555 — IKEv2 Mobility and Multihoming Protocol (MOBIKE), giugno 2006. Permette a un tunnel stabilito di sopravvivere a un cambio di indirizzo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3706 — A Traffic-Based Method of Detecting Dead Internet Key Exchange (IKE) Peers, febbraio 2004.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndraft-beaulieu-ike-xauth — Extended Authentication within IKE (XAUTH). Ultima revisione 02, ottobre 2001, stato Expired, «Expired \u0026amp; archived», mai pubblicata come RFC. La bozza registra di essere stata proposta come Informational perché «the IPSRA working group will not accept any protocol which extends ISAKMP or IKE, and the IPsec working group refuses to accept any protocols that deal with remote access.» Mode-Config ha fatto la stessa fine.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3193 — Securing L2TP using IPsec, novembre 2001. Scritto con coautori di Microsoft.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2332 — NBMA Next Hop Resolution Protocol (NHRP), aprile 1998. Il pezzo che permette agli spoke DMVPN di trovarsi tra loro.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6407 — The Group Domain of Interpretation, ottobre 2011. Chiavi di gruppo, come le usa GETVPN.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2637 — Point-to-Point Tunneling Protocol (PPTP), luglio 1999. Categoria: Informational. Un protocollo di un vendor messo per iscritto, mai uno standard.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Configure L2TP/IPsec server behind NAT-T device, KB 926179, ultima revisione 12 febbraio 2026. «By default, Windows Vista and Windows Server 2008 don\u0026rsquo;t support Internet Protocol security (IPsec) network address translation (NAT) Traversal (NAT-T) security associations to servers that are located behind a NAT device»; il DWORD AssumeUDPEncapsulationContextOnSendRule sotto HKEY_LOCAL_MACHINE\\SYSTEM\\CurrentControlSet\\Services\\PolicyAgent accetta 0 (predefinito, non può), 1 (server dietro NAT) o 2 (entrambi i lati dietro NAT), e la macchina va riavviata. Inoltre: «If you must use IPsec for communication, use public IP addresses for all servers that you can connect to from the Internet.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nstrongSwan — Windows Certificate Requirements. Il certificato del gateway ha bisogno dell\u0026rsquo;EKU serverAuth, OID 1.3.6.1.5.5.7.3.1, e dell\u0026rsquo;EKU IP Security IKE Intermediate, OID 1.3.6.1.5.5.8.2.2.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nstrongSwan — Windows Clients. Documenta l\u0026rsquo;aggiunta del DWORD NegotiateDH2048_AES256 sotto Rasman\\Parameters per ottenere AES-256-CBC e MODP-2048; l\u0026rsquo;espediente sul rekeying per i client dietro NAT (rekey_time = 0 sul gateway, lasciando che sia il client ad avviarlo); e che il client Windows «does not currently support IKE redirection (RFC 5685) and multiple authentication rounds (RFC 4739).» Inoltre: «IKEv2 fragmentation is supported since the v1803 release of Windows 10 and Windows Server», e i client dietro NAT rifiutano un rekey CHILD_SA avviato dal server con l\u0026rsquo;errore Microsoft 13863.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — DirectAccess e Remote Access Always On VPN migration overview. DirectAccess è deprecato e sarà rimosso in una futura versione di Windows Server; i clienti vengono indirizzati verso Always On VPN.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJean Paul Degabriele e Kenneth G. Paterson — Attacking the IPsec Standards in Encryption-only Configurations, IEEE Symposium on Security and Privacy, 2007. Attacchi che «break any RFC-compliant implementation of IPsec making use of encryption-only ESP», con il solo testo cifrato, che richiedono soltanto la capacità di intercettare e di iniettare traffico.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6434 — IPv6 Node Requirements, dicembre 2011. «Previously, IPv6 mandated implementation of IPsec and recommended the key management approach of IKE. This document updates that recommendation by making support of the IPsec Architecture [RFC4301] a SHOULD for all IPv6 nodes.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNiels Ferguson e Bruce Schneier — A Cryptographic Evaluation of IPsec, Counterpane Internet Security, 1999. «IPsec was a great disappointment to us»; «Our main criticism of IPsec is its complexity»; «We therefore recommend that transport mode be eliminated»; «We conclude that eliminating transport mode allows the elimination of the AH protocol as well, without loss of functionality»; e «We have found serious security weaknesses in all major components of IPsec. As always in security, there is no prize for getting 90% right; you have to get everything right.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDavid Adrian et al. — Imperfect Forward Secrecy: How Diffie-Hellman Fails in Practice, ACM CCS 2015. Il precalcolo per un secondo gruppo da 1024 bit «would allow decryption of traffic to 66% of IPsec VPNs»; l'86,1% dei server IKEv1 e il 91,0% dei server IKEv2 scansionati supportavano l\u0026rsquo;Oakley Group 2, e il 66,1% dei server IKEv1 analizzati lo preferiva.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCVE-2016-1287 e l\u0026rsquo;avviso di Cisco, Cisco ASA Software IKEv1 and IKEv2 Buffer Overflow Vulnerability. Esecuzione di codice remoto prima dell\u0026rsquo;autenticazione, raggiunta con pacchetti UDP costruiti ad arte verso il servizio IKE.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — How to Analyze IKE Phase 2 VPN Status Messages. «No proposal chosen» significa che l\u0026rsquo;apparato «did not accept any of the IKE Phase 2 proposals that the peer sent».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Understand and Use Debug Commands to Troubleshoot IPsec, e Troubleshoot Common L2L and Remote Access IPsec VPN Issues.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — Troubleshoot a VPN Tunnel That is Down.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — XFRM proc counters. Le descrizioni nella tabella sono quelle della documentazione del kernel stessa.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — Troubleshoot a VPN That Is Up But Not Passing Traffic. «If only the pkts counter in the out direction of the session is incrementing, then validate with the VPN peer that the traffic is being received.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — netsh wfp, Windows Commands. netsh wfp capture start «Starts a capture session for network events processed by WFP» e per impostazione predefinita scrive wfpdiag.cab; netsh wfp show state «Displays the current state of WFP and IPsec»; netsh wfp show ikeevents «Displays recent Internet Key Exchange (IKE) epoch events matching the specified parameters» e accetta un filtro remoteaddr=. Impostare file=- su uno dei due show stampa sulla console invece di scrivere XML.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Get-NetIPsecQuickModeSA, modulo NetSecurity. «There is only one main mode SA between a pair of computers, but there can be many quick mode SAs», e monitorarle «can provide information about which peers are currently connected to this computer, and which protection suite is protecting the data exchanged between them.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Troubleshoot Always On VPN, ultima revisione 12 febbraio 2026. Sulla lettura dei log del client: «look for events labeled RasClient. All error messages return the error code at the end of the message.» La causa dell\u0026rsquo;errore 809: «You can encounter this issue when the UDP 500 or 4500 ports on the VPN server or firewall are blocked.» L\u0026rsquo;errore 812 è una discrepanza di metodo di autenticazione tra la policy del server e il profilo del client. Le quattro cause elencate per l\u0026rsquo;errore 13801 sono un certificato macchina senza Server Authentication sotto Enhanced Key Usage, un certificato macchina RAS scaduto, un client a cui manca il certificato root, e un client il cui «VPN server name doesn\u0026rsquo;t match the subjectName value on the server certificate»; il 13806 è «IKE can\u0026rsquo;t find a valid machine certificate».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Guidance for troubleshooting Remote Access (VPN and AOVPN). La raccolta supportata è TSS, lanciata con privilegi elevati: TSS.ps1 -Scenario NET_VPN sul client e TSS.ps1 -Scenario NET_RAS sul server, riproducendo il guasto tra l\u0026rsquo;avvio e l\u0026rsquo;arresto, con le tracce scritte in C:\\MS_DATA.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Routing and Remote Access Error Codes, i codici definiti in raserror.h. 638 ERROR_REQUEST_TIMEOUT; 718 ERROR_PPP_TIMEOUT; 789 ERROR_OAKLEY_GENERAL_PROCESSING, «The L2TP connection attempt failed because the security layer encountered a processing error during initial negotiations with the remote computer»; 809 ERROR_VPN_TIMEOUT, «The network connection between your computer and the VPN server could not be established because the remote server is not responding»; 828 ERROR_IDLE_TIMEOUT, «The connection was terminated because of idle timeout»; 930 ERROR_AUTH_SERVER_TIMEOUT, «The authentication server did not respond to authentication requests in a timely fashion».\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfirewalld — Automatic Helper Assignment. «With kernel 4.7 and up the automatic helper assignment in kernel has been turned off by default», controllata dal sysctl in /proc/sys/net/netfilter/nf_conntrack_helper, e «for the secure use of iptables and connection tracking helpers it is recommended to turn AutomaticHelpers off». Il messaggio del kernel stesso sul cambiamento ne nomina la ragione e il sostituto: l\u0026rsquo;assegnazione automatica predefinita degli helper «has been turned off for security reasons», usa invece il target CT per collegare gli helper. Gli helper interessati comprendono ftp, irc, sip, h323, tftp, snmp e pptp.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSamy Kamkar — NAT Slipstreaming, v1 31 ottobre 2020, v2 26 gennaio 2021 con Ben Seri e Gregory Vishnipolsky di Armis. L\u0026rsquo;attacco sfrutta «the Application Level Gateway (ALG) connection tracking mechanism built into NATs, routers, and firewalls» per «bypass victim NAT and connect directly back to any port on any machine on the network, exposing previously protected/hidden services and systems». La v1 usava il gateway SIP sulla porta 5060; la v2 usava H.323 sulla 1720, che permetteva di puntare il varco su qualunque host interno invece che solo sulla macchina che aveva caricato la pagina.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Set-VpnServerConfiguration, modulo RemoteAccess. -IdleDisconnectSeconds «Specifies the time, in seconds, after which an idle connection is terminated»; -SALifeTimeSeconds e -MMSALifeTimeSeconds impostano le durate di quick mode e main mode; -SADataSizeForRenegotiationKilobytes «Specifies the number of kilobytes that are allowed to transfer using a security association (SA), after which the SA will be renegotiated.»\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJason A. Donenfeld — WireGuard: Next Generation Kernel Network Tunnel, NDSS 2017. «It intentionally lacks cipher and protocol agility. If holes are found in the underlying primitives, all endpoints will be required to update. As shown by the continuing torrent of SSL/TLS vulnerabilities, cipher agility increases complexity monumentally»; «implemented for Linux in less than 4,000 lines of code»; «it is important to stress, however, that the layering of IPsec is correct and sound; everything is in the right place with IPsec, to academic perfection.» Benchmark: 1.011 Mbit/s contro 881 e 825 per due suite di cifrari IPsec, e un ping di 0,403 ms contro 0,501 e 0,508.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/networking/ipsec-was-a-good-idea-turn-it-off/","summary":"IPsec aveva ragione nel 1995: cifrare sotto l\u0026rsquo;applicazione, legare l\u0026rsquo;associazione di sicurezza all\u0026rsquo;indirizzo IP, lasciare che ogni protocollo la erediti. Poi è arrivato il NAT, il NAT di operatore ha finito il lavoro, e la soluzione è stata avvolgere tutto in UDP e tenere un timer acceso perché una tabella di traduzione non si dimenticasse di te. Questo articolo mostra come crolla, diagramma per diagramma: l\u0026rsquo;associazione di sicurezza che non sopravvive a un header riscritto, i due traduttori che ogni linea CGNAT ormai ha, lo standard NAT64 che dichiara IPsec fuori dal suo ambito, il tunnel che non può usare un secondo link perché ESP non ha porte, l\u0026rsquo;MTU che non appartiene a nessuno, e L2TP e PPTP come i due protocolli che non sono mai stati adatti a stare qui. Riporta la documentazione dei vendor, Cisco, Juniper e Microsoft, che ammette ognuno di questi punti, i diciotto pezzi che si fanno chiamare VPN IPsec, compresi i due che non sono mai stati standard, perché il Fisher-Price OS (Windows) non ha mai davvero interoperato con uno stack aperto, un metodo pratico per diagnosticare IPsec finché lo usi ancora, e le ragioni per ritirare tutto, con le date.","title":"IPsec è stata una buona idea. È ora di spegnerla."},{"content":"Quanto costa davvero Azure Virtual Desktop Azure Virtual Desktop porta un desktop Windows dentro un browser. È davvero quello che fa, e funziona. La domanda è quanto costa tenerlo in piedi.\nIl prezzo di listino non è il prezzo. Lo stack di licenze Microsoft per AVD, a grandi linee, è questo1:\nUna licenza Microsoft 365 che includa il diritto a Windows Enterprise: E3 o E5, oppure l\u0026rsquo;equivalente Business Premium Il calcolo Azure sotto il desktop: una VM fatturata a ore, o un\u0026rsquo;istanza riservata fatturata a mese Lo storage Azure per il disco del sistema operativo e per il profilo utente La rete Azure per il traffico tra il desktop e tutto il resto In via opzionale, Microsoft Entra ID P1 o P2 per le policy di accesso condizionale Windows 365 Cloud PC semplifica la fatturazione in una cifra fissa per utente al mese, ma la cifra non è piccola. Una configurazione da 2 vCPU / 8 GB / 128 GB, cioè un modesto desktop da ufficio, costa £35,60 per utente al mese2. Aggiungi una GPU e si sale a £269,40 per il livello GPU Standard. Moltiplica per il numero di persone e diventa una voce di bilancio vera, ogni mese, per sempre.\nQuesto è il prodotto che questo articolo sostituisce.\nBrowser ogni dispositivo nessun client RDP nessuna VPN HTTPS Cloudflare Access\u0026#160;+\u0026#160;IdP autentica l'utente rende l'RDP nel browser gratis ≤\u0026#160;50 utenti nessuna porta esposta nessuna VPN richiesta policy zero trust tunnel LXC cloudflared VLAN propria firewall verso soli target RDP RDP VM\u0026#160;Windows GPU VF\u0026#160;0\u0026#160;·\u0026#160;RDP VM\u0026#160;Windows GPU VF\u0026#160;1\u0026#160;·\u0026#160;RDP VM\u0026#160;Windows GPU VF\u0026#160;2\u0026#160;·\u0026#160;RDP Host Proxmox\u0026#160;·\u0026#160;Intel Arc Pro SR-IOV Arc Pro serie B PF → host VF 0 → VM VF 1 → VM VF 2 → VM Un browser, un identity provider e un tunnel: nessuna VPN, nessuna porta esposta, nessuna bolletta cloud a postazione L\u0026rsquo;intero percorso: un browser, Cloudflare Access per l\u0026rsquo;identità, un tunnel dentro un LXC dietro firewall e RDP verso VM Windows con funzioni virtuali Intel Arc Pro. Niente VPN, niente porte esposte, niente bolletta cloud per utente. Com\u0026rsquo;è fatto lo stack che lo sostituisce Tre livelli, ognuno indipendente, nessuno fatturato per utente:\nIl livello GPU è la build Intel Arc Pro SR-IOV dell\u0026rsquo;articolo precedente. Una sola scheda Arc Pro si divide in funzioni virtuali hardware tramite il normale SR-IOV PCIe: nessuna licenza vGPU, nessun abbonamento NVIDIA. Ogni VM Windows riceve la sua VF e il suo desktop accelerato dalla GPU. È la scheda a decidere il numero di postazioni, non un server di licenze.\nIl livello di accesso è Cloudflare Access con RDP reso nel browser. L\u0026rsquo;utente apre un URL in un browser qualsiasi, si autentica presso il tuo provider di identità, e Cloudflare rende la sessione RDP direttamente nella scheda del browser. Nessun client RDP da installare. Nessuna VPN. Nessuna porta esposta su internet. Access si federa con qualsiasi provider OAuth o OIDC, compresi provider on-prem come Keycloak o Authentik appoggiati sul tuo Active Directory esistente, che sia Samba 4 AD o un domain controller Windows. La directory continua a fare quello che fa già: account utente, criteri di gruppo, VM unite al dominio. Keycloak o Authentik si federano con essa e aggiungono lo strato OAuth/OIDC e MFA di cui Cloudflare Access ha bisogno. Il piano dell\u0026rsquo;identità resta sul tuo hardware. Nessun abbonamento Entra ID richiesto. Cloudflare Access gestisce quello che succede dopo: controlla cosa l\u0026rsquo;utente autenticato può raggiungere sulla tua rete, quali applicazioni, quali protocolli, quali host. Il desktop sta dietro un tunnel Cloudflare ed è irraggiungibile da qualunque parte se non passando per la policy di Access, e la policy decide sia l\u0026rsquo;identità sia il perimetro.\nIl livello del tunnel è un processo cloudflared che gira in un container LXC su Proxmox, sulla sua VLAN: una /30 per IPv4 con il suo prefisso IPv6 dedicato, nient\u0026rsquo;altro nel dominio di broadcast. Il firewall di Proxmox controlla cosa l\u0026rsquo;LXC può raggiungere, e la risposta è breve: TCP 3389 verso le VM desktop e nient\u0026rsquo;altro. Se l\u0026rsquo;endpoint del tunnel viene compromesso, il raggio del danno è un container su una VLAN altrimenti vuota, e l\u0026rsquo;unica cosa con cui può parlare è quello che il firewall già permette. È una superficie molto più piccola di un concentratore VPN che distribuisce una subnet instradata.\nCloudflare Zero Trust è gratuito fino a 50 utenti3. Si paga dal cinquantunesimo. Azure Virtual Desktop fa pagare dalla prima postazione.\nL\u0026rsquo;architettura Utente ogni dispositivo ogni browser HTTPS Cloudflare Access l'IdP OAuth fa identità\u0026#160;+\u0026#160;MFA Access controlla ambito\u0026#160;di\u0026#160;rete rende l'RDP tunnel La tua sede LXC cloudflared VLAN\u0026#160;propria /30\u0026#160;IPv4 Firewall Proxmox solo\u0026#160;TCP\u0026#160;3389 RDP Windows VM funzioni virtuali della GPU Arc\u0026#160;Pro\u0026#160;SR-IOV Il percorso della sessione: l\u0026rsquo;utente si autentica sull\u0026rsquo;edge di Cloudflare, il tunnel arriva in un LXC dietro firewall sulla sua VLAN, e il firewall permette solo RDP verso le VM desktop. Il percorso di una sessione desktop:\nL\u0026rsquo;utente apre https://vdi.example.com in un browser qualsiasi, su un dispositivo qualsiasi Cloudflare Access intercetta la richiesta e reindirizza al tuo provider di identità: Keycloak o Authentik federati con il tuo Active Directory Il provider OAuth convalida l\u0026rsquo;identità dell\u0026rsquo;utente su AD e gestisce l\u0026rsquo;MFA Access valuta la policy: il provider ha confermato chi è, Access decide cosa può raggiungere sulla tua rete Cloudflare apre una sessione RDP attraverso il tunnel verso la VM di destinazione La sessione RDP viene resa nel browser: niente client, niente plugin, niente download Il tunnel termina in un container LXC sull\u0026rsquo;host Proxmox, su una VLAN blindata L\u0026rsquo;LXC inoltra l\u0026rsquo;RDP alla VM Windows, che ha una funzione virtuale GPU della scheda Arc Pro In nessun momento la VM Windows ha un IP pubblico. In nessun momento la porta 3389 è aperta verso internet. L\u0026rsquo;unica cosa in ascolto su internet è Cloudflare, e l\u0026rsquo;unica cosa che supera Cloudflare è un utente che ha passato la policy di Access.\nL\u0026rsquo;endpoint del tunnel: un LXC sulla sua VLAN Il processo cloudflared deve girare da qualche parte, e dove lo metti è una decisione di sicurezza.\nFarlo girare direttamente sull\u0026rsquo;host Proxmox è l\u0026rsquo;opzione più semplice e la peggiore. Un endpoint di tunnel che condivide il namespace di rete dell\u0026rsquo;host può raggiungere tutto ciò che raggiunge l\u0026rsquo;host, che su un hypervisor è tutto. Un tunnel compromesso diventa un trampolino verso il piano di gestione.\nFarlo girare in una VM completa è pulito ma pesante. Un relay di tunnel è un singolo binario Go che usa pochissima CPU e qualche centinaio di megabyte di RAM. Dargli un kernel completo e un disco virtuale è esagerato.\nUn container LXC ha la forma giusta. Ha il suo namespace di rete, la sua VLAN (una /30 IPv4 e un prefisso IPv6 dedicato, nient\u0026rsquo;altro che condivida il dominio di broadcast) e le sue regole nel firewall di Proxmox. Condivide il kernel dell\u0026rsquo;host ma non il suo stack di rete. Il firewall permette TCP 3389 verso le VM desktop, il DNS per risolverle e HTTPS in uscita verso l\u0026rsquo;edge di Cloudflare. Per questo, anche un endpoint di tunnel compromesso può parlare solo con le cose con cui doveva già parlare, e sulla VLAN dove si trova non c\u0026rsquo;è nessun altro da raggiungere.\nLa configurazione dell\u0026rsquo;LXC, le regole del firewall di Proxmox per la VLAN e la configurazione del tunnel cloudflared sono tutte nel prossimo articolo.\nCome si incastra Cloudflare Access Le metà sono due. Il provider OAuth (Keycloak o Authentik, federati con il tuo Active Directory, Samba 4 o Windows) gestisce la convalida dell\u0026rsquo;identità e l\u0026rsquo;MFA. Dimostra che l\u0026rsquo;utente è chi dice di essere, usando la stessa directory a cui sono unite le VM. Cloudflare Access gestisce tutto il resto: cosa l\u0026rsquo;utente autenticato può raggiungere, con quale protocollo e come viene resa la sessione.\nCloudflare Access rende la sessione RDP direttamente nel browser. Non è un download né un plugin: l\u0026rsquo;edge di Cloudflare esegue un client RDP headless e trasmette il risultato come canvas nella scheda del browser. L\u0026rsquo;utente vede un desktop Windows. Il browser vede HTTPS verso Cloudflare. La VM Windows vede una connessione RDP dal tunnel cloudflared.\nL\u0026rsquo;applicazione Access è un\u0026rsquo;app self-hosted che punta all\u0026rsquo;ingress RDP del tunnel. La policy di Access è dove le due metà si incontrano. Il provider OAuth ha già confermato l\u0026rsquo;identità e superato la verifica MFA. Access prende quel token e decide cosa farne: quale applicazione l\u0026rsquo;utente può raggiungere, se lo stato del dispositivo è conforme, se la sua posizione è consentita. Il provider dice chi. Access dice cosa.\nLa creazione del tunnel, le regole di ingress, la configurazione dell\u0026rsquo;LXC, le regole del firewall di Proxmox e la policy di Access vera e propria sono tutte nel prossimo articolo: questo spiega cos\u0026rsquo;è lo stack e perché esiste. Il prossimo lo costruisce.\nCosa vede l\u0026rsquo;utente Cloudflare Access include un App Launcher, un portale di risorse che elenca ogni applicazione che l\u0026rsquo;utente autenticato può raggiungere. Dopo che l\u0026rsquo;utente ha fatto login tramite il provider OAuth, il portale gli mostra i desktop disponibili, le web app interne e qualunque altra risorsa dietro tunnel, tutto in un posto. Un URL, un login, e una tessera per ogni cosa a cui ha accesso. È la pagina d\u0026rsquo;ingresso dell\u0026rsquo;intero stack, non solo dell\u0026rsquo;RDP.\nL\u0026rsquo;utente clicca la tessera di un desktop e si ritrova un desktop Windows in una scheda del browser. Niente client, niente plugin, niente download. Funziona su qualunque dispositivo abbia già: un portatile aziendale, una macchina personale, un Chromebook, un tablet. È proprio questo il punto. Il sistema è pensato per le aziende che lasciano usare alle persone la propria attrezzatura.\nAppunti, audio e multi-monitor non sono supportati nella sessione resa nel browser. È voluto, non è un caso. Ognuno di quei canali è una via di esfiltrazione dei dati. Degli appunti che attraversano il confine portano fuori i file. La cattura audio porta fuori le conversazioni. Il multi-monitor con un desktop locale accanto a quello remoto rende banale il trascinamento. Tagliare quei canali significa che un utente può lavorare dentro il desktop ma non può tirarne fuori il lavoro da un canale laterale. La policy di Access controlla chi entra. La resa nel browser controlla cosa esce.\nSe l\u0026rsquo;azienda ha bisogno di appunti o audio per un flusso di lavoro specifico, Cloudflare Access supporta anche un client RDP nativo attraverso il tunnel: lo stesso tunnel, la stessa policy, lo stesso controllo d\u0026rsquo;identità. La via nativa dà tutte le funzioni RDP agli utenti che ne hanno bisogno e lascia la via del browser blindata per tutti gli altri. Due metodi di accesso, un motore di policy, un tunnel.\nIl confronto dei costi Un esempio concreto. Un server, 42 desktop accelerati dalla GPU:\nUna CPU a 64 core con hyperthreading ti dà 128 thread. Ogni VM riceve 8 vCPU, un\u0026rsquo;allocazione da desktop vero, non da thin client. 42 × 8 = 336 vCPU, che sulla carta è ben oltre i 128 thread. Ma questa è VDI. I desktop da ufficio sono inattivi per la maggior parte del tempo. Un utente che legge un documento o scrive una mail non sta caricando 8 core. L\u0026rsquo;overcommit qui non è un rischio, è il progetto. Proxmox ti lascia allocare più vCPU dei thread fisici perché lo scheduler sa che quasi tutte dormono. La CPU è dimensionata per il picco, e il picco è una manciata di utenti che compilano o fanno rendering nello stesso momento, non tutti e 42. Non è una scorciatoia: gli hyperscaler del cloud fanno overcommit nello stesso modo. Ogni VM Azure che affitti condivide core fisici con altri clienti sullo stesso host. Il modello di prestazioni è identico. La differenza è chi possiede l\u0026rsquo;host. 12 GB di RAM per VM sono un solido desktop da ufficio. 42 × 12 GB = 504 GB, più 4 GB per Proxmox stesso = 508 GB sulla carta. In pratica KSM fonde le pagine identiche di quelle 42 immagini Windows, quindi la RAM fisica necessaria è parecchio meno; ma metti a budget 512 GB di DIMM e lascia che KSM ti regali il margine. Tre schede doppie Intel Arc Pro B60 in una scheda madre come la Supermicro H13SSL-NT. Ogni scheda fisica presenta due GPU al sistema operativo, quindi tre schede danno 6 GPU. Ogni GPU supporta 7 funzioni virtuali SR-IOV4. Sono 42 desktop accelerati dalla GPU da tre slot PCIe. La B60 ha un listino di circa $599–799 a scheda. La B70 è l\u0026rsquo;opzione più grande, a $949 al lancio per 32 GB e 4 funzioni virtuali per GPU5: meno postazioni ma più VRAM per postazione. Windows 365 Cloud PC per 42 utenti2:\nAnche senza GPU, i numeri non sono piccoli. Il livello Basic (2 vCPU, 4 GB, 128 GB) costa £26,90/utente/mese. Il livello Standard (2 vCPU, 8 GB, 128 GB, cioè un modesto desktop da ufficio) costa £35,60/utente/mese. Per 42 utenti in Standard fanno £1.495,20/mese, £17.942,40/anno, prima di tutti gli extra qui sotto.\nCon una GPU va peggio. Il livello GPU Standard costa £269,40/utente/mese. Per 42 utenti fanno £11.314,80/mese, £135.777,60/anno.\nPoi entrambi i livelli aggiungono:\nLe licenze Microsoft 365, se non le hai già La rete Azure: ingresso e uscita si fatturano a parte, e un desktop che trasmette verso un browser non è leggero in uscita Azure Backup o una soluzione di backup di terze parti: gli snapshot delle VM e lo storage dei profili non sono salvati gratis Gli indirizzi IPv4 pubblici: Azure fa pagare ogni IP pubblico collegato a una risorsa, e il prezzo è solo salito I prezzi di base di Azure sono in USD, quindi i costi in sterline si muovono con il cambio: una sterlina debole rende più cara ogni voce, e tu non controlli nessuna delle due parti La bolletta non si ferma mai. Il quinto anno costa quanto il primo. Questo stack per 42 utenti: il costo di costruzione:\nScheda madre Supermicro H13SSL-NT: ~£700 CPU AMD EPYC a 64 core: ~£1.500 512 GB di DDR5 ECC RDIMM (8 × 64 GB): ~£5.200 Tre schede doppie B60: ~£1.800 Chassis, alimentatore, SSD di boot: ~£800 Hardware in totale: circa £10.000 Ammortizzato su una vita di cinque anni, fa £2.000/anno di costo in conto capitale. Aggiungi:\nCloudflare Zero Trust: gratuito fino a 50 utenti I diritti VDI di Windows 11 Enterprise: la Software Assurance su Pro porta a Enterprise, che include l\u0026rsquo;accesso VDI fino a quattro VM per utente, oppure la licenza tramite Microsoft 365 E3/E56 L\u0026rsquo;elettricità, e qui vale la pena metterci un numero Il budget di potenza al picco: un EPYC a 64 core con TDP di 360W, tre schede doppie B60 a 400W ciascuna (1.200W), 512 GB di RAM a circa 80W, più storage, ventole e perdite dell\u0026rsquo;alimentatore a circa 150W. Sono circa 1.800W alla presa a pieno carico. I desktop VDI non stanno a pieno carico: l\u0026rsquo;uso d\u0026rsquo;ufficio è soprattutto CPU inattiva e GPU leggera, quindi una media realistica è più vicina a 1.000–1.200W. Diciamo 1.100W.\nA 35p per kWh, 1,1 kW acceso 24 ore su 24, 7 giorni su 7 fanno:\n1,1 × 24 × 365 = 9.636 kWh/anno 9.636 × £0,35 = £3.373/anno di elettricità Quindi il costo annuo totale di questo stack è circa £5.400/anno: £2.000 di hardware ammortizzato e £3.400 di elettricità, prima delle licenze Windows e della connessione internet. Mettilo accanto alla bolletta Azure: £5.400 contro £135.778 per il livello GPU, o £17.942 per desktop di base senza GPU. Anche sul livello Azure più economico, questo stack costa meno di un terzo. Sul livello GPU è il 4% della bolletta Azure.\nPerché la VDI si adatta a Proxmox La VDI è uno dei carichi di lavoro in cui Proxmox va silenziosamente molto bene, per due motivi che non c\u0026rsquo;entrano niente con l\u0026rsquo;hypervisor in sé.\nKSM. Proxmox abilita KSMd, il demone di fusione delle pagine identiche del kernel, già di serie. Venti VM Windows costruite dalla stessa immagine condividono enormi quantità di pagine di memoria identiche: il sistema operativo, le librerie di base, le parti invariate del profilo utente. KSMd trova quei duplicati e li fonde in un\u0026rsquo;unica pagina fisica, copy-on-write. Il risultato è che venti desktop stanno nella memoria che altrimenti ne conterrebbe otto o dieci. Su un host VDI dove ogni VM esegue la stessa immagine, KSM non è un\u0026rsquo;ottimizzazione marginale. È ciò che rende la densità sostenibile.\nbcache. Se il tuo storage è Ceph su HDD con bcache su Optane, la VDI è il carico di lavoro migliore possibile per lui. Le raffiche di boot e di login sono pesanti in lettura e ripetitive: esattamente lo schema che una cache assorbe. Una volta caldo il working set, i desktop leggono da Optane a latenza NVMe e i dischi rotanti quasi non si muovono. Le scritture sono modifiche ai profili utente e file temporanei, abbastanza piccole e sequenziali perché il writeback di bcache le gestisca senza mai mettere in crisi gli HDD.\nProfili: due opzioni, entrambe su Ceph. I profili utente sono l\u0026rsquo;altra metà dello storage VDI, e ci sono due modi puliti di gestirli senza uscire dal cluster.\nI container di profilo FSLogix sono il modo standard per far viaggiare un profilo desktop Windows, e funzionano su storage a oggetti compatibile S3. Proxmox Ceph espone un gateway S3 tramite il RADOS Gateway, quindi l\u0026rsquo;archivio dei profili vive sullo stesso cluster dei dischi delle VM. Nessun file server separato, nessuna bolletta Azure Files, nessuna dipendenza esterna.\nL\u0026rsquo;altra opzione è saltare del tutto FSLogix e usare il reindirizzamento delle cartelle di Windows verso condivisioni SMB servite da Samba in cluster su CephFS. I desktop reindirizzano Documenti, Desktop, AppData e il resto verso una condivisione Samba appoggiata su CephFS, e il cluster Samba gestisce il failover. Nessun container di profilo: i file vivono sul filesystem come file normali, e CephFS gestisce la replica. È più semplice da gestire, più semplice da salvare, e scavalca del tutto le licenze FSLogix: utile se il costo della licenza è un problema o se vuoi semplicemente meno parti in movimento. In entrambi i casi i profili stanno sul tuo storage, sullo stesso pool Ceph, e il costo è il disco che hai già comprato.\nTra KSM che recupera memoria, bcache che recupera latenza di storage e i profili che finiscono su Ceph, che sia con FSLogix su S3 o con il reindirizzamento delle cartelle su CephFS, un solo host Proxmox con HDD e una quantità modesta di RAM serve più desktop di quanto suggerisca la scheda tecnica. Azure fa pagare ogni gigabyte di tutti e tre. Qui l\u0026rsquo;infrastruttura fa il lavoro gratis.\nBackup, resilienza e conformità Tenere tutto dentro la VDI non è solo una decisione di costo. È una decisione di conformità e di resilienza.\nQuando il desktop vive sul server, i dati vivono sul server. Niente arriva sul dispositivo dell\u0026rsquo;utente. Un portatile rubato è uno schermo perso, non un insieme di dati perso. Non c\u0026rsquo;è un disco locale da cifrare, nessuna copia locale da esfiltrare, nessun endpoint da analizzare forensicamente dopo una violazione. I dati non hanno mai lasciato l\u0026rsquo;infrastruttura che controlli.\nQuesto rende il backup semplice. I dischi delle VM e gli archivi dei profili stanno su Ceph, e gli snapshot di Ceph sono atomici e istantanei. Una sola policy di snapshot copre ogni desktop e ogni profilo. Riportare un desktop allo stato di ieri è un rollback di snapshot, non una ricostruzione. Ripristinare un profilo è la stessa operazione su un altro pool. La destinazione del backup è il cluster, non venti endpoint sparsi.\nSemplifica anche la conformità. La residenza dei dati è facile da dimostrare quando i dati stanno su hardware tuo, in un rack che puoi indicare col dito, in una giurisdizione che hai scelto tu. Le tracce di audit stanno nei tuoi log. L\u0026rsquo;accesso è regolato da policy Cloudflare che hai scritto tu, autenticato da un IdP che gestisci tu e registrato da sistemi che controlli tu. Non c\u0026rsquo;è nessun provider cloud di terze parti tra te e le prove che un auditor ti chiede.\nLa resilienza segue la stessa linea. Una VM desktop morta è una nuova VM dall\u0026rsquo;immagine master con il profilo ricollegato. L\u0026rsquo;utente rifà il login e il desktop è tornato. Non c\u0026rsquo;è un endpoint da ricostruire, nessun sistema operativo da reinstallare, nessun hardware da spedire. L\u0026rsquo;unità di ripristino è la VM, e accenderne una richiede minuti.\nA cosa rinunci Non è gratis in ogni senso. Le cose che Azure Virtual Desktop gestisce e questo stack no:\nMicrosoft gestisce le patch e gli aggiornamenti. Qui li gestisci tu. Intune ed Endpoint Manager si integrano nativamente con AVD. Qui le VM Windows le gestisci da solo o con gli strumenti che scegli. La rete di Azure è un problema di Azure. Qui la tua connessione internet è la strada verso il desktop. Se cade, i desktop sono irraggiungibili finché non torna. Su Azure scalare è questione di carta di credito. Qui scalare significa comprare un\u0026rsquo;altra scheda o un altro host. AVD dà all\u0026rsquo;utente tutte le funzioni RDP di default. Qui la via del browser toglie appunti, audio e multi-monitor apposta. Gli utenti che hanno bisogno di quelle funzioni ricevono un client RDP nativo attraverso lo stesso tunnel e la stessa policy; ma il default è il browser blindato, ed è il default giusto per una forza lavoro che usa dispositivi propri. Niente di tutto questo è banale. Se conta dipende da cosa hai: se usi già Proxmox, gestisci già Windows e hai già qualcuno che sa badare a un hypervisor, allora sono tutte cose che fai già. Se no, Azure ti sta vendendo il personale che non hai, e questo vale davvero qualcosa.\nLa domanda è se valga £18.000 l\u0026rsquo;anno per 42 desktop di base, o £136.000 per quelli con GPU, ogni anno, più rete, backup, IPv4 e licenze in cima, con il prezzo fissato da qualcun altro, l\u0026rsquo;hardware di qualcun altro e la bolletta in una valuta che non controlli. Oppure se spendi £5.400 l\u0026rsquo;anno tra hardware ed elettricità e tieni il resto.\nÈ questo che questo articolo espone. Il prossimo lo costruisce: il tunnel cloudflared, l\u0026rsquo;LXC, le regole del firewall di Proxmox, la policy di Cloudflare Access e il desktop funzionante in una scheda del browser.\nRiferimenti Azure Virtual Desktop pricing — calcolo, storage e rete fatturati a parte, sopra il diritto Microsoft 365.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWindows 365 plans and pricing — cifra fissa per utente al mese, configurazioni GPU nel livello Enterprise.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare Zero Trust pricing — gratuito fino a 50 utenti, a consumo dal cinquantunesimo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIntel Arc Pro B60 specifications — 24 GB GDDR6, 20 core Xe2, PCIe 5.0 x8, SR-IOV con fino a 7 funzioni virtuali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIntel Arc Pro B70 specifications — 32 GB GDDR6, 32 core Xe2, PCIe 5.0 x16, SR-IOV con fino a 4 funzioni virtuali.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWindows 11 Licensing for Virtual Desktops — la Software Assurance su un sistema operativo idoneo (per esempio Pro) porta a Enterprise, con diritti VDI fino a quattro VM per utente sul tuo server on-premises.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/networking/zero-trust-vdi-cloudflare-access/","summary":"Parte uno: l\u0026rsquo;architettura e il ragionamento sui costi per sostituire Azure Virtual Desktop con Proxmox, Intel Arc Pro SR-IOV e Cloudflare Access. OAuth on-prem per l\u0026rsquo;identità, RDP reso direttamente nel browser, un tunnel LXC dietro firewall su una VLAN tutta sua, KSM per la densità di memoria e i profili su Ceph. Il prossimo articolo lo costruisce.","title":"VDI Zero Trust senza la bolletta del cloud: Proxmox, Intel Arc Pro e Cloudflare Access"},{"content":"Ping non è una diagnostica. È un tunnel. L\u0026rsquo;ICMP echo (la richiesta che una macchina invia e la risposta che riceve) trasporta qualsiasi byte ci metti dentro, in entrambe le direzioni, su un protocollo che la maggior parte dei firewall lascia passare senza ispezionare e che la maggior parte dei log conta invece di leggere. Una rete che «permette solo il ping» ha già una VPN completa e cifrabile verso l\u0026rsquo;esterno, e chiunque possa raggiungere quella rete può pilotarne una.\nÈ una cosa vecchia, ed è documentata. Loki1 pubblicò la tecnica su Phrack 49 nel 1996. Ptunnel2 trasporta intere sessioni TCP dentro il ping da vent\u0026rsquo;anni ed è a un pacchetto di distanza su qualsiasi macchina Linux. Nessuno zero-day. Il protocollo che si comporta esattamente come specificato.\nÈ questa la causa: lo standard, non un bug nel prodotto di qualcuno. Ogni host sulla Terra è obbligato a prendere i dati di una richiesta echo e a restituirli pari pari, immutati. Dati arbitrari dentro, gli stessi dati fuori: è tutto quello di cui un tunnel ha bisogno, ed è imposto dal 1981.\nLa soluzione è un\u0026rsquo;unica modifica puntuale. Scarta l\u0026rsquo;ICMP echo, richiesta e risposta, su IPv4 e IPv6, al confine, e tieni ogni altro messaggio ICMP. Gli errori, Time Exceeded, Packet Too Big, Destination Unreachable, sono portanti; bloccali e rompi la path MTU discovery e il traceroute per niente. Quindi non è «blocca ICMP». È scarta l\u0026rsquo;unico messaggio che è un rischio, e tieni quelli che portano la verità.\nCosa permetteva davvero la tua policy di egress Se gestisci una rete in cui l\u0026rsquo;uscita è filtrata (e se non lo fai, quello è un altro discorso), allora questo è il conto di una riga al suo interno. La policy che dice «blocca tutto in uscita, permetti ICMP perché ci serve fare ping» non è una policy di egress. È un tunnel completo con le pratiche archiviate sotto diagnostica. Qualsiasi cosa all\u0026rsquo;interno che possa inviare una richiesta echo e leggere la risposta può spostare dati verso qualsiasi punto all\u0026rsquo;esterno che ne risponda, al ritmo che la linea reggerà, e oltre ogni controllo sui contenuti che hai comprato. Nei log è qualcuno che controlla se internet funziona, e niente più. Il malware lo spedisce da anni proprio per questo motivo. Silenzioso, standard, e di solito già permesso.\nEcco perché è un canale di prima scelta per chiunque sia già dentro e non dovrebbe esserci. È l\u0026rsquo;inquilino, non lo scippo. Chi cerca una via di entrata e di uscita che duri evita la porta che fa scattare un allarme. Monta un tunnel su echo e lo lascia in funzione per mesi. Un host che fa molti ping è un host che nessuno guarda. Rete bidirezionale dentro il patrimonio aziendale: comando dentro, dati fuori, sul protocollo che nessuno limita, su cui nessuno allarma e che nessuno legge. Ed è cifrato, come lo cifra qualsiasi strumento vero, così sul filo il payload sono i byte dall\u0026rsquo;aria casuale che un ping porta comunque, e l\u0026rsquo;ispezione dei contenuti non ha niente da leggere. La dimensione e la tempistica possono ancora tradirlo a chi guarda davvero. Sbirciare dentro il pacchetto no.\nE la macchina che lo pilota non deve appartenere a nessuno che ci lavora. Basta qualcosa che possa raggiungere la tua rete e mettere un ping su internet, e raggiungere la tua rete è più facile di quanto a nessuno piaccia ammettere. Il WiFi arriva oltre i muri, nel corridoio, nel parcheggio, nell\u0026rsquo;appartamento di sopra. La porta ethernet nel muro della sala riunioni, o della reception, o della scrivania vuota vicino alla finestra, molto spesso è attiva e parla con qualsiasi cosa ci colleghi, senza nessun 802.1X che chieda chi sei. Un segnale a portata, o una presa che nessuno ha messo in sicurezza. È questo il biglietto d\u0026rsquo;ingresso. Nessun badge, nessun account, nessun invito.\nImmagina il visitatore che hai invitato tu. È in riunione, gentile, prende appunti, partecipa. Il suo portatile no. Nel momento in cui ha raggiunto la tua rete, via etere o attraverso la porta sotto il tavolo, era dentro il muro, e se quella rete può emettere una richiesta echo, ha una via d\u0026rsquo;uscita. Niente è stato rilasciato sul tuo patrimonio. Nessun account, nessun privilegio su niente di tuo, niente che i tuoi agenti di endpoint possano intercettare, perché i tuoi agenti non sono sulla sua macchina. La persona è dall\u0026rsquo;altra parte del tavolo. Il traffico esce dalla tua porta d\u0026rsquo;ingresso, cifrato, indistinguibile da un portatile che fa più ping del dovuto.\nUn visitatore a portata di segnale, o a una porta aperta, ottiene un tunnel che esce da un firewall che vede solo ping Un visitatore a portata, o a una porta aperta, ottiene una via d'uscita dentro il muro, la tua rete il WiFi arriva al corridoio, al parcheggio, all'appartamento di sopra portatile del visitatore nessun badge, nessun account una porta a muro attiva nessun 802.1X che chiede chi sei firewall al confine vede solo ping server su internet echo request\u0026#160;\u0026#8594; \u0026#8592;\u0026#160;echo reply qualsiasi traffico IP, cifrato, che viaggia dentro i ping Il biglietto d\u0026rsquo;ingresso è l\u0026rsquo;accesso alla rete, un segnale WiFi a portata o una porta a muro attiva senza 802.1X, e l\u0026rsquo;uscita è echo attraverso il confine. Per il firewall è un host che fa ping; dentro quei ping c\u0026rsquo;è qualsiasi traffico IP, cifrato, diretto a un server su internet. Le due cose a cui penserai non aiutano. Il NAT è una tabella di traduzione, non un filtro: una richiesta echo da un host interno apre una mappatura basata sull\u0026rsquo;id ICMP, che il NAT tratta esattamente come tratta una porta, e la risposta torna indietro attraverso di essa come qualsiasi altro flusso. Ho fatto girare un client dietro il mio NAT di casa e non si è mai accorto che il NAT c\u0026rsquo;era. Una VLAN guest separata non è meglio. La segregazione tiene il visitatore lontano dai tuoi server, ma non fa niente per tenerlo lontano da internet, e internet, raggiunto con un ping, è tutto il requisito. Un solo controllo tocca questo: quella rete fa uscire echo?\nNon lo ispezioni via, e non lo segreghi via. Chiudi la porta. Tutto quello che segue è il perché lo standard la lascia aperta, tre modi di costruire il tunnel così che l\u0026rsquo;affermazione regga su più del mio parere, e l\u0026rsquo;unica modifica che la chiude.\nLa parte di ICMP che non ti deve niente di utile Parti da cosa dice davvero lo standard, perché tutto l\u0026rsquo;argomento poggia su una frase e la gente la liquida senza leggerla.\nUna richiesta echo porta un campo dati. In IPv4, la RFC 7923 afferma chiaramente che «the data received in the echo message must be returned in the echo reply message». IPv6 ha irrigidito la formulazione invece di allentarla: la RFC 44434 definisce il campo come «zero or more octets of arbitrary data» e poi richiede che «MUST be returned entirely and unmodified in the ICMPv6 Echo Reply message».\nLeggilo da operatore ed è un keepalive. Leggilo da chi sposta dati ed è un regalo. Lo standard obbliga ogni host raggiungibile ad accettare un blocco di byte che scegli tu e a rimandarteli pari pari, immutati, su richiesta. Lunghezza arbitraria. Contenuto arbitrario. Nessun handshake, nessuna porta, nessuna applicazione all\u0026rsquo;altro capo che debba essere d\u0026rsquo;accordo su qualcosa. Lo fa il kernel, prima che qualsiasi processo userland ci metta gli occhi.\nEd è su entrambe le famiglie. Passare a IPv6 non mette la cosa in ordine. La allarga. La RFC 792 diceva che i dati «must be returned»; la RFC 4443 dice che «MUST be returned entirely and unmodified», che è la stessa porta con un lucchetto più robusto a tenerla aperta. Per questo il canale esiste sia su ICMP echo sia su ICMPv6 echo, e una regola che lo chiude su una famiglia e non sull\u0026rsquo;altra non ha chiuso niente. Il tunnel si sposta sulla famiglia che hai lasciato aperta. Qualunque cosa tu faccia a riguardo, falla su ip e ip6 insieme.\nNiente altro nel protocollo fa questo. Un Time Exceeded porta l\u0026rsquo;header del pacchetto che è morto e niente più. Un Destination Unreachable è un rapporto su qualcosa che è già successo. Quei messaggi ti dicono fatti sulla rete. Echo porta qualsiasi cosa ci metti dentro, in entrambe le direzioni, e lo chiama diagnostica.\nGli errori sono portanti. Echo no. Questa è la distinzione che quelli del «basta bloccare ICMP» non fanno mai, ed è tutto il punto, quindi la farò una volta e per bene.\nBloccare gli errori ICMP rompe la rete in silenzio. Filtra Packet Too Big e uccidi la path MTU discovery: l\u0026rsquo;handshake si completa, i trasferimenti piccoli funzionano, e qualsiasi cosa che porti un pacchetto a dimensione piena si blocca per sempre senza niente nei log. Su IPv6 non è nemmeno una questione di gusti. I router non frammentano, quindi la RFC 48905 elenca Packet Too Big tra i messaggi che un firewall «must not drop» e avverte che senza di esso «parts of the Internet will become inaccessible». Filtra Time Exceeded e rompi il traceroute, che la RFC 18126 indica come il motivo per cui il messaggio è obbligatorio in primo luogo. Non sono opzionali. Sono il feedback che rende la rete auto-correttiva, e ho trattato a lungo il costo di perderli la volta scorsa.\nAdesso scarta echo e va\u0026rsquo; a cercare cosa si è rotto. ping oltre il confine smette di funzionare. È tutto l\u0026rsquo;elenco. L\u0026rsquo;elenco intero.\nLa path MTU discovery non se ne cura, perché gira su Packet Too Big, che è un errore. Il traceroute non se ne cura, perché traceroute -T e -U percorrono TCP e UDP e leggono gli errori che tornano indietro. Nessuno di loro invia un echo. La neighbour discovery su IPv6 non se ne cura, perché sono i tipi da 133 a 137, e quelli li tieni o il segmento muore. Il trucco del TTL inverso dell\u0026rsquo;articolo scorso funziona su qualsiasi risposta, e un handshake TCP te ne dà una. Tutto quello che faceva funzionare le diagnostiche dell\u0026rsquo;articolo scorso continua a funzionare, perché nessuna misurazione lì dentro inviava una richiesta echo.\nQuindi le due metà del protocollo non potrebbero essere più diverse. Una metà è la rete che ti dice la verità su sé stessa, e la rompi a tuo rischio. L\u0026rsquo;altra metà è un servizio di restituzione payload imposto che per caso si chiama diagnostica, e la cosa più forte che si possa dire per tenerlo aperto è che ping è comodo. È comodo. È anche l\u0026rsquo;unica parte di ICMP che un attaccante può pilotare, e posso mostrarti esattamente con cosa la pilota.\nTieni gli errori ICMP, con rate limit; scarta solo echo, entrambe le direzioni ed entrambe le famiglie Due metà di un protocollo, e solo una delle due è un rischio TIENI limita il ritmo, non bloccare mai Destination Unreachable porta il perché un pacchetto non è stato consegnato Packet Too Big la path MTU discovery dipende da lui Time Exceeded il traceroute dipende da lui Parameter Problem segnala un header malformato Neighbour Discovery 133\u0026#8211;137 IPv6: il segmento locale dipende da lui Rompi questi e la rete si rompe in silenzio. SCARTA in entrambe le direzioni e famiglie Echo request tipo 8 (IPv4) · tipo 128 (IPv6) Echo reply tipo 0 (IPv4) · tipo 129 (IPv6) Nessuno ha bisogno di questi tranne il ping comando. Tutto quello che un attaccante pilota attraverso ICMP ci passa. Un tunnel lasciato aperto su una famiglia non è chiuso. Gli errori ICMP sono portanti: la path MTU discovery, il traceroute e la neighbour discovery IPv6 dipendono tutti da loro, e bloccarli rompe la rete in silenzio. Echo è l\u0026rsquo;unica parte da cui non dipende niente tranne ping, e l\u0026rsquo;unica parte che un attaccante può pilotare. Scarta quella, tieni il resto, su entrambe le famiglie. La prova: una VPN fatta di ping Lo strumento è Hans7, scritto da Friedrich Schöller. La sua stessa descrizione è una riga: «makes it possible to tunnel IPv4 through ICMP echo packets, so you could call it a ping tunnel.» Tira su un\u0026rsquo;interfaccia tun a ciascun capo, dà loro degli indirizzi, e sposta ogni pacchetto tra di loro dentro l\u0026rsquo;ICMP echo. Per la rete in mezzo è qualcuno che fa ping a un server e il server che risponde. Per me è una rotta.\nUn intero pacchetto IP viaggia dentro il campo dati di un solo ping Un intero pacchetto viaggia dentro un ping Il pacchetto che invia la tua sessione SSH header IP src / dst header TCP porta 22 dati applicativi i tuoi tasti, il tuo file Hans copia l'intero pacchetto nel campo dati echo Il pacchetto che parte sul filo header IP tu verso il server richiesta ICMP echo tipo 8 · id · seq campo dati echo l'intero pacchetto qui sopra, immutato Per il firewall al confine questa è una richiesta echo, e il log registra un ping. Dentro il campo dati c'è un pacchetto diretto ovunque l'altro capo possa arrivare. Lo standard impone all'altro capo di rimandare subito quei dati, quindi anche la risposta è un pacchetto. Ogni pacchetto che il tunnel trasporta viene copiato nel campo dati di una richiesta ICMP echo. Lo standard obbliga l\u0026rsquo;altro capo a restituire quei dati immutati, quindi la risposta porta anch\u0026rsquo;essa un pacchetto. Il firewall conta un ping; il payload va dovunque l\u0026rsquo;altro capo possa instradarlo. L\u0026rsquo;ho fatto girare sulla mia linea, un server su un indirizzo pubblico e un client dietro il NAT di casa, e ci ho spinto dentro traffico vero. Non ping sintetici con un flag impostato. Un login SSH e il prelievo di un file, in sella dentro echo.\nÈ a un pacchetto di distanza dove ho fatto girare il server, e si compila dai sorgenti di Schöller ovunque altro. Il server deve essere Linux e vuole root, perché aprire un dispositivo tun e un socket ICMP raw lo richiedono entrambi. La sintassi è volutamente minima:\n# on the server (public IP), pick the tunnel network and a password hans -s 10.8.0.0 -p \u0026#39;\u0026lt;password\u0026gt;\u0026#39; # server takes 10.8.0.1; clients are handed 10.8.0.2 and up # on the client, point it at the server\u0026#39;s public address hans -c \u0026lt;server-public-ip\u0026gt; -p \u0026#39;\u0026lt;password\u0026gt;\u0026#39; Una volta su entrambi i capi c\u0026rsquo;è una nuova interfaccia per lato con un indirizzo sulla rete del tunnel, e si comporta come qualsiasi altro collegamento punto-punto:\nNiente di quella sessione sa di essere dentro un ping. SSH apre una connessione TCP verso 10.8.0.1, il kernel la instrada fuori per tun0, Hans incarta ogni pacchetto come payload di una richiesta echo, e l\u0026rsquo;altro capo lo scarta e lo passa al suo tun0. La risposta torna indietro come payload di una risposta echo. Per quanto riguarda SSH, sta parlando su un collegamento ordinario. Per quanto riguarda il firewall, nessuno ha aperto niente. Un host sta ricevendo dei ping.\nChe aspetto ha sul filo Questa è la parte che chiude l\u0026rsquo;argomento, quindi guarda la vista dagli occhi del firewall invece della mia.\nQuello che succede davvero, e quello che registra il firewall, non sono la stessa immagine Un tunnel, due immagini Quello che succede davvero il tuo host tun0 · 10.8.0.2 il server tun0 · 10.8.0.1 dovunque possa arrivare SSH, prelievi di file instradato fuori qualsiasi traffico IP, attraverso il tunnel come pacchetti ordinari Quello che il firewall al confine vede e registra il tuo host 198.51.100.9 il server 192.0.2.7 richiesta echo risposta echo icmp echo request 198.51.100.9 \u0026gt; 192.0.2.7 icmp echo reply 192.0.2.7 \u0026gt; 198.51.100.9 icmp echo request 198.51.100.9 \u0026gt; 192.0.2.7 ... contati come ping, contenuto non letto Stesso filo. Il firewall non vede mai i pacchetti al suo interno. Il tunnel sposta traffico vero tra due host e poi fuori verso dovunque il server possa arrivare. Al confine ci sono solo richiesta echo e risposta echo: il firewall registra dei ping e non vede mai i pacchetti trasportati al loro interno. Siediti sull\u0026rsquo;interfaccia esterna con tcpdump e cattura solo ICMP mentre gira la sessione SSH. Nessun TCP verso la porta 22 attraversa il confine. Quello che attraversa è richiesta echo e risposta echo, avanti e indietro, ciascuna più grassa di un ping vero perché porta una fetta di un segmento TCP nel suo payload:\n# on the boundary, watch only ICMP echo while traffic runs over the tunnel tcpdump -ni \u0026lt;wan-iface\u0026gt; \u0026#39;icmp[icmptype] = icmp-echo or icmp[icmptype] = icmp-echoreply\u0026#39; Leggi le due cose che contano in quella cattura. Primo, le lunghezze del payload: un ping normale invia 56 byte e ogni riga è della stessa dimensione, mentre queste variano e sono grandi, perché la dimensione della cosa che stai spostando trapela nella dimensione del ping. Secondo, il ritmo: un ping di diagnostica è uno al secondo, e questo è un diluvio, perché sta spostando un file. Nessuno dei due è nascosto. Entrambi stanno in piena vista su un protocollo che nessuno guarda.\nEd è tutto il punto. Non che questo sia furbo, o difficile da notare una volta che guardi. Quasi nessuno guarda, perché la macchina è configurata per permettere ICMP, i log lo contano come ping, e gli allarmi erano tarati per le porte che qualcuno si è ricordato di temere. Il traffico esce con l\u0026rsquo;aria di un controllo di salute, e il controllo di salute è una rotta verso dovunque il server possa arrivare.\nUna VPN full-tunnel vera, costruita a mano Hans dimostra che il canale c\u0026rsquo;è, ma fa lui l\u0026rsquo;interfaccia e l\u0026rsquo;indirizzamento e ti restituisce una rotta, quindi non ti mostra bene cosa hai costruito. Per vedere che questa è una VPN in senso pieno, il traffico dell\u0026rsquo;intera macchina che esce attraverso il ping, non un collegamento tra due host nominati, mettila insieme a mano. icmptunnel8, di Dhaval Kapil, è quello giusto, e la sua stessa descrizione è una riga sola: «Transparently tunnel your IP traffic through ICMP echo and reply packets.» Stessa idea, dispositivo tun e payload echo, ma la tubatura la posi tu e niente si nasconde dentro un binario.\nSul server avvii il tunnel, tiri su l\u0026rsquo;interfaccia, e poi fai la cosa che svela tutto il gioco: dici al kernel di smettere di rispondere ai ping da sé, così le sue risposte echo non litigano con quelle che il tunnel sta inviando.\nsudo ./icmptunnel -s 10.0.1.1 # server mode; creates tun0, then blocks # from a second shell, bring the interface up (iproute2, not the net-tools the repo ships) sudo ip addr add 10.0.1.1/24 dev tun0 sudo ip addr add 2001:db8:1::1/64 dev tun0 sudo ip link set tun0 mtu 1472 up # 1500 − 20 (IP) − 8 (ICMP); see below # stop the kernel replying to pings — echo now belongs to the tunnel sudo sysctl -w net.ipv4.icmp_echo_ignore_all=1 sudo sysctl -w net.ipv6.icmp.echo_ignore_all=1 # let the server route the client\u0026#39;s packets onward sudo sysctl -w net.ipv4.ip_forward=1 Rileggi la riga icmp_echo_ignore_all, perché dice più di quanto sembri. Quella manopola è del kernel stesso, e arriva come difesa: impostala e, con le parole del kernel, «will ignore all ICMP ECHO requests sent to it»9, così un operatore può togliere un host dal radar dei ping del tutto. Adesso è su entrambe le famiglie. net.ipv4.icmp_echo_ignore_all da anni, e net.ipv6.icmp.echo_ignore_all aggiunta più tardi per pareggiare.10 Il tunnel aziona quell\u0026rsquo;interruttore difensivo per il motivo opposto: con il kernel che non risponde più da sé a echo, i suoi due capi sono liberi di usare echo come puro trasporto. Ed è la spia. Chi ha scritto lo stack tratta già echo come qualcosa che un host può ragionevolmente rifiutare; la regola in questo articolo fa quella stessa scelta una volta, al confine, per ogni host dietro di esso.\nSul client tiri su l\u0026rsquo;interfaccia e poi punti la rotta di default giù per essa. Non un host raggiunto attraverso il tunnel. Tutto.\nsudo ./icmptunnel -c \u0026lt;server-public-ip\u0026gt; # client mode; creates tun0 sudo ip addr add 10.0.1.2/24 dev tun0 sudo ip addr add 2001:db8:1::2/64 dev tun0 sudo ip link set tun0 mtu 1472 up # keep the route to the server itself OUT of the tunnel... sudo ip route add \u0026lt;server-public-ip\u0026gt; via \u0026lt;gateway\u0026gt; dev \u0026lt;iface\u0026gt; # ...then send everything else down it sudo ip route replace default dev tun0 I client.sh e server.sh del progetto stesso ricorrono ancora a ifconfig e route di net-tools. I comandi ip qui sopra sono gli equivalenti iproute2 e fanno lo stesso lavoro. Quella rotta verso il server è la riga che la gente dimentica: tienila fuori dal tunnel, o i pacchetti echo che trasportano il tunnel provano a viaggiare giù per il tunnel, e non esce niente. Tutto il resto adesso passa per tun0, incartato in echo, e raggiunge il server. Se vada oltre è una scelta di routing. Una sola regola di masquerade sul server lo metterebbe su internet pubblico sotto l\u0026rsquo;indirizzo del server stesso, e volutamente non c\u0026rsquo;è, perché la cosa mostrata è il tunnel e non ne ha bisogno.\nQuella è una VPN full-tunnel, costruita con il ping in una manciata di comandi. Ogni pacchetto che il client invia, web, DNS, SSH, tutto, viene catturato in tun0 ed esce come una richiesta echo verso il server, e le risposte tornano indietro come risposte echo. Una macchina su una rete che «permette solo ICMP» ha appena consegnato tutto il suo traffico in uscita a una scatola fuori, e il confine ha registrato un host a cui piace fare ping.\nScriverne uno tuo in Python Ecco la parte che dovrebbe preoccupare chiunque speri di difendersi da questo riconoscendo uno strumento. Né Hans né icmptunnel fanno qualcosa che non potresti scrivere tu stesso in un pomeriggio. Apri un dispositivo tun, incarta ogni pacchetto come payload di una richiesta echo, scarta quelli che tornano indietro. È tutto il meccanismo, e il tunnel nudo è circa sessanta righe di Python di libreria standard, senza niente da installare. La versione qui sotto aggiunge una cosa sopra: cifra il payload, ed è l\u0026rsquo;unica parte che tira dentro una dipendenza.\n#!/usr/bin/env python3 # pingvpn.py — a VPN tunnel over ICMP echo, in one short file. # # Not a product. It exists to show the channel is trivial to rebuild, so a # defence that hunts for a known tool is chasing the wrong thing entirely. # Linux, needs root (a tun device and a raw ICMP socket both do), and the # `cryptography` package for the AES (pip install cryptography). # # server: sudo python3 pingvpn.py --server # client: sudo python3 pingvpn.py --client \u0026lt;server-public-ip\u0026gt; # # The payload is encrypted with AES-128-GCM under a pre-shared key before it # goes on the wire, so what a firewall sees in the echo data is random bytes — # the same as a real ping\u0026#39;s padding, and nothing for content inspection to read. import argparse import fcntl import hashlib import os import select import socket import struct import sys from cryptography.hazmat.primitives.ciphers.aead import AESGCM TUNSETIFF = 0x400454CA IFF_TUN = 0x0001 IFF_NO_PI = 0x1000 MAGIC = 0x4954 # \u0026#39;IT\u0026#39; in the id field, so we ignore real pings ECHO_REQUEST = 8 ECHO_REPLY = 0 PSK = b\u0026#34;change-me-to-a-shared-secret\u0026#34; # pre-shared secret, both ends KEY = hashlib.sha256(PSK).digest()[:16] # 128-bit key -\u0026gt; AES-128-GCM AEAD = AESGCM(KEY) def open_tun(name=b\u0026#34;tun0\u0026#34;): fd = os.open(\u0026#34;/dev/net/tun\u0026#34;, os.O_RDWR) fcntl.ioctl(fd, TUNSETIFF, struct.pack(\u0026#34;16sH\u0026#34;, name, IFF_TUN | IFF_NO_PI)) return fd def encrypt(data): # -\u0026gt; nonce || ciphertext+tag nonce = os.urandom(12) return nonce + AEAD.encrypt(nonce, data, None) def decrypt(blob): # raises on a packet that is not ours return AEAD.decrypt(blob[:12], blob[12:], None) def checksum(data): if len(data) % 2: data += b\u0026#34;\\x00\u0026#34; total = sum(struct.unpack(\u0026#34;!%dH\u0026#34; % (len(data) // 2), data)) total = (total \u0026gt;\u0026gt; 16) + (total \u0026amp; 0xFFFF) total += total \u0026gt;\u0026gt; 16 return ~total \u0026amp; 0xFFFF def build_echo(icmp_type, payload): head = struct.pack(\u0026#34;!BBHHH\u0026#34;, icmp_type, 0, 0, MAGIC, 0) csum = checksum(head + payload) return struct.pack(\u0026#34;!BBHHH\u0026#34;, icmp_type, 0, csum, MAGIC, 0) + payload def main(): ap = argparse.ArgumentParser(description=\u0026#34;a VPN tunnel over ICMP echo\u0026#34;) group = ap.add_mutually_exclusive_group(required=True) group.add_argument(\u0026#34;--server\u0026#34;, action=\u0026#34;store_true\u0026#34;) group.add_argument(\u0026#34;--client\u0026#34;, metavar=\u0026#34;SERVER_IP\u0026#34;) args = ap.parse_args() out_type = ECHO_REQUEST if args.client else ECHO_REPLY in_type = ECHO_REPLY if args.client else ECHO_REQUEST peer = args.client # None on the server until a client is seen tun = open_tun() sock = socket.socket(socket.AF_INET, socket.SOCK_RAW, socket.IPPROTO_ICMP) print(\u0026#34;tun0 created. bring it up with an address and route, then send traffic.\u0026#34;, file=sys.stderr) while True: readable, _, _ = select.select([tun, sock], [], []) if tun in readable: # a packet wants to leave this host packet = os.read(tun, 65535) if peer: sock.sendto(build_echo(out_type, encrypt(packet)), (peer, 0)) if sock in readable: # something arrived over ICMP data, _ = sock.recvfrom(65535) ihl = (data[0] \u0026amp; 0x0F) * 4 # skip the IP header the kernel adds icmp = data[ihl:] if len(icmp) \u0026lt; 8 or icmp[0] != in_type or icmp[4:6] != struct.pack(\u0026#34;!H\u0026#34;, MAGIC): continue try: packet = decrypt(icmp[8:]) # wrong key or a real ping -\u0026gt; skip except Exception: continue if args.server: peer = socket.inet_ntoa(data[12:16]) # reply to whoever sent os.write(tun, packet) # hand the carried packet to the stack if __name__ == \u0026#34;__main__\u0026#34;: main() Quello è l\u0026rsquo;intero tunnel. Apre tun0 e un socket ICMP raw e fa la spola di pacchetti tra i due: quello che lascia l\u0026rsquo;host è incartato come una richiesta echo, o una risposta echo sul server, e inviato all\u0026rsquo;altro capo; quello che arriva via ICMP viene scartato e restituito allo stack. Il campo id è fissato a un valore solo così scavalca i ping veri, e il server impara dove rispondere dalla sorgente del primo pacchetto che vede.\nLa cifratura è il punto su cui vale la pena soffermarsi, perché è quello che fanno gli strumenti veri ed è il motivo per cui non lo prenderai guardando dentro il pacchetto. Il payload è sigillato con AES-128-GCM sotto una chiave pre-condivisa prima di essere incartato, così i byte nei dati echo sono indistinguibili dal riempimento casuale che un ping vero porta. Togli le due righe di crypto e il tunnel gira ancora su niente più della libreria standard: l\u0026rsquo;unico motivo per cui serve pip install cryptography è l\u0026rsquo;AES, e l\u0026rsquo;AES è esattamente la parte che trasforma un tunnel leggibile in uno illeggibile. Tiralo su nello stesso modo di prima, meno il masquerade. Non ti serve per dimostrare il punto:\n# server: start it (creates tun0, then blocks), then configure from the same shell sudo python3 pingvpn.py --server \u0026amp; sudo ip addr add 10.9.0.1/24 dev tun0 sudo ip addr add 2001:db8:9::1/64 dev tun0 sudo ip link set tun0 mtu 1400 up sudo sysctl -w net.ipv4.icmp_echo_ignore_all=1 sudo sysctl -w net.ipv6.icmp.echo_ignore_all=1 # client sudo python3 pingvpn.py --client \u0026lt;server-public-ip\u0026gt; \u0026amp; sudo ip addr add 10.9.0.2/24 dev tun0 sudo ip addr add 2001:db8:9::2/64 dev tun0 sudo ip link set tun0 mtu 1400 up sudo sysctl -w net.ipv4.icmp_echo_ignore_all=1 sudo sysctl -w net.ipv6.icmp.echo_ignore_all=1 sudo ip route add \u0026lt;server-public-ip\u0026gt; via \u0026lt;gateway\u0026gt; dev \u0026lt;iface\u0026gt; sudo ip route replace default dev tun0 Il motivo per scriverlo per esteso non è lo strumento. È che lo strumento è usa e getta. Un file breve, nessuna dipendenza finché non aggiungi la cifratura, e ogni copia che qualcuno digita appare un po\u0026rsquo; diversa sul filo. Quindi una firma che prende questo non prende niente la settimana dopo. Non puoi bloccarti fuori da questo nominando il software, perché non c\u0026rsquo;è software da nominare.\nNon gli serve nemmeno una shell. La logica è byte dentro, byte fuori, quindi si porta su qualsiasi cosa possa aprire un socket. Perfino WebAssembly: la sandbox del browser normalmente rifiuta a una pagina un socket raw in modo netto, ma dove quella barriera è sollevata (un browser a cui l\u0026rsquo;utente ha concesso il permesso, su una macchina dove l\u0026rsquo;utente gira con privilegi sufficienti ad aprire un socket raw) lo stesso breve programma gira dentro una scheda. Ed è la metà scomoda della cosa. Qui non puoi fidarti dei tuoi utenti. L\u0026rsquo;host che pilota il tunnel è all\u0026rsquo;interno, in mano a qualcuno che hai deciso fosse sicuro perché siede dietro il firewall, e il firewall è la cosa attraverso cui si fa il tunnel. La fiducia perimetrale presume che la minaccia sia fuori dal muro. Questa parte dentro, ogni volta.\nOcchio all\u0026rsquo;MTU, e al floor di 1280 di IPv6 Il tunnel non è gratis sul filo. Ogni pacchetto che trasporti guadagna un header IP esterno e un header ICMP prima di uscire, quindi l\u0026rsquo;interfaccia interna deve stare sotto quello che il percorso può portare. Su IPv4 questo costa all\u0026rsquo;attaccante quasi niente. Imposta l\u0026rsquo;MTU interno basso (il 1472 di icmptunnel è 1500 meno 20 per l\u0026rsquo;header IP esterno e 8 per l\u0026rsquo;header ICMP, e il Python qui sopra scende a 1400 per avere margine), e dove il numero è ancora sbagliato, IPv4 frammenta il pacchetto troppo grande e lo riassembla all\u0026rsquo;altro capo invece di scartarlo. Tra il floor basso che puoi scegliere e la frammentazione che copre il resto, il tunnel gira su quasi qualsiasi percorso. Quella flessibilità è esattamente ciò che rende IPv4 il posto comodo dove farlo.\nLa frammentazione e il margine di MTU di IPv4 fanno girare il tunnel dappertutto; IPv6 non ha nessuno dei due, quindi fallisce in modo chiuso Perché gira dappertutto su IPv4 e fallisce in modo chiuso su IPv6 IPv4 hdr IP 20 B ICMP 8 B pacchetto interno tun MTU 1472 B Troppo grande? IPv4 frammenta e riassembla, il tunnel gira su quasi ogni percorso. IPv6 hdr IPv6 40 B ICMPv6 8 B pacchetto interno non può scendere sotto 1280 B floor rigido di 1280 B (RFC 8200) Troppo grande? I router IPv6 lo scartano, niente frammentazione, il tunnel fallisce in modo chiuso. I ripieghi di IPv4, un floor che scegli tu e la frammentazione per il resto, sono ciò che rende il tunnel affidabile. IPv6 non ha nessuno dei due, quindi l'attacco che gira quasi dappertutto su IPv4 è fragile su IPv6. La famiglia più sicura qui. Packet Too Big, un errore che tieni, non un echo, è ciò che lascia a un mittente trovare la dimensione che entra. Non in scala. Il tunnel perde un header IP esterno e un header ICMP da ogni pacchetto. IPv4 ti lascia limare l\u0026rsquo;MTU interno e frammenta quel che è ancora troppo grande, così gira quasi dappertutto; IPv6 fissa un floor rigido di 1280 byte e i suoi router non frammentano, quindi un pacchetto troppo grande viene scartato e il tunnel fallisce in modo chiuso, il che rende IPv6 la famiglia più sicura qui. IPv6 perdona meno, e per una volta è dalla tua parte. Il floor è rigido: la RFC 820011 §5 richiede che «every link in the Internet have an MTU of 1280 octets or greater», e i router IPv6 non frammentano in transito. Questo toglie entrambi i ripieghi di IPv4 in un colpo solo, e morde il tunnel in entrambe le direzioni. Fallo girare sopra ICMPv6 e ogni collegamento sul percorso deve portare 1280, così un percorso che scende sotto quella soglia manda giù il trasporto, e non c\u0026rsquo;è modo di limare sotto il floor come puoi su IPv4. Trasporta IPv6 dentro il tunnel e incontri lo stesso muro dall\u0026rsquo;altro lato: anche l\u0026rsquo;interfaccia interna non può scendere sotto 1280, mentre l\u0026rsquo;involucro ICMPv6 esterno, 40 byte di header e 8 di ICMPv6, sta già spendendo il budget, così il percorso deve risparmiare 1280 più l\u0026rsquo;overhead. Mancalo in uno dei due posti e il pacchetto viene scartato, non tagliato per entrare: il tunnel sale, le cose piccole funzionano, qualsiasi cosa a dimensione piena si blocca. Quindi IPv6 è la famiglia più sicura qui, non la più rischiosa. L\u0026rsquo;attacco che su IPv4 gira su quasi tutto è fragile su IPv6, e fallisce in modo chiuso. Più sicuro non è lo stesso che sicuro, bada: il canale echo è aperto anche su IPv6, quindi la regola lo scarta comunque su entrambe le famiglie; l\u0026rsquo;attaccante semplicemente non può appoggiarsi a IPv6 come si appoggia a IPv4.\nIl recupero da quello è l\u0026rsquo;errore ICMP che ti sei premurato di tenere. Packet Too Big è ciò che permette a un mittente di trovare la dimensione che funziona, ed è un errore, non un echo, quindi la regola che questo articolo sostiene lo lascia stare. Scarta il tunnel e tieni le diagnostiche: è tutto il progetto, e l\u0026rsquo;MTU è un altro posto in cui si guadagna da vivere.\nLa regola, ristretta a echo L\u0026rsquo;articolo scorso dava l\u0026rsquo;intero ruleset di transito: permetti gli errori sotto un rate limit, scarta echo. Non lo ristamperò. La modifica che questo articolo sostiene è una sola coppia di righe, ed è la coppia che fa il lavoro:\n# permit the ICMP errors — these are load-bearing, keep them ip protocol icmp icmp type { destination-unreachable, time-exceeded, parameter-problem } \\ limit rate 100/second accept ip6 nexthdr ipv6-icmp icmpv6 type { destination-unreachable, packet-too-big, \\ time-exceeded, parameter-problem } limit rate 100/second accept # drop the tunnel — echo, both directions, both families ip protocol icmp icmp type { echo-request, echo-reply } drop ip6 nexthdr ipv6-icmp icmpv6 type { echo-request, echo-reply } drop La regola non è di Linux, però. È lo stesso intento su qualsiasi firewall degno del nome: permetti gli errori, limita il loro ritmo, scarta echo in entrambi i sensi su entrambe le famiglie. Quindi eccola nei dialetti che è più probabile tu abbia in mano.\nBSD pf (pfSense, OPNsense, OpenBSD, FreeBSD):\n# permit the errors; block echo both directions, both families pass in proto icmp icmp-type { unreach, timex, paramprob } pass in proto icmp6 icmp6-type { unreach, toobig, timex, paramprob, \\ routersol, routeradv, neighbrsol, neighbradv } block in proto icmp icmp-type { echoreq, echorep } block in proto icmp6 icmp6-type { echoreq, echorep } Tieni i tipi di neighbour discovery sulla riga icmp6; sono quelli che mandano giù il segmento se li perdi.\nCisco IOS (ACL estese, applicate all\u0026rsquo;edge):\nip access-list extended ICMP-EDGE permit icmp any any unreachable permit icmp any any time-exceeded permit icmp any any parameter-problem deny icmp any any echo deny icmp any any echo-reply ! ipv6 access-list ICMP6-EDGE permit icmp any any packet-too-big permit icmp any any unreachable permit icmp any any time-exceeded permit icmp any any parameter-problem permit icmp any any nd-ns permit icmp any any nd-na deny icmp any any echo-request deny icmp any any echo-reply Su IPv4 il tipo echo è echo; su IPv6 è echo-request. Il rate-limiting vive in CoPP, non nell\u0026rsquo;ACL.\nJuniper Junos (firewall filter; il filtro inet6 rispecchia questo e tiene la neighbour discovery):\nfirewall family inet filter icmp-edge { term errors { from { protocol icmp; icmp-type [ unreachable time-exceeded parameter-problem ]; } then { policer icmp-cap; accept; } } term drop-echo { from { protocol icmp; icmp-type [ echo-request echo-reply ]; } then discard; } } MikroTik RouterOS — scarta i due tipi echo, poi accetta il resto di ICMP, il che tiene gli errori e, su v6, la neighbour discovery:\n/ip firewall filter add chain=forward protocol=icmp icmp-options=8:0 action=drop comment=\u0026#34;echo request\u0026#34; add chain=forward protocol=icmp icmp-options=0:0 action=drop comment=\u0026#34;echo reply\u0026#34; add chain=forward protocol=icmp action=accept comment=\u0026#34;keep the errors (add limit= to cap)\u0026#34; /ipv6 firewall filter add chain=forward protocol=icmpv6 icmp-options=128:0 action=drop comment=\u0026#34;echo request\u0026#34; add chain=forward protocol=icmpv6 icmp-options=129:0 action=drop comment=\u0026#34;echo reply\u0026#34; add chain=forward protocol=icmpv6 action=accept comment=\u0026#34;keep errors and ND\u0026#34; Sintassi diversa, una regola. Permetti i messaggi che portano la verità, scarta quello che porta i tuoi byte.\nDue avvertenze, che ti morderanno entrambe se leggi di sfuggita.\nScarta echo al confine, non sul filo tra un host e il suo stesso router. Su IPv6 la neighbour discovery è ICMP, tipi da 133 a 137, da nd-router-solicit a nd-redirect, ed è come il segmento fa il lavoro che ARP fa in IPv4. Porta uno scarto di echo su una catena link-local o di host senza tenere quelli e il segmento smette di funzionare entro pochi minuti, e non sembrerà un guasto del firewall. Filtra echo dove il traffico lascia la tua rete, e lascia stare le catene interne.\nScartalo in entrambe le direzioni e smette di essere utile in entrambi i sensi. Bloccare solo la richiesta ferma i tuoi host dall\u0026rsquo;essere pingati ma lascia comunque uscire una risposta, e un tunnel può essere costruito solo sulle risposte con un po\u0026rsquo; più di sforzo. Scarta richiesta e risposta, su IPv4 e IPv6, e il canale è chiuso in entrambi i sensi.\nCosa ti costa davvero scartare il ping Sii onesto sulla perdita, perché un controllo che hai venduto troppo è un controllo che qualcuno annulla in silenzio la prima volta che è scomodo.\nPerdi ping oltre il confine. È questo il costo, detto per intero. È un costo reale. ping è il riflesso, è nelle dita di tutti, e il giorno dopo che spedisci questo qualcuno dirà che internet è giù perché il suo ping al gateway va in timeout. Non è giù. Hai detto al gateway di smettere di rispondere a una richiesta che era solo una comodità.\nIl test di raggiungibilità non ha bisogno di echo. Una connessione TCP a una porta che sai essere aperta ti dice che l\u0026rsquo;host è su e che il percorso funziona, e ti dice più di un ping perché dimostra che un servizio ha risposto, non solo un kernel:\n# \u0026#34;is it up and reachable?\u0026#34; without sending a single echo nc -zv \u0026lt;host\u0026gt; 443 # did the TCP handshake complete? traceroute -T -p 443 \u0026lt;host\u0026gt; # walk the path on TCP, read the errors back Entrambi quelli viaggiano sugli errori ICMP che hai tenuto e sul TCP che un servizio vero parla già. Nessuno dei due invia un echo. Quindi lo scambio onesto è questo: rinunci allo strumento meno informativo della cassetta, quello che risponde a «un kernel è disposto a rispondere» e niente più, e in cambio chiudi l\u0026rsquo;unica parte di ICMP che un attaccante può trasformare in una rotta fuori dalla tua rete. Le diagnostiche a cui davvero ricorri in una brutta giornata sono tutte dall\u0026rsquo;altra parte della linea, intatte.\nIl Fisher-Price OS (Windows) non è una via d\u0026rsquo;uscita da questo Se gestisci un\u0026rsquo;azienda su Fisher-Price OS (Windows) potresti leggere questo come un problema di qualcun altro. Non lo è. Il rischio è nel protocollo, non nel sistema operativo. Lo standard obbliga ogni host che risponde a un ping a restituirti i tuoi byte, e non si ferma a chiedere prima cosa fa girare l\u0026rsquo;host.\nUna scatola su quel sistema operativo fa un ottimo capo di un tunnel. Hans spedisce un client Windows, quindi una macchina interna può essere il capo client e passare il suo traffico fuori dentro echo come qualsiasi altra. Quello che non può facilmente essere è il capo server, perché quello vuole un dispositivo tun e un socket ICMP raw tenuto aperto, e su quel sistema operativo solo i membri del gruppo Administrators possono creare socket di tipo SOCK_RAW12, parole di Microsoft stessa. Quindi il server sta su un sistema operativo vero, come il mio, e la scatola dietro il firewall che in silenzio si fa strada fuori a ping è quella che ti era stata detta sicura perché era all\u0026rsquo;interno.\nÈ questo il punto per chiunque lo stia difendendo. La regola al confine non si cura di cosa fa girare l\u0026rsquo;interno. Scarta echo dove il traffico lascia la rete e ogni host dietro è coperto: quelli che amministri, e quello che ti era stato assicurato nascosto dietro il NAT. Io non la faccio girare, e non ho intenzione di fingere che il tunnel la rispetti. La soluzione è la stessa regola, nello stesso posto, qualunque cosa sia l\u0026rsquo;endpoint.\nSe è la scatola stessa quello che stai irrobustendo (la scatola, non la rete), PowerShell la fermerà almeno dal rispondere o emettere un ping per conto suo:\nforeach ($t in 8,0) { New-NetFirewallRule -DisplayName \u0026#34;Drop ICMPv4 Echo $t\u0026#34; -Protocol ICMPv4 -IcmpType $t -Direction Inbound -Action Block } foreach ($t in 128,129) { New-NetFirewallRule -DisplayName \u0026#34;Drop ICMPv6 Echo $t\u0026#34; -Protocol ICMPv6 -IcmpType $t -Direction Inbound -Action Block } Aggiungi dei gemelli -Direction Outbound per fermarla dal raggiungere l\u0026rsquo;esterno come client di un tunnel invece che starsene lì come bersaglio, e lascia stare i tipi di errore ICMPv6 e di neighbour discovery, per il motivo per cui sono lasciati stare ovunque altro in questa pagina. Ma non scambiarlo per il controllo. Un firewall di host non è un firewall di transito. Irrobustisce la scatola e non cambia niente del confine, e il confine è dove questo si chiude davvero.\nSolleva la questione con chi gestisce il tuo confine, oggi Probabilmente sei arrivato fin qui pensando a una rete che non è tua da cambiare. Lo è per la maggior parte delle persone. Quindi la cosa utile da fare non è allungare la mano verso il firewall, è porre la domanda a chi lo tiene, la tua squadra di rete, il tuo MSP, o il vendor la cui scatola sta all\u0026rsquo;edge, e porla oggi, perché questa è una porta aperta dal 1996 e un\u0026rsquo;altra settimana così è una scelta.\nChiedi chiaro, e chiedi aspettandoti uno sguardo vuoto, perché scommetterei tutto il PIL del Regno Unito che nessuno lì ha dato a echo un secondo pensiero. È l\u0026rsquo;unico pacchetto che tutti permettono e che nessuno possiede, e una regola senza padrone è esattamente quella che sta sbagliata da anni senza nessuno che se ne accorga.\nChiedi loro quattro cose, con queste parole, così non c\u0026rsquo;è spazio per annuire e non cambiare niente:\nScartiamo la richiesta echo e la risposta echo ICMP al confine, su IPv4 e IPv6 entrambi? Non «permettiamo ICMP», il messaggio specifico, entrambe le direzioni, entrambe le famiglie. Se la risposta è una sola famiglia, non è una risposta, perché il tunnel si sposta sull\u0026rsquo;altra. Permettiamo ancora gli errori ICMP? Destination Unreachable, Time Exceeded, Parameter Problem, e Packet Too Big su IPv6, sotto un rate limit invece di un blocco. Se non sanno dirlo, c\u0026rsquo;è una probabilità su due che abbiano lasciato tutto aperto o bloccato tutto, ed entrambe sono sbagliate. Abbiamo tenuto la neighbour discovery IPv6 sulle catene interne? Tipi da 133 a 137. È quella che trasforma «abbiamo irrobustito ICMP» in un segmento che muore in silenzio una settimana dopo, ed è l\u0026rsquo;errore che fa una modifica fatta di fretta. Mostrami la regola. Non una dichiarazione di policy, la riga vera sulla scatola vera, e la data in cui ci è andata. Un controllo che nessuno sa indicare è un controllo che non c\u0026rsquo;è. La scatola sarà arrivata dal vendor con questo già chiuso? Non lo sarà. Il default quasi ovunque è lasciar passare echo e registrarlo come un conteggio di pacchetti, che è tutto il motivo per cui il tunnel funziona. Non sta sfruttando un bug, sta usando la configurazione che arriva di serie. Nessuno chiude una porta che non gli è mai stata detta aperta.\nIl motivo per insistere sulla formulazione è che la soluzione pigra a questo articolo è «va bene, blocchiamo ICMP», e quella soluzione è peggio del buco. Rompe la path MTU discovery e il traceroute, ti farà rincorrere trasferimenti bloccati senza niente nei log, e su IPv6 toglie parti di internet dal tavolo del tutto. Se la persona a cui chiedi allunga la mano verso quella, fermala. L\u0026rsquo;istruzione è stretta apposta: scarta echo, tieni gli errori, tieni la neighbour discovery. Per questo chiunque gestisca firewall per mestiere dovrebbe saper fare quella modifica in un pomeriggio e dirti che è fatta.\nE se sono un MSP che paghi per gestire questo: un fornitore che non sa dirti la tua stessa postura su echo ed errori a memoria, o che risponde «blocchiamo ICMP» come se quella fosse l\u0026rsquo;opzione sicura, ti ha appena detto qualcosa sul resto del patrimonio. La prossima volta che un guasto sta tra due reti ed entrambe dicono di essere pulite, ricorda quale delle due non sapeva descrivere cosa fa il suo stesso firewall a un ping.\nLa diagnostica che non è mai stata una diagnostica Ping ha avuto una bella corsa. Mike Muuss lo scrisse nel 1983 per controllare se un host rispondeva, lo chiamò come il sonar, e fece quell\u0026rsquo;unico lavoro così bene da diventare la prima cosa a cui tutti ricorrono e l\u0026rsquo;ultima che nessuno mette in discussione. Quarant\u0026rsquo;anni dopo è memoria muscolare, e la memoria muscolare è esattamente il modo in cui un rischio sopravvive. Nessuno riesamina la cosa che ha sempre fatto.\nMa guarda cos\u0026rsquo;è davvero, spogliato dell\u0026rsquo;abitudine. Un messaggio che non porta nessun fatto sulla rete, a cui ogni host è obbligato a rispondere con i tuoi stessi byte restituiti, che gira su un protocollo che i controlli non ispezionano e i log non leggono. Tutto quello che lo fa sembrare innocuo, è solo una diagnostica, è solo un keepalive, tutti lo permettono, è la stessa cosa che lo rende la via più pulita fuori da una rete filtrata che esista. L\u0026rsquo;industria blocca gli errori ICMP, che portano la verità e rompono la rete quando spariscono, e fa passare echo, che porta qualsiasi cosa ci carichi dentro. Ha il protocollo esattamente a rovescio.\nLa soluzione non è furba. Tieni i messaggi che ti dicono la verità, e scarta quello che si limita a restituirti i tuoi byte. Ti costa un comando di cui non avevi comunque motivo di fidarti per una diagnosi, e chiude una porta che è rimasta aperta dal 1996, documentata in una rivista di hacker, impacchettata per due decenni, e lasciata spalancata perché chiuderla significherebbe che qualcuno non può fare ping. Sappi cosa costa una cosa, non quanto è prezzata. Ping è prezzato a niente. Ti costa l\u0026rsquo;unico canale che non puoi vedere.\nLoki, Phrack 49 — un canale di comando trasportato dentro i payload ICMP echo, 1996.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPtunnel — trasporta una sessione TCP dentro l\u0026rsquo;ICMP echo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 792 — ICMP: \u0026ldquo;the data received in the echo message must be returned in the echo reply message\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4443 — ICMPv6: i dati echo \u0026ldquo;MUST be returned entirely and unmodified in the ICMPv6 Echo Reply message\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4890 — i messaggi ICMPv6 che un firewall non deve scartare.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1812 — requisiti dei router: Time Exceeded è un MUST, indicato per il traceroute.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHans — tunnel IP su ICMP echo, di Friedrich Schöller.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nicmptunnel — fa il tunnel del traffico IP attraverso pacchetti ICMP echo e reply, di Dhaval Kapil.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — IP sysctl — icmp_echo_ignore_all: \u0026ldquo;the kernel will ignore all ICMP ECHO requests sent to it\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux commit e6f86b0f — \u0026ldquo;ipv6: Add icmp_echo_ignore_all support for ICMPv6\u0026rdquo; — l\u0026rsquo;equivalente IPv6, di Virgile Jarry.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8200 §5 — IPv6 richiede che ogni collegamento abbia un MTU di almeno 1280 ottetti.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — TCP/IP raw sockets — \u0026ldquo;only members of the Administrators group can create sockets of type SOCK_RAW\u0026rdquo;.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/it/networking/ping-the-diagnostic-tool-that-opens-a-whole-lot-more/","summary":"Il ping, non il resto di ICMP, è il rischio: echo è un canale a cui ogni host deve rispondere con i tuoi stessi byte, così una rete che «permette solo il ping» ha già una VPN completa verso l\u0026rsquo;esterno. L\u0026rsquo;articolo parte dalla minaccia: cosa costa al tuo egress, e come un visitatore sul tuo WiFi o una porta ethernet non protetta può aprirne una. Poi tre tunnel funzionanti costruiti solo sul ping (Hans, icmptunnel e un breve Python con AES-128), le insidie dell\u0026rsquo;MTU e di IPv6, e la regola che la chiude: scarta echo, tieni gli errori, in nftables, pf, Cisco, Junos, MikroTik e Windows.","title":"Ping: lo strumento di diagnostica che apre molto di più"},{"content":" Is Your MSP Lying To You — 3 parts\nIl tuo MSP ti mente per venderti prodotti premium?you are here Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivare Quando si rompe, chi se ne fa davvero carico? Risposta breve: alcuni sì.\nLa risposta lunga è peggiore, ed è quella che vale il tuo tempo. Quasi tutti non hanno mai bisogno di mentire, perché ci pensa l\u0026rsquo;accordo al posto loro. Li pagano i vendor dei prodotti che consigliano, a tariffe che cambiano in base al prodotto che prendi e a quanto ne consumi, e nessuno è obbligato a dirne una parola. Metti un\u0026rsquo;azienda in quella posizione per trent\u0026rsquo;anni e la disonestà diventa superflua. La rosa delle opzioni si scrive da sola.\nDa dove sei seduto tu, dalla parte di chi riceve la fattura, una bugia e un processo truccato costano esattamente uguale.\nQuesta parte riguarda la vendita: chi paga la persona che ti consiglia, cosa non arriva mai nella rosa, perché la risposta migliore è quella che non ti proporranno, e cosa stai prendendo in affitto senza saperlo. La parte due è ciò che viene costruito una volta firmate le carte, e chi altro ci può arrivare. La parte tre è chi si fa carico del danno quando la cosa si rompe, e quanto costa andarsene. Una parte l\u0026rsquo;ho vista succedere con i miei occhi. Il resto è agli atti pubblici con il nome di un\u0026rsquo;autorità di vigilanza sopra, e ogni affermazione qui ha un link.\nNiente di tutto questo richiede che tu sia un tecnico. Devi solo chiedere.\nLa soluzione facile è il segnale Prendine una comune. Un lavoratore da casa non riesce a far reggere al portatile un tunnel VPN verso l\u0026rsquo;ufficio. Il fornitore ci guarda e torna con qualcosa che il cliente deve cambiare dal lato di casa. Non dal loro lato. Dal lato di casa.\nIl tunnel è L2TP su IPsec verso un Cisco Meraki MX, e il vero problema è il NAT traversal. Il client continua a negoziare su UDP 500 invece di passare a UDP 4500, perché il NAT-T non è mai stato configurato dal lato dell\u0026rsquo;ufficio. La RFC 3947 è brutale in merito: una volta rilevato un NAT, l\u0026rsquo;iniziatore «MUST set both UDP source and destination ports to 4500». Non succede mai. Il tunnel muore nel NAT. Ogni volta.\nLa risposta sta sul loro stesso firewall, spenta. Lo stesso MX fa girare AnyConnect, che «will attempt to connect using both TLS, and DTLS (Datagram TLS) over TCP and UDP 443 respectively». TLS normale su una porta normale. Un NAT lo capisce alla perfezione: non c\u0026rsquo;è niente da attraversare e niente da configurare, e funzionerebbe il pomeriggio stesso in cui qualcuno lo abilitasse.\nNessuno fa una cattura dei pacchetti. Nessuno controlla su quale porta il client stia davvero parlando. Sono le prime due cose che si fanno, e chiuderebbero la questione in un minuto.\nOra un secondo caso dallo stesso fornitore, e qui di rete non ce n\u0026rsquo;è da nessuna parte. Una stampante di etichette, e un\u0026rsquo;etichetta di spedizione che deve uscire nel formato giusto. Questa è tutta la richiesta. Ed è anche l\u0026rsquo;unica cosa che una stampante di etichette fa.\nLa risposta tornata indietro è che non si può fare.\nEra un\u0026rsquo;opzione nel driver di stampa. Una casella, in una finestra di impostazioni, su un software che amministrano loro, e tutto il lavoro era spuntarla e fare una stampa di prova. Nessuno doveva comprare niente. Nessuno doveva progettare niente. Non l\u0026rsquo;hanno spuntata.\nNota che «non si può fare» è una risposta senza nessuna misura dentro, ed è l\u0026rsquo;unica risposta che chiude un ticket senza che nessuno debba fare alcunché. Ed è anche sempre più difficile da ritrattare quanto più a lungo resta in piedi, perché andare a guardare adesso significa ammettere che c\u0026rsquo;era qualcosa da guardare.\nQuesta è la forma da tenere d\u0026rsquo;occhio, ed è la stessa forma due volte. Il guasto si risolve gratis, la soluzione sta dentro un\u0026rsquo;apparecchiatura che il fornitore possiede già e che già viene pagato per gestire, e quello che torna invece è o un\u0026rsquo;istruzione a cambiare qualcosa dal lato del cliente o una dichiarazione secca che la cosa non si può fare. Quando la risposta economica viene liquidata senza una misura, non ti stanno dando una diagnosi. Ti stanno gestendo.\nUn ingegnere che ha trovato il guasto ti dice qual è il guasto. Uno che non l\u0026rsquo;ha trovato ti dice che non si può fare, o ti dice cosa comprare.\nChi paga il tuo consulente Comincia dai soldi, perché tutto il resto li segue.\nQuando il tuo MSP ti consiglia un hyperscaler, non è neutrale. La documentazione di fatturazione di Microsoft stessa descrive il partner earned credit: un credito applicato sugli addebiti del tuo consumo Azure, guadagnato dal partner che detiene i diritti di amministrazione per gestirlo. La tua bolletta sale, loro prendono una fetta. Accanto ci sono i margini da rivenditore, le fasce di volume, i rebate per le certificazioni, i fondi di sviluppo marketing e gli obiettivi trimestrali, su ogni vendor dello stack, non solo quello.\nNiente di tutto questo è segreto, e niente viola alcuna regola. È pubblicato, è normale, ed è così che il canale funziona da trent\u0026rsquo;anni.\nDue parti pagano il tuo consulente, e solo una sei tu Tu Chiedi quale prodotto comprare Il tuo fornitore Scrive la rosa da cui sceglierai Il vendor Decide quanto rende un consiglio un canone un'opzione rebate Rebate, margine, registrazione, obiettivo di vendita Niente di questo ti deve essere detto Un consulente finanziario può essere pagato solo dal cliente (FCA Handbook, COBS 6.1A). Un consulente IT può essere pagato da entrambi, e niente lo obbliga a dire chi paga di più. Due parti pagano la stessa raccomandazione. Solo una delle due siede alla riunione, e solo uno dei pagamenti deve essere dichiarato. Ecco la parte che dovrebbe darti fastidio. Nessuno deve dirti niente di tutto questo: né la tariffa, né gli obiettivi, né il credito. La persona che ti consiglia il prodotto è pagata dall\u0026rsquo;azienda che fa il prodotto, a una tariffa che dipende da quale prodotto ti convince a prendere e da quanto poi ne consumi, e non c\u0026rsquo;è da nessuna parte l\u0026rsquo;obbligo di metterne una parola nella proposta che stai leggendo.\nUn altro settore ha guardato esattamente questo accordo e l\u0026rsquo;ha vietato. Secondo le regole della FCA un consulente finanziario deve «only be remunerated for the personal recommendation \u0026hellip; by adviser charges» e deve «not solicit or accept \u0026hellip; any other commissions, remuneration or benefit». Il consulente lo paghi tu. Il produttore no. Quella regola esiste perché l\u0026rsquo;autorità ha capito una cosa ovvia. Non puoi distinguere un consiglio da una vendita quando il venditore è pagato dal produttore.\nL\u0026rsquo;informatica non ha mai fatto quei conti. La CMA ha passato al setaccio il mercato del cloud e ha guardato con attenzione la spesa impegnata, l\u0026rsquo;egress e il cambio di fornitore, ma nessuno ha ancora guardato lo strato in mezzo. L\u0026rsquo;azienda che sta tra te e il vendor, con un dovere verso di te e un obiettivo da parte loro.\nVale anche la pena chiamare la cosa con il suo nome.\nUn incentivo è un pagamento da una parte per orientare una decisione su cui fa affidamento una parte diversa. Questo è il meccanismo, comunque si chiami il programma sul sito del vendor. Il vendor paga, il cliente si fida, e la raccomandazione si sposta.\nÈ coercitivo anche dal lato dell\u0026rsquo;MSP, ed è la metà che nessuno guarda. Se manchi la fascia non perdi semplicemente un bonus. Il tuo prezzo d\u0026rsquo;acquisto sale su tutto quello che vendi per i dodici mesi successivi. Quindi la pressione non è «vendi questo e avrai un premio». È «vendi questo o tutta la tua attività diventa più cara». Nessuno in quella posizione sceglie liberamente, e non è mai stato pensato per sembrare una scelta.\nIl diritto inglese conosce già questa forma. Il Bribery Act 2010 non ha bisogno di nessun pubblico ufficiale nei paraggi: la sezione 3 copre «any activity connected with a business», e scatta quando ci si aspetta che chi svolge quell\u0026rsquo;attività la svolga «in good faith», o «impartially», o quando è «in a position of trust». Leggi quelle tre condizioni. Poi leggi la proposta che hai sulla scrivania.\nNon sto accusando di un reato l\u0026rsquo;account manager di nessuno. Quello che succede è più banale e più difficile da sistemare. L\u0026rsquo;accordo sta un capello dal lato giusto della linea, e l\u0026rsquo;unica cosa che lo tiene lì è che nessuno ha mai stabilito che un MSP ti debba imparzialità. La consulenza finanziaria l\u0026rsquo;ha stabilito, e le commissioni sono finite. Qui nessuno l\u0026rsquo;ha stabilito, e quindi non sono finite.\nChiama un incentivo una forma blanda di corruzione e la gente si irrigidisce. Metti il pagamento, l\u0026rsquo;obiettivo e la rosa delle opzioni sulla stessa pagina, poi chiediti in che altro modo chiamarlo.\nIl piccolo fornitore non viene mai nominato L\u0026rsquo;elenco dei fornitori che ti hanno mostrato non è l\u0026rsquo;elenco dei fornitori che esistono. È l\u0026rsquo;elenco di quelli con cui il tuo MSP ha già un conto aperto.\nPer entrare in quell\u0026rsquo;elenco un vendor ha bisogno di un programma partner. Fasce, accreditamenti, rebate, registrazione delle trattative, un distributore disposto a tenere la linea. È una macchina. Farla girare costa soldi che non hanno assolutamente nulla a che fare con quanto è buono il prodotto. In questo paese ci sono parecchie piccole realtà che costruiscono hardware e software migliori del marchio sulla tua proposta, e non ci compariranno mai, perché hanno dodici dipendenti e nessun team di canale.\nGuarda cosa fa la macchina alla raccomandazione.\nLa registrazione della trattativa lega il tuo MSP a un vendor prima che qualcuno ti abbia parlato di requisiti. Registrano l\u0026rsquo;opportunità, ottengono un prezzo d\u0026rsquo;acquisto migliore e la protezione da un altro partner che ti quoti la stessa cosa, e da quel momento c\u0026rsquo;è un motivo per spingere il progetto verso quel vendor che con la tua attività non c\u0026rsquo;entra niente.\nLe fasce fanno il resto. Gold, platinum, come si chiamano quest\u0026rsquo;anno: lo status si basa sul volume annuo e determina il loro sconto su tutto il resto che vendono per tutto l\u0026rsquo;anno. Il tuo progetto può essere quello che li fa passare la soglia. Non te lo diranno.\nPoi il distributore decide cosa resta. Un MSP compra tramite un distributore, il distributore tiene le linee con cui ha accordi, e un vendor che non è nel listino è come se non esistesse.\nQuello che ti costa non è astratto. Un fornitore più piccolo di solito ti mette al telefono con le persone che hanno scritto il software invece che con un copione di primo livello, cambia qualcosa perché glielo hai chiesto tu, e l\u0026rsquo;anno prossimo deve ancora renderti conto, perché sei una parte vera del suo fatturato invece di un arrotondamento. Niente di questo sta in una matrice di confronto, e niente paga un rebate a nessuno.\nQuindi chiedi cosa servirebbe per far entrare una di quelle realtà più piccole nella rosa. La risposta ti dice per chi è stata compilata la rosa.\nE il mandato arriva da un solo paese Guarda i marchi sulla proposta. L\u0026rsquo;hypervisor, il cloud, gli apparati di rete, il firewall, la suite d\u0026rsquo;ufficio, il CRM, la destinazione dei backup, il monitoraggio. Quasi tutti americani.\nQuesto non è un giudizio sulla qualità. È quello che succede quando la strada verso il mercato è un programma di canale, perché le aziende abbastanza grandi da farne girare uno su scala globale stanno in un solo paese. Quindi gli obiettivi che il tuo MSP si porta dietro, i rebate che danno forma alla tua rosa e la fascia che determina il suo margine sono tutti scritti negli Stati Uniti.\nIl che rende utile sapere come quel paese tratta oggi le regole su come si conquistano affari all\u0026rsquo;estero.\nIl 10 febbraio 2025 il Presidente ha firmato un ordine esecutivo intitolato «Pausing Foreign Corrupt Practices Act Enforcement to Further American Economic and National Security». Ordinava all\u0026rsquo;Attorney General, per 180 giorni, di «cease initiation of any new FCPA investigations or enforcement actions», con la motivazione dichiarata che perseguire le imprese americane «for routine business practices in other nations» danneggia la competitività americana.\nL\u0026rsquo;FCPA persegue la corruzione di pubblici ufficiali stranieri. È quella la pratica descritta.\nQuello che è seguito è agli atti. Nuove linee guida del Department of Justice del 9 giugno 2025 hanno ristretto l\u0026rsquo;azione ai casi che toccano i cartelli, un danno diretto alle aziende americane o la sicurezza nazionale. In tutto il 2025 la Securities and Exchange Commission non ha avviato nessuna azione civile FCPA e ha sciolto la sua unità FCPA, mentre il Department of Justice ha chiuso circa la metà delle indagini in corso. Non si è nemmeno presentato alla riunione di marzo 2025 del Working Group on Bribery dell\u0026rsquo;OCSE.\nStessa legge, direzione diversa. Ha tolto 772 milioni di dollari a un\u0026rsquo;azienda di ingegneria francese nel 2014, ed è il motivo per cui lo Stato francese ha commissionato un rapporto sul fatto che il diritto extraterritoriale americano funzioni come un\u0026rsquo;arma commerciale. L\u0026rsquo;ho trattato in fin dove arriva la legge di un paese. Quindi la legge oltrepassa i confini per le aziende straniere e viene messa a riposo per quelle nazionali, dal governo del paese da cui viene tutto il tuo elenco di prodotti.\nNon aspettarti nemmeno che il Regno Unito copra il buco. Qui la legge non è la parte debole: il Bribery Act 2010 in alcuni punti va più lontano della legge americana, e la sezione 7 rende reato per un\u0026rsquo;organizzazione commerciale non prevenire la corruzione da parte di chiunque agisca per suo conto. Rigorosa, ampia, e in vigore da quindici anni.\nLa parte debole è che a queste dimensioni l\u0026rsquo;applicazione funziona solo come operazione congiunta. Airbus è il più grande accordo per corruzione a cui questo paese abbia partecipato, e l\u0026rsquo;annuncio di Airbus stessa ne descrive la forma: 3.598 milioni di EUR di sanzioni il 31 gennaio 2020, di cui 2.083 milioni di EUR al Parquet National Financier francese, 984 milioni di EUR al Serious Fraud Office, 526 milioni di EUR al Department of Justice e 9 milioni di EUR al State Department, con l\u0026rsquo;SFO e il PNF a condurla come squadra investigativa comune. I soldi attraversano diversi paesi e così le prove, e nessuna agenzia da sola può ottenerle tutte. Serve che si presentino tutti.\nNota la data. Gennaio 2020 cade dentro la prima amministrazione Trump, e il Department of Justice di allora fu ben contento di prendersi la sua quota di 526 milioni di EUR. La pausa è arrivata cinque anni dopo, dallo stesso presidente nel suo secondo mandato. Non è una differenza tra amministrazioni. È una decisione presa nel 2025.\nUno di loro ha smesso di presentarsi, e la cosa va più a fondo di una sedia vuota. Un\u0026rsquo;accusa che non apre casi non produce niente da condividere. Niente mandati di comparizione, niente produzioni di documenti, niente imputati che collaborano, niente testimoni messi sotto pressione: le prove che hanno reso possibile Airbus esistevano perché qualcuno era andato a prenderle. Chiudi metà dei fascicoli e non avviare nuove azioni, e nella cassa comune non resta niente a cui gli altri possano attingere. Non è un paese che si rifiuta di consegnare. È un paese che non ha più niente da consegnare.\nChiude anche l\u0026rsquo;altra porta. L\u0026rsquo;annuncio di Airbus stessa attribuisce l\u0026rsquo;esito a «reporting, cooperation and new compliance standards» all\u0026rsquo;interno dell\u0026rsquo;azienda. Le aziende si fanno avanti per quello che succede loro se non lo fanno. Togli quello che succede loro, e le autodenunce da cui partono quasi tutti questi casi smettono di arrivare. A Londra quanto a Washington.\nIl Bribery Act non diventa più debole quando succede. Perde solo il flusso di prove che lo rendeva utilizzabile proprio sui casi per cui è stato scritto.\nDiciotto mesi di questo, e non ha spostato una sola rosa di opzioni in questo settore. Nessuno lo ha in un registro dei rischi, nessuno lo chiede in un modulo d\u0026rsquo;acquisto, e nessuno di quelli che ti vendono un abbonamento di cinque anni l\u0026rsquo;ha nominato.\nIl budget per la formazione è stato il primo a sparire C\u0026rsquo;è un secondo motivo per cui il prodotto continua a vincere, ed è meno cinico del primo. Molte delle persone che ti vendono non saprebbero fare l\u0026rsquo;altra cosa.\nL\u0026rsquo;investimento dei datori di lavoro nella formazione in questo paese cala da vent\u0026rsquo;anni. La lettura dell\u0026rsquo;Employer Skills Survey 2024 del Learning and Work Institute lo colloca al 36% in meno per dipendente in termini reali rispetto al 2005: 1.700 GBP contro 2.634 GBP. Solo dall\u0026rsquo;indagine del 2022 è sceso di un altro 13%. L\u0026rsquo;apprenticeship levy è arrivata nel 2017 proprio per invertire questa tendenza, e la spesa per dipendente, levy compresa, è calata del 23% da allora.\nPoi guarda quali settori hanno tagliato di più tra il 2022 e il 2024. Pubblica amministrazione al 50%, servizi finanziari al 47%, e informazione e comunicazione al 30%. Quest\u0026rsquo;ultimo è il nostro. Quasi un terzo sparito in due anni, nel settore che cambia più in fretta.\nNel frattempo quello che c\u0026rsquo;è da difendere è cresciuto. Ho contato le vulnerabilità pubblicate ai due estremi di un decennio direttamente dalla National Vulnerability Database: 6.595 CVE pubblicate nel 2015, e 49.972 nel 2025. Sette volte e mezzo tante in dieci anni, contro un budget per la formazione sceso di un terzo. Quelle due linee vanno in direzioni opposte, e lo fanno da anni.\nNemmeno i controlli che farebbero emergere la differenza sono al loro posto. La Cyber Security Breaches Survey 2025/2026 del governo stesso colloca l\u0026rsquo;autenticazione a due fattori al 47% delle imprese: lo stesso controllo che le agenzie dei Five Eyes hanno indicato per gli account degli MSP nel 2022, e lo stesso per cui l\u0026rsquo;ICO ha multato Advanced Computer Software Group per 3,07 milioni di sterline a marzo 2025. La stessa indagine registra le politiche formali di sicurezza informatica scese dal 59% al 52% in un anno, e i piani di continuità operativa che coprono la sicurezza informatica scesi dal 53% al 44%. Non stabili. In calo.\nE poi metti sotto a tutto un tenant cloud. Una piccola impresa non amministra il proprio. L\u0026rsquo;MSP detiene il global admin, costruisce il modello delle identità, imposta il conditional access, decide quale storage è pubblico e quale no, e possiede la console. È esattamente quello per cui è stato assunto. Quindi quando un tenant finisce configurato male, le mani sopra erano quelle del fornitore. Non un cliente che ha cliccato la casella sbagliata.\nÈ cambiato anche il raggio del danno. Un server configurato male nel 2005 arrivava più o meno fin dove arrivava il cavo a cui era collegato. Un tenant configurato male oggi è su internet nel secondo in cui viene salvato, è lo stesso tenant per ogni sistema che quell\u0026rsquo;azienda fa girare, e la credenziale che lo amministra sta in mano a qualcuno che non hanno mai incontrato, in un\u0026rsquo;azienda che non hanno il permesso di verificare.\nLe agenzie di sicurezza di cinque paesi hanno scritto un avviso su questo nel 2022, e la primissima azione dell\u0026rsquo;elenco riguarda gli account che un fornitore usa per entrare nei tuoi sistemi. L\u0026rsquo;hanno messa per prima perché è da lì che si entra.\nPoi c\u0026rsquo;è quella che questo settore chiama formazione. Una certificazione di un vendor è formazione sul prodotto. Ti insegna dove stanno i pulsanti nella console di un\u0026rsquo;azienda e come quell\u0026rsquo;azienda ha deciso di chiamare le sue funzioni, è scritta e prezzata dall\u0026rsquo;azienda di cui copre i prodotti, e averne abbastanza è una condizione della fascia partner che determina il margine. È un canale di vendita con il tocco in testa.\nConoscere una console non è sapere come funziona la cosa. Un ingegnere con cinque certificazioni può non aver mai letto una RFC, mai fatto una cattura dei pacchetti, e mai una volta capito dai principi primi perché qualcosa si è rotto. Metti quella persona davanti a un tunnel che non sale e la risposta onesta non è alla sua portata. Dare la colpa all\u0026rsquo;IPv6 della rete di casa del cliente, sì.\nCosì le due metà si incontrano. Sono pagati per vendere un prodotto, e sempre più spesso il prodotto è l\u0026rsquo;unica risposta che hanno. Un cliente che paga per la competenza finisce senza né l\u0026rsquo;una né l\u0026rsquo;altra.\nNessuno ha messo per iscritto ciò di cui avevi bisogno Chiedi di vedere i tuoi requisiti. Non la proposta, non il preventivo, non lo schema architetturale con sopra il tuo logo. I requisiti.\nUna raccolta fatta bene è noiosa e non è breve. Cosa deve fare il servizio, e per chi. Quante persone, da dove, con cosa. Qual è l\u0026rsquo;ora di punta e qual è la crescita in tre anni. Quanto può restare giù prima di costare soldi veri, e quanti dati puoi permetterti di perdere. Cosa non deve mai lasciare il paese, e sotto quale legge. Cosa deve sopravvivere a un incendio in un edificio. Di cosa rispondi contrattualmente verso i tuoi clienti. Qual è il budget, investimenti e spesa corrente, separati. Cosa possiedi già che ha ancora vita davanti. Chi lo tiene in piedi dopo, e cosa sa già gestire.\nÈ il lavoro di una mattinata con le persone giuste nella stanza, e dovrebbe finire con un documento che approvi prima che qualcuno disegni un solo riquadro.\nSe nessuno ti ha chiesto la maggior parte di queste cose, non ti hanno dato un progetto. Ti hanno dato quello che vendono già, con il nome della tua azienda in copertina.\nFai attenzione al segnale anche nell\u0026rsquo;altra direzione. Se il dimensionamento è stato fatto alla prima riunione, prima che qualcuno guardasse qual è davvero il tuo carico, allora i numeri vengono da un modello e non dal tuo parco macchine, e un dimensionamento vero ha bisogno di dati. Qualcuno che guarda cosa sta facendo davvero il tuo hardware adesso, abbastanza a lungo da vedere una chiusura di fine mese e una di trimestre.\nUna sola opzione non è una scelta Un progetto è un insieme di scelte con il ragionamento allegato. Il che significa opzioni, e costi su tutte, non solo su quella che vogliono farti prendere.\nDovresti ricevere il non fare nulla, prezzato, compreso quanto ti costa quando si rompe. Dovresti ricevere la cosa più economica che soddisfa i requisiti. Dovresti ricevere la raccomandazione, e dovresti ricevere quella sovradimensionata per te, così vedi dov\u0026rsquo;è la linea. Ognuna con quanto costa comprarla, quanto costa gestirla per cinque anni, cosa non fa, e cosa dovresti fare dopo se la superassi.\nE soprattutto dovresti ricevere l\u0026rsquo;elenco di cosa è stato escluso e perché. È la parte che dimostra che qualcuno ci ha pensato davvero.\nSe hai ricevuto esattamente una risposta, e quella risposta guarda caso è il vendor su cui sono certificati e il modello di licenza che paga ogni mese, non hai ricevuto un progetto. Hai ricevuto un preventivo vestito da progetto. Niente di più.\nCosa filtra la rosa prima ancora che tu la veda Quattro risposte allo stesso requisito Open source, con contratto di supporto Il margine è il lavoro del fornitore Un fornitore britannico più piccolo Nessun programma partner Quello che hai già, configurato Niente da fatturare al rinnovo Il vendor nel programma partner Rebate, registrazione, obiettivo Rende? È nel programma? Cosa arriva sulla scrivania Un'opzione, quotata Nessun confronto, nessuna alternativa prezzata Le altre tre non sono mai state prezzate, quindi non hai mai saputo quanto costano e la loro assenza sembra dire che non c'era niente Il filtro agisce prima che tu veda qualsiasi cosa. Tre risposte allo stesso requisito non vengono mai prezzate, quindi la loro assenza sembra dire che non c\u0026rsquo;era niente da confrontare. C\u0026rsquo;è una domanda semplice che lo fa venire a galla, e io la farei nella stanza. Cos\u0026rsquo;altro avete considerato, e quanto costava? Chi ha fatto il lavoro ha i numeri a portata di mano e anzi gli fa piacere che glieli chiedano. Chi non l\u0026rsquo;ha fatto ti dirà che le alternative non sono supportate, non sono enterprise-grade, o non sono qualcosa su cui metterebbe la firma. Nessuna di queste è un numero.\nL\u0026rsquo;open source non entra mai nell\u0026rsquo;elenco Non è che lo odino. Non c\u0026rsquo;è margine, non c\u0026rsquo;è rebate, non c\u0026rsquo;è certificazione da vendere e nessun obiettivo trimestrale che sposti.\nL\u0026rsquo;obiezione è sempre la stessa, ed è l\u0026rsquo;unica affermazione in questo articolo che è semplicemente falsa: «non è supportato». È tutto supportato, commercialmente, con un contratto e uno SLA e qualcuno da chiamare. Proxmox vende abbonamenti per socket, e Red Hat, SUSE e Canonical vendono supporto per lo stack. Stai scegliendo chi lo supporta, non se è supportato. Quello che smetti di pagare è il diritto di usare un software che hai già.\nPoi c\u0026rsquo;è l\u0026rsquo;hardware già in sala macchine. Viene ignorato del tutto. Nel mio impiego precedente ho costruito un cloud privato con nodi HPC dismessi, Proxmox, Ceph e un\u0026rsquo;intera catena di Ansible sopra, e ne sono uscito con 7 server, 480 core, 15 TiB di RAM e 1,8 PiB di storage, senza budget e con tre persone. Un MSP che quotasse lo stesso requisito avrebbe messo in conto hardware nuovo e un abbonamento: per loro non c\u0026rsquo;è niente da guadagnare su apparecchiature che hai già comprato e pagato.\nL\u0026rsquo;altra metà di questo discorso è l\u0026rsquo;hardware che hai già in sala macchine, ed è la metà che non viene mai messa in conto. Un server non smette di funzionare il giorno in cui scade il suo contratto di supporto. «Fine del supporto» è una data che ha scelto il vendor, non una misura che qualcuno ha preso sull\u0026rsquo;hardware, e una macchina con cinque buoni anni davanti vale di più per te che per chiunque ti venda quella che la sostituisce. L\u0026rsquo;open source è quello che ti permette di continuare a usarla, perché alla licenza non importa quanto sia vecchia la CPU o se il marchio sul frontale è ancora in garanzia.\nÈ questa la parte che non paga nessuno. Non c\u0026rsquo;è rebate sull\u0026rsquo;hardware che possiedi già, nessun credito di fascia per una macchina che resta dov\u0026rsquo;è, e nessun rinnovo su una licenza che nessuno ha dovuto comprare. Per questo non viene proposta, e l\u0026rsquo;espressione che si usa al suo posto è «fine vita», che suona come ingegneria ed è una data di vendita.\nChiedi che l\u0026rsquo;opzione open source sia prezzata come si deve, supporto compreso, accanto alle altre, e chiedi la versione che riusa quello che hai, prezzata contro quella che non lo fa. Non per farti dissuadere da quella commerciale. Per vedere la differenza, così la decisione è tua.\nCome appare davvero l\u0026rsquo;alternativa Esiste una risposta open source supportata a quasi tutto quello che c\u0026rsquo;è in una proposta, e conviene partire dalla parte che ti costa di più, perché non sono mai i server.\nIl software a licenza per utente. È qui che stanno i soldi ricorrenti, ed è qui che un\u0026rsquo;alternativa non viene mai nominata. Suite d\u0026rsquo;ufficio: LibreOffice, ONLYOFFICE, oppure Collabora Online, che vende installazioni supportate e ti dà la modifica da browser che la gente pensa arrivi da un posto solo. Posta, calendari e contatti condivisi: grommunio parla MAPI, quindi Outlook ci si collega come farebbe con Exchange, ed è venduto con supporto; SOGo e mailcow coprono lo stesso terreno in modo diverso. File, condivisione e quello per cui la gente usa davvero un disco cloud: Nextcloud, con un contratto enterprise dietro. Chat e riunioni, cioè la metà Teams: Mattermost e Rocket.Chat sono i più vicini all\u0026rsquo;equivalente, entrambi installabili in casa con supporto acquistabile, e Zulip ha licenza Apache e gestisce bene le discussioni. Matrix con Element, Nextcloud Talk e Jitsi coprono il resto. E la metà SharePoint, cioè intranet, librerie documentali, siti di team, la coprono insieme XWiki, BookStack, OpenProject, Seafile e Nextcloud.\nLe applicazioni gestionali. ERP: Odoo Community, ERPNext, Dolibarr. CRM: SuiteCRM, per cui l\u0026rsquo;azienda che lo sviluppa vende supporto, oppure EspoCRM. Contabilità: GnuCash, o il libro contabile integrato in Dolibarr ed ERPNext. Gestione documentale: Paperless-ngx. Reportistica: Metabase. Service desk e gestione degli asset, che il tuo MSP ti fa pagare come prodotto: GLPI e Zammad.\nIdentità e segreti, da cui dipende tutto il resto. Keycloak, FreeIPA, o Samba come domain controller. Per le password, Bitwarden si può installare in casa, Vaultwarden è un server AGPL leggero che parla con gli stessi client, e Passbolt e KeePassXC fanno lo stesso lavoro in modo diverso. Nella maggior parte delle proposte questa è una riga mensile per utente.\nLa gestione dei dispositivi, cioè la riga Intune sulla tua bolletta. Fleet fa inventario, policy e registrazione su tutte le piattaforme che un parco macchine contiene davvero, ed è costruito su osquery. MicroMDM gestisce la registrazione Apple, Headwind gestisce Android, e Ansible, Puppet o Salt fanno la configurazione sotto a ciascuno. Per la metà dell\u0026rsquo;accesso remoto, il tema di un\u0026rsquo;intera sezione della parte due, MeshCentral ha licenza Apache e RustDesk è AGPL, ed entrambi girano su un server tuo. Il che significa che la risposta a «quale strumento remoto c\u0026rsquo;è sulle mie macchine, e chi può accedere alla console» può essere uno che ospiti e aggiorni tu, invece di uno che scopri dopo.\nE l\u0026rsquo;aggiornamento in sé non è più l\u0026rsquo;arte oscura che ti vendono. Persino sul Fisher-Price OS (Windows) gli aggiornamenti delle applicazioni passano ormai da winget, con licenza MIT, contro un repository comunitario di manifest con la stessa licenza; Chocolatey e Scoop fanno lo stesso lavoro da più tempo, e ogni Unix ce l\u0026rsquo;ha dagli anni Novanta. Quindi quando la gestione delle patch compare in una proposta come riga gestita premium, guarda cosa ti stanno vendendo davvero. Il meccanismo è gratuito e lo fornisce il vendor della piattaforma, e configurarlo è un pomeriggio. Dopo è un\u0026rsquo;attività pianificata. Una voce di cron, o come la chiama la console, che gira su una macchina che c\u0026rsquo;era già. Stai pagando un canone mensile per un lavoro che va da solo.\nLa risposta dovrebbe essere che paghi qualcuno perché guardi il risultato e intervenga quando fallisce, e quello varrebbe i soldi. Allora guarda le prove di quella sorveglianza. In Capita, che la parte due smonta pezzo per pezzo, l\u0026rsquo;allarme è scattato in dieci minuti e si è intervenuti quasi tre giorni dopo, contro un obiettivo di un\u0026rsquo;ora, da parte di un team che l\u0026rsquo;autorità ha trovato sotto organico. Là fuori su internet ci sono firewall che si portano ancora dietro vulnerabilità entrate nel catalogo di quelle sfruttate anni dopo l\u0026rsquo;uscita della correzione. La sorveglianza è la parte che giustificherebbe la fattura, ed è la parte con meno prove che avvenga.\nIl centralino, che è una delle righe mensili per interno più vecchie che esistano. Asterisk lo fa da venticinque anni, FreePBX ci mette sopra un\u0026rsquo;interfaccia web, FreeSWITCH è l\u0026rsquo;altro motore, e Kamailio e OpenSIPS gestiscono l\u0026rsquo;instradamento SIP su scala da operatore. Se lo vuoi già pronto invece che da assemblare, Wazo, FusionPBX e Issabel lo distribuiscono già costruito.\nVale anche la pena ricordare cosa è successo a quello proprietario che quasi tutti i fornitori propongono. Nel marzo 2023 la CISA ha pubblicato un avviso in cui affermava che «3CXDesktopApp — a voice and video conferencing app — was trojanized, potentially leading to multi-staged attacks against users employing the vulnerable app». Nessuno ha dovuto trovare una vulnerabilità e sfruttarla. È arrivato come applicazione firmata del vendor stesso, attraverso il canale di aggiornamento del vendor stesso, su ogni scrivania su cui un partner l\u0026rsquo;aveva installato.\nAdobe, che è un abbonamento per utente come tutto il resto. Quasi tutte le aziende non stanno affatto pagando per una suite creativa. Stanno pagando per Acrobat e per le firme. Stirling PDF è un kit installabile in casa che fa l\u0026rsquo;unione, la divisione, l\u0026rsquo;oscuramento, l\u0026rsquo;OCR e la compilazione dei moduli per cui si compra Acrobat Pro, e Okular o LibreOffice Draw coprono il resto. Per la firma, Documenso e DocuSeal sono entrambi AGPL ed entrambi installabili in casa, e un costo per busta per firmare un documento è l\u0026rsquo;esempio più pulito che questo articolo abbia di qualcosa messo a contatore che il tuo server farebbe gratis. Dove c\u0026rsquo;è davvero un team di design: GIMP e Krita per le immagini, Inkscape per la grafica vettoriale, Scribus per l\u0026rsquo;impaginazione, darktable e RawTherapee per la fotografia, Kdenlive per il video, Blender per il 3D e il compositing, Audacity e Ardour per l\u0026rsquo;audio.\nLa videosorveglianza, che merita un paragrafo a sé. Le telecamere vengono vendute come prodotto gestito con una licenza per canale e un registratore in cui non ti è permesso entrare. Frigate ha licenza MIT e fa il riconoscimento degli oggetti in locale su hardware tuo; ZoneMinder è GPL da vent\u0026rsquo;anni. Per le videoconferenze, Jitsi e BigBlueButton. E ricorda per quale prodotto Cisco ha pagato 8,6 milioni di dollari e altri 6 milioni per chiudere una causa, di cui si occupa la parte due. Software di videosorveglianza, venduto a enti pubblici. Lo stack di telecamere premium non arriva con la sicurezza inclusa.\nStorage e filesystem, e nota che qui nessuno ti offre mai una scelta. OpenZFS per lo storage con checksum, snapshot e send/receive, Btrfs, XFS, CephFS. Il filesystem sotto i tuoi dati è una decisione di ingegneria con conseguenze reali su quanta parte ne recuperi dopo una brutta giornata, e di solito arriva come quello che l\u0026rsquo;appliance aveva di serie.\nL\u0026rsquo;infrastruttura, per ultima, perché è la parte più economica della bolletta. Hypervisor e cluster: Proxmox VE. Storage: Ceph, che gira volentieri sui dischi che possiedi già invece che su un array nuovo. Firewall e routing: nftables, OPNsense. VPN: WireGuard o strongSwan. Per la rete mesh in overlay che ormai vendono tutti, conviene avere il quadro giusto. I client di Tailscale sono open source e il suo server di coordinamento ospitato no: l\u0026rsquo;azienda dichiara che «remains proprietary as part of our managed service». Ma esiste un server di coordinamento aperto, ed è una cosa seria: Headscale ha licenza BSD, è «an open source, self-hosted implementation of the Tailscale control server», e Tailscale ne impiega il maintainer principale pur dicendo che «does not set Headscale\u0026rsquo;s product direction». Quindi tutto quanto può girare sul tuo hardware. NetBird e Nebula sono le altre strade. Bilanciamento del carico: HAProxy e keepalived. Monitoraggio: Prometheus, Grafana, Zabbix. Backup: Proxmox Backup Server, Bareos, restic. Gestione della configurazione: Ansible. E per il lavoro di integrazione che viene quotato o come sviluppo su misura o come abbonamento di automazione cloud a esecuzione, Node-RED ha licenza Apache, gira su una macchina tua e non ti fattura a esecuzione.\nTre punti in cui non fingerò che il cambio sia pulito. Primo, Teams e SharePoint. La destinazione non è il problema, qualunque cosa ti dicano: i prodotti qui sopra sono maturi e le aziende ci lavorano. Il problema è la migrazione: anni di siti accumulati, ereditarietà dei permessi che nessuno ha mai documentato, flussi Power Automate che qualcuno ha costruito e poi ha lasciato lì, e un comportamento di co-editing che il personale si aspetta senza saperlo nominare. È lavoro vero, e va prezzato come lavoro vero invece di essere liquidato in una direzione o nell\u0026rsquo;altra. Però nota anche cosa smetti di portarti dietro. Quei flussi e quei siti sono processi aziendali che girano nel datacenter di qualcun altro, su una piattaforma che non puoi riavviare. Quando si fermano, non li ripari. Aspetti, e dici ai tuoi clienti che stai aspettando. E la contabilità nel Regno Unito ha uno spigolo duro: l\u0026rsquo;IVA va presentata tramite un software riconosciuto dall\u0026rsquo;HMRC, e l\u0026rsquo;HMRC pubblica l\u0026rsquo;elenco. Le strade open source verso Making Tax Digital esistono, GnuCash ha un ponte comunitario ed ERPNext ha un modulo per l\u0026rsquo;IVA britannica, ma sono mantenute dalla comunità invece di essere un prodotto con un contratto di supporto dietro. È un limite reale e va messo nel confronto. Terzo, un\u0026rsquo;agenzia di design che lavora davvero vive o muore sullo scambio di file, e i clienti che ti mandano un .psd e se ne aspettano uno indietro sono un problema reale, non una questione di principio. Per tutti gli altri, che devono compilare un PDF e farlo firmare, non c\u0026rsquo;è nessun cambio da fare. Si tratta solo di smettere di pagare.\nPerché l\u0026rsquo;affare migliore non viene mai venduto E allora perché niente di tutto questo viene offerto? Perché per loro sarebbe un affare migliore, non peggiore, il che rende il rifiuto più interessante, non meno.\nCi sono due modi per guadagnare da un cliente. Rivendi una licenza, e il margine lo fissa qualcun altro, lo limita qualcun altro, lo riprezza qualcun altro al rinnovo, e viene pagato che tu abbia lavorato quel mese o no. Installa e gestisci uno stack aperto, e il margine è il tuo lavoro alla tua tariffa, senza nessuno che si prenda una fetta lungo la strada e senza nessun vendor in grado di cambiare il numero il prossimo aprile. Il secondo vale di più per cliente, e costruisce qualcosa. Un ingegnere che sa gestire Ceph, o mettere in piedi un server di posta con cui Outlook parla, vale di più l\u0026rsquo;anno prossimo di quest\u0026rsquo;anno. Uno che ha sempre e solo guidato una console vale esattamente lo stesso l\u0026rsquo;anno prossimo, e solo finché quella console esiste.\nÈ anche più difficile, ed è tutto qui. Va guadagnato di nuovo ogni mese. Servono ingegneri invece di amministratori, e gli ingegneri costano, ci mettono anni a formarsi, e possono andarsene e mettersi in proprio. Una licenza non se ne va mai.\nÈ un impegno, e l\u0026rsquo;impegno è proprio la cosa che si evita. Rivendere non chiede niente a nessuno. Scegli un vendor quest\u0026rsquo;anno, scegline un altro l\u0026rsquo;anno prossimo, e quando si rompe non è mai stato un tuo progetto. Gestire lo stack da te significa sceglierlo, impararlo come si deve, e rispondere di persona davanti a un cliente alle due di notte. Una delle due cose richiede che tu sappia qualcosa. L\u0026rsquo;altra richiede un login al portale.\nRompe anche l\u0026rsquo;aritmetica su cui gira il modello. Un servizio gestito è prezzato sulla leva: quanti più clienti possibile per ingegnere, personale junior che segue i runbook, escalation solo quando il runbook finisce. Funziona perché il lavoro è stato ridotto a passaggi. Metti uno stack che qualcuno deve capire davvero e il rapporto crolla, il costo del personale sale, e l\u0026rsquo;azienda si ritrova a dipendere da persone che potrebbero andarsene portandosi dietro i clienti.\nQuindi la domanda sotto la rosa delle opzioni non è mai stata quale prodotto è migliore. È se un\u0026rsquo;azienda è disposta a essere il tipo di azienda che assume persone che sanno le cose.\nEd è qui che torna il dato sulla formazione di prima. Un settore che ha tagliato la sua spesa in competenze del 30% in due anni non può vendere competenza, quindi vende licenze. Vendere licenze significa non dover mai acquisire la competenza, quindi la formazione resta tagliata, e l\u0026rsquo;anno dopo c\u0026rsquo;è ancora meno da offrire. È un circolo, e gira in un solo verso.\nIl resto è incentivo, e l\u0026rsquo;abbiamo già visto. Il vendor paga un rebate sulla licenza e niente sul lavoro. Il commerciale è pagato sul prodotto. E quando un hyperscaler ha un disservizio è colpa dell\u0026rsquo;hyperscaler, mentre un cluster che hai costruito tu è tuo: rivendere compra a qualcuno un posto dove mettere la colpa. Questo vale soldi veri per un\u0026rsquo;azienda che preferirebbe non dover rendere conto.\nNiente di questo ne fa la risposta giusta per te. Spiega solo perché il confronto non viene mai scritto.\nLa tassa IPv4 Questo è l\u0026rsquo;esempio più pulito di tutto l\u0026rsquo;articolo, perché puoi mettere un prezzo su entrambi i lati.\nTi costruiranno un servizio solo IPv4. Poi ti venderanno gli indirizzi pubblici che ti servono per raggiungerlo, a indirizzo, al mese, per sempre. Chiedine un altro e c\u0026rsquo;è un modulo, una giustificazione e una riga sul rinnovo.\nNel frattempo IPv6 non costa niente in più. L\u0026rsquo;assegnazione arriva con l\u0026rsquo;iscrizione al registro che stai già pagando, e lo schema tariffario 2026 del RIPE è un importo fisso di 1.800 EUR per account LIR, qualunque cosa tu detenga. La RIPE-690 dice che un sito finale riceve un /48 o un /56. Dal lato v6 non c\u0026rsquo;è un contatore per indirizzo. Non c\u0026rsquo;è niente da contare.\nAnche i numeri dall\u0026rsquo;altro lato sono pubblici. AWS fa pagare 0,005 dollari l\u0026rsquo;ora per ogni indirizzo IPv4 pubblico, collegato o no, cioè circa 43,80 dollari l\u0026rsquo;anno ciascuno. Sul mercato dei trasferimenti il prezzo medio nella prima metà del 2026 è stato di 20,04 dollari per indirizzo, con la tariffa corrente di noleggio intorno a 0,59 dollari per indirizzo al mese. Quindi un indirizzo vale all\u0026rsquo;incirca venti dollari da comprare in blocco, e si noleggia all\u0026rsquo;ingrosso per circa sette l\u0026rsquo;anno, e a te viene rivenduto come una risorsa scarsa. Una riga mensile sulla bolletta e un modulo da compilare quando ne vuoi un altro.\nLa scarsità è reale. Il motivo per cui la stai ancora pagando no. Mettere un servizio in dual stack è il lavoro di un pomeriggio, e trasforma un costo ricorrente in una richiesta di modifica una tantum, ed è proprio per questo che non viene mai proposto.\nSe vuoi il quadro completo di chi in questo paese si è davvero preso la briga, li ho contati tutti: Gli indirizzi non sono mai finiti. È finita la voglia.\nCloud per default, quando tutto quello che hai è in sede Pensa a dove si svolge davvero il lavoro. Uno stabilimento di produzione. Un\u0026rsquo;officina meccanica. Un\u0026rsquo;azienda di catering.\nOgni utente è nell\u0026rsquo;edificio. Ogni singolo dato nasce nell\u0026rsquo;edificio: le macchine, le casse, le schede di lavoro, il magazzino, il CAD, i programmi CNC, gli ordini che arrivano al banco. Anche tutto ciò che consuma quei dati è nell\u0026rsquo;edificio. Nessuna seconda sede, nessun personale sul campo, nessun cliente che arriva da un front end web, e nessun mese in cui il carico raddoppia.\nMetti l\u0026rsquo;applicazione nel datacenter di qualcun altro e ognuno di quei byte ora esce dai locali e ci rientra subito. Stessi utenti. Stessi dati. Stessa elaborazione. In più una WAN nel mezzo, una bolletta mensile, e una dipendenza da una linea che non è tua.\nNiente di ciò in cui il cloud è davvero bravo si applica qui. La scalabilità elastica è per un carico che si muove, e un reparto produttivo su due turni non si muove. La portata globale è per utenti che stanno da un\u0026rsquo;altra parte, e i tuoi sono in piedi davanti alla macchina. L\u0026rsquo;edificio di qualcun altro è una risposta seria per il disaster recovery, ma il disaster recovery è una destinazione di backup, non il posto da cui fai girare la linea.\nQuello che ti compra davvero è un nuovo modo per fermarti. In sede una linea a banda larga morta è un fastidio, e il lavoro va avanti finché qualcuno non la ripara. Nel cloud è un fermo: la linea cade, l\u0026rsquo;officina non riesce ad aprire una scheda, la cucina non riesce a prendere un ordine, la produzione resta lì ferma, e tu aspetti il tecnico di qualcun altro contro uno SLA che non hai mai negoziato.\nDove va davvero il lavoro, quando l'applicazione lascia l'edificio In sede Il tuo edificio Le persone In piedi alla macchina I dati Nati qui, tutti L'applicazione Anche lei qui Niente esce dai locali. Una linea a banda larga morta è un fastidio, e il lavoro va avanti finché qualcuno la ripara. Il cloud per default, e il percorso che fa davvero Il tuo edificio Le stesse persone, gli stessi dati La centrale dove arriva la tua linea Il core del tuo ISP e chi gli vende il transito Un punto di peering o la rete edge del provider Il datacenter L'applicazione ora vive qui Tre edifici non tuoi, che non puoi chiamare e non hai mai scelto e ogni byte fa anche il viaggio di ritorno, per ogni salvataggio e ogni ricerca Ora una linea morta è un fermo. L'officina non apre una scheda, la cucina non prende un ordine, la produzione è ferma, e aspetti il tecnico di qualcun altro contro uno SLA che non hai mai negoziato. Stessi utenti, stessi dati, stessa elaborazione. La differenza sono le reti di altre quattro aziende nel mezzo, nessuna delle quali puoi chiamare quando si ferma. E la tua banda larga è solo metà della storia. L\u0026rsquo;altra metà è la loro, e va giù anche quella. Il post-event summary di AWS stessa per ottobre 2025 descrive un disservizio nella sua regione principale della Virginia settentrionale dalle 23:48 del 19 ottobre alle 14:20 del 20 ottobre, quasi quindici ore, in cui i clienti e altri servizi AWS «were unable to establish new connections». La causa, con parole loro, era «a latent defect within the service\u0026rsquo;s automated DNS management system». Nove giorni dopo Azure Front Door si è portato giù Microsoft 365, Outlook e il portale Azure per quasi un\u0026rsquo;intera giornata lavorativa. Microsoft tiene una cronologia aggiornata di questi eventi, e non è un documento breve.\nE il disservizio non è nemmeno tutto. L\u0026rsquo;altra cosa venduta sul frontespizio della proposta era la capacità su richiesta, e anche quella ha un suo modo documentato di fallire. Microsoft pubblica una pagina intitolata «Troubleshooting Azure VM allocation failures». AWS pubblica «How do I troubleshoot InsufficientInstanceCapacity errors when I start or launch an EC2 instance?». Rileggi quei titoli. Entrambi i vendor mantengono documentazione permanente per il caso in cui chiedi una macchina e non ce n\u0026rsquo;è una: nessun guasto, nessun disservizio, semplicemente niente di libero in quella regione oggi. In più ci sono le quote, fissate per sottoscrizione, che sono un secondo modo per sentirsi dire di no.\nQuindi la scalabilità elastica della proposta porta con sé un\u0026rsquo;avvertenza che la proposta non porta. Elastica nei limiti di quello che è libero, in quella regione, il giorno in cui chiedi. E i fornitori continuano comunque a far firmare clienti in regioni sature, perché una firma conta in questo trimestre e un controllo di capacità no. Lo scopri al momento del deployment, che è il momento peggiore possibile: dopo che la migrazione è impegnata, dopo che l\u0026rsquo;hardware in sede se n\u0026rsquo;è andato, e dopo che il piano di ripiego è stato smontato per pagare il trasloco.\nLeggi cosa significa tutto questo per l\u0026rsquo;officina e per la cucina. Sul tuo hardware, un disservizio è qualcuno che puoi chiamare, o una macchina fino a cui qualcuno può andare a piedi e riavviare. Nel cloud di qualcun altro non c\u0026rsquo;è nessuna leva. Non puoi fare escalation, non puoi dare priorità al tuo ripristino, e non può farlo nemmeno il fornitore che stai pagando. Stanno aggiornando la stessa pagina di stato di tutti gli altri. Quella che hai comprato come resilienza si rivela una dipendenza che condividi con diversi milioni di altri clienti, e il giorno in cui cede la tua posizione è la stessa della loro.\nAllora perché è sempre la raccomandazione? Perché un acquisto in conto capitale paga il tuo MSP una volta sola. Un abbonamento lo paga ogni mese, in percentuale, con sopra un credito dal vendor. E migrarti gli toglie anche l\u0026rsquo;hardware dal piatto, che è la parte del servizio per cui fanno più fatica a trovare personale. Tre motivi che puntano nella stessa direzione, e nessuno è tuo.\nPoi c\u0026rsquo;è dove finiscono i tuoi dati. Secondo il 18 U.S.C. § 2713, aggiunto dal CLOUD Act, un fornitore statunitense deve produrre i dati in suo «possession, custody, or control» quando riceve una notifica regolare, «regardless of whether such communication, record, or other information is located within or outside of the United States». Quindi «è nella regione UK» è una risposta vera a una domanda che non hai fatto. La regione ti dice dove sta il disco. La legge segue chi possiede l\u0026rsquo;azienda.\nNessuno te l\u0026rsquo;ha presentata come una decisione. È arrivata come un presupposto, dentro una proposta, scritta da qualcuno che guadagna di più quando dici di sì.\nDi quella dipendenza ho scritto a lungo in quanto costa affittare la tua tecnologia.\nTutto questo è successo prima che fosse costruito qualcosa Nota quando avviene, tutto quanto. Prima che una macchina venga messa a rack, prima che qualcuno abbia fatto login da qualche parte, in riunioni e su fogli di calcolo in cui per lo più tu non c\u0026rsquo;eri. Il rebate, i requisiti che nessuno ha raccolto, l\u0026rsquo;opzione unica, la riga open source mancante, gli indirizzi che ora affitterai per tutta la durata del contratto, il datacenter di cui nessuno nell\u0026rsquo;edificio aveva bisogno: niente di questo è tecnico, e tutto è deciso nelle prime due settimane.\nEcco perché merita la tua attenzione anche se non hai mai aperto uno switch. Ed è anche il motivo per cui è così difficile da sbrogliare dopo. Tutto quello che viene a valle eredita quelle due settimane. Il parco macchine viene costruito come diceva la rosa delle opzioni. Gli strumenti arrivano perché sono quelli che il fornitore possiede già e conosce già. Le chiavi finiscono dove le mette il loro processo. E il contratto firmato alla fine decide, con anni di anticipo, chi si fa carico della perdita la mattina in cui qualcosa si ferma.\nQuindi la parte due è ciò che è stato costruito davvero: la scatola da cui non si lasceranno dissuadere, gli apparati perimetrali con il peggior record nell\u0026rsquo;elenco delle vulnerabilità sfruttate, le basi che erano proprio la cosa che hai comprato, e gli strumenti che raggiungono ogni macchina che possiedi da una console che non hai mai visto. Due dei guasti che contiene hanno allegata la conclusione di un\u0026rsquo;autorità di vigilanza. Nessuno è capitato a un cliente. Sono capitati a un fornitore, e i clienti stavano a valle.\nIs Your MSP Lying To You — 3 parts\nIl tuo MSP ti mente per venderti prodotti premium?you are here Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivare Quando si rompe, chi se ne fa davvero carico? Fonti Consultate il 28 agosto 2026.\nCome funzionano i soldi.\nMicrosoft Partner Center billing documentation — il partner earned credit applicato sugli addebiti del consumo Azure del cliente. FCA Handbook, COBS 6.1A — l\u0026rsquo;adviser charging: la regola per cui un\u0026rsquo;impresa deve essere pagata per una raccomandazione solo dal cliente, e non deve accettare commissioni dal produttore. CMA cloud services market investigation — il lavoro dell\u0026rsquo;autorità britannica della concorrenza sul mercato del cloud. Indirizzi.\nRIPE NCC charging scheme 2026 — 1.800 EUR per account LIR, importo fisso. RIPE-690 — /48 o /56 a un sito finale, ottobre 2017. AWS public IPv4 charge — 0,005 dollari per indirizzo all\u0026rsquo;ora, da febbraio 2024. IPv4 transfer market, first half of 2026 — media di 20,04 dollari per indirizzo, tariffa di noleggio intorno a 0,59 dollari per indirizzo al mese, in sintesi dell\u0026rsquo;analisi di CircleID sulle transazioni a prezzo pubblico. La VPN.\nCisco Meraki\u0026rsquo;s AnyConnect troubleshooting guide — TLS e DTLS sulla 443, senza nessun problema di NAT da risolvere. RFC 3947 e RFC 3948 — il NAT traversal per IPsec, e il passaggio a UDP 4500. Supporto che puoi davvero comprare.\nProxmox VE subscriptions — un esempio di supporto commerciale per infrastruttura open source. Formazione e competenze.\nLearning and Work Institute, 24 December 2025 — investimento dei datori di lavoro nella formazione sceso del 36% per dipendente in termini reali dal 2005, e del 30% nell\u0026rsquo;informazione e comunicazione tra il 2022 e il 2024, sull\u0026rsquo;Employer Skills Survey 2024. National Vulnerability Database — numero di CVE pubblicate per anno, sommate per trimestre: 6.595 nel 2015 contro 49.972 nel 2025. Cyber Security Breaches Survey 2025/2026 — autenticazione a due fattori al 47% delle imprese, politiche formali scese al 52%, piani di continuità che coprono la sicurezza informatica scesi al 44%. CISA alert, 30 March 2023 — l\u0026rsquo;applicazione desktop 3CX trasformata in trojan. Diritto e politica.\nExecutive order, 10 February 2025 — la sospensione dell\u0026rsquo;applicazione del Foreign Corrupt Practices Act, con le parole dell\u0026rsquo;amministrazione stessa. Just Security, on the year that followed — le linee guida di giugno 2025, l\u0026rsquo;unità FCPA sciolta della SEC e le indagini chiuse. Bribery Act 2010 e section 7 — la legge britannica, e il reato aziendale di mancata prevenzione. Airbus, 31 January 2020 — il resoconto dell\u0026rsquo;azienda stessa sull\u0026rsquo;accordo tripartito e su come le sanzioni sono state ripartite tra PNF, SFO, DoJ e DoS. Giurisdizione.\n18 U.S.C. § 2713 — la disposizione del CLOUD Act: divulgazione a prescindere da dove sono conservati i dati. Quando la piattaforma si ferma.\nAWS post-event summary, October 2025 — il disservizio di DynamoDB e del DNS in us-east-1, con le parole di Amazon stessa. Azure status history — la registrazione continua degli incidenti tenuta da Microsoft stessa. ","permalink":"https://blogs.damiendye.uk/it/random/is-your-msp-lying-to-you-part1/","summary":"Parte 1 di 3. Alcuni mentono. Quasi tutti non ne hanno mai bisogno, perché li paga il vendor del prodotto che ti stanno consigliando e nessuno è tenuto a dirtelo. I segnali che ti stanno vendendo qualcosa invece di progettare per te, e quello che non arriva mai nella rosa delle opzioni.","title":"Il tuo MSP ti mente per venderti prodotti premium?"},{"content":" Is Your MSP Lying To You — 3 parts\nIl tuo MSP ti mente per venderti prodotti premium? Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivareyou are here Quando si rompe, chi se ne fa davvero carico? La parte uno era la vendita. Questa è l\u0026rsquo;infrastruttura.\nLe carte sono firmate, la fattura arriva ogni mese, e c\u0026rsquo;è dell\u0026rsquo;hardware. In parte tuo, in parte loro, quasi tutto scelto prima che qualcuno chiedesse cosa fa davvero l\u0026rsquo;azienda tra le otto e le sei. Quello che segue è l\u0026rsquo;hardware in sé: cosa viene scelto, cosa è rimasto acceso al suo interno, e chi altro può raggiungere le macchine che hai pagato da una console in cui non hai mai fatto login.\nDue dei guasti qui portano la conclusione di un\u0026rsquo;autorità di vigilanza con un numero allegato. Nessuno è capitato a un cliente: sono capitati a un fornitore, e i clienti stavano a valle. Ogni affermazione ha un link.\nLa scatola da cui non si lasceranno dissuadere Ora quella scomoda. Voglio farlo con le prove invece che con le affermazioni, perché è la sezione in cui la gente tira fuori la parola complotto, e tirare fuori quella parola è il modo in cui l\u0026rsquo;argomento viene lasciato cadere senza che nessuno debba guardarlo.\nCisco è la raccomandazione predefinita in quasi tutto questo settore. Quindi guarda cosa ha pubblicato il vendor stesso sugli accessi non documentati ai suoi apparati.\nNel marzo 2018 ha pubblicato un avviso per la CVE-2018-0141: a Prime Collaboration Provisioning si poteva accedere via SSH a causa di «a hard-coded account password on the system». Otto mesi dopo, la CVE-2018-15439 sugli switch Small Business, dove «the affected software enables a privileged user account without notifying administrators of the system», senza software corretto disponibile al momento della pubblicazione e con un workaround offerto al suo posto. Nell\u0026rsquo;ottobre 2023, la CVE-2023-20101: Emergency Responder veniva distribuito con un account root con «default, static credentials that cannot be changed or deleted», credenziali «typically reserved for use during development».\nUn account di cui nessuno era stato informato, che non puoi rimuovere, con root su una macchina della tua infrastruttura. Chiamalo come vuoi. È quello che descrive l\u0026rsquo;avviso del vendor stesso.\nPoi c\u0026rsquo;è il materiale di Snowden, che ormai ha più di dieci anni e non è mai stato smentito. Nel dicembre 2013 Der Spiegel ha pubblicato il catalogo ANT, riferendo che una divisione dell\u0026rsquo;NSA «has burrowed its way into nearly all the security architecture made by the major players in the industry \u0026ndash; including American global market leader Cisco and its Chinese competitor Huawei». Gli stessi articoli descrivevano come gli apparati ci arrivano: spedizioni dirottate verso laboratori segreti in un processo che l\u0026rsquo;NSA chiama interdiction, dove «at these so-called \u0026rsquo;load stations,\u0026rsquo; agents carefully open the package in order to load malware onto the electronics, or even install hardware components that can provide backdoor access». Una newsletter interna dell\u0026rsquo;NSA del 2010, pubblicata nel 2014 con le fotografie, descriveva il processo con le parole dell\u0026rsquo;agenzia stessa: i dispositivi «being delivered to our targets throughout the world are intercepted», poi «re-packaged and placed back into transit to the original destination».\nQuello che gli articoli non mostrano è la complicità. Der Spiegel ha detto chiaramente che niente nei documenti suggeriva che i produttori sapessero o aiutassero, e Cisco all\u0026rsquo;epoca ha negato qualsiasi coinvolgimento, e nel maggio 2014 il suo general counsel l\u0026rsquo;ha messo agli atti: «as a matter of policy and practice, Cisco does not work with any government, including the United States Government, to weaken our products». Se ne sono lamentati con il Presidente. A prima vista, anche loro erano vittime.\nPrendiamolo per buono. Non cambia niente della scatola nel tuo rack, perché l\u0026rsquo;interdiction non ha mai avuto bisogno dell\u0026rsquo;aiuto del vendor. E vale la pena sapere che peso ha la smentita, perché la parola di Cisco è stata messa alla prova in tribunale. Nel 2019 hanno chiuso procedimenti ai sensi del False Claims Act per 8,6 milioni di dollari a livello federale, più 6 milioni di dollari con un gruppo di stati, per un software di videosorveglianza venduto a enti pubblici con «flaws that would permit unauthorized access to the system, with the potential to control and otherwise manipulate security cameras and the recorded footage». Secondo l\u0026rsquo;Attorney General di New York, Cisco sapeva dei difetti nel 2009 e non li ha corretti fino al 2013, dopo che l\u0026rsquo;indagine era cominciata. Gli accordi non sono ammissioni di responsabilità e non fingerò il contrario. Restano quattro anni passati a vendere un prodotto a forze di polizia ed enti pubblici con un modo noto per entrarci, senza dirlo.\nQuindi il quadro è questo: account root non documentati per loro stessa ammissione, un catalogo di dieci anni fa che li nomina, una catena di spedizione dimostrata compromettibile, e un periodo in cui sapevano di un buco e hanno continuato a vendere. Ognuna di queste cose da sola potresti liquidarla con un\u0026rsquo;alzata di spalle. Insieme sono uno schema. Una dichiarazione di una parte interessata non chiude uno schema.\nLa risposta sono i controlli, non un divieto. Il rischio va nel documento di progetto con tutto il resto, e le alternative vanno prezzate invece che scartate. Chiedi quali apparati concorrenti sono stati valutati e quanto costavano. Chiedi qual è la politica di verifica e di aggiornamento del firmware, e chi la controlla. Chiedi come gli apparati vengono ricevuti e ispezionati, e da chi. Chiedi cosa succede con un numero di serie che non corrisponde all\u0026rsquo;ordine d\u0026rsquo;acquisto.\nE nota quali vendor ricevono questo esame nel tuo settore e quali no. Lo stesso settore che ha messo Huawei in un registro dei rischi per una capacità che nessuno ha mai mostrato in pubblico scriverà Cisco nel progetto di dettaglio senza una riga di giustificazione, sulla forza di un badge da partner. Ho scritto di cosa succede a quell\u0026rsquo;argomento quando applichi lo standard in modo uniforme. Un badge da partner è un rapporto commerciale con degli obiettivi attaccati. Per questo non è una conclusione di sicurezza.\nIl firewall è la porta d\u0026rsquo;ingresso Allarga il discorso da un vendor alla categoria, perché il firewall è il prodotto che un MSP vende con più insistenza. È la voce che giustifica la parte di sicurezza del contratto.\nLa CISA tiene un catalogo delle vulnerabilità note per essere sfruttate in circolazione: non pericolose in teoria, ma usate davvero contro qualcuno. Ho scaricato il catalogo e l\u0026rsquo;ho contato per vendor. La versione 2026.08.27 contiene 1.685 voci. Cisco ne conta 96, seconda solo alle 386 di Microsoft, e 42 di quelle stanno sulle linee firewall e edge. Fortinet ne ha 29. Palo Alto Networks ne ha 15. Per avere una scala, Ivanti ne ha 35 e SonicWall 17.\nGuarda cosa sono davvero le voci, perché lo schema non cambia mai. È l\u0026rsquo;interfaccia di gestione o la VPN, cioè la parte esposta a internet di proposito.\nL'unica parte di questa linea del tempo che tocca a te chiudere Una vulnerabilità, da pubblicata a corretta sulla tua macchina Pubblicata esiste un numero CVE Patch disponibile il vendor ha fatto la sua parte Sfruttata, confermato aggiunta al catalogo CISA Tua macchina corretta da chi paghi tu La tua esposizione Usata contro qualcuno, e ancora lì sul tuo perimetro Cisco 96 voci, Fortinet 29, Palo Alto 15. Questi sono i numeri dei vendor, e sono pubblici. La lunghezza di quell'intervallo ombreggiato è tua, e nessuno la chiede. Ogni fornitore ha quel numero. È la stessa misura che l'ICO ha preso in Capita. Il totale del vendor è pubblico e non è il numero che decide se ti fai male. Lo è l\u0026rsquo;intervallo ombreggiato, e appartiene a chiunque tu stia pagando. La CVE-2024-3400 di Palo Alto era una command injection nella funzione GlobalProtect di PAN-OS, con punteggio 10,0, sfruttata come zero-day. Più tardi lo stesso anno la CVE-2024-0012 faceva passare «an unauthenticated attacker with network access to the management web interface» dritto oltre l\u0026rsquo;autenticazione, con 9,8, ed è stata concatenata con una command injection nella stessa interfaccia.\nLa CVE-2022-40684 di Fortinet era un\u0026rsquo;«authentication bypass using an alternate path or channel» con 9,8. La sua CVE-2018-13379, un path traversal nella VPN SSL, è entrata nel catalogo nel novembre 2021. Anni dopo l\u0026rsquo;esistenza della patch, perché c\u0026rsquo;erano ancora macchine su internet senza patch in cui la gente entrava come a casa propria.\nLa CVE-2023-20198 di Cisco nell\u0026rsquo;interfaccia web di IOS XE ha preso 10,0. La CVE-2025-20333, nel web server VPN del suo software Secure Firewall ASA e FTD, ha preso 9,9 lo scorso settembre.\nE poi c\u0026rsquo;è la CVE-2026-20316, aggiunta al catalogo il 29 luglio 2026. Cisco Secure Firewall Management Center, «use of hard-coded password», che permette «an unauthenticated, remote attacker to log in to an affected device». Una credenziale statica, nella macchina che gestisce i firewall, confermata come sfruttata, un mese prima di questo articolo. Lo stesso difetto del 2018 e del 2023 nella sezione precedente, sulla macchina che amministra il tuo perimetro.\nOra la parte utile, perché «alcuni vendor sono peggio di altri» non è davvero la lezione. Ognuno di questi ha un record pubblico e niente di questo compare in una proposta. Soprattutto, il totale del vendor non è il numero che decide se ti fai male. La tua esposizione è l\u0026rsquo;intervallo tra l\u0026rsquo;ingresso di una vulnerabilità in quel catalogo e la patch sulla tua macchina. Quell\u0026rsquo;intervallo non tocca al vendor chiuderlo. Appartiene a chiunque tu paghi per gestire la cosa.\nChe è la stessa misura che l\u0026rsquo;ICO ha preso in Capita, nella sezione successiva. Allarme a dieci minuti, intervento a cinquantotto ore, obiettivo di una. Nessuno chiede al proprio fornitore quel numero per le patch dei firewall, ed è un numero che ogni fornitore ha.\nQuando le basi sono la cosa che hai comprato Questo è quello che è venuto dopo la vendita, in due casi in cui un\u0026rsquo;autorità di vigilanza ha condotto l\u0026rsquo;indagine e ha pubblicato quello che ha trovato.\nNel marzo 2025 l\u0026rsquo;Information Commissioner ha multato Advanced Computer Software Group per 3,07 milioni di sterline per un incidente ransomware dell\u0026rsquo;agosto 2022. Advanced «provides IT and software services to organisations, including the NHS and other healthcare providers». Gli attaccanti sono entrati «via a customer account that did not have multi-factor authentication». L\u0026rsquo;NHS 111 è stato interrotto, il personale sanitario non riusciva a raggiungere le cartelle dei pazienti, e sono state sottratte le informazioni personali di 79.404 persone. La conclusione dell\u0026rsquo;ICO sulla causa va letta lentamente: «while Advanced had installed multi-factor authentication across many of its systems, the lack of complete coverage meant hackers could gain access». È stata anche la prima sanzione emessa dall\u0026rsquo;ICO contro un responsabile del trattamento invece che contro l\u0026rsquo;organizzazione a cui appartenevano i dati.\nNell\u0026rsquo;ottobre 2025 la stessa autorità ha multato Capita per 14 milioni di sterline per l\u0026rsquo;attacco del 2023 che ha sottratto le informazioni personali di 6,6 milioni di persone. Un file malevolo è arrivato sul dispositivo di un dipendente il 22 marzo 2023. Un allarme ad alta priorità è scattato entro dieci minuti. Il dispositivo non è stato messo in quarantena per 58 ore, contro un tempo di risposta obiettivo di un\u0026rsquo;ora, e l\u0026rsquo;ICO ha rilevato che il Security Operations Centre «was understaffed, and in at least six months before the incident fell well below the target response times for responding to security alerts», insieme a penetration test e valutazioni del rischio inadeguati.\nLeggi cosa hanno in comune queste due conclusioni. Non un avversario astuto. Non uno zero-day. Non qualcosa che nessuno avrebbe potuto vedere. Un\u0026rsquo;autenticazione a più fattori comprata ma non completata, e una coda di allarmi per cui nessuno aveva trovato il personale. Entrambe sono voci che qualcuno ha approvato e segnato in verde nei report.\nE niente di questo ha colto il settore di sorpresa. L'11 maggio 2022, tre mesi prima dell\u0026rsquo;incidente di Advanced, le agenzie di sicurezza informatica di Regno Unito, Australia, Canada, Nuova Zelanda e Stati Uniti hanno pubblicato un avviso congiunto sulle minacce ai managed service provider e ai loro clienti, perché erano «aware of recent reports that observe an increase in malicious cyber activity targeting managed service providers». La prima azione tattica dell\u0026rsquo;elenco è imporre l\u0026rsquo;autenticazione a più fattori sugli account dell\u0026rsquo;MSP che entrano nell\u0026rsquo;ambiente del cliente.\nLe agenzie di sicurezza di cinque paesi l\u0026rsquo;hanno messo per iscritto, in pubblico, e hanno nominato il controllo. Tre anni dopo un\u0026rsquo;autorità sta ancora multando gente per non averlo completato.\nNessuno di questi è una storia di piccole imprese. Eccone una. Venerdì 24 novembre 2023 CTS, un fornitore IT del settore legale, è andato giù per un incidente informatico. Il giornale della Law Society stessa ha riferito che circa 80 studi non riuscivano a concludere transazioni, con i sistemi offline e i contratti bloccati. Sono studi di conveyancing, quasi tutti piccoli, e i loro clienti erano persone nel mezzo di un trasloco. Uno di loro l\u0026rsquo;ha detto chiaramente: «This leaves us with so much uncertainty — with movers needing to be booked, days needing to be taken off work at potentially short notice and lives put on hold.» CTS ha potuto dire solo di essere «unable to give a precise timeline for full restoration».\nNessuno in quella catena ha scelto CTS. L\u0026rsquo;ha scelto lo studio, e ogni cliente a valle dello studio ha ereditato la decisione senza che glielo chiedessero mai.\nÈ questo che compri quando compri un servizio gestito.\nE come l\u0026rsquo;avresti scoperto? Nota una cosa di ogni incidente della sezione precedente. Nessuno è capitato al cliente. Sono capitati al fornitore, e i clienti stavano a valle della brutta settimana di qualcun altro.\nQuindi fai la domanda direttamente. Se subite una violazione, lo sappiamo da voi? E quanto in fretta?\nC\u0026rsquo;è una soglia legale, ed è più bassa di quanto si creda. Quando trattano dati personali per tuo conto, l\u0026rsquo;articolo 33 dice che «the processor shall notify the controller without undue delay after becoming aware of a personal data breach». Nessun numero fisso di ore. Nel frattempo tu, come titolare del trattamento, hai 72 ore per informare l\u0026rsquo;Information Commissioner da quando ne vieni a conoscenza. Leggi le due cose insieme. Ogni ora che passano a decidere se dirtelo è un\u0026rsquo;ora tolta a un orologio che corre contro di te, non contro di loro.\nE quella soglia copre solo i dati personali. Un\u0026rsquo;intrusione nella loro console di gestione, senza ancora prove che qualcosa di tuo si sia mosso, potrebbe non generare alcun obbligo di dirtelo, mentre le credenziali che raggiungono ogni macchina che possiedi stanno nelle mani di qualcun altro. È questo il buco. E non è piccolo.\nPensa a chi viene informato prima di te. I loro avvocati, per il segreto professionale. Il loro assicuratore, perché lo dice la polizza. La loro autorità di vigilanza, con l\u0026rsquo;orologio fissato per legge. Tu sei più in basso in quell\u0026rsquo;elenco di quanto vorresti, e l\u0026rsquo;incentivo a ogni passaggio è dire di meno finché non se ne sa di più.\nIl che lascia le alternative, e sono tutte peggiori. Lo scopri perché i tuoi sistemi si fermano, che è come l\u0026rsquo;hanno scoperto gli studi di conveyancing. Lo scopri perché chiama un giornalista. Oppure lo scopri perché qualcuno nota il nome del fornitore sul sito di leak di una banda di ransomware, che non è un processo di notifica, è un incidente del marketing di qualcun altro.\nQuindi mettilo nel contratto, e sii preciso, perché le clausole vaghe ricadono sulla soglia di legge. Notifica di qualsiasi incidente rilevante sulla loro rete entro un numero di ore stabilito, per iscritto, che i tuoi dati risultino coinvolti o no. Notifica se una qualsiasi credenziale con accesso ai tuoi sistemi può essere stata esposta. Notifica se compaiono su un sito di leak. Un referente nominato dalla tua parte, non una casella di posta generica.\nPoi fai la domanda che ti dice di più, e falla mentre ti stanno ancora vendendo qualcosa. Avete avuto un incidente? Cosa è successo, quando l\u0026rsquo;hanno saputo i clienti, e come l\u0026rsquo;hanno saputo? Un fornitore che ci è passato e l\u0026rsquo;ha gestito bene te ne parlerà. È la prova migliore che ha. Chi ti dice che non è mai successo o è molto fortunato, o è molto piccolo, o non sta contando niente.\nLo strumento che raggiunge tutti i clienti in una volta Nessun MSP guadagna toccando le macchine una alla volta. L\u0026rsquo;economia richiede una console che raggiunga tutto, ed è a questo che serve il software di remote monitoring and management. L\u0026rsquo;RMM sta su ogni macchina sotto contratto, gira come system, e il fornitore guida tutto da un solo login.\nUna console raggiunge ogni macchina, di ogni cliente Il vendor dello strumento Fornisce l'agente e ogni suo aggiornamento un aggiornamento firmato è fidato all'arrivo La console del fornitore Un login, tutti i loro clienti Altro cliente Agente su ogni macchina Il tuo edificio Agente su ogni macchina, in esecuzione come system Altro cliente Agente su ogni macchina La macchina si fida della console. La console si fida del vendor. Al tuo firewall è stato detto di lasciar passare tutto. La portata è il prodotto. Una console, ogni cliente, ogni macchina: ed è per questo che un attaccante che prende la console prende tutto in una volta. Rigirala e guardala dalla tua parte. Sulle tue macchine c\u0026rsquo;è un software che non hai scelto, che probabilmente non sai nominare, e di cui non hai mai visto lo storico delle patch. Per questo può fare qualsiasi cosa, a qualsiasi di loro, in qualsiasi momento.\nIl record di questi strumenti non è rassicurante. Partiamo dal 2021.\nKaseya, luglio 2021. La CISA e l\u0026rsquo;FBI hanno descritto la risposta a un ransomware «leveraging a vulnerability in the software of Kaseya VSA on-premises products — against managed service providers (MSPs) and their downstream customers». Sono stati colpiti una cinquantina di fornitori, e fino a 1.500 aziende che stavano sotto di loro, quasi nessuna delle quali aveva mai sentito parlare di Kaseya né aveva avuto voce in capitolo sulla sua presenza.\nNel gennaio 2023 la CISA, l\u0026rsquo;NSA e l\u0026rsquo;MS-ISAC hanno emesso un avviso congiunto per «warn network defenders about malicious use of legitimate remote monitoring and management (RMM) software», dopo una campagna dell\u0026rsquo;ottobre precedente in cui gli attaccanti avevano convinto con il phishing delle persone a installare ScreenConnect e AnyDesk, e poi li avevano usati per una truffa sui rimborsi ai danni dei conti bancari delle vittime. Nessuno ha dovuto violare un MSP per quello. Lo strumento funziona per loro esattamente come funziona per il fornitore.\nNel febbraio 2024 si è scoperto che ConnectWise ScreenConnect conteneva la CVE-2024-1709, che «may allow an attacker direct access to confidential information or critical systems». Ha preso 10,0. Nota la classe di debolezza: authentication bypass using an alternate path or channel, parola per parola la stessa categoria del bypass di FortiOS più sopra. Vendor diverso, prodotto diverso, stesso errore. Punteggio pieno, nel software che raggiunge ogni cliente di un fornitore.\nPoi SimpleHelp. L\u0026rsquo;avviso della CISA del giugno 2025 descrive attori ransomware «leveraging unpatched instances of a vulnerability in SimpleHelp Remote Monitoring and Management (RMM) to compromise customers of a utility billing software provider», arrivando ai «downstream customers» per una doppia estorsione. Il difetto sottostante, la CVE-2024-57727, permette a un attaccante non autenticato di prelevare «server configuration files containing various secrets and hashed user passwords» direttamente dall\u0026rsquo;host.\nNota dove cade la perdita ogni volta. Non sul vendor. Nemmeno davvero sul fornitore. Sui clienti sottostanti, che non hanno mai comprato lo strumento, a cui non è mai stato detto quale fosse, e che non hanno avuto alcuna voce su quando veniva aggiornato.\nUn\u0026rsquo;avvertenza su queste fonti, perché conta. Sono avvisi americani, e questo perché la CISA pubblica i dettagli degli incidenti mentre l\u0026rsquo;NCSC in genere non fa nomi. È una differenza di trasparenza, non di condotta. Gli strumenti sono gli stessi strumenti, dallo stesso catalogo, e una piccola azienda di assistenza IT in questo paese sta facendo girare ScreenConnect o SimpleHelp o uno dei loro concorrenti sulle tue macchine oggi pomeriggio.\nQuindi chiedi quale sia. Chiedi quale versione, quando è stata aggiornata l\u0026rsquo;ultima volta, chi può accedere alla console, se ogni account ha l\u0026rsquo;autenticazione a più fattori, e qual è il piano la prossima volta che uno di questi esce con un dieci.\nPoi fanne un\u0026rsquo;altra, perché la risposta ti dice qualcosa che le altre non dicono. Funziona su IPv6?\nÈ una domanda legittima nel 2026 e pesa più di quanto sembri. Se lo strumento di gestione parla solo IPv4, allora IPv4 è quello che la tua rete deve tenersi: non perché ne abbia bisogno la tua attività, ma perché ne hanno bisogno i loro strumenti. È il piano di indirizzamento fissato dal software di un fornitore invece che dai tuoi requisiti, e stai pagando ogni mese gli indirizzi che lo rendono possibile. Un lavoratore remoto su una connessione mobile potrebbe benissimo essere già su una rete solo IPv6, e in quel caso l\u0026rsquo;intero meccanismo si regge su una traduzione mantenuta da qualcun altro.\nE se la risposta è che non hanno mai controllato, hai saputo la cosa che stavi davvero chiedendo.\nPrima però una più semplice, che si dimentica in tutti i discorsi sulla sicurezza. Che carico mette l\u0026rsquo;agente sulla macchina, e dove sono le prove?\nLa risposta che riceverai è «trascurabile». Quello è un aggettivo. Quello che vuoi è un numero, misurato su hardware come il tuo invece che copiato da una scheda tecnica: CPU media e di picco, memoria residente, attività del disco durante una scansione di inventario o di patch, e traffico di rete giornaliero. Preso sulla macchina più vecchia del parco invece che sulla più nuova.\nE misura tutto lo stack, non un agente da solo. Gestione remota, antivirus, rilevamento sugli endpoint, client di backup, monitoraggio, gestione degli asset. Ogni vendor dice meno dell\u0026rsquo;uno per cento, sono sei, e la persona che deve davvero lavorare su quel portatile è quella che scopre quanto fanno sei insieme. Vicino a zero è l\u0026rsquo;obiettivo giusto. Le prove sono l\u0026rsquo;unico modo per stabilirlo.\nChiedi i numeri prima del rollout, e chiedi di prendere i tuoi dopo su una macchina che scegli tu. Un fornitore sicuro dei suoi strumenti offre entrambe le cose senza bisogno di insistere.\nUn\u0026rsquo;altra sullo strumento in sé, ed è quella che alla gente sembra più strana finché non ci pensa bene. Vieni informato quando l\u0026rsquo;agente si aggiorna sulle tue macchine?\nL\u0026rsquo;agente è il software con i privilegi più alti della tua infrastruttura. Gira come system, su tutto, e cambia versione ogni volta che il fornitore o il vendor decidono che deve farlo. Del software viene installato su tutta la tua azienda da una terza parte, in silenzio, e nella maggior parte dei contratti nessuno ti dice che è successo.\nOra metti questo accanto a quello che è andato storto davvero con Kaseya. Un aggiornamento malevolo spinto lungo un canale di gestione fidato verso ogni macchina in una volta. Da dove sei seduto tu, quel giorno, è indistinguibile da un normale aggiornamento dell\u0026rsquo;agente: stesso canale, stessi privilegi, stesso silenzio. L\u0026rsquo;unica differenza è l\u0026rsquo;intenzione. E l\u0026rsquo;intenzione non è qualcosa che puoi osservare.\nQuindi chiedi le notifiche di cambio versione, chiedi chi approva un aggiornamento dell\u0026rsquo;agente e se viene testato da qualche parte prima di arrivare a te, e chiedi quella che conta di più: cosa ti direbbe che è avvenuta una distribuzione che non doveva avvenire? Se la risposta onesta è niente, allora il controllo su cui ti stai appoggiando è la vigilanza del fornitore stesso, che è proprio l\u0026rsquo;argomento di tutta questa sezione.\nE le chiavi che la aprono Poi c\u0026rsquo;è quello che apre la console. Riceve ancora meno attenzione della console stessa.\nUn MSP detiene credenziali amministrative per ogni cliente in portafoglio. È il lavoro: è tutto il prodotto. Quindi lo standard applicato alle sue credenziali dovrebbe essere più alto di quello che imposta per le tue, e in pratica è regolarmente più basso. Account condivisi, perché login individuali per dodici ingegneri su duecento tenant sono una seccatura. Password in una cassaforte che tutto il service desk può leggere. Chiavi SSH senza passphrase su portatili che tornano a casa in treno. Account break-glass che nessuno tocca da quando la persona che li ha creati ha lasciato l\u0026rsquo;azienda.\n«Usiamo l\u0026rsquo;MFA» è dove quella conversazione di solito si ferma, e non dovrebbe, perché le sue forme non sono uguali. La CISA le classifica dalla più forte alla più debole: FIDO/WebAuthn e basate su PKI in cima, che chiama «the gold standard»; password monouso via app e notifiche push sotto, «vulnerable to push bombing attacks as well as user error»; e gli SMS in fondo, che «should only be used as a last resort MFA option». Solo la riga in cima resiste al phishing. Tutto quello che sta sotto può essere inoltrato, sfinito o intercettato mentre la persona che approva crede di fare un login normale.\nAnche gli attaccanti hanno letto quel documento. L\u0026rsquo;avviso della CISA su Scattered Spider dice che il gruppo «targets large companies and their contracted information technology (IT) help desks». Non il cliente. L\u0026rsquo;help desk che può reimpostare le credenziali del cliente. È molto più facile, e ti dà tutti in una volta.\nQuindi la domanda è più stretta del se usano l\u0026rsquo;MFA. Ogni account che può raggiungere i tuoi sistemi è su un token hardware, un token e non un\u0026rsquo;app, e cosa succede quando qualcuno chiama il service desk alle undici di sera dicendo di essere un ingegnere che è rimasto chiuso fuori?\nLa soluzione qui è insolitamente semplice, ed è questo che rende difficile perdonarne l\u0026rsquo;assenza. Google ha detto a KrebsOnSecurity nel 2018 di «has not had any of its 85,000+ employees successfully phished on their work-related accounts since early 2017», da quando ha cominciato a richiedere chiavi di sicurezza fisiche invece di password e codici monouso. Non meno incidenti. Nessuno. Lo stesso articolo nota che la chiave base costava al dettaglio venti dollari.\nOra riporta questo a un managed service provider. Non devono dare chiavi al tuo personale. Devono darle ai loro ingegneri, e forse sono una dozzina quelli che detengono le credenziali che raggiungono ogni cliente in portafoglio. Una dozzina di chiavi, comprate una volta, contro un raggio d\u0026rsquo;impatto che copre ogni azienda che toccano. Una ventina di sterline l\u0026rsquo;una. Quando qualcuno ti dice che i token hardware non sono pratici, chiedi quante persone ne avrebbero davvero bisogno.\nE c\u0026rsquo;è una domanda collegata che dovresti fare sulla tua infrastruttura, perché quasi nessun cliente ci ha mai pensato. Chi detiene l\u0026rsquo;account break-glass dei tuoi sistemi? In moltissimi contratti la risposta onesta è che ce l\u0026rsquo;ha il fornitore, e tu non ne hai una copia. Non puoi entrare nella tua stessa infrastruttura senza chiamarli. Questo non è un controllo di sicurezza, è una dipendenza. Morde nei giorni peggiori invece che in quelli normali. Il giorno in cui dai disdetta. Il giorno in cui vengono comprati da qualcuno che non hai scelto. Il giorno in cui sono loro quelli compromessi e tu devi agire senza di loro.\nDovresti detenere le tue credenziali break-glass, sigillate, scritte nel contratto, e testate in una data che qualcuno possa indicare. Se il tuo fornitore è riluttante, la riluttanza stessa ti ha detto qualcosa.\nLa stessa domanda scende fino alla scrivania, ed è quella che viene dimenticata del tutto. Ogni portatile e desktop che ti hanno preparato ha una password di amministratore del BIOS, impostata durante la preparazione da qualcuno dalla loro parte. La macchina è tua. La chiave ce l\u0026rsquo;hanno loro.\nPensa a cosa governa davvero quella password. L\u0026rsquo;ordine di avvio. Il secure boot. Se la macchina si avvia o no da una chiavetta USB. Il che vuol dire se puoi reinstallare una macchina che possiedi, recuperarne una che non si avvia, passarne un lotto a qualcun altro, o cancellarle come si deve prima che escano dalla porta. Su un portatile può anche essere ciò che sta tra un ladro e il disco. Niente di esotico. È l\u0026rsquo;ordinaria amministrazione di chi possiede dei computer, e in moltissime infrastrutture il proprietario non può fare niente di tutto questo senza chiamare il fornitore.\nChiedile tutte. Ogni portatile, ogni desktop, ogni server: la password del BIOS o del firmware, il login del BMC su tutto ciò che ne ha uno, e la password del bootloader dovunque GRUB o il suo equivalente sia stato bloccato, che è la stessa serratura un livello più su ed è ciò che sta tra te e un avvio di emergenza su un server che non parte. Se sono la stessa password su tutte, vale la pena saperlo. E se la risposta è no, chiedi perché, perché le ragioni offerte sono deboli: quella onesta è che gli semplifica la preparazione, e il resto è travestito da sicurezza. Una password che non ti è permesso avere non ti protegge da nessuno. Protegge loro dal fatto che tu te ne vada.\nPoi c\u0026rsquo;è l\u0026rsquo;account con cui accedi davvero per riparare una macchina. Amministratore locale su ogni macchina Windows, root su ogni Linux, e qualcosa di equivalente su ogni switch, firewall e hypervisor dell\u0026rsquo;edificio. Due domande coprono tutto, e coprono anche le password del firmware e del bootloader qui sopra. Sono diverse su ogni macchina, e quale sistema di gestione delle password le contiene: il tuo, o il loro?\nDiverse conta più di quanto la gente si aspetti. Una sola password di amministratore locale su duecento macchine non sono duecento password, è una, e sta sul portatile meno difeso dell\u0026rsquo;azienda tanto quanto sul server della contabilità. Non è una debolezza teorica, è la mossa standard: entri da qualunque parte, leggi la password, arrivi a tutto. Microsoft fornisce la risposta di serie. Windows LAPS imposta una password diversa su ogni macchina, la ruota secondo una pianificazione, e ne fa il backup in Active Directory o nel tuo tenant Entra. La pagina di Microsoft stessa elenca come primo vantaggio la «protection against pass-the-hash and lateral-traversal attacks», e la funzione è gratuita su ogni versione supportata di Windows, senza niente da pagare in più per conservare le password nella tua directory. Quindi se la risposta è una sola password dappertutto, non è un problema di licenze e non è un problema di strumenti. Semplicemente nessuno l\u0026rsquo;ha mai attivata.\nDi chi è il sistema che tiene la password della tua macchina La soluzione comune La loro cassaforte, o quella del loro strumento Ogni password di amministratore della tua azienda tenuta da un'azienda dove non hai un account Le tue macchine Server, portatili, switch, firewall, hypervisor Il registro di chi le legge è loro Non puoi verificare dove non puoi entrare Revocarlo vuol dire chiedere per favore, al momento peggiore La soluzione che vuoi La tua directory, o la tua cassaforte Una password diversa su ogni macchina, ruotata, depositata dove arriva il tuo controllo accessi Le stesse macchine Al fornitore l'accesso, non la custodia Il registro di chi legge cosa è tuo Lo vedi oggi, senza chiedere a nessuno Puoi revocarlo un martedì pomeriggio Una sola password di amministratore locale su duecento macchine non sono duecento password. È una, e sta sul portatile meno difeso dell'azienda tanto quanto sul server della contabilità. Microsoft fornisce la risposta gratis, e mette la password nella tua directory invece che nella loro. Stesse macchine, stesse password, due risposte diverse su chi le detiene e su chi può vedere quando una viene letta. Di chi è il sistema è il punto su cui insistere, e nota dove LAPS mette la password per default: nella tua directory, sotto il tuo controllo degli accessi, con la tua registrazione di chi l\u0026rsquo;ha letta. È la forma che vuoi su tutto. La credenziale della tua macchina vive in qualcosa che possiedi tu, e al tuo fornitore viene concesso l\u0026rsquo;accesso: un accesso che puoi vedere, e revocare un martedì pomeriggio senza chiedere il permesso.\nL\u0026rsquo;altra forma è quella comune. Le password stanno nel loro password manager, o nella cassaforte per gli accessi privilegiati attaccata al loro strumento di gestione remota, e tu non hai un login. Allora ogni password amministrativa della tua azienda è detenuta da un\u0026rsquo;azienda presso cui non hai un account, il registro di chi ne ha letta una è loro, e il giorno in cui il rapporto si guasta stai chiedendo per favore le chiavi di macchine che possiedi.\nQuindi fai la domanda successiva, e falla adesso invece che alla riunione di uscita. Come arrivano queste nel nostro sistema? Ci sono tre risposte oneste. Spostate il deposito nella nostra directory o nella nostra cassaforte, e prendetevi un accesso delegato. Oppure dateci oggi l\u0026rsquo;accesso in lettura alla vostra, con un\u0026rsquo;esportazione che possiamo lanciare da soli, in un formato che la nostra cassaforte accetti. Oppure consegnateci una copia sigillata a intervalli regolari, datata, che apriamo e testiamo. «È tutto nel nostro sistema e potete averlo quando ve ne andate» non è nell\u0026rsquo;elenco, perché il giorno in cui te ne vai è il giorno in cui hanno meno motivi per sbrigarsi in qualsiasi cosa.\nE chiedi cosa succede a quelle password dopo. Una credenziale che i loro ingegneri conoscono da quattro anni non diventa sicura con una mail che dice che è sparita. Ognuna va ruotata all\u0026rsquo;uscita, da te, su macchine di cui ora detieni la password del firmware.\nE poi la versione in tempo reale di tutto questo. Vieni informato quando viene letta una password di uno dei tuoi sistemi?\nNon un registro che tengono loro e che potrebbero mostrarti se chiedessi. Un messaggio che arriva dalla tua parte: quale credenziale, quale ingegnere, quale ticket, e quando. La capacità non è in dubbio da nessuna parte: ogni cassaforte degna del nome registra un prelievo, e il deposito di Microsoft stessa lo fa nel tuo tenant, dove il recupero di una password viene scritto nell\u0026rsquo;audit log di Entra come «Recover device local administrator password» a carico dell\u0026rsquo;account che l\u0026rsquo;ha fatto. Quindi l\u0026rsquo;unica vera domanda è se quella registrazione punta da qualche parte che tu puoi vedere.\nChiedi, e se la risposta è no, chiedi perché. Qui da qualche parte c\u0026rsquo;è un no onesto: un avviso su ogni prelievo in un\u0026rsquo;infrastruttura trafficata scatterebbe quaranta volte al giorno e smetteresti di leggerlo entro mercoledì. Questo ha una risposta, invece di essere la fine della conversazione. Avvisa su quelli che dovrebbero essere rari: l\u0026rsquo;account di amministratore di dominio, le credenziali break-glass, le password del firmware e del bootloader, le chiavi di ripristino. E avvisa su qualsiasi lettura senza un numero di ticket allegato, perché quella è o una registrazione sciatta o esattamente la cosa di cui vuoi sentir parlare, e nessuna delle due è ben servita se la scopri alla revisione trimestrale.\nCosa possono fare una volta dentro Un\u0026rsquo;altra ancora, ed è quella che più spesso riceve uno sguardo vuoto. Vieni informato quando uno dei loro ingegneri entra nei tuoi sistemi?\nNon un registro che tengono loro. Una notifica che ricevi tu: chi è entrato, quando, per quanto tempo, e per quale ticket. Chiedila, e se la risposta è no, chiedi perché.\nC\u0026rsquo;è un precedente, e sta dentro i prodotti che ti rivendono. Il Customer Lockbox di Microsoft obbliga un ingegnere Microsoft a chiedere la tua approvazione esplicita prima di poter raggiungere i tuoi contenuti in un caso di supporto. Google pubblica i log di Access Transparency del proprio personale che tocca i tuoi dati, e Access Approval li obbliga a chiedere prima. Quindi i più grandi fornitori del pianeta, con accessi molto più ristretti di quelli del tuo fornitore, hanno costruito flussi di approvazione e log di accesso per i propri dipendenti, e ti consegnano la registrazione.\nIl tuo MSP ha l\u0026rsquo;amministratore di dominio. Chiedi cosa ti consegna.\nE c\u0026rsquo;è un motivo più duro della responsabilità. Una notifica che arriva dalla tua parte è l\u0026rsquo;unico segnale indipendente che avrai mai che le loro credenziali vengono usate da qualcuno che non è loro. Se un attaccante entra da un service desk, ogni log che lo mostrerebbe sta dentro l\u0026rsquo;organizzazione appena compromessa. Uno che arriva nella tua casella di posta sta fuori.\nAncora un livello più giù, sulla macchina stessa. Lo strumento remoto può collegarsi al desktop di qualcuno senza che quella persona acconsenta?\nPer un server alle tre del mattino, l\u0026rsquo;accesso non presidiato è tutto il punto e nessuno di sensato obietta. Per una macchina a cui qualcuno è seduto, con la posta aperta e il suo lavoro sullo schermo, è un atto diverso. Ogni prodotto serio di gestione remota può essere impostato per chiedere prima di collegarsi, per mostrare un indicatore visibile mentre una sessione è attiva, e per permettere alla persona di rifiutare. Se il tuo fa qualcosa di tutto questo è un\u0026rsquo;impostazione di configurazione, e l\u0026rsquo;impostazione l\u0026rsquo;hanno scelta le persone a cui conviene.\nQuindi fai tre domande, e tienile separate. I vostri ingegneri possono raggiungere un desktop del personale senza nessuna richiesta? La persona seduta lì vede qualcosa mentre qualcuno è collegato? Può rifiutare?\nSe la prima è sì e le altre due sono no, non è un vincolo tecnico. È un default che nessuno ha rivisto, su un prodotto comprato dalla parte che ne beneficia. Ed è anche una cosa da mettere davanti a chi si occupa della protezione dei dati nella tua organizzazione, perché qualcuno che guarda lo schermo di un dipendente a sua insaputa è una decisione che dovrebbe avere un nome accanto.\nPoi la domanda che decide se qualcosa di tutto questo è dimostrabile dopo. I loro ingegneri vengono registrati mentre lavorano sui tuoi sistemi?\nLa registrazione delle sessioni non è esotica e non è una grande richiesta. È una funzione di punta di ogni prodotto per gli accessi privilegiati sul mercato, il che significa che il tuo fornitore potrebbe benissimo pagarla già senza averla mai attivata. Una sessione registrata ti dà un video, o un log di tasti e comandi, o entrambi, legati a un ingegnere con nome e cognome e a un numero di ticket. È così che appare la responsabilità quando è reale invece che promessa: non una garanzia che gli ingegneri si comportano bene, ma una registrazione che lo mostrerebbe se uno non lo facesse.\nQuindi chiedi se è attiva, e poi chiedi come ci arrivi, perché una registrazione che non puoi ottenere non è una prova, è una voce di corridoio. Ci sono tre risposte che vale la pena avere, in ordine decrescente. Le registrazioni finiscono in uno storage che possiedi tu, scritte mentre vengono fatte. Oppure hai accesso in lettura al loro sistema oggi, con un\u0026rsquo;esportazione che puoi lanciare da solo. Oppure c\u0026rsquo;è una procedura di richiesta con un tempo di risposta dichiarato, in ore, per iscritto, nel contratto, che hai testato almeno una volta su una sessione normale invece che per la prima volta nel mezzo di una lite.\nQuello che non vuoi è l\u0026rsquo;accordo comune: registrazioni detenute solo dal fornitore, conservazione decisa dal fornitore, cancellazione a discrezione del fornitore. È un controllo che funziona perfettamente fino al giorno in cui serve contro il fornitore. Quindi chiedi chi può accorciare la conservazione, chi può cancellarne una, e se anche guardare una registrazione viene registrato. E chiedi cosa succede a tutto quanto il giorno in cui te ne vai.\nSii onesto anche sull\u0026rsquo;altro lato, perché c\u0026rsquo;è. La registrazione di un ingegnere che ripara un portatile è anche la registrazione di quello che il tuo personale aveva su quello schermo, e ogni tanto di una credenziale digitata in bella vista. Le registrazioni sono sensibili di per sé e vogliono lo stesso trattamento della cassaforte: cifrate, con accesso controllato, registrate quando vengono viste, conservate per un periodo dichiarato e non di più. Un fornitore che ti solleva la questione prima che la sollevi tu ha pensato al problema. Uno che non ci ha mai pensato ti ha detto qualcosa anche lui.\nLo stesso strumento quasi certamente sposta file, in entrambe le direzioni. Chiedi se lo fa, e poi chiedi cosa ci è stato messo intorno.\nIn uscita è quella che nessuno prezza. Un trasferimento sul canale di gestione è cifrato, fidato, e sta fuori da ogni controllo che hai già pagato: la prevenzione della perdita di dati, il monitoraggio del traffico in uscita, la policy sulle chiavette USB. Chiunque abbia accesso alla console può prendere una copia di qualsiasi cosa su qualsiasi macchina, e nella maggior parte delle installazioni non ce n\u0026rsquo;è nessuna traccia che ti verrà mai mostrata.\nIn entrata è come sono successi davvero gli incidenti visti prima in questo articolo. Spingere un file su ogni endpoint in una volta non è un difetto di questi prodotti, è la funzione di punta. Il ransomware l\u0026rsquo;ha semplicemente usata nel modo in cui era stata costruita per essere usata.\nQuindi chiedi se il trasferimento di file è abilitato, se può essere disattivato sulle macchine che non ne hanno mai bisogno, se ogni trasferimento viene registrato con il file, la direzione, la macchina e l\u0026rsquo;ingegnere, e se quel registro arriva a te, o si unisce agli altri nella loro casella di posta.\nE per ultima su questo, perché è quella che a nessuno viene in mente di fare. Cosa raccoglie davvero l\u0026rsquo;agente, e cosa ne succede?\nQuesti strumenti raccolgono molto più di un livello di patch. Inventario hardware e software, log degli eventi, telemetria delle prestazioni, spesso registrazioni di sessione e screenshot, a volte molto di più a seconda di cosa è attivo. È un quadro dettagliato di come funziona la tua azienda e di cosa fa il tuo personale tutto il giorno. E lascia i tuoi locali in continuazione.\nQuindi chiedi cosa viene raccolto, dove viene conservato e sotto quale giurisdizione, per quanto tempo viene tenuto, e chi lo può vedere, perché la risposta di solito è il fornitore e il vendor dello strumento, che è una seconda azienda che non hai mai scelto e con cui non hai alcun contratto. Chiedi se qualcosa viene usato per altro oltre che per assisterti: analisi di prodotto, benchmark, addestramento di modelli. Chiedi cosa succede a tutto quanto il giorno in cui il contratto finisce, e fattelo mettere per iscritto invece che in una conversazione.\nE nota di chi sono i dati. Registrazioni sul tuo personale e sui tuoi sistemi, detenute da qualcuno che le tratta per tuo conto, è una frase con degli obblighi attaccati, e gli obblighi sono tuoi, non loro.\nIl chip che risponde quando la macchina è spenta C\u0026rsquo;è un altro livello sotto tutto questo, e vale la pena chiederne per nome. Usano Intel vPro, o l\u0026rsquo;Active Management Technology che ci sta sotto?\nSe non l\u0026rsquo;hai mai incontrata, in breve: un firmware di gestione gira su un controller separato dentro il chipset, con il suo stack di rete. Risponde mentre la macchina è spenta, purché ci siano corrente e un cavo. Può accendere la macchina, cambiare impostazioni del BIOS, montare un\u0026rsquo;immagine remota e reinstallare, e con la configurazione giusta prendere schermo e tastiera a livello hardware: prima che il sistema operativo si sia caricato, e che si carichi o no.\nCi sono ragioni vere per volerlo. Una macchina che non si avvia, un\u0026rsquo;impostazione del BIOS su un dispositivo a trecento miglia, una reinstallazione senza mandare nessuno sul posto. In una grande infrastruttura distribuita è utile e non fingerò il contrario.\nMa guarda dove sta. Sotto il sistema operativo, il che significa sotto ogni controllo che hai comprato. La tua protezione degli endpoint non lo vede, perché non gira nel sistema operativo. Il tuo firewall sull\u0026rsquo;host non lo filtra, perché il traffico non arriva mai allo stack di rete del sistema operativo: viene gestito sulle sue porte prima che chiunque altro possa dare un\u0026rsquo;occhiata. Il tuo logging non lo copre. Niente di quello che hai installato può dirti che una sessione c\u0026rsquo;è stata.\nDove si fermano i tuoi controlli, e cosa continua sotto di loro Una macchina, dall'alto in basso Le tue applicazioni e i tuoi dati Quello che l'azienda usa davvero I tuoi controlli lo vedono Protezione endpoint, logging, firewall host È la parte che stai pagando I tuoi controlli sono questo Il sistema operativo Tutto quello sopra gira qui dentro I tuoi controlli girano qui Sotto questa linea, niente di tuo sta guardando Firmware e BIOS Aggiornato dal produttore, con i suoi tempi Fuori dalle tue patch Motore di gestione, vPro o un BMC Processore, stack di rete e porte propri Risponde a macchina spenta il traffico di gestione arriva qui Tutto quello che hai comprato gira nel sistema operativo. I due livelli sotto no, e niente di installato sopra la linea può dirti che una sessione c\u0026rsquo;è stata. Nemmeno il record di sicurezza è rassicurante. La CVE-2017-5689 ha preso 9,8, e la descrizione va letta lentamente: «an unprivileged network attacker could gain system privileges to provisioned Intel manageability SKUs». La CISA ha emesso un avviso e il CERT/CC una nota di vulnerabilità. Nota quella parola, «provisioned»: dormiente non è una via d\u0026rsquo;ingresso, attivata lo è. E il firmware che la contiene non si aggiorna con le normali patch che stai pagando. Arriva dal produttore della macchina, con i suoi tempi.\nPoi c\u0026rsquo;è la parte che dovrebbe preoccupare chiunque sia responsabile di persone e non di server. Il controllo dello schermo a livello hardware significa che qualcuno può guardare un display mentre il sistema operativo non ne sa niente. Chiedi se la richiesta di consenso all\u0026rsquo;utente è imposta e se l\u0026rsquo;indicatore visibile di sessione è attivo, perché entrambi sono configurazione ed entrambi possono essere disattivati da chi l\u0026rsquo;ha attivato.\nQuindi le domande sono brevi. È attivato sulle nostre macchine, e chi l\u0026rsquo;ha fatto, e quando: faceva parte di una preparazione che nessuno ha menzionato? Quali lavori specifici ne hanno bisogno, e quante macchine hanno davvero bisogno di quei lavori? Quale rete può raggiungere le porte di gestione, ed è segmentata da tutto il resto? Il consenso è imposto, l\u0026rsquo;indicatore è acceso, e dov\u0026rsquo;è la traccia di audit? E può essere disattivato su ogni macchina che non ne ha bisogno?\nSe la risposta alla prima è «non lo sappiamo», vale la pena saperlo di per sé, perché significa che la capacità sta lì configurata da qualcuno e sorvegliata da nessuno.\nIl rischio è entrato gratis Capovolgi tutta questa parte e dice una cosa sola. Ogni capacità che contiene è arrivata come una comodità ed è stata prezzata come tale. L\u0026rsquo;agente che aggiorna mille macchine è la cosa che può mettere un file su mille macchine. Il chip che ti risparmia un viaggio di duecento miglia risponde quando la macchina è spenta e al tuo logging non dice niente. La comodità è stata quotata, dettagliata e approvata. La capacità è arrivata nella stessa scatola, senza prezzo. Non compare in nessun documento che ti abbiano mai mostrato.\nNiente di questo è un argomento per farne a meno. Le infrastrutture vanno aggiornate, e qualcuno deve poter raggiungere una macchina morta. È un argomento per sapere cosa c\u0026rsquo;è nell\u0026rsquo;edificio, chi ci può arrivare, da dove, e cosa servirebbe perché la persona che ha quella portata fosse qualcun altro rispetto all\u0026rsquo;azienda che ce l\u0026rsquo;ha ora. Una fattura non te lo dirà mai, perché una fattura è un elenco di quello che stai pagando. Non è un elenco di quello a cui sei esposto. A nessuno in questo accordo è mai stato chiesto di produrre il secondo.\nLa parte tre è cosa succede quando uno di questi esplode. Cosa promette davvero il contratto, chi finisce per farsi carico della perdita, come suonano le scuse, e quanto costa andarsene quando finalmente ne hai avuto abbastanza.\nIs Your MSP Lying To You — 3 parts\nIl tuo MSP ti mente per venderti prodotti premium? Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivareyou are here Quando si rompe, chi se ne fa davvero carico? Fonti Consultate il 28 agosto 2026.\nGli apparati.\nCVE-2018-0141 — password di account hard-coded, Cisco Prime Collaboration Provisioning, marzo 2018. CVE-2018-15439 — Small Business Switches, un account privilegiato abilitato senza informare gli amministratori, novembre 2018. CVE-2023-20101 — Cisco Emergency Responder, credenziali root statiche che non possono essere cambiate né eliminate, ottobre 2023. Der Spiegel, 29 December 2013 — il catalogo ANT, che nomina Cisco e Huawei tra gli altri, dai documenti di Snowden. Der Spiegel, 29 December 2013 — dentro il TAO: interdiction, load station, e cosa succede a una spedizione dirottata. Ars Technica, 14 May 2014 — la newsletter interna dell\u0026rsquo;NSA del 2010 e le fotografie di un router Cisco a cui viene inserito un impianto, pubblicate in No Place to Hide di Glenn Greenwald. Cisco, 13 May 2014 — la risposta dell\u0026rsquo;azienda, con parole sue. New York Attorney General, 2019 — l\u0026rsquo;accordo multistatale sul software di videosorveglianza venduto a enti pubblici, e la cronologia dal 2009 al 2013. Gli apparati perimetrali.\nCISA Known Exploited Vulnerabilities catalogue — versione 2026.08.27, 1.685 voci; i conteggi per vendor in questo articolo sono un mio conteggio di quel file. CVE-2024-3400, CVE-2024-0012 — PAN-OS, GlobalProtect e l\u0026rsquo;interfaccia web di gestione. CVE-2022-40684, CVE-2018-13379 — authentication bypass di FortiOS e path traversal nella VPN SSL. CVE-2023-20198, CVE-2025-20333, CVE-2026-20316 — l\u0026rsquo;interfaccia web di Cisco IOS XE, il web server VPN dell\u0026rsquo;ASA, e una password hard-coded in Secure Firewall Management Center. CISA, Implementing Phishing-Resistant MFA — la classifica delle forme di MFA, dalla più forte alla più debole. KrebsOnSecurity, July 2018 — Google su oltre 85.000 dipendenti e nessun phishing riuscito dopo aver reso obbligatorie le chiavi di sicurezza fisiche. Joint advisory AA23-320A — Scattered Spider, e il suo prendere di mira gli help desk IT in appalto. Windows LAPS overview — una password di amministratore locale diversa per macchina, ruotata e con backup nel tuo Active Directory o tenant Entra; gratuita su ogni versione supportata di Windows. Quando va storto.\nICO, March 2025 — Advanced Computer Software Group multata per 3,07 milioni di GBP, la prima sanzione dell\u0026rsquo;autorità contro un responsabile del trattamento. La pagina sull\u0026rsquo;applicazione riporta i dettagli. ICO, October 2025 — Capita multata per 14 milioni di GBP per la violazione del 2023: l\u0026rsquo;allarme a dieci minuti, la risposta a 58 ore contro un obiettivo di un\u0026rsquo;ora, e il Security Operations Centre sotto organico. Law Society Gazette, 28 November 2023 — circa 80 studi di conveyancing incapaci di concludere transazioni dopo che il loro fornitore IT era andato giù. CISA and the FBI on the Kaseya VSA attack, July 2021 — ransomware contro managed service provider e i loro clienti a valle. Joint advisory AA23-025A, 25 January 2023 — la CISA, l\u0026rsquo;NSA e l\u0026rsquo;MS-ISAC sull\u0026rsquo;uso malevolo di software RMM legittimo. CVE-2024-1709 — authentication bypass di ConnectWise ScreenConnect, CVSS 10,0, febbraio 2024. CISA advisory AA25-163A, June 2025 e CVE-2024-57727 — attori ransomware che arrivano ai clienti a valle tramite SimpleHelp RMM senza patch. Joint advisory AA22-131A, 11 May 2022 — le agenzie di Regno Unito, Australia, Canada, Nuova Zelanda e Stati Uniti sulle minacce ai managed service provider e ai loro clienti. ","permalink":"https://blogs.damiendye.uk/it/random/is-your-msp-lying-to-you-part2/","summary":"Parte 2 di 3. Cosa viene costruito davvero una volta firmate le carte: la scatola da cui non si lasceranno dissuadere, il firewall che è la porta d\u0026rsquo;ingresso, le basi che erano proprio la cosa che hai comprato, e l\u0026rsquo;agente su ogni macchina che risponde alla console di qualcun altro.","title":"Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivare"},{"content":" Is Your MSP Lying To You — 3 parts\nIl tuo MSP ti mente per venderti prodotti premium? Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivare Quando si rompe, chi se ne fa davvero carico?you are here La parte uno parlava di come viene scritta la rosa delle opzioni. La parte due di cosa ci è stato costruito sopra. Questa parte è la mattina in cui smette di funzionare, e tutto quello che ne segue.\nChi è contrattualmente responsabile, e per quanto. Cosa si dice nella stanza quando la risposta è nessuno. Cosa fa invece un fornitore che vale la pena tenere. E cosa serve per lasciarne uno che non lo vale, che si rivela la parte che nessuno pianifica finché non gli serve quella settimana stessa.\nCosa ha comprato davvero il sovrapprezzo Le prove sono nella parte due e non ti ci riporto attraverso. Dalle per acquisite: l\u0026rsquo;opzione costosa non ha comprato competenza, non ha completato le basi, e non ti ha dato una scatola più difficile da violare.\nE allora a cosa sono legati i soldi?\nNon al silicio, che costa meno ogni anno. Non agli indirizzi. Non alle ore di ingegneria, in un settore che in due anni ha tagliato di quasi un terzo la spesa in formazione. Il sovrapprezzo è legato al canale: un vendor abbastanza grande da gestire livelli di partnership, rebate, registrazione delle trattative e una rete di distributori, il che vuol dire una fila di persone che vengono pagate tutte prima che venga costruito qualcosa, e ognuna di loro sulla tua fattura.\nQuesta è la metà di chi vende, e da sola non spiega granché. Molti acquirenti sono perfettamente capaci e firmano lo stesso. Quindi ecco l\u0026rsquo;altra metà, ed è la più scomoda.\nIl sovrapprezzo compra copertura. Non per l\u0026rsquo;azienda. Per la persona che firma.\nMettere dentro il marchio famoso è difendibile in un modo in cui scegliere quello aperto non lo è mai. Se il firewall leader di mercato viene violato, è stato violato anche quello di tutti gli altri, e sei stato sfortunato. Se viene violata la cosa che hai messo insieme tu, l\u0026rsquo;hai scelta tu, e ti verrà chiesto perché. L\u0026rsquo;esito per l\u0026rsquo;azienda è lo stesso. La conseguenza per la persona no, e ogni acquirente sopra un certo livello lo capisce senza che nessuno debba dirlo ad alta voce.\nE così il cerchio si chiude. Chi vende viene pagato di più per consigliare l\u0026rsquo;opzione costosa. Chi compra è personalmente più al sicuro se la accetta. Nessuno dei due agisce mai contro i propri interessi, e l\u0026rsquo;unica parte che porta il costo di questo accordo è l\u0026rsquo;azienda per cui lavorano entrambi.\nÈ questa la risposta alla domanda da cui è partita la serie, ed è peggio che mentire. Un bugiardo sa qual è la verità. Questo accordo non ha bisogno che qualcuno la sappia. Ha solo bisogno che la rosa delle opzioni continui a uscire nello stesso modo, e così succede.\nI report che non ricevi mai Ogni voce ricorrente in una fattura di servizi gestiti dovrebbe produrre un documento. La maggior parte non produce niente, e quasi nessuno lo chiede.\nPrendi il patching dell\u0026rsquo;infrastruttura, la voce che sta sopra quella dei desktop. Il modo onesto di aggiornare un parco macchine è un playbook, Ansible o qualunque altra cosa, tenuto in un posto dove puoi vederlo, eseguito a calendario, che lascia un output dietro di sé. Quindi chiedi di vedere il playbook, e chiedi di vedere il log delle esecuzioni. In moltissimi contratti non esiste né l\u0026rsquo;uno né l\u0026rsquo;altro. Gli aggiornamenti sono manuali quando avvengono, avvengono quando qualcuno se ne ricorda, e la voce viene fatturata ogni mese comunque. Quella che ti hanno venduto come automazione è un promemoria in un calendario.\nCosa dovrebbe produrre ogni voce della fattura IN FATTURA IL DOCUMENTO CHE LO PROVA COSA ARRIVA DI SOLITO Patching Il playbook, e il log di esecuzione tenuto dove puoi leggerlo, eseguito a calendario Una percentuale di conformità Backup Un test di ripristino, datato cosa è tornato, su cosa, in quanto, chi l'ha verificato Un report pieno di spunte verdi Monitoraggio Gli alert, mandati anche a te dritti dal sistema, a calendario, non ritoccati Una dashboard, curata ogni mese Documentazione Registrazioni nei tuoi sistemi il tuo IPAM, il tuo database asset, il tuo wiki Un'esportazione, con i loro tempi Un backup che nessuno ha ripristinato non è un backup. È un'ipotesi su un backup. Chiedi il test di ripristino più recente. La risposta, o la pausa prima, è tutta la revisione. Ogni voce ricorrente dovrebbe lasciare dietro di sé un documento. Quasi tutte lasciano una percentuale, una spunta verde o niente del tutto. Poi i backup. Sono il caso peggiore, perché è la voce in cui la gente crede di più.\nRiceverai un report sui backup. Spunte verdi, job completati, byte scritti, tutto che arriva ogni settimana e niente che venga letto. Quel report non è quello che conta. Un backup che nessuno ha mai ripristinato non è un backup. È un\u0026rsquo;ipotesi su un backup.\nIl documento che vuoi è un test di ripristino. Cosa è stato ripristinato, su quale hardware, quanto ci è voluto dall\u0026rsquo;inizio alla fine, e chi ha aperto i dati dopo e ha confermato che erano proprio i dati. Chiedi il più recente.\nPoi chiedi di nuovo la stessa cosa per la copia offline, perché è un\u0026rsquo;affermazione separata e richiede una prova separata. Tutti dicono di averne una. Chiedi di fartela vedere, i supporti, dove si trovano, la data dell\u0026rsquo;ultima scrittura, chi ha le credenziali, e chiedi quando è stato fatto l\u0026rsquo;ultimo ripristino da quella copia invece che dal sistema di backup attivo. Sono supporti diversi in formati diversi, e testare l\u0026rsquo;uno non dimostra assolutamente niente sull\u0026rsquo;altro. La copia offline è quella che sopravvive a una brutta settimana, ed è quella che con meno probabilità è mai stata riletta. Chiedi ogni quanto si fanno, su quali sistemi, e se qualcuno dalla tua parte ha mai visto il risultato. In molti contratti non è mai stato fatto affatto, perché farlo costa una giornata di lavoro di qualcuno e nessuno la fattura.\nC\u0026rsquo;è una domanda che viene prima di tutto questo, e decide se il resto significa qualcosa. Questi report arrivano a te, o solo a loro?\nIl più delle volte li genera lo strumento, finiscono nella casella del fornitore, qualcuno li legge se ha tempo, e a te lo dicono quando c\u0026rsquo;è un problema. Questa non è responsabilità. È un\u0026rsquo;autovalutazione con una fattura allegata, e ti chiede di fidarti della loro parola proprio sulla cosa per cui li paghi.\nQuindi chiedi che i report arrivino anche a te. Direttamente dal sistema, a calendario, in qualunque forma li sputi fuori lo strumento: non una slide montata dalla persona che viene misurata, e non una dashboard verde curata per la riunione mensile. I backup riusciti e, ancora di più, quelli falliti. L\u0026rsquo;esecuzione delle patch e cosa ha saltato. Volumi di alert e tempi di risposta rispetto all\u0026rsquo;obiettivo. Il test di ripristino quando avviene, e l\u0026rsquo;elenco delle eccezioni com\u0026rsquo;è adesso.\nNon devi leggerli tutti. Devi poterlo fare, e loro devono sapere che puoi. È tutto qui il meccanismo, ed è la differenza tra fidarsi di qualcuno ed essere in condizione di controllare.\nE se la cosa risulta difficile, chiedi perché. Ogni report di quell\u0026rsquo;elenco esiste già e viene già mandato da qualche parte. Aggiungere un secondo destinatario è una riga in una lista di distribuzione, non un progetto. Qui la riluttanza non è un problema tecnico, e vale più di quanto sarebbe valsa la risposta.\nC\u0026rsquo;è una versione più grande della stessa domanda, ed è quella che decide se potrai mai controllare qualcosa da solo. Dove sta la documentazione?\nChiedi se registreranno la tua infrastruttura nei tuoi sistemi, il tuo IPAM, il tuo database degli asset, il tuo wiki, o nei loro. La maggior parte dirà nei loro, e verrà presentata come efficienza. I loro strumenti, i loro modelli, il loro processo, niente da gestire per te.\nGuarda cosa fa questo accordo. Il piano di indirizzamento, lo schema di rete, il registro degli asset, i runbook e le chiavi di licenza sono tutti documenti della tua azienda, creati con i tuoi soldi, che descrivono hardware tuo. Tenuti in un posto dove non puoi vederli. Non puoi verificare quello che non puoi leggere, quindi non hai modo di sapere se la documentazione corrisponde all\u0026rsquo;infrastruttura. E la documentazione si allontana dalla realtà di continuo, il che è normale e perdonabile, ma una deriva invisibile è il modo in cui lo scopri durante un incidente invece che durante una revisione.\nPoi c\u0026rsquo;è cosa succede alla fine, su cui torna la sezione su come andarsene. La documentazione nei tuoi sistemi è già tua, già aggiornata, già in un formato che usi. La documentazione nei loro è un\u0026rsquo;esportazione, con i loro tempi, nella forma che offre il loro strumento, di solito un PDF di qualcosa che era un database.\nQuindi fai la domanda in modo chiaro, e chiedi l\u0026rsquo;accesso in lettura oggi, non in linea di principio. Un fornitore che lavora nei tuoi sistemi ha preso una decisione che a lui costa poco e a te dà molto, e te lo dirà. Uno che insiste per tenere il quadro nei propri strumenti ha preso la decisione opposta, e vale la pena chiedere quale parte ne abbia trovato attraente.\nQuel vuoto non è accademico. Ogni incidente della parte due ci cade dentro. I clienti di Kaseya, gli ottanta studi di conveyancing, i fondi pensione dietro Capita: per ognuno di loro l\u0026rsquo;unica domanda che contava quel giorno era se il ripristino funzionava. È lì che un report che nessuno aveva chiesto diventa l\u0026rsquo;unico documento nell\u0026rsquo;edificio che valga la pena avere.\nSe il tuo fornitore non sa produrre un test di ripristino, non stai comprando backup. Stai comprando copie, e scoprirai quale delle due la mattina peggiore dell\u0026rsquo;anno.\nNessuno ne risponde Comprare un posto dove scaricare la colpa merita più della frase che ha avuto nella parte uno, perché la responsabilità è proprio la cosa che tutto questo accordo è costruito per aggirare. Non moralmente. Contrattualmente.\nComincia dallo SLA, l\u0026rsquo;accordo sul livello di servizio, e leggi cosa promette davvero. Quasi sempre è un tempo di risposta. Quattro ore per la presa in carico, otto per l\u0026rsquo;intervento, roba del genere. Rispondere è interamente sotto il loro controllo, quindi si può promettere senza rischi. Risolvere no, quindi non si promette. Cerca una riga che li impegni su un risultato, il servizio funziona, i dati tornano, il negozio vende, e nella maggior parte dei contratti non ce n\u0026rsquo;è una da nessuna parte.\nPoi trova il tetto di responsabilità. Ci sarà, e di solito sono i canoni che hai pagato nei dodici mesi precedenti, a volte meno. Quindi la cosa peggiore che può capitare a loro è restituirti quello che gli hai già dato. La cosa peggiore che può capitare a te è l\u0026rsquo;azienda. Quei due numeri non stanno nello stesso universo, e il divario tra loro è la tua reale posizione di rischio.\nCosa promette l'accordo, e cosa rischia di perdere ciascuna parte A cosa li impegna davvero l'accordo Prendere in carico il guasto entro quattro ore Promesso Intervenire entro otto ore Promesso Il servizio torna a funzionare, i dati tornano, il negozio vende Non promesso E cosa perde ciascuna parte nel giorno peggiore Loro limitato a circa dodici mesi dei canoni che hai già pagato Tu gli ordini, gli stipendi, i clienti, l'azienda Rispondere è sotto il loro controllo, quindi viene promesso. Risolvere no, quindi non viene promesso. Le due barre sono lo stesso contratto, visto dai due capi. La rivendita sposta il resto a monte. Se l\u0026rsquo;hyperscaler è giù è colpa dell\u0026rsquo;hyperscaler. Se il firewall esce con un dieci è colpa del vendor. Se un installer trojanizzato arriva firmato e distribuito come un normale aggiornamento, anche quella è colpa del vendor. Ognuna di queste cose è vera, e nessuna ti serve a niente, perché con nessuna di quelle aziende hai mai avuto un rapporto. Ne avevi uno con l\u0026rsquo;impresa che le ha scelte per conto tuo e ci ha preso un rebate.\nE sotto tutto questo sta il meccanismo più silenzioso di tutti. Non puoi mancare un requisito che non è mai stato scritto. Il documento dei requisiti che nessuno ha scritto nella parte uno non è solo sciatteria: è protezione. Nessun requisito raccolto, nessuna promessa misurabile. Nessuna promessa misurabile, nessun inadempimento. Da un progetto che nessuno ha approvato non ci si può discostare.\nGuarda cosa è successo quando la responsabilità alla fine è arrivata da qualche parte. Capita è stata multata per 14 milioni di sterline, e la multa è arrivata dall\u0026rsquo;Information Commissioner in base alla legge sulla protezione dei dati, per un alert su cui nessuno è intervenuto per cinquantotto ore. Non da un cliente, e non in base a un contratto di servizio. I soldi sono andati allo Stato. I 6,6 milioni di persone i cui dati sono usciti dalla porta, e i 325 fondi pensione che ne portano le conseguenze, non sono stati loro a promuoverla e non sono stati loro a essere pagati.\nQuindi l\u0026rsquo;accordo, da un capo all\u0026rsquo;altro. Il vendor vende un prodotto con una licenza che esclude l\u0026rsquo;idoneità a qualsiasi scopo particolare. Il fornitore vende ore con una responsabilità limitata e una promessa sui tempi di risposta. L\u0026rsquo;assicuratore prezza quello che resta. E la perdita si deposita sull\u0026rsquo;azienda che non può muoversi, che è l\u0026rsquo;unica parte della catena a cui non è mai stato concesso di escludere niente.\nTutti nella catena escludono la propria parte, e tutto finisce in un solo posto Ogni livello passa la conseguenza in basso e si tiene il margine Il vendor La licenza esclude l'idoneità a tutto Il distributore Sposta il prodotto, si prende una fetta Il fornitore Ore vendute con una responsabilità limitata L'assicuratore Prezza quello che resta L'azienda che lunedì deve aprire le porte Produce qualcosa, dà lavoro, non può muoversi in fretta ed è l'unica parte della catena che non può escludere niente Ogni livello sopra è legalmente a posto. La perdita deve comunque finire da qualche parte. Ogni livello è legalmente a posto, e ognuno viene pagato prima che si costruisca qualcosa. La conseguenza continua a viaggiare finché non raggiunge qualcuno che non può scaricarla su altri. In tutto questo c\u0026rsquo;è un test più semplice, e non serve un avvocato.\nSe un\u0026rsquo;impresa crede in quello che ha consigliato, dovrebbe essere disposta a rispondere. È questo un consiglio. Non hai comprato la scatola: chiunque abbia un sito web può venderti una scatola. Hai comprato il giudizio di qualcuno sul fatto che quella fosse la scatola giusta per te, e quel qualcuno è stato pagato per quel giudizio, e pagato di nuovo dal vendor di cui la scatola si è rivelata essere.\nQuindi quando si rompe e la risposta che torna è che il vendor ha deluso tutti, guarda cosa è appena successo. La parte che hai effettivamente comprato è stata disconosciuta. Il giudizio evapora nel momento esatto in cui viene messo alla prova, e quello che resta è un\u0026rsquo;impresa che ha fatto passare un prodotto e ci ha preso un margine al passaggio.\nNessuno chiede a un MSP di fare da garante a Microsoft. Ma c\u0026rsquo;è un\u0026rsquo;ampia distanza tra fare da garante a un hyperscaler e rispondere del proprio consiglio, e ogni altro mestiere vive da qualche parte lì in mezzo. Un elettricista che monta un quadro elettrico non può dare la colpa al produttore per averlo scelto. Un ingegnere strutturista che specifica una trave è responsabile della specifica. Rispondono del proprio giudizio, perché il giudizio era il servizio.\nQuindi chiedi di cosa il tuo fornitore è disposto a farsi carico. Non del prodotto del vendor: del proprio consiglio. La risposta, o la lunghezza della pausa prima della risposta, ti dice cosa ne pensano in privato.\nE poi è colpa tua Il contratto è la metà silenziosa di tutto questo. La metà rumorosa si presenta il giorno in cui qualcosa si rompe davvero, e ci arriva prima della soluzione.\nGuarda in che direzione viaggia la responsabilità. Verso l\u0026rsquo;esterno, in ogni direzione disponibile, e più o meno in quest\u0026rsquo;ordine. Il vendor ha rilasciato una patch difettosa. Il circuito era dell\u0026rsquo;operatore. È un problema noto e lo vedono tutti. Nessuno poteva prevederlo, detto di una falla che stava nella lista delle vulnerabilità sfruttate da abbastanza tempo da farsi crescere la barba. Il fornitore precedente l\u0026rsquo;ha lasciato così, che è una risposta giusta per sei mesi e la danno ancora al terzo anno. Poi le direzioni verso l\u0026rsquo;esterno finiscono, e ne resta una. Non hai mai approvato l\u0026rsquo;aggiornamento. Era fuori perimetro, il tuo personale ha cliccato il link, e non hai mai aperto un ticket.\nEcco la parte scomoda. Alcune di queste sono vere. Un cliente che per tre anni di fila ha rifiutato la stessa sostituzione è davvero responsabile di quella decisione, e un fornitore che lo dice è onesto con te. Quindi la domanda non è se la scusa sia esatta. È quando è stata detta per la prima volta. Un rischio messo per iscritto prima del guasto, con quanto costerebbe sistemarlo e quanto costerebbe non farlo, è un fornitore che gestisce la tua infrastruttura. La stessa frase mandata la settimana dopo è una difesa che si sta costruendo. Stesse parole, data diversa, significato opposto.\n«Non hai mai aperto un ticket» è quella su cui vale la pena fermarsi, perché non è affatto una scusa. È il modello operativo detto ad alta voce. Niente è compito di nessuno finché non te ne accorgi tu, il che fa di te il monitoraggio, e stai pagando un canone mensile a un\u0026rsquo;impresa il cui livello di rilevamento è un cliente che telefona. Una volta che hai sentito quella risposta, sai qual è il servizio.\nCe n\u0026rsquo;è una versione più attiva, e funziona molto meglio di quanto dovrebbe. Convochi una revisione per chiedere perché gli ultimi sei mesi sono andati come sono andati, e l\u0026rsquo;ordine del giorno che torna parla di tutt\u0026rsquo;altro: una questione di sicurezza urgente, una scadenza di licenze di cui nessuno aveva parlato, un avviso di fine vita su una scatola che è a fine vita da due anni ed è diventata improvvisamente pressante in queste due settimane. Viene presentata con preoccupazione sincera e un preventivo allegato, e si mangia l\u0026rsquo;ora. Esci avendo accettato di spendere soldi, e la cosa per cui avevi convocato la riunione non è mai stata detta ad alta voce.\nNota cosa ha sempre in comune la crisi fabbricata. Richiede un acquisto, lo richiede in questo trimestre, e non richiede a nessuno nella stanza di ammettere niente. L\u0026rsquo;urgenza vera ha un aspetto diverso, perché arriva con un identificativo, una data di pubblicazione, le macchine specifiche della tua infrastruttura che ne sono colpite, e quello che hanno già fatto mentre aspettavano di dirtelo. Quella inventata arriva come una scadenza del vendor e una cifra arrotondata. Chiedi quando è comparsa per la prima volta sul loro radar. Se la risposta è la stessa settimana in cui hai cominciato a fare domande scomode, non è una coincidenza e non è mai stata pensata per esserlo.\nQuindi tieni un tuo fascicolo, e cominciane uno prima che ti serva. Ogni volta che ti dicono che una cosa va bene, chiedilo per email. Ogni volta che rifiuti qualcosa, scrivi cosa ti è stato mostrato e a quanto ti è stato quotato. Ci vuole un minuto, e vuol dire che il giorno in cui diventa colpa tua puoi chiedere la data, e la risposta o esiste o non esiste. Un\u0026rsquo;impresa che fa questo lavoro come si deve ci arriva comunque prima. Aprono con: questo ci è sfuggito, ecco cosa cambiamo, e lo dicono prima che tu abbia finito di chiedere. Gli costa una frase, ed è proprio per questo che così pochi sono disposti a spenderla.\nE quando ti arriva la crisi inventata, o la colpa ricade su di te per qualcosa che nessuno ti aveva mai sottoposto, dillo nella stanza. Non come lamentela dopo e non come nota per il fascicolo. Chiedi se lo considerano professionale, se è la risposta che accetterebbero se la dessero a loro, e dove sia l\u0026rsquo;integrità in tutto questo. Qualcuno si sentirà a disagio, ed è proprio quello lo scopo della domanda. Un\u0026rsquo;impresa a cui è rimasto un po\u0026rsquo; di rispetto per se stessa la incassa, dice giusto, e il mese dopo torna diversa. Entro un minuto saprai che tipo hai seduto di fronte.\nPoi comincia a guardarti intorno comunque. Quella settimana stessa. Una brutta riunione non decide la cosa, ma lo scaricabarile non è mai stato una giornata storta. Era una decisione su di te: che gestire come ti senti costa meno che sistemare quello che hai comprato, e che lo sopporterai. Le imprese non disfano quel calcolo perché un cliente ha fatto una smorfia. Sostituire un fornitore come si deve richiede mesi che non hai ancora cominciato a spendere, e il momento per farlo è mentre sei ancora abbastanza calmo da scegliere bene, non nelle due settimane dopo il guasto che finalmente decide per te.\nFalle alla prossima riunione Niente di tutto questo ti costa nulla, e non devi essere un ingegnere per chiedere nessuna di queste cose.\nHo messo le domande in un foglio di calcolo invece che lungo la pagina: 120 domande in quindici aree, ognuna con come suona una risposta competente accanto a come suona una scappatoia, e una colonna per annotare quale delle due hai ricevuto.\n\u0026#8615; Domande per il fornitore, versione lunga msp-supplier-questions.xlsx · 26 kB Trattalo come un promemoria, non come un copione. Scorrilo, segna la dozzina che riguarda davvero il tuo contratto, e fai quelle. Nessuno regge cento domande in un\u0026rsquo;ora e impareresti meno se ci provassero. Mandalo prima della riunione invece di tirarlo fuori durante: un fornitore che fa il lavoro come si deve sarà contento del preavviso, e come prende il preavviso è già di per sé una risposta.\nUna domanda lì dentro chiede quali delle loro raccomandazioni gli fruttano un rebate, un credito, un margine o un obiettivo dal vendor. È quella che cambia la temperatura in una stanza, e non dovrebbe. Un fornitore che non ha niente da nascondere risponde dritto, perché avrebbe consigliato la stessa cosa comunque e preferisce che tu lo sappia. Guarda cosa succede quando la fai. La risposta conta meno della reazione.\nUn fornitore che fa il lavoro come si deve ha tutto questo a portata di mano. Già, oggi, senza prepararsi. I requisiti messi per iscritto, le opzioni con i costi, la riga open source nel confronto, il piano di indirizzi in dual-stack, lo strumento di gestione remota aggiornato e i rischi nel registro dove devono stare. Chiedi, e in una sola riunione scopri quale tipo stai pagando.\nE se è il fatto stesso di chiedere a turbarli, hai scoperto tutto quello che ti serviva.\nOgni cliente diventa silenzioso Tutto questo presuppone che tu possa andartene se ti serve. Vale la pena verificarlo prima che ti serva, perché andarsene è il punto in cui un contratto di servizi gestiti smette di riguardare la tecnologia.\nDai per scontato che prima o poi ti servirà. Ognuno di questi accordi scivola nella stessa direzione, chiunque sia il fornitore con cui firmi. L\u0026rsquo;attenzione che avevi mentre ti stavano conquistando si dirada una volta che l\u0026rsquo;addebito diretto è partito, e ti sistemi nei loro conti come una cifra mensile invece che come un\u0026rsquo;infrastruttura a cui qualcuno sta pensando. Nessuno si siede e decide di smettere di interessarsene. Il tecnico migliore va dove c\u0026rsquo;è rumore, le revisioni smettono in silenzio di farsi, e il tuo hardware resta su quella che era la risposta giusta l\u0026rsquo;anno in cui hai firmato, mentre il resto del mestiere va avanti senza di te.\nCapisci cos\u0026rsquo;è davvero un cliente silenzioso, perché l\u0026rsquo;espressione suona come un complimento e non lo è. Un cliente silenzioso è un cliente che nessuno ha controllato. I backup girano verdi ogni notte e nessuno ne ha mai ripristinato uno su una macchina di riserva per vederlo ripartire. La coppia in failover non è mai stata fatta passare in failover, perché farlo vuol dire prenotare un fermo e qualcuno dovrebbe esserci. Il firmware è quello con cui è uscito, il certificato l\u0026rsquo;ha rinnovato chi se n\u0026rsquo;è ricordato, e la documentazione descrive una rete dismessa due traslochi fa. Il numero di licenze non è stato guardato dall\u0026rsquo;anno in cui avevi undici dipendenti in più. Niente di tutto questo genera un ticket, quindi niente arriva sullo schermo di nessuno, e il cliente supera ogni revisione interna senza problemi perché l\u0026rsquo;unica cosa misurata è se hai telefonato.\nPoi lo scopri. Non a una revisione, perché non ce n\u0026rsquo;è stata una. Lo scopri la mattina in cui serve il ripristino, o quando il revisore chiede lo schema, o quando una cosa che girava intoccata da sei anni si ferma e nessuno rimasto nell\u0026rsquo;edificio sa cosa facesse. Un cliente silenzioso paga quanto uno impegnativo e costa molto meno da servire. È tutto qui l\u0026rsquo;incentivo, e punta lontano dall\u0026rsquo;idea che qualcuno apra mai il coperchio.\nIl consiglio che costa loro soldi Rovescia il test, e chiediti cosa dovresti effettivamente comprare. Non è l\u0026rsquo;assenza di problemi. Chiunque sa essere assente. Quello che paghi è qualcuno che conosce l\u0026rsquo;azienda abbastanza bene da presentarsi con cose che non hai chiesto: un modo di fare la chiusura mensile che smetta di andare in crisi, una licenza che paghi e che nessuno apre dall\u0026rsquo;anno prima dell\u0026rsquo;anno scorso, un modo più economico di conservare i dati, un piano per la scatola che tutti hanno tacitamente deciso di non riavviare. Dirti alcune di queste cose gli costa fatturato, ed è proprio per questo che sono il segnale onesto. Chiediti quando è stata l\u0026rsquo;ultima volta che il tuo fornitore ti ha messo davanti una raccomandazione che rimpiccioliva la sua stessa fattura.\nLa forma più comune non è uno sconto. È qualcuno che passa in rassegna quello che usi già. La maggior parte delle realtà non è a corto di software, è a corto di qualcuno che si sia mai seduto per bene davanti al software che ha: il livello di licenza che include già la funzione per cui ti stanno facendo un preventivo, il modulo pagato nel progetto originale e mai messo in uso, il flusso nel sistema contabile che eliminerebbe la doppia digitazione se qualcuno ci dedicasse due giorni, il secondo abbonamento comprato perché nessuno ha chiesto al primo fornitore se il suo prodotto facesse anche quello, la reportistica che nessuno ha mai costruito e per cui tutta l\u0026rsquo;azienda esporta in un foglio di calcolo e fa il lavoro lì. Un fornitore serio parte da quel mucchio. Cosa possiedi, cosa gli si può far fare, cosa non farà mai, e quanta parte del problema sparisce se la cosa che paghi già viene configurata come doveva essere, tutto questo prima che qualcuno apra un listino.\nIl che ti dice come intendono guadagnare con te, perché quel lavoro è di quelli scomodi. Vuol dire leggere la documentazione di qualcun altro, imparare un sistema che non rivendono e da cui non ricavano niente a conoscerlo, e sedersi con le persone che lo usano tutto il giorno per scoprire cosa succede davvero alle quattro di un venerdì. Su niente di tutto questo arriva un rebate. Ed è anche tutto quello che pensavi di comprare. E a volte la risposta alla fine è davvero un sistema nuovo, e in quel caso compra il sistema nuovo. Spendere non è il problema. L\u0026rsquo;ordine sì: cosa usi, cosa sa ancora fare, dove davvero non basta, e solo allora cosa andare a prendere. Una raccomandazione che salta i primi tre passi non è mai stata una valutazione. Era un catalogo con il tuo nome battuto in cima.\nE un fornitore che non si è mai seduto a imparare cosa fa l\u0026rsquo;azienda non può fare niente di tutto questo. C\u0026rsquo;è differenza tra sapere che hai novanta caselle di posta e sapere in quale ora di quale giorno farebbe davvero male perdere il sistema che prende gli ordini. Una è inventario, l\u0026rsquo;altra è comprensione, e solo la seconda produce consigli che valgono i soldi. Un\u0026rsquo;impresa che in tre anni non ha proposto niente, che non sa dire cosa vendi o quando cade la tua stagione di punta, che tiene le luci accese e manda la fattura lo stesso giorno ogni mese, non è un partner e ha smesso di fingere di esserlo. È un abbonamento con un numero di telefono sopra. Non uno da tenere.\nIl fallimento opposto si presenta con un abito migliore. È il fornitore che non è mai silenzioso, che ogni trimestre ha qualcosa per te, e la cui risposta a ogni domanda che hai mai fatto è tornata con un codice articolo attaccato. Sembra attenzione. Quello che separa il consiglio dalla vendita non è la quantità, e nemmeno la qualità delle slide: è se la raccomandazione è capace di tornare come lascia stare, quest\u0026rsquo;anno non ti serve niente, e quei soldi sono spesi meglio sulla cosa nell\u0026rsquo;angolo per cui nessuno ha messo a budget. Se in tutto il rapporto nemmeno una raccomandazione gli è mai costata una vendita, non ti stanno consigliando. Ti stanno facendo scorrere lungo una lista, e la parte uno parla di da dove vengono quelle liste. Un partner a volte ti dissuade dallo spendere. Per tutti gli altri sei un cliente che compra quello che gli si mostra, cioè una mucca da mungere con un service desk attaccato, e nessuno dei coinvolti deve essere disonesto perché sia esattamente quello che sta succedendo.\nLiberarsi di uno scadente Passa in rassegna quello che deve davvero succedere. Tutto. Credenziali amministrative consegnate per ogni sistema. Documentazione che descrive come è costruita l\u0026rsquo;infrastruttura, ammesso che esista. Il controllo dei nomi di dominio, e di qualunque account ospiti il DNS. Le chiavi private dei certificati. Gli abbonamenti spostati fuori dall\u0026rsquo;accordo di partnership del fornitore e dentro un tenant che sia tuo. Il loro agent rimosso da ogni macchina, da loro. E l\u0026rsquo;uscente che collabora con chi lo sostituisce, nel dettaglio, per settimane, senza essere pagato per farlo e dopo che gli è appena stato detto che ha chiuso.\nCosa deve passare di mano all'uscita, e chi lo tiene In mano all'impresa che lasci Ogni credenziale amministrativa La documentazione, se mai scritta I domini, e l'account del DNS Le chiavi private dei certificati Licenze sotto il loro accordo partner Il loro agent, su ogni tua macchina E settimane dei loro tecnici da spostare gratis Tuo, o di chi ti subentra Prima che scada il preavviso E quel giorno Gli è appena stato detto che hanno chiuso Il tecnico che conosceva la tua rete è su un lavoro che paga ancora Metà di quello che chiedi risulta a pagamento Niente di questo è sabotaggio Peggiori sono stati, meno di quell'elenco esiste da consegnare. Chi non ha mai scritto i tuoi requisiti non ha scritto nemmeno il pacchetto di consegna, e il disordine è il fossato. Quindi chiedi il pacchetto oggi, finché si va ancora d'accordo, e confrontane una pagina con una macchina in funzione. È tutto in mano all\u0026rsquo;impresa a cui è appena stato detto che ha chiuso, e niente di questo trasloco è lavoro per cui qualcuno la paga. Ora la parte che dovrebbe preoccuparti di più. Peggiore è un fornitore, più difficile diventa quell\u0026rsquo;uscita, perché le mancanze sono le stesse mancanze. Un\u0026rsquo;impresa che non ha mai messo per iscritto i tuoi requisiti non ha scritto nemmeno il pacchetto di passaggio di consegne. Un\u0026rsquo;impresa che teneva le credenziali in un vault condiviso non ha un modo pulito di darle a qualcun altro. Un\u0026rsquo;impresa senza playbook e senza test di ripristino non ha niente da consegnare se non accessi e buona fortuna. Il disordine è il fossato. Nessuno si è seduto a progettarlo così, e funziona meglio che se l\u0026rsquo;avessero fatto.\nQuindi dai per scontato che la voce sulla documentazione non regga. La documentazione è la prima cosa che resta non scritta e l\u0026rsquo;ultima che qualcuno controlla, e quello che arriva all\u0026rsquo;uscita descriverà un\u0026rsquo;infrastruttura che è andata avanti senza di essa. Quello è il caso buono. Quello cattivo è un pacchetto che sembra completo ed è sbagliato: uno schema con sopra uno switch finito in discarica due anni fa, un runbook per un server che da allora è stato ricostruito, un foglio di credenziali pieno di account con cui nessuno riesce ad accedere. La documentazione sbagliata è peggio di nessuna, perché ci agisci sopra. Nessuna, almeno, ti manda a guardare.\nPrezza l\u0026rsquo;uscita come se non sopravvivesse niente. Qualcuno percorre i rack, legge la configurazione dall\u0026rsquo;hardware in funzione, esporta le regole del firewall, gli scope DHCP e i file di zona, e scrive cosa sta girando davvero. Sono settimane di lavoro, e in un\u0026rsquo;uscita sono settimane che spendi durante il preavviso, mentre alle uniche persone che conoscono le risposte è già stato detto che hanno chiuso. Fallo adesso, invece. Chiedi il pacchetto oggi, poi prendine una pagina e confrontala con una macchina in funzione. Se regge, hai imparato qualcosa che vale la pena sapere. Se non vale nemmeno i bit usati per archiviarlo, hai imparato anche quello, e l\u0026rsquo;hai imparato con un anno per rimediare invece che con due settimane.\nQuella voce sulla collaborazione è quella che farà davvero male, ed è quella che nessuno prezza. Rileggila come una richiesta: a un\u0026rsquo;impresa che ha appena perso il cliente si chiede di passare settimane a spiegarlo alle persone che gliel\u0026rsquo;hanno portato via. Nessuno deve rifiutarsi. Il cliente finisce nella pila di quelli in uscita, il tecnico che conosceva la tua infrastruttura va su un lavoro che paga ancora, e le tue domande finiscono a chi resta. Le risposte tornano in giorni invece che in ore. La chiamata di passaggio di consegne viene fissata tra tre settimane. Metà di quello che chiedi risulta a pagamento, e l\u0026rsquo;unica persona che aveva costruito la cosa se n\u0026rsquo;è andata a marzo. Niente di tutto questo è sabotaggio. Tutto ti costa esattamente quanto ti costerebbe un sabotaggio.\nSe ne fa carico chi ti subentra, e poi te ne fai carico di nuovo tu. Il loro primo mese va a capire cosa hanno ereditato. È un lavoro di ricognizione di cui non hanno niente da mostrarti, quindi o lo prezzano onestamente e sembrano cari rispetto al rinnovo dell\u0026rsquo;uscente, o se lo accollano e cominciano il lavoro già in ritardo. Paghi in entrambi i casi. Quindi compra la collaborazione prima che ti serva. Mettila nel contratto all\u0026rsquo;ingresso invece che all\u0026rsquo;uscita: un periodo di passaggio di consegne definito, una persona con nome e cognome che lo fa, una tariffa giornaliera concordata finché vogliono ancora la tua firma, e accessi che restano attivi finché l\u0026rsquo;impresa entrante non dice che si possono togliere. Paga una sovrapposizione e considerala a buon mercato. E non arrivare mai al passaggio con il fornitore uscente che tiene l\u0026rsquo;unica chiave di qualcosa che è tuo.\nAnche le carte fanno la loro parte. Periodi di preavviso misurati in mesi invece che in settimane, date di rinnovo automatico che passano mentre stai ancora decidendo, e un passaggio di consegne prezzato come servizi professionali a una tariffa giornaliera che qualcuno fissa dopo che hai già dato disdetta. Niente di tutto questo è insolito, e niente viola alcuna regola.\nQuindi testa l\u0026rsquo;uscita finché il rapporto va bene e nessuno è arrabbiato. Chiedi il pacchetto di passaggio di consegne adesso, per iscritto, come un deliverable e non come una promessa. Chiedi chi è davvero il registrante dei tuoi domini. Chiedi se le tue licenze stanno nel tuo tenant o sotto il loro accordo di partnership, e cosa comporta spostarle. Un fornitore che fa il lavoro come si deve risponderà a tutte e tre su due piedi, perché un\u0026rsquo;impresa sicura del proprio lavoro non ha motivo di rendere difficile andarsene.\nE se le risposte sono vaghe, ricorda cosa dice la prossima sezione su a chi ti puoi lamentare.\nPer la vendita non c\u0026rsquo;è un\u0026rsquo;autorità di vigilanza A questo punto qualcosa dovrebbe averti già dato da pensare. Ogni fallimento di questa serie che è arrivato con un accertamento formale allegato è un fallimento di sicurezza. L\u0026rsquo;ICO su Advanced. L\u0026rsquo;ICO su Capita. La CISA sugli strumenti. Sulla vendita, cioè la rosa delle opzioni, il rebate, l\u0026rsquo;opzione unica, il rinnovo, non c\u0026rsquo;è niente. Nemmeno un provvedimento contro un MSP britannico.\nNon perché la vendita sia pulita. Perché nessuno ha il compito di guardarla.\nIl diritto dei consumatori si ferma alla tua porta di casa. Il Consumer Rights Act 2015 tutela i consumatori, e una società di capitali che compra un servizio gestito non è un consumatore. Il Digital Markets, Competition and Consumers Act 2024 ha dato alla CMA poteri sanzionatori diretti nell\u0026rsquo;aprile 2025, puntati dritti contro le pratiche di vendita aggressive, le informazioni ingannevoli e le clausole contrattuali palesemente squilibrate. Sono poteri a tutela dei consumatori. Il resoconto della CMA stessa sul primo anno vale la pena leggerlo per le parole tanto quanto per i numeri: quattordici indagini, due accordi transattivi, 760.000 sterline «refunded to consumers», 4,7 milioni di sterline di multe, 157 lettere di consulenza e di avvertimento. Consumatori, ogni volta. Non l\u0026rsquo;azienda manifatturiera di trenta persone che la primavera scorsa ha firmato cinque anni di servizi gestiti.\nLe telecomunicazioni sono l\u0026rsquo;unico angolo a cui un\u0026rsquo;autorità britannica si sia mai avvicinata. Mostrano come appare l\u0026rsquo;applicazione delle regole quando qualcuno ha il mandato. Nel luglio 2015 Ofcom ha multato per 200.000 sterline un piccolo fornitore di telecomunicazioni per le imprese per aver venduto in modo scorretto servizi di telefonia fissa a una base di «around 100,000 small businesses», e lo ha obbligato a risarcire i clienti coinvolti e a riscrivere i suoi materiali di vendita. Comportamento giusto, dimensione di cliente giusta, settore sbagliato, e undici anni fa.\nPer i servizi IT non esiste niente di equivalente. Fai il conto da dove sei seduto. Nessun periodo di ripensamento. Nessun ombudsman a cui rivolgerti. Nessuna autorità competente. Nessun obbligo per nessuno di dirti quanto li paga il vendor. Nessun accertamento pubblicato da cui imparare, perché non c\u0026rsquo;è nessun posto da cui un accertamento possa venire. Il contratto l\u0026rsquo;ha redatto il fornitore, e l\u0026rsquo;unico rimedio che contiene è fare causa: il che vuol dire spese, anni, e un budget legale che una piccola impresa non ha, come il fornitore sa benissimo.\nLa consulenza finanziaria aveva esattamente questo problema e l\u0026rsquo;ha affrontato. La Retail Distribution Review, la RDR, è entrata in vigore alla fine del 2012 e ha tolto le commissioni che i produttori pagavano ai consulenti. La soluzione non era complicata: dire chi paga il consulente, e impedire che il produttore del prodotto sia la risposta.\nNon ci sarà una RDR per l\u0026rsquo;IT. Nessuno verrà a obbligare il tuo MSP a dichiarare quanto lo paga il vendor, e il Cyber Security and Resilience Bill che sta passando in Parlamento in questo momento, che porterebbe i fornitori di servizi gestiti dentro le NIS Regulations, riguarda il rilevamento e la segnalazione, non chi paga il consiglio.\nQuindi quando qualcuno ti dice che non ci sono prove di un problema nel modo in cui la tecnologia viene venduta in questo paese, ha ragione. Non significa assolutamente niente. Non ci sono prove perché non c\u0026rsquo;è un ispettore, non c\u0026rsquo;è un percorso di reclamo che finisca in un documento pubblico, e non c\u0026rsquo;è un registro di cosa è successo a chiunque altro abbia firmato lo stesso contratto. In un mercato che nessuno sorveglia, l\u0026rsquo;assenza di prove è solo l\u0026rsquo;assenza di qualcuno che guardi.\nCosa dice del mestiere Togli le fatture e guarda chi c\u0026rsquo;è davvero in questo accordo.\nA un capo, aziende che fanno e producono cose. Un\u0026rsquo;officina che lavora pezzi. Un\u0026rsquo;autofficina. Una cucina che dà da mangiare alla gente. Avvocati che fanno entrare qualcuno in una casa di venerdì. Ognuna produce qualcosa che puoi indicare col dito, e ognuna porta il rischio di cui parla questo articolo, perché è l\u0026rsquo;unica parte della catena che non può escludere niente.\nAll\u0026rsquo;altro capo, diversi livelli che non producono niente del tutto. Un vendor la cui licenza esclude l\u0026rsquo;idoneità a qualsiasi scopo particolare. Un distributore che sposta una scatola tra un magazzino e l\u0026rsquo;altro e si prende una fetta. Un programma partner che paga qualcuno per preferire un marchio a un altro. Un fornitore che vende ore con una responsabilità limitata. Ognuno si prende il suo margine e passa la conseguenza più in basso, e la conseguenza continua a viaggiare finché non raggiunge l\u0026rsquo;unica persona che lunedì deve aprire le porte.\nUn mestiere è un insieme di persone che sanno fare qualcosa, che sono pagate per saperlo, e che rispondono di quello che dicono perché c\u0026rsquo;è sopra il loro nome. Messo a confronto con questo, gran parte di questo settore è un canale di distribuzione con le certificazioni.\nGuarda cosa è stato ceduto per arrivarci. Prima la competenza, perché non puoi tagliare un terzo di quello che spendi in formazione e continuare a vendere competenza senza ridere. Poi il giudizio, venduto all\u0026rsquo;inizio del rapporto e disconosciuto nel momento in cui viene messo alla prova. E per ultima la semplice disponibilità a dire «per te non è la risposta giusta» quando la risposta giusta rende meno: che è l\u0026rsquo;unica cosa che separa il consiglio dalla vendita, e non costa niente se non un po\u0026rsquo; di fegato.\nLa via d\u0026rsquo;uscita è poco affascinante e del tutto alla portata. Possiedi l\u0026rsquo;hardware che puoi possedere. Tieni tu le tue chiavi. Tieni la documentazione in un posto a cui puoi arrivare senza telefonare a nessuno. Impara abbastanza dei tuoi sistemi da capire quando ti stanno dicendo una sciocchezza: non per gestirli da solo, solo per riconoscere un aggettivo che arriva dove avevi chiesto un numero. Non è nostalgia per i tempi in cui tutti avevano un server in uno sgabuzzino. È l\u0026rsquo;unica leva disponibile, ed è economica.\nCi sono persone in questo mestiere che non hanno mai smesso di fare il lavoro come si deve, e non è difficile riconoscerle una volta che sai cosa cercare. Ti propongono l\u0026rsquo;opzione noiosa. Ti dicono quanto costa una cosa invece che a quanto è prezzata. Mettono il rischio per iscritto prima che tu lo chieda, e sono sollevati quando finalmente qualcuno controlla.\nGli altri hanno sistemato le cose in modo che nessuno lo faccia mai. Hai il diritto di chiedere quanto costa, chi paga chi, e cosa succede quando si rompe. Nessuno in questo accordo te lo dirà spontaneamente, e questo non vuol dire che non ti sia dovuto.\nIs Your MSP Lying To You — 3 parts\nIl tuo MSP ti mente per venderti prodotti premium? Cosa ti ha costruito il tuo MSP, e chi altro ci può arrivare Quando si rompe, chi se ne fa davvero carico?you are here Fonti Consultate il 28 agosto 2026.\nLeggi e politiche.\nCyber Security and Resilience (Network and Information Systems) Bill 2024-26 — briefing della House of Commons Library sull\u0026rsquo;inclusione dei fornitori di servizi gestiti nelle NIS Regulations. Chi ha diritto di lamentarsi.\nConsumer Rights Act 2015 e il Digital Markets, Competition and Consumers Act 2024 — le tutele, e a chi sono destinate. CMA, direct consumer enforcement one year on — da aprile 2025 ad aprile 2026: 14 indagini, 760.000 GBP rimborsate ai consumatori, 4,7 milioni di GBP di multe. FCA, Post-implementation review of the RDR, phase 1 — la RDR «realigned adviser and platform incentives with those of consumers\u0026rsquo; by removing the commission they received from providers», in vigore dalla fine del 2012. Ofcom fines Unicom, 31 July 2015 — 200.000 GBP per vendite scorrette a piccole imprese, la cosa più vicina a un precedente sanzionatorio, nelle telecomunicazioni e non nell\u0026rsquo;IT. ","permalink":"https://blogs.damiendye.uk/it/random/is-your-msp-lying-to-you-part3/","summary":"Parte 3 di 3. Tempi di risposta invece di risultati, un tetto di responsabilità fissato sui canoni che hai già pagato, e un fornitore le cui scuse prima o poi arrivano a te. Le domande che lo fanno venire allo scoperto, cosa fa invece uno serio, e cosa serve per liberarsi di uno scadente.","title":"Quando si rompe, chi se ne fa davvero carico?"},{"content":"Una connessione che va in timeout non ti dice quasi niente. Dall\u0026rsquo;altra parte potrebbe non esserci nulla in ascolto, un firewall a tre hop potrebbe scartare il tuo SYN in silenzio senza generare nemmeno una riga di log, oppure la rotta potrebbe semplicemente non esistere. E da dove sei seduto, ognuno di questi casi sembra identico. Aspetti. Non succede niente.\nCosì il ticket viene scritto come «la porta 445 è bloccata da qualche parte», ed è proprio quel «da qualche parte» che lo fa rimbalzare. Il tuo provider controlla il suo edge, lo trova pulito e te lo rimanda. Tu controlli il firewall dell\u0026rsquo;host, lo trovi pulito e lo rimandi indietro. Passa una settimana. Non si è sistemato niente.\nLa parola che fa il danno è «da qualche parte». E non è necessaria. Ogni router tra te e la destinazione è obbligato a dirti quando è lui il colpevole, e quell\u0026rsquo;obbligo è scritto negli standard dal 1995. Devi solo chiedere nel modo giusto.\nPerché bisogna spiegarlo per filo e per segno Perché troppa gente in questo settore non sa fare le cose di base, e costa ai loro datori di lavoro soldi veri ogni settimana.\nNon parlo dei junior. Parlo di persone con anni di esperienza alle spalle, certificazioni appese al muro e «senior» nel titolo, la cui diagnosi di una porta in timeout si ferma a «è bloccata» e non va oltre. Lanciano ping. Fallisce, o funziona, e in entrambi i casi non hanno imparato niente sulla porta di cui gli avevano chiesto. Poi il ticket va al provider, il provider lo rimbalza, e due settimane dello stipendio di qualcuno finiscono in una discussione che poteva essere un solo comando.\nNiente di tutto questo è difficile. Distinguere un drop da un reject, leggere il TTL di una risposta, sapere che un asterisco in un traceroute da solo non significa nulla: è un pomeriggio per impararlo e dura tutta la carriera. Il motivo per cui la gente non lo sa non è che sia stupida. È che nessuno lo insegna. La formazione dei vendor ti insegna la console del vendor. Le certificazioni ti insegnano l\u0026rsquo;esame. I fondamentali che stanno sotto vengono dati per scontati dal primo giorno e mai davvero spiegati, così la gente arriva ai ruoli senior senza che nessuno glieli abbia mai mostrati, e a quel punto è imbarazzante chiedere.\nQuindi, invece di lamentarmene, eccolo messo per iscritto. Sono le basi, spiegate per bene, con i comandi e uno script che puoi lanciare oggi.\nE una parola sul perché me ne sono preso la briga: mentre lo scrivevo l\u0026rsquo;ho lanciato sulla mia linea e ho trovato tre guasti che non sapevo di avere. Un drop di SMB a undici hop. Reset SMTP falsificati a un hop di distanza. Una regola di firewall che esiste su IPv4 e non su IPv6. Un pomeriggio, senza root, su una linea che gestisco io e a cui faccio attenzione. Pensa un attimo a cosa se ne sta lì inosservato sulle reti che qualcuno viene pagato per gestire.\nPerché il Fisher-Price OS (Windows) non è qui Due motivi per cui non c\u0026rsquo;è. Uno è tecnico e l\u0026rsquo;altro no, e preferisco darti tutti e due piuttosto che fingere che sia tutta ingegneria.\nQuello tecnico è che non ci riesce. tracert invia ICMP echo request e nient\u0026rsquo;altro: il riferimento di Microsoft stessa lo descrive come «sending Internet Control Message Protocol (ICMP) echo Request or ICMPv6 messages to the destination with incrementally increasing time to live (TTL) field values», e nella sua sintassi non c\u0026rsquo;è un parametro per la porta da nessuna parte. pathping è lo stesso strumento con delle statistiche attaccate sopra. Test-NetConnection ti dirà se una porta TCP è aperta o chiusa e assolutamente niente su quanto lontano sia arrivata la risposta. Nessuno di loro può sondare la porta che ti interessa davvero a una distanza scelta, che è l\u0026rsquo;intero metodo di questo articolo.\nE non puoi nemmeno aggirarlo con uno script. Impostare il TTL su un socket in .NET è abbastanza facile, ma rileggere l\u0026rsquo;errore ICMP è la metà difficile, e non esiste un equivalente del trucco su cui si appoggia questo articolo: nessun modo di farsi riportare dal kernel l\u0026rsquo;errore sul socket ordinario che l\u0026rsquo;ha causato. Resta un raw socket, e la documentazione di Microsoft stessa dice «only members of the Administrators group can create sockets of type SOCK_RAW». Quindi la strada senza privilegi non esiste e quella con privilegi vuole un token di amministratore locale. Sei già ai download di terze parti prima di aver cominciato.\nL\u0026rsquo;altro motivo è che non mi interessa, e preferisco dirlo piuttosto che abbellirlo. Nemmeno il nome è un colpo basso, è una descrizione. È il sistema operativo che ti mettono in mano quando non ne hai mai avuto un altro, ti nasconde la macchina come obiettivo di progetto e non per caso, e nel momento in cui vuoi fare alla rete una domanda precisa scopri che lo strumento non è mai stato costruito, perché dalle persone per cui è costruito non ci si è mai aspettati che la facessero. Trent\u0026rsquo;anni dopo, tracert non riesce ancora a mirare un pacchetto a una porta.\nNon è un sistema operativo vero per chi fa IT sul serio, e se è l\u0026rsquo;unico che hai mai usato allora non stai facendo questo lavoro al livello per cui è scritto questo articolo. So che suona male. Non scrivo per piacere, metto per iscritto quello che misuro per persone che misurano le cose, e non mi importa granché che qualcuno che ha usato solo quello preferirebbe che lo dicessi in un altro modo.\nL\u0026rsquo;argomento è l\u0026rsquo;elenco degli strumenti, non l\u0026rsquo;opinione. Ogni Unix nella tabella più sotto ti permette di impostare un limite di hop e scegliere un protocollo, quattro di loro con un solo comando, e Linux fa l\u0026rsquo;intera misurazione senza nemmeno sudo. Non è perché siano più difficili da usare. È perché sono stati costruiti da persone che si aspettavano che chi stava alla tastiera volesse sapere le cose. Un sistema operativo la cui diagnostica finisce con ping ti ha detto chiaramente cosa pensa di chi lo usa, e trent\u0026rsquo;anni di persone che l\u0026rsquo;hanno accettato sono il modo in cui siamo finiti con un settore che non sa localizzare un pacchetto scartato.\nQuindi non lo uso, non lo uso sul serio da anni, e non gli scriverò una sezione tutta sua per sembrare imparziale riguardo a una lacuna che è reale. Tutto ciò su cui costruisco e tutto ciò da cui vale la pena misurare è Unix, ed è lì che vive questo articolo.\nSe la macchina guasta per caso gira con il Fisher-Price OS (Windows), questo non cambia niente del metodo. Procurati una shell su qualsiasi altra cosa, una VM Linux, un Mac, un Raspberry Pi sullo stesso switch, e fai salire il limite di hop verso di lei. Alla misurazione non importa minimamente cosa gira dall\u0026rsquo;altra parte. Le importa solo cosa c\u0026rsquo;è in mezzo.\nIl TTL è un budget di hop, e ogni router ti deve una ricevuta L\u0026rsquo;header IPv4 ha un campo Time to Live di 8 bit. Il nome è un residuo: era specificato in secondi, e niente lo tratta più come secondi da decenni. RFC 1812 ha chiuso la questione nel 1995 e ha reso normativa la lettura come conteggio di hop:\nEach router (or other module) that handles a packet MUST decrement the TTL by at least one, even if the elapsed time was much less than a second. Since this is very often the case, the TTL is effectively a hop count limit on how far a datagram can propagate through the Internet.\nPoi la parte che conta qui, dalla stessa sezione:\nIf the TTL is reduced to zero (or less), the packet MUST be discarded, and if the destination is not a multicast address the router MUST send an ICMP Time Exceeded message, Code 0 (TTL Exceeded in Transit) message to the source.\nÈ un MUST. Non una cortesia, non un suggerimento. RFC 792 nel 1981 diceva solo che un gateway «may also notify the source host»; tredici anni dopo il requisito è stato reso più severo, e RFC 1812 dice perché senza giri di parole:\nICMP Time Exceeded messages are required because the traceroute diagnostic tool depends on them.\nIPv6 ha lasciato perdere la finzione e ha rinominato il campo. RFC 8200 lo chiama Hop Limit, «8-bit unsigned integer. Decremented by 1 by each node that forwards the packet», e il messaggio di scadenza è diventato ICMPv6 tipo 3, codice 0, «hop limit exceeded in transit».\nLeggilo come uno strumento e non come una regola, e dice qualcosa di utile. Ogni router sul percorso è un faro che puoi indirizzare per distanza. Imposta il limite di hop a 4 e il quarto router si identifica. Non ti serve conoscere la topologia, non ti serve accesso a niente e non ti serve la collaborazione dell\u0026rsquo;operatore. Ti serve un pacchetto per hop.\nTraceroute fa esattamente questo dalla fine degli anni Ottanta. Quello che fa male è proprio la cosa che ti interessa, perché di default sonda porte UDP nella fascia 33434, una porta che nessuno filtra e nessuno serve, quindi ti racconta di un percorso che niente di reale usa mai. Un traceroute pulito verso un host che non raggiungi su TCP/445 dimostra solo che UDP/33434 ci arriva. Che non era mai la domanda.\nQuindi sonda la porta che ti interessa.\nLeggi cosa è tornato indietro, non se è tornato qualcosa Prima di contare gli hop, guarda cosa fa l\u0026rsquo;altra parte quando la raggiungi con un limite di hop normale. Ci sono cinque risposte distinte e la gente le schiaccia regolarmente in una sola.\nCosa torna indietro Cosa significa Chi l\u0026rsquo;ha inviato SYN-ACK, la connessione si apre la porta è aperta l\u0026rsquo;host, o qualcosa che risponde al suo posto TCP RST rifiutata attivamente l\u0026rsquo;host senza niente in ascolto, oppure un dispositivo configurato per rifiutare ICMP 3/13, communication administratively prohibited un dispositivo rifiuta per policy e lo dichiara quel dispositivo: il suo indirizzo sorgente è la tua risposta ICMP 3/1, 3/2, 3/3 host, protocollo o porta irraggiungibile l\u0026rsquo;ultimo router, o l\u0026rsquo;host niente di niente qualcuno scarta in silenzio sconosciuto, quindi vai a misurarlo La terza riga è quella per cui vale la pena cambiare abitudini. Quando un firewall è configurato per rifiutare invece di scartare, mette il proprio indirizzo nel campo sorgente dell\u0026rsquo;ICMP e ti consegna il colpevole gratis. Su Linux è ciò che produce nft ... reject with icmpx admin-prohibited, e ciò che iptables -j REJECT --reject-with icmp-admin-prohibited ha sempre prodotto. La maggior parte degli strumenti lo butta via e stampa «filtered». nmap --reason te lo mostra. Anche lo script più sotto.\nLe righe due e cinque sono il guasto interessante. Un drop silenzioso è una decisione di policy di non dirti niente, e siccome è il comportamento predefinito su quasi tutti i firewall commerciali è quello che incontrerai davvero. Aspettati il silenzio.\nAnche la riga due merita sospetto. Un reset non prova che l\u0026rsquo;host l\u0026rsquo;abbia inviato, e ci tornerò con un esempio dal vivo, perché ne ho trovato uno sulla mia linea mentre scrivevo questo.\nPercorri la porta che ti interessa, due volte Il metodo è due esecuzioni e un confronto. Tutto qui.\nFai salire il limite di hop da 1 a 20 usando esattamente il protocollo e la porta che falliscono, e annota quale router risponde a ogni hop. Fai lo stesso con qualcosa che funziona, idealmente lo stesso host e una porta che si apre. L\u0026rsquo;hop in cui le risposte si fermano nella prima esecuzione, e continuano nella seconda, è il dispositivo che ti scarta. La seconda esecuzione ti dà il suo indirizzo. Perché le risposte si fermano invece di cambiare: un router applica la sua access list in ingresso prima di fare qualsiasi altra cosa con il pacchetto, quindi se la policy dice drop il pacchetto sparisce prima che il percorso di forwarding guardi il limite di hop, non viene generato nessun Time Exceeded, e il dispositivo non mette mai il suo nome su quello che ha fatto. Per questo il silenzio comincia *all\u0026rsquo;*hop colpevole, non dopo.\nHo scritto un piccolo strumento per la camminata perché nessuno di quelli nativi la fa in modo portabile. Imposta IP_TTL (o IPV6_UNICAST_HOPS) su un socket ordinario, si connette e rilegge l\u0026rsquo;errore ICMP. Su Linux IP_RECVERR riporta quell\u0026rsquo;errore proprio sul socket che l\u0026rsquo;ha provocato, il che significa che tutto gira senza privilegi: niente root, niente raw socket, niente capability. Su macOS, i BSD e Solaris il kernel non ti consegna l\u0026rsquo;ICMP in quel modo, quindi ripiega su un raw socket e richiede root.\n\u0026#8615; hopfind.py: il camminatore del TTL hopfind.py · 11 kB Sono 279 righe di libreria standard e nient\u0026rsquo;altro, e il tutto è stampato alla fine di questo articolo se preferisci leggerlo invece di scaricarlo.\npython3 hopfind.py example.net 445 # the port under suspicion python3 hopfind.py example.net 443 # the reference run python3 hopfind.py example.net 53 --proto udp python3 hopfind.py 2001:db8::1 443 -6 Usa lo stesso protocollo per entrambe le esecuzioni. Confrontare una traccia TCP con una traccia ICMP significa confrontare due percorsi, perché il bilanciamento del carico fa l\u0026rsquo;hash sulla quintupla e ICMP non ha porte su cui fare l\u0026rsquo;hash. Stesso host, stesso protocollo, porta diversa: questo è il confronto onesto.\nTutto quello che segue è output reale della mia linea del 28 agosto 2026, eseguito come utente senza privilegi su Fedora. Ogni indirizzo è stato riscritto negli intervalli di documentazione: RFC 5737 per IPv4, RFC 3849 per IPv6, con anche l\u0026rsquo;unico interface identifier alterato. Quindi 198.51.100.x è il mio router e il mio ISP, 203.0.113.x è transit e peering, 192.0.2.x è la rete lontana, e 2001:db8::/32 è l\u0026rsquo;intero percorso IPv6. La struttura è preservata ovunque: stessi confini di prefisso, stesse forme della parte host, stesso numero di reti distinte. I numeri di hop, i tempi, i tipi ICMP e quale hop è rimasto in silenzio sono esattamente come misurati.\nUn host, tre porte, tre guasti diversi Stessa destinazione per tutto il tempo: un host su internet pubblica, a quattordici hop, con la 443 aperta. Prima l\u0026rsquo;esecuzione di riferimento.\n$ python3 hopfind.py 192.0.2.4 443 --max 15 walking to 192.0.2.4 TCP/443 hop limit 1-15 1 198.51.100.254 0.3 ms ICMP 11/0 time exceeded in-transit 2 198.51.100.133 28.8 ms ICMP 11/0 time exceeded in-transit 3 * 4 198.51.100.153 6.3 ms ICMP 11/0 time exceeded in-transit 5 * 6 203.0.113.240 16.5 ms ICMP 11/0 time exceeded in-transit 7 203.0.113.188 16.5 ms ICMP 11/0 time exceeded in-transit 8 203.0.113.185 16.5 ms ICMP 11/0 time exceeded in-transit 9 203.0.113.15 15.6 ms ICMP 11/0 time exceeded in-transit 10 203.0.113.125 16.1 ms ICMP 11/0 time exceeded in-transit 11 192.0.2.31 26.6 ms ICMP 11/0 time exceeded in-transit 12 * 13 * 14 192.0.2.4 19.5 ms connected Verdict: TCP/443 is open. It answered at hop 14. Nota gli hop 3, 5, 12 e 13. Quattro router su un percorso che funziona chiaramente non hanno detto niente, perché parecchio hardware è configurato per non generare ICMP per conto proprio, o lo limita pesantemente. Un asterisco non è una prova di un firewall. Se ti porti via una sola cosa, porta via questa. Il segnale non è mai la presenza di asterischi in una singola esecuzione; è il punto in cui due esecuzioni smettono di concordare.\nOra lo stesso host sulla 445, che da qui va in timeout.\n$ python3 hopfind.py 192.0.2.4 445 --max 15 walking to 192.0.2.4 TCP/445 hop limit 1-15 1 198.51.100.254 0.3 ms ICMP 11/0 time exceeded in-transit 2 198.51.100.133 8.0 ms ICMP 11/0 time exceeded in-transit 3 * 4 198.51.100.153 6.4 ms ICMP 11/0 time exceeded in-transit 5 203.0.113.76 5.6 ms ICMP 11/0 time exceeded in-transit 6 203.0.113.240 15.9 ms ICMP 11/0 time exceeded in-transit 7 203.0.113.188 15.8 ms ICMP 11/0 time exceeded in-transit 8 203.0.113.185 16.6 ms ICMP 11/0 time exceeded in-transit 9 203.0.113.15 15.9 ms ICMP 11/0 time exceeded in-transit 10 203.0.113.125 15.0 ms ICMP 11/0 time exceeded in-transit 11 * 12 * 13 * 14 * 15 * Verdict: answers stop after hop 10 (203.0.113.125). Whatever swallows TCP/445 is hop 11. Walk a port that works and read off the address at hop 11. L\u0026rsquo;hop 11 ha risposto all\u0026rsquo;esecuzione sulla 443 in 26,6 ms e non ha detto assolutamente niente all\u0026rsquo;esecuzione sulla 445. Stessa macchina, stesso percorso, stessi dieci router davanti. Incrocia con l\u0026rsquo;esecuzione che funziona e l\u0026rsquo;hop 11 ha un nome: 192.0.2.31. È il dispositivo che scarta SMB, tre hop prima della destinazione e otto hop oltre l\u0026rsquo;edge del mio provider. Non il mio, e non quello del mio ISP.\nL\u0026rsquo;hop 5 dimostra la cosa sugli asterischi dalla direzione opposta. Era un asterisco nell\u0026rsquo;esecuzione sulla 443 e ha risposto in quella sulla 445: al contrario del guasto. Potrebbe essere il rate limiting dell\u0026rsquo;ICMP, o potrebbero essere le due esecuzioni che prendono percorsi diversi attraverso un load balancer. Non so quale delle due, e non lo saprai neanche tu. Ripeti entrambe le esecuzioni prima di credere all\u0026rsquo;una o all\u0026rsquo;altra.\nDue camminate del limite di hop verso lo stesso host, e l'hop in cui smettono di concordare Due camminate verso lo stesso host, e l'hop in cui smettono di concordare Una sonda per limite di hop. Una cella ombreggiata significa che quel router ha rimandato un ICMP Time Exceeded e si è nominato. il router ha risposto non è tornato niente muto da qui in poi 1 2 3 4 5 6 7 8 9 10 11 12 13 14 limite di hop impostato sulla sonda TCP/443 riferimento, si apre \u0026#8226; \u0026#8226; * \u0026#8226; * \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; * * \u0026#10003; si apre TCP/445 sotto test, va in timeout \u0026#8226; \u0026#8226; * \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; * * * * l'hop 11 ha risposto a una camminata e non all'altra Gli hop 3, 5, 12 e 13 tacciono su un percorso che funziona: un asterisco da solo non vuol dire niente. L'hop 11 ha risposto alla camminata di riferimento in 26,6\u0026#160;ms e non ha mai risposto alla camminata di test. Quello è il confine, e la camminata di riferimento è ciò che gli dà un indirizzo:\u0026#160;192.0.2.31. Le stesse due esecuzioni, affiancate. L\u0026rsquo;unica cella che conta è l\u0026rsquo;hop 11, e ciò che conta è il disaccordo: ha risposto a un\u0026rsquo;esecuzione e non all\u0026rsquo;altra. Poi la porta 25. Questa mi ha fermato.\n$ python3 hopfind.py 192.0.2.4 25 --max 15 walking to 192.0.2.4 TCP/25 hop limit 1-15 1 192.0.2.4 0.4 ms TCP reset Verdict: a reset came back to a probe with a hop limit of 1. Nothing more than one hop away can have sent it, so check the reply TTL before you believe the host did. Un limite di hop pari a 1 significa che il pacchetto è morto sul mio router. Ha fatto un hop. Non può averne percorsi quattordici. Eppure un reset TCP è tornato in 0,4 ms con l\u0026rsquo;indirizzo della destinazione sopra, e il mio kernel ha diligentemente riportato connection refused. Senza il limite di hop impostato l\u0026rsquo;avrei letto come «dall\u0026rsquo;altra parte non c\u0026rsquo;è nessun mail server» e avrei chiuso il ticket.\nQualcosa a un hop di distanza sta falsificando reset per l\u0026rsquo;SMTP in uscita e li firma con l\u0026rsquo;indirizzo della destinazione. Bloccare la 25 in uscita è una cosa del tutto normale per un router domestico o un ISP, e farlo con un reset invece che con un drop è probabilmente la versione educata, ma il reset porta l\u0026rsquo;indirizzo di qualcun altro e non avevo idea che il mio lo facesse. È il limite di hop che l\u0026rsquo;ha beccato, e nient\u0026rsquo;altro nella risposta l\u0026rsquo;avrebbe fatto.\nSbagliato di uno: dove sta l\u0026rsquo;access list nella pipeline Il verdetto qui sopra dice che chi scarta è l\u0026rsquo;hop 11 perché le risposte si sono fermate dopo l\u0026rsquo;hop 10. Fai attenzione con questa aritmetica, perché dipende dall\u0026rsquo;ordine in cui il dispositivo colpevole fa due lavori.\nLa maggior parte dell\u0026rsquo;hardware applica prima la policy in ingresso e poi il controllo del limite di hop. Il deny scatta, il pacchetto viene scartato e nessun Time Exceeded viene mai generato, quindi il dispositivo non compare mai e il silenzio comincia al suo stesso numero di hop. È il caso qui sopra. È anche quello comune.\nAlcune piattaforme gestiscono la scadenza del limite di hop nel fast path prima che la policy venga valutata. Lì il dispositivo risponde alla sonda indirizzata a lui e scarta solo le sonde mirate oltre, quindi compare normalmente e il silenzio comincia un hop dopo.\nPerché l'hop colpevole di solito non compare: la policy è valutata prima del controllo sul limite di hop Dentro l'hop che ti scarta, l'ordine di due controlli decide cosa vedi La tua sonda arriva con un hop rimasto nel budget, e corrisponde a una regola che dice deny. Prima la policy: quasi tutti i firewall, e ogni caso misurato in questo articolo il router all'hop N sonda in ingresso policy inbound limite di hop inoltro scartata prima che qualcosa guardi il limite di hop Nessun ICMP generato: questo router non firma mai il drop. La tua camminata diventa muta\u0026#160;a\u0026#160;hop\u0026#160;N. Prima la scadenza: alcune piattaforme la gestiscono nel fast path il router all'hop N sonda in ingresso limite di hop policy inbound inoltro scaduto, quindi l'ICMP 11/0 torna con l'indirizzo di questo router Risponde per sé e ingoia solo le sonde mirate oltre di lui. La tua camminata diventa muta dall'hop\u0026#160;N+1. Perché l\u0026rsquo;hop che scarta di solito resta invisibile. Su quasi tutti i firewall il deny viene valutato per primo, quindi la sonda sparisce prima che il percorso di forwarding si accorga che il limite di hop è scaduto e nessun ICMP viene mai generato. Sull\u0026rsquo;hardware che gestisce la scadenza nel fast path, lo stesso dispositivo risponde alla sonda indirizzata a lui e ingoia solo quelle mirate più avanti. Quindi la lettura onesta di «le risposte si fermano dopo l\u0026rsquo;hop N» è: chi scarta è l\u0026rsquo;hop N+1 se ha cestinato la tua sonda prima di accorgersi che il budget era finito, oppure l\u0026rsquo;hop N stesso se ha risposto alla sonda indirizzata a lui e ha ingoiato tutto quello mirato oltre. Due dispositivi adiacenti, e l\u0026rsquo;esecuzione che funziona li nomina entrambi. Cita gli indirizzi, non il numero di hop: un numero di hop non significa niente per chi legge il tuo ticket, che sta contando da un altro punto.\nIl TTL della risposta ti dice chi ha risposto davvero Il reset SMTP qui sopra è stato beccato dal limite di hop in uscita. C\u0026rsquo;è un secondo controllo, indipendente, disponibile in ogni risposta che torna indietro, e non costa niente.\nI valori iniziali del TTL non sono standardizzati, ma in pratica sono tre:\nParte da Mittente tipico 64 Linux, macOS, i BSD, illumos, la maggior parte degli host 255 Cisco IOS, Junos, Solaris, il traffico proprio della maggior parte dell\u0026rsquo;hardware di rete 128 il Fisher-Price OS (Windows), che ti serve comunque per leggerne una risposta Sottrai il TTL che hai ricevuto dal valore successivo verso l\u0026rsquo;alto e riottieni il numero di hop. Una risposta che arriva con TTL 50 è partita da 64 e ha fatto 14 hop. Una che arriva con TTL 250 è partita da 255 e ne ha fatti 5. ping lo stampa senza che tu lo chieda:\nping -c1 192.0.2.4 # ttl=50 → 14 hops away tcpdump -n -v \u0026#39;icmp\u0026#39; # -v prints the ttl of every packet it shows Ne vengono fuori due cose. Tutte e due gratis.\nUna risposta il cui numero di hop di ritorno non corrisponde alle altre risposte dell\u0026rsquo;host non è stata inviata dall\u0026rsquo;host. Se un echo reply da un server torna da 14 hop e l\u0026rsquo;RST sulla porta 25 torna da 1 hop, l\u0026rsquo;RST l\u0026rsquo;ha scritto un middlebox. Stesso trucco della sezione precedente, dall\u0026rsquo;altra estremità, e funziona anche quando non puoi impostare il TTL in uscita.\nUna risposta partita da 255 viene da hardware di rete, non da un server. Utile quando cerchi di capire se a rifiutarti è l\u0026rsquo;host o il router davanti a lui.\nPer vedere il campo su TCP invece che su ICMP ti serve una cattura, e vale la pena memorizzare il filtro:\n# every hop-limit expiry coming back to you, IPv4 and IPv6 tcpdump -n -v \u0026#39;icmp[icmptype] == 11 or icmp6[icmp6type] == 3\u0026#39; # who is resetting you, and from how far tcpdump -n -v \u0026#39;tcp[tcpflags] \u0026amp; tcp-rst != 0\u0026#39; tcpdump stampa la scadenza come ICMP time exceeded in-transit: la stessa frase che usano gli standard, e lo stesso evento che compare come «TTL expired in transit» sulle piattaforme che lo formulano così.\nLo stesso trucco con gli strumenti nativi, su cinque Unix Se preferisci non lanciare uno script, gli strumenti nativi fanno quasi tutto. Solo che sono in disaccordo tra loro più di quanto ti aspetteresti. -P in particolare significa tre cose diverse a seconda di quale traceroute hai in mano, e una di queste ti rovinerà il test senza dire niente.\nLinux (traceroute 2.1.x) macOS / FreeBSD OpenBSD NetBSD Solaris 11 Sonde TCP -T -P tcp non utilizzabile no no Sonde ICMP -I -I -I -I -I UDP verso una porta fissa -U -p N -e -p N no no no porta di destinazione -p N (costante per TCP) -p N (incrementa senza -e) -p N (incrementa) -p N (incrementa) -p N (incrementa) cosa significa -P non usato protocollo della sonda protocollo numerico, «will not work reliably for most protocols» imposta DF e sonda il path MTU pausa tra le sonde, in secondi richiede privilegi sì, per -T e -I sì sì sì sì Ognuno di questi richiede raw socket, quindi ognuno richiede privilegi, anche se macOS e i BSD di solito distribuiscono traceroute con setuid root, quindi potresti non dover scrivere sudo davanti. Linux no, e Fedora no, ed è metà del motivo per cui esiste lo script qui sopra.\nTre trappole in quella tabella, e le ho viste sprecare un pomeriggio tutte e tre.\nSui BSD e su macOS, -p è una porta base che incrementa a ogni sonda. Quindi traceroute -P tcp -p 445 host prova la 445, poi la 446, poi la 447, e all\u0026rsquo;hop 10 stai chiedendo di una porta di cui nessuno ha mai sentito parlare. Ti serve anche -e, che la man page chiama firewall evasion mode e che in realtà significa solo «tieni ferma la porta»:\nsudo traceroute -P tcp -e -p 445 example.net # macOS, FreeBSD Su Linux, -p da solo fa la stessa cosa per il metodo UDP predefinito e ti serve -U -p per una porta UDP costante. Per TCP, -T -p è già costante: la man page è esplicita nel dire che «for TCP and others specifies just the (constant) destination port to connect».\nsudo traceroute -T -p 445 example.net # Linux sudo traceroute -U -p 53 example.net # Linux, UDP/53 specifically Su Solaris e NetBSD non c\u0026rsquo;è proprio modo di fissare la porta, e su Solaris -P è una pausa in secondi, quindi una riga di comando Linux copiata girerà senza errori e non misurerà niente di quello che hai chiesto. Solaris non ha nemmeno una modalità di sonda TCP. È il caso in cui ti serve lo script.\nRedox è l\u0026rsquo;eccezione e merita una frase perché mi aspetto la domanda. Tutto il suo kit di rete è netutils: dns, ifconfig, nc, ping, telnetd, wget. Niente traceroute, niente tcpdump, niente di niente per catturare. Se una macchina Redox è un\u0026rsquo;estremità del problema, misura dall\u0026rsquo;altra estremità e punta la camminata verso di lei.\nAnche mtr merita una menzione, perché fa la parte di ripetere e fare la media che le tabelle qui sopra ti costringono a fare a mano:\nsudo mtr -T -P 445 --report --report-cycles 20 example.net Lancialo contro la porta che fallisce e di nuovo contro una che funziona, uno accanto all\u0026rsquo;altro. Stesso metodo, output più carino.\nNiente di tutto questo funziona se qualcuno blocca l\u0026rsquo;ICMP Ogni misurazione di questo articolo è fatta di errori ICMP che tornano verso di me. Bloccali e l\u0026rsquo;intera diagnostica si spegne, e con lei un bel po\u0026rsquo; di altre cose.\nBloccare l\u0026rsquo;ICMP in blocco è ancora trattato come una postura di sicurezza in certi posti. Non è difendibile dagli anni Novanta. Gli attacchi che si immagina fermi erano ping of death e smurf, entrambi corretti negli stack e non al bordo, ed entrambi corretti prima che nascessero alcuni degli ingegneri che ancora ripetono il consiglio. Quello che il blocco totale ferma oggi è la diagnosi. Nient\u0026rsquo;altro.\nRFC 1812 non lascia spazio a interpretazioni sul punto: Time Exceeded è un MUST, e lo standard dichiara che il motivo è che traceroute ne dipende. Scartalo e hai rotto uno strumento che il documento sui requisiti dei router di internet nomina come giustificazione dell\u0026rsquo;esistenza stessa del messaggio.\nIl path MTU discovery è quello che costa caro. Ha bisogno che l\u0026rsquo;ICMP 3/4, fragmentation needed, torni al mittente. Filtralo e ottieni il guasto che ogni network engineer ha inseguito almeno una volta, quello in cui l\u0026rsquo;handshake si completa, i trasferimenti piccoli funzionano e qualsiasi cosa porti un pacchetto a dimensione piena resta appesa per sempre. SSH si connette e scp si blocca. La pagina si carica e l\u0026rsquo;immagine non arriva mai. Niente nei log. Niente su cui fare grep.\nSu IPv6 smette di essere una questione di gusti. RFC 4890 §4.3.1 elenca i messaggi che un firewall non deve scartare:\nDestination Unreachable (Type 1) - All codes Packet Too Big (Type 2) Time Exceeded (Type 3) - Code 0 only Parameter Problem (Type 4) - Codes 1 and 2 only e su Packet Too Big è brutale riguardo alla conseguenza: «Effectively, parts of the Internet will become inaccessible.» I router IPv6 non frammentano. Se Packet Too Big non riesce a raggiungere il mittente, non c\u0026rsquo;è modo di recuperare.\nIl controllo è un rate limit, non un drop. Permetti il tipo 3 e il tipo 11 in ingresso, contali, limitali a qualcosa come cento al secondo, registra quello che supera il limite, e hai conservato la diagnostica, mantenuto funzionante il path MTU discovery e conservato fino all\u0026rsquo;ultimo pezzo della protezione che la regola totale avrebbe dovuto dare in primo luogo. Limitare quanto accetti di qualcosa è un controllo. Rifiutarlo tutto e chiamarlo hardening è solo rifiutarsi di essere misurati.\nPer chi gestisce un MSP: se la linea del tuo cliente scarta gli errori ICMP, gli hai tolto la possibilità di dimostrare in quale rete sta un guasto, e l\u0026rsquo;hai tolta anche a te. La prossima volta che un guasto sta tra due provider che dicono entrambi di essere puliti, ecco il conto di quella policy.\nTranne l\u0026rsquo;echo. Quello scartalo. Tutto quello che c\u0026rsquo;è sopra riguarda gli errori ICMP. L\u0026rsquo;echo è un\u0026rsquo;altra bestia, ed è l\u0026rsquo;unica parte del protocollo che toglierei dal filo al bordo.\nGuarda cosa gli richiede lo standard. In IPv4, RFC 792 dice di un echo request che «the data received in the echo message must be returned in the echo reply message». IPv6 è ancora più netto: RFC 4443 definisce il campo come «zero or more octets of arbitrary data» e poi richiede che «MUST be returned entirely and unmodified in the ICMPv6 Echo Reply message».\nLeggilo da attaccante e non da operatore. Lo standard obbliga ogni host sulla terra ad accettare un blocco di byte che scegli tu e a restituirtelo tale e quale. Non è un effetto collaterale. È un canale imposto, bidirezionale, con payload arbitrario, che gira su un protocollo che la maggior parte dei firewall lascia passare senza ispezionarlo e che la maggior parte dei log registra come conteggio di pacchetti e non come contenuto.\nLa gente ci costruisce tunnel da trent\u0026rsquo;anni. Loki l\u0026rsquo;ha fatto in Phrack 49 nel 1996. Ptunnel porta un\u0026rsquo;intera sessione TCP dentro il ping ed è a un pacchetto di distanza da vent\u0026rsquo;anni. Se la tua policy di egress è «blocca tutto, permetti l\u0026rsquo;ICMP perché al team di rete serve», non hai una policy di egress. Hai una VPN con qualche passaggio in più, e il traffico esce con l\u0026rsquo;aria di qualcuno che controlla se internet funziona.\nRFC 4890 non è d\u0026rsquo;accordo con me, e vale la pena dirlo apertamente invece di citare solo la metà che fa comodo. Il §4.3.1 mette Echo Request ed Echo Response nella stessa lista da non scartare degli errori. Poi leggi la giustificazione che dà:\nFor Teredo tunneling [RFC4380] to IPv6 nodes on the site to be possible, it is essential that the connectivity checking messages are allowed through the firewall.\nIl motivo dichiarato per tenere aperto l\u0026rsquo;echo è che qualcuno ha bisogno di costruirci un tunnel attraverso il tuo firewall. È il mio argomento, messo per iscritto da chi sostiene la tesi opposta.\nQuindi la policy è mirata, non totale:\n# transit rules. permit the errors, drop the ping ip protocol icmp icmp type { destination-unreachable, time-exceeded, parameter-problem } \\ limit rate 100/second accept ip protocol icmp icmp type { echo-request, echo-reply } drop ip6 nexthdr ipv6-icmp icmpv6 type { destination-unreachable, packet-too-big, \\ time-exceeded, parameter-problem } limit rate 100/second accept ip6 nexthdr ipv6-icmp icmpv6 type { echo-request, echo-reply } drop Su IPv6, non portare quello schema su una chain link-local o di host senza conservare il neighbour discovery. I tipi da 133 a 137, da nd-router-solicit a nd-redirect, sono il modo in cui IPv6 fa il lavoro che in IPv4 fa ARP. Scartali e il segmento smette di funzionare nel giro di minuti, e non sembrerà un guasto del firewall. Filtra l\u0026rsquo;echo al bordo, non sul filo tra un host e il suo router.\nCosa ti costa? ping attraverso il confine, e nient\u0026rsquo;altro. Tutto quello che c\u0026rsquo;è in questo articolo continua a funzionare, perché nessuna misurazione qui invia un echo request. hopfind.py percorre TCP e UDP e legge gli errori che tornano; traceroute -T e -U fanno lo stesso. Il path MTU discovery ha bisogno di Packet Too Big, che è un errore. Il trucco del TTL inverso funziona su qualsiasi risposta, e un handshake TCP te ne dà una. L\u0026rsquo;unica cosa che perdi è lo strumento meno informativo della cassetta, e questo intero articolo è un argomento sul perché fermarsi a ping sia il problema in primo luogo.\nLa mia linea fa già esattamente questo, anche se dubito che sia voluto. ping verso il mio default gateway ottiene il 100% di perdita, e l\u0026rsquo;ICMP Time Exceeded da quello stesso gateway torna in 0,3 ms, come mostra ogni traccia di questo articolo. Echo chiuso, errori aperti. Chi ha distribuito quel firmware ha dato la risposta giusta, e l\u0026rsquo;ho scoperto solo andando a cercare.\nLa stessa regola, scritta una volta sola Ecco il guasto che non mi aspettavo di trovare in casa mia. Un resolver DNS pubblico, percorso su TCP/443 su entrambe le famiglie, a pochi minuti di distanza.\n$ python3 hopfind.py 192.0.2.53 443 --max 10 walking to 192.0.2.53 TCP/443 hop limit 1-10 1 * 2 * 3 * 4 * 5 * 6 * 7 * 8 * 9 * 10 * Verdict: nothing answered at all, not even the first hop. Niente di niente. Nemmeno un hop. Il mio router non ha nemmeno riportato la scadenza che deve aver generato, la stessa scadenza che ha riportato in 0,3 ms in ogni altra camminata di questo articolo. Quindi il drop avviene all\u0026rsquo;hop 1, prima che il controllo del limite di hop venga eseguito, e l\u0026rsquo;hop 1 è il mio.\nIl percorso è a posto, e lo dimostra la stessa destinazione su UDP:\n$ python3 hopfind.py 192.0.2.53 53 --proto udp --max 10 1 198.51.100.254 0.3 ms ICMP 11/0 time exceeded in-transit 2 198.51.100.133 5.4 ms ICMP 11/0 time exceeded in-transit 3 * 4 198.51.100.167 14.5 ms ICMP 11/0 time exceeded in-transit 5 203.0.113.50 6.3 ms ICMP 11/0 time exceeded in-transit 6 203.0.113.174 5.7 ms ICMP 11/0 time exceeded in-transit 7 203.0.113.201 6.4 ms ICMP 11/0 time exceeded in-transit 8 * Sette hop di risposte pulite verso lo stesso indirizzo. Quindi non è il routing e non è la destinazione: qualcosa sulla mia linea scarta il TCP verso quell\u0026rsquo;host e lascia passare l\u0026rsquo;UDP.\nPoi lo stesso resolver, stessa porta, su IPv6:\n$ python3 hopfind.py 2001:db8:53::53 443 -6 --max 10 walking to 2001:db8:53::53 TCP/443 hop limit 1-10 1 2001:db8:1:ee:beef:abcd:fec0:2a30 0.5 ms ICMP 3/0 hop limit exceeded in-transit 2 2001:db8:1::15c 24.6 ms ICMP 3/0 hop limit exceeded in-transit 3 * 4 2001:db8:2:200::50 5.5 ms ICMP 3/0 hop limit exceeded in-transit 5 2001:db8:2:2::4 5.7 ms ICMP 3/0 hop limit exceeded in-transit 6 2001:db8:2:991:: 16.6 ms ICMP 3/0 hop limit exceeded in-transit 7 2001:db8:53::53 5.7 ms connected Verdict: TCP/443 is open. It answered at hop 7. Dritto fino in fondo. Sette hop, nessun dramma. Stesso servizio, stessa porta, stessa intenzione, e la regola esiste su una sola famiglia di indirizzi.\nChi ha scritto quella regola l\u0026rsquo;ha scritta per IPv4 e non ha mai scritto la gemella. Non ho idea di cosa dovesse ottenere, la mia ipotesi è qualcosa per tenere il DNS in locale, ma qualunque cosa fosse, la ottiene su metà del traffico da quando questa linea ha IPv6. Se c\u0026rsquo;era per un motivo, non funziona. Se non c\u0026rsquo;era, non dovrebbe esserci.\nÈ la versione di tutti i giorni del problema del dual stack, ed è molto più comune delle discussioni su se adottare IPv6 o meno. Due regolamenti. Uno mantenuto.\nLo script completo Nessuna dipendenza, nessuna installazione, solo la libreria standard. Python 3.6 o successivo, e su Linux nessun privilegio.\nLe due classi sono tutta la storia della portabilità. ErrorQueue è il percorso Linux: arma IP_RECVERR sul socket e, dopo che la sonda fallisce, legge MSG_ERRQUEUE ed estrae l\u0026rsquo;indirizzo del router dalla struttura sock_extended_err a cui il kernel lo accoda. RawIcmp è tutto il resto: apre un raw socket ICMP, legge quello che arriva, prende l\u0026rsquo;indirizzo sorgente dal pacchetto. Il primo non ha bisogno di niente, il secondo ha bisogno di root, e al resto del programma non importa quale gli sia stato dato.\nUn dettaglio merita di essere sottolineato perché è la differenza tra una risposta giusta e una plausibile. In probe() la coda degli errori viene svuotata prima di consultare SO_ERROR. Un errore ICMP arriva a un socket TCP come un semplice errno, ICMP 3/3 port unreachable arriva come ECONNREFUSED, esattamente come un vero reset, quindi controllare prima SO_ERROR avrebbe riportato il reset SMTP falsificato più su in questo articolo come un rifiuto onesto dall\u0026rsquo;altra parte. Leggi prima la coda e ee_origin ti dice che ha parlato un router.\n#!/usr/bin/env python3 \u0026#34;\u0026#34;\u0026#34;hopfind - work out how many hops away the thing blocking your port is. Walks the IPv4 TTL, or the IPv6 hop limit, up from 1 and records which router answers at each step - using the protocol and port you actually care about instead of traceroute\u0026#39;s default UDP high ports. Run it twice. Once against something that works, once against the port that does not. The hop where the answers stop is the device dropping you, and the run that works gives you its address. python3 hopfind.py example.net 445 # the port under suspicion python3 hopfind.py example.net 443 # the reference run python3 hopfind.py example.net 53 --proto udp python3 hopfind.py 2001:db8::1 443 -6 On Linux this needs no privileges at all: IP_RECVERR and IPV6_RECVERR hand the ICMP errors back on the ordinary socket that caused them. On macOS, the BSDs and Solaris the errors have to be read off a raw ICMP socket, which means root. Written for https://blogs.damiendye.uk/networking/how-far-away-is-the-firewall/ Public domain. Do what you like with it. \u0026#34;\u0026#34;\u0026#34; import argparse import errno import os import select import socket import struct import sys import time # Linux socket options. Absent from the socket module on some builds, so they # are spelled out rather than looked up. IP_RECVERR = 11 IPV6_RECVERR = 25 # ee_origin values from linux/errqueue.h. Anything else means the errno came # from the local stack rather than from a router. SO_EE_ORIGIN_ICMP = 2 SO_EE_ORIGIN_ICMP6 = 3 ICMP_V4 = { (11, 0): \u0026#34;time exceeded in-transit\u0026#34;, (11, 1): \u0026#34;fragment reassembly time exceeded\u0026#34;, (3, 0): \u0026#34;net unreachable\u0026#34;, (3, 1): \u0026#34;host unreachable\u0026#34;, (3, 2): \u0026#34;protocol unreachable\u0026#34;, (3, 3): \u0026#34;port unreachable\u0026#34;, (3, 4): \u0026#34;fragmentation needed\u0026#34;, (3, 9): \u0026#34;net administratively prohibited\u0026#34;, (3, 10): \u0026#34;host administratively prohibited\u0026#34;, (3, 13): \u0026#34;communication administratively prohibited\u0026#34;, (5, 0): \u0026#34;redirect\u0026#34;, } ICMP_V6 = { (3, 0): \u0026#34;hop limit exceeded in-transit\u0026#34;, (3, 1): \u0026#34;fragment reassembly time exceeded\u0026#34;, (1, 0): \u0026#34;no route to destination\u0026#34;, (1, 1): \u0026#34;communication administratively prohibited\u0026#34;, (1, 3): \u0026#34;address unreachable\u0026#34;, (1, 4): \u0026#34;port unreachable\u0026#34;, (2, 0): \u0026#34;packet too big\u0026#34;, } def describe(family, icmp_type, icmp_code): table = ICMP_V4 if family == socket.AF_INET else ICMP_V6 return table.get((icmp_type, icmp_code), \u0026#34;unrecognised\u0026#34;) def is_expiry(family, icmp_type): \u0026#34;\u0026#34;\u0026#34;Was this the router saying \u0026#39;your hop budget ran out here\u0026#39;?\u0026#34;\u0026#34;\u0026#34; return icmp_type == (11 if family == socket.AF_INET else 3) class ErrorQueue: \u0026#34;\u0026#34;\u0026#34;Linux. The kernel reports the ICMP error on the socket that provoked it.\u0026#34;\u0026#34;\u0026#34; def arm(self, sock, family): if family == socket.AF_INET: sock.setsockopt(socket.IPPROTO_IP, IP_RECVERR, 1) else: sock.setsockopt(socket.IPPROTO_IPV6, IPV6_RECVERR, 1) def extra_readers(self): return [] def collect(self, sock, family): try: _, ancillary, _, _ = sock.recvmsg(0, 1024, socket.MSG_ERRQUEUE) except OSError: return None wanted = (socket.IPPROTO_IP, IP_RECVERR) if family == socket.AF_INET \\ else (socket.IPPROTO_IPV6, IPV6_RECVERR) for level, kind, data in ancillary: if (level, kind) != wanted or len(data) \u0026lt; 16: continue # struct sock_extended_err, then the sockaddr of the router that # sent the error - SO_EE_OFFENDER in the kernel headers. _, origin, icmp_type, icmp_code = struct.unpack_from(\u0026#34;=IBBB\u0026#34;, data, 0) if origin not in (SO_EE_ORIGIN_ICMP, SO_EE_ORIGIN_ICMP6): return None addr = None if len(data) \u0026gt;= 24: offender_family, = struct.unpack_from(\u0026#34;=H\u0026#34;, data, 16) if offender_family == socket.AF_INET: addr = socket.inet_ntoa(data[20:24]) elif offender_family == socket.AF_INET6 and len(data) \u0026gt;= 40: addr = socket.inet_ntop(socket.AF_INET6, data[24:40]) return addr, icmp_type, icmp_code return None class RawIcmp: \u0026#34;\u0026#34;\u0026#34;macOS, the BSDs, illumos, Solaris. Read the ICMP off a raw socket, as root.\u0026#34;\u0026#34;\u0026#34; def __init__(self, family): proto = socket.IPPROTO_ICMP if family == socket.AF_INET else socket.IPPROTO_ICMPV6 self.sock = socket.socket(family, socket.SOCK_RAW, proto) self.sock.setblocking(False) def arm(self, sock, family): pass def extra_readers(self): return [self.sock] def collect(self, sock, family): try: packet, peer = self.sock.recvfrom(1500) except OSError: return None if family == socket.AF_INET: # BSD raw sockets hand back the IP header too. header_len = (packet[0] \u0026amp; 0x0F) * 4 packet = packet[header_len:] if len(packet) \u0026lt; 2: return None return peer[0], packet[0], packet[1] def probe(dest, port, proto, family, hop_limit, timeout, listener): \u0026#34;\u0026#34;\u0026#34;One probe at one hop limit. Returns (icmp, socket_state, note).\u0026#34;\u0026#34;\u0026#34; kind = socket.SOCK_STREAM if proto == \u0026#34;tcp\u0026#34; else socket.SOCK_DGRAM sock = socket.socket(family, kind) if family == socket.AF_INET: sock.setsockopt(socket.IPPROTO_IP, socket.IP_TTL, hop_limit) else: sock.setsockopt(socket.IPPROTO_IPV6, socket.IPV6_UNICAST_HOPS, hop_limit) listener.arm(sock, family) sock.setblocking(False) try: if kind == socket.SOCK_DGRAM: sock.connect((dest, port)) sock.send(b\u0026#34;\\x00\u0026#34; * 32) else: try: sock.connect((dest, port)) except BlockingIOError: pass except OSError as exc: sock.close() return None, None, \u0026#34;local error: %s\u0026#34; % exc.strerror readers = [sock] + listener.extra_readers() writers = [] if kind == socket.SOCK_DGRAM else [sock] deadline = time.time() + timeout icmp = state = None while time.time() \u0026lt; deadline: ready_r, ready_w, ready_x = select.select( readers, writers, [sock], max(0.01, deadline - time.time())) if not (ready_r or ready_w or ready_x): continue # Drain the error queue first, always. An ICMP error reaches a TCP # socket as a plain errno, so SO_ERROR on its own cannot tell you # whether a router spoke or the far end did. icmp = listener.collect(sock, family) if icmp: break if ready_w: err = sock.getsockopt(socket.SOL_SOCKET, socket.SO_ERROR) if err == 0: state = \u0026#34;connected\u0026#34; elif err == errno.ECONNREFUSED: state = \u0026#34;TCP reset\u0026#34; else: state = os.strerror(err) break sock.close() if icmp or state: return icmp, state, None return None, None, \u0026#34;no reply\u0026#34; def walk(dest, port, proto, family, first, last, timeout, listener): print(\u0026#34;walking to %s %s/%d hop limit %d-%d\u0026#34; % (dest, proto.upper(), port, first, last)) answered = [] for hop in range(first, last + 1): started = time.time() icmp, state, _ = probe(dest, port, proto, family, hop, timeout, listener) rtt = (time.time() - started) * 1000 if icmp: addr, icmp_type, icmp_code = icmp print(\u0026#34; %2d %-39s %7.1f ms ICMP %d/%d %s\u0026#34; % (hop, addr or \u0026#34;?\u0026#34;, rtt, icmp_type, icmp_code, describe(family, icmp_type, icmp_code))) if is_expiry(family, icmp_type): answered.append((hop, addr)) else: return answered, hop, \u0026#34;icmp-reject\u0026#34;, addr elif state: print(\u0026#34; %2d %-39s %7.1f ms %s\u0026#34; % (hop, dest, rtt, state)) return answered, hop, state, dest else: print(\u0026#34; %2d *\u0026#34; % hop) return answered, None, \u0026#34;silent\u0026#34;, None def main(): parser = argparse.ArgumentParser(description=__doc__.splitlines()[0]) parser.add_argument(\u0026#34;host\u0026#34;) parser.add_argument(\u0026#34;port\u0026#34;, nargs=\u0026#34;?\u0026#34;, type=int, default=443) parser.add_argument(\u0026#34;--proto\u0026#34;, choices=(\u0026#34;tcp\u0026#34;, \u0026#34;udp\u0026#34;), default=\u0026#34;tcp\u0026#34;) parser.add_argument(\u0026#34;--first\u0026#34;, type=int, default=1, help=\u0026#34;hop limit to start at\u0026#34;) parser.add_argument(\u0026#34;--max\u0026#34;, type=int, default=20, help=\u0026#34;hop limit to stop at\u0026#34;) parser.add_argument(\u0026#34;--wait\u0026#34;, type=float, default=2.0, help=\u0026#34;seconds to wait per hop\u0026#34;) parser.add_argument(\u0026#34;-6\u0026#34;, dest=\u0026#34;v6\u0026#34;, action=\u0026#34;store_true\u0026#34;, help=\u0026#34;force IPv6\u0026#34;) parser.add_argument(\u0026#34;-4\u0026#34;, dest=\u0026#34;v4\u0026#34;, action=\u0026#34;store_true\u0026#34;, help=\u0026#34;force IPv4\u0026#34;) args = parser.parse_args() family = socket.AF_INET6 if args.v6 else socket.AF_INET kind = socket.SOCK_STREAM if args.proto == \u0026#34;tcp\u0026#34; else socket.SOCK_DGRAM dest = socket.getaddrinfo(args.host, args.port, family, kind)[0][4][0] if sys.platform.startswith(\u0026#34;linux\u0026#34;): listener = ErrorQueue() else: try: listener = RawIcmp(family) except PermissionError: sys.exit(\u0026#34;%s cannot report ICMP errors on a normal socket, so this \u0026#34; \u0026#34;needs a raw one. Run it as root.\u0026#34; % sys.platform) answered, stop, why, who = walk(dest, args.port, args.proto, family, args.first, args.max, args.wait, listener) what = \u0026#34;%s/%d\u0026#34; % (args.proto.upper(), args.port) print() if why == \u0026#34;connected\u0026#34;: print(\u0026#34;Verdict: %s is open. It answered at hop %d.\u0026#34; % (what, stop)) elif why == \u0026#34;icmp-reject\u0026#34;: print(\u0026#34;Verdict: %s at hop %d is refusing %s on policy, and is honest \u0026#34; \u0026#34;enough to say so.\u0026#34; % (who, stop, what)) elif why == \u0026#34;TCP reset\u0026#34;: print(\u0026#34;Verdict: a reset came back to a probe with a hop limit of %d.\u0026#34; % stop) print(\u0026#34; Nothing more than %s away can have sent it, so check the reply\u0026#34; % (\u0026#34;one hop\u0026#34; if stop == 1 else \u0026#34;%d hops\u0026#34; % stop)) print(\u0026#34; TTL before you believe the host did.\u0026#34;) elif answered: last_hop, last_addr = answered[-1] print(\u0026#34;Verdict: answers stop after hop %d (%s).\u0026#34; % (last_hop, last_addr)) print(\u0026#34; Whatever swallows %s is hop %d.\u0026#34; % (what, last_hop + 1)) print(\u0026#34; Walk a port that works and read off the address at hop %d.\u0026#34; % (last_hop + 1)) else: print(\u0026#34;Verdict: nothing answered at all, not even the first hop. Either the\u0026#34;) print(\u0026#34; first hop is the one dropping you, or the ICMP errors are being\u0026#34;) print(\u0026#34; filtered on the way back. Walk a port that works to tell those\u0026#34;) print(\u0026#34; two apart.\u0026#34;) if __name__ == \u0026#34;__main__\u0026#34;: main() Cosa questo non può dirti Il metodo è economico ed è onesto su quasi tutto, ma non è uno scanner di topologia. Sii chiaro nel ticket su cosa hai misurato davvero.\nQuintuple diverse possono prendere percorsi diversi. L\u0026rsquo;ECMP fa l\u0026rsquo;hash delle porte sorgente e destinazione nella scelta del next hop, quindi due esecuzioni su due porte diverse non sono garantite attraversare gli stessi router, ed è una delle due cose che potrebbero spiegare l\u0026rsquo;hop 5 qui sopra che risponde a un\u0026rsquo;esecuzione e resta zitto nell\u0026rsquo;altra. Ripeti entrambe le esecuzioni. Un confine che si sposta non è provato.\nL\u0026rsquo;MPLS nasconde gli hop. Un core a commutazione di etichette può presentarsi come un hop, o come nessuno. Qualsiasi conteggio attraverso la dorsale di qualcun altro è un limite inferiore.\nLa generazione di ICMP è limitata quasi ovunque. Sonda più in fretta di quanto il router voglia rispondere e ti fabbrichi da solo gli asterischi. hopfind.py invia una sonda per hop e aspetta; è voluto.\nIl percorso di ritorno non deve per forza coincidere con quello di andata. Il numero di hop all\u0026rsquo;andata non è il numero di hop al ritorno, e l\u0026rsquo;aritmetica del TTL inverso misura solo la tratta di ritorno.\nL\u0026rsquo;anycast significa che l\u0026rsquo;host all\u0026rsquo;hop N potrebbe non essere la stessa macchina due volte. I resolver pubblici e le CDN, in particolare.\nUn handshake completato non significa che la sessione sopravviva. Un firewall stateful può permettere il SYN e scartare quello che segue dopo l\u0026rsquo;ispezione. Se la connessione si apre e poi muore, questo è lo strumento sbagliato: vai a catturare.\nHai trovato il primo dispositivo che scarta, non quello che qualcuno ammetterà. In una CGN o in una rete di un carrier l\u0026rsquo;indirizzo all\u0026rsquo;hop N+1 può essere una di diverse macchine dietro un unico indirizzo. Resta la cosa giusta da citare, perché è un fatto sul percorso.\nA cosa serve davvero A far finire i rimbalzi. È tutto il ritorno dell\u0026rsquo;esercizio.\n«La porta 445 è bloccata da qualche parte» è un invito a rimandare indietro il ticket. Questo no:\nTCP/445 verso 192.0.2.4 viene scartato in silenzio all\u0026rsquo;hop 11, indirizzo 192.0.2.31. L\u0026rsquo;hop 11 risponde con ICMP Time Exceeded a TCP/443 sullo stesso percorso in 26 ms e non risponde niente sulla 445, quindi il drop è una decisione di policy su quel dispositivo, non un guasto di routing. I dieci hop davanti sono puliti. Riprodotto quattro volte in venti minuti, da una shell senza privilegi, script allegato.\nNessuno lo rimanda indietro. Nomina un dispositivo, dice cosa ha fatto, dice cosa non ha fatto e mostra i passaggi. Se decidono di cambiarlo resta una loro scelta. Ma la settimana di ping-pong è finita, ed è servita a quattro comandi.\nTutto è venuto fuori da un campo di 8 bit che è stato specificato come timer nel 1981, non è mai stato usato come tale nemmeno una volta, e in silenzio trasforma «da qualche parte» in un indirizzo.\nVale la pena imparare a leggerlo.\n","permalink":"https://blogs.damiendye.uk/it/networking/how-far-away-is-the-firewall/","summary":"«La porta 445 è bloccata da qualche parte» non è una diagnosi, ed è il motivo per cui i ticket sul firewall rimbalzano per una settimana tra te e il tuo provider. Ogni router sul percorso ti deve un ICMP Time Exceeded quando il tuo budget di hop si esaurisce, e questo trasforma un timeout in una distanza. Ho fatto salire il TTL sulla mia linea e ho trovato tre guasti che non sapevo di avere: un drop di SMB a undici hop, reset SMTP falsificati a un hop di distanza, e una regola IPv4 senza la sua gemella IPv6.","title":"Il firewall è a undici hop di distanza"},{"content":"C\u0026rsquo;è una storia che l\u0026rsquo;industria britannica racconta su IPv6, e fa così. Il passaggio è difficile. Gli apparati sono vecchi. I clienti non lo chiedono. Non ci sono soldi da fare. Un giorno, quando il business case cambierà, ci arriveremo.\nOgni parte di questa storia è una bugia che l\u0026rsquo;industria racconta a se stessa per non dover lavorare.\nIPv6 è stato specificato nel dicembre 1995. Ci sono arrivato attraverso il 6bone, il banco di prova sperimentale che lo trasportava prima che lo facesse la vera internet, e ho fatto girare sia lo stack Linux sia lo stack di Microsoft Research su Windows XP per vedere in cosa differivano. Il mio accesso veniva da Hurricane Electric.\nIl 6bone è stato spento il 6 giugno 2006, così sono passato al tunneling automatico 6to4, e più tardi a un tunnel Hurricane Electric: ancora gratuito, e ti instradano un /48 solo a chiederlo. IPv6 nativo è arrivato a casa mia nel 2017, quando sono passato a Zen come ISP.\nQuindi per quasi vent\u0026rsquo;anni il mio IPv6 è arrivato da un\u0026rsquo;azienda di transito americana che lo regalava, invece che da uno qualsiasi degli ISP britannici che stavo pagando. Hurricane Electric dava /48 instradati a chiunque ne volesse uno. Il mio fornitore mi avrebbe venduto un IPv4 statico per cinque sterline al mese.\nLe date dicono il resto. L\u0026rsquo;IETF ha chiuso il 6bone nel 2006 e ha deprecato i relay anycast di 6to4 nel maggio 2015, definendo il meccanismo «unsuitable for widespread deployment and use in the Internet». Sono sopravvissuto a due meccanismi di transizione ufficiali aspettando che un ISP britannico mi desse un indirizzo. Il giorno in cui il 6bone ha chiuso, trentasette dei quaranta fornitori britannici nel grafico più sotto non avevano ancora chiesto un\u0026rsquo;assegnazione al registro. Ventidue di loro, più della metà, non l\u0026rsquo;hanno chiesta fino al 2015 o dopo, l\u0026rsquo;anno in cui l\u0026rsquo;IETF ha rinunciato anche a 6to4.\nÈ acceso di default in ogni sistema operativo che qualcuno usi da Windows Vista nel 2007. Non costa niente in più al registro. Il più grande ISP che ci abbia mai provato in questo paese ha finito il lavoro in tre anni con una squadra che stava in una sala riunioni, e ci ha vinto un premio.\nTrent\u0026rsquo;anni dopo la specifica. Quattordici anni dopo il giorno in cui internet lo ha acceso per sempre. E la risposta in questo paese è stata rompere internet apposta, avvolgere il pezzo rotto in altri macchinari e fatturare al cliente il disagio.\nNon è un problema di costi. È un problema di non aver voglia, e va avanti da vent\u0026rsquo;anni.\nCosa ho misurato, e come Tutto quello che segue è lavoro di qualcun altro, con il link, oppure un numero che ho prodotto io. Dove è mio, lo script che lo ha contato è nel download qui sotto, eseguito così come è pubblicato. L\u0026rsquo;unica eccezione sono i totali di indirizzi, e spiego come sono calcolati nelle avvertenze. Quattro fonti pubbliche, tutte gratuite: i file di delegazione dei registri, il dump della tabella di routing di RIPE, il database RIPE e il DNS. Dove ho scelto un campione invece di misurare tutto, lo dico.\nI numeri di routing vengono da due gruppi di file pubblici.\nIl primo sono i file di delegazione, uno per registro regionale, che elencano ogni blocco di indirizzi e ogni numero AS che quel registro ha assegnato, il paese in cui è registrato e un identificativo opaco dell\u0026rsquo;organizzazione che lo detiene. Quello di RIPE copre l\u0026rsquo;Europa e il Medio Oriente, ed è quello che conta per il Regno Unito; però qualche decina di numeri AS registrati nel Regno Unito sta invece nei file di ARIN e APNIC, e il confronto più avanti ha bisogno di tutti. I miei sono stati generati il 26 e il 27 agosto 2026.\nIl secondo è il dump della tabella di routing globale del RIPE Routing Information Service, che elenca ogni prefisso in BGP e il numero AS che lo annuncia. IPv4 e IPv6 arrivano in file separati. Il mio è stato generato alle 18:06 UTC del 27 agosto 2026.\nMettili insieme e puoi rispondere a una domanda che nessuno nell\u0026rsquo;industria britannica vuole sentire fatta ad alta voce: delle reti che questo paese ha registrato, quante hanno davvero acceso IPv6?\n\u0026#8615; Gli script, pronti da eseguire ipv6-uk-2026-scripts.zip · 10 kB Prendi dai file di delegazione i numeri AS registrati a GB, prendi dai dump RIS ogni numero AS che origina un prefisso, e confronta le due liste con comm per famiglia di indirizzi. Questo dà la prima tabella qui sotto. Una trappola da nominare: ordina in modo lessicale, non con sort -n. comm confronta stringhe, e un input ordinato numericamente ti dà in silenzio la risposta sbagliata invece di un errore che noteresti.\nSostituisci GB con qualsiasi altro codice paese e ottieni la riga di quel paese nella tabella di confronto più avanti. 05-country-row.sh fa esattamente questo.\nI numeri a livello di organizzazione usano l\u0026rsquo;ottavo campo, che è l\u0026rsquo;handle opaco del registro per l\u0026rsquo;account che detiene ogni risorsa. Questi restano sul solo file RIPE: gli handle sono locali a ciascun registro, quindi concatenarne cinque conterebbe la stessa azienda due volte invece di unirla. Le organizzazioni britanniche sono membri RIPE, quindi è in RIPE che si trovano. Ecco quante detengono un numero AS e nessun IPv6:\n03-org-no-ipv6.sh le conta. E 04-silent-holders.py è quello che conta di più. Le organizzazioni che detengono IPv6, sono vive in BGP e non ne annunciano nemmeno un pezzo.\nQuattro avvertenze prima dei numeri, perché contano e preferisco dirle io piuttosto che vedermele rinfacciare.\nGli handle delle organizzazioni sono per account di registro, quindi un\u0026rsquo;azienda con più account conta più di una volta.\nAnnunciare un prefisso IPv6 in BGP non è lo stesso che dare IPv6 a un cliente. È il pavimento, non il soffitto. Una rete che non annuncia niente di sicuro non lo ha distribuito. Una rete che annuncia qualcosa potrebbe comunque tenerlo nel cassetto.\nI totali di indirizzi fondono i prefissi sovrapposti. Una rete che annuncia un /16 insieme a quattro /17 ricavati da esso sta annunciando 65.536 indirizzi, non 196.608, e contare i prefissi in modo ingenuo gonfia i grandi detentori di due o tre volte. Uso ipaddress.collapse_addresses di Python prima di fare i totali.\nL\u0026rsquo;elenco di cinquanta siti web più avanti è un campione che ho scelto a mano, non una misura dell\u0026rsquo;intero paese. Un\u0026rsquo;altra cinquantina darebbe un\u0026rsquo;altra frazione. Illustra uno schema invece di dimostrare una proporzione, e nomino quelli di cui parlo man mano.\nLe prime due rendono i numeri di routing più gentili con l\u0026rsquo;industria di quanto lo sia la verità.\nIl conteggio Numeri AS britannici, e quanti portano IPv6 Reti britanniche nella tabella di routing globale, 27 agosto 2026 Fonte: file di delega del RIPE NCC e dump della tabella di routing RIPE RIS registrati a enti britannici 3.106 visibili nella tabella di routing 2.248 annunciano IPv4 2.078 annunciano IPv6 1.048 IPv4 e nessun IPv6 1.200 57,7% delle reti britanniche attive Di quelle 1.200, ben\u0026#160;463 hanno spazio IPv6 che il registro ha già assegnato loro e non ne hanno mai annunciato un solo prefisso. Altre 1.113 organizzazioni britanniche con un numero AS non hanno mai chiesto IPv6, anche se non costa nulla in più della quota associativa che già pagano. Ogni numero AS registrato a un\u0026rsquo;organizzazione britannica, misurato contro la tabella di routing globale il 27 agosto 2026. Il divario a destra è tutto l\u0026rsquo;argomento: 1.200 reti britanniche sono vive su internet senza alcun IPv6, e 463 di queste detengono spazio IPv6 assegnato dal registro che non hanno mai annunciato. Numeri AS registrati a organizzazioni britanniche 3.106 Visibili nella tabella di routing globale 2.248 Che annunciano IPv4 2.078 Che annunciano IPv6 1.048 Che annunciano IPv4 e nessun IPv6 1.200: 57,7% Quasi sei reti britanniche vive su dieci non trasportano IPv6 per niente. Non in parte. Non dietro un flag. Non in laboratorio. Nemmeno un prefisso.\nOra la parte che chiude per sempre l\u0026rsquo;argomento dei costi.\nDelle 2.363 organizzazioni britanniche che detengono un numero AS, 1.113, il 47,1%, non hanno alcuna assegnazione IPv6 di nessun tipo. Non l\u0026rsquo;hanno mai chiesta al registro.\nUn\u0026rsquo;iscrizione al RIPE NCC costa EUR 1.800 all\u0026rsquo;anno per il 2026, tariffa fissa, e quella quota copre le tue assegnazioni. Un /29 IPv6 ti dà 524.288 sottoreti grandi quanto l\u0026rsquo;intera internet IPv4. È gratuito con un\u0026rsquo;iscrizione che queste organizzazioni stanno già pagando, e arriva in un paio di giorni.\nMetà di loro non ha mai compilato il modulo.\nE di quelli che lo hanno fatto, 463 organizzazioni britanniche detengono spazio IPv6, annunciano IPv4 al mondo ogni giorno e non annunciano nessun IPv6. È il 44,7% dei detentori britannici di IPv6 vivi in BGP.\nRileggilo, perché è l\u0026rsquo;intero articolo in una frase. Hanno chiesto gli indirizzi. Gli indirizzi gli sono stati dati. Li hanno messi in un foglio di calcolo. Poi nessuno ha avuto voglia di digitarli in un router.\nNon lo spieghi con i soldi. Nessuno ha speso niente. Non c\u0026rsquo;è fattura, né acquisto, né business case, né richiesta di capitale. C\u0026rsquo;è una cosa gratuita ferma in un account di registro, e un reparto tecnico che non ha aperto il ticket in quattordici anni.\nChi c\u0026rsquo;è in quell\u0026rsquo;elenco Queste sono le più grandi reti britanniche che annunciano IPv4 e nessun IPv6, ordinate per quantità di spazio di indirizzi effettivamente annunciato, al 27 agosto 2026. I nomi vengono dal database RIPE, che ti dice chi detiene ciascuna di esse:\ncurl -s https://rest.db.ripe.net/ripe/aut-num/AS15914.json \\ | python3 -c \u0026#39;import sys,json; a=json.load(sys.stdin)[\u0026#34;objects\u0026#34;][\u0026#34;object\u0026#34;][0][\u0026#34;attributes\u0026#34;][\u0026#34;attribute\u0026#34;]; print(next(x[\u0026#34;value\u0026#34;] for x in a if x[\u0026#34;name\u0026#34;]==\u0026#34;org\u0026#34;))\u0026#39; Le reti britanniche più grandi senza IPv6 Le reti britanniche più grandi con IPv4 e nessun IPv6, 27 agosto 2026 Indirizzi IPv4 annunciati in BGP, prefissi sovrapposti accorpati. Nomi dal database RIPE. 0k 50k 100k 150k 200k Vodafone Limited AS25310 229.376 Nationwide Building Society AS8698 131.072 British Airways plc AS15914 131.072 Convergence Group (Metronet) AS42973 94.976 Rackspace Ltd AS24867 86.016 Lloyds Banking Group AS49758 81.920 QinetiQ Limited AS24775 69.632 Barclays Bank plc AS12701 68.608 MUFG Securities EMEA AS8651 65.792 University of Warwick AS201773 65.792 NatWest Markets plc AS21054 65.536 PricewaterhouseCoopers Services AS21296 65.536 London Borough of Hackney AS39400 65.536 Wireless Logic Limited AS51320 39.424 In tutto, le reti britanniche senza IPv6 siedono su\u0026#160;4.232.232 indirizzi IPv4. Barclays detiene 141.228.0.0/16 da agosto 1990. Le quattordici più grandi reti britanniche che annunciavano IPv4 e nessun IPv6 il 27 agosto 2026, per spazio di indirizzi effettivamente annunciato. Prefissi sovrapposti fusi prima del totale. Guarda quell\u0026rsquo;elenco e prova a pronunciare le parole «barriera di costo» senza ridere.\nQuattro delle grandi banche commerciali. Una società di revisione globale il cui intero prodotto è dire agli altri come gestire i propri affari. Un\u0026rsquo;azienda di tecnologia per la difesa. Un fornitore di hosting i cui clienti lo pagano per sapere queste cose. Un\u0026rsquo;azienda di connettività per l\u0026rsquo;internet delle cose, che vende SIM, senza IPv6.\nMesse insieme, le reti britanniche che non annunciano IPv6 siedono su 4.232.232 indirizzi IPv4. Il mercato dei trasferimenti ha fatto in media $20,04 a indirizzo nella prima metà del 2026, quindi è un patrimonio che vale ben più di ottanta milioni di dollari. Ed è questa la vera ragione per cui nessuno di loro si è mosso: sono ricchi di indirizzi, quindi la carenza è un problema di qualcun altro, e l\u0026rsquo;impianto idraulico di lungo periodo di internet non è compito di nessuno in particolare.\nNon è una strategia. È stare comodi.\nIl file di delegazione riporta la data in cui ogni blocco è stato assegnato, quindi puoi vedere esattamente quanto comodi:\ngrep -E \u0026#39;\\|ipv4\\|(141\\.228|155\\.131|155\\.136|161\\.2)\\.0\\.0\\|\u0026#39; \\ delegated-ripencc-extended-latest | cut -d\u0026#39;|\u0026#39; -f4,5,6 Barclays detiene 141.228.0.0/16 dal 6 agosto 1990. Nationwide e NatWest hanno preso i loro nel novembre 1991, a quattro giorni di distanza. British Airways ha avuto 161.2.0.0/16 nell\u0026rsquo;aprile 1992. Sono blocchi di classe B di prima che esistesse il web, dati quando gli indirizzi erano gratis e nessuno li contava.\nTutti quelli arrivati dopo pagano per questo. AWS ha iniziato a far pagare $0,005 all\u0026rsquo;ora per ogni indirizzo IPv4 pubblico dal 1 febbraio 2024, cioè $43,80 all\u0026rsquo;anno ciascuno, e ha detto chiaramente perché: il costo per acquisirne uno «has risen more than 300% over the past 5 years». La scarsità è reale e ha un prezzo. Solo che non lo pagano quelli che detengono quattro milioni di indirizzi avuti per niente nel 1991.\nCome siamo messi rispetto a paesi come il nostro Due numeri per paese. Il primo è la quota della sua popolazione che raggiunge Google su IPv6 nativo, ed è la misura di Google del 25 agosto 2026. Il secondo è la quota delle sue reti vive che annunciano un prefisso IPv6, ed è mia, dagli stessi file di prima. Mi sono limitato alle economie sviluppate. Confrontarci con paesi arrivati tardi a internet non dice niente su di noi. Ordinati per persone.\nPaese Utenti su IPv6 Reti con IPv6 Reti vive Francia 85,6% 48,5% 1.368 Germania 76,6% 63,9% 2.291 Belgio 72,8% 45,8% 273 Stati Uniti 56,6% 25,9% 18.453 Giappone 56,1% 56,4% 721 Regno Unito 53,7% 42,3% 2.078 Norvegia 52,6% 66,9% 278 Paesi Bassi 51,9% 61,8% 1.023 Canada 43,6% 33,1% 1.578 Irlanda 38,1% 41,5% 195 Australia 37,2% 26,3% 1.652 Svezia 36,1% 53,6% 642 Corea del Sud 18,1% 5,3% 916 Italia 17,6% 35,8% 1.078 Spagna 13,3% 26,7% 934 Sesti su quindici. La Francia ha due terzi in più di persone su IPv6 rispetto a noi, dalla stessa filiera europea, con gli stessi fornitori di apparati, con gli stessi clienti che dicono che nessuno lo chiede. La Germania ci sta davanti di ventitré punti sugli utenti e di ventidue sulle reti.\nLe due colonne di percentuali non vanno d\u0026rsquo;accordo tra loro, e il disaccordo è la storia.\nUtenti su IPv6 contro reti che portano IPv6, quindici economie sviluppate Persone su IPv6, contro reti che portano IPv6 Misura utenti di Google, 25 agosto 2026, contro il mio conteggio delle reti attive che annunciano un prefisso IPv6, 27 agosto 2026. quota di persone quota di reti Francia 85,6% 48,5% Germania 76,6% 63,9% Belgio 72,8% 45,8% Stati Uniti 56,6% 25,9% Giappone 56,1% 56,4% Regno Unito 53,7% 42,3% Norvegia 52,6% 66,9% Paesi Bassi 51,9% 61,8% Canada 43,6% 33,1% Irlanda 38,1% 41,5% Australia 37,2% 26,3% Svezia 36,1% 53,6% Corea del Sud 18,1% 5,3% Italia 17,6% 35,8% Spagna 13,3% 26,7% 0% 20% 40% 60% 80% 100% Una barra blu lunga sopra una rosa corta vuol dire che tre o quattro operatori hanno fatto il lavoro e il resto del paese no. Francia, Belgio, Stati Uniti e Regno Unito hanno tutti questa forma. Norvegia, Svezia e Giappone no. Gli stessi quindici paesi su entrambe le misure, ordinati per quota di persone che usano IPv6. Dove la barra delle reti è molto più corta di quella degli utenti, pochi grandi operatori si portano dietro il paese e nessun altro si è scomodato. È la forma degli Stati Uniti, del Belgio, della Francia e del Regno Unito. La percentuale di utenti di un paese la decidono tre o quattro aziende. La percentuale di reti la decidono tutti gli altri. Quando la prima è alta e la seconda è bassa, vuol dire che le grandi reti di accesso hanno fatto il lavoro e il resto del paese ci è salito a scrocco.\nGli Stati Uniti sono il caso più chiaro: il 56,6% delle persone è su IPv6 e solo il 25,9% delle reti. Gli operatori via cavo e mobili si portano dietro quasi tutti. Le altre diciottomila reti americane non hanno fatto niente.\nLa nostra è la stessa furbata con numeri più piccoli: 53,7% degli utenti contro 42,3% delle reti. Quel 53,7% non è un risultato nazionale. È Sky e BT, più un errore di arrotondamento di tutti gli altri.\nNorvegia e Svezia sono la forma opposta, quella onesta: meno utenti su IPv6 di noi, più reti che lo trasportano. Una parte maggiore della loro industria ha fatto davvero il lavoro, e a restare indietro sono gli ISP consumer, non il settore.\nE una riga merita uno sguardo più da vicino, perché è quella a cui la gente ricorre quando vuole sentirsi meglio su di noi.\nLa Corea del Sud è il paese peggiore di questa lista, e di molto. Delle 916 reti coreane vive, 61 annunciano IPv6. Sessantuno.\nAlcune delle connessioni domestiche più veloci del pianeta, un\u0026rsquo;industria dei chip che stampa soldi, e il 94,7% delle sue reti non lo ha mai acceso. I tre grandi operatori, KT, SK Broadband e LG U+, lo annunciano tutti, ed è per questo che il 18,1% degli utenti coreani ce l\u0026rsquo;ha. Le altre ottocentocinquanta reti non hanno fatto niente.\nQualunque sia la scusa lì, non sono i soldi, non è la capacità e non è lo stato della fibra.\nVent\u0026rsquo;anni ad avvitare roba Ecco cosa ha costruito l\u0026rsquo;industria invece di digitare gli indirizzi.\nQuando gli indirizzi hanno cominciato a scarseggiare, la risposta è stata il carrier-grade NAT: mettere centinaia di clienti dietro un solo indirizzo IPv4 pubblico e tradurre tra loro. Tutto quello che segue esiste per renderlo sopportabile, e ognuno di questi documenti è un lavoro di ingegneria che qualcuno ha scelto di fare invece di distribuire IPv6.\nAggiunta A cosa serve RFC 6598 (2012) Brucia un intero /10, quattro milioni di indirizzi, come «shared address space», così il ripiego per la carenza ha bisogno di indirizzi suoi RFC 6333 (2011) DS-Lite: far passare IPv4 in un tunnel sulla rete IPv6 che hai costruito ma non hai dato al cliente RFC 6877 (2013) 464XLAT: tradurre IPv4 in IPv6 e di nuovo indietro nello stesso viaggio RFC 6888 (2013) L\u0026rsquo;elenco dei requisiti che un carrier-grade NAT deve rispettare per non essere pericoloso RFC 7021 (2013) Uno studio completo delle applicazioni che il carrier-grade NAT rompe RFC 7422 (2014) Mappatura deterministica degli indirizzi, inventata solo per evitare che il volume dei log mandi in rovina il fornitore RFC 7597 / 7599 (2015) MAP-E e MAP-T: altri due modi per trasportare IPv4 su IPv6 senza ammettere di avere IPv6 Vent'anni di ripieghi contro l'unico cambiamento che sostituiscono Cosa abbiamo costruito al suo posto, e al posto di cosa Evitare IPv6 Spazio condiviso: un intero /10 bruciato RFC 6598, 2012 DS-Lite: IPv4 in tunnel su un core IPv6 RFC 6333, 2011 464XLAT: tradurre fuori da IPv4 e ritorno RFC 6877, 2013 Regole per rendere sopportabile il CGN RFC 6888, 2013 Uno studio delle applicazioni che rompe RFC 7021, 2013 Mappatura deterministica per meno log RFC 7422, 2014 MAP-E e MAP-T: di nuovo IPv4 su IPv6 RFC 7597/9, 2015 Più lo strato NAT stesso: tabelle di sessione, blocchi di porte, gateway applicativi, failover, capacità, una pipeline di log, e una legge sulla conservazione per coprire l'attribuzione distrutta. Fare IPv6 Dual-stack Una famiglia di indirizzi in più, sul protocollo di routing e la policy firewall che già usi. Nessuno strato nuovo nel percorso. Nessuno stato da dimensionare. Nessun log tenuto per obbligo di legge. Gratis dal registro. Entrambe le colonne sono lavoro di ingegneria, e quella di sinistra è più grande. La differenza è che il lavoro a sinistra si può comprare da un fornitore, e quello a destra deve capirlo chi possiede la rete. Due decenni di lavoro sugli standard, hardware e log, tutto al servizio di non fare la cosa a destra. Il dual-stack è una famiglia di indirizzi aggiunta accanto a quella che già usi. Tutto quello a sinistra esiste per evitarlo. Guarda la forma di questa cosa. Ogni voce dell\u0026rsquo;elenco è più difficile del dual-stack. Mettere IPv4 in un tunnel dentro IPv6 è strettamente più lavoro che instradare IPv6, perché IPv6 devi instradarlo comunque per trasportare il tunnel. Tradurre tra famiglie è più lavoro che non tradurre. Un carrier-grade NAT è un apparato con stato in mezzo alla tua rete, con pianificazione della capacità, failover, tabelle di sessione, allocazione di blocchi di porte, gateway applicativi per i protocolli che rompe, e una pipeline di log dimensionata per un obbligo di legge.\nIl dual-stack è una famiglia di indirizzi, un protocollo di routing che già usi e una policy di firewall che hai già scritto.\nL\u0026rsquo;industria ha guardato queste due opzioni e ha scelto quella costosa, vent\u0026rsquo;anni di fila, perché quella costosa si poteva comprare e quella economica bisognava capirla. Comprare un apparato è un esercizio di procurement. Accendere IPv6 vuol dire che qualcuno nell\u0026rsquo;edificio deve sapere come funziona la rete.\nCosa rompe davvero Per chi pensa che sia una questione estetica, ecco cosa costa un indirizzo condiviso ai tuoi utenti, nell\u0026rsquo;ordine in cui ti telefoneranno.\nNiente può entrare. Niente port forwarding, quindi niente self-hosting di qualsiasi cosa, niente console che fa da host, niente VPN site-to-site senza relay, niente telecamera di sicurezza senza il cloud del produttore, niente accesso remoto alla cosa nell\u0026rsquo;altra sede. Ognuna di queste viene sostituita da un servizio di rendezvous di terzi, cioè un\u0026rsquo;altra azienda che detiene i tuoi dati perché il tuo fornitore non ti ha voluto dare un indirizzo.\nErediti la reputazione di sconosciuti. Condividi un indirizzo con qualche centinaio di persone e ne condividi il comportamento. Limiti di frequenza, CAPTCHA, blocchi su Wikipedia, errori geografici dello streaming e punteggi antifrode ti cadono addosso per qualcosa che ha fatto qualcun altro.\nLe porte finiscono. Un carrier-grade NAT ha 65.535 porte per indirizzo pubblico per protocollo, e una sola sessione di un browser moderno ne mangia decine. Sovraccaricalo e il guasto non è un errore pulito. È un difetto lento, intermittente, non riproducibile, che sembra tutto tranne quello che è, e brucia giorni di supporto per ogni incidente.\nOgni ripiego va mantenuto per sempre, da persone che avrebbero potuto spendere quel tempo sulla soluzione.\nE poi c\u0026rsquo;è quello che ha smesso di essere un fastidio ed è diventato un problema di tutti. Nessuno sa dire chi ha fatto cosa.\nL\u0026rsquo;aggiunta che è arrivata in Parlamento Quando centinaia di clienti condividono un indirizzo, un indirizzo non identifica più nessuno. Quindi la polizia non riesce a risalire da un indirizzo IP a una persona, e la risposta non è stata IPv6. È stata una legge.\nLa sezione 21 del Counter-Terrorism and Security Act 2015 ha modificato il regime di conservazione dei dati proprio perché il Secretary of State potesse obbligare i fornitori a conservare i dati aggiuntivi necessari «to link the unique attributes of a public Internet Protocol (IP) address to the person (or device) using it at any given time». Le note esplicative sono schiette sul perché servisse: i fornitori «may share IP addresses between multiple users, and the providers generally have no business purpose for keeping a log of who used each address at a specific point in time».\nLeggilo da ingegnere invece che da avvocato. L\u0026rsquo;industria ha rotto l\u0026rsquo;attribuzione per risparmiarsi un po\u0026rsquo; di lavoro, e il Parlamento ha approvato una legge che la obbliga a costruire un sistema di log per coprire la rottura.\nDue anni dopo Europol lo ha detto senza giri di parole. Nell\u0026rsquo;ottobre 2017 ha pubblicato un appello all\u0026rsquo;industria perché smettesse di usare il carrier-grade NAT, con i numeri: il 90% dei fornitori di accesso mobile e il 50% di quelli su rete fissa avevano adottato una tecnologia che impediva loro di identificare i propri abbonati. L\u0026rsquo;allora direttore esecutivo di Europol disse che il CGN «has created a serious online capability gap in law enforcement efforts to investigate and attribute crime», e osservò che «forces judiciary and law enforcement authorities to investigate many more individuals than would normally be necessary».\nEuropol ha detto anche la parte che di solito si tace. Il carrier-grade NAT «was supposed to be a temporary solution until the transition to IPv6 was completed». Invece l\u0026rsquo;industria ha continuato ad aumentarne l\u0026rsquo;uso mentre il sostituto restava lì, finito, gratuito e ignorato.\nQuindi il costo di non distribuire IPv6 include: una legge primaria, un obbligo nazionale di conservazione dei dati, persone innocenti trascinate nelle indagini perché condividevano un indirizzo con qualcuno che innocente non era, e un buco di capacità che la polizia descrive come un problema di sicurezza pubblica.\nNessuno l\u0026rsquo;ha messo nel business case. Non compare mai nella slide «IPv6 non ha ROI», perché non lo pagano quelli che l\u0026rsquo;hanno causato.\nNon nasconde solo i criminali. Li aiuta. L\u0026rsquo;argomento dell\u0026rsquo;attribuzione è quello che fanno le forze dell\u0026rsquo;ordine, e riguarda prendere le persone dopo il fatto. C\u0026rsquo;è un secondo argomento che si fa molto più di rado ed è peggiore: la condivisione degli indirizzi degrada attivamente le difese che impediscono agli attacchi di avvenire.\nNon è una mia analisi. L\u0026rsquo;IETF ha pubblicato il catalogo nella RFC 6269, Issues with IP Address Sharing, nel giugno 2011. Cioè prima che il Regno Unito distribuisse la maggior parte del carrier-grade NAT che usa oggi. Le sue parole semplici: la condivisione degli indirizzi «creates a vector for attack amplification in numerous ways».\nEcco cosa avvertiva che si sarebbe rotto, e si è rotto.\nIl rate limiting e i blocchi smettono di funzionare. La difesa standard contro i tentativi di indovinare le password e il credential stuffing è contare i fallimenti per indirizzo e mettere il colpevole in castigo. Condividi quell\u0026rsquo;indirizzo tra centinaia di persone e il contatore misura una folla. La RFC 6269 è schietta sul risultato: «In the presence of widespread large-scale address sharing, penalty box solutions to service abuse simply will not work.» I login falliti di un utente bloccano tutti gli altri, così gli operatori alzano le soglie, e alzare le soglie è proprio quello che voleva l\u0026rsquo;attaccante.\nLe blocklist diventano danni collaterali. Blocchi lo spammer e blocchi la strada in cui abita. Così l\u0026rsquo;operatore sensato smette di bloccare, e l\u0026rsquo;abuso continua da un indirizzo che nessuno osa toccare.\nLe macchine infette restano infette. I feed sugli abusi e le notifiche di malware arrivano come un indirizzo e un timestamp. Dietro un CGN senza log delle porte, il fornitore non sa quale dei suoi clienti stia facendo girare il bot, quindi il cliente non viene mai avvisato e l\u0026rsquo;infezione resta. Peggio, la RFC 6269 segnala il problema inverso: «someone else\u0026rsquo;s worm can interfere with the ability to access the service for other subscribers sharing the same IP address».\nIl controllo degli accessi basato sugli indirizzi fallisce. Ogni allow-list costruita sull\u0026rsquo;indirizzo di origine ora fa entrare una folla invece di un cliente.\nE una difesa viene indebolita in modo misurabile, non solo smussata. Gli attacchi TCP alla cieca dipendono dall\u0026rsquo;indovinare la quintupla, e la mitigazione dell\u0026rsquo;industria è randomizzare la porta di origine (RFC 6056). Un carrier-grade NAT dà a ogni abbonato una fetta dell\u0026rsquo;intervallo di porte invece dell\u0026rsquo;intervallo intero. Con le parole della RFC 6269, «with shared IPv4 addresses, the port selection space is reduced». Il ripiego per la carenza di indirizzi toglie entropia direttamente a un meccanismo anti-attacco.\nPoi c\u0026rsquo;è la parte che dovrebbe preoccupare chiunque, qualunque cosa pensi della polizia. Se il server non ha registrato le porte di origine e il NAT non ha registrato le destinazioni, la RFC 6269 spiega cosa deve fare un fornitore quando arriva una richiesta legittima: «would need to disclose the identity of all subscribers who had active sessions on the NAT during the time period in question. This may be a large number of subscribers».\nL\u0026rsquo;alternativa all\u0026rsquo;identificare un abbonato colpevole è consegnare l\u0026rsquo;identità di diverse centinaia di innocenti. È questo il vero risultato della condivisione degli indirizzi in termini di privacy, ed è l\u0026rsquo;opposto di quello che i suoi difensori le attribuiscono.\nTre cose devono combaciare, e nessuno è obbligato a fornirne nessuna La gente dà per scontato che i log esistano da qualche parte e che basti chiederli. Per lo più non esistono, e il motivo è l\u0026rsquo;aritmetica, non la cattiva volontà.\nPer ritrasformare un indirizzo condiviso in una famiglia, tre cose distinte devono essere andate tutte bene:\nIl server remoto ha registrato la porta di origine. La RFC 6302 ha chiesto ai server esposti su internet di registrare porta di origine e timestamp insieme all\u0026rsquo;indirizzo, nel 2011. È una raccomandazione. Nessuno la fa rispettare, e moltissimi server registrano ancora solo l\u0026rsquo;indirizzo. A quel punto la pista è morta prima di arrivare dalla parte britannica. Il fornitore ha conservato la mappatura. Ogni sessione, per mesi. Gli orologi erano d\u0026rsquo;accordo. La RFC 6269 avverte che su un CGN trafficato «even very small amounts of clock skew between a third party\u0026rsquo;s server and the CGN operator will result in ambiguity about which customer was using a specific port at a given time». Ne manca una e non hai niente. Ed è la seconda il punto in cui tutto crolla, perché i documenti degli standard contengono i conti.\nLa RFC 7422 ci ha messo numeri veri. Gli operatori riportavano circa 33.000 connessioni per famiglia al giorno. A circa 150 byte per voce di log fanno 5 MB per abbonato al giorno, 150 MB al mese. Per un fornitore con un milione di abbonati: 150 terabyte di log al mese, 1,8 petabyte all\u0026rsquo;anno, da conservare per i sei-dodici mesi che la legge si aspetta, e da interrogare su richiesta.\nE non è mai un solo log. Il NAT444, il caso su cui la RFC 7422 dimensiona le sue voci, mette una traduzione nel router del cliente e un\u0026rsquo;altra presso l\u0026rsquo;operatore, e ogni cancello che un pacchetto attraversa deve annotare cosa ha fatto. Ricostruire una sola sessione vuol dire correlare tabelle separate, tenute da soggetti separati, alle prese con il problema degli orologi visto sopra. Le prove arrivano a pezzi da sistemi diversi, oppure non arrivano.\nE i soldi sono solo metà del problema. Catturare record di sessione a quel ritmo, spedirli da qualche parte, indicizzarli perché una richiesta legittima torni in ore e non in settimane, e tenere il tutto per un anno è un progetto di data engineering. Non c\u0026rsquo;è una dashboard e non c\u0026rsquo;è un apparato da comprare. Deve costruirlo qualcuno che capisce cosa sta costruendo, e non è un lavoro da punta e clicca, il che in questo settore equivale più o meno a dire che non viene costruito.\nE nessuno l\u0026rsquo;avrebbe mai pagato. L\u0026rsquo;IETF lo sapeva, ed è per questo che la RFC 6888 dice agli operatori l\u0026rsquo;opposto di quello che serve alla sicurezza pubblica: «A CGN\u0026rsquo;s port allocation scheme SHOULD minimize log volume», giustificato perché «huge log volumes can be problematic to CGN operators». La RFC 7422 esiste per nessun altro scopo che tagliare quel conto.\nQuindi il consiglio di progetto all\u0026rsquo;industria è registrare meno, l\u0026rsquo;economia dice che 1,8 petabyte all\u0026rsquo;anno sono insostenibili, e l\u0026rsquo;aspettativa legale è un registro completo. Non possono essere tutte vere insieme, e quella che cede è il registro.\nEcco perché Europol ha trovato che la maggioranza dei fornitori di accesso non riesce a identificare un abbonato quando riceve un ordine legale. Non perché ostruiscano. Perché la cosa richiesta non è mai stata economicamente possibile da conservare, e nessuno è mai stato obbligato a farlo.\nNe seguono due cose, e sono mie, non citazioni di qualcuno.\nPrimo: una grossa fetta delle connessioni internet britanniche è non attribuibile per costruzione. Il mobile è il caso più chiaro, e una misura indipendente lo mette più in alto di quanto facesse Europol, al 95%. Quindi l\u0026rsquo;anonimato che prima richiedeva Tor, o una VPN che qualcuno doveva comprare, è ora l\u0026rsquo;impostazione di fabbrica di una connessione mobile britannica: data gratis con la SIM, a tutti, compreso il piccolo numero di persone che l\u0026rsquo;intero apparato dovrebbe trovare.\nSecondo, e peggio: rompere il metodo mirato ed economico è ciò che crea domanda per quello costoso e non mirato. Quando puoi notificare un mandato su un indirizzo e ottenere una famiglia, non ti serve nient\u0026rsquo;altro. Quando questo smette di funzionare, lo Stato non alza le spalle. Allunga la mano verso qualcosa di più ampio. È questo che è stata la legge del 2015: un obbligo di conservazione su tutta la base di abbonati, per rispondere a domande su una manciata di persone.\nNiente di tutto questo esiste dall\u0026rsquo;altra parte. Non viene tradotto niente, quindi non c\u0026rsquo;è proprio nessun record per connessione da conservare. L\u0026rsquo;indirizzo nel log del server remoto è già il prefisso dell\u0026rsquo;abbonato: un record, scritto una volta quando la linea è stata attivata, in un solo sistema. Anche un fornitore che ruota i prefissi ogni giorno ne scrive qualche centinaio all\u0026rsquo;anno per cliente, contro i dodici milioni a cui arrivano 33.000 connessioni al giorno. Non è che IPv6 registri meno. Non c\u0026rsquo;è niente da registrare.\nChi ha scritto il ripiego lo sapeva. Nel mezzo di una specifica scritta per nessun altro motivo che rendere il CGN sostenibile da registrare, si è fermato ad annotare che «native IPv6 will offer subscribers a better experience than CGN».\nUn\u0026rsquo;industria ha rifiutato di spendere due settimane per rete su un protocollo gratuito, e il paese si è ritrovato con un regime di conservazione dei dati.\nSistemare questo proteggerebbe i bambini meglio dell\u0026rsquo;Online Safety Act? Voglio essere attento qui, perché è facile fare questo ragionamento male, e la versione fatta male si merita le bastonate che prenderebbe.\nParti da come si svolge davvero un\u0026rsquo;indagine sugli abusi sui minori. Una piattaforma rileva il materiale e lo segnala. La segnalazione porta con sé un indirizzo e un timestamp. La polizia notifica una richiesta al fornitore di accesso per trasformarlo in un abbonato, e l\u0026rsquo;abbonato è un indirizzo nel mondo reale con una porta. Questa è tutta la catena, e ogni passaggio dopo dipende da quello prima.\nOra metti un carrier-grade NAT in mezzo. La segnalazione arriva lo stesso. L\u0026rsquo;indirizzo si risolve lo stesso. In diverse centinaia di famiglie, ed Europol ha trovato indagini «dropped or delayed» come conseguenza. Tra i loro casi d\u0026rsquo;esempio c\u0026rsquo;è un pubblico ministero che non è riuscito a identificare i membri di un forum a sostegno dell\u0026rsquo;ISIS, così l\u0026rsquo;azione penale non c\u0026rsquo;è stata, e l\u0026rsquo;HMRC che ha ricondotto una frode fiscale su larga scala a indirizzi mobili trovando le piste «frustrated from the outset».\nLa CyberTipline del NCMEC ha ricevuto 21,3 milioni di segnalazioni nel 2025 e ne ha inoltrate più di 18,8 milioni alle forze dell\u0026rsquo;ordine, tra cui oltre 53.000 che riguardavano un bambino in pericolo immediato. Il NCMEC registra anche che più del 10% delle segnalazioni dell\u0026rsquo;industria è arrivato con informazioni troppo scarse per capire a quale giurisdizione mandarle. Quel dato non è colpa del CGNAT e non sto dicendo che lo sia; però ti dice in quale punto di questa pipeline muoiono i casi. Muoiono sui metadati.\nQuindi la versione onesta del confronto è questa. Il carrier-grade NAT rompe l\u0026rsquo;ultimo miglio dello stesso Online Safety Act. Il Parlamento ha imposto obblighi di rilevare e segnalare, e ha lasciato la rete di accesso incapace di risolvere quello che viene segnalato. Puoi approvare tutti gli obblighi di segnalazione che vuoi. Se l\u0026rsquo;ultimo passo restituisce una folla, la segnalazione è carta.\nE il costo delle due cose non è nemmeno lontanamente paragonabile. L\u0026rsquo;Act è la più grande regolamentazione di internet che questo paese abbia tentato: migliaia di servizi coinvolti, un regolatore che scrive codici per anni, verifiche dell\u0026rsquo;età a milioni di controlli al giorno, e un problema di aggiramento abbastanza grande che la Camera dei Lord ha discusso dell\u0026rsquo;uso delle VPN. IPv6 non costa niente al registro e richiede a una squadra competente un paio di settimane. Una delle due cose è stata imposta all\u0026rsquo;intera industria. L\u0026rsquo;altra non è mai stata chiesta a nessuno.\nTre cose vanno dette chiaramente, perché senza di esse l\u0026rsquo;argomento non vale niente.\nUno. Non è un sostituto, e non lo propongo come tale. IPv6 non fa niente per impedire a un dodicenne di trovare pornografia. Non fa niente sui sistemi di raccomandazione, sull\u0026rsquo;autoplay o sulle dirette. Non fa niente sul materiale ospitato in un altro paese, che è la maggior parte. Sono i problemi per cui l\u0026rsquo;Act è stato scritto, e nessuna modifica di protocollo li tocca.\nDue. IPv6 non è un livello di identità, e chi lo vende così lo sta sopravvalutando. Le privacy extension ruotano l\u0026rsquo;indirizzo di un dispositivo per progetto, quindi l\u0026rsquo;indirizzo della macchina non è la cosa stabile. Stabile è il prefisso delegato alla linea: il /56 che Sky dà a ogni abbonato dal 2016. Quello si risolve in un abbonato, che è esattamente la risoluzione di cui ha bisogno una richiesta legittima, e niente di più. È il ripristino di quello che un tempo dava un singolo indirizzo IPv4 per linea, non una nuova capacità di sorveglianza.\nTre. La proprietà che frustra la polizia frustra anche chiunque altro ti tracci, e alcune persone ci tengono. Essere uno di cinquecento dietro un indirizzo condiviso è una vera copertura da folla contro la profilazione commerciale. Non penso che valga quello che costa: è una copertura comprata rendendo l\u0026rsquo;abuso non attribuibile e il rate limiting inutile, ed è una copertura che le piattaforme per lo più aggirano comunque con cookie e fingerprinting. Però è un argomento reale e merita di essere detto invece che ignorato.\nQuindi no, non è IPv6 al posto dell\u0026rsquo;Online Safety Act. È che la Gran Bretagna ha scritto la legge sulla sicurezza online più costosa della sua storia sopra un impianto che sapeva essere rotto, quando la soluzione era gratuita, ben documentata e disponibile per tutto il tempo in cui il disegno di legge veniva scritto.\nCosa chiedere davvero Non un divieto. Un divieto è lo strumento sbagliato e si ritorcerebbe contro.\nNon c\u0026rsquo;è più IPv4 da distribuire: RIPE è vuoto dal novembre 2019, e un nuovo fornitore riceve un solo /24 da una lista d\u0026rsquo;attesa. Metti fuori legge la condivisione degli indirizzi domani e il piccolo operatore non riesce più a collegare clienti, mentre quelli seduti su blocchi di classe B del 1990 vanno avanti indisturbati. Rafforzerebbe esattamente le persone di cui parla questo articolo.\nLo strumento migliore esiste già e qualcuno ha già fatto l\u0026rsquo;esperimento.\nNel 2012 la polizia federale belga, il suo regolatore delle telecomunicazioni, il suo Consiglio dei procuratori generali e la sua associazione degli ISP hanno firmato un codice di condotta volontario di due pagine. Massimo 16 abbonati dietro un indirizzo IPv4. Limitare l\u0026rsquo;uso del CGN. Cominciare ad adottare IPv6.\nNel 2017 la maggior parte degli operatori belgi stava dentro il limite, uno era sceso a 8, e la polizia belga vedeva in media quattro utenti per indirizzo mobile. Il riassunto di Europol sul perché è la parte da leggere due volte: i fornitori più grandi «are quickly moving towards IPv6 because no financial interest to invest in CGN anymore». Metti un tetto al sovraccarico e l\u0026rsquo;economia del ripiego crolla, perché un NAT che può impilare solo sedici persone non costa meno del protocollo che non ne ha bisogno.\nQuell\u0026rsquo;anno il Belgio aveva l\u0026rsquo;adozione di IPv6 più alta al mondo, al 49%, quando Gran Bretagna e Francia erano al 14% e Spagna e Italia sotto l'1%. Il Belgio è ancora terzo nella tabella dei paesi qui sopra, al 72,8%.\nQuesta è la richiesta. Non «non puoi condividere gli indirizzi», ma non puoi vendere una connessione che sia insieme non attribuibile e priva di IPv6. Indirizzi condivisi insieme a un IPv6 funzionante vanno benissimo. È così che funziona ogni rete mobile sulla terra. Indirizzi condivisi senza IPv6 vuol dire vendere un servizio rotto e far pagare al pubblico le conseguenze.\nSky ha dimostrato che si poteva fare, undici anni fa Se fosse davvero difficile, nessuno nel Regno Unito ci sarebbe riuscito.\nSky ha avviato un progetto IPv6 interno all\u0026rsquo;inizio del 2013 e lo ha finito nel 2016, con circa il 90% della sua base su rete fissa, più o meno cinque milioni di utenti, che ha ricevuto IPv6 e lo usa. Il loro ingegnere ha raccontato tutto su RIPE Labs: 6PE attraverso il core MPLS, peering e transito in dual-stack, attributi RADIUS per abilitarlo abbonato per abbonato, lavoro sul firmware di sette modelli di CPE tra cui cinque vecchi, e aggiornamenti di capacità su RADIUS e DNS.\nTre anni, un ISP, e lo stesso rame Openreach su cui vendevano tutti gli altri. ISPreview ha riportato la fine nel settembre 2016, con Sky che si aspettava il 95% della base entro la fine di quell\u0026rsquo;anno, e Sky ha vinto il Jim Bound IPv6 Award per questo.\nIl loro consiglio era: «Do not underestimate the work required to enable IPv6, and do not leave it to the last minute to begin the journey.»\nUndici anni dopo, gran parte dell\u0026rsquo;industria è ancora all\u0026rsquo;ultimo minuto, e lo tratta come un posto dove vivere.\nTutti hanno gli indirizzi da anni Sky è stato il primo dei grandi ISP. Non è stato neanche lontanamente il primo del paese, e nessun fornitore di questo elenco può dire di aver aspettato il registro.\nRIPE stampa la data di assegnazione nel nome del blocco, quindi puoi controllare chiunque da solo:\nwhois -h whois.ripe.net 2a01:4b00::/32 | grep -E \u0026#39;netname|^org:\u0026#39; # netname: UK-BCUBE-20110225 -\u0026gt; Hyperoptic, allocated 25 February 2011 Ogni data qui sotto viene da quella ricerca sull\u0026rsquo;assegnazione del fornitore stesso, verificata contro il file di delegazione. I grandi ISP sono in grassetto, gli altri sono i costruttori di fibra fino a casa. Se i clienti ricevono davvero IPv6 viene dal sondaggio di ISPreview aggiornato a marzo 2025, e dal tracker mobile per le reti telefoniche.\nDa quanto ogni provider britannico ha IPv6, e se i clienti lo ricevono Da quanto ogni provider britannico ha IPv6, e se i clienti lo ricevono davvero Date di assegnazione dal file di delega RIPE e dai suoi timbri netname. Se arriva ai clienti: ISPreview, marzo 2025, e il tracker mobile della comunità. i clienti lo ricevono in parte: una sola rete ancora non lo offrono (17 su 40) 2002 2002 2006 2006 2010 2010 2014 2014 2018 2018 2022 2022 2026 2026 TalkTalk (come Opal Telecom) Andrews \u0026amp; Arnold Vodafone UK EE (come T-Mobile) Sky Gigaclear O2 (Telefónica UK) BT Virgin Media (come NTL) KCOM Hyperoptic (come Bcube) Zen Internet B4RN Trooli (come Call Flow) Exascale Three UK Community Fibre Ogi (come NetSupport) WightFibre Truespeed Airband G.Network Wessex Internet Quickline FibreNest Wildanet Fibrus (come B4B Networks) Zzoomm GoFibre (come Borderlink) Toob Netomnia / YouFibre Pine Media BeFibre Squirrel Internet brsk Lit Fibre (come Broadreach) iDNET * Grain Hey! Broadband Octaplus Tutti e quaranta hanno spazio IPv6 da almeno tre anni, e la maggior parte da oltre un decennio. 17 di loro non lo danno ancora a nessun cliente. Quaranta fornitori britannici, ordinati per data in cui il registro ha dato loro IPv6. Ogni barra va da quell\u0026rsquo;assegnazione a oggi. Le barre blu lo danno ai clienti; quelle rosa non lo hanno mai fatto. Quaranta fornitori. Ognuno detiene spazio di indirizzi IPv6 da almeno tre anni, la maggior parte da oltre dieci, e diciassette di loro ancora non lo danno a un cliente.\nHyperoptic detiene 2a01:4b00::/32 dal febbraio 2011. Quindici anni a portare fibra nei condomini, vendere connessioni gigabit e mettere le persone dietro carrier-grade NAT con un\u0026rsquo;assegnazione IPv6 inutilizzata a bilancio. Trooli ha la sua da tredici anni. Truespeed e Airband da dieci.\nAndrews \u0026amp; Arnold è quello con cui misurare tutti gli altri. Un piccolo ISP di Bracknell con una frazione dei clienti e degli ingegneri di chiunque altro in quell\u0026rsquo;elenco, che dà IPv6 su ogni linea dal 2002, ed è tra quelli dietro 6UK. TalkTalk ha preso la sua assegnazione tre mesi prima e ancora non lo dà ai consumatori.\nVirgin Media ha preso il suo blocco tre settimane prima che Zen prendesse il suo. Zen lo ha distribuito, e da allora sono all\u0026rsquo;estremità di uno dei loro /48. Virgin dice ancora «when we are ready».\nE guarda il fondo della tabella. Squirrel, brsk, Lit Fibre e Octaplus hanno avuto le loro assegnazioni negli ultimi sei anni e distribuiscono tutti IPv6, mentre fornitori che detengono spazio dal 2011 no. Partire tardi non è l\u0026rsquo;ostacolo. Partire è l\u0026rsquo;ostacolo.\nDue nomi di quel sondaggio non sono nel grafico, e il motivo è lo stesso per entrambi. Cuckoo è un marchio retail che compra accesso all\u0026rsquo;ingrosso su Openreach, CityFibre e altri, e Freedom Fibre è una rete all\u0026rsquo;ingrosso i cui clienti arrivano tramite partner retail. Nessuno dei due detiene spazio di indirizzi proprio, quindi IPv6 è una decisione che qualcun altro prende per loro. iDNET è segnato con un asterisco perché il suo è un\u0026rsquo;assegnazione provider-independent invece di un\u0026rsquo;allocazione propria.\nQuello che chiude la questione Se vuoi l\u0026rsquo;argomento ridotto a una sola azienda, è Plusnet.\nBT ha comprato Plusnet nel gennaio 2007. Plusnet sta sotto l\u0026rsquo;account RIPE di British Telecommunications, quindi ha accesso all\u0026rsquo;assegnazione IPv6 di BT dal giugno 2010. BT distribuisce IPv6. EE, l\u0026rsquo;altra società sorella, distribuisce IPv6. ISPreview ha notato che BT e Plusnet usano persino router per i clienti quasi identici, definendo il divario «somewhat of a peculiarity».\nPlusnet ha sperimentato IPv6 nel 2011 e ha esortato pubblicamente il resto dell\u0026rsquo;industria a darsi una mossa. Nel 2019 ha detto che lo avrebbe lanciato nella primavera del 2020. Nel 2021 si aspettava «to make good progress over the coming year». Nel novembre 2023 ha fatto una prova di tre mesi in due sedi, a Chesterfield e a Sheffield, con una ventina di dipendenti e clienti amici.\nNell\u0026rsquo;aprile 2026 il suo stesso forum clienti chiedeva ancora che fine avesse fatto IPv6.\nUna capogruppo. Un\u0026rsquo;assegnazione di indirizzi. Hardware quasi identico. Ingegneri che lavorano per lo stesso gruppo e possono fare due passi in corridoio fino a chi lo ha già fatto. Tre marchi, e uno di loro non riesce a fare in quindici anni quello che gli altri due hanno finito.\nQualunque cosa lo stia fermando, non è la tecnologia, né i soldi, né gli apparati, né lo spazio di indirizzi. È qualcuno che decide che non è un suo problema questo trimestre, quindici anni di fila.\nVirgin Media, sedici anni di «when we are ready» L\u0026rsquo;altro estremo della scala merita di essere nominato, perché la cronologia è di pubblico dominio ed è notevole.\nMarzo 2010: un cliente chiede sul forum di Virgin Media quando arriverà IPv6. La risposta è «when we are ready».\nNovembre 2016: Virgin dice a ISPreview che intende adottare IPv6 entro la metà del 2017. Non lo fa.\nGiugno 2018: viene segnalata una prova per i consumatori. Dicembre 2018: una terza presentazione allo UK IPv6 Council, che lascia intendere il 2019.\n2021: una dichiarazione secondo cui stanno «continuing to plan our IPV6 deployment having tested several solutions and intend to introduce IPV6 for our customers in future».\nFebbraio 2024: Virgin Media chiude la discussione sul forum, vecchia di quattordici anni.\nAgosto 2026: ancora niente.\nSedici anni. In questo tempo l\u0026rsquo;azienda è stata comprata, si è fusa con O2, ha ricostruito il suo core due volte e ha sostituito l\u0026rsquo;intero parco di router. In nessun momento qualcuno ha aggiunto una famiglia di indirizzi. Chiudere la discussione è la cosa più onesta di quell\u0026rsquo;elenco. È il momento in cui hanno smesso di fingere e hanno cominciato a gestire il reclamo invece del problema.\nGli altnet non avevano nessuna scusa I costruttori di fibra fino a casa erano l\u0026rsquo;occasione per partire puliti. Reti nuove, apparati nuovi, niente eredità, ingegneri assunti in questo decennio. Guarda dove stanno nella tabella delle assegnazioni: la maggior parte ha preso lo spazio di indirizzi e si è fermata.\nCosì un\u0026rsquo;azienda che ha raccolto capitale istituzionale per costruire una rete in fibra nuova di zecca ha scavato le strade, ha soffiato fibra fino a centomila case, ha comprato router nuovi, ha scritto un nuovo stack di provisioning. E ha messo i suoi clienti dietro un indirizzo condiviso su una rete senza IPv6, nel 2026, con lo spazio di indirizzi già fermo nel suo account di registro.\nE poi diversi di loro fanno pagare £5 al mese per un IPv4 pubblico statico.\nHanno tolto la cosa che funzionava, hanno rifiutato di distribuire il sostituto gratuito, e hanno trasformato il guasto risultante in una voce della tua bolletta. C\u0026rsquo;è una parola per un modello di business che fabbrica un guasto e poi vende la riparazione, e non è «innovazione».\nI siti web scoprono il gioco La tabella di routing mostra cosa fanno le reti. Il DNS mostra cosa fanno tutti gli altri. Così il 27 agosto 2026 ho messo in un file cinquanta dei siti più noti del Regno Unito, tra governo centrale, banche, grandi catene, operatori telefonici, trasporti e qualche università, e ho chiesto a ciascuno se risponde su IPv6:\nwhile read -r d; do n=$(dig +short AAAA \u0026#34;$d\u0026#34; | grep -c \u0026#39;:\u0026#39;) printf \u0026#39;%-46s %s\\n\u0026#39; \u0026#34;$d\u0026#34; \u0026#34;$([ \u0026#34;$n\u0026#34; -gt 0 ] \u0026amp;\u0026amp; echo AAAA || echo none)\u0026#34; done \u0026lt; sites.txt | sort -k2 Poi ho controllato ogni risposta contro un secondo resolver, perché un server ricorsivo in una giornata storta non è un risultato:\ndig @1.1.1.1 +short AAAA www.tesco.com | grep -c \u0026#39;:\u0026#39; Diciassette su cinquanta avevano un record AAAA. Trentatré no, ed entrambi i resolver erano d\u0026rsquo;accordo su ognuno.\nQuelli senza IPv6 includono www.bbc.co.uk, www.nhs.uk, www.hmrc.gov.uk, www.hsbc.co.uk, www.barclays.co.uk, www.lloydsbank.com, www.santander.co.uk, www.tesco.com, www.johnlewis.com, www.marksandspencer.com, www.britishairways.com, tfl.gov.uk, monzo.com (una banca fondata nel 2015, senza nessuna eredità di alcun tipo) e, il mio preferito, www.sky.com.\nSky. L\u0026rsquo;azienda che ha messo cinque milioni di clienti su IPv6 e ci ha vinto un premio. Il suo sito non risponde su IPv6.\nOra la parte che dimostra la tesi oltre ogni discussione.\nQuindici dei diciassette che hanno IPv6 lo hanno avuto da un fornitore, non da se stessi. Ho risolto ciascuno e ho cercato chi possiede l\u0026rsquo;indirizzo che ha risposto:\nwhois -h whois.radb.net -- \u0026#34;$(dig +short AAAA www.sainsburys.co.uk | grep \u0026#39;:\u0026#39; | head -1)\u0026#34; | grep -i descr www.gov.uk e www.cam.ac.uk rispondono da Fastly. ico.org.uk, www.parliament.uk, www.ofcom.org.uk, www.asda.com, www.autotrader.co.uk, www.nationalrail.co.uk e www.jisc.ac.uk rispondono da Cloudflare, che accende IPv6 per tutti di default. natwest.com e nationwide.co.uk rispondono da Azure Front Door. www.legalandgeneral.com e www.screwfix.com rispondono da CloudFront. www.sainsburys.co.uk e www.next.co.uk rispondono da Akamai.\nDue lo hanno fatto da soli: l\u0026rsquo;Imperial College di Londra, che risponde dal proprio spazio di indirizzi, e il sito stesso dello UK IPv6 Council. Un\u0026rsquo;università e quelli il cui intero scopo è IPv6. Questo è l\u0026rsquo;elenco.\nE www.tesco.com, www.sky.com e www.nhs.uk stanno anche loro su Akamai, la stessa CDN, lo stesso prodotto, e non hanno nessun IPv6.\nAkamai è stata esplicita su questo dal giugno 2022: «Akamai has enabled IPv4+IPv6 dual-stack as the default for our CDN delivery products for many years, meaning that customers have needed to opt-out for content to be IPv4-only.» Hanno aggiunto di aver reso facile cambiarlo, anche tramite l\u0026rsquo;API.\nStesso fornitore. Stessa piattaforma. Acceso di default. Un\u0026rsquo;organizzazione lo ha lasciato stare e una è entrata e lo ha spento, oppure si è tenuta una configurazione antica che nessuno legge da anni. Sainsbury\u0026rsquo;s ha IPv6 e Tesco no, e la differenza tra loro è un solo flag di configurazione e l\u0026rsquo;attenzione di qualcuno.\nDopo questo non resta in piedi nessun argomento di costo né di complessità. Resta solo se qualcuno stava facendo attenzione.\nSu tutto il campione la regola tiene: dove IPv6 arriva come impostazione predefinita di un fornitore, la Gran Bretagna ce l\u0026rsquo;ha. Dove un\u0026rsquo;organizzazione britannica avrebbe dovuto decidere qualcosa, non ce l\u0026rsquo;ha. Due siti su cinquanta, e uno dei due era l\u0026rsquo;IPv6 Council.\nIl che ci porta all\u0026rsquo;industria dei servizi gestiti Gli ISP consumer si prendono la colpa del CGNAT, e se la sono guadagnata. Ma lo strato che fa più danni è quello che vende competenza: i fornitori di servizi gestiti, gli integratori, i team di rete in outsourcing, le società di consulenza che scrivono il progetto di dettaglio.\nTorna all\u0026rsquo;elenco delle più grandi reti britanniche senza IPv6: le banche, British Airways, PwC, QinetiQ. Non sono startup arrangiate. Sono organizzazioni che pagano un sacco di soldi perché qualcun altro gestisca la loro rete, o che impiegano un grosso team per gestirla da sole. Ognuno di quei numeri AS ha dietro un documento di progetto, un processo di change, un comitato di revisione dell\u0026rsquo;architettura e un fornitore con «network» nel nome. Nessuno di loro ha prodotto un piano IPv6.\nLo schema è lo stesso ovunque lo guardi:\nIl modello è IPv4. Lo standard di build, il set di regole del firewall, i controlli di monitoraggio, l\u0026rsquo;IPAM, il runbook, il piano di disaster recovery, il pacchetto di consegna al cliente: tutto IPv4, scritto una volta, clonato per un decennio. Aggiungere una famiglia di indirizzi vuol dire modificare tutto, e nessuno è pagato per modificarlo.\nNessuno l\u0026rsquo;ha chiesto. È la frase che chiude ogni conversazione su IPv6 in questo settore, ed è una confessione. Nessuno ha chiesto nemmeno TLS 1.3. Nessuno ti ha chiesto di smettere di usare SMBv1. I clienti comprano il risultato e ti pagano per sapere cosa richiede quel risultato. «Il cliente non l\u0026rsquo;ha chiesto» vuol dire «non lo voglio imparare e loro non se ne accorgono».\nLa RFC 1918 sembra infinita. Il dieci-punto è 16,7 milioni di indirizzi, quindi una rete interna non sembra mai a corto, quindi non c\u0026rsquo;è mai un evento che costringa. Poi arriva la fusione, entrambe le infrastrutture sono su 10.0.0.0/8, e la risposta è un altro decennio di NAT tra sottoreti sovrapposte e un documento che spiega quale indirizzo finto corrisponde a quale vero: altri macchinari, di nuovo, per evitare la famiglia di indirizzi che avrebbe reso il problema inesistente.\nIPv6 mette a nudo la competenza. È questa la vera ragione. Il dual-stack non ti lascia nasconderti.\nDevi sapere qual è davvero la tua policy di firewall, perché devi scriverla due volte. Devi sapere com\u0026rsquo;è fatto il tuo DNS. Devi capire il neighbour discovery, la delega dei prefissi e cosa fa il tuo CPE con un /56.\nUn ingegnere che è andato avanti usando il NAT come controllo di sicurezza involontario scopre, davanti a tutti, che non lo è mai stato. In questo settore ci sono carriere di vent\u0026rsquo;anni costruite su quell\u0026rsquo;unica confusione.\nQuindi non viene proposto. Non perché costi soldi, non ne costa, ma perché proporlo vuol dire farsene carico, e farsene carico vuol dire impararlo.\nÈ questo che intendo per pigrizia nelle ossa. Non pigri nel senso di non lavorare sodo. Questo settore lavora moltissimo. Lavora sodo sul carrier-grade NAT, e sullo spiegare a un cliente perché le sue telecamere non si collegano più da fuori. Farà qualsiasi quantità di lavoro, purché sia il tipo che puoi comprare e non il tipo che devi capire.\nE questo sta per smettere di essere una questione di gusti. Il Cyber Security and Resilience Bill ora in discussione in Parlamento modificherebbe le NIS Regulations per includere, tra gli altri, i «managed service providers (organisations that provide third-party IT services to other businesses)». Non è ancora legge. Quando lo sarà, rilevamento, log e segnalazione degli incidenti smetteranno di essere linee di prodotto che questo strato vende e diventeranno obblighi che deve adempiere.\nMetti questo accanto alla catena vista più sopra. Risolvere qualunque segnalazione di abuso comincia da un server remoto che ha registrato una porta di origine, e il server remoto è molto spesso una delle macchine di queste aziende. Le persone che a breve dovranno dimostrare di saper rilevare e segnalare un incidente sono le stesse che oggi non si riesce a convincere ad abilitare una famiglia di indirizzi, o a leggere una cattura di pacchetti quando un tunnel non si alza.\nLe tre scuse Sentirai sempre le stesse tre, e nessuna regge un minuto.\n«Il dual-stack è due di tutto.» L\u0026rsquo;ho fatto girare in produzione a Nominet, su bilanciatori F5 davanti al registro .uk, quindi so quanto vale l\u0026rsquo;obiezione. Lo è anche il livello di NAT che hai comprato al suo posto, e quello sta nel percorso del traffico con una tabella di sessione, un modello di capacità, una storia di failover e un obbligo di log attaccato. Non stavi mai scegliendo tra complessità e semplicità. Hai scelto la complessità che arrivava con una fattura.\n«Gli apparati non lo supportano.» Nel 2006, giusto. Nel 2026 vuol dire che i tuoi apparati sono fuori supporto, il che è peggio da ammettere della cosa che stavi cercando di non dire.\n«Non ci sono ricavi.» Non ci sono ricavi nemmeno nei backup.\nLe cose che la gente scrive Le scuse qui sopra sono quello che senti in riunione. Sotto c\u0026rsquo;è uno strato di affermazioni tecniche che vengono ripetute nei thread dei forum, nelle sezioni dei commenti e nelle risposte su LinkedIn ogni singola volta che salta fuori IPv6, e la maggior parte è sbagliata da oltre un decennio.\nUna parte è confusione onesta e una parte è una persona che ha deciso di non imparare qualcosa e cerca un motivo. In ogni caso vale la pena passarle in rassegna, perché queste affermazioni fanno un lavoro vero. Sono quello che un ingegnere ripete a un manager che non può verificarle.\n«Il NAT è il mio firewall. IPv6 mette ogni dispositivo direttamente su internet.»\nÈ la più grossa ed è al contrario. La protezione che la gente attribuisce al NAT viene dal fatto che non c\u0026rsquo;è nessuna mappatura finché qualcosa all\u0026rsquo;interno non la chiede, cioè da un firewall con stato, ed è il firewall a fare il lavoro, non la traduzione. L\u0026rsquo;IETF lo ha detto nella RFC 4864 nel 2007: quel ruolo, «often marketed as a firewall, is really an arbitrary artifact», mentre un vero firewall ti dà «explicit and more comprehensive management controls».\nOgni router IPv6 per uso domestico esce con il traffico in ingresso negato di default. Ottieni la stessa postura, da una policy che qualcuno ha scritto, invece che da un effetto collaterale dell\u0026rsquo;aver finito gli indirizzi. E poi puoi permettere esattamente l\u0026rsquo;unica cosa che volevi permettere, invece della seduta spiritica del port forwarding.\nSe tutto il tuo modello di sicurezza è «gli attaccanti non trovano i miei dispositivi», non avevi un modello di sicurezza. Avevi il NAT.\n«IPv6 è più lento.»\nQuesta merita una risposta onesta invece di un\u0026rsquo;alzata di spalle, perché la verità è mista e chi lo dice non ha semplicemente torto.\nI fornitori di contenuti che hanno ottimizzato per IPv6 misurano miglioramenti: Facebook ha riportato caricamenti di pagina circa il 15% più veloci su IPv6, Akamai circa il 5% su mobile. La misura più ampia di APNIC sull\u0026rsquo;intera internet è meno lusinghiera e vede i tempi di andata e ritorno su IPv6 in media leggermente più alti, dell\u0026rsquo;ordine di un millisecondo o giù di lì, e in miglioramento nel tempo.\nQuindi: sostanzialmente pari, meglio dove qualcuno ha fatto il lavoro, ogni tanto un pelo peggio dove nessuno lo ha fatto.\nVale la pena sapere dove sta davvero il costo, perché l\u0026rsquo;intestazione è la cosa che la gente si immagina e l\u0026rsquo;intestazione non è il problema.\nLe intestazioni IPv4 e IPv6, e quanto costa ciascuna a un router Le due intestazioni, e quanto costa ciascuna a un router Campi in scala su 32 bit. Fonti: RFC 791 (IPv4) e RFC 8200 (IPv6). lavoro del router a ogni hop chiave di ricerca più larga IPv4 20 byte, fino a 60 con le opzioni 031 Version IHL Type of Service Total Length Identification Flags Fragment Offset Time to Live Protocol Header Checksum Source Address Destination Address Options: lunghezza variabile, da 0 a 40 byte in più IPv6 40 byte, fissi. Sempre. 031 Version Traffic Class Flow Label Payload Length Next Header Hop Limit Source Address (128 bits) Destination Address (128 bits) IPv4 obbliga il router a\u0026#160;ricalcolare il checksum a ogni hop, leggere un campo lunghezza prima di sapere dove inizia il payload, e frammentare. IPv6 toglie tutti e tre, ma confronta\u0026#160;una chiave quattro volte più larga. Le due intestazioni affiancate, con i campi disegnati in scala su 32 bit. In arancione il lavoro che un router deve fare a ogni hop; in blu la chiave di ricerca più larga. Parti da cosa IPv6 ha tolto al router. IPv4 porta con sé un checksum dell\u0026rsquo;intestazione. Il Time to Live cambia a ogni hop, quindi il checksum deve cambiare con esso, e la RFC 6583 elenca «verifying and updating the checksum» come un passo del processo di inoltro stesso. IPv6 non ne ha. Quel passo semplicemente sparisce.\nPoi la lunghezza. Un\u0026rsquo;intestazione IPv4 è variabile, ed è a questo che serve IHL: un router legge una lunghezza prima di sapere dove inizia il payload. Un\u0026rsquo;intestazione IPv6 è di 40 byte. Sempre. Ogni campo sta a un offset fisso e niente va calcolato prima.\nPoi la frammentazione. I router IPv4 possono frammentare in volo, ed è per questo che Identification, Flags e Fragment Offset stanno nell\u0026rsquo;intestazione. La RFC 8200 è netta: «fragmentation in IPv6 is performed only by source nodes, not by routers along a packet\u0026rsquo;s delivery path». Quindi anche quel percorso se ne va.\nSulla sola gestione dell\u0026rsquo;intestazione, IPv6 è il protocollo più economico da inoltrare. È stato costruito per esserlo.\nL\u0026rsquo;unico punto in cui costa di più è per rotta, e si scopre che non conta. La chiave di ricerca è passata da 32 bit a 128, quindi una voce di inoltro IPv6 è più larga e su molti apparati occupa due slot hardware dove una rotta IPv4 ne occupa uno. Tutti fermano il ragionamento lì. Vale la pena fare un passo in più, perché la tabella completa è quattro volte più piccola.\nNel dump RIS generato alle 02:03 UTC del 28 agosto 2026 c\u0026rsquo;erano 1.229.166 prefissi IPv4 nella tabella di routing globale e 300.470 IPv6. Quattro volte più rotte IPv4, ciascuna larga un quarto. Quindi lo spazio grezzo delle chiavi finisce in perfetta parità: 4,92 MB contro 4,81 MB. Ora applica la regola dei due slot per rotta IPv6 che preoccupa la gente. Una tabella IPv6 completa ha comunque bisogno di circa metà delle voci hardware di una IPv4 completa.\nE il motivo per cui la tabella IPv4 è così grande è la carenza stessa. 767.543 di quei 1,2 milioni di rotte sono /24: il 62% dell\u0026rsquo;intera internet IPv4 sta al prefisso più lungo che qualcuno accetti, perché i blocchi sono stati fatti a pezzi, venduti e annunciati a pezzi da chi li ha comprati. Ognuno di quelli è un router da qualche parte che tiene una voce di cui non avrebbe bisogno se lo spazio non fosse finito.\nLa tabella di routing IPv4 è quattro volte quella IPv6 La tabella di routing IPv4 è quattro volte più grande, e gran parte è la scarsità Prefissi distinti nella tabella di routing globale, dump RIPE RIS generato alle 02:03 UTC, 28 agosto 2026. IPv4chiave a 32 bit 767.543 sono /24 1.229.166 IPv6chiave a 128 bit 300.470 Quattro volte più rotte IPv4, ognuna larga un quarto: lo spazio grezzo delle chiavi è un pareggio, 4,92 MB contro 4,81 MB. Conta una rotta IPv6 come due voci hardware, come si teme, e una tabella IPv6 completa ne richiede comunque circa la metà. Il 62% della tabella IPv4 è fatto di /24,\u0026#160;blocchi spezzettati, venduti e annunciati a pezzi perché lo spazio è finito. Ognuno è una voce che un router non terrebbe se non fosse finito. Prefissi distinti nella tabella di routing globale il 28 agosto 2026, contati dal dump RIPE RIS. La parte piena della barra IPv4 sono i /24: la deaggregazione imposta dalla carenza di indirizzi. Quindi l\u0026rsquo;argomento della memoria va al contrario di come viene raccontato in riunione. Trasportare IPv6 costa meno sulla tua FIB che trasportare IPv4, e costa sempre meno ogni anno in cui il mercato dei trasferimenti taglia un altro /16 in sedici /24.\nE i picchi di CPU che la gente incontra davvero non sono né l\u0026rsquo;uno né l\u0026rsquo;altro. Un router moderno inoltra entrambe le famiglie in silicio alla velocità di linea. Quello che fa male è qualsiasi cosa spinga un pacchetto fuori da quel percorso verso il control plane, che la RFC 6583 chiama «a \u0026lsquo;slower\u0026rsquo; software process running on a general purpose processor». Quel processore era dimensionato per i protocolli di routing. Mai per il traffico.\nDue cose ci spingono pacchetti contro. La prima sono gli extension header. Sono una catena e non un blocco fisso, quindi un apparato che vuole le porte di livello 4 per un\u0026rsquo;ACL o per un hash ECMP deve percorrere una lista di lunghezza variabile per trovarle, e un header Hop-by-Hop Options «may be examined or processed by any node along a packet\u0026rsquo;s delivery path». Su parecchi apparati questo vuol dire mandarlo al processore.\nLa seconda è il Neighbour Discovery. Un /64 copre migliaia di miliardi di indirizzi che non verranno mai assegnati, quindi scansionarne uno mette un router a risolvere indirizzi che non esistono. La RFC 6583 esiste per questo, e lo chiama denial of service.\nEntrambi hanno risposte note. Filtra Hop-by-Hop al bordo, limita il ND, metti un tetto alla cache dei vicini. Nessuno dei due è un motivo per cui il protocollo è lento. Sono motivi per cui un router non configurato è lento, e questo punta dove punta il resto dell\u0026rsquo;articolo.\nOra metti un millisecondo sulla bilancia contro l\u0026rsquo;alternativa che hai davvero distribuito: un apparato di traduzione con stato nel percorso di ogni connessione, con una tabella di sessione, che ne rompe alcune del tutto. Nessuno si è bloccato per vent\u0026rsquo;anni per un millisecondo.\n«C\u0026rsquo;è un sacco di IPv4 in giro, basta comprarlo.»\nPuoi. È così che appare una carenza. Blocchi dati per niente nel 1990 ora passano di mano a circa $20 a indirizzo, e AWS fattura $43,80 all\u0026rsquo;anno per ognuno che usi.\nUn mercato di una cosa non dimostra che ce ne sia tanta. Dimostra che qualcuno ha capito come farti pagare la carenza.\nNessuno li avrebbe mai obbligati Il Regno Unito non ha nessuna politica su questo, e non l\u0026rsquo;ha mai avuta.\nUn tentativo c\u0026rsquo;è stato. 6UK è nato nel 2010 con £20.000 di capitale iniziale dal Department for Business, Innovation and Skills, sostenuto da Vint Cerf, con LINX, AAISP, Timico ed Easynet alle spalle. Nel dicembre 2012 i suoi amministratori volontari si sono dimessi all\u0026rsquo;assemblea annuale, nessuno si è candidato al consiglio, ed è stato sciolto. Il suo verdetto di commiato: gli incentivi del libero mercato non bastano, «one factor appears to dominate IPv6 adoption rates, namely government support», e «countries with hands-off governments fall behind».\nQuattordici anni dopo, è esattamente quello che è successo. Lo UK IPv6 Council esiste ancora, ma un forum non è una leva.\nConfronta con gli Stati Uniti, dove il memorandum OMB M-21-07 imponeva che l'80% degli asset federali con IP fosse solo IPv6 entro la fine dell\u0026rsquo;anno finanziario 2025. Le agenzie lo hanno mancato. Però avevano un numero da mancare, una data entro cui mancarlo, e qualcuno che deve alzarsi a spiegare il mancato obiettivo. Qui non c\u0026rsquo;è niente da mancare, quindi nessuno ha mai dovuto spiegare niente.\nIl governo britannico non richiede IPv6 nei propri acquisti in nessun modo significativo. Ofcom non lo misura. Nessun regolatore ne chiede conto. E così, prevedibilmente, www.nhs.uk e www.hmrc.gov.uk non ce l\u0026rsquo;hanno, mentre www.gov.uk sì. E www.gov.uk ce l\u0026rsquo;ha solo perché è servito tramite Fastly, che ha acceso IPv6 anni fa per conto di qualcun altro.\nHo già scritto di cosa succede quando nessuno ha un contratto su un\u0026rsquo;industria: i meccanismi che funzionano si rivelano quelli che qualcuno con le risorse sceglie di far funzionare, e se nessuno lo fa, non succede niente per un decennio. IPv6 nel Regno Unito è di nuovo quello schema, senza neanche un voto dei soci alla fine.\nE non è che nessuno se ne sia accorto L\u0026rsquo;assenza di un obbligo sarebbe deludente se la cosa fosse passata inosservata. Non è passata inosservata.\nLo Stato ha capito cosa fa il carrier-grade NAT e ci ha fatto una legge. Il Parlamento ha guardato dritto il problema, lo ha capito abbastanza bene da scriverci una legge, e ha scritto la legge che si adatta alla rottura. «Obbligarli a distribuire il protocollo che la elimina» o non è mai stato proposto o è stato proposto e lasciato cadere.\nQuindi siamo un paese la cui posizione dichiarata è che l\u0026rsquo;attribuzione degli IP conta abbastanza da finire in una legge antiterrorismo, e che non chiede a un solo fornitore di fare la cosa gratuita che la ripristina. Frodi, furti di account, molestie, minacce di morte, segnalazioni di abusi su minori e terrorismo arrivano tutti alla rete di accesso facendo la stessa domanda, e per molte connessioni britanniche la risposta onesta è «una di queste diverse centinaia di famiglie».\nIl National Cyber Security Centre fa parte del GCHQ e pubblica linee guida su moltissime cose. Non richiede IPv6 a nessuno. Nessuno in Gran Bretagna lo fa.\nwww.ncsc.gov.uk e www.gchq.gov.uk rispondono entrambi su IPv6, intendiamoci. Anche la Internet Watch Foundation. Tutti e tre perché stanno dietro Cloudflare, che lo ha acceso per tutti di default. www.police.uk non ne ha.\nE cosa vuol dire per i diciassette Diciassette dei quaranta fornitori di questo articolo vendono connessioni senza IPv6, e circa metà dei costruttori di fibra fino a casa mette i clienti dietro carrier-grade NAT.\nNon accuso nessuno di loro di un reato, e nessuno in quegli edifici ne spera uno.\nMa una connessione dietro carrier-grade NAT senza IPv6 non può essere ricondotta a un abbonato. Non è contestato. L\u0026rsquo;IETF lo ha scritto nel 2011, Europol nel 2016 e nel 2017, il Parlamento nel 2015: tutto pubblicato prima che la maggior parte di questi apparati venisse comprata. L\u0026rsquo;alternativa era gratuita, e disponibile per tutto il tempo.\nEcco cosa vuol dire «ci arriveremo, prima o poi, a IPv6», se lo segui fino in fondo.\nCosa farci, in concreto In breve, perché niente di tutto questo è difficile. È questo il punto di tutto l\u0026rsquo;articolo.\nSe compri connettività: metti IPv6 nel bando come requisito superato/non superato, non come un di più. Chiedi dual-stack nativo e un prefisso delegato, per iscritto, e chiedi di che dimensione.\nSe la risposta è un solo /64, continua a chiedere. La RFC 6177 lo ha chiuso nel 2011: dare a un sito domestico un solo /64 «precludes the expectation that even home sites will grow to support multiple subnets», ed è «strongly intended that even home sites be given multiple subnets worth of space, by default».\nQuello che non ha fatto è indicare una dimensione. Ha ritirato il vecchio /48 generalizzato, ha detto che la scelta «is an issue for the operational community», e ha lasciato cadere un esempio passando: un valore predefinito per la casa «of less than /48, such as a /56».\nGli operatori hanno risposto da soli. RIPE-690 è il loro documento di buone pratiche ed è schietto. Un /48 a testa se vuoi un piano semplice. Un /48 per le aziende e un /56 per i residenziali se ne vuoi uno pragmatico. Qualunque cosa più lunga di un /56 è «strongly discouraged», e un /64 non è conforme agli standard IPv6 e romperà le LAN dei clienti.\nQuindi il minimo è un /56, ed è il numero dell\u0026rsquo;IETF stessa, non la preferenza di qualcuno. Sky ne dà uno a ogni abbonato dal 2016. Zen dà un /48, cioè 65.536 sottoreti. Un\u0026rsquo;azienda non dovrebbe accettare meno di un /48.\nSe un fornitore ti dice che un /48 a una casa è uno spreco, un ISP britannico lo fa da anni mentre loro stavano ancora definendo la loro posizione.\nSe gestisci un numero AS: probabilmente detieni già un /29 che non hai mai annunciato. Controlla.\nAS=AS20712 # your AS number ORG=$(whois -h whois.ripe.net \u0026#34;$AS\u0026#34; | awk \u0026#39;/^org:/{print $2; exit}\u0026#39;) # what IPv6 the registry has already given you whois -h whois.ripe.net -- \u0026#34;-i org $ORG\u0026#34; | grep -i \u0026#39;^inet6num\u0026#39; # what you are actually announcing of it whois -h whois.ripe.net -- \u0026#34;-i origin $AS\u0026#34; | grep -i \u0026#39;^route6\u0026#39; Se il primo comando stampa un prefisso e il secondo non stampa niente, sei uno dei 463.\nAnnuncialo, metti in dual-stack il tuo bordo e una VLAN interna, e metti un AAAA su un servizio pubblico. Sono due settimane di lavoro per un ingegnere, e trasformano la tua organizzazione da una statistica nella tabella qui sopra a una che ha cominciato.\nSe gestisci un sito web: controlla se c\u0026rsquo;è un record AAAA. Se sei dietro una CDN, probabilmente è un interruttore che puoi accendere questo pomeriggio senza spendere niente. Se è spento, qualcuno l\u0026rsquo;ha spento.\nSe vendi servizi gestiti: scrivi IPv6 nello standard di build e nel modello di progetto di dettaglio, una volta, e ogni cliente da lì in poi lo avrà di default. Nessuno deve chiederlo, perché nessuno chiede nemmeno TLS.\nSe sei un ingegnere che non l\u0026rsquo;ha mai fatto: costruisci un laboratorio stasera. Circa il 90% del mio traffico passa su IPv6 nativo ed è la cosa meno movimentata della mia rete. Prendi un tunnel o una VPS con un /64, metti indirizzi sulle cose, rompile, sistemale. Ci vuole una serata perché smetta di fare paura, ed è la cosa più economica che puoi fare per la tua carriera quest\u0026rsquo;anno.\nLe domande che non riesco a chiudere Tutto quello che c\u0026rsquo;è sopra posso mostrartelo. Questa parte è quella su cui continuo a rimuginare, e non ho una risposta pulita per nessuna di queste domande.\nPerché alcuni sì e altri no? È quella che conta, e i dati la rendono più strana invece che più chiara.\nSky e Virgin Media hanno venduto banda larga allo stesso paese, con lo stesso regolatore, nello stesso periodo. Uno ha finito nel 2016. L\u0026rsquo;altro dice «when we are ready» dal 2010. Sainsbury\u0026rsquo;s e Tesco stanno sulla stessa CDN, su un prodotto in cui il dual-stack è il predefinito, e uno ha IPv6 e l\u0026rsquo;altro no. Norvegia e Gran Bretagna comprano dagli stessi fornitori e il 66,9% delle reti norvegesi trasporta IPv6 contro il 42,3% delle nostre.\nOgni fattore esterno a cui potresti dare la colpa è tenuto costante in quelle coppie. Stesso paese, stessi fornitori, stessi apparati, stessi clienti, stesso decennio, stesso regolatore, stessi soldi. E i risultati sono opposti.\nQuindi la causa non sta nelle circostanze. Sta dentro l\u0026rsquo;edificio. Da qualche parte in Sky c\u0026rsquo;era una persona che ne ha fatto una cosa sua e ha continuato a farne una cosa sua per tre anni. Negli altri posti non c\u0026rsquo;era, oppure c\u0026rsquo;era e a nessuno sopra di lei importava. Questa è tutta la variabile, e non è una variabile tecnica.\nÈ una risposta scomoda, perché non la puoi comprare, e non la puoi mettere in un documento di strategia.\nÈ una questione di formazione? In parte, e meno di quanto penseresti.\nGuarda di nuovo le 463 organizzazioni che detengono IPv6 senza averlo mai annunciato. Qualcuno in ognuno di quegli edifici sapeva abbastanza da sapere che serviva, sapeva a chi chiedere, ha compilato il modulo e se lo è fatto assegnare. La conoscenza c\u0026rsquo;era e il seguito no.\nLa formazione porta un ingegnere al punto di essere capace. Non lo porta al punto di essere costretto. Nessuno ha mai avuto una valutazione negativa per non aver distribuito IPv6. Nessuno ha mai perso un contratto per questo. Finché una di queste cose non sarà vera, la formazione finisce nella pila insieme a tutto quello che qualcuno ha imparato a un corso e non ha mai usato.\nQuanto manca prima che ci siamo tutti? Su questa posso mettere un numero, ed è peggio di quanto mi aspettassi.\nGoogle misura la quota dei propri visitatori che arrivano su IPv6 dal 2008. Prendendo la metà di agosto di ogni anno, per confrontare cose confrontabili:\nL'adozione mondiale di IPv6 rallenta prima di metà strada L'adozione mondiale di IPv6 rallenta, non accelera Quota dei visitatori di Google su IPv6 nativo, a metà agosto di ogni anno. Fonte: statistiche IPv6 di Google. 0% 10% 20% 30% 40% 50% 2017 18,1% 2018 2019 2020 2021 2022 2023 2024 2025 2026 48,1% Punti guadagnati nell'anno +3,6 +5,0 +4,4 +3,3 +4,3 +3,3 +2,3 +2,6 +1,1 Quest'anno ha aggiunto\u0026#160;1,1 punti, la crescita più bassa in un decennio, contro 6,6 punti nell'anno fino ad agosto 2017. La misura di Google dei propri visitatori che arrivano su IPv6 nativo, presa a metà agosto di ogni anno per confrontare cose confrontabili. La linea è il livello. Le barre sono quanto ha aggiunto ogni anno. Non stiamo accelerando verso il traguardo. Stiamo rallentando prima di arrivare a metà. Quest\u0026rsquo;anno ha aggiunto 1,1 punti, il guadagno più piccolo in un decennio, contro 6,6 punti nell\u0026rsquo;anno fino ad agosto 2017.\nProlunga in linea retta gli ultimi tre anni e il mondo arriva al 100% nel 2049. Prolunga in linea retta solo quest\u0026rsquo;anno ed è il 2073. Nessuna delle due è una previsione. Una curva che si appiattisce non arriva in cima per inerzia. Si ferma da qualche parte intorno al sessanta per cento e il resto non si muove più, perché le reti che non lo hanno fatto a quel punto sono quelle che niente avrebbe mai smosso.\nMi piacerebbe sbagliarmi. Il numero si è ridotto ogni anno in cui l\u0026rsquo;ho guardato.\nServe una legge? È quella su cui sono andato avanti e indietro di più, e sono arrivato a «non la legge a cui la gente pensa».\nContro un obbligo: gli americani hanno approvato il più forte che qualcuno abbia mai fatto, e lo hanno mancato. Una scadenza non è una distribuzione.\nA favore: il verdetto di commiato di 6UK nel 2012 era che gli incentivi del libero mercato non bastano e che i paesi che restano indietro sono quelli con governi che non intervengono. Quattordici anni di dati britannici gli danno ragione.\nEd ecco la parte che chiude la questione. Questo paese ha già legiferato su questo problema: solo che ha legiferato nella direzione sbagliata. Siamo stati disposti a legiferare per adattarci alla condivisione degli indirizzi. Non siamo mai stati disposti a legiferare per eliminarla.\nQuello che chiederei non è un divieto e non è un obiettivo, ma lo strumento belga descritto prima: un limite rigido a quanti abbonati possono condividere un indirizzo. Non servono nuovi indirizzi, non esclude nessuno dal mercato, e agisce sull\u0026rsquo;economia invece che sulle buone intenzioni di qualcuno.\nUn obbligo da solo produce una cosa utile, e non è la distribuzione. È una persona con un nome che deve spiegare il mancato obiettivo. Non ne abbiamo mai avuta una.\nCome abbiamo fatto allora a passare a IPv4 così in fretta? Perché qualcuno poteva spegnere il vecchio.\nIl confronto è esatto, e quasi nessuno lo fa. ARPANET usava il Network Control Program, che indirizzava gli host in 8 bit: 6 per il nodo e 2 per l\u0026rsquo;host, quindi 64 nodi da 4 macchine, 256 host in tutto. Alla fine degli anni Settanta era chiaramente insufficiente, e la risposta fu un nuovo protocollo con un indirizzo più grande. Lo stesso problema che abbiamo ora, una quarantina d\u0026rsquo;anni prima.\nJon Postel pubblicò il piano di transizione nel novembre 1981. Nel marzo 1982 il Dipartimento della Difesa degli Stati Uniti dichiarò TCP/IP il suo standard ufficiale. I due protocolli girarono affiancati, e il 1 gennaio 1983 NCP fu spento. Gli host che non si erano convertiti persero l\u0026rsquo;accesso alla rete. Vint Cerf ricorda le spille «I survived the TCP/IP switchover» portate dopo da chi ce l\u0026rsquo;aveva fatta.\nQuattordici mesi dal piano al giorno della bandiera.\nOra conta cosa lo ha reso possibile. Più o meno un paio di centinaia di host, non quattro miliardi. Una rete, non tutte le reti. Un unico finanziatore che possedeva ogni macchina collegata e pagava lo stipendio di chiunque le toccasse. Una sola organizzazione in grado di fissare una data e, questa è la parte che conta, in grado di far smettere di funzionare il vecchio protocollo in quella data.\nNessuna di queste cose esiste oggi, ed è tutta la risposta. IPv4 non ha vinto perché la migrazione era facile. Ha vinto perché c\u0026rsquo;era qualcuno in posizione di chiudere la discussione.\nNessuno è in quella posizione oggi. Non c\u0026rsquo;è nessuna autorità che possa spegnere IPv4, e non ci sarà mai. Il che vuol dire che questa transizione non può essere finita come l\u0026rsquo;ultima: può essere finita solo da diverse migliaia di organizzazioni che decidono, ciascuna per conto suo, di darsi da fare.\nCon i numeri di quest\u0026rsquo;anno, si arriva al 2073. Novant\u0026rsquo;anni dopo il giorno della bandiera.\nFacevamo le cose come si deve Uno standard è qualcosa che rispetti quando nessuno controlla. Tutto qui. Non c\u0026rsquo;è un ispettore per questo, nessun certificato, nessun revisore che si presenta e chiede di vedere la tua tabella di routing, e vent\u0026rsquo;anni hanno ormai mostrato esattamente cosa fa questo paese con un obbligo che nessuno fa rispettare.\nLo lasciamo cadere, e poi compriamo qualcosa per coprire il buco.\nNiente di tutto questo è un fallimento tecnico e non farò finta che lo sia. La Gran Bretagna sa fare questo lavoro. Le competenze sono qui, gli apparati sono qui, lo spazio di indirizzi è assegnato e aspetta fermo in account che stiamo già pagando. Quello che se n\u0026rsquo;è andato è l\u0026rsquo;istinto di fare un lavoro come si deve perché quello è il lavoro: senza essere pagati extra, e senza qualcuno in piedi lì accanto a costringerti.\nChiediti cosa lo blocca davvero e arrivi ai soldi, ma non nel senso che la gente intende.\nUn carrier-grade NAT ha un ordine d\u0026rsquo;acquisto. Ha un fornitore, un preventivo, uno sconto, un contratto di supporto e una data di rinnovo. Va nel piano degli investimenti, si ammortizza in cinque anni, e il nome di qualcuno sta sul business case. Consegnarlo è una cosa visibile che un manager può indicare in una valutazione.\nIPv6 non ha niente di tutto questo. Nessuna fattura, nessun fornitore, nessun rinnovo, niente da mettere a budget e niente che qualcuno possa essere visto comprare. È solo lavoro, fatto come si deve, da persone che sanno cosa stanno facendo, senza ritorno questo trimestre. Nessuno in questo settore è mai stato promosso per una cosa che non è mai comparsa in un budget.\nPer questo l\u0026rsquo;opzione più economica perde, ogni anno, da vent\u0026rsquo;anni. Non perché qualcuno l\u0026rsquo;abbia valutata e abbia scelto male, ma perché qui è cresciuta una cultura manageriale capace di vedere solo le parti dell\u0026rsquo;ingegneria che arrivano con un prezzo attaccato. L\u0026rsquo;ostacolo non è mai stato il costo. Era il non poterlo fatturare. È così che appare un\u0026rsquo;azienda quando smette di curarsi degli standard e comincia a curarsi solo di quello che può mettere in fattura, ed è una scelta fatta da persone pagate abbastanza bene da saperne di più.\nPoi c\u0026rsquo;è quello che ci hanno venduto al posto di un indirizzo, che dovrebbe fare arrabbiare la gente più di quanto faccia.\nInternet è stata costruita perché qualsiasi macchina potesse raggiungere qualsiasi altra direttamente. Non un dettaglio del progetto. Il progetto. È il motivo per cui chiunque avesse una connessione e un\u0026rsquo;idea poteva mettere online qualcosa che il mondo intero poteva raggiungere. Metti un cliente dietro un indirizzo condiviso e questo sparisce. Puoi chiedere, ma non puoi mai rispondere. Sei un consumatore dei servizi altrui, per sempre, e mai un fornitore dei tuoi.\nNon è uno sfortunato effetto collaterale di una carenza. È una riprogettazione, e fa comodo a tutti quelli che la vendono. La telecamera che ora ha bisogno del cloud del produttore. L\u0026rsquo;accesso remoto che ora ha bisogno del relay di qualcuno. La cosa che la gente teneva in casa e che ora è un abbonamento mensile. Ognuna di queste è qualcuno che possedeva una cosa trasformato in qualcuno che la affitta, e una connessione declassata in silenzio da un posto su internet a una finestra sulla roba di qualcun altro.\nAbbiamo regalato il centro di internet a una manciata di aziende in un altro continente, poi siamo rimasti lì a stupirci che sia finita centralizzata. Non puoi essere autosufficiente su una connessione che non ti lascia ospitare niente.\nL\u0026rsquo;autosufficienza è la parte su cui continuo a tornare, perché questo paese ha smesso di aspettarsela da se stesso. L\u0026rsquo;istinto ora è aspettare. Un fornitore, un regolatore, un finanziamento, un obbligo, un cliente che telefona e chiede. Nessuno di questi sta arrivando. Non c\u0026rsquo;è nessun segnale di mercato in arrivo, nessuna politica in preparazione, nessuna scadenza che qualcuno dovrà spiegare di aver mancato.\nIl che la lascia dov\u0026rsquo;è stata per tutto il tempo. Un\u0026rsquo;assegnazione gratuita, ferma in un account di registro con il nome della tua azienda sopra, e due settimane tra te e l\u0026rsquo;aver fatto il lavoro come si deve.\nNessuno verrà a obbligarti. È esattamente per questo che conta.\nPuoi controllare se si tratta del tuo edificio. Lo script è nel download in cima all\u0026rsquo;articolo.\nFonti Tutto quello che segue è stato recuperato il 27 agosto 2026.\nI dati da cui ho misurato. Ogni numero mio viene da qui. Sono gratuiti, sono pubblici, e puoi ripetere tutto in un pomeriggio.\nFile di delegazione dei registri, uno per registro regionale: RIPE NCC, APNIC, ARIN, LACNIC, AFRINIC. Quello di RIPE è stato generato il 26 agosto 2026, gli altri il 27 agosto 2026. Dump della tabella di routing RIPE RIS, riswhoisdump.IPv4.gz e riswhoisdump.IPv6.gz, generati alle 18:06 UTC del 27 agosto 2026. Interfaccia REST del database RIPE, per l\u0026rsquo;organizzazione dietro ogni numero AS. Il DNS pubblico, per la verifica dei record AAAA, controllata con un secondo resolver. Misure di altri.\nGoogle IPv6 statistics — IPv6 nativo per paese tra i visitatori di Google, dati al 25 agosto 2026. APNIC sulle prestazioni di IPv6 e sui malintesi sulla sicurezza di IPv6 — il quadro misurato invece di quello da forum. Prezzi del mercato dei trasferimenti IPv4, prima metà del 2026, che riassume l\u0026rsquo;analisi di CircleID delle transazioni a prezzo pubblico. Standard. Le aggiunte, nell\u0026rsquo;ordine in cui sono state pubblicate.\nRFC 3056 — tunneling automatico 6to4, febbraio 2001. RFC 3701 — il piano di dismissione del 6bone, che ne fissa la chiusura al 6 giugno 2006. RFC 7526 — deprecazione dei relay anycast di 6to4 e loro passaggio a Historic, maggio 2015. RFC 4864 — cosa ti dà e cosa non ti dà il NAT, e perché il firewall che la gente crede di avere è «an arbitrary artifact», 2007. RFC 4941, RFC 7217 e RFC 8981 — indirizzi temporanei e opachi, il motivo per cui l\u0026rsquo;indirizzo IPv6 di un dispositivo non è un identificativo stabile. RFC 801 — il piano di transizione da NCP a TCP di Jon Postel, novembre 1981, che fissa il giorno della bandiera al 1 gennaio 1983. RFC 1883 — la specifica IPv6 originale, dicembre 1995. RFC 6333 — DS-Lite, 2011. RFC 6056 — randomizzazione della porta di origine, la difesa che il CGN indebolisce, 2011. RFC 6269 — Issues with IP Address Sharing, giugno 2011. Il catalogo dell\u0026rsquo;IETF stessa di cosa rompe il CGN, tra cui log degli abusi, penalty box, blacklist, randomizzazione delle porte e tracciabilità. RFC 791 e RFC 8200 — i due formati di intestazione, e perché IPv6 ha eliminato il checksum, la lunghezza variabile e la frammentazione in volo. RFC 6583 — esaurimento della cache del Neighbour Discovery su un /64, e la separazione tra forwarding plane e control plane che decide cosa costa CPU a un router. RFC 6177 — quanto spazio di indirizzi dovrebbe ricevere un sito finale, 2011. Rende obsoleto il /48 generalizzato della RFC 3177, esclude il singolo /64 e affida il numero vero alla comunità operativa. RIPE-690 — la risposta degli operatori europei a quella domanda, ottobre 2017: /48 o /56 a un utente finale, mai un /64. RFC 6302 — registrare porta di origine, timestamp e protocollo, 2011. RFC 6598 — spazio di indirizzi condiviso, 2012. RFC 6877 — 464XLAT, 2013. RFC 6888 — requisiti del carrier-grade NAT, 2013. RFC 7021 — l\u0026rsquo;impatto del carrier-grade NAT sulle applicazioni, 2013. RFC 7422 — mappatura deterministica per ridurre i log del CGN, 2014. RFC 7597 e RFC 7599 — MAP-E e MAP-T, 2015. World IPv6 Launch, 6 giugno 2012. Il tunnel broker gratuito di Hurricane Electric — dove molti di noi hanno avuto IPv6 mentre i nostri ISP non ne avevano. Leggi e politiche.\nCyber Security and Resilience (Network and Information Systems) Bill 2024-26 — briefing della House of Commons Library sul disegno di legge che porterebbe i fornitori di servizi gestiti dentro le NIS Regulations. Counter-Terrorism and Security Act 2015, section 21 — conservazione dei dati internet pertinenti, e le sue note esplicative. Europol, ottobre 2017 — le forze dell\u0026rsquo;ordine chiedono la fine del carrier-grade NAT, con i dati del 90% mobile e del 50% fisso. Memorandum OMB M-21-07 — l\u0026rsquo;obbligo federale statunitense di solo IPv6, novembre 2020. Online Safety Act 2023. Europol EC3, Carrier Grade NAT and crime attribution online — la presentazione di Gregory Mounier a RIPE 74, con il sondaggio dell\u0026rsquo;agosto 2016 tra le forze dell\u0026rsquo;ordine UE, i casi d\u0026rsquo;esempio e il codice di condotta belga con i suoi risultati. Dati della CyberTipline del NCMEC — volumi di segnalazioni e inoltri del 2025. A Multi-perspective Analysis of Carrier-Grade NAT Deployment, ACM IMC 2016 — la misura indipendente dell\u0026rsquo;uso del CGN da parte dei fornitori mobili e fissi. Schema tariffario RIPE NCC 2026 — EUR 1.800 per account LIR, tariffa fissa. I fornitori, con le loro parole.\nAkamai, giugno 2022 — il dual-stack è il predefinito e i clienti devono escluderlo esplicitamente. AWS, 2023 — il canone per gli IPv4 pubblici, e il perché. Cronaca e documentazione.\nIl resoconto di Sky su RIPE Labs — come sono stati spostati cinque milioni di utenti. ISPreview, settembre 2016 — Sky completa la distribuzione. CircleID, settembre 2016 — il Jim Bound IPv6 Award. ISPreview, dicembre 2012 — 6UK che si scioglie. Sondaggio di ISPreview su IPv6 e CGNAT tra gli altnet — aprile 2024, aggiornato a marzo 2025. ISPreview sulla prova IPv6 di Plusnet, novembre 2023 — la prova del 2011, il lancio del 2020 mancato, e la nota che BT e Plusnet distribuiscono router quasi identici. Un tracker curato dalla comunità delle reti mobili britanniche e IPv6 — basato sulle segnalazioni degli utenti e non ufficiale, e la fonte su quali reti mobili danno IPv6 oggi. havevirginmediaenabledipv6yet.co.uk — la cronologia di Virgin Media, dal 2010 a oggi. Internet Society, settembre 2016 — Sky al 90% della base, con ogni abbonato che riceve un /56. Internet Society, settembre 2016 — il racconto di Ron Broersma della migrazione da NCP a TCP/IP del 1983, compreso il limite dei 256 host e cosa è successo a chi ha mancato la scadenza. The Register, gennaio 2013 — trent\u0026rsquo;anni dopo il giorno della bandiera, e le spille che la gente portava dopo. UK IPv6 Council. ","permalink":"https://blogs.damiendye.uk/it/networking/we-never-ran-out-of-addresses/","summary":"IPv6 è finito, gratuito e acceso di default in ogni sistema operativo da quasi vent\u0026rsquo;anni. La risposta del Regno Unito è stata il carrier-grade NAT, una legge sui log e un canone di £5 al mese per restituirti l\u0026rsquo;indirizzo che avevi prima. Ho contato ogni rete britannica nella tabella di routing globale per scoprire chi ha davvero acceso IPv6: 1.200 non lo hanno fatto, e 463 di queste siedono su spazio di indirizzi che hanno chiesto e mai usato.","title":"Non abbiamo mai finito gli indirizzi. Abbiamo finito la voglia."},{"content":"Lo dico subito: lavoro per croit, che vende Ceph e compare nelle tabelle qui sotto. Ho cercato di essere critico con noi quanto con tutti gli altri. Ogni numero viene dalla storia git pubblica, dai registri che Ceph tiene nel proprio repository o da una dichiarazione pubblica con nome e cognome: tutto riproducibile, tutto elencato nei riferimenti in fondo.\nCeph regge un sacco di infrastruttura a cui nessuno pensa. Cluster Proxmox, OpenStack, Kubernetes, laboratori di ricerca nazionali, banche, operatori telefonici, acceleratori di particelle. Dopo vent\u0026rsquo;anni è ancora la prima risposta quando qualcuno vuole storage a blocchi, file e oggetti da un unico cluster fatto di hardware normale.\nQuindi chi lo scrive, chi lo mantiene, e chi lo usa?\nNon «chi sta sulla mailing list» o «chi ha parlato al Cephalocon». Ho clonato ceph/ceph, ho preso ogni commit non di merge scritto nei dieci anni fino al 27 agosto 2026, e ho ricondotto gli autori alle aziende usando il .organizationmap di Ceph più una serie documentata di correzioni. Poi ho preso il file di governance che Ceph tiene nel repository e ho ricondotto tutti i 38 membri dello Steering Committee al datore di lavoro indicato nel loro stesso indirizzo pubblicato. Poi sono andato a cercare chi dice pubblicamente di usarlo.\nFa 69.613 commit da 1.718 persone in 478 organizzazioni. È un quadro migliore di quello che mi aspettavo all\u0026rsquo;inizio, e non è quello che pensavo di scrivere.\nIl decennio Posizione Organizzazione Commit Quota 1 Red Hat 42.354 60,8% 2 SUSE 6.191 8,9% 3 IBM 4.308 6,2% 4 Intel 2.066 3,0% 5 ZTE 1.176 1,7% 6 QiAnXin 900 1,3% 7 Ceph Foundation 691 1,0% 8 Mirantis 566 0,8% 9 IONOS 498 0,7% 10 China Mobile 397 0,6% 11 Proxmox 254 0,4% 12 croit 242 0,3% 13 Cloudbase Solutions 239 0,3% 14 Bloomberg 231 0,3% 15 XSKY 225 0,3% · Clyso 181, Huawei 159, Inspur 155, Cafe Bazaar 130, CERN 121, SK Telecom 120, UMCloud 106, Deutsche Telekom 105, EasyStack 103, ISCAS 99, Tencent 83, e altre 460 organizzazioni · Nessun datore di lavoro visibile nell\u0026rsquo;indirizzo 6.295 9,0% Le righe 1 e 3 sono la stessa squadra. Il 4 ottobre 2022 Red Hat e IBM hanno annunciato che l\u0026rsquo;intera squadra Ceph di Red Hat passava a IBM, con IBM che subentrava nella sponsorizzazione della Foundation da parte di Red Hat e aiutava a finanziare il laboratorio di test upstream. Le persone non sono cambiate; i loro indirizzi email stanno ancora migrando, un ingegnere alla volta, quattro anni dopo.\nSommale: 46.662 commit. Il 67,0% del decennio.\nFermati su questo prima di tutto il resto, perché è il patto che fa esistere Ceph. Un\u0026rsquo;azienda ha pagato decine di ingegneri per costruire e curare uno storage distribuito che poi regala. Dieci anni così, attraverso due acquisizioni e un cambio di capogruppo. Nessuno li ha obbligati.\nGli ultimi tre anni Posizione Organizzazione Commit Quota 1 Red Hat 7.273 45,0% 2 IBM 3.818 23,6% 3 QiAnXin 597 3,7% 4 Ceph Foundation 526 3,3% 5 IONOS 498 3,1% 6 Intel 279 1,7% 7 Proxmox 249 1,5% 8 Bloomberg 220 1,4% 9 croit 157 1,0% 10 Clyso 153 0,9% 11 Cafe Bazaar 118 0,7% 12 ISCAS (Institute of Software, Chinese Academy of Sciences) 99 0,6% · Nessun datore di lavoro visibile nell\u0026rsquo;indirizzo 2.008 12,4% 16.160 commit. Red Hat più IBM: 11.091, cioè il 68,6%.\nLa quota di un'azienda in Ceph, in dieci anni e in tre anni La quota non si muove. Si muove quello che c'è dentro. Dieci anni fino al 2026-08-27 69.613 commit Red Hat\u0026#160;\u0026#160;60,8% IBM 6,2% SUSE 8,9% tutti gli altri\u0026#160;\u0026#160;24,1% Red Hat + IBM: 46.662 commit, 67,0% Ultimi tre anni 16.160 commit Red Hat\u0026#160;\u0026#160;45,0% IBM\u0026#160;\u0026#160;23,6% SUSE: 13 tutti gli altri\u0026#160;\u0026#160;31,4% Red Hat + IBM: 11.091 commit, 68,6% SUSE è stata il secondo contributore del decennio. Negli ultimi tre anni ha scritto 13 commit, e nel 2025 e nel 2026 nessuno. La quota di una sola azienda si muove appena tra il decennio e la finestra recente: 67,0% contro 68,6%. Quello che cambia è tutto quello che ci sta attorno. La resilienza di cui nessuno parla Ecco la parte che non mi aspettavo, ed è la cosa migliore di tutto l\u0026rsquo;esercizio.\nCeph è già sopravvissuto ai due eventi che questi dati ti direbbero di temere, e non ha battuto ciglio.\nIl suo creatore, Sage Weil, ha scritto 7.517 commit nel decennio, più di qualsiasi organizzazione tranne Red Hat, SUSE e IBM. Nel solo 2017 ha scritto 2.184 commit, il 21,5% dell\u0026rsquo;intero progetto da solo. Si è fatto da parte nell\u0026rsquo;ottobre 2021 dopo 17 anni; il suo ultimo commit è datato 2022-01-20.\nIl suo secondo contributore del decennio, SUSE, ha scritto 6.191 commit con un picco di 1.839 in un solo anno. Poi ha cancellato SUSE Enterprise Storage in favore di Longhorn di Rancher e ha chiuso i rubinetti: 463 nel 2021, 110 nel 2022, 14 nel 2023, 10 nel 2024, niente da allora.\nTutti e due negli stessi cinque anni. Se un progetto così concentrato fosse fragile, si sarebbe spezzato lì.\nNon è successo. Il ritmo dei commit quest\u0026rsquo;anno è di 14,6 al giorno contro i 14,8 dell\u0026rsquo;anno scorso. Piatto. I rilasci hanno continuato ad arrivare. La governance è stata ricostruita in un Executive Council e uno Steering Committee di 38 persone, e ha tenuto.\nAnno Commit totali Red Hat + IBM Quota Tutti gli altri 2016 10.286 5.834 56,7% 4.452 2017 10.158 6.942 68,3% 3.216 2018 8.099 5.265 65,0% 2.834 2019 9.000 5.934 65,9% 3.066 2020 8.361 5.230 62,5% 3.131 2021 7.381 4.517 61,1% 2.864 2022 4.731 2.937 62,0% 1.794 2023 4.634 3.315 71,5% 1.319 2024 5.410 3.571 66,0% 1.839 2025 5.389 3.730 69,2% 1.659 2026 3.495 2.329 66,6% 1.166 (Il 2026 arriva al 27 agosto, circa otto mesi.)\nTra il 57 e il 72 per cento da un solo vendor, ogni anno per un decennio. Il volume è sotto il picco del 2016, ed è quello che succede quando un progetto smette di ricostruire le fondamenta e comincia a curarle. Gli ultimi tre anni sono piatti, o appena in su.\nVolume dei commit di Ceph per anno: la quota tiene, il totale si dimezza Commit per anno, e chi li ha scritti Ramo main di Ceph, commit non di merge, per data autore 0 3k 6k 9k 12k 2016 57% 2017 68% 2018 65% 2019 66% 2020 63% 2021 61% 2022 62% 2023 72% 2024 66% 2025 69% 2026* 67% Red Hat + IBM: una sola squadra da ottobre 2022 tutti gli altri Picco SUSE: 1.839 Sage Weil se ne va SUSE: 110 nel 2022, 14 nel 2023, 0 nel 2026 * Il 2026 arriva al 27 agosto; tracciato al ritmo attuale di 14,6 commit al giorno, contro i 14,8 del 2025. Volume dei commit per anno, diviso tra la squadra Red Hat/IBM e tutti gli altri. Segnati: il picco e l\u0026rsquo;uscita di SUSE, e l\u0026rsquo;addio di Sage Weil. Ceph li ha assorbiti entrambi senza cambiare ritmo. Ceph è sopravvissuto alle aziende che l\u0026rsquo;hanno costruito Questa è la vera storia del decennio, e in una finestra di tre anni non la vedi proprio.\nGuarda le righe 2, 5, 8, 10, 13 e 15. SUSE, ZTE, Mirantis, China Mobile, Cloudbase Solutions, XSKY, più Inspur, EasyStack, UMCloud, Kylin, UnitedStack, Xtao, Istuary e altre più in basso. Tutte insieme, ben oltre 10.000 commit. Quasi tutto si è fermato.\nSUSE: 6.191 commit, picco nel 2020, ora zero. ZTE: 1.176 commit, 1.071 nel solo 2016, ultimo commit nel 2020. Mirantis: 566 commit, sparita. XSKY, EasyStack, Inspur, UMCloud, Kylin, UnitedStack: la generazione di storage dell\u0026rsquo;era OpenStack, tutte in disarmo. Ognuna di queste era un\u0026rsquo;azienda che puntava un prodotto su Ceph. I prodotti sono stati cancellati o hanno cambiato strada. E Ceph è ancora qui, e rilascia allo stesso ritmo, con il loro codice ancora nell\u0026rsquo;albero e qualcun altro che se ne occupa.\nL\u0026rsquo;esempio migliore è la dashboard. Nel decennio, src/pybind/mgr/dashboard si presenta così:\nsrc/pybind/mgr/dashboard, dieci anni Commit Quota SUSE 1.408 36,6% Red Hat 1.177 30,6% IBM 734 19,1% Nessun datore di lavoro visibile 478 12,4% La dashboard di Ceph è stata soprattutto lavoro di SUSE. Poi SUSE ha lasciato del tutto il progetto. Negli ultimi tre anni la stessa directory è al 57,5% IBM e al 30,3% Red Hat, e la dashboard continua a uscire e a guadagnare funzioni.\nQuesto è lo sviluppo upstream-first che fa esattamente il lavoro per cui esiste. Un vendor ci ha messo tanto, il vendor se n\u0026rsquo;è andato, e gli utenti si sono tenuti il software. Se SUSE avesse costruito quella dashboard come uno strato chiuso montato sopra, come avrebbero fatto tanti vendor di storage, sarebbe morta con la linea di prodotto. È andata upstream, invece, e così è sopravvissuta.\nIl prossimo decennio lo stanno costruendo diverse aziende insieme Crimson è la riscrittura da zero dell\u0026rsquo;OSD, il demone che possiede i tuoi dischi, sul framework Seastar, pensata per il modello un-thread-per-core che gli NVMe moderni richiedono. È la scommessa più grossa sui prossimi dieci anni di Ceph. Nel decennio:\nsrc/crimson, dieci anni Commit Quota Red Hat 3.038 52,1% Intel 1.269 21,8% QiAnXin 824 14,1% Nessun datore di lavoro visibile 450 7,7% E negli ultimi tre anni Red Hat e IBM insieme sono una minoranza, al 45,4%, con QiAnXin al 28,4% e Intel al 13,4%.\nLa cosa più importante che si sta costruendo in Ceph in questo momento è davvero un lavoro di più aziende. Non la roadmap di un vendor con qualche contributore attaccato sopra: tre realtà che fanno ingegneria pesante sullo stesso sottosistema, in pubblico, da anni.\nQiAnXin merita una nota, perché non è un nome che la maggior parte della gente dello storage conosce. È un\u0026rsquo;azienda cinese di sicurezza informatica per le imprese, fondata come controllata di Qihoo 360 nel 2014 e resa indipendente intorno al 2016; Qihoo 360 ha venduto la quota residua del 22,6% a società legate a China Electronics Corporation nell\u0026rsquo;aprile 2019, e CEC ne deteneva il 38,3% al momento della richiesta di IPO del 2020. La storia societaria si legge nel log git: il loro contributore principale, Xuehan Xu, ha commit con @360.cn nel 2017 e nel 2018 e con @qianxin.com dal 2021. Un\u0026rsquo;azienda di sicurezza senza nessun prodotto di storage da vendere ha messo 900 commit nell\u0026rsquo;OSD del futuro di Ceph. È un progetto aperto che funziona esattamente come dice l\u0026rsquo;etichetta.\nChi mantiene Ceph, e chi li paga Scrivere codice è una cosa; tenere le chiavi è un\u0026rsquo;altra. Ceph tiene la sua governance nel repository, in doc/governance.rst, e il Ceph Steering Committee è elencato lì per nome ed email. Così la domanda su chi paga i maintainer ha una risposta da una fonte primaria invece che da supposizioni.\nTrentotto seggi, ricondotti al datore di lavoro indicato nell\u0026rsquo;indirizzo di ciascun membro:\nDatore di lavoro Seggi Red Hat 16 IBM 9 Clyso 3 Indirizzo personale (Anthony D\u0026rsquo;Atri, Myoungwon Oh) 2 croit: Igor Fedotov 1 Bloomberg: Joseph Mundackal 1 Intel: Yingxin Cheng 1 Ceph Foundation: Zac Dover 1 XSKY: Haomai Wang 1 ZTE: Xie Xingguo 1 Ubiquiti: Yehuda Sadeh 1 11:11 Systems: David Orman 1 Red Hat e IBM hanno 25 seggi su 38: il 65,8%. Contro il 67,0% dei commit del decennio e il 68,6% degli ultimi tre anni. L\u0026rsquo;organo di governo rispecchia il codice quasi alla perfezione, che è il verso sano: chi fa il lavoro ha voce in capitolo, e quindi nessuno ha un diritto di veto che non si è guadagnato.\nSeggi del Ceph Steering Committee per datore di lavoro: 25 su 38 sono di una sola azienda Chi mantiene Ceph, per chi li paga 38 seggi nel Ceph Steering Committee, dall'indirizzo che ogni membro indica in doc/governance.rst Red Hat IBM Clyso indirizzo personale un seggio ciascuno 16 9 3 2 8 croit, Bloomberg, Intel, Ceph Foundation, XSKY, ZTE, Ubiquiti, 11:11 Systems Red Hat + IBM: 25 seggi su 38, 65,8% Contro il 67,0% dei commit del decennio e il 68,6% degli ultimi tre anni. Il comitato rispecchia il codice. XSKY e ZTE hanno ancora un seggio. Nessuna delle due ha scritto una riga di Ceph dal 2020. Cinque dei 38 non hanno commit dal 2021, o non ne hanno affatto. Guidare non è lo stesso lavoro che scrivere codice, ma due di quei seggi sono di aziende che hanno lasciato del tutto il progetto. I 38 seggi del Ceph Steering Committee per datore di lavoro indicato nell\u0026rsquo;indirizzo di ciascun membro, da doc/governance.rst. La composizione del comitato segue da vicino la distribuzione dei commit. Ci sono due dettagli che vale la pena tirare fuori, e tutti e due dicono qualcosa di buono.\nXSKY e ZTE hanno ancora un seggio. Nessuna delle due aziende ha fatto un commit dal 2020: l\u0026rsquo;ultimo commit di Haomai Wang è del 2020-03-18, quello di Xie Xingguo del 2020-07-24 dopo 750 commit nel decennio. Ceph non li ha cacciati. Un progetto che tiene caldo il posto per le persone che hanno costruito grandi pezzi di BlueStore e dell\u0026rsquo;OSD, anni dopo che il loro datore di lavoro se n\u0026rsquo;è andato, non è un progetto che tratta i contributori come usa e getta.\nYehuda Sadeh siede nel comitato con un indirizzo @ui.com. Ha scritto il RADOS Gateway, la porta S3 e Swift verso RADOS, il Reliable Autonomic Distributed Object Store su cui poggia tutto il resto di Ceph, cominciando in DreamHost nel 2008, poi Inktank, Red Hat e IBM: 972 commit solo nel decennio e migliaia prima. A luglio 2025 scriveva ancora codice crittografico per cephx. Poi a giugno 2026 ha fatto esattamente un commit, doc: governance/csc: update email address, cambiando la propria voce in Ubiquiti. Ha cambiato datore di lavoro e ha tenuto il seggio. Qui la tua posizione viaggia con te, ed è una delle cose migliori del lavorare allo scoperto.\nI responsabili dei componenti I responsabili dei componenti si occupano di ogni sottosistema giorno per giorno:\nComponente Cos\u0026rsquo;è Responsabile Datore di lavoro Cephadm Deployment e gestione del cluster Adam King Red Hat CephFS Il file system POSIX Venky Shankar Red Hat Crimson L\u0026rsquo;OSD di nuova generazione Matan Breizman Red Hat Dashboard L\u0026rsquo;interfaccia web di gestione Afreen Misbah IBM RADOS L\u0026rsquo;object store su cui poggia tutto il resto Radosław Zarzyński Red Hat RBD RADOS Block Device: dischi virtuali Ilya Dryomov Red Hat RGW RADOS Gateway: lo strato S3 e Swift Adam Emerson, Eric Ivancich Red Hat NVMe-oF Gateway NVMe over Fabrics Aviv Caro IBM Seastore Il backend di storage di Crimson Yingxin Cheng Intel Dieci responsabili con nome, nove in Red Hat o IBM, e Seastore, il backend di storage di Crimson, guidato da Intel. Sopra di loro c\u0026rsquo;è l\u0026rsquo;Executive Council di tre persone, creato quando Sage Weil se n\u0026rsquo;è andato: Dan van der Ster (Clyso), Neha Ojha (Red Hat), Patrick Donnelly (IBM). Clyso ha un terzo dell\u0026rsquo;organo di governo più alto con lo 0,3% dei commit del decennio: il consiglio è stato costruito attorno a giudizio e reputazione, non al numero di teste.\nI maintainer si sono spostati, il codice è rimasto L\u0026rsquo;argomento più forte per dire che Ceph è un vero bene comune e non il prodotto di un\u0026rsquo;azienda è quello che succede quando i suoi maintainer cambiano lavoro. Ognuno di questi si può tracciare attraverso gli indirizzi nel repository:\nMaintainer (datore di lavoro attuale) Carriera, secondo il log git Ultimo commit Igor Fedotov (croit): BlueStore Mirantis (2015–17) → SUSE (2017–24) → croit (2021–) 2026-08-24 Kefu Chai (Proxmox): core, build Red Hat (2015–22, 4.770 commit) → XSKY → Proxmox (2025–) 2026-08-18 Radosław Zarzyński (Red Hat): responsabile RADOS Mirantis (2015–17) → Red Hat (2017–) 2026-06-16 Dan van der Ster (Clyso): Executive Council CERN (2013–22) → Clyso (2023–) 2026-03-18 Zac Dover (Ceph Foundation): documentazione indipendente → Clyso → Ceph Foundation 2026-07-23 Yehuda Sadeh (Ubiquiti): autore di RGW DreamHost → Inktank → Red Hat → IBM → Ubiquiti 2026-06-08 Mark Nelson (Clyso): prestazioni DreamHost → Inktank → Red Hat → Clyso 2024-04-16 Xuehan Xu (QiAnXin): Crimson Qihoo 360 (2017–18) → QiAnXin (2021–) 2026 Tre datori di lavoro a testa, quattro in qualche caso, e il lavoro è andato avanti a ogni spostamento. Igor Fedotov è ormai sopravvissuto alle strategie Ceph di due suoi datori di lavoro e mantiene ancora il motore che mette i tuoi byte sul disco. Quindi la risposta onesta a «e se un vendor se ne va» è questa: gli ingegneri vanno avanti.\nChi usa davvero Ceph I contributi sono solo metà della storia. Ecco chi dice ad alta voce di usare Ceph, con i numeri che ha pubblicato da sé.\nOrganizzazione Deployment dichiarato pubblicamente CERN, l\u0026rsquo;Organizzazione europea per la ricerca nucleare 19 cluster di produzione, ~73 PB raw, più altri 5 in un nuovo datacenter: la spina dorsale dello storage sotto il cloud IT del CERN Bloomberg Object store da centinaia di TB a oltre 8 PB; ha aggiunto 6 PB di capacità raw a caldo, un aumento del 50% su un cluster online, in meno di un\u0026rsquo;ora Wikimedia Foundation Cinque cluster Ceph di produzione: blocchi per Cloud VPS, S3 tramite RGW multisite e CephFS per Airflow, Dumps e ML-Lab DigitalOcean Ceph alimenta il suo servizio Block Storage tramite RBD, con «hundreds of enterprise-class SSDs» per regione e replica 3× tra server e rack OVHcloud «Persistent storage for virtual machines is ensured by Ceph RADOS Block Device» nella sua On-Prem Cloud Platform Proxmox Distribuisce Ceph come opzione di storage iperconvergente integrata in Proxmox VE Il CERN merita uno sguardo più da vicino, perché è il resoconto pubblico più dettagliato che qualcuno abbia mai pubblicato. Da un intervento del CERN IT di Enrico Bocchi del settembre 2024:\nCeph al CERN, per applicazione Dimensione raw Cluster Blocchi: OpenStack Cinder/Glance, HDD replica 3× 25,1 PB 5 Blocchi: Flash, EC 4+2 976 TB 2 File system: OpenStack Manila, K8s/OKD, HPC, HDD replica 3× 13,4 PB 5 File system: Flash, replica 3× 1,7 PB 4 Oggetti: S3, Swift, backup, HDD EC 4+2 28,2 PB 2 Oggetti: multi-site, EC 4+2 3,6 PB 1 EC 4+2 è erasure coding, quattro blocchi di dati e due di parità. HPC è high-performance computing, K8s è Kubernetes e OKD è la sua distribuzione upstream. Le cifre sono capacità raw, prima del sovraccarico di replica e codifica.\nDiciannove cluster di produzione, gestiti secondo il principio dichiarato «don\u0026rsquo;t put all your eggs in the same basket», con altri cinque in arrivo in un nuovo datacenter. La storia del servizio è una pubblicità silenziosa per il software: proof of concept da 300 TB nel 2013, 3 PB in produzione per RBD entro dicembre, espansione da 3 PB a 6 PB senza fermi nel 2016, S3 e CephFS in produzione nel 2018, un intero cluster CephFS spostato fisicamente senza fermi nel 2022, RBD da kernel in produzione nel 2023.\nLa parte che dice tutto è cosa ci gira sopra al CERN: GitLab, OpenStack, OpenShift, Kubernetes, Harbor, Jenkins, Grafana, Kafka, OpenSearch, InfluxDB, HTCondor, Slurm, Jupyter, Spark, Zenodo, Indico, e la virtualizzazione di NFS, AFS e CVMFS. Lì Ceph non è un esperimento laterale. È il pavimento su cui sta in piedi il resto dell\u0026rsquo;edificio.\nE la cifra per tutta la comunità, dall\u0026rsquo;annuncio della release Squid della stessa Linux Foundation: 1 exabyte di dati su più di 3.000 cluster Ceph.\nQuell\u0026rsquo;exabyte è un minimo, non un totale Questa è la parte su cui vale la pena fermarsi, perché cambia il modo in cui leggi ogni numero sull\u0026rsquo;adozione di Ceph.\nLa telemetria di Ceph è opt-in. Vieni contato solo se qualcuno lancia ceph telemetry on --license sharing-1-0. Chi non l\u0026rsquo;ha mai fatto è invisibile, e in pratica è la maggior parte della gente, perché non è il default e niente te lo ricorda.\nOra aggiungi Proxmox. Proxmox VE distribuisce Ceph come sua opzione di storage iperconvergente: tre nodi, qualche clic nell\u0026rsquo;interfaccia web, pveceph sotto il cofano, e hai un cluster Ceph. Un numero enorme di persone fa girare Ceph in produzione senza mai pensare di essere utenti Ceph. Sono utenti Proxmox. Non si sono mai iscritti a una mailing list, non scriveranno mai una testimonianza, non hanno acceso la telemetria, e non compaiono in nessuna delle tabelle qui sopra.\nOgni piccola azienda di hosting, managed service provider, dipartimento universitario, homelab finito in produzione senza dirlo a nessuno e cluster da ufficio a tre nodi in quella fascia è un deployment Ceph reale che nessuna cifra di questo articolo conta. Lo stesso vale per chiunque abbia Ceph tramite Rook su Kubernetes, o dentro un appliance di un vendor che non dice mai cosa c\u0026rsquo;è sotto il coperchio.\nQuindi 1 EB su 3.000 cluster è il numero dei cluster che hanno alzato la mano. La base installata reale è parecchio più grande e nessuno sa di quanto. È una posizione strana per un software di infrastruttura, di solito il vendor lo sa perché hai dovuto comprare una licenza, ed è una conseguenza diretta del fatto che è gratis.\n478 organizzazioni hanno messo codice Il log dei commit fa anche da elenco di chi usa Ceph su larga scala, perché un\u0026rsquo;azienda che manda patch è quasi sempre un\u0026rsquo;azienda che lo fa girare. Nel decennio compaiono 478 domini email di organizzazioni distinte, 140 dei quali con cinque commit o più.\nI nomi, raggruppati, dal solo log git:\nProduttori di chip, dischi e hardware: Intel, Samsung, Seagate, SanDisk, Western Digital, Quantum, Mellanox, Lenovo, Fujitsu, Hitachi, Nokia, Arm, Linaro, HiSilicon, Synology, 45Drives Cloud e hosting: DigitalOcean, OVH, IONOS, Akamai, Linode, Hetzner, Binero, City Network, iland, 11:11 Systems, Vexxhost, StackHPC, Canonical, Deutsche Telekom, China Telecom, China Unicom, China Mobile, Chunghwa Telecom Utenti internet e aziende: Bloomberg, eBay, GoDaddy, Flipkart, Wikimedia, Naver, LINE, Kakao, SK Telecom, Alibaba, Tencent, Baidu, ByteDance, Kuaishou, UnionPay, SenseTime, Sangfor, Micro Focus, MITRE, Igalia, Walmart Labs Vendor di storage e integratori: SUSE, Mirantis, XSKY, EasyStack, Inspur, UMCloud, Kylin, UnitedStack, H3C, Xtao, Eisoo, Cloudin, Istuary, ProphetStor, SoftIron, Bigtera, Cloudbase Solutions, Digiware, Bisect, 42on, croit, Clyso, Proxmox, DreamHost Ricerca e istruzione: CERN, l\u0026rsquo;Institute of Software della Chinese Academy of Sciences (ISCAS), la Pennsylvania State University, la Boston University, la University of Michigan, la Carnegie Mellon University, più i membri Associate della Foundation: FAS Research Computing di Harvard, la Greek Research and Technology Network (GRNET), la Monash University, il South African Radio Astronomy Observatory (SARAO), lo Science and Technology Facilities Council (STFC), SWITCH, SLAC a Stanford, e il Center for Research in Open Source Software (CROSS) della UC Santa Cruz Non tutti sono attuali, ed è proprio questo il senso di guardare un decennio. Mostra tutta l\u0026rsquo;ampiezza di chi si è appoggiato a questo software abbastanza da mandare patch indietro, e quanto si è allargata quella cerchia.\nChi dice di sostenere Ceph, contro quello che consegna La membership a livelli della Foundation è dove le aziende dichiarano il loro sostegno. I livelli non seguono l\u0026rsquo;ingegneria, e l\u0026rsquo;esempio più chiaro arriva dai tre membri Diamond citati nello stesso annuncio della release Ceph Squid della Linux Foundation.\nMembro Diamond Cosa ha detto pubblicamente Commit, ultimi 3 anni IBM: Vincent Hsu, IBM Fellow, CTO \u0026amp; VP of IBM Storage «reinforce our trust in Ceph and our commitment to open source» 11.091 (con Red Hat) Bloomberg: Matthew Leonard, Head of Storage Engineering «Our Diamond Membership is a symbol of our commitment to the future of Ceph and its growing community» 220 45Drives: Doug Milburn, Co-founder and President «our unwavering commitment to open-source excellence» 0 La dichiarazione di IBM è sostenuta dal più grande impegno di ingegneria nella storia del progetto, e anche di più. Quella di Bloomberg è sostenuta da 220 commit, un seggio nello Steering Committee e un parco di produzione da 8 PB di cui parlano apertamente: un contributo serio sotto ogni punto di vista. 45Drives costruisce e vende appliance hardware Ceph e finanzia l\u0026rsquo;infrastruttura comune; anche quello è un contributo vero, e non è codice.\nIl quadro completo tra i livelli:\nMembro Livello Commit, ultimi 3 anni IBM Diamond 11.091 (con Red Hat) Bloomberg Diamond 220 CLYSO Diamond 153 45Drives Diamond 0 Western Digital Platinum 0 42on Gold 1 croit Silver 157 DigitalOcean Silver 13 Canonical Silver 9 OVHcloud, Sony, OSNexus, CloudFerro Silver 0 ciascuno E nell\u0026rsquo;altra direzione, quattro dei primi sette contributori non sono affatto membri:\nContributore Commit Membro? QiAnXin 597 No IONOS 498 No Intel 279 Non più Proxmox 249 No Livello nella Foundation contro commit: i soldi e il codice non c'entrano Quanto pagano, contro quanto hanno scritto Livello nella Ceph Foundation e commit su main, dal 2023-08-27 al 2026-08-27 200 400 600 commit DIAMOND IBM, con Red Hat 11.091 Bloomberg 220 CLYSO 153 45Drives proprio niente PLATINUM Western Digital proprio niente GOLD 42on 1 SILVER croit 157 DigitalOcean 13 Canonical 9 altri sei membri Silver proprio niente, tutti e sei NON MEMBRI QiAnXin 597 IONOS 498 Proxmox 249 Cafe Bazaar 118 I sei membri Silver a zero: OVHcloud, Sony Interactive Entertainment, OSNexus, CloudFerro, Intelligent Systems, LongVan. Due dei quattro membri di vertice non hanno scritto niente. Il terzo e il quinto contributore di Ceph non sono nemmeno membri. Livello nella Foundation contro commit negli ultimi tre anni. Sponsorizzazione e ingegneria sono contributi diversi: i livelli misurano il primo, non il secondo. Non lo leggo come ipocrisia e preferirei che non lo facesse nessun altro. I soldi della Foundation pagano il laboratorio di test upstream, la continuous integration che fa da cancello a ogni pull request, il Cephalocon e il personale della comunità: cose senza cui Ceph non potrebbe stare, e che un vendor hardware che vende appliance Ceph fa bene a finanziare. Western Digital, DigitalOcean e OVHcloud vendono tutti prodotti che si appoggiano a Ceph, e pagano nel bene comune che lo tiene in piedi. È uno scambio giusto.\nLa lezione pratica è stretta: leggi la pagina dei membri come l\u0026rsquo;elenco di chi finanzia l\u0026rsquo;infrastruttura comune, e il log dei commit per sapere chi scrive il codice. Sono domande diverse con risposte diverse, e tutte e due le risposte servono.\nI fondatori, otto anni dopo La Foundation è nata il 12 novembre 2018. L\u0026rsquo;elenco è agli atti due volte, nell\u0026rsquo;annuncio della Linux Foundation e nel comunicato d\u0026rsquo;agenzia, e i due coincidono esattamente: tredici membri Premier, dieci General, otto Associate.\nConfrontato con la pagina dei membri di oggi: quattro su tredici membri Premier sono ancora elencati col proprio nome (Canonical, DigitalOcean, OVHcloud, Western Digital), cinque se conti IBM come il posto di Red Hat. Due su dieci membri General sono rimasti: croit e Intelligent Systems.\nE tutti e otto i membri Associate sono ancora lì. I loro nomi completi, come li riporta l\u0026rsquo;annuncio di fondazione:\nBoston University Information Services and Technology CERN, l\u0026rsquo;Organizzazione europea per la ricerca nucleare FAS Research Computing, Harvard University The Greek Research and Technology Network (GRNET) Monash University, Melbourne The South African Radio Astronomy Observatory (SARAO) The Science and Technology Facilities Council (STFC) presso UK Research and Innovation (UKRI) The Center for Research in Open Source Software (CROSS) della University of California, Santa Cruz, dove Ceph è stato scritto in origine, come lavoro di dottorato di Sage Weil con Scott Brandt, Ethan Miller, Darrell Long e Carlos Maltzahn; il paper originale del 2006 è ancora ospitato su ceph.io Otto su otto, in otto anni.\nI membri paganti sono andati e venuti. Le università e i laboratori di ricerca, che aderiscono gratis, hanno tenuto duro per otto anni senza che uno solo se ne andasse. Sono le persone che usano Ceph su larga scala per la scienza, e nessuno ha mollato.\nLa documentazione di Quincy riporta ancora l\u0026rsquo;elenco dei membri com\u0026rsquo;era intorno al 2022, che dà il punto a metà strada: dodici dei ventiquattro membri commerciali di quella fotografia se ne sono andati da allora, esattamente la metà. Il ritmo di Ceph in quel periodo non è cambiato.\nSu croit, visto che è il mio datore di lavoro e uno dei sopravvissuti. croit GmbH è entrata come membro General fondatore dal primo giorno ed è ancora membro otto anni dopo, una permanenza più lunga di quella che sono riuscite a fare Intel, SUSE, ZTE, Arm o Samsung. È anche lo 0,3% dei commit del decennio. Restare non è la stessa cosa che costruire, e non ho intenzione di spacciare la longevità per contributo per l\u0026rsquo;azienda che mi paga.\nIl manuale è una persona sola, e la Foundation lo paga La riga 7 della tabella del decennio è «Ceph Foundation», 691 commit. È quasi un uomo solo.\nZac Dover ha 1.060 commit nel decennio, quasi tutti di documentazione. Negli ultimi tre anni è il 28,4% di tutto quello che c\u0026rsquo;è in doc/: il singolo contributore più grande, davanti sia a Red Hat che a IBM. La storia dei suoi indirizzi va da @gmail.com a @clyso.com a @proton.me, ricondotta nei registri di Ceph alla Ceph Foundation.\ndoc/, ultimi tre anni Commit Quota Ceph Foundation 499 28,4% Nessun datore di lavoro visibile 383 21,8% Red Hat 379 21,5% IBM 333 18,9% doc/ è l\u0026rsquo;unica directory dove il contributore singolo più grande non è né Red Hat né IBM, e si vede. Il manuale di Ceph è migliore di quello che riesce alla maggior parte del software di infrastruttura di queste dimensioni. Pagare un technical writer che non risponde a nessun vendor è la cosa più intelligente che la Foundation fa con i soldi.\nI singoli possono ancora spostare l\u0026rsquo;ago I singoli più attivi del decennio, raggruppati per nome dell\u0026rsquo;autore:\nPersona Commit nel decennio Datore/i di lavoro Sage Weil 7.517 Red Hat: creatore, uscito nel 2022 Kefu Chai 5.538 Red Hat → Proxmox Casey Bodley 2.472 Red Hat Patrick Donnelly 2.330 Red Hat → IBM Jason Dillaman 1.629 Red Hat: uscito nel 2021 Radosław Zarzyński 1.607 Mirantis → Red Hat Samuel Just 1.415 DreamHost → Inktank → Red Hat John Mulligan 1.300 Red Hat Yingxin Cheng 1.202 Intel Zac Dover 1.060 Ceph Foundation Yehuda Sadeh 972 Red Hat → IBM → Ubiquiti Alfredo Deza 930 Red Hat: uscito nel 2019 Ventuno persone hanno scritto metà dei commit del decennio; novantuno ne hanno scritto l'80%. È normale per una grossa codebase C++, ed è anche il motivo per cui qui i singoli contano così tanto.\nLa prova più chiara che la porta è aperta: il quinto posto negli ultimi tre anni è un ingegnere di IONOS. Max Kellermann ha 498 commit dal 2024, più di quanti ne abbiano fatti come aziende Intel, Proxmox, Bloomberg, croit o Clyso, su src/mds, src/common, src/mon, src/tools, src/librbd, src/mgr e src/rgw. Da solo è il 19,3% di tutto il lavoro sui metadati di CephFS nella finestra, secondo solo a Red Hat.\nNessuno l\u0026rsquo;ha nominato. Si è presentato e ha cominciato a sistemare cose, e tre anni dopo è uno dei contributori più attivi di un progetto guidato da un\u0026rsquo;azienda della Fortune 50. Puoi ancora entrare in Ceph e contare.\nProxmox è l\u0026rsquo;altra faccia della stessa medaglia: 249 commit negli ultimi tre anni, 241 dei quali di Kefu Chai dal 30 settembre 2025. Proxmox è passata da zero a contributore Ceph tra i primi dieci in undici mesi assumendo un solo buon ingegnere.\nRGW: dove sta davvero il lavoro Se vuoi sapere dove va l\u0026rsquo;ingegneria di Ceph, la risposta è l\u0026rsquo;object storage, e il motivo è semplice: RGW è quello che ha più strada da fare prima di eguagliare ciò con cui compete.\nsrc/rgw è il sottosistema funzionale più grande di Ceph nel decennio, con 6.958 commit, davanti ai 5.827 di Crimson, ai 4.499 dell\u0026rsquo;OSD, ai 3.848 della dashboard, ai 2.560 di BlueStore e ai 2.546 di CephFS. È quattro volte lo sforzo dello strato a blocchi. Negli ultimi tre anni ha preso 1.705 commit, secondo solo a Crimson, e Crimson è una riscrittura da zero. Come codice che esce davvero, RGW è il programma di funzionalità in corso più grande del progetto.\nL\u0026rsquo;S3 di Amazon è un bersaglio mobile con un\u0026rsquo;API enorme, e ogni anno si arricchisce di funzioni che poi i clienti si aspettano da qualsiasi cosa si dica compatibile S3. Così RGW lo rincorre. Conta gli oggetti dei commit RGW degli ultimi tre anni per area funzionale e la forma di quella rincorsa è evidente:\nLavoro su RGW negli ultimi 3 anni Commit che lo menzionano Replica multisite 94 Account 94 IAM: gestione di identità e accessi 72 Policy 71 Notifiche dei bucket 69 STS (credenziali temporanee) 67 Topic 50 Ruoli 47 Restore 41 Gateway POSIX / file system 40 Cifratura lato server (SSE) 38 Upload multipart 32 Lifecycle 16 KMS: servizio di gestione delle chiavi 12 S3 Select 11 Checksum 11 Transizione al cloud 10 Versioning, CORS, object lock, logging dei bucket, tagging 28 in tutto (Conteggi per parola chiave su 1.705 oggetti di commit, quindi un commit può comparire in più di una riga: il punto è la distribuzione, non un totale preciso.)\nQuesta non è manutenzione. Sono account di identità, ruoli e policy, token di sessione, notifiche e topic dei bucket, SSE-KMS, object lock, regole di lifecycle, S3 Select, checksum, tiering verso il cloud e replica multisite: la lista delle funzioni AWS, costruita pezzo per pezzo. Leggi gli oggetti recenti e trovi lavoro sulla verifica delle firme SigV4, la gestione di x-amz-content-sha256, gli URL prefirmati. Dettagli di compatibilità pignoli, del tipo che conta solo perché la libreria client di qualcuno si aspetta il comportamento esatto di Amazon e senza quello cade.\nÈ anche il motivo per cui RGW ha l\u0026rsquo;elenco di contributori più misto tra i grandi sottosistemi. Nel decennio Red Hat ne è il 64,3%, ma ci sono anche Bloomberg (8,6% nella finestra recente) e Cafe Bazaar (6,2%), aziende che fanno girare grandi object store in produzione e sistemano le cose che le mordono.\nSe stai valutando Ceph per lavoro S3, è questo il numero che dovrebbe tranquillizzarti. La distanza da Amazon è il motivo per cui RGW riceve più attenzione di qualsiasi altra cosa nell\u0026rsquo;albero, e il singolo sforzo di ingegneria più grande del progetto è puntato a colmarla.\nRBD: codice stabile, non un declino src/librbd è il block device di Ceph: quello che usa Proxmox, quello che usa OpenStack Cinder, quello che usa la maggior parte dei driver Container Storage Interface di Kubernetes. Se usi Ceph, probabilmente usi RBD. Il suo grafico dei commit è questo:\nCommit di RBD per anno: un componente che si assesta in manutenzione Commit su\u0026#160;src/librbd, per anno Il block device di Ceph: quello di Proxmox, OpenStack Cinder e quasi tutti i driver CSI di Kubernetes 0 100 200 300 400 431 2015 477 2016 258 2017 276 2018 209 2019 455 2020 165 2021 85 2022 49 2023 74 2024 45 2025 19 2026 Lavoro sulle funzioni in pratica concluso Jason Dillaman ha scritto 281 dei 455 commit del 2020: cache persistente write-back e crittografia; poi RBD si è assestato in manutenzione. Il 2026 arriva al 27 agosto. Non è un declino: è un componente maturo che viene mantenuto invece di essere ricostruito. Commit su src/librbd per anno. Il lavoro pesante sulle funzioni si è chiuso intorno al 2020, quando Jason Dillaman ha scritto 281 dei 455 commit di quell\u0026rsquo;anno, sulla cache persistente in write-back e sulla crittografia, e da allora il componente si è assestato in manutenzione. 159 commit negli ultimi tre anni, circa uno a settimana, contro i 1.705 di RGW e i 1.944 di Crimson.\nEcco che aspetto ha il codice stabile, ed è una qualità. Lo storage a blocchi sopra RADOS è un problema risolto. RBD ha snapshot, clone, layering, mirroring, cifratura, migrazione a caldo e una cache persistente da anni, e non c\u0026rsquo;è niente come l\u0026rsquo;API S3 che gli corre davanti, perché quello che un hypervisor vuole da un block device è cambiato pochissimo in un decennio. Il lavoro sulle funzioni è finito. Quello che resta è manutenzione: correzioni di bug, stare al passo col kernel, qualche guadagno di prestazioni ogni tanto.\nMettilo a confronto con RGW apposta. RGW prende dieci volte i commit perché ha dieci volte più strada da fare. RBD no, quindi non li prende. Un componente che ha smesso di cambiare forma non è un componente che va in malora, e se librbd all\u0026rsquo;improvviso prendesse 400 commit all\u0026rsquo;anno vorrei sapere cosa è andato storto, perché sono i dischi delle mie macchine virtuali quelli che tiene in mano.\nL\u0026rsquo;unica cosa da sapere è che concentra la competenza in pochissime teste. RBD è più o meno Ilya Dryomov, che cura entrambi i capi: Ceph upstream e il driver rbd del kernel Linux. È più o meno la situazione migliore che ci sia, ed è comunque profonda una persona. Il che ti dice a chi chiedere, non se fare il deployment.\nDove sta il lavoro La stessa mappatura su tutto l\u0026rsquo;albero, decennio e finestra recente fianco a fianco:\nArea Primo nel decennio Quota Primo negli ultimi 3 anni Gruppo IBM, ultimi 3 anni src/mds: metadati CephFS Red Hat 78,5% Red Hat 56,4% 73,9% src/osd: OSD attuale Red Hat 69,7% Red Hat 56,9% 84,0% src/cephadm: deployment Red Hat 66,8% Red Hat 73,7% 92,0% src/rgw: S3 Red Hat 64,3% Red Hat 56,1% 66,7% src/librbd: blocchi Red Hat 61,1% Red Hat 76,7% 83,0% src/crimson: prossimo OSD Red Hat 52,1% Red Hat 42,0% 45,4% doc/: il manuale Red Hat 45,6% Ceph Foundation 28,4% 40,5% src/os/bluestore: motore Red Hat 36,9% IBM 46,5% 54,2% src/pybind/mgr/dashboard SUSE 36,6% IBM 57,5% 87,8% Due cose da leggerci. Proprietà: più ci si avvicina alle parti che un vendor vende, gli strumenti di deployment e la GUI, più è una sola azienda; più ci si allontana, l\u0026rsquo;OSD di nuova generazione, il motore di storage, il manuale, più c\u0026rsquo;è gente, ed è lì che c\u0026rsquo;è spazio se vuoi contribuire da qualche parte che non sia già di qualcuno.\nVolume: per commit totali nel decennio, la classifica è RGW 6.958, Crimson 5.827, l\u0026rsquo;OSD 4.499, la dashboard 3.848, i monitor 2.896, BlueStore 2.560, CephFS 2.546, RBD 1.750, cephadm 1.685. Lo sforzo segue la distanza dal traguardo, non la quota di deployment. RGW è primo perché la parità con S3 è lontana; RBD è vicino al fondo perché lo storage a blocchi è finito.\nBlueStore merita una riga a sé. È il motore che scrive i tuoi byte sul disco, e negli ultimi tre anni il secondo contributore dopo IBM è croit con il 18,1%: Igor Fedotov, il suo maintainer principale, in un\u0026rsquo;azienda di qualche decina di persone. È il mio datore di lavoro, quindi pesami di conseguenza. Il punto resta, chiunque gli firmi lo stipendio: una piccola azienda può dare lavoro al maintainer di uno dei componenti più critici per la sicurezza dei dati di tutto lo stack, e il progetto ne guadagna.\nChi tiene il pulsante di merge Ho contato anche i merge, 7.893 negli ultimi tre anni, attribuiti a chi ha premuto il pulsante:\nOrganizzazione Merge Quota Red Hat 3.892 49,3% IBM 1.597 20,2% Ceph Foundation 524 6,6% Proxmox 202 2,6% Intel 136 1,7% croit 76 1,0% Il 69,5% dei merge contro il 68,6% dei commit. Il cancello e il lavoro hanno la stessa forma. Non è un\u0026rsquo;azienda che scrive il codice e un\u0026rsquo;altra che controlla cosa entra, che è il guasto di cui vale davvero la pena preoccuparsi nell\u0026rsquo;open source aziendale. Ceph non ce l\u0026rsquo;ha.\nDa dove vengono i numeri È tutto riproducibile. Ceph mantiene nel repository la propria mappatura da contributore a organizzazione, .organizationmap, accanto a .mailmap, .peoplemap e .githubmap, e documenta il comando per usarla.\ngit clone --filter=blob:none --no-checkout https://github.com/ceph/ceph.git cd ceph git show HEAD:.organizationmap \u0026gt; /tmp/orgmap # Ceph\u0026#39;s own documented method, over the last ten years git log --no-merges --since=2016-08-27 --until=2026-08-27 --pretty=\u0026#39;%aN \u0026lt;%aE\u0026gt;\u0026#39; \\ | git -c mailmap.file=/tmp/orgmap check-mailmap --stdin \\ | sort | uniq -c | sort -rn | head -30 # the maintainer-to-employer mapping, straight from the repo git show HEAD:doc/governance.rst | sed -n \u0026#39;/^.. _csc:/,/^\\.\\. _ctl:/p\u0026#39; \\ | grep -oE \u0026#39;\\* [^\u0026lt;]+\u0026lt;[^\u0026gt;]+\u0026gt;\u0026#39; Lancia il primo e ottieni un\u0026rsquo;IBM più piccola della mia, perché la mappa ufficiale non è aggiornata. Non conosce aainscow@uk.ibm.com, bill_scales@uk.ibm.com, ylifshit@ibm.com, rkachach@ibm.com, leonid.usov@ibm.com né i nomi host generati automaticamente li-*.ibm.com. Usare gli strumenti del progetto sottostima la concentrazione.\nLe mie correzioni sopra la mappa:\nQualsiasi indirizzo che finisce in ibm.com, compresi uk.ibm.com, il.ibm.com, in.ibm.com, de.ibm.com e le forme li-*.ibm.com, è IBM. redhat.com e inktank.com sono Red Hat, mostrata separatamente da IBM ma la stessa squadra dall\u0026rsquo;ottobre 2022. Sette indirizzi personali sono attribuiti a datori di lavoro dove è il repository stesso a dimostrarlo: sage@newdream.net (Red Hat), idryomov@gmail.com (elencato come idryomov@redhat.com nel doc/governance.rst di Ceph), max.kellermann@gmail.com (IONOS), xxhdx1985126@gmail.com (QiAnXin), yuvalif@yahoo.com (IBM), yingxincheng@gmail.com (Intel), shraddha.agrawal000@gmail.com (IBM). Tutto il resto tiene il suo dominio. Gli indirizzi personali restano «nessun datore di lavoro visibile» invece di essere tirati a indovinare. Limiti che non posso correggere. I commit sono un\u0026rsquo;unità grossolana: un refactoring accurato da 900 righe conta una volta, quaranta correzioni di refusi contano quaranta, e qui niente è pesato. I domini email sono imperfetti: il 9,0% del decennio non mostra un datore di lavoro, e alcune di quelle persone sono di sicuro pagate per scrivere Ceph. La review non si vede in git: Ceph fa le review nelle pull request di GitHub, non con trailer Reviewed-by:, di cui ne ho trovati dodici in tre anni; il cancello più importante del progetto non lascia traccia in un clone. Le cifre sono solo main, quindi i backport sui rami stabili non sono contati, il che sottostima il lavoro di manutenzione. E ogni cifra sull\u0026rsquo;adozione qui è un minimo, per il motivo della telemetria spiegato sopra.\nDove un\u0026rsquo;affermazione si basa su una data ho usato la data dell\u0026rsquo;autore; dove si basa sul datore di lavoro di qualcuno, un indirizzo che quella persona ha pubblicato da sé.\nCosa ne ricavo Ceph è un progetto finanziato dalle aziende con una vera comunità attorno ai bordi, ed è stato così per tutta la sua vita commerciale. Non è una frecciata. Qualcuno deve pagare ingegneri per curare uno storage distribuito di queste dimensioni, e per dieci anni qualcuno l\u0026rsquo;ha fatto.\nNon farò finta che Ceph sia tipico, perché ho controllato. Le statistiche di LWN per Linux 6.15 registrano 2.068 sviluppatori da almeno 195 datori di lavoro, con l\u0026rsquo;azienda singola più grande, Intel, al 12,0% dei changeset. Ceph è 1.718 persone in un decennio con un\u0026rsquo;azienda al 67,0%. Il kernel distribuisce la sua dipendenza dalle aziende su decine di società. Ceph la concentra in una. È una differenza vera, e «lo fanno tutti» sarebbe un modo pigro di liquidarla.\nMa ecco cosa dicono dieci anni di dati sul fatto che conti o no, ed è una risposta migliore di quella che ero andato a cercare:\nCeph è robusto nel modo che conta. Ha perso l\u0026rsquo;uomo che l\u0026rsquo;ha scritto, che faceva un quinto del lavoro. Ha perso SUSE, il suo secondo contributore e l\u0026rsquo;autrice della dashboard. Ha perso ZTE, Mirantis, XSKY, EasyStack, Inspur e metà dei membri fondatori della Foundation. Il ritmo dei commit oggi è entro il due per cento di quello dell\u0026rsquo;anno scorso. Vent\u0026rsquo;anni di ingegneria dello storage stanno in quell\u0026rsquo;albero sotto LGPL-2.1 o LGPL-3, e nessuno può chiuderlo, cambiargli licenza o riprenderselo.\nI maintainer si spostano. Fedotov ha portato avanti BlueStore attraverso tre datori di lavoro. Kefu Chai è passato da Red Hat a Proxmox e ha continuato. Sadeh ha scritto RGW in DreamHost e a giugno ha cambiato il suo indirizzo nel comitato in Ubiquiti. Quando un\u0026rsquo;azienda se ne va, spesso le sue persone restano.\nLa porta è aperta sul serio. Un ingegnere di IONOS è diventato il quinto contributore in tre anni. Proxmox è entrata tra i primi dieci con una sola assunzione. Un\u0026rsquo;azienda di sicurezza senza prodotti di storage sta costruendo un quinto dell\u0026rsquo;OSD di nuova generazione. 478 organizzazioni hanno mandato patch. Se vuoi entrare, a fermarti c\u0026rsquo;è solo il lavoro.\nLa base di utenti è molto più grande di quanto chiunque possa misurare. Un exabyte su 3.000 cluster è quello che ha alzato la mano tramite la telemetria opt-in, e il CERN da solo conta diciannove cluster di produzione. Ogni cluster iperconvergente Proxmox, ogni deployment Rook, ogni appliance di un vendor con Ceph sotto il coperchio è uso in produzione reale che nessuna cifra pubblicata conta. Un software usato così tanto e così in silenzio non sparisce e basta.\nLo sforzo va dove c\u0026rsquo;è la distanza, non dove ci sono gli utenti. RGW è il programma più grande del progetto, 6.958 commit nel decennio, perché raggiungere Amazon su S3 è una lunga rincorsa dietro a un bersaglio mobile. RBD sta vicino al fondo perché lo storage a blocchi è finito. Pochi commit su un componente maturo sono un lavoro concluso, non un campanello d\u0026rsquo;allarme, e leggere quei due numeri al contrario è l\u0026rsquo;errore più facile che ci sia con dati così. L\u0026rsquo;ho fatto anch\u0026rsquo;io al primo giro.\nGiudica i fornitori sui commit, non sui livelli. La storia è pubblica e quattro righe di shell ti mostrano chi cura davvero la cosa da cui stai per dipendere. Lo storage chiuso non ti offre questo a nessun prezzo.\nQuindi, se stai valutando Ceph: la concentrazione è da sapere quando pianifichi a cinque anni, e non è un motivo per tirarsi indietro. Uno strato a blocchi maturo. Il più grande sforzo di ingegneria del progetto puntato dritto sulla parità con S3. Un OSD del futuro costruito da tre aziende insieme. Un manuale migliore della media. Una governance che ha superato la perdita del fondatore. Un decennio di review fatte allo scoperto, il lavoro di 478 organizzazioni nell\u0026rsquo;albero, e una licenza il cui caso peggiore è un fork e non un vicolo cieco. Sulla base di 69.613 commit, questo progetto gode di buona salute.\nE contali da te se non mi credi. I comandi sono lassù, i dati sono pubblici, e in questo articolo non c\u0026rsquo;è niente da prendere sulla fiducia, né la mia né quella di nessun altro.\nRiferimenti Fonti del progetto Ceph\n\u0026ldquo;Ceph: A Scalable, High-Performance Distributed File System\u0026rdquo; — Weil, Brandt, Miller, Long e Maltzahn, OSDI \u0026lsquo;06, novembre 2006. Il paper da cui è nato Ceph ceph/ceph su GitHub — il repository da cui viene ogni cifra sui commit; .organizationmap, .mailmap, .peoplemap, .githubmap, doc/governance.rst e COPYING sono tutti nell\u0026rsquo;albero Ceph governance — composizione dell\u0026rsquo;Executive Council e del Ceph Steering Committee, con gli indirizzi Ceph component team — i responsabili dei componenti Ceph Foundation members — membri attuali per livello Ceph Foundation documentation — struttura dei livelli e membership Associate gratuita Ceph Foundation members, documentazione di Quincy — i membri com\u0026rsquo;erano intorno al 2022 Ceph telemetry module — conferma che la telemetria è opt-in \u0026ldquo;Red Hat\u0026rsquo;s Ceph team is moving to IBM\u0026rdquo;, 4 ottobre 2022 Ceph Community Newsletter, November 2021 — Sage Weil si fa da parte Ceph Foundation e Linux Foundation\nIntroducing Ceph Squid — le dichiarazioni dei membri Diamond citate sopra, e le cifre di 1 exabyte e oltre 3.000 cluster The Linux Foundation Launches Ceph Foundation, 12 novembre 2018 — l\u0026rsquo;elenco dei membri fondatori Lo stesso comunicato via PRNewswire — usato per confermare l\u0026rsquo;elenco in modo indipendente Deployment\n\u0026ldquo;Ceph: Infrastructure Storage at CERN\u0026rdquo; — Enrico Bocchi, CERN IT Storage, 27 settembre 2024. Ogni cifra sul CERN qui sopra viene da queste slide Why We Chose Ceph to Build Block Storage — DigitalOcean \u0026ldquo;We Added 6 Petabytes Of Ceph Storage and No Clients Noticed\u0026rdquo; — Matthew Leonard e Joseph Mundackal, Bloomberg, Cephalocon 2020 Ceph su Wikitech — i cinque cluster di produzione della Wikimedia Foundation Ceph RBD block storage — la documentazione di OVHcloud Deploy Hyper-Converged Ceph Cluster — Proxmox VE che distribuisce Ceph come storage iperconvergente Aziende\n\u0026ldquo;SUSE says tschüss to Ceph-based enterprise storage product\u0026rdquo;, The Register, 25 marzo 2021 — SUSE Enterprise Storage cancellato in favore di Longhorn Qi An Xin files for $634m IPO, Global Venturing, 13 maggio 2020 — le origini di QiAnXin in Qihoo 360, la quota CEC e l\u0026rsquo;azionariato Confronto\nDevelopment statistics for the 6.15 kernel, LWN.net — numero di sviluppatori e datori di lavoro del kernel usato per il confronto sulla concentrazione ","permalink":"https://blogs.damiendye.uk/it/ceph/who-actually-writes-and-uses-ceph/","summary":"Ho contato ogni commit sul ramo main di Ceph negli ultimi dieci anni, 69.613 da 1.718 persone in 478 organizzazioni, ho ricondotto tutti i 38 membri dello Steering Committee ai loro datori di lavoro e ho raccolto i deployment dichiarati pubblicamente. Il risultato è un progetto che ha assorbito la perdita del suo fondatore e del suo secondo contributore senza perdere un colpo, e che oggi rilascia allo stesso ritmo di prima.","title":"Chi scrive e chi usa davvero Ceph"},{"content":"Questa volta l\u0026rsquo;host esiste. Solo che è sull\u0026rsquo;hypervisor sbagliato L\u0026rsquo;ultima volta il problema era che la macchina nominata nell\u0026rsquo;inventario non esisteva ancora: niente IP, niente SSH, niente Python, niente a cui collegarsi. Ogni task andava delegato altrove.\nUna migrazione da VMware rovescia la situazione e non cambia niente. La macchina esiste, è accesa, la gente la usa. Comunque non ti ci colleghi mai. È un nome e un sacco di variabili che descrivono qualcosa da ricostruire altrove. Ogni task gira ancora sul nodo di controllo, e ora dall\u0026rsquo;altra parte ci sono due API invece di una.\nUna nota su cosa sia questo articolo. È il progetto e il playbook, non un racconto dal fronte. Non l\u0026rsquo;ho ancora eseguito da capo a fondo su un parco di produzione. Tutto ciò che dico sul comportamento dei moduli è stato letto dal codice distribuito e verificato, e ho detto chiaramente dove un\u0026rsquo;affermazione viene dal sorgente e non da un\u0026rsquo;esecuzione. Quando ci avrò fatto una migrazione vera, i numeri e le sorprese avranno il loro articolo.\nVersioni su cui è stato verificato:\n$ ansible --version | head -1 ansible [core 2.20.7] $ ansible-galaxy collection list | grep -E \u0026#39;vmware|proxmox\u0026#39; community.proxmox 1.6.0 community.vmware 6.2.1 vmware.vmware 2.9.0 I frammenti qui sotto vengono da un solo playbook, migrate.yml, un inventario dinamico vSphere in inventory/vmware.vms.yml e un group_vars/all.yml. Ho reso generici i nomi di datacenter, nodi e storage per leggibilità.\nLa forma del lavoro Cinque passi, e solo l\u0026rsquo;ultimo costa qualcosa.\nguest accesi, niente a rischio il fermo scoperta leggi i portgroup distribuiti e i loro tag VLAN sdn una zona VLAN, una VNet per VLAN su Proxmox build gusci senza dischi, CPU e RAM giuste, firmware e MAC trasferimento storage vMotion dei VMDK su NFS, mentre girano cutover spegni, importa i dischi, imposta l'avvio e avvia il guest Tutto ciò che è reversibile si fa prima di spegnere qualcosa La parte lenta è il trasferimento, e non costa alcun fermo. Quando si apre la finestra i dischi sono già su uno storage montato da Proxmox, quindi il cutover è un'importazione locale, non una copia. Un guscio senza disco costa poco da eliminare, quindi un errore prima del cutover costa solo tempo. Abbandonare la migrazione a metà lascia ogni guest ancora acceso su VMware, intatto. Tutto ciò che è reversibile avviene prima. La fase lenta è gratis, e quella costosa è breve, perché a quel punto i dischi sono già dove devono essere. L\u0026rsquo;ordine è tutto il progetto. La scoperta non cambia niente. Costruire la rete cambia solo Proxmox. Costruire i gusci cambia solo Proxmox, e un guscio senza disco costa poco da eliminare. Spostare i dischi è lento ma a caldo. Solo l\u0026rsquo;ultimo play spegne qualcosa.\nMolla a metà e ogni guest sta ancora girando su VMware, intatto.\nDue collezioni, e una sta per andare in pensione Ti servono entrambe, e non per il motivo che immagineresti.\ncollections: - name: community.vmware version: \u0026#34;\u0026gt;=6.2.1\u0026#34; - name: vmware.vmware version: \u0026#34;\u0026gt;=2.5.0\u0026#34; - name: community.proxmox version: \u0026#34;\u0026gt;=1.6.0\u0026#34; community.vmware è la collezione vecchia e ampia, e la stanno smontando. Il suo MANIFEST.json dichiara {\u0026quot;vmware.vmware\u0026quot;: \u0026quot;\u0026gt;=2.5.0\u0026quot;} come dipendenza obbligatoria, quindi installare la prima tira dentro la seconda che tu l\u0026rsquo;abbia chiesto o no. I moduli traslocano uno alla volta, e quelli che usi in una migrazione sono a punti diversi del trasloco:\nvmware_dvs_portgroup_info: ancora solo in community.vmware, ed è quello che legge le tue VLAN. vmware_vmotion: ancora solo in community.vmware. vmware_guest_powerstate: deprecato, rimosso in community.vmware 7.0.0. Usa vmware.vmware.vm_powerstate. vmware_vm_inventory: deprecato, rimosso nella 7.0.0. Usa vmware.vmware.vms. Ansible ti avvisa delle deprecazioni dei moduli alla prima esecuzione, il che è decente da parte sua:\n[DEPRECATION WARNING]: community.vmware.vmware_guest_powerstate has been deprecated. Use vmware.vmware.vm_powerstate instead. This feature will be removed from collection \u0026#39;community.vmware\u0026#39; version 7.0.0. Non ti avvisa del plugin di inventario, perché i plugin di inventario vengono letti prima che quel meccanismo sia attivo. Devi andare a leggerti il plugin.\nC\u0026rsquo;è una terza trappola nella divisione. vmware.vmware.vm_portgroup_info sembra esattamente ciò che vuole una migrazione di rete: per VM, per NIC, ti dà il portgroup e la VLAN. Ma è costruito su ModuleRestBase e importa com.vmware.vapi, il che significa che sul nodo di controllo gli serve il vSphere Automation SDK, non solo pyVmomi. Anche il suo ritorno documentato è vecchio: il blocco RETURN promette name e vlan_id, mentre il codice costruisce in realtà portgroup_name e un dict vlan_info per il caso distribuito. Io ho preso un\u0026rsquo;altra strada, qui sotto, e non mi è servito nessuno dei due.\nL\u0026rsquo;inventario è la scoperta In questo playbook non c\u0026rsquo;è un play «vai a cercare le VM», perché quando gira il primo task l\u0026rsquo;inventario l\u0026rsquo;ha già fatto, con una sola query al property collector invece di un ciclo per VM.\n# inventory/vmware.vms.yml plugin: vmware.vmware.vms hostname: \u0026#34;{{ lookup(\u0026#39;ansible.builtin.env\u0026#39;, \u0026#39;VMWARE_HOST\u0026#39;) }}\u0026#34; username: \u0026#34;{{ lookup(\u0026#39;ansible.builtin.env\u0026#39;, \u0026#39;VMWARE_USER\u0026#39;) }}\u0026#34; password: \u0026#34;{{ lookup(\u0026#39;ansible.builtin.env\u0026#39;, \u0026#39;VMWARE_PASSWORD\u0026#39;) }}\u0026#34; validate_certs: false search_paths: - /Datacenter-1 properties: - name - config.name - config.uuid - config.guestId - config.firmware - config.template - config.hardware.numCPU - config.hardware.numCoresPerSocket - config.hardware.memoryMB - config.hardware.device - summary.runtime.powerState gather_compute_objects: true hostnames: [\u0026#39;name\u0026#39;] filter_expressions: - \u0026#39;config.template\u0026#39; Il nome del file conta. Il verify_file del plugin rivendica solo i file che finiscono in vms.yml, vms.yaml, vmware_vms.yml o vmware_vms.yaml. Chiamalo vcenter.yml e in silenzio non è il tuo inventario.\nsearch_paths filtra prima della query, non dopo. Su un parco grande è la differenza tra secondi e minuti, a differenza di filter_expressions, su cui la documentazione è esplicita: gira dopo la raccolta e «does not affect the speed of the inventory plugin».\nfilter_expressions scarta un host quando l\u0026rsquo;espressione è vera. config.template quindi rimuove i template, il che la prima volta si legge al contrario.\nE la riga importante è config.hardware.device, che non compare in nessuna lista di proprietà predefinita. È l\u0026rsquo;intero inventario hardware della VM, e porta tre cose senza cui questa migrazione non può procedere: il MAC di ogni NIC, la chiave del dvportgroup a cui è collegata ogni NIC e il percorso nel datastore di ogni disco. Senza, torni a un ciclo di vmware_guest_info, un viaggio di andata e ritorno per VM.\nI dispositivi tornano come JSON con il loro tipo vSphere conservato in _vimtype. Conviene saperlo perché è così che distingui una NIC da un disco. Ho controllato l\u0026rsquo;encoder invece di tirare a indovinare:\n{ \u0026#34;_vimtype\u0026#34;: \u0026#34;vim.vm.device.VirtualVmxnet3\u0026#34;, \u0026#34;macAddress\u0026#34;: \u0026#34;00:50:56:87:a5:9a\u0026#34;, \u0026#34;backing\u0026#34;: { \u0026#34;_vimtype\u0026#34;: \u0026#34;...DistributedVirtualPortBackingInfo\u0026#34;, \u0026#34;port\u0026#34;: { \u0026#34;_vimtype\u0026#34;: \u0026#34;vim.dvs.PortConnection\u0026#34;, \u0026#34;portgroupKey\u0026#34;: \u0026#34;dvportgroup-1014\u0026#34; } } } Quindi un blocco compose può portare i percorsi scomodi in hostvars piatte:\ncompose: vm_moid: moid vm_firmware: config.firmware vm_memory_mb: config.hardware.memoryMB vm_num_cpu: config.hardware.numCPU # A virtual NIC is any device with a MAC. Filtering on _vimtype does not # work cleanly here, because VMXNET3, E1000 and SR-IOV cards are all # different types with no shared substring. vm_nics: \u0026gt;- config.hardware.device | selectattr(\u0026#39;macAddress\u0026#39;, \u0026#39;defined\u0026#39;) | selectattr(\u0026#39;macAddress\u0026#39;, \u0026#39;ne\u0026#39;, None) | list # Disks are one exact type, so this one can match on it. vm_disks: \u0026gt;- config.hardware.device | selectattr(\u0026#39;_vimtype\u0026#39;, \u0026#39;eq\u0026#39;, \u0026#39;vim.vm.device.VirtualDisk\u0026#39;) | list Quell\u0026rsquo;asimmetria è reale e frega la gente. Non c\u0026rsquo;è un tipo VirtualEthernetCard da cercare. Quella è la classe base astratta, e quello che vCenter ti consegna davvero è VirtualVmxnet3, VirtualE1000, VirtualE1000e, VirtualPCNet32 o VirtualSriovEthernetCard. Non c\u0026rsquo;è una sottostringa comune a tutti. Avere un MAC, invece, è una cosa che fa solo una NIC.\nOgni modulo info nasconde il campo che ti serve Questo è il filo conduttore di tutto il lavoro, e quando l\u0026rsquo;hai visto tre volte cominci a controllare ogni default prima di scrivere il task.\nvmware_dvs_portgroup_info ha sei opzioni show_*. Cinque valgono true per default. La sesta è show_vlan_info, e vale false.\nshow_mac_learning=dict(type=\u0026#39;bool\u0026#39;, default=True), show_network_policy=dict(type=\u0026#39;bool\u0026#39;, default=True), show_teaming_policy=dict(type=\u0026#39;bool\u0026#39;, default=True), show_uplinks=dict(type=\u0026#39;bool\u0026#39;, default=True), show_port_policy=dict(type=\u0026#39;bool\u0026#39;, default=True), show_vlan_info=dict(type=\u0026#39;bool\u0026#39;, default=False), Lasciala stare e ottieni la politica di MAC learning, la politica di teaming, l\u0026rsquo;ordine degli uplink e la politica delle porte per ogni portgroup del parco. Tutto tranne il tag VLAN, che è l\u0026rsquo;unico campo di cui una migrazione di rete chiede davvero. Quindi il task è rovesciato rispetto a come lo scriveresti d\u0026rsquo;istinto: accendi l\u0026rsquo;unica cosa, spegni le altre cinque.\n- name: Read the distributed portgroups community.vmware.vmware_dvs_portgroup_info: datacenter: \u0026#34;{{ vcenter_datacenter }}\u0026#34; show_vlan_info: true show_network_policy: false show_teaming_policy: false show_port_policy: false show_mac_learning: false show_uplinks: false register: dvs_pgs Non è un caso isolato. vmware.vmware.vms ha gather_compute_objects, che popola cluster ed esxi_host: default false. community.vmware.vmware_vm_info ha show_allocated, il blocco che contiene CPU e memoria: default false. In tutti e tre i casi il campo costoso da raccogliere è quello di cui la migrazione ha bisogno, e il default protegge un uso di sola lettura per i report che non è quello in cui ti trovi.\nvlan_id ha tre tipi diversi Poi ottieni i tag VLAN e scopri che non hanno una forma sola. Direttamente da get_vlan_info:\nif isinstance(vlan_obj, vim...TrunkVlanSpec): ... return dict(trunk=True, pvlan=False, vlan_id=vlan_id_list) elif isinstance(vlan_obj, vim...PvlanSpec): return dict(trunk=False, pvlan=True, vlan_id=str(vlan_obj.pvlanId)) else: return dict(trunk=False, pvlan=False, vlan_id=str(vlan_obj.vlanId)) Un portgroup di accesso ti dà la stringa \u0026quot;100\u0026quot;. Una PVLAN ti dà una stringa. Un trunk ti dà una lista di stringhe, ognuna \u0026quot;20\u0026quot; oppure \u0026quot;20-30\u0026quot;. E ogni switch distribuito ha almeno un trunk, che tu ne abbia creato uno o no, perché il portgroup di uplink è un trunk che porta \u0026quot;0-4094\u0026quot;.\nQuindi | int non è a tua disposizione finché non hai buttato via le altre due forme:\naccess_pgs: \u0026gt;- {{ dvs_pgs.dvs_portgroup_info | dict2items | map(attribute=\u0026#39;value\u0026#39;) | flatten | rejectattr(\u0026#39;vlan_info.trunk\u0026#39;) | rejectattr(\u0026#39;vlan_info.pvlan\u0026#39;) | rejectattr(\u0026#39;vlan_info.vlan_id\u0026#39;, \u0026#39;in\u0026#39;, [\u0026#39;0\u0026#39;, 0]) | list }} Tre scarti, in quest\u0026rsquo;ordine. Via i trunk, via le PVLAN, e poi via i portgroup senza tag, il che si sbarazza anche dei gruppi di uplink e di tutto ciò che sta sulla VLAN 0.\nNon traduco trunk e PVLAN in automatico e contesterei chiunque lo facesse. Un trunk VMware che atterra su Proxmox ha bisogno di una zona Q-in-Q oppure di una VNet VLAN-aware, e quale sia giusta dipende da cosa il guest si aspetta di vedere. È una decisione, non una corrispondenza. Il playbook li stampa e va avanti:\nTASK [Report what was found] ok: [localhost] =\u0026gt; { \u0026#34;msg\u0026#34;: \u0026#34;3 access portgroups -\u0026gt; [100, 200]. Not translated: [\u0026#39;dvs_001-uplink\u0026#39;] (trunks), [\u0026#39;isolated\u0026#39;] (PVLANs).\u0026#34; } Replicare le VLAN in SDN Una zona VLAN legata a un bridge, poi una VNet per VLAN con il suo tag.\n- name: Create the VLAN zone community.proxmox.proxmox_zone: zone: \u0026#34;{{ sdn_zone }}\u0026#34; type: vlan bridge: \u0026#34;{{ sdn_bridge }}\u0026#34; mtu: \u0026#34;{{ sdn_mtu }}\u0026#34; state: present - name: Create one VNet per VMware VLAN community.proxmox.proxmox_vnet: vnet: \u0026#34;{{ sdn_vnet_prefix }}{{ item.vlan_info.vlan_id | int }}\u0026#34; zone: \u0026#34;{{ sdn_zone }}\u0026#34; tag: \u0026#34;{{ item.vlan_info.vlan_id | int }}\u0026#34; alias: \u0026#34;{{ item.portgroup_name }}\u0026#34; state: present loop: \u0026#34;{{ access_pgs | unique(attribute=\u0026#39;vlan_info.vlan_id\u0026#39;) }}\u0026#34; throttle: 1 I nomi delle VNet sono corti e vincolati, quelli dei portgroup VMware no. Production-Web-Tier-VLAN100 è un nome di portgroup normalissimo e un nome di VNet impossibile. Quindi il nome viene generato (v100, dal tag) e l\u0026rsquo;originale leggibile va in alias, dove resta visibile nell\u0026rsquo;interfaccia e nell\u0026rsquo;output di pvesh. Ricavare il nome dalla VLAN invece che dal portgroup significa anche che la corrispondenza si può ricostruire a occhio sei mesi dopo.\nDue portgroup sulla stessa VLAN collassano in una sola VNet. È corretto (erano lo stesso dominio di broadcast anche in VMware), ma devi vederlo succedere, ed è quello che fa unique(attribute='vlan_info.vlan_id'). Due portgroup chiamati prod-web e prod-web-b, entrambi sulla VLAN 100, producono un solo v100.\nthrottle: 1 non è prudenza, è il modulo. Ogni scrittura SDN in community.proxmox prende un lock globale del cluster, applica la configurazione in sospeso e lo rilascia: get_global_sdn_lock(), poi apply_sdn_changes_and_release_lock(). Lanciale in parallelo e si mettono in coda sul lock comunque; il throttle ti evita solo di fingere il contrario. Vale anche la pena sapere che il rollback in caso di errore dipende dalla versione: il modulo controlla is_lock_and_rollback_supported e, su PVE più vecchi, ti dice che non è riuscito a fare il rollback invece di farlo.\nUna cosa estetica che ti farà dubitare di te stesso. Nella 1.6.0 proxmox_vnet emette l\u0026rsquo;intero dict dei parametri come warning di Ansible a ogni singola creazione:\nself.module.warn(f\u0026#34;{vnet_params}\u0026#34;) self.proxmox_api.cluster().sdn().vnets().post(**vnet_params) È una riga di debug che qualcuno ha dimenticato. È rumore, non un difetto.\nCostruisci i gusci, senza dischi Ora le VM, ed è qui che il progetto si guadagna lo stipendio. Ogni VM viene costruita in Proxmox con il numero giusto di CPU, la memoria giusta, il firmware giusto e le NIC giuste sulle VLAN giuste. Nessun disco.\nUn guscio senza dischi si crea in fretta, si elimina gratis e, se qualcuno lo avvia per sbaglio, arriva a un prompt PXE. Puoi costruirne quattrocento in un pomeriggio, guardare il risultato, decidere che è sbagliato, eliminare tutto e rifarlo. Niente è stato copiato, niente è stato spento, e nessuno se n\u0026rsquo;è accorto.\nI valori derivati sono dichiarazioni, non task. Ansible li valuta in modo pigro sull\u0026rsquo;host di turno, quindi ogni VM ottiene i suoi senza un solo set_fact:\n# group_vars/all.yml pve_vmid: \u0026#34;{{ vmid_base | int + (vm_moid | regex_replace(\u0026#39;^vm-\u0026#39;, \u0026#39;\u0026#39;) | int) }}\u0026#34; pve_bios: \u0026#34;{{ \u0026#39;ovmf\u0026#39; if vm_firmware == \u0026#39;efi\u0026#39; else \u0026#39;seabios\u0026#39; }}\u0026#34; pve_cores: \u0026#34;{{ vm_cores_per_socket | int }}\u0026#34; pve_sockets: \u0026#34;{{ ((vm_num_cpu | int) / (vm_cores_per_socket | int)) | round(0, \u0026#39;ceil\u0026#39;) | int }}\u0026#34; Il VMID viene dal MoID di vCenter. vm-42 diventa 20042. Conta più di quanto sembri: il play di cutover deve trovare la VM creata dal play di build, e una riesecuzione deve atterrare sulla stessa invece di costruirne in silenzio una seconda. Lasciare che l\u0026rsquo;API assegni il prossimo ID libero (che è ciò che succede se ometti vmid, e di cui ho scritto l\u0026rsquo;ultima volta) lo rende impossibile.\nLa memoria non ha bisogno di conversione. VMware riporta config.hardware.memoryMB e Proxmox vuole MB. I socket sì: VMware ti dà le vCPU totali e i core per socket, Proxmox vuole socket e core.\n- name: Create the VM shell delegate_to: localhost community.proxmox.proxmox_kvm: node: \u0026#34;{{ proxmox_node }}\u0026#34; vmid: \u0026#34;{{ pve_vmid }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; cores: \u0026#34;{{ pve_cores }}\u0026#34; sockets: \u0026#34;{{ pve_sockets }}\u0026#34; memory: \u0026#34;{{ vm_memory_mb }}\u0026#34; ostype: \u0026#34;{{ pve_ostype }}\u0026#34; bios: \u0026#34;{{ pve_bios }}\u0026#34; scsihw: \u0026#34;{{ default_scsihw }}\u0026#34; efidisk0: \u0026#34;{{ {\u0026#39;storage\u0026#39;: pve_target_storage, \u0026#39;efitype\u0026#39;: \u0026#39;4m\u0026#39;, \u0026#39;pre_enrolled_keys\u0026#39;: false} if pve_bios == \u0026#39;ovmf\u0026#39; else omit }}\u0026#34; agent: \u0026#34;enabled=1\u0026#34; onboot: false state: present onboot: false apposta. Niente dovrebbe avviarsi da solo nel mezzo di una migrazione, men che meno una macchina i cui dischi vengono ancora scritti da un altro hypervisor.\nIl firmware non è un dettaglio facoltativo. Un guest UEFI importato su una VM SeaBIOS si importa alla perfezione e poi si rifiuta di avviarsi, e ci perderai un\u0026rsquo;ora. config.firmware è efi o bios e corrisponde direttamente a ovmf e seabios. Un guest UEFI ha anche bisogno di un disco per le variabili EFI, che va creato insieme alla VM; più sotto il perché.\nproxmox_kvm non corregge una NIC, e non te lo dice L\u0026rsquo;ultima volta ho scritto che proxmox_kvm rinuncia a convergere invece di aggiornare. Ecco la versione più affilata, che mi ha morso mentre scrivevo questo articolo e su cui vale la pena essere precisi.\nupdate vale false per default, quindi rieseguire su una VM che esiste già non fa niente. Va bene, ed è documentato. Ma imposta update: true e il modulo si rifiuta ancora di toccare alcuni parametri:\n# If update, don\u0026#39;t update disk (virtio, efidisk0, tpmstate0, ide, sata, scsi) # and network interface, unless update_unsafe=True if update_unsafe is False: ... if \u0026#34;efidisk0\u0026#34; in kwargs: del kwargs[\u0026#34;efidisk0\u0026#34;] Li cancella dalla richiesta e va avanti. Quindi correggi una NIC nella mappatura dell\u0026rsquo;inventario, riesegui con update: true, guardi Ansible riportare changed, e la NIC è sbagliata esattamente come prima. Il changed è vero (qualcos\u0026rsquo;altro nel payload è stato aggiornato), ma non la cosa che stavi correggendo.\nupdate_unsafe: true toglie la restrizione, e il nome è onesto. La stessa protezione copre i dischi, quindi su una VM con dei dischi un aggiornamento non sicuro è un buon modo per ritrovarsene una seconda copia. Non è un interruttore da toccare durante una migrazione.\nLa via d\u0026rsquo;uscita è non usare net per niente. Le NIC si montano con proxmox_nic, un modulo il cui unico compito è una singola interfaccia e che converge come si deve:\n- name: Attach each NIC to its VNet delegate_to: localhost community.proxmox.proxmox_nic: vmid: \u0026#34;{{ pve_vmid }}\u0026#34; interface: \u0026#34;net{{ idx }}\u0026#34; bridge: \u0026#34;{{ sdn_vnet_prefix }}{{ pg_vlan[item.backing.port.portgroupKey] }}\u0026#34; mac: \u0026#34;{{ item.macAddress }}\u0026#34; model: \u0026#34;{{ default_net_model }}\u0026#34; state: present loop: \u0026#34;{{ vm_nics }}\u0026#34; loop_control: index_var: idx È la stessa divisione a cui ero arrivato l\u0026rsquo;ultima volta: proxmox_kvm per definire la macchina, proxmox_disk e proxmox_nic per le cose che cambiano dopo. Il parametro è mac, non mac_addr.\nefidisk0 non si può spostare fuori allo stesso modo (proxmox_disk non ha efitype né pre_enrolled_keys), quindi va messo alla creazione e deve essere giusto al primo colpo.\nPorta con te il MAC. VMware distribuisce MAC da 00:50:56:... e Proxmox li accetta senza lamentarsi. Tenerli significa che le prenotazioni DHCP corrispondono ancora, le licenze legate al MAC si validano ancora e ogni regola firewall scritta su un MAC scatta ancora. Cambiarli significa una giornata di piccoli misteri. proxmox_nic accetta anche model: vmxnet3 se ti serve che il guest veda la stessa NIC di prima, ma su KVM virtio è la scheda migliore, e un guest Windows vorrà comunque driver nuovi.\nRifiutare invece di indovinare Una NIC su un portgroup standard non ha affatto backing.port. Il suo backing è un NetworkBackingInfo con un deviceName. Non sarà nella mappa, e la cosa giusta da fare è fermarsi:\n- name: Every NIC must sit on a distributed portgroup with a VNet ansible.builtin.assert: that: - vm_nics | rejectattr(\u0026#39;backing.port.portgroupKey\u0026#39;, \u0026#39;defined\u0026#39;) | list | length == 0 - vm_nics | map(attribute=\u0026#39;backing.port.portgroupKey\u0026#39;) | reject(\u0026#39;in\u0026#39;, pg_vlan.keys() | list) | list | length == 0 fail_msg: \u0026gt;- {{ inventory_hostname }} has NICs that do not map to a Proxmox VNet. Attaching it to the wrong network is worse than not building it. Due condizioni invece di una, perché la prima deve girare prima della seconda: map(attribute=...) su una NIC senza port esploderebbe sulla ricerca indefinita. Scarta prima quelle senza forma, poi controlla le altre contro la mappa.\nUn export, montato due volte Ecco la parte che rende tutto economico.\nMetti un export NFS dove entrambi gli hypervisor possano montarlo. vCenter vede un datastore chiamato nfs-migration; i nodi Proxmox montano lo stesso export e vedono /mnt/pve/nfs-migration. Ora sposta i VMDK lì con storage vMotion.\nLo storage vMotion è a caldo. Il guest continua a servire traffico per tutto il tempo. Niente passa dall\u0026rsquo;altra parte, non serve una finestra, e lo si può abbandonare a metà senza conseguenze oltre all\u0026rsquo;I/O sprecato. È di gran lunga la fase più lenta e non costa niente.\n- name: Relocate to the NFS datastore delegate_to: localhost throttle: 2 community.vmware.vmware_vmotion: moid: \u0026#34;{{ vm_moid }}\u0026#34; destination_datastore: \u0026#34;{{ nfs_datastore_vmware }}\u0026#34; timeout: \u0026#34;{{ vmotion_timeout }}\u0026#34; timeout vale 3600 per default: un\u0026rsquo;ora. Un VMDK da 2 TB non ce la fa, e il modo di fallire è subdolo: il task Ansible fallisce mentre il vMotion continua a girare in vCenter. Ora hai un playbook che dice di aver fallito e un parco che è ancora occupato. Impostalo su qualcosa che rispecchi il tuo storage reale.\nthrottle: 2, perché il collo di bottiglia non è il nodo di controllo. Lo storage vMotion è limitato dall\u0026rsquo;array e dalla rete. Sei alla volta non ti danno sei volte il throughput; ti danno sei migrazioni lente e un team storage arrabbiato.\nIl modulo è idempotente nel modo che vuoi (imposta storage_vmotion_needed = False se la VM è già sul datastore di destinazione), quindi rieseguire per raccogliere i ritardatari è sicuro.\nQuando questo finisce, i byte stanno su uno storage che Proxmox monta già. Per questo nient\u0026rsquo;altro deve copiarli. Mai.\nIl cutover Questo è l\u0026rsquo;unico play che costa un fermo, e l\u0026rsquo;ordine al suo interno non è negoziabile.\nPrima, un problema facile da non vedere: l\u0026rsquo;inventario ora è vecchio. È stato raccolto prima del vMotion, quindi vm_disks contiene ancora i vecchi percorsi dei datastore. Importa da quelli e stai puntando Proxmox a un percorso che non vede.\n- name: Re-read the inventory now the disks have moved ansible.builtin.meta: refresh_inventory Che è anche il motivo per cui la cache è disattivata nella configurazione dell\u0026rsquo;inventario. Una cache calda restituirebbe a refresh_inventory esattamente i dati vecchi che doveva sostituire. È un compromesso vero (vCenter non è veloce), ma un percorso sbagliato qui è un cutover fallito dentro una finestra, e il viaggio di andata e ritorno costa poco al confronto.\nPoi spegni. Importare un VMDK che un host ESXi tiene ancora aperto ti dà nel migliore dei casi una copia coerente come dopo un crash:\n- name: Shut the guest down in VMware delegate_to: localhost vmware.vmware.vm_powerstate: moid: \u0026#34;{{ vm_moid }}\u0026#34; state: \u0026#34;{{ \u0026#39;shutdown-guest\u0026#39; if vm_power_state == \u0026#39;poweredOn\u0026#39; else \u0026#39;powered-off\u0026#39; }}\u0026#34; timeout: 600 force: true shutdown-guest è uno spegnimento ordinato tramite VMware Tools; force: true ferma di forza tutto ciò che non si spegne entro il timeout. Sul modulo nuovo il parametro è timeout, non state_change_timeout come su quello deprecato.\nPoi l\u0026rsquo;importazione, che è il perno:\n- name: Import each VMDK onto its VM delegate_to: localhost throttle: 2 community.proxmox.proxmox_disk: vmid: \u0026#34;{{ pve_vmid }}\u0026#34; disk: \u0026#34;scsi{{ idx }}\u0026#34; storage: \u0026#34;{{ pve_target_storage }}\u0026#34; import_from: \u0026gt;- {{ item.backing.fileName | regex_replace(\u0026#39;^\\[[^\\]]+\\]\\s*\u0026#39;, \u0026#39;/mnt/pve/\u0026#39; ~ nfs_storage_pve ~ \u0026#39;/\u0026#39;) }} format: \u0026#34;{{ pve_target_format }}\u0026#34; timeout: \u0026#34;{{ import_timeout }}\u0026#34; create: regular state: present loop: \u0026#34;{{ vm_disks }}\u0026#34; loop_control: index_var: idx Il regex_replace fa la traduzione tra i due mondi. vCenter chiama un disco [nfs-migration] app01/app01.vmdk; Proxmox raggiunge lo stesso file in /mnt/pve/nfs-migration/app01/app01.vmdk. Stesso export, stessi byte, nessuna seconda copia. Tieni il descrittore .vmdk e ignori il -flat.vmdk accanto: qemu-img legge il descrittore e lo segue fino all\u0026rsquo;extent.\nTre cose su import_from che stanno tutte nel modulo e che vale tutte la pena sapere prima che si apra la finestra.\nScatta solo alla creazione. Nel ramo di aggiornamento:\n# \u0026#39;import_from\u0026#39; fails on disk updates playbook_config = self.get_create_attributes() playbook_config.pop(\u0026#34;import_from\u0026#34;, None) Se scsi0 esiste già su quella VM, il parametro viene scartato e ottieni un normale aggiornamento. Quindi rieseguire dopo un\u0026rsquo;importazione andata male non reimporta. Non fa assolutamente niente, in silenzio, e riporta successo. Se un\u0026rsquo;importazione va storta, elimina il disco prima di riprovare.\ntimeout vale 600 secondi per default. Dieci minuti, per importare e convertire il disco di una macchina virtuale. La documentazione stessa del modulo dice di alzarlo; segui il consiglio.\nE un percorso assoluto richiede root. La documentazione è brutale:\n\u0026lt;STORAGE\u0026gt;:\u0026lt;VMID\u0026gt;/\u0026lt;FULL_NAME\u0026gt; or \u0026lt;ABSOLUTE_PATH\u0026gt;/\u0026lt;FULL_NAME\u0026gt;. \u0026lt;STORAGE\u0026gt;:import/\u0026lt;FULL_NAME\u0026gt; for PVE 9.x and later, to use storage\u0026rsquo;s import directory. Attention! Only root can use absolute paths.\nIl che si scontra in modo scomodo con il consiglio che ho dato l\u0026rsquo;ultima volta, e che confermo: usa un token API con ambito limitato, non root. Quel consiglio vale per ogni altra fase qui: scoperta, SDN, costruzione dei gusci, impostazione dell\u0026rsquo;ordine di avvio funzionano tutte con un token. Questo task no, e nessuna quantità di privilegi sul ruolo lo cambierà, perché la restrizione riguarda l\u0026rsquo;essere root dell\u0026rsquo;utente e non un permesso.\nCi sono tre uscite oneste, e nessuna quarta furba:\nPVE 9.x: usa \u0026lt;storage\u0026gt;:import/\u0026lt;file\u0026gt; e resta sul token. PVE 8.x: fai questo solo task come root@pam, e solo questo. PVE 8.x, niente root via API: lancia invece qm importdisk via SSH. Il playbook prende le prime due tramite un flag, perché fingere il contrario sposterebbe solo il problema su chi lo lancia.\nInfine l\u0026rsquo;ordine di avvio, che è un aggiornamento ordinario e quindi non toccato dalla restrizione di update_unsafe:\n- name: Boot from the first imported disk delegate_to: localhost community.proxmox.proxmox_kvm: node: \u0026#34;{{ proxmox_node }}\u0026#34; vmid: \u0026#34;{{ pve_vmid }}\u0026#34; boot: \u0026#34;order=scsi0\u0026#34; update: true Niente avvia il guest. È voluto. Avvialo a mano, guardalo salire, e solo allora pensa a eliminare qualcosa in VMware.\nEseguirlo Il tutto è un solo playbook, con tag per fase, perché questi non sono passi da eseguire insieme:\nansible-playbook migrate.yml --tags discover # look, change nothing ansible-playbook migrate.yml --tags sdn # build the VLANs ansible-playbook migrate.yml --tags build # build the diskless shells ansible-playbook migrate.yml --tags relocate # storage vMotion, live ansible-playbook migrate.yml --tags cutover # power off and import --limit ti è amico dall\u0026rsquo;inizio alla fine. Fai prima una VM. Fai un cluster. Il playbook non ha opinioni su quanto ne addenti, e l\u0026rsquo;inventario ti dà i gruppi gratis: power_poweredOn, cluster_\u0026lt;name\u0026gt;, più vmware_windows e vmware_linux dal blocco groups.\nControlla a cosa stai puntando prima di puntarci:\nansible-inventory --graph ansible-inventory --host some-vm A cosa starei ancora attento Cose che mi aspetto di trovare quando questo incontrerà un parco vero, scritte adesso così non potrò dire dopo che le avevo viste arrivare:\nI guest Windows non si avviano puliti da un controller VirtIO SCSI se prima non c\u0026rsquo;è il driver. virtio-scsi-single è il controller giusto e quello sbagliato da dare a una VM Windows che non l\u0026rsquo;ha mai visto. È un problema a sé e niente di quanto sopra lo risolve. VMware Tools va tolto prima del trasloco, non dopo. Snapshot. Una VM con una catena di snapshot ha più di un .vmdk per disco, e importare la base ti dà lo stato precedente allo snapshot. Consolida prima. L\u0026rsquo;ordine di config.hardware.device è ciò che decide quale disco diventa scsi0. Ovunque abbia guardato corrispondeva all\u0026rsquo;ordine del guest, ma lo verificherei su un server di database con più dischi prima di fidarmene in una finestra. I dischi indipendenti e RDM non si spostano con storage vMotion come quelli normali. Niente di tutto ciò cambia la forma. Costruisci prima i gusci, sposta i dischi mentre tutto è ancora acceso, e limita il fermo all\u0026rsquo;unico play che ne ha bisogno.\n","permalink":"https://blogs.damiendye.uk/it/ansible/vmware-to-proxmox-ansible/","summary":"Leggere un parco vSphere con l\u0026rsquo;inventario dinamico, replicarne le VLAN in Proxmox SDN e ricostruire ogni VM come guscio senza dischi prima che si sposti un solo disco. Perché ogni modulo info di VMware nasconde proprio il campo di cui la migrazione ha bisogno, perché vlan_id è di tre tipi diversi, e perché un solo export NFS montato due volte trasforma il cutover in una lettura locale.","title":"Da VMware a Proxmox con Ansible: costruisci i gusci prima di spostare un solo byte"},{"content":"Sono stato amministratore di sistema del registro DNS a Nominet, il registro di .uk, dal 2017 al 2019. Quello che segue su ICANN è tutto di dominio pubblico e ho messo i link a tutto. Dove invece parlo dal lavoro, lo dico.\nChiedi alla maggior parte degli ingegneri chi gestisce il DNS e ottieni una di due risposte. O un\u0026rsquo;alzata di spalle, o qualcosa sui tredici root server. Sono sbagliate entrambe, e la seconda è sbagliata in un modo più interessante, perché indica le macchine invece del file.\nIl controllo del DNS non è distribuito su tredici server. Sta in un solo file di testo, e nella manciata di soggetti che decidono cosa ci va dentro, lo modificano, lo firmano e lo pubblicano. Tutto il resto del sistema, ogni resolver, ogni registrar, ogni zona che tu abbia mai gestito, sta a valle di quel file e prende da lì la propria autorità.\nQuesto articolo parla di chi tiene quel file, di cosa ha trasferito davvero il passaggio di consegne del 2016, e di cosa ne hanno fatto le persone che lo tengono. Il meccanismo sottostante, cioè cos\u0026rsquo;è davvero un registro, come ci entrano i nomi e chi può togliertene uno, è materia del seguito.\nPrima di ICANN bastava una telefonata Nulla dell\u0026rsquo;assetto attuale è inevitabile, e la storia dice cosa ICANN è stata costruita per risolvere.\nAll\u0026rsquo;inizio non c\u0026rsquo;era affatto il DNS. Dal 1972 c\u0026rsquo;era un solo file di testo, HOSTS.TXT, con il nome di ogni macchina di ARPANET e l\u0026rsquo;indirizzo a cui si trovava. Lo teneva lo Stanford Research Institute, Elizabeth Feinler e il suo gruppo, e se volevi la tua macchina lì dentro telefonavi al Network Information Center in orario d\u0026rsquo;ufficio e lo chiedevi. Tutti gli altri scaricavano il file ogni tanto e speravano che fosse aggiornato.\nUna cosa del genere non scala, e all\u0026rsquo;inizio degli anni Ottanta chiaramente non scalava più. Il DNS è nato per sostituirla: un albero, delegato verso il basso, in modo che nessun ufficio dovesse tenere da solo l\u0026rsquo;elenco intero.\nQualcuno doveva comunque tenere la cima dell\u0026rsquo;albero. Per anni quel qualcuno è stato un uomo solo. Jon Postel, alla University of Southern California, gestiva le assegnazioni di nomi e numeri con fondi di ricerca del governo americano. IANA, la Internet Assigned Numbers Authority, a quel punto non era un\u0026rsquo;istituzione. Era Postel con una manciata di colleghi, e funzionava perché le persone che facevano girare la rete si fidavano di lui.\nI soldi sono arrivati nel 1993, quando la National Science Foundation ha affidato a InterNIC, Network Solutions compresa, la gestione delle registrazioni. Il 14 settembre 1995 la registrazione gratuita è finita. Network Solutions chiedeva 50 dollari l\u0026rsquo;anno con un minimo di due anni, e il 30% andava a un fondo governativo che un tribunale avrebbe poi giudicato una tassa illegittima. Una sola azienda, un solo prezzo, nessun altro posto dove andare, e nel 1997 una causa antitrust.\nPoi, nel gennaio 1998, Postel ha fatto la cosa che ti dice di cosa è fatta davvero l\u0026rsquo;autorità della radice.\nHa scritto per email a otto dei dodici operatori dei root server, forte solo della propria reputazione, e ha chiesto loro di puntare i server sulla macchina di IANA invece che su quella di Network Solutions. Lo hanno fatto tutti e otto. Per circa una settimana la radice autorevole di internet è stata dovunque Jon Postel avesse chiesto alla gente di guardare.\nLui lo chiamò un test. In molti lo lessero come una dimostrazione: che la radice apparteneva agli ingegneri che l\u0026rsquo;avevano costruita e non a un appaltatore del governo. La reazione chiarisce quale lettura scelse Washington. Ira Magaziner, il consigliere presidenziale sulla questione, disse a Postel che non avrebbe mai più lavorato su internet. Il test fu annullato.\nICANN fu costituita in California a settembre di quell\u0026rsquo;anno. Postel morì il mese dopo.\nQuindi l\u0026rsquo;assetto di cui parla questo articolo è stato costruito per risolvere due problemi reali: uno spazio dei nomi venduto da un monopolista che non rispondeva a nessuno, e una radice la cui autorità poggiava sulla fiducia diffusa in un uomo solo. Erano entrambi problemi veri. ICANN è stata la risposta. Quale sia stata davvero quella risposta è il resto di questo articolo.\nDue codici sopravvissuti alla regola Due questioni rimaste aperte da quell\u0026rsquo;epoca, prima di andare avanti, perché insieme dicono di più su come funziona davvero questo sistema di qualsiasi cosa negli statuti di ICANN.\nIl Regno Unito ha preso il codice sbagliato e se l\u0026rsquo;è tenuto.\nLa RFC 920, nell\u0026rsquo;ottobre 1984, diceva che i domini di primo livello nazionali sarebbero stati presi dai codici a due lettere della ISO 3166. Il codice ISO 3166 del Regno Unito è GB. Secondo la regola scritta, il dominio del Regno Unito dovrebbe essere .gb.\nNon lo è, perché il Regno Unito è arrivato prima. JANET, la rete accademica, aveva già scelto uk come identificativo di primo livello qualche mese prima che venisse compilato l\u0026rsquo;elenco derivato dalla ISO, e .uk fu registrato il 24 luglio 1985. Fu assegnato anche .gb, con l\u0026rsquo;intesa che .uk ci sarebbe migrato col tempo.\nLa migrazione non è mai avvenuta. Nessuno l\u0026rsquo;ha fatta avvenire. .gb è poi rimasto nella radice per quarant\u0026rsquo;anni raccogliendo, in tutta la sua vita, un solo dominio di secondo livello, hmg.gb, per il governo di Sua Maestà, usato a malapena. Alla fine la ISO si è piegata al fatto compiuto e ha riservato in via eccezionale UK su richiesta del Regno Unito.\nNessuno è stato derubato, tra l\u0026rsquo;altro. UK non era il codice di un altro paese: è riservato in via eccezionale nella ISO 3166 per il Regno Unito, su richiesta dello stesso Regno Unito, e nessun altro stato ci ha mai avuto pretese. È proprio per questo che nessuno ha forzato la questione: non c\u0026rsquo;era una parte lesa a lamentarsi.\nEd è questo che la rende una storia da raccontare. La regola ISO 3166 è rigida per chiunque cerchi di entrare: niente voce nell\u0026rsquo;elenco, niente dominio nazionale. È per questo che i territori fanno pressione per essere aggiunti alla ISO 3166, ed è per questo che i luoghi senza riconoscimento non hanno affatto un ccTLD. Per chi era già nella radice, la stessa regola si è rivelata un suggerimento.\nC\u0026rsquo;è perfino un buon argomento per dire che il Regno Unito ha finito per avere il nome migliore. GB è la Gran Bretagna, che lascia fuori l\u0026rsquo;Irlanda del Nord. UK no. Il codice non conforme descrive lo stato con più precisione di quanto avrebbe fatto quello conforme.\nE l\u0026rsquo;Unione Sovietica è ancora nella radice. Questa è più strana.\n.su fu delegato all\u0026rsquo;Unione Sovietica il 19 settembre 1990. L\u0026rsquo;Unione Sovietica cessò di esistere quindici mesi dopo.\nÈ ancora lì. Trentacinque anni dopo che lo stato a cui appartiene ha smesso di esistere, .su è attivo e accetta registrazioni: poco più di 111.500 nomi a maggio 2025, amministrati da Mosca.\nLa regola dice che i ccTLD vengono dalla ISO 3166. La ISO 3166 non elenca l\u0026rsquo;Unione Sovietica. E non è che la regola non sia mai stata applicata: .dd per la Germania Est e .yu per la Jugoslavia sono spariti insieme a quegli stati. .su è stato quello che non è sparito, e nessuno ha mai saputo spiegare la differenza in base alla regola.\nQuello che è diventato è abbastanza prevedibile. Quando .ru ha stretto i controlli sulle registrazioni alla fine del 2011, il traffico si è spostato alla porta accanto. I siti malevoli in .su sono raddoppiati nel 2011 e raddoppiati ancora nel 2012, che è la stessa storia dei nuovi gTLD a basso costo e dei ccTLD gratuiti più avanti in questo articolo: l\u0026rsquo;abuso è un fluido, e scorre verso dove i controlli sono più deboli.\nDue codici nazionali, quindi, sopravvissuti alla regola che li aveva prodotti. .uk perché nessuno ha costretto chi c\u0026rsquo;era già a spostarsi, .su perché nessuno ha fatto sparire una delega quando è sparito il suo paese. In entrambi i casi il regolamento è chiaro e in entrambi i casi non è stato fatto rispettare, perché farlo rispettare avrebbe significato togliere qualcosa a qualcuno che già ce l\u0026rsquo;aveva.\nQuesto è tutto il carattere dell\u0026rsquo;autorità nel DNS, visibile prima che ICANN esistesse, e per questo niente di quello che segue dovrebbe sorprenderti.\nI diciotto anni fino al passaggio di consegne ICANN fu costituita in California il 30 settembre 1998 e firmò subito un Memorandum of Understanding con il Dipartimento del Commercio degli Stati Uniti. Non è nata indipendente per poi diventare americana. È stata americana dal primo giorno, per come è stata costruita, e l\u0026rsquo;accordo è stato rinnovato in una forma o nell\u0026rsquo;altra per diciotto anni.\nCominciamo dalla cosa che ha fatto bene, perché ce n\u0026rsquo;è una e conta.\nNel 1999 ICANN ha rotto il monopolio delle registrazioni. Network Solutions era stato l\u0026rsquo;unico posto dove comprare un .com; lo Shared Registration System ha permesso ad altri registrar di vendere nomi nella stessa zona, e il prezzo è sceso e ha continuato a scendere. È un risultato vero, è la ragione per cui un dominio costa quello che costa oggi, e niente più avanti in questo articolo lo annulla.\nPoi comincia lo schema che attraversa tutto il resto.\n2000. ICANN tenne un\u0026rsquo;elezione mondiale in cui gli utenti di internet scelsero direttamente cinque membri del consiglio. Non fu mai ripetuta. La struttura at-large che la sostituì dà pareri e non vota. La prima e ultima volta che il pubblico ha avuto voce vincolante in ICANN, ICANN l\u0026rsquo;ha soppressa.\n2005. Al World Summit on the Information Society di Tunisi, buona parte del mondo contestò che fossero gli Stati Uniti a tenere la radice. Ne uscì l\u0026rsquo;Internet Governance Forum, una conferenza annuale senza autorità su niente. L\u0026rsquo;assetto della radice non cambiò.\n2005. La vicenda di .xxx, durata sei anni, che è la prova singola più netta in tutto questo articolo che la giurisdizione non è un concetto astratto. Gruppi di pressione socialmente conservatori negli Stati Uniti fecero pressione sul Dipartimento del Commercio. La NTIA, la National Telecommunications and Information Administration, il ramo del Commercio che deteneva l\u0026rsquo;accordo con ICANN, preparò lettere per ICANN e, parole sue, mobilitò le proprie risorse su ICANN. Il consiglio, che si stava avviando all\u0026rsquo;approvazione, respinse la domanda, nove a cinque, poi di nuovo otto a quattro, con il presidente e l\u0026rsquo;amministratore delegato che cambiarono entrambi posizione. Viviane Reding, allora commissaria europea competente, lo definì il primo caso evidente di interferenza politica del governo americano in ICANN. .xxx fu infine approvato nel 2011, e a quel punto il Dipartimento del Commercio annunciò di esserne deluso.\nUna campagna di lobbying interna americana, passata attraverso un\u0026rsquo;agenzia federale americana, ha cambiato quali domini di primo livello esistono su internet. Nessun trattato, nessun tribunale, nessun voto fuori dagli Stati Uniti.\n2009. Il Joint Project Agreement con il Commercio fu sostituito dall\u0026rsquo;Affirmation of Commitments, raccontata ovunque come l\u0026rsquo;indipendenza di ICANN. Il contratto per le funzioni IANA rimase esattamente dov\u0026rsquo;era.\nPoi la cosa che l\u0026rsquo;ha davvero smossa, e non è stata niente che abbia fatto ICANN.\n2013. Edward Snowden. Il 7 ottobre, a mesi dalle rivelazioni, i vertici di ICANN, della Internet Engineering Task Force, dell\u0026rsquo;Internet Architecture Board (IAB), del World Wide Web Consortium, dell\u0026rsquo;Internet Society e di tutti e cinque i registri regionali di internet pubblicarono il Montevideo Statement, chiedendo la globalizzazione di ICANN e delle funzioni IANA e citando, testualmente, il danno che la sorveglianza pervasiva aveva fatto alla fiducia globale. La guida tecnica di internet, con l\u0026rsquo;amministratore delegato di ICANN tra i firmatari, disse ad alta voce che la gestione americana era diventata un peso.\n14 marzo 2014. La NTIA annunciò l\u0026rsquo;intenzione di trasferire la propria gestione delle funzioni IANA.\n1 ottobre 2016. Il contratto scadde.\nQuindi il passaggio di consegne non è stato guadagnato e non è stato concesso nel merito. È stato ceduto, dopo diciotto anni, perché uno scandalo dell\u0026rsquo;intelligence americana aveva reso l\u0026rsquo;assetto esistente politicamente indifendibile e la comunità tecnica lo aveva detto in pubblico.\nCosa che vale la pena tenere a mente quando leggi cosa ha fatto davvero la transizione.\nCosa ha cambiato la transizione del 2016, e cosa no Sentirai dire che nel 2016 gli americani hanno consegnato internet. Lo si dice a chiunque sostenga che ICANN sia uno strumento di controllo americano, e se ha sbagliato i fatti perde la discussione lì. Quindi mettiamoli in fila bene.\nIl 1 ottobre 2016 il contratto per le funzioni IANA tra NTIA e ICANN è scaduto e non è stato rinnovato. Questo è vero. Il governo americano non detiene più un contratto che gli dà l\u0026rsquo;approvazione sulle modifiche alla zona radice, e i nuovi statuti hanno creato una Empowered Community con la capacità teorica di respingere i bilanci e rimuovere i membri del consiglio.\nEcco cosa non è cambiato, e non è stata una svista. È stato messo per iscritto come obiettivo.\nLa proposta di transizione stabiliva che la giurisdizione legale in cui risiede ICANN doveva restare invariata. I nuovi statuti obbligano ICANN a mantenere la sede in California. L\u0026rsquo;intera struttura di responsabilità costruita durante la transizione è costruita sul diritto californiano. Funziona facendo di ICANN un ente non profit californiano che i tribunali californiani possono essere chiamati a tenere fedele al proprio atto costitutivo.\nQuindi, dopo il grande passaggio di consegne: ICANN è una società californiana, soggetta al diritto federale americano e a quello californiano, i cui meccanismi di responsabilità si possono far valere nei tribunali americani e da nessun\u0026rsquo;altra parte, e che fissa le regole per una zona radice modificata e firmata da un\u0026rsquo;azienda americana in base a un accordo con il Dipartimento del Commercio americano.\nIl contratto è sparito. La giurisdizione è stata mantenuta di proposito. E la giurisdizione è la parte che morde, perché non richiede che qualcuno intervenga. Si applica da sola, sempre, per default.\nLa dimostrazione più chiara sono le sanzioni. L\u0026rsquo;OFAC, l\u0026rsquo;Office of Foreign Assets Control, parte del Tesoro americano, gestisce le sanzioni economiche e commerciali americane, e decide con chi possono fare affari le persone e le aziende americane. ICANN è una società californiana, quindi l\u0026rsquo;OFAC la vincola, e limita con chi ICANN può stipulare contratti e chi può accreditare.\nPrecisiamo la portata: arriva ai registri e ai registrar dei domini generici di primo livello (gTLD), perché hanno contratti con ICANN. Non arriva alle gestioni dei domini nazionali (ccTLD), che stanno del tutto fuori dalla struttura contrattuale di ICANN. Ma l\u0026rsquo;effetto filtra ben oltre il confine legale, perché registrar fuori dagli Stati Uniti hanno applicato le restrizioni OFAC ai propri clienti nella convinzione sbagliata che avere un contratto con ICANN lo richieda, o semplicemente copiando i contratti americani per i registranti. La politica estera americana si propaga lungo la catena dei registrar per imitazione quanto per legge.\nNon esiste una versione di questa storia in cui la risposta a «chi controlla il DNS» non cominci dagli Stati Uniti.\nChi resta in grado di fare qualcosa contro una decisione di ICANN è l\u0026rsquo;altra metà della domanda, e conviene porla quando c\u0026rsquo;è un precedente con cui metterla alla prova. Questo articolo ci torna alla fine.\nLa radice è un file di testo Questo per chi comanda. Ecco la cosa su cui comandano, e puoi semplicemente scaricarla. ICANN pubblica la zona radice tramite trasferimento di zona, AXFR, il meccanismo DNS per copiare un\u0026rsquo;intera zona invece di un singolo record, a chiunque lo chieda, senza credenziali:\ndig . AXFR @xfr.dns.icann.org In questo momento sono 1.578.790 byte su 24.886 righe. Contiene 1.439 deleghe, cioè ogni dominio di primo livello esistente, di cui 1.350 hanno un record DS, il delegation signer, l\u0026rsquo;impronta che lega la chiave di firma di una zona figlia alla zona padre, e fanno quindi parte della catena firmata.\nUn megabyte e mezzo. L\u0026rsquo;intero spazio dei nomi di internet, abbastanza piccolo da mandarlo per email.\nQuel file è tutta l\u0026rsquo;autorità della radice. Un resolver che parte da zero non sa niente tranne gli indirizzi nei suoi root hints, e appena ottiene una risposta segue le deleghe di quel file e di nessun altro. Cambia una delega lì dentro e hai cambiato dove va il traffico di un intero paese. Non c\u0026rsquo;è una seconda copia con un\u0026rsquo;opinione diversa, nessun protocollo di consenso, nessun voto al momento della risoluzione. C\u0026rsquo;è il file.\nQuindi la domanda «chi controlla il DNS» si riduce a una molto più stretta: chi può cambiare quel file, e chi lo firma dopo.\nTre organizzazioni lo toccano La risposta è una catena di tre, e conviene avere chiaro chi fa cosa, perché è nelle distinzioni che vivono tutte le discussioni.\nPTI, Public Technical Identifiers, una società collegata a ICANN, svolge le funzioni IANA. Riceve le richieste di modifica alla zona radice dagli operatori dei TLD, le verifica e le autorizza. È il livello impiegatizio, e di proposito: l\u0026rsquo;intera intenzione del progetto è che IANA sia un impiegato scrupoloso senza margini di discrezione.\nVerisign è il Root Zone Maintainer. Prende la modifica autorizzata, edita il file di zona, lo firma con la chiave di firma della zona radice e lo pubblica per la distribuzione. Verisign è una società americana quotata, e lo fa in base a un Cooperative Agreement con il Dipartimento del Commercio americano.\nGli operatori dei root server poi lo servono. Sono la parte meno potente della catena e l\u0026rsquo;unica di cui tutti hanno sentito parlare.\nNota dove sta davvero la discrezione. Non negli operatori. Non proprio nell\u0026rsquo;impiegato. Sta in chi fissa le regole che l\u0026rsquo;impiegato applica, cioè ICANN, e nell\u0026rsquo;azienda che tiene la penna e la chiave di firma, cioè Verisign, in base a un accordo con il governo americano.\nDieci su tredici Vale la pena elencare per intero le lettere dei root server, perché la gente cita il numero tredici come se implicasse dispersione:\nLettera Operatore Paese A Verisign USA B USC Information Sciences Institute USA C Cogent Communications USA D University of Maryland USA E NASA Ames Research Center USA F Internet Systems Consortium USA G US Department of Defense (DISA) USA H US Army Research Laboratory USA I Netnod Svezia J Verisign USA K RIPE NCC Paesi Bassi L ICANN USA M WIDE Project Giappone Tredici lettere, dodici organizzazioni, perché Verisign ha sia la A sia la J. Dieci su tredici sono gestite dagli Stati Uniti. Due sono l\u0026rsquo;esercito americano.\nNon è un complotto, è storia fossilizzata. Sono le istituzioni che erano in rete negli anni Ottanta e non se ne sono mai andate. Ma un incidente della storia che lascia l\u0026rsquo;esercito americano a gestire due root server di internet resta comunque l\u0026rsquo;esercito americano che gestisce due root server di internet, ed è strano descriverlo come un sistema globale.\nGli operatori non sono nemmeno vincolati da un contratto degno di questo nome. ICANN non li impiega e non può rimuoverli in nessun modo semplice. Servono la radice perché l\u0026rsquo;hanno sempre fatto. La stabilità del sistema a questo livello poggia sulla buona volontà e su niente di più solido, il che funziona fino al giorno in cui non funziona più.\nICANN non gestisce la zona radice Questo è il fatto più importante dell\u0026rsquo;articolo e non viene quasi mai detto ad alta voce, quindi ha un titolo tutto suo.\nICANN non gestisce la zona radice.\nDecide cosa ci deve andare. Non modifica il file, non firma il file e non serve il file. Verisign modifica e firma. Dodici organizzazioni servono. Il compito di ICANN è dire quale dovrebbe essere la risposta, e poi far sì che qualcun altro la renda vera.\nQuella divisione è l\u0026rsquo;unica cosa che tiene ICANN a freno.\nImmaginala senza la divisione. Un solo ente fissa le regole, tiene la penna, possiede la chiave di firma e gestisce i server. Tra il decidere una cosa e quella cosa che diventa vera ovunque sulla terra non c\u0026rsquo;è un\u0026rsquo;altra parte, nessun secondo paio di mani, e nessuno in grado di dire di no. Qualunque cosa tu pensi dei precedenti di ICANN qui sotto, quell\u0026rsquo;assetto sarebbe peggiore.\nCosì com\u0026rsquo;è, ci sono tre freni. Nessuno dei tre sta in uno statuto.\nIl file è pubblico. Chiunque può scaricare la zona radice via AXFR, il comando è in cima a questo articolo, e confrontarla con quella di ieri. Non puoi cambiare una delega di nascosto. La modifica deve farla qualcun altro. Il maintainer fa la modifica e la firma. È un\u0026rsquo;organizzazione in più che deve accettare di farlo, e una in più che potrebbe rifiutarsi. Gli operatori servono per consenso. Come sopra, ICANN non ha alcun contratto significativo con gli operatori dei root server. Distribuiscono la zona perché l\u0026rsquo;hanno sempre fatto. Niente li obbliga a distribuire alcunché, e come ha mostrato Postel nel 1998, il consenso si sposta se qualcuno di cui si fidano lo chiede con gentilezza. L\u0026rsquo;ultimo è il vero paracadute, ed è stato usato un livello più in basso a memoria d\u0026rsquo;uomo. Quando Verisign mise una wildcard su .com nel 2003, l\u0026rsquo;Internet Systems Consortium (ISC) rilasciò delegation-only in BIND e gli operatori smisero semplicemente di accettare quelle risposte. Nessuno dovette vincere una discussione in un forum sulle policy. La capacità della comunità tecnica di rifiutare non è scritta da nessuna parte e tutti quelli coinvolti sanno che c\u0026rsquo;è.\nOra la parte scomoda, perché è più sottile di quanto sembri.\nNessuno ha progettato questo controllo. Non è una separazione dei poteri, è un incidente di come il lavoro fu diviso negli anni Novanta, e la transizione del 2016 non l\u0026rsquo;ha né rafforzato né messo per iscritto. Non c\u0026rsquo;è nessuna regola che dica che l\u0026rsquo;ente che fissa le policy non possa un giorno tenere anche la penna.\nE la parte che fa il controllo è un\u0026rsquo;azienda commerciale con cui ICANN fa affari. Verisign ha il ruolo di root zone maintainer, e il contratto per .com, e, come il resto dell\u0026rsquo;articolo mostra, un accordo da 20 milioni di dollari con ICANN firmato nella stessa trattativa di un aumento del prezzo di .com. Un controllo che dipende dalla disponibilità di una parte a dire di no all\u0026rsquo;altra smette di funzionare quando le due cominciano a firmare cose insieme.\nQuindi la separazione è la cosa migliore dell\u0026rsquo;assetto attuale. È anche non scritta, non pianificata, e tenuta in piedi dall\u0026rsquo;abitudine.\nVendere lo spazio dei nomi Prima di qualsiasi discussione sulla governance, una cosa più semplice mostra cosa fanno di un pezzo dello spazio dei nomi le persone che lo tengono, quando niente le ferma. È successo più volte, a ogni livello, e la prima volta che è successo in cima è durato diciannove giorni.\nIl 15 settembre 2003 Verisign aggiunse un record A wildcard alle zone .com e .net:\n*.com. IN A 64.94.110.11 Quell\u0026rsquo;indirizzo ha come reverse sitefinder.verisign.com. Da quel momento ogni nome in .com e .net esisteva. Ogni refuso, ogni dominio non registrato, ogni stringa malformata, ogni nome scaduto: tutti si risolvevano, su una pagina di ricerca di Verisign con la pubblicità di Verisign.\nPerché non è una storia di pubblicità Le lamentele di allora riguardavano soprattutto la pubblicità, e mancavano il punto. NXDOMAIN non è una funzione di esperienza utente. È un segnale di protocollo portante, e un\u0026rsquo;enorme quantità di software sopra il DNS si basa sul poter chiedere «questo nome esiste?» e ottenere una risposta vera.\nCancella la risposta negativa e le cose si rompono in modi che non hanno niente a che vedere con i browser.\nLa posta fu il danno peggiore, ed è la parte che ancora oggi in molti sbagliano. Verisign non pubblicò un record MX wildcard. Non ne aveva bisogno. La RFC 5321 §5.1 dice che quando una ricerca MX non restituisce nulla, il mittente ripiega sul record di indirizzo del dominio e lo tratta come un MX implicito con preferenza 0. Verisign aveva appena dato un record di indirizzo a ogni dominio inesistente in .com. Quindi ogni MTA su internet, ogni mail transfer agent, ogni macchina che inoltra posta, seguendo correttamente lo standard, ora aveva un mail exchanger per soemcompany.com: ed era la macchina di Verisign.\nTi collegavi alla porta 25 e rispondeva:\n220 snubby2-wceast Snubby Mail Rejector Daemon v1.3 ready L\u0026rsquo;intenzione dichiarata da Verisign era abbastanza ragionevole: rifiutare subito la posta così che non restasse in coda in tutto il mondo. L\u0026rsquo;implementazione no. Snubby si arrendeva solo dopo che l\u0026rsquo;MTA mittente aveva trasmesso il corpo del messaggio, e restituiva un codice che la maggior parte degli MTA leggeva come errore temporaneo: così, invece di un rimbalzo immediato, la posta verso indirizzi digitati male veniva ritentata per giorni prima di morire. Verisign lo sostituì poi con un risponditore basato su Postfix dopo le proteste degli operatori sulla lista NANOG.\nNello stesso momento si ruppe l\u0026rsquo;antispam, e più in silenzio. Verificare se il dominio di un mittente esiste davvero era, ed è ancora, una delle euristiche di filtraggio più economiche ed efficaci disponibili. Da un giorno all\u0026rsquo;altro, ogni dominio nei due TLD più grandi esisteva. Il controllo restituiva vero per tutto e smise di discriminare.\nE tutto il resto che parla DNS ma non HTTP, relay di posta, client FTP, stampanti di rete, sistemi di monitoraggio, smise di ricevere «no such host» e cominciò a ricevere un server web, il che si manifestava soprattutto come timeout e blocchi invece che come errori puliti. Un nome morto ora sembrava un servizio guasto.\nUn\u0026rsquo;azienda aggiunse un record a un file di zona e cambiò la semantica degli errori di internet.\nCosa l\u0026rsquo;ha fermato Non la governance. L\u0026rsquo;ingegneria, e poi una minaccia.\nISC rilasciò in pochi giorni una funzione delegation-only in BIND, che permetteva agli operatori di scartare le risposte sintetizzate dalle zone TLD: la comunità tecnica che aggirava il registro invece di appellarsi a qualcuno. Molti ISP la adottarono.\nICANN chiese a Verisign di sospendere il servizio. Il 21 settembre Verisign rifiutò. ICANN allora lo pretese il 3 ottobre, con le conseguenze contrattuali messe in chiaro, e Verisign tolse i record il 4 ottobre 2003. L\u0026rsquo;IAB pubblicò la sua obiezione architetturale alle wildcard nei registri, e il Security and Stability Advisory Committee della stessa ICANN riferì il 9 luglio 2004 che il servizio non avrebbe mai dovuto essere attivato senza una revisione e che i registri avrebbero dovuto eliminare gradualmente le wildcard.\nPoi Verisign fece causa a ICANN, il 27 febbraio 2004, sostenendo che ICANN aveva ecceduto i propri poteri fermandola. La causa fu in gran parte respinta quell\u0026rsquo;agosto, e il resto si chiuse con un accordo il 1 marzo 2006: un accordo che diede a Verisign un nuovo contratto di registro per .com.\nRileggi quella sequenza. Il registro ha monetizzato lo spazio dei nomi che aveva l\u0026rsquo;incarico di gestire, si è rifiutato di smettere, è stato costretto a smettere, ha fatto causa all\u0026rsquo;ente che l\u0026rsquo;aveva costretto, ed è uscito dall\u0026rsquo;accordo con un contratto rinnovato per il TLD più prezioso che esista. Ce l\u0026rsquo;ha ancora. È la stessa azienda che oggi modifica e firma la zona radice.\nPoi l\u0026rsquo;hanno fatto tutti gli altri Fermare il registro non fermò l\u0026rsquo;idea, la spostò solo un passo più in basso. Se il server autorevole non mente sull\u0026rsquo;inesistenza, ci pensa il resolver.\nDall\u0026rsquo;agosto 2006 Earthlink cominciò a reindirizzare le risposte NXDOMAIN verso Barefruit, servendo pagine di ricerca e pubblicità. Paxfire vendeva la stessa cosa, e in più reindirizzava certe parole chiave digitate verso inserzionisti paganti. Il «Domain Helper» di Comcast lo faceva su larga scala. Nel Regno Unito lo facevano sia BT sia Virgin Media. Dal lato di un ISP i conti sono irresistibili: i domini digitati male sono inventario gratuito generato dalle dita dei tuoi stessi clienti.\nI modi di guastarsi erano peggiori di quelli di Verisign, perché un resolver vede ogni query, non un solo TLD. L\u0026rsquo;implementazione di Barefruit dirottava NXDOMAIN anche per lo spazio di indirizzi privato, rompendo le ricerche split-horizon e il comportamento delle VPN nelle reti aziendali. Dan Kaminsky dimostrò attacchi di cross-site scripting (XSS) contro le pagine di reindirizzamento stesse, perché ora ogni nome host inesistente al mondo si risolveva in HTML raggiungibile da un attaccante, servito in un contesto che il browser associava al dominio di qualcun altro. Monetizzare il caso di errore aveva trasformato una ricerca fallita in una superficie XSS.\nLa correzione nel protocollo Due cose l\u0026rsquo;hanno chiusa, ed entrambe meritano attenzione perché sono la forma di ogni vera correzione nel DNS: rendere la bugia rilevabile, poi renderla una questione contrattuale.\nDNSSEC fornisce la negazione autenticata dell\u0026rsquo;esistenza. I record NSEC e NSEC3 permettono a una zona firmata di dimostrare che un nome non esiste, e un resolver che valida rifiuterà una risposta sintetizzata al suo posto. L\u0026rsquo;inesistenza ha smesso di essere l\u0026rsquo;unica risposta che nessuno poteva verificare. Non è a tenuta stagna: un resolver che toglie le firme al passaggio può comunque riscrivere la risposta, ed è esattamente per questo che conta validare sul client invece di fidarsi del resolver, ed è l\u0026rsquo;argomento che questo sito ha già sviluppato a lungo.\nE ICANN, va detto a suo merito, questa lezione l\u0026rsquo;ha imparata. La Specification 6 del contratto di registro per i nuovi gTLD vieta in modo esplicito wildcard, record sintetizzati e reindirizzamenti per i nomi non registrati, e impone ai server autorevoli di restituire Name Error, RCODE 3. Ognuna delle 1.200 stringhe del round del 2012 ha il divieto contrattuale di fare quello che Verisign fece a .com.\nÈ un miglioramento vero, e conviene essere precisi su cosa l\u0026rsquo;ha prodotto: non il processo di governance, ma diciannove giorni di guasti visibili nel 2003, abbastanza imbarazzanti da essere scritti in un contratto dieci anni dopo.\nE niente di tutto questo ha toccato i codici nazionali La Specification 6 vincola i gTLD. Li vincola perché firmano un contratto di registro con ICANN, e quel contratto è la leva.\nUn ccTLD non firma niente del genere. Nessun contratto di registro, nessuna Specification 6, nessuna funzione di compliance, nessuna tariffa. Niente nel regolamento di ICANN disciplina come un registro nazionale gestisce la sua zona: ed è per questo che entrambe le cose qui sotto sono state possibili, e per questo nessuno era in condizione di fermarle.\nNon è la stessa cosa che dire che ICANN è assente, e voglio essere preciso su dove si colloca, perché ho passato due anni a subirla.\nCiò che ICANN ha in mano su un ccTLD è la delega stessa. Ogni record NS, ogni glue, ogni record DS e ogni cambio di contatto per .uk vive nella zona radice, e l\u0026rsquo;unica strada per entrare nella zona radice è una richiesta di modifica a IANA: verificata rispetto ai contatti amministrativi e tecnici registrati, ed evasa con i tempi di IANA invece che con i tuoi. In base alla RFC 1591, IANA decide anche, in ultima istanza, chi detiene la delega. Le ridelegazioni sono rare. Non sono ipotetiche.\nQuindi un registro nazionale è sovrano su come lavora, e dipende in tutto da una terza parte per qualunque cosa debba essere visibile nella radice. I momenti in cui hai più bisogno che una modifica vada a buon fine, un name server che si sposta, un rollover di chiave il cui DS deve essere pubblicato prima che sparisca il vecchio, sono esattamente i momenti in cui aspetti in coda da qualcun altro. È una dipendenza operativa concreta più che un\u0026rsquo;astrazione di governance, ed è un tema per il seguito.\nOra nota cosa produce questa combinazione. La presa di ICANN su un ccTLD è stretta proprio dove dà fastidio a un registro che si comporta bene, e assente proprio dove avrebbe potuto trattenerne uno che non si comporta bene. Può tenere ferma la tua richiesta DS. Non ha potuto impedire al Camerun di puntare un intero dominio di primo livello su una pagina pubblicitaria.\nQuindi la pratica non si è mai fermata. Si è solo spostata dove il contratto non arrivava.\nIl Camerun ha messo una wildcard su un intero dominio di primo livello per raccogliere i refusi.\nNell\u0026rsquo;agosto 2006 il registro di .cm puntò ogni nome non registrato della zona su una pagina di parcheggio piena di link di ricerca a pagamento. Il gioco non ha niente di sottile: .cm è .com con la o saltata, quindi il mercato di riferimento era il tasso di dita sbagliate sul TLD più grande che esista, e il gestore era un\u0026rsquo;agenzia governativa, ANTIC, sotto il Ministero delle Poste e Telecomunicazioni del Camerun.\nRendeva bene. NameJet riportò oltre 500.000 dollari di vendite .cm il primo giorno e più di 2 milioni di dollari la prima settimana; hotels.cm fu venduto a 81.100 dollari nel 2009. Fece anche esattamente quello che ti aspetteresti alla sicurezza della zona, perché il traffico in arrivo da refusi è il canale di consegna ideale per un download ostile. Nel dicembre 2009 McAfee classificò .cm come il TLD più rischioso al mondo, con il 36,7% dei suoi siti valutati come rischiosi.\nVerisign fu costretta a disfare lo stesso trucco in diciannove giorni. Il Camerun l\u0026rsquo;ha portato avanti per anni. La differenza non è che uno fosse peggiore. La differenza è che uno aveva firmato un contratto.\nTokelau è diventato il dominio nazionale più grande del mondo regalando i nomi.\nTokelau è un territorio neozelandese nel Pacifico meridionale con una popolazione di circa 1.500 persone. Il suo ccTLD, .tk, era gestito da Freenom, che regalava le registrazioni. Nel 2016 era il dominio nazionale con più registrazioni al mondo, con 31.311.498 nomi: una cifra che viene, guarda caso, da una mappa mondiale pubblicata da Nominet.\nGratis non era gratis. I termini di Freenom imponevano che un dominio gratuito avesse traffico regolare, e prevedevano che se il reindirizzamento smetteva di funzionare, o se il nome cominciava ad attirare visitatori che valeva la pena avere, il registro poteva riprenderselo e servirci sopra la propria pubblicità. Questo è tutto il modello di business, ed è più elegante di quello di Verisign. Non cercare di indovinare quali nomi valgono. Regala l\u0026rsquo;intero spazio dei nomi a costo marginale zero, lascia che sia il mondo a scoprire per te quelli che valgono, poi riprenditeli e monetizza il traffico. Circa un sesto delle entrate annuali di Tokelau veniva da lì.\nL\u0026rsquo;esternalità è ricaduta su tutti gli altri. La registrazione gratuita senza verifiche è l\u0026rsquo;ingresso ideale per l\u0026rsquo;abuso in massa: la stessa economia dei nuovi gTLD a basso costo, portata fino a zero. Quando Meta fece causa, i cinque ccTLD gratuiti di Freenom, .tk, .ml, .ga, .cf, .gq, erano la fonte di più della metà di tutti i nuovi domini di phishing usciti dai TLD nazionali.\nCosa l\u0026rsquo;ha fermato è la parte che conta qui.\nNon ICANN, che non aveva né contratto né titolo. Non Tokelau, che incassava un sesto del suo reddito nazionale. Non la Nuova Zelanda. Gli avvocati di Meta, nel Northern District of California, nel marzo 2023, con accuse di cybersquatting e violazione di marchio.\nFreenom fermò le nuove registrazioni nel giro di pochi giorni. Il phishing proveniente da quelle estensioni scese da oltre il 60% a meno del 15%. Freenom chiuse con un accordo nel febbraio 2024 e lasciò il mercato dei domini, e a marzo circa 12,6 milioni di domini, il 99% del suo portafoglio, avevano smesso di risolversi.\nL\u0026rsquo;ufficio legale di una sola azienda, in un solo tribunale americano, ha tolto da internet dodici milioni e mezzo di nomi. Nessun ente di governance nella storia del DNS ha mai esercitato tanta autorità sullo spazio dei nomi, e non l\u0026rsquo;ha fatto attraverso la governance.\nÈ la terza volta in questo articolo che la risposta a «cosa fa davvero rispettare qualcosa qui» si rivela un tribunale in California, e la seconda volta che a far rispettare le regole è stato un privato che agiva nel proprio interesse commerciale, il quale in quell\u0026rsquo;occasione coincideva per caso con quello di tutti gli altri.\nE anche .uk è un ccTLD. Stessa assenza di qualunque contratto su come si gestisce la zona, stessa assenza della Specification 6, stessa libertà di metterci una wildcard o di regalare lo spazio dei nomi. Non ha fatto né l\u0026rsquo;una né l\u0026rsquo;altra cosa. Ha gestito invece un processo contro gli abusi.\nEd è qui che la divisione ordinata smette di essere ordinata, e conviene rovinarla di proposito.\nNominet non gestisce solo .uk. Gestisce anche domini generici di primo livello, i suoi e diverse decine per conto di altri operatori, e per quelli firma il contratto di registro con ICANN come chiunque altro, Specification 6 e monitoraggio continuo compresi. Sulla sua piattaforma la zona senza contratto era in minoranza di circa trenta a uno.\nQuindi i requisiti di ICANN sono arrivati comunque fino a .uk. Non per autorità, che non aveva, ma perché nessuno sano di mente gestisce due regimi operativi affiancati per preservare un\u0026rsquo;esenzione per una sola zona. Costruisci una volta la versione rigorosa e ci fai girare tutto.\nÈ la stessa forma del problema OFAC di prima: la portata formale di ICANN si ferma al contratto, e quella reale va oltre, propagata da operatori per cui adeguarsi ovunque costa meno che mantenere la distinzione. L\u0026rsquo;insieme dei registri di fatto governati da ICANN è sensibilmente più grande dell\u0026rsquo;insieme di quelli che hanno firmato qualcosa.\nQuella piattaforma, com\u0026rsquo;era gestirla, e cosa è successo a Nominet dopo, è un articolo a parte.\nIl che lascia la domanda a cui questo articolo continua ad arrivare da direzioni diverse: quando i contratti non arrivano, cosa impedisce davvero a un registro di fare tutto quello che gli pare?\nUn seguito risponderà dall\u0026rsquo;interno di Nominet: la pipeline di pubblicazione, EPP (il protocollo con cui i registrar creano e modificano i nomi in un registro) e l\u0026rsquo;economia che ci sta sotto, la firma su scala di registro, e chi può davvero togliere un nome. Questo articolo riguarda il livello superiore, e il livello superiore non ne esce bene.\nI soldi L\u0026rsquo;accusa successiva è più semplice e ha bisogno di meno interpretazione.\nIl prodotto che hanno inventato Nel 2012 ICANN aprì le domande per i nuovi domini generici di primo livello. Chiunque poteva chiedere di gestire una nuova stringa a destra del punto, pagando una tariffa di valutazione in gran parte non rimborsabile di 185.000 dollari.\nRicevette 1.930 domande. Sono oltre 350 milioni di dollari di tariffe di valutazione, incassati prima che una sola stringa venisse delegata. Chi si ritirava presto ne riaveva una parte su scala decrescente; la grande maggioranza restò dov\u0026rsquo;era.\nICANN descrisse la tariffa come recupero dei costi.\nPoi, dove due richiedenti volevano la stessa stringa e non si mettevano d\u0026rsquo;accordo privatamente, ICANN la mise all\u0026rsquo;asta tra loro e si tenne il ricavato, che ammontò ad altri 240.590.128 dollari. Quindi il programma ti faceva pagare per fare domanda, e ti faceva pagare di nuovo per vincere.\nFai la domanda che andava fatta nel 2008: quale problema risolveva tutto questo?\nLa tesi dichiarata era concorrenza, scelta e innovazione. Quattordici anni dopo, i risultati si possono misurare. Sono state delegate circa 1.200 stringhe. Ad agosto 2026 ci sono 1.112 nuovi gTLD con circa 48,7 milioni di domini in tutto, contro il solo .com che ne ha più di dieci volte tanti. Il monopolio esistente non è stato minimamente disturbato. Ha avuto invece un aumento di prezzo.\nL\u0026rsquo;argomento della scelta cade sulle sue stesse prove. Il 34% delle domande del 2012 era per stringhe .brand: un\u0026rsquo;azienda che chiede il proprio marchio, soprattutto perché nessun altro possa averlo. Non sono nuove scelte per nessuno. Molte non sono mai state usate. McDonald\u0026rsquo;s non ha mai lanciato .mcdonalds. Intel ha preso in consegna .intel nel luglio 2016 e l\u0026rsquo;ha chiuso nel novembre 2020, Symantec ha rinunciato a .symantec due mesi prima, e SC Johnson ha chiesto otto stringhe, tra cui .scjohnson, .raid, .glade, .off, .duck, per poi chiuderle tutte nel gennaio 2022. Sei anni dopo la finestra delle domande, più di un nuovo gTLD su dieci non era ancora partito, 144 non avevano raggiunto un periodo di sunrise, e L\u0026rsquo;Oréal stava seduta su stringhe per cui non aveva mai annunciato alcun piano.\nÈ un sacco di spazio dei nomi morto. Ecco perché a ICANN non dà fastidio.\nIn base al contratto di registro standard un operatore gTLD paga a ICANN una tariffa fissa di 25.000 dollari l\u0026rsquo;anno, più 0,25 dollari per registrazione, ma solo quando il TLD supera le 50.000 transazioni in un trimestre. Sotto quella soglia non c\u0026rsquo;è alcuna tariffa per transazione.\nLeggi cosa significa. Le entrate di ICANN da un dominio di primo livello con zero nomi dentro sono esattamente le stesse di uno che ne ha quarantamila: 25.000 dollari l\u0026rsquo;anno, ogni anno, per una delega che nessuno usa. Una stringa morta non è un fallimento nei conti di ICANN. È una rendita senza costi di assistenza.\nNon c\u0026rsquo;era alcuna ragione economica per cui a ICANN importasse se qualcosa di tutto questo funzionasse, ed è difficile trovare prove che le importasse.\nCosa ha avuto internet al loro posto Il programma ha prodotto un effetto misurabile, e non è quello del prospetto.\nLe nuove stringhe che hanno venduto, hanno venduto sul prezzo. Registri senza un marchio e senza una domanda naturale hanno competuto nell\u0026rsquo;unico modo che avevano, a un dollaro o meno a nome, in blocco, con controlli minimi. Quello è un prodotto, e ha trovato il suo mercato.\nLo studio Cybercrime Supply Chain 2025 di Interisle ha rilevato che i nuovi gTLD portavano il 47% dei domini segnalati per crimini informatici pur facendo il 12% del mercato dei domini: una sovrarappresentazione di circa sei volte. Lo stesso studio ha registrato 19,5 milioni di domini unici usati negli attacchi, in crescita del 126% su base annua, di cui 7,3 milioni registrati in blocco. Il fattore comune che individua nei domini più abusati è che costano poco.\nICANN non ha creato il phishing. Ma ha fabbricato 1.200 nuovi posti da cui farlo, ha fissato il prezzo d\u0026rsquo;ingresso in modo che per la maggior parte di loro l\u0026rsquo;unica strategia praticabile fosse il volume a costo quasi zero, e ha preso una tariffa fissa da ciascuno indipendentemente da cosa ne usciva.\nIl fallimento simbolo del programma stesso lo dimostra meglio di qualsiasi statistica. .sucks fu delegato a Vox Populi, che faceva pagare ai titolari dei marchi 2.499 dollari a nome durante il sunrise: un prezzo fissato proprio perché i marchi avrebbero dovuto pagarlo per impedire che lo prendesse qualcun altro. La risposta di ICANN fu segnalare il registro alla Federal Trade Commission americana per prezzi predatori. La FTC concluse che non era stata violata alcuna regola, e osservò che ICANN aveva già ignorato diverse preoccupazioni che la FTC aveva sollevato sul programma dei nuovi gTLD.\nÈ tutta la faccenda in un solo episodio. ICANN progetta il programma, ignora gli avvertimenti del regolatore, delega la stringa, incassa la tariffa, e poi si lamenta con il regolatore del risultato prevedibile.\nLe domande per il prossimo round si sono aperte nel 2026. La tariffa è di 227.000 dollari.\nLe stringhe troppo pericolose da delegare Un\u0026rsquo;altra cosa che il programma ha prodotto, e questa è per chiunque abbia mai costruito una rete interna.\nLe organizzazioni si sono sempre inventate domini di primo livello per uso interno, partendo dal presupposto che un nome che non esiste pubblicamente non esisterà mai. .corp. .home. .mail. .local. Scegli qualcosa, mettilo nella tua Active Directory, da fuori non lo vede nessuno.\nIl round del 2012 propose di delegarne alcuni per davvero, e a quel punto ognuno di quei presupposti privati diventa un problema di sicurezza concreto: i nomi interni cominciano a risolversi sui server di qualcun altro, le query che prima fallivano cominciano a far trapelare la tua struttura interna verso un registro, e i certificati emessi per nomi interni diventano certificati per nomi che ora controlla uno sconosciuto.\nNessuno aveva controllato. È venuto fuori solo perché dei ricercatori hanno misurato cosa veniva davvero chiesto alla radice, e hanno scoperto che .home e .corp erano tra le stringhe più interrogate in assoluto: nomi usatissimi che non erano mai stati delegati a nessuno. Il Security and Stability Advisory Committee della stessa ICANN sollevò la questione nel 2013, dopo che le domande erano già arrivate.\n.corp, .home e .mail non sono mai stati delegati. Sono ancora rinviati, a tempo indeterminato, perché delegarli romperebbe troppe cose. Tre stringhe richieste e pagate si sono rivelate troppo pericolose per esistere.\nÈ un programma che ha allargato la radice senza prima stabilire con cosa l\u0026rsquo;allargamento si sarebbe scontrato, e l\u0026rsquo;ha scoperto dopo, dalle misure di altri. Se vuoi il lato pratico di tutto questo, è il motivo per cui inventarsi un TLD interno è una cattiva idea: lo spazio dei nomi che hai inventato resta privato solo finché qualcuno non lo vende.\nI soldi delle aste Tra giugno 2014 e luglio 2016 quelle aste per le stringhe contese raccolsero quei 240.590.128 dollari, circa 233 milioni di dollari al netto dei costi d\u0026rsquo;asta.\nSono soldi ottenuti vendendo pezzi di uno spazio dei nomi che ICANN non possiede e tiene in custodia. C\u0026rsquo;è una risposta difendibile su cosa debba succedere a quei soldi, e la comunità ha istituito un gruppo di lavoro intercomunitario per trovarla.\nMentre quel gruppo di lavoro era ancora riunito, il consiglio di ICANN ha preso 36 milioni di dollari del ricavato e li ha messi nel fondo di riserva della stessa ICANN, a cui mancavano 68 milioni di dollari rispetto all\u0026rsquo;obiettivo. Non proposto: approvato. E quando la comunità ha obiettato, la posizione che le è stata presentata è che l\u0026rsquo;alternativa era che ICANN alzasse le tariffe.\nIl gruppo di lavoro è andato avanti comunque. Il consiglio non ne ha adottato le raccomandazioni fino a giugno 2022, sei anni dopo l\u0026rsquo;ultima asta, durante i quali ICANN ha tenuto un quarto di miliardo di dollari di soldi altrui e se ne è servita per 36 milioni mentre le persone che dovevano decidere a cosa servissero erano ancora nella stanza.\nI tetti di prezzo di .org Nel marzo 2019 ICANN propose di rinnovare il contratto di registro di .org senza i tetti di prezzo. I tetti erano ciò che impediva al gestore di .org di far pagare quello che voleva agli enti di beneficenza, alle ONG e alle organizzazioni non profit a cui per vent\u0026rsquo;anni era stato detto che .org era il loro posto.\nLa consultazione pubblica si svolse. 3.252 commenti contrari alla rimozione. Sei a favore. Tra i contrari c\u0026rsquo;erano NPR, la YMCA, C-SPAN, la National Geographic Society, AARP e il National Trust for Historic Preservation: non i soliti commentatori del settore dei domini, ma proprio la platea per cui .org esiste.\nIl 1 luglio 2019 ICANN firmò il contratto. Nessun annuncio pubblico. Il confronto tra il testo firmato e quello proposto non mostrava alcuna modifica fatta in risposta alla consultazione. Non «alcune preoccupazioni recepite»: lo stesso documento.\nSe una consultazione pubblica può finire 542 a 1 contro e non cambiare una sola parola, non è una consultazione. È una formalità che produce una traccia di carta.\nPoi la vendita Nel novembre 2019, quattro mesi dopo, l\u0026rsquo;Internet Society annunciò che stava vendendo Public Interest Registry, il gestore non profit di .org, a Ethos Capital, un fondo di private equity, per 1,135 miliardi di dollari.\nLa rimozione dei tetti di prezzo è ciò che ha fatto valere PIR 1,135 miliardi di dollari. Un registro che non può alzare i prezzi è una rendita. Un registro che può farlo è un asset in crescita. ICANN aveva trasformato il primo nel secondo quattro mesi prima, contro un\u0026rsquo;opposizione unanime, e il mercato l\u0026rsquo;aveva prezzato immediatamente.\nEthos Capital era stata fondata nel maggio 2019. Il dominio ethoscapital.com fu registrato l'8 maggio 2019 da Fadi Chehadé, ex amministratore delegato di ICANN, la settimana della scadenza entro cui lo staff di ICANN doveva pubblicare il rapporto sulla rimozione dei tetti di prezzo. Il suo nome non compariva da nessuna parte sul sito di Ethos Capital quando l\u0026rsquo;affare fu annunciato. Il suo coinvolgimento divenne pubblico grazie ai dati WHOIS, il registro pubblico di chi possiede un dominio, di cui parla la prossima sezione, e l\u0026rsquo;ironia si scrive da sola. Ethos confermò poi che aveva fatto da consulente sull\u0026rsquo;operazione, e nel luglio 2020 ne divenne co-amministratore delegato.\nICANN alla fine bloccò la vendita, nell\u0026rsquo;aprile 2020. È giusto registrarlo. È altrettanto giusto registrare cosa la precedette: mesi in cui ICANN insisteva che la questione era per lo più fuori dalle sue competenze, una campagna pubblica continua, lettere di senatori americani, e infine una lettera del procuratore generale della California che diffidava ICANN dall\u0026rsquo;affare e citava la mancanza di trasparenza intorno a Ethos Capital.\nICANN non è stata la salvaguardia, qui. ICANN ha tolto i tetti che hanno creato l\u0026rsquo;occasione, ed è stata essa stessa fermata, all\u0026rsquo;ultimo minuto, da un pubblico ufficiale di uno stato: un\u0026rsquo;altra dimostrazione che il vero meccanismo di responsabilità di questo sistema è la giurisdizione californiana e non qualcosa negli statuti.\nL\u0026rsquo;accordo con Verisign È la stessa controparte della wildcard, quindici anni dopo. Nell\u0026rsquo;ottobre 2018 NTIA e Verisign firmarono l\u0026rsquo;Amendment 35 al Cooperative Agreement, togliendo il blocco del prezzo di .com e permettendo aumenti del 7% l\u0026rsquo;anno in quattro anni su sei.\nFu una decisione del governo americano, non di ICANN. Ma gli aumenti richiedevano comunque una modifica al contratto di registro di .com, e quello è di ICANN. Nel marzo 2020 ICANN approvò l\u0026rsquo;Amendment 3, e insieme una Letter of Intent vincolante in base alla quale Verisign paga a ICANN 20 milioni di dollari in cinque anni a partire dal 1 gennaio 2021, per attività di sicurezza e stabilità.\nEntrambe le cose furono negoziate prima che si aprisse la consultazione pubblica. La consultazione si svolse, fu largamente ostile, e non cambiò niente: lo stesso schema di .org, nello stesso periodo, con lo stesso risultato.\nPrendi la struttura per quello che è. L\u0026rsquo;ente che decide se un monopolista può alzare i prezzi ha negoziato, nello stesso momento e con la stessa controparte, un pagamento a se stesso. La consultazione pubblica è venuta dopo ed è stata decorativa. Comunque vengano spesi quei soldi, un accordo in cui il regolatore viene pagato dal regolato nella stessa transazione dell\u0026rsquo;aumento di prezzo è uno in cui nessun regolatore competente entrerebbe, e la parola a cui ricorsero i commentatori all\u0026rsquo;epoca, tangente, è quella ovvia.\nIl .com all\u0026rsquo;ingrosso è passato da 7,85 a 10,26 dollari sull\u0026rsquo;onda di tutto questo, per un nome che non ha alcun bisogno tecnico di un aumento di prezzo e nessun concorrente verso cui un registrante possa spostarsi.\nOtto paesi contro un\u0026rsquo;azienda Se vuoi un solo episodio che mostri a chi risponde davvero ICANN, è .amazon, ed è durato sette anni.\nAmazon l\u0026rsquo;azienda chiese .amazon nel round del 2012. L\u0026rsquo;Amazon Cooperation Treaty Organization si oppose: Bolivia, Brasile, Colombia, Ecuador, Guyana, Perù, Suriname e Venezuela, otto stati sovrani il cui territorio è quello che il nome descrive e in cui vivono circa 30 milioni di persone. La loro posizione era che un nome geografico e culturale condiviso non dovesse diventare proprietà privata di un\u0026rsquo;azienda.\nUsarono il canale che ICANN mette a disposizione dei governi. Il Governmental Advisory Committee (GAC) emise un parere per consenso contro la domanda, e nel maggio 2014 il consiglio di ICANN lo accolse. Gli stati avevano vinto, attraverso il meccanismo pensato esattamente per questo.\nAmazon presentò un ricorso con l\u0026rsquo;Independent Review Process (IRP).\nNel 2017 il collegio dell\u0026rsquo;IRP diede ragione ad Amazon. Stabilì che il consiglio aveva agito in modo incoerente con gli statuti della stessa ICANN, affermò che il consiglio non può trattare il parere per consenso del GAC come decisivo, gli ordinò di rivalutare le domande nel merito, e condannò ICANN a rimborsare ad Amazon 163.045,51 dollari di spese.\nNel maggio 2019 ICANN concluse che non c\u0026rsquo;era alcuna ragione di interesse pubblico per cui le domande non dovessero procedere. Amazon ebbe .amazon.\nLeggi la struttura più che il risultato, perché il risultato è discutibile e la struttura no.\nI governi hanno il GAC, e il GAC dà pareri. Un\u0026rsquo;azienda ha l\u0026rsquo;Independent Review Process, e l\u0026rsquo;IRP produce una decisione vincolante, un ordine al consiglio e una condanna alle spese. Quando quei due canali si sono scontrati frontalmente, la conclusione del collegio è stata esplicitamente che quello governativo non è decisivo.\nQuindi ICANN ha un meccanismo di responsabilità che funziona. Ha funzionato. È stato usato con successo da una delle più grandi aziende del mondo per ribaltare l\u0026rsquo;opposizione collettiva di otto paesi, e ICANN ne ha pagato le spese legali per il privilegio.\nÈ lo stesso fatto del problema della giurisdizione visto prima in questo articolo, con un vestito diverso. I meccanismi sono veri, e sono fatti in modo che a ottenerne risultati siano le parti che possono permettersi di azionarli. Otto governi non sono riusciti a far valere il canale consultivo. Un\u0026rsquo;azienda ha fatto funzionare quello legale in tre anni.\nLa battaglia sul GDPR: cosa fa ICANN quando una legge si applica a lei La prova più forte su un\u0026rsquo;istituzione non è la sua dichiarazione d\u0026rsquo;intenti. È cosa fa la prima volta che le viene applicata una regola che non ha scritto lei.\nPer ICANN quel momento è stato il GDPR, e la documentazione non lascia dubbi.\nAd ICANN non mancavano gli avvertimenti. Aveva, secondo il conto di The Register, più di dieci anni di lettere che le dicevano che il WHOIS, cioè pubblicare nome, indirizzo postale, email e numero di telefono di ogni registrante di un dominio, a chiunque, senza controllo degli accessi, era incompatibile con il diritto europeo sulla protezione dei dati. Lo stesso GDPR fu adottato nel 2016 con due anni di preavviso proprio perché le organizzazioni potessero prepararsi. ICANN è arrivata a maggio 2018 senza un modello conforme.\nQuello che ha fatto invece, nell\u0026rsquo;aprile 2018, è stato andare a Bruxelles a chiedere al Gruppo di lavoro Articolo 29 una moratoria di un anno sull\u0026rsquo;applicazione, più il permesso di continuare nel frattempo a pubblicare gli indirizzi email dei registranti.\nFermati un attimo su cosa sia davvero quella richiesta. Non una proroga per presentare documenti. La richiesta che i regolatori europei accettassero di non applicare un regolamento sui diritti fondamentali a una sola organizzazione e alle sue controparti contrattuali in tutto il mondo, per un anno, perché quell\u0026rsquo;organizzazione non aveva trovato il tempo di adeguarsi. Nel GDPR non esiste alcun meccanismo per concederlo. La protezione dei dati è un diritto fondamentale secondo la Carta; nessuna autorità di controllo, e nemmeno il Comitato europeo per la protezione dei dati, ha il potere di sospenderla per un singolo titolare del trattamento. ICANN non chiedeva una concessione che le veniva negata. Chiedeva una cosa che non esiste, senza essersi a quanto pare accertata che esistesse.\nIl WP29 rifiutò entrambe le richieste. Il riassunto dell\u0026rsquo;incontro della stessa ICANN ammetteva che gli indirizzi email dei contatti del registrante, amministrativi e tecnici dovevano essere anonimizzati, e ometteva semplicemente qualsiasi menzione della moratoria che aveva chiesto.\nPoi fece causa.\nIl 25 maggio 2018, il giorno in cui il GDPR entrava in vigore, ICANN fece causa a EPAG, il registrar tedesco di Tucows, a Bonn. EPAG aveva deciso di smettere di raccogliere i dati di contatto Admin-C e Tech-C, perché raccogliere dati personali di cui non aveva alcun uso era esattamente ciò che il GDPR vieta. La posizione di Tucows era che nella stragrande maggioranza delle registrazioni il registrante, il contatto amministrativo e quello tecnico sono comunque la stessa persona, quindi la raccolta non era solo illecita, era inutile.\nLa tesi legale di ICANN era che la base giuridica del GDPR «necessario all\u0026rsquo;esecuzione di un contratto» coprisse la raccolta, perché il contratto della stessa ICANN con il registrar la richiedeva. È un argomento notevole: che un\u0026rsquo;organizzazione possa fabbricarsi una base giuridica per trattare i dati personali di altri scrivendo l\u0026rsquo;obbligo di raccoglierli in un contratto con una terza parte. Se funzionasse, l\u0026rsquo;Articolo 6(1)(b) sarebbe una formalità che chiunque potrebbe soddisfare redigendo un testo.\nNon ha funzionato. ICANN perse a Bonn. Fece appello. Perse di nuovo. Nell\u0026rsquo;agosto 2018 la corte d\u0026rsquo;appello di Colonia la respinse per la terza volta, trovò convincenti le decisioni precedenti, stabilì che non c\u0026rsquo;era alcuna urgenza imminente che giustificasse un\u0026rsquo;ingiunzione, e, questa è la parte da rileggere, rifiutò la richiesta di ICANN di rinviare la questione alla Corte di giustizia dell\u0026rsquo;Unione europea perché l\u0026rsquo;interpretazione legale di ICANN non era rilevante per la decisione. La corte non riteneva l\u0026rsquo;argomento abbastanza in bilico da valere una domanda a Lussemburgo.\nICANN spese i soldi dei membri cercando comunque di portare il caso davanti a quella corte. Nel 2019 rinunciò del tutto al WHOIS.\nL\u0026rsquo;esito tecnico era corretto: il WHOIS così com\u0026rsquo;era non avrebbe dovuto esistere. Ma guarda come ci si è arrivati. Dieci anni di avvertimenti ignorati. Una richiesta di esenzione da un diritto fondamentale. Una causa contro la propria controparte contrattuale, depositata il giorno in cui la legge entrava in vigore, per stabilire che la legge non si applicava nel modo in cui dicevano i regolatori. Tre sconfitte. Poi la resa.\nNon è un\u0026rsquo;organizzazione che ha letto male una legge. È un\u0026rsquo;organizzazione che non ha accettato, finché dei tribunali non gliel\u0026rsquo;hanno detto tre volte, che la legge si rivolgesse a lei.\nQuanto è costato a tutti gli altri Gran parte di questo articolo parla di cosa hanno fatto ICANN e i registri. Questa parte parla di chi ha pagato, perché molto raramente sono stati loro.\nOgni registrante di .com al mondo paga l\u0026rsquo;aumento. Il .com all\u0026rsquo;ingrosso è passato da 7,85 a 10,26 dollari. I dati della stessa Verisign indicano una base .com di 163,6 milioni di nomi al 31 marzo 2026. Moltiplica le due cifre e quell\u0026rsquo;aumento vale nell\u0026rsquo;ordine di 394 milioni di dollari l\u0026rsquo;anno, presi da ogni registrante di un .com ovunque nel mondo, per un nome che non aveva bisogno di alcun cambiamento tecnico per giustificarlo. Un\u0026rsquo;azienda a Lagos o a Manila paga lo stesso aumento di una a Palo Alto, deciso da un\u0026rsquo;agenzia americana e da un ente non profit americano che ha preso 20 milioni di dollari dal beneficiario nella stessa trattativa.\nLa decisione su .org ricade sugli enti di beneficenza di tutto il mondo. .org è stato venduto al settore non profit per vent\u0026rsquo;anni come la parte dello spazio dei nomi che gli apparteneva. Togliere i tetti è stata una decisione che chi lo gestisce può far pagare loro quanto il mercato sopporta. NPR e la YMCA possono assorbirlo. Una piccola ONG che vive di un finanziamento no, e nemmeno a lei è stato chiesto niente: 3.252 contrari, sei favorevoli, firmato senza cambiare una parola.\nIl peso dell\u0026rsquo;abuso lo porta chiunque gestisca un server di posta. I nuovi gTLD sono il 12% del mercato e il 47% dei domini segnalati per crimini informatici. Ognuno di quei nomi arriva nella casella di qualcun altro, nella coda abusi di qualcun altro, nelle perdite per frode di qualcun altro. ICANN ha incassato 185.000 dollari a domanda e incassa 25.000 dollari l\u0026rsquo;anno per stringa in ogni caso. Il costo di quello che le stringhe economiche hanno poi prodotto ricade su ogni operatore di posta, ogni banca, ogni team di sicurezza e ogni persona caduta in una pagina di phishing. È un\u0026rsquo;esternalità da manuale, e il programma è stato progettato senza una riga su chi l\u0026rsquo;avrebbe sopportata.\nSite Finder ha rotto la semantica degli errori per l\u0026rsquo;intero pianeta in una volta. Vale la pena dirlo chiaramente perché è facile leggerla come una storia americana. C\u0026rsquo;è una sola radice e un solo .com. Quando Verisign ha cambiato cosa fa un nome inesistente, l\u0026rsquo;ha cambiato contemporaneamente per ogni rete del pianeta, comprese tutte le reti che non avevano alcun rapporto con Verisign, nessuna voce nella decisione, e nessuna via d\u0026rsquo;uscita se non correggere i propri resolver, che è quello che moltissime hanno finito per fare.\nIl WHOIS si è spento per chi lo usava contro gli abusi. Entrambi i danni qui sono veri ed entrambi erano evitabili. Pubblicare nome, indirizzo, email e telefono di ogni registrante a chiunque lo chiedesse era un danno reale, durato decenni, a persone di tutto il mondo, e il GDPR aveva ragione. Ma ICANN ha avuto più di dieci anni di preavviso e nessun piano, quindi maggio 2018 non è stato un passaggio ordinato a un accesso a livelli. È stato uno spegnimento brusco. Ricercatori anti-abuso, team di sicurezza e forze dell\u0026rsquo;ordine, anche ben fuori dall\u0026rsquo;Europa, hanno perso da un giorno all\u0026rsquo;altro uno strumento che funzionava, perché ICANN ha speso il preavviso facendo cause invece di costruire il sostituto. L\u0026rsquo;esposizione di prima e il vuoto di dopo appartengono allo stesso mancato prepararsi.\nE 12,6 milioni di nomi hanno smesso di risolversi. Il crollo di Freenom è stato un buon risultato per le cifre sul phishing. Non è stato un buon risultato per chiunque usasse un .tk o un .ml gratuito perché non poteva permettersi 10 dollari l\u0026rsquo;anno, ed erano moltissimi, in misura sproporzionata in posti dove 10 dollari non sono niente. Quando l\u0026rsquo;unico spazio dei nomi gratuito su internet è anche il più abusato, quelli che lo perdono quando sparisce non sono i criminali. Loro si sono spostati alla successiva cosa economica la settimana dopo.\nLa forma è costante. Le decisioni si prendono in California, le entrate si incassano in California, e i costi si distribuiscono in tutto il mondo a persone senza un voto, senza un contratto e senza un tribunale che possano raggiungere.\nE solo nei tribunali americani Ora che la documentazione è tutta qui, torniamo al punto della giurisdizione dall\u0026rsquo;inizio dell\u0026rsquo;articolo, perché pesa più della forma societaria.\nTutti al mondo sono soggetti a ciò che decide ICANN. Quelli che possono farci qualcosa sono quelli che possono fare causa in California.\nPensa a chi ne resta fuori. Un operatore di ccTLD in Camerun. Un registrante a Teheran il cui dominio è stato cancellato perché un registrar ha applicato in eccesso l\u0026rsquo;OFAC, che non l\u0026rsquo;ha mai vincolato. Un registrar a Bonn: ed è esattamente per questo che lo scontro tra ICANN ed EPAG ha dovuto svolgersi come causa tedesca sul diritto tedesco, e non come questione di responsabilità di ICANN. Qualsiasi piccolo registro che non può pagarsi avvocati americani per discutere un punto di diritto californiano sugli enti non profit contro un\u0026rsquo;organizzazione con un bilancio a nove cifre.\nPoi pensa a chi fa entrare. Ogni intervento in questo articolo che ha davvero cambiato qualcosa:\nSite Finder è finito quando ICANN ha minacciato il contratto di Verisign, e la risposta di Verisign è stata fare causa in un tribunale americano, e uscire dall\u0026rsquo;accordo con un .com rinnovato. La vendita di .org è stata fermata dopo che il procuratore generale della California ha mandato una lettera. Freenom si è fermata perché Meta ha fatto causa nel Northern District of California, e 12,6 milioni di nomi si sono spenti dietro di lei. .amazon è andato ad Amazon perché Amazon ha portato ICANN attraverso il suo stesso Independent Review Process e ha ottenuto le spese. Quattro interventi che hanno funzionato. Quattro attori americani: un pubblico ufficiale di uno stato e tre aziende. Nessuno di questi è una strada disponibile per qualcuno fuori dagli Stati Uniti, e in tre casi su quattro ciò che si è mosso è stato l\u0026rsquo;interesse commerciale di un\u0026rsquo;azienda privata, che in quelle occasioni andava per caso nella stessa direzione di quello di tutti gli altri.\nLa comunità ha sollevato la questione. Un sottogruppo sulla giurisdizione del gruppo di lavoro sulla responsabilità ci ha speso il Work Stream 2 e ha prodotto raccomandazioni che hanno lasciato le cose più o meno come le avevano trovate, il che non sorprende visto che la proposta di transizione aveva già escluso dal perimetro l\u0026rsquo;unico cambiamento che contava prima che qualcuno si sedesse al tavolo.\nQuindi la governance globale multi-stakeholder si risolve, nell\u0026rsquo;unico posto in cui la si può mettere alla prova, in questo: puoi fare causa in California, se te lo puoi permettere.\nCosa mostra davvero la documentazione Mettiamoli insieme, perché presi uno per uno ognuno ha una scusa e tutti insieme no.\nUn\u0026rsquo;organizzazione a cui dei tribunali tedeschi hanno dovuto dire tre volte che il diritto europeo si applicava a lei, dopo che aveva chiesto per prima cosa ai regolatori di quei tribunali di semplicemente non applicarlo.\nUn\u0026rsquo;organizzazione che ha inventato un prodotto che nessuno aveva chiesto, ha incassato più di 350 milioni di dollari di tariffe per esaminare le domande, altri 240 milioni mettendo all\u0026rsquo;asta quelle contese, e ora incassa 25.000 dollari l\u0026rsquo;anno da domini di primo livello vuoti, mentre le stringhe che hanno venduto sono diventate il posto più economico di internet dove comprare un dominio di phishing.\nUn\u0026rsquo;organizzazione la cui consultazione pubblica è finita 542 a 1 contro e non ha cambiato una sola parola del documento su cui consultava.\nUn\u0026rsquo;organizzazione che ha tolto i tetti di prezzo allo spazio dei nomi del non profit quattro mesi prima che il veicolo di private equity del suo ex amministratore delegato offrisse 1,135 miliardi di dollari per comprarlo, e che ha dovuto essere fermata dal procuratore generale di uno stato invece che da qualche meccanismo proprio.\nUn\u0026rsquo;organizzazione che ha preso 20 milioni di dollari dal registro monopolista nella stessa trattativa che ha permesso al registro monopolista di alzare i prezzi, e ha aperto la consultazione pubblica dopo.\nUn\u0026rsquo;organizzazione che si è servita di 36 milioni di dollari di soldi che teneva in custodia, mentre il gruppo che doveva decidere a cosa servissero quei soldi era ancora riunito.\nE un\u0026rsquo;organizzazione che ha chiuso una causa intentata dal registro che aveva dirottato le due zone più grandi di internet consegnando a quel registro un contratto rinnovato per .com.\nUn\u0026rsquo;organizzazione il cui unico meccanismo di responsabilità funzionante è stato usato da un\u0026rsquo;azienda da mille miliardi di dollari per ribaltare l\u0026rsquo;opposizione unanime di otto paesi, con le spese a carico di ICANN.\nUn\u0026rsquo;organizzazione che è arrivata a un rapporto di comitato dal delegare .corp e .home a degli sconosciuti, e ha scoperto cosa avrebbe rotto dalle misure di qualcun altro.\nIl filo comune non è l\u0026rsquo;incompetenza. L\u0026rsquo;incompetenza è casuale. Questo ha una direzione: ognuna di queste vicende è andata dalla parte di chi c\u0026rsquo;era già, dei soldi e dell\u0026rsquo;interesse istituzionale della stessa ICANN, e i meccanismi di partecipazione, consultazioni, gruppi di lavoro, comunità con poteri, hanno prodotto documentazione invece che risultati.\nE questo è l\u0026rsquo;ente che fissa le regole per il file. Non un ente di standardizzazione, non un tribunale, niente che tu abbia eletto. Un ente non profit californiano con precedenti di governance come questi, seduto sopra 1,5 megabyte di testo su cui si risolve ogni rete del pianeta.\nL\u0026rsquo;unica cosa che sta tra quei precedenti e il file è che ICANN non tiene la penna. Deve chiedere. Tutto quello che c\u0026rsquo;è sopra è ciò che fa un\u0026rsquo;organizzazione quando deve ancora chiedere: quindi la domanda da portarsi via non è se ICANN si comporti bene. Chiaramente no. È cosa tiene in piedi il dover chiedere, visto che nessuno l\u0026rsquo;ha messo per iscritto e la parte a cui si chiede è già sul libro paga.\n","permalink":"https://blogs.damiendye.uk/it/dns/who-actually-controls-dns/","summary":"La radice di internet è un file di testo da 1,5 MB che una sola azienda americana modifica e firma. Chi controlla davvero il DNS, cosa ha cambiato e cosa non ha cambiato la transizione IANA del 2016, e la documentazione di come ICANN ha usato quel controllo.","title":"Chi controlla davvero il DNS"},{"content":"Dal 2017 al 2019 sono stato amministratore di sistema del registro DNS presso Nominet, il registro .uk: dentro l\u0026rsquo;edificio mentre si accumulava la pressione che ha prodotto la rivolta del 2021. Il voto in sé è arrivato dopo che me n\u0026rsquo;ero andato, e quella parte è di dominio pubblico, con i link come al solito. Dove parlo di com\u0026rsquo;era vista da dentro, lo dico.\nL\u0026rsquo;articolo gemello di questo parla di ICANN, e continua ad arrivare alla stessa domanda da direzioni diverse: quando nessuno ha un contratto su un registro, cosa lo fa comportare bene davvero?\n.uk è un buon posto per rispondere, perché nessuno ce l\u0026rsquo;ha. Non c\u0026rsquo;è nessun registry agreement ICANN su di esso, nessuna Specification 6, nessuna funzione di compliance, nessun monitoraggio esterno e nessun regolatore nel senso ordinario del termine. Non lo gestisce Ofcom. Non lo gestisce il governo.\nLo gestiscono i suoi membri. E nel marzo 2021 se ne sono serviti.\nCos\u0026rsquo;è davvero Nominet Nominet è una company limited by guarantee. Non ha azionisti. Ha dei membri, registrar e altre parti interessate che pagano una quota e hanno diritto di voto, ed è stata creata per gestire .uk a beneficio pubblico invece che a scopo di lucro.\nQuella struttura è tutta la storia. Un\u0026rsquo;azienda senza proprietari da arricchire incassa comunque denaro, e un registro che gestisce uno spazio dei nomi nazionale senza concorrenti ne incassa parecchio. A cosa serva quel surplus è una domanda a cui lo statuto risponde in modo vago e il consiglio risponde nella pratica.\nI membri sono l\u0026rsquo;unico controllo. Non c\u0026rsquo;è nient\u0026rsquo;altro. Il che va bene finché le risposte coincidono, e diventa l\u0026rsquo;intera partita quando smettono di farlo.\nLa situazione, vista da dentro Ecco la parte che chi sta fuori da un registro raramente si immagina, e conta per tutto quello che segue.\nNominet non è mai stata solo .uk. Mentre ero lì la piattaforma gestiva:\n.uk, il dominio di primo livello nazionale (ccTLD), senza alcun contratto ICANN. .cymru e .wales, domini di primo livello generici (gTLD) che Nominet detiene in proprio: questi sono soggetti a registry agreement ICANN. I gTLD di altri. Nell\u0026rsquo;aprile 2016 Minds + Machines ha affidato a Nominet il back end per fino a 28 delle sue stringhe, tra cui .london, .work, .law, .fashion e .cooking, il che ha portato Nominet nella fascia più alta degli operatori di registro per numero di TLD gestiti. Aggiungi i dot-brand come .bbc e .bentley. Il ruolo di emergenza per ICANN. Nominet è uno degli Emergency Back-end Registry Operators di ICANN, le organizzazioni a cui ICANN affida un gTLD quando lo toglie a chi lo gestiva. Ci è entrata nel 2014, e nel dicembre 2017 ICANN l\u0026rsquo;ha usata: Nominet è diventata operatore ad interim di emergenza di .wed dopo che il servizio di dati di registrazione del suo operatore aveva smesso di funzionare. Il lato resolver. Nominet ha costruito e gestito il Protective DNS per il National Cyber Security Centre (NCSC), il resolver ricorsivo interrogato dagli enti pubblici britannici, che si rifiuta di risolvere i nomi noti come malevoli. Vale una precisazione, perché «Nominet gestisce .uk» è più vago di quanto dovrebbe.\nNominet gestisce il registro .uk e la maggior parte di quello che ci sta sotto: .co.uk, .org.uk, .me.uk e lo stesso .uk di secondo livello. Non l\u0026rsquo;ha mai gestito tutto. .ac.uk appartiene a Jisc, erede della rete accademica che ha dato il nome a uk in primo luogo, e che amministra e registra nomi lì sotto dal 1996. Negli anni di cui parla questo articolo, anche .gov.uk era di Jisc: Nominet l\u0026rsquo;ha preso solo nel 2024, e ancora oggi le approvazioni spettano al Central Digital and Data Office e non al registro.\nVa anche oltre, e in una direzione che non indovineresti. Jisc fornisce l\u0026rsquo;amministrazione anche per .gov.scot, e per .gov.wales e .llyw.cymru, che stanno entrambi dentro .wales e .cymru, i due domini di primo livello generici che Nominet detiene in proprio. Nominet gestisce quei TLD. L\u0026rsquo;angolo dei governi al loro interno lo gestisce qualcun altro.\nQuindi anche dentro lo spazio dei nomi di un solo paese l\u0026rsquo;autorità è divisa, ed è divisa per storia e consuetudine piuttosto che per il progetto di qualcuno.\nCosì un\u0026rsquo;unica organizzazione si trovava contemporaneamente in quattro relazioni diverse con il sistema dei nomi. Del tutto fuori dalla portata di ICANN per .uk. Dentro, sotto contratto e misurata di continuo, per i gTLD. Lo strumento a cui ICANN ricorreva quando doveva togliere un dominio di primo livello a qualcun altro. E il resolver che decideva cosa un dipartimento governativo potesse cercare.\nNiente di tutto questo è una contraddizione. È come appare davvero la struttura quando smetti di leggere gli organigrammi e inizi a leggere i contratti. Qui l\u0026rsquo;autorità si lega alle singole deleghe, non alle aziende.\nDue regimi, una piattaforma Ora la parte che vedi solo da dentro, ed è il motivo per cui la situazione conta invece di essere una curiosità.\nPer i gTLD, Nominet firma il registry agreement ICANN come chiunque altro. Si applica la Specification 6: niente wildcard, niente risposte sintetizzate. Si applica anche la Specification 10, e ICANN ne misura la conformità di continuo dall\u0026rsquo;esterno: la risoluzione DNS, il sistema di registrazione condiviso, il servizio Whois, i depositi in escrow e la corretta firma delle zone sono tutti monitorati rispetto a delle soglie, e scendere sotto una di esse è un evento di compliance, non semplicemente un\u0026rsquo;interruzione.\nConta le zone. Da una parte .uk, senza contratto. Dall\u0026rsquo;altra diverse decine di gTLD, ognuno sotto un registry agreement e una sonda di monitoraggio. Sulla sua stessa piattaforma la zona senza contratto era in minoranza di circa trenta a uno.\nDue regimi contrattuali su una piattaforma, e vince quello severo Una piattaforma, due regimi contrattuali Nominet: una piattaforma di registro, un solo set di runbook .uk 1 zona nessun registry agreement nessuna Specification 6 nessun monitoraggio domini di primo livello generici ≈30 zone .cymru\u0026#160;· .wales\u0026#160;· MMX\u0026#160;×28\u0026#160;· .bbc\u0026#160;· .bentley registry agreement ICANN Spec 6, Spec 10, monitorati dall'esterno il regime severo diventa lo standard della casa Nessuno mantiene due standard operativi per conservare un'eccezione per una zona. .uk riceve comunque le regole ICANN: nessun contratto, nessuna consultazione, nessuno interpellato. Una piattaforma che porta entrambi i regimi. La zona senza contratto è in minoranza di circa trenta a uno, quindi le regole scritte per i gTLD diventano il modo in cui si gestisce tutto, compresa la zona su cui nessuno ha alcuna autorità. Gestire due regimi operativi su una sola piattaforma è doloroso, quindi non lo fai. Due processi di escrow, due regimi di monitoraggio, due serie di runbook, due procedure di reperibilità, due risposte alla stessa domanda a seconda di quale zona riguardi il ticket: è così che si sbaglia alle tre di notte. Quando ICANN impone qualcosa per i gTLD, non lo costruisci due volte. Lo costruisci una volta e ci fai girare tutto.\nIl che significa che i requisiti di ICANN sono arrivati anche su .uk. Non perché ICANN avesse autorità su .uk, non ne aveva nessuna, ma perché il modo sicuro più economico di rispettare una regola che vincola la maggior parte della tua infrastruttura è applicarla a tutta, e perché mantenere di proposito una separazione per permettere al ccTLD cose che ai gTLD sono vietate non ti dà niente, se non un secondo modo in cui la piattaforma può rompersi.\nPer questo non è stato firmato nessun contratto. Non c\u0026rsquo;è stata nessuna consultazione. Nel Regno Unito non è stato chiesto niente a nessuno. Un requisito scritto a Los Angeles per i domini di primo livello generici ha determinato il funzionamento del registro nazionale di un paese, tramite una decisione di build.\nPer la cronaca, questo ha anche fatto di ICANN una presenza reale nei turni di reperibilità, invece di una riga in un documento di policy. Per una parte dell\u0026rsquo;infrastruttura era una controparte con un contratto, una sonda puntata sulla nostra infrastruttura e un percorso di escalation.\nVendere .uk per pagare il resto La logica commerciale di tutto questo è ciò a cui alla fine i membri si sono opposti.\n.uk è un monopolio. C\u0026rsquo;è esattamente un posto dove comprare un dominio .uk, la domanda è quasi anelastica e il margine finanzia qualunque cosa il consiglio decida di finanziare. Dal 2016 The Register lo diceva apertamente: i titolari di domini .uk pagavano troppo per sovvenzionare il resto dell\u0026rsquo;attività.\nCon l\u0026rsquo;amministratore delegato Russell Haworth, nominato nel 2015, Nominet ha spinto con forza sulla sicurezza informatica, contratto NCSC compreso, partendo dal ragionamento che un registro seduto sull\u0026rsquo;infrastruttura DNS nazionale fosse ben piazzato per vendere servizi di sicurezza.\nQuella è stata la direzione per tutto il tempo in cui sono stato lì. La rivolta non è nata dal nulla nel 2021. Le condizioni erano state poste anni prima, sotto gli occhi di chiunque lavorasse nell\u0026rsquo;edificio.\nPrima se n\u0026rsquo;è andata la fondazione benefica Nel gennaio 2018, mentre ero lì, Nominet si è ritirata dalla sua stessa fondazione benefica.\nIl Nominet Trust era finanziato dal registro dal 2008: 44 milioni di sterline in quel periodo, 4 milioni nel 2016, 5,4 milioni nel 2017. Finanziava progetti di tecnologia per il bene comune. Era, in un senso abbastanza diretto, il beneficio pubblico di un\u0026rsquo;azienda a beneficio pubblico. È diventato indipendente e nel maggio 2018 si è trasformato in Social Tech Trust.\nIl motivo dichiarato da Haworth era che «the grant-giving, single funder model we set up in 2008 was not the most effective route to greatest impact.»\nInsieme a questo è stato annunciato un Cyber Advisory Panel, presieduto da Haworth, rivolto al governo e alle grandi imprese, sostenuto da un programma di marketing e, con le parole stesse di Nominet, potenzialmente da un\u0026rsquo;acquisizione.\nMetti le due cose una accanto all\u0026rsquo;altra, perché sono state annunciate insieme. Il denaro che usciva dall\u0026rsquo;edificio verso un ente benefico indipendente si è fermato. È partita un\u0026rsquo;iniziativa commerciale presieduta dall\u0026rsquo;amministratore delegato. I membri non sono stati consultati né sull\u0026rsquo;una né sull\u0026rsquo;altra.\nUno di loro, Andrew Bennett, all\u0026rsquo;epoca ha fatto la domanda ovvia: dove verranno spesi tutti gli utili operativi futuri?\nTre anni dopo i membri hanno risposto.\nÈ anche il motivo per cui i paragrafi che seguono non sono solo una mia impressione. Il più grande spostamento di denaro a beneficio pubblico della storia di Nominet è passato da una fondazione indipendente con una propria governance a un panel presieduto dall\u0026rsquo;amministratore delegato, in un solo annuncio, senza chiedere ai proprietari. Qualunque cosa tu pensi delle intenzioni, la direzione del denaro è agli atti.\n«Profit With a Purpose» Quello era lo slogan. Era la frase di tutta la strategia e l\u0026rsquo;abbiamo sentita moltissimo.\nIl problema non era che fosse ambizioso. Era che le due metà si erano separate. Il profitto era reale, in crescita, e veniva da un mercato vincolato che non aveva nessun altro posto dove comprare un .uk. Lo scopo era una slide in una presentazione.\nProfitto in su, scopo ritirato: le due metà dello slogan si separano «Profit with a purpose», nei conti Scopo: erogazioni al Nominet Trust £4,0 mln 2016 £5,4 mln 2017 ritirato, gennaio 2018 Trust lasciato a cercarsi i suoi finanziatori dal 2018 in poi £44 mln erogati in totale tra il 2008 e il 2018. Poi niente. Negli stessi anni il prezzo di un dominio .uk è salito di oltre il 50%. La metà «profitto» dello slogan funzionava esattamente come previsto. Le due metà dello slogan, che vanno in direzioni opposte. I dati sulle erogazioni vengono dalla storia dei finanziamenti del Nominet Trust; l\u0026rsquo;aumento dei prezzi è la denuncia dei membri stessi nel 2021. Un\u0026rsquo;azienda la puoi inchiodare a uno slogan del genere, e alla fine i membri l\u0026rsquo;hanno fatto. Dentro, produceva soprattutto quella stanchezza particolare che viene dal sentirsi dire a ogni riunione plenaria che la spinta commerciale è il beneficio pubblico, mentre la voce del beneficio pubblico vero scende.\nDove sono finiti i soldi Mentre ero lì sono andate avanti tre cose, e nessuna di queste è il DNS per il Regno Unito.\nUn registro dello spettro radio. Nominet ha costruito un database TV White Space, un registro di quali frequenze radio sono libere in un dato posto e in un dato momento, e si è fatta approvare dalla FCC come amministratore di database negli Stati Uniti. L\u0026rsquo;argomento era che un registro è un registro, e un\u0026rsquo;azienda brava in un tipo di lookup poteva venderne un altro.\nUn prodotto di sicurezza DNS. NTX, rilevamento delle minacce basato sull\u0026rsquo;ispezione del traffico DNS, venduto a governi e imprese. In altre parole un concorrente di OpenDNS, cioè un concorrente di Cisco, lanciato da un registro di domini britannico.\nLe auto a guida autonoma. Insieme ai droni e all\u0026rsquo;internet delle cose, presentate come la prossima grande ondata di cose che avrebbero avuto bisogno di nomi e registrazioni.\nCosa ne è stato è la risposta alla domanda se fossero una strategia. L\u0026rsquo;attività sullo spettro è stata venduta a RED Technologies quando Nominet si è rifocalizzata. Il lavoro sulla sicurezza ha prodotto la tecnologia dietro il contratto NCSC, che Nominet poi ha perso nel 2024. Le auto a guida autonoma non sono mai arrivate, e nemmeno i domini di cui avrebbero avuto bisogno.\nLa gara per l\u0026rsquo;Australia Ce n\u0026rsquo;era una quarta, ed è quella che dice di più sull\u0026rsquo;ambizione. Nel 2018 Nominet ha partecipato alla gara per gestire il registro dell\u0026rsquo;Australia.\nauDA, che amministra .au, aveva messo a gara le operazioni del registro. Sono arrivate nove offerte da tutto il mondo, tre sono state selezionate, e Afilias è subentrata il 1° luglio 2018, chiudendo sedici anni di gestione AusRegistry. auDA non ha mai pubblicato chi altro avesse partecipato, quindi non lo troverai agli atti, ma Nominet c\u0026rsquo;era, e io c\u0026rsquo;ero mentre ci provavamo.\nMetti questo accanto alle altre notizie dello stesso anno. Nel gennaio 2018 Nominet si era ritirata dalla fondazione benefica a cui aveva dato 44 milioni di sterline, sostenendo che le erogazioni da finanziatore unico non erano la strada più efficace verso l\u0026rsquo;impatto. Negli stessi dodici mesi partecipava a una gara per gestire il registro dei domini di un paese dall\u0026rsquo;altra parte del mondo.\nVale anche la pena notare cosa è la gara per .au, perché è esattamente quello che la maggior parte delle persone pensa debba essere .uk. auDA può mettere a gara il suo registro e affidarlo a qualcun altro, e nel 2018 l\u0026rsquo;ha fatto. Per .uk non esiste niente di equivalente. La posizione di Nominet non è un contratto che arriva a rinnovo, il che è una posizione più forte di quella che Afilias ha vinto in Australia, e quindi va tenuto a mente quando si valuta quanta pressione rappresentasse davvero il voto dei membri. Era l\u0026rsquo;unica leva che c\u0026rsquo;era.\nEd ecco cosa stava succedendo ad auDA mentre Nominet partecipava alla gara per lavorare per lei.\nIn parallelo alla gara, il governo australiano stava conducendo una revisione della stessa auDA. Nell\u0026rsquo;aprile 2018 ha riferito che il quadro di gestione e governance di auDA «no longer fit-for-purpose», ha imposto 29 riforme obbligatorie come nuove condizioni di riconoscimento, e ha messo un dirigente del Department of Communications nel consiglio di auDA a sorvegliare il lavoro. Ha anche detto chiaramente che avrebbe trasferito la delega di .au a un altro gestore se auDA non fosse stata all\u0026rsquo;altezza.\nQuesto è un governo nazionale che dichiara per iscritto che sposterà il dominio del suo paese se l\u0026rsquo;ente che lo detiene non si rimette in ordine. Nello stesso periodo si stavano ribellando anche i membri di auDA: una petizione per un\u0026rsquo;assemblea generale straordinaria per rimuovere quattro dei suoi vertici, tre anni prima che i membri di Nominet facessero la stessa cosa a cinque dei loro.\nDue registri nazionali, due enti senza scopo di lucro che detengono lo spazio dei nomi di un paese, entrambi accusati di fallimenti di governance a meno di quattro anni l\u0026rsquo;uno dall\u0026rsquo;altro. Non è una stranezza di Nominet. È quello che fa questa struttura quando nessuno la sorveglia abbastanza da vicino.\nCosa hanno visto i membri Quanto al perché proprio quelle e non altre, starò attento, perché posso dirti cosa sembrava e non cosa c\u0026rsquo;era nella testa di qualcuno. L\u0026rsquo;opinione diffusa tra il personale all\u0026rsquo;epoca era che i finanziamenti seguissero gli entusiasmi di chi li approvava. Non posso mostrarti un libro contabile e non fingerò di poterlo fare.\nQuello che posso indicare è che tre anni dopo la denuncia formale dei membri era una versione meglio documentata dello stesso sospetto: che un ente senza azionisti e con uno scopo di beneficio pubblico stesse spendendo il surplus di un monopolio nazionale in cose che andavano bene a chi lo gestiva, e che le erogazioni che avrebbero dovuto giustificare l\u0026rsquo;intero assetto fossero state tagliate nel frattempo.\nDove è finito il surplus di .uk, e come è finita ogni voce Dove è finito il surplus .uk un venditore, nessun rivale prezzi su del 50%+ Nominet Trust £44 mln erogati, 2008-2018 fermato, gen 2018 database dello spettro TV White Space approvato dalla FCC negli Stati Uniti venduto sicurezza informatica NTX £12,6 mln di ricavi nell'ultimo anno intero £2,4 mln di perdita Gara per il registro australiano nove offerenti, tre selezionati vinta da Afilias Auto autonome, droni, internet delle cose la prossima ondata di cose da nominare mai arrivati L'unica voce che faceva ciò per cui l'azienda esisteva è quella tagliata. Tutto il resto l'ha pagato chi compra domini .uk. Cinque destinazioni per il denaro di un monopolio. Quattro sono finite in una vendita, una perdita, una gara persa o in niente del tutto, e la quinta, quella che lo statuto esisteva per finanziare, è quella che è stata fermata. La denuncia dei membri non era che diversificare fosse sbagliato. Era aritmetica. I prezzi di .uk sono saliti di oltre il 50 per cento. Le erogazioni benefiche e a beneficio pubblico sono calate, mentre l\u0026rsquo;organizzazione faceva margini da monopolio su un bene nazionale. I risultati operativi peggioravano nonostante i tagli ai costi. Stipendi e bonus dei dirigenti sono saliti durante tutto questo. E il feedback dei membri, dato attraverso i canali previsti dallo statuto, per anni non ha portato da nessuna parte.\nUn\u0026rsquo;azienda senza azionisti aveva iniziato a comportarsi come una con azionisti impazienti, e a pagare era il surplus dello spazio dei nomi nazionale.\nLa rivolta dei membri La campagna era PublicBenefit.uk, organizzata da Simon Blackler dell\u0026rsquo;azienda di hosting Krystal. La sua mozione era secca: rimuovere amministratori indicati per nome.\nLa risposta di Nominet è la parte che vale la pena registrare, perché ti dice cosa era diventata l\u0026rsquo;organizzazione.\nHa fatto campagna contro i propri membri usando i soldi dei membri stessi: email, telefonate e spedizioni per invitare a respingere la mozione. Si è rifiutata di entrare nel merito della campagna. Quando la campagna ha esercitato il diritto di avere i contatti dei membri per poter esporre le proprie ragioni, Nominet non ha mandato un foglio di calcolo. Ha mandato un pacco fisico con i dati stampati su più di 500 fogli di carta, senza gli indirizzi email.\nHa anche bloccato una seconda mozione che avrebbe insediato due amministratori qualificati con funzioni provvisorie, sostenendo che non fosse legale, e poi ha criticato la campagna per non avere un piano di successione.\nIl 22 marzo 2021 si è andati al voto. L\u0026rsquo;affluenza è stata del 53%. La mozione è passata con il 52,7%, e cinque degli undici membri del consiglio se ne sono andati:\nMark Wood Presidente Russell Haworth Amministratore delegato Eleanor Bradley Managing Director, Registry Ben Hill Direttore finanziario Jane Tozer Amministratrice non esecutiva Haworth si è dimesso poche ore prima del voto piuttosto che perderlo. Rob Binns è diventato presidente ad interim.\nEcco cosa penso abbia rappresentato quella coppia, e lo segnalo come opinione perché è questo che è.\nWood e Haworth hanno gestito Nominet come un fondo di venture capital gestisce una società in portafoglio. Non come un registro che produce un surplus, ma come un bilancio con attaccato un bene sottoutilizzato: un monopolio vincolato che genera cassa che si poteva impiegare meglio altrove, dove c\u0026rsquo;era più potenziale di crescita.\nOgni cosa documentata qui sopra è coerente con questo. Prendi l\u0026rsquo;entrata affidabile e alzi il prezzo, perché i clienti non hanno altro posto dove andare. Fermi l\u0026rsquo;uscita che non dà rendimento, cioè la fondazione benefica. Metti la differenza in un portafoglio, spettro, sicurezza informatica, un registro straniero, auto a guida autonoma, con la teoria che una delle scommesse vada bene. Paghi chi lo dirige alla tariffa che quel tipo di lavoro comanda. E vai avanti finché qualcuno che ne ha titolo non ti ferma.\nNon c\u0026rsquo;è niente di insolito nel gestire un\u0026rsquo;azienda in questo modo. Non è il modo di gestire un ente a beneficio pubblico che custodisce un bene nazionale, perché quel surplus non è mai stato capitale in cerca di rendimento. Era la cosa che l\u0026rsquo;intero assetto esisteva per produrre, e lo statuto lo diceva.\nAlla fine i membri hanno detto la stessa cosa, nell\u0026rsquo;unico linguaggio che avevano a disposizione.\nVale la pena essere onesti sul margine. Il 52,7% con un\u0026rsquo;affluenza del 53% non è una valanga, è una vittoria di misura su una base di membri divisa, e l\u0026rsquo;organizzazione l\u0026rsquo;ha combattuta con ogni risorsa che aveva. Ha perso lo stesso.\nCosa è successo dopo Nominet ha fatto marcia indietro sulla direzione commerciale della sicurezza informatica e si è riorientata verso il registro e il lavoro a beneficio pubblico. Poi sono arrivati i numeri.\nL\u0026rsquo;attività principale ha toccato il picco l\u0026rsquo;anno in cui me ne sono andato. I domini .uk gestiti hanno raggiunto il massimo di 13.348.378 nel 2019. A gennaio 2023 erano 11.045.559. A gennaio 2024, 10.688.932. Un quinto della base, sparito, e ancora in calo.\nLa diversificazione ha perso soldi. Nell\u0026rsquo;ultimo anno intero prima della resa dei conti la business unit della sicurezza informatica ha fatturato 12,6 milioni di sterline e ha registrato una perdita di 2,4 milioni. Questa è la risposta alla domanda se i progetti pagati dal surplus fossero un investimento o un capriccio, ed è un dato di Nominet stessa.\nPoi è andato via il contratto. Nel 2024 l\u0026rsquo;NCSC ha rimesso a gara il Protective DNS, un servizio che gestisce circa mezzo trilione di query all\u0026rsquo;anno, e Nominet l\u0026rsquo;ha perso. Il lavoro è andato a Cloudflare con Accenture da settembre 2024, con un contratto riportato attorno ai 30 milioni di sterline. L\u0026rsquo;amministratore delegato Paul Fletcher ha detto che il governo aveva scelto un concorrente più economico.\nE il portafoglio di backend gira. Nell\u0026rsquo;aprile 2021, poche settimane dopo l\u0026rsquo;assemblea straordinaria, MMX ha venduto il suo portafoglio a GoDaddy Registry per 120 milioni di dollari, e le 28 stringhe che avevano portato Nominet nella fascia più alta degli operatori di registro sono andate con l\u0026rsquo;acquirente. .blog era già passato a CentralNic nel 2019.\nÈ giusto dire che va in entrambe le direzioni. Amazon ha spostato la maggior parte dei suoi 54 gTLD sulla piattaforma di Nominet nel 2019, e più tardi Microsoft ha trasferito .skype e .office da GoDaddy. Nominet i portafogli li vince oltre che perderli.\nMa questo è il punto sull\u0026rsquo;attività, non una sua difesa. I servizi di registro di backend sono ricavi che non controlli. Arrivano e se ne vanno per la transazione societaria di qualcun altro: MMX non se n\u0026rsquo;è andata perché Nominet gestiva male la piattaforma, se n\u0026rsquo;è andata perché MMX è stata venduta. Costruire le finanze di un ente a beneficio pubblico su un portafoglio di clienti che può andarsene di martedì perché il suo proprietario ha incassato 120 milioni di dollari è una scelta strategica, ed è stata fatta.\nE nello stesso anno ha vinto .gov.uk.\n.gov.uk era stato gestito da Jisc per anni, pro bono, in base a un vecchio memorandum d\u0026rsquo;intesa, un assetto che alla fine il governo ha ritenuto non rispettasse gli standard riconosciuti a livello internazionale. Il Central Digital and Data Office ha condotto un appalto tramite il Crown Commercial Service, Nominet l\u0026rsquo;ha vinto nel novembre 2023, e la transizione si è completata il 26 giugno 2024, programmata una settimana prima delle elezioni politiche per tenere al riparo la registrazione degli elettori. La pagina del registro di Jisc oggi riporta la data senza commenti: dal 26 giugno 2024 non gestisce più lo spazio dei nomi .gov.uk, anche se è rimasta registrar per alcuni clienti. Ventotto anni di gestione di uno spazio dei nomi nazionale, finiti in una riga su una pagina web.\nI requisiti dichiarati erano resilienza, conformità agli standard DNS di ICANN e rispetto del Cyber Assessment Framework dell\u0026rsquo;NCSC.\nLeggilo alla luce dell\u0026rsquo;argomento fatto prima in questo articolo. Il motivo per cui Nominet era un candidato credibile per lo spazio dei nomi del governo stesso è che lavorava già secondo gli standard di ICANN: standard che aveva adottato perché la maggior parte della sua infrastruttura vi era vincolata per contratto, e che erano arrivati a .uk perché nessuno mantiene due regimi su una sola piattaforma. La disciplina arrivata di lato, attraverso i contratti dei gTLD, è ciò che l\u0026rsquo;ha qualificata per gestire .gov.uk.\nQuindi il 2024 non è stato semplicemente un anno brutto. Ha perso il contratto più grande che aveva e ha vinto quello con sopra il nome del governo.\nDue cose di quella vittoria vale la pena notare, perché sono la differenza tra gestire uno spazio dei nomi e detenerlo.\nIl governo si è tenuto l\u0026rsquo;autorità. Nominet gestisce il registro. Il Central Digital and Data Office continua a gestire e approvare le richieste: chi può avere un .gov.uk resta una decisione del governo, non del registro. Non è così che funziona .co.uk, dove i registrar accreditati vendono a chiunque si presenti. La gestione tecnica è stata esternalizzata. La voce in capitolo sullo spazio dei nomi no.\nEd è un contratto. .gov.uk è stato acquistato tramite il Crown Commercial Service, il che vuol dire che ha una durata e una scadenza, e il governo ha già dimostrato una volta cosa fa quando decide che l\u0026rsquo;assetto non è abbastanza buono: ha spostato tutto via da Jisc dopo una ventina d\u0026rsquo;anni.\nQuindi Nominet detiene .gov.uk a condizioni a cui non detiene .uk. Il primo può essere ripreso alla fine di un contratto da un funzionario che decide di non rinnovare. Il secondo non ha contratto, non ha scadenza e non ha rinnovo, e gli unici che siano mai riusciti a disciplinarlo hanno dovuto organizzare un voto dei membri per farlo.\nNel marzo 2024, con il PDNS perso e .uk in contrazione, Fletcher ha annunciato una ristrutturazione con fino a 70 posti a rischio.\nE poi la frase che chiude il cerchio. Fletcher ha osservato che i prezzi dei domini «cannot be held at the level set in January 2020 indefinitely.»\nGli aumenti dei prezzi di .uk erano tra le cose contro cui i membri si erano ribellati. Cinque anni dopo, con la diversificazione chiusa in perdita, il contratto di punta perso a favore di un offerente più economico e le registrazioni in calo, la risposta che si sta preparando è alzare di nuovo il prezzo di .uk.\nE la visione da dentro non si è ripresa I membri hanno ottenuto il loro cambio di consiglio. Se abbiano riavuto l\u0026rsquo;organizzazione è un\u0026rsquo;altra questione.\nAl 25 agosto 2026 la valutazione di Nominet su Glassdoor è di 2,9 su 5 su 97 recensioni, con il 31% che la consiglierebbe, il 22% positivo sulle prospettive dell\u0026rsquo;azienda e il 29% che approva l\u0026rsquo;amministratore delegato. La categoria con il punteggio più basso è il senior management, a 2,3. Chi recensisce dà voti alti ai colleghi e al lavoro. Quello a cui non dà voti alti è il livello sopra di loro.\nÈ un punteggio mediocre più che una condanna, e va letto per quello che è: un campione autoselezionato su un sito pubblico. Ma la forma della lamentela è riconoscibilmente quella dei membri nel 2021: una strategia che nessuno sa spiegare, ricompense che salgono verso l\u0026rsquo;alto, e chi gestisce il registro nazionale che non viene interpellato.\nAmministratore delegato diverso. Stessa lamentela.\nCosa dice su chi governa un ccTLD Torna alla domanda dell\u0026rsquo;inizio.\nICANN non avrebbe potuto fare niente di tutto questo. Non aveva nessun contratto su .uk, nessun titolo e nessun meccanismo oltre allo scrivere una lettera. Tutto quello che c\u0026rsquo;è nell\u0026rsquo;articolo su ICANN sulla Specification 6, la compliance e il monitoraggio si applicava ai gTLD di Nominet e non alla zona che conta davvero per il paese.\nNon l\u0026rsquo;ha fatto nemmeno il governo britannico, e vale la pena chiarire perché, visto che l\u0026rsquo;idea comune è sbagliata. .uk non viene assegnato con un contratto governativo. Non c\u0026rsquo;è una gara, non c\u0026rsquo;è una data di rinnovo e non c\u0026rsquo;è un concorrente in attesa di fare un\u0026rsquo;offerta. Nominet detiene la delega da IANA, come ogni altro registro di codice nazionale detiene la propria, e nessuno la riassegna ogni pochi anni.\nQuello che il governo ha è un potere di riserva, e quasi nessuno sa che esiste.\nLe sezioni dalla 19 alla 21 del Digital Economy Act 2010 permettono al Secretary of State di intervenire quando c\u0026rsquo;è un «serious relevant failure» presso un registro di domini internet qualificato: un fallimento che danneggia la disponibilità o la reputazione delle comunicazioni britanniche, o gli interessi dei consumatori o del pubblico. Nominet è quel registro. Dopo un preavviso e la possibilità di presentare osservazioni, il Secretary of State può nominare un gestore del registro, oppure chiedere a un tribunale di modificarne lo statuto.\nÈ molto di più di quanto ICANN abbia mai avuto su qualsiasi ccTLD. Ed ecco la parte su cui vale la pena riflettere: quelle due sezioni sono rimaste dormienti per quattordici anni, e sono entrate in vigore il 6 aprile 2024, lo stesso anno in cui Nominet ha perso il contratto NCSC e annunciato 70 esuberi.\nNon dirò che questi fatti siano collegati, perché non so se lo siano. Agli atti c\u0026rsquo;è che il potere di mettere un gestore a capo del registro .uk è diventato operativo nel 2024, e non lo era stato per i quattordici anni precedenti.\nE questa è solo la via nazionale. Ce n\u0026rsquo;è una seconda, ed è il motivo per cui nessun operatore di ccTLD al mondo detiene la propria delega per diritto.\nUna delega di codice nazionale si può spostare. IANA riassegna i ccTLD, in base all\u0026rsquo;RFC 1591, all\u0026rsquo;ICP-1 e ai GAC Principles, e l\u0026rsquo;ha fatto più volte: .kz, .iq, .za, .gd, .gw e altri. I GAC Principles stabiliscono che ogni governo ha la responsabilità ultima sulle politiche pubbliche nazionali nel proprio territorio, e in pratica IANA tratta il parere del governo riconosciuto come un fattore di primo piano in qualsiasi trasferimento del dominio del suo paese.\nL\u0026rsquo;Australia, come visto sopra, l\u0026rsquo;ha messo per iscritto nel 2018: o la riforma o la delega si sposta.\nQuindi un governo britannico che decidesse che .uk deve stare altrove non verrebbe bloccato. Non sarebbe immediato, non è un potere che si esercita con un annuncio, e la comunità internet locale verrebbe consultata. Ma il meccanismo esiste, i precedenti esistono, e l\u0026rsquo;opinione del governo è il singolo fattore più pesante.\nIl che mette .uk in una posizione che vale la pena dire chiaramente. Le comunicazioni sono uno dei settori delle infrastrutture nazionali critiche del Regno Unito, e lo Stato tratta il DNS di conseguenza: l\u0026rsquo;NCSC compra DNS protettivo per il settore pubblico da anni. Un registro che gestisce infrastruttura nazionale critica, il cui governo può nominarne un gestore a livello nazionale e la cui parola peserebbe in modo decisivo in una riassegnazione a livello internazionale, non detiene la propria delega come una proprietà. La detiene per tolleranza, e la tolleranza è condizionata al non mettere in imbarazzo nessuno.\nA disciplinarlo è stato un voto dei membri, di misura, sei anni dopo l\u0026rsquo;inizio del problema, dopo una campagna condotta da un\u0026rsquo;azienda di hosting a cui hanno dovuto consegnare i dati dei propri membri su 500 fogli di carta perché potesse esporre le proprie ragioni.\nÈ un meccanismo di responsabilità migliore di qualsiasi cosa abbia ICANN. Ha rimosso l\u0026rsquo;amministratore delegato e il presidente di un registro nazionale, cosa che nessun processo ICANN ha mai fatto a nessuno. È anche lento, conflittuale, dipende dal fatto che qualcuno decida di dedicarci un anno della propria vita, ed è mancato il fallimento per un paio di punti percentuali.\nChe è più o meno dove si trova la governance del DNS ovunque. I meccanismi che funzionano sono quelli che qualcuno con le risorse sceglie di azionare. .cm ha messo un wildcard su un intero dominio di primo livello per anni perché nessuno con titolo si è opposto. Freenom si è fermata solo quando Meta le ha fatto causa. .uk ha cambiato rotta perché un\u0026rsquo;azienda di hosting ha organizzato un voto.\nNiente di tutto questo è governance nel senso che la parola implica. È chi si è presentato per caso.\nUn pensiero libero per finire Tutto quello che c\u0026rsquo;è sopra è documentato o indicato come esperienza mia. Quest\u0026rsquo;ultima parte non è né l\u0026rsquo;una né l\u0026rsquo;altra. È quello che penso, e sei libero di non essere d\u0026rsquo;accordo.\nHo iniziato a Nominet nel 2017, cioè nove anni fa. Russell Haworth è arrivato nel 2015, cioè undici. È abbastanza tempo perché un\u0026rsquo;organizzazione abbia imparato qualcosa.\nL\u0026rsquo;ha fatto?\nSulla carta, sì. Il consiglio rimosso con il voto non c\u0026rsquo;è più. Le ambizioni commerciali nella sicurezza informatica sono state chiuse. Il ramo benefico è diventato indipendente e va ancora avanti con il proprio nome. I membri hanno usato l\u0026rsquo;unico meccanismo che avevano e ha funzionato.\nPoi guarda cosa hai davvero davanti. .uk è più piccolo di un quinto rispetto al 2019 e continua a ridursi. Il contratto che la diversificazione alla fine ha prodotto è andato a un offerente più economico. Settanta posti se ne sono andati con lui. L\u0026rsquo;amministratore delegato fa sapere che i prezzi di .uk non possono restare ai livelli del 2020 all\u0026rsquo;infinito, che è la stessa leva che ha contribuito a far nascere i guai in primo luogo. E il personale dà al senior management 2,3 su 5, con il 29% che approva l\u0026rsquo;amministratore delegato. Un amministratore delegato diverso, e riconoscibilmente la stessa lamentela.\nQuindi la mia risposta onesta è che sono cambiate le persone e non sono convinto che sia cambiata l\u0026rsquo;organizzazione.\nVale la pena notare dove è andato Haworth dopo, perché non è una critica ed è proprio per questo che conta. Prima di Nominet aveva passato quattordici anni in Thomson Reuters, nei dati finanziari. Dopo è andato a NBS, poi Byggfakta, poi Acclaro: aziende in abbonamento con clienti professionali, ricavi ricorrenti e potere sui prezzi. NBS ha fatturato 45 milioni di sterline con 23,6 milioni di EBITDA nel 2023. Sono buoni numeri, e ottenerli è il motivo per cui esiste un amministratore delegato commerciale.\nChe è proprio il punto, e non devi credere sulla parola alla mia descrizione. Il suo stesso profilo professionale lo presenta come amministratore delegato per aziende B2B sostenute da private equity. È il lavoro che fa, lo dice lui stesso, ed è chiaramente bravo a farlo.\nÈ un operatore commerciale e ha fatto cose commerciali. L\u0026rsquo;errore non è mai stato il suo temperamento: è stato mettere quel temperamento a capo di un\u0026rsquo;organizzazione il cui surplus non era capitale e non avrebbe mai dovuto esserlo, e poi non lasciare nessuno nella posizione di controllarlo per sei anni.\nAnche se NBS merita un secondo sguardo, perché la sua forma è familiare.\nNBS vende Chorus, lo strumento di specifica con cui lavora la maggior parte degli studi di architettura britannici. È integrato nei flussi di lavoro Revit e ISO 19650, e non c\u0026rsquo;è un\u0026rsquo;alternativa seria: gli architetti lo descrivono come uno strumento indispensabile che devono semplicemente continuare a pagare. La licenza di un professionista è passata da 1.385 sterline nel 2015 a 7.350, cosa che l\u0026rsquo;Architects\u0026rsquo; Journal ha riportato come un aumento del 400% in un decennio. Non c\u0026rsquo;è una tariffa per i piccoli studi, quindi un professionista singolo paga per postazione quanto uno studio di 200 persone. Le parole della stampa di settore sono «rip-off increases» e «well above inflation», insieme all\u0026rsquo;osservazione che c\u0026rsquo;è poca alternativa al pagare.\nAttenzione all\u0026rsquo;attribuzione, perché le date non tornano come vorresti. Chorus è stato lanciato nel 2018. RIBA ha venduto NBS tra il 2018 e il 2020 per circa 172 milioni di sterline, e un ex presidente di RIBA ha detto che non avrebbe mai dovuto cederne il controllo, una frase che ha una certa eco. Haworth ha guidato l\u0026rsquo;azienda da ottobre 2021 a ottobre 2024. Gli aumenti più forti riportati, e le proteste più rumorose, sono del 2024 e del 2025, dopo che se n\u0026rsquo;era andato, e l\u0026rsquo;amministratore delegato che oggi li difende pubblicamente è un altro.\nQuindi questa non è una prova su un uomo. È una prova su una forma.\nUn ente professionale vende lo strumento senza cui i suoi membri non possono lavorare. L\u0026rsquo;acquirente scopre che i clienti non possono andarsene. Il prezzo sale ben oltre l\u0026rsquo;inflazione, anno dopo anno, e le proteste non portano da nessuna parte perché non c\u0026rsquo;è nessun posto dove possano andare. Questo è .uk, ed è quello che .org stava per diventare quando ICANN ha tolto i tetti ai prezzi quattro mesi prima che un veicolo di private equity offrisse 1,135 miliardi di dollari per comprarlo.\nChe è la vera lezione, e non è comoda per nessuno che sperasse che si trattasse di un solo dirigente. Clienti professionali vincolati, uno strumento essenziale, nessun fornitore alternativo: quell\u0026rsquo;assetto produce lo stesso risultato chiunque lo gestisca, a meno che qualcosa non si metta di traverso. A Nominet, alla fine, lo hanno fatto i membri. A NBS non c\u0026rsquo;è nessuno: l\u0026rsquo;ente professionale che avrebbe potuto svolgere quel ruolo ha venduto la sua quota e se n\u0026rsquo;è andato con 172 milioni di sterline.\nNon credo nemmeno che si tratti davvero di un individuo. Metti chiunque a capo di un monopolio di proprietà dei membri che gestisce un bene nazionale senza un regolatore che guardi, dagli un surplus senza un proprietario evidente, e la spinta sarà sempre verso lo spenderlo in qualcosa di più interessante della cosa che lo genera. Gestire bene .uk non è una storia che puoi raccontare a una conferenza. Partecipare alla gara per l\u0026rsquo;Australia sì.\nLa correzione, quando arriva, deve venire dai membri, il che vuol dire che qualcuno deve rinunciare a un anno della propria vita per organizzare un voto contro una dirigenza in carica che spende i soldi di quegli stessi membri per opporsi. È successo una volta, ed è passato per 2,7 punti percentuali con un\u0026rsquo;affluenza del 53%. Nessuno progetterebbe così un meccanismo di responsabilità.\nI due veri paracadute sono rimasti inutilizzati per tutto il tempo. I poteri del Digital Economy Act sono entrati in vigore solo nel 2024. Una riassegnazione non è mai stata proposta seriamente da nessuno.\nNove anni dopo, la cosa che vorrei sapere, e che da fuori non posso capire, è se qualcuno a Nominet oggi potrebbe dire ad alta voce in una riunione, siamo un ente senza scopo di lucro, dovremmo davvero spendere soldi per questo?, ed essere ancora lì a lavorare un anno dopo.\nSe la risposta è sì, ha imparato qualcosa. Se è no, allora nel 2021 sono cambiati solo i nomi.\n","permalink":"https://blogs.damiendye.uk/it/dns/what-happened-at-nominet/","summary":"Il registro .uk appartiene ai suoi membri, e nel marzo 2021 hanno votato la rimozione di metà del consiglio. Com\u0026rsquo;era davvero la situazione vista da dentro, perché gestire .uk insieme a decine di gTLD ha determinato il modo in cui veniva gestito, e come un registro senza regolatore è finito disciplinato dagli unici che potevano farlo.","title":"Cosa è successo a Nominet"},{"content":"Parte 1 di 8. Questa serie è scritta in modo semplice, con frasi brevi e parole di tutti i giorni.\nDi cosa parla questo articolo Cosa è cambiato nel modo in cui compri la tecnologia. Perché è cambiato. Perché lasciare un fornitore è diventato più difficile. Perché l\u0026rsquo;open source non l\u0026rsquo;ha fermato. Dove è andata a finire tutta la faccenda. Il cambiamento Vent\u0026rsquo;anni fa il software lo compravi.\nPagavi una volta. Quella copia era tua. Potevi continuare a usarla finché funzionava.\nOggi la maggior parte del software è in affitto. Paghi ogni anno solo per continuare a usarlo.\nSmetti di pagare, e smette di funzionare. Non possiedi niente.\nÈ questo un abbonamento. Un abbonamento è un pagamento che fai di continuo per tenerti un servizio.\nLo stesso è successo all\u0026rsquo;informatica stessa. Prima i server li compravi. Ora molte organizzazioni affittano la loro capacità di calcolo da un cloud provider.\nUn cloud provider è un\u0026rsquo;azienda che fa girare i computer per te, nei suoi edifici.\nPerché è cambiato Siamo onesti su questo, perché conta. È cambiato perché affittare spesso era l\u0026rsquo;affare migliore.\nComprare server costa molto all\u0026rsquo;inizio. Affittarli costa pochissimo all\u0026rsquo;inizio.\nI servizi cloud erano affidabili e veloci da attivare. Piccoli team hanno avuto strumenti che prima solo le grandi aziende potevano permettersi.\nGli abbonamenti hanno portato anche aggiornamenti regolari. Niente più grandi stravolgimenti da pianificare ogni pochi anni.\nCosì la maggior parte delle organizzazioni si è spostata, e aveva buoni motivi. Nessuno è stato costretto.\nLa domanda che si pone questa serie viene dopo. Riguarda cosa succede quando andare altrove è diventato difficile.\nPerché andarsene è diventato più difficile Ecco la parte che conta.\nOgni passo di questo cambiamento ha spostato il punto in cui era difficile andarsene.\nAll\u0026rsquo;inizio stava nel formato dei file. Un formato di file è il modo in cui un programma salva il tuo lavoro. Se solo un programma poteva aprire i tuoi file, continuavi a comprare quel programma.\nI formati aperti hanno risolto questo. Oggi la maggior parte dei documenti si apre in più di un programma.\nCosì la parte difficile si è spostata. È passata all\u0026rsquo;interfaccia.\nUn\u0026rsquo;interfaccia è il modo in cui un software parla con un altro. Costruisci tutti i tuoi sistemi intorno all\u0026rsquo;interfaccia di un fornitore, e cambiare fornitore vuol dire riscrivere tutto.\nPoi si è spostata di nuovo, sui tuoi dati.\nSpostare una piccola quantità di dati è abbastanza facile. Spostarne anni è lento, e alcuni provider ti fanno pagare per portarli fuori.\nOgni spostamento ha reso il software in sé meno importante. Per questo oggi conta quanto lavoro ti servirebbe per andartene.\nDove è stata, nel tempo, la difficoltà di andarsene Allora Poi Ora I tuoi dati Formato dei file Interfaccia Il programma I tuoi dati Formato dei file Interfaccia Il programma I tuoi dati Formato dei file Interfaccia Il programma Il riquadro blu è la parte difficile da cambiare. Ogni volta che un livello è stato aperto, la difficoltà è passata al successivo. Gli stessi livelli, 3 volte. La parte difficile da cambiare è salita: prima il formato dei file, poi l\u0026rsquo;interfaccia, poi i dati. Perché l\u0026rsquo;open source non l\u0026rsquo;ha fermato Il software open source è software il cui codice chiunque può leggere, usare e modificare.\nMolti si aspettavano che risolvesse questo problema. Ne ha risolto una parte reale, ma non quella che penseresti.\nL\u0026rsquo;open source ha vinto. Gran parte di internet gira su di esso. Il codice della maggior parte dei pezzi importanti è lì da leggere.\nLa parte difficile dell\u0026rsquo;andarsene però non è sparita, perché si era già spostata altrove.\nPuoi leggere ogni riga di un database. Ma non puoi comunque portare via facilmente 5 anni di dati dal servizio gestito che lo fa girare.\nUn servizio gestito è quando un provider fa girare il software per te, così non devi farlo tu.\nIl codice è aperto. Il servizio no.\nC\u0026rsquo;è un secondo punto qui, ed è giusto farlo.\nMolto open source è tenuto in vita da volontari che non vengono pagati. Le grandi aziende costruiscono prodotti su quel lavoro.\nNel 2024 si è scoperto che uno strumento di compressione molto usato conteneva codice dannoso nascosto. Quello strumento era mantenuto da 1 persona non pagata. Bruce Schneier e altri lo hanno descritto in dettaglio.\nLa lezione non è che l\u0026rsquo;open source sia rischioso. È che il lavoro condiviso su cui tutti si appoggiano va pagato, e spesso non lo è.\nDove è andata a finire Metti insieme questi passi e arrivi a dove siamo oggi.\nUn piccolo numero di aziende fornisce i servizi da cui dipende la maggior parte delle organizzazioni.\nLa maggior parte di quelle aziende sta in 1 paese, gli Stati Uniti.\nLe ricerche raccolte dal progetto EuroStack stimano che i provider non europei abbiano circa l'85% del mercato cloud europeo.\nNessuna singola decisione ha fatto questo. È il risultato di moltissime scelte sensate, fatte una alla volta, in 20 anni.\nÈ questo che lo rende una tendenza e non un evento.\nCosa significa per te Niente di tutto questo dice che il software americano sia scadente. Molto è ottimo, ed è proprio così che è arrivato ovunque.\nVuol dire però che 1 domanda conta più di prima.\nQuanto tempo ti servirebbe per passare a un altro fornitore?\nQuel numero decide parecchio, e la parte 2 spiega perché.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/technology-you-rent/","summary":"Vent\u0026rsquo;anni fa compravi il software e la copia era tua. Ora lo affitti, e le condizioni le fissa il fornitore. La Parte 1 di 8 ripercorre come è successo, e perché ogni passo ha reso più difficile andare altrove.","title":"Come la tecnologia è diventata qualcosa che affitti"},{"content":"Parte 2 di 8. La Parte 1 ha trattato come l\u0026rsquo;affitto ha sostituito l\u0026rsquo;acquisto.\nDi cosa parla questo articolo Come si fissa il prezzo quando andarsene è difficile. Dove vengono tassati i profitti. Quale legge si applica ai tuoi dati. Come le decisioni commerciali arrivano al tuo hardware. Cosa succede se un servizio semplicemente si ferma. 1. Il prezzo segue il tuo costo d\u0026rsquo;uscita Comincia da quello che la maggior parte delle organizzazioni ha già vissuto.\nNel 2023 Broadcom ha comprato VMware. VMware fa il software usato per far girare molti server virtuali su 1 server fisico.\nBroadcom ha poi smesso di vendere licenze perpetue. I clienti hanno dovuto passare agli abbonamenti.\nPer molti di loro i prezzi sono saliti bruscamente. AT\u0026amp;T ha dichiarato in atti giudiziari che i suoi costi sarebbero aumentati di circa il 1.050%.\nCISPE è un\u0026rsquo;associazione di categoria dei cloud provider europei. Ha presentato un reclamo alla Commissione europea sulle modifiche, con cifre di dimensioni simili.\nNel marzo 2026 CISPE ha presentato un nuovo reclamo, dopo la chiusura del programma partner europeo. The Register ha riportato cosa ne pensavano i provider.\nQui non è stato dimostrato niente di illegale. I reclami sono ancora all\u0026rsquo;esame.\nMa lo schema è abbastanza chiaro da imparare qualcosa.\nUn rinnovo è una trattativa. La tua posizione dipende da 1 cosa: quanto facilmente potresti andartene.\nSe andartene ti richiedesse 3 anni, hai pochissimo margine per dire di no.\nE non riguarda solo i fornitori americani, sia chiaro. Qualsiasi fornitore in quella posizione ha lo stesso vantaggio.\n2. Dove vengono tassati i profitti Il secondo costo è più difficile da vedere.\nMolte grandi aziende tecnologiche vendono ai clienti in 1 paese e registrano il profitto in un altro.\nLa società locale viene spesso trattata come un fornitore di servizi della capogruppo. Gran parte del profitto va altrove.\nCosì hai grandi vendite in un paese e un piccolo conto delle tasse in quello stesso paese.\nTaxWatch è un gruppo di ricerca del Regno Unito. Ha stimato che 7 grandi gruppi tecnologici abbiano realizzato quasi 15 miliardi di sterline di profitto dai clienti britannici nel 2021. Ha stimato che i loro meccanismi abbiano tolto circa 2 miliardi di sterline all\u0026rsquo;imposta sulle società dovuta nel Regno Unito.\nL\u0026rsquo;Europa ha affrontato questi meccanismi. I risultati sono misti, ed è giusto mostrare entrambi i lati.\nApple ha perso. Nel settembre 2024 la Corte di giustizia dell\u0026rsquo;Unione europea ha confermato che gli accordi fiscali irlandesi erano aiuti di Stato illegali. L\u0026rsquo;Irlanda ha recuperato circa 14 miliardi di euro. Amazon ha vinto. Nel dicembre 2023 la stessa corte ha respinto l\u0026rsquo;impugnazione della Commissione europea in un caso simile riguardante il Lussemburgo. C\u0026rsquo;è anche un accordo globale, chiamato Pillar Two. Fissa un\u0026rsquo;aliquota minima del 15%.\nNel gennaio 2026 l\u0026rsquo;Organizzazione per la cooperazione e lo sviluppo economico ha pubblicato un accordo side-by-side. In base a questo, le aziende con sede negli Stati Uniti seguono le regole statunitensi invece della maggior parte di quelle globali.\nAlcuni paesi hanno provato con le proprie imposte sui servizi digitali. Il Canada ne ha approvata una, poi l\u0026rsquo;ha abbandonata nel giugno 2025 dopo che gli Stati Uniti avevano interrotto i negoziati commerciali per questo.\nQuindi i soldi si guadagnano in un posto. Dove vengono tassati si decide da un\u0026rsquo;altra parte.\n3. Quale legge si applica Questa è fraintesa più di qualsiasi altra, quindi vale la pena essere precisi.\nMolti credono che tenere i dati in Europa li tenga sotto la legge europea e nient\u0026rsquo;altro.\nNon è proprio così. Quello che conta è chi controlla l\u0026rsquo;azienda che li detiene.\nIl CLOUD Act è una legge statunitense del 2018. Obbliga un provider statunitense a consegnare i dati che controlla, ovunque si trovino. Il Dipartimento di Giustizia ne espone i dettagli.\nQuindi un data centre a Francoforte, gestito da un\u0026rsquo;azienda di proprietà statunitense, può comunque essere raggiunto da un ordine legale statunitense.\n«I nostri dati restano in Europa» e «i nostri dati sono fuori dalla legge statunitense» sono 2 affermazioni diverse. I fornitori attenti fanno solo la prima.\nUn ordine legale segue chi controlla l'azienda, non dove sta l'edificio Data centre in Europa Qui sono conservati i tuoi dati Il sito segue la legge UE Capogruppo Con sede in un altro paese Controlla i dati gestisce il sito Un ordine legale arriva qui L'ordine non deve andare all'edificio. Va a chi controlla i dati. L\u0026rsquo;edificio è in Europa. L\u0026rsquo;azienda che lo gestisce appartiene a qualcuno altrove. Un ordine legale va al proprietario, non all\u0026rsquo;edificio. Anche qui le regole si stanno spostando, in entrambe le direzioni.\nLa Section 702 è una legge statunitense sulla sorveglianza. È scaduta il 2026-06-12 quando il Congresso non l\u0026rsquo;ha rinnovata.\nQuesto non vuol dire che la raccolta si sia fermata. Le autorizzazioni già concesse continuano fino alla loro scadenza, prevista intorno al marzo 2027. Il Brennan Center ne tiene traccia.\nC\u0026rsquo;è poi l\u0026rsquo;EU–US Data Privacy Framework. Permette ai dati personali di passare dall\u0026rsquo;Europa agli Stati Uniti.\nUn ricorso contro di esso è stato respinto nel settembre 2025. Quella decisione è ora impugnata.\nOggi il framework è valido. È anche il terzo del suo genere, perché i 2 precedenti sono stati annullati.\nSe un meccanismo di trasferimento cade, il costo ricade sull\u0026rsquo;organizzazione europea che lo usa. Nel 2023 la Data Protection Commission irlandese ha multato Meta per 1,2 miliardi di euro per i trasferimenti verso gli Stati Uniti.\nC\u0026rsquo;è una risposta calma e pratica a tutto questo, e vale la pena conoscerla.\nSe il tuo provider tiene le chiavi dei tuoi dati, il tuo provider può rispondere a un ordine legale.\nTieni tu le chiavi e l\u0026rsquo;ordine deve arrivare a te. Per questo la decisione resta sotto la legge del tuo paese.\n4. Le decisioni commerciali arrivano al tuo hardware La tecnologia oggi fa parte della politica commerciale.\nNel gennaio 2026 gli Stati Uniti hanno imposto un dazio del 25% su un gruppo ristretto di chip avanzati e sui prodotti che li contengono. È stata annunciata una seconda fase.\nSe il tuo hardware ci rientra cambia nel tempo. Il tuo fornitore è la persona giusta a cui chiederlo.\nAnche i rapporti commerciali possono girare in fretta. I negoziati tra Stati Uniti e Canada sono saltati il 2026-08-22, con nuovi dazi del 50%. Il Canada ha annunciato misure di risposta.\nIl Primo ministro canadese ha esposto pubblicamente i motivi.\nIl punto per te è ristretto, e non dipende dalla politica di nessuno.\nIl costo e la disponibilità dell\u0026rsquo;hardware possono cambiare per una decisione presa in un altro paese, con poco preavviso.\nVale la pena tenerne conto in un piano a 3 anni.\n5. Un servizio può fermarsi per motivi che non sono tuoi Quest\u0026rsquo;ultimo è improbabile per la maggior parte delle organizzazioni. È qui perché funziona in modo diverso dagli altri.\nNel febbraio 2025 gli Stati Uniti hanno imposto sanzioni al Procuratore della Corte penale internazionale.\nIl Procuratore ha poi perso l\u0026rsquo;uso del suo account email Microsoft, ed è passato a un provider svizzero.\nIl presidente di Microsoft ha detto pubblicamente che l\u0026rsquo;azienda non aveva chiuso l\u0026rsquo;account. Cosa sia successo esattamente è ancora contestato, ed è giusto dirlo.\nQuello che non è contestato è l\u0026rsquo;effetto. La testata tecnologica tedesca heise l\u0026rsquo;ha descritto come un punto di svolta per la sovranità digitale in Europa. È stato sollevato al Parlamento europeo.\nEntro la fine del 2025 la Corte era passata a openDesk, un\u0026rsquo;alternativa open source.\nQui conta il meccanismo.\nNessuna bolletta non pagata. Nessuna regola violata. Niente che non andasse nel servizio.\nUn governo ha preso una decisione, e un fornitore ha dovuto capire cosa poteva continuare a fornire nel rispetto della legge.\nIl tuo contratto è con il tuo fornitore. I doveri legali del tuo fornitore sono verso il suo governo.\nNon puoi monitorare una cosa del genere. Non c\u0026rsquo;è una spia che si accende su un cruscotto.\nPer la maggior parte dei lettori il rischio è piccolo, e accettarlo è ragionevole. È ragionevole solo se ci hai pensato.\nLo schema che accomuna tutti e 5 Questi 5 costi sono molto diversi tra loro.\nIl primo è quello che incontrerai più probabilmente. L\u0026rsquo;ultimo potresti non incontrarlo mai.\nMa hanno 1 cosa in comune.\nOgnuno peggiora quanto più ti è difficile andartene.\nUn aumento di prezzo è una seccatura se hai un altro posto dove andare. È grave se non ce l\u0026rsquo;hai.\nÈ questo il filo che li attraversa tutti, e porta da qualche parte di utile.\nLa domanda su cui vale la pena lavorare non è in quale paese si trova il tuo fornitore. È quanto in fretta potresti cambiare idea.\nLa Parte 3 guarda a chi altro paga il software che usi.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/what-renting-costs/","summary":"Quando cambiare fornitore è difficile, i costi cambiano forma. Il prezzo segue il tuo costo d\u0026rsquo;uscita. I profitti si dichiarano in un paese e si guadagnano in un altro. La legge segue chi possiede l\u0026rsquo;azienda, non dove sta l\u0026rsquo;edificio. La Parte 2 di 8, in linguaggio semplice.","title":"Quanto ti costa affittare la tecnologia"},{"content":"Parte 3 di 8. La Parte 2 ha esposto cosa ti costa la dipendenza.\nDi cosa parla questo articolo Gli anni in cui l\u0026rsquo;open source è stato combattuto. Perché la battaglia si è fermata. Chi tiene in vita il software oggi. Cosa è successo quando chi lo faceva ha provato a farsi pagare. Cosa succede alle aziende dopo che vengono comprate. Cosa significa per te. Gli anni in cui l\u0026rsquo;open source è stato combattuto L\u0026rsquo;open source è software il cui codice chiunque può leggere, usare e modificare.\nOggi è normale. Per circa 15 anni è stato trattato come una minaccia.\nNell\u0026rsquo;ottobre 1998 è trapelato un memo interno di Microsoft. Eric Raymond lo ha pubblicato con delle note, ed è diventato noto come i documenti di Halloween.\nIl memo era onesto sulla qualità dell\u0026rsquo;open source. Definiva notevole il modo in cui migliaia di persone ci lavorano insieme.\nPoi esponeva cosa farci. Una frase spiega moltissimo:\nBy extending these protocols and developing new protocols, we can deny OSS projects entry into the market.\nUn protocollo è un modo concordato con cui 2 sistemi parlano tra loro.\nQuindi il piano non era costruire un prodotto migliore. Il piano era cambiare i punti di giunzione tra i prodotti, così che un concorrente non potesse essere messo al loro posto.\nNei 10 anni successivi sono seguiti diversi altri passi.\nNel 2003 un\u0026rsquo;azienda chiamata SCO ha sostenuto che Linux conteneva codice di sua proprietà. La causa si è trascinata per anni e SCO non ha vinto. Finché è durata, molte organizzazioni non erano sicure che adottare Linux fosse prudente.\nMicrosoft ha anche firmato accordi sui brevetti con i produttori di telefoni. Per diversi anni ha incassato un pagamento su ogni telefono venduto con Android, un sistema operativo che non aveva scritto.\nNel 2008 i formati di documento di Microsoft sono stati approvati come standard internazionale. Diversi enti nazionali di standardizzazione hanno contestato il modo in cui è stato gestito.\nL\u0026rsquo;Europa ha reagito su una parte di tutto questo. La Commissione europea ha multato Microsoft per 497 milioni di euro nel 2004 per le informazioni di cui i concorrenti avevano bisogno per lavorare con i suoi prodotti.\nHa multato di nuovo l\u0026rsquo;azienda per 561 milioni di euro nel 2013, perché un rimedio concordato non era stato messo in atto.\nQuella seconda multa merita un attimo. Il problema non era nuovo. La soluzione concordata semplicemente non era stata fatta.\nPerché la battaglia si è fermata Si è fermata intorno al 2014, perché non aveva funzionato.\nLinux era diventato il software su cui gira la maggior parte dei server. Fa girare anche la maggior parte dei servizi cloud e la maggior parte dei telefoni cellulari.\nNon puoi togliere di mezzo per vie legali qualcosa su cui è costruito tutto il resto.\nCosì l\u0026rsquo;approccio si è capovolto.\nMicrosoft è entrata nella Linux Foundation. Ha rilasciato come open source alcuni dei suoi strumenti. Nel 2018 ha comprato GitHub, il sito dove viene scritta gran parte dell\u0026rsquo;open source del mondo.\nAmazon e Google hanno costruito business enormi sull\u0026rsquo;open source, e oggi tutte e 3 le aziende ci reinvestono moltissimo lavoro.\nQuel lavoro è reale, e il software ne esce migliore. Sarebbe sciocco fingere il contrario.\nMa 1 cosa non è cambiata.\nLe aziende che un tempo cercavano di frenare l\u0026rsquo;open source oggi sono tra i suoi maggiori finanziatori. E sono ancora le aziende più grandi del mercato.\nL\u0026rsquo;open source ha vinto la discussione tecnica. Non ha cambiato chi ha le carte migliori in mano.\nChi tiene in vita il software oggi Ecco la parte che sorprende chi sta fuori dal mondo del software.\nMoltissimo open source di uso diffuso è tenuto in vita da team piccolissimi. Una parte da 1 sola persona, nel tempo libero, per niente.\nQuegli stessi pezzi stanno poi dentro prodotti venduti da aziende enormi.\nNel dicembre 2021 è emerso un difetto in Log4j, un piccolo strumento che i programmi Java usano per registrare cosa stanno facendo.\nIl difetto permetteva agli attaccanti di eseguire il proprio codice sui sistemi colpiti. Ha colpito un numero enorme di organizzazioni tutte insieme. Il National Cyber Security Centre britannico ha pubblicato indicazioni in merito.\nLo strumento era mantenuto da un piccolo gruppo di volontari.\nLa lezione non è che l\u0026rsquo;open source sia rischioso. Gran parte è ottimo, e aperto all\u0026rsquo;ispezione in un modo in cui il software chiuso non lo è mai.\nLa lezione riguarda il pagare le cose. Il lavoro condiviso su cui si appoggiano molte imprese ha bisogno di finanziamenti, e spesso non li riceve.\nQuesto si può sistemare, e alcune organizzazioni lo sistemano. Pagare un maintainer, o finanziare una fondazione, di solito costa pochissimo rispetto a quanto il software ti fa risparmiare.\nCosa è successo quando chi lo faceva ha provato a farsi pagare Alcune aziende sviluppano open source e vendono un servizio a pagamento intorno a esso. Ha funzionato abbastanza bene per parecchio tempo.\nÈ diventato più difficile quando i cloud provider hanno cominciato a offrire lo stesso software come servizio proprio.\nIl provider si prendeva i ricavi. L\u0026rsquo;azienda che aveva scritto il software no.\nDiverse di loro hanno risposto cambiando licenza, così che altri non potessero offrire il loro software come servizio concorrente.\nMongoDB ha cambiato licenza nel 2018. Elastic l\u0026rsquo;ha seguita nel 2021. HashiCorp ha cambiato nel 2023. Redis ha cambiato nel 2024. La Open Source Initiative stabilisce la definizione accettata di open source. Ha stabilito che 1 di queste nuove licenze non la rispettava.\nMolte distribuzioni Linux hanno poi eliminato il software coinvolto.\nLa comunità più ampia ha preso copie delle ultime versioni aperte e le ha portate avanti separatamente. Una copia del genere si chiama fork.\nOpenSearch porta avanti il codice precedente di Elasticsearch. OpenTofu porta avanti il codice precedente di Terraform. Valkey porta avanti il codice precedente di Redis. Elastic e Redis da allora sono tornate entrambe a licenze aperte.\nVale la pena guardare com\u0026rsquo;è finita, perché nessuno dei coinvolti ha ottenuto quello che voleva.\nUn\u0026rsquo;azienda ha costruito software utile. Un\u0026rsquo;azienda più grande ci ha guadagnato più di chi l\u0026rsquo;aveva fatto. Chi l\u0026rsquo;aveva fatto ha ristretto la licenza per sopravvivere. La comunità ha obiettato, a ragione, che non era più open source. È comparso un fork, spesso sostenuto dalle aziende più grandi.\nAlla fine il software è ancora libero da usare. I fork sono per lo più guidati dai giocatori più grandi. L\u0026rsquo;impresa che aveva pagato il lavoro originale è più debole di quando è partita.\nCosa succede alle aziende dopo che vengono comprate Il secondo modo in cui il valore esce da un\u0026rsquo;impresa non ha niente a che vedere con le licenze software.\nRiguarda il modo in cui un\u0026rsquo;azienda viene comprata.\nEcco lo schema, detto chiaramente.\nUn acquirente prende in prestito gran parte del prezzo d\u0026rsquo;acquisto. Il prestito viene poi garantito con l\u0026rsquo;azienda che si sta comprando. Così l\u0026rsquo;azienda finisce per portarsi il debito usato per comprarla.\nL\u0026rsquo;acquirente può poi vendere gli edifici dell\u0026rsquo;azienda e riaffittarli. I soldi incassati possono essere distribuiti ai nuovi proprietari. L\u0026rsquo;azienda ora paga l\u0026rsquo;affitto per locali che prima possedeva.\nI costi che non si vedono quest\u0026rsquo;anno vengono tagliati. Di solito vuol dire manutenzione, organico, ricerca e sviluppo prodotto.\nPoi l\u0026rsquo;azienda viene rivenduta.\nLa Bank of England ha esaminato il lato della stabilità finanziaria. La sua analisi del private equity nota che il forte indebitamento nelle acquisizioni rende quelle aziende più esposte all\u0026rsquo;insolvenza, e lascia i loro creditori esposti a perdite. Da allora ha continuato a tenere d\u0026rsquo;occhio il settore.\nNon tutte le acquisizioni funzionano così, e molti proprietari investono invece di svuotare. È uno schema da riconoscere, non una descrizione di tutti gli acquirenti.\nMa dove succede, l\u0026rsquo;esito è sempre lo stesso.\nL\u0026rsquo;impresa di solito funzionava bene. Quello che non funzionava era l\u0026rsquo;impresa più il debito contratto per comprarla.\nLa stessa impresa prima e dopo un'acquisizione finanziata a debito Prima Dopo Il lavoro Stesso personale, stessi clienti Possiede i suoi edifici Nessun debito da acquisizione Finanzia la manutenzione Finanzia la ricerca Affitto pagato: nessuno Il lavoro Stesso personale, stessi clienti Affitta gli stessi edifici Porta il prestito usato per comprarla Manutenzione ridotta Ricerca ridotta Affitto pagato: ogni mese comprata con soldi presi in prestito L'impresa fa ancora lo stesso lavoro per gli stessi clienti. È cambiato cosa possiede, e cosa ora deve pagare. La stessa impresa, prima e dopo. Il lavoro e i clienti restano. Gli edifici e il debito cambiano mano, e i costi di gestione salgono. Lo stesso schema nel software Questo è arrivato al software qualche anno fa.\nIl bene che viene sfruttato non è un edificio. Sono i clienti che non possono andarsene facilmente.\nUn prodotto maturo con clienti di lunga data può essere riprezzato. Quei clienti non possono spostarsi in fretta, e per questo la maggior parte paga.\nAllo stesso tempo si può tagliare la spesa in ingegneria. Ci vogliono anni perché si veda, e a quel punto la vendita è già fatta.\nLa Parte 2 ha mostrato com\u0026rsquo;è andata per i clienti VMware.\nNe esiste anche una versione finanziata dagli investitori invece che dal debito. È stata descritta abbastanza spesso da meritarsi un nome: enshittification, una parola usata dallo scrittore canadese Cory Doctorow dal 2022.\nSi svolge in 3 fasi.\nIl servizio viene venduto sotto il suo costo di gestione, pagato dagli investitori. È economico e buono, quindi la gente ci si sposta. Quando la gente non può più andarsene facilmente, viene cambiato per soddisfare invece i clienti business paganti. Quando entrambe le parti sono legate, le condizioni cambiano di nuovo per aumentare il profitto. La fase 1 è quella che conta per questa serie.\nUn\u0026rsquo;azienda che vende sotto costo per anni non vince perché è migliore. Viene finanziata per prendersi il mercato.\nLe imprese più piccole che devono coprire i propri costi non possono pareggiare quel prezzo. Molte chiudono.\nQuando più tardi i prezzi salgono a qualcosa di sostenibile, la scelta che prima esisteva spesso non c\u0026rsquo;è più.\nCosa significa per te Ne escono due cose pratiche, ed entrambe sono abbastanza facili da fare.\nControlla quante persone tengono in vita le tue dipendenze.\nGuarda gli strumenti senza cui i tuoi sistemi non potrebbero girare. Scopri quante persone mantengono attivamente ciascuno.\nSe la risposta è 1 o 2, vale la pena saperlo. Potresti voler finanziare quel lavoro, tenere una tua copia del sorgente, o pianificare cosa faresti se si fermasse.\nTieni d\u0026rsquo;occhio chi possiede i tuoi fornitori.\nLe tue condizioni seguono il proprietario, non il prodotto. Un cambio di proprietà può spostare il tuo rinnovo più di qualsiasi cambiamento nel software.\nQuando firmi, controlla cosa ti resta se smetti di pagare. Controlla se puoi ancora far girare quello che hai già installato, e se ricevi ancora gli aggiornamenti di sicurezza.\nNessuna delle due richiede molto tempo. Entrambe sono molto più facili prima di un rinnovo che durante.\nLa Parte 4 guarda a cosa hanno già deciso tribunali e autorità di regolamentazione.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/who-pays-for-the-software/","summary":"I primi 2 articoli guardavano a cosa ti costa la dipendenza. Questo guarda a chi altro paga il conto: i volontari che tengono in vita software per aziende enormi, e le imprese comprate, caricate di debiti e svuotate. La Parte 3 di 8, in linguaggio semplice.","title":"Chi paga il software che usi"},{"content":"Parte 4 di 8. La Parte 3 ha guardato a chi paga il software che usi.\nDi cosa parla questo articolo Perché vale la pena leggere gli atti. Cosa è stato deciso su Google. Cosa è stato deciso su Apple. Cosa è stato deciso su Amazon. Cosa è stato deciso su Meta. Lo schema che li accomuna tutti. Perché vale la pena leggere gli atti Scegliere un fornitore è una previsione. Stai decidendo come si comporterà tra 3 o 5 anni.\nLe dichiarazioni sui valori aziendali servono a poco per questo. Ce l\u0026rsquo;hanno tutti, e dicono tutte più o meno la stessa cosa.\nGli accertamenti di fatto sono meglio. Sono conclusioni a cui un tribunale o un\u0026rsquo;autorità di regolamentazione è arrivato dopo aver esaminato le prove.\nÈ questo che usa l\u0026rsquo;articolo. Dove esiste una decisione europea, viene per prima.\nDue cose prima dell\u0026rsquo;elenco, perché lo tengono onesto.\nNon tutti i casi sono andati contro le aziende. Alcuni sono andati contro le autorità, e ci sono anche quelli.\nE questa non è una tesi secondo cui le aziende europee si comportano meglio. Volkswagen e Wirecard chiudono la questione a sufficienza. Lo schema deriva dalle dimensioni e dalla posizione di mercato, non dal paese da cui un\u0026rsquo;azienda viene.\nGoogle La Commissione europea è arrivata per prima, e i casi ci hanno messo molto a chiudersi.\nNel 2017 ha multato Google per 2,42 miliardi di euro. Ha accertato che Google aveva spinto in alto nei risultati di ricerca il proprio servizio di comparazione prezzi e in basso quelli dei rivali.\nGoogle ha fatto ricorso, e la Corte di giustizia dell\u0026rsquo;Unione europea ha confermato la decisione nel settembre 2024.\nSono 7 anni dalla multa, e ancora di più dal comportamento.\nNel 2018 la Commissione ha multato Google per 4,34 miliardi di euro per le condizioni imposte ai produttori di telefoni che volevano il Play Store. La multa è stata poi ridotta a circa 4,1 miliardi di euro, e l\u0026rsquo;ultimo ricorso è stato respinto nel 2026.\nNel 2019 la Commissione ha multato Google per 1,49 miliardi di euro per dei contratti pubblicitari. Il Tribunale l\u0026rsquo;ha annullata nel 2024, ritenendo che l\u0026rsquo;accusa non fosse stata dimostrata. Quella l\u0026rsquo;autorità l\u0026rsquo;ha persa.\nNegli Stati Uniti, un tribunale ha accertato nel 2024 che Google aveva mantenuto illegalmente un monopolio nella ricerca. Nel settembre 2025 lo stesso tribunale ha stabilito i rimedi. Ha imposto modifiche agli accordi sui motori predefiniti e una certa condivisione di dati con i concorrenti. Ha rifiutato di obbligare Google a vendere Chrome o Android.\nUna sentenza statunitense separata, dell\u0026rsquo;aprile 2025, ha accertato che Google aveva legato illegalmente 2 dei suoi prodotti pubblicitari. Quel rimedio è ancora da decidere.\nApple Nel 2021 un tribunale statunitense ha ordinato ad Apple di permettere agli sviluppatori di app di informare i clienti su altri modi di pagare.\nNell\u0026rsquo;aprile 2025 lo stesso tribunale ha accertato che Apple non si era adeguata.\nHa anche accertato che un alto dirigente di Apple aveva reso una testimonianza falsa, e che i documenti interni dell\u0026rsquo;azienda dicevano altro. CNBC ha riportato la sentenza all\u0026rsquo;epoca.\nIl tribunale ha trasmesso la questione alla procura perché valutasse un procedimento per oltraggio alla corte. Apple ha detto che avrebbe fatto ricorso.\nQuesto conta per un motivo diverso dagli altri.\nUn\u0026rsquo;azienda può avere una posizione netta sulla propria situazione legale ed essere comunque leale con un tribunale. Un accertamento di testimonianza falsa è tutta un\u0026rsquo;altra cosa.\nIl tuo rapporto con un fornitore è un insieme di promesse. Questa è una prova diretta di come vengono trattate le promesse quando mantenerle diventa costoso.\nAmazon Nel settembre 2025 Amazon ha accettato di pagare 2,5 miliardi di dollari per chiudere una causa intentata dalla Federal Trade Commission statunitense. La Commissione ha pubblicato i dettagli.\nErano 1 miliardo di dollari di sanzioni e 1,5 miliardi di dollari restituiti ai clienti.\nLa causa riguardava il modo in cui erano progettate l\u0026rsquo;iscrizione a Prime e la disdetta. L\u0026rsquo;accusa era che le schermate fossero costruite per iscrivere persone che non avevano scelto di iscriversi, e per rendere la disdetta una fatica. La Commissione ha detto che erano coinvolte circa 35 milioni di persone.\nAmazon ha accettato di modificare il processo di iscrizione e di disdetta come parte dell\u0026rsquo;accordo.\nLe interfacce a quella scala vengono testate e misurate prima del rilascio, ed è una pratica normale e sensata. Per questo l\u0026rsquo;effetto di un design di solito si conosce prima che esca.\nMeta Nel 2019 la Federal Trade Commission statunitense ha inflitto a Facebook una sanzione di 5 miliardi di dollari per le sue pratiche sulla privacy, dopo il caso Cambridge Analytica.\nLa voce più grossa non è una multa.\nNel 2021 un\u0026rsquo;ex dipendente ha consegnato ricerche interne dell\u0026rsquo;azienda ai giornalisti, poi ha testimoniato davanti a una commissione del Senato statunitense. La BBC ha riportato la sua accusa centrale: l\u0026rsquo;azienda aveva messo il profitto davanti alla sicurezza, più e più volte.\nParte di quella ricerca studiava l\u0026rsquo;effetto di Instagram sugli utenti adolescenti. Alcuni risultati erano preoccupanti.\nMeta ha contestato il modo in cui la ricerca è stata descritta. Ha detto che i risultati erano più sfumati di come venivano riportati, e che l\u0026rsquo;ex dipendente non aveva lavorato in quei team. La scienza più ampia su questo tema non è definita, ed è giusto dirlo.\nUn punto non è in discussione, ed è quello da tenere.\nL\u0026rsquo;azienda ha studiato se il suo prodotto stesse danneggiando un gruppo di utenti. Parte di quel lavoro è tornata con risultati preoccupanti. I risultati sono arrivati al pubblico perché qualcuno li ha portati fuori dall\u0026rsquo;edificio.\nUna ricerca che esce solo in quel modo non ha niente a che vedere con un controllo indipendente.\nLo schema che li accomuna tutti Metti i casi uno accanto all\u0026rsquo;altro e saltano fuori 4 cose. Per pianificare contano più di qualsiasi singolo caso.\n1. Le sanzioni sono piccole rispetto al guadagno.\nQualche miliardo è una cifra piccola rispetto a fatturati di centinaia di miliardi. E arriva anni dopo che i soldi sono stati fatti.\nQuando una sanzione costa meno del beneficio, funziona come un costo d\u0026rsquo;esercizio e non come un deterrente.\n2. I rimedi arrivano tardi.\nIn questi casi il divario tra il comportamento e un rimedio applicabile va da circa 7 a 12 anni.\nI concorrenti raramente durano così tanto. Quando un rimedio morde, il mercato che doveva proteggere di solito ha già cambiato forma.\n3. Le persone vengono toccate di rado.\nLe multe le paga l\u0026rsquo;azienda, quindi i suoi azionisti, mentre le persone che hanno approvato le decisioni di solito si tengono stipendio e posto.\nConta perché determina l\u0026rsquo;incentivo. Quando il costo ricade sull\u0026rsquo;azienda e la ricompensa sulla persona, la decisione sembra conveniente a chi la prende.\n4. I problemi si conoscono dentro prima che fuori.\nIn diversi di questi casi l\u0026rsquo;azienda aveva l\u0026rsquo;informazione per prima. È arrivata al pubblico attraverso una fuga di notizie, una causa o un\u0026rsquo;autorità.\nAttento però a cosa ne ricavi.\nDi solito non sono casi di una persona che si mette a fare del male. Un team ha migliorato una schermata di iscrizione rispetto a un obiettivo. Un sistema di ranking è stato regolato per aumentare l\u0026rsquo;uso. Un risultato di ricerca non è stato pubblicato.\nLe decisioni sono sparse tra molte persone, e ogni passo, preso da solo, sembra ragionevole. È questo che rende lo schema così costante, ed è il motivo per cui chiedere alle aziende di impegnarsi di più difficilmente lo sposterà.\nCosa farne Usalo per la domanda a cui risponde davvero.\nDove un fornitore ha un interesse commerciale e tu non hai una vera alternativa, gli atti dicono che l\u0026rsquo;esito tende ad andare a favore del fornitore.\nQualsiasi correzione di solito arriva anni dopo, e di solito costa al fornitore meno di quanto il comportamento gli abbia fruttato.\nNon è un motivo per evitare un fornitore per il paese in cui si trova.\nÈ un buon motivo per non dipendere da nessun fornitore che non potresti lasciare.\nLa Parte 5 guarda a come la legge di un paese possa raggiungere aziende in un altro.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/what-the-record-shows/","summary":"Scegliere un fornitore vuol dire indovinare come si comporterà in futuro. La base più onesta per quella previsione è ciò che tribunali e autorità di regolamentazione hanno già deciso. La Parte 4 di 8 espone le decisioni, include i casi che le autorità hanno perso e ne ricava lo schema.","title":"Cosa dicono gli atti"},{"content":"Parte 5 di 8. La Parte 4 ha guardato a cosa hanno deciso tribunali e autorità di regolamentazione.\nDi cosa parla questo articolo La legge che raggiunge aziende in altri paesi. Cosa ne ha concluso la Francia. Vecchie preoccupazioni sulle informazioni commerciali. Pressioni esercitate attraverso il commercio. Presupposti che viaggiano con un prodotto. La legge che raggiunge aziende in altri paesi La Parte 2 ha spiegato come la legge di un paese possa raggiungere i dati tenuti da un\u0026rsquo;azienda che quel paese controlla.\nLo stesso principio raggiunge le aziende stesse, e gli effetti possono essere molto più grandi.\nL\u0026rsquo;esempio meglio documentato in Europa è Alstom, un\u0026rsquo;azienda di ingegneria francese.\nNel 2014 Alstom si è dichiarata colpevole negli Stati Uniti e ha accettato di pagare 772 milioni di dollari. Il caso rientrava nel Foreign Corrupt Practices Act, una legge americana contro la corruzione. Il Dipartimento di Giustizia statunitense ha pubblicato i dettagli.\nLa corruzione era reale. Questa non è la storia di un\u0026rsquo;azienda innocente.\nUn dirigente di Alstom è stato anche arrestato mentre era in transito negli Stati Uniti, e ha passato del tempo in carcere.\nPiù o meno nello stesso periodo Alstom ha venduto il suo ramo energia a General Electric, un\u0026rsquo;azienda americana.\nIl dirigente ha poi sostenuto che il caso ancora aperto abbia funzionato come pressione durante quella vendita. I procuratori statunitensi hanno negato di aver agito per aiutare un acquirente americano.\nQuel disaccordo non è mai stato risolto, e per questo nemmeno questo articolo può risolverlo.\nCosa ne ha concluso la Francia Quello che si può mostrare è ciò che lo Stato francese ha concluso dopo.\nNel giugno 2019 un rapporto è arrivato al Primo ministro francese. È noto come rapporto Gauvain, e il suo titolo parla di ristabilire la sovranità francese ed europea e di proteggere le aziende dalle leggi a portata extraterritoriale.\nExtraterritoriale vuol dire una legge che si applica oltre i confini del paese che l\u0026rsquo;ha fatta.\nIl rapporto ha accertato 3 cose che vale la pena ripetere qui.\nSanzioni molto grandi, nell\u0026rsquo;ordine delle decine di miliardi di dollari, erano state inflitte ad aziende francesi, europee e di altri paesi non americani. Gran parte delle condotte aveva poco legame diretto con il territorio degli Stati Uniti. Le aziende francesi non avevano strumenti giuridici efficaci per difendersi. Ha anche notato che le aziende americane erano raramente il bersaglio.\nLa Francia ha poi aggiornato la sua legge di blocco, una legge che limita quali informazioni le aziende francesi possono consegnare ad autorità straniere. Un\u0026rsquo;indagine parlamentare precedente aveva esaminato lo stesso tema nel 2016.\nNon devi bere ogni conclusione di quel rapporto. Basta che un parlamento nazionale abbia esaminato la questione e abbia deciso che era una questione di sovranità.\nPer la tua pianificazione il punto è breve.\nL\u0026rsquo;esposizione legale verso un altro paese è un\u0026rsquo;esposizione commerciale. Non solo di conformità.\nVecchie preoccupazioni sulle informazioni commerciali Questa preoccupazione non è nuova, e vale la pena sapere quanto indietro va.\nNel 2001 il Parlamento europeo ha pubblicato un rapporto su un sistema globale di intercettazione delle comunicazioni, allora noto come ECHELON. Il Parlamento ha poi pubblicato uno studio che riprende quel lavoro.\nIl rapporto concludeva che un sistema del genere esisteva. Esaminava anche le accuse secondo cui le informazioni intercettate erano state usate per vantaggio commerciale, anche contro aziende europee.\nQuelle accuse erano contestate all\u0026rsquo;epoca e restano difficili da dimostrare.\nIl motivo per citarle non è chiuderle. È che il Parlamento europeo ha preso la questione abbastanza sul serio da condurre un\u0026rsquo;indagine formale 25 anni fa, e da allora non è mai sparita.\nPressioni esercitate attraverso il commercio La Parte 2 ha trattato i dazi sull\u0026rsquo;hardware, e il Canada che ha lasciato cadere la sua imposta sui servizi digitali dopo che i negoziati commerciali erano stati interrotti.\nC\u0026rsquo;è un altro passo che vale la pena registrare a parte, perché colpisce persone e non merci.\nNel gennaio 2026 il Dipartimento di Stato statunitense ha imposto restrizioni sui visti a 5 funzionari europei. Avevano lavorato al Digital Markets Act e al Digital Services Act, le leggi europee che regolano le grandi piattaforme online.\nÈ arrivato insieme a minacce di dazi legate ad azioni di applicazione europee.\nIl Center for Strategic and International Studies ha descritto tutto questo come usare misure commerciali per scoraggiare la regolamentazione digitale.\nL\u0026rsquo;Istituto Affari Internazionali, un istituto italiano, ha esaminato se di conseguenza l\u0026rsquo;applicazione del Digital Markets Act stia diventando negoziabile.\nÈ questa la domanda aperta. Se le regole europee sulla tecnologia possono essere spostate dalla pressione commerciale, la protezione che ti danno è meno certa di quanto suggerisca il testo.\nÈ giusto aggiungere che la pressione commerciale è uno strumento normale della politica tra Stati, usato da molti paesi, europei compresi. Il punto qui è su cosa viene usato.\nPresupposti che viaggiano con un prodotto L\u0026rsquo;ultima voce è più silenziosa delle altre. Nessuna causa, nessuna multa. Eppure ti tocca ogni giorno.\nIl software viene costruito per il mercato che chi lo fa conosce meglio. I presupposti di quel mercato viaggiano con lui.\nAlcuni li riconoscerai subito.\nLe impostazioni sulla privacy spesso partono dalla condivisione, perché è l\u0026rsquo;approccio comune negli Stati Uniti. La legge europea parte dal chiedere il permesso. Gli strumenti di gestione del personale spesso presuppongono che un rapporto di lavoro possa finire con poco preavviso, e che non ci sia un consiglio dei lavoratori da consultare. Le condizioni contrattuali standard spesso vogliono che le controversie si discutano in un tribunale statunitense, secondo la legge statunitense, anche per un cliente europeo. Le regole sui contenuti seguono l\u0026rsquo;approccio di 1 paese alla libertà di espressione, poi vengono applicate in tutto il mondo. Il supporto per le lingue più piccole arriva per ultimo, e a volte non arriva affatto. Niente di tutto questo è fatto per dare fastidio. È il risultato normale di costruire per un mercato di casa e vendere il risultato ovunque.\nSpiega però qualcosa della discussione più ampia.\nIl Regolamento generale sulla protezione dei dati, il Digital Markets Act e il Digital Services Act sono soprattutto l\u0026rsquo;Europa che dichiara di essere uno spazio giuridico separato con regole sue, consolidate.\nLa risposta a questo ha incluso le misure commerciali viste sopra.\nCosa significa per te Ne escono tre punti pratici.\nLeggi la clausola sulla legge applicabile. Controlla quali tribunali giudicherebbero una controversia. Su un contratto grande vale la pena negoziarla.\nChiedi dove è registrata la capogruppo del tuo fornitore. Quella risposta decide più dell\u0026rsquo;indirizzo del data centre.\nControlla che un prodotto sia adatto al tuo contesto legale prima di comprarlo. Consenso, norme sul lavoro e conservazione dei documenti sono i punti tipici in cui un\u0026rsquo;impostazione predefinita importata non corrisponde alla legge locale.\nNiente di tutto questo richiede un\u0026rsquo;opinione su un governo. È normale due diligence sui fornitori, applicata a una domanda che la maggior parte delle checklist di acquisto ancora salta.\nLa Parte 6 guarda alla sicurezza, e al criterio applicato quando un fornitore viene escluso per motivi di sicurezza nazionale.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/how-far-the-law-reaches/","summary":"La Parte 2 trattava la legge che arriva ai tuoi dati. La Parte 5 di 8 tratta la legge che arriva alla tua azienda: grandi sanzioni sotto la legge americana, un rapporto parlamentare francese che si chiede se funzioni come arma commerciale, pressioni commerciali applicate al diritto tributario e alle autorità di regolamentazione, e prodotti che portano ovunque i presupposti di un solo mercato.","title":"Fin dove arriva la legge di un paese"},{"content":"Parte 6 di 8. La Parte 5 ha guardato a fin dove arriva la legge di un paese.\nDi cosa parla questo articolo Il motivo dato per escludere alcuni fornitori. Cosa è stato accertato sui prodotti indeboliti. Cosa è successo nel 2024. Perché questo ricade anche sull\u0026rsquo;Europa. Cosa puoi farci. Il motivo dato per escludere alcuni fornitori Diversi governi hanno escluso i fornitori cinesi dalle reti telefoniche e internet, e hanno limitato alcune app cinesi sui dispositivi ufficiali.\nIl motivo dato è di solito lo stesso: un\u0026rsquo;azienda può essere costretta ad aiutare il proprio governo. Quindi l\u0026rsquo;hardware porta con sé un rischio, qualunque cosa faccia il codice.\nIl ragionamento regge. Ed è lo stesso ragionamento usato nella parte 2 su quale legge si applica ai tuoi dati.\nMettiamo in chiaro una cosa prima di andare avanti.\nLe operazioni informatiche dello Stato cinese sono reali. Le agenzie di sicurezza nazionale europee le documentano quanto quelle americane, e comprendono il furto su larga scala di informazioni commerciali. Niente in questo articolo è una difesa di tutto ciò.\nMa se il principio è che un fornitore può essere costretto ad aiutare il proprio governo, allora vale per ogni fornitore che ha un governo.\nApplicalo in modo uniforme e gli atti sul versante europeo e americano non sono vuoti. In alcuni punti sono più solidi delle accuse, perché li hanno indagati dei parlamenti.\nCosa è stato accertato sui prodotti indeboliti Tre voci, ciascuna con una fonte, in ordine di quanto reggono.\nUn servizio segreto possedeva un\u0026rsquo;azienda di cifratura.\nCrypto AG era un\u0026rsquo;azienda svizzera che dagli anni Cinquanta ha venduto macchine cifranti a più di 120 governi.\nEra di proprietà della CIA americana e del BND tedesco. Le macchine erano modificate perché quei servizi potessero leggere i messaggi dei governi che le compravano.\nNon poggia solo sul giornalismo. Dopo che la storia è uscita, l\u0026rsquo;organo di vigilanza sull\u0026rsquo;intelligence del Parlamento svizzero ha indagato e ha pubblicato un rapporto nel novembre 2020.\nL\u0026rsquo;emittente pubblica svizzera SWI ha riportato i risultati, compreso il fatto che l\u0026rsquo;intelligence svizzera lo sapeva dal 1993.\nTra i clienti c\u0026rsquo;erano governi europei. È andata avanti per circa 50 anni.\nUno standard crittografico è stato ritirato.\nUn generatore di numeri casuali chiamato Dual_EC_DRBG è stato pubblicato come standard degli Stati Uniti. I numeri casuali sono ciò che la cifratura usa per rendere le chiavi imprevedibili.\nI ricercatori hanno dimostrato che il suo progetto permetteva a chi sceglieva certi valori al suo interno di prevederne l\u0026rsquo;output.\nL\u0026rsquo;ente di standardizzazione ne ha sconsigliato l\u0026rsquo;uso nel 2013 e lo ha rimosso nel 2014. The Register ha riportato all\u0026rsquo;epoca gli accordi commerciali collegati.\nDell\u0026rsquo;hardware è stato intercettato in transito.\nNel dicembre 2013 la rivista tedesca Der Spiegel ha pubblicato un catalogo di strumenti di intercettazione che copriva router, firewall, server e firmware di storage di produttori noti.\nGli articoli descrivevano anche hardware deviato in transito, modificato, reimballato e spedito al cliente.\nQuest\u0026rsquo;ultima merita un attimo di attenzione da chiunque compri hardware.\nVuol dire che il confine della fiducia non è solo il tuo fornitore. È il tuo fornitore e tutto ciò che tocca la consegna.\nUn fornitore onesto non può darti garanzie sulla seconda parte.\nCosa è successo nel 2024 È l\u0026rsquo;evento che risponde alla domanda ingegneristica, ed è la cosa più utile di questo articolo.\nNel 1994 gli Stati Uniti hanno approvato una legge che obbligava le compagnie telefoniche a costruire le loro reti in modo che le comunicazioni potessero essere intercettate su richiesta legittima.\nQuindi la via d\u0026rsquo;accesso era permanente, incorporata e regolata da una procedura legale.\nNel 2024 un gruppo legato allo Stato cinese, chiamato pubblicamente Salt Typhoon, è risultato essere entrato in almeno 9 grandi compagnie telefoniche americane.\nTra i sistemi raggiunti c\u0026rsquo;erano gli stessi sistemi di intercettazione. The Register ha riportato la reazione dei parlamentari.\nLa via d\u0026rsquo;accesso che un governo aveva imposto di costruire è diventata la via da cui è entrato un altro governo.\nNon è sfortuna. Discende da come funziona una cosa del genere.\nUna via d\u0026rsquo;accesso incorporata è una capacità, non una regola. La legge che la governa vincola solo chi accetta quella legge. Chi è entrato con la forza no.\nOgni argomento a favore dell\u0026rsquo;accesso legale incorporato presuppone che l\u0026rsquo;accesso si possa riservare all\u0026rsquo;utente previsto. Questa è la prova più chiara che esista che quel presupposto non regge.\nPerché questo ricade anche sull\u0026rsquo;Europa Se quel ragionamento è giusto, è giusto ovunque, e per questo ricade anche sulle proposte europee.\nLe proposte di scansionare i messaggi sul dispositivo prima che vengano cifrati creano lo stesso tipo di via d\u0026rsquo;accesso incorporata.\nIl Regno Unito ha il potere di obbligare le aziende a fornire capacità tecniche. È stato usato per imporre modifiche a una funzione di cifratura, e il fornitore ha ritirato quella funzione nel Regno Unito piuttosto che modificarla.\nEntrambe le cose sono portate avanti da democrazie, con controlli, per motivi seri come la protezione dei bambini.\nEntrambe costruiscono anche esattamente il tipo di capacità che il 2024 ha dimostrato di non poter riservare in modo affidabile all\u0026rsquo;utente previsto.\nUna via d\u0026rsquo;accesso europea non è più sicura di nessun\u0026rsquo;altra, perché a un intruso non importa quanto sia responsabile l\u0026rsquo;istituzione. Gli importa se la cosa esiste.\nEd è per questo che la versione utile di questo argomento è tecnica, non politica.\n«Non fidarti dei fornitori del paese X» va riaperto ogni volta che la politica cambia.\n«Dai per scontato che qualsiasi via d\u0026rsquo;accesso incorporata finirà per essere usata da qualcuno per cui non è stata costruita» regge a prescindere.\nCosa puoi farci La risposta pratica non riguarda soprattutto da chi compri. Riguarda progettare in modo che la domanda conti meno.\nTratta la rete come non affidabile. Cifra il traffico da un capo all\u0026rsquo;altro, e non lasciare che un sistema si fidi di un altro solo per dove si trova nella rete.\nTieni tu le chiavi di cifratura dove puoi. La Parte 2 ha spiegato perché questo cambia chi può essere interpellato per i tuoi dati. Limita anche ciò che un intruso trova degno di essere preso.\nInvia meno. I dati che non hai mai raccolto non si possono intercettare, richiedere o perdere. È il controllo meno di moda della lista, e spesso il più efficace.\nControlla cosa esegue il tuo hardware prima di fidartene. Verified boot e verifica del firmware vanno attivati dove l\u0026rsquo;hardware li supporta.\nSui sistemi davvero sensibili, controlla le consegne. Imballaggi a prova di manomissione e numeri di serie registrati sono abbastanza semplici.\nNessuna di queste cose ti chiede di decidere di quale governo preoccuparti di più.\nEd è proprio per questo che sono la risposta migliore. Un controllo che funziona solo se la tua previsione sulla politica è giusta non è davvero un controllo.\nLa Parte 7 esce dalla tecnologia, e guarda a come altri settori hanno affrontato lo stesso problema.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/backdoors-and-who-is-accused/","summary":"Escludere un fornitore per motivi di sicurezza richiede un criterio, applicato in modo uniforme. La Parte 6 di 8 espone ciò che è stato accertato su prodotti indeboliti e intercettazioni, compresa un\u0026rsquo;inchiesta parlamentare svizzera, e mostra perché una via d\u0026rsquo;accesso incorporata appartiene a chiunque riesca a raggiungerla.","title":"Le backdoor, e chi ne viene accusato"},{"content":"Parte 7 di 8. La Parte 6 ha guardato alla sicurezza e alle vie d\u0026rsquo;accesso incorporate.\nDi cosa parla questo articolo Perché il confronto è utile. Le sementi, e le licenze sugli esseri viventi. I supermercati, e le regole costruite per loro. Perché la tecnologia non ha niente del genere. Cosa ti dice tutto questo. Perché il confronto è utile C\u0026rsquo;è un\u0026rsquo;idea diffusa secondo cui la tecnologia è un nuovo tipo di potere e richiede un nuovo modo di pensare.\nÈ un\u0026rsquo;idea rassicurante, ed è in gran parte sbagliata. Crederci è uno dei motivi per cui la risposta è arrivata così lentamente.\nIl problema di questa serie è vecchio. Un fornitore diventa indispensabile. Le alternative del cliente spariscono. Le condizioni smettono di essere concordate e cominciano a essere annunciate.\nÈ successo in settori dove il software non c\u0026rsquo;è proprio.\nIl confronto aiuta in 2 modi.\nMostra cosa tende a succedere dopo, perché quei settori sono più avanti sulla stessa strada.\nE mostra come è fatta una risposta seria, perché alcune di quelle risposte esistono già e funzionano.\nLe sementi, e le licenze sugli esseri viventi Un agricoltore che compra sementi si trova più o meno nella stessa posizione di un\u0026rsquo;organizzazione che compra il suo software principale.\nQuattro aziende, Bayer, Corteva, Syngenta e BASF, detengono gran parte del mercato mondiale delle sementi e una quota simile dei pesticidi. L\u0026rsquo;organizzazione svizzera Public Eye ne pubblica un\u0026rsquo;analisi.\nPer alcune singole colture è ancora più concentrato, e un pugno di aziende detiene gran parte dei brevetti rilevanti.\nLe licenze ti sembreranno familiari se hai mai letto un contratto software.\nUna semente brevettata non viene semplicemente venduta. Viene concessa in licenza, e le condizioni possono vietare la pratica più antica dell\u0026rsquo;agricoltura: tenere una parte del raccolto di quest\u0026rsquo;anno per seminarla l\u0026rsquo;anno prossimo.\nCosì l\u0026rsquo;agricoltore compra l\u0026rsquo;uso della semente per 1 stagione. Il diritto di riprodurla, che è tutto il senso di una semente, resta al fornitore.\nÈ un acquisto permanente trasformato in uno ricorrente. È successo all\u0026rsquo;agricoltura prima che al software.\nC\u0026rsquo;è un secondo dettaglio familiare.\nLa semente è spesso costruita per funzionare con un certo pesticida, e la stessa azienda vende entrambi. Comprare l\u0026rsquo;uno rende più facile comprare anche l\u0026rsquo;altro che cambiare.\nGli economisti agrari ne hanno seguito i risultati: meno varietà in circolazione, costi dei mezzi di produzione più alti, e meno possibilità di cambiare fornitore.\nI supermercati, e le regole costruite per loro L\u0026rsquo;altra metà del cibo mostra lo stesso problema dal lato di chi compra. È questo l\u0026rsquo;esempio da copiare.\nUn piccolo numero di catene gestisce gran parte delle vendite alimentari nel Regno Unito.\nCosì un fornitore ha davanti pochissimi clienti possibili. Perderne uno può chiudere l\u0026rsquo;azienda. Per la catena, sostituire un fornitore è il lavoro di una mattina.\nQuello squilibrio è stato documentato abbastanza bene da far intervenire il Parlamento. Il Groceries Code Adjudicator è stato istituito nel 2013. Controlla che le grandi catene rispettino il Groceries Supply Code of Practice.\nGuarda cosa limita quel codice, poi pensa al tuo ultimo rinnovo software.\nCambiare a posteriori le condizioni concordate, senza accordo. Far pagare a un fornitore il diritto di continuare a lavorare. Scaricare costi e rischi sul fornitore senza compensarlo. Usare il ritiro dalla vendita come leva in una controversia. L\u0026rsquo;Unione europea ha costruito la sua versione. La direttiva 2019/633 sulle pratiche commerciali sleali copre la filiera agricola e alimentare.\nVieta i pagamenti in ritardo, l\u0026rsquo;annullamento degli ordini con poco preavviso, la modifica unilaterale delle condizioni e la minaccia di ritorsioni commerciali. Ogni Stato membro ha un\u0026rsquo;autorità che la fa applicare.\nNessuno dei due regimi è perfetto. I poteri dell\u0026rsquo;Adjudicator sono limitati, non copre i prezzi in sé, e ha usato i suoi poteri più forti con parsimonia.\nMa il principio che contengono è proprio quello che manca alla tecnologia.\nDove il potere contrattuale è molto diseguale, la libertà contrattuale non esiste davvero. Quindi certe pratiche vengono vietate del tutto, invece di essere lasciate alla trattativa.\nNessuno ha proposto che a un fornitore di software venga impedito di cambiare a posteriori le condizioni concordate.\nNessuno tratta un addebito per portare via i tuoi stessi dati come lo scaricare un costo sulla parte più debole.\nNel settore alimentare, entrambe le cose verrebbero notate subito. Nel software lo chiamiamo modello di licenza.\nPerché la tecnologia non ha niente del genere Quattro motivi, e vale la pena capirli perché indicano cosa dovrebbe cambiare.\nLa velocità. La concentrazione della grande distribuzione ha richiesto circa 100 anni. Quella del cloud circa 15. Quando si è potuto vederla chiaramente, era già successa.\nI servizi gratuiti. Nella maggior parte dei paesi il diritto della concorrenza è cresciuto intorno ai prezzi pagati dai consumatori. Un servizio a prezzo zero sembra innocuo con quel criterio, anche quando il cliente non è l\u0026rsquo;utente.\nLa pretesa di novità. Il settore ha sostenuto, con successo, che la sua economia era diversa, e che essere difficile da lasciare era solo una proprietà dei sistemi complessi e non una scelta di progetto.\nL\u0026rsquo;organizzazione. Gli agricoltori hanno sindacati, cooperative e una lunga abitudine a trattare insieme. L\u0026rsquo;hanno usata per ottenere tutele legali specifiche.\nChi compra tecnologia ha gruppi di utenti e una conferenza. Quando i clienti VMware sono stati colpiti da forti aumenti, la vera resistenza è venuta da un\u0026rsquo;associazione di categoria di cloud provider, ed è passata per il diritto della concorrenza. La Parte 2 ha trattato quanto tempo richiede.\nCosa ti dice tutto questo Due conclusioni, ed entrambe vale la pena averle.\nIl problema è strutturale, non nazionale.\nBayer è tedesca. I supermercati più grandi sono britannici, francesi e tedeschi. Il modello di acquisizione della parte 3 è usato con entusiasmo in tutta Europa.\nSostituisci domani ogni fornitore americano di questa serie con 4 europei e il comportamento ritorna, perché discende dalla struttura.\nPer questo il consiglio qui riguarda la possibilità di cambiare fornitore, non la scelta di un paese.\nUna risposta funzionante esiste già.\nNon serve inventare una nuova teoria della regolamentazione delle piattaforme.\nC\u0026rsquo;è un modello in cui certe pratiche sono vietate perché il potere contrattuale è diseguale, un arbitro esamina i reclami, e la parte più debole non porta da sola tutto l\u0026rsquo;onere della prova.\nÈ stato costruito per i cavoli. Funzionerebbe sui contratti cloud.\nLa Parte 8 guarda a cosa si sta costruendo in Europa adesso, e a come verificare a che punto sei.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/the-same-pattern-elsewhere/","summary":"Niente di tutto questo è nuovo, e non riguarda davvero la tecnologia. Quattro aziende controllano gran parte delle sementi del mondo. Dieci catene di supermercati vendono gran parte del cibo britannico. In entrambi i casi è nata una risposta legale che il software non ha nemmeno lontanamente. La Parte 7 di 8 li mette a confronto, e si chiede perché la tecnologia l\u0026rsquo;abbia fatta franca.","title":"Lo stesso schema in altri settori"},{"content":"Parte 8 di 8. La Parte 7 ha confrontato lo schema con altri settori.\nDi cosa parla questo articolo Cosa l\u0026rsquo;Europa ha davvero costruito. Cosa è realistico oggi, e cosa no. 3 domande per capire dove ti trovi. Una parola onesta su questo sito. La tendenza si è invertita Per tanti anni l\u0026rsquo;indipendenza digitale europea è stata soprattutto una conversazione.\nDal 2025 le cose sono cambiate. Adesso ci sono prodotti che funzionano, e organizzazioni che li usano ogni giorno.\nÈ la tendenza più utile di tutta la serie, perché è quella su cui puoi agire.\nSoftware per l\u0026rsquo;ufficio e la collaborazione openDesk è un insieme di strumenti open source per il lavoro d\u0026rsquo;ufficio di tutti i giorni. Documenti, email, calendari, file, chat e videoriunioni.\nLo cura ZenDiS, il centro tedesco per la sovranità digitale.\nÈ costruito con strumenti che esistevano già: Nextcloud per i file, Collabora per i documenti, Open-Xchange per email e calendari, Element per la chat, Jitsi per i video.\nÈ in uso reale. Le forze armate tedesche hanno firmato un accordo pluriennale. Il Robert Koch Institute, un ente tedesco di sanità pubblica, lo usa per diverse migliaia di persone. La Corte penale internazionale l\u0026rsquo;ha scelto nel 2025.\nOra ci sono anche opzioni commerciali.\noffice.eu è stato lanciato all\u0026rsquo;Aia nel marzo 2026. È un\u0026rsquo;alternativa ospitata, di proprietà europea, alle grandi suite per l\u0026rsquo;ufficio americane.\nEuro-Office è arrivato nel giugno 2026. È un editor di documenti condiviso costruito insieme da diverse aziende europee, tra cui IONOS, Nextcloud, XWiki, OpenProject, Open-Xchange e office.eu.\nLavorare insieme così conta. Vuol dire che ogni azienda non si ricostruisce da sola lo stesso editor.\nGoverni che si muovono davvero Alcuni governi si sono già mossi, e questo dà a tutti noi un\u0026rsquo;esperienza reale da cui imparare.\nIl Ministero danese della digitalizzazione è passato da Microsoft 365 a LibreOffice a partire dal luglio 2025. LibreOffice è una suite per l\u0026rsquo;ufficio gratuita.\nLo stato tedesco dello Schleswig-Holstein sta spostando sull\u0026rsquo;open source decine di migliaia di computer del personale.\nAnche Francia e Germania stanno costruendo strumenti condivisi insieme, invece di pagarsene ciascuna i propri.\nÈ giusto dire che non è sempre tutto liscio.\nMonaco di Baviera ha spostato la sua amministrazione comunale su Linux nel corso di diversi anni, poi è tornata a Windows nel 2017. The Register ha riportato il costo all\u0026rsquo;epoca.\nLa lezione principale di Monaco non era tecnica. Il software per lo più funzionava. Quello che non è durato è stato il sostegno politico, attraverso i cambi di amministrazione, su un progetto durato più di un decennio.\nQuindi queste cose richiedono un sostegno costante per molti anni. È un requisito reale, e va pianificato onestamente.\nPagamenti I pagamenti seguono la stessa tendenza, e molta gente non si rende conto di quanto siano concentrati.\nUn\u0026rsquo;analisi dei dati della Banca centrale europea indica che Visa e Mastercard hanno gestito circa il 47% del valore dei pagamenti con carta nell\u0026rsquo;area dell\u0026rsquo;euro nel 2025. In diversi paesi la quota è parecchio più alta.\nDiversi paesi europei hanno i loro circuiti di carte. Il guaio è che non funzionano oltre confine, quindi quello che funziona ovunque è quello americano.\nWero è la risposta europea. È gestito dalla European Payments Initiative.\nÈ partito con i pagamenti tra persone in Belgio, Francia e Germania. Ora ha decine di milioni di utenti registrati. Il Lussemburgo si è aggiunto nel 2026, e i Paesi Bassi stanno spostando su di esso il loro sistema iDEAL esistente. Lo European Payments Council pubblica i progressi.\nPagare nei negozi e online è la fase successiva. È la fase che decide se Wero diventa un\u0026rsquo;alternativa reale.\nDietro c\u0026rsquo;è l\u0026rsquo;euro digitale, su tempi più lunghi, intorno al 2029.\nNuove regole La Commissione europea ha pubblicato la sua proposta di Cloud and AI Development Act il 2026-06-03.\nÈ il primo tentativo serio di trasformare la sovranità del cloud da etichetta volontaria in obbligo di legge.\nClassifica i cloud provider in livelli, in base a dove si trova l\u0026rsquo;infrastruttura, quanto in modo indipendente può essere gestita, e chi ne è il proprietario. Gli acquirenti del settore pubblico avrebbero bisogno di provider che raggiungano almeno il livello più basso.\nÈ una proposta. Non è ancora legge, e potrebbe cambiare lungo il percorso.\nCosa è realistico, e cosa no Un elenco pieno di speranza qui può facilmente andare storto, quindi parliamo chiaro.\nRealistico oggi. Documenti d\u0026rsquo;ufficio, email, calendari, file, chat e video. Esistono opzioni europee e open source che funzionano, e ci sono organizzazioni che le usano in produzione proprio adesso.\nCi si sta arrivando. I pagamenti, e alcuni servizi cloud. I pezzi esistono. La copertura si sta ancora completando.\nNon ancora. L\u0026rsquo;infrastruttura cloud su larga scala. La capacità europea è molto al di sotto della domanda.\nCosa si può sostituire oggi con un'opzione europea o open source Quanto è sostituibile oggi ogni livello Lavoro d'ufficio Documenti, email, calendari, file, chat, video Sostituibile ora Pagamenti Wero cresce; negozi e online sono la fase successiva Pronto in parte Infrastruttura cloud La capacità europea è molto inferiore alla domanda Non ancora Chip Punti di forza europei reali, ma oggi nessun sostituto completo Non in questo decennio Più sali nello stack, più scelta hai oggi. Non in questo decennio. I chip stessi. L\u0026rsquo;Europa ha punti di forza reali, tra cui ASML nei Paesi Bassi e Infineon e NXP nella progettazione di chip. Niente di tutto questo sostituisce oggi un processore grafico da data centre.\nLa Bertelsmann Stiftung, una fondazione tedesca, ha stimato che costruire uno stack europeo completo richiederebbe circa 10 anni e circa 300 miliardi di euro.\nQuindi l\u0026rsquo;indipendenza completa non è sul tavolo, e chiunque la offra sta vendendo più di quello che ha.\nPer questo l\u0026rsquo;indipendenza completa non è mai stata l\u0026rsquo;obiettivo utile.\n3 domande per capire dove ti trovi Ecco un modo semplice per guardare i tuoi sistemi. Funziona per qualsiasi fornitore, in qualsiasi paese.\nFai queste 3 domande su ogni servizio da cui dipendi.\n1. Cosa smette di funzionare se questo servizio si ferma?\nSii preciso. Indica i sistemi e le persone coinvolte. «È importante» non è qualcosa con cui puoi pianificare.\n2. Quante settimane di lavoro servirebbero per spostarlo?\nQuel numero stabilisce la tua posizione a ogni rinnovo per tutto il tempo che tieni il fornitore.\nSe non riesci a stimarlo, già quello vale la pena saperlo.\n3. La tua organizzazione riuscirebbe davvero a gestire l\u0026rsquo;alternativa?\nNon se un\u0026rsquo;alternativa esiste. Se il tuo team, con le dimensioni che ha davvero, riuscirebbe a gestirla.\nLibreOffice è una risposta seria per un ministero con un budget per la formazione. È una risposta più difficile per una piccola azienda senza personale IT.\nOrdina i tuoi servizi in base a quelle 3 risposte. L\u0026rsquo;elenco di solito è corto, e spesso non è quello che la gente si aspetta.\nPer molte organizzazioni, email e account del personale finiscono sopra il cloud computing. Spostarli si testa di rado, e richiederebbe parecchio tempo.\nPoi fai le stesse 3 domande su qualsiasi alternativa europea stai valutando.\nUn singolo fornitore europeo che non puoi lasciare non è molto meglio di un singolo fornitore americano che non puoi lasciare.\nIl vero vantaggio dei formati aperti e dell\u0026rsquo;open source non è il prezzo. È che permettono di rispondere alla domanda 2, e rendono possibile la 3.\nUna parola onesta su questo sito Non sarebbe giusto scrivere tutto questo senza rivolgerlo contro me stesso.\nQuesto sito è costruito con Hugo e servito da Cloudflare, un\u0026rsquo;azienda americana. Ogni punto di questa serie vale anche per lui.\nHo scelto Cloudflare perché funziona bene e non mi costa un bel niente. Se l\u0026rsquo;account si fermasse domani cambierei qualche impostazione DNS e pubblicherei da un\u0026rsquo;altra parte.\nQuindi l\u0026rsquo;esposizione è reale e la conseguenza è piccola. È uno scambio onesto, e l\u0026rsquo;ho fatto apposta.\nIl resto della mia attrezzatura è misto anche lui. Proxmox, di cui scrivo spesso, è austriaco. Gira su processori progettati negli Stati Uniti, con firmware che non posso ispezionare.\nNon esiste una configurazione che arrivi a zero. Non è mai stato quello l\u0026rsquo;obiettivo.\nIn breve La tecnologia è passata da qualcosa che compravi a qualcosa che affitti.\nAffittare spesso è meglio, ed è proprio per questo che è successo.\nOgni costo dell\u0026rsquo;affitto cresce quanto più ti è difficile andartene.\nDal 2025 sono arrivate alternative reali per il lavoro d\u0026rsquo;ufficio di tutti i giorni, e stanno arrivando per i pagamenti.\nQuindi l\u0026rsquo;obiettivo pratico non è schivare un paese in particolare. È ridurre il numero di servizi che non riusciresti a lasciare entro 3 mesi.\nComincia da quelli che non hai mai testato. Di solito è lì che ti aspetta la sorpresa.\nPubblicato per la prima volta: 2026-08-25. Ultimo aggiornamento: 2026-08-25.\n","permalink":"https://blogs.damiendye.uk/it/random/choice-coming-back/","summary":"Dal 2025 la risposta europea è passata dai piani a cose che puoi installare. La Parte 8 di 8 tratta cosa è arrivato, cosa onestamente è ancora lontano anni, e propone 3 domande per capire dove ti trovi.","title":"Dove le tue scelte stanno tornando"},{"content":"Ogni macchina di un dominio Active Directory trova il suo domain controller chiedendo a DNS. Non da un elenco configurato. Chiede un record SRV e va dove la risposta la manda. Il che rende una manciata di record sotto _msdcs la cosa più critica per la sicurezza dell\u0026rsquo;intera zona, e solleva due domande che meritano una risposta seria: come li firmi, e chi ha il permesso di scriverli. Nessuna delle due viene posta spesso, e a tutte e due si risponde male per impostazione predefinita.\nQuesto articolo risponde a entrambe per un domain controller Samba4. BIND con dlz_bind9 che serve la directory, inline signing, un primario nascosto che nessun client raggiunge mai, una delega dentro una zona pubblica perché la catena di fiducia arrivi fino alla radice, e gli aggiornamenti dinamici dei client tenuti ben lontani dai locator.\nMa la firma vale qualcosa solo se sai cosa protegge, e questo vuol dire partire un livello più in basso: da come viene risolto un nome in primo luogo. Quindi il primo terzo dell\u0026rsquo;articolo è la discesa dalla radice. Se la conosci già a memoria, salta a I due backend DNS di Samba.\nUn resolver parte sapendo quasi nulla Vale la pena di essere chiari su quanto poco un resolver sappia alla nascita, perché tutto il resto dell\u0026rsquo;articolo discende da questo.\nUn resolver ricorsivo appena installato sa due cose. Conosce gli indirizzi dei root server: un file di hint, tredici nomi da a.root-servers.net a m.root-servers.net, serviti in anycast da molte più istanze di tredici. E, se valida, conosce una sola chiave pubblica: quella della radice.\nQuesta è tutta la configurazione incorporata. Ogni altro fatto che servirà mai (quali server sono autoritativi per uk, dove vive il tuo dominio, che indirizzo ha il tuo mail server) lo impara a runtime chiedendo, e poi lo tiene in cache finché non scade il suo TTL.\nÈ un buon progetto. Nessuno deve distribuire un elenco dei name server di internet, e nessuna autorità centrale deve approvare una modifica alla tua zona. Ma ha una conseguenza di cui parla il resto dell\u0026rsquo;articolo: un resolver crede a quello che gli dice qualunque server a cui l\u0026rsquo;ha indirizzato la risposta precedente. Togli le firme e l\u0026rsquo;intera struttura è una catena di affermazioni, ciascuna autenticata solo dal fatto di essere arrivata dall\u0026rsquo;indirizzo indicato dalla risposta precedente. È un bel peso da appendere a un indirizzo del mittente.\nLa discesa lungo l\u0026rsquo;albero Una ricerca non è una sola domanda. È una serie di rinvii giù per l\u0026rsquo;albero dei nomi, e ogni passo è una query separata a un server diverso.\nSupponiamo che un client voglia dc01.ad.example.co.uk. Un resolver con la cache vuota fa questo:\nChiede a un root server. La radice non conosce la risposta e non finge di conoscerla. Restituisce un rinvio (referral): una sezione answer vuota e, nella sezione authority, i record NS di uk, con gli indirizzi di quei name server come glue nella sezione additional. Chiede a un server di uk. Un altro rinvio, stavolta ai name server di example.co.uk. Chiede a un server di example.co.uk. Se ad.example.co.uk è delegato (e nel progetto più avanti lo è), un altro rinvio ancora. Chiede a un server di ad.example.co.uk. Questo è autoritativo per il nome, quindi risponde con il record A e imposta il bit AA (authoritative answer). Una singola ricerca che scende lungo l'albero delle deleghe, un rinvio alla volta Resolver ricorsivo Nasce sapendo solo: \u0026#183; i root hints \u0026#183; la chiave pubblica della radice 1 \u0026#160; Root server a\u0026#8211;m.root-servers.net Rinvio i record NS di uk., più i loro indirizzi come glue 2 \u0026#160; name server di uk autoritativo per uk. Rinvio i record NS di example.co.uk. 3 \u0026#160; example.co.uk contiene la delega Rinvio ad.example.co.uk. è delegato: chiedi ai suoi server 4 \u0026#160; ad.example.co.uk autoritativo per il nome Risposta il record A di dc01, con il bit AA impostato Ogni passo resta in cache finché scade il suo TTL, quindi un resolver con cache calda parte dal passo 3 o 4. Ed è proprio questo che fa valere così tanto una sola voce di cache avvelenata. Una ricerca, quattro server. Ogni passo restituisce non la risposta ma il nome di un posto migliore a cui chiedere, e il resolver mette in cache ogni passo durante la discesa. Tre cose di questa discesa contano più avanti.\nIl rinvio è la delega. Il padre di una zona non ne contiene il contenuto. Contiene record NS che dicono «chiedi là» e, una volta entrata in gioco la firma, un record DS che dice «ed ecco l\u0026rsquo;impronta della chiave che dovresti aspettarti quando lo fai». La delega è l\u0026rsquo;unico meccanismo strutturale che DNS possiede, ed è quello che userai per tenere interna una zona interna.\nQuasi tutto finisce in cache. I rinvii della radice e dei TLD hanno TTL lunghi, quindi un resolver con la cache calda salta direttamente al passo tre o quattro. Ecco perché la cache di un resolver vale la pena di essere attaccata: avveleni una voce e hai dirottato tutto ciò che sta sotto di essa per tutto il TTL che hai scelto.\nIl nome completo non viene inviato a ogni server. Con la QNAME minimisation, un resolver chiede alla radice solo di uk, non di dc01.ad.example.co.uk. Utile da sapere se un giorno vai a cercare i tuoi nomi interni in un log di query a monte. Non dovrebbero esserci.\nStub, ricorsivo, autoritativo Tre parole che vengono usate come sinonimi e indicano lavori piuttosto diversi. La distinzione regge tutta la metà dell\u0026rsquo;articolo dedicata ad Active Directory, quindi vale la pena di fissarla.\nCosa fa Percorre l\u0026rsquo;albero? Contiene dati di zona? Stub resolver La libreria o il servizio locale che le tue applicazioni chiamano. Chiede a un solo server configurato e prende la risposta. No No Forwarder Passa le query a un altro resolver, mette in cache le risposte. No No Resolver ricorsivo Fa la discesa descritta sopra, mette in cache ogni passo, facoltativamente valida le firme. Sì No Server autoritativo Risponde per le zone che gli sono state affidate, e solo per quelle. Dice «non lo so» su tutto il resto. No Sì La riga importante è l\u0026rsquo;ultima. Un server autoritativo non ha nessun motivo di fare ricorsione, e un resolver ricorsivo non ha nessun motivo di essere autoritativo. Combinarli è il modo per ottenere una macchina che accetta domande arbitrarie dai client e allo stesso tempo contiene dati da cui quei client dipendono: esattamente la macchina che non vuoi sia il tuo domain controller.\nSu un desktop Linux moderno c\u0026rsquo;è un altro livello di cui tenere conto. systemd-resolved esegue uno stub listener sull\u0026rsquo;indirizzo di loopback e scrive un resolv.conf che punta a se stesso, con options edns0 trust-ad. Quel trust-ad è quello da notare: dice allo stub di credere al bit AD (authenticated data) nelle risposte di quel server. Il bit AD da solo non prova nulla: è l\u0026rsquo;affermazione del resolver a monte di aver validato lui. Fidarsene è ragionevole quando il resolver a monte è tuo e il tratto fino a lui è affidabile, e non ha senso altrimenti.\nCome vengono trovati davvero i servizi Un record A risponde a una sola domanda: che indirizzo ha questo nome. Non dice nulla su quale porta usi il servizio, quale tra più server preferire, o cosa fare quando il primo è giù.\nI record SRV rispondono a tutte e tre. Da RFC 2782, la forma è:\n_service._proto.name. TTL IN SRV priority weight port target Le parti di un record SRV e cosa decide ciascuna il trasporto il dominio il servizio che tipo di server _ldap. _tcp. dc._msdcs. ad.example.com. 600 IN SRV 0 100 389 dc01.ad.example.com. un nome proprietario: l'underscore lo separa dagli host TTL tipo di record priorità peso porta target La priorità più bassa si prova per prima. Il peso ripartisce il carico tra i server con la stessa priorità. Il target deve essere un nome host con record A o AAAA, mai un CNAME. Un singolo target «.» significa che il servizio qui deliberatamente non è offerto. Un record SRV sezionato. Il nome proprietario codifica il servizio e il trasporto; il corpo del record porta l\u0026rsquo;ordine di failover, la quota di carico all\u0026rsquo;interno di un ordine, la porta e un target che deve essere un vero nome host. Ogni campo si guadagna il suo posto:\nI prefissi con underscore tengono le etichette di servizio in uno spazio dei nomi tutto loro. _tcp non può mai collidere con un host che si chiama davvero tcp, perché un nome host non può iniziare con un underscore. Priority è l\u0026rsquo;ordine di failover: il valore più basso viene provato per primo. I server con un numero di priorità più alto vengono usati solo quando tutto ciò che sta sotto è irraggiungibile. Weight ripartisce il carico all\u0026rsquo;interno di una stessa priorità. Una coppia con peso 100 e peso 300 riceve circa un quarto e tre quarti dei client. È un\u0026rsquo;estrazione proporzionale, non un round-robin. Port libera il servizio da un numero noto a priori, ed è così che un client trova un server LDAP sulla 3268 senza che nessuno lo abbia scritto a mano. Target deve essere un nome con record A o AAAA. RFC 2782 dice esplicitamente che non deve essere un CNAME, e che un singolo target . significa «questo servizio qui deliberatamente non è offerto»: una cosa utile da pubblicare apposta. È questo che rende un dominio individuabile invece che configurato. Una macchina unita al dominio non ha un elenco dei tuoi domain controller. Ha un nome di dominio, e chiede.\nI nomi che Active Directory pubblica Un dominio AD, dal punto di vista di un client, è soprattutto un insieme di record SRV. L\u0026rsquo;albero sotto _msdcs è la parte interessante, perché è il modo in cui i client distinguono «un server LDAP» da «un domain controller di questo dominio» da «un global catalog di questa foresta»:\nNome Chi lo chiede _ldap._tcp.\u0026lt;domain\u0026gt; Qualunque cosa voglia LDAP nel dominio _ldap._tcp.dc._msdcs.\u0026lt;domain\u0026gt; Localizzazione dei domain controller: quello importante _ldap._tcp.pdc._msdcs.\u0026lt;domain\u0026gt; Specificamente l\u0026rsquo;emulatore PDC _ldap._tcp.gc._msdcs.\u0026lt;forest\u0026gt; Global catalog _kerberos._tcp.\u0026lt;domain\u0026gt;, _kerberos._udp.\u0026lt;domain\u0026gt; Localizzazione del KDC, prima che esista qualunque ticket _kpasswd._tcp.\u0026lt;domain\u0026gt;, _kpasswd._udp.\u0026lt;domain\u0026gt; Cambi di password _ldap._tcp.\u0026lt;site\u0026gt;._sites.dc._msdcs.\u0026lt;domain\u0026gt; Localizzazione per sito: trovare un DC vicino Guarda a cosa serve quell\u0026rsquo;elenco. L\u0026rsquo;autenticazione Kerberos non può cominciare finché il client non ha trovato un KDC, e il KDC lo trova tramite DNS. La localizzazione per sito significa che la risposta decide anche contro quale datacenter un client si autentica.\nLa stessa idea, modernizzata SRV ha un successore che vale la pena conoscere. I record SVCB e HTTPS (RFC 9460) generalizzano lo schema: parametri di servizio in DNS, tra cui ALPN, porta e suggerimenti di indirizzo, in un solo record. È così che un browser impara ad andare dritto su HTTP/3 senza un redirect. Il record HTTPS è già ampiamente diffuso. Il meccanismo è nello spirito lo stesso di SRV: è DNS a dire al client come raggiungere il servizio. Il che significa che l\u0026rsquo;argomento della sezione successiva vale anche per lui.\nTutto ciò che viene dopo la ricerca si fida della ricerca Ecco il punto di svolta, ed è il motivo per cui un articolo sul DNS ha una sezione sulla sicurezza e non il contrario.\nUna macchina unita al dominio si avvia e chiede dov\u0026rsquo;è un domain controller. Riceve un nome e una porta. Si connette lì, e poi comincia a fare tutte le cose che di solito consideriamo il livello di sicurezza: Kerberos, firma LDAP, channel binding, validazione dei certificati.\nQuindi cosa succede se la risposta era una bugia?\nEssere onesti su questo conta, perché la risposta non è «catastrofe immediata». Kerberos è stato progettato con l\u0026rsquo;autenticazione reciproca proprio perché un client non fosse in balìa della sua ricerca dei nomi: un host che non è in grado di produrre un ticket di servizio per il nome richiesto dal client non può completare lo scambio. Ricevi una risposta SRV che punta a una macchina senza chiave nel dominio e, per un client configurato in modo rigoroso, fallisce.\nIl danno realistico è più sottile, e sta tutto negli spazi attorno a questo:\nDowngrade. Un client che ripiega su NTLM quando Kerberos non funziona è appena stato consegnato a chiunque abbia risposto. Relay e coercion. L\u0026rsquo;attaccante non ha bisogno di essere il DC. Essere il nome a cui un client si connette basta per cominciare a inoltrare quell\u0026rsquo;autenticazione da qualche parte dove serve. Denial of service che sembra un guasto. Fai puntare _ldap._tcp.dc._msdcs a qualcosa che non risponde e il dominio è rotto a intermittenza, in un modo che per parecchio tempo nessuno diagnostica come DNS. Tutto ciò che non ha alcuna autenticazione reciproca. Sincronizzazione dell\u0026rsquo;ora, syslog, monitoraggio, agenti di backup, quella cosa HTTP interna con verify=False. Molti ambienti ne hanno più di quante vorrebbero ammettere. Il principio generale è quello da portarsi a casa: DNS è un meccanismo di scoperta, non di autorizzazione. È del tutto ragionevole trovare un servizio per nome. Non è ragionevole concedere qualcosa sulla base di un nome, e il numero di sistemi che lo fanno in silenzio (allowlist basate sui PTR, ACL sui nomi host, «è sulla rete interna quindi deve essere nostro») è la vera superficie d\u0026rsquo;attacco.\nCosa risolve DNSSEC, e cosa no DNSSEC esiste per rispondere a una sola domanda: questa risposta viene davvero, senza modifiche, dalla zona che possiede il nome?\nFunziona (RFC 4033 e le due che la seguono) firmando, e concatenando le firme a qualcosa di cui ti fidi già:\nOgni RRset di una zona firmata ha un RRSIG: una firma su quell\u0026rsquo;insieme. Le chiavi pubbliche della zona sono pubblicate come DNSKEY. La zona padre pubblica un record DS: un hash della chiave della figlia. Quel DS è a sua volta firmato dal padre, la cui chiave è codificata nel DS del suo padre, fino alla radice: e la chiave della radice è l\u0026rsquo;unica cosa che il tuo resolver conosceva dalla nascita. Una catena di fiducia dalla radice fino a una zona interna . \u0026#160;(la radice) l'unica chiave che il tuo resolver ha già Dove comincia ogni catena. Fornita con il resolver, ruotata di rado, fidata a priori. DS firmato per com. com. o uk., o qualunque cosa ci sia sopra di te Un padre garantisce la chiave della figlia. Il DS è un hash della chiave della figlia, firmato dal padre. DS firmato per example.com. example.com. pubblica, firmata, DS depositato presso il padre La zona che possiedi già e firmi già. Contiene la delega della zona interna, e il DS che la autentica. È tutto ciò che contiene dell'interno. DS firmato per ad.example.com. sopra la linea: pubblicato su internet sotto: servito solo dentro l'ambiente ad.example.com. la vista derivata da AD: solo server interni Firmata dentro, fidata da fuori. I tuoi resolver la validano radice \u0026#8594; com \u0026#8594; example.com \u0026#8594; qui, senza trust anchor locale e niente da distribuire. I dati non escono mai. Entra solo la fiducia, lungo la normale catena pubblica. La catena che costruisce un resolver che valida. Ogni padre garantisce la chiave della figlia con un record DS firmato, quindi un solo trust anchor incorporato alla radice autentica ogni zona sottostante, compresa una zona interna delegata il cui contenuto non esce mai dall\u0026rsquo;edificio. Anche la negazione è firmata, cosa facile da trascurare e più importante di quanto sembri. Senza, «nome inesistente» è una risposta non autenticata che un attaccante può falsificare per far sparire qualcosa. NSEC e NSEC3 danno un «tra questi due nomi non esiste nulla» autenticato.\nÈ una soluzione reale a un problema reale. L\u0026rsquo;avvelenamento della cache non è teorico: l\u0026rsquo;attacco di Kaminsky rese lo spoofing off-path così economico da imporre patch d\u0026rsquo;emergenza in tutta internet, e le mitigazioni che seguirono (randomizzazione della porta sorgente, mescolamento delle maiuscole 0x20) sono tutti tentativi di rendere più difficile indovinare, non di rendere verificabili le risposte. Il lavoro sui side channel da allora le ha erose più volte. Le firme sono l\u0026rsquo;unica cosa di quell\u0026rsquo;elenco che cambia le regole del gioco invece di alzare il prezzo.\nOra i limiti onesti, perché DNSSEC viene venduto male in entrambe le direzioni.\nNon è riservatezza. La firma è autenticazione a chiave pubblica; ogni query e ogni risposta viaggiano ancora in chiaro. La privacy sul tratto del client è DoT, DoH o DoQ, e quelli sono un meccanismo diverso che risolve un problema diverso. Cifrare il tratto verso un resolver che non valida ti compra una conversazione privata con qualcosa a cui si può ancora mentire.\nNon convalida il significato, solo l\u0026rsquo;origine. DNSSEC prova che il proprietario della zona ha pubblicato questo. Se il record è sbagliato, o malevolo, o è stato scritto da qualcuno a cui la zona ha sconsideratamente permesso di scriverlo, la firma viene applicata anche a quello con la stessa fedeltà. Firmare una zona che macchine non fidate possono scrivere non rende affidabile il contenuto: autentica la bugia. Tieni a mente questa frase; l\u0026rsquo;ultimo terzo dell\u0026rsquo;articolo ne è in sostanza la conseguenza.\nServe solo se qualcuno valida. Se il tuo resolver non valida, le firme sulle zone che interroghi sono decorazione. E se la validazione avviene su un resolver dall\u0026rsquo;altra parte della rete rispetto al client, il client si sta fidando del bit AD e del percorso: vedi trust-ad sopra.\nE va gestito. Una firma scaduta non è una risposta degradata, è un SERVFAIL: il nome si spegne. Un DS nel padre che non corrisponde più alla chiave della figlia fa lo stesso. Questo è il costo onesto, e per questo l\u0026rsquo;automazione delle sezioni successive conta più della firma iniziale.\nPerché un TLD interno inventato non si può firmare Qui le decisioni sui nomi prese anni fa tornano con il conto, e vale la pena di spiegarlo per bene perché è il motivo per cui il progetto di questo articolo usa un dominio reale, di tua proprietà, per i nomi interni.\nGuarda di nuovo come è costruita la catena: la chiave di una zona è garantita da un record DS nel suo padre. Quindi un resolver che valida può autenticare una zona interna solo se quella zona ha un padre disposto e in grado di pubblicare un DS per lei.\nad.corp.local non ha un padre del genere. Né ce l\u0026rsquo;hanno .lan, .home o qualunque altra cosa inventata il giorno in cui è stato creato il dominio:\n.local è riservato a mDNS. Usarlo per il DNS unicast non significa solo non firmarlo: è una collisione documentata con il modo in cui ogni sistema operativo dell\u0026rsquo;edificio ha il diritto di comportarsi. Ha una sezione tutta sua qui sotto, perché gioca in un altro campionato rispetto agli altri tre. .lan, .corp, .home sono stringhe non registrate. Non esiste un padre che contenga un DS, e le versioni per cui era stata fatta domanda sono state escluse dalla delega a causa del pasticcio delle collisioni di nomi negli ambienti privati. home.arpa è riservato come si deve alle reti domestiche, il che sembra ideale: ma la sua delega è deliberatamente insicura. Non esiste un percorso firmato fino a lui, per scelta di progetto. .internal è stato messo da parte dall\u0026rsquo;ICANN proprio per questo uso, e risolve il problema delle collisioni. Non risolve questo: nessuna delega significa nessun DS, quindi nessuna catena. Con una zona interna senza catena hai due opzioni: lasciarla non firmata, oppure configurare un trust anchor locale su ogni resolver che valida nell\u0026rsquo;ambiente e diventare la radice della tua isola privata. Una chiave che ora devi distribuire, monitorare e ruotare a mano, su ogni resolver, per sempre, con SERVFAIL sull\u0026rsquo;intero dominio come modalità di guasto.\nC\u0026rsquo;è una risposta molto più semplice, ed è gratuita: fai della zona interna una delega dentro una zona pubblica che possiedi già e firmi già. ad.example.com, delegata da example.com. Il DS va nel padre pubblico. Ogni resolver che valida nell\u0026rsquo;ambiente autentica allora i nomi interni con il trust anchor che ha già, e tu non distribuisci nulla.\nIl contenuto resta dentro. Solo la fiducia viene da fuori. Questa distinzione è il progetto del resto dell\u0026rsquo;articolo.\n.local non è una scelta di stile Uno di quei quattro merita una sezione a parte, perché è quello che la gente difende, e perché la difesa è sempre la stessa: funziona, lo usiamo da anni, qual è il problema.\nIl problema è che .local non è una stringa non registrata che qualcuno un giorno potrebbe vendere. È uno spazio dei nomi che ha già un proprietario e un comportamento definito, e il comportamento non è «chiedi al server DNS». RFC 6762 §3 non usa mezzi termini:\nAny DNS query for a name ending with \u0026ldquo;.local.\u0026rdquo; MUST be sent to the mDNS IPv4 link-local multicast address 224.0.0.251 (or its IPv6 equivalent FF02::FB).\nLeggi cosa governa davvero quel MUST. Non è un\u0026rsquo;affermazione su chi possiede la stringa. È un\u0026rsquo;istruzione su dove va la query, e la risposta è un gruppo multicast sul link locale, non il tuo domain controller. La stessa sezione dice che i nomi sotto .local sono «meaningful only on the link where they originate», l\u0026rsquo;equivalente DNS di un indirizzo 169.254.\nQuindi un client che segue correttamente la specifica non chiederà mai al tuo server DNS un nome .local. Grida sul filo e prende qualunque cosa risponda.\nNe nasce una serie di guasti dal sapore molto particolare:\nLa risoluzione dipende dal client, non dal tuo DNS. macOS risolve .local tramite Bonjour e l\u0026rsquo;ha sempre fatto; systemd-resolved instrada il dominio local verso mDNS per impostazione predefinita; Windows fa mDNS da Windows 10. Tre stack, tre insiemi di regole, e nessuno di loro consulta il tuo file di zona. Si ferma al primo router. mDNS è link-local per progetto. Un nome che si risolve da una scrivania sulla stessa VLAN non si risolve da un altro piano, da un\u0026rsquo;altra sede o dalla VPN: è il ticket «in ufficio funziona, a casa no» che viene chiuso come «problema di rete» quattro volte prima che qualcuno legga la specifica. Il comportamento cambia sotto i tuoi piedi. Se una data macchina provi prima il multicast, prima l\u0026rsquo;unicast o entrambi in parallelo dipende dallo stack del resolver e dalla sua versione. Gli ambienti che hanno girato su .local «senza problemi per anni» sono di solito ambienti in cui un aggiornamento della distro non ha ancora cambiato l\u0026rsquo;ordine. Le prove mancano proprio dove le cerchi. Il log delle query del DC non mostra nulla, perché non è arrivato nulla. La gente passa giorni sul server, e la query non è mai uscita dal client. E non si può firmare, che è il punto di questa sezione. Nessun padre, nessun DS, nessuna catena, nessun modo di pubblicarne una. Ora metti tutto questo sotto un dominio Active Directory. Il realm deriva dal nome di dominio. I service principal derivano dal realm. I locator _msdcs (i record di cui parla tutto questo articolo) stanno sotto un suffisso che un client conforme è tenuto a risolvere gridando sul segmento locale. Stai costruendo Kerberos sopra uno spazio dei nomi che metà del tuo ambiente risolve con un protocollo pensato per trovare stampanti.\nE uscirne costa caro, ed è questo che rende giusto non avere riguardi per la decisione originale. Su Samba non esiste una rinomina sul posto. Il percorso documentato è samba-tool domain backup rename seguito da un restore: prendi una copia rinominata del database, ne fai nascere un nuovo DC e riaggiungi da zero ogni altro DC, senza alcuna sovrapposizione consentita tra DC con il vecchio nome e DC con il nuovo. Non è il rendom di Windows, che almeno percorre i DC uno alla volta. È una ricostruzione con un nome più carino.\nQuindi il riassunto onesto. .local per un dominio unicast non è una preferenza, una convenzione o un innocuo pezzo di eredità. È un conflitto documentato con un protocollo che è attivo di serie su ogni sistema operativo dell\u0026rsquo;edificio, e il conto arriva anni dopo sotto forma di guasti di risoluzione intermittenti e non riproducibili e, quando alla fine vuoi firmare la zona, sotto forma di ricostruzione del dominio.\nLo stesso errore, con un altro cappello Già che ci siamo: la porta 5353.\nmDNS ascolta sulla UDP 5353, e non è una porta di riserva che per caso è libera. Mettere su di essa un normale servizio DNS unicast, o far puntare i resolver a :5353 perché la 53 era occupata o richiedeva root, fa lo stesso danno dalla direzione opposta: ogni macchina del segmento che parla mDNS ora sta parlando con il tuo servizio di nomi, e il tuo servizio di nomi ora riceve service discovery multicast a cui non è mai stato pensato per rispondere. Il nome e la porta sono le due metà di uno stesso spazio dei nomi, ed entrambe appartengono già a qualcun altro.\n.local sulla 53, o DNS unicast sulla 5353. Stesso fraintendimento, stessa classe di guasti intermittenti, stesse settimane del tempo di qualcun altro.\nE sii onesto su cosa ti dice Microsoft raccomandava .local ai tempi di Small Business Server, ed è per questo che così tanti ambienti se lo portano ancora dietro, e ha smesso di raccomandarlo molto tempo fa. Ereditare un dominio .local è sfortuna. La maggior parte di chi legge e ne ha uno non l\u0026rsquo;ha scelto, e la sezione qui sopra è un piano di migrazione, non un\u0026rsquo;accusa.\nMetterne in piedi uno è tutta un\u0026rsquo;altra faccenda, e sarò diretto, perché ammorbidire la cosa non ha mai aiutato nessuno.\nChiunque metta in piedi .local per Active Directory o per il normale DNS unicast, o metta un servizio DNS sulla porta 5353, non è un professionista IT. Può avere il titolo. Non sta facendo il lavoro. RFC 6762 è pubblicata dal 2013, si legge in venti minuti, e la frase che chiude l\u0026rsquo;intera questione è nella sezione 3. Costruire il servizio dei nomi di un\u0026rsquo;azienda su uno spazio dei nomi che la specifica riserva al multicast link-local non è una decisione ingegneristica difendibile. È qualcuno che tira a indovinare nell\u0026rsquo;unica parte dello stack in cui tirare a indovinare produce guasti che nessuno riesce a riprodurre e di cui tutti danno la colpa alla rete.\nDovrebbe essere rimosso dal tuo reparto IT. Non spostato di lato, non incaricato del DNS sotto supervisione. Rimosso dalla funzione. Il ruolo esiste per sapere quale pacchetto va dove e con l\u0026rsquo;autorità di chi. Qualcuno che non ha letto il documento che governa lo spazio dei nomi scelto per ogni macchina dell\u0026rsquo;edificio non sta svolgendo quel ruolo, e tenercelo significa che la prossima decisione di questa portata verrà presa nello stesso modo.\nE ogni sistema che ha toccato andrebbe sottoposto ad audit. Questa è la parte che la gente salta, ed è quella che conta di più. Una decisione così non è mai isolata. Qualcuno che non ha controllato RFC 6762 prima di dare il nome al dominio non ha controllato nient\u0026rsquo;altro, quindi vai a guardare cos\u0026rsquo;altro ha costruito. Aspettati di trovare:\nServer DNS aperti al mondo, forwarder che rispondono a chiunque chieda, e nessuna ACL da nessuna parte. Aggiornamento dinamico lasciato spalancato, e container di zona con permessi che nessuno ha rivisto da quando è stato creato il dominio. Certificati e Kerberos costruiti sopra nomi che non si sarebbero mai risolti in modo coerente, con i guasti coperti da file hosts. File hosts. Ovunque. Interi ambienti sono stati tenuti insieme da quelli, proprio perché .local non ha mai funzionato come si deve e qualcuno ha trovato un rimedio invece di una causa. Regole firewall e account di servizio creati per far sparire i sintomi, ancora lì, che concedono ancora più di quanto qualcuno ricordi. Non è vendetta. È lo scopo stesso di un segnale di competenza. Quando trovi una decisione presa senza leggere la specifica, la risposta corretta è presumere che le altre siano state prese allo stesso modo e andare a controllare: perché la stessa persona ha configurato la tua autenticazione, i tuoi certificati e il tuo controllo degli accessi, e ora hai una prova diretta di come affronta un problema che non capisce fino in fondo.\nEreditare questo pasticcio ti costa una migrazione. Tenere a libro paga chi lo sta ancora creando ti costa parecchio di più.\nI due backend DNS di Samba Un domain controller Samba AD conserva i suoi dati DNS nella directory stessa, e ci sono due modi per servirli.\nSAMBA_INTERNAL è il server DNS di Samba, integrato nell\u0026rsquo;AD DC. Gestisce le zone AD e gli aggiornamenti dinamici autenticati con Kerberos, e passa tutto il resto a un forwarder. Samba lo descrive come capace di «the basic feature required in an AD» e lo raccomanda «for simple DNS setups», il che è corretto e va preso alla lettera. Ha una sezione tutta sua qui sotto, perché quello che non fa è più lungo e più interessante di quello che fa.\nBIND9_DLZ usa BIND come server DNS, con il modulo dlz_bind9 di Samba caricato al suo interno. DLZ (Dynamically Loadable Zones) è un\u0026rsquo;interfaccia di BIND per appoggiare una zona su qualcosa di diverso da un file di zona. Il modulo risponde alle query di BIND leggendo direttamente da sam.ldb, quindi non c\u0026rsquo;è nessuna copia, nessun passo di esportazione e nessuna sincronizzazione che possa andare storta: BIND legge la directory mentre risponde.\nIl server DNS interno non fa ricorsione: non può Comincia dalla cosa che viene descritta male quasi sempre, anche da chi lo gestisce.\n«Il DC è il nostro server DNS, fa la ricorsione per i client» non è quello che succede, perché il server DNS interno non può fare ricorsione in nessun modo. L\u0026rsquo;elenco delle funzionalità di Samba lo dice chiaramente. Il DNS interno non supporta:\nil funzionamento da resolver con cache le query ricorsive (ma può inoltrare a un altro nameserver DNS ricorsivo) la firma delle transazioni a chiave condivisa (TSIG) le stub zone i trasferimenti di zona il bilanciamento del carico Round Robin tra i DC con lo scavenging e i conditional forwarder elencati anch\u0026rsquo;essi come non implementati.\nLeggi le prime due insieme, perché sono tutta la storia. Non può risolvere, e non può tenere in cache. Quello che dns forwarder ti compra davvero è un relay: un client chiede al DC windowsupdate.com, il DC chiede a un vero resolver, la risposta torna indietro passando per il DC, e poi il DC la dimentica del tutto. Il client successivo fa la stessa domanda e tutto ricomincia da capo.\nTorna alla tabella vista prima in questo articolo e nota di cosa si tratta: un forwarder senza la cache del forwarder. Ha i costi del ruolo (un salto in più, una dipendenza, una cosa che può essere giù) e nessuno dei suoi benefici.\nQuindi un DC con SAMBA_INTERNAL che serve l\u0026rsquo;ambiente non è un server DNS nel senso che la gente intende. È un proxy senza cache verso un vero resolver, e l\u0026rsquo;hai messo sulla macchina che contiene la tua directory.\nPerché è un rischio e non solo un\u0026rsquo;inefficienza L\u0026rsquo;inefficienza è facile da vedere: ogni ricerca esterna dell\u0026rsquo;edificio diventa un andata e ritorno attraverso l\u0026rsquo;AD DC, in modo permanente, senza una cache che ne smussi l\u0026rsquo;effetto. Su un dominio tranquillo nessuno se ne accorge. È proprio per questo che sopravvive.\nL\u0026rsquo;argomento di sicurezza è quello che vale la pena di fare, e ha tre parti.\nIl listener sta nel processo sbagliato. Il DNS interno è un task di servizio dell\u0026rsquo;AD DC stesso, che gira con i privilegi della directory: non un demone separato con il proprio account come è named. Quindi la cosa che analizza UDP non autenticato da chiunque possa raggiungere la porta 53 gira dentro il processo che serve LDAP e Kerberos e possiede sam.ldb. BIND ha trent\u0026rsquo;anni di attenzioni ostili, un utente dedicato e l\u0026rsquo;abitudine di essere eseguito in una jail, proprio perché un listener DNS è un quartiere difficile. Il server interno di Samba è una funzione di comodità che si trova a vivere nei gioielli di famiglia.\nServire i client significa essere raggiungibile dai client. Per essere il server DNS dell\u0026rsquo;ambiente deve accettare query da ogni workstation, ogni stampante, ogni portatile di un consulente sulla VLAN ospiti che qualcuno ha collegato per sbaglio. È una superficie d\u0026rsquo;attacco ampia, sempre aperta e non autenticata sull\u0026rsquo;host di maggior valore che possiedi, e la tieni in piedi per risparmiare il costo di un resolver che potrebbe girare su un Raspberry Pi.\nE un forwarder aperto al mondo è l\u0026rsquo;arma di qualcun altro. Un DC che inoltra per chiunque chieda è un forwarder aperto. Appena è raggiungibile da fuori della tua rete diventa un partecipante a riflessione e amplificazione, il che significa che il traffico e le segnalazioni di abuso arrivano entrambi al tuo domain controller. Non c\u0026rsquo;è un rate limiting a cui ricorrere, perché il server interno non ne ha.\nNiente di tutto questo richiede una vulnerabilità di Samba per essere una cattiva idea. È una cattiva idea per come è fatta: mette un servizio non autenticato, esposto a internet per sbaglio e pieno di parsing nello stesso processo della tua directory, a fare un lavoro che la documentazione dice che non sa fare come si deve.\nCadrà prima, e si porterà dietro di più Vale la pena di essere chiari su cosa questo argomento non è. Non è un\u0026rsquo;affermazione che il codice DNS di Samba abbia più bug di quello di BIND. BIND ha un lungo elenco di CVE, soprattutto perché è l\u0026rsquo;implementazione DNS più esaminata che esista, e contare gli advisory sarebbe un pessimo modo di scegliere tra i due.\nIl confronto che conta è strutturale, e si riduce a tre domande con tre risposte scomode.\nChi può mandargli un pacchetto malformato? Con SAMBA_INTERNAL che serve l\u0026rsquo;ambiente: ogni workstation, ogni telefono sul wireless, tutto ciò che può instradare verso la porta 53 di quella macchina. Con il progetto di questo articolo: il signer. Un host, una chiave TSIG, allow-query limitato a lui. Non è una piccola differenza di grado. È la differenza tra un servizio esposto e uno di fatto irraggiungibile, e schiaccia qualunque differenza di qualità del codice tra le due implementazioni.\nCosa cade quando cade? È questa che decide la gravità. named è un demone separato con il proprio account; quando muore, il DNS si ferma e il domain controller continua ad autenticare. Il DNS interno di Samba è un task di servizio dentro l\u0026rsquo;AD DC, quindi qualunque cosa lo blocchi, lo esaurisca o lo faccia crollare sta succedendo dentro il processo che serve LDAP e Kerberos. Un problema DNS diventa un\u0026rsquo;interruzione della directory. E systemctl restart named costa un secondo, mentre riavviare un DC è un altro genere di mattinata.\nCosa puoi farci mentre succede? BIND ha il response rate limiting, allow-query, allow-recursion, blackhole, policy per vista e la possibilità di non rispondere affatto ai client. Il server interno ha dns forwarder e un file di log. Quando qualcosa comincia a martellarlo, non c\u0026rsquo;è nessuna manopola da girare.\nPoi aggiungi la cache che manca. Ogni query di un client è un nuovo andata e ritorno verso l\u0026rsquo;esterno, quindi un\u0026rsquo;ondata di query costa al DC una ricerca a monte per ogni pacchetto invece di un hit in cache, e gliela costa nello stesso processo che sta cercando di emettere ticket Kerberos. Non serve un exploit per questo; serve una mattinata intensa, un\u0026rsquo;applicazione che si comporta male, o qualcuno che punta uno scanner sulla VLAN sbagliata. Se dura, si presenta come autenticazione lenta e nessuno pensa di guardare il DNS.\nQuindi sì: anche con DLZ di mezzo, BIND è il posto più sicuro per questo. Il modulo DLZ dà effettivamente a named accesso ai dati di Samba, ed è una considerazione reale su cui questo articolo ha già insistito. Ma un crash di named è un\u0026rsquo;interruzione del DNS e non della directory, e in questo progetto quel named non riceve affatto query dall\u0026rsquo;ambiente. I bug sono un fatto di ogni codebase. Il raggio d\u0026rsquo;impatto e la raggiungibilità sono cose che scegli tu.\nE non può costruire il progetto di questo articolo C\u0026rsquo;è un motivo più semplice e più definitivo per cui qui non è il backend.\nNiente trasferimenti di zona. La pipeline della sezione successiva (primario nascosto, signer, server autoritativi autonomi) comincia con un AXFR in uscita dal DC. SAMBA_INTERNAL non ha nulla con cui trasferire. Niente TSIG nemmeno, quindi manca perfino l\u0026rsquo;autenticazione di cui quel trasferimento avrebbe bisogno. E nessuna firma, e nessuna validazione di ciò che inoltra.\nQuindi il riassunto onesto di SAMBA_INTERNAL: è il backend che ti permette di tirare su un dominio AD in laboratorio una domenica pomeriggio senza configurare BIND, ed è molto bravo in questo. Samba dice «simple DNS setups» e intende proprio quello. Non è un resolver, non è mai stato costruito per essere il servizio DNS di un ambiente, e nel momento in cui vuoi firma, trasferimenti, viste, ACL, cache o rate limiting, la risposta non è regolarlo. Quelle manopole non le ha. La risposta è BIND.\nSe oggi lo usi con ogni client che punta al DC, la correzione non è urgente ma nemmeno facoltativa: dai ai client un vero resolver che valida, e imposta dns forwarder sul DC perché punti a quello, così il DC risponde per le sue zone e per nient\u0026rsquo;altro.\nE questa è la parte su cui voglio essere chiaro, perché «non usare DLZ» viene ripetuto come se fosse una regola di hardening: DLZ non è l\u0026rsquo;esposizione. È il meccanismo di estrazione. Quello che conta non è quale modulo è caricato in BIND: è chi ha il permesso di parlare con quel BIND, e cosa succede alla zona dopo. Un BIND con backend DLZ che risponde solo a una richiesta di trasferimento dal tuo signer non è una superficie d\u0026rsquo;attacco in nessun senso interessante. Un DC con SAMBA_INTERNAL che riceve ogni ricerca di nomi da quattrocento portatili lo è eccome. Solo uno dei due compare nelle checklist di hardening, e non è quello che conta.\nDue cose su DLZ sono vere e conviene pianificarle invece di temerle:\nIl modulo è legato alla versione di BIND. Samba distribuisce un .so separato per ogni versione di BIND, e named.conf ne nomina uno in particolare. Un aggiornamento di versione maggiore di BIND significa che il modulo corrispondente deve essere al suo posto, altrimenti named non parte. È una dipendenza di pacchettizzazione da testare in anticipo, non una proprietà di sicurezza. named ha bisogno di accedere ai dati di Samba, ed è per questo che Samba tiene una directory dedicata per le parti che servono a BIND invece di concedergli l\u0026rsquo;intera directory privata. La concessione dovrebbe essere ristretta: vale la pena di verificare che lo sia ancora sui tuoi DC, perché è l\u0026rsquo;unico punto in cui DLZ allarga davvero ciò che raggiungerebbe una compromissione di named. Il motivo per cui DLZ è la scelta giusta qui è ciò che rende possibile: l\u0026rsquo;interfaccia DLZ di BIND supporta l\u0026rsquo;enumerazione di un\u0026rsquo;intera zona, ed è questo che rende possibile un trasferimento di zona da una zona con backend DLZ. Quel trasferimento è il primo salto della pipeline, ed è BIND a farlo, il che significa che il resto della pipeline è normale configurazione di BIND invece di qualcosa di esotico.\nC\u0026rsquo;è un vincolo che dà forma a tutto ciò che viene dopo, e vale la pena di dirlo chiaramente perché è facile dare per scontato il contrario. Una zona DLZ non può essere firmata. ISC lo dice esplicitamente nell\u0026rsquo;ARM di BIND: DLZ «is unable to handle DNSSEC-signed data due to its limited API». Non puoi appendere una dnssec-policy all\u0026rsquo;istruzione dlz e considerarti a posto.\nQuello che puoi fare (e che ISC suggerisce per DLZ nello stesso respiro) è farlo girare come primario nascosto, con la firma fatta da una normale zona BIND che trasferisce i dati al suo interno. È la sezione successiva, e il vincolo è il motivo per cui ha la forma che ha.\nVale la pena di sapere che questo è un vincolo di Samba e non una legge di Active Directory. Il server DNS di Microsoft fa la firma online di zone dinamiche integrate in AD da Windows Server 2012. La zona viene firmata sul posto, le chiavi private si replicano ai Key Master attraverso la replica di AD stessa, e gli aggiornamenti dinamici continuano a funzionare. Su Windows, «sign the AD partitions» è un\u0026rsquo;opzione reale e la risposta all\u0026rsquo;obiezione del continuo cambiamento è già incorporata. (Su Server 2008 R2 non lo era: potevi firmare una zona integrata in AD, ma non una che accettasse aggiornamenti dinamici, e ogni modifica significava rifirmare a mano: è da lì che viene la leggenda secondo cui le zone AD non si possono firmare.)\nSamba non ha nulla di equivalente. Nessuno dei due backend firma: il server interno non ha affatto DNSSEC, e DLZ non può portare dati firmati. Quindi su Samba la pipeline di trasferimento e firma non è un progetto tra tanti. È la strada.\nLa pipeline di pubblicazione Ora la sua forma. Quattro ruoli, e il DC sta in fondo, dove niente può raggiungerlo.\nPubblicare una zona Active Directory da un domain controller primario nascosto Domain controller: primario nascosto BIND con dlz_bind9, autoritativo dalla directory ricorsione off \u0026#183; trasferisce solo al signer, con TSIG L'host della directory non riceve domande. La macchina di maggior valore dell'ambiente non è raggiungibile dalle macchine che dipendono da lei. AXFR al refresh del SOA un polling: DLZ non può fare notify Istanza di firma: un normale secondario riceve la zona e la serve firmata un secondo named sul DC, o un host a sé La zona DLZ non può essere firmata. Quindi firma un normale secondario con la copia, e con i client fuori, la zona non cambia di continuo. trasferimento la zona firmata Server autoritativi semplici secondari della zona firmata nessuna chiave, nessuna strada verso la directory Una compromissione ottiene una copia, non un falso. Senza chiavi sui server esposti all'ambiente, nessun nuovo record creato può superare la validazione. query risposte con firme Resolver che validano a cui punta il resolv.conf dei client zone interne inoltrate, albero pubblico percorso La validazione avviene vicino al client. La catena arriva al trust anchor della radice, perché la zona interna è una delega dentro una zona pubblica. nessun DNS per i client sul DC La pubblicazione va in un solo verso, dalla directory verso l'esterno. Niente di ciò che invia un client arriva mai in cima. Il DC è un primario nascosto: serve la zona AD tramite trasferimento e non risponde a nient\u0026rsquo;altro. L\u0026rsquo;istanza di firma è una normale zona secondaria che contiene la copia trasferita: la zona DLZ stessa non si può firmare, quindi la firma avviene sempre un salto più avanti, che quel salto sia un secondo named sul DC o un host separato. I server autoritativi autonomi sono l\u0026rsquo;unica cosa che i client vedono mai, e sono secondari della zona firmata. 1. Il domain controller: primario nascosto. BIND con dlz_bind9, autoritativo per le zone AD a partire dalla directory. Ricorsione disattivata. Nessun servizio rivolto ai client. allow-transfer limitato al solo signer, con TSIG. Dal punto di vista della rete il DC non serve affatto DNS, e l\u0026rsquo;unica cosa che lo interroga è la macchina successiva.\n2. L\u0026rsquo;istanza di firma: una normale zona BIND che trasferisce i dati al suo interno. È qui che vivono inline-signing e la dnssec-policy, su una zona con lo stesso nome che contiene la copia trasferita. BIND tiene la copia non firmata che ha ricevuto e la copia firmata che pubblica come cose separate, e rifirma man mano che arrivano nuovi trasferimenti. Poiché si tratta di un trasferimento e non di un file condiviso, questa istanza può stare sul DC stesso (un secondo named sul proprio indirizzo) oppure su un host separato, e la configurazione è quasi identica in entrambi i casi.\nIl compromesso è quello che sembra: sul DC hai una macchina in meno da gestire, mentre un host separato tiene le chiavi private lontane dalla macchina che contiene la directory. Sono entrambe difendibili, e la scelta non cambia nient\u0026rsquo;altro nella pipeline. Quello che conta è che la firma avvenga una volta sola, in un punto definito, sotto una policy delle chiavi: la differenza tra un DNSSEC che gestisci e un DNSSEC che scade alle tre del mattino.\n3. I server autoritativi: l\u0026rsquo;unica cosa che i client vedono. Semplici secondari della zona firmata. Non contengono chiavi, non firmano e non hanno alcun percorso verso la directory. Se uno viene compromesso, l\u0026rsquo;attaccante ha una copia di una zona e nessuna possibilità di falsificare un nuovo record che superi la validazione.\n4. I resolver. Resolver ricorsivi che validano per l\u0026rsquo;ambiente, che inoltrano in modo condizionale le zone interne a quei server autoritativi e percorrono l\u0026rsquo;albero pubblico per tutto il resto. Sono loro a cui punta il resolv.conf dei client.\nDa questa disposizione derivano due proprietà che vale la pena di enunciare a sé, perché sono tutto il punto:\nLa macchina che contiene la directory non è raggiungibile dalle macchine che la usano. Un domain controller è l\u0026rsquo;host di maggior valore dell\u0026rsquo;ambiente. Dargli un servizio di rete rivolto ai client, che risponde a UDP non autenticato da qualunque workstation, è un pessimo scambio per un servizio che altre macchine possono svolgere. La firma avviene una volta sola, in un punto definito. L\u0026rsquo;obiezione abituale alla firma di una zona AD è il continuo cambiamento: il contenuto cambierebbe troppo spesso perché le firme stiano al passo. Quell\u0026rsquo;obiezione è in realtà un\u0026rsquo;obiezione alla disposizione predefinita, non alla firma. Con la registrazione dei client spostata altrove, come la sezione successiva sostiene che debba essere, la zona AD cambia quando un domain controller viene promosso o retrocesso e praticamente mai altrimenti. Una zona scritta solo dai DC è una zona stabile, e firmare una zona stabile è una cosa banale. Tenere fuori i client non è solo un controllo di sicurezza; è ciò che rende la zona abbastanza tranquilla da firmarla senza problemi. Come si collega davvero la firma La forma qui sopra è la parte importante, ma «una normale zona BIND che trasferisce i dati al suo interno» merita di essere mostrata invece che descritta, perché il primo tentativo di solito si arena cercando di firmare direttamente la DLZ.\nSul DC, il lato DLZ resta volutamente noioso. Serve la directory, consegna la zona a esattamente un peer, e non fa nient\u0026rsquo;altro:\nkey \u0026#34;transfer-to-signer\u0026#34; { algorithm hmac-sha256; secret \u0026#34;...\u0026#34;; }; options { recursion no; allow-query { key transfer-to-signer; localhost; }; allow-transfer { key transfer-to-signer; }; notify no; }; dlz \u0026#34;AD DNS Zone\u0026#34; { database \u0026#34;dlopen /usr/lib64/samba/bind9/dlz_bind9_18.so\u0026#34;; }; Nota che il .so porta nel nome la versione maggiore di BIND. È il legame di versione della sezione precedente reso concreto: un aggiornamento di BIND richiede che il modulo Samba corrispondente sia al suo posto prima che named possa partire.\nSul lato della firma, la zona è un normale secondario con le opzioni di firma aggiunte. Questa è la parte che non può stare sulla DLZ:\ndnssec-policy \u0026#34;ad-internal\u0026#34; { keys { ksk lifetime P365D algorithm ecdsa256; zsk lifetime P90D algorithm ecdsa256; }; }; zone \u0026#34;ad.example.com\u0026#34; { type secondary; primaries { 192.0.2.10 key transfer-to-signer; }; file \u0026#34;ad.example.com.axfr\u0026#34;; inline-signing yes; dnssec-policy \u0026#34;ad-internal\u0026#34;; allow-transfer { key transfer-to-public; }; also-notify { 192.0.2.20; 192.0.2.21; }; }; Che questo funzioni su un secondario è il dettaglio che regge tutto, e l\u0026rsquo;ARM lo dice direttamente:\nIf yes, BIND 9 maintains a separate signed version of the zone. An unsigned zone is transferred in or loaded from disk and the signed version of the zone is served with, possibly, a different serial number.\nQuindi BIND tiene due copie: quella non firmata che ha ricevuto, scritta in file, e quella firmata che serve, scritta accanto con l\u0026rsquo;estensione .signed. Arriva un trasferimento, la versione firmata viene rigenerata e i server a valle ricevono un notify, perché a quel punto è una zona del tutto ordinaria. inline-signing yes è in effetti il valore predefinito una volta collegata una dnssec-policy; è scritto qui sopra perché una configurazione che dice cosa fa vale una riga in più.\nIl rollover delle chiavi arriva con la policy e non con un cron job. I rollover della ZSK non richiedono alcun intervento; quelli della KSK richiedono che il nuovo DS arrivi al padre, ed è l\u0026rsquo;automazione CDS/CDNSKEY di cui si parla più avanti. rndc dnssec -status ad.example.com ti dice a che punto del suo ciclo di vita è ogni chiave.\nSe quel blocco gira sul DC o su un host a sé è solo questione di a quale indirizzo punta primaries. Sul DC è una seconda istanza di named su un secondo indirizzo, che trasferisce dalla prima tramite il loopback o un\u0026rsquo;interfaccia di gestione. Ecco cosa significa in pratica «BIND con DLZ può fare da signer»: stesso software, stessa macchina se vuoi, ma la firma avviene sulla copia trasferita invece che sulla zona DLZ.\nL\u0026rsquo;unico intoppo operativo è il notify, ed è sul lato DLZ. Il manuale di ISC non gira intorno alla cosa: DLZ «has no built-in support for DNS notify», quindi i server secondari non vengono informati automaticamente delle modifiche alle zone nel database. Samba può cambiare un record nella directory e l\u0026rsquo;istanza DLZ non ha idea di doverlo dire a qualcuno.\nQuindi il primo salto è un polling, non un push. Il signer si aggiorna secondo il timer SOA della zona che sta trasferendo, il che significa:\nLa propagazione da una modifica sul DC a un record firmato e pubblicato è limitata da quell\u0026rsquo;intervallo di refresh, non da qualche secondo. Promuovi un DC e i suoi nuovi record _msdcs compaiono a valle entro un refresh. Quell\u0026rsquo;intervallo è la manopola da girare se il ritardo conta. È un compromesso con la frequenza con cui vuoi che la DLZ venga interrogata, e questo porta all\u0026rsquo;altra cosa che ISC dice di DLZ: fa ricerche nel database in tempo reale senza cache ed è «not recommended for use on high-volume servers». Entrambe sono argomenti a favore di questa topologia, non contro. L\u0026rsquo;unico client che l\u0026rsquo;istanza DLZ abbia mai è il signer, che chiede una volta per refresh. Il vero carico di query dell\u0026rsquo;ambiente finisce sui server autoritativi autonomi, che servono un semplice file di zona firmato alla massima velocità. Tutto ciò che sta a valle del signer è convenzionale: i server autoritativi sono secondari della zona firmata, ricevono un notify come si deve e non toccano mai né la directory né una chiave.\nI client non devono scrivere la zona che contiene i locator Questa è quella importante, ed è una regola di progetto più che un\u0026rsquo;impostazione.\nActive Directory registra i record in modo dinamico. Una macchina entra nel dominio e si registra; un DC si avvia e registra i record SRV che pubblicizzano i suoi servizi. Aggiornamento dinamico «sicuro» significa che quegli aggiornamenti sono autenticati: la macchina dimostra di essere chi dice di essere con le proprie credenziali, e c\u0026rsquo;è una ACL per record, quindi in generale una macchina può modificare solo un record che ha creato lei.\nLeggilo con attenzione, perché la garanzia è più stretta di quanto sembri a prima vista. L\u0026rsquo;aggiornamento dinamico sicuro autentica chi sta scrivendo. Non valuta cosa significa il record. E l\u0026rsquo;insieme degli account autorizzati a scrivere è molto più ampio di quanto si creda: in una zona integrata in AD predefinita il gruppo Authenticated Users detiene Create All Child Objects sul container della zona nella directory, perché ADIDNS conserva ogni record come oggetto AD sotto CN=MicrosoftDNS,DC=DomainDnsZones. Non solo gli account macchina: qualunque account autenticato del dominio, compreso quello di chi stamattina ha aperto l\u0026rsquo;allegato della fattura.\nIl che produce due modalità di guasto in una zona che contiene sia i record dei client sia i locator dei servizi:\nI nomi che non esistono ancora non appartengono a nessuno. Le ACL per record proteggono un record che ha già un proprietario. Un nome mai registrato non ha un oggetto su cui far valere una ACL, quindi il primo account che lo crea se lo prende. È il meccanismo dietro l\u0026rsquo;intera famiglia di attacchi ADIDNS, il più affilato dei quali è un wildcard: crea * e ogni nome della zona che nessuno ha rivendicato esplicitamente (errori di battitura, host dismessi, wpad) si risolve verso l\u0026rsquo;attaccante. I record esistenti restano intatti, ed è proprio per questo che passa inosservato.\nIl raggio d\u0026rsquo;impatto comprende i locator. I record sotto _msdcs sono il modo in cui ogni client del dominio trova un domain controller e un KDC. Sono i record più critici per la sicurezza che possiedi, e in un\u0026rsquo;installazione predefinita stanno nella stessa zona in cui quattrocento portatili scrivono ogni volta che ottengono un lease DHCP.\nChi può scrivere quale zona: una zona unica contro una divisione per scrittore Default: una sola zona ad.example.com locator e record dei client insieme _ldap._tcp.dc._msdcs. SRV _kerberos._udp SRV dc01 A laptop-042 A * A \u0026#8592; non rivendicato un nome mai registrato non ha ACL da far valere ogni macchina del dominio può scriverla tutta Un solo account macchina compromesso può riscrivere i record che localizzano un domain controller. Divisa per chi scrive ad.example.com: solo DC nessun client può aggiornare questa zona _ldap._tcp.dc._msdcs. SRV _kerberos._udp SRV dc01 A delega NS dyn.ad.example.com o una zona Samba separata con la sua ACL laptop-042 A ogni macchina del dominio può scrivere nessun percorso verso i locator Chi può scrivere cosa. A sinistra, una sola zona, e ogni macchina unita al dominio è uno scrittore autorizzato nella zona che contiene i locator dei DC. A destra, la zona AD è scritta solo dai DC, e le registrazioni dei client finiscono in una sotto-zona separata dove il peggio che una macchina compromessa può fare è mentire su se stessa. Quindi la regola: la zona che contiene i locator viene scritta dai domain controller, e da nient\u0026rsquo;altro. La registrazione dinamica dei client va da un\u0026rsquo;altra parte.\nQuell\u0026rsquo;altra parte può essere una di due cose, ed entrambe vanno bene:\nUna sotto-zona delegata servita altrove. La zona AD contiene una delega NS per, diciamo, dyn.ad.example.com, e i record finiscono su un server separato che accetta gli aggiornamenti. Le partizioni di Samba non ricevono mai una scrittura da un client. Una zona separata in Samba con la propria ACL di aggiornamento. Sempre nella directory, ma una zona a sé, quindi una scrittura di un client non ha alcun percorso verso _msdcs o verso i record di un DC. La prima dà la separazione più netta; la seconda è meno roba da gestire. Quello che viola la regola non è nessuna delle due. È il comportamento predefinito, in cui le due cose convivono. Che è come gira ancora la maggior parte dei domini, perché nessuno l\u0026rsquo;ha scelto e nessuno è tornato a guardarci.\nE c\u0026rsquo;è un secondo dividendo, quello che riporta tutto alla pipeline. Una zona scritta solo dai domain controller è una zona che non cambia quasi mai: una promozione di un DC, una retrocessione, e per il resto silenzio. Tutto il continuo cambiamento di una zona AD predefinita è registrazione dei client. Toglila e con lei se ne va l\u0026rsquo;obiezione alla firma delle partizioni AD: non c\u0026rsquo;è nessun flusso di aggiornamenti che le firme debbano inseguire, quindi firmarla è routine invece che una lotta. La disciplina di scrittura e la firma sono la stessa decisione vista due volte.\nAccanto a entrambe c\u0026rsquo;è un permesso da andare a controllare, e su un DC Microsoft è la correzione diretta. Poiché i record ADIDNS sono oggetti della directory, il diritto viene da una ACL di AD e non da qualcosa nel protocollo DNS: Authenticated Users che detiene Create All Child Objects sul container della zona. Restringerlo è la mitigazione più pulita per il problema dei nomi non rivendicati e del wildcard, e in molti ambienti il permesso si può togliere del tutto una volta che sai cosa ha davvero bisogno di registrarsi da sé. L\u0026rsquo;AD DNS di Samba conserva i suoi record nella directory allo stesso modo, quindi vale la stessa domanda: vai a vedere cosa concede davvero il container della tua zona.\nMa un momento: nel 2026 i client dovrebbero registrarsi? Tutto quanto sopra presuppone che l\u0026rsquo;aggiornamento dinamico dei client sia qualcosa di cui hai bisogno e che stai cercando di rendere sicuro. Prima di accettarlo, vale la pena di porre la domanda che nessuno pone, perché la risposta è cambiata da quando questo comportamento è stato progettato.\nLa registrazione DNS dinamica è stata pensata per un desktop. Una scatola sotto una scrivania, un cavo di rete, un indirizzo tenuto per anni. In quel mondo una macchina che registrava il proprio nome era una cosa ordinata e sostanzialmente vera.\nOra guarda cos\u0026rsquo;è un client nel 2026. Si sveglia sul wifi di casa. Arriva in ufficio ed entra nel wireless aziendale. Finisce in una docking station e prende anche un indirizzo cablato. Qualcuno avvia la VPN e compare un adattatore tunnel con un terzo indirizzo. Va in un bar, si collega in tethering a un telefono, e la VPN torna su con un quarto. È una macchina, un nome, e una mezza dozzina di indirizzi in una giornata di lavoro: e per impostazione predefinita cercherà di registrarne parecchi.\nCosì la zona si riempie di affermazioni che un tempo erano vere.\nWindows registra ogni adattatore che ha, a meno che qualcuno non sia passato a togliere la spunta da Register this connection\u0026rsquo;s addresses in DNS interfaccia per interfaccia. Un portatile nel dock con la VPN attiva è una macchina con tre adattatori attivi e un\u0026rsquo;opinione su ciascuno. Più record A per lo stesso nome non sono uno stato d\u0026rsquo;errore, sono il risultato normale. Una ricerca li restituisce tutti, i client li provano nell\u0026rsquo;ordine che preferiscono, e le connessioni a quel nome falliscono in proporzione a quanti indirizzi sono morti. È il meccanismo dietro «l\u0026rsquo;assistenza remota vede la macchina un minuto sì e quello dopo no». Gli indirizzi VPN sono i peggiori, perché un indirizzo di tunnel vale per un\u0026rsquo;ora e il record gli sopravvive. Il tunnel cade, l\u0026rsquo;indirizzo del pool va a qualcun altro, e il nome ora punta a un collega. Le docking station confondono l\u0026rsquo;identità stessa. A meno che non sia configurato il pass-through dell\u0026rsquo;indirizzo MAC, il lease appartiene al dock e non al portatile, quindi in un ambiente con postazioni a rotazione nomi, lease e macchine si allontanano tra loro ogni giorno. E la proprietà lo rende permanente. Un record può essere aggiornato solo dall\u0026rsquo;account che l\u0026rsquo;ha creato. Quando un record è stato creato dal DHCP con una credenziale e più tardi la macchina cerca di aggiornarlo con la propria, l\u0026rsquo;aggiornamento fallisce, in silenzio, e l\u0026rsquo;indirizzo vecchio resta esattamente dov\u0026rsquo;è. Nemmeno la pulizia è il salvataggio che sembra. Samba ha lo scavenging dalla 4.9, ma è disattivato per impostazione predefinita (dns zone scavenging = yes, con samba-tool dns zoneoptions --aging=1), e Samba stessa dice che «should only be enabled on new zones or new installations», perché le versioni più vecchie marcavano i record dinamici come statici e quelli statici come dinamici. Negli ambienti con più probabilità di essere pieni di spazzatura, quelli che girano da anni, lo strumento per ripulirli è proprio quello che ti consigliano di non attivare. Ha anche avuto un CVE tutto suo.\nQuindi poni la domanda in modo diretto: cosa consuma davvero il record A di un portatile?\nNella maggior parte delle realtà, ben poco. Gli utenti si connettono ai server; i server non si connettono ai portatili. I veri consumatori sono gli strumenti di assistenza remota, l\u0026rsquo;RDP verso una workstation per nome, e l\u0026rsquo;inventario o il monitoraggio: e quasi tutti questi strumenti mantengono un proprio inventario e lavorano con un agente che si fa vivo da sé, perché non hanno mai potuto contare sul DNS per i client mobili.\nIl che suggerisce di invertire il comportamento predefinito:\nServer e infrastruttura ricevono i record dal provisioning. Con NetBox e Ansible già in gioco, il record viene creato dalla stessa cosa che ha creato la macchina, è corretto per costruzione, e viene rimosso quando viene rimossa la macchina. La parte cablata e stabile dell\u0026rsquo;ambiente può ricevere i record dal DHCP se qualcosa ne ha davvero bisogno, con un\u0026rsquo;unica credenziale che li possiede così gli aggiornamenti non falliscono. I client mobili non registrano nulla. Sono consumatori del DNS, non editori. Se qualcosa deve raggiungere un portatile, gli serve un agente, non un record A. Arrivi nello stesso posto in cui ti aveva portato l\u0026rsquo;argomento di sicurezza, da una direzione completamente diversa. Meno scrittori significa una superficie ADIDNS più piccola, una zona non piena di affermazioni scadute e, tornando alla pipeline, una zona abbastanza tranquilla da firmarla senza pensarci.\nL\u0026rsquo;argomento di sicurezza dice che i client non devono scrivere la zona che contiene i locator. L\u0026rsquo;argomento operativo chiede perché scrivano nel DNS in primo luogo. Nel 2026, per una flotta che cambia indirizzo cinque volte al giorno, «non lo fanno» è una risposta perfettamente valida, e molto meno lavoro che rendere sicuro il loro disordine.\nViste separate, e da dove viene la fiducia L\u0026rsquo;ultimo pezzo tiene insieme le due metà dell\u0026rsquo;articolo.\nCi sono due viste dello spazio dei nomi. Una zona pubblica, pubblicata su internet, con la manciata di nomi di cui il mondo ha bisogno. E una vista interna (il contenuto derivato da AD, ogni host unito al dominio, ogni locator di servizio, la topologia dei siti) che il mondo non ha alcun motivo di vedere. Quel contenuto è una mappa dell\u0026rsquo;ambiente, e dovrebbe essere irraggiungibile e non trasferibile dall\u0026rsquo;esterno.\nMa la fiducia per la vista interna viene dal lato pubblico, ed è questo che rende questo progetto migliore della solita isola di DNS interno:\nexample.com è pubblico e firmato, con il suo DS nel padre e una catena fino alla radice. ad.example.com è delegato da lui. Il padre pubblico pubblica la delega e un DS per la chiave della zona interna. I server autoritativi interni servono ad.example.com firmato. I resolver interni lo validano (radice → com → example.com → ad.example.com) usando nient\u0026rsquo;altro che il trust anchor della radice che avevano già. Nessun trust anchor locale. Nessuna isola. Nessuna chiave distribuita a mano. I dati non escono mai dall\u0026rsquo;edificio, e il percorso di validazione è quello pubblico di sempre. Quando aggiungi un resolver, valida correttamente i nomi interni senza alcuna configurazione DNSSEC.\nSiamo onesti sul compromesso, perché ce n\u0026rsquo;è uno. Pubblicare una delega e un DS nella zona pubblica significa che l\u0026rsquo;esistenza di ad.example.com, e i nomi dei suoi name server, sono pubblici. Il contenuto no, e non lo è mai: ma hai detto al mondo che la zona esiste. In cambio, ogni resolver che possiedi valida i nomi interni rispetto alla vera radice. È un buon compromesso per la maggior parte degli ambienti, e dovrebbe essere deliberato e non una sorpresa.\nDue cose da fare bene insieme a questo:\nMantieni la vista interna non enumerabile e non trasferibile. allow-transfer sui server autoritativi interni è per il signer e per i tuoi secondari, nient\u0026rsquo;altro. E tieni presente che la negazione autenticata NSEC permette a chiunque possa interrogare la zona di percorrerla da cima a fondo; NSEC3 alza quel costo, ma il vero controllo è che gli estranei non possano raggiungere affatto i server. Automatizza il DS. Un DS nel padre che smette di corrispondere alla chiave della figlia manda l\u0026rsquo;intero dominio interno in SERVFAIL. CDS/CDNSKEY esistono perché la figlia possa segnalare un cambio di chiave e il padre possa recepirlo senza che una persona modifichi un record durante un rollover. Se la zona padre sta presso un registrar o un provider che lo supporta, usalo; altrimenti la procedura di rollover va messa per iscritto prima del primo rollover, non durante. Far validare davvero Windows e Linux Tutto fin qui riguardava la pubblicazione di una zona che può essere verificata. Niente di tutto ciò fa qualcosa finché qualcosa dal lato del client non insiste a verificarla. Una zona firmata alla perfezione e un client che non controlla mai una firma producono esattamente la stessa esperienza di una zona non firmata, fino al giorno in cui non è più così.\nLa validazione può avvenire solo in due posti, e la differenza tra i due è la differenza tra un controllo di sicurezza e un suggerimento educato.\nValidare sul resolver, e fidarsi del bit AD. Il client chiede a un resolver, il resolver fa la crittografia e riporta il risultato impostando un bit, AD (authenticated data), nella risposta. Il client crede al bit. È il modello che usa Windows, ed è forte solo quanto il percorso tra il client e il resolver, perché qualunque cosa possa rispondere al posto del resolver può impostare quel bit.\nValidare sul client stesso. La macchina esegue il proprio resolver che valida, quindi il «percorso verso il resolver» è un socket di loopback dentro la macchina e non resta nulla da falsificare. È più forte, e su Linux è del tutto realizzabile.\nIl default è niente Prima di configurare qualunque cosa, vale la pena di vedere cosa fa di serie una normale workstation Linux. Questa è una macchina Fedora 44, systemd 259, mai toccata:\n$ resolvectl status | head -3 Global Protocols: LLMNR=resolve -mDNS -DNSOverTLS DNSSEC=no/unsupported resolv.conf mode: stub $ grep options /etc/resolv.conf options edns0 trust-ad $ dig +dnssec cloudflare.com A | grep flags ;; flags: qr rd ra; QUERY: 1, ANSWER: 3, AUTHORITY: 0, ADDITIONAL: 1 Leggi quelle tre righe insieme, perché raccontano una piccola storia.\nLo stub è configurato con trust-ad: gli è stato detto di credere al bit AD. systemd-resolved riporta DNSSEC=no/unsupported, quindi non sta validando niente lui stesso. E la risposta per una zona firmata torna con i flag qr rd ra e nessun ad: niente in tutto quel percorso ha dichiarato di aver validato.\nNon è una configurazione sbagliata. È il default. A un client si può dire di fidarsi di un\u0026rsquo;affermazione che nessuno nella catena sta facendo. Nessuno sta controllando niente. Vale la pena di rifletterci un minuto prima di configurare qualunque altra cosa.\nLinux Tre opzioni, in ordine crescente di quanto poco devi fidarti della rete.\n1. systemd-resolved, che valida in locale. Un drop-in invece di modificare il file distribuito:\n# /etc/systemd/resolved.conf.d/dnssec.conf [Resolve] DNSSEC=yes DNSOverTLS=opportunistic Poi systemctl restart systemd-resolved e conferma con resolvectl status che la riga ora dice DNSSEC=yes.\nL\u0026rsquo;impostazione a cui fare attenzione è quella di mezzo. DNSSEC=allow-downgrade sembra un compromesso sensato e non è un controllo di sicurezza: lo dice resolved.conf(5) stesso:\nNote that this mode makes DNSSEC validation vulnerable to \u0026ldquo;downgrade\u0026rdquo; attacks, where an attacker might be able to trigger a downgrade to non-DNSSEC mode by synthesizing a DNS response that suggests DNSSEC was not supported.\nUn attaccante che può falsificare le risposte è esattamente l\u0026rsquo;attaccante che DNSSEC esiste per fermare, quindi una modalità che lui può disattivare falsificando una risposta non ti compra nulla contro di lui. O è yes o è decorazione.\n2. Un vero resolver che valida sull\u0026rsquo;host. Il validatore di systemd-resolved è comodo più che accurato. Dove conta, fai girare Unbound o BIND sul loopback e fai puntare lo stub a lui:\n# unbound: validate against the root anchor, refuse to be stripped server: module-config: \u0026#34;validator iterator\u0026#34; auto-trust-anchor-file: \u0026#34;/var/lib/unbound/root.key\u0026#34; harden-dnssec-stripped: yes val-permissive-mode: no # the internal zone is reached like any other name — no local anchor needed forward-zone: name: \u0026#34;ad.example.com.\u0026#34; forward-addr: 192.0.2.53 L\u0026rsquo;equivalente in BIND è una riga, dnssec-validation auto;, che usa la sua copia incorporata dell\u0026rsquo;anchor della radice e gestisce il rollover per te.\n3. Su tutto l\u0026rsquo;ambiente, sui resolver che già gestisci. Sono la fase quattro della pipeline vista prima in questo articolo. La validazione avviene lì, i client si fidano del bit AD, e il tratto tra loro è la cosa da proteggere: con DoT, o con una rete su cui sei disposto a fare quell\u0026rsquo;assunzione.\nE nota cosa non c\u0026rsquo;è in nessuna di queste configurazioni: un trust anchor per la zona interna. Poiché ad.example.com è una delega dentro una zona firmata pubblicamente, ognuna di queste valida i nomi interni attraverso la normale catena dalla radice. È il progetto della sezione precedente che si ripaga da solo. L\u0026rsquo;alternativa è spingere un anchor locale su ogni client e resolver dell\u0026rsquo;ambiente, e rispingerlo a ogni rollover.\nWindows Prima la cosa importante, perché viene fraintesa di continuo: il DNS Client di Windows non valida DNSSEC. Non esegue crittografia, non controlla nessuna firma e non ha alcun trust anchor. È uno stub resolver, e lo è sempre stato.\nQuello che puoi fare è costringerlo a rifiutare le risposte che non sono state validate dal server per suo conto. È la Name Resolution Policy Table, e funziona per spazio dei nomi invece che a livello globale:\n# Require validated answers for the internal zone Add-DnsClientNrptRule -Namespace \u0026#34;.ad.example.com\u0026#34; ` -DnsSecEnable -DnsSecValidationRequired # What is actually in force on this machine, including from Group Policy Get-DnsClientNrptPolicy -Effective Get-DnsClientNrptRule Per l\u0026rsquo;ambiente, la stessa cosa sta in Group Policy sotto Computer Configuration → Policies → Windows Settings → Name Resolution Policy: crea una regola per lo spazio dei nomi, spunta l\u0026rsquo;opzione DNSSEC e spunta il requisito che il client controlli che i dati siano stati validati dal server DNS.\nDa qui seguono due cose, ed entrambe contano.\nQualcosa a monte deve comunque fare la validazione. La regola NRPT fa sì che il client pretenda il bit AD; non ne crea uno. Il resolver a cui puntano quei client deve essere un resolver che valida, altrimenti ogni nome di quello spazio dei nomi fallisce.\nEd è per questo che la regola NRPT ha accanto le opzioni IPsec. Microsoft le ha messe lì per il motivo spiegato all\u0026rsquo;inizio di questa sezione: pretendere un bit che qualunque attaccante sul percorso può impostare non è un granché come requisito. Se ti affidi al modello in cui valida il resolver su una rete non fidata, l\u0026rsquo;ultimo tratto va protetto: IPsec tra client e resolver, o DoT dove il resolver lo supporta.\nFallisce in chiusura, quindi introducilo in quest\u0026rsquo;ordine Forzare la validazione trasforma una classe di compromissioni silenziose in una classe di interruzioni rumorose. È il compromesso giusto, ed è comunque un\u0026rsquo;interruzione: un RRSIG scaduto, un DS nel padre che non corrisponde più dopo un rollover, o un resolver che non riesce a raggiungere la zona padre producono tutti SERVFAIL, e un SERVFAIL per _ldap._tcp.dc._msdcs significa che il dominio è giù, non degradato.\nQuindi fallo in quest\u0026rsquo;ordine:\nAttiva prima la validazione sui resolver, e lascia stare i client. Tieni d\u0026rsquo;occhio i SERVFAIL nei log dei resolver per un paio di settimane: è qui che trovi la zona rotta in silenzio da un anno. Automatizza il DS prima di forzare qualunque cosa, come detto nella sezione precedente. La maggior parte delle interruzioni DNSSEC autoinflitte è un rollover in cui il padre non è mai stato aggiornato. Poi forza i client, uno spazio dei nomi alla volta, cominciando dalla tua workstation e da una OU di test invece che dall\u0026rsquo;intero ambiente. Il guasto contro cui stai progettando è un client a cui viene consegnato un domain controller falso. Il guasto che rischi è un client a cui non viene consegnato niente. Il secondo è recuperabile ed evidente; il primo non è né l\u0026rsquo;una né l\u0026rsquo;altra cosa. Dell\u0026rsquo;interruzione sentirai parlare entro un minuto. Dell\u0026rsquo;altra cosa non avresti mai sentito parlare.\nCifrare l\u0026rsquo;ultimo tratto: DoT e DoH sui resolver interni La sezione sulla validazione ha lasciato una cosa in sospeso. Nel modello in cui valida il resolver (quello che ti dà Windows) il client si fida di un singolo bit impostato dal resolver, e quel bit vale quanto il percorso su cui ha viaggiato. Qualcosa deve proteggere quel percorso.\nBIND supporta nativamente entrambi i trasporti cifrati, quindi è un lavoro di configurazione e non di acquisti:\nDNS over TLS: un blocco tls richiamato da listen-on, per convenzione sulla porta 853. DNS over HTTPS: lo stesso blocco tls più un blocco http, sulla 443. DoT in uscita, perché forwarders accetta un trasporto TLS per indirizzo o per l\u0026rsquo;intero elenco. Trasferimenti di zona su TLS, perché anche l\u0026rsquo;istruzione primaries di una zona type secondary ne accetta uno: cosa direttamente utile alla pipeline vista prima in questo articolo. Prima di tutto, sii chiaro su cosa ti compra, perché DoT e DNSSEC vengono confusi di continuo e non sono alternativi. DNSSEC autentica i dati, fino alla zona che li ha pubblicati. DoT protegge la conversazione con il resolver. Il primo sopravvive a un resolver ostile e a una rete ostile tra resolver; il secondo impedisce alla macchina sul tuo wifi di leggere e riscrivere quello che il tuo portatile ha chiesto. Li vuoi entrambi, e nessuno dei due sostituisce l\u0026rsquo;altro. Cifrare il tratto verso un resolver che non valida è una conversazione privata con qualcosa a cui si può ancora mentire.\nServirlo tls internal-resolver { key-file \u0026#34;/etc/pki/dns/resolver.key\u0026#34;; cert-file \u0026#34;/etc/pki/dns/resolver.pem\u0026#34;; protocols { TLSv1.3; }; }; http internal-doh { endpoints { \u0026#34;/dns-query\u0026#34;; }; }; options { dnssec-validation auto; listen-on port 53 { 192.0.2.53; }; listen-on port 853 tls internal-resolver { 192.0.2.53; }; listen-on port 443 tls internal-resolver http internal-doh { 192.0.2.53; }; listen-on-v6 port 853 tls internal-resolver { 2001:db8::53; }; }; Il certificato è il vero lavoro, ed è la parte che viene saltata. Un client che verifica (che è tutto il punto) ha bisogno di un certificato valido per il nome con cui è stato configurato, emesso da qualcosa di cui si fida già. Questo significa la tua CA interna e la tua automazione dei certificati esistente, non la parola chiave ephemeral. ephemeral genera un certificato autofirmato usa e getta; c\u0026rsquo;è perché tu possa dimostrare che il listener funziona, e non vale nulla per un client che controlla davvero.\nInoltrarci sopra Se quei resolver inoltrano da qualche parte invece di percorrere l\u0026rsquo;albero da soli, anche il tratto a monte può essere cifrato, e qui c\u0026rsquo;è una distinzione da fare bene:\ntls upstream { ca-file \u0026#34;/etc/pki/tls/certs/ca-bundle.crt\u0026#34;; remote-hostname \u0026#34;dns.example.net\u0026#34;; }; options { forwarders port 853 tls upstream { 192.0.2.1; }; }; Senza remote-hostname ottieni cifratura senza autenticazione: il traffico è illeggibile per un osservatore passivo, e un attaccante attivo che può intercettare la connessione presenta semplicemente il proprio certificato. Con remote-hostname e ca-file, BIND verifica con chi sta parlando. La prima cosa vale qualcosa. Solo la seconda merita di essere chiamata un controllo.\nLa metà del client non è simmetrica Qui un ambiente misto diventa scomodo, ed è il motivo per cui configurare entrambi i trasporti invece di sceglierne uno.\nLinux fa DoT come si deve. systemd-resolved accetta DNSOverTLS=yes per la modalità rigorosa, e al server si può dare il nome con cui verificarlo:\n[Resolve] DNS=192.0.2.53#resolver.ad.example.com DNSOverTLS=yes DNSSEC=yes Come per DNSSEC=, la trappola è l\u0026rsquo;impostazione di mezzo: DNSOverTLS=opportunistic ripiega sul testo in chiaro quando TLS non è disponibile, cosa che un attaccante in grado di interferire con la connessione può organizzare.\nWindows fa DoH, e non DoT. Il supporto DoH lato client è arrivato con Windows 11 e Server 2022, configurato per server con un template:\n$doh = \u0026#34;https://resolver.ad.example.com/dns-query\u0026#34; netsh dnsclient add encryption server=192.0.2.53 dohtemplate=$doh DoT, al momento in cui scrivo, è comparso solo nelle build Insider. Quindi sui Windows rilasciati l\u0026rsquo;opzione cifrata è DoH o niente, ed è esattamente per questo che la sezione NRPT più sopra ha ripiegato su IPsec.\nDa qui l\u0026rsquo;idea di servire entrambi dalla stessa istanza di BIND. DoT per la flotta Linux e per qualunque altra cosa lo parli, DoH per Windows, un resolver, un certificato.\nQuale, e dove Per un resolver interno, DoT è il trasporto migliore e DoH è la risposta di compatibilità.\nDoT sta su una porta tutta sua. Puoi vederlo, consentirlo, negarlo, e generare un allarme su qualunque cosa faccia DNS senza usarlo. Il vantaggio di DoH (essere indistinguibile dal normale traffico web sulla 443) è un beneficio reale su una rete ostile e un fastidio sulla tua, dove poter dire cosa è DNS è una funzione per cui hai pagato. Sull\u0026rsquo;ambiente che controlli, preferisci il trasporto che puoi osservare, e usa DoH perché Windows non ti lascia scelta, non perché sia migliore.\nGià che ci sei: cifra i trasferimenti La pipeline vista prima in questo articolo sposta la zona AD tramite AXFR, e la sezione sulle viste separate ha sottolineato che il suo contenuto è una mappa dell\u0026rsquo;ambiente. TSIG autentica quei trasferimenti; non li nasconde. Poiché l\u0026rsquo;istruzione primaries di un secondario accetta una configurazione TLS, anche il trasferimento può viaggiare su TLS: RFC 9103 se vuoi lo standard:\nzone \u0026#34;ad.example.com\u0026#34; { type secondary; primaries { 192.0.2.10 port 853 tls xfr-tls key transfer-to-signer; }; ... }; Autenticato dalla chiave, cifrato dal trasporto. Se un qualunque salto di quella pipeline attraversa un collegamento tra sedi, un hypervisor che condividi o qualunque cosa su cui non metteresti volentieri un hub, valgono bene i venti minuti.\nCosa non risolve Non è validazione. Già detto sopra, e vale la pena di ripeterlo perché i vendor vendono «DNS sicuro» intendendo solo cifratura. Non nasconde nulla al resolver. Il resolver vede ogni query per intero. La cifratura protegge il percorso, non la riservatezza della ricerca nei confronti di chi gestisce il resolver: il che va bene quando chi lo gestisce sei tu. Non fa nulla per un client che non verifica il certificato, e le modalità opportunistiche sono degradabili proprio dall\u0026rsquo;attaccante che ti preoccupa. E non è un motivo per mettere un listener sul domain controller. Il DNS cifrato sul DC risolverebbe splendidamente il problema sbagliato. Il DC continua a non rispondere a nessuno. Come controllare cosa hai Comandi da eseguire sul tuo ambiente. Gli output sono la parte interessante, e un paio di essi tendono a essere una lettura scomoda la prima volta.\n# Walk the tree yourself, one delegation at a time dig +trace dc01.ad.example.com # Validate, and show the chain being built delv +rtrace +vtrace ad.example.com SOA # Is the resolver you are pointed at actually validating? # A deliberately broken test name must come back SERVFAIL, not an address dig @\u0026lt;resolver\u0026gt; dnssec-failed.org A # What does the estate advertise as a domain controller? dig SRV _ldap._tcp.dc._msdcs.\u0026lt;domain\u0026gt; dig SRV _kerberos._udp.\u0026lt;domain\u0026gt; # Is a DC answering for names it has no business answering? # Ask it for something it is not authoritative for. \u0026#34;recursion requested # but not available\u0026#34; is the answer you want. An actual address means it is # serving the estate — recursing if it is BIND, relaying to the forwarder # if it is SAMBA_INTERNAL. Either way it should not be doing that. dig @\u0026lt;dc\u0026gt; www.example.org A # Is the DC configured as the estate\u0026#39;s DNS relay? grep -E \u0026#39;dns forwarder|server services\u0026#39; /etc/samba/smb.conf # Will a DC hand its zone to anybody who asks? dig @\u0026lt;dc\u0026gt; AXFR ad.example.com # Which backend is this DC running, and does named have the module? grep -r dlz /etc/named.conf /var/lib/samba/bind-dns/ 2\u0026gt;/dev/null samba-tool dns query \u0026lt;dc\u0026gt; \u0026lt;domain\u0026gt; @ ALL # Is the internal zone chained to the public parent? dig DS ad.example.com @\u0026lt;public-authoritative-for-example.com\u0026gt; # What does the local stub actually do with the AD bit, and is the # hop to the resolver encrypted? resolvectl status # DNSSEC= and DNSOverTLS= per link grep options /etc/resolv.conf # trust-ad, trusting whom exactly? # Did anything in the path claim to have validated? Look for \u0026#34;ad\u0026#34; in the flags dig +dnssec ad.example.com SOA | grep flags # Validate independently of whatever the local resolver believes delv ad.example.com SOA # \u0026#34;fully validated\u0026#34; is the line you want # Is the resolver actually listening for DoT, and does its certificate # match the name clients are configured with? kdig +tls @192.0.2.53 ad.example.com SOA openssl s_client -connect 192.0.2.53:853 \\ -servername resolver.ad.example.com \u0026lt;/dev/null 2\u0026gt;/dev/null \\ | openssl x509 -noout -subject -dates E su un client Windows, per vedere se sta pretendendo qualcosa:\nGet-DnsClientNrptPolicy -Effective # the rules actually in force Resolve-DnsName ad.example.com -DnssecOk Get-DnsClientDohServerAddress # is the hop to the resolver encrypted? I due che più spesso producono una sorpresa sono il controllo sulla ricorsione e il tentativo di AXFR. Se un DC risponde a uno dei due per un client qualsiasi, la pipeline di questo articolo non è in piedi, qualunque cosa dica il diagramma sul wiki.\nIl terzo è resolvectl status su una macchina che nessuno ha toccato. DNSSEC=no/unsupported insieme a trust-ad in resolv.conf è lo stato normale di un desktop Linux, e significa che il lavoro di firma descritto sopra al momento non lo controlla nessuno.\nLa versione breve Un resolver nasce conoscendo i root server e una chiave, e impara tutto il resto sentendoselo dire. I nomi si trovano scendendo lungo le deleghe, e i servizi si trovano chiedendo un record SRV: quindi quando un client comincia a fare Kerberos con un domain controller, l\u0026rsquo;identità di quel domain controller è arrivata da una risposta DNS. La scoperta tramite DNS è corretta e va bene. L\u0026rsquo;autorizzazione tramite DNS no, e una quantità sorprendente di infrastruttura la fa comunque in silenzio.\nDNSSEC è ciò che rende verificabili quelle risposte: firme su ogni insieme, un DS in ogni padre, una catena fino a un unico trust anchor alla radice, e la negazione autenticata perché un nome non possa essere fatto sparire. Compra autenticazione dell\u0026rsquo;origine e integrità: non riservatezza, e non correttezza. Firma qualunque cosa dica la zona, ed è per questo che non può salvare una zona che macchine non fidate possono scrivere. E ha bisogno di un padre: un TLD interno inventato non ha dove mettere un DS, quindi .local, .lan, .internal e home.arpa ti lasciano o senza firma o a gestire un\u0026rsquo;isola privata di chiavi distribuite a mano.\nPer un dominio Active Directory, questo produce un progetto più che un elenco di impostazioni. Usa una delega dentro una zona pubblica che possiedi, così la fiducia scende lungo la normale catena dalla radice mentre i dati non escono mai. Servi le partizioni AD con BIND e dlz_bind9 (DLZ non è il rischio, è il modo in cui tiri fuori la zona dalla directory) e lascia che il DC sia un primario nascosto che trasferisce verso l\u0026rsquo;esterno e non risponde a nessun altro. Una zona DLZ non può essere firmata, quindi la firma è una normale zona secondaria che contiene la copia trasferita, con inline-signing e una dnssec-policy: un secondo named sul DC se vuoi meno macchine, un host separato se vuoi le chiavi private lontane dalla directory. In entrambi i casi è firmata una volta sola, in un punto definito, sotto una policy delle chiavi, e il primo salto è un polling e non un push, perché DLZ non può inviare un notify. Pubblica da server autoritativi autonomi che non contengono chiavi e non hanno alcuna strada verso la directory.\nE tieni i client fuori dalla zona che conta. L\u0026rsquo;aggiornamento dinamico sicuro autentica chi scrive, non il significato, e in una zona integrata in AD predefinita chi scrive è Authenticated Users, cioè ogni account, non solo ogni macchina: quindi una zona che contiene sia i record dei portatili sia i locator _msdcs è a un utente vittima di phishing di distanza da un client a cui viene detto, con una firma perfettamente valida, che il domain controller sta da un\u0026rsquo;altra parte. Le registrazioni dei client vanno in una sotto-zona, delegata all\u0026rsquo;esterno o separata in Samba, dove il peggio che un account compromesso può fare è mentire su se stesso.\nAnche se la domanda migliore è se i client debbano registrarsi affatto. Un portatile del 2026 ha un indirizzo sul wifi di casa, un altro sul wireless dell\u0026rsquo;ufficio, un altro tramite il dock e un altro sulla VPN, e ne pubblicherà allegramente la maggior parte. Quello che consuma il record A di un portatile è quasi nulla: gli strumenti che devono raggiungere una workstation hanno un proprio inventario, perché il DNS non è mai stato affidabile per i client mobili. I record dei server dovrebbero venire dal provisioning, e la flotta non dovrebbe registrare un bel niente.\nPoi fai in modo che qualcosa controlli le firme, perché nulla di quanto sopra vale qualcosa finché un client non rifiuta una risposta. Su Linux significa DNSSEC=yes in systemd-resolved, o un vero resolver che valida sul loopback: mai allow-downgrade, che un attaccante capace di falsificare le risposte può semplicemente disattivare falsificando una risposta. Su Windows significa accettare che il DNS client non valida mai nulla da sé, e usare una regola NRPT per fargli pretendere una risposta che il resolver ha validato, con l\u0026rsquo;ultimo tratto protetto perché quel requisito è un singolo bit. Attivalo prima sui resolver e tieni d\u0026rsquo;occhio i SERVFAIL, automatizza il DS, poi forza i client. Fallisce in chiusura, che è il verso giusto ed è comunque un\u0026rsquo;interruzione.\nNiente di tutto questo è esotico. È delega, trasferimento e firma, le tre cose che il DNS ha sempre fatto, disposte in modo che la macchina che contiene la tua directory non sia la macchina che riceve domande dal parcheggio, e che quando qualcosa mente a un client, il client se ne accorga.\n","permalink":"https://blogs.damiendye.uk/it/dns/samba4-securing-ad-records-with-dnssec/","summary":"Ogni macchina unita al dominio trova il suo domain controller chiedendo a DNS un record SRV, quindi i locator _msdcs sono i record più critici per la sicurezza che possiedi. Ecco come pubblicarli e firmarli come si deve da un DC Samba4: BIND con dlz_bind9 che legge la directory, inline signing, un primario nascosto che i client non raggiungono mai, e gli aggiornamenti dinamici dei client tenuti fuori dalla zona che contiene i locator. Poi come costringere i client Windows e Linux a controllare davvero le firme, perché una zona firmata che nessuno valida si comporta esattamente come una non firmata.","title":"Samba4 e la protezione dei record AD con DNSSEC"},{"content":"Lo slot che accetta qualsiasi cosa L\u0026rsquo;argomento di vendita di un adattatore tri-mode è davvero buono, e vale la pena esporlo per bene prima di smontarlo.\nCompra uno chassis con un backplane U.3 e un controller tri-mode, e ogni slot per drive diventa universale. Lo slot 0 può ospitare un drive SAS 24G, lo slot 1 un economico dispositivo di boot SATA, lo slot 2 un SSD NVMe Gen4, e l\u0026rsquo;adattatore negozia qualunque cosa si presenti. Broadcom chiama il silicio Tri-Mode SerDes; lo standard degli slot è SFF-TA-1001, noto come U.3, che definisce un connettore comune per SAS x1/x2, SATA e NVMe a x1, x2 o x4. Il lato gestione è SFF-TA-1005, Universal Backplane Management, che è il modo in cui l\u0026rsquo;enclosure capisce con cosa sta effettivamente parlando e accende i LED di attività giusti.\nPer chiunque specifichi server, questo risolve un problema vero e fastidioso. Non devi più decidere il protocollo di storage al momento dell\u0026rsquo;ordine, né tenere due codici di chassis, né scoprire che gli slot compatibili NVMe sono i quattro a sinistra e i tuoi drive sono finiti negli altri venti. Un solo codice prodotto copre tutto il parco macchine, e un\u0026rsquo;installazione SAS può passare a NVMe un drive alla volta invece che uno chassis alla volta.\nNiente di tutto questo è marketing. È il motivo per cui questi adattatori si vendono, e sarebbe sciocco far finta di no.\nMa la flessibilità non è gratis, e il conto non si paga in sterline. Si paga in code.\nCosa succede davvero al drive Un SSD NVMe è un endpoint PCIe. In un server con collegamento diretto, le sue quattro lane arrivano al root complex della CPU, magari passando da un retimer o da uno switch PCIe, ma elettricamente e logicamente è un dispositivo sul bus PCIe. Il kernel lo enumera, ci lega il driver nvme, e da quel momento il driver parla direttamente con i registri del drive.\nMetti lo stesso drive dietro un adattatore tri-mode e questo smette di essere vero.\nAdesso le lane del drive terminano sul controller. La documentazione di Broadcom chiama il blocco in questione PCIe device bridge, e la parola bridge fa parecchio lavoro: non è uno switch trasparente che inoltra le transazioni della CPU a un drive che la CPU vede ancora. L\u0026rsquo;endpoint PCIe che il tuo host enumera è l\u0026rsquo;adattatore. Il drive è un target appeso dall\u0026rsquo;altra parte, e il firmware del controller rigenera ogni I/O.\nNVMe con collegamento diretto contro gli stessi drive dietro un adattatore tri-mode Collegamento diretto Dietro un adattatore tri-mode Root complex della CPU Root complex della CPU x4 x4 x4 x4 quattro collegamenti indipendenti circa 7 GB/s ciascuno, in parallelo x8 Gen4 tutto ciò che sta sotto lo condivide Controller tri-mode l'unico endpoint PCIe che l'host enumera NVMe NVMe NVMe NVMe nvme0n1 nvme1n1 nvme2n1 nvme3n1 NVMe NVMe NVMe NVMe sda sdb sdc sdd driver nvme una coppia di code per core, per drive la banda cresce con i drive driver mpt3sas: i drive sono target SCSI queue depth 128 ciascuno, un solo pool di tag in comune la banda si ferma all'adattatore Gli stessi quattro drive, collegati in due modi. A sinistra ogni drive ha quattro lane sue fino al root complex. A destra le lane si fermano all\u0026rsquo;adattatore, e tutto quello che sta a valle condivide un solo uplink x8 e un solo controller. Quindi l\u0026rsquo;adattatore non fa passare i tuoi comandi NVMe. Li termina, e parla con il drive al posto tuo.\nIl che solleva la domanda di quale protocollo parli con te.\nIl sistema operativo non vede mai un drive NVMe Parla SCSI.\nCollega un SSD NVMe a un HBA tri-mode Broadcom e non compare come /dev/nvme0n1. Compare come /dev/sdb, legato a mpt3sas, lo stesso driver che da più di dieci anni fa girare i controller SAS LSI. nvme list non restituisce niente. lsblk -o NAME,TRAN riporta come trasporto sas. Per ogni livello dello stack di storage sopra il driver, hai comprato un disco SAS.\nNon è un bug né un limite del firmware in attesa di correzione. È il progetto. Presentare tutto come target SCSI è esattamente il modo in cui un solo adattatore serve tre protocolli: il controller normalizza SAS, SATA e NVMe in un unico modello di dispositivo, e l\u0026rsquo;host ottiene un solo driver, un solo percorso di enumerazione, un solo insieme di strumenti. La flessibilità del marketing e la presentazione SCSI in dmesg sono la stessa decisione architetturale vista dai due capi.\nLe generazioni 9500 e 9600 aggiungono in effetti un meccanismo di passthrough perché gli strumenti del produttore possano raggiungere i comandi admin NVMe di un drive, e i componenti più recenti di Broadcom mostrano lo stato di salute dei drive molto meglio del 9400. Ma è un canale laterale di gestione. Il percorso dei dati, ogni lettura e scrittura che il tuo carico di lavoro emette, scorre ancora lungo lo stack SCSI.\nE lo stack SCSI ha un modello di code che precede la flash di vent\u0026rsquo;anni.\nIl modello di code a cui hai appena rinunciato Questa è la parte che ti costa davvero prestazioni, e conviene essere precisi, perché «NVMe è più veloce di SAS» non è il motivo.\nLa decisione progettuale centrale di NVMe non era un filo più veloce. Era smettere di fingere che un dispositivo di storage sia una cosa sola e serializzata.\nLa specifica consente fino a 65.535 coppie di code di I/O, e quella cifra viene citata in ogni spiegazione di NVMe che si trovi in giro. È il numero sbagliato da tirare fuori. Nessun drive implementa niente di simile, quindi chiunque abbia davvero guardato un sistema in funzione può liquidare il confronto, e avrebbe ragione. Il numero vero è più piccolo, poco affascinante, e spiega meglio il punto.\nEcco allora un drive vero. Non un componente enterprise: un SSD OEM SK Hynix da 256 GB, del tipo saldato in un portatile di fascia media, in una macchina da 16 core.\n$ nproc 16 $ cat /sys/class/nvme/nvme0/queue_count 17 $ ls /sys/block/nvme0n1/mq | wc -l 16 $ cat /sys/block/nvme0n1/queue/nr_requests 1023 Diciassette code: una coda admin, e sedici code di I/O per sedici core. Ognuna profonda 1023 comandi. La corrispondenza è uno a uno, ogni coda hardware è legata a esattamente una CPU:\n$ cd /sys/block/nvme0n1/mq \u0026amp;\u0026amp; grep -H . */cpu_list 0/cpu_list:1 1/cpu_list:9 2/cpu_list:3 3/cpu_list:11 ... Una CPU per coda, fino in fondo: la coda hardware 0 serve il core 1 e nient\u0026rsquo;altro.\nEcco cosa vuol dire in pratica «NVMe ha tante code». Non 65.535: una per core, quanti che siano i tuoi core. Linux crea una coppia di code per CPU fino a quante il controller ne concede, e i controller ne concedono molte più dei core di un server tipico, quindi in pratica il numero è quello dei core. Metti questo drive in una macchina da 64 core e ne ottieni 64.\nÈ da quella suddivisione per core che vengono le prestazioni:\nUn core inserisce i comandi nella sua coda. Nessun lock, perché nessun altro core la tocca. Ogni coda ha il suo vettore MSI-X, con affinità per quel core. L\u0026rsquo;interrupt di completamento torna sul core che ha emesso l\u0026rsquo;I/O, dove stanno già le linee di cache che servono. Tutti e sedici i core possono avere I/O in volo nello stesso momento senza mai contendersi una struttura condivisa. Il parallelismo cresce con il numero di core, e il lavoro di un core non finisce mai in coda dietro quello di un altro. Lo fa un drive consumer economico. È il minimo sindacale.\nAdesso guarda cosa ottiene il drive dietro l\u0026rsquo;adattatore. I numeri qui sotto non sono stime: sono costanti nel driver mpt3sas del kernel mainline.\nLa queue depth per dispositivo viene impostata da ioc-\u0026gt;max_nvme_qd, che il driver prende da ciò che riporta il firmware del controller e, in mancanza, da un default fissato a compilazione in drivers/scsi/mpt3sas/mpt3sas_base.h:\n#define MPT3SAS_SATA_QUEUE_DEPTH\t32 #define MPT3SAS_SAS_QUEUE_DEPTH\t254 #define MPT3SAS_RAID_QUEUE_DEPTH\t128 #define MPT3SAS_NVME_QUEUE_DEPTH\t128 128. A un dispositivo capace di decine di migliaia di comandi in sospeso viene data una queue depth di 128, e nota che è meno profonda del default SAS di 254 che sta due righe sopra. Le capacità del drive non entrano mai nella decisione. Il numero viene dal controller.\nIl numero di code hardware è peggio, e il driver lo dice apertamente. Da mpt3sas_scsih.c:\nshost-\u0026gt;nr_hw_queues = 1; if (shost-\u0026gt;host_tagset) { shost-\u0026gt;nr_hw_queues = ioc-\u0026gt;reply_queue_count - ioc-\u0026gt;high_iops_queues; ... dev_info(\u0026amp;ioc-\u0026gt;pdev-\u0026gt;dev, \u0026#34;Max SCSIIO MPT commands: %d shared with nr_hw_queues = %d\\n\u0026#34;, shost-\u0026gt;can_queue, shost-\u0026gt;nr_hw_queues); } Leggilo con attenzione, perché ci sono tre cose distinte.\nIl default è una sola coda hardware. nr_hw_queues = 1. Il multi-coda c\u0026rsquo;è solo sui controller gen35 con la funzione host_tagset attiva, e anche allora è quello che la cronologia dei commit del driver stesso descrive come code hardware multiple simulate: l\u0026rsquo;hardware del controller di I/O è una sola coda di invio con più code di risposta, e blk-mq ci viene adattato sopra.\nIl numero di code viene dal controller, non dal numero di core. È reply_queue_count meno le code high-IOPS, cioè l\u0026rsquo;allocazione dei vettori MSI-X dell\u0026rsquo;adattatore. Non ha niente a che fare con quante CPU hai, e non cresce quando aggiungi drive. È l\u0026rsquo;esatto rovescio del drive di prima, dove il numero di code era il numero di core.\nE il pool di tag è condiviso. host_tagset significa esattamente quello che dice: un solo pool di tag per tutto l\u0026rsquo;adattatore host, e quella riga di log dice «shared» ad alta voce. Ogni drive sulla scheda pesca dallo stesso insieme di posti per i comandi. Uno chassis da ventiquattro slot ha ventiquattro drive in competizione per i tag di un solo controller.\nMettili uno accanto all\u0026rsquo;altro. Quell\u0026rsquo;SSD del portatile aveva sedici code private da 1023, una per core, che rispondevano solo a lui. Lo stesso drive dietro l\u0026rsquo;adattatore ottiene una quota delle code di risposta della scheda, 128 comandi in sospeso, e ventitré vicini che pescano dallo stesso pool.\nCoppie di code NVMe per core contro un solo pool di tag condiviso dell'adattatore Le code si moltiplicano con i core I drive si dividono un pool core 0 core 1 core 2 core 3 SQ + CQ SQ + CQ SQ + CQ SQ + CQ profonda 1023 profonda 1023 profonda 1023 profonda 1023 SSD NVMe /dev/nvme0n1 una coppia di invio e completamento per core vettore MSI-X proprio, i completamenti tornano su quel core nessun lock, nessuna contesa tra core core 0 core 1 core 2 core 3 Controller tri-mode le code di risposta vengono dai vettori MSI-X della scheda, non dal numero dei tuoi core un solo pool di tag condiviso per tutti i drive sda sdb sdc sdd qd 128 qd 128 qd 128 qd 128 e altri 20 slot che pescano dallo stesso pool. 128 in sospeso per dispositivo, qualunque cosa sappia fare il drive aggiungere drive divide una risorsa fissa A sinistra: una coppia di code per core, privata e profonda 1023, con l\u0026rsquo;interrupt di completamento che torna sul core che ha inviato, misurato sul drive qui sopra. A destra: tutti i core incanalati nelle code di risposta del controller, a pescare da un solo pool di tag condiviso, con ogni drive limitato a 128. Quindi la perdita non è che SCSI sia lento. Lo SCSI moderno su blk-mq va bene. La perdita è strutturale:\nLe code appartengono all\u0026rsquo;adattatore, non al drive. Aggiungere drive divide una risorsa fissa invece di aumentarla. Il pool di tag è condiviso su tutto l\u0026rsquo;host. Un drive sotto carico pesante può affamare gli altri, in un modo che semplicemente non può succedere quando ogni drive ha le sue code. La profondità per dispositivo è limitata a 128, qualunque cosa il drive riesca a sostenere. La località degli interrupt si indebolisce. I completamenti arrivano sulla coda di risposta che il controller ha usato, non per forza sul core che ha inviato. Con una queue depth di 1 o 2, un processo a thread singolo che legge ogni tanto, niente di tutto questo si nota. Misurerai la stessa latenza in entrambi i casi, entro il rumore. La penalità compare esattamente dove hai comprato NVMe perché ti aiutasse: molti core che emettono molti I/O concorrenti. Più è profondo il carico, più è grande la parte del drive che hai pagato e che non riesci a raggiungere.\nL\u0026rsquo;uplink è un solo slot x8 Il modello di code è il problema sottile. Il tetto di banda è quello evidente, e lo puoi leggere nelle schede prodotto di Broadcom senza bisogno di un benchmark.\nL\u0026rsquo;HBA della serie 9500 è una scheda PCIe Gen 4.0 x8. Le cifre pubblicate da Broadcom sono 13.700 MB/s in lettura sequenziale a 256K e 3M IOPS in lettura casuale a 4K. La stessa scheda prodotto dice che supporta fino a 32 dispositivi NVMe.\nMetti quei due numeri uno accanto all\u0026rsquo;altro e la domanda si risponde da sola: quanti drive servono per esaurire l\u0026rsquo;adattatore?\nNon molti, e meno ogni anno. Un SSD Gen4 x4 fa circa 7 GB/s. Un SSD Gen5 x4 ne fa circa 14. Sono entrambi componenti normali nel 2026: Gen4 è ciò di cui è pieno il mercato dell\u0026rsquo;usato U.2, e Gen5 è quello che trovi comprando nuovo.\nTetto Drive Gen4 per raggiungerlo Drive Gen5 per raggiungerlo HBA 9500: 13.700 MB/s sequenziali 2 1 HBA 9500: 3M IOPS (4K RR) 3 1–2 eHBA 9600: 6,4M IOPS (4K RR) ~6 ~3 MegaRAID 9600: 1,1M IOPS in RAID 5 (4K RW) ~1 ~1 Rileggi la prima riga. Un solo SSD Gen5 raggiunge l\u0026rsquo;intero tetto sequenziale di un HBA 9500. Un drive, in una scheda dichiarata per trentadue. Tutto quello che viene dopo è capacità. Non prestazioni.\nE l\u0026rsquo;ultima riga è quella che dovrebbe fermare un ordine d\u0026rsquo;acquisto: sul MegaRAID della generazione attuale, uno scaffale pieno di NVMe in RAID 5 rende più o meno quanto un drive di fascia media da solo.\nI drive non si collegano nemmeno a x4 C\u0026rsquo;è un secondo strozzamento sotto l\u0026rsquo;uplink condiviso, facile da non vedere perché sta in una tabella di specifiche e non in un titolo.\nLa PERC 12 User\u0026rsquo;s Guide di Dell, che copre i controller tri-mode H965i, dice:\nSupports drive speeds for NVMe drives are 8 GT/s (Gen 3) and 16 GT/s (Gen 4) at maximum x2 lane width.\nOgni drive NVMe ha due lane, non quattro. Quindi prima di qualsiasi contesa per l\u0026rsquo;uplink, prima del pool di tag, prima della traduzione SCSI, un drive Gen4 è già sceso a circa 3,5 GB/s: metà di quello che può fare. Metti un drive Gen5 in quello slot e negozia al ribasso fino a Gen4 x2, rendendo più o meno un quarto della banda dichiarata.\nConviene essere precisi su cosa questo cambia e cosa no. Non significa che l\u0026rsquo;adattatore arrivi più lontano. Servono circa quattro drive limitati a x2 per riempire l\u0026rsquo;uplink del 9500 invece di due, ma solo perché ogni drive contribuisce la metà. Il collo di bottiglia si è spostato dall\u0026rsquo;uplink al collegamento del drive. Il totale che riesci a estrarre non è migliorato.\nCon collegamento diretto, quegli stessi trentadue drive avrebbero ciascuno il proprio percorso x4 fino al root complex, alla generazione che drive e CPU riescono a negoziare.\nLa riga RAID 5 di quella tabella merita uno sguardo a sé, perché è il numero della stessa Broadcom ed è pubblicato senza giri di parole. Dalla scheda prodotto della serie 9600:\n900K to 1.1M RAID 5 IOPS (4K RW)\nIl RAID con parità nel firmware del controller è la cosa più costosa che puoi chiedere a una scheda tri-mode, e questa è la generazione attuale che lo fa. Vale la pena leggerlo prima che qualcuno specifichi un RAID 5 su ventiquattro drive NVMe e si aspetti le prestazioni di ventiquattro drive.\nNumero di drive contro due tetti tri-mode, una scheda x8 Gen4 e una scheda x16 Gen5 0 15 30 45 60 75 90 GB/s aggregati 1 2 3 4 5 6 drive NVMe Gen5 diretto: circa 14 GB/s ciascuno Gen4 diretto: circa 7 GB/s ciascuno fuori portata per entrambe le schede PERC13, Gen5 x16: 52,5 GB/s misurati HBA 9500, Gen4 x8: 13,7 GB/s 2 drive Gen4 raggiungono il 9500, 4 drive Gen5 perfino una PERC13 Cifre del produttore e delle recensioni, non misurate qui. Il 9500 è dichiarato per 32 dispositivi NVMe, la PERC13 per 16. Entrambe le schede collegano inoltre ogni drive a x2, cosa che queste linee dirette non fanno. Quanti drive servono per esaurire l\u0026rsquo;adattatore, rispetto a due tetti. Due drive Gen4 raggiungono l\u0026rsquo;HBA 9500; quattro drive Gen5 raggiungono perfino una PERC13. Le schede sono dichiarate rispettivamente per trentadue e sedici dispositivi. E una scheda x16? L\u0026rsquo;obiezione ovvia a tutto quanto sopra è che il 9500 è una scheda x8 Gen4, e il tetto è un artefatto di un collegamento all\u0026rsquo;host stretto. Dai all\u0026rsquo;adattatore sedici lane Gen5 e il problema sparisce.\nÈ un\u0026rsquo;obiezione onesta, e merita l\u0026rsquo;esempio più forte, non un fantoccio. Prendiamo allora la PERC13 H975i di Dell: la generazione attuale, e quanto di meglio offra il tri-mode. La sua guida utente indica «Gen 4 and Gen 5 PCIe x16 host interfaces», e StorageReview ha misurato 52,5 GB/s e 12,5M IOPS per controller, con fino a sedici drive NVMe.\nSono numeri seri, e cambiano parecchio il quadro. Rispetto ai 13.700 MB/s e ai 3M IOPS del 9500, sono circa quattro volte la banda e quattro volte gli IOPS, distribuiti su metà dei drive. Dell non ha solo allargato il tubo: ha anche dimezzato il fan-out, e il rapporto di sovrasottoscrizione è migliorato di conseguenza. Sugli IOPS in particolare, 12,5M su sedici drive sono circa 780K per drive, vicino a quanto rende un drive di fascia media da solo. A quel punto il controller non è davvero quello che ti frena.\nMerito a chi lo merita, allora: una moderna scheda tri-mode x16 Gen5 è un pezzo di ingegneria molto migliore di una x8 Gen4, e se la banda era la tua unica obiezione, x16 in buona parte ti risponde.\nTre cose non le risolve.\nI drive si collegano ancora a x2. Questa mi ha sorpreso. La guida della PERC13, che descrive un controller Gen5 x16, dice ancora:\nSupports drive speeds for NVMe drives are 8 GT/s (Gen 3), 16 GT/s (Gen 4), and 32 GT/s (Gen 5) at maximum x2 lane width.\nUn collegamento all\u0026rsquo;host più largo non allarga i collegamenti a valle verso i drive. Ogni drive NVMe sul controller RAID tri-mode più nuovo e veloce che Dell venda è ancora collegato da due lane invece di quattro, e rinuncia ancora a metà della sua banda prima che succeda qualsiasi altra cosa.\nIl modello di code non viene toccato per niente. Niente nella sezione sulle code di questo articolo dipende dalla larghezza del collegamento all\u0026rsquo;host. nr_hw_queues viene dall\u0026rsquo;allocazione delle code di risposta MSI-X del controller; la profondità per dispositivo di 128 è una costante di driver e firmware; il pool di tag è condiviso su tutto l\u0026rsquo;host perché lo dice host_tagset. Allarga il collegamento all\u0026rsquo;host a x16, x32, quanto vuoi: i drive sono ancora target SCSI che condividono le code della scheda, non c\u0026rsquo;è ancora /dev/nvme0n1, e non puoi ancora passare un drive a una VM.\nE x16 non fabbrica banda: smista lane che avevi già. Questo è l\u0026rsquo;argomento che chiude davvero la questione. Sedici lane Gen5 in una PERC13 ti comprano 52,5 GB/s condivisi su sedici slot. Quelle stesse sedici lane collegate direttamente a quattro drive Gen5 a x4 ti comprano circa 56 GB/s su quattro slot: la stessa banda dalle stesse lane, solo che ogni drive ha il suo x4 completo, la sua coppia di code per core e un vero nodo dispositivo nvme.\nQuindi il modo onesto di descrivere una scheda tri-mode x16 non è «un adattatore più veloce». È un multiplexer di lane: converte un budget fisso di lane in più slot per drive, e ti fa pagare la conversione con il modello di code. Se l\u0026rsquo;affare conviene dipende da una cosa sola. Slot o parallelismo.\nCosa succede quando riempi tutti gli slot Il che ci porta al caso che conta davvero, perché nessuno compra uno chassis da 24 slot per metterci quattro drive.\nOltre il punto di saturazione, la linea aggregata è piatta. Aggiungere drive aggiunge capacità, e nient\u0026rsquo;altro, quindi le prestazioni per drive scendono come 1/N. Con popolazioni realistiche quell\u0026rsquo;aritmetica non perdona:\nDrive su un HBA 9500 Aggregato Per drive Frazione di un drive Gen4 2 13,7 GB/s 6,9 GB/s 98% 12 13,7 GB/s 1,14 GB/s 16% 24 13,7 GB/s 0,57 GB/s 8% Guarda l\u0026rsquo;ultima riga. Ventiquattro drive NVMe dietro un HBA 9500 rendono circa 570 MB/s ciascuno. Un SSD SATA fa circa 550. Hai comprato ventiquattro drive NVMe, hai pagato un controller tri-mode per collegarli, e sei arrivato a una banda per drive da SATA.\nL\u0026rsquo;aritmetica degli IOPS ha la stessa forma: 3M distribuiti su ventiquattro drive sono 125K ciascuno, contro il milione che un drive Gen4 di fascia media fa da solo, circa un ottavo di quello che possiedi.\nLa scheda x16 migliora parecchio la cosa ma non ne esce. Una PERC13 con tutti e sedici i drive fa 52,5 GB/s ÷ 16 = 3,3 GB/s per drive, circa il 23% di un drive Gen5, e questo prima che il collegamento x2 lo dimezzi di nuovo.\nCon molti drive, due effetti sono peggiori di quanto suggerisca la divisione:\nLa fame di tag è trasversale ai dispositivi. Il pool di tag condiviso dell\u0026rsquo;host significa che un solo drive sotto carico pesante può consumare posti che servono ad altri drive. Ventiquattro dispositivi, ciascuno autorizzato in teoria a 128 comandi in sospeso, ne vogliono 3.072 in tutto, pescati dal can_queue di un solo controller. Il blocco in testa alla coda tra drive distinti è un modo di guastarsi che semplicemente non esiste quando ogni drive possiede le sue code. I rebuild colpiscono tutto. Un rebuild di parità su uno scaffale popolato satura l\u0026rsquo;unico uplink condiviso, quindi l\u0026rsquo;I/O in primo piano verso ogni altro drive della scheda peggiora nello stesso momento. Con i drive su lane indipendenti e il RAID software, il rebuild si contende la CPU, non un unico tubo. Quando niente di tutto questo conta C\u0026rsquo;è un contrappeso importante, ed è il motivo per cui tanti server tri-mode da 24 slot girano benissimo.\nIl tetto dell\u0026rsquo;adattatore morde solo se qualcosa a valle può consumare più di quanto lui consegna. Un server con 2 × 25GbE ha 6,2 GB/s di rete: non riesce a riempire nemmeno un HBA 9500. Se quei ventiquattro drive sono un livello di capacità che serve file su quel collegamento, l\u0026rsquo;adattatore è lontanissimo dall\u0026rsquo;essere il collo di bottiglia e l\u0026rsquo;aritmetica per drive qui sopra è irrilevante.\nIl momento in cui comincia a contare è quando il consumatore diventa più veloce della scheda: 100GbE (12,5 GB/s) ti mette da solo alla pari con l\u0026rsquo;intero tetto sequenziale di un 9500, e i carichi locali (database, compilazione, analytics, host di virtualizzazione con guest indaffarati) non hanno proprio una rete nel percorso.\nQuindi la domanda da fare su uno scaffale popolato non è «l\u0026rsquo;adattatore è lento?» ma «cosa consumerà tutto questo, e può consumare più di quanto la scheda riesce a consegnare?» Se la risposta è un collegamento a 25GbE, smetti di preoccuparti. Se la risposta è 100GbE, NVMe-oF o un database locale, la scheda è il tuo collo di bottiglia e il numero di drive lo sta peggiorando.\nCos\u0026rsquo;altro sparisce Oltre alla velocità, presentare un drive NVMe come disco SCSI significa che le parti specifiche per NVMe dei tuoi strumenti smettono di funzionare:\nCollegamento diretto Dietro un adattatore tri-mode Nodo dispositivo /dev/nvme0n1 /dev/sdb Driver nvme mpt3sas / mpi3mr nvme-cli Funziona Non ha con chi parlare Dati di salute Pagine di log SMART NVMe Pagine di log SCSI tradotte Gestione dei namespace Sì No Aggiornamenti firmware nvme fw-download Strumento del produttore attraverso il controller Format / sanitize NVMe Format NVM Equivalenti SCSI, se implementati Code hardware Una coppia per core (16 sulla macchina qui sopra) Le code di risposta della scheda, condivise da ogni drive Queue depth 1023 per coda 128 per dispositivo Una conseguenza coglie la gente impreparata abbastanza spesso da meritare una menzione a parte: non puoi passare un singolo drive a una macchina virtuale. Il PCIe passthrough richiede che il drive sia un endpoint PCIe con il suo gruppo IOMMU, e dietro un adattatore tri-mode non lo è: l\u0026rsquo;unico dispositivo PCIe presente è il controller. Puoi passare l\u0026rsquo;intero adattatore, con ogni drive collegato, o niente. Se il tuo piano prevedeva di assegnare drive NVMe specifici a guest specifici, la scelta del backplane ha già deciso per te.\nAllora chi lo vuole davvero nel 2026? È qui che l\u0026rsquo;argomento di vendita all\u0026rsquo;inizio di questo articolo deve affrontare una domanda più dura, perché il mondo per cui era stato pensato è in gran parte sparito.\nIl tri-mode è nato quando NVMe era il livello costoso che aggiungevi a un\u0026rsquo;installazione SAS. Nel 2026 è il contrario: NVMe è il default, i drive enterprise U.2 sono abbondanti ed economici sul mercato dell\u0026rsquo;usato, e «SAS, SATA e NVMe misti in uno chassis» descrive sempre meno installazioni reali. Quindi chi lo sta davvero comprando?\nQuasi nessuno, di proposito. La risposta onesta è che la maggior parte dei controller tri-mode non è stata scelta. È arrivata, perché il produttore del server ne monta uno, e il produttore ne monta uno perché un solo codice di backplane U.3 permette a lui di vendere configurazioni SAS, SATA e NVMe dallo stesso chassis. È una vittoria di filiera per l\u0026rsquo;OEM. Per le tue prestazioni non fa niente, e per questo non è mai stato venduto come se lo facesse.\nTre delle giustificazioni classiche non reggono più bene:\n«Mi servono tipi di drive misti.» Raramente nello stesso chassis, e anche quando serve, il tri-mode non è l\u0026rsquo;unica strada. Un semplice HBA SAS per i dischi meccanici più NVMe collegati al root complex ti dà entrambi, senza penalizzare nessuno dei due. Un parco misto non implica un controller misto.\n«Non ho abbastanza lane PCIe.» Questo era il vero argomento nel 2019, su piattaforme da 40 lane con 24 slot. Un Epyc Genoa o Turin a socket singolo ha 128 lane. Ventiquattro drive a x4 fanno 96. La scarsità che giustificava il raggruppamento dei drive dietro un controller è praticamente sparita, e dove non lo è, uno switch PCIe fa il lavoro senza terminare il protocollo.\n«Gli slot devono essere universali.» Questo conviene separarlo con cura, perché è l\u0026rsquo;argomento usato più spesso per giustificare il componente sbagliato. U.3 è uno standard di backplane, non un requisito del controller. Un backplane U.3 può essere cablato direttamente alle lane PCIe della CPU invece che attraverso un controller tri-mode, e i produttori documentano entrambe le topologie. Puoi tenerti gli slot universali e togliere la tassa. Se hai ereditato un server tri-mode, la cosa singola più utile che puoi verificare è se il backplane può essere ricablato in diretta.\nCosa resta davvero:\nRAID hardware ad alta densità, dove una policy o la piattaforma lo richiedono: un requisito di audit, una matrice di supporto, un\u0026rsquo;installazione Windows o ESXi senza un livello software che faccia il lavoro. Questo è il vero mercato rimasto, è l\u0026rsquo;unico caso in cui stai comprando il motore RAID e non la connettività, e sul silicio attuale è un prodotto capace: sedici drive NVMe in RAID 5 hardware con una cache protetta da supercondensatore, da sedici lane, è qualcosa che il collegamento diretto non può offrire affatto. Capacità in massa su HDD SAS, dove il costo per TB appartiene ancora nettamente ai dischi meccanici. Ma quello è il lavoro di un semplice HBA SAS, e più economico. Numeri di slot molto grandi ed enclosure esterni, dove gli expander SAS arrivano più lontano e più in largo del PCIe. Carichi che non vanno mai in profondità. Se le tue queue depth restano a una cifra, niente di tutto questo si nota. Tanti sistemi reali vivono qui benissimo. C\u0026rsquo;è anche un argomento puramente operativo: un solo tipo di enclosure, un solo driver, un solo ricambio sullo scaffale. Per un host di virtualizzazione generico vale qualcosa di concreto. Basta dargli un prezzo onesto contro il fatto che, secondo la tabella qui sopra, un solo drive Gen5 può raggiungere l\u0026rsquo;intero tetto sequenziale della scheda.\nQuando è lo strumento sbagliato Lo scambio peggiora in proporzione a quanta concorrenza ha il tuo carico di lavoro.\nCeph è il caso più chiaro. Un nodo di storage fa girare un OSD per drive, ciascuno con i suoi pool di thread, tutti a emettere I/O nello stesso momento, e poi i client di un intero cluster li sollecitano in parallelo. È il caso peggiore del pool di tag condiviso: ventiquattro demoni che si contendono i posti per i comandi di un solo controller, ogni drive limitato a 128 in sospeso, tutto incanalato in un solo uplink x8. Metti quei drive direttamente sul root complex e ogni OSD ha le sue code, i suoi tag e le sue lane. Un nodo Ceph tutto NVMe non dovrebbe avere un adattatore tri-mode nel percorso dei dati.\nLa stessa logica vale per i target NVMe-oF, dove riesporti i drive e ogni livello di serializzazione si somma; per i database con I/O asincrono profondo; e per qualsiasi cosa costruita su io_uring o SPDK, che esistono proprio per sfruttare le code per core che l\u0026rsquo;adattatore ti ha appena tolto.\nLa regola generale: più parallelismo il tuo software è stato scritto per sfruttare, più un adattatore tri-mode te lo fa pagare.\nCome capire cosa hai Se hai ereditato un server e vuoi sapere da che parte stai:\n# What is the transport? \u0026#34;nvme\u0026#34; is direct, \u0026#34;sas\u0026#34; means it went through a controller lsblk -o NAME,TRAN,MODEL,SIZE # Is there a tri-mode controller in the machine at all? lspci -nn | grep -Ei \u0026#39;sas|megaraid|serial attached\u0026#39; # Which driver claimed the disk? ls -l /sys/block/sdb/device/driver # Per-device queue depth — 128 is the mpt3sas NVMe default cat /sys/block/sdb/device/queue_depth # How many hardware queues does this device actually get? ls /sys/block/sdb/mq/ | wc -l ls /sys/block/nvme0n1/mq/ | wc -l # compare against a direct-attached drive # On a direct-attached drive, what did the controller actually grant? # One admin queue plus one I/O queue per core, so expect nproc + 1 cat /sys/class/nvme/nvme0/queue_count nproc # The driver says it out loud at load time dmesg | grep -i \u0026#39;nr_hw_queues\u0026#39; L\u0026rsquo;ultimo stampa la riga Max SCSIIO MPT commands: N shared with nr_hw_queues = M citata prima. Se nvme list è vuoto su una macchina che ti hanno detto essere tutta flash NVMe, il motivo è l\u0026rsquo;adattatore.\nIn breve Un adattatore tri-mode converte i tuoi drive NVMe in dischi SCSI. Quella conversione non è un effetto collaterale. È il modo in cui una scheda serve tre protocolli, ed è quello che stai comprando.\nQuello a cui rinunci è specifico e misurabile: coppie di code per core sostituite dalle code di risposta condivise di un controller, una profondità per dispositivo di 128, un pool di tag diviso tra tutti i drive della scheda, un collegamento x2 dove il drive voleva x4, e un solo uplink condiviso dove prima ogni drive aveva il suo percorso fino al root complex. L\u0026rsquo;adattatore smette di essere un collegamento e diventa il collo di bottiglia, e sull\u0026rsquo;hardware attuale lo diventa in fretta: due drive Gen4 raggiungono un HBA 9500, quattro drive Gen5 raggiungono perfino una PERC13.\nUn collegamento all\u0026rsquo;host più largo aiuta, una scheda x16 Gen5 ha circa quattro volte la banda e gli IOPS di una x8 Gen4, ma non cambia la forma. Compra slot, non parallelismo: le stesse sedici lane collegate direttamente a quattro drive rendono la stessa banda senza nessuna tassa sulle code. E non salva uno scaffale pieno. Ventiquattro drive dietro un 9500 ottengono circa 570 MB/s ciascuno, che è quello che fa un SSD SATA.\nNel 2019, quando NVMe era il livello che aggiungevi a un\u0026rsquo;installazione SAS e le piattaforme erano a corto di lane, era uno scambio ragionevole. Nel 2026 di solito non lo è. NVMe è il default, i drive U.2 usati costano poco, un Epyc a socket singolo ha lane in abbondanza, e l\u0026rsquo;unico vantaggio che regge ancora, gli slot universali, appartiene al backplane U.3, non al controller. Molto spesso puoi tenerti gli slot e togliere la tassa cablando il backplane direttamente alla CPU.\nQuindi compra un adattatore tri-mode se stai comprando il suo motore RAID e ne hai bisogno. Non comprarlo per la flessibilità, e se ne hai ereditato uno in uno chassis pieno di NVMe, vai a vedere come è cablato quel backplane.\nNon ha senso pagare due volte dei drive che poi non puoi usare come si deve.\n","permalink":"https://blogs.damiendye.uk/it/hardware/tri-mode-adapters-nvme-as-sas/","summary":"Un adattatore tri-mode fa accettare a ogni slot SAS, SATA o NVMe: una flessibilità vera, e il motivo per cui esistono i backplane U.3. Quello che non pubblicizza è che i tuoi drive NVMe smettono di essere drive NVMe: arrivano in Linux come dischi SCSI su mpt3sas, queue depth 128, con un solo pool di tag e un solo uplink x8 in comune. Due drive Gen4 saturano la scheda. Un solo drive Gen5 la supera già. Se quello scambio ha ancora senso nel 2026, e perché gli slot universali appartengono al backplane e non al controller.","title":"Gli adattatori tri-mode comprano flessibilità con le tue code NVMe"},{"content":"Il presupposto che Ansible di solito può fare Quasi ogni modulo Ansible che hai usato funziona così: Ansible si collega all\u0026rsquo;host indicato nell\u0026rsquo;inventario, ci copia un piccolo programma Python, lo esegue e legge il risultato. L\u0026rsquo;host è la cosa che viene modificata e anche quella che fa il lavoro.\nCreare una macchina virtuale rompe questo schema nel modo più elementare possibile. L\u0026rsquo;host che stai costruendo non esiste. Non ha un IP, né un demone SSH, né Python, né un sistema operativo. Non c\u0026rsquo;è niente a cui collegarsi.\nQuindi community.proxmox non è un agente di configurazione. È un client API che si dà il caso venga distribuito come collezione Ansible. Per questo tutto ciò che c\u0026rsquo;è in questo articolo discende da quel solo fatto: dove girano i task, come fai entrare le credenziali, perché rieseguire non fa quello che ti aspetti e perché --check non ti dice la verità.\nGli esempi qui sono ridotti da un playbook che costruisce VM Windows e Linux a partire dai record di NetBox: proxmox-create-vms.yml. Ho reso generici i nomi di nodo, storage e bridge per leggibilità; la versione vera è in quel repository.\nTutto ciò che affermo sul comportamento dei moduli qui sotto è stato verificato su community.proxmox 1.6.0, la versione che ho installato:\n$ ansible-galaxy collection list community.proxmox # /home/damien/.ansible/collections/ansible_collections Collection Version ----------------- ------- community.proxmox 1.6.0 Prima cosa: la collezione si è spostata Se stai leggendo un playbook vecchio o una risposta vecchia, i moduli si chiamavano community.general.proxmox_kvm. Ora vivono in una collezione dedicata, ed è lì che avviene lo sviluppo. La versione 1.6.0 include 47 moduli, che coprono Ceph, SDN, firewall, regole HA e l\u0026rsquo;ingresso nel cluster, niente dei quali esisteva ai tempi di community.general.\nansible-galaxy collection install community.proxmox pip install \u0026#39;proxmoxer\u0026gt;=2.0\u0026#39; requests La dipendenza Python non è facoltativa e non è inclusa: la collezione dichiara requirements: [\u0026quot;proxmoxer \u0026gt;= 2.0\u0026quot;, \u0026quot;requests\u0026quot;], e vanno installati ovunque il modulo venga davvero eseguito, che, come spiega la sezione successiva, non è il nodo Proxmox.\nrequirements.yml, se preferisci fissare la versione:\n--- collections: - name: community.proxmox version: \u0026#34;\u0026gt;=1.6.0\u0026#34; La collezione è testata con ansible-core dalla 2.17 alla 2.20. Rinominare i tuoi task community.general.proxmox_* in community.proxmox.proxmox_* è quasi tutta la migrazione.\nOgni task Proxmox gira su localhost Due righe in cima al play fanno il grosso del lavoro, ed entrambe sembrano disattivare qualcosa di utile:\n- name: Create Proxmox virtual machines hosts: \u0026#34;{{ target_hosts | default(\u0026#39;cluster_pve:\u0026amp;status_planned\u0026#39;) }}\u0026#34; gather_facts: false serial: 1 gather_facts: false non è un\u0026rsquo;ottimizzazione. La raccolta dei fact si collega all\u0026rsquo;host dell\u0026rsquo;inventario, e l\u0026rsquo;host dell\u0026rsquo;inventario è una VM che non è ancora stata costruita. Lasciala attiva e il play fallisce prima del primo task.\nPoi ogni task Proxmox porta delegate_to: localhost:\n- name: Create Proxmox VM delegate_to: localhost register: created_vm community.proxmox.proxmox_kvm: api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; node: \u0026#34;{{ proxmox_api_host }}\u0026#34; ... L\u0026rsquo;host dell\u0026rsquo;inventario ora è solo un nome e un sacco di variabili. inventory_hostname diventa il nome della VM; le sue variabili descrivono la macchina che vuoi. Niente si collega a lui. Il task gira sul nodo di controllo, che apre una sessione HTTPS verso api_host e invia la definizione di una VM.\nLo vedrai scritto anche come local_action:, che è la sintassi più vecchia per la stessa cosa. Il playbook di smantellamento in quel repository la usa ovunque. Sono equivalenti. delegate_to è la grafia attuale.\nLa via di fuga punta al nodo Alcune cose devono davvero avvenire su un host Proxmox, e quei task delegano altrove:\n- name: Fail if no ISO file exists for the OS delegate_to: \u0026#34;{{ proxmox_api_host }}\u0026#34; ansible.builtin.stat: path: \u0026#34;{{ iso | replace(\u0026#39;isos:\u0026#39;, \u0026#39;/mnt/pve/isos/template/\u0026#39;) }}\u0026#34; register: iso_file failed_when: not iso_file.stat.exists Quella è una vera connessione SSH verso un nodo vero, che controlla un percorso vero sullo storage condiviso, perché l\u0026rsquo;API accetta tranquillamente un riferimento a una ISO che non corrisponde a nessun file, e meglio scoprirlo adesso che all\u0026rsquo;avvio. Nota la chirurgia sulle stringhe che traduce un riferimento di storage PVE (isos:iso/debian.iso) in un percorso del filesystem. L\u0026rsquo;astrazione dello storage non è disponibile per stat.\nQuindi un solo play ha task che girano in tre posti diversi, e confonderli è il modo più comune in cui questi playbook falliscono:\nDove gira davvero ogni task di un playbook di build Proxmox nodo di controllo Ansible delegate_to: localhost proxmox_kvm proxmox_vm_info proxmox_disk proxmox_access_acl ognuno di loro è un client HTTPS, non un agente proxmoxer \u0026#8805; 2.0 + requests installati qui, non sul nodo gather_facts: false nodo Proxmox: pve1 pvedaemon, API REST sulla porta 8006 qm, /etc/pve, storage la definizione della VM arriva qui la VM che stai creando niente IP \u0026#183; SSH \u0026#183; Python nessun sistema operativo nell'inventario è solo un nome e delle variabili API SSH qm set stat niente a cui collegarsi non prima di un play successivo Tre contesti di esecuzione in un solo play. I moduli Proxmox non toccano mai il nodo né il guest: sono client HTTPS che girano accanto al playbook. La via di fuga qm è l\u0026rsquo;unica parte che ha bisogno di SSH verso un hypervisor. Credenziali, e un valore predefinito che sta per cambiare Le opzioni di autenticazione sono condivise da tutti i moduli della collezione tramite un frammento di documentazione, quindi sono le stesse ovunque: api_host, api_user, e poi api_password oppure la coppia api_token_id / api_token_secret. Tutte ricadono su variabili d\u0026rsquo;ambiente (PROXMOX_HOST, PROXMOX_USER, PROXMOX_PASSWORD, PROXMOX_TOKEN_ID, PROXMOX_TOKEN_SECRET, PROXMOX_VALIDATE_CERTS), che sono il modo più pulito per tenere i segreti del tutto fuori dal play.\nUn token API è il default migliore. Ha un ambito limitato, si revoca senza cambiare la password di una persona e gli si possono dare esattamente i privilegi che servono al playbook invece di quelli che una persona si trova ad avere:\n- name: Create Proxmox VM delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; validate_certs: true ca_path: /etc/ssl/certs/pve-cluster-ca.pem Imposta validate_certs esplicitamente, oggi. La documentazione della collezione lo dice chiaro:\nCurrently defaults to false and changes default to true with community.proxmox 2.0.0.\nIl che significa che un playbook che non lo nomina non sta validando il TLS in questo momento, e comincerà a validarlo (e quindi a fallire contro il certificato autofirmato con cui arriva ogni installazione nuova di Proxmox) nel momento in cui qualcuno lancia --upgrade. Meglio prendere quella decisione di proposito che vedersela piombare a metà di una build. Se tieni il certificato autofirmato, scrivi validate_certs: false e accetta il rilievo; se hai una catena come si deve, punta ca_path su di essa. In ogni caso resta scritto.\nLa creazione minima che funziona Riduci il task di produzione a ciò che definisce davvero una macchina ed è leggibile:\n- name: Create Proxmox VM delegate_to: localhost register: created_vm community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; validate_certs: true node: pve1 name: \u0026#34;{{ inventory_hostname }}\u0026#34; cores: \u0026#34;{{ vcpus | int }}\u0026#34; memory: \u0026#34;{{ memory }}\u0026#34; machine: q35 bios: ovmf ostype: l26 scsihw: virtio-scsi-single scsi: scsi0: \u0026#34;vmdata:32,format=qcow2,discard=on,ssd=1\u0026#34; sata: sata0: \u0026#34;isos:iso/debian-13-netinst.iso,media=cdrom\u0026#34; net: net0: \u0026#34;virtio,bridge=vmbr0\u0026#34; efidisk0: storage: vmdata format: raw efitype: 4m pre_enrolled_keys: true boot: \u0026#34;order=scsi0;sata0\u0026#34; agent: \u0026#34;enabled=1,fstrim_cloned_disks=1\u0026#34; onboot: true tags: - production Alcune cose di quella forma vale la pena saperle prima di scrivere la tua.\nLe opzioni dei dispositivi sono sintassi PVE dentro lo YAML. scsi, sata, net, virtio, ide sono tutti di tipo dict, con chiavi scsi0, net0 e così via, e i valori sono le stringhe di opzioni separate da virgole prese pari pari da man qm: \u0026lt;storage\u0026gt;:\u0026lt;size\u0026gt;,option=value per un disco, [model=]\u0026lt;enum\u0026gt;,option=value per una NIC. Il modulo non li modella; li inoltra. Quando qualcosa viene rifiutato, la risposta è nel riferimento delle opzioni PVE, non nella documentazione di Ansible.\nLi vedrai scritti anche come stringa JSON invece che come mappa YAML:\nnet: \u0026#39;{\u0026#34;net0\u0026#34;:\u0026#34;virtio,bridge={{ vlan_bridge }}\u0026#34;}\u0026#39; Funzionano entrambi. Ansible converte la stringa per un parametro di tipo dict. La forma JSON esiste perché è più facile generare un\u0026rsquo;intera struttura con una sola espressione Jinja. La forma a mappa è più facile da leggere sei mesi dopo.\nboot ha due generazioni di sintassi. Il modulo accetta le vecchie lettere, dove boot: \u0026quot;cdn\u0026quot; significa «prova il disco, poi il CD-ROM, poi la rete». Il PVE attuale vuole una lista ordinata esplicita, boot: \u0026quot;order=scsi0;sata0;net0\u0026quot;, che non lascia dubbi su quale disco. La forma vecchia funziona ancora. Quella esplicita è quella che vuoi nei lavori nuovi. Un vero tranello sepolto nella documentazione del modulo: l\u0026rsquo;avvio da rete richiede di impostare rng0 da PVE 8.3.5.\nnuma e numa_enabled sono parametri diversi. numa_enabled è il booleano che accende NUMA. numa è un dict che descrive una topologia (cpus, hostnodes, memory, policy). Scrivere numa: true è un errore di tipo, ed è un\u0026rsquo;ora persa con facilità. Se ti interessa perché tutto questo conta, l\u0026rsquo;allineamento NUMA su Proxmox tratta il problema di fondo.\nmachine: q35 e bios: ovmf sono i default giusti, non decorazione: l\u0026rsquo;argomento per intero.\nOmettere vmid significa che il modulo chiede all\u0026rsquo;API il prossimo ID libero. Comodo, e la causa diretta della prossima cosa.\nPerché serial: 1 «Prendi il prossimo ID disponibile, poi crea una VM con quello» sono due chiamate API con un buco in mezzo. Due worker che lo fanno contemporaneamente possono leggere lo stesso ID libero, e chi perde riceve un errore o, peggio, una sorpresa.\nserial: 1 fa sì che la fase di creazione proceda un host alla volta. Non è veloce e non ha bisogno di esserlo. La parte costosa della costruzione di una VM avviene dopo che questo playbook ha passato la mano. Il play gemello che avvia le VM finite usa serial: 5, perché l\u0026rsquo;avvio non ha un contatore condiviso su cui fare a gara.\nSe preferisci il parallelismo, assegna tu il VMID dalla tua fonte di verità e passalo esplicitamente. Allora non c\u0026rsquo;è nessuna lettura-modifica-scrittura e nessuna gara.\nL\u0026rsquo;idempotenza non è quella che ti aspetti Questa è la sezione da leggere due volte, perché proxmox_kvm non si comporta come ansible.builtin.package.\nname non è un\u0026rsquo;identità. I nomi delle VM non sono unici in un cluster Proxmox, e il modulo lo dice. Con state: present e nessun vmid, se esiste già una VM con quel nome, il modulo esce con changed=false e msg: \u0026quot;VM with name \u0026lt;x\u0026gt; already exists\u0026quot; e non fa niente. Non confronta i tuoi parametri con la realtà. Non converge. Rinuncia.\nupdate vale false per default. Quindi modificare memory: nel playbook e rieseguire non fa nulla. La VM tiene la memoria con cui è stata costruita, il task riporta successo e niente da nessuna parte ti dice che le due cose hanno preso strade diverse.\nupdate: true rifiuta ancora i parametri interessanti. Dalla documentazione del modulo:\nBecause of the operations of the API and security reasons, I have disabled the update of the following parameters net, virtio, ide, sata, scsi. Per example updating net update the MAC address and virtio create always new disk…\nupdate_unsafe: true toglie quella restrizione, e l\u0026rsquo;avvertimento non è di facciata:\nUse this option with caution because an improper configuration might result in a permanent loss of data (for example disk recreated).\nQuindi il disco che pensavi di ridimensionare può essere sostituito da uno nuovo e vuoto. Non ricorrere a questo: i parametri rifiutati hanno i loro moduli, ed è la prossima sezione.\nE --check non copre niente di tutto questo. La collezione dichiara il supporto al check mode modulo per modulo, ed è incoerente esattamente nella direzione sbagliata:\nModulo check_mode diff_mode proxmox_kvm nessuno nessuno proxmox_disk nessuno nessuno proxmox_template nessuno nessuno proxmox_snap completo nessuno proxmox_nic completo nessuno proxmox_pool completo nessuno La divisione non è «i moduli in sola lettura possono, quelli in scrittura no»: proxmox_nic crea ed elimina interfacce e rispetta il check mode benissimo. È che i tre moduli che trattano storage e ciclo di vita delle VM non lo fanno. Una corsa con --check di un playbook di build salta in silenzio la creazione della VM e poi riferisce su un mondo in cui la VM non è mai stata fatta, quindi ogni task successivo ragiona sullo stato sbagliato. Su un playbook di build, --check non è una rete di sicurezza, e trattarlo come tale è peggio che non lanciarlo.\nCosa fa davvero una seconda esecuzione di proxmox_kvm seconda esecuzione: state: present, ed esiste una VM con quel nome il modulo non confronta mai i tuoi parametri con la VM in esecuzione update: false il default changed = false \u0026#8220;VM with name \u0026lt;x\u0026gt; already exists\u0026#8221; cambi la memoria nel play, riesegui, e niente te lo segnala update: true fa convergere quasi tutto core, memoria, tag, agent, onboot applicati net, virtio, ide, sata, scsi, efidisk0, tpmstate0 rifiutati per progetto usa proxmox_disk e proxmox_nic per quelli update_unsafe: true fa convergere tutto anche i parametri rifiutati vengono applicati un parametro disco può ricreare il disco la perdita definitiva di dati è il rischio documentato --check non ti dice niente check_mode: none il task viene saltato ogni task successivo ragiona su un mondo in cui la VM non è mai stata creata Solo due su quattro fanno convergere qualcosa, e quello che copre i dischi è quello che li può distruggere. Quindi condiziona tu all'esistenza, e tratta la creazione come un evento unico. Cosa fa davvero una seconda esecuzione. Solo due dei quattro percorsi fanno convergere qualcosa, e l\u0026rsquo;unico che copre i dischi è quello che li può distruggere. Quindi fai dell\u0026rsquo;esistenza il cancello Dato tutto questo, lo schema praticabile è smettere di chiedere al modulo di essere idempotente e decidere tu se costruire. Il playbook di produzione lo fa così:\n- name: Check if VM is present or manually built delegate_to: localhost community.proxmox.proxmox_vm_info: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; config: current register: existing_vm ignore_errors: true failed_when: (existing_vm.proxmox_vms | length) == 0 - name: Configure Proxmox VM when: existing_vm is failed block: - name: Create Proxmox VM ... proxmox_vm_info con config: current restituisce la VM e la sua configurazione attiva, oppure una lista vuota. failed_when trasforma «lista vuota» in un fallimento, ignore_errors: true impedisce a quel fallimento di chiudere il play, e when: existing_vm is failed diventa «la VM non c\u0026rsquo;è, costruiscila».\nUsare un task fatto fallire apposta come booleano si legge male, e non fingerò il contrario. L\u0026rsquo;alternativa è when: (existing_vm.proxmox_vms | default([]) | length) == 0, che è onesta nell\u0026rsquo;essere un controllo di lunghezza e non ha bisogno di ignore_errors. Funzionano entrambe. La versione sopra è quella in produzione, e il suo unico vero vantaggio è che il risultato registrato porta con sé la configurazione esistente, che i task successivi possono leggere.\nLa parte importante è la forma, non la grafia: controlla, poi dirama, e tratta la creazione come un evento unico. La configurazione continuativa di una VM è un problema diverso dalla sua esistenza, e questo modulo è bravo solo nel secondo.\nDischi e NIC hanno i loro moduli Ecco la cosa che ho glissato sopra, e cambia tutto il quadro: i parametri che proxmox_kvm si rifiuta di aggiornare non sono un buco nella collezione. Sono delegati. community.proxmox.proxmox_disk e community.proxmox.proxmox_nic aggiungono, modificano e rimuovono esattamente le cose che il modulo di creazione non tocca, usando come chiave gli stessi nomi scsi0 e net0 che hai usato quando hai costruito la VM.\nEntrambi si comportano meglio di proxmox_kvm, e uno dei due è l\u0026rsquo;unico modulo di questo flusso di lavoro che si può provare a vuoto.\nproxmox_nic: aggiungere, ritaggare o rimuovere un\u0026rsquo;interfaccia - name: Move the VM\u0026#39;s primary NIC to a new bridge and VLAN delegate_to: localhost community.proxmox.proxmox_nic: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; interface: net0 bridge: vmbr1 tag: 120 model: virtio mtu: 1 queues: 4 firewall: true state: present interface è l\u0026rsquo;unica opzione obbligatoria oltre all\u0026rsquo;autenticazione (net[n] con n da 0 a 31), e state: present o absent ti danno aggiunta e rimozione. model vale virtio per default, che è la risposta giusta a meno che un guest non ce la faccia.\nIl motivo per cui questo modulo esiste è l\u0026rsquo;indirizzo MAC. Ricorda perché proxmox_kvm si rifiuta di aggiornare net: «updating net update the MAC address». proxmox_nic lo risolve esplicitamente:\nWhen not specified this module will keep the MAC address the same when changing an existing interface.\nQuindi puoi ritaggare una VLAN, spostare un bridge, cambiare l\u0026rsquo;MTU o accendere il firewall senza che l\u0026rsquo;identità della NIC del guest cambi sotto i suoi piedi. Conta più di quanto sembri: un MAC nuovo invalida le prenotazioni DHCP, rompe tutto ciò che è licenziato su una NIC e disallinea il record dell\u0026rsquo;interfaccia in NetBox che il playbook di creazione ha scritto con tanta cura. Questo è il modulo che rende noiosa una modifica di rete del giorno 2.\nAlcune opzioni da conoscere prima di averne bisogno:\nrate è in MBps, MegaByte al secondo, non bit. La documentazione è esplicita e l\u0026rsquo;errore di un fattore otto è facilissimo da fare. link_down: true scollega l\u0026rsquo;interfaccia, descritto nella documentazione come «like pulling the plug». Un modo pulito per isolare una VM sospetta senza fermarla né toccare il guest. trunks prende una lista di ID VLAN da far passare, per un guest che fa il tagging da sé. mtu: 1 non è un refuso e non è un MTU di 1 byte: significa «eredita l\u0026rsquo;MTU del bridge», e vale solo per virtio. queues imposta il multiqueue, da 0 a 16. Conviene farlo coincidere con il numero di vCPU su qualsiasi cosa muova traffico vero. E supporta pienamente il check mode. --check su un task proxmox_nic ti dice la verità, il che ne fa l\u0026rsquo;unica parte di questo flusso che puoi provare in sicurezza. Anche i suoi messaggi sono propriamente idempotenti. Un\u0026rsquo;interfaccia invariata riporta Nic net0 unchanged on VM with vmid 103 invece di dichiarare una modifica.\nproxmox_disk: l\u0026rsquo;intero ciclo di vita del disco proxmox_disk è il modulo più grande dei tre, e il suo state fa cinque lavori diversi:\nstate Cosa succede Reversibile? present crea il disco, o aggiorna le opzioni di uno esistente non pertinente resized lo ingrandisce: PVE non può ridurlo, e la documentazione dice di farlo a mano no detached diventa unused[n]; il volume e i suoi dati restano sì moved cambia lo storage sottostante, o passa il disco a un\u0026rsquo;altra VM l\u0026rsquo;originale resta salvo delete_moved absent rimosso dallo storage sottostante no Lo scarto tra detached e absent è la rete di sicurezza che proxmox_kvm non ti dà mai. Scollegare è una modifica di configurazione; eliminare distrugge dati. Due parole diverse, due conseguenze diverse.\nAggiungere un secondo disco a una VM che esiste già:\n- name: Add a data disk delegate_to: localhost community.proxmox.proxmox_disk: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; disk: scsi1 storage: vmdata size: 200 format: qcow2 iothread: true aio: io_uring discard: \u0026#34;on\u0026#34; ssd: true backup: true state: present create è la manopola che proxmox_kvm avrebbe dovuto avere. Controlla cosa può fare state: present:\nregular (il default): crea il disco se manca, altrimenti ne aggiorna le opzioni. disabled: aggiorna solo le opzioni, e non crea mai. È quella da usare quando cambi cache o iothread su un disco che deve esistere già. Non può sorprenderti evocando un volume nuovo perché una chiave era scritta male. forced: crea sempre. Un disco esistente viene scollegato e lasciato inutilizzato, non eliminato. Quest\u0026rsquo;ultimo comportamento è il dettaglio importante. create: forced è l\u0026rsquo;opzione dall\u0026rsquo;aria distruttiva, e comunque non distrugge niente: il vecchio volume sopravvive come unusedN e puoi ricollegarlo. Confrontalo con proxmox_kvm più update_unsafe, il cui modo di fallire documentato è un disco ricreato. Più o meno la stessa operazione, raggio dei danni molto migliore.\nIngrandire un disco:\n- name: Grow the data disk by 100 GiB delegate_to: localhost community.proxmox.proxmox_disk: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; disk: scsi1 size: \u0026#34;+100G\u0026#34; state: resized Attento alle unità, perché size cambia significato con state. Con state: present sono GiB come numero nudo (size: 200). Con state: resized vuole un suffisso: +100G per aggiungere alla dimensione attuale, o 500G come obiettivo assoluto. Un solo parametro, due convenzioni, e se indovini male il fallimento è silenzioso.\nSpostare un disco su un altro storage, cioè il caso della migrazione a caldo di un solo volume:\n- name: Move the disk to NVMe storage delegate_to: localhost community.proxmox.proxmox_disk: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; disk: scsi1 target_storage: nvme-pool bwlimit: 200000 delete_moved: true timeout: 3600 state: moved target_storage sposta all\u0026rsquo;interno di una VM; target_vmid passa il disco a un\u0026rsquo;altra VM e richiede lo stesso storage su entrambe. Si escludono a vicenda. delete_moved vale false per default, quindi per default finisci con due copie e l\u0026rsquo;originale lasciato lì come inutilizzato: sicuro, e un buon modo per riempire un pool di storage se non ci torni mai.\ntimeout qui vale 600 per default, contro 30 in proxmox_kvm. Parametro dall\u0026rsquo;aspetto identico, differenza di venti volte, perché queste operazioni copiano dati. Alzalo per immagini grandi o storage lento: la documentazione lo dice sia per moved sia per import_from.\nIl che porta all\u0026rsquo;opzione che fa di questo modulo la strada per V2V e immagini cloud:\nimport_from: \u0026#34;vmdata:9000/base-debian13.qcow2\u0026#34; import_from costruisce il disco da un volume esistente invece di allocarne uno vuoto: \u0026lt;STORAGE\u0026gt;:\u0026lt;VMID\u0026gt;/\u0026lt;NAME\u0026gt;, oppure \u0026lt;STORAGE\u0026gt;:import/\u0026lt;NAME\u0026gt; usando la directory di importazione dello storage su PVE 9.x e successivi. Esclude size, e solo root può usare percorsi assoluti del filesystem.\nIl resto della lista dei parametri è il motivo per collegare i dischi con questo modulo invece che in linea nella chiamata di creazione: cache, aio, iothread, discard, ssd, backup, detect_zeroes, e tutta la famiglia della limitazione di banda: iops, iops_rd, iops_wr, le loro varianti _max e _max_length, e i controlli di picco bps_*_max_length. Niente di tutto questo è raggiungibile tramite proxmox_kvm dopo la creazione.\nDue avvertenze, entrambe dalla documentazione del modulo:\nAlcune modifiche alle opzioni richiedono un riavvio. «Some updates on options (like cache) are not being applied instantly and require VM restart.» Un task verde significa che la configurazione è stata scritta, non che la VM in esecuzione si comporti diversamente. Non supporta il check mode. check_mode: none, come proxmox_kvm. Quindi la collezione si spacca a metà: le modifiche alle NIC si possono provare con --check, quelle ai dischi no. La divisione dei compiti Per fare questo Usa Creare la VM proxmox_kvm, una volta, condizionato all\u0026rsquo;esistenza Cambiare core, memoria, tag, agent, onboot proxmox_kvm con update: true Aggiungere, ritaggare, scollegare o rimuovere una NIC proxmox_nic Aggiungere, ingrandire, spostare, scollegare o rimuovere un disco proxmox_disk Snapshot proxmox_snap (anche lui con check mode completo) Qualsiasi cosa nessuno di loro esponga qm set via SSH Cambiare un disco o una NIC tramite proxmox_kvm niente: è a questo che serve update_unsafe, ed è il motivo per non usarlo Costruisci la VM con una chiamata proxmox_kvm minima, poi collega dischi e interfacce con i loro moduli. Sono più task, ed è la versione in cui le modifiche del giorno 2 hanno una strada che non passa da un\u0026rsquo;opzione il cui rischio documentato è perdere un disco.\nDove il modulo si ferma proxmox_kvm ha una lista di parametri enorme e comunque non copre tutto ciò che qm sa fare. Invece di aspettare, il playbook di produzione scende alla CLI sul nodo:\n- name: Set RNG source and better SPICE quality delegate_to: \u0026#34;{{ proxmox_api_host }}\u0026#34; become: true ansible.builtin.command: cmd: \u0026gt;- /usr/sbin/qm set {{ created_vm.vmid }} --rng0 source=/dev/urandom --spice_enhancements videostreaming=all Non c\u0026rsquo;è niente di male. Non è idempotente in nessun senso utile (qm set è una scrittura, e riporterà changed a ogni esecuzione), ma è esplicito, è leggibile e non finge. Se un modulo acquisisce il parametro più avanti, cancelli il task.\nAltre cose richiedono un secondo passaggio nel modulo con update: true, perché non si possono impostare nella stessa chiamata che crea la VM:\n- name: Add SPICE-compatible USB device delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; node: \u0026#34;{{ proxmox_api_host }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; usb: usb0: \u0026#34;spice,usb3=1\u0026#34; update: true when: spice_usb | default(false) Nota che passa vmid, non name. Una volta che hai l\u0026rsquo;ID, usalo. È l\u0026rsquo;unico identificatore che l\u0026rsquo;API tratta come unico.\nE per le cose che QEMU sa fare e per cui PVE non ha un\u0026rsquo;opzione, c\u0026rsquo;è args, che viene passato pari pari alla riga di comando di QEMU:\nargs: \u0026gt;- -global scsi-hd.physical_block_size=4k -global scsi-hd.logical_block_size=4096 Quello presenta il disco virtuale come 4Kn invece che 512e, il che conta più di quanto sembri: dimensioni dei blocchi, 4Kn e 512e. Il modulo etichetta args come «for experts only», e il motivo è che PVE non lo valida e un flag sbagliato impedisce alla VM di avviarsi con un errore che arriva da QEMU invece che da Proxmox.\nIl cluster non è coerente all\u0026rsquo;istante - name: Let registration complete on cluster ansible.builtin.pause: seconds: 5 when: created_vm.changed Un pause in un playbook di solito puzza, e questo regge il peso. La chiamata di creazione ritorna quando l\u0026rsquo;API ha accettato la definizione, che non equivale a ogni nodo d\u0026rsquo;accordo sull\u0026rsquo;esistenza della VM, e il task immediatamente successivo vuole impostare un\u0026rsquo;ACL su /vms/\u0026lt;vmid\u0026gt;. Cinque secondi di pazienza costano meno di un ciclo di retry attorno a un errore che compare solo sotto carico.\nIl playbook di smantellamento ha la stessa forma per lo stesso motivo: ferma, aspetta, poi elimina.\nRileggere ciò che hai costruito proxmox_kvm documenta tre valori di ritorno: vmid, status e msg. In pratica ne vorrai un quarto, e non è nella documentazione.\n- name: Get MAC address of VM ansible.builtin.set_fact: primary_mac_addr: \u0026#34;{{ created_vm.mac.net0 }}\u0026#34; created_vm.mac esiste davvero (il modulo lo costruisce in get_vminfo() e lo riversa nel risultato), ma manca dal blocco RETURN documentato, il che significa che niente promette che continuerà a funzionare. Conviene sapere esattamente come si comporta, perché ci sono due trappole:\nCompare solo quando il modulo ha creato davvero la VM. mac viene assemblato solo nel percorso crea-e-distribuisci. Prendi il ramo «esiste già» e il risultato ha vmid e msg e nient\u0026rsquo;altro. Contiene solo le interfacce che hai passato. Il codice scorre i parametri che hai fornito e sceglie quelli che corrispondono a net[0-9], poi rilegge dall\u0026rsquo;API la configurazione salvata di ciascuno. Nessun parametro net, nessuna chiave mac. Ecco perché il playbook di produzione ha bisogno di entrambe le metà, e la seconda è brutta:\n- name: Get MAC address of VM ansible.builtin.set_fact: primary_mac_addr: \u0026gt;- {{ created_vm.mac.net0 if created_vm is defined and created_vm.changed else ((existing_vm.proxmox_vms[0].config.net0 | split(\u0026#39;,\u0026#39;))[0] | split(\u0026#39;=\u0026#39;))[1] }} Quando la VM esisteva già, non c\u0026rsquo;è mac, quindi il MAC va scavato fuori dalla stringa grezza della configurazione. net0 torna dall\u0026rsquo;API come virtio=AE:AE:5C:A8:89:85,bridge=vmbr0, quindi: dividi sulle virgole, prendi il primo campo, dividi su =, prendi la seconda metà. È chirurgia sulle stringhe di una risposta API, ed è il costo onesto di un modulo la cui forma di ritorno dipende dal ramo che ha preso.\nSe ti serve il MAC in modo affidabile in entrambi i casi, prendilo sempre da proxmox_vm_info e analizza una forma sola invece di due.\nGuidarlo da una fonte di verità Guarda di nuovo la riga che apre il play:\nhosts: \u0026#34;{{ target_hosts | default(\u0026#39;cluster_pve:\u0026amp;status_planned\u0026#39;) }}\u0026#34; Quella è la vera architettura, e vale la pena dirla chiaramente: le VM da costruire non sono una lista in un file di variabili. Sono gli host del tuo inventario il cui stato registrato dice che dovrebbero esistere e ancora non esistono.\nL\u0026rsquo;inventario qui è NetBox. Una VM si richiede creando un record NetBox con stato planned, con CPU, memoria, disco, VLAN, proprietario e piattaforma. Il playbook seleziona le macchine planned, le costruisce, assegna un IP, scrive il DNS e poi porta il record a staged, e a quel punto quell\u0026rsquo;host non corrisponde più allo schema di host del play, e un handler aggiorna l\u0026rsquo;inventario perché il play successivo veda il nuovo stato:\nhandlers: - name: Refresh inventory ansible.builtin.meta: refresh_inventory Il campo di stato è una macchina a stati, il playbook è una transizione al suo interno, e tutto si può rieseguire perché un host che è già andato avanti non viene più selezionato. È una proprietà molto migliore di qualsiasi idempotenza a livello di modulo, ed è il motivo per cui il task di creazione può permettersi di essere un colpo solo.\ncommunity.proxmox include anche un suo plugin di inventario, che costruisce un inventario a partire dal cluster: la scelta giusta quando la fonte di verità è Proxmox. Qui è il contrario: NetBox fa testo e Proxmox è dove la sua intenzione si realizza. È un articolo intero a sé e lo scriverò separatamente.\nToglierla di nuovo La creazione senza smantellamento è mezzo ciclo di vita, e il percorso di rimozione ha la sua trappola: non puoi eliminare una VM in esecuzione:\n- name: Force stop the VM if it is running delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; state: stopped force: true timeout: 10 - name: Allow the cluster to stop the VM before removing it ansible.builtin.pause: seconds: 10 - name: Remove the VM from the cluster delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; state: absent force: true timeout: 10 state: stopped è uno spegnimento ordinato, e l\u0026rsquo;interazione con timeout è documentata e da imparare a memoria: se il timeout scade con force: true la VM viene spenta di colpo; con force: false invece il task fallisce. Una finestra ordinata di dieci secondi seguita da una staccata della spina è una politica ragionevole per una macchina che si sta smantellando, e una pessima per qualsiasi altra cosa.\nLo smantellamento completo (proxmox-remove-vms.yml) poi disfa il resto del record: DNS, l\u0026rsquo;IP assegnato, le interfacce NetBox, la VM NetBox e le voci obsolete in known_hosts. Avvolge il blocco in ignore_errors: true, il che è difendibile in uno smantellamento. Stai rimuovendo cose che potrebbero essere già sparite, e una macchina eliminata a metà è peggio di un log rumoroso.\nCosa cambierei in una build da zero Avendo letto il sorgente del modulo e non solo la sua documentazione, cinque cose:\nUsa un token API, non api_user più api_password. Ambito limitato, revocabile, e non appartiene mai a una persona. Imposta validate_certs esplicitamente, prima che la 2.0.0 te lo cambi sotto il naso. Assegna tu il VMID dalla fonte di verità. Elimina la gara lettura-modifica-scrittura, ti permette di togliere serial: 1 e dà a ogni task successivo un identificatore stabile invece di un nome che non è unico. Crea la VM nuda, poi collega dischi e NIC con proxmox_disk e proxmox_nic. Più task, ma ogni disco e ogni interfaccia hanno poi un modulo che li può cambiare in seguito (compreso create: disabled per modifiche alle sole opzioni e state: detached invece dell\u0026rsquo;eliminazione) invece di una configurazione che si può cambiare solo tramite update_unsafe. Prendi il MAC da proxmox_vm_info in un solo posto, così c\u0026rsquo;è una forma sola da analizzare invece di una condizione tra un valore di ritorno documentato e uno no. E non ricorrere a --check su un playbook di build. Il modulo che conta non lo può rispettare.\nUna prova a vuoto che dice sempre sì è peggio di nessuna prova a vuoto, perché le crederai.\nRiferimenti Documentazione della collezione community.proxmox — tutti i 47 moduli community.proxmox su GitHub — dove vive il sorgente citato sopra; plugins/modules/proxmox_kvm.py è il file da leggere quando la documentazione è ambigua Documentazione del modulo proxmox_kvm — la lista dei parametri, e gli avvertimenti su update / update_unsafe citati sopra Documentazione del modulo proxmox_vm_info — config: current e config: pending Riferimento delle opzioni qm di PVE — la vera specifica di ogni stringa scsi[n], net[n] e boot che fai passare proxmoxer — il client Python su cui è costruita la collezione damo2929/ansible-example — i playbook da cui vengono questi estratti, compresi l\u0026rsquo;inventario guidato da NetBox, la generazione DHCP e la build degli hypervisor ","permalink":"https://blogs.damiendye.uk/it/ansible/proxmox-create-vms-community-proxmox/","summary":"La collezione community.proxmox è un client API, non un agente di configurazione, e questo cambia la forma di ogni playbook che la usa. Dove girano davvero i task, perché proxmox_kvm rinuncia a convergere invece di aggiornare, perché proxmox_disk e proxmox_nic sono il posto giusto per le modifiche a dischi e NIC, e il valore di ritorno non documentato di cui finirai per avere bisogno.","title":"Creare VM Proxmox con Ansible: l'host che stai costruendo non esiste ancora"},{"content":"La domanda con cui inizia ogni valutazione di Proxmox «Proxmox è davvero enterprise?»\nSalta fuori in quasi ogni discussione su una migrazione, e la preoccupazione che ci sta sotto non è quasi mai l\u0026rsquo;interfaccia web. Nessuno teme seriamente che una dashboard nel browser gli corrompa i dati. Quello che le persone chiedono è se la cosa che sta tra una macchina virtuale e l\u0026rsquo;hardware, il componente che deve tenere un tenant fuori dalla memoria di un altro tenant, per sempre, senza un solo errore, sia un pezzo di ingegneria serio o un progetto della community diventato popolare.\nÈ esattamente la cosa giusta di cui preoccuparsi. Solo che è puntata sul livello sbagliato, perché Proxmox VE non contiene un hypervisor.\nL\u0026rsquo;hypervisor è KVM. Fa parte di Linux, c\u0026rsquo;è dal 2007, e se la tua organizzazione usa EC2, Google Cloud, Oracle Cloud, Alibaba Cloud, DigitalOcean o Nutanix, lo stai già usando in produzione oggi: semplicemente non ci hai mai dovuto pensare, perché i livelli sopra erano di qualcun altro.\nQuesto articolo parla di cosa significa davvero quella base comune. Di entrambe le metà: la parte dell\u0026rsquo;argomento che regge davvero, e la parte che nelle slide dei vendor viene gonfiata.\nProxmox VE è un livello di gestione La virtualizzazione su Linux è fatta di quattro livelli distinti, costruiti e mantenuti da quattro gruppi diversi di persone.\n1. Le estensioni hardware per la virtualizzazione. Intel VT-x con EPT, o AMD-V con NPT. Silicio. È ciò che permette a un guest di far girare il proprio kernel a velocità nativa con le proprie page table, senza che niente emuli le istruzioni.\n2. KVM: l\u0026rsquo;hypervisor. Moduli del kernel: kvm.ko per il nucleo indipendente dall\u0026rsquo;architettura, più kvm-intel.ko o kvm-amd.ko per le estensioni del vendor. È il componente che possiede il confine di isolamento. Prepara le strutture di controllo della macchina virtuale del guest, gestisce le VM exit, amministra le page table di secondo livello e consegna gli interrupt.\n3. Il VMM: il monitor delle macchine virtuali, in user space. Su Proxmox VE è QEMU. Costruisce la scheda madre virtuale: chipset, topologia PCIe, dischi, schede di rete, porte seriali, firmware. KVM fa girare la CPU; QEMU decide quale hardware il guest crede di avere.\n4. Il livello di gestione. Questo è Proxmox VE: pve-manager e pveproxy per l\u0026rsquo;API e l\u0026rsquo;interfaccia, qemu-server per trasformare un file di configurazione di VM in una riga di comando di QEMU, pve-container per LXC, pmxcfs sopra Corosync per la configurazione replicata del cluster, pve-ha-manager per fencing e riavvio, più lo stack di firewall e SDN.\nQuei quattro livelli esistono anche sulla piattaforma da cui stai migrando, e fanno gli stessi quattro lavori: vCenter è il livello 4, VMkernel il livello 2. Tornerò su questo confronto quando tutti i pezzi saranno sul tavolo.\nGli stessi quattro livelli su Proxmox VE e su vSphere Proxmox VE VMware vSphere 4 \u0026#183; gestione Proxmox VE pve-manager \u0026#183; pveproxy \u0026#183; qemu-server pmxcfs su Corosync \u0026#183; pve-ha-manager \u0026#183; SDN vCenter Server un'appliance separata da dimensionare, licenziare, aggiornare e salvare 3 \u0026#183; device model pve-qemu, in user space la scheda madre virtuale: chipset, PCIe, dischi, NIC QEMU upstream + 78 patch di Proxmox 2 \u0026#183; hypervisor \u0026#183; il confine di isolamento KVM: kvm.ko + kvm-intel.ko / kvm-amd.ko entry ed exit delle vCPU \u0026#183; EPT/NPT \u0026#183; interrupt Linux upstream, in una build del kernel Proxmox lo userworld VMX, uno per VM I/O dei dispositivi, snapshot, console remota user space, non dentro il kernel VMkernel, più un VMM per vCPU istruzioni e memoria del guest Le parole di VMware sul VMkernel: \u0026#8220;a POSIX-like operating system\u0026#8221; 1 \u0026#183; silicio Intel VT-x + EPT \u0026#183; AMD-V + NPT lo stesso silicio Gli stessi quattro livelli su entrambi i lati. Proxmox scrive il livello 4, modifica pesantemente il livello 3, compila il kernel del livello 2 e prende KVM stesso da upstream. VMware li scrive tutti e quattro e non te ne fa leggere nessuno. Cosa mantiene davvero Proxmox Proxmox VE possiede interamente il livello 4. Sarebbe però sbagliato dire che si limita a pacchettizzare i livelli 2 e 3, ed è l\u0026rsquo;equivoco più comune su cosa faccia l\u0026rsquo;azienda.\npve-qemu porta 78 patch rispetto a QEMU upstream nel suo file series, nel momento in cui scrivo:\nCosa aggiunge Proxmox a QEMU: 78 patch, in scala extra/ bitmap-mirror/ pve/ 78 patch, in scala 26 6 46 Fix upstream riportate. Un numero notevole sono fix di sicurezza nel device model: validazione dello stride in qxl e virtio-gpu, un abort di intel_iommu provocabile dal guest, DMA rientrante in lsi53c895a e virtio-net. Modalità di sync con dirty bitmap per drive-mirror. Lavoro di Proxmox: savevm-async, il formato VMA, il driver a blocchi PBS, pbs-restore, alloc-track, backup fleecing. Disegnato in scala da debian/patches/series. Gran parte della coda è ingegneria propria di Proxmox, e sta tutta nel livello 3: nessuna di queste patch tocca kvm.ko. Compilano anche il proprio kernel, e mantengono pacchetti o patch per gran parte dello stack intorno: pve-edk2-firmware per OVMF, più lxc, zfsonlinux, openvswitch, libiscsi, corosync-pve, lvm e ceph.\nQuindi il confine reale è: tutto il livello 4, ingegneria sostanziale dentro il livello 3, e un kernel che compilano loro. Quello che non hanno fatto è scrivere un hypervisor. Il codice KVM del livello 2 è Linux upstream.\nE niente di tutto questo è una critica a Proxmox. Per questo, anzi, è il motivo per cui ci si può fidare di un\u0026rsquo;azienda delle dimensioni di Proxmox per questo lavoro. Una piccola azienda di Vienna non si è messa a scrivere un hypervisor da zero; ha costruito su uno che Intel, AMD, Red Hat, Google, Amazon e IBM pagavano già degli ingegneri per mantenere, e ha speso il proprio impegno sul livello sopra e sul lavoro di integrazione che quel livello richiede. È lì che un team di quelle dimensioni può fare la differenza, e la coda delle patch mostra che la fa.\nCos\u0026rsquo;è davvero KVM KVM sta per Kernel-based Virtual Machine, e il nome è esatto: è una funzione del kernel, non un programma.\nCarichi i moduli e Linux ottiene un dispositivo a caratteri, /dev/kvm, più un piccolo insieme di chiamate ioctl su di esso: KVM_CREATE_VM, KVM_CREATE_VCPU, KVM_SET_USER_MEMORY_REGION, KVM_RUN. Quell\u0026rsquo;interfaccia è l\u0026rsquo;intera API dell\u0026rsquo;hypervisor. Qualsiasi cosa sia in grado di aprire un file descriptor e chiamare ioctl può creare macchine virtuali.\nL\u0026rsquo;ha scritto Avi Kivity in Qumranet ed è stato integrato in Linux 2.6.20, rilasciato a febbraio 2007: diciannove anni fa. Red Hat ha acquisito Qumranet nel 2008, e KVM è presente in ogni release del kernel da allora, con la solita cadenza del kernel di nove-dieci settimane. È stato portato ben oltre x86: arm64, POWER, s390 su IBM Z e RISC-V.\nIl punto architetturale importante è perché è piccolo.\nKVM non ha uno scheduler, perché Linux ne ha uno. Una vCPU è un normale thread dell\u0026rsquo;host, e il completely fair scheduler la mette su un core come qualsiasi altro thread. Non ha un gestore della memoria, perché Linux ne ha uno. La RAM del guest è una normale mappatura in user space, quindi può essere paginata, appoggiata su hugepage o collocata su un nodo NUMA con gli stessi meccanismi di qualsiasi altro processo. Non ha uno stack di driver, un block layer, uno stack di rete o un filesystem, perché Linux li aveva già tutti, e sono quelli su cui il produttore del tuo hardware fa i test.\nQuesto è il vero argomento della maturità, ed è molto più forte di un numero di versione. Ogni miglioramento del bilanciamento NUMA, ogni modifica a io_uring, ogni driver di rete, ogni nuovo workaround per un\u0026rsquo;errata della CPU che arriva in Linux arriva sotto le tue macchine virtuali, perché non esiste un kernel dell\u0026rsquo;hypervisor separato su cui qualcuno debba portarlo.\nL\u0026rsquo;argomento del type 1 traccia la linea nel posto sbagliato L\u0026rsquo;obiezione che segue, puntuale, è che KVM è «solo un hypervisor di type 2». Gira su un sistema operativo host, a differenza di ESXi, che gira su bare metal.\nQuella tassonomia è più vecchia della virtualizzazione hardware di tre decenni, e la cosa intorno a cui tracciava una linea non sta più dove tutti pensano.\nCosa succede davvero quando una vCPU gira QEMU chiama ioctl(vcpu_fd, KVM_RUN). Il controllo passa in kvm.ko, che carica lo stato della CPU del guest ed esegue VMLAUNCH. Da quell\u0026rsquo;istruzione fino alla VM exit successiva, il guest esegue direttamente sul core fisico, in modalità guest, con le proprie page table attive tramite EPT, alla piena velocità dell\u0026rsquo;hardware. Sotto non c\u0026rsquo;è niente che interpreti qualcosa. Il «sistema operativo host» non è nel percorso. Su quel core non sta nemmeno girando.\nQuando il guest fa qualcosa che va gestito, la CPU esce verso l\u0026rsquo;host e atterra in kvm.ko, nel kernel, esattamente al livello di privilegio occupato dal VMkernel di ESXi. La maggior parte delle exit viene risolta lì e si rientra senza che lo user space venga mai coinvolto.\nIl percorso di una vCPU da QEMU alla guest mode, e dove si fermano le sue exit user space kernel: ring 0 host mode guest mode: VMX non-root QEMU: il thread della vCPU un normale thread dell'host per vCPU kvm.ko VM entry \u0026#183; gestione delle exit \u0026#183; EPT \u0026#183; interrupt il guest, sul core fisico il suo kernel, le sue page table tramite EPT alla piena velocità dell'hardware ioctl(KVM_RUN) VMLAUNCH VM exit risolta qui exit verso lo user space Nessuno interpreta il guest, e l'host non gira su quel core. Dove si ferma una exit Risolte nel kernel \u0026#183; violazione EPT/NPT \u0026#183; scrittura sul local APIC: con APICv spesso nessuna exit \u0026#183; interrupt tra processori, posted in hardware \u0026#183; doorbell virtio-net, preso da vhost-net Arrivano a QEMU \u0026#183; accesso ai registri di un e1000 o IDE emulato \u0026#183; scrittura nello spazio di configurazione PCI \u0026#183; tutto ciò a cui sa rispondere solo QEMU Solo la seconda lista paga un giro nello user space, ed è la lista che accorci usando dispositivi virtio e un machine type senza hardware legacy. Il percorso di una vCPU. Tutto ciò che sta sopra la linea tratteggiata è un thread dell\u0026rsquo;host; tutto ciò che sta sotto è il guest sul silicio nudo. Le uniche exit che arrivano a QEMU sono quelle a cui QEMU deve rispondere. ESXi ha la stessa divisione Ora guarda la piattaforma che dovrebbe dimostrare la distinzione.\nLa documentazione di architettura di VMware stessa descrive VMkernel come «a POSIX-like operating system» che fornisce «process creation and control, signals, file system, and process threads». Questo, per descrizione del suo autore, è un sistema operativo. E una VM in esecuzione su ESXi non è una cosa dentro il kernel: è un gruppo di processi userworld: un VMM per ogni CPU virtuale, che virtualizza le istruzioni del guest e ne gestisce la memoria, e un processo VMX per ogni VM, che gestisce l\u0026rsquo;I/O verso i dispositivi non critici per le prestazioni e parla con il gestore degli snapshot e con la console remota.\nRileggilo pensando a QEMU. Contesto di esecuzione per vCPU nel kernel, processo per VM in user space che fa emulazione dei dispositivi e gestione. VMware l\u0026rsquo;ha divisa per lo stesso motivo di tutti gli altri.\nHyper-V non è diverso. La documentazione di Microsoft dice esplicitamente che il Virtual Machine Worker Process, vmwp.exe, è «a user mode component of the virtualization stack», avviato uno per VM, e che tutti i dispositivi emulati sono implementati lì, in esecuzione nella root partition, che è Windows. Perfino Xen, l\u0026rsquo;architettura a cui la tassonomia calza meglio, ha bisogno di un Linux general purpose in dom0 per funzionare, e prende il modello dei dispositivi per i guest completamente virtualizzati da QEMU.\nAllora dov\u0026rsquo;è la linea? Il criterio non è mai stato «usa lo user space?». La tassonomia di Goldberg, dei primi anni \u0026lsquo;70, chiede se l\u0026rsquo;hypervisor sia un\u0026rsquo;applicazione che gira su un sistema operativo preesistente che possiede già l\u0026rsquo;hardware e fa lo scheduling. Quello è un hypervisor di type 2, ospitato: VMware Workstation, VirtualBox, Parallels Desktop, QEMU puro senza accelerazione. Installi un sistema operativo general purpose, poi ci installi sopra un programma, e quel programma chiede al sistema operativo memoria e tempo di CPU come qualsiasi altro programma.\nNon è questo che è KVM. kvm.ko non è un programma sopra Linux. È parte di Linux, esegue allo stesso livello di privilegio del codice che possiede l\u0026rsquo;hardware, e quando un guest esce atterra lì direttamente. Sotto l\u0026rsquo;hypervisor non c\u0026rsquo;è nessun sistema operativo host. Il kernel è l\u0026rsquo;hypervisor. Proxmox VE distribuisce quel kernel come il sistema, esattamente come ESXi distribuisce VMkernel come il sistema.\nE la versione «ha bisogno dello user space, quindi è type 2» non si salva, perché applicata con coerenza prende tutto. Nessuna VM gira su ESXi senza il suo processo VMX, nessuna su Hyper-V senza vmwp.exe, nessuna su Xen come guest HVM senza QEMU. Un test che mette ogni hypervisor in commercio nello stesso secchio non sta distinguendo niente.\nKernel che possiede la virtualizzazione di CPU e memoria Modello dei dispositivi per VM in user space Serve un sistema operativo host preesistente? VMware ESXi VMkernel VMX per VM No Microsoft Hyper-V hypervisor più la root partition Windows vmwp.exe No Xen hypervisor Xen più Linux in dom0 QEMU, in dom0 o in uno stub domain No KVM kvm.ko QEMU No VirtualBox, VMware Workstation il kernel dell\u0026rsquo;host, tramite un driver installato l\u0026rsquo;applicazione stessa Sì Quattro prodotti, una sola forma, e poi una quinta riga davvero diversa. Quell\u0026rsquo;ultima riga è ciò che «type 2» è stato coniato per descrivere, ed è l\u0026rsquo;unica dove qualcos\u0026rsquo;altro comandava già l\u0026rsquo;hardware.\nQuindi la tassonomia traccia ancora una linea. Solo che non la traccia neanche lontanamente dove l\u0026rsquo;argomento presume: KVM ed ESXi stanno dallo stesso lato. Chiamare KVM type 2 prende in prestito una parola dalla categoria di VirtualBox e la applica a qualcosa che architetturalmente sta nella categoria di ESXi.\nIl che lascia l\u0026rsquo;etichetta senza nessuna utilità in una valutazione, perché entrambi i prodotti tra cui stai scegliendo stanno nella stessa casella. Quello che cambia non è il numero del tipo. È che un vendor ha scritto anche il kernel e non te lo fa leggere: una distinzione di licenza e di trasparenza travestita da diagramma di architettura. Nutanix lo dimostra sul piano commerciale: distribuisce lo stesso codice KVM di Proxmox e descrive AHV come un hypervisor bare metal di type 1. Stesso codice, etichetta opposta, ufficio marketing diverso.\nDentro l\u0026rsquo;accusa c\u0026rsquo;è una preoccupazione reale, e merita un nome migliore: un kernel general purpose fa mille lavori che uno costruito apposta non fa, il che significa più codice e più superficie d\u0026rsquo;attacco accanto al confine di isolamento. È legittima e misurabile, e ci torno verso la fine.\nDove avviene davvero il lavoro L\u0026rsquo;unico punto in cui l\u0026rsquo;istinto del «gira su un sistema operativo host» ha ragione è la gestione delle exit, quindi conviene essere chiari su quali exit vanno dove.\nIl guest fa questo Gestito da Costo Tocca una pagina non ancora mappata in EPT/NPT kvm.ko, nel kernel Una exit, microsecondi Scrive sul proprio APIC locale La CPU stessa, tramite APICv/AVIC Spesso nessuna exit Invia un interrupt tra processori Posted interrupt in hardware Spesso nessuna exit Trasmette su una coda virtio-net con vhost-net Thread del kernel, nessun passaggio in user space Un doorbell Legge un registro di un controller e1000 o IDE emulato Fino a QEMU Exit più un giro in user space Solo l\u0026rsquo;ultima riga assomiglia alla caricatura del type 2, ed è anche la riga che elimini con la progettazione, usando dispositivi virtio e non presentando hardware legacy emulato che non ti serve. È lo stesso ragionamento dietro alla scelta di Q35 invece di i440fx: meno accessi ai registri intercettati, meno dispositivi legacy da percorrere.\nIl sistema operativo host è una funzione, non un peso L\u0026rsquo;altra metà del conto non entra mai nell\u0026rsquo;argomento, quindi eccola: un nodo Proxmox è una macchina su cui puoi davvero lavorare. È Debian, quindi l\u0026rsquo;intero archivio Debian è a un apt install di distanza.\nIl monitoraggio che già usi, un node exporter di Prometheus, smartmontools, il tuo agent attuale, invece di quello che l\u0026rsquo;appliance sceglie di esporre. Diagnostica quando qualcosa è lento: fio, iperf3, nvme-cli, perf, bpftrace. Agent di backup di qualsiasi vendor che distribuisca un binario per Linux. Gestione della configurazione, così l\u0026rsquo;hypervisor sta nello stesso inventario Ansible di tutto il resto invece di essere un caso speciale. fwupd per il firmware, su hardware il cui vendor supporta LVFS. Niente di questo richiede un formato di plugin, un bundle firmato o la benedizione del vendor. Confrontalo con il modello di ESXi, dove la shell è volutamente limitata, il codice di terze parti arriva come VIB, e non c\u0026rsquo;è proprio nessun package manager a cui rivolgersi.\nArriva fino allo stack di storage Gli agent di monitoraggio sono la versione noiosa di questo discorso. La documentazione di storage di Proxmox elenca i plugin nativi, dir, NFS, CIFS, CephFS, ZFS, BTRFS, LVM, LVM-thin, iSCSI, FC/SAS, RBD, ZFS-over-iSCSI, PBS, e poi aggiunge una frase che vale la pena prendere alla lettera:\nyou may use all storage technologies available for Debian Linux\nÈ un\u0026rsquo;affermazione su dove sta il confine, e il meccanismo dietro è generico: porta un block device su ogni nodo, mettici sopra LVM, aggiungilo come storage LVM con shared attivo. È esattamente così che funzionano i percorsi supportati per Fibre Channel e iSCSI, quindi qualsiasi cosa sia in grado di produrre un block device condiviso può usare la stessa strada.\nQuattro trasporti, una via verso lo storage condiviso di Proxmox il trasporto cosa ti dà Linux cosa vede Proxmox Fibre Channel / SAS plugin nativo iSCSI plugin nativo NVMe/TCP o RDMA niente plugin: nvme-cli ATA over Ethernet niente plugin: aoetools un dispositivo a blocchi su ogni nodo /dev/sdX \u0026#183; /dev/nvme0n1 volume group LVM shared: 1 tipo di storage: lvm migrazione live in tutto il cluster Proxmox VE deve riconoscere solo i due riquadri a destra. Tutto ciò che sta a sinistra è il block layer di Linux, e non gli importa come è arrivato il dispositivo. Due di questi trasporti hanno un plugin di Proxmox e due non hanno niente, e dopo la seconda casella non fa nessuna differenza. Il livello LVM è dove una LUN condivisa diventa storage del cluster, chiunque l\u0026rsquo;abbia consegnata. NVMe over TCP o RDMA è il caso da conoscere, perché è veloce, attuale e assente da quell\u0026rsquo;elenco di plugin. nvme-tcp e nvme-rdma sono driver host di Linux nel tree, e NVMe/TCP è in mainline dalla 5.0, quindi non c\u0026rsquo;è niente da compilare. nvme-cli è un pacchetto Debian (nvme discover, poi nvme connect), e nvmetcli configura il target nvmet nel kernel dall\u0026rsquo;altra parte. Un namespace collegato appare come /dev/nvmeXnY, e da lì è un normale block device.\nATA over Ethernet dimostra lo stesso punto dall\u0026rsquo;estremo opposto: antico, oscuro, ugualmente non supportato come plugin. Il driver aoe è in mainline; aoetools ti dà aoe-discover e aoe-stat; vblade trasforma qualsiasi file o block device su un\u0026rsquo;altra macchina in un target. Stessa strada, stesso risultato.\nNessuno dei due è un\u0026rsquo;API di plugin, un SDK o un programma di certificazione. È ciò che succede quando lo storage dell\u0026rsquo;hypervisor è il block layer di Linux.\nGli avvertimenti onesti, perché sembra un trucco da festa fino alle 3 di notte. Nessuno dei due trasporti è un tipo di storage di Proxmox testato, quindi l\u0026rsquo;integrazione e i suoi modi di fallire, comportamento alla riconnessione, multipath, timeout sotto carico, sono tuoi da gestire e tuoi da testare prima che ci finisca sopra qualcosa di importante. E AoE è un protocollo nudo di Livello 2, non instradabile e senza autenticazione, quindi va su una VLAN di storage isolata e da nessun\u0026rsquo;altra parte. NVMe/TCP almeno ha un modello di discovery e può essere instradato, ed è in gran parte per questo che oggi è quello da scegliere.\nChi altro usa KVM Ecco da dove viene l\u0026rsquo;affermazione «lo stai già usando». Ogni piattaforma qui sotto usa lo stesso modulo del kernel.\nPiattaforma Dove la incontri La parte KVM Il VMM in user space Amazon EC2 (Nitro) Cloud pubblico Modulo core di KVM Personalizzato: QEMU rimosso, modello dei dispositivi nelle schede Nitro AWS Lambda, Fargate Serverless /dev/kvm Firecracker: un monitor di microVM minimale in Rust Google Compute Engine Cloud pubblico KVM dal lancio VMM proprio di Google, volutamente non QEMU Alibaba Cloud ECS Cloud pubblico KVM semplificato (X-Dragon) Personalizzato, con rete e storage scaricati su una scheda MoC Oracle Cloud (OCI) Cloud pubblico KVM di Oracle Linux: lo stesso stack che Oracle distribuisce on-premises Discendente di QEMU DigitalOcean, Linode/Akamai, Vultr, Hetzner, OVHcloud, Scaleway, UpCloud Cloud pubblico KVM standard QEMU Nutanix AHV HCI on-premises KVM standard QEMU con libvirt e Open vSwitch OpenStack (Nova) Cloud privato KVM standard QEMU tramite libvirt: il driver predefinito e il più testato Apache CloudStack, OpenNebula, oVirt On-premises KVM standard QEMU tramite libvirt OpenShift Virtualisation, SUSE Harvester Kubernetes KVM standard QEMU dentro un pod, tramite KubeVirt Proxmox VE On-premises KVM standard QEMU, con LXC accanto per i container Tutti tengono la metà del kernel e riscrivono la metà in user space Gli hyperscaler non hanno fatto un fork di KVM. Hanno fatto un fork del lavoro di QEMU.\nAWS ha spostato EC2 da Xen all\u0026rsquo;hypervisor Nitro, costruito sul modulo core di KVM con QEMU buttato via del tutto. Il modello dei dispositivi vive invece in schede Nitro dedicate, ed è così che ottengono prestazioni indistinguibili dal bare metal. Ogni tipo di istanza EC2 di generazione attuale gira su questo. A parte, Lambda e Fargate usano Firecracker, un VMM costruito apposta in Rust che parla con lo stesso /dev/kvm.\nGoogle fa girare ogni VM di Compute Engine su KVM dal lancio di Compute Engine, e ha scritto un proprio VMM in user space invece di usare QEMU, esplicitamente per evitare l\u0026rsquo;enorme matrice di guest, dispositivi e modalità di QEMU. Sono anche andati nell\u0026rsquo;altra direzione e hanno irrobustito il modulo del kernel upstream, togliendo dispositivi emulati che non servivano a nessuno e restringendo l\u0026rsquo;insieme delle istruzioni emulate. Quel lavoro è nel KVM che stai usando.\nAlibaba ha fatto una cosa della stessa forma con X-Dragon: un hypervisor KVM ridotto all\u0026rsquo;osso, con la virtualizzazione di rete e storage scaricata su una scheda MoC basata su FPGA.\nNutanix AHV è KVM più libvirt più QEMU più Open vSwitch più l\u0026rsquo;orchestrazione di Nutanix: di tutti i prodotti commerciali in quell\u0026rsquo;elenco, il parente più stretto di Proxmox VE. Un livello 4 diverso, e una fattura molto diversa.\nCinque piattaforme, cinque device model, un solo KVM Amazon EC2Nitro Google CloudCompute Engine Alibaba CloudECS, X-Dragon NutanixAHV Proxmox VEsu Debian gestione device model hypervisor hardware control plane EC2 console e API per ora di istanza control plane GCE console e API per ora di istanza console ECS e API per ora di istanza Prism e AOS su ogni nodo per nodo, all'anno pve-manager pveproxy, HA, SDN su ogni nodo sottoscrizione opzionale VMM su misura, niente QEMU i dispositivi stanno sulle schede Nitro VMM in user space di Google, volutamente non QEMU VMM semplificato, rete e storage scaricati su una scheda MoC QEMU, libvirt e Open vSwitch QEMU, con LXC accanto KVM: kvm.ko, kvm-intel.ko / kvm-amd.ko il confine di isolamento, ed è lo stesso codice in ogni colonna Intel VT-x + EPT \u0026#183; AMD-V + NPT Lo stesso modulo del kernel in ogni colonna. Ciò che cambia salendo nello stack è il modello dei dispositivi, poi il livello di gestione, poi la licenza: che è anche l\u0026rsquo;ordine in cui queste piattaforme differiscono davvero. Proxmox VE tiene QEMU di proposito Viene la tentazione di leggere la tabella come una classifica, con AWS e Google in cima per aver sostituito QEMU. È la lettura sbagliata, perché il loro vincolo non è il tuo.\nAWS e Google hanno un solo profilo hardware, su una scala dove un singolo bug di emulazione di un dispositivo è un evento che colpisce tutta la flotta, e controllano ogni confine delle immagini guest che a loro interessa. In quel mondo l\u0026rsquo;ampiezza di QEMU è quasi solo un rischio, quindi eliminarla è ovviamente giusto.\nTu non sei in quel mondo. Hai un\u0026rsquo;immagine di appliance del 2013 che vuole una e1000. Hai una VM Windows il cui machine type deve restare bloccato per il resto della sua vita. Hai una GPU da passare in passthrough, un controller SAS emulato per accontentare un installer, un archivio di variabili UEFI da conservare. QEMU è esattamente ciò che permette a una piattaforma general purpose di dire di sì a tutto questo.\nQuello che AWS chiama superficie d\u0026rsquo;attacco tu lo chiami matrice di compatibilità. Entrambe le descrizioni sono esatte; la differenza è se puoi scegliere i tuoi carichi.\nSpiega anche la forma di quella coda di patch. AWS e Google hanno risolto backup e snapshot fuori dal VMM, nei loro servizi di storage. Proxmox non aveva un servizio di storage in cui risolverlo, quindi l\u0026rsquo;ha messo in QEMU: ecco perché savevm-async e il driver a blocchi di PBS esistono come patch e non come prodotti.\nE vale la pena saperlo per un motivo pratico: le parti di Proxmox VE che ti mancherebbero di più sono quelle che non sono upstream. Le configurazioni delle tue VM sono testo semplice e le immagini dei dischi sono in formati standard, quindi una macchina si sposta. Ma uno snapshot che include lo stato della RAM, e una catena incrementale di Proxmox Backup Server, dipendono dal fork di QEMU di Proxmox. È una dipendenza molto più leggera di un hypervisor proprietario, il fork è pubblico, AGPL, e puoi leggerne ogni patch, ma non è zero, e «nessun lock-in a livello software» dovrebbe portarsi dietro questa nota.\nAllora: è enterprise? La versione pigra di questo argomento non funziona, e conviene dirlo chiaramente. «AWS usa KVM, quindi Proxmox VE è enterprise» è un non sequitur: prende un\u0026rsquo;affermazione su un livello e la applica di nascosto a un prodotto intero.\nEcco la versione che regge.\nCiò che è condiviso è il livello più difficile da fare bene e più pericoloso da sbagliare. La virtualizzazione di CPU e memoria, e il confine di isolamento tra tenant, è la parte dove un bug è una violazione e non un disservizio. Quel codice è revisionato da ingegneri pagati da Amazon, Google, Red Hat, Intel, AMD, IBM e Alibaba, e i suoi bug li trovano le realtà che gestiscono le flotte più grandi che esistano, di solito prima che il kernel arrivi a te. Quando arriva davvero una vulnerabilità di fuga dal guest, la correzione arriva con il normale aggiornamento del kernel che avresti applicato comunque. Non stai aspettando il ciclo di rilascio di un singolo vendor per un hypervisor che solo quel vendor può vedere.\nCiò che non è condiviso è tutto quello che sta sopra il confine. Il che significa che la domanda si riduce a due domande a cui è molto più facile rispondere:\nIl livello di gestione è abbastanza buono per il modo in cui lavori? Puoi comprarne il supporto a condizioni con cui puoi convivere? Entrambe si possono verificare in un proof of concept e scrivere in un contratto. Nessuna delle due richiede di avere fede in un hypervisor.\nÈ una posizione molto migliore di quella che la domanda originale presume, cioè che ti si chieda di fidarti di un hypervisor nuovo di un piccolo vendor. Non è così. Il codice specifico di Proxmox è un livello di gestione per lo più in Perl e sempre più in Rust, più quella coda di patch su QEMU, e nota dove atterrano le patch: il modello dei dispositivi e il percorso di backup, non il confine di isolamento.\nVale anche la pena sapere quanto ti costa un guasto del livello specifico di Proxmox. I processi QEMU sono normali processi indipendenti sull\u0026rsquo;host, quindi se pveproxy cade non si ferma neanche una macchina virtuale. È un raggio d\u0026rsquo;impatto molto diverso dal perdere il componente che possiede il confine di isolamento.\nCosa «lo stesso hypervisor» non ti compra È qui che i documenti di rassicurazione dei vendor tendono a fermarsi, il che dice qualcosa su per chi sono scritti. È la metà più utile.\nNon ti compra l\u0026rsquo;affidabilità di AWS. La disponibilità di Nitro ha pochissimo a che fare con KVM. Viene dal control plane, dalla rete, dal servizio di storage, dalla gestione della capacità e dalla pratica operativa intorno. L\u0026rsquo;affidabilità del tuo cluster verrà dal progetto del quorum di Corosync, dalla configurazione del fencing, dalla scelta dello storage e dalla ridondanza di rete. KVM non ha opinioni su nessuna di queste cose. Condividere un hypervisor con un hyperscaler non ti fa ereditare le sue operations.\nNon ti compra la superficie d\u0026rsquo;attacco di Nitro, ed è qui che atterra la metà legittima dell\u0026rsquo;accusa di type 2. Stai facendo girare QEMU su un kernel general purpose, e storicamente è nel modello dei dispositivi di QEMU che sono vissute le fughe dalle VM più memorabili: VENOM, in un controller floppy emulato che nessuno usava, è l\u0026rsquo;esempio canonico. All\u0026rsquo;epoca Google poté far notare che Compute Engine non era colpito proprio perché non usa QEMU. Tu lo usi, quindi i controlli compensativi sono tuoi: preferisci virtio all\u0026rsquo;hardware emulato, non presentare dispositivi che non ti servono, lascia stare i profili AppArmor, e aggiorna QEMU con la stessa disciplina del kernel. Le patch extra/ di Proxmox sono loro che fanno esattamente questo per conto tuo, ed è ragionevole controllare che lo stiano ancora facendo.\nNon rende portabile il comportamento delle VM tra piattaforme. Scelta del modello di CPU, versioni dei machine type, compatibilità della migrazione live e comportamento dell\u0026rsquo;orologio si decidono tutti nei livelli 3 e 4, e cambiano ovunque. Un cluster con generazioni di CPU miste ti punirà comunque se imposti il tipo di CPU su host, e gli orologi dei guest derivano comunque qualunque sia il logo sulla piattaforma. Stesso hypervisor non vuol dire stesso comportamento.\nNon risponde alla domanda sul supporto, che è quella a cui gli acquisti tengono davvero, e a ragione. Proxmox VE è AGPLv3 e gratuito da usare in produzione. La sottoscrizione compra il repository enterprise testato e il supporto del vendor, a partire da 120 € per socket all\u0026rsquo;anno. Il supporto di Proxmox stesso viene erogato in orario d\u0026rsquo;ufficio austriaco, quindi la copertura 24 ore su 24 viene dai partner e non da Vienna. croit, dove lavoro, è uno di quei partner, e copre 24/7, 365 giorni l\u0026rsquo;anno. È una trattativa commerciale, non un rischio tecnico, e il fatto che sia una trattativa commerciale è il senso di tutto quello che c\u0026rsquo;è sopra.\nCosa valutare davvero invece Se l\u0026rsquo;hypervisor è una questione chiusa, un proof of concept dovrebbe spendere il suo tempo sul livello davvero specifico di Proxmox VE:\nFencing e HA. Togli la corrente a un nodo con guest HA in esecuzione e cronometra il riavvio. Poi fallo a due nodi e verifica che quelli rimasti si comportino come ti aspetti quando si perde il quorum. Migrazione live tra generazioni di CPU. Con il modello di CPU su cui intendi davvero standardizzare, non host. Il backup e, soprattutto, il ripristino. Tempi di ripristino sotto carico, non tempi di backup. Nessuno è mai stato ringraziato per un backup veloce. Il modello dei permessi. Se puoi dare a un team applicativo console e controllo dell\u0026rsquo;alimentazione delle sue VM e nient\u0026rsquo;altro, con una granularità sufficiente a soddisfare un auditor. L\u0026rsquo;API. Tutto ciò che fa l\u0026rsquo;interfaccia web è una chiamata API; se la tua automazione non riesce a pilotarla, la piattaforma non si adatterà al tuo modo di lavorare. Il percorso di aggiornamento. Un aggiornamento di versione maggiore sul cluster del PoC, prima di averci sopra 400 VM. Nessuna di queste è una domanda su KVM. È proprio questo il punto.\nL\u0026rsquo;hypervisor è la parte chiusa. Spendi il proof of concept sulle parti che non lo sono.\nRiferimenti KVM in sé\nKVM API documentation — l\u0026rsquo;interfaccia ioctl di /dev/kvm, che è l\u0026rsquo;intero contratto dell\u0026rsquo;hypervisor Linux 2.6.20 release notes — la release in cui è stato integrato KVM, febbraio 2007 Some KVM developments — LWN, gennaio 2007, su KVM nei giorni dopo il suo arrivo in mainline Come sono costruiti gli altri hypervisor\nInterpreting virtual machine monitor and executable failures — la descrizione di Broadcom stessa di una VM ESXi in esecuzione come «several processes or userworlds», con un VMM per vCPU e un VMX per VM The Architecture of VMware ESXi (PDF) — il whitepaper che chiama VMkernel «a POSIX-like operating system» con processi, segnali, un file system e thread. Collegato tramite un mirror perché l\u0026rsquo;URL originale di VMware non è sopravvissuto alla riorganizzazione di Broadcom, il che è già di per sé un piccolo commento sulla continuità dei vendor Hyper-V architecture — Microsoft sul Virtual Machine Worker Process come componente in user mode, uno per VM, dove vivono tutti i dispositivi emulati The Nutanix Bible — AHV architecture — AHV descritto come KVM con libvirt, QEMU e Open vSwitch Chi usa KVM, e come l\u0026rsquo;ha cambiato\n7 ways we harden our KVM hypervisor at Google Cloud — Google su KVM senza QEMU, e sul lavoro di irrobustimento fatto upstream The AWS Nitro System — quali tipi di istanza EC2 girano sull\u0026rsquo;hypervisor Nitro AWS EC2 Virtualization 2017: Introducing Nitro — il resoconto di Brendan Gregg del passaggio da Xen a KVM, ancora il più chiaro Firecracker — il VMM minimale di AWS basato su KVM dietro Lambda e Fargate Alibaba Cloud\u0026rsquo;s sixth-generation ECS instances — l\u0026rsquo;hypervisor X-Dragon e lo scarico su MoC KubeVirt — il modello QEMU/KVM dentro un pod dietro OpenShift Virtualisation e Harvester OpenStack Nova hypervisor support matrix — KVM come driver di riferimento Cosa mantiene Proxmox\nThe Proxmox GitHub organisation — 89 repository, tra cui pve-qemu, pve-kernel, pve-edk2-firmware e i pacchetti per lxc, zfsonlinux, openvswitch, libiscsi, corosync-pve e ceph pve-qemu patch series — le 78 patch contate sopra, e il modo più rapido per vedere esattamente cosa aggiunge Proxmox a QEMU Proxmox VE storage documentation — l\u0026rsquo;elenco dei plugin nativi, quali tipi di storage sono condivisi, e la frase sull\u0026rsquo;uso di tutte le tecnologie di storage disponibili per Debian Linux nvme-cli e nvmetcli — gli strumenti host e target per NVMe-oF; aoetools e vblade per l\u0026rsquo;equivalente ATA over Ethernet. Tutti in Debian trixie, su cui è costruito Proxmox VE 9 Proxmox VE pricing and subscription tiers — cosa copre la sottoscrizione Trasparenza: lavoro per croit, un Gold Partner di Proxmox. Le affermazioni tecniche qui sopra hanno fonti e si possono verificare; il paragrafo commerciale è la parte in cui ho un interesse, quindi trattala di conseguenza.\n","permalink":"https://blogs.damiendye.uk/it/proxmox/kvm-the-hypervisor-inside-proxmox-ve/","summary":"«Proxmox è davvero enterprise?» è una domanda sull\u0026rsquo;hypervisor, e Proxmox VE non ne contiene uno. L\u0026rsquo;hypervisor è KVM, lo stesso modulo del kernel sotto EC2, Google Cloud, Alibaba Cloud, Nutanix AHV e OpenShift Virtualisation. Cosa mantiene davvero Proxmox, perché l\u0026rsquo;argomento del type 1 mira alla linea sbagliata, e cosa la base comune non ti compra.","title":"Proxmox VE non è un hypervisor: KVM lo è, e lo stai già usando"},{"content":"Perché gli HDD sono tornati nel menu Per anni il consiglio era abbastanza semplice da stare su un post-it: metti tutto su SSD.\nQuel consiglio era giusto, ed era anche economico. Nessuna delle due cose è più del tutto vera. L\u0026rsquo;offerta di NAND si è ristretta, la domanda dell\u0026rsquo;IA ha spinto in alto i prezzi del flash, e l\u0026rsquo;NVMe ad alta capacità è diventato difficile da giustificare in un deployment Proxmox attento ai costi, quello che deve essere operativo, affidabile e tanto economico quanto l\u0026rsquo;onestà permette.\nGli HDD enterprise tornano interessanti per lo stesso motivo di sempre: capacità per sterlina, e niente altro ci si avvicina.\nIl problema è che chiunque abbia fatto girare VM su dischi rotanti sa quanto possa andare male. Quell\u0026rsquo;esperienza è reale, e di solito è colpa dell\u0026rsquo;architettura più che dei dischi.\nDare la colpa ai dischi è più facile, però. È anche sbagliato, ed è costoso, perché convince la gente a comprare flash di cui non aveva bisogno.\nTutto quello che segue presume Proxmox con OSD Ceph iperconvergenti, perché è lì che le decisioni sul layout fanno davvero male.\nIl problema è la latenza, non il throughput Un HDD enterprise moderno sposta benissimo grandi quantità di dati sequenziali. Non è mai stato quello il collo di bottiglia.\nUn disco enterprise a 7.2k RPM fornisce intorno agli 80-100 IOPS di lavoro casuale, perché ogni operazione casuale aspetta uno spostamento della testina e una rotazione del piatto. Quel numero si è mosso a malapena in vent\u0026rsquo;anni. È meccanica, non elettronica. Un SSD enterprise di fascia base sta a tre o quattro ordini di grandezza di distanza.\nDai allo stesso disco lavoro sequenziale ed è un dispositivo utile. Il numero di operazioni grosso modo raddoppia, a circa 200 IOPS, ma ognuna di quelle operazioni ora porta un blocco grande perché la testina è già nel punto giusto e può continuare a leggere di seguito. Quindi ottieni throughput vero, da 150 a 250 MB/s, a un prezzo per terabyte che nient\u0026rsquo;altro tocca.\nÈ questa l\u0026rsquo;asimmetria importante, e non è «gli HDD sono lenti». Un disco rotante è bravo nel lavoro sequenziale e senza speranza in quello casuale, e i due numeri sono vicini solo perché la cosa limitata è il numero di operazioni, non i byte.\nIl che fissa l\u0026rsquo;intero obiettivo del progetto. Non stai cercando di rendere il disco più veloce. Non puoi. Stai cercando di fare in modo che passi il suo tempo nella modalità in cui è già competente, e di tenere lontano da lui il piccolo traffico casuale. Tutto quello che segue è questa sola idea applicata due volte.\nIl guaio è che le macchine virtuali non generano il carico in cui gli HDD sono bravi. Generano aggiornamenti di metadati, scritture di journal, piccoli flush sincroni, log, manutenzione del filesystem, e raffiche di attività casuale da una dozzina di guest alla volta che arrivano al disco mescolate tra loro.\nSenza speranza nel casuale, davvero bravo nel sequenziale: la modalità in cui gira il disco è tutto il progetto Operazioni al secondo, un dispositivo: barre non in scala, tre ordini di grandezza non ci stanno HDD 7.2k: casuale 80–100 ogni operazione aspetta testina e rotazione: senza speranza HDD 7.2k: sequenziale ~200 e ognuna porta un blocco grande: 150–250 MB/s di throughput reale NVMe enterprise 100k+ niente parti in movimento, niente testina da pagare Cosa manda davvero al disco un cluster iperconvergente metadati dei guest scritture journal e fsync log e manutenzione RocksDB metadati raffiche casuali, molti guest grandi trasferimenti sequenziali Cinque su sei sono piccoli e casuali. Solo uno è ciò in cui il disco è bravo. Non è «gli HDD sono lenti». Un disco rotante è davvero bravo nel sequenziale e senza speranza nel casuale, e i due numeri sono vicini solo perché la quantità limitata è il numero di operazioni, non i byte di ciascuna. Quindi il lavoro non è rendere il disco più veloce. È tenerlo nella modalità in cui è già competente. I ritmi di operazioni casuali e sequenziali sono sorprendentemente vicini, perché quello che è limitato è il numero di operazioni e non i byte che ognuna trasporta. Il sequenziale è dove il disco si guadagna da vivere; un cluster iperconvergente per natura gli manda l\u0026rsquo;altro tipo di lavoro. Ceph ci aggiunge il suo strato. Ogni scrittura porta con sé, oltre ai dati, aggiornamenti di metadati RocksDB. Se tutto questo finisce sui dischi rotanti nudi, i dischi passano il tempo a spostare la testina invece che a servire, e ottieni il sintomo che ogni amministratore riconosce: I/O wait alto, guest lenti, reattività incostante, e un cluster che sembra molto più lento di quanto suggerisca la sua scheda di capacità.\nLe linee guida hardware di Ceph stesso sono esplicite su dove porta tutto questo. Avvertono di «consider carefully the ostensible cost-per-gigabyte advantage of larger HDDs, and the concomitant limitations of IOPS per TB», e dicono che i dischi sopra gli 8 TB «may be best suited for storage of large files / objects that are not at all performance-sensitive.»\nVale la pena fare quel conto, perché i dischi che rendono tutto questo conveniente sono proprio quelli grandi. Da 20 TB in su. Un disco da 20 TB fa sempre i suoi 80-100 IOPS casuali, perché la capacità non ti compra nessuna operazione in più. Quindi offre circa 4-5 IOPS casuali per terabyte, dove un disco da 8 TB ne fa circa undici, e uno da 2 TB quaranta.\nSecondo la misura di Ceph stesso, quindi, un disco da 20 TB è ben dentro il territorio su cui ti dice di non mettere carichi sensibili alle prestazioni.\nNon è un argomento contro l\u0026rsquo;acquistarli. È il motivo per cui esiste il resto di questo articolo. Il progetto qui sotto è esattamente ciò che rende un disco da 20 TB adatto allo storage delle VM, facendo in modo che il piccolo lavoro casuale non lo raggiunga mai.\nTogli i metadati dal disco rotante La modifica di maggior valore per un cluster su HDD è smettere di far tenere al disco la contabilità di Ceph.\nBlueStore tiene tre cose per OSD: i dati veri e propri su block, il database di metadati RocksDB su block.db, e il write-ahead log su block.wal. Di default vivono tutti e tre sullo stesso dispositivo. Metti block.db su NVMe e una gran quantità di piccolo I/O casuale lascia del tutto il disco.\nLa documentazione hardware di Ceph lo dice chiaramente: «HDD OSDs may see a significant write latency improvement by offloading WAL+DB onto an SSD.»\nLayout di un OSD BlueStore: tutto sul disco rotante, contro i metadati su NVMe Default: un dispositivo tiene tutti e tre scritture dati oggetti metadati RocksDB Un HDD da 7.2k block block.db .wal I due flussi dividono un budget di 80 IOPS. La testina salta tra dati e metadati a ogni scrittura. block.db su NVMe: i metadati se ne vanno scritture dati oggetti metadati RocksDB HDD da 7.2k block: solo dati NVMe enterprise block.db .wal Il disco ora fa un solo lavoro. Indica un dispositivo DB e il WAL lo segue. Dimensiona\u0026#160;block.db\u0026#160;all'1–2% di\u0026#160;block\u0026#160;per carichi RBD, o al 2,5% per stare comodi. Sottodimensionalo e RocksDB non fallisce: si riversa sul disco rotante, l'unico esito che spreca il flash appena comprato. Le dimensioni utili vanno a gradini di circa 3 GB, 30 GB e 300 GB, perché una partizione DB usa per intero solo le somme dei livelli di RocksDB. Arrotondare al gradino sopra costa poco; arrotondare sotto non compra niente. A sinistra, tutto su un solo disco: le scritture di dati e gli aggiornamenti di RocksDB si contendono gli stessi 80 e rotti IOPS. A destra, block.db su NVMe: il traffico dei metadati lascia il disco, e al disco rotante resta l\u0026rsquo;unica cosa in cui è bravo. Usa qui un NVMe enterprise vero, non flash consumer. Il motivo non sono i numeri da benchmark in prima pagina. È una latenza stabile sotto carico prolungato, e la protezione dalla perdita di alimentazione. La documentazione di Ceph è diretta: «Enterprise-class SSDs are best for Ceph: they feature power loss protection (PLP)», e «bargain client-class or off-brand SSDs are a false economy.»\nDischi della classe Samsung PM9A3 e Micron 7450 Pro sono il genere di cosa che va qui. Sotto pressione in scrittura a Ceph interessa la costanza molto più dei numeri di picco, ed è esattamente ciò che separa un disco enterprise da uno consumer veloce.\nDimensionare block.db, e quanto costa lo spillover Sbagli la dimensione e il beneficio evapora in silenzio, perché quando block.db si riempie, RocksDB non fallisce: si riversa sul dispositivo lento, esattamente dove sarebbe stato senza l\u0026rsquo;NVMe.\nÈ il peggio dei due mondi: hai comprato il flash e la testina del disco continua a spostarsi.\nLe indicazioni attuali di Ceph:\nCarico block.db come frazione di block RBD / a blocchi, dischi delle VM dall'1% al 2% RGW / a oggetti almeno il 4% Raccomandazione generale quando si spostano WAL+DB almeno il 2,5% Lo storage delle VM Proxmox è la riga RBD, quindi l'1-2% è la cifra onesta per pianificare, e il 2,5% è un posto comodo dove stare.\nApplicalo a un disco da 20 TB e i numeri catturano la tua attenzione:\nblock.db per un OSD da 20 TB All'1% 200 GB Al 2% 400 GB Al 2,5% 500 GB Mettilo insieme ai gradini dei livelli di RocksDB qui sotto e 300 GB per OSD è il punto d\u0026rsquo;arrivo sensato. Il gradino utile più vicino al centro dell\u0026rsquo;intervallo.\nIl che cambia ciò che è davvero il dispositivo condiviso dei metadati. Otto OSD da 20 TB vogliono 2,4 TB di NVMe in tutto; quindici, il massimo dichiarato da Ceph dietro un NVMe, vogliono 4,5 TB. Su dischi così grandi è la capacità del DB a decidere quanti OSD stanno dietro un dispositivo, non il rapporto. Finirai i gigabyte molto prima di finire la benedizione di Ceph.\nC\u0026rsquo;è un\u0026rsquo;altra piega da conoscere, perché rende sbagliato il dimensionamento a intuito. La struttura a livelli di RocksDB fa sì che una partizione DB possa usare pienamente solo dimensioni che corrispondono alle somme dei suoi livelli, il che storicamente produce gradini utili intorno a 3 GB, 30 GB e 300 GB, con le dimensioni intermedie che non offrono nulla in più del gradino inferiore. Arrotondare 18 GB a 30 GB spesso non costa niente in pratica; arrotondarli a 20 GB non ti compra niente in più di 3 GB nel caso peggiore.\nControlla lo spillover dopo che il cluster ha girato per un po\u0026rsquo;, non il primo giorno. È un problema a insorgenza lenta.\nNon ti serve un dispositivo WAL separato Questo ti risparmia una partizione e un sacco di armeggi.\nSe specifichi un dispositivo DB e nessun dispositivo WAL esplicito, Ceph mette automaticamente il WAL sul dispositivo veloce insieme al DB. La documentazione dice che «whenever a DB device is specified but an explicit WAL device is not, the WAL will be implicitly colocated with the DB on the faster device.»\nQuindi «metti DB e WAL su NVMe» è l\u0026rsquo;obiettivo giusto, ma è un argomento, non due. Un block.wal separato ha senso solo se hai un terzo livello, più veloce, su cui metterlo.\nSpegni la cache di scrittura dell\u0026rsquo;HDD Piccola, poco affascinante e facile da dimenticare.\nLa documentazione di Ceph nota che le prestazioni degli OSD «may be dramatically increased \u0026hellip; by disabling this write cache» sugli HDD. La cache volatile nel disco riordina e ritarda le scritture in modi che si scontrano con la semantica di flush di Ceph, e spegnerla di solito rende le cose più veloci, non più lente.\nDiventa obbligatorio, non più solo consigliabile, quando entra in gioco bcache, che è la prossima sezione.\nGià che ci sei: non ti serve un HBA con capacità RAID. Ceph lo dice direttamente: «You do not need an RoC (RAID-capable) HBA.» Dai i dischi agli OSD.\nUna Optane per disco Togliere i metadati dal disco sistema lo stato stazionario. Non sistema le raffiche, perché una raffica di piccole scritture sincrone deve comunque essere confermata, e il disco rotante conferma comunque alla velocità del disco rotante.\nÈ a questo che serve bcache, e quello che lo fa funzionare qui è Optane.\nQuello che conta non è la capacità. È il comportamento sotto carico di scrittura. Rispetto alla NAND, Optane offre una latenza bassissima, un\u0026rsquo;endurance altissima, e nessuno dei crolli da garbage collection che rendono imprevedibili le prestazioni di un SSD usato come cache di scrittura dopo un po\u0026rsquo; che è in servizio. Assorbire traffico piccolo, a raffiche e pesante in scrittura è la cosa in cui è il migliore al mondo.\nIl layout che conta: una Optane per HDD, ogni coppia il suo dispositivo bcache. Non una Optane condivisa tra uno scaffale di dischi.\nTre livelli, due modelli di condivisione: cache di scrittura abbinata, dispositivo dei metadati condiviso Un nodo Proxmox, tre OSD Scritture delle VM: piccole, sincrone, a raffiche Metadati RocksDB di Ceph bcache0 Optane cache scrittura HDD osd.0 block bcache1 Optane cache scrittura HDD osd.1 block bcache2 Optane cache scrittura HDD osd.2 block Una Optane per disco: abbinata, mai condivisa Un guasto della cache costa un OSD, che Ceph ricostruisce di routine. Endurance richiesta: 30–100 DWPD. Solo Optane. NVMe enterprise condiviso block.db + WAL implicito, tutti e tre gli OSD protetto da perdita d'alimentazione Condiviso, perché i metadati sono pochi Ceph dice 4–5 HDD per SSD SATA, non più di 15 per NVMe. Perdi questo e ogni OSD dietro di lui se ne va. NAND enterprise sì, ma un NVMe veloce. Servono entrambi i livelli, e non sono lo stesso acquisto. La Optane accorcia la conferma delle scritture; non fa nulla per le letture di metadati che Ceph fa di continuo, e rimanda soltanto quelle in scrittura. Salta l'NVMe e RocksDB torna sul piatto. Ogni scrittura verso un OSD passa dalla sua cache, per questo deve essere Optane. Il dispositivo dei metadati no, ma deve essere un NVMe veloce: poco volume di scrittura, eppure porta la latenza dei metadati di ogni OSD dietro di sé. Tre livelli, due modelli di condivisione diversi. Il dispositivo DB/WAL è condiviso tra diversi OSD perché il volume di scrittura di RocksDB è piccolo, anche se deve comunque essere un NVMe veloce perché porta la latenza dei metadati di ognuno di loro. La cache di scrittura Optane è abbinata uno a uno al suo disco, quindi un guasto della cache può costare al massimo un OSD. L\u0026rsquo;abbinamento è una scelta voluta, e compra due cose.\nNessuna contesa. Ogni disco ha tutta per sé la latenza e la profondità di coda di un\u0026rsquo;intera Optane, invece di mettersi in fila dietro le raffiche di altri sette OSD.\nUn dominio di guasto a cui Ceph sa già sopravvivere. Una cache di scrittura condivisa tiene dati dirty per ogni OSD dietro di sé, quindi perderla li perde tutti insieme; con l\u0026rsquo;abbinamento uno a uno, perdere una Optane costa esattamente un OSD. Questa distinzione è la conseguenza più importante di tutto il progetto, e ha una trattazione a parte in cosa stai cedendo in cambio.\nDeve essere Optane. Non NAND. La parola «Optane» qui non è una preferenza di marca né un di più. Sostituirla con un NVMe NAND, per quanto costoso, costruisce qualcosa che si consuma, e il motivo è l\u0026rsquo;endurance.\nGuarda dove sta il dispositivo di cache. Siccome questo progetto spegne il bypass sequenziale di bcache, il sequential_cutoff=0 della regola qui sotto, ogni singola scrittura verso quell\u0026rsquo;OSD ci passa attraverso: non solo le raffiche, tutto. Questo fa della cache il dispositivo con il ciclo di lavoro più alto del nodo, chiamato ad assorbire il volume di scrittura di un intero disco rotante per tutta la vita della macchina.\nL\u0026rsquo;endurance si esprime in scritture dell\u0026rsquo;intero disco al giorno, e il divario non è incrementale:\nDispositivo Endurance dichiarata Optane P5800X 100 DWPD Optane P4800X 30 DWPD NAND enterprise write-intensive, di fascia alta circa 10 DWPD NAND enterprise mixed-use 3 DWPD o meno NAND enterprise mainstream, classe PM9A3, 7450 Pro circa 1 DWPD Optane ha tra dieci e cento volte l\u0026rsquo;endurance della NAND che altrimenti metteresti lì. Metti un disco da 1 DWPD nell\u0026rsquo;unica posizione che riceve ogni scrittura del cluster e non hai costruito una cache, hai costruito un materiale di consumo.\nÈ peggio di quanto suggerisca la tabella, perché la NAND soffre di write amplification interna e Optane no. Il DWPD dichiarato di un disco NAND è quello che accetta all\u0026rsquo;interfaccia; quello che le sue celle assorbono davvero è di più. Il numero di Optane non ha bisogno di questo asterisco.\nLe ricostruzioni sono dove questo viene messo alla prova. Il backfill spinge terabyte di scritture attraverso i nodi superstiti in una finestra compressa, ogni byte attraverso i loro dispositivi di cache: un evento di endurance, non solo di latenza, che arriva esattamente quando meno vorresti che si guastasse un secondo dispositivo.\nQuindi i due livelli di flash vogliono dischi diversi, per motivi diversi:\nLivello Volume di scrittura Cosa serve al dispositivo DB/WAL piccolo, solo RocksDB Un NVMe enterprise veloce. Bassa latenza, alti IOPS casuali, PLP. La NAND enterprise è la tecnologia giusta; un PM9A3 o un 7450 Pro è l\u0026rsquo;acquisto giusto Cache di scrittura tutto PLP e un\u0026rsquo;endurance nell\u0026rsquo;ordine delle decine di DWPD. La NAND è la tecnologia sbagliata a qualunque prezzo Comprare un solo tipo di disco per entrambi i lavori è l\u0026rsquo;errore che questa sezione esiste per evitare, ma non leggere la prima riga come un permesso a risparmiare, perché un volume di scrittura basso non è una richiesta bassa.\nIl dispositivo DB/WAL deve comunque essere un NVMe davvero veloce, per tre motivi che non hanno niente a che fare con quanti byte ci passano.\nServe ogni OSD dietro di sé allo stesso tempo, quindi la coda che vede è il traffico di metadati di quattro o quindici dischi, non di uno.\nLa sua latenza ricade direttamente sui tuoi client. Le ricerche in RocksDB stanno sul percorso critico per trovare gli oggetti, per il peering e per lo scrub, e sono piccole letture casuali. Il carico in cui il divario tra un NVMe veloce e uno mediocre è più ampio. Ogni microsecondo viene moltiplicato per ogni OSD che ne dipende.\nE la compaction arriva a raffiche. RocksDB riscrive periodicamente i suoi livelli, trasformando un ricambio costante in un picco concentrato di letture e scritture. Un dispositivo che regge la media e si blocca sul picco blocca nello stesso momento ogni OSD dietro di sé.\nI rapporti di Ceph stesso sono l\u0026rsquo;indizio. Permette il triplo degli OSD dietro un NVMe rispetto a un SSD SATA, e a parlare sono l\u0026rsquo;interfaccia e la classe del dispositivo, non la capacità. Usa NVMe.\nQuindi: il dispositivo di cache deve essere Optane, il dispositivo DB/WAL può essere NAND, e nessuna delle due posizioni è dove si risparmia.\nQuale Optane: spesso basterebbe una M10 da 32 GB Niente di tutto questo significa che la Optane più grande sia quella giusta. Il dispositivo che ti serve lo decide il tuo carico di scrittura, anche se, come si vedrà, il mercato dell\u0026rsquo;usato potrebbe decidere per te comunque. Il conto conta lo stesso, perché ti dice cosa stai comprando in eccesso o in difetto.\nParti da cosa serve la cache. Tiene una raffica, non un disco. Con writeback_percent=40 un dispositivo da 32 GB dà circa 13 GB di buffer dirty, che sono un numero enorme di piccole scritture sincrone.\nQuindi non lasciarti spaventare dal rapporto. Un modulo da 32 GB davanti a un disco da 20 TB ne è lo 0,16%, che sembra assurdo finché non ti ricordi che è un assorbitore di raffiche e non una cache del working set che cerca di tenere i dati caldi. Un dispositivo da 375 GB davanti allo stesso disco è l'1,9%, che è semplicemente più margine di quanto ne userai.\nIl che mette in gioco la fascia economica. Ecco il piccolo modulo consumer contro il componente da datacenter, perché il divario non sta dove la gente se lo aspetta:\nOptane Memory M10 32 GB Optane DC P4800X 375 GB Lettura casuale, 4K 240.000 IOPS 550.000 IOPS Scrittura casuale, 4K 65.000 IOPS paragonabile alla lettura Lettura sequenziale 1.200 MB/s 2.400 MB/s Scrittura sequenziale 290 MB/s 2.000 MB/s Latenza tipica n.d. sotto i 10 µs Endurance 365 TBW 12,3 PBW, 30 DWPD Interfaccia PCIe 3.0 x2, M.2 2280 PCIe 3.0 x4, U.2 o AIC Guarda prima la riga degli IOPS in scrittura. La piccola M10 fa 65.000 scritture casuali al secondo; il disco rotante dietro di lei ne fa 80. Anche la Optane più economica è circa 650 volte il disco che sta mettendo in cache, quindi sull\u0026rsquo;asse delle prestazioni la discussione è chiusa prima di cominciare. Gli IOPS in più del componente DC non hanno dove andare quando a valle c\u0026rsquo;è un solo disco da 7.2k.\nLa riga che decide l\u0026rsquo;acquisto è l\u0026rsquo;endurance, dove il divario è di 34×. Trasformata in un budget giornaliero su una vita di cinque anni:\nDispositivo Scritture sostenibili al giorno, su cinque anni M10 32 GB, 365 TBW circa 200 GB/giorno P4800X 375 GB, 12,3 PBW circa 6,7 TB/giorno Sotto i 200 GB di scritture al giorno una M10 da 32 GB arriva in fondo alla vita del sistema. Al doppio ti dura due anni e mezzo. Con un carico davvero pesante in scrittura il componente DC si guadagna il suo prezzo, non per gli IOPS, che non puoi usare, ma per le trenta e rotte volte di scrittura in più che tollera.\nQuindi misura invece di indovinare. nvme smart-log su un dispositivo di cache esistente ti dà data_units_written; campionalo a una settimana di distanza, dividi, e confronta con i TBW dichiarati di quello che stai valutando. bcache tiene i suoi totali in /sys/block/bcacheN/bcache/stats_total/ se preferisci leggerli lì.\nDue avvertenze sulla M10. I suoi valori casuali sono dichiarati su un intervallo di 8 GB e non sull\u0026rsquo;intero dispositivo, quindi su una cache che intendi tenere piena per buona parte, considerali l\u0026rsquo;estremo ottimistico. Ed è un componente consumer senza alcuna dichiarazione di PLP enterprise. Il supporto di Optane viene scritto sul posto senza buffer DRAM nel percorso di scrittura, ed è per questo che questi moduli si comportano molto meglio di quanto farebbe una NAND consumer in caso di perdita improvvisa di alimentazione, ma «si comporta bene in pratica» non è una specifica. Se vuoi la garanzia per iscritto, compra un componente della serie DC.\nIl limite è la banda, non la capacità: lascia perdere i moduli da 16 GB C\u0026rsquo;è un secondo vincolo, indipendente da tutto quello che c\u0026rsquo;è sopra, e squalifica il componente più economico della gamma.\nLa cache deve essere più veloce del disco in sequenziale, altrimenti è uno strozzamento. La M10 da 16 GB non lo è, ed è il modulo che ti tenterà di più perché costa quasi niente:\nScrittura sequenziale Optane Memory M10 16 GB 150 MB/s Optane Memory M10 32 GB 290 MB/s Optane DC P4800X 375 GB 2.000 MB/s Un HDD enterprise da 7.2k 150-250 MB/s Leggi insieme la prima e l\u0026rsquo;ultima riga. Un modulo da 16 GB scrive in sequenziale più o meno alla stessa velocità del disco rotante che dovrebbe accelerare, e più lentamente di uno buono. Resta enormemente più veloce nel lavoro casuale, 35.000 IOPS di scrittura casuale contro gli 80 del disco, ma su un flusso sequenziale nel migliore dei casi è un pareggio e nel peggiore un tetto più basso di quello che il disco nudo raggiungeva da solo.\nE questo progetto garantisce che quel tetto lo incontrerai, perché spegnere il bypass sequenziale manda tutto attraverso la cache, facendo della banda di scrittura sequenziale della cache stessa il tetto rigido dell\u0026rsquo;intero OSD. Il recupero è dove fa più male: il backfill di un OSD da 20 TB è quanto di più sequenziale offra questo carico, e limitarlo a 150 MB/s rende ancora più lenta una ricostruzione già lenta.\nQuindi la linea M10 ha un minimo a 32 GB, ed è un minimo di banda, non di capacità. Il conto della capacità diceva che 32 GB erano abbondanti; il conto della banda esclude i 16 GB a prescindere da quanto poco ti servisse memorizzare. Devono passare entrambe le prove, e il componente economico fallisce quella che la gente non controlla.\nQualunque cosa tu stia valutando, metti il suo valore di scrittura sequenziale accanto a 250 MB/s prima di comprarla.\nComprare un prodotto che nessuno fa più Optane è fuori produzione. Intel ha chiuso l\u0026rsquo;attività nel 2022, svalutando 559 milioni di dollari di magazzino e fermando lo sviluppo. Non c\u0026rsquo;è nuova produzione né rifornimento; da qui in poi la quantità totale può solo scendere.\nIl che pone una domanda ovvia, perché ce n\u0026rsquo;è in vendita una quantità sorprendente. Capire da dove viene ti dice cosa stai comprando.\nSono scorte di ricambi di assistenza degli OEM in liquidazione. I tre grandi produttori di server tenevano Optane come ricambio per supportare le piattaforme in cui la vendevano. Quelle piattaforme sono arrivate a fine vita e uscite dal supporto, quindi i ricambi che le coprivano sono diventati merce morta dall\u0026rsquo;oggi al domani: magazzini di pezzi per macchine che nessuno è più obbligato per contratto a riparare. Quel magazzino è quello che sta arrivando su AliExpress e dai ricondizionatori.\nDue conseguenze, ed entrambe sono buone notizie.\nMolti sono inutilizzati più che smontati. I ricambi di assistenza sono rimasti su uno scaffale ad aspettare un guasto che non è mai arrivato, quindi l\u0026rsquo;usura all\u0026rsquo;arrivo spesso è di fatto zero: non «qualche anno di uso leggero» ma mai scritti. Verifica invece di fidarti: nvme smart-log ti dà percentage_used e data_units_written, e su veri ricambi di magazzino dovrebbero essere sorprendentemente bassi. Tutto ciò che mostra un\u0026rsquo;usura reale è un pezzo smontato venduto per qualcos\u0026rsquo;altro, anche se pure in quel caso il margine di endurance fa sì che una Optane usata possa avere più vita davanti di un disco NAND nuovo della stessa capacità.\nSpiega quali capacità troverai. I ricambi OEM venivano tenuti per i server, il che significa componenti da datacenter. Ecco la gamma completa, e nota da dove parte il modello di punta:\nComponente Capacità Formato Optane Memory M10 16, 32, 64 GB M.2 2280, consumer Optane SSD 800P 58, 118 GB M.2 2280, consumer Optane SSD P1600X 58, 118 GB M.2 2280, componente da datacenter per boot e cache Optane SSD DC P4801X 100, 200, 375 GB M.2 110 mm o U.2 Optane SSD DC P4800X 375 GB come minimo, 750 GB, 1,5 TB U.2 o scheda add-in Optane SSD P5800X 400 GB, 800 GB, 1,6 TB U.2 o scheda add-in In teoria i piccoli componenti M.2 sono la risposta elegante: la M10, la 800P, la P1600X e la P4801X da 100 GB fanno tutte il lavoro, e costano poco. In pratica il mercato non li ha, perché nessuno teneva in magazzino moduli acceleratori da desktop come ricambi per server. Quello che si trova in vendita parte da 375 GB in su, hardware di classe P4800X.\nQuindi metti in conto di comprare più capacità di quanta ne richieda il ruolo, perché è quello che c\u0026rsquo;è in vendita. Non è un cattivo risultato. Comprare un dispositivo di cache più grande del necessario ti porta a 30 DWPD e a una latenza sotto i 10 µs quando il tuo carico ne chiedeva una frazione, e per un disco da 20 TB che intendi tenere per anni, è il modo giusto di sbagliare. Significa però che il prezzo d\u0026rsquo;ingresso è più alto di quanto suggerisca il conto, e che il dimensionamento qui sopra diventa un controllo contro il comprare troppo poco più che una lista della spesa.\nTre cose da pianificare, visto che questa è una liquidazione e non una catena di fornitura:\nCompra i ricambi insieme al sistema. Si sta svuotando una riserva finita. Quando un dispositivo si guasterà tra tre anni non ordinerai un sostituto, ne andrai a caccia, quindi metti in conto i ricambi adesso, finché le scorte ci sono.\nAspettati firmware OEM e controlla il namespace. I componenti del programma ricambi di un vendor spesso hanno il firmware di quel vendor e possono arrivare formattati con una dimensione LBA o con impostazioni di metadati adatte a quello per cui erano stati messi in magazzino. Verifica con nvme id-ns prima di costruirci sopra, e preparati a fare nvme format in un formato semplice a 4096 byte.\nNon c\u0026rsquo;è garanzia, né supporto, né altri aggiornamenti del firmware. L\u0026rsquo;avviso di supporto di Intel stessa spiega cosa significa la chiusura per i dispositivi già in servizio, che è la condizione in cui si trova già qualunque cosa tu compri. Verificare che il componente arrivato sia quello dell\u0026rsquo;annuncio tocca a te.\nbcache non sostituisce lo spostamento di DB/WAL Vale la pena dirlo esplicitamente, perché è il posto ovvio dove provare a risparmiare e non funziona: ti serve comunque block.db su NVMe. Entrambi gli strati, non uno o l\u0026rsquo;altro.\nLa Optane è una cache di scrittura. È tutto quello che è. Accorcia il percorso di conferma delle scritture dirette al disco, e non fa nient\u0026rsquo;altro.\nRocksDB non si limita a scrivere. Ceph legge di continuo i suoi metadati, per trovare oggetti, per gestire il peering, per rispondere agli scrub, e una cache di scrittura non offre esattamente nulla a una lettura una volta che i dati ne sono stati svuotati. Né la cache toglie il traffico di metadati; lo rimanda e lo raggruppa, quindi ogni aggiornamento di RocksDB arriva comunque prima o poi al disco rotante, contendendosi gli stessi spostamenti di testina. E la compaction trasforma un ricambio modesto in molto più traffico sul dispositivo delle scritture che l\u0026rsquo;hanno causato.\nQuindi le due modifiche risolvono problemi diversi e nessuna sostituisce l\u0026rsquo;altra:\nCosa risolve Cosa non risolve block.db su NVMe i metadati vivono sul flash, letture e scritture, permanentemente fuori dal disco rotante nulla per una raffica di scritture dei guest Optane tramite bcache latenza di conferma delle raffiche per le scritture di dati nulla per le letture dei metadati; rimanda soltanto le scritture dei metadati Salta lo spostamento del DB e tieni la Optane, e RocksDB torna sul piatto con le sue letture servite a 80 IOPS. Salta la Optane e tieni lo spostamento del DB, e lo stato stazionario è decente ma le raffiche si bloccano comunque alla velocità del disco rotante.\nLa regola udev, riga per riga I parametri di bcache vivono in sysfs, e sysfs li azzera ogni volta che il dispositivo viene registrato, cioè a ogni avvio. Quindi il loro posto è una regola udev e non uno script che qualcuno deve ricordarsi di lanciare:\n# /etc/udev/rules.d/99-bcache.rules ACTION==\u0026#34;add|change\u0026#34;, SUBSYSTEM==\u0026#34;block\u0026#34;, KERNEL==\u0026#34;bcache*\u0026#34;, \\ ATTR{bcache/cache_mode}=\u0026#34;writeback\u0026#34;, \\ ATTR{bcache/sequential_cutoff}=\u0026#34;0\u0026#34;, \\ ATTR{bcache/congested_read_threshold_us}=\u0026#34;0\u0026#34;, \\ ATTR{bcache/writeback_rate}=\u0026#34;81920\u0026#34;, \\ ATTR{bcache/writeback_rate_minimum}=\u0026#34;20480\u0026#34;, \\ ATTR{bcache/writeback_percent}=\u0026#34;40\u0026#34; KERNEL==\u0026quot;bcache*\u0026quot; corrisponde a ogni dispositivo bcache del nodo, quindi una sola regola copre tutte le coppie. ACTION==\u0026quot;add|change\u0026quot; significa che si riapplica ogni volta che un dispositivo compare o viene ricollegato, non solo all\u0026rsquo;avvio.\nCosa fa ogni impostazione, e perché:\ncache_mode=writeback: il senso di tutto. Nel default writethrough, una scrittura non viene confermata finché non raggiunge l\u0026rsquo;HDD, quindi la cache non fa niente per la latenza di scrittura. In writeback, la Optane conferma e il disco rotante si mette in pari dopo.\nsequential_cutoff=0: di default bcache rileva l\u0026rsquo;I/O sequenziale e lo manda dritto oltre la cache una volta superati i 4 MB, partendo dall\u0026rsquo;idea che il disco sottostante gestisca bene il sequenziale. Zero disattiva quel bypass, così tutto passa in cache. Su un nodo iperconvergente è la scelta giusta: ciò che sembra sequenziale a un dispositivo bcache smette di esserlo sul piatto quando diversi OSD si mescolano, e vuoi comunque ogni scrittura confermata alla velocità di Optane. Comporta però un obbligo: senza bypass, la banda di scrittura sequenziale del dispositivo di cache diventa il tetto dell\u0026rsquo;intero OSD, ed è il motivo per cui i moduli da 16 GB sono squalificati.\ncongested_read_threshold_us=0: bcache osserva la latenza del proprio dispositivo di cache e comincia a scavalcare la cache quando la giudica congestionata, con un default di 2000 µs per le letture. Optane non si congestiona come fa la NAND, quindi questo è bcache che mette in dubbio un dispositivo che ha misurato male. Zero spegne il monitoraggio.\nwriteback_rate=81920 e writeback_rate_minimum=20480: la velocità di svuotamento in background, in settori al secondo, quindi circa 40 MB/s di obiettivo con un minimo di 10 MB/s. Un controller PD sposta la velocità effettiva tra i due. L\u0026rsquo;obiettivo è fissato vicino a quanto un disco rotante può assorbire in sequenziale, e il minimo impedisce al controller di strozzare lo svuotamento verso lo zero lasciando accumulare dati dirty all\u0026rsquo;infinito. Sono entrambi punti di partenza, non costanti: come cambiarli è spiegato più sotto.\nwriteback_percent=40: quanta parte della cache bcache lascia restare dirty prima di frenare con decisione, contro un default di 10. Quaranta ti dà un buffer per le raffiche molto più profondo. Significa anche che fino al 40% di quella Optane contiene l\u0026rsquo;unica copia di dati nel sistema, che è il compromesso, ed è il motivo per cui il layout uno per disco conta. È il valore che più vale la pena rivedere dopo aver osservato un carico reale.\nCambiare i valori di riempimento e svuotamento in seguito Il 40% e le due velocità qui sopra sono i valori che girano qui, non costanti universali. Sono la prima cosa che vorrai spostare dopo aver osservato un carico reale, quindi vale la pena sapere che ci sono due posti dove cambiarli, che fanno due cose diverse.\nsysfs lo cambia adesso. La regola udev lo cambia al prossimo avvio. Ti servono entrambi, e in quest\u0026rsquo;ordine.\nCambialo a caldo, su un dispositivo:\necho 30 \u0026gt; /sys/block/bcache0/bcache/writeback_percent Oppure su tutte le coppie del nodo:\nfor d in /sys/block/bcache*/bcache; do echo 30 \u0026gt; \u0026#34;$d/writeback_percent\u0026#34; done La velocità di svuotamento funziona allo stesso modo. Entrambi i valori sono in settori al secondo, quindi questi dimezzano obiettivo e minimo:\nfor d in /sys/block/bcache*/bcache; do echo 40960 \u0026gt; \u0026#34;$d/writeback_rate\u0026#34; echo 10240 \u0026gt; \u0026#34;$d/writeback_rate_minimum\u0026#34; done Ha effetto subito e sopravvive esattamente fino a quando il dispositivo viene registrato di nuovo. La documentazione del kernel è esplicita sul fatto che queste impostazioni «do not persist across reboot», ed è proprio il motivo per cui esiste la regola udev.\nQuando un valore ti soddisfa, modifica la regola e ricaricala senza riavviare:\nudevadm control --reload udevadm trigger --subsystem-match=block --action=change È qui che ACTION==\u0026quot;add|change\u0026quot; si guadagna il pane. Il trigger invia un evento change ai dispositivi già presenti, quindi la regola si riapplica a un nodo in funzione invece di aspettare il prossimo avvio. Se la regola corrispondesse solo ad add, quel comando non farebbe niente.\nPoi rileggi i valori, perché un errore di battitura in una regola udev fallisce in silenzio:\ngrep . /sys/block/bcache*/bcache/writeback_percent Sapere in che direzione spostarli Non regolare tutto questo partendo dai principi primi: bcache espone quello che ti serve nella stessa directory di sysfs.\ndirty_data è quello da tenere d\u0026rsquo;occhio: quanti dati stanno in questo momento nella cache e da nessun\u0026rsquo;altra parte. La documentazione lo descrive come «continuously updated unlike the cache set\u0026rsquo;s version, but may be slightly off», che per questo scopo va bene. Campionalo durante una normale giornata di lavoro e durante una finestra di backup.\ncache_hits, cache_misses e cache_hit_ratio ti dicono se la cache viene usata, con l\u0026rsquo;avvertenza che «a partial hit is counted as a miss». bypassed conta l\u0026rsquo;IO che è passato del tutto oltre la cache: con sequential_cutoff=0 dovrebbe restare quasi piatto, quindi un numero che cresce significa che qualcosa la sta ancora aggirando.\nTutti questi arrivano come totali progressivi più versioni che decadono sull\u0026rsquo;ultimo giorno, sull\u0026rsquo;ultima ora e sugli ultimi cinque minuti, il che rende quelli a finestra breve molto più utili del dato di tutta la vita per individuare un problema.\nDa lì:\nSintomo Parametro Direzione Le raffiche si bloccano, le scritture incontrano la latenza del disco a metà raffica writeback_percent su, per un buffer più profondo Più dati esposti sulla cache di quanti te ne senti di rischiare writeback_percent giù dirty_data fermo al tetto durante il lavoro ordinario writeback_rate su, il problema non è il buffer ma lo svuotamento Lo svuotamento in background compete con le letture dei guest sul disco writeback_rate giù dirty_data che sale lentamente nell\u0026rsquo;arco di giorni più che di ore writeback_rate_minimum su, così il controller non può rallentare fino a strisciare Se dirty_data resta fermo al tetto qualunque cosa tu faccia, nessuno dei due parametri è la risposta: il cluster scrive più in fretta di quanto i dischi rotanti riescano ad assorbire, e le soluzioni oneste sono più dischi o meno scritture.\nUn file da lasciare stare: writeback_running. Spegnerlo ferma del tutto il writeback, e la documentazione dice che è «only meant for benchmarking». Su un OSD in produzione significa che i dati dirty si accumulano finché la cache è piena e non si svuota mai.\nCosa stai cedendo in cambio La maggior parte delle descrizioni di questo progetto si ferma alle buone notizie. Queste sono le parti che ti faranno male davvero, e ognuna vale la pena di conoscerla prima di costruire, non dopo.\nI due dispositivi aggiunti si guastano in modo molto diverso Muore l'NVMe DB/WAL condiviso block.db per osd.0–2 perso osd.0 perso osd.1 perso osd.2 perso Tre OSD, un solo evento. Un guasto correlato in tutto il nodo, cioè proprio ciò da cui la replica non ti protegge. Scegli il rapporto in base alla ricostruzione che sei disposto a sopportare, non al prezzo per OSD. Muore una Optane abbinata Optane per osd.0 persa Optane per osd.1 ok Optane per osd.2 ok osd.0 perso osd.1 in servizio osd.2 in servizio Un OSD, e Ceph lo fa ogni giorno. Il raggio d'impatto sono i dati di un solo disco, cioè il guasto che un pool replicato esiste per assorbire. È l'intero argomento per comprare diversi dispositivi piccoli invece di uno grande. Stessa classe di perdita da entrambi i lati: ogni dispositivo tiene uno stato che non esiste altrove, quindi l'OSD è distrutto, non fermato, e va ricreato e ripopolato. Cambia solo il numero, ed è quello che compra l'abbinamento uno per disco. Entrambi i dispositivi aggiunti tengono uno stato che non esiste da nessun\u0026rsquo;altra parte, quindi perderne uno distrugge gli OSD che ne dipendono. La differenza è solo quanti sono: l\u0026rsquo;NVMe DB/WAL condiviso si porta giù ogni OSD dietro di sé, mentre una Optane abbinata uno a uno se ne porta giù esattamente uno. È questo che comprano i dispositivi in più. Perdere uno qualsiasi dei due dispositivi flash distrugge l\u0026rsquo;OSD. Non lo ferma: lo distrugge. Entrambi i dispositivi tengono uno stato che non esiste da nessun\u0026rsquo;altra parte: block.db tiene il RocksDB che dà senso a block, e una cache in writeback tiene ogni scrittura non ancora svuotata. La documentazione del kernel non tentenna sul secondo: «In writeback mode you\u0026rsquo;ll lose data if something happens to your SSD.» In entrambi i casi l\u0026rsquo;OSD non torna, viene ricreato e ripopolato con il backfill.\nQuindi sono la stessa classe di rischio, e vale la pena dirlo chiaramente invece di trattare la cache come quella che fa paura. La Optane non è un dispositivo più pericoloso dell\u0026rsquo;NVMe. Due cose li separano, e nessuna delle due è la gravità per OSD.\nLa prima è il raggio d\u0026rsquo;impatto, ed è l\u0026rsquo;intera giustificazione dell\u0026rsquo;abbinamento. Una Optane per disco significa che un guasto della cache costa un OSD: la perdita di un solo disco, che è esattamente l\u0026rsquo;evento che un pool replicato esiste per assorbire, e che Ceph gestisce senza che nessuno venga chiamato. Il dispositivo DB/WAL è condiviso, quindi perderlo costa ogni OSD dietro di sé in una volta sola, ed è un guasto correlato da cui la replica non ti protegge. Stesso guasto, un dispositivo contro cinque.\nLa seconda è come si presenta il guasto, e questa è una trappola operativa. Quando una cache muore in writeback il dispositivo sottostante si ferma e restituisce errori di I/O, il che va bene: Ceph segna l\u0026rsquo;OSD come down e va avanti. Il caso brutto è un riavvio in cui il dispositivo sottostante torna su senza la sua cache collegata. A quel punto sembra un filesystem montabile a cui mancano semplicemente tutte le scritture dirty, il che lo rende corrotto e non solo vecchio. Un block.db mancante fallisce rumorosamente e l\u0026rsquo;OSD si rifiuta di partire; una cache mancante può fallire in silenzio e lasciarti montare i rottami. Tratta un dispositivo sottostante bcache come non montabile senza la sua cache, e non lasciare mai che qualcosa lo monti per te per farti un favore.\nbcache da solo non garantisce un writeback sicuro rispetto all\u0026rsquo;alimentazione. È qui che la cache di scrittura dell\u0026rsquo;HDD smette di essere un\u0026rsquo;ottimizzazione e diventa un requisito: spegnila, e usa un kernel abbastanza recente da avere la gestione FUA, così le scritture sincrone vengono rispettate lungo tutto lo stack invece di essere confermate in anticipo da qualche parte nel mezzo. Un dispositivo di cache senza protezione dalla perdita di alimentazione aggrava il problema, perché può perdere dati che ha già dichiarato al sicuro.\nIl che fa del rapporto DB/WAL il numero che conta. Ceph permette 4-5 OSD HDD per SSD SATA e non più di 15 per NVMe, e avverte di «balancing the risk of reducing costs by placing too many responsibilities into too few failure domains.» A differenza del livello di cache, qui non c\u0026rsquo;è abbinamento disponibile per contenere il rischio: la condivisione è lo scopo del dispositivo.\nSu dischi da 20 TB è tutto lì, perché la ricostruzione è enorme. Un OSD guasto sono 20 TB di backfill; ai 150-250 MB/s che un disco rotante sostiene, rallentato perché il recupero non affami i guest, parli di ben più di un giorno di funzionamento degradato per un solo disco. Perdi un dispositivo DB condiviso che ne porta cinque e ci sono 100 TB da spostare.\nQuindi il rapporto non è davvero una decisione di costo. È una decisione su quanto a lungo sei disposto a funzionare in modo degradato, e su quanto traffico di ricostruzione il cluster riesce a portare continuando a servire le VM.\nIl progetto dipende da un dispositivo che nessuno fa più. Questo è quello senza risposta tecnica. Optane è il componente giusto per la posizione di cache e niente di attuale lo sostituisce: la NAND non regge il volume di scrittura, e la memoria basata su CXL verso cui si è spostata Intel non è un sostituto diretto per una cache a blocchi. Quindi la mitigazione è commerciale più che ingegnosa, è trattata sopra, e il riassunto onesto è che questa architettura ha una data di scadenza da qualche parte nel futuro.\nNiente di tutto questo fa di un cluster HDD un cluster all-flash. Un traffico di scrittura casuale prolungato che supera la velocità di svuotamento riempirà la cache, e una volta piena stai scrivendo alla velocità del disco rotante con strati in più nel percorso. Questo progetto assorbe le raffiche e toglie il carico dei metadati. Non fabbrica IOPS.\nA cosa si riduce Tre livelli, ognuno che fa l\u0026rsquo;unica cosa in cui è il migliore, e servono tutti e tre:\nOptane assorbe le raffiche di scritture casuali, un dispositivo per disco. Deve essere Optane, perché ogni scrittura ci passa attraverso e l\u0026rsquo;endurance della NAND è sbagliata per quella posizione Un NVMe enterprise veloce tiene RocksDB e il WAL, condiviso tra una manciata di OSD con un rapporto che hai scelto di proposito invece di subirlo Gli HDD forniscono la capacità grezza, liberati sia dai metadati sia dalle raffiche Il punto non è far finta che i dischi rotanti siano flash. È smettere di mandargli il lavoro in cui sono peggiori, così la capacità che hai davvero pagato diventa usabile.\nTutto il trucco è questo, e non ha niente di furbo. Metti ogni lavoro sul dispositivo che ci è bravo, e smetti di pagare due volte per quelli che non lo sono.\nPer un cluster Proxmox iperconvergente che ha bisogno di capacità nell\u0026rsquo;ordine dei terabyte senza i prezzi dell\u0026rsquo;all-flash, è un progetto difendibile. Costruito come si deve sembra molto più veloce degli HDD nudi, si guasta in modi che Ceph è fatto per gestire, e i soldi vanno dove cambiano il risultato.\nDue cose correlate da leggere insieme a questa: il lavoro sulle dimensioni dei settori in 4Kn, 512e e 512n conta moltissimo per quello che i dischi rotanti fanno delle scritture che li raggiungono, e se costruisci tutto questo su nodi collegati direttamente, la mesh senza switch copre il lato rete di un piccolo cluster Ceph.\nRiferimenti Ceph — Hardware Recommendations — l\u0026rsquo;avvertenza sugli IOPS per TB dei grandi HDD, «HDD OSDs may see a significant write latency improvement by offloading WAL+DB onto an SSD», i rapporti di 4-5 HDD per SSD SATA e ≤15 per NVMe, la protezione dalla perdita di alimentazione sugli SSD enterprise, lo spegnimento della cache di scrittura dell\u0026rsquo;HDD, e il fatto che non serve un HBA RoC Ceph — BlueStore Configuration Reference — block.db all'1-2% di block per RBD e almeno al 4% per RGW, la raccomandazione generale del 2,5%, lo spillover sul dispositivo primario, le dimensioni dei livelli di RocksDB dietro i gradini da 3/30/300 GB, e il WAL implicitamente collocato con il DB Linux kernel — bcache admin guide — le modalità di cache, sequential_cutoff e il suo default di 4 MB, il default di 2000 µs per la congestione in lettura, writeback_rate in settori al secondo, il controller PD di writeback_percent, i contatori dirty_data / cache_hit_ratio / bypassed e le loro versioni che decadono su giorno, ora e cinque minuti, l\u0026rsquo;avvertenza che writeback_running è «only meant for benchmarking», l\u0026rsquo;affermazione che queste impostazioni «do not persist across reboot», e «in writeback mode you\u0026rsquo;ll lose data if something happens to your SSD» Intel — Optane Memory M10 32 GB specifications — 365 TBW, 240.000 IOPS in lettura casuale e 65.000 in scrittura casuale a 4K su un intervallo di 8 GB, 1200/290 MB/s in sequenziale, PCIe 3.0 x2 Intel — Optane Memory M10 16 GB specifications — i 150 MB/s di scrittura sequenziale e i 35.000 IOPS di scrittura casuale che mettono questo componente sotto un disco rotante nel throughput sequenziale PC Perspective — Optane SSD DC P4800X performance — i 550K IOPS in lettura casuale 4K del componente da 375 GB, 2400/2000 MB/s in sequenziale, latenza tipica sotto i 10 µs, e 12,3 PBW a 30 DWPD ServeTheHome — Optane DC P4801X 100GB M.2 review — i componenti M.2 da datacenter di piccola capacità, per la scala delle capacità StorageReview — Intel Optane SSD P5800X — la classificazione da 100 DWPD, i 30 DWPD della P4800X, e il confronto con i dischi NAND enterprise che arrivano al massimo intorno ai 10 DWPD per i modelli write-intensive e a 3 o meno per i mixed-use Bcache — ArchWiki — i modi di guasto pratici, compreso un dispositivo sottostante che torna su senza la sua cache dopo un riavvio, e i requisiti di sicurezza rispetto all\u0026rsquo;alimentazione legati alla cache di scrittura dell\u0026rsquo;HDD e a FUA Intel — Optane business update — la chiusura, e cosa significa per garanzia e supporto sui dispositivi già in servizio, che è la condizione in cui si trova già qualunque cosa tu compri sul mercato del recupero ","permalink":"https://blogs.damiendye.uk/it/proxmox/hdd-backed-ceph-bcache-optane/","summary":"Il prezzo del flash ha reso difficile giustificare il tutto NVMe, e gli HDD enterprise meritano un\u0026rsquo;altra occhiata. Ottenere una latenza accettabile da loro su Ceph iperconvergente in Proxmox significa togliere RocksDB dal disco rotante, abbinare ogni disco alla sua Optane tramite bcache, proprio Optane, perché l\u0026rsquo;endurance della NAND è sbagliata per quel lavoro, ed essere onesti sui modi di guasto che ti compra.","title":"Rendere veloci i cluster Ceph di Proxmox su HDD: metadati su NVMe, una Optane per disco, e quanto ti costa"},{"content":"Perché finora è stato costoso La VDI, Virtual Desktop Infrastructure, fornisce un desktop completo da un data centre o dal cloud invece che dal dispositivo che hai davanti. Un utente si collega da un portatile, da un thin client o dalla sua macchina, e trova un desktop Windows o Linux familiare le cui applicazioni, file ed elaborazione stanno tutti in un posto centrale.\nPer un team IT il vantaggio è che patch, controllo degli accessi e protezione dei dati avvengono in un solo posto, e le persone possono raggiungere lo stesso desktop da ovunque.\nL\u0026rsquo;ostacolo non è mai stato l\u0026rsquo;hypervisor. È stata la GPU.\nDividere una GPU fisica tra più desktop è stato territorio di NVIDIA, e NVIDIA fa pagare il software vGPU che fa la divisione. Quella licenza è il motivo per cui la VDI con grafica accelerata in hardware è rimasta per lo più roba da aziende con budget da grande azienda. Pagare un canone annuale per accendere qualcosa che il silicio sa già fare è difficile da accogliere con entusiasmo.\nIntel ha cambiato i conti con la linea Arc Pro. Queste schede supportano la divisione in hardware tramite SR-IOV standard, che è una funzione PCIe e non un prodotto. Per questo non c\u0026rsquo;è un server di licenze, non c\u0026rsquo;è un abbonamento e non c\u0026rsquo;è un software vGPU separato da comprare.\nCosì mi sono procurato una Intel Arc Pro B50 per vedere quanto si integra bene con Proxmox. La risposta breve: il meccanismo funziona esattamente come promesso, e poi ci si è messo di mezzo il firmware. Le due metà sono qui sotto.\nCome una scheda diventa più schede: physical function sull'host, virtual function ai guest Intel Arc Pro Bxx 03:00.0: physical function driver host: xe 03:00.1 vfio-pci 03:00.2 vfio-pci 03:00.3 create dove supportate 03:00.4 create dove supportate Desktop Windows 1 accelerato in hardware Desktop Windows 2 accelerato in hardware Desktop Windows 3 accelerato in hardware Desktop Windows 4 accelerato in hardware Non entra in gioco nessuna licenza vGPU. SR-IOV è una capability PCIe che la scheda dichiara oppure no, e questa la dichiara a\u0026#160;[320]. Quante funzioni crea è deciso nel firmware, perché ognuna riceve una fetta fissa della memoria della scheda: una fetta più grande vuol dire meno funzioni. Una B50 da 16 GB ne dà due da 8 GB; le schede da 24 e 32 GB ne riportano sette. La physical function resta al driver xe dell\u0026rsquo;host. Ogni virtual function è un dispositivo PCIe a tutti gli effetti, legato a vfio-pci e passato a un guest: lo stesso meccanismo di passthrough di una scheda intera, solo ripetuto più volte. La coppia tratteggiata dipende dalla scheda: quante funzioni crea ognuna è spiegato più sotto. L\u0026rsquo;elefante nella stanza: prima ti serve Windows Prima che tutto questo funzioni, la scheda vuole il firmware aggiornato. Intel distribuisce quell\u0026rsquo;aggiornamento dentro l\u0026rsquo;installer del driver Windows.\nIl che è scomodo, perché il motivo per cui hai comprato la scheda è farla girare sotto Proxmox.\nC\u0026rsquo;è un modo per aggirarlo che richiede solo Proxmox: crei una VM Windows, le passi la scheda intera, lasci che Windows aggiorni il firmware, poi restituisci la scheda all\u0026rsquo;host. È un ciclo di bootstrap, e conviene saperlo prima di pianificare la build, non dopo.\nRompere con una VM temporanea il ciclo che parte da Windows Il problema: SR-IOV richiede un firmware aggiornato, e il firmware arriva dentro un installer di driver Windows. 1 Scheda nell'host lspci → 03:00.0 2 Scheda intera → VM Windows hostpci0, Q35 + OVMF 3 Installa driver Intel aggiorna il firmware 4 Riavvia l'host la scheda si reinizializza scheda restituita a Proxmox 5 SR-IOV presente lspci -v → [320] 6 tmpfiles.d all'avvio numvfs, unbind, bind 7 VF ai guest quante ne consente il firmware I passi 2 e 3 servono solo ad aggiornare il firmware. La VM Windows è temporanea: una volta che la scheda torna all'host non ha più alcun ruolo, e niente della configurazione finale dipende da Windows in esecuzione sull'hypervisor. La scheda non può fare SR-IOV finché il firmware non è aggiornato, e l\u0026rsquo;aggiornamento del firmware arriva come driver Windows. Una VM Windows temporanea con la scheda intera collegata rompe il ciclo. Trovare la scheda Sull\u0026rsquo;host Proxmox, lspci per individuarla:\nlspci Eccola a 03:00.0, riportata come Battlemage G21, il silicio dietro la Arc Pro B50. Annota l\u0026rsquo;indirizzo. Ti servirà più volte, e insieme alla scheda arriva una funzione audio separata a 04:00.0.\nPassare la scheda intera a una VM Windows Aggiungi la scheda a una VM Windows come dispositivo PCI grezzo. Nell\u0026rsquo;hardware della VM è una voce PCI Device: 0000:03:00 con pcie=1:\nVale la pena notare cos\u0026rsquo;altro è quella VM, perché niente è casuale: tipo di macchina Q35, firmware OVMF, VirtIO SCSI single e un TPM per Windows 11. Q35 in particolare qui non è opzionale. Una GPU passata su i440fx appare come dispositivo PCI legacy, che è la forma sbagliata per un driver grafico moderno. Se ne parla in Usa sempre Q35, non i440fx.\nAvvia la VM e controlla che Windows veda la scheda:\nAppare come Microsoft Basic Display Adapter perché non c\u0026rsquo;è ancora nessun driver installato. È lo stato previsto, e basta. Windows ha trovato l\u0026rsquo;hardware.\nAggiornare il firmware Scarica il driver attuale dalla pagina di download della Arc Pro B50 di Intel. Mentre scrivo era la versione 32.0.101.8306 (Q4.25), per Windows 11 e Windows 10 22H2:\nInstallalo, e lascia che l\u0026rsquo;aggiornamento del firmware venga eseguito come parte del processo invece di interromperlo prima. Quel passo del firmware è l\u0026rsquo;unico motivo di tutta questa deviazione.\nQuando finisce, restituisci la scheda all\u0026rsquo;host e riavvia, così si reinizializza completamente sotto Proxmox.\nVerificare che SR-IOV ci sia Ora chiedi alla scheda cosa sa fare:\nlspci -v La riga che conta:\nCapabilities: [320] Single Root I/O Virtualization (SR-IOV) È tutta la proposta in una riga di output di lspci, senza nessuna licenza attaccata.\nAltre tre cose in quell\u0026rsquo;output vale la pena leggerle già che ci sei:\nKernel driver in use: xe: la scheda usa il driver xe, il più recente di Intel, invece di i915, ed è lui che creerà le virtual function. [420] Physical Resizable BAR e [220] Virtual Resizable BAR: la scheda supporta i BAR ridimensionabili, e lo stesso vale per le sue virtual function. Conviene sapere quanto ti costa in spazio di indirizzi se ne passi diverse: vedi PCIe Resizable BAR e le GPU moderne. IOMMU group 13: la scheda è in un gruppo tutto suo, che è quello che vuoi per un passthrough pulito. Perché conta è spiegato nell\u0026rsquo;articolo sulla tassa IOMMU. Creare le virtual function all\u0026rsquo;avvio Le virtual function non sono persistenti. Richiederle è una scrittura in sysfs, quindi deve avvenire a ogni avvio.\ntmpfiles.d è un modo pulito per farlo in forma dichiarativa, invece di attaccare uno script a un file di unit:\nIl file fa tre lavori, in ordine.\nCrea le virtual function, scrivendo il numero nel sriov_numvfs della physical function:\nw /sys/devices/pci0000:00/0000:00:01.1/0000:01:00.0/0000:02:01.0/0000:03:00.0/sriov_numvfs - - - - 4 Scollega ogni nuova funzione da xe, perché il driver dell\u0026rsquo;host le prende man mano che compaiono e un guest non può avere un dispositivo che l\u0026rsquo;host sta tenendo:\nw /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.1 w /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.2 w /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.3 w /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.4 Collegale a vfio-pci, che è ciò che le rende disponibili per il passthrough:\nw /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.1 w /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.2 w /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.3 w /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.4 Nota gli indirizzi: la physical function è 03:00.0 e le virtual function compaiono come da .1 a .4.\nUn dettaglio su w spiega l\u0026rsquo;ordine, e ti morderà se lo sbagli. systemd lo documenta così: «Write the argument parameter to a file, if the file exists.» sriov_numvfs esiste solo dopo che un driver si è legato alla physical function, e i percorsi delle virtual function esistono solo dopo che quella scrittura è avvenuta. Quindi l\u0026rsquo;ordine nel file non è una questione di stile. Ogni riga dipende dal fatto che quella prima abbia avuto effetto.\nPerché due e non quattro Il driver 32.0.101.8306, quello installato sopra, contiene il firmware grafico BMG__21,1162, ed è la release in cui Intel ha attivato ufficialmente per la prima volta SR-IOV su Arc Pro. Il default dichiarato da Intel per la B50 in quella release è di due virtual function, ciascuna con un VF Local Memory BAR da 8 GB.\nIl che rende il numero una questione di aritmetica e non di politica. La B50 ha 16 GB. A 8 GB per virtual function, ce ne stanno solo due.\nC\u0026rsquo;è un dettaglio da sapere se vai a cercare un modo per aggirarlo. Prima che esistesse il supporto ufficiale, alcuni usavano un firmware più vecchio che esponeva 12 virtual function su una B50, e tornare al driver 32.0.101.6979 ripristina quel numero. Quelle 12 si dividevano gli stessi 16 GB, quindi ognuna aveva una frazione della memoria che hanno le mie. La posizione di Intel è che due è una scelta deliberata, per dare a ogni funzione abbastanza calcolo, capacità e banda da comportarsi in modo prevedibile.\nQuindi il limite si può spostare, ma non da te. Il numero massimo di VF e la dimensione del VF Local Memory BAR stanno nell\u0026rsquo;IFWI, non c\u0026rsquo;è nessuno strumento pubblico per cambiare l\u0026rsquo;uno o l\u0026rsquo;altra, e la risposta supportata su uno stack attuale è due.\nQuanti desktop ti dà ogni scheda La B50 è la scheda piccola della famiglia, e le sue due funzioni sono il minimo della famiglia. Se ti interessa il numero di postazioni, compra più in alto nella gamma.\nTutta la linea Arc Pro Battlemage fa SR-IOV. Cambia quante funzioni il firmware è disposto a ritagliare, e questo segue la memoria:\nScheda Memoria VF sullo stack supportato attuale Visto altrove Arc Pro B50 16 GB 2, con VF BAR da 8 GB ciascuna: il default documentato da Intel 12 sul firmware pre-ufficiale, con il driver 32.0.101.6979 Arc Pro B60 24 GB 7 riportate 24 su un primo firmware ASRock, ridotte a 7 da uno successivo Arc Pro B60 Dual 2 × 24 GB 7 per GPU: due GPU, quindi 14 da uno slot come sopra; le due metà sono indipendenti Arc Pro B65 32 GB nessun numero pubblicato trovato n.d. Arc Pro B70 32 GB 7 riportate, con il firmware 8517 4 su firmware precedenti Solo la riga della B50 è documentata da Intel. I numeri della B60 e della B70 sono quelli che la gente riporta da lspci, e sono cambiati più di una volta. La B60 in particolare è passata da 24 a 7 con un aggiornamento del firmware, lo stesso tipo di restringimento che ha visto la B50. Sembra che nessuno abbia pubblicato un numero di VF per la B65, quindi tratta quella riga come sconosciuta e non come zero.\nDa quella tabella seguono due cose, ed entrambe contano più di qualsiasi singolo numero.\nIl numero di VF è una divisione della memoria, non una caratteristica del die. La regola di Intel è che un VF Local Memory BAR più grande significa meno funzioni. È per questo che la scheda da 16 GB ne dà due e quelle da 32 GB ne danno sette: non lo decide niente negli shader della GPU.\nControlla la scheda che stai per comprare, non la famiglia. La presenza di SR-IOV è variata tra i produttori di schede sullo stesso chip: la B60 Blower di Sparkle all\u0026rsquo;inizio è uscita senza che la capability fosse visibile, e l\u0026rsquo;ha ottenuta solo dopo un aggiornamento del firmware con igsc. Chiedi l\u0026rsquo;output di lspci -v del modello esatto, oppure metti in conto un aggiornamento del firmware prima di contare su tutto questo.\nLa B60 Dual è due schede con una sola staffa La Arc Pro B60 Dual 48G Turbo di Maxsun è quella interessante per il numero di postazioni, e la cosa da capire è che i 48 GB non sono un pool.\nSono due GPU B60, due die BMG-G21, su una sola scheda, con 24 GB di GDDR6 collegati a ciascuno, e nessun chip bridge PCIe tra loro. Entrambi i die si attaccano direttamente ai contatti dorati x16, a PCIe 5.0 x8 ciascuno.\nIl che significa che è l\u0026rsquo;host a dover dividere lo slot per te. La scheda ha bisogno che lo slot x16 principale sia biforcato in x8/x8, e la maggior parte delle schede madri consumer non lo attiva di default. È un\u0026rsquo;impostazione del firmware che devi andare a cercare, nella stessa categoria delle impostazioni IOMMU e ACS di cui ha bisogno tutto questo.\nSe la imposti bene, il sistema operativo vede due GPU separate, ognuna con la sua physical function e la sua capability SR-IOV. Quindi ottieni due serie di virtual function da un solo slot, 14 postazioni se ogni die si comporta come una B60 singola, e il file tmpfiles.d qui sopra raddoppia, con una scrittura su sriov_numvfs per die.\nSe la sbagli, vedi una sola GPU e metà della scheda è invisibile.\nVale la pena essere chiari su cosa non sono i 48 GB: un guest collegato a una virtual function sul primo die non può raggiungere la memoria del secondo. Sono due schede da 24 GB in un solo spazio fisico, che è esattamente quello che vuoi per le postazioni VDI ed esattamente quello che non vuoi per un singolo modello grande.\nQuindi: se ti bastano due postazioni, la B50 è una scheda da 70 W che lo fa. Se ne vuoi sette, pianifica intorno a una B70. Se ne vuoi quattordici e hai una scheda madre che biforca, la B60 dual ti ci porta con un solo slot.\nSi può far girare l\u0026rsquo;AI su una virtual function? Risposta breve: consideralo non supportato. Risposta lunga, perché il motivo conta e non è quello che immagineresti.\nQueste schede sono vendute come schede per l\u0026rsquo;AI e non fanno finta. I 128 motori XMX della B50 sono dichiarati a 170 TOPS di picco, la B70 a 367, e la storia software di Intel è reale: vLLM serve modelli da 8B fino a 120B sulle Arc Pro serie B, e IPEX-LLM e il backend SYCL di llama.cpp girano entrambi su queste schede.\nMa guarda come viene prodotto ognuno di quei risultati. I numeri di vLLM sulle Arc Pro vengono da un container Docker su bare metal, su sistemi con quattro e otto B60 intere che fanno tensor parallelism. L\u0026rsquo;articolo di Intel non nomina SR-IOV o le virtual function nemmeno una volta.\nLo stesso schema vale ovunque abbia guardato. Intel limita i casi d\u0026rsquo;uso di SR-IOV al desktop remoto virtualizzato, all\u0026rsquo;accelerazione grafica del sistema operativo guest e alla codifica e decodifica video. Il calcolo non è in quella lista, e non sono riuscito a trovare un solo caso pubblicato di qualcuno che facesse inferenza LLM dentro una VM collegata a una virtual function.\nQuello che la gente fa davvero è eloquente: fa girare il modello in Docker sull\u0026rsquo;host, e passa le virtual function alle VM per i desktop. Una persona che fa entrambe le cose insieme riporta semplicemente che «VRAM gets pretty tight.»\nChe è il vero problema, ed è aritmetica, non supporto dei driver.\nUna virtual function riceve una fetta fissa di memoria locale: 8 GB sulla B50, fissata nel firmware. Quella fetta è il tetto massimo per pesi più KV cache in quel guest, e non cresce perché la scheda ne ha di più. Un modello da 8B in FP16 è circa 16 GB di pesi prima ancora di aggiungere un qualsiasi contesto, quindi non entra in una virtual function della B50 con nessun driver. Quantizzalo a Q4 e un 8B sta in circa 4 GB, lasciando qualche GB per il contesto: funziona, ma è molto lontano da quello che la scheda sa fare quando non è divisa.\nQuindi i due carichi competono per la stessa memoria, e la divisione è decisa nel firmware prima che parta l\u0026rsquo;uno o l\u0026rsquo;altro.\nSe il lavoro è l\u0026rsquo;AI, non dividere la scheda. Passala intera a una VM, lo stesso passthrough hostpci0 usato prima in questo articolo per l\u0026rsquo;aggiornamento del firmware, oppure fai girare il container sull\u0026rsquo;host e salta la virtualizzazione per quel carico. In entrambi i casi il modello ha tutti i 16 GB e l\u0026rsquo;intera matrice XMX.\nSe il lavoro è la VDI, le virtual function sono la scelta giusta, e dietro ognuna aspettati grafica da desktop, non un server di inferenza. Desktop accelerati in hardware, riproduzione video e codifica funzionano. È per questo che il meccanismo è documentato.\nVa detto chiaramente: l\u0026rsquo;assenza di prove pubblicate non dimostra che non funzioni. Il driver xe espone il calcolo tramite Level Zero e OpenCL, ed è del tutto possibile che un guest su una VF li attivi senza problemi. Ma niente da parte di Intel dice che sia validato, nessuno sembra averlo mostrato funzionante, e il tetto di memoria limita il guadagno anche se funziona. Non è qualcosa su cui costruire un piano.\nQuanto vale comunque Due virtual function sono due desktop Windows accelerati in hardware da una sola scheda, senza licenza vGPU, senza abbonamento e senza server di licenze. Su un hypervisor che non costa niente far girare. Basta per dimostrare che l\u0026rsquo;approccio funziona, che è il lavoro onesto per una B50. È il fondo della gamma.\nPer un vero deployment VDI specificherei la B60 dual.\nQuattordici funzioni da un solo slot, se ogni die si comporta come una B60 singola, la mettono nello stesso territorio di postazioni delle schede NVIDIA vendute per questo carico, a un prezzo molto più basso e senza niente da licenziare per utente. Quest\u0026rsquo;ultima parte è quella che si accumula. vApps, vPC e RTX vWS di NVIDIA sono tutti licenziati per utente concorrente, o come abbonamento annuale o come licenza perpetua da comprare insieme a un abbonamento di supporto e manutenzione di cinque anni. Ogni postazione è una voce di spesa, e torna ogni volta. Dal lato Intel non c\u0026rsquo;è una voce equivalente. Compri la scheda.\nE il meccanismo è la parte che conta nel lungo periodo. SR-IOV sulla GPU è una capability PCIe, non un livello di prodotto, quindi il file tmpfiles.d cresce semplicemente fino a quello che la scheda consente.\nLa forma è una scrittura su sriov_numvfs, poi un unbind e un bind per ogni funzione: quindi due funzioni sono cinque righe, e le nove qui sopra sono quattro funzioni chieste a una scheda che ne dà due. Sette funzioni sono quindici righe. Una B60 dual sono trenta, perché ogni die è una physical function a sé e ha la sua scrittura su sriov_numvfs.\nNient\u0026rsquo;altro cambia mentre scali. In quel file non compare mai un server di licenze.\nRiferimenti Intel support — why the latest Arc Pro B50 firmware shows 2 SR-IOV VFs — la dichiarazione autorevole: SR-IOV attivato ufficialmente dal firmware grafico BMG__21,1162 nel driver 32.0.101.8306, due VF con un VF Local Memory BAR da 8 GB ciascuna sulla B50, e il numero massimo di VF e la dimensione del BAR fissati a livello di IFWI senza nessuno strumento pubblico per cambiarli Intel Community — \u0026ldquo;Why did the latest Intel Arc Pro B50 firmware nerf SR-IOV VFs from 12 to 2?\u0026rdquo; — il firmware pre-ufficiale con 12 VF, il ritorno a 32.0.101.6979 che le ripristina, e il ragionamento di Intel sul default più basso Level1Techs — B60 SR-IOV support in the Arc Pro drivers — report lspci sul campo per la B60, l\u0026rsquo;aggiornamento del firmware con igsc che ha esposto la capability, e da dove vengono le cifre 24 e poi 7 Level1Techs — B50, B60 or B70 for SR-IOV — i numeri di VF riportati per scheda e per firmware, fonte delle righe della B70 ASRock — Intel Arc Pro B65 Creator 32GB — le specifiche della B65: 32 GB GDDR6, 20 compute unit, 160 motori XMX, 256 bit, PCIe 5.0 MAXSUN — Arc Pro B60 Dual 48G Turbo — la dichiarazione del produttore stesso che la scheda «uses PCIe 5.0 x8 + x8 interfaces and runs efficiently on consumer platforms that support PCIe x16 lane bifurcation» vLLM — Fast and affordable LLM serving on Intel Arc Pro B-Series — la storia AI su queste schede, e il fatto che è una storia di Docker su bare metal con quattro e otto B60 intere, senza nessuna menzione di SR-IOV o delle virtual function Linux kernel — Intel Xe driver — il driver in uso sulla scheda, secondo lspci -v tmpfiles.d(5) — il tipo di riga w, e la sua condizione «if the file exists» che detta l\u0026rsquo;ordine visto sopra NVIDIA Virtual GPU Software Packaging, Pricing and Licensing Guide — l\u0026rsquo;alternativa con licenza che questo design evita: vApps, vPC e RTX vWS venduti tutti per utente concorrente, come abbonamento annuale o come licenza perpetua abbinata a cinque anni di supporto e manutenzione Proxmox VE — PCI(e) Passthrough — i requisiti del passthrough lato host ","permalink":"https://blogs.damiendye.uk/it/proxmox/licence-free-vdi-intel-arc-pro-sriov/","summary":"Le schede Intel Arc Pro fanno SR-IOV in modo nativo, senza licenze vGPU da comprare, e questo rende davvero possibile una VDI Windows senza licenze su Proxmox. Tutta la build su una B50, il problema di dover partire da Windows, perché il firmware la limita a due virtual function, e quante ne dà ogni scheda della serie B.","title":"VDI Windows senza licenze su Proxmox con una Intel Arc Pro B50, e il limite del firmware che l'ha fermata"},{"content":"Lo switch che non compri Un cluster Proxmox a tre nodi con Ceph vuole una rete veloce tra i nodi. La risposta abituale è uno switch da 100 Gbit, e l\u0026rsquo;obiezione abituale è quanto costa.\nPer tre nodi c\u0026rsquo;è un\u0026rsquo;altra risposta: collegali direttamente tra loro a triangolo e instrada attraverso. Nessuno switch nel percorso dello storage.\nIl componente più economico di qualsiasi design è quello che non compri, ed è l\u0026rsquo;unico che non si guasta mai.\nQuesto ti dà quattro cose.\nIl costo dello switch sparisce. Ti servono schede di rete e tre cavi, non uno switch da 100 o 200 Gbit con il numero di porte che ne consegue.\nIl percorso dei dati non ha un singolo punto di guasto. Uno switch che si guasta o si riavvia si porta via tutto il traffico est-ovest del cluster. Nodi collegati direttamente tra loro se ne infischiano di cosa succede a uno switch da qualche altra parte nell\u0026rsquo;edificio.\nIl traffico pesante ha i suoi cavi. La migrazione live e la replica di Ceph restano sulla mesh invece di fare a gara con il traffico d\u0026rsquo;ufficio e di gestione.\nIngrandirla è un lavoro di cablaggio, non di budget di porte. Non c\u0026rsquo;è una scatola centrale che faccia da tetto alla banda o al numero di porte, quindi il fabric cresce finché ogni server ha uno slot PCIe libero. OpenFabric instrada da solo sui nuovi link.\nE un limite onesto, perché conta più dei quattro vantaggi. Una full mesh vuole un cavo tra ogni coppia di nodi. Tre nodi sono tre cavi. Quattro sono sei. Cinque sono dieci. Il cablaggio cresce più in fretta del numero di nodi, e questo design non sopravvive oltre un piccolo cluster senza passare a qualcosa con gli switch, come una leaf-spine.\nTre nodi è esattamente il punto in cui una full mesh ha senso. Oltre, con due porte di mesh per nodo, quello che puoi ancora costruire è un anello, e questo richiede una cosa che altrimenti questa build evita, spiegata più sotto.\nCosa si costruisce Tre host Proxmox VE, ciascuno con due interfacce dedicate da 100 Gbit, cablati a triangolo così che ogni nodo abbia due vicini diretti.\nL\u0026rsquo;SDN di Proxmox gestisce l\u0026rsquo;instradamento. Il protocollo è OpenFabric: calcola il percorso migliore attraverso la mesh, e quando un cavo viene staccato o un link cade reinstrada sul percorso rimasto. Nessuno deve fare login.\nIl fabric vive in 10.10.10.0/24, riservato alla mesh e a nient\u0026rsquo;altro: non la gestione, non i guest, non l\u0026rsquo;indirizzamento dello storage, niente di esterno.\nNodo Indirizzo di mesh Interfacce di mesh mesh1 10.10.10.1/32 nic1, nic2 mesh2 10.10.10.2/32 nic1, nic2 mesh3 10.10.10.3/32 nic1, nic2 Ogni nodo riceve un /32, non una fetta della subnet. È questo il senso di una mesh instradata invece che in bridge. L\u0026rsquo;indirizzo identifica il nodo, OpenFabric lo annuncia, e i due link fisici sono solo percorsi per raggiungerlo. Proxmox crea un\u0026rsquo;interfaccia loopback dummy per ospitarlo.\nIl triangolo a tre nodi, e su quale NIC arriva ogni cavo switch da 2,5 Gbit gestione + client mesh1 10.10.10.1/32 mesh2 10.10.10.2/32 mesh3 10.10.10.3/32 DAC-01 nic1 ↔ nic1 DAC-03 nic2 ↔ nic2 DAC-02 mesh2 nic2 ↔ mesh3 nic1 nic0 nic0 nic0 Ogni nodo raggiunge gli altri due direttamente, quindi ogni hop di mesh è un hop solo. I link nic0 tratteggiati sono il percorso di gestione separato da 2,5 Gbit: mai parte del fabric, e il motivo per cui puoi ancora entrare se la mesh è rotta. Tre cavi, sei porte e due percorsi verso ogni nodo. Stacca un cavo qualsiasi e ogni nodo resta raggiungibile: i due link rimasti formano una catena su cui OpenFabric instrada. Il cablaggio Cavi DAC in fibra attiva, a triangolo, con i jumbo frame attivati su entrambe le interfacce di mesh di ogni nodo.\nCavo Da A DAC-01 mesh1 nic1 mesh2 nic1 DAC-02 mesh2 nic2 mesh3 nic1 DAC-03 mesh3 nic2 mesh1 nic2 Fibra attiva invece di DAC in rame, per due motivi che riguardano il rack più che la rete:\nGestione dei cavi. I DAC in fibra attiva sono più sottili e molto più flessibili del rame, quindi si instradano in modo pulito e non si ammucchiano dietro i server. Flusso d\u0026rsquo;aria. Meno volume di cavi dietro lo chassis significa meno disturbo al flusso d\u0026rsquo;aria da davanti a dietro, e conta quando diversi link ad alta velocità arrivano nelle stesse poche unità di rack. Due reti, non una La mesh non è l\u0026rsquo;unica rete, e non deve diventarlo.\nOgni nodo ha nic0 su uno switch da 2,5 Gbit, presentata a Proxmox come il bridge vmbr0. Quella porta l\u0026rsquo;interfaccia web, l\u0026rsquo;accesso di amministrazione e il traffico dei client. È anche il percorso che usi mentre costruisci il fabric, ed è per questo che deve esserne indipendente.\nnic0 è lasciata fuori dal fabric di proposito. Solo nic1 e nic2 vengono selezionate quando si creano i nodi del fabric.\nLa mesh porta tre cose:\nCeph. Replica tra nodi, recovery e backfill per lo storage iperconvergente. Reti virtuali dei client. VNet basate su VXLAN estendono le reti dei guest su tutti e tre i nodi, usando la mesh instradata come underlay. Corosync, come secondo percorso. Il traffico di appartenenza al cluster passa sulla rete di gestione e sulla mesh, così il quorum non dipende dalla sopravvivenza di una sola delle due. Cosa viaggia sulla rete di gestione, cosa sulla mesh, e l'unica cosa su entrambe Rete di gestione da 2,5 Gbit nic0 → vmbr0 → switch Interfaccia web di Proxmox Accesso di amministrazione Traffico verso i client Mesh instradata da 100 Gbit nic1 + nic2 → DAC diretti, niente switch Replica Ceph, recovery, backfill Reti virtuali client VXLAN Migrazione live Corosync: entrambi i percorsi L'appartenenza al cluster non dipende dalla sopravvivenza di una sola delle due reti. La separazione è il design. La gestione resta raggiungibile qualunque sia lo stato delle interfacce da 100 Gbit, ed è questo che rende sicuro costruire, e annullare, il fabric dall'interfaccia web. Corosync è l\u0026rsquo;unica cosa che sta su entrambe. Tutto il resto ha esattamente una casa, e l\u0026rsquo;accesso di gestione è quello che deve continuare a funzionare mentre cambi l\u0026rsquo;altra. La regola da scrivere sul ticket di modifica: l\u0026rsquo;accesso di gestione e dei client resta disponibile attraverso lo switch da 2,5 Gbit in ogni momento, qualunque sia lo stato delle interfacce da 100 Gbit.\nTutto dall\u0026rsquo;interfaccia web Questa build si fa interamente nell\u0026rsquo;interfaccia web di Proxmox. È una scelta voluta, non un limite degli strumenti.\nNon usati, di proposito:\nModificare /etc/network/interfaces a mano. Modificare i file di configurazione di FRR a mano. vtysh come metodo di costruzione. Proxmox genera la configurazione di rete e di instradamento sottostante a partire dagli oggetti SDN che definisci. Se qualcosa davvero non si può impostare nell\u0026rsquo;interfaccia, vale la pena dichiararlo come prerequisito invece di sistemarlo in silenzio dalla riga di comando. La prossima persona che apre l\u0026rsquo;interfaccia web non saprà che l\u0026rsquo;hai fatto.\nL\u0026rsquo;output della riga di comando compare qui sotto solo come prova, mai come passo della costruzione.\nLa costruzione 1. Apri l\u0026rsquo;interfaccia web di Proxmox e vai su Datacentre → SDN → Fabrics.\n2. Aggiungi il fabric. Dagli un nome, il prefisso della mesh, e imposta i timer.\nIntervalli Hello e CSNP a 1 aggiornano lo stato il più in fretta possibile quando qualcosa cambia, ed è quello che vuoi su un fabric così piccolo. Il prezzo è più chiacchiericcio nel control plane. Irrilevante su tre nodi con due link ciascuno, da ripensare se il fabric dovesse mai crescere.\n3. Aggiungi ogni nodo con Add node. Dagli un indirizzo dal range della mesh e spunta le interfacce che ne fanno parte.\nNota cosa non è spuntato: nic0 resta fuori, e vmbr0 mantiene l\u0026rsquo;indirizzo di gestione. Usa Create another per i primi due nodi e Create sull\u0026rsquo;ultimo.\n4. Controlla il risultato prima di applicarlo.\nTre nodi, tre indirizzi, nic1, nic2 su ciascuno, tutti segnati new: non è stato ancora scritto niente.\n5. Applica la configurazione SDN.\nAccanto ad Apply c\u0026rsquo;è un Dry-Run, se preferisci vedere prima cosa intende fare.\nSapere che ha funzionato La vista di stato dovrebbe mostrare sia le voci della zona sia quelle del fabric ok su tutti e tre i nodi, e nessuna modifica in sospeso da applicare.\nPoi controlla il fabric dal punto di vista di un nodo. Prima le rotte: ogni nodo dovrebbe avere un /32 verso ciascuno degli altri, e la colonna Via ti dice quale vicino sta usando.\nPoi i vicini. Due, entrambi Up, su un triangolo di tre nodi.\nPoi le interfacce, ed è qui che si vede la forma della cosa: dummy_Mesh come loopback che ospita l\u0026rsquo;indirizzo del router, e nic1 e nic2 come Point-To-Point invece che segmenti broadcast.\nInfine, dimostralo da un capo all\u0026rsquo;altro.\nNessuna perdita, e medie di 0,134 ms e 0,141 ms. Entrambi i vicini sono a un hop diretto, ed è quello che ti dà un triangolo.\nIl controllo da fare che nessuno screenshot può mostrare: stacca un cavo e conferma che tutto sia ancora raggiungibile. È tutto il motivo per scegliere una mesh instradata invece di una coppia di link punto-punto. Per questo è l\u0026rsquo;unico test che conta.\nOltre tre nodi: l\u0026rsquo;anello Un triangolo è una full mesh. Ogni nodo ha un cavo diretto verso ogni altro nodo, ogni hop è un hop solo, e nessun nodo porta mai traffico che non sia suo.\nQuesta proprietà è ciò che due porte di mesh per nodo ti comprano a tre nodi, ed è esattamente ciò che perdi a quattro. Non in parte. Tutta. Una full mesh di quattro nodi vuole tre porte ciascuno. Con due, il massimo che puoi cablare è un anello.\nUn anello cambia il modello di traffico. I nodi adiacenti hanno ancora un cavo diretto, ma i nodi ai lati opposti dell\u0026rsquo;anello no: il loro traffico deve attraversare un nodo intermedio. E quel nodo deve essere disposto a inoltrare pacchetti tra le sue due interfacce di mesh, cosa che Linux di default non fa. Il kernel documenta ip_forward come «Forward Packets between interfaces» con un «Default: 0 (disabled)».\nUn anello di quattro nodi: i nodi opposti non hanno cavo, quindi un nodo inoltra per loro mesh1 10.10.10.1 mesh2 inoltra mesh3 10.10.10.3 mesh4 10.10.10.4 mesh1 → mesh3 nessun cavo tra loro quindi attraversa mesh2 nodo di transito inoltra tra nic1 e nic2 Full mesh a 4 nodi 6 cavi, 3 porte per nodo niente transito, niente inoltro Anello: 4 cavi, 2 porte, ed è per questo che sei qui Due delle sei coppie di nodi non hanno un cavo diretto. Il loro traffico lo porta un vicino, quindi i link di quel vicino portano la replica Ceph di altri nodi oltre alla propria: il costo che il triangolo non ha. Tra mesh1 e mesh3 non c\u0026rsquo;è cavo. Il loro traffico attraversa mesh2 o mesh4, e quel nodo lo inoltra solo perché l\u0026rsquo;inoltro è attivo sulle due interfacce da cui arriva. Attivalo per le interfacce di mesh, e solo per quelle:\n# /etc/sysctl.d/99-mesh-forwarding.conf net.ipv4.conf.nic1.forwarding = 1 net.ipv4.conf.nic2.forwarding = 1 sysctl --system Rileggili invece di dare per scontato:\nsysctl net.ipv4.conf.nic1.forwarding net.ipv4.conf.nic2.forwarding L\u0026rsquo;impostazione per interfaccia è l\u0026rsquo;ambito giusto qui, e funziona da sola. Il net.ipv4.ip_forward globale non è un prerequisito. La decisione di inoltro del kernel legge il valore dell\u0026rsquo;interfaccia che riceve:\n#define IN_DEV_FORWARD(in_dev) IN_DEV_CONF_GET((in_dev), FORWARDING) IN_DEV_CONF_GET restituisce l\u0026rsquo;impostazione di quel dispositivo, non un AND con quella globale. Così nic1 e nic2 inoltrano il traffico in transito per il fabric mentre nic0 e vmbr0 restano esattamente ciò che devono essere: interfacce dell\u0026rsquo;host che non instradano. Attivare l\u0026rsquo;interruttore globale trasformerebbe in router ogni interfaccia della macchina, compresa quella rivolta alla rete del tuo ufficio. Una cosa di cui questo design non ha bisogno per niente.\nUna cosa da sapere sull\u0026rsquo;interruttore globale IPv4 anche se non lo imposti: net.ipv4.ip_forward è un\u0026rsquo;impostazione in blocco, ed è per questo che la documentazione del kernel avverte che cambiarlo «resets all configuration parameters to their default state». Se qualcos\u0026rsquo;altro sull\u0026rsquo;host lo scrive, sovrascrive questi valori per interfaccia. Meglio saperlo prima di passare un pomeriggio a chiederti perché il transito ha smesso di funzionare.\nIPv6 è l\u0026rsquo;eccezione, ed è l\u0026rsquo;unico posto dove l\u0026rsquo;interruttore globale ci sta. La documentazione del kernel lo dice chiaramente sotto conf/all/forwarding:\nEnable global IPv6 forwarding between all interfaces. IPv4 and IPv6 work differently here; the force_forwarding flag must be used to control which interfaces may forward packets.\nQuindi per IPv6 non esiste l\u0026rsquo;equivalente dell\u0026rsquo;approccio ordinato per interfaccia visto sopra. Se il fabric porta IPv6 attivi l\u0026rsquo;inoltro a livello globale e poi lo restringi con force_forwarding, documentato come «Enable forwarding on this interface only — regardless of the setting on conf/all/forwarding». Nota che lo stesso comportamento di sovrascrittura vale al contrario: impostare conf.all.forwarding a 0 azzera force_forwarding su ogni interfaccia.\nLa build qui sopra lascia vuoto il prefisso IPv6 del fabric, quindi niente di tutto questo si applica qui: conta solo se ne aggiungi uno.\nNota cosa l\u0026rsquo;inoltro non cambia: OpenFabric annunciava già il /32 di ogni nodo e calcolava già il percorso attraverso l\u0026rsquo;anello. L\u0026rsquo;inoltro è il permesso mancante, non il cervello mancante. La tabella di routing era giusta fin dall\u0026rsquo;inizio. Il kernel semplicemente si rifiutava di fare da router.\nCosa costa l\u0026rsquo;anello, rispetto al triangolo:\nTraffico in transito. Su un anello di quattro nodi, le due coppie in diagonale attraversano un nodo intermedio, quindi il loro traffico consuma la banda dei link di quel nodo oltre alla sua. Ceph se ne accorge per primo, perché la replica è tutti-verso-tutti invece che vicino-verso-vicino. Un hop in più di latenza su quei percorsi, in aggiunta ai soliti valori sotto il millisecondo del design senza switch. Meno margine per i guasti. Un link rotto trasforma un anello in una catena: ancora completamente connessa, ma con percorsi più lunghi e più transito. Una seconda rottura partiziona il cluster. Un triangolo tollera una rottura senza alcun transito. E peggiora in un modo che è più facile disegnare che descrivere. Aggiungi un quinto nodo e metà delle coppie di nodi del cluster dipende da qualcun altro che inoltra:\nUn anello di cinque nodi: metà delle coppie ora dipende dall'inoltro di un altro mesh1 mesh2 mesh3 mesh4 mesh5 cavo: diretto, un hop nessun cavo: serve un vicino che inoltri Cinque nodi, due porte ciascuno 10 coppie di nodi in tutto 5 hanno un cavo diretto 5 no, e transitano per un vicino Ogni nodo ora inoltra traffico che non è suo. Una full mesh invece? 10 cavi, e 4 porte per nodo cioè due NIC in più in ogni server, ed è lì che il design si ferma. A tre nodi non transita niente. A quattro, due coppie. A cinque, metà, e una sola rottura allunga ogni percorso. Dieci coppie di nodi, cinque cavi. Le linee tratteggiate sono coppie senza cavo tra loro: ognuna di quelle è traffico Ceph che viaggia sui link di un terzo nodo. La full mesh che lo eviterebbe vuole quattro porte per server. Questo è il vero tetto di questo design, e non è il protocollo di routing. OpenFabric se la cava benissimo. È che le porte per nodo sono fisse, quindi oltre tre nodi ogni nuova macchina trasforma una parte maggiore del tuo traffico nel transito di qualcun altro.\nE la nota onesta, perché conta per una build che finora è stata solo interfaccia web: un sysctl non è un\u0026rsquo;azione dell\u0026rsquo;interfaccia web. Per la regola fissata prima, questo lo rende un prerequisito da dichiarare invece di qualcosa da sistemare in silenzio dalla riga di comando. Scrivilo nel runbook, perché la prossima persona che apre il pannello SDN vedrà un fabric sano e nessun indizio che un anello dipende da un file in /etc/sysctl.d.\nTornare indietro Rimuoverla è la build al contrario, nella stessa interfaccia: cancella gli oggetti SDN creati per la mesh, applica la configurazione, e conferma che l\u0026rsquo;accesso di gestione non sia stato toccato.\nQuest\u0026rsquo;ultimo passo è il motivo per cui esistono nic0 e lo switch da 2,5 Gbit. Se annullare la mesh potesse costarti l\u0026rsquo;interfaccia web, il design era sbagliato prima ancora di cominciare.\nPrima di cominciare L\u0026rsquo;accesso di gestione è davvero indipendente dalla mesh. Controllalo, non darlo per scontato. Tutti e tre i nodi sono sani prima di qualsiasi modifica SDN. Nomi dei nodi, nomi delle interfacce e cablaggio sono scritti da qualche parte, perché nic1 su un host che è nic2 su un altro è un brutto pomeriggio. I jumbo frame sono impostati su entrambe le interfacce di mesh, e l\u0026rsquo;MTU tiene conto dell\u0026rsquo;overhead di VXLAN sull\u0026rsquo;underlay. Il range della mesh è riservato e non è usato da nessun\u0026rsquo;altra parte. Riferimenti Proxmox VE — Software-Defined Network — la documentazione degli SDN Fabrics. I fabric «provide automated routing between nodes in a cluster», OpenFabric è «based on IS-IS and optimized for the spine-leaf topology common in data centers», ogni nodo ha bisogno di un Router-ID univoco, e «a dummy \u0026rsquo;loopback\u0026rsquo; interface with the router-id is automatically created» Proxmox VE — Cluster Manager — rete di Corosync e link ridondanti, alla base del design di appartenenza a due percorsi Proxmox VE — Deploy Hyper-Converged Ceph Cluster — le aspettative di rete per un cluster iperconvergente Linux kernel — IP sysctl documentation — ip_forward e il suo default a 0, il controllo forwarding per interfaccia, e l\u0026rsquo;avvertimento che cambiare l\u0026rsquo;interruttore globale azzera la configurazione per interfaccia ","permalink":"https://blogs.damiendye.uk/it/proxmox/proxmox-routed-mesh-sdn-openfabric/","summary":"Tre nodi Proxmox collegati direttamente tra loro a triangolo, con OpenFabric che instrada sulla mesh e Ceph più le reti client VXLAN che ci viaggiano sopra. Costruita interamente nell\u0026rsquo;interfaccia web, e onesta su dove il design smette di scalare.","title":"Una mesh Proxmox senza switch con SDN OpenFabric: reti Ceph e client senza uno switch da 100G"},{"content":"Il problema delle righe di avvio copiate Cerca tuning per Proxmox e troverai un\u0026rsquo;unica lunga riga GRUB_CMDLINE_LINUX, presentata come un blocco unico, senza alcuna indicazione di quale flag valga dove.\nConta più di quanto sembri. L\u0026rsquo;hypervisor e il guest risolvono problemi opposti.\nL\u0026rsquo;host vuole un accesso deterministico all\u0026rsquo;hardware reale: comportamento dell\u0026rsquo;IOMMU, stati dei link PCIe, stati di idle fisici. Il guest vuole smettere di fingere di avere dell\u0026rsquo;hardware: i suoi timer sono approssimazioni, i suoi stati di idle sono finzione, e i suoi stalli sono di solito lo scheduler di qualcun altro. Per questo lo stesso flag può essere giusto su un lato, inutile sull\u0026rsquo;altro e, ogni tanto, dannoso.\nQui sotto trovi dove va davvero ciascuno.\nDove va ogni flag di avvio del kernel Solo host qui vive l'hardware vero iommu=pt amd_iommu=pgtbl_v2 pcie_acs_override=… pcie_aspm=off pci=pcie_bus_perf → pcie_bus_safe se USB4 processor.max_cstate=1 + intel_idle.max_cstate su Intel amd_pstate=disable imposta anche un governor Il guest non ha link PCIe, né C-state né cpufreq. Solo guest smetti di fingere che sia hardware cpuidle.off=1 gli stati idle del guest sono finti nmi_watchdog=0 una vCPU sospesa lo fa scattare softlockup_panic=0 lo stallo era colpa dell'host Lascia stare kvm-clock. Non forzare tsc o hpet: i contatori non sono tuoi. Sull'host questi tre significano altro, e due ti costano qualcosa di reale. Entrambi, per motivi diversi stesso flag, decisioni separate mitigations=off host: fughe dal guest all'host guest: isolamento dei processi default_hugepagesz + hugepages host: per la RAM del guest guest: per un'applicazione scegli un livello, non entrambi watchdog_thresh / nowatchdog host: rumore che hai accettato guest: mai affidabile «Entrambi» non vuol dire impostarlo in tutti e due i posti. Vuol dire che la decisione va presa due volte. Nessuno: questi non fanno niente amd_iommu=on opzione non valida; il kernel scrive \"Unknown option - 'on'\" e va avanti consoleblank=0 è già il default del kernel Se una riga di avvio copiata contiene uno di questi, nessuno l'ha mai verificata su /proc/cmdline, che è il controllo più economico che ci sia, e quello che scopre anche l'errore del bootloader sbagliato. I flag in circolazione, smistati. Due dei più popolari non fanno niente su nessuno dei due lati, e la riga del watchdog è una vera scelta di giudizio più che una regola. Prima di tutto: stai modificando il file giusto? Un\u0026rsquo;installazione di Proxmox con root su ZFS si avvia con systemd-boot, dove /etc/default/grub non lo legge nessuno. Lo modifichi, riavvii, e non succede niente e non compare nessun errore. È un\u0026rsquo;ora frustrante.\nproxmox-boot-tool status # tells you which bootloader is in use # systemd-boot: edit /etc/kernel/cmdline, then proxmox-boot-tool refresh # GRUB: edit /etc/default/grub, then update-grub In entrambi i casi, verifica invece di dare per scontato:\ncat /proc/cmdline E sul lato GRUB usa GRUB_CMDLINE_LINUX_DEFAULT, non GRUB_CMDLINE_LINUX. Quest\u0026rsquo;ultima si applica a ogni voce di avvio, recovery compresa, e la recovery è esattamente il momento in cui vuoi il comportamento standard, non le mitigazioni disattivate e i C-state bloccati.\nLa riga dell\u0026rsquo;host IOMMU e passthrough iommu=pt amd_iommu=pgtbl_v2 pcie_acs_override=downstream,multifunction iommu=pt mette l\u0026rsquo;IOMMU in modalità passthrough: i dispositivi assegnati alle VM vengono tradotti, quelli nativi dell\u0026rsquo;host saltano la traduzione. È reale ed è gestito in arch/x86/kernel/pci-dma.c, che chiama iommu_set_default_passthrough(true). Il kernel lo documenta come equivalente a iommu.passthrough=1.\namd_iommu=on non esiste. È il parametro inesistente più copiato nelle guide su Proxmox. La funzione parse_amd_iommu_options() del kernel accetta fullflush, force_enable, off, force_isolation, pgtbl_v1, pgtbl_v2, irtcachedis, nohugepages e v2_pgsizes_only. Tutto il resto finisce qui:\npr_notice(\u0026#34;Unknown option - \u0026#39;%s\u0026#39;\\n\u0026#34;, str); AMD-Vi è attivo di default quando il firmware lo annuncia. Controlla il tuo log e scoprirai che il parametro non ha mai fatto il lavoro che gli veniva attribuito:\ndmesg | grep -i \u0026#34;AMD-Vi\\|Unknown option\u0026#34; amd_iommu=pgtbl_v2 è valido: seleziona il formato v2 delle page table DMA, che condivide la struttura delle page table della CPU invece di usare quella propria di AMD. Due cose da sapere: la documentazione lo limita alla DMA-API, cioè ai domini dei dispositivi propri dell\u0026rsquo;host e non ai domini VFIO usati per il passthrough; e se non è supportato torna indietro in modo sicuro, con una riga di log che conviene cercare:\nif (amd_iommu_pgtable == PD_MODE_V2) { if (!amd_iommu_v2_pgtbl_supported()) { pr_warn(\u0026#34;Cannot enable v2 page table for DMA-API. Fallback to v1.\\n\u0026#34;); amd_iommu_pgtable = PD_MODE_V1; } } Quindi vale la pena misurarlo su un nodo con molto IO lato host, e verificare di averlo ottenuto davvero.\npcie_acs_override=downstream,multifunction è la patch fuori albero di Proxmox. Divide i gruppi IOMMU dichiarando un isolamento che l\u0026rsquo;hardware non annuncia, ed è questo che rende possibile il passthrough sulle schede consumer. È anche, esattamente, dire al kernel qualcosa di falso sulla topologia. Va bene su una macchina i cui guest sono fidati quanto l\u0026rsquo;host. Altrimenti no. C\u0026rsquo;è di più sul perché nell\u0026rsquo;articolo sulla tassa dell\u0026rsquo;IOMMU.\nLatenza e jitter pcie_aspm=off processor.max_cstate=1 amd_pstate=disable pcie_aspm=off tiene i link PCIe fuori dagli stati a basso consumo, così un IO in arrivo non aspetta mai che un link si risvegli. Costa qualche watt per link e toglie una coda di latenza difficile da diagnosticare. Vedi ASPM PCIe e passthrough.\nprocessor.max_cstate=1 limita l\u0026rsquo;idle ACPI a C1. Attenzione al driver: questa è la manopola di processor/acpi_idle, quindi su Intel ti serve anche intel_idle.max_cstate=1, perché intel_idle ha la precedenza. Su AMD è quella giusta.\nC\u0026rsquo;è un vero argomento contrario. Il sonno profondo dei core inattivi è ciò che dà al package il margine termico e di potenza per spingere in boost quelli occupati, quindi bloccare tutto a C1 può abbassare la frequenza di picco single-thread e alzare il consumo a riposo. Su un host sensibile alla latenza lo scambio di solito conviene. Su un host che punta al throughput forse no. Misuralo invece di ereditarlo.\namd_pstate=disable ripiega su acpi-cpufreq. Prima di usarlo conviene conoscere le alternative documentate: passive (il driver richiede un livello di prestazioni), active (il driver EPP, orientato a prestazioni o efficienza) e guided. active con orientamento alle prestazioni, oppure passive più il governor performance, spesso danno la stessa latenza mantenendo il controllo più fine di CPPC. E se lo disattivi, imposta un governor di proposito: finire su acpi-cpufreq con schedutil può essere un passo indietro.\nMemoria default_hugepagesz=1G hugepages=64 default_hugepagesz=1G da solo non riserva niente. Il kernel lo documenta come l\u0026rsquo;impostazione della «size of the default HugeTLB page… the default hugetlb size used for shmget(), mmap() and mounting hugetlbfs»: un\u0026rsquo;unità, non un\u0026rsquo;allocazione. L\u0026rsquo;allocazione viene da hugepages=, documentato come «Number of HugeTLB pages to allocate at boot».\nQuesto conta molto di più per le pagine da 1 GiB che per quelle da 2 MiB, perché regioni contigue da 1 GiB sono di fatto introvabili quando l\u0026rsquo;host è acceso da un po\u0026rsquo; e la memoria si è frammentata. L\u0026rsquo;avvio è la tua unica occasione affidabile.\nPoi il guest deve aderire (hugepages: 1024 nella configurazione della VM). Pagine riservate che nessuno usa sono solo memoria che non puoi riavere, e sulle VM che le usano perdi ballooning e KSM.\nLo scambio sulla sicurezza mitigations=off Non è un solo interruttore. Il kernel lo espande in un elenco, e su un hypervisor queste sono le voci che contano:\nl1tf=off mds=off mmio_stale_data=off kvm.nx_huge_pages=off gather_data_sampling=off retbleed=off spec_rstack_overflow=off nospectre_v2 nopti indirect_target_selection=off Il riassunto del kernel stesso è «improves system performance, but it may also expose users to several CPU vulnerabilities». L1TF, MDS e MMIO stale data sono proprio percorsi di fuga da guest a host e da guest a guest, e kvm.nx_huge_pages è la mitigazione di iTLB multihit dentro KVM stesso.\nDifendibile su una macchina con un solo tenant, dove ogni guest è fidato quanto l\u0026rsquo;host. Non difendibile dove i guest non sono fidati o appartengono a tenant diversi. E nota che si somma a pcie_acs_override: due garanzie di isolamento indipendenti tolte sulla stessa riga. Da fare di proposito, non per eredità.\nPCIe su USB4 ne cambia due Se i tuoi dispositivi PCIe arrivano via USB4 o Thunderbolt, come un box esterno per GPU o NVMe, due delle risposte sopra cambiano.\nIl tuning di MPS smette di essere gratis Sugli slot fissi, pci=pcie_bus_perf è un piccolo guadagno gratuito. Il kernel lo descrive così:\nSet device MPS to the largest allowable MPS based on its parent bus. Also set MRRS (Max Read Request Size) to the largest supported value… for best performance.\nIl problema è che configura i bridge all\u0026rsquo;avvio, dalla topologia presente all\u0026rsquo;avvio. Su USB4 l\u0026rsquo;hot-plug è il caso normale, e un dispositivo aggiunto dopo può supportare un MPS più piccolo di quello già impostato sul bridge.\nIl kernel lo dice chiaramente mentre pubblicizza un\u0026rsquo;altra policy:\npcie_bus_peer2peer — Set every device\u0026rsquo;s MPS to 128B, which every device is guaranteed to support… This also guarantees that hot-added devices will work.\nSolo una policy offre quella garanzia, ed è quella che blocca tutto a 128 byte: esattamente ciò da cui il tuning di MaxPayloadSize vuole sfuggire. Per una topologia con hot-plug, pcie_bus_safe (il valore più grande supportato da tutti i dispositivi sotto il root complex), o semplicemente lasciare tune_off, è il punto di partenza più sicuro. Lo switch del tunnel limita comunque l\u0026rsquo;MPS raggiungibile, quindi quel tetto non è mai stato tuo da alzare.\nPerché l'hot-plug cambia la risposta sulla policy MPS All'avvio,\u0026#160;pcie_bus_perf\u0026#160;configura il bridge su ciò che vede bridge: MPS 512 dispositivo A · 512 dispositivo B · 512 presenti all'avvio a caldo · solo 256 non combacia nessuna rinegoziazione In uno chassis non succede mai: la topologia all'avvio è quella per sempre. Su una porta USB4 è il caso normale. Le quattro policy, e quale il kernel dice sicura per l'hot-plug pcie_bus_tune_off lascia stare i valori del BIOS pcie_bus_safe il massimo supportato da tutti sotto il root complex pcie_bus_perf il massimo che il bus padre consente, per dispositivo, più MRRS pcie_bus_peer2peer 128 B ovunque: \"guarantees that hot-added devices will work\" Solo una policy dà quella garanzia, ed è quella che butta via la dimensione di payload che stavi cercando di ottimizzare. Il bridge viene configurato una volta, all\u0026rsquo;avvio, dai dispositivi presenti in quel momento. Tutto quello che arriva dopo deve convivere con quella decisione: va bene in un case, non va bene su una porta. Le debolezze di sicurezza si sommano sul serio PCIe esterno significa che qualcuno può collegare un dispositivo capace di DMA al tuo hypervisor. La documentazione Thunderbolt del kernel è diretta:\n…the connected devices can be DMA masters and thus read contents of the host memory without CPU and OS knowing about it. There are ways to prevent this by setting up an IOMMU but it is not always available for various reasons.\nL\u0026rsquo;IOMMU è la difesa. Ora conta cosa le fa la riga dell\u0026rsquo;host. iommu=pt dà ai dispositivi dell\u0026rsquo;host domini di identità non tradotti, pcie_acs_override dichiara un isolamento che non c\u0026rsquo;è, e mitigations=off disattiva le mitigazioni di isolamento dei guest. Ognuno è difendibile da solo. Insieme, su una macchina con una porta USB4 raggiungibile fisicamente, si sommano.\nControlla a che punto sei:\ncat /sys/bus/thunderbolt/devices/domain*/security # none | user | secure | dponly | usbonly none insieme a quella riga di avvio è una porta aperta. Se le porte sono raggiungibili da persone a cui non daresti root, iommu=pt è la prima cosa che riconsidererei.\nLa riga del guest Questi sono quelli che vanno dentro la VM, e tre di loro qui significano qualcosa di diverso rispetto all\u0026rsquo;host.\nnmi_watchdog=0 softlockup_panic=0 cpuidle.off=1 cpuidle.off=1 disattiva il sottosistema cpuidle. In un guest è quasi gratis: gli stati di idle del guest sono emulazione, e non c\u0026rsquo;è nessun core fisico da mettere a dormire, quindi l\u0026rsquo;unica cosa che il framework ti compra è latenza di risveglio. Sull\u0026rsquo;host lo stesso flag è un vero scambio tra consumo e margine di boost, e si sovrappone a processor.max_cstate=1. Solo lato guest.\nsoftlockup_panic=0 impedisce che un soft lockup mandi in panic il guest. In una VM è davvero protettivo, perché lì un soft lockup spesso non è colpa del guest. Una vCPU tolta dallo scheduler sembra esattamente un task che si è rifiutato di cedere. È lo stesso meccanismo dietro al perché non ci si può fidare dell\u0026rsquo;orologio di una VM. Controlla però se ti serve. Sulla maggior parte delle build è già 0 di default.\nsysctl kernel.softlockup_panic nmi_watchdog=0 è quello interessante, e merita più di una regola.\nLa questione del watchdog Ci sono due rilevatori che condividono una soglia:\nwatchdog_thresh= — Set the hard lockup detector stall duration threshold in seconds. The soft lockup detector threshold is set to twice the value. A value of 0 disables both. Default is 10 seconds.\nIl rilevatore di hard lockup (nmi_watchdog) scatta quando una CPU smette del tutto di ricevere interrupt del timer. Quello di soft lockup scatta quando un task occupa una CPU per il doppio del tempo senza cedere allo scheduler.\nIn un guest, disattivare il rilevatore di hard lockup è giusto. Una vCPU tolta dallo scheduler può farlo scattare senza nessuna colpa, e il lavoro sui contatori perf del rilevatore causa uscite dalla VM per un segnale che non era altro che rumore.\nSull\u0026rsquo;host è una scelta di giudizio, e dipende da quale rumore stai davvero inseguendo. L\u0026rsquo;overprovisioning affama i guest, non il kernel dell\u0026rsquo;host: le CPU fisiche dell\u0026rsquo;host continuano a ricevere interrupt per quante VM ci siano stipate sopra. Quindi il rumore nei log di un hypervisor carico è in larghissima parte fatto di messaggi di soft lockup e stalli RCU, non di report NMI di hard lockup. Se il rumore è quello, nmi_watchdog=0 non lo zittisce, e nemmeno softlockup_panic=0: quello ferma il panic, non i messaggi.\nLe manopole mirate sono:\nwatchdog_thresh=30 # hard 30s, soft 60s — scale to taste nowatchdog # honest single flag: disables both detectors sysctl -w kernel.soft_watchdog=0 # runtime, keeps hard-lockup detection C\u0026rsquo;è una ragione diversa e migliore per disattivare il rilevatore di hard lockup su un host carico, che col rumore non c\u0026rsquo;entra niente: consuma un contatore di prestazioni hardware per CPU. È per questo che il parametro accetta rNNN per configurare un evento perf raw. Se fai profiling basato sulla PMU, o hai una macchina volutamente in overprovisioning dove hai già accettato la variabilità della latenza come prezzo della densità, restituire quel contatore è uno scambio ragionevole, e piccoli stalli che hai accettato consapevolmente non sono incidenti.\nFai solo la scelta per quel motivo e non per il rumore, perché solo uno dei due è vero.\nconsoleblank=0 non fa niente. Il kernel documenta il timeout di oscuramento della console come «A value of 0 disables the blank timer. Defaults to 0.» È già spento. Innocuo, ma è il secondo parametro in circolazione che non ha alcun effetto, e portarselo dietro fa sembrare ragionata una riga quando viene copiata.\nRiferimento rapido: dove va ciascun flag Flag Host Guest Note iommu=pt sì no L\u0026rsquo;IOMMU è dell\u0026rsquo;host. Vale in un guest solo se fai passthrough annidato con un vIOMMU amd_iommu=pgtbl_v2 sì no Domini DMA-API dell\u0026rsquo;host. Verifica di aver ottenuto v2 e non il ripiego su v1 amd_iommu=on non valido non valido Non è un\u0026rsquo;opzione valida. Il kernel registra «Unknown option - \u0026lsquo;on\u0026rsquo;» pcie_acs_override=… sì no Patch di Proxmox, solo topologia dell\u0026rsquo;host. Indebolisce l\u0026rsquo;isolamento per costruzione pcie_aspm=off sì no In un guest non ci sono link PCIe reali; il link fisico è dell\u0026rsquo;host pci=pcie_bus_perf sì non in modo affidabile L\u0026rsquo;host imposta l\u0026rsquo;MPS sul bus. Usa invece pcie_bus_safe se i dispositivi arrivano via USB4 processor.max_cstate=1 sì no Gli stati di idle reali sono dell\u0026rsquo;host. Su Intel aggiungi intel_idle.max_cstate=1 amd_pstate=disable sì no I guest non controllano la frequenza della CPU cpuidle.off=1 con cautela sì Gratis in un guest. Sull\u0026rsquo;host costa margine di boost e si sovrappone a max_cstate nmi_watchdog=0 giudizio sì Giusto in un guest. Sull\u0026rsquo;host fallo per il contatore PMU, non per il rumore softlockup_panic=0 no sì Gli stalli del guest sono spesso lo scheduler dell\u0026rsquo;host. Di solito è già il default consoleblank=0 inutile inutile Non fa niente. Il default del kernel è già 0 mitigations=off entrambi entrambi Valido su entrambi, con un calcolo del rischio diverso: fughe da guest a host sull\u0026rsquo;host, isolamento dei processi nel guest default_hugepagesz + hugepages= entrambi entrambi Host: memoria che sostiene le VM. Guest: un carico dentro la VM che le vuole. Scopi diversi, stessi flag watchdog_thresh= / nowatchdog entrambi entrambi Host: zittire stalli che hai accettato. Guest: il rilevatore non è mai stato affidabile Tre vanno davvero su entrambi i lati, e conviene essere precisi: «entrambi» non vuol dire «per lo stesso motivo»:\nmitigations=off sull\u0026rsquo;host riguarda le fughe da guest a host e da guest a guest. Dentro un guest riguarda l\u0026rsquo;isolamento dei processi in quella VM. Puoi ragionevolmente disattivarlo in un posto e non nell\u0026rsquo;altro. Le hugepage sull\u0026rsquo;host sostengono la RAM dei guest; in un guest sostengono un\u0026rsquo;applicazione. Riservarle due volte per la stessa memoria è uno spreco, quindi decidi quale livello le vuole. Il tuning del watchdog è una decisione sul rumore sull\u0026rsquo;host e una decisione di correttezza nel guest. Tutto il resto sta su un lato o sull\u0026rsquo;altro, e due di loro non sono affatto delle scelte.\nLe due righe Host, su una macchina AMD che fa passthrough, con un solo tenant:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet amd_iommu=pgtbl_v2 iommu=pt pcie_acs_override=downstream,multifunction pcie_aspm=off pci=pcie_bus_perf default_hugepagesz=1G hugepages=64 processor.max_cstate=1 amd_pstate=disable mitigations=off\u0026#34; Sostituisci pci=pcie_bus_perf con pcie_bus_safe se qualcosa arriva via USB4. Togli mitigations=off se i guest non sono tutti tuoi. Su Intel, intel_iommu=on sostituisce i flag AMD e intel_idle.max_cstate=1 si aggiunge al limite dei C-state.\nGuest Linux:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet nmi_watchdog=0 softlockup_panic=0 cpuidle.off=1\u0026#34; E lascia stare kvm-clock nel guest: non forzare tsc né hpet. L\u0026rsquo;orologio paravirtuale esiste proprio perché i contatori non sono tuoi. È tutto l\u0026rsquo;argomento dell\u0026rsquo;articolo sul tempo nelle VM.\nCosa cancellare Se hai ereditato una riga da un post su un forum, questi due sono le prime cose da togliere, perché non ti costano niente e dimostrano che la riga non è mai stata provata:\namd_iommu=on: non è un\u0026rsquo;opzione valida; il kernel registra «Unknown option - \u0026lsquo;on\u0026rsquo;» e va avanti consoleblank=0: è già il default E controlla il resto con /proc/cmdline dopo un riavvio. Ogni flag su quella riga dovrebbe essere uno per cui sai dire un motivo.\nSe non sai dire cosa fa un flag, non è tuning. È superstizione. E verrà copiato nella prossima build da qualcuno che si fida di te.\nRiferimenti Linux kernel — the kernel\u0026rsquo;s command-line parameters — mitigations=, default_hugepagesz=, hugepages=, watchdog_thresh=, nowatchdog, consoleblank=, processor.max_cstate=, amd_pstate=, amd_iommu= e le policy pci=pcie_bus_* Linux kernel source — drivers/iommu/amd/init.c — parse_amd_iommu_options(), e il controllo di capacità delle page table v2 che ripiega su v1 Linux kernel source — arch/x86/kernel/pci-dma.c — iommu=pt che chiama iommu_set_default_passthrough() Linux kernel — Thunderbolt — livelli di sicurezza, e i dispositivi collegati come DMA master Proxmox VE — System Administration — proxmox-boot-tool status, come modificare la riga di comando del kernel con systemd-boot rispetto a GRUB ","permalink":"https://blogs.damiendye.uk/it/proxmox/kernel-boot-flags-host-guest/","summary":"Quasi tutte le righe di tuning per Proxmox che trovi online sono un unico blocco di flag del kernel. Metà va sull\u0026rsquo;hypervisor, metà va dentro il guest, due delle più popolari non fanno assolutamente niente, e alcune cambiano significato a seconda del lato del confine su cui finiscono.","title":"Due righe di avvio: quali flag del kernel vanno su un host Proxmox e quali nel guest"},{"content":"Perché dovresti volerne uno QEMU sa emulare un vero controller NVMe. Non un dispositivo paravirtuale che ha bisogno di un driver fornito da te, ma un controller NVMe PCIe che il guest riconosce come un normale SSD e pilota con il supporto NVMe che ha già.\nÈ tutto qui il fascino, e vale più di quanto sembri.\nLinux ha un driver nvme di serie da anni. Windows include stornvme da Windows 8.1 e Server 2012 R2. Quindi un guest si avvia, enumera un controller NVMe PCIe, carica il proprio driver e trova un disco. Niente ISO VirtIO, niente iniezione di driver in fase di installazione, e niente schermata «nessun disco trovato» a metà di un installer di Windows.\nChiunque sia rimasto a fissare quella schermata, con la ISO VirtIO montata e l\u0026rsquo;installer che insiste che non ci sono dischi, ne vedrà subito il fascino.\nIl secondo motivo è che si comporta da NVMe fino in cima. nvme-cli funziona. I namespace sono veri. Formati LBA, byte di metadati e informazioni di protezione sono tutti configurabili. Il che lo rende un ottimo posto per esercitarsi nelle operazioni che non dovresti provare su hardware che contiene dati.\nCome aggiungerne uno Proxmox non ha né una casella nella GUI né una chiave di configurazione per questo. È un dispositivo QEMU grezzo, quindi va in args: dentro /etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf.\nLa documentazione di QEMU dà la coppia minima: un drive di supporto senza interfaccia, e il controller che lo consuma. Scritto direttamente in /etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf, senza virgolette:\nargs: -drive file=/var/lib/vz/images/100/nvm.img,if=none,id=nvmidentifier -device nvme,serial=LAB-NVME-01,drive=nvmidentifier if=none conta: dice a QEMU di non agganciare il drive a un controller predefinito, perché la riga -device nvme lo reclamerà. L\u0026rsquo;id= sul drive e il drive= sul dispositivo devono coincidere. È quell\u0026rsquo;abbinamento a unire le due metà.\nIl serial= è obbligatorio: QEMU si rifiuta di avviare la VM senza. Scegli qualcosa che riconoscerai, perché è esattamente ciò che il guest riporta in nvme list e smartctl, e «quale di questi quattro drive virtuali identici è quale» è una domanda che prima o poi ti farai.\nLe virgolette: il punto dove cascano tutti Se mettere tra virgolette quella stringa dipende da dove la stai scrivendo, e sbagliarlo al contrario è il motivo più comune per cui uno di questi fallisce al primo tentativo.\nProxmox memorizza il valore di args: e poi lo spezza con Text::ParseWords::shellwords. Quindi nel file di configurazione le virgolette vengono rispettate e tolte. Una stringa interamente tra virgolette diventa un unico argomento:\n# WRONG in the config file — collapses to one argv element QEMU cannot parse args: \u0026#34;-drive file=…,if=none,id=nvmidentifier -device nvme,serial=…,drive=nvmidentifier\u0026#34; Passata per shellwords, quella riga produce esattamente un elemento. Senza virgolette, la stessa riga produce i quattro di cui QEMU ha davvero bisogno: -drive, il suo blocco di parametri, -device, il suo blocco di parametri.\nSulla riga di comando è il contrario, perché lì stai mettendo le virgolette per la tua shell, non per Proxmox. Qui le virgolette servono, e ciò che finisce nella configurazione è il valore senza virgolette:\nqm set 100 --args \u0026#34;-drive file=/var/lib/vz/images/100/nvm.img,if=none,id=nvmidentifier -device nvme,serial=LAB-NVME-01,drive=nvmidentifier\u0026#34; Sono corretti tutti e due. Solo che non sono intercambiabili. Se costruisci la riga con qm set, controlla poi il risultato con qm config 100 e la vedrai salvata nuda. È la forma che vuole il file di configurazione.\nCrea prima l\u0026rsquo;immagine di supporto, se non esiste:\nqemu-img create -f raw /var/lib/vz/images/100/nvm.img 32G Più di un namespace Per qualsiasi cosa oltre un singolo disco, separa il controller dai suoi namespace:\n-device nvme,id=nvme-ctrl-0,serial=deadbeef -drive file=nvm-1.img,if=none,id=nvm-1 -device nvme-ns,drive=nvm-1 Gli identificatori di namespace vengono assegnati automaticamente da 1 in su. È questa la configurazione che rende il dispositivo davvero utile per imparare, perché la gestione dei namespace è la parte di NVMe che la maggior parte della gente non tocca mai.\nUn namespace virtuale 4Kn Il namespace accetta le solite proprietà di dimensione del blocco, e QEMU ne ricava direttamente la dimensione dei dati LBA. hw/nvme/ns.c calcola l\u0026rsquo;esponente del formato come ds = 31 - clz32(ns-\u0026gt;blkconf.logical_block_size). Quindi questo ti dà un vero namespace 4K nativo:\n-device nvme-ns,drive=nvm-1,logical_block_size=4096,physical_block_size=4096 Il dispositivo namespace accetta anche ms per i byte di metadati per LBA, mset per gli LBA estesi, e pi e pif per il tipo di informazioni di protezione e il formato del guard.\nÈ un laboratorio completo per tutto ciò che c\u0026rsquo;è in l\u0026rsquo;articolo su 4Kn e 512e: blocchi logici da 512 byte contro 4096 byte, formati con metadati, T10-PI, su un dispositivo che puoi distruggere tutte le volte che vuoi.\nControlla che sia arrivato Da dentro il guest:\nlsblk -o NAME,MODEL,SIZE,LOG-SEC,PHY-SEC nvme list nvme id-ns -H /dev/nvme0n1 | grep -i \u0026#34;lbaf\\|data size\u0026#34; Dovresti vedere un vero namespace NVMe, con le dimensioni di blocco che hai chiesto.\nA cosa rinunci Tre cose, e le prime due non sono compromessi di prestazioni. Sono capacità che spariscono. Conoscile prima di mettere qualcosa sul dispositivo.\nCosa gestisce Proxmox, e cosa resta fuori per un dispositivo agganciato tramite args Nella configurazione della VM, come drive scsi0: local-zfs:vm-100-disk-0,iothread=1 Proxmox possiede il volume e sa che esiste Incluso nei backup vzdump / PBS sì Snapshot di PVE sì Migrazione live sì Resize e Move Disk nella GUI sì Contato nella vista dello storage sì Agganciato tramite args: -device nvme,drive=nvm1,serial=… un dispositivo QEMU grezzo: PVE non ne sa niente Incluso nei backup no Snapshot di PVE no Migrazione live no Resize e Move Disk no Contato nella vista dello storage no Solo uno di quei «no» si annuncia. La migrazione live fallisce con un errore, perché QEMU segna il dispositivo come non migrabile. Il backup riesce e basta, senza il disco dentro: ecco perché questo va nel tuo runbook, non solo nella tua memoria. Proxmox gestisce come drive ciò che sta nella configurazione della VM. Un controller agganciato tramite args è fuori da tutto questo, quindi ogni funzione costruita sullo strato di storage semplicemente non vi si applica. 1. La migrazione live è disattivata Non è un limite di Proxmox né una svista. QEMU dichiara il dispositivo non migrabile nel modello del dispositivo stesso. Da hw/nvme/ctrl.c in QEMU 10.2:\nstatic const VMStateDescription nvme_vmstate = { .name = \u0026#34;nvme\u0026#34;, .unmigratable = 1, }; Tre righe, e quella in mezzo è tutta la storia. Il controller non ha stato di migrazione, quindi QEMU rifiuta la migrazione invece di tentarla. È il fallimento giusto. Ottieni un errore, non un guest che riparte su un altro nodo con un disco confuso.\nC\u0026rsquo;è un secondo motivo, indipendente, per cui non può funzionare: Proxmox non sa che il disco esiste. Anche se QEMU potesse spostare lo stato del dispositivo, niente nella logica di migrazione di PVE farebbe in modo che il volume di supporto sia disponibile sul nodo di destinazione.\nVale però la pena tenerlo d\u0026rsquo;occhio: il ramo di sviluppo di QEMU ha sostituito il flag generico con una funzione nvme_set_migration_blockers() che permette la migrazione e la blocca solo per funzioni specifiche. Più di un namespace, per esempio, dove il commento nota «we don\u0026rsquo;t handle this in migration code yet». Non è comparso in nessun rilascio fino alla 10.2 compresa, quindi oggi non ti aiuta, ma questa restrizione sembra destinata ad ammorbidirsi. Controlla la tua versione di QEMU invece di fidarti di un articolo.\n2. I backup di Proxmox non lo vedranno vzdump e Proxmox Backup Server fanno il backup dei volumi che compaiono nella configurazione della VM come drive: scsi0, virtio0 e così via. Un disco agganciato tramite args: non è uno di questi. È un dispositivo QEMU grezzo di cui PVE non sa niente.\nQuindi il backup gira, riporta successo, e non contiene il dispositivo.\nQuesto modo di fallire è peggio di un errore, perché niente te lo dice. Lo stesso vale su tutta la linea: niente snapshot di PVE, niente ridimensionamento del disco dalla GUI, niente Move Disk, niente conteggio nella vista dello storage. Se hai creato il volume tramite PVE e poi l\u0026rsquo;hai staccato, PVE potrebbe anche non ripulirlo. Un orfano che aspetta di confondere qualcuno più avanti.\nSe dei dati devono vivere su uno di questi, fanne il backup da dentro il guest, e scrivi da qualche parte che l\u0026rsquo;hypervisor non lo copre.\n3. Non è più veloce di VirtIO SCSI Questa sorprende la gente, perché «NVMe» suona come una funzione di prestazioni. Qui non lo è.\nVirtIO SCSI e VirtIO block sono paravirtuali: il driver del guest e l\u0026rsquo;hypervisor condividono un ring buffer progettato proprio per questo lavoro, e il guest sa di parlare con un hypervisor.\nIl controller NVMe emulato è l\u0026rsquo;opposto per progetto. Presenta veri registri NVMe, quindi il guest lo programma come se fosse hardware. Ogni scrittura sul doorbell è un accesso MMIO che va in trap nell\u0026rsquo;hypervisor. Corretto, e più costoso per IO che mettere un descrittore su un ring.\nUn ring condiviso contro registri emulati guest │ hypervisor VirtIO SCSI: paravirtuale driver del guest sa di essere una VM ring condiviso lo capiscono entrambi i lati block layer dell'host 1 notifica Un descrittore va sul ring e l'host viene notificato. Il ring sta a cavallo del confine di proposito. NVMe emulato: registri veri driver del guest crede di essere hardware registri NVMe doorbell, code, MMIO block layer dell'host ogni scrittura sul doorbell va in trap trap + emulazione, per IO Il guest fa esattamente ciò che farebbe con un controller fisico, ed è proprio il punto: il suo driver funziona senza modifiche. È anche il motivo per cui è una funzione di compatibilità, non di prestazioni. L'interrupt coalescing non è supportato ed è spento di default: comportamento hardware corretto, al costo di emulare l'hardware. Il percorso paravirtuale è un ring che guest e host capiscono entrambi. Il percorso emulato costringe il guest a pilotare registri, e ogni scrittura sul doorbell è una trap: comportamento fedele all\u0026rsquo;hardware, al costo dell\u0026rsquo;emulazione dell\u0026rsquo;hardware. Anche la documentazione di QEMU è franca sui limiti del dispositivo: l\u0026rsquo;interrupt coalescing «is not supported and is disabled by default», e i contatori nella pagina di log SMART/Health «are reset when the device is power cycled».\nNiente di tutto questo lo rende lento in termini assoluti. È perfettamente usabile. Significa solo che non dovresti mai sceglierlo sperando in più throughput di quello che ti dà VirtIO SCSI. Sceglilo per il driver, o per la semantica NVMe.\nDove si guadagna davvero il suo posto Installare un guest senza supporti VirtIO. Un installer di Windows che non vede un disco VirtIO SCSI ne vedrà uno NVMe, perché il driver è già nell\u0026rsquo;immagine. Installa lì sopra, poi decidi se passare a VirtIO dopo. Appliance e immagini che non controlli. Qualsiasi cosa distribuita come immagine fissa senza driver VirtIO, e che preferiresti non ricostruire. Studio e lavoro in laboratorio. nvme format --lbaf, creazione e collegamento di namespace, metadati e informazioni di protezione: le operazioni che sull\u0026rsquo;hardware vero sono distruttive e dipendono dal vendor qui sono gratis. È il modo più sicuro per farsi la mano prima di toccare un drive che conta. Riprodurre la topologia di qualcun altro. Se stai facendo il debug della disposizione NVMe di un cliente, un controller emulato con namespace e dimensioni di blocco corrispondenti è un ciclo molto più rapido che farsi prestare il suo hardware. Cosa usare invece in produzione Per una VM che ha bisogno di prestazioni, delle funzioni di PVE e di una vita tranquilla: VirtIO SCSI single, con iothread=1, discard=on e ssd=1, su cache=none. È la configurazione che tiene in piedi migrazione live, backup, snapshot e vista dello storage.\nPer una VM che ha bisogno degli ultimi punti percentuali e può rinunciare a quelle funzioni di proposito, la risposta non è un dispositivo NVMe emulato. È il passthrough vero, con i suoi duri compromessi, trattato in l\u0026rsquo;articolo sulla tassa dell\u0026rsquo;IOMMU.\nIl dispositivo NVMe emulato non sta in nessuno dei due campi. Per questo è uno strumento di compatibilità e di laboratorio, e in questo è molto bravo.\nUsalo per il lavoro in cui è bravo e non ti deluderà. Chiedigli di essere una funzione di prestazioni e ti deluderà molto in fretta.\nRiferimenti QEMU — NVMe Emulation — la sintassi -drive/-device nvme, nvme-ns per più namespace, i parametri di namespace ms/mset/pi/pif, e i limiti dichiarati su interrupt coalescing e conteggi SMART QEMU source — hw/nvme/ctrl.c — la dichiarazione nvme_vmstate con .unmigratable = 1 nel rilascio 10.2 QEMU source — hw/nvme/ns.c — il namespace che ricava il proprio formato LBA da logical_block_size Proxmox VE — Backup and Restore — cosa copre vzdump, e le opzioni di backup per volume che esistono per i drive gestiti da PVE Proxmox VE — Qemu/KVM Virtual Machines — VirtIO SCSI, iothread, discard e le opzioni disco supportate ","permalink":"https://blogs.damiendye.uk/it/proxmox/virtual-nvme-proxmox/","summary":"QEMU sa emulare un vero controller NVMe, così il guest usa il proprio driver NVMe di serie senza bisogno di supporti VirtIO. Ma è non migrabile per progetto, invisibile ai backup di Proxmox e non più veloce di VirtIO SCSI. Ecco come aggiungerne uno e quando ne vale la pena.","title":"Un dispositivo NVMe virtuale in Proxmox, e le tre cose a cui rinunci"},{"content":"Il presupposto di ogni orologio L\u0026rsquo;orologio di un computer funziona contando qualcosa di regolare e fidandosi che continui a contare. Un cristallo oscilla, un contatore si incrementa, e il software calcola quanto tempo è passato.\nLa virtualizzazione rompe la parte della fiducia.\nLa documentazione del kernel sulla gestione del tempo in KVM mette il problema in una frase: «the virtual operating system does not run with 100% usage of the CPU, despite the fact that it may very well make that assumption.» Tutto quello che segue discende da qui.\nLa tua vCPU non è sempre in esecuzione Una vCPU è un thread sull\u0026rsquo;host. Gira quando lo dice lo scheduler dell\u0026rsquo;host.\nQuando non gira, il guest non è semplicemente inattivo: è assente. Non può contare, non può servire un interrupt del timer, e non ha modo di sapere quanto è rimasto via. L\u0026rsquo;host lo registra come steal time, che è il nome onesto per «tempo che ti è capitato invece che tempo per te».\nGli interrupt del timer sono dove fa più male. Un guest che chiede un tick periodico chiede all\u0026rsquo;host di consegnare interrupt a una frequenza fissa, e l\u0026rsquo;host non sempre può accontentarlo. Di nuovo dalla documentazione del kernel: «the host virtualization engine may not be able to deliver the proper number of interrupts per second, and so guest time may fall behind.»\nPerché i tick del timer di un guest smettono di essere regolari Bare metal: la CPU è sempre tua in esecuzione tick del timer regolari: contarli ti dà l'ora In una VM: la vCPU è un thread sullo scheduler di qualcun altro in esecuzione fuori dalla CPU fuori dalla CPU i tick dovuti nei vuoti arrivano tardi, ammucchiati, o per niente Il guest non vede i periodi tratteggiati. Da dentro, l'orologio ha solo prodotto meno tick del dovuto, ed è per questo che la documentazione del kernel dice che il tempo di un guest «may fall behind» quando l'host non riesce a consegnare gli interrupt richiesti. L'host chiama le zone tratteggiate steal time. Il guest non le chiama in nessun modo, perché lì non c'era. La vista del guest è la riga in basso: tick che arrivano in ritardo, tick che arrivano a raffiche, e vuoti di cui non sa rendere conto. Sta misurando lo scheduler dell\u0026rsquo;host tanto quanto lo scorrere del tempo. Più alta è la frequenza dei tick peggio va, e un host in overcommit peggiora ancora le cose. È anche il motivo per cui un host carico degrada la gestione del tempo dei guest tranquilli. Sono tutti in coda per gli stessi core fisici.\nNemmeno i contatori sono tuoi Se i tick periodici sono inaffidabili, la risposta ovvia è leggere un contatore. Che ha i suoi problemi.\nIl TSC è quello veloce, e la documentazione del kernel è brutale al riguardo: «The TSC is a CPU-local clock in most implementations… the TSCs of different CPUs may start at different times.» La sua frequenza può variare con gli stati di risparmio energetico del processore, e sui chip più vecchi si ferma del tutto quando il core è inattivo. Una vCPU che migra tra core fisici può quindi leggere un contatore che non concorda con quello letto un microsecondo prima.\nLe alternative sono peggio in un altro modo. HPET, PIT e il timer ACPI PM sono tutti dispositivi emulati, quindi ogni lettura è una trap nell\u0026rsquo;hypervisor. Corretti, e abbastanza costosi che un guest che legge l\u0026rsquo;orologio in un ciclo stretto se ne accorge.\nEcco perché esistono gli orologi paravirtuali. Su KVM, kvm-clock permette all\u0026rsquo;host di pubblicare la propria gestione del tempo in una struttura condivisa che il guest legge direttamente: niente trap, niente conteggio, nessun presupposto che il guest fosse sveglio. Ed è anche il motivo per cui dovresti lasciare in pace la clocksource del guest invece di forzare tsc o hpet perché un post su un forum diceva che era più veloce.\nMigrazione, snapshot e sospensione Migrazione live, ripristino di uno snapshot e sospensione/ripresa fanno tutti la stessa cosa all\u0026rsquo;orologio di un guest: lo fermano, e poi lo fanno ripartire da un\u0026rsquo;altra parte.\nQuello che il guest vede non è una deriva, è un salto. L\u0026rsquo;orologio aveva un valore, e adesso ne ha un altro, senza niente in mezzo. Migrare su un host il cui TSC gira a una frequenza diversa aggrava la cosa.\nI salti contano perché il software che corregge gli orologi è fatto per correggere la deriva, non il teletrasporto.\nNon è un problema di KVM Viene la tentazione di leggere tutto quanto sopra come un difetto di KVM. Non lo è.\nOgni hypervisor include un orologio paravirtuale, perché ogni hypervisor ha lo stesso problema strutturale: KVM ha kvm-clock, Hyper-V ha la sua reference TSC page, VMware ha un contatore pseudo-performance più la sincronizzazione via Tools, Xen ha il suo pvclock. Sono quattro implementazioni indipendenti dello stesso ripiego.\nLa conclusione della stessa documentazione del kernel è che qui non esiste una soluzione perfetta. Solo compromessi tra precisione, prestazioni e complessità.\nSe lo vuoi sentire da un vendor invece che dagli sviluppatori del kernel, il limite di supporto di Microsoft per il tempo ad alta precisione è sorprendentemente schietto. Per dichiarare una precisione di 50 ms su un sistema Windows virtualizzato, uno dei requisiti indicati è che «the one-day average CPU utilization of the host must not exceed 90%.» Per 1 ms, l\u0026rsquo;host deve restare sotto l'80%.\nRileggilo: la precisione dell\u0026rsquo;orologio del guest è documentata come subordinata a quanto è carico l\u0026rsquo;host. Non è una stranezza di Windows, è la stessa fisica descritta dalla documentazione del kernel, messa per iscritto come limite di supporto.\nI tre strati del tempo nel guest, e quali possiede davvero il guest Sincronizzazione dell'ora che ora è davvero NTP via rete jitter, asimmetria, stratum hypercall ptp_kvm chiede direttamente all'host Orologio paravirtuale l'host pubblica il proprio tempo Ogni hypervisor ne include uno, perché hanno tutti questo problema: kvm-clock Hyper-V TSC page VMware pseudo-perf Xen pvclock quattro implementazioni indipendenti dello stesso ripiego Contatori hardware non tuoi in una VM TSC HPET PIT timer ACPI PM locali alla CPU e a frequenza variabile, o emulati: ogni lettura è una trap nell'hypervisor Il guest possiede la sua scelta in cima. Lo strato di mezzo è l'hypervisor che gli presta un orologio rimasto in funzione per tutto il tempo. Tre strati, e il guest possiede davvero solo quello in cima. L\u0026rsquo;orologio paravirtuale di ogni hypervisor esiste per aggirare la stessa garanzia che manca nello strato sottostante. Perché NTP dentro il guest è lo strumento sbagliato NTP è bravo in ciò per cui è stato progettato: una macchina con un oscillatore vero che va un po\u0026rsquo; veloce o un po\u0026rsquo; piano, corretta misurando il giro di andata e ritorno verso un server remoto e regolando dolcemente l\u0026rsquo;orologio locale.\nOgnuno di questi presupposti è traballante in una VM.\nL\u0026rsquo;oscillatore locale non è un po\u0026rsquo; sbagliato, è a tratti assente. La misura del giro di andata e ritorno la fa un processo che può essere tolto dalla CPU tra la lettura dell\u0026rsquo;orologio e l\u0026rsquo;invio del pacchetto, e questo corrompe la misura stessa. E le correzioni necessarie dopo una migrazione sono salti, che un algoritmo di regolazione graduale gestisce male o rifiuta del tutto.\nchrony se la cava molto meglio di ntpd qui. Regola più in fretta, tollera i salti, ed è onesto sulla propria incertezza. Ma sta comunque risolvendo il problema sbagliato: tirare il tempo attraverso una rete da un server di stratum 2 a 20 ms di distanza, quando il tempo giusto sta nell\u0026rsquo;hypervisor, dall\u0026rsquo;altra parte di un singolo confine di memoria.\nQuello che ottieni in pratica è un guest che ha quasi sempre ragione, ogni tanto è fuori di decine o centinaia di millisecondi, e non è mai del tutto in grado di dirti quando.\nCosa rompe davvero lo scarto A nessuno importa degli orologi in sé. Importa quando qualcosa smette di funzionare.\nKerberos e Active Directory Kerberos dipende dal tempo per progetto, perché la validità di un ticket è espressa come una finestra temporale.\nLa documentazione di krb5.conf del MIT definisce clockskew come «the maximum allowable amount of clockskew in seconds that the library will tolerate before assuming that a Kerberos message is invalid», e il default è 300 secondi, cioè cinque minuti.\nSupera quel limite e l\u0026rsquo;autenticazione non degrada, fallisce. E siccome l\u0026rsquo;autenticazione di Active Directory è Kerberos, vuol dire login al dominio, net use, connessioni a SQL Server, Exchange, condivisioni di file: tutto quanto. Cinque minuti sembrano generosi finché un guest non fa un salto all\u0026rsquo;indietro dopo il ripristino di uno snapshot.\nTLS Un certificato porta con sé una finestra di validità: notBefore e notAfter. Un guest con l\u0026rsquo;orologio indietro rifiuterà un certificato emesso stamattina perché, per quanto ne sa lui, il certificato non è ancora valido. Un guest con l\u0026rsquo;orologio avanti ne rifiuterà uno che in realtà non è scaduto.\nLa stessa aritmetica governa la freschezza di OCSP e CRL, i claim JWT nbf/exp e i codici TOTP per l\u0026rsquo;autenticazione a più fattori, che vivono in finestre di 30 secondi. Un orologio fuori di 45 secondi è un\u0026rsquo;interruzione dell\u0026rsquo;autenticazione con un messaggio d\u0026rsquo;errore molto confuso.\nCeph I monitor di Ceph ci tengono più di quasi qualunque altra cosa nello stack, perché il loro consenso dipende da questo.\nIl controllo di salute MON_CLOCK_SKEW scatta quando «the clocks on hosts running Ceph Monitor daemons are not well-synchronized». In particolare, quando lo scarto supera mon_clock_drift_allowed. Il consiglio della documentazione è sincronizzare con ntpd o chrony su più sorgenti, e fa notare che la sincronizzazione tra monitor conta in modo particolare.\nPuoi alzare mon_clock_drift_allowed, ma la documentazione è chiara: deve restare «significantly below the mon_lease interval». Per questo è un budget piccolo, e spenderlo per tappare un problema di gestione del tempo dell\u0026rsquo;hypervisor non è un buon affare.\nTutto il resto I log tra host smettono di correlarsi, e la timeline di un incidente diventa un tirare a indovinare. La replica dei database e il consenso distribuito (etcd, Galera, qualunque cosa faccia leader lease) ne soffrono. Le finestre di backup e di monitoraggio si disallineano dalla cosa che dovevano osservare.\nI guest Windows sbandano in modo diverso Windows merita una nota a parte, perché il suo servizio del tempo è stato costruito con obiettivi diversi e si vede.\nMicrosoft dichiara senza giri di parole che le versioni precedenti a Windows 10 1607 / Server 2016 «can\u0026rsquo;t guarantee highly accurate time». Quello che il servizio Windows Time forniva in quelle versioni era «the necessary time accuracy to satisfy Kerberos version 5 authentication requirements» e «loosely accurate time» per le macchine in una foresta AD comune. Più stretto di così era «outside of the design specification… and weren\u0026rsquo;t supported.»\nIn altre parole, il Windows più vecchio punta a restare dentro la finestra di cinque minuti di Kerberos, non ad avere l\u0026rsquo;ora giusta. Il che va bene finché qualcosa nella tua infrastruttura non ha bisogno di meglio. Una macchina Windows virtualizzata fuori di 90 secondi si autentica tranquillamente mentre scrive log che non si possono correlare con niente.\nDa Windows 10 e Server 2016 in poi si può arrivare a 1 s, 50 ms o anche 1 ms, ma solo alle condizioni citate prima, compresi i limiti di utilizzo della CPU dell\u0026rsquo;host. Microsoft fa anche notare che «anything that introduces network asymmetry, such as a one-way satellite connection or high CPU load on the target system, will negatively influence accuracy». Una vCPU contesa è carico di CPU elevato sul sistema di destinazione sotto un altro nome.\nNon esiste ptp_kvm per Windows. Quello che hai invece:\nLe enlightenment di clock di Hyper-V. Proxmox le espone già ai guest Windows. PVE::QemuServer::CPUConfig imposta hv_time insieme a hv_vapic, hv_spinlocks, hv_relaxed e hv_synic. hv_time è l\u0026rsquo;orologio paravirtuale, ed è l\u0026rsquo;equivalente lato Windows di kvm-clock. È attivo di default per le VM di tipo Windows; non c\u0026rsquo;è niente da abilitare. Il QEMU guest agent. Con l\u0026rsquo;agent installato, l\u0026rsquo;host può spingere la sua ora nel guest dopo una ripresa o il ripristino di uno snapshot, e questo gestisce il caso del salto, quello che NTP gestisce peggio. Scegli un\u0026rsquo;unica autorità. Il classico guasto di Windows in una VM sono due sorgenti di tempo che litigano: sincronizzazione host-guest e sincronizzazione dalla gerarchia del dominio, entrambe a correggere lo stesso orologio in direzioni opposte. Per un guest unito al dominio, lascia vincere la gerarchia del dominio e impedisci all\u0026rsquo;host di spingergli l\u0026rsquo;ora. Per un guest standalone, la sincronizzazione dall\u0026rsquo;host va bene. Mai entrambe. Se vuoi sapere esattamente cosa racconta il tuo hypervisor a una certa VM riguardo al tempo, chiediglielo invece di tirare a indovinare:\n# Everything Proxmox actually passes to QEMU for this VM, including -rtc and CPU flags qm showcmd \u0026lt;vmid\u0026gt; --pretty La soluzione su QEMU/KVM: ptp_kvm Per i guest Linux su KVM c\u0026rsquo;è una risposta come si deve, e non è «più server NTP».\nptp_kvm permette al guest di chiedere all\u0026rsquo;host che ora è, direttamente, tramite una hypercall: KVM_HC_CLOCK_PAIRING su x86, e una chiamata firmware equivalente su arm64. Il kernel la presenta come un dispositivo di orologio hardware PTP, quindi dallo spazio utente sembra una qualsiasi altra sorgente di tempo di precisione, e chrony la può usare come orologio di riferimento.\nLe proprietà che contano:\nNessuna rete. Niente jitter, niente asimmetria, niente stratum, niente pacchetti. Il percorso è un confine di memoria. Sotto il microsecondo. La precisione è limitata dalla hypercall, non da un giro di andata e ritorno attraverso un datacenter. Aggira la parte rotta. Il guest non sta contando niente né stimando un giro di andata e ritorno. Sta leggendo un valore che l\u0026rsquo;host ha calcolato con un orologio che è rimasto in funzione per tutto il tempo. NTP attraverso la rete contro ptp_kvm attraverso un confine di memoria chrony con i pool di rete guest l'orologio si ferma rete jitter, asimmetria server di stratum 2 a decine di ms il giro di andata e ritorno lo misura l'orologio da correggere e il processo che misura può essere tolto dalla CPU a metà misura chrony con ptp_kvm guest legge /dev/ptp_kvm orologio dell'host mai fermato hypercall KVM_HC_CLOCK_PAIRING un confine di memoria, non una rete sotto µs Niente pacchetti, niente stratum, niente asimmetria, e niente da stimare. Il guest non sta calcolando che ora è: gliela dice l'unico partecipante rimasto sveglio per tutto l'intervallo. Entrambi i percorsi finiscono con il guest che imposta il suo orologio. Uno misura un giro di andata e ritorno in rete usando un orologio che continua a fermarsi; l\u0026rsquo;altro chiede all\u0026rsquo;hypervisor. Implementazione Applicalo a ogni VM Linux che ha il driver. L\u0026rsquo;hypervisor host deve avere a sua volta un NTP o PTP funzionante. ptp_kvm consegna al guest l\u0026rsquo;ora dell\u0026rsquo;host, quindi ne eredita l\u0026rsquo;errore.\n1. Carica il modulo del kernel all\u0026rsquo;avvio.\n# /etc/modules-load.d/ptp_kvm.conf ptp_kvm 2. Dagli un nome stabile e lascia che chrony lo legga.\n# /etc/udev/rules.d/90-ptp-kvm.rules ACTION==\u0026#34;add\u0026#34;, SUBSYSTEM==\u0026#34;ptp\u0026#34;, ATTR{clock_name}==\u0026#34;kvm\u0026#34;, SYMLINK+=\u0026#34;ptp_kvm\u0026#34;, GROUP=\u0026#34;chrony\u0026#34;, MODE=\u0026#34;0660\u0026#34; Il symlink conta perché la numerazione dei dispositivi PTP non è stabile. /dev/ptp0 può essere l\u0026rsquo;orologio di una NIC a un avvio e l\u0026rsquo;orologio KVM a quello dopo. Fare il match su clock_name prende quello giusto ogni volta.\n3. Punta chrony lì, e togli i pool.\nModifica /etc/chrony/chrony.conf su Debian e Ubuntu, o /etc/chrony.conf sulla famiglia RHEL. Cancella le righe pool e usa:\nrefclock PHC /dev/ptp_kvm poll 2 stratum 1 delay 0.0004 Togliere i pool non è pulizia facoltativa. Lasciarli chiede a chrony di conciliare un riferimento locale sotto il microsecondo con server su internet a decine di millisecondi di distanza, e le sorgenti su internet possono solo peggiorare la risposta.\n4. Riavvia e controlla.\nsystemctl restart chronyd # or chrony, on Debian/Ubuntu Verifica # The symlink exists and points at the KVM clock ls -l /dev/ptp_kvm cat /sys/class/ptp/ptp*/clock_name # chrony should be using PHC0 as its selected source chronyc sources -v # and the offset should be microseconds, not milliseconds chronyc tracking In chronyc sources, il refclock PHC compare come #* PHC0 una volta selezionato. Il # indica un riferimento hardware locale invece di un peer di rete, e l\u0026rsquo;* lo indica come quello in uso. Se lo vedi elencato ma non selezionato, chrony non l\u0026rsquo;ha accettato: controlla i permessi sul dispositivo e che il gruppo chrony nella regola udev corrisponda all\u0026rsquo;utente con cui chrony gira davvero sulla tua distribuzione.\nAvvertenze L\u0026rsquo;host deve avere ragione. Questo fa sì che il guest concordi con l\u0026rsquo;host, il che serve solo se l\u0026rsquo;host concorda con la realtà. Dai agli hypervisor un NTP o PTP vero. Ogni guest ne ha bisogno. Una flotta in cui metà delle VM usa ptp_kvm e metà usa pool su internet è una flotta con due autorità del tempo. La migrazione live va bene, ed è proprio il punto. Dopo la migrazione, il guest legge l\u0026rsquo;orologio del nuovo host. Purché gli host concordino tra loro, il guest non vede mai un salto. Solo KVM. È una hypercall di KVM. Hypervisor annidati o di altro tipo non presenteranno il dispositivo, e la regola udev semplicemente non scatterà. È un fallimento pulito invece di una risposta sbagliata in silenzio. Cosa non fare Non forzare la clocksource. Lascia in pace kvm-clock. Forzare tsc o hpet sulla riga di comando del kernel del guest scambia un orologio paravirtuale progettato per questa situazione con un contatore che non è mai stato tuo. Non lanciare ntpdate o hwclock da cron. È un salto a orario fisso, esattamente ciò che database e Kerberos odiano. Non tenere i pool «come riserva». Con un refclock funzionante non sono una riserva, sono un secondo parere da una fonte peggiore. Non alzare mon_clock_drift_allowed dicendo che è risolto. Hai speso parte di un budget che esiste per la realtà della rete, per tollerare un problema che ha una soluzione nota. Quest\u0026rsquo;ultimo vale la pena dirlo chiaro: allargare la soglia non è sistemare l\u0026rsquo;orologio. È spostare l\u0026rsquo;allarme perché smetta di suonare.\nRiferimenti Linux kernel — KVM timekeeping — perché il tempo del guest resta indietro, il problema del TSC come orologio locale, e la conclusione che esistono solo compromessi Linux kernel — PTP_KVM — l\u0026rsquo;interfaccia hypercall dietro il dispositivo di orologio PTP Linux kernel — KVM x86 hypercalls — KVM_HC_CLOCK_PAIRING, il lato x86 chrony — chrony.conf — la direttiva refclock e le opzioni del driver PHC MIT Kerberos — krb5.conf — clockskew e il suo default di 300 secondi Microsoft — support boundary for high accuracy time — gli obiettivi di precisione, e le condizioni di utilizzo della CPU dell\u0026rsquo;host per i sistemi virtualizzati Ceph — health checks — MON_CLOCK_SKEW, mon_clock_drift_allowed e il suo rapporto con mon_lease ","permalink":"https://blogs.damiendye.uk/it/proxmox/vm-time-ptp-kvm/","summary":"L\u0026rsquo;orologio di una macchina virtuale poggia su un presupposto che la virtualizzazione rompe: che la CPU continui a contare. Perché il tempo del guest deriva su ogni hypervisor, cosa rompe davvero lo scarto (Kerberos, TLS, Ceph, Windows) e come ptp_kvm lo risolve come si deve su QEMU/KVM.","title":"Dell'orologio di una VM non ci si può fidare, e la soluzione ptp_kvm per QEMU/KVM"},{"content":"Tre modi in cui un disco può presentarsi Un disco ha due dimensioni di blocco, e la differenza tra le due è tutta la storia.\nIl settore fisico è l\u0026rsquo;unità in cui il supporto lavora davvero: la più piccola unità che il disco può leggere o scrivere senza fare lavoro in più. Il blocco logico è l\u0026rsquo;unità in cui il disco dice all\u0026rsquo;host di lavorare: l\u0026rsquo;unità che l\u0026rsquo;host indirizza.\nIn giro ci sono tre combinazioni.\n512n: 512 nativo. Entrambe le dimensioni sono 512 byte. È il vecchio mondo: dischi rigidi di prima del 2010, e niente che compreresti nuovo oggi in una capacità che valga la pena avere.\n512e: emulazione a 512 byte. Il settore fisico è di 4096 byte, ma il disco dichiara blocchi logici da 512 byte e traduce nel firmware. Esiste per un solo motivo: la compatibilità con sistemi operativi, bootloader e applicazioni che davano per scontato 512 per sempre. Come ingegneria è abbastanza sensato, ed è la radice di quasi tutti i problemi che seguono.\n4Kn: 4K nativo. Entrambe le dimensioni sono 4096 byte. Il disco dice la verità, l\u0026rsquo;host lo indirizza nell\u0026rsquo;unità che il supporto usa, e in mezzo non c\u0026rsquo;è alcuno strato di traduzione.\n512n, 512e e 4Kn: cosa indirizza l'host contro cosa usa il supporto riga sopra = logico, ciò che indirizza l'host · riga sotto = fisico, ciò con cui lavora il supporto 512n 512512 512512 512512 512512 1:1 e onesto, ma obsoleto. Niente di nuovo esce così. 512e 8 × 512 B logici: ciò che sente l'host un settore fisico da 4096 B: ciò che esiste il firmware traduce, a ogni accesso L'host indirizza qualcosa che non c'è. Le scritture che non riempiono un settore costano di più. 4Kn un blocco logico da 4096 B un settore fisico da 4096 B niente da tradurre Il disco dice la verità, così niente più a valle può decidere su un numero sbagliato. Il 512e è il caso interessante: l\u0026rsquo;host indirizza qualcosa che non esiste, e il firmware tiene in piedi la finzione a ogni accesso. Che cosa fa il 512e a ogni scrittura non allineata Una lettura costa poco in tutti e tre i casi. Il disco legge il settore da 4K e restituisce la fetta da 512 byte che hai chiesto.\nÈ nelle scritture che la finzione diventa cara.\nSe l\u0026rsquo;host scrive un singolo blocco logico da 512 byte, il disco non può scrivere 512 byte. Il supporto non ha un\u0026rsquo;unità del genere. Così fa invece questo:\nLegge l\u0026rsquo;intero settore fisico da 4096 byte. Ci fonde dentro i 512 byte di dati nuovi. Riscrive l\u0026rsquo;intero settore da 4096 byte. Questo è un read-modify-write, e trasforma una piccola scrittura in una lettura più una scrittura. Su un disco rotante significa aspettare che il piatto faccia un altro giro. Una rotazione completa a 7.200 rpm vale circa 8 ms che non avevi messo in conto. Sulla flash il costo è di natura diversa, e non sparisce quando la scrittura finisce. Quello ha una sezione tutta sua più sotto.\nLa penalità del read-modify-write, e cosa le fa il disallineamento 4Kn: scrittura da 4 KB allineata 4 KB nuovi riempiono il settore 1 scrittura niente da leggere prima 512e: scrivere un blocco logico da 512 B 1. leggi l'intero settore fisico 4096 B riletti 2. unisci i 512 B solo questo è cambiato 3. riscrivi l'intero settore 4096 B scritti 1 lettura + 1 scrittura un giro su un disco; una pagina programmata su flash 512e: scrittura da 4 KB disallineata (quella cara) una scrittura da 4 KB, spostata di mezzo settore settore fisico n settore fisico n+1 2 read-modify-write a ogni scrittura, per sempre Gli strumenti di partizionamento moderni allineano al settore fisico, quindi di solito è ereditato da una vecchia installazione o da un'immagine clonata. Non si sistema da solo. Una scrittura di 4K allineata a 4K non ha bisogno di alcuna lettura. Tutto il resto sì, e una scrittura che scavalca il confine di un settore ne richiede due. Il disallineamento è la versione che morde più forte. Se una partizione inizia a un offset dispari di 512 byte (il caso classico è la vecchia convenzione dei 63 settori), allora ogni scrittura da 4K del filesystem scavalca due settori fisici. Non è un read-modify-write, sono due, a ogni singola scrittura, per sempre, finché qualcuno non ripartiziona il disco.\nLa write amplification sulla flash Su un disco rigido il read-modify-write ti costa un giro di piatto e poi è finita. Sulla flash ti costa vita del disco, e quello è un conto che paghi una volta e continui a pagare.\nLa write amplification è il rapporto tra quanto è stato effettivamente scritto sulla NAND e quanto l\u0026rsquo;host ha chiesto di scrivere. Un rapporto di 1,0 vorrebbe dire che il disco ha scritto esattamente ciò che gli è stato dato. Non è mai 1,0, perché la flash non può sovrascrivere sul posto: il disco programma una pagina nuova, marca la vecchia come obsoleta, e più tardi la garbage collection sposta le pagine ancora valide così che un intero blocco possa essere cancellato. Anche quegli spostamenti sono scritture.\nIl 512e ci aggiunge sopra uno strato evitabile, e il motivo è un dettaglio che vale la pena dire chiaramente: lo strato di traduzione del disco mappa in unità di circa 4 KB, qualunque dimensione di blocco logico dichiari. Un disco che dichiara blocchi da 512 byte continua a tenere traccia internamente di unità da 4 KB.\nCosì una scrittura da 512 byte dall\u0026rsquo;host diventa, dentro il disco: leggi l\u0026rsquo;unità di mappatura da 4 KB, fondi i 512 byte, programma una nuova unità da 4 KB. 4096 byte arrivano sulla NAND perché ne cambino 512. Otto volte la scrittura, per quella scrittura.\nIl disallineamento è meno drammatico per singola scrittura e peggiore in totale. Una scrittura da 4 KB che scavalca due unità di mappatura le sporca entrambe, quindi vengono programmati 8 KB per 4 KB di dati. Sono 2× di amplificazione su ogni singola scrittura, in modo permanente, finché la tabella delle partizioni non viene sistemata.\nPerché una scrittura disallineata raddoppia ciò che arriva alla NAND dall'alto in basso: ciò che ha scritto l'host → le unità di mappatura da 4 KB → ciò che arriva alla NAND 512e: scrittura da 4 KB, disallineata 4 KB dall'host unità n unità n+1 4 KB riscritti 4 KB riscritti 8 KB scritti per 4 KB: WAF 2× a ogni scrittura, finché non sistemi le partizioni 4Kn: scrittura da 4 KB, allineata 4 KB dall'host unità n 4 KB scritti 4 KB per 4 KB: WAF ≈ 1× il minimo, prima della garbage collection Nessuno dei due sfugge alla garbage collection: il disco deve spostare ciò che è vivo in un blocco prima di cancellarlo, e quel lavoro cresce con quanto è stato scritto all'inizio. 4Kn non elimina l'amplificazione: toglie la parte che pagavi per niente. L\u0026rsquo;host ha chiesto gli stessi 4 KB in entrambi i casi. A sinistra finiscono a cavallo di due unità di mappatura, quindi vengono riscritte tutte e due, e la garbage collection sposterà più tardi tutto ciò che in esse è ancora valido. Sono gli effetti a catena che rendono la cosa importante, e non solo disordinata:\nPiù scritture sulla NAND significano che la garbage collection gira più spesso, e i suoi spostamenti sono a loro volta amplificazione. La cache di scrittura SLC si riempie prima, quindi il disco scende prima al suo stato stazionario più lento e il throughput di scrittura sostenuto cala. I cicli di programmazione/cancellazione si consumano in proporzione a ciò che ha raggiunto la NAND, non a ciò che l\u0026rsquo;host ha mandato. Raddoppia l\u0026rsquo;amplificazione e hai dimezzato la vita del disco a parità di carico. I valori di endurance (TBW, DWPD) sono dichiarati rispetto alle scritture dell\u0026rsquo;host. L\u0026rsquo;amplificazione si mangia quel margine in silenzio, e il disco si consuma prima dei conti sulla garanzia che hai fatto al momento dell\u0026rsquo;acquisto. Le scritture dirette e sincrone sono il caso peggiore La maggior parte del tempo la page cache nasconde tutto questo. Il kernel accumula le piccole scritture, le unisce e manda al disco I/O da 4 KB o più grandi, così il read-modify-write non avviene mai.\nDue flag tolgono questa protezione, e le applicazioni a cui importa la durabilità li impostano entrambi.\nO_DIRECT scavalca la page cache. Ora tra l\u0026rsquo;applicazione e il disco non c\u0026rsquo;è più niente che possa raccogliere una scrittura da 512 byte in qualcosa della dimensione di un settore.\nO_SYNC o O_DSYNC richiede che la scrittura sia su un supporto stabile prima che la chiamata ritorni. Questo impedisce al disco di assorbire la scrittura in un buffer volatile e di combinarla più tardi con quelle vicine.\nMettili insieme e ogni scrittura da 512 byte è un ciclo completo di read-modify-write che deve finire adesso, da solo, senza nulla con cui ammortizzarlo. È lì che l\u0026rsquo;amplificazione su un disco 512e si avvicina al suo 8× teorico, ed è esattamente lo schema che producono il commit log di un database, lo ZIL di ZFS o il WAL di Ceph BlueStore.\nLa protezione da perdita di alimentazione è ciò che salva la situazione sull\u0026rsquo;hardware enterprise. Un disco con PLP può confermare una scrittura sincrona appena è in un buffer DRAM protetto da condensatori, che è durevole, e continuare a combinare internamente prima di programmare la NAND. Un disco consumer senza PLP deve raggiungere la flash prima di poter rispondere, quindi paga il costo pieno a ogni scrittura. Un motivo in più per cui la PLP non è opzionale per questo tipo di carico.\nIn Proxmox è la modalità di cache a decidere quale dei due casi ottieni:\ncache=none è O_DIRECT: il default di PVE, e la scelta giusta per l\u0026rsquo;HA all-flash. La page cache dell\u0026rsquo;host è fuori dal percorso, quindi gli schemi di scrittura del guest arrivano al disco così come il guest li ha emessi. cache=directsync è O_DIRECT più O_DSYNC: ogni scrittura è sincrona. È un\u0026rsquo;impostazione di nicchia per dischi dedicati ai log dei database, e inutilizzabile per i carichi generici. Su un dispositivo 512e, cache=directsync con un guest che fa commit in record da 512 byte è più o meno la disposizione meno efficiente disponibile: niente aggregazione nell\u0026rsquo;host, niente aggregazione nel disco, e un read-modify-write per ogni commit.\nEd ecco la parte che rende il 4Kn strutturale, e non soltanto preferibile. O_DIRECT richiede che offset, lunghezza e buffer siano allineati alla dimensione del blocco logico del disco. Su un disco 512e quella è 512 byte, quindi una scrittura diretta da 512 byte è lecita e il disco la paga in silenzio. Sul 4Kn il blocco logico è 4096, quindi la scrittura diretta più piccola che il kernel accetta è di 4 KB. Lo schema patologico smette di essere qualcosa da evitare e diventa qualcosa che lo stack non riesce nemmeno a esprimere.\nOverhead sul supporto Il secondo costo è strutturale, ed è il motivo per cui l\u0026rsquo;Advanced Format esiste.\nUn settore non è soltanto i suoi dati. Su un disco rigido ognuno porta un sync mark perché la testina sappia dove inizia il settore, un gap perché settori consecutivi non si sovrappongano, un address marker e un campo ECC per correggere gli errori di lettura.\nCon settori da 512 byte paghi tutto questo otto volte per ogni 4K di dati. Con un solo settore da 4K lo paghi una volta.\nCi sono due conseguenze, e la seconda conta più della prima:\nUna parte del piatto che era overhead diventa capacità utilizzabile. Durante la transizione all\u0026rsquo;Advanced Format era questa la motivazione dichiarata dall\u0026rsquo;industria, nell\u0026rsquo;ordine di pochi punti percentuali. Il campo ECC può essere molto più grande a parità di overhead totale. Un solo codice robusto che protegge 4096 byte corregge molto più di otto codici deboli che ne proteggono 512 ciascuno. Con la crescita della densità superficiale, questo ha smesso di essere un vezzo ed è diventato l\u0026rsquo;unico modo di tenere i tassi di errore accettabili. L'overhead per settore si paga otto volte a 512 byte e una volta a 4K Settori da 512 byte: gli stessi 4 KB di dati 8 settori × (sync + dati + ECC + gap) 8 × l'overhead per settore, e otto piccoli campi ECC Un settore da 4096 byte: stessi dati 1 × l'overhead, e un campo ECC molto più grande sync mark, address marker, gap tra settori ECC i tuoi dati Non in scala: i campi di overhead sono esagerati perché si vedano. La capacità recuperata valeva qualche punto percentuale. È l'ECC più robusto il motivo per cui l'industria ha cambiato davvero. Otto serie di sync mark, gap ed ECC, oppure una. Lo spazio recuperato è il vantaggio piccolo; la correzione degli errori più robusta è il motivo per cui l\u0026rsquo;industria ha cambiato. La flash non ha sync mark né gap di rotazione, ma la stessa logica si applica un livello più su: la NAND si programma in pagine, le pagine sono molto più grandi di 512 byte, e le tabelle di mappatura del disco hanno una voce per ogni unità indirizzabile. Blocchi logici più piccoli significano più metadati per tenere traccia della stessa capacità.\nOverhead nell\u0026rsquo;host: comandi e interrupt Il terzo costo è quello che sfugge, perché non sta affatto sul disco.\nLa dimensione del blocco logico fissa il minimo di quanto può essere piccolo un I/O. Su un disco con blocco logico da 512 byte, un filesystem o un\u0026rsquo;applicazione è libero di emettere una scrittura da 512 byte, e ognuna è un I/O completo: un comando costruito e inviato, una scrittura sul doorbell, una voce nella completion queue e un interrupt per dire che ha finito.\nOgnuno di questi passaggi ha un costo fisso che non dipende da quanti dati c\u0026rsquo;erano. Sposta 4 KB come otto comandi da 512 byte e paghi quel costo otto volte. Spostali come un solo comando da 4K e lo paghi una volta.\nIl blocco logico fissa il minimo dell'IO, e ogni comando ha un costo fisso Blocchi logici da 512 B: un'applicazione può scrivere 512 B 4 KB di dati diventano 8 comandi 512 B512 B 512 B512 B 512 B512 B 512 B512 B 8 × submission + doorbell 8 × voce di completion 8 × occasione di interrupt 8 × il costo fisso per comando per esattamente gli stessi 4 KB Blocchi logici da 4 KB: 4 KB è il minimo un comando da 4 KB 1 × submission, 1 × completion, 1 × interrupt 1 × il costo fisso Aiuta solo dove si fa davvero IO piccolo: un comando può descrivere molti blocchi, quindi una scrittura da 1 MB è un comando in entrambi i casi. Gli stessi 4 KB di dati. Il collo di bottiglia qui non è il disco: è il costo per comando e per completamento nell\u0026rsquo;host. Due precisazioni oneste, perché è qui che l\u0026rsquo;argomento di solito viene gonfiato.\nPer gli I/O grandi, la dimensione del blocco logico non cambia nulla nel numero di comandi. Un solo comando può descrivere molti blocchi, quindi una scrittura sequenziale da 1 MB è un comando, che i blocchi siano da 512 byte o da 4K. Il risparmio è reale solo dove si emettono I/O piccoli.\nDove invece si emettono I/O piccoli, l\u0026rsquo;effetto non è affatto sottile: ognuna di quelle otto richieste è una che il kernel deve costruire, schedulare e completare, ciascuna con il proprio interrupt MSI-X e la propria transizione da user a kernel, e ad alte queue depth è così che ti ritrovi con una tempesta di interrupt. Dentro una VM è ancora peggio, perché ognuno di quegli interrupt è anche un cambio di contesto del guest.\nE i controller NVMe moderni aggregano gli interrupt, quindi il numero di interrupt non coincide semplicemente con il numero di comandi. Il lavoro di invio e completamento per comando resta, però, e a qualche centinaio di migliaia di IOPS il costo di CPU per comando è una frazione misurabile di un core. È la stessa aritmetica dei posted interrupt nella serie sul passthrough: piccoli costi fissi moltiplicati per un numero molto grande.\n4Kn, metadati di settore e RAID hardware Passare a un formato 4096 + 0 ha una conseguenza che coglie molti di sorpresa, e cade in pieno sul RAID hardware.\nAlcuni controller RAID e storage array non usano affatto settori semplici da 512 o 4096 byte. Formattano i dischi a una dimensione estesa (520 o 528 byte, o gli equivalenti 4K come 4104, 4160 e 4224) perché quei byte in più per settore sono dove il controller tiene i propri metadati. Sono le protection information T10-PI/DIF, o dati di integrità del vendor, memorizzati in linea con i dati stessi che descrivono.\nUn formato 4096 + 0 non ha dove metterli. Il settore è tutto dati, da cima a fondo, ed è proprio questo il motivo per sceglierlo.\nQuindi un controller che vuole metadati in linea ha tre opzioni, e nessuna è gratis:\nRifiutare il disco. Riformattarlo in un formato esteso, disfacendo il lavoro sul 4Kn appena fatto. Tenere i propri metadati da qualche altra parte sul disco. La terza è quella in cui la flash ti punisce. Metadati scritti separatamente dai dati che descrivono sono una seconda scrittura, a un offset diverso, che finisce in un\u0026rsquo;unità di mappatura diversa. Un\u0026rsquo;altra pagina NAND programmata per ognuna che intendevi davvero scrivere. È l\u0026rsquo;amplificazione della sezione precedente, reintrodotta deliberatamente, per trasportare metadati di integrità che il disco avrebbe potuto tenere in linea per niente se l\u0026rsquo;avessi lasciato in un formato esteso.\nNon puoi avere entrambe le cose. O il settore porta i metadati del controller, o porta solo i tuoi dati.\nEd è per questo che la flash ha parecchio indebolito le ragioni del RAID hardware Il resto è un giudizio più che un meccanismo, quindi prendilo come tale.\nUn controller RAID hardware è RAID firmware che gira su un processore dedicato. L\u0026rsquo;«hardware» è una CPU, un po\u0026rsquo; di DRAM e una batteria. Non un modo fondamentalmente diverso di calcolare la parità. Quello che storicamente ti comprava era una cache di scrittura protetta da batteria e lo scarico del calcolo di parità, e sulla flash entrambi gli argomenti si sono indeboliti parecchio. Gli NVMe enterprise hanno già una propria cache protetta da perdita di alimentazione, e il controller diventa un tetto di banda davanti a dispositivi che da soli possono saturare diversi gigabyte al secondo.\nTi costa anche cose che adesso vuoi attivamente:\nLo stato del dispositivo sparisce. I dettagli SMART, gli indicatori di usura e i log del vendor che ti permettono di calcolare la write amplification stanno tutti dietro un\u0026rsquo;astrazione opaca. Nessun checksum end-to-end. Un controller verifica la parità, che rileva un disco mancante, non una risposta sbagliata da uno presente. ZFS e Ceph fanno il checksum dei dati stessi e sanno dirti quale copia è sbagliata: corruzione silenziosa che un controller lascia passare dritta. Per questo il controller sta risolvendo il problema sbagliato. I metadati del vendor sui dischi legano l\u0026rsquo;array a una famiglia di controller, il che è un tipo di inaffidabilità tutto suo quando è proprio il controller a guastarsi. Il RAID a parità fa il proprio read-modify-write sulle scritture a stripe parziale, che si somma a tutto quanto visto nelle sezioni precedenti. Per Ceph non è nemmeno una preferenza. Le indicazioni di Proxmox stesso sull\u0026rsquo;iperconvergenza dicono che i dischi vanno presentati in modalità HBA o pass-through, non dietro un controller RAID, e ZFS vuole esattamente la stessa cosa per gli stessi motivi.\nQuindi la disposizione che segue da tutto questo è: un HBA al posto di un controller RAID, dischi formattati 4Kn con zero metadati, e ridondanza più checksum affidati a ZFS o Ceph, che sanno davvero dirti quando un disco ha mentito. Se qualcosa nel tuo parco ha davvero bisogno di un formato di settore esteso, è un aut-aut deliberato da decidere finché i dischi sono ancora vuoti. Non qualcosa da scoprire dopo aver costruito gli OSD.\nDove il 512e morde davvero Sarebbe disonesto sostenere che il 512e rovini un sistema moderno, perché di solito non lo fa.\nUno stack Linux attuale legge la dimensione del settore fisico, allinea le partizioni a quella (parted e sfdisk lo fanno entrambi di default, ormai) e usa blocchi di filesystem da 4K. In quella configurazione l\u0026rsquo;host emette I/O da 4K allineati a 4K, il disco non ha mai bisogno di un read-modify-write, e il 512e ti costa quasi niente.\nI problemi sono specifici:\nPartizioni disallineate, di solito ereditate da una vecchia installazione o da un\u0026rsquo;immagine clonata. Due read-modify-write a ogni scrittura. ZFS con ashift=9 su un disco 512e, perché ZFS ha creduto al 512 dichiarato. Ogni scrittura di record diventa un read-modify-write, e ashift non si può cambiare a posteriori: il pool va ricostruito. Applicazioni che scrivono record da 512 byte con O_DIRECT, scavalcando l\u0026rsquo;aggregazione della page cache. Alcuni database e molto software su misura fanno così. Tutto ciò che si fida che la dimensione logica sia quella reale. È questo il danno vero dell\u0026rsquo;emulazione: distribuisce un numero sbagliato, e ciò che sta a valle prende decisioni basandosi su quello. Il 4Kn elimina l\u0026rsquo;intera categoria. Il disco non può mentire su una dimensione di settore che non ha.\nVale però la pena essere chiari sull\u0026rsquo;entità del premio. Le indicazioni di Seagate stessa dicono che il 4Kn vale chiaramente la pena quando lo stack è completamente ottimizzato per il 4K e stai contando ogni IOPS: un tier all-flash ben regolato, per esempio. Sotto quel livello, su un Linux moderno correttamente allineato, la differenza di prestazioni per gli I/O allineati è spesso piccola. L\u0026rsquo;altro argomento è la coerenza del parco: un parco uniformemente 4Kn non ha sorprese di formati misti, e nessuno deve ricordarsi quali dischi mentono.\nLa maggior parte dei dischi si può convertire, se il vendor lo permette Questa è la parte che sfugge: il 512e è spesso un\u0026rsquo;impostazione di formato, non una proprietà dell\u0026rsquo;hardware. Moltissimi dischi enterprise SAS e SATA, e la maggior parte degli NVMe enterprise, escono di fabbrica dichiarando 512 byte e si riformattano volentieri a 4Kn.\nTutto quanto segue distrugge ogni singolo byte sul dispositivo. Non esiste una conversione sul posto.\nNVMe: nvme-cli Prima guarda che cosa supporta il namespace:\n# Lists each LBA format and marks which one is in use nvme id-ns -H /dev/nvme0n1 | grep -i \u0026#34;lbaf\\|data size\u0026#34; Vuoi un formato con Data Size 4096 e Metadata Size 0, marcato come best e non attualmente in uso. Poi applicalo:\n# -l/--lbaf selects the LBA format index from the list above nvme format /dev/nvme0n1 --lbaf=1 --force La dimensione dei metadati conta quanto quella dei dati. Alcuni formati di fabbrica riservano byte in più per settore (520, o 4160) per trasportare metadati di protezione end-to-end T10-PI/DIF. Se nel tuo stack niente li usa, sono imbottitura su ogni settore, quindi scegli il formato con zero metadati e liberatene. Scegliere per sbaglio un formato con metadati ti dà anche un disco che si comporta diversamente da quello che volevi creare, e combinare un cambio di dimensione del settore con un cambio di PI può costringere a un formato completo lento invece di uno veloce.\nPer tutti i dischi di un host, mettilo in un ciclo. Serve shopt -s extglob per i glob estesi, e seleziona solo i formati che sono 4096/0 e non in uso:\nshopt -s extglob for dev in /dev/nvme+([0-9])n+([0-9]); do # Skip anything that is not actually there [ -e \u0026#34;$dev\u0026#34; ] || continue # An LBA format with 4096-byte data, 0-byte metadata, marked Best, not in use lbaf=$(nvme id-ns -H \u0026#34;$dev\u0026#34; \\ | grep -P \u0026#39;(?=.*Metadata Size: 0)(?=.*Data Size: 4096)(?=.*Best)(?!.*in use)\u0026#39; \\ | awk \u0026#39;{found=$3} END {print (found != \u0026#34;\u0026#34; ? found : -1)}\u0026#39;) if [ \u0026#34;$lbaf\u0026#34; != \u0026#34;-1\u0026#34; ]; then echo \u0026#34;Formatting $dev using LBA Format: $lbaf\u0026#34; nvme format --force --lbaf=\u0026#34;$lbaf\u0026#34; \u0026#34;$dev\u0026#34; else echo \u0026#34;Skipping $dev: no matching LBA format found.\u0026#34; fi done Due cose lì dentro fanno più lavoro di quanto sembri.\nIl glob corrisponde ai namespace (nvme0n1, nvme12n3) e volutamente non corrisponde a partizioni come nvme0n1p1, perché lo schema finisce dopo le cifre che seguono la n. È la differenza tra riformattare un namespace e fare qualcosa di irrecuperabile a un sistema in funzione.\nE la selezione converte soltanto un disco che offre davvero ciò che hai chiesto. Tutto il resto ricade su -1 e viene saltato, il che copre tre casi distinti:\nIl disco offre solo 512. Non esiste un formato da 4096 byte, quindi non c\u0026rsquo;è niente in cui convertirlo e il ciclo lo lascia stare. Non ci prova, e non fallisce a metà. Il disco è già 4Kn. Il formato 4096/0 è quello in uso, e (?!.*in use) lo esclude: quindi un secondo passaggio sullo stesso host non fa nulla. Nessuna riformattazione inutile di ogni disco. Gli unici formati 4096 portano metadati. Un formato 4096 + 8 non soddisfa Metadata Size: 0, quindi il ciclo non ti rifila di nascosto un disco T10-PI che non avevi chiesto. In altre parole fallisce in modo chiuso. Quando non è sicuro, salta.\nUna nota di portabilità: quei lookahead richiedono la modalità -P (PCRE) del grep GNU. Su un sistema dove grep è qualcos\u0026rsquo;altro, lo schema non corrisponde a niente e ogni disco viene saltato. Fastidioso, ma almeno sbaglia nella direzione sicura.\nLeggi comunque il ciclo prima di lanciarlo. Dove trova una corrispondenza, riformatta senza chiedere altro. nvme format --force non chiede due volte. Il suo posto è nel provisioning, su una macchina i cui dischi non contengono niente, mai su un host con un OSD, un pool o un disco di VM attivo.\nSu FreeBSD l\u0026rsquo;equivalente è nvmecontrol, dove -f è l\u0026rsquo;indice del formato:\nnvmecontrol format -f 1 nvme0ns1 SAS e SATA: openSeaChest openSeaChest di Seagate è multipiattaforma, open source, e funziona anche sui dischi di altri vendor.\n# Find the handle openSeaChest_Format --scan # Ask the drive which sector sizes it will accept openSeaChest_Format -d /dev/sg1 --showSupportedFormats # Convert. The confirmation string is deliberately hard to type by accident. openSeaChest_Format -d /dev/sg1 --setSectorSize 4096 \\ --confirm this-will-erase-data-and-may-render-the-drive-inoperable Quella frase di conferma non è una mia esagerazione. È la stringa letterale che lo strumento richiede, e la parte «may render the drive inoperable» è vera. Un formato a basso livello interrotto da un blackout può lasciare un disco che ha bisogno di un altro formato prima di funzionare di nuovo.\nSotto il cofano l\u0026rsquo;operazione cambia a seconda del trasporto: SAS e SCSI usano Format Unit, SATA usa Set Sector Configuration Ext (il percorso di formato veloce) e NVMe usa NVM Format. Per un disco SAS puoi usare direttamente Format Unit, e nota che questa opzione richiede la stringa di conferma più corta:\nopenSeaChest_Format -d /dev/sg1 --formatUnit 4096 --poll \\ --confirm this-will-erase-data Due opzioni diverse, due stringhe di conferma diverse: se le inverti, lo strumento rifiuta.\nDove il disco supporta un formato veloce, la dimensione del settore cambia in secondi invece che in ore; il disco poi fa il suo lavoro di integrità e in background, e scriverci sopra i tuoi dati veri riduce quel tempo in background. Un formato completo scrive zeri da un capo all\u0026rsquo;altro e su un grosso disco rotante può richiedere da molte ore a giorni.\nopenSeaChest_Format -d /dev/sg1 --setSectorSize 4096 --fastFormat \\ --confirm this-will-erase-data-and-may-render-the-drive-inoperable SCSI: sg_format Per qualunque cosa parli SCSI, sg3_utils fa lo stesso lavoro:\n# --size requires --format; expect hours on a large spinning disk sg_format --format --size=4096 /dev/sdb # Fast format where the drive supports it — seconds instead of hours sg_format --format --size=4096 --ffmt=1 /dev/sdb sg_format ti dà un conto alla rovescia di 15 secondi prima di procedere, che --quick salta. La sua documentazione avverte anche di un guasto specifico che vale la pena conoscere: se il cambio di dimensione del blocco riesce ma poi il formato fallisce, il disco può finire in uno stato «format corrupt» e ha bisogno di un altro formato per riprendersi.\nPrima di convertire qualsiasi cosa Controlla il percorso di avvio. Un disco 4Kn come dispositivo di avvio richiede UEFI e un sistema operativo che lo supporti. Il Linux moderno va bene. Le versioni più vecchie di Windows no, e alcuni controller RAID hardware rifiutano ancora del tutto il 4Kn. Fallo prima che il disco contenga qualcosa. Farlo a posteriori significa svuotare, convertire, ripristinare. Fanne uno, poi controlla. Converti un solo disco, verifica le dimensioni dichiarate, poi fai gli altri. Aspettati ore su un disco rotante senza formato veloce. Non avviare un formato a basso livello su una macchina che ti serve di nuovo a breve. Controllare che cosa hai # LOG-SEC is what the host addresses, PHY-SEC is what the medium uses lsblk -o NAME,MODEL,SIZE,LOG-SEC,PHY-SEC # The same, from sysfs cat /sys/block/sda/queue/logical_block_size cat /sys/block/sda/queue/physical_block_size # SMART states both, and this is the clearest 512e signature there is smartctl -a /dev/sda | grep -i \u0026#34;sector size\u0026#34; 512 bytes logical, 4096 bytes physical è un disco 512e. Numeri uguali significano nativo: 512n se sono entrambi 512, 4Kn se sono entrambi 4096.\nE controlla che le partizioni siano davvero allineate:\nparted /dev/sda align-check optimal 1 ZFS, Ceph e dischi virtuali ZFS: imposta ashift=12 esplicitamente quando crei un pool, e non fidarti della dimensione dichiarata dal disco, perché su un 512e ti dirà 9 e sbaglierà. Non si può cambiare dopo.\nCeph: la dimensione minima di allocazione di BlueStore dovrebbe essere 4 KB sulla flash. Il Ceph moderno ha 4096 di default, ma le build più vecchie avevano default più alti (circa 16 KB su SSD e 64 KB su HDD), e questo si adatta male ai dischi di VM su RBD, perché emettono molte piccole scritture casuali da 4 KB, e una scrittura da 4 KB che finisce in un\u0026rsquo;unità di allocazione da 16 o 64 KB amplifica la scrittura e spreca il resto in imbottitura. Viene fissata alla creazione dell\u0026rsquo;OSD, quindi va impostata prima di creare o ricostruire:\nceph config set global bluestore_min_alloc_size_ssd 4096 # new or rebuilt OSDs only Esiste un corrispondente bluestore_min_alloc_size_hdd. Gli OSD esistenti tengono ciò con cui sono stati costruiti, quindi cambiarlo significa ricostruirli.\nDischi virtuali: un guest vede ciò che l\u0026rsquo;hypervisor presenta, non il disco sottostante, quindi un disco 4Kn sotto una VM passa comunque al guest blocchi da 512 byte, a meno che tu non dica altrimenti. Tenere lo stack a 4K da cima a fondo significa dire a QEMU di presentare 4K, che in Proxmox è una riga di argomenti grezzi in /etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf:\nargs: -global scsi-hd.physical_block_size=4k -global scsi-hd.logical_block_size=4096 È quella riga a forzare davvero QEMU sul 4Kn per quei dischi: -global la applica a ogni dispositivo scsi-hd della VM, così al guest viene detto 4096 sia per il blocco logico sia per quello fisico, e partiziona e allinea di conseguenza.\nNon mettere tra virgolette l\u0026rsquo;intera stringa. Proxmox interpreta args: con Text::ParseWords::shellwords, quindi questo:\nargs: \u0026#34;-global scsi-hd.physical_block_size=4k -global scsi-hd.logical_block_size=4096\u0026#34; collassa in un unico argomento: le virgolette vengono rispettate e tolte, e QEMU riceve un\u0026rsquo;unica lunga opzione non interpretabile invece di quattro. Senza virgolette, la stessa riga si divide in -global, scsi-hd.physical_block_size=4k, -global, scsi-hd.logical_block_size=4096, che è ciò che vuoi. È un errore facile da fare perché mettere le virgolette è l\u0026rsquo;istinto giusto su una riga di comando, e il guasto (una VM che non si avvia, lamentandosi dell\u0026rsquo;opzione) non riconduce alle virgolette.\nFallo prima di installare il sistema operativo del guest. Cambiare la dimensione del blocco di un disco sotto un sistema già installato può lasciarlo non avviabile, perché il layout delle partizioni e il bootloader sono stati scritti per settori da 512 byte. Nota anche che args: è una via di fuga per esperti, fuori dalla gestione della GUI, e l\u0026rsquo;interazione con la migrazione a caldo e gli snapshot va ricontrollata con la documentazione attuale di Proxmox.\nQuando il guest dice 512 e l\u0026rsquo;host dice 4K Questo è il caso che vale la pena capire bene, perché è ciò che ottieni di default dopo aver fatto tutto il lavoro qui sopra.\nQEMU presenta al guest blocchi logici da 512 byte se non gli si dice altrimenti, qualunque sia il dispositivo sottostante. Quindi puoi convertire a 4Kn ogni disco dell\u0026rsquo;host, e alle VM sopra verrà comunque detto 512, e ci crederanno.\nIl guest allora partiziona su confini di 512 byte perché può, ed emette I/O da 512 byte perché può. Ma il dispositivo dell\u0026rsquo;host adesso ha davvero un blocco logico da 4096 byte, e non accetterà una scrittura da 512 byte. Qualcosa deve riconciliare le due cose, e quel qualcosa è l\u0026rsquo;host: QEMU legge i 4 KB circostanti, ci fonde i 512 byte del guest e riscrive il tutto.\nNon hai eliminato l\u0026rsquo;emulazione. L\u0026rsquo;hai spostata dal firmware del disco al tuo hypervisor, dove costa CPU dell\u0026rsquo;host e un bounce buffer invece di cicli del disco.\nCon cache=none non è nemmeno una penalità leggera. O_DIRECT su un dispositivo 4Kn richiede offset e lunghezze allineati a 4 KB, quindi una scrittura del guest sotto i 4K non può semplicemente passare: l\u0026rsquo;allineamento deve essere sistemato in QEMU prima ancora che l\u0026rsquo;I/O venga emesso.\nE il caso del disallineamento ritorna uno strato più su. Un guest partizionato con granularità di 512 byte mette le sue scritture di filesystem da 4 KB a offset che scavalcano due blocchi da 4 KB dell\u0026rsquo;host, quindi ognuna diventa due read-modify-write sull\u0026rsquo;host. Lo stesso guasto di una partizione disallineata su un disco 512e nudo, solo che adesso avviene dentro una VM dove nessuno lo sta cercando.\nQuindi la regola è: se l\u0026rsquo;host è 4Kn, presenta 4K anche al guest, e fallo prima che ci vada sopra il sistema operativo.\nL\u0026rsquo;eccezione è il supporto del guest, che è il motivo stesso per cui il 512e esiste:\nI guest Linux gestiscono il 4Kn senza storie. Windows supporta il 4Kn per i volumi di dati da Windows 8 e Server 2012 in poi, e l\u0026rsquo;avvio da 4Kn richiede UEFI. Qualunque cosa più vecchia (Windows 7 e precedenti) non può fare il 4Kn per niente. Per quelli, un disco virtuale che presenta 512 è il prezzo per farli girare, e l\u0026rsquo;host farà la riconciliazione. Se la cosa conta, tieni quei guest su uno storage dove ti costa meno, invece che sul tuo tier più veloce. Controlla che cosa ha davvero ottenuto il guest, da dentro il guest:\nlsblk -o NAME,LOG-SEC,PHY-SEC 512 lì su un host 4Kn significa che la riconciliazione descritta sopra sta avvenendo a ogni scrittura non allineata.\nRiferimenti OpenZFS — Workload Tuning — ashift, perché 2^ashift è il più piccolo I/O possibile su un vdev, e l\u0026rsquo;osservazione che «many devices misreport their sector sizes» nvme-format man page — --lbaf, --namespace-id, --ses e --force sg_format man page — --size con --format, l\u0026rsquo;opzione di formato veloce e l\u0026rsquo;avvertimento sul format-corrupt openSeaChest — le utility open source di Seagate per i dischi, comprese --setSectorSize e --showSupportedFormats openSeaChest wiki — Format, Fast Format, And Sector Sizes — quale trasporto usa quale comando, e quando si applica il formato veloce nvmecontrol(8) — l\u0026rsquo;equivalente su FreeBSD Linux block layer documentation — come il kernel modella le dimensioni dei blocchi logici e fisici ","permalink":"https://blogs.damiendye.uk/it/proxmox/block-sizes-4kn-512e/","summary":"I dischi 512e presentano settori da 512 byte che non hanno, e il firmware compensa la differenza a ogni scrittura non allineata. Quanto costa tutto questo sul supporto, nell\u0026rsquo;host e in write amplification, perché le scritture dirette e sincrone sono il caso peggiore, e come convertire un intero parco dischi a 4Kn.","title":"4Kn, 512e e 512n: perché il 4K nativo vince, e quanto costa l'emulazione"},{"content":"Cos\u0026rsquo;è un BAR, e perché le GPU lo hanno superato Ogni dispositivo PCIe espone uno o più Base Address Register. Un BAR dice al sistema quanto spazio di indirizzi vuole il dispositivo, e il firmware lo mappa nella mappa di memoria dell\u0026rsquo;host. Una volta mappato, la CPU raggiunge la memoria del dispositivo con normali load e store.\nLa dimensione di un BAR un tempo era fissata nel silicio. Il firmware la leggeva all\u0026rsquo;accensione e la discussione finiva lì.\nAndava bene finché i BAR erano piccoli. Una scheda di rete vuole qualche decina di kilobyte per i suoi registri. Un controller NVMe vuole da 16KB a 64KB.\nLe schede grafiche hanno rotto questo accordo. Una scheda moderna ha 8, 12, 16 o 24GB di memoria video, e la cosa ovvia è mapparla tutta così che la CPU possa scrivere ovunque. I BAR fissi non potevano esprimerlo, quindi la convenzione è diventata una piccola finestra, di solito 256MB, che il driver riposiziona sul framebuffer, copiando attraverso di essa un pezzo alla volta. Funziona. È solo una quantità assurda di contabilità per raggiungere memoria che hai già comprato e montato.\nUn'apertura fissa mostra una fetta alla volta; Resizable BAR mappa tutto BAR fisso: una finestra da 256 MB 24 GB di VRAM, disegnati a fette la finestra Il driver sposta la finestra e copia attraverso, una fetta alla volta. Fette illustrative, non in scala. Resizable BAR: tutto quanto gli stessi 24 GB, mappati una volta un BAR copre tutto La CPU scrive dove vuole. Nessuna finestra da spostare. L\u0026rsquo;apertura da 256MB è meno un limite di banda che una tassa di contabilità: il driver passa il tempo a spostare la finestra invece di spostare dati. Cosa cambia il Resizable BAR Il Resizable BAR è una capability PCIe che permette di negoziare la dimensione di un BAR invece di fissarla. Il dispositivo annuncia le dimensioni che supporta, e il firmware o il sistema operativo ne programma una.\nPer una GPU significa che tutto il framebuffer può essere mappato in una volta. Il driver smette di sfogliare una finestra e scrive dove intende scrivere. Il kernel riporta la capability come Physical Resizable BAR, ed è indipendente dal produttore. Una scheda AMD funziona con essa su una piattaforma Intel e viceversa.\nCosa fanno davvero i tre produttori La parte interessante è che i produttori non sono d\u0026rsquo;accordo su quanto conti.\nTre vendor, una capacità, tre posizioni diverse Intel Arc / Arc Pro OBBLIGATORIO “Required to get a good experience with Arc” Spento, i picchi di frametime che c'erano già si ingrandiscono. Piattaforme: Core di 10ª gen. e successivi, quasi tutti i Ryzen 3000, tutti i Ryzen 5000. NVIDIA PROFILO PER GIOCO Dalla serie RTX 30, marzo 2021 “A few percent, up to 12%”: e alcuni titoli rallentano, quindi il driver lo attiva solo dove è risultato più veloce. Serviva un update di VBIOS + SBIOS. AMD Radeon SMART ACCESS MEMORY Stessa capacità, venduta con un marchio Lanciata con RX 6000 e Ryzen 5000 come coppia, ma la capacità è PCIe standard e funziona tra vendor diversi. Meno uniforme su Vega e Polaris. La capacità è identica nei tre casi: cambia se il vendor la tratta come un prerequisito, un'ottimizzazione da applicare con criterio, o una funzione di prodotto. Stessa capability, tre posizioni diverse. Intel la tratta come un prerequisito; NVIDIA la consegna attiva solo per i giochi che ha testato; AMD la vende come una funzione. Intel Arc e Arc Pro: Intel la dice obbligatoria Intel è quella categorica. La sua guida dice che il Resizable BAR è «required to get a good experience with Intel® Arc™ hardware». È un linguaggio insolitamente forte per una funzione di piattaforma, e mostra come è costruito il driver Arc più che una scelta di marketing.\nSul lato dei sintomi, Intel descrive l\u0026rsquo;effetto di spegnerlo in termini di costanza più che di medie: con «ReBAR off» si ha che «will generally result in spikes that were already there getting bigger». È un argomento sulla stabilità dei frametime, ed è lo stesso tipo di problema dell' effetto dell\u0026rsquo;ASPM sulle code di latenza. La media lo nasconde.\nIntel elenca come piattaforme supportate i processori Intel Core di 10ª generazione e successivi, la maggior parte dei Ryzen serie 3000 e tutti i Ryzen 5000, e la tratta come una funzione del BIOS della scheda madre che devi andare ad abilitare.\nLa conseguenza pratica per Arc e Arc Pro è semplice. Se hai messo una scheda Arc in una macchina e le prestazioni deludono o sono irregolari, controlla questo prima di qualsiasi altra cosa. Per questo, su quelle schede non è tanto una manopola di tuning quanto un prerequisito.\nNVIDIA: da Ampere in poi, e solo dove aiuta NVIDIA ha aggiunto il supporto per le schede e i portatili GeForce RTX serie 30 a marzo 2021. Per farlo funzionare servivano un VBIOS supportato, CPU e scheda madre compatibili, un aggiornamento del firmware della scheda madre e un driver recente. La RTX 3060 è uscita già con il supporto; 3060 Ti, 3070, 3080 e 3090 potevano aver bisogno di un aggiornamento del firmware per averlo.\nIl modo in cui NVIDIA presenta le prestazioni è piacevolmente poco glamour. Ha trovato che «some titles benefit from a few percent, up to 12%» mentre «there are also titles that see a decrease in performance».\nLa sua risposta è il dettaglio che vale la pena conoscere: invece di lasciarlo attivo ovunque, NVIDIA testa i titoli in anticipo e usa profili per gioco per abilitare il Resizable BAR solo dove ha misurato un guadagno. Quindi su una scheda NVIDIA, «il ReBAR è attivo?» ha una risposta diversa per ogni applicazione, e un benchmark che non mostra niente può essere semplicemente un titolo che il driver ha deciso di lasciare stare.\nAMD: Smart Access Memory è la stessa cosa Il marchio AMD per questa funzione è Smart Access Memory, introdotto insieme alla serie Radeon RX 6000 e alle CPU Ryzen 5000. Il marketing suggerisce un\u0026rsquo;accoppiata CPU AMD più GPU AMD, ed è così che è stato lanciato, ma la capability sottostante è quella PCIe standard. Abilita il Resizable BAR nel firmware con una scheda Radeon in una macchina Intel e ottieni la stessa funzione senza il marchio.\nAnche le schede Radeon Pro serie W lo supportano. Sulle architetture più vecchie, Vega e Polaris, il supporto è più irregolare, ed è anche lì che vivono i problemi con la virtualizzazione.\nResizable BAR e lavoro di IA È qui che la funzione viene fraintesa, quindi conviene essere chiari su cosa tocca.\nIl Resizable BAR cambia il modo in cui la CPU raggiunge la memoria della GPU. Quello è il percorso di trasferimento: caricare i pesi del modello, spingere i batch, rileggere i risultati. Non tocca la banda di memoria propria della GPU, e non rende più veloce una moltiplicazione di matrici.\nIl riassunto onesto è quindi che influisce sul caricamento e sull\u0026rsquo;alimentazione di un modello, non sull\u0026rsquo;aritmetica. Per un modello grande, la copia da host a dispositivo al caricamento è un costo reale, e un BAR a piena dimensione permette alla CPU di scrivere direttamente nella memoria del dispositivo invece di fare la spola attraverso un oblò da 256MB. Nel regime stazionario di un\u0026rsquo;inferenza, dove i pesi sono già residenti e il lavoro è limitato dal calcolo, non aspettarti niente.\nTre dettagli valgono la pena.\nArc Pro per l\u0026rsquo;IA eredita il verdetto di Intel. Se Intel dice che la scheda ha bisogno del Resizable BAR per una buona esperienza, questo vale per una scheda che esegue oneAPI o PyTorch tanto quanto per una che esegue un gioco. Le schede Arc e Arc Pro che fanno inferenza devono averlo abilitato, punto.\nSu NVIDIA, il numero che ti serve è BAR1. BAR1 è la finestra visibile dall\u0026rsquo;host sulla memoria del dispositivo, ed è da lì che passano le allocazioni mappate dall\u0026rsquo;host e il GPUDirect RDMA:\n# How much device memory is actually host-visible nvidia-smi -q | grep -A3 \u0026#34;BAR1 Memory Usage\u0026#34; Una scheda da data center nasce già con un BAR1 grande. Su una scheda desktop, è il Resizable BAR a rendere quella finestra grande invece che minuscola. Se fai RDMA direttamente da una NIC alla memoria della GPU, non è un dettaglio.\nNon confonderlo con il requisito di ROCm. I requisiti di sistema di ROCm di AMD chiedono CPU che supportino le PCIe atomics, «modern CPUs after the release of 1st generation AMD Zen CPU and Intel™ Haswell», e non dicono nulla sulla dimensione del BAR. Sono due requisiti di piattaforma diversi che stanno nello stesso menu del BIOS, e la gente li confonde di continuo. Controlla quello che ti serve davvero.\nIl guasto che colpisce più duramente le build per l\u0026rsquo;IA non riguarda affatto le prestazioni, ed è trattato più sotto: diverse GPU con BAR grandi in una sola macchina possono esaurire lo spazio di indirizzi.\nCosa serve perché funzioni Quattro cose, tutte a livello di firmware:\nResizable BAR abilitato nel firmware della scheda madre. Spesso è disattivato di default. Above 4G Decoding abilitato. Un BAR da 24GB non entra sotto la soglia dei 4GB, quindi la piattaforma deve essere disposta ad allocare spazio di indirizzi sopra di essa. Attivalo anche senza GPU. Non costa nulla. Avvio UEFI, con CSM disattivato. La modalità di compatibilità legacy e i BAR grandi non vanno d\u0026rsquo;accordo. Firmware e driver aggiornati, soprattutto su schede madri e schede video della transizione 2020–2021, dove il supporto è arrivato con un aggiornamento e non al lancio. Un BAR grande ci sta solo sopra i 4GB, e l'apertura del guest deve bastare a contenerlo Dove può stare davvero un BAR ridimensionato RAM di sistema 0 buco MMIO a 32 bit 4 GB MMIO a 64 bit alto GPU 0 BAR da 24 GB GPU 1: 24 GB GPU 2: 24 GB GPU 3: 24 GB Affollato, e largo solo 4 GB in tutto Un BAR da 24 GB qui non ci va. Uno da 256 MB a malapena. Usabile solo con Above 4G Decoding Un'impostazione del firmware. Spenta di default su alcune schede, e senza un BAR grande non viene mai allocato. Ogni scheda vuole il suo spazio quassù Quattro schede da 24 GB vogliono 96 GB di MMIO a 64 bit, più tutto il resto sul bus. Non tutti i firmware delle schede consumer ce la fanno. Il segnale: con due schede va, con quattro una non si inizializza, e dmesg dice che non c'è spazio per il BAR. Non in scala: la regione a 64 bit è enormemente più grande dei 4 GB sotto, ed è proprio questo il punto. Above 4G Decoding è ciò che rende utilizzabile la regione superiore, e ogni scheda ha bisogno del proprio spazio lassù: è lì che le build multi-GPU per l\u0026rsquo;IA sbattono contro il muro. Come controllare su Linux Se la scheda ha la capability, e quali dimensioni offre:\n# Substitute your card\u0026#39;s address from lspci lspci -vvs 0000:XX:00.0 | grep -A6 \u0026#34;Physical Resizable BAR\u0026#34; Il kernel la espone anche in sysfs, un file per ogni BAR ridimensionabile:\ncat /sys/bus/pci/devices/0000:XX:00.0/resource1_resize Quel valore è una bitmap delle dimensioni supportate, non una dimensione. Il bit 0 significa 1MB, il bit 1 significa 2MB, il bit 2 significa 4MB, e la dimensione per un dato bit è 2 ^ (bit + 20). Quindi 00000000000001c0 ha i bit 6, 7 e 8 impostati, cioè il BAR può essere di 64MB, 128MB o 256MB.\nPer vedere cosa è davvero in vigore, leggi le regioni assegnate:\nlspci -vvs 0000:XX:00.0 | grep -i Region Una scheda che lavora con l\u0026rsquo;intero framebuffer mappato mostra una regione pari alla sua VRAM invece di una da 256MB.\nRidimensionare a mano Puoi scrivere tu stesso la posizione del bit:\n# bit 7 -\u0026gt; 2 ^ (7 + 20) = 128MB echo 7 \u0026gt; /sys/bus/pci/devices/0000:XX:00.0/resource1_resize Le condizioni sono rigide, e vale la pena leggerle prima di provarci su una macchina a cui tieni. Prima bisogna scollegare ogni driver dal dispositivo. I dispositivi fratelli sotto lo stesso bridge padre potrebbero dover essere rimossi via software. Su un dispositivo VGA, scrivere un valore di ridimensionamento smonta i driver di console di basso livello. Qualunque cosa tenga aperti i file sysfs resourceN deve mollarli.\nLa documentazione del kernel è anche brusca sul risultato: il successo non è garantito. Il ridimensionamento fallisce se non c\u0026rsquo;è spazio di indirizzi per collocare il BAR più grande. Il che ti riporta dritto ad Above 4G Decoding.\nQuando va storto dmesg dice che non riesce ad assegnare il BAR. Messaggi della forma BAR 0: no space for [mem size ...] significano che l\u0026rsquo;allocazione è fallita, non che la scheda è guasta. Above 4G Decoding è la prima cosa da controllare.\nDiverse GPU e una di loro non si inizializza. È il guasto delle build multi-GPU e per l\u0026rsquo;IA. Quattro schede con BAR da 24GB richiedono 96GB di spazio MMIO a 64 bit, più tutto il resto, e non tutti i firmware delle schede madri consumer ci riescono. Il sintomo è che la macchina va bene con due schede e crolla con quattro.\nLe prestazioni sono calate. Su NVIDIA può essere la conclusione del driver stesso, visto che lo abilitano titolo per titolo proprio perché alcuni carichi peggiorano. Sugli altri, misura in entrambi i modi invece di supporre.\nNon è cambiato niente. È l\u0026rsquo;esito più probabile per un carico che non è mai stato limitato dalla finestra della CPU sulla VRAM.\nPassare una GPU con BAR grande a una VM Vale la pena segnalarlo perché sorprende: un guest non eredita la mappa di memoria dell\u0026rsquo;host. Il firmware della VM costruisce la propria apertura MMIO a 64 bit, e quella predefinita di OVMF è molto più piccola di quanto serva a una GPU moderna, quindi la scheda o non si inizializza o ripiega su un BAR piccolo. È un argomento di Proxmox e QEMU più che di GPU, e si trova nell' articolo sulla tassa dell\u0026rsquo;IOMMU insieme ai requisiti sul tipo di macchina di Usa sempre Q35, non i440fx.\nRiferimenti Intel — Resizable BAR and Intel Arc Graphics — la dichiarazione di Intel che è obbligatorio per una buona esperienza su Arc, e l\u0026rsquo;elenco delle piattaforme supportate NVIDIA — Resizable BAR support for GeForce RTX 30 Series — i requisiti, l\u0026rsquo;intervallo misurato e l\u0026rsquo;approccio a profili per gioco AMD — Smart Access Memory — il marchio AMD e l\u0026rsquo;accoppiata di piattaforma Linux kernel sysfs-bus-pci ABI — resourceN_resize — la bitmap, il dimensionamento 2 ^ (bit + 20) e le condizioni di unbind ROCm system requirements — il requisito delle PCIe atomics che viene confuso con questo ","permalink":"https://blogs.damiendye.uk/it/proxmox/pcie-resizable-bar/","summary":"Il Resizable BAR permette alla CPU di mappare tutto il framebuffer di una GPU invece di sbirciarlo da una finestra di 256MB. Intel lo definisce obbligatorio per Arc, NVIDIA lo attiva gioco per gioco, AMD lo vende come Smart Access Memory, e per il lavoro di IA cambia il trasferimento, non i calcoli.","title":"PCIe Resizable BAR e le GPU moderne: Intel Arc, NVIDIA e AMD"},{"content":"Il problema È saltato fuori durante un lavoro per un cliente, mentre progettavamo un deployment di Proxmox VE con passthrough NVMe per un carico sensibile alla latenza. Il cliente aveva fatto i suoi benchmark prima della call. Sull\u0026rsquo;host, fio contro il disco NVMe dava 700K IOPS in lettura casuale con una latenza di completamento sotto i 10µs. Dentro la VM, con lo stesso disco e lo stesso test, ne otteneva più o meno la metà.\nLe cose ovvie le aveva già controllate. Il disco non era cambiato. Il firmware non era cambiato. Lo slot PCIe non si era spostato. Cominciava a chiedersi se il passthrough fosse proprio l\u0026rsquo;approccio sbagliato.\nNon lo era. Quello che vedeva è la tassa IOMMU. Coglie la gente impreparata perché nessuno te ne parla prima che tu ti sia impegnato nel design con passthrough. La buona notizia è che la maggior parte dell\u0026rsquo;overhead si recupera, una volta capito da dove arriva.\nNel dettaglio I problemi da risolvere Dare a una VM l\u0026rsquo;accesso diretto a un dispositivo PCIe fisico sembra semplice. In pratica è uno dei problemi più difficili della virtualizzazione di sistema. Alcune cose che sul bare metal funzionano da sole diventano pericolose quando un dispositivo è condiviso tra un host e un guest.\nIsolamento del DMA Questo è il problema di fondo.\nI dispositivi PCIe non passano dalla CPU per leggere e scrivere la memoria. Usano il Direct Memory Access. Scrivono direttamente agli indirizzi fisici della RAM. Sul bare metal va bene. Il dispositivo e il sistema operativo si fidano l\u0026rsquo;uno dell\u0026rsquo;altro.\nCon la virtualizzazione, la VM guest ha una sua visione della memoria fisica. Gli indirizzi che il driver del guest passa al controller NVMe sono indirizzi fisici del guest. Non corrispondono alle stesse posizioni nella RAM dell\u0026rsquo;host. Se il dispositivo li usa direttamente, legge e scrive la memoria sbagliata. E corrompe l\u0026rsquo;host, le altre VM, o entrambi.\nPeggio ancora, un driver guest malevolo o difettoso potrebbe programmare apposta il dispositivo per fare DMA in qualsiasi parte della memoria dell\u0026rsquo;host. Di fatto è un accesso root all\u0026rsquo;intera macchina senza mai sfruttare un bug dell\u0026rsquo;hypervisor.\nLa soluzione è l\u0026rsquo;IOMMU: un\u0026rsquo;unità hardware di traduzione (Intel VT-d, AMD-Vi) che sta tra ogni dispositivo PCIe e la memoria principale. Mantiene le sue tabelle delle pagine, separate da quelle della CPU. Ogni richiesta DMA del dispositivo passa dall\u0026rsquo;IOMMU, che traduce gli indirizzi fisici del guest in indirizzi fisici dell\u0026rsquo;host e blocca qualsiasi accesso fuori dalle regioni di memoria assegnate al guest.\nSenza IOMMU, un passthrough sicuro è impossibile. Con l\u0026rsquo;IOMMU, il dispositivo è contenuto.\nRaggruppamento dei dispositivi L\u0026rsquo;IOMMU non isola i singoli dispositivi. Isola dei gruppi.\nLa specifica PCIe definisce gli Access Control Services (ACS), che stabiliscono se i dispositivi sullo stesso bus possono parlarsi direttamente, con DMA peer-to-peer, senza passare dal root complex dove sta l\u0026rsquo;IOMMU. Se due dispositivi condividono uno switch PCIe che non applica l\u0026rsquo;ACS, uno dei due può fare DMA nello spazio di memoria dell\u0026rsquo;altro, scavalcando del tutto l\u0026rsquo;IOMMU.\nIl kernel raggruppa in un unico gruppo IOMMU i dispositivi che potenzialmente possono raggiungersi senza il controllo dell\u0026rsquo;IOMMU. Se il tuo controller NVMe condivide un gruppo con un altro dispositivo, passare solo l\u0026rsquo;NVMe rompe il modello di isolamento. L\u0026rsquo;altro dispositivo del gruppo potrebbe ancora essere usato come canale laterale per aggirare l\u0026rsquo;IOMMU.\nL\u0026rsquo;hardware di classe server, con un vero supporto ACS su ogni bridge e switch, di solito dà a ogni dispositivo il suo gruppo. Le schede consumer e workstation spesso ammucchiano più dispositivi insieme, perché il root complex PCIe non implementa l\u0026rsquo;ACS su ogni porta.\nProxmox include una patch del kernel, pcie_acs_override, che dice al kernel di trattare ogni dispositivo come isolato a prescindere dal supporto ACS dell\u0026rsquo;hardware. In pratica funziona, ma sta mentendo al kernel sulla topologia dell\u0026rsquo;hardware. Su un sistema in produzione, gruppi puliti sostenuti da un vero ACS hardware sono sempre preferibili.\nConsegna degli interrupt Sul bare metal, quando un controller NVMe completa un\u0026rsquo;operazione di IO, lancia un interrupt MSI-X direttamente alla CPU. La CPU lo gestisce in qualche centinaio di nanosecondi.\nCon la virtualizzazione, quell\u0026rsquo;interrupt deve arrivare al guest, non all\u0026rsquo;host. L\u0026rsquo;approccio ingenuo è intercettare ogni interrupt nell\u0026rsquo;hypervisor, provocare una VM exit, iniettare l\u0026rsquo;interrupt nel guest e riprendere. Funziona, ma ogni VM exit costa 5–20µs. A IOPS alti, centinaia di migliaia di interrupt al secondo, l\u0026rsquo;overhead è notevole.\nLa soluzione hardware sono i posted interrupt. APICv di Intel e AVIC di AMD permettono all\u0026rsquo;IOMMU di scrivere l\u0026rsquo;interrupt direttamente nella pagina APIC virtuale del guest, senza causare alcuna VM exit. Il guest vede l\u0026rsquo;interrupt come se arrivasse da hardware bare metal. L\u0026rsquo;overhead scende a qualche centinaio di nanosecondi.\nNon tutte le piattaforme supportano i posted interrupt. CPU più vecchie, alcuni chipset workstation e alcune versioni di BIOS non espongono la funzione. Quando manca, ogni interrupt passa dal percorso lento, e non c\u0026rsquo;è un rimedio software.\nReset del dispositivo Quando una VM si spegne o va in crash, il dispositivo passato deve tornare a uno stato pulito e noto. Altrimenti non può essere riassegnato a un\u0026rsquo;altra VM né ripreso dall\u0026rsquo;host.\nSul bare metal, il sistema operativo spegne in modo ordinato il driver del dispositivo. Con il passthrough, il guest potrebbe andare in crash, l\u0026rsquo;utente potrebbe forzare lo stop della VM, o l\u0026rsquo;hypervisor potrebbe uccidere il processo. Il dispositivo potrebbe essere a metà di un trasferimento, con operazioni DMA in volo.\nPer questo PCIe definisce il Function Level Reset (FLR), un modo per resettare una singola funzione del dispositivo senza toccare il resto del bus. I controller NVMe in genere supportano l\u0026rsquo;FLR e lo gestiscono bene. Le GPU sono notoriamente pessime in questo, ma è un altro articolo.\nSe l\u0026rsquo;FLR non è supportato, il ripiego è un secondary bus reset, che resetta tutto quello che sta dietro quel bridge PCIe. Se sul bridge ci sono altri dispositivi, vengono resettati anche loro. Nel caso peggiore, l\u0026rsquo;unico modo per riprendersi il dispositivo è un riavvio completo dell\u0026rsquo;host.\nOverhead della traduzione degli indirizzi L\u0026rsquo;IOMMU risolve il problema della sicurezza. Per questo non è opzionale. Ma ne introduce uno di prestazioni.\nOgni operazione DMA ora passa per un livello in più di traduzione degli indirizzi. L\u0026rsquo;IOMMU ha il suo TLB, l\u0026rsquo;IOTLB, e quando c\u0026rsquo;è un hit l\u0026rsquo;overhead è piccolo. Quando c\u0026rsquo;è un miss, l\u0026rsquo;IOMMU deve percorrere le sue tabelle delle pagine, e questo aggiunge latenza vera a ogni operazione di IO coinvolta.\nQuesta è la tassa IOMMU. Il resto dell\u0026rsquo;articolo serve a capire da dove viene e come ridurla al minimo.\nOgni DMA passa dall'IOMMU: un hit costa poco, un miss percorre le tabelle delle pagine VM guest driver NVMe passa indirizzi fisici del guest controller NVMe scrive in memoria, senza CPU DMA IOMMU IOTLB le sue tabelle delle pagine traduce, poi permette o rifiuta Memoria dell'host pagine di questa VM la traduzione arriva qui host e altre VM irraggiungibili per progetto Senza IOMMU, il controller scriverebbe gli indirizzi del guest direttamente nella RAM dell'host e corromperebbe qualunque cosa ci sia. IOTLB hit : la traduzione è già in cache e non costa quasi niente. IOTLB miss : l'IOMMU percorre le sue tabelle delle pagine, e quella latenza cade su questo IO. Questa è la tassa. Niente arriva in memoria senza passare da qui. Questa è la garanzia di sicurezza, e la traduzione che esegue è il costo. Mappatura dei BAR e spazio degli indirizzi Ogni dispositivo PCIe espone uno o più Base Address Register (BAR) che mappano i registri interni e la memoria del dispositivo nello spazio di indirizzi MMIO dell\u0026rsquo;host. La CPU dell\u0026rsquo;host accede al dispositivo attraverso queste mappature. Perché il passthrough funzioni, l\u0026rsquo;hypervisor deve presentarle correttamente al guest.\nTradizionalmente, le dimensioni dei BAR erano fissate all\u0026rsquo;avvio dal BIOS e stavano dentro la vecchia finestra MMIO a 32 bit sotto i 4GB. Funzionava finché i BAR erano piccoli. Le GPU moderne hanno cambiato il quadro. Un framebuffer da 24GB ha bisogno di un BAR da 24GB, che non entra in uno spazio di indirizzi a 32 bit.\nIl Resizable BAR (ReBAR), venduto anche come AMD Smart Access Memory (SAM), è una funzione PCIe che permette di rinegoziare la dimensione del BAR dopo l\u0026rsquo;avvio. Per le GPU è una funzione importante. Invece di accedere al framebuffer da una finestra di 256MB, scorrendolo a pezzi, l\u0026rsquo;host mappa tutta la VRAM in una volta.\nPer l\u0026rsquo;NVMe l\u0026rsquo;impatto diretto è minore. I BAR dei controller NVMe sono di solito da 16KB a 64KB per l\u0026rsquo;insieme dei registri del controller (BAR0). La specifica NVMe definisce un Controller Memory Buffer (CMB) che può esporre un BAR più grande per code di submission residenti sull\u0026rsquo;host, ma la maggior parte dei dischi non lo implementa. Il ReBAR non cambia il throughput NVMe come fa per le GPU.\nIl motivo per cui conta in un contesto di passthrough NVMe è l\u0026rsquo;ambiente PCIe condiviso. Se passi un disco NVMe insieme a una GPU sullo stesso host, il BAR ridimensionato della GPU ha bisogno di spazio di indirizzi oltre il limite dei 4GB. Il BIOS, l\u0026rsquo;IOMMU e la topologia PCIe virtuale devono tutti farci posto. Sbagliare l\u0026rsquo;allocazione dello spazio di indirizzi significa dispositivi che non si inizializzano, e il passthrough NVMe che fallisce insieme a tutto il resto.\nEsposizione alla perdita di alimentazione Su un disco virtuale, l\u0026rsquo;hypervisor e lo strato di storage gestiscono l\u0026rsquo;ordine delle scritture e la coerenza dopo un crash. Con il passthrough, il guest parla direttamente con la flash. Se l\u0026rsquo;host perde l\u0026rsquo;alimentazione a metà scrittura, è quello che il firmware del controller NVMe fa, o non fa, con la sua cache di scrittura a decidere se perdi dati.\nI dischi NVMe enterprise hanno condensatori di power loss protection (PLP) che svuotano la cache di scrittura in sicurezza durante un\u0026rsquo;interruzione di corrente. I dischi consumer senza PLP potrebbero non farlo. Con il passthrough non c\u0026rsquo;è una rete di sicurezza dell\u0026rsquo;hypervisor tra il guest e l\u0026rsquo;hardware.\nPer un carico in produzione, un disco enterprise con PLP non è opzionale.\nCompromessi operativi Il passthrough toglie anche funzioni che i dischi virtuali danno.\nUn dispositivo passato è fisicamente imbullonato a un host specifico. La VM non può essere migrata a caldo mentre il dispositivo è collegato. In un cluster Proxmox con HA, un nodo che cade significa che la VM va giù e riparte a freddo su un altro nodo. Non c\u0026rsquo;è un failover trasparente.\nIl disco è anche invisibile a vzdump e a Proxmox Backup Server. Non finirà negli snapshot della VM né nei backup pianificati. Prima che il carico vada in produzione serve una strategia di backup separata: a livello di guest, di filesystem o di applicazione.\nCome funziona davvero il passthrough VFIO Quando passi un dispositivo PCIe a una VM, l\u0026rsquo;hypervisor dà al guest il controllo diretto dei registri MMIO del dispositivo. Il driver del guest parla con il controller NVMe come se girasse su bare metal. Quella parte è quasi nativa. L\u0026rsquo;accesso ai registri MMIO passa dalle Extended Page Tables (EPT su Intel, NPT su AMD) e di solito si completa senza VM exit.\nIl costo compare nel percorso DMA. Ogni operazione DMA passa dall\u0026rsquo;IOMMU per la traduzione degli indirizzi e, come descritto sopra, quella traduzione ha un prezzo. Soprattutto sui miss dell\u0026rsquo;IOTLB.\nPerché i benchmark sembrano peggio della realtà Qui è dove quasi tutti sbagliano i test.\nUn thread del forum Proxmox da cui è nato questo articolo aveva utenti che lanciavano fio con iodepth=1. A quella queue depth, fio invia un IO, aspetta che si completi, poi invia il successivo. Il test misura soltanto la latenza per IO. Ogni microsecondo di overhead IOMMU si vede per intero.\nI numeri di quel thread raccontano la storia con chiarezza. Sul bare metal la latenza di completamento era in media intorno ai 10µs. Dentro la VM era in media intorno ai 28µs. Quei ~18µs in più per IO sono l\u0026rsquo;overhead di traduzione dell\u0026rsquo;IOMMU. A iodepth=1 dimezzano direttamente il throughput, perché il throughput è pari a 1 / latency quando c\u0026rsquo;è un solo IO in volo.\nPorta la queue depth a 32 o 64, che è il modo in cui i dischi NVMe sono progettati per lavorare, e il quadro cambia. Con più IO in volo, l\u0026rsquo;overhead IOMMU si ammortizza su tutti. Il controller elabora i completamenti mentre avvengono nuove traduzioni. Il throughput torna a pochi punti percentuali dal bare metal.\nLa conclusione pratica è questa. Se il tuo carico gira a queue depth sopra 4, la penalità IOMMU sul throughput è probabilmente trascurabile. Questo copre la maggior parte dei carichi di database, virtualizzazione e storage. Se il tuo carico è sensibile alla latenza a queue depth basse, certe applicazioni real-time o operazioni sincrone sui metadati, la sentirai.\nLa penalità IOMMU è più un artefatto della queue depth che un tetto al throughput Throughput della VM rispetto al bare metal qui vivono i carichi realistici 0% 25% 50% 75% 100% il benchmark che fanno tutti iodepth=1 misura la pura latenza per IO, quindi 10 µs contro 28 µs si vedono per intero a pochi punti percentuali 1 2 4 8 16 32 64 queue depth (fio iodepth) Indicativo, dalle cifre di 10 µs / 28 µs dell'articolo stesso. Stesso hardware, stesso test, stesso overhead: cambia solo la queue depth. L\u0026rsquo;overhead è lo stesso in ogni punto di questa curva. Cambia solo quanti IO sono in volo su cui ammortizzarlo. Fai girare i benchmark a queue depth realistiche prima di concludere che il passthrough è troppo lento:\n# Bare metal baseline — run on the host before binding to vfio-pci fio --name=randread --ioengine=libaio --direct=1 --bs=4k \\ --iodepth=32 --numjobs=4 --rw=randread --size=1G \\ --filename=/dev/nvme0n1 --runtime=30 --time_based \\ --group_reporting # Same test inside the VM after passthrough fio --name=randread --ioengine=libaio --direct=1 --bs=4k \\ --iodepth=32 --numjobs=4 --rw=randread --size=1G \\ --filename=/dev/nvme0n1 --runtime=30 --time_based \\ --group_reporting Confronta i percentili di clat (latenza di completamento) e le cifre di IOPS. A iodepth=32 con quattro job, la differenza dovrebbe essere di qualche punto percentuale, non del 50%.\nAllineamento NUMA Questo ha un articolo tutto suo. Vedi Allineamento NUMA su Proxmox VE: perché conta e come farlo bene.\nIn breve: sui sistemi multi-socket ogni dispositivo PCIe è cablato a un socket specifico. Se il disco NVMe è sul nodo NUMA 1 e le vCPU della VM sono fissate al nodo 0, ogni completamento DMA attraversa il collegamento tra i socket. Questo aggiunge 50–100ns per operazione. A IOPS alti, la differenza di throughput tra NUMA allineato e disallineato è del 20–30%.\nControlla con cat /sys/bus/pci/devices/0000:XX:00.0/numa_node, poi fissa le vCPU della VM a core dello stesso nodo con il parametro affinity nella configurazione della VM. Sui sistemi a socket singolo non è un problema.\nPCIe Active State Power Management (ASPM) Questo ha un articolo tutto suo. Vedi PCIe ASPM e perché disattivarlo per il passthrough.\nIn breve: l\u0026rsquo;ASPM permette ai link PCIe di entrare in stati a basso consumo quando sono inattivi. Con il passthrough, l\u0026rsquo;host controlla ancora il link fisico ma il dispositivo è del guest. Quando il guest invia IO e il link è addormentato, il tempo di risveglio aggiunge latenza. Il sintomo è un ventaglio largo nei percentili di clat. Il p99 può essere 5–10x più alto della media, mentre la media sembra a posto.\nDisattivalo sull\u0026rsquo;host con pcie_aspm=off nella riga di comando del kernel. Aggiungi anche disable_idle_d3=1 alle opzioni del modulo vfio-pci se il tuo controller NVMe ha problemi a recuperare gli stati di alimentazione. Il Samsung 990 EVO Plus è un colpevole noto.\nMaxPayloadSize (MPS) Questo ha un articolo tutto suo. Vedi PCIe MaxPayloadSize: prestazioni gratis per il passthrough.\nIn breve: i dispositivi PCIe trasferiscono i dati in Transaction Layer Packet. Il root complex virtuale di QEMU usa di default un payload massimo di 128 byte. La maggior parte dei dispositivi supporta 256 o 512 byte. Aggiungere pci=pcie_bus_perf alla riga di comando del kernel dell\u0026rsquo;host imposta l\u0026rsquo;MPS al massimo consentito dal bus padre di ciascun dispositivo. È un piccolo miglioramento di throughput, qualche punto percentuale nel migliore dei casi, ma è gratis e senza controindicazioni.\nResizable BAR e apertura MMIO Il problema della mappatura dei BAR descritto prima ha passi pratici sia sul lato BIOS sia sul lato VM.\nPrima di tutto, attiva Above 4G Decoding nel BIOS. Permette di mappare i BAR in uno spazio di indirizzi oltre il limite dei 4GB, cosa necessaria per qualsiasi dispositivo con BAR grandi. Attivalo anche per un passthrough solo NVMe. Non ha controindicazioni ed evita problemi se più avanti aggiungi una GPU o un altro dispositivo con BAR grandi.\nSe nel BIOS c\u0026rsquo;è il ReBAR, attiva anche quello. Non cambierà le prestazioni NVMe direttamente, ma permette alle GPU sullo stesso host di usare la mappatura completa del framebuffer.\nSul lato VM, il root complex virtuale Q35 di QEMU ha bisogno di una finestra MMIO a 64 bit abbastanza grande perché il guest veda i BAR ridimensionati. Di default OVMF alloca una finestra relativamente piccola. Per un passthrough solo NVMe va bene. I BAR NVMe ci stanno comodi. Ma se la VM ha sia un NVMe sia una GPU passati, aumenta l\u0026rsquo;apertura MMIO:\nargs: -fw_cfg name=opt/ovmf/X-PciMmio64Mb,string=65536 Questo dice a OVMF di allocare 64GB di spazio MMIO a 64 bit, abbastanza per la maggior parte dei framebuffer GPU insieme al piccolo BAR del controller NVMe.\nIl supporto ReBAR di QEMU sta migliorando ma non è ancora liscio. Alcune GPU AMD (Vega e successive) provocano errori del driver (Code 43 in Windows) con il ReBAR attivo sotto QEMU. Se ti capita, come primo passo disattiva il ReBAR nel BIOS. Il passthrough NVMe non ne risente in nessun caso.\nPer cosa fa il Resizable BAR dal lato GPU, e perché Intel lo considera obbligatorio su Arc mentre NVIDIA lo attiva gioco per gioco, vedi PCIe Resizable BAR e le GPU moderne.\nGestione degli interrupt Il problema della consegna degli interrupt descritto prima ha un passo pratico di tuning. I posted interrupt (APICv su Intel, AVIC su AMD) potrebbero non essere attivi di default.\nControlla se lo sono:\n# Intel — look for \u0026#34;Posted-Interrupts\u0026#34; in dmesg dmesg | grep -i \u0026#34;posted\u0026#34; # AMD — check AVIC support dmesg | grep -i \u0026#34;avic\u0026#34; Consegna degli interrupt intercettata contro posted interrupt Senza posted interrupt: il completamento fa il giro lungo NVMelancia MSI-X hypervisorlo intercetta iniezionenel guest il guest riprendee lo gestisce VM exit VM entry 5–20 µs per interrupt A qualche centinaio di migliaia di IOPS non è un errore di arrotondamento: è il costo dominante. Posted interrupt (Intel APICv / AMD AVIC): dritto dentro NVMelancia MSI-X IOMMUlo scrive direttamente pagina APIC virtuale del guest il guest vede solo un interrupt nessuna exit nessuna exit ~100s of ns Non c'è un rimedio software: i posted interrupt sono una capacità dell'hardware. Ma non sono sempre attivi di default, quindi verificali prima di concludere che il percorso lento sia inevitabile. Quattro passi e due VM exit, oppure una sola scrittura nella pagina APIC del guest. A IOPS alti la differenza smette di essere teorica. Sui sistemi AMD EPYC, attiva AVIC nel modulo KVM se non è attivo di default:\n# /etc/modprobe.d/kvm.conf options kvm_amd avic=1 Sui sistemi Intel, APICv con i posted interrupt di solito si attiva da solo quando VT-d è attivo.\nSe la tua piattaforma non supporta i posted interrupt, non c\u0026rsquo;è un rimedio software. È una capacità dell\u0026rsquo;hardware. Ma vale la pena verificare che sia davvero accesa prima di dare per inevitabile il percorso lento.\nAffinità degli interrupt e allineamento delle code I controller NVMe usano più coppie di code di submission e di completamento. Di solito una per core della CPU. Quando le vCPU della VM non sono allineate ai core fisici che gestiscono gli interrupt NVMe, i completamenti devono attraversare i core tramite interrupt tra processori. E questo aggiunge latenza.\nDentro il guest, controlla quante code di IO ha creato il driver NVMe e come sono mappate:\n# List NVMe IO queues cat /proc/interrupts | grep nvme # Check affinity for irq in $(grep nvme /proc/interrupts | awk \u0026#39;{print $1}\u0026#39; | tr -d \u0026#39;:\u0026#39;); do echo \u0026#34;IRQ $irq: $(cat /proc/irq/$irq/smp_affinity_list)\u0026#34; done Idealmente, l\u0026rsquo;interrupt di ogni coda di IO NVMe dovrebbe avere affinità con la vCPU che invia su quella coda. La maggior parte dei driver NVMe moderni lo gestisce da sé. Ma vale la pena verificarlo, soprattutto se hai fissato le vCPU a mano o hai ridotto il numero di vCPU sotto il numero di code del controller.\nUsa sempre Q35, non i440fx Questo merita un articolo tutto suo. Vedi Usa sempre Q35, non i440fx.\nIn breve: i440fx presenta un bus PCI legacy piatto. Q35 presenta un vero root complex PCIe. I dispositivi passati su i440fx appaiono come PCI legacy, e questo rompe la consegna degli interrupt MSI-X multi-coda. I controller NVMe hanno bisogno di MSI-X per la loro architettura a una coda per core. Senza, tutti i completamenti di IO passano da un solo interrupt e ottieni un collo di bottiglia a IOPS alti che nessun tuning del kernel potrà sistemare.\nIn Proxmox 8.x e successivi, Q35 è il default per le nuove VM. Se fai passthrough su una VM vecchia che è ancora i440fx, cambiala. RHEL 10 ha deprecato formalmente i440fx, e il resto dell\u0026rsquo;ecosistema KVM sta seguendo.\nMettere tutto insieme Ecco un riepilogo dei passi di tuning in ordine di impatto.\nI passi di tuning in ordine di impatto, e cosa cambia davvero ognuno in ordine di impatto cosa cambia 1 Allineamento NUMA 20–30% di throughput su un multi-socket. Niente altro qui si avvicina. THROUGHPUT 2 ASPM spento Toglie la latenza di risveglio dalla coda. La media cambia poco; il p99 sì. JITTER DI LATENZA 3 Queue depth realistiche Non cambia niente sulla macchina. Evita conclusioni sbagliate da iodepth=1. LA MISURA 4 Posted interrupt (APICv / AVIC) Da µs a ns per interrupt, ma solo se la piattaforma lo ha. Verifica, non presumere. COSTO PER INTERRUPT 5 MaxPayloadSize: pci=pcie_bus_perf Pochi punti percentuali. Gratis e senza rischi: impostalo, ma non aspettarti di vederlo. OVERHEAD SUL LINK 6 vfio-pci disable_idle_d3 Evita che un controller schizzinoso muoia in D3. Affidabilità, non velocità. AFFIDABILITÀ In classifica, e volutamente non come barre: non hanno un'unità comune, quindi un grafico a barre inviterebbe a un confronto che non esiste. Scendi lungo questa lista, non attraversarla. Su una macchina multi-socket la prima voce vale più di tutte le altre messe insieme. Allineamento NUMA: assicurati che il disco NVMe e le vCPU della VM siano sullo stesso nodo NUMA. Da solo può valere una differenza di throughput del 20–30% sui sistemi multi-socket.\nASPM spento: aggiungi pcie_aspm=off alla riga di comando del kernel dell\u0026rsquo;host. Elimina il jitter di latenza dovuto alle transizioni di stato di alimentazione del link PCIe.\nQueue depth realistiche: testa a iodepth=32 o più, non a iodepth=1. L\u0026rsquo;overhead IOMMU che domina a queue depth basse si ammortizza a profondità realistiche.\nPosted interrupt: verifica che APICv (Intel) o AVIC (AMD) sia attivo. Riduce l\u0026rsquo;overhead per interrupt da microsecondi a nanosecondi.\nOttimizzazione dell\u0026rsquo;MPS: aggiungi pci=pcie_bus_perf alla riga di comando del kernel dell\u0026rsquo;host. Imposta il MaxPayloadSize al massimo che la topologia supporta.\nGestione energetica di vfio-pci: aggiungi disable_idle_d3=1 se il tuo controller NVMe ha problemi di stato di alimentazione in passthrough.\nUna riga di comando del kernel combinata per un nodo Proxmox che fa passthrough NVMe su un sistema AMD EPYC sarebbe più o meno così:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet amd_iommu=on iommu=pt pcie_aspm=off pci=pcie_bus_perf\u0026#34; Per Intel:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet intel_iommu=on iommu=pt pcie_aspm=off pci=pcie_bus_perf\u0026#34; Quando il passthrough non ne vale la pena Prima di imboccare questa strada, vale la pena chiedersi se ti serve davvero il passthrough NVMe.\nVirtIO-SCSI e VirtIO-BLK con un disco virtuale su NVMe sono già molto efficienti. L\u0026rsquo;overhead rispetto al passthrough è di solito del 5–10% sulla latenza. La differenza di throughput è trascurabile per la maggior parte dei carichi.\nIl passthrough ha senso quando ti serve che il sistema operativo guest gestisca direttamente il dispositivo. Questo include il monitoraggio SMART, gli aggiornamenti del firmware, il controllo di TRIM/discard e funzioni NVMe specifiche come le reservation. Ha senso anche per i carichi sensibili alla latenza dove contano persino pochi microsecondi. Certi motori di database e l\u0026rsquo;ingestione di dati in tempo reale rientrano in questa categoria.\nPer tutto il resto, i compromessi operativi visti prima, cioè la perdita della migrazione a caldo, degli snapshot e dell\u0026rsquo;integrazione con i backup, di solito pesano più del piccolo guadagno di prestazioni.\nNon c\u0026rsquo;è niente di furbo nello scegliere la strada più difficile quando quella più facile fa il lavoro.\nVerificare le modifiche Dopo aver applicato i passi di tuning, verifica che tutto funzioni come previsto:\n# Host side — confirm IOMMU is in passthrough mode dmesg | grep -i iommu # Confirm ASPM is disabled lspci -vv | grep -i \u0026#34;ASPM Disabled\u0026#34; # Check MPS on the NVMe controller lspci -vv -s XX:00.0 | grep MaxPayload # Inside the VM — run the fio comparison fio --name=randread --ioengine=libaio --direct=1 --bs=4k \\ --iodepth=32 --numjobs=4 --rw=randread --size=1G \\ --filename=/dev/nvme0n1 --runtime=30 --time_based \\ --group_reporting Confronta i risultati della VM con la baseline bare metal di prima. A iodepth=32 dovresti vedere un throughput entro il 5% dal bare metal. Le medie della latenza di completamento dovrebbero stare entro 10–15µs dalle cifre dell\u0026rsquo;host. Se la differenza è ancora grande, controlla prima l\u0026rsquo;allineamento NUMA. È il fattore trascurato più spesso. E non costa altro che una modifica di configurazione, il che lo rende il tipo di problema migliore che ti possa restare.\nRiferimenti Linux kernel PCI documentation — MPS and MRRS tuning options — la fonte autorevole per pcie_bus_perf, pcie_bus_safe e i parametri collegati Proxmox VE Administration Guide — PCI(e) Passthrough — la documentazione ufficiale di Proxmox sulla configurazione del passthrough di dispositivi VFIO Proxmox Forum — NVMe Passthrough Performance — la discussione della community da cui è nato questo articolo ","permalink":"https://blogs.damiendye.uk/it/proxmox/pcie-passthrough-performance-the-iommu-tax/","summary":"Perché i dispositivi PCIe perdono throughput quando passano a una VM tramite VFIO, e i passi pratici di tuning che ne recuperano la maggior parte.","title":"Prestazioni del passthrough PCIe su Proxmox VE: la tassa IOMMU e come ridurla al minimo"},{"content":"Cos\u0026rsquo;è NUMA NUMA sta per Non-Uniform Memory Access. Su un sistema a socket singolo, ogni core della CPU accede a tutta la RAM del sistema attraverso lo stesso controller di memoria. Il tempo di accesso è lo stesso, qualunque sia il core che fa la richiesta e dovunque stiano i dati nella memoria fisica.\nSu un sistema multi-socket, ogni socket ha il suo controller di memoria e il suo banco di RAM. Un core sul socket 0 accede velocemente alla RAM collegata al socket 0: quella è memoria locale. Può accedere anche alla RAM collegata al socket 1, ma quella richiesta deve attraversare il collegamento tra i socket (Intel UPI, AMD Infinity Fabric). Quella è memoria remota, ed è più lenta.\nIl kernel chiama ogni socket con la sua memoria locale un nodo NUMA. Un sistema AMD EPYC a doppio socket ha almeno due nodi NUMA. Alcuni processori EPYC espongono quattro nodi NUMA per socket (uno per CCD), il che fa otto nodi su una scheda a doppio socket.\nLa differenza di prestazioni tra accesso locale e remoto non è sottile. L\u0026rsquo;accesso locale costa circa 80–100ns. Quello remoto circa 130–200ns. È una penalità del 50–100% per ogni operazione di memoria. Da solo è un numero piccolissimo. Pagato su ogni accesso alla memoria per tutta la vita della VM, smette di essere piccolo.\nPerché conta per la virtualizzazione Quando Proxmox crea una VM, assegna vCPU e RAM. Di default, quelle vCPU possono essere schedulate su qualsiasi core fisico di qualsiasi socket. La RAM della VM può essere allocata dal pool di memoria di qualsiasi nodo NUMA.\nSe lo scheduler mette una vCPU sul socket 0 e la RAM della VM è sul socket 1, ogni accesso alla memoria di quella vCPU attraversa il collegamento tra i socket. Se le vCPU rimbalzano tra i socket, e lo fanno se non sono pinnate, lo schema di accesso alla memoria diventa un disastro. Alcuni accessi sono locali, altri remoti, e le prestazioni della VM oscillano di conseguenza.\nPer i carichi generici, un web server, un file server, una VM desktop, spesso ci si convive. L\u0026rsquo;overhead c\u0026rsquo;è, ma è spalmato su tante operazioni e non domina.\nPer i carichi intensivi di IO, database, storage server, qualsiasi cosa faccia molto IO su disco o in rete, la penalità si accumula. Ogni completamento DMA, ogni consegna di interrupt, ogni copia di buffer coinvolge un accesso alla memoria. Se quegli accessi attraversano i socket, l\u0026rsquo;overhead cresce in fretta.\nPerché conta per il passthrough I dispositivi PCIe sono collegati fisicamente a un socket preciso. Ogni socket ha il suo root complex PCIe. Il disco NVMe nello slot 3 potrebbe stare sulle linee PCIe del socket 0. La GPU nello slot 5 potrebbe stare su quelle del socket 1.\nQuando un dispositivo fa DMA, i dati finiscono nella memoria collegata al nodo NUMA a cui l\u0026rsquo;IOMMU li mappa. Se la RAM della VM è allocata dal nodo locale del dispositivo, la scrittura DMA va dritta in memoria locale. Se la RAM sta sull\u0026rsquo;altro nodo, ogni operazione DMA attraversa il collegamento tra i socket.\nPer un disco NVMe che fa centinaia di migliaia di IOPS, quella penalità di 50–100ns per operazione si somma. Con iodepth=32 e letture casuali da 4KB, la differenza di throughput tra NUMA allineato e disallineato può arrivare al 20–30%. E questo prima di aver guardato l\u0026rsquo;overhead dell\u0026rsquo;IOMMU, ASPM, MPS o qualsiasi altra cosa.\nUn NUMA disallineato manda ogni DMA attraverso il link tra socket; allineato lo tiene locale Disallineato: la VM è sul nodo 0, il disco sul nodo 1 nodo NUMA 0 core 0–15 RAM 128 GB VM: vCPU pinnate 0–15, RAM allocata qui nodo NUMA 1 core 16–31 RAM 128 GB NVMe, root complex 1 UPI / IF ogni DMA attraversa il link, 130–200 ns Allineato: vCPU, RAM e disco tutti sul nodo 1 nodo NUMA 0 core 0–15 RAM 128 GB libero per altre VM nodo NUMA 1 core 16–31 RAM 128 GB NVMe, root complex 1 VM: affinity 16-31, numa0 hostnodes=1, policy=bind inattivo 80–100 ns Con iodepth=32 e letture casuali da 4 KB il divario tra i due è il 20–30% del throughput, prima che entrino in gioco overhead IOMMU, ASPM o MPS. Su un sistema a socket singolo non c'è un secondo nodo né link tra socket, quindi niente di questo si applica. Lo stesso hardware in entrambi i casi. L\u0026rsquo;unica differenza è il nodo a cui è stata pinnata la VM, e se il DMA del disco deve attraversare il collegamento per raggiungere la memoria della VM. Lo stesso vale per schede di rete, GPU e qualsiasi altro dispositivo in passthrough. Il traffico DMA del dispositivo deve finire in memoria locale, e le vCPU che elaborano quel traffico devono stare sullo stesso nodo.\nCome controllare la tua topologia Trova su quale nodo NUMA sta un dispositivo # Replace 0000:XX:00.0 with your device\u0026#39;s PCI address from lspci cat /sys/bus/pci/devices/0000:XX:00.0/numa_node Restituisce il numero del nodo NUMA. Se restituisce -1, il kernel non è riuscito a determinare il nodo. A volte succede con dispositivi dietro certi switch PCIe. In quel caso, ricostruisci la topologia PCIe a mano con lspci -tv e abbina la root port al socket.\nGuarda la disposizione NUMA completa numactl --hardware Ti mostra ogni nodo NUMA, quanti core CPU ci sono sopra, quanta memoria è collegata e la distanza (il costo relativo) tra i nodi.\nOutput di esempio da un sistema EPYC a doppio socket:\navailable: 2 nodes (0-1) node 0 cpus: 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 node 0 size: 131072 MB node 1 cpus: 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 node 1 size: 131072 MB node distances: node 0 1 0: 10 32 1: 32 10 Leggere la tabella delle distanze dei nodi da numactl --hardware La tabella delle distanze da\u0026#160;numactl --hardware Doppio socket, 2 nodi NUMA per socket. Costo relativo, non nanosecondi. nodo 0 nodo 1 nodo 2 nodo 3 nodo 0 nodo 1 nodo 2 nodo 3 10 16 32 32 16 10 32 32 32 32 10 16 32 32 16 10 socket 0 socket 1 10, il nodo stesso, memoria locale 16, stesso socket, l'altro nodo 32, attraverso il link tra socket Pinna una VM e il suo dispositivo dentro un 10, e mai lasciare la sua memoria su un 32. Una scheda a 2 nodi mostra solo 10 e 32; i 16 compaiono quando un socket espone più nodi. I numeri sono costi relativi, non nanosecondi. Tieni una VM e il suo dispositivo dentro un singolo 10, e non lasciare mai che la sua memoria finisca su un 32. La tabella delle distanze ti dà il costo relativo. 10 è locale. 32 è remoto. Numeri più alti significano più salti. Sulle configurazioni EPYC a quattro nodi per socket, alcune coppie di nodi hanno distanza 32 e altre 16, a seconda del CCD su cui stanno.\nAbbina i dispositivi ai nodi # List all PCI devices and their NUMA nodes for dev in /sys/bus/pci/devices/*; do node=$(cat \u0026#34;$dev/numa_node\u0026#34; 2\u0026gt;/dev/null) echo \u0026#34;$(basename $dev) node=$node $(lspci -s $(basename $dev) 2\u0026gt;/dev/null | cut -d\u0026#39; \u0026#39; -f2-)\u0026#34; done Così hai il quadro completo di quali dispositivi stanno su quali nodi. Cerca i controller NVMe, le schede di rete e le GPU che passi in passthrough.\nCome allineare una VM in Proxmox Pinna le vCPU sul nodo giusto Nel file di configurazione della VM (/etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf):\nnuma: 1 affinity: 0-15 # Adjust to match cores on the correct NUMA node Il parametro affinity pinna le vCPU della VM a core fisici precisi. Impostalo all\u0026rsquo;intervallo di core dello stesso nodo NUMA del dispositivo in passthrough.\nSe il tuo NVMe è sul nodo 1 e il nodo 1 ha i core 16–31, imposta affinity: 16-31. Se la VM ha bisogno solo di 8 vCPU, pinnala su un sottoinsieme: affinity: 16-23.\nAlloca la memoria dal nodo giusto Attivare numa: 1 nella configurazione della VM dice a Proxmox di presentare alla VM una topologia NUMA. QEMU cercherà di allocare la memoria della VM dal nodo NUMA su cui sono pinnate le vCPU.\nPer un controllo esplicito, puoi impostare la topologia NUMA nella configurazione della VM:\nnuma0: cpus=0-7,hostnodes=0,memory=16384,policy=bind Questo dice a QEMU di legare il primo nodo NUMA della VM (il nodo 0 dal punto di vista del guest) al nodo NUMA 0 dell\u0026rsquo;host, usando i core 0–7 e 16GB di memoria. policy=bind garantisce che la memoria venga allocata solo da quel nodo invece di ripiegare su altri nodi se il pool locale è sotto pressione.\nVerifica il pinning Dopo aver avviato la VM, controlla che le vCPU girino davvero dove ti aspetti:\n# Find the QEMU process pgrep -a qemu | grep \u0026lt;vmid\u0026gt; # Check CPU affinity of the process taskset -cp \u0026lt;pid\u0026gt; # Or check per-vCPU thread affinity for tid in $(ls /proc/\u0026lt;pid\u0026gt;/task/); do echo \u0026#34;Thread $tid: $(taskset -cp $tid 2\u0026gt;/dev/null)\u0026#34; done Errori comuni Non pinnare affatto Se non imposti affinity, le vCPU della VM possono essere schedulate su qualsiasi core. Lo scheduler del kernel le sposterà tra i nodi in base al bilanciamento del carico. Ogni volta che una vCPU migra da un nodo all\u0026rsquo;altro, tutti i dati su cui lavorava nella cache del vecchio nodo diventano remoti.\nPer le VM generiche è accettabile. Per le VM in passthrough con IO pesante, no.\nPinnare sul nodo sbagliato Controlla il nodo NUMA del dispositivo prima di pinnare. Non darlo per scontato. Su alcune schede madri la numerazione fisica degli slot non corrisponde in modo ovvio all\u0026rsquo;assegnazione dei nodi NUMA. Verifica sempre con cat /sys/bus/pci/devices/.../numa_node.\nSovraccaricare un nodo Se pinni troppe VM sullo stesso nodo NUMA, i core di quel nodo finiscono sovraccarichi e il pool di memoria locale si esaurisce. Quando la memoria trabocca sul nodo remoto, ottieni il peggio dei due mondi: vCPU pinnate con memoria remota.\nDistribuisci le VM tra i nodi. Se hai due nodi NUMA e quattro VM, dividile in parti uguali.\nDimenticare l\u0026rsquo;allocazione della memoria Pinnare le vCPU senza controllare anche l\u0026rsquo;allocazione della memoria ti dà metà del beneficio. Le vCPU sono sul nodo giusto, ma la memoria potrebbe non esserlo. Usa policy=bind o almeno attiva numa: 1, così l\u0026rsquo;allocazione di QEMU segue il pinning delle CPU.\nSistemi a socket singolo Su un sistema a socket singolo, tutto sta sul nodo NUMA 0. C\u0026rsquo;è un solo controller di memoria e un solo insieme di linee PCIe. L\u0026rsquo;allineamento NUMA non è un problema.\nPuoi comunque impostare numa: 1 nella configurazione della VM, non fa danni, ma non aiuta nemmeno. Un socket, un controller di memoria, niente da allineare. Tieni lo sforzo per una macchina che di socket ne ha due. Per questo i guadagni di prestazioni descritti qui valgono solo per i sistemi multi-socket, dove il collegamento tra i socket esiste.\nRiferimenti Proxmox VE Administration Guide — CPU and NUMA Configuration — documentazione ufficiale sul pinning delle vCPU e sulle opzioni NUMA Linux kernel NUMA documentation — riferimento sulle memory policy del kernel AMD EPYC 7003 Series — BIOS \u0026amp; Workload Tuning Guide (doc 58002) — la documentazione AMD su NUMA per socket e sulla topologia CCD/CCX ","permalink":"https://blogs.damiendye.uk/it/proxmox/numa-alignment-proxmox/","summary":"Sui sistemi multi-socket, una VM con le vCPU su un nodo NUMA e il dispositivo in passthrough sull\u0026rsquo;altro perde il 20–30% di throughput prima ancora che tu abbia guardato qualsiasi altra cosa.","title":"Allineamento NUMA su Proxmox VE: perché conta e come farlo bene"},{"content":"Che cosa fa l\u0026rsquo;ASPM Il PCIe Active State Power Management (ASPM) permette ai link PCIe di entrare in stati a basso consumo quando sono inattivi. La specifica PCIe definisce diversi stati del link:\nL0 è lo stato pienamente attivo. Il link è su, entrambi i capi sono alimentati, i dati possono passare subito.\nL0s è uno stato di inattività leggero. Il link si spegne in parte. Il ritorno a L0 richiede circa 1–4µs a seconda dell\u0026rsquo;hardware. I due capi possono entrare in L0s in modo indipendente.\nL1 è uno stato di inattività più profondo. I due capi del link si spengono insieme. Il ritorno a L0 richiede di più: in genere 2–32µs, a volte di più. Il tempo di ritorno esatto dipende dal dispositivo, dalla generazione PCIe e dalla piattaforma.\nL1.1 e L1.2 sono sottostati di L1 introdotti con PCIe 3.0. Riducono ulteriormente il consumo spegnendo il riferimento di clock del PLL. Il ritorno da L1.2 può richiedere 32–100µs. Per un dispositivo di storage non è un errore di arrotondamento. È più o meno quanto dura la lettura che stavi cercando di fare.\nPiù il link dorme a fondo, più aspetta il prossimo IO stato del link tempo per tornare a L0: la latenza che paga un IO se arriva adesso L0 pienamente attivo: i dati passano subito nessuno L0s idle leggero, ogni estremo per conto suo 1–4 µs L1 idle profondo, entrambi gli estremi insieme 2–32 µs L1.1 / L1.2 sottostati PCIe 3.0: clock PLL spento 32–100 µs Barre in scala sul caso peggiore di 100 µs. Un sonno più profondo risparmia più energia e costa di più al risveglio. Le barre sono i tempi di ritorno, in scala rispetto al caso peggiore di 100 µs. Un sonno più profondo fa risparmiare più energia e costa di più quando il traffico riprende. L\u0026rsquo;idea è semplice. Se un link PCIe resta inattivo per qualche microsecondo, lo si porta in uno stato a consumo più basso. Quando il traffico riprende, lo si sveglia. Nel frattempo si risparmia un po\u0026rsquo; di energia.\nSu un portatile o un desktop che passa la maggior parte del tempo a non fare niente, l\u0026rsquo;ASPM fa risparmiare energia vera. Qualche watt per link, che si somma su tutti i dispositivi PCIe del sistema. Su un server con carichi intensivi di IO, i link restano raramente inattivi abbastanza a lungo perché l\u0026rsquo;ASPM entri in gioco in modo significativo.\nPerché crea problemi con il passthrough Su bare metal, il sistema operativo e il driver del dispositivo negoziano insieme la gestione dell\u0026rsquo;energia. Il driver NVMe sa quando il link sta per restare inattivo e quando sta per inviare nuovo IO. Il sottosistema PCIe del kernel coordina le transizioni di stato del link con il driver. Tutto è sincronizzato.\nCon il passthrough VFIO, questa coordinazione salta.\nIl kernel dell\u0026rsquo;host controlla ancora il link PCIe fisico. La VM guest possiede il dispositivo tramite VFIO, ma non controlla il link in sé. Il sottosistema PCIe dell\u0026rsquo;host vede il link inattivo, perché dal punto di vista dell\u0026rsquo;host nessun driver lato host lo sta usando. Porta il link in uno stato a basso consumo. Quando il guest invia IO, il dispositivo ha bisogno che il link torni in L0. Il tempo di ritorno si presenta come latenza aggiunta su quell\u0026rsquo;operazione di IO.\nIl risultato è una latenza incostante. La maggior parte degli IO si completa a velocità normale. Alcuni impiegano molto di più, perché trovano un link in L1 o L1.2 che prima deve svegliarsi. Questo si vede come una forte dispersione nei percentili di clat (latenza di completamento). La media può sembrare a posto. Il p99 può essere 5–10 volte più alto.\nÈ difficile accorgersene, perché i numeri del throughput medio possono sembrare a posto. Vedi il problema solo quando guardi la latenza di coda. Molti benchmark non la mettono in evidenza, a meno che tu non chieda l\u0026rsquo;output dei percentili.\nASPM lascia intatta la media e rovina la coda ASPM attivo pcie_aspm=off latenza di completamento (µs) 0 30 60 90 120 3× peggio a p99, e 7× la sua media ASPM attivo pcie_aspm=off p50 p90 p99 p99.9 p99.99 Media e p50 sono identiche nelle due prove: le separa solo la coda. Cifre illustrative dell'andamento, non misure di un disco specifico. Lo stesso disco con e senza ASPM. Il p50 è identico, quindi un benchmark che guarda solo la media non segnala alcun problema; il danno è tutto oltre il p90, dove si accumulano gli IO che hanno trovato un link addormentato. La complicazione specifica di VFIO C\u0026rsquo;è una complicazione che va oltre il problema di base di «host e guest che si contendono lo stato del link».\nQuando un dispositivo è legato a vfio-pci sull\u0026rsquo;host, il kernel dell\u0026rsquo;host sa che il dispositivo è in modalità passthrough. Ma la policy ASPM di PCIe si applica a livello di link, non di dispositivo. La policy ASPM dell\u0026rsquo;host si applica ancora al link fisico, perché l\u0026rsquo;host possiede ancora la topologia PCIe.\nVFIO non intercetta né sovrascrive le transizioni ASPM. Fa passare lo spazio BAR e gli interrupt del dispositivo, ma la gestione dell\u0026rsquo;energia del link resta sotto il controllo dell\u0026rsquo;host. Il guest non ha alcun modo di dire all\u0026rsquo;host «tieni questo link in L0».\nIl guest possiede il dispositivo; l'host possiede ancora il link, e tra loro non c'è canale VM guest driver NVMe possiede il dispositivo, invia l'IO Kernel dell'host sottosistema PCIe policy ASPM vfio-pci policy D-state nessun modo di dire «tieni questo link in L0» link PCIe fisico: in L1, addormentato lo decide l'host, non il guest l'host non vede driver che lo usino, quindi lascia dormire il link il guest invia IO, aspettandosi L0 questo IO aspetta che il link si svegli: 2–32 µs, o fino a 100 µs da L1.2 VFIO passa lo spazio BAR e gli interrupt. La gestione energetica del link non fa parte del patto. Quasi tutti gli IO non trovano il link addormentato, ed è per questo che si muove solo la coda. La divisione che lo causa: il guest possiede il dispositivo e invia l\u0026rsquo;IO, l\u0026rsquo;host possiede il link e decide quando dorme, e niente collega le due cose. Alcuni hardware e versioni del kernel più recenti lo gestiscono meglio di altri. Per questo l\u0026rsquo;approccio più sicuro è togliere del tutto l\u0026rsquo;ASPM dall\u0026rsquo;equazione.\nCome disattivarlo Aggiungi pcie_aspm=off alla riga di comando del kernel dell\u0026rsquo;host:\n# Edit /etc/default/grub GRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet pcie_aspm=off\u0026#34; # Update GRUB and reboot update-grub reboot Così l\u0026rsquo;host non mette nessun link PCIe in uno stato a basso consumo. Vale a livello globale. Ogni dispositivo PCIe dell\u0026rsquo;host, non solo quello in passthrough.\nVerifica dopo il riavvio:\n# Should show \u0026#34;ASPM Disabled\u0026#34; for all devices lspci -vv | grep -i \u0026#34;ASPM\u0026#34; Il costo in energia Disattivare l\u0026rsquo;ASPM aumenta il consumo a riposo. Ogni link PCIe che altrimenti sarebbe in L1 resta in L0, consumando qualche centinaio di milliwatt in più. Su un sistema con dieci o quindici dispositivi PCIe, possono diventare 2–5 watt a riposo.\nPer un server in un datacenter, 2–5 watt sono un errore di arrotondamento sulla bolletta. Per un homelab, sono una frazione di quello che usano CPU e memoria. Per un portatile conta. Ma non faresti passthrough VFIO a batteria su un portatile.\nIl compromesso è chiaro. Qualche watt di consumo a riposo contro picchi di latenza imprevedibili sui dispositivi in passthrough. Su qualsiasi sistema che fa passthrough, l\u0026rsquo;ASPM va spento.\nProblemi di stato di alimentazione del dispositivo L\u0026rsquo;ASPM controlla lo stato di alimentazione del link PCIe. Anche i dispositivi hanno la loro gestione dell\u0026rsquo;energia: i D-state PCIe (da D0 a D3).\nQuando un dispositivo è in D3 (completamente spento), non è solo il link a dormire. Il dispositivo stesso si è fermato. Con il passthrough VFIO, il driver vfio-pci dell\u0026rsquo;host può mettere il dispositivo in D3 quando la VM non è in esecuzione o quando la policy di gestione dell\u0026rsquo;energia dell\u0026rsquo;host decide che il dispositivo è inattivo.\nAlcuni controller NVMe non gestiscono in modo pulito la transizione da D3 a D0. Non riescono a tornare su come si deve, il guest perde il dispositivo, e l\u0026rsquo;unica via d\u0026rsquo;uscita è riavviare la VM o a volte l\u0026rsquo;host.\nIl Samsung 990 EVO Plus è un colpevole noto. La soluzione è l\u0026rsquo;opzione di modulo disable_idle_d3 per vfio-pci:\n# /etc/modprobe.d/vfio.conf options vfio-pci disable_idle_d3=1 Così vfio-pci non mette in D3 nessun dispositivo legato quando è inattivo. Come pcie_aspm=off, è un\u0026rsquo;impostazione globale. Ogni dispositivo legato a vfio-pci resta in D0. Di solito è quello che vuoi per il passthrough, dove il guest dovrebbe essere l\u0026rsquo;unico a controllare lo stato di alimentazione del dispositivo.\nL\u0026rsquo;opzione disable_idle_d3 è separata dall\u0026rsquo;ASPM. L\u0026rsquo;ASPM controlla il link. D3 controlla il dispositivo. Possono creare problemi in modo indipendente. Per una configurazione di passthrough pulita, disattivali entrambi.\nControllo dell\u0026rsquo;ASPM per singolo dispositivo Se non vuoi disattivare l\u0026rsquo;ASPM a livello globale, magari perché hai altri dispositivi PCIe sull\u0026rsquo;host che traggono vantaggio dal risparmio energetico, puoi controllare l\u0026rsquo;ASPM per singolo link tramite sysfs:\n# Find the link\u0026#39;s ASPM policy cat /sys/bus/pci/devices/0000:XX:00.0/link/l1_aspm # Disable ASPM for a specific link echo 0 \u0026gt; /sys/bus/pci/devices/0000:XX:00.0/link/l1_aspm È più mirato, ma meno affidabile tra un riavvio e l\u0026rsquo;altro e tra un aggiornamento del kernel e l\u0026rsquo;altro. Per la maggior parte delle configurazioni di passthrough, il flag globale del kernel pcie_aspm=off è più semplice e più prevedibile.\nQuando il problema non è l\u0026rsquo;ASPM Non ogni problema di jitter di latenza è l\u0026rsquo;ASPM.\nSe i tuoi percentili di clat sono costantemente alti (non solo la coda), il problema è più probabilmente l\u0026rsquo;overhead di traduzione dell\u0026rsquo;IOMMU, un disallineamento NUMA o un\u0026rsquo;MPS sbagliata. L\u0026rsquo;ASPM causa specificamente un andamento bimodale (la maggior parte degli IO è veloce, alcuni sono lenti), perché tocca solo gli IO che arrivano mentre il link è in uno stato a basso consumo.\nControlla prima l\u0026rsquo;ASPM quando vedi:\nlatenza p99 di 5 volte o più superiore alla media risultati di fio incoerenti da un\u0026rsquo;esecuzione all\u0026rsquo;altra latenza che migliora sotto carico costante ma peggiora con carichi a raffiche Se la latenza è costantemente cattiva qualunque sia il tipo di carico, guarda altrove. Vale la pena escludere presto l\u0026rsquo;ASPM, perché testarlo costa poco. Non è però la risposta a ogni link lento, e inseguirlo quando i numeri non corrispondono all\u0026rsquo;andamento è un pomeriggio che non ti restituisce nessuno.\nRiferimenti Linux kernel PCI documentation — ASPM parameters — sorgente del kernel che copre pcie_aspm=off e le opzioni collegate Proxmox Forum — PCI Passthrough NVMe Unable to Change Power State — discussione della community su disable_idle_d3 per i controller NVMe Samsung Proxmox VE Wiki — PCI(e) Passthrough — documentazione ufficiale sulla configurazione del passthrough ","permalink":"https://blogs.damiendye.uk/it/proxmox/pcie-aspm-passthrough/","summary":"L\u0026rsquo;Active State Power Management fa risparmiare qualche watt sui link PCIe inattivi. Con il passthrough VFIO aggiunge un jitter di latenza difficile da diagnosticare e facile da correggere.","title":"PCIe ASPM e perché disattivarlo per il passthrough"},{"content":"Che cos\u0026rsquo;è l\u0026rsquo;MPS I dispositivi PCIe trasferiscono i dati in pacchetti chiamati Transaction Layer Packet (TLP). Ogni TLP ha un header e un payload. La dimensione massima di quel payload è la MaxPayloadSize (MPS).\nL\u0026rsquo;MPS viene negoziata tra un dispositivo e il suo bridge a monte durante il link training. Il valore negoziato è il più piccolo tra quello che il dispositivo supporta e quello che il bridge consente. Ogni bridge e switch nel percorso tra il dispositivo e il root complex ha la sua capacità MPS. L\u0026rsquo;MPS finale di qualsiasi dispositivo la decide il punto più stretto della catena.\nI valori MPS comuni sono 128, 256 e 512 byte. Alcuni dispositivi supportano 1024 o perfino 4096 byte, ma in pratica 256 o 512 è il valore tipico per controller NVMe e schede di rete. Le GPU spesso supportano 256 byte.\nPerché conta Un\u0026rsquo;MPS più grande significa meno pacchetti per la stessa quantità di dati. Un IO da 4KB trasferito con MPS 128 richiede 32 TLP. Lo stesso trasferimento con MPS 512 ne richiede 8.\nOgni TLP porta con sé un overhead di protocollo: l\u0026rsquo;header, il CRC, il framing. Meno TLP significa meno overhead di protocollo per byte trasferito. Ad alto throughput, la differenza si misura. Non è drammatica. Ma è reale. Ed è lo stesso overhead, pagato su ogni pacchetto.\nL\u0026rsquo;MPS influisce anche su quanto bene viene usato il link PCIe. Payload più piccoli significano che il link passa più tempo sugli header rispetto ai dati. Payload più grandi spostano il rapporto verso i dati utili.\nGli stessi 4 KB di payload costano 32 header con MPS 128 e 8 con MPS 512 MPS 128: un trasferimento da 4 KB diventa 32 TLP 32 header × ≈24 B:\u0026#160;≈16% dei byte sul link è overhead di protocollo MPS 512: gli stessi 4 KB diventano 8 TLP 8 header × ≈24 B:\u0026#160;≈4% dei byte sul link è overhead di protocollo header, numero di sequenza, CRC e framing payload Entrambe le strisce portano gli stessi 4 KB. Payload più grandi non spostano più dati: usano meno link per descriverli. Il guadagno di throughput misurato è piccolo. Entrambe le strisce portano gli stessi 4 KB. Le barre piene sono gli header di ogni pacchetto: con MPS 128 sono 32, con MPS 512 solo 8. L\u0026rsquo;impatto sulla latenza è minore di quello sul throughput. Una singola lettura da 4KB con MPS 128 contro 512 non mostrerà una differenza di latenza che valga la pena misurare, perché i TLP vanno in pipeline. Ma spingi molti IOPS con tanti trasferimenti in volo e il minore overhead di un\u0026rsquo;MPS più grande si somma.\nIl problema con il passthrough Su bare metal, il BIOS imposta l\u0026rsquo;MPS durante il POST in base alla topologia PCIe. Il BIOS di un server moderno di solito imposta l\u0026rsquo;MPS al massimo che la topologia supporta, in genere 256 o 512 byte.\nSotto QEMU, il root complex del chipset virtuale Q35 ha la sua capacità MPS. Di default presenta un\u0026rsquo;MPS bassa. La policy MPS predefinita del kernel Linux (pcie_bus_default) imposta l\u0026rsquo;MPS di ogni dispositivo uguale a quella del suo bridge padre, il che in una topologia virtuale vuol dire il valore predefinito del root complex di QEMU. Spesso 128 byte.\nPer questo un dispositivo che può fare payload da 512 byte gira a 128, perché il root complex virtuale ha fissato il tetto.\nL'MPS lo decide il punto più stretto del percorso, che sotto QEMU è il root complex virtuale Bare metal: il BIOS imposta l'MPS dalla topologia reale NVMesupporta 512 switch PCIeconsente 512 Root complexconsente 512 MPS = 512 B il minimo del percorso Passato a una VM: ora il punto più stretto è il root complex virtuale NVMesupporta 512 root complex virtuale Q35 di QEMU presenta 128 di default MPS = 128 B capacità del dispositivo sprecata Kernel dell'host con\u0026#160;pci=pcie_bus_perf NVMesupporta 512 ogni dispositivo al massimo del bus padre MRRS alzato di pari passo MPS = 512 B si imposta sull'host, non nel guest L\u0026rsquo;MPS è il valore più piccolo lungo il percorso. Fare passthrough di un dispositivo inserisce il root complex virtuale in quel percorso, e il suo prudente valore predefinito diventa il tetto per tutti. Come sistemarlo: lato host Di\u0026rsquo; al kernel di impostare l\u0026rsquo;MPS al massimo che il bus padre di ogni dispositivo supporta:\n# Add to GRUB_CMDLINE_LINUX_DEFAULT in /etc/default/grub pci=pcie_bus_perf Così l\u0026rsquo;MPS di ogni dispositivo diventa il valore più grande che il suo bus padre consente. Imposta di conseguenza anche l\u0026rsquo;MRRS (Max Read Request Size). Il sorgente del kernel dice che garantisce che l\u0026rsquo;MPS di un dispositivo non sia più grande di quella del padre. Così la catena resta coerente e si ottengono le dimensioni di trasferimento migliori.\nDopo il riavvio, verifica la nuova MPS:\n# Check MPS on a specific device lspci -vv -s XX:00.0 | grep -i \u0026#34;MaxPayload\u0026#34; Dovresti vedere MaxPayload 256 bytes o MaxPayload 512 bytes al posto del valore predefinito 128.\nLe altre opzioni del kernel Il kernel offre cinque policy MPS, ognuna impostata tramite il parametro di boot pci=:\npcie_bus_tune_off: non toccare affatto l\u0026rsquo;MPS. Usa quello che ha impostato il BIOS. Su bare metal con un buon BIOS spesso va bene. Sotto QEMU, il BIOS è OVMF o SeaBIOS, che potrebbero non ottimizzare l\u0026rsquo;MPS.\npcie_bus_default: il valore predefinito del kernel. Imposta l\u0026rsquo;MPS di ogni dispositivo uguale a quella del suo bridge a monte. Prudente e sicura, ma non massimizza le prestazioni.\npcie_bus_safe: imposta l\u0026rsquo;MPS al valore più grande supportato da tutti i dispositivi del sistema. Utile nei sistemi chiusi dove conosci tutti i dispositivi e niente verrà collegato a caldo. Un po\u0026rsquo; più aggressiva di quella predefinita.\npcie_bus_perf: imposta l\u0026rsquo;MPS di ogni dispositivo al valore più grande che il bus padre consente. Ogni dispositivo ottiene la migliore MPS che la sua topologia locale supporta. È la scelta giusta per il passthrough, perché ottimizza ogni percorso in modo indipendente.\npcie_bus_peer2peer: imposta l\u0026rsquo;MPS a 128 byte su tutto. Ogni dispositivo parla alla dimensione comune più bassa. Si usa quando i dispositivi devono fare DMA direttamente l\u0026rsquo;uno verso l\u0026rsquo;altro (da GPU a GPU, da GPU a NIC via RDMA). Non serve per il passthrough normale.\npcie_bus_perf è quella giusta per il passthrough.\nCome sistemarlo: lato guest Puoi impostare pci=pcie_bus_perf anche nella configurazione di boot del kernel guest. Se abbia un effetto pratico dipende da come QEMU presenta la topologia PCIe virtuale. Il root complex virtuale limita quello che il guest può negoziare.\nNei test, la correzione lato host è quella che tiene. L\u0026rsquo;host possiede il dispositivo fisico, e la sua impostazione MPS decide la dimensione reale dei TLP sul filo. L\u0026rsquo;impostazione del guest tocca solo la topologia virtuale dentro la VM, e se questo cambi il comportamento reale dipende da come QEMU presenta il percorso PCIe per quel dispositivo.\nImpostala sull\u0026rsquo;host. Impostarla anche nel guest non fa male, ma non contare solo su quella.\nChe cos\u0026rsquo;è l\u0026rsquo;MRRS La Max Read Request Size (MRRS) è collegata ma distinta. L\u0026rsquo;MPS limita quanti dati un dispositivo può inviare in un TLP. L\u0026rsquo;MRRS limita quanti dati un dispositivo può chiedere in una richiesta di lettura.\nUn dispositivo con MRRS 4096 può emettere una sola richiesta di lettura da 4KB. La risposta torna in più TLP, ognuno grande al massimo quanto l\u0026rsquo;MPS. Un\u0026rsquo;MRRS più alta significa che il dispositivo può chiedere più dati per transazione, riducendo il numero di TLP di richiesta di lettura sul bus.\nL'MRRS dimensiona la richiesta, l'MPS ogni pacchetto della risposta controller NVMe MRRS 4096 B memoria dell'host tramite il root complex 1 × richiesta di lettura: «mandami 4 KB» l'MRRS limita quanto può chiedere una richiesta 8 × TLP di completion: 512 B ciascuno l'MPS limita quanto può essere grande ogni pacchetto della risposta Una richiesta, molti pacchetti.\u0026#160;pci=pcie_bus_perf\u0026#160;li alza entrambi, quindi non serve regolarli a parte. Le due si confondono facilmente: l\u0026rsquo;MRRS limita quanto un dispositivo può chiedere in una richiesta, l\u0026rsquo;MPS limita quanto può essere grande ogni pacchetto della risposta. pci=pcie_bus_perf imposta sia l\u0026rsquo;MPS sia l\u0026rsquo;MRRS ai valori ottimali. Non serve regolarle separatamente.\nImpatto rispetto ad altre ottimizzazioni La differenza di MPS tra 128 e 512 byte ha un impatto sulle prestazioni minore dell\u0026rsquo;allineamento NUMA o dell\u0026rsquo;ASPM. Di solito è un miglioramento del throughput di poche unità percentuali. Non lo vedrai nei benchmark di latenza a bassa queue depth.\nMa è un\u0026rsquo;ottimizzazione gratuita. Un parametro del kernel, nessuno svantaggio, nessun rischio di compatibilità. Non c\u0026rsquo;è motivo per non impostarlo su qualsiasi sistema che fa passthrough.\nNon costa niente, e l\u0026rsquo;hardware l\u0026rsquo;hai già pagato. Tanto vale avere quello che hai comprato.\nRiferimenti Linux kernel PCI Kconfig — MPS and MRRS tuning options — fonte autorevole per tutte e cinque le policy MPS Linux Plumbers Conference 2017 — MPS vs MRRS (PDF) — la presentazione di Sinan Kaya sulla gestione di MPS/MRRS nel kernel ","permalink":"https://blogs.damiendye.uk/it/proxmox/pcie-maxpayloadsize/","summary":"Il root complex virtuale di QEMU usa di default payload TLP da 128 byte. La maggior parte dei dispositivi supporta 256 o 512. Lo sistema un solo parametro del kernel.","title":"PCIe MaxPayloadSize: prestazioni gratis per il passthrough"},{"content":"Cosa sono i440fx e Q35? Ogni macchina virtuale QEMU ha un chipset virtuale. Definisce l\u0026rsquo;intera scheda madre virtuale: la topologia del bus PCI/PCIe, il south bridge, il controller degli interrupt, quello che il sistema operativo guest vede quando enumera l\u0026rsquo;hardware all\u0026rsquo;avvio.\nQEMU offre due scelte: i440fx e Q35.\ni440fx emula l\u0026rsquo;Intel 440FX, nome in codice Natoma, uscito nel 1996 come chipset per il Pentium Pro e, più tardi, per il Pentium II. Presenta un bus PCI piatto senza supporto PCIe nativo. È stato il tipo di macchina originale di QEMU ed è rimasto il default per molto tempo. Una bella carriera, per un chipset progettato per il Pentium Pro.\nQ35 emula l\u0026rsquo;Intel Q35 Express, uscito nel giugno 2007 per la generazione Core 2, abbinato al south bridge ICH9. Dà al guest un vero root complex PCIe e un controller degli interrupt moderno. I dispositivi in passthrough compaiono come dispositivi PCIe nativi con la topologia corretta.\nSono virtuali tutti e due. Nessuno dei due tocca l\u0026rsquo;hardware reale che usa l\u0026rsquo;host. La differenza sta in quello che vede il sistema operativo guest.\nIl bus PCI piatto di i440fx contro il root complex PCIe di Q35 i440fx, un bus PCI piatto Intel 440FX “Natoma”, Pentium Pro / Pentium II, 1996 vCPU PCI bus 0 NVMePCI legacy NIC solo INTx IDE legacy Audiofittizio MSI-X non disponibile, solo interrupt INTx Niente AER, errori PCIe invisibili al guest Niente ACS, isolamento IOMMU più debole Un bus condiviso, un gruppo IOMMU Q35, root complex PCIe Intel Q35 Express + ICH9, era Core 2, giugno 2007 vCPU root complex PCIe root port root port root port NVMeMSI-X NIC multi-coda GPU AER + ACS MSI-X, un vettore di interrupt per coda AER, il guest vede e gestisce gli errori PCIe ACS, DMA peer-to-peer controllato Ogni slot può avere il suo gruppo IOMMU Ogni differenza che segue nasce da qui: i440fx appende ogni dispositivo a un unico bus condiviso, mentre Q35 dà a ogni slot la sua root port sotto un root complex PCIe. Perché Q35 conta per il passthrough I dispositivi passati a una VM i440fx compaiono come dispositivi PCI legacy, qualunque cosa siano davvero. Il guest li vede come «dispositivi PCI molto veloci» invece che come dispositivi PCIe. Alcuni driver ci lavorano bene. Altri si aspettano PCIe e si comportano male, o si rifiutano di caricarsi, quando non lo trovano.\nIl root complex PCIe di Q35 cambia il quadro in diversi modi.\nMSI-X MSI-X (Message Signalled Interrupts, Extended) richiede PCIe. Sotto i440fx, MSI-X o ripiega sugli interrupt INTx legacy o non funziona per niente.\nPer NVMe questo conta parecchio. I controller NVMe si appoggiano a MSI-X per la loro architettura multi-coda. Ogni coppia di code di IO ha il suo vettore di interrupt. Senza MSI-X, tutti i completamenti di IO passano per un solo interrupt, e questo crea un collo di bottiglia con IOPS alti.\nConta anche per le schede di rete e le GPU moderne. Qualsiasi dispositivo che usa più vettori di interrupt per distribuire il carico sui core della CPU ha bisogno di MSI-X.\nINTx incanala ogni completamento NVMe in un interrupt; MSI-X dà a ogni coda il suo vettore i440fx, INTx: una linea per ogni coda coda 0 coda 1 coda 2 coda 3 1 × INTx vCPU 0 i completamenti si serializzano, un tetto con IOPS alti Q35, MSI-X: un vettore per coda coda 0 coda 1 coda 2 coda 3 4 vettori MSI-X vCPU 0 vCPU 1 vCPU 2 vCPU 3 ogni coda completa sul suo core Con INTx, i completamenti di ogni coda arrivano su una sola linea di interrupt e finiscono su una sola vCPU. Con MSI-X, ogni coda ha il suo vettore e completa sul suo core. AER (Advanced Error Reporting) PCIe AER permette al guest di rilevare e gestire correttamente gli errori dei dispositivi invece di fallire in silenzio. Sotto i440fx, il guest non ha alcuna visibilità sugli errori a livello PCIe.\nPer un carico di produzione con un dispositivo in passthrough, ingoiare gli errori in silenzio è un problema. AER dà al driver del guest la possibilità di registrare, segnalare e in alcuni casi recuperare errori hardware che altrimenti passerebbero inosservati finché i dati non sono corrotti.\nACS (Access Control Services) ACS controlla il DMA peer-to-peer tra dispositivi sullo stesso bus. Fa parte del modello di isolamento dell\u0026rsquo;IOMMU. Impedisce a un dispositivo di fare DMA nello spazio di memoria di un altro senza passare per l\u0026rsquo;IOMMU.\nSotto i440fx, la topologia del bus virtuale non supporta ACS per niente. Non rompe il passthrough di base, ma indebolisce l\u0026rsquo;isolamento che l\u0026rsquo;IOMMU dovrebbe darti.\nCome vengono presentati i gruppi IOMMU La gerarchia PCIe di Q35 fa sì che ogni slot virtuale possa stare nel suo gruppo IOMMU dentro il guest. i440fx mette tutto su un unico bus condiviso, e questo rende problematica la configurazione IOMMU lato guest.\nQuesto è rilevante per la virtualizzazione annidata, dove il guest stesso ha bisogno di gruppi IOMMU puliti. Ed è rilevante per il vIOMMU, disponibile solo su Q35.\nvIOMMU Se ti serve che il guest stesso abbia capacità IOMMU, per il passthrough annidato, per DPDK o per certe configurazioni di sicurezza, ti serve il tipo di macchina Q35.\nL\u0026rsquo;emulazione vIOMMU permette al guest di avere il suo IOMMU, utile per:\nIl passthrough in VM annidate (una VM dentro una VM con accesso ai dispositivi) Il networking userspace con DPDK, dove l\u0026rsquo;applicazione ha bisogno della protezione dell\u0026rsquo;IOMMU Le configurazioni di sicurezza che richiedono isolamento DMA dentro il guest Perché Q35 conta oltre il passthrough Anche se non fai passthrough, Q35 è la scelta migliore per i carichi moderni.\nFirmware OVMF (UEFI) La combinazione di Q35 e OVMF dà al guest un ambiente di avvio UEFI moderno con supporto Secure Boot. i440fx può usare OVMF, ma la combinazione è meno collaudata e alcune funzioni non vanno come dovrebbero.\nWindows 11 richiede UEFI con Secure Boot. Lo impongono i requisiti hardware di Microsoft. Windows Server 2025 rende al meglio con UEFI. Q35 con OVMF è la strada supportata per entrambi.\nSe stai facendo girare una VM Windows 11 o Server 2025 su i440fx con SeaBIOS, stai remando contro corrente. Magari oggi funziona. Non è la direzione in cui va l\u0026rsquo;ecosistema.\nAHCI Q35 include l\u0026rsquo;emulazione AHCI (Advanced Host Controller Interface) nativa attraverso il south bridge ICH9. i440fx usa per i dischi di avvio la più vecchia emulazione IDE o LSI SCSI.\nPer lo storage VirtIO questo non conta. VirtIO scavalca del tutto il controller di storage del chipset. Ma se usi l\u0026rsquo;emulazione SATA per un sistema operativo guest che non ha i driver VirtIO al momento dell\u0026rsquo;installazione, AHCI su Q35 è molto più veloce di IDE su i440fx.\nIDE intercetta ogni accesso ai registri; AHCI costruisce i comandi nella RAM del guest e suona un campanello confine host / hypervisor, ogni attraversamento costa un VM exit i440fx, IDE: ogni accesso ai registri fa trap driver IDE nel guest I/O su porta, un accesso alla volta 5 × VM exit per emettere un comando PIIX3 IDE 1 comando in volo Niente NCQ, il comando dopo aspetta che il precedente finisca IRQ 14/15, INTx level-triggered, altri exit per mascherare e riconoscere Q35, AHCI: costruito in RAM, un campanello driver AHCI nel guest lista comandi nella RAM del guest, gratis 1 × VM exit AHCI HBA (ICH9) fino a 32 in coda (NCQ) I comandi in coda si completano fuori ordine, il disco riordina per efficienza dei seek MSI-X, nessuna linea condivisa da identificare, nessun round-trip EOI IDE si programma un registro alla volta attraverso le porte di I/O legacy, e ogni accesso fa trap verso l\u0026rsquo;host. AHCI lascia che il guest costruisca il comando nella propria memoria e suoni un solo campanello. L\u0026rsquo;overhead che i440fx si porta dietro e Q35 no Il divario sull\u0026rsquo;AHCI non è solo questione di un controller più nuovo. È che i440fx fa pagare al guest l\u0026rsquo;hypervisor su quasi ogni interazione, e Q35 per lo più no.\nAccesso ai registri con trap. IDE si programma attraverso le porte di I/O x86 legacy. Il guest scrive il numero di settori, poi i registri LBA, poi il registro di comando. Ogni scrittura colpisce una porta diversa. Ognuno di quegli accessi viene intercettato ed emulato dall\u0026rsquo;host, e ogni trap è un VM exit che costa qualche microsecondo. Emettere un solo comando IDE costa quindi diversi exit prima che si muova un solo dato.\nAHCI funziona al contrario. Il guest costruisce una tabella dei comandi nella sua RAM, nessuna trap, perché sta solo scrivendo in memoria, e poi fa una sola scrittura MMIO su un registro campanello per dire al controller di andarla a prendere. Un comando costa più o meno un exit invece di cinque o sei.\nNessuna coda di comandi. IDE emette un comando e aspetta che finisca. AHCI supporta NCQ, quindi possono essere in sospeso fino a 32 comandi, e il disco è libero di completarli fuori ordine per ridurre i seek. Per questo il costo residuo per comando si distribuisce su una coda invece di essere pagato uno alla volta.\nIl percorso degli interrupt legacy. Il controller IDE PIIX3 segnala il completamento sugli IRQ legacy fissi 14 e 15, consegnati come INTx level-triggered. Un interrupt level-triggered va riconosciuto e smascherato, e siccome le linee INTx sono condivise, il guest deve anche capire quale dispositivo l\u0026rsquo;ha generato. Ognuno di questi passaggi è un\u0026rsquo;altra trap. MSI-X, che richiede Q35, è una semplice scrittura in memoria, senza linea condivisa da identificare e senza andata e ritorno per il riconoscimento. Su hardware con posted interrupts può raggiungere il guest senza nessun exit.\nUna superficie di dispositivi legacy più ampia. i440fx presenta sempre i suoi dispositivi di piattaforma legacy, controller IDE compreso, che la VM li usi o no. Occupano slot PCI, vengono enumerati e sondati a ogni avvio, e i driver del guest possono interrogarli in polling. Q35 presenta un insieme più piccolo e più moderno. Meno roba da tenere in piedi per l\u0026rsquo;host, meno da scorrere per il guest.\nNiente di tutto questo si vede in una VM con storage VirtIO, ed è per questo che la differenza sfugge facilmente. Conta durante l\u0026rsquo;installazione, sulle immagini appliance senza driver VirtIO e su qualsiasi guest che usa ancora SATA o IDE emulati per il disco di avvio.\nMeno dispositivi virtuali, topologia più pulita i440fx arriva con hardware virtuale legacy che Q35 lascia cadere. Una scheda audio fittizia. Un controller IDE legacy. Nessuno dei due fa niente di utile, ma entrambi consumano slot PCI virtuali e possono confondere il software del guest che prova a usarli.\nQ35 presenta un insieme di hardware virtuale più pulito, più vicino a quello che esporrebbe un server fisico moderno.\nQ35 cestina i dispositivi di piattaforma legacy che i440fx tiene negli slot PCI virtuali i440fx i dispositivi legacy occupano gli slot Controller IDE legacy Controller floppy (FDC) Funzioni legacy PIIX3 Altri dispositivi di piattaforma legacy libero libero sostituito da AHCI cestinato da Q35 Q35 meno dispositivi, slot che avanzano ICH9 AHCI (SATA) root port PCIe libero per un NVMe in passthrough libero per una NIC libero per una GPU libero Il controller IDE legacy viene sostituito, non tolto: tutto il resto finisce nel cestino, e restano slot liberi per i dispositivi che vuoi davvero passare in passthrough. La direzione di marcia RHEL 10 ha deprecato i440fx Red Hat ha deprecato formalmente il tipo di macchina i440fx in RHEL 10. È un segnale della direzione di marcia per tutto l\u0026rsquo;ecosistema KVM. Quando Red Hat depreca qualcosa, significa che ha smesso di testarlo come percorso di prima classe e che non correggerà i bug legati a quello.\nIl progetto QEMU upstream discute della deprecazione di i440fx da anni. Il consenso è che mantenere due percorsi di chipset è un peso. Q35 è quello che corrisponde all\u0026rsquo;hardware moderno.\nProxmox non ha seguito Proxmox VE crea ancora le nuove VM come i440fx. Il tipo di macchina nella procedura guidata di creazione dice \u0026ldquo;Default (i440fx)\u0026rdquo;, e resta così finché non lo cambi. Q35 è a un menu a tendina di distanza, ma è una scelta che devi fare apposta, su ogni VM che costruisci.\nÈ l\u0026rsquo;unico motivo per cui esiste questo articolo. Il default è il chipset del 1996, e niente nella procedura guidata ti dice che la scelta conta.\nCambiare una VM esistente Se hai una VM esistente su i440fx, puoi passare a Q35 nelle impostazioni hardware o direttamente nella configurazione:\nmachine: q35 In pratica è un cambio di scheda madre virtuale. Hardware diverso al prossimo avvio.\nLinux di solito lo gestisce senza problemi. Il kernel enumera di nuovo i dispositivi e carica i driver giusti. I nomi delle interfacce cambieranno, perché la NIC virtuale passa da un bus PCI a un bus PCIe. Se la tua configurazione di rete li nomina (per esempio eth0, ens18), aggiornala prima di riavviare o perdi l\u0026rsquo;accesso alla rete.\nWindows perdona meno. Il cambio di chipset significa ID hardware virtuali diversi per il controller di storage, la scheda di rete e gli altri dispositivi di piattaforma. Windows potrebbe dover reinstallare i driver. In alcuni casi un\u0026rsquo;installazione da zero è la strada più pulita. Il colpevole di solito è il Windows più vecchio.\nFreeBSD e i derivati (OPNsense, pfSense) di solito reggono il cambio, ma prova prima.\nIn tutti i casi, prova su una VM non di produzione prima di cambiare qualsiasi cosa che conti.\nQuando serve ancora i440fx Una manciata di casi ha ancora bisogno di i440fx.\nI sistemi operativi guest legacy che precedono UEFI, Windows XP, Windows 2000 e annate simili, potrebbero non avviarsi sotto Q35. Questi sistemi si aspettano la topologia PCI legacy e il SeaBIOS che fornisce i440fx.\nCerte immagini appliance sono costruite e testate esclusivamente su i440fx. Se il vendor supporta solo i440fx, usi quello finché non aggiornano.\nPer tutto il resto, nuove VM Linux, Windows moderno, qualsiasi carico con passthrough, usa Q35. Non c\u0026rsquo;è niente da guadagnare a restare attaccati a un chipset del 1996 per abitudine.\nRiferimenti Proxmox VE Wiki — PCI(e) Passthrough — documentazione ufficiale di Proxmox che indica Q35 come tipo di macchina consigliato per il passthrough QEMU Q35 Chipset Specification (PDF) — il documento di progetto originale di Q35 in QEMU Proxmox Forum — Q35 vs i440fx Discussion — discussione della community sulle differenze pratiche ","permalink":"https://blogs.damiendye.uk/it/proxmox/q35-not-i440fx/","summary":"I due chipset virtuali di QEMU non sono intercambiabili. Q35 fornisce una vera topologia PCIe da cui dipendono il passthrough, il Windows moderno e tutto l\u0026rsquo;ecosistema KVM.","title":"Usa sempre Q35, non i440fx: perché conta su Proxmox VE"},{"content":"Sono Damien Dye.\nPresales Engineer per l\u0026rsquo;Europa e l\u0026rsquo;area Asia-Pacifico in croit GmbH, membro fondatore della Ceph Foundation e Proxmox Gold Partner ufficiale.\nPiù di vent\u0026rsquo;anni di tutto questo sono stati la parte pagata: piattaforme Microsoft, Linux, applicazioni enterprise, virtualizzazione, reti, storage e sicurezza. La parte pagata non è tutto. Costruisco cose e le rompo dalla metà degli anni Novanta e uso Linux sul serio dal 1999, anni prima che a qualcuno venisse in mente di pagarmi per farlo, e quegli anni li conto, perché impari tanto dall\u0026rsquo;attrezzatura che è tua quanto da quella che ha assicurato qualcun altro.\nVengo dal South Yorkshire, quindi te la dico dritta. Se una cosa funziona ti dico perché. Se non funziona ti dico anche quello, e preferisco dirlo prima che tu abbia speso i soldi, non dopo.\nGli inizi Smonto computer da quando avevo otto anni. La mia prima macchina è stata un Atari STfm con 512K di RAM.\nIl primo PC è arrivato a dodici anni, con Windows 3.11, e da lì le ho passate tutte: 95, 95b, 95c, 98, 98SE e poi Windows 2000.\nNon era usare del software. Era capire cosa cambiava da una versione all\u0026rsquo;altra, cosa si rompeva per strada, e come far partire una cosa che aveva deciso di non volerne sapere.\nIL PERCORSO SUI DESKTOP WINDOWS: 3.11 \u0026#8594; 10 3.11 95 98 2000 XP XP64 bit Vista64 bit 764 bit 8.1 10 La mia prima connessione a internet è stata un modem dial-up a 56k su Freeserve, uno dei primi ISP gratuiti del Regno Unito. Sono passato all\u0026rsquo;ADSL appena è arrivata, nel 2001, con Demon Internet. Poi al VDSL nel 2008, e infine alla fibra FTTP con Zen Internet nel 2017, che è il momento in cui è arrivato l\u0026rsquo;IPv6 nativo. È lì che è cominciato tutto per quanto riguarda le reti, ed è parecchio lontano dalle fabric a 100GbE che progetto oggi. Ma la curiosità era la stessa.\nLa rete locale è cominciata ancora prima, e in modo più spartano. La mia prima LAN era 10BASE2: cavo coassiale sottile, connettori BNC e un terminatore da 50 ohm a ogni capo, con tutte le macchine sullo stesso bus da 10 Mbit. Ci ho fatto parlare due PC, poi ho aggiunto un hub a 5 porte man mano che arrivavano altre macchine. Quell\u0026rsquo;hub più tardi è diventato uno switch, un vero salto in avanti, perché dava a ogni porta il suo dominio di collisione invece di far litigare tutto sullo stesso coassiale. Poi è arrivato il wireless, appena è diventato abbordabile: 802.11b a 11 Mbit, con schede PCMCIA Orinoco Gold nei portatili. Dal bus coassiale all\u0026rsquo;hub condiviso, all\u0026rsquo;Ethernet commutata, al Wi-Fi: ho fatto ogni passaggio a mano.\nHo anche costruito installazioni di Windows XP completamente automatiche. Usavano i vecchi DriverPacks per inserire i driver e script su misura per installare le applicazioni in automatico. Si passava dal ferro nudo a un sistema completamente configurato senza toccare la tastiera. Era un modo di pensare da automazione anni prima che sentissi parlare di Ansible, ed era su Windows, non su Linux.\nScoprire Linux Ho cominciato con Linux a quindici anni, su SuSE 6. Sono andato dritto sulle distribuzioni che ti obbligavano a capire cosa succedeva sotto.\nDurante le vacanze di Natale del 2001 ho costruito un sistema completo seguendo il libro Linux From Scratch. Ogni pacchetto compilato a mano. Ogni dipendenza capita. Ogni scelta di configurazione fatta apposta.\nNel 2002 ero passato a Gentoo. Gentoo funziona con lo stesso principio: costruisci tutto il sistema dai sorgenti, capisci cosa fa ogni USE flag, e quando qualcosa si rompe sai esattamente dove guardare.\nLINUX: IL PERCORSO TRA LE DISTRIBUZIONI SuSE6–7.2 Mandrake Gentoo Ubuntu RHEL Fedora Esplorare altre piattaforme Non mi sono mai fermato a un\u0026rsquo;architettura sola.\nHo avuto un sistema DEC Alpha dal 2001 al 2007. L\u0026rsquo;Alpha era il processore RISC a 64 bit di Digital Equipment Corporation, lanciato nel 1992: una vera macchina a 64 bit più di dieci anni prima che l\u0026rsquo;x86 recuperasse con AMD64 nel 2003. Ci giravano Tru64 UNIX, OpenVMS, Windows NT e Linux, e per un periodo è stato più o meno la cosa più veloce che potevi mettere su una scrivania. Grazie alle discussioni con la community ci ho fatto funzionare USB e FireWire. Ci ho perfino montato dietro un adattatore da PCMCIA a ISA, così le stesse PC Card che usavo nei portatili, tra cui la wireless Orinoco Gold, giravano anche nell\u0026rsquo;Alpha da scrivania. Non una cosa da poco su una piattaforma dove non era garantito che funzionasse niente.\nHo provato BeOS. Affrontava il multithreading e il multimediale in un modo completamente diverso da qualsiasi altra cosa in giro all\u0026rsquo;epoca.\nAll\u0026rsquo;università, io e un amico abbiamo salvato delle workstation Sun SPARC che stavano per essere buttate e ci abbiamo installato Gentoo. SPARC era l\u0026rsquo;architettura RISC di Sun Microsystems, introdotta nel 1987: il motore dietro le workstation e i server Sun che facevano girare buona parte del mondo Unix negli anni Novanta, di solito con Solaris. Far girare un Linux compilato dai sorgenti su quell\u0026rsquo;hardware era proprio lo scopo. Perché non farlo, se l\u0026rsquo;attrezzatura c\u0026rsquo;è e vuoi vedere se funziona.\nHo anche costruito e usato Linux su ARM e ARM64, con Raspberry Pi e Odroid. E ho usato Windows su ARM64.\nFai girare lo stesso sistema operativo su x86, Alpha, SPARC, ARM e ARM64 e le ipotesi che hai fatto su uno non ti seguono sul successivo: ordine dei byte, allineamento, dimensione delle pagine, supporto dei driver e stranezze della toolchain cambiano tutti sotto i tuoi piedi. Conta più che mai adesso che ARM64 sta nel data center accanto all\u0026rsquo;x86, ed è il modo di pensare che tiene onesto un parco Ceph o Proxmox con architetture miste.\nSperimentavo anche con IPv6 molto presto. Avevo accesso a 6bone, la rete sperimentale di test per IPv6. 6bone era un banco di prova mondiale, attivo dal 1996, per aiutare a sviluppare e diffondere IPv6 prima che l\u0026rsquo;internet di produzione fosse pronta. Trasportava IPv6 soprattutto dentro tunnel IPv4, usava un suo intervallo di indirizzi, 3ffe::/16, ed è stata spenta di proposito il 6 giugno 2006, quando l\u0026rsquo;IPv6 nativo era abbastanza maturo da stare in piedi da solo. Usavo sia lo stack IPv6 di Linux sia lo stack IPv6 di Microsoft Research per Windows XP. Le ho passate tutte. Ho cominciato con i tunnel IPv6 dentro IPv4. Sono passato a 6to4 (RFC 3056) per il tunnelling automatico. Poi all\u0026rsquo;IPv6 nativo completo quando sono passato a un ISP decente, Zen Internet. La maggior parte della gente non ha toccato IPv6 finché il datore di lavoro non l\u0026rsquo;ha obbligata. A quel punto io avevo già attraversato ogni meccanismo di transizione, su Linux e su Windows, perché volevo capire dove stavano andando le reti. Per questo IPv6 oggi mi viene naturale, invece di sembrarmi una cosa attaccata dopo. Oggi il novanta per cento del mio traffico passa su IPv6 nativo. Uso un\u0026rsquo;estensione del browser che si chiama IPvFoo per vedere cosa usa ogni connessione e se i siti servono protocolli misti o solo IPv4. Vecchie abitudini: mi piace vedere cosa succede davvero, non dare per scontato.\nIPv6: DUE DECENNI, DA SPERIMENTALE A CRITICO Da uno stack di prova a casa a un'infrastruttura di produzione su scala nazionale 6bone: il banco di prova sperimentale IPv6 Stack IPv6 di Linux e di Microsoft Research, uno accanto all'altro Tunnel IPv6 dentro IPv4 IPv6 trasportato sull'internet IPv4, configurato a mano 6to4 (RFC 3056) Tunnelling automatico: nessun broker manuale da mantenere IPv6 nativo End-to-end a casa su FTTP · Zen Internet · 2017 Nominet: infrastruttura nazionale critica IPv6 in produzione per il registro .uk · load balancer F5 su IPv4 e IPv6 Oggi circa il 90% del mio traffico passa su IPv6 nativo. Imparare facendo Tutto quello che so di tecnico l\u0026rsquo;ho imparato provandoci. Costruire cose, romperle, capire perché si sono rotte, ricostruirle.\nLa laurea era in Business Studies and Computer Network Engineering alla Sheffield Hallam, e mi ha dato l\u0026rsquo;unica cosa che studiare da soli non dà: come funziona davvero un\u0026rsquo;azienda, come una decisione tecnica diventa un risultato commerciale, e come pensare a un sistema in base al problema che risolve per chi lo paga. Da allora ha dato forma a ogni ruolo.\nLe competenze tecniche però sono venute dal fare, non dallo studiare. I problemi in produzione non arrivano con una bibliografia. Saper ricavare una cosa dai principi di base vale più di un attestato appeso al muro, e non scade.\nDa dove viene l\u0026rsquo;open source Quando i vertici di Microsoft, all\u0026rsquo;inizio degli anni Duemila, hanno definito l\u0026rsquo;open source «a cancer», io ero già immerso in Linux. Costruivo sistemi da zero. Usavo Gentoo. Contribuivo alle community.\nQuel tipo di ostilità verso chi condivide conoscenza e costruisce cose insieme non mi ha allontanato. Mi ha spinto più dentro. Se la risposta di un\u0026rsquo;azienda allo sviluppo collaborativo è chiamarlo una malattia, questo ti dice più sull\u0026rsquo;azienda che sul software. Ho scavato ancora più a fondo nell\u0026rsquo;open source e l\u0026rsquo;ho fatto diventare la mia prima scelta, invece di sostenere quella mentalità.\nCon gli anni, le ragioni pratiche hanno raggiunto quelle di principio. Le piattaforme proprietarie funzionano abbastanza bene finché il fornitore non cambia le licenze, viene comprato, o decide che il tuo caso d\u0026rsquo;uso non vale la pena di essere mantenuto. A quel punto sei bloccato. I tuoi dati, i tuoi flussi di lavoro e il know-how del tuo team sono tutti legati a una piattaforma che non controlli più. L\u0026rsquo;acquisizione di VMware da parte di Broadcom è l\u0026rsquo;esempio più recente e più visibile, ma è tutt\u0026rsquo;altro che l\u0026rsquo;unico.\nLo stesso ragionamento vale per il cloud. Chiediti cosa stai davvero affittando e la risposta è capacità che avresti potuto possedere, con un contatore che non si ferma mai. I vantaggi promessi, agilità, elasticità e meno roba da gestire, raramente arrivano nella forma descritta dalla presentazione, e il costo cresce anno dopo anno in un modo che l\u0026rsquo;attrezzatura di proprietà non conosce. Per questo ho potuto dimostrare, ogni volta che qualcuno me l\u0026rsquo;ha chiesto, che l\u0026rsquo;open source su hardware ben progettato dà più valore, più controllo e meno sorprese. Non è una posizione di moda. È una posizione su cui posso mettere dei numeri.\nCostruire una carriera La mia carriera è cominciata nel 2005 in un\u0026rsquo;azienda di fusioni di precisione a Worksop. Tecnico IT, in un piccolo team, a supporto di una cinquantina di utenti.\nQuel primo ruolo copriva parecchio. Manutenzione del sistema ERP Manusoft e dell\u0026rsquo;archiviazione documentale. Amministrazione di server Linux e Windows 2003. Sviluppo di report Crystal Reports per le decisioni di produzione e manutenzione. Amministrazione del centralino. Integrazione dei sistemi CAD/CAM e gestione della produzione robotizzata assistita da computer. Acquisti di hardware e software. Formazione degli utenti e supporto alle loro postazioni.\nScrivevo automazione già dal primo giorno. Ho aggiornato l\u0026rsquo;Active Directory dell\u0026rsquo;azienda e scritto script VB per mappare in automatico le unità, assegnare le stampanti e distribuire il software in base all\u0026rsquo;appartenenza ai gruppi. Era il 2006: vera automazione dell\u0026rsquo;infrastruttura nel mio primo ruolo da professionista.\nQuesto è l\u0026rsquo;IT in fabbrica. Quando la linea si ferma per qualcosa che segui tu, capisci in fretta che l\u0026rsquo;affidabilità non è una preferenza, e le persone in piedi accanto alla macchina te lo dicono da sole. È stata anche la prima volta che ho gestito Linux e Windows nello stesso edificio per lavoro, e da allora è sempre andata così.\nDa lì sono passato al supporto tecnico di prima linea. Primo e secondo livello, su un desk dedicato a un grande cliente multinazionale. Desktop Windows, Active Directory, Exchange 2007, Cisco VPN, Cisco Call Manager, gestione dei ticket basata su ITIL con Remedy. Quella disciplina ITIL, gestione dei cambiamenti, gestione dei problemi, processi strutturati, mi ha seguito in ogni ruolo successivo. Ho anche fatto da ponte molto presto tra il mondo Linux e quello Windows, configurando Services for Unix e risolvendo l\u0026rsquo;accesso di Citrix alle condivisioni NFS Unix.\nAnche su quel desk costruivo oltre il mansionario. Ho scritto un\u0026rsquo;interfaccia che creava e disattivava gli account utente direttamente dai dati delle risorse umane in Agresso, gestendo l\u0026rsquo;account Active Directory, l\u0026rsquo;appartenenza ai gruppi, la configurazione di Office Communicator, la casella Exchange e gli alias. Quella è integrazione di sistemi da una postazione di primo livello, che non era quello che diceva il titolo del ruolo.\nUno dei clienti che seguivo su quel desk mi ha poi assunto nell\u0026rsquo;azienda successiva.\nPoi è venuta un\u0026rsquo;azienda globale di comunicazioni, ICT e sicurezza. È lì che è cominciato davvero lo sviluppo di applicazioni. In due anni e mezzo ho costruito, o ho contribuito a costruire, sei sistemi interni diversi. Uno strumento web su misura per i preventivi. Interfacce di gestione degli ordini tra Salesforce e Agresso. Un catalogo di dati anagrafici in SharePoint alimentato da Salesforce e Agresso. Un sistema web su misura per la gestione dei progetti, con interfacce verso MSPE e Agresso per la parte finanziaria. E una migrazione da un\u0026rsquo;applicazione Salesforce Service Cloud personalizzata a ServiceNow, con l\u0026rsquo;implementazione completa dei processi ITIL. Scrivevo anche l\u0026rsquo;architettura delle interfacce SQL per le applicazioni aziendali e ottimizzavo le prestazioni di MS SQL. Amministravo IIS e Windows Server 2008 Terminal Services, ed ero responsabile del modello dati aziendale. I servizi di directory, Active Directory e LDAP, sono diventati qui una competenza centrale che mi ha seguito in tutti i ruoli successivi.\nHo anche gestito un programma di sostituzione con Windows 7 su tutto il Regno Unito, spostando l\u0026rsquo;intera base utenti britannica su nuove macchine HP in tre settimane, con il 95% che non ha segnalato alcun disturbo al proprio lavoro. Tre settimane è il tipo di numero che riesce solo se la preparazione è stata fatta bene, e la preparazione è la metà poco affascinante di cui nessuno chiede dopo.\nPoi è arrivata la gestione. Una società di progettazione di semiconduttori con un piccolo team di ingegneri sparsi in diversi paesi. Lì si sono riuniti diversi fili tutti insieme. Sviluppavo sulla piattaforma Force.com, trigger, pagine Visualforce, controller su misura, per integrare a livello globale i sistemi di contabilità e PSA di Financial Force. Nello stesso periodo costruivo due cluster HPC separati con avvio PXE. Uno per le attività di ingegneria nel Regno Unito ed Europa, uno per quelle in Cina. Entrambi usavano Red Hat con filesystem root su NFS, per creare farm di calcolo senza disco coerenti e ripetibili al 100%. Ho messo in produzione ZFS su Linux con apparati Dell PowerVault per uno storage unificato. Ho sostituito vecchi ambienti di sicurezza isolati con un Active Directory su Windows Server, usando Kerberos e LDAP nativi per il single sign-on tra Linux e Windows. Ho stabilizzato la connettività internazionale costruendo una rete unificata con tunnel OpenVPN, in condizioni operative difficili, fino in Cina.\nPer buona parte di quel ruolo ero l\u0026rsquo;unica persona a coprire tutto: le farm di calcolo Linux, il supporto Windows, lo sviluppo Salesforce e il supporto agli utenti su diversi fusi orari, sotto carichi di progettazione SoC su nodi tecnologici avanzati. Uno degli ingegneri che rispondevano a me è poi diventato sviluppatore Salesforce, e lo considero il risultato migliore di quegli anni.\nPoi è arrivata un\u0026rsquo;immersione vera in Linux. Supporto di terzo livello in Pulsant, un fornitore di cloud e hosting, su tutto lo stack. RHEL, CentOS, Ubuntu. Cluster MySQL con Galera, sharding di MongoDB, HAProxy con SNI e terminazione SSL, Apache, PostgreSQL, ottimizzazione di PHP-FPM per e-commerce ad alte prestazioni, posta con Postfix, BIND e PowerDNS per l\u0026rsquo;hosting DNS, Varnish per la cache web, Squid per la cache proxy. IPTables, IPset e Cisco ASA per il firewall e la protezione dai DoS. Ottimizzazione delle prestazioni dei server Linux per rete e storage. Risoluzione di problemi su CPanel, sviluppo di template di monitoraggio SolarWinds e amministrazione di New Relic. Tutto su VMware 5.5 con vCloud Director sotto.\nE non era solo supporto. Lì ho progettato un prodotto di replica di database basato su Galera e l\u0026rsquo;ho portato dall\u0026rsquo;idea al prototipo fino a un servizio che i clienti pagavano. Non era un esercizio da laboratorio. È stato costruito e messo alla prova su carichi reali di clienti reali e paganti, che non è una cosa che un fornitore di hosting concede alla leggera.\nIl terzo livello ti insegna cosa vuol dire essere l\u0026rsquo;ultimo anello dell\u0026rsquo;escalation. Quando arriva a te, dietro di te non c\u0026rsquo;è nessuno che lo risolve.\nPoi Nominet, il registro dietro ogni nome a dominio .uk. DNS su scala nazionale. L\u0026rsquo;infrastruttura deve essere solidissima ventiquattro ore al giorno, tutti i giorni, senza nessun fermo e con reperibilità fuori orario. VMware 5.5 e 6, storage HP 3par con zoning fibre channel su Brocade, RHEL 6 e 7 gestiti con Puppet, load balancer F5 su IPv4 e IPv6, posta con Postfix, e un\u0026rsquo;installazione di Zabbix che ho costruito per sostituire il vecchio monitoraggio VMware Hyperic. Ho anche adottato e personalizzato ServiceNow, implementando workflow, distribuzione delle applicazioni e rilevamento dei nodi Linux per la gestione della configurazione e l\u0026rsquo;inventario. Ho aiutato a progettare e costruire i processi per affidare in outsourcing il service desk fuori orario e ridurre il peso della reperibilità.\nIn Nominet sono finito a essere la prima persona a cui si chiedeva, che fosse Linux, Unix, ServiceNow o qualcosa che nessuno sapeva collocare, e ho sempre fatto in modo di tornare con qualcosa che funzionava, non con qualcosa che suonava bene. È il tipo di posto dove impari che l\u0026rsquo;approccio noioso e disciplinato all\u0026rsquo;infrastruttura è quello che sopravvive all\u0026rsquo;impatto con un martedì mattina.\nDopo Nominet sono passato a infrastruttura e hosting. VMware 6.7, Zerto per il disaster recovery, storage Dell Compellent e Nexsan con zoning fibre channel su Brocade, Citrix Cloud con gestione dei profili FSLogix insieme ad Azure. Anche lì ho introdotto il monitoraggio con Zabbix, progettando template e script da zero.\nPoi il retail. Gestione diretta di un piccolo team, riportare in casa da una terza parte l\u0026rsquo;amministrazione di VMware 6.7, mettere in produzione il monitoraggio Zabbix (di nuovo, al posto del tentativo fallito di qualcun altro), ricostruire la distribuzione dei sistemi operativi attorno a PXE e Chocolatey, aggiornare la rete con apparati Fortinet e mettere ordine negli acquisti di hardware.\nPoi il ruolo che ha cambiato tutto. Allo UK Centre for Ecology \u0026amp; Hydrology ho diretto il team di calcolo scientifico, quattro persone che rispondevano a me, e ho ricostruito l\u0026rsquo;infrastruttura dalle fondamenta. Un cloud privato Proxmox VE a 7 nodi con storage Ceph iperconvergente su switching doppio a 100Gb. Un cluster HPC a 8 nodi su InfiniBand HDR con Slurm, con SR-IOV per dare alle VM accesso alla fabric ed EasyBuild per compilare il software. Migrazione da GPFS a storage Ceph tutto NVMe. Ansible con Netbox come fonte di verità per tutto: gestione delle patch, controllo della deriva di configurazione, integrazioni con Cloudflare, PowerDNS e Active Directory. Routing dinamico OSPF per le reti cloud. Mirror locali dei repository per la massima velocità e coerenza di distribuzione. Reinstallazione dell\u0026rsquo;ambiente HPC da CentOS 7 a Rocky 9. Cloudflare per il DNS (DNSSEC compreso), la protezione dai DDoS e l\u0026rsquo;accesso remoto Zero Trust. Questo ha incluso la migrazione di 25 zone DNS autoritative da BIND 9 in casa a Cloudflare in due giorni lavorativi. Sono stati aggiornati diversi registri, e il tutto è stato integrato con Ansible e Let\u0026rsquo;s Encrypt.\nTutto con strumenti open source, budget stretto, costruito apposta per stare lontano dalla trappola delle licenze Broadcom e VMware prima che si chiudesse. Quello ha chiuso la discussione. L\u0026rsquo;infrastruttura open source a quella scala non è solo praticabile: è migliore, e ho il cluster e le fatture per dimostrarlo.\nL\u0026rsquo;altra metà di quel lavoro erano le quattro persone del team. Agli scienziati non interessa come si chiama lo storage. Gli interessa che il job giri stanotte, e che la persona a cui chiedono sappia spiegare la risposta senza farli sentire stupidi per aver chiesto.\nCome si tiene tutto insieme Il passaggio al presales in croit non è stato un cambio di direzione. È stato tutto che arrivava nello stesso posto.\nIT in fabbrica L'affidabilità non è facoltativa quando la produzione dipende da te Supporto di prima linea Imparare ad ascoltare, comunicare e avere pazienza Sviluppo di applicazioni Costruire sistemi che risolvono problemi reali dell'azienda Gestione IT globale Portare il carico tecnico e intanto far crescere le persone Ingegneria Linux in profondità L'ultimo anello dell'escalation: nessun altro da chiamare DNS critico in Nominet Infrastruttura su scala nazionale e disciplina Infrastruttura e hosting VMware, storage e disaster recovery su larga scala Calcolo scientifico (UKCEH) Ricostruito su Proxmox VE + Ceph + HPC, tutto open source Presales in croit Progettare il sistema, difendere il progetto, essere onesti L\u0026rsquo;IT in fabbrica mi ha insegnato che l\u0026rsquo;affidabilità smette di essere una preferenza nel momento in cui la produzione dipende da lei. Il supporto di prima linea mi ha insegnato ad ascoltare prima di fare qualsiasi altra cosa. Lo sviluppo di applicazioni mi ha insegnato a costruire sistemi che risolvono un problema dell\u0026rsquo;azienda, non uno interessante. Gestire un team globale mi ha insegnato a portare il carico tecnico e far crescere comunque le persone attorno a me, che è più difficile di ognuna delle due metà da sola. Il Linux di terzo livello mi ha insegnato com\u0026rsquo;è essere l\u0026rsquo;ultimo anello dell\u0026rsquo;escalation. Usare Windows e Linux fianco a fianco per vent\u0026rsquo;anni mi ha insegnato come si comportano davvero le piattaforme sotto carico, rispetto a quello che promette la scheda tecnica. VMware, che ho gestito in quasi ogni ruolo dal 2008 in poi, mi ha insegnato com\u0026rsquo;è la virtualizzazione enterprise su larga scala, e poi cosa succede quando il terreno commerciale si sposta sotto una piattaforma su cui poggia tutto il parco macchine. Storage e reti mi hanno insegnato dove stanno i problemi difficili. La sicurezza è passata attraverso tutto, dai firewall e dalle VPN dei primi tempi fino a DNSSEC, Zero Trust e hardening oggi. Nominet mi ha insegnato la disciplina.\nMetti tutto insieme e ottieni il presales. Progetti il sistema, poi difendi il progetto, e resti onesto su quello che non farà, perché qualcuno sta per spendere soldi veri sulla tua parola.\nIn croit questo vuol dire lavorare con realtà in tutta Europa e nell\u0026rsquo;area Asia-Pacifico che stanno ripensando la loro virtualizzazione e il loro storage. Di solito si parla di lasciare VMware per Proxmox VE con Ceph. I carichi che arrivano sono per lo più Windows, quindi l\u0026rsquo;esperienza su più piattaforme non è roba vecchia. È quello che faccio oggi.\nLa parte a cui tengo è l\u0026rsquo;onestà. Quello che metto davanti a qualcuno deve essere la cosa che funziona nel suo edificio, alla sua scala, con i vincoli che ha davvero, e se l\u0026rsquo;attrezzatura che ha già fa quasi tutto il lavoro, allora è quello che gli dirò.\nLO STACK CHE PROGETTO E COSTRUISCO OGGI Automazione e fonte di verità Ansible · NetBox · Let's Encrypt Calcolo Proxmox VE: macchine virtuali KVM + container LXC Storage Ceph: blocchi RBD · CephFS · tutto NVMe Rete Fabric 25/100GbE · BGP / OSPF · IPv6 nativo Fondamenta Open source, su hardware di tua proprietà Storage Lo storage continuava a essere il posto dove stavano i problemi più difficili. Non era un piano di carriera: è andata semplicemente così.\nIl fascino è cominciato presto. Negli anni Novanta sognavo i dischi Iomega Zip e Jaz: 100MB, e poi un intero gigabyte, su una sola cartuccia rimovibile, quando i floppy che tutti gli altri si passavano contenevano appena 1,44MB. Erano attrezzature care, quindi per anni sono rimasti un desiderio e non un possesso. Quando finalmente ho preso un\u0026rsquo;unità Zip USB, le chiavette USB avevano appena cominciato a comparire, e il formato che avevo voluto per così tanto tempo era già sulla via del tramonto. Una lezione precoce su quanto in fretta si muove lo storage, e su quanto in fretta l\u0026rsquo;indispensabile di oggi diventa il cassetto pieno di cianfrusaglie di domani.\nAnche l\u0026rsquo;ottico faceva parte della stessa storia. Nel 1998 avevo un masterizzatore HP CD-RW a quadrupla velocità, ed era una bomba. Leggeva e riscriveva dischi che le unità successive, più veloci, semplicemente rifiutavano, quindi si è guadagnato il posto come unità di soccorso molto dopo che avrebbe dovuto andare in pensione.\nTutto è cominciato dall\u0026rsquo;interconnessione. Ho lavorato con hardware di storage di ogni tipo. IDE, diverse generazioni di SCSI, SATA, SAS e NVMe sul lato collegato direttamente. ATA over Ethernet e iSCSI sul lato storage di rete. HP 3par, Dell Compellent, Dell PowerVault, Nexsan, ognuno con le sue stranezze e i suoi modi di guastarsi.\nDa lì sono salito lungo lo stack. LVM in cluster mi ha insegnato come si comporta lo storage condiviso quando più nodi hanno bisogno di accedervi insieme, e cosa succede quando locking e fencing non sono a posto. ZFS mi ha insegnato cosa succede quando pensi davvero all\u0026rsquo;integrità dei dati a livello di filesystem. GPFS mi ha mostrato i filesystem paralleli su larga scala. Ceph mi ha insegnato quanto si comportano diversamente i sistemi distribuiti quando qualcosa si guasta.\nCon gli anni, quello che era cominciato come «quello che fa anche lo storage» è diventato «quello che chiami quando lo storage va progettato come si deve».\nReti Le reti ci sono state fin dall\u0026rsquo;inizio. Non sono una competenza di contorno: sono una competenza centrale. TCP/IP, DHCP e DNS attraversano ogni singolo ruolo che ho avuto, da McKenna in poi.\nLavorare in Nominet voleva dire lavorare sull\u0026rsquo;infrastruttura dietro il registro dei nomi a dominio del Regno Unito. È DNS su scala nazionale. Nomi, risoluzione, deleghe, e l\u0026rsquo;aspettativa che funzioni ogni singola volta.\nHo gestito zone autoritative su BIND 9, configurato DNSSEC, messo su load balancer F5 per IPv4 e IPv6, e più tardi migrato interi parchi DNS su Cloudflare con automazione via API e integrazione con Let\u0026rsquo;s Encrypt. Ho costruito l\u0026rsquo;infrastruttura DNS per l\u0026rsquo;avvio PXE nei deployment di cluster sia nel Regno Unito sia in Cina. Il DNS lo capisco da entrambi i lati. Self-hosted, dove ogni guasto è tuo. E gestito, dove ti fidi di un fornitore e devi verificare quella fiducia con il monitoraggio.\nOltre al DNS, le reti attraversano ogni ruolo che ho avuto. VLAN, bonding, LACP, zoning fibre channel con Brocade, firewall Fortinet e Cisco ASA, IPTables e IPset. Progettazione di fabric a 25GbE e 100GbE, BGP, routing dinamico OSPF, gestione dell\u0026rsquo;MTU, architettura IPv6. Tunnel VPN, da OpenVPN su collegamenti internazionali difficili fino a WireGuard e cloudflared per l\u0026rsquo;accesso sicuro moderno. Anche Samba è stata una competenza professionale in diversi ruoli, a fare da ponte tra la condivisione di file su Linux e l\u0026rsquo;integrazione con i domini Windows, molto prima che testassi l\u0026rsquo;implementazione di AD in alpha.\nUn cluster Ceph è un\u0026rsquo;applicazione di rete. Il tetto delle prestazioni dello storage lo fissa la rete che ci sta sotto. I modi in cui si guasta sono modi in cui si guasta la rete. Non è una cosa che impari da un libro. È una cosa che impari risolvendo problemi alle due di notte.\nLinux Ho lavorato con le famiglie RHEL, Debian, SUSE e Fedora per più di vent\u0026rsquo;anni. Professionalmente, questo ha voluto dire RHEL e CentOS per i servizi in produzione, Ubuntu per l\u0026rsquo;hosting di applicazioni, Rocky per l\u0026rsquo;HPC, e Gentoo e Fedora per uso personale. Ho superato la valutazione delle competenze Linux di LinkedIn.\nLa profondità è venuta da problemi che non hanno una risposta su Stack Overflow, ed è lì che finisci per imparare il sottosistema PCI come si deve e non per sentito dire: gruppi IOMMU, ACS, VFIO, SR-IOV, Resizable BAR e quanto ti costa in silenzio la traduzione DMA, e i parametri di avvio del kernel come comandi che cambiano il comportamento della macchina, non come una lista da copiare da un wiki perché il blog di qualcuno diceva che gli aveva risolto il problema.\nI problemi di prestazioni di storage e virtualizzazione risalgono quasi sempre a uno strato che nessuno ha guardato. È lì che sta la mia conoscenza di Linux.\nWindows Linux è dove passo il mio tempo oggi, ma il lato Windows è altrettanto reale ed è stato presente in ogni lavoro che ho avuto. Windows Server, Active Directory, LDAP, Exchange, IIS, Microsoft SQL Server. Niente di tutto questo è una competenza superata che ho messo da parte.\nConta a livello di guest, che è dove la maggior parte della gente smette di guardare. Quando un carico Windows gira su KVM, la persona che sa dirti come si comporta quel guest con una certa topologia di CPU, e sa ricondurre un problema di prestazioni a una patch Microsoft invece di dare la colpa all\u0026rsquo;hypervisor, è la persona che ha passato anni su entrambi i lati della staccionata. La maggior parte delle discussioni sulle prestazioni delle VM a cui ho assistito le ha vinte chi conosceva il guest, non l\u0026rsquo;host.\nLe persone che ho supportato vanno dai professori universitari e dai membri del consiglio di amministrazione fino alla squadra che si occupa degli edifici. Il lavoro è lo stesso in ogni caso. Capire di cosa hanno davvero bisogno, farlo funzionare, e spiegarlo in un modo che non li faccia sentire stupidi per aver chiesto.\nVMware VMware è la piattaforma su cui sono cresciuto professionalmente, in sette ruoli dal 2008 in poi, e ne ho gestito tutto lo stack: ESXi, vCenter, vSAN, cluster vSphere, vMotion. So cosa fa bene. So dove non lo fa. E ho visto l\u0026rsquo;acquisizione da parte di Broadcom riscrivere la realtà commerciale sotto realtà che ci avevano costruito sopra tutto il parco macchine, che è una cosa diversa dal leggerne.\nNon puoi aiutare qualcuno a lasciare una piattaforma su cui non hai mai lavorato davvero. Per questo posso dirgli cosa sta lasciando, cosa sta ottenendo, e quale parte della migrazione sarà peggio di quanto gli hanno fatto credere.\nAutomazione Il modo di pensare da automazione è cominciato nel mio primo ruolo da professionista, nel 2006. Script VB in McKenna per automatizzare la mappatura delle unità in AD, l\u0026rsquo;assegnazione delle stampanti e la distribuzione del software. Poi strumenti di provisioning dalle risorse umane ad AD in BT Engage IT. Poi sistemi di avvio PXE per cluster di calcolo senza disco in Sondrel. Poi Puppet in Nominet. Poi pacchetti Chocolatey e ricostruzione via PXE in un\u0026rsquo;azienda del retail. Poi la personalizzazione dei workflow ServiceNow in diversi ruoli.\nOggi è Ansible con Netbox come fonte di verità. Non perché vanno di moda, ma perché un\u0026rsquo;infrastruttura che non si può ricostruire dal codice non è un\u0026rsquo;infrastruttura di cui ti puoi fidare.\nLa documentazione è lo stesso discorso. La conoscenza che vive solo nella testa di qualcuno è un singolo punto di guasto, ed esce dall\u0026rsquo;edificio alle cinque insieme a tutti gli altri. Come un disco senza ridondanza dietro, e va trattata con la stessa serietà.\nMonitoraggio La mia esperienza di monitoraggio è cominciata con SolarWinds in Pulsant, con il monitoraggio su larga scala di tutto il parco di hosting. Zabbix è arrivato dopo, e si è guadagnato una menzione a parte perché da allora l\u0026rsquo;ho messo quasi ovunque. È cominciato in Nominet, dove ho gestito la gara e i test e poi ci ho portato su Zabbix al posto del vecchio Hyperic di VMware, e ha vinto perché era davvero intuitivo e non l\u0026rsquo;ennesima cosa con Nagios travestito sotto. Dopo l\u0026rsquo;ho installato da zero su una piattaforma di hosting e infrastruttura, ho sostituito il tentativo fallito di qualcun altro nel retail, e l\u0026rsquo;ho usato per tenere d\u0026rsquo;occhio un cluster HPC a 8 nodi in UKCEH.\nOgni volta ho progettato io i template di monitoraggio e scritto io gli script. Quando nel 2018 ho sostenuto gli esami Zabbix Specialist e Professional, lo installavo già da anni.\nComunicazione Lavorare su infrastrutture critiche ti insegna a essere preciso. Lavorare nel presales ti insegna a essere chiaro. Le due cose sono collegate, ma non sono la stessa.\nEssere precisi non serve a niente se chi ascolta non riesce a seguire il ragionamento, quindi ho dovuto imparare a fare la stessa spiegazione due volte: una per l\u0026rsquo;ingegnere che vuole vedere la mappa CRUSH, e una per chi deve approvare perché il budget è il numero che è. Non semplifico niente. Rendo solo visibile ogni passaggio del ragionamento, e lascio che mi fermino dove vogliono.\nAnni di utenti finali mi hanno insegnato un altro tipo di pazienza. Quelli che si considerano i più intelligenti della stanza di solito sono quelli che si comportano in modo più impotente. Quelli che esordiscono con «non sono molto tecnico» tendono ad ascoltare, seguire i passaggi e risolvere in dieci minuti. E quelli che ti dicono di sapere esattamente cosa stanno facendo, di solito hanno peggiorato le cose prima di alzare il telefono.\nL\u0026rsquo;esperienza con i sistemi aziendali qui aiuta più di quanto la gente si aspetti, perché ho sempre dovuto tradurre in entrambe le direzioni. L\u0026rsquo;architettura SQL per un responsabile delle operazioni, un progetto di storage per un CTO, o stare seduto accanto a qualcuno alla sua scrivania a mostrargli la cosa che nessuno gli aveva mai mostrato. Ogni volta la stessa competenza.\nCommunity Condividere conoscenza ha attraversato tutta la carriera.\nEro attivo sui forum di Gentoo quando costruivo sistemi dai sorgenti e dovevo capire perché una combinazione di USE flag faceva fallire una compilazione. Ho contribuito sui forum di Samba quando lavoravo a problemi di condivisione di file e di integrazione con i domini tra Linux e Windows. Non era solo fare domande. Ho costruito un domain controller Active Directory basato su Samba quando il supporto ad AD era ancora in alpha. L\u0026rsquo;ho testato con client Windows 2000, XP e Vista e ho riportato i risultati alla community.\nOggi contribuisco attivamente ai forum della community Proxmox come DamienDye. Do una mano con le prestazioni del passthrough NVMe, l\u0026rsquo;ottimizzazione delle VM Windows, la risoluzione dei problemi di Ceph e le reti dei cluster.\nLe tecnologie cambiano. Il principio no. Se ho risolto un problema, non c\u0026rsquo;è niente da guadagnare a tenerlo per me, e qualcuno alle due di notte tra sei mesi sarà contento che sia scritto da qualche parte.\nHo anche l\u0026rsquo;abitudine di scavare nei problemi oltre quello che il compito richiede strettamente. Ho progettato una scheda fai-da-te di protezione dalla perdita di alimentazione per NVMe, perché volevo capire esattamente perché la corruzione dell\u0026rsquo;FTL succede a livello hardware. Ho studiato i protocolli della posta self-hosted perché volevo capire JMAP partendo dalla RFC, invece di fidarmi e basta di un fornitore. Ho costruito questo blog perché scrivere le cose come si deve è il modo per trovare i buchi nella propria comprensione.\nCommunity lontano dalla tastiera Non sono stati tutti forum.\nNel 2018 sono stato uno dei fondatori della Longford Park Community Association a Banbury, nel quartiere dove vivo. Quattro fasi di nuove costruzioni, un centro civico previsto nei progetti, e niente che esistesse per gestirlo. Così un pugno di residenti ha messo in piedi qualcosa.\nPrima mi sono occupato della parte IT, perché era quello che avevo da dare. Il dominio lpca.org.uk è andato online a gennaio 2018, e dietro ho costruito il sito, i sistemi di posta e le liste del comitato, e ho scritto l\u0026rsquo;informativa sulla privacy.\nSono stato nel comitato dall\u0026rsquo;inizio, e ne sono stato presidente da dicembre 2018 a febbraio 2020. Quattordici mesi, e le cose che contavano davvero sono arrivate tutte lì dentro. L\u0026rsquo;abbiamo fatta registrare come ente benefico l'11 febbraio 2019, numero 1181953. Ho sistemato il contratto di locazione commerciale per l\u0026rsquo;edificio. Poi abbiamo aperto il centro.\nEra a questo che serviva il presidente. Non ordini del giorno e verbali. Aprire un edificio in cui potessero entrare qualche centinaio di famiglie. I residenti volontari lo gestiscono ancora per le fasi da 1 a 4 del quartiere: tre sale, una cucina e un parcheggio, affittati a ore a chiunque nel quartiere li voglia.\nI comitati di volontari vanno avanti a buona volontà, e la buona volontà non è un modello di governance. Quindi ho fatto rispettare lo statuto a tutti, me compreso. Ho chiesto perché cercavamo persone fuori quando lo statuto diceva di coinvolgere i residenti, e ho fermato un invio di posta che sarebbe finito nella cartella spam di tutto il quartiere. Non per fare il difficile. Un\u0026rsquo;associazione di residenti che non riesce a raggiungere i residenti ha già fallito l\u0026rsquo;unico compito che ha, e insieme alla lamentela ho mandato i link per risolvere.\nIl centro è ancora aperto e io non sono nel comitato, ed è giusto così. Qualsiasi cosa funzioni solo finché resti lì a tenerla in piedi non è mai stata costruita come si deve.\nQuesto sito Questo blog è un sito statico Hugo con il tema PaperMod. È ospitato su Cloudflare Workers, che serve il sito compilato come asset statici.\nQui scrivo dell\u0026rsquo;infrastruttura con cui lavoro tutti i giorni: Proxmox VE, Ceph, Ansible, Netbox, certificati e qualsiasi altra cosa su cui stia scavando quella settimana. È scritto per essere usato, con i comandi e i numeri dentro, perché un articolo che non puoi seguire alla tastiera è solo decorazione. Niente fuffa di marketing. Se qualcosa ha degli spigoli, l\u0026rsquo;articolo lo dice.\nContatti Mi trovi su LinkedIn o sui forum di Proxmox.\nSe stai valutando Ceph o Proxmox per la tua realtà e vuoi una conversazione seria e non una presentazione commerciale, scrivimi. Porta il carico di lavoro, i vincoli e il budget che hai davvero. Ti dirò cosa farà, cosa non farà, e se la risposta onesta è che dovresti tenerti quello che hai e configurarlo come si deve, avrai anche quella risposta.\n","permalink":"https://blogs.damiendye.uk/it/about/","summary":"Damien Dye: Presales Engineer, specialista di infrastrutture e sostenitore dell\u0026rsquo;open source.","title":"Chi sono"}]