[{"content":"50 TOPS जो कुछ नहीं कर रहे पिछले दो साल में बिका हर Ryzen AI लैपटॉप अपने अंदर एक Neural Processing Unit (NPU) रखता है, सिलिकॉन का एक ऐसा हिस्सा जो सिर्फ़ AI मॉडल के पीछे के गणित के लिए बना है। मेरे लैपटॉप में, Ryzen AI 7 PRO 350 वाले एक ThinkPad में, AMD इसे 50 TOPS तक बताता है, यानी हर सेकंड खरबों ऑपरेशन1। इसके पैसे आपने दिए हैं। एक सामान्य Linux इंस्टॉल पर यह कुछ नहीं करता।\nइस साल यह बदला। एक बार सेट हो जाए तो NPU एक चैट विंडो के पीछे 4 अरब पैरामीटर का लैंग्वेज मॉडल चलाता है, साथ में स्पीच-टू-टेक्स्ट भी, सब लैपटॉप पर, बिना अकाउंट, बिना सब्सक्रिप्शन, और मशीन से कुछ भी बाहर नहीं जाता। जो बात आप किसी और की वेबसाइट में टाइप नहीं करना चाहेंगे, उसके लिए यही पूरा मकसद है। जवाब देते समय पूरी चिप करीब 21 W लेती है, और खाली बैठे 9 W से कम।\nक्या चलता है कहाँ एड्रेस Qwen 3.5 4B, 256k-टोकन कॉन्टेक्स्ट NPU, एक कंटेनर में http://[::1]:52625/v1 स्पीच-टू-टेक्स्ट: OpenAI का Whisper, whisper-v3:turbo NPU, वही कंटेनर वही, /audio/transcriptions Open WebUI, चैट पेज CPU, एक कंटेनर में http://[::1]:3000 amdxdna कर्नेल ड्राइवर, फ़र्मवेयर होस्ट /dev/accel/accel0 दो नियमों ने इस बिल्ड को शक्ल दी। होस्ट पर सिर्फ़ कर्नेल ड्राइवर और उसका फ़र्मवेयर जाता है; हर मॉडल फ़्रेमवर्क एक rootless podman कंटेनर में चलता है। और हर सर्विस सिर्फ़ IPv6 loopback पर सुनती है, IPv4 पर कुछ भी नहीं। दोनों बातें गड़बड़ तरीके से करने से कम मेहनत निकलीं, और दोनों ने ऐसी समस्याएँ पकड़ीं जो वरना मैं वैसे ही छोड़ देता।\nLinux पर इसके लिए क्या चाहिए इस चिप का NPU AMD का दूसरी पीढ़ी का डिज़ाइन है, XDNA2। यह मायने रखता है, क्योंकि जो सॉफ़्टवेयर इस पर लैंग्वेज मॉडल चलाता है वह XDNA2 वाले पार्ट्स (Ryzen AI 300 और 400 सीरीज़, Strix Halo) को सपोर्ट करता है, Ryzen 7040 और 8040 वाली पहली पीढ़ी को नहीं2। शुरू करने से पहले अपना चेक कीजिए:\n$ lspci -nn | grep -i \u0026#39;neural\\|signal processing\u0026#39; c5:00.1 Signal processing controller [1180]: Advanced Micro Devices, Inc. [AMD] Strix/Krackan/Krackan2/Strix Halo Neural Processing Unit [1022:17f0] (rev 20) उस डिवाइस और एक चैट जवाब के बीच चार परतें हैं, और होस्ट और कंटेनर के बीच का बँटवारा ही पूरा डिज़ाइन है:\nपरत यह क्या है कहाँ रहती है amdxdna कर्नेल ड्राइवर, /dev/accel/accel0 बनाता है3 होस्ट, DKMS के ज़रिए NPU फ़र्मवेयर npu_7.sbin, इस चिप पर 1.1.2.64 होस्ट, linux-firmware से XRT + amdxdna प्लगइन AMD की रनटाइम लाइब्रेरी और उसका NPU बैकएंड कंटेनर FastFlowLM LLM रनटाइम, NPU kernels समेत कंटेनर होस्ट पर क्या रहता है और कंटेनर में क्या Rootless podman, जब चाहूँ दोबारा बनाऊँ Open WebUI चैट पेज, CPU पर [::1]:3000 FastFlowLM [::1]:52625 XRT + NPU प्लगइन ड्राइवर commit से मेल खाता होस्ट: कर्नेल मॉड्यूल और उसका फ़र्मवेयर, और कुछ नहीं न XRT, न रनटाइम, न मॉडल। बस एक डिवाइस नोड है जो कंटेनर में जाता है। amdxdna मॉड्यूल, DKMS से बना npu_7.sbin XDNA2 NPU /dev/accel/accel0 बँटवारा। जो कुछ अक्सर बदलता है वह कंटेनर में रहता है; होस्ट एक कर्नेल मॉड्यूल और उसका फ़र्मवेयर रखता है, और सिर्फ़ एक डिवाइस नोड इस पार से उस पार जाता है। Kernel 7.x में amdxdna in-tree आता है, लेकिन AMD इसे पहले अपनी रिपॉज़िटरी में डेवलप करता है, और userspace प्लगइन को उसी कर्नेल मॉड्यूल से मेल खाना पड़ता है जिससे वह बात करता है4। दोनों के बीच का फ़ासला छोटा नहीं है। इस लैपटॉप पर:\nIn-tree, Fedora का 7.2.15 और 7.3.3 Out-of-tree, amd/xdna-driver 24dfd686 पर ड्राइवर इंटरफ़ेस 0.105 0.19 मॉड्यूल वर्ज़न कोई नहीं 2.27.0_20261113 कितने NPU PCI ID से जुड़ता है 6 8 कितनी फ़र्मवेयर फ़ाइलें माँगता है 7 59 यह चिप कौन सा फ़र्मवेयर लोड करती है 17f0_10/npu_7.sbin, 1.1.2.64 वही फ़ाइल इंटरफ़ेस में नौ वर्ज़न का फ़र्क, और Linux 7.3, सबसे नई रिलीज़, अब भी 0.10 पर है। दोनों जिस एक चीज़ पर सहमत हैं वह फ़र्मवेयर है, और वह Fedora के linux-firmware से आता है, किसी ड्राइवर से नहीं। इसलिए मैं दोनों हिस्से amd/xdna-driver के एक ही commit से बनाता हूँ, मॉड्यूल होस्ट पर रखता हूँ, और मेल खाता userspace इमेज में पका देता हूँ।\nड्राइवर: सब बनाइए, रखिए सिर्फ़ कर्नेल वाला हिस्सा amd/xdna-driver XRT को git submodule के तौर पर साथ रखता है, और इसे बनाने पर XRT के RPM और एक प्लगइन पैकेज निकलते हैं। प्लगइन पैकेज में ड्राइवर का सोर्स भी होता है, जिसे वह DKMS (Dynamic Kernel Module Support, वह चीज़ जो हर नए कर्नेल के लिए मॉड्यूल दोबारा बनाती है) के साथ रजिस्टर करता है। इसमें कुछ भी मुश्किल नहीं:\ngit clone --recursive https://github.com/amd/xdna-driver.git \u0026amp;\u0026amp; cd xdna-driver sudo ./tools/amdxdna_deps.sh (cd xrt/build \u0026amp;\u0026amp; ./build.sh -npu -opt) # XRT RPMs in xrt/build/Release/ (cd build \u0026amp;\u0026amp; ./build.sh -release) # plugin RPM, driver source inside Fedora 45 पर dependency स्क्रिप्ट एक एरर पर खत्म होती है। उसे अनदेखा कीजिए:\nयह क्या माँगती है क्या होता है फ़र्क पड़ता है? protobuf-devel पहले से इंस्टॉल protobuf3-compiler से टकराता है नहीं, इसके बिना XRT बस एक tracing टूल छोड़ देता है redhat-lsb ऐसा कोई पैकेज नहीं, Fedora ने इसे हटा दिया नहीं बाकी सब पहले से इंस्टॉल है वहाँ आखिरी टैग की हुई रिलीज़ फ़रवरी की है, इसलिए main ही रिलीज़ चैनल है। मैं मई के बिल्ड से नवंबर वाले पर गया: 550 commits, XRT 2.23 से 2.27।\nअपग्रेड वही ड्राइवर मिटा देता है जो उसने अभी इंस्टॉल किया अपग्रेड की मेरी पहली कोशिश ने मॉड्यूल को पूरी तरह हटा दिया। RPM नए पैकेज की इंस्टॉल स्क्रिप्ट चलाता है, जो नया ड्राइवर बनाकर DKMS में रजिस्टर करती है, और फिर पुराने पैकेज की removal स्क्रिप्ट चलाता है। वह removal स्क्रिप्ट ड्राइवर वर्ज़न एक ऐसी फ़ाइल से पढ़ती है जिसे नया पैकेज पहले ही ओवरराइट कर चुका है, इसलिए वह उसी वर्ज़न को अनरजिस्टर कर देती है जो अभी-अभी इंस्टॉल हुआ था। dnf का आउटपुट यह दो लाइनों में, एक के बाद एक, कहता है:\n\u0026gt;\u0026gt;\u0026gt; Successfully installed and enabled DKMS for xrt-amdxdna/2.27.0 \u0026gt;\u0026gt;\u0026gt; Removing driver source: xrt-amdxdna/2.27.0... कुछ फ़ेल नहीं हुआ, कुछ लाल नहीं हुआ, और अगला बूट चुपचाप वही लोड कर देता जो कर्नेल के साथ आया था। क्या मैं पूछ सकता हूँ कि एक removal स्क्रिप्ट अपग्रेड पर यह जाँचे बिना क्यों चलती है कि यह अपग्रेड है या नहीं? RPM हर scriptlet को यह जवाब उसके पहले argument के रूप में देता है। बस एक if है।\nRPM अपग्रेड अभी इंस्टॉल हुए ड्राइवर को कैसे अनरजिस्टर करता है एक dnf अपग्रेड, उसी क्रम में जिसमें RPM चलाता है नया %post 2.27 बनाता है, DKMS में रजिस्टर DKMS में 2.27 नई फ़ाइलें आती हैं वर्ज़न फ़ाइल अब 2.27 कहती है DKMS में 2.27 पुराना %preun वह फ़ाइल पढ़ता है, 2.27 अनरजिस्टर 2.27 गया अगला बूट in-tree मॉड्यूल लोड, कोई चेतावनी नहीं आपका बनाया बिल्ड नहीं DKMS में: इलाज एक जाँच है। %preun scriptlet को अपग्रेड पर $1 = 1 और हटाने पर $1 = 0 मिलता है। सिर्फ़ हटाने पर कुछ अनरजिस्टर होना चाहिए। RPM अपग्रेड किस क्रम में चलाता है। नया पैकेज अपना ड्राइवर रजिस्टर करता है, फिर पुराना पैकेज उस वर्ज़न को अनरजिस्टर करता है जिसका नाम साझा वर्ज़न फ़ाइल में है, और तब तक वह नया वाला होता है। यही वजह है कि अब होस्ट को RPM बिल्कुल नहीं मिलते। ड्राइवर का सोर्स प्लगइन पैकेज के अंदर एक tarball है, इसलिए मैं उसे निकालकर सीधे DKMS को दे देता हूँ:\nT=$(mktemp -d) \u0026amp;\u0026amp; rpm2cpio xrt_plugin*.rpm | (cd $T \u0026amp;\u0026amp; cpio -idm --quiet) D=$T/opt/xilinx/xrt/share/amdxdna sudo mkdir -p /usr/src/xrt-amdxdna-2.27.0 sudo tar -xf $D/amdxdna.tar.gz -C /usr/src/xrt-amdxdna-2.27.0 sudo cp $D/dkms.conf $D/configure_kernel.sh /usr/src/xrt-amdxdna-2.27.0/ sudo dkms install xrt-amdxdna/2.27.0 sudo modprobe -r amdxdna; sudo modprobe amdxdna रीबूट नहीं। यह Linux है, और उस वक्त किसी ने डिवाइस खोला नहीं है, इसलिए मॉड्यूल चलते-चलते बदल जाता है। इसके बाद DKMS इसे dnf से आने वाले हर कर्नेल के लिए दोबारा बनाता है; जब 7.3.3 आया तो उसमें रीबूट करने से पहले ही यह बन चुका था।\nड्राइवर सीधे DKMS तक जाता है पैकेज से लोड हुए मॉड्यूल तक, पैकेज इंस्टॉल किए बिना प्लगइन RPM ड्राइवर का सोर्स अंदर एक tarball है /usr/src tarball खुला, बगल में dkms.conf dkms install मॉड्यूल बनाता है इस कर्नेल के लिए modprobe -r फिर modprobe: चलते-चलते, रीबूट नहीं dnf नया कर्नेल इंस्टॉल करता है उसमें रीबूट से पहले DKMS दोबारा बनाता है rpm2cpio tarball बाहर निकालता है। होस्ट को RPM कभी नहीं मिलते, इसलिए वहाँ कोई पैकेज स्क्रिप्ट नहीं चलती। ड्राइवर पैकेज से सीधे DKMS तक जाता है और पैकेज कभी इंस्टॉल ही नहीं होता, इसलिए होस्ट पर कोई पैकेजिंग स्क्रिप्ट नहीं चलती। जाँचिए कि लोड हुआ मॉड्यूल DKMS वाला है, in-tree वाला नहीं, और फ़र्मवेयर काफ़ी नया है। FastFlowLM को 1.1.0.0 या उसके बाद का चाहिए2:\n$ modinfo -F filename amdxdna /lib/modules/7.2.15-300.fc45.x86_64/extra/amdxdna.ko.xz $ cat /sys/bus/pci/drivers/amdxdna/*/fw_version 1.1.2.64 $ journalctl -k | grep \u0026#39;Initialized amdxdna\u0026#39; [drm] Initialized amdxdna_accel_driver 0.19.0 for 0000:c5:00.1 on minor 0 DKMS कर्नेल के अपने मॉड्यूल को मिटाता नहीं, उसे /var/lib/dkms/xrt-amdxdna/original_module/ में हटाकर रख देता है, इसलिए DKMS बिल्ड हटाने पर वह वापस आ जाता है।\nएक और चीज़ को मत छेड़िए: कर्नेल कमांड लाइन पर amd_iommu=off NPU को बंद कर देता है2।\nकंटेनर में FastFlowLM FastFlowLM वह रनटाइम है जो NPU को लैंग्वेज मॉडल के लिए काम का बनाता है। यह Ollama जैसी कमांड लाइन और एक OpenAI-compatible सर्वर है, XDNA2 के लिए लिखा हुआ, और इस साल यह AMD के ROCm संगठन के तहत आ गया6। रनटाइम MIT लाइसेंस में है। जो NPU kernels यह साथ भेजता है वे बंद बाइनरी हैं, बिना बदले इस्तेमाल करने और आगे बाँटने के लिए मुफ़्त7। मैं चाहता कि वे खुले होते, और यह कहूँगा भी, लेकिन वे रिपॉज़िटरी में हैं और कहीं और से कुछ लाना नहीं पड़ता।\nइमेज Fedora 45 पर तीन स्टेज की है: ड्राइवर बिल्ड से XRT, उसके ख़िलाफ़ कंपाइल हुआ FastFlowLM, फिर एक रनटाइम जिसमें सिर्फ़ उतना जितना चाहिए। जो हिस्सा मायने रखता है:\nFROM registry.fedoraproject.org/fedora:45 AS xrt ARG XDNA_COMMIT COPY dist/xdna-${XDNA_COMMIT}/ /rpms/ RUN dnf -y install /rpms/xrt_2*-base.rpm /rpms/xrt_2*-npu.rpm \\ \u0026amp;\u0026amp; rpm -i --noscripts --nodeps --nosignature \\ --excludepath=/usr/lib/firmware --excludepath=/opt/xilinx/xrt/share/amdxdna \\ /rpms/xrt_plugin*.rpm \\ \u0026amp;\u0026amp; echo /opt/xilinx/xrt/lib64 \u0026gt; /etc/ld.so.conf.d/xrt.conf \u0026amp;\u0026amp; ldconfig इनमें से हर flag इसलिए है क्योंकि उसके बिना कुछ टूटा:\nसमस्या इलाज प्लगइन की स्क्रिप्ट एक कर्नेल मॉड्यूल बनाती हैं, जिसकी जगह होस्ट पर है --noscripts, और ड्राइवर सोर्स व फ़र्मवेयर बाहर रखे गए Fedora 45 का RPM 6 डिफ़ॉल्ट रूप से signature checking लागू करता है8, और खुद बनाया RPM unsigned होता है --nosignature: मैंने बनाया है, मुझे पता है कहाँ से आया XRT की लाइब्रेरी lib64 में हैं, जो linker path पर नहीं है इमेज के अंदर /etc/ld.so.conf.d/xrt.conf FastFlowLM XRT को pkg-config से ढूँढता है, और XRT का setup.sh वह path सेट नहीं करता बिल्ड स्टेज में PKG_CONFIG_PATH=/opt/xilinx/xrt/lib64/pkgconfig तैयार इमेज 609 MB की है, और उसके टैग में ड्राइवर commit है, fastflowlm:v1.0.12-xdna24dfd686। एक health check उसे लोड हुए मॉड्यूल के बताए commit से मिलाता है और फ़र्क होने पर फ़ेल होता है। गलत ड्राइवर के लिए बनी इमेज यहाँ की वह एक गड़बड़ी है जिसे डायग्नोज़ करना सच में उलझाऊ है, इसलिए उसे वहाँ तक पहुँचने से पहले ही पकड़ लिया जाता है।\nFastFlowLM इमेज कैसे बनती और जाँची जाती है Fedora 45 पर तीन स्टेज स्टेज 1: xrt XRT और प्लगइन RPM, न स्क्रिप्ट, न फ़र्मवेयर स्टेज 2: बिल्ड FastFlowLM कंपाइल उसी XRT के ख़िलाफ़ स्टेज 3: रनटाइम सिर्फ़ जो चाहिए, 609 MB Health check: इमेज और होस्ट सहमत होने चाहिए इमेज टैग कहता है v1.0.12-xdna24dfd686 = लोड हुआ मॉड्यूल कहता है 24dfd686 अलग हों तो unhealthy, कुछ उलझने से पहले। तीन बिल्ड स्टेज, और एक health check जो इमेज को उसी ड्राइवर से बाँधता है जिसके लिए वह बनी थी। कंटेनर को एक डिवाइस मिलता है, NPU, और memory-lock की वह लिमिट जो FastFlowLM को अपने buffers पिन करने के लिए चाहिए:\npodman run --rm --device /dev/accel/accel0 --ulimit memlock=-1:-1 \\ localhost/fastflowlm:v1.0.12-xdna24dfd686 validate [Linux] NPU: /dev/accel/accel0 with 8 columns [Linux] NPU FW Version: 1.1.2.64 [Linux] Memlock Limit: infinity AMD के अपने self-test, xrt-smi validate, ने एक matrix multiply पर NPU को 51 TOPS पर रखा। डिब्बे पर लिखा 50, पूरा मिला।\nबूट पर शुरू, सिर्फ़ IPv6 पर Quadlet एक छोटी .container फ़ाइल को systemd सर्विस में बदल देता है9। user unit के तौर पर यह rootless चलता है, मेरे नाम से, और lingering चालू हो तो बिना किसी के लॉग इन किए बूट पर शुरू होता है10:\n[Unit] Description=FastFlowLM NPU server ConditionPathExists=/dev/accel/accel0 [Container] Image=localhost/fastflowlm:v1.0.12-xdna24dfd686 AddDevice=/dev/accel/accel0 Ulimit=memlock=-1:-1 Network=host Volume=%h/.config/flm:/models:Z Exec=serve qwen3.5:4b --host ::1 --port 52625 -c 262144 -a whisper-v3:turbo StopSignal=SIGINT [Install] WantedBy=default.target loginctl enable-linger $USER cp fastflowlm.container ~/.config/containers/systemd/ systemctl --user daemon-reload \u0026amp;\u0026amp; systemctl --user start fastflowlm -c 262144 कॉन्टेक्स्ट विंडो सेट करता है, और नीचे वाला कॉन्टेक्स्ट टेस्ट बताता है कि यह इतना बड़ा क्यों है। -a whisper-v3:turbo चैट मॉडल के बगल में एक दूसरा मॉडल लोड करता है, जो बोली को टेक्स्ट में बदलता है; उसका अपना सेक्शन है।\nइसमें तीन लाइनें मुश्किल से सीखी गईं:\nलाइन इसके बिना StopSignal=SIGINT FastFlowLM SIGTERM को, जो podman का stop signal है, अनदेखा करता है और दस सेकंड बाद मार दिया जाता है --host ::1 यह 127.0.0.1 पर सुनता है, IPv4 ::1, [::1] नहीं ब्रैकेट वाला रूप parse नहीं होता; ब्रैकेट URL के अंदर के लिए हैं एड्रेस पर भरोसा मत कीजिए, उसे साबित कीजिए:\n$ ss -ltn \u0026#39;sport = :52625\u0026#39; LISTEN 0 4096 [::1]:52625 [::]:* $ curl -s http://127.0.0.1:52625/v1/models || echo refused refused localhost अब भी हर उस चीज़ के लिए काम करता है जो उसे पहले ::1 पर resolve करती है, और Fedora का /etc/hosts और Chrome दोनों यही करते हैं।\nबूट का क्रम, और जवाब देने वाले अकेले एड्रेस बूट पर शुरू बूट पर user manager loginctl enable-linger Quadlet .container फ़ाइल से सर्विस दो user सर्विस fastflowlm, open-webui कौन पहुँच सकता है ब्राउज़र Open WebUI [::1]:3000 FastFlowLM [::1]:52625 127.0.0.1 मना NPU Lingering बूट पर user manager शुरू करता है, Quadlet सर्विस बनाता है, और जवाब देने वाला हर एड्रेस IPv6 loopback पर है। यह क्या करता है, मापकर FastFlowLM के अपने बेंचमार्क से नौ मॉडल; decode वह स्पीड है जिस पर जवाब आता है:\nमॉडल Decode, 1k कॉन्टेक्स्ट Decode, 8k कॉन्टेक्स्ट प्रॉम्प्ट पढ़ना, 8k llama3.2:1b 77 tok/s 56 tok/s 2,009 tok/s qwen3.5:2b 32 29 1,533 llama3.2:3b 30 20 857 phi4-mini-it:4b 25 17 744 qwen3:4b 23 15 613 qwen3.5:4b 17 15 657 gemma4-it:e4b 14 12 642 qwen3:8b 13 10 418 qwen3.5:9b 11 10 451 मॉडल के हिसाब से decode स्पीड, पढ़ने की रफ़्तार के मुकाबले 1k कॉन्टेक्स्ट पर decode, टोकन प्रति सेकंड पढ़ने की रफ़्तार, 5 से 8 टोकन प्रति सेकंड llama3.2:1b 77 qwen3.5:2b 32 llama3.2:3b 30 phi4-mini-it:4b 25 qwen3:4b 23 qwen3.5:4b 17 जो मैं चलाता हूँ gemma4-it:e4b 14 qwen3:8b 13 qwen3.5:9b 11 1k कॉन्टेक्स्ट पर decode। हर मॉडल पढ़ने की रफ़्तार से आगे है; मॉडल दोगुना होने पर स्पीड लगभग आधी। पढ़ने की रफ़्तार पाँच से आठ टोकन प्रति सेकंड है, इसलिए इनमें से हर एक आपसे आगे रहता है। मॉडल हर बार दोगुना होने पर decode लगभग आधा होता है, जो तब होता है जब सीमा memory bandwidth की हो, compute की नहीं। मैं qwen3.5:4b चलाता हूँ। Phi-4 mini तेज़ है, लेकिन बातचीत बढ़ने पर Qwen 3.5 अपनी स्पीड बनाए रखता है, इमेज और tool calls संभालता है, और एक prompt cache रखता है जो हर बार पूरी हिस्ट्री दोबारा पढ़ने से बचाता है। फ़ैसला इसी से होता है।\n256,000 टोकन का कॉन्टेक्स्ट Qwen 3.5 262,144 टोकन की विंडो के लिए बना है11, और FastFlowLM का डिफ़ॉल्ट 32,768 है। उस सीमा के पार यह कुछ ऐसा करता है जो जानने लायक है: यह Max length reached, stopping prefilling लॉग करता है और बिना जवाब और बिना एरर के कनेक्शन बंद कर देता है, तो चैट विंडो खाली जवाब के साथ बैठी रहती है और आप अंदाज़ा लगाते रहते हैं कि मॉडल गिरा, सर्वर या ब्राउज़र।\nइसलिए मैंने -c 262144 से इसे बढ़ाया और ठीक से टेस्ट किया। 232,250 टोकन के प्रॉम्प्ट की पहली लाइन में एक कोड छिपाया, मोटे तौर पर 175,000 शब्द, और आखिर में वह माँगा:\n8k कॉन्टेक्स्ट 232k कॉन्टेक्स्ट जवाब सही सही, AMBER-FALCON-7731 प्रॉम्प्ट पढ़ना 657 tok/s 210 tok/s पहले शब्द का इंतज़ार 12 सेकंड 18.4 मिनट Decode 15 tok/s 2.4 tok/s रिज़र्व मेमोरी ~5 GB ~12.7 GB यह काम करता है। धीमा है। और मेमोरी रिज़र्व होती है चाहे आप विंडो इस्तेमाल करें या नहीं। मशीन में 90 GB के साथ, मैं यह कीमत देने को तैयार हूँ ताकि एक लंबा पेस्ट चुपचाप गिराए जाने के बजाय जवाब पाए।\nक्या GPU मदद कर सकता है? उसी चिप में एक Radeon 860M है, तो सीधा सवाल यह है कि क्या वह कुछ बोझ उठा सकता है। एक मॉडल को NPU और GPU में बाँटना, प्रॉम्प्ट एक पर पढ़ना और जवाब दूसरे पर लिखना, आज कोई Linux रनटाइम नहीं करता। GPU पर एक दूसरा रनटाइम चलाना हो सकता है, इसलिए मैंने वह मापा।\nयहाँ “efficient” का मतलब है स्पीड और ऊर्जा दोनों साथ। amdgpu ड्राइवर पूरी चिप की package power बिना root के बताता है, और amdxdna ड्राइवर अकेले NPU की, इसलिए नीचे का हर रन सेकंड में चार बार सैंपल किया गया। हर जगह वही मॉडल, 4-bit पर।\nजिन GPU रनटाइम को मैंने देखा, उनमें से एक चला:\nरनटाइम 860M पर नतीजा llama.cpp, Vulkan बैकएंड12 चलता है; 881 MB इमेज llama.cpp, ROCm बैकएंड GPU को देखता है, फिर पहले ही काम पर segfault, GPU-version override के साथ या बिना; 23 GB इमेज MLC-LLM, Vulkan13 Qwen 3.5 आर्किटेक्चर बनाते समय इसका कंपाइलर segfault करता है vLLM, SGLang आज़माया नहीं: डेटा सेंटर GPU और बहुत सारे यूज़र्स के लिए बने हैं, 8-यूनिट के iGPU के लिए नहीं और NPU, उस एक के मुकाबले जो चला:\nQwen 3.5 4B NPU, FastFlowLM GPU, llama.cpp Vulkan खाली, मॉडल लोड 8.6 W 16.0 W, बंद होने पर 9.7 W के मुकाबले प्रॉम्प्ट पढ़ना, ~6k टोकन 557 tok/s, 23.8 W पर 411 tok/s, 46.1 W पर हर प्रॉम्प्ट टोकन की ऊर्जा 0.043 J 0.112 J Decode 18.2 tok/s, 21.0 W पर 23.5 tok/s, 40.7 W पर हर बने टोकन की ऊर्जा 1.16 J 1.73 J NPU बनाम GPU, वही मॉडल NPU, FastFlowLM Radeon 860M GPU, llama.cpp Vulkan हर प्रॉम्प्ट टोकन की ऊर्जा कम बेहतर 0.043 J 0.112 J हर जवाब टोकन की ऊर्जा कम बेहतर 1.16 J 1.73 J खाली, मॉडल लोड कम बेहतर 8.6 W 16.0 W decode स्पीड ज़्यादा बेहतर 18.2 tok/s 23.5 tok/s वही मॉडल, दोनों accelerator, हर बार अपनी जोड़ी के बड़े वाले के हिसाब से। GPU तेज़ जवाब देता है; बाकी सब पर NPU कम ऊर्जा लेता है। GPU जवाब करीब 29% तेज़ लिखता है। ऐसा करते हुए वह दोगुनी पावर जलाता है। NPU प्रॉम्प्ट तेज़ पढ़ता है और आधी से कम ऊर्जा में। बड़ा आँकड़ा खाली बैठे वाला है: GPU सर्वर लोड होकर कुछ न करते हुए, उसी मशीन पर उसे बंद रखने के मुकाबले 6.3 W ज़्यादा लेता है, पूरे दिन। दोनों को एक साथ चलाने पर NPU 18.2 से 14.2 टोकन प्रति सेकंड पर आ गया और GPU 23.5 से 13.9 पर, क्योंकि दोनों एक ही मेमोरी बाँटते हैं। इसलिए GPU कंटेनर मौजूद है, लेकिन वह तब शुरू होता है जब मुझे दूसरा मॉडल चाहिए, और बूट पर चालू नहीं है।\nहर रन में NPU ने खुद 2 W से कम लिया। 21 W का ज़्यादातर हिस्सा उसे खिलाने वाले CPU और मेमोरी का है। आने वाली FastFlowLM रिलीज़ में यही सीमा देखने लायक है।\nNPU पर स्पीच-टू-टेक्स्ट भी Whisper OpenAI का speech-recognition मॉडल है: ऑडियो अंदर, टेक्स्ट बाहर, 99 भाषाओं में, और MIT लाइसेंस में जारी, इसलिए यह किसी से पूछे बिना कहीं भी चलता है14। Large-v3 मौजूदा पूरे साइज़ का वर्ज़न है। Turbo वही मॉडल है जिसका decoder, यानी वह आधा हिस्सा जो टेक्स्ट लिखता है, 32 परतों से घटाकर 4 कर दिया गया है। मॉडल कार्ड यह सौदा साफ़ कहता है: “way faster, at the expense of a minor quality degradation”। 809 मिलियन पैरामीटर के साथ यह चैट मॉडल का पाँचवाँ हिस्सा है।\nFastFlowLM इसे NPU के लिए पहले से कन्वर्ट करके whisper-v3:turbo नाम से देता है, 623 MB का डाउनलोड, और -a whisper-v3:turbo से इसे चैट मॉडल के बगल में लोड करता है। यह अकेले Whisper सर्व नहीं करेगा; साथ में एक चैट मॉडल लोड होना ज़रूरी है। ऑडियो स्टैंडर्ड OpenAI transcription endpoint पर जाता है और टेक्स्ट वापस आता है।\n19.6 सेकंड की बोली पहली रिक्वेस्ट, Whisper लोड होते हुए 6.2 s उसके बाद 2.0 s, रियल टाइम से करीब दस गुना पूरी चिप की पावर ~24.7 W सटीकता हर शब्द सही लेकिन वर्तनी अमेरिकी नकली अंग्रेज़ी वाली: “color” और “program”। Whisper का API एक prompt लेता है, और असली ब्रिटिश अंग्रेज़ी वर्तनी में लिखा प्रॉम्प्ट, इंग्लैंड की अंग्रेज़ी, जहाँ से यह भाषा आती है, इसे ठीक करने के लिए काफ़ी है:\ncurl -s \u0026#39;http://[::1]:52625/v1/audio/transcriptions\u0026#39; -F file=@speech.wav \\ -F model=whisper-v3:turbo -F language=en \\ -F \u0026#39;prompt=British English spelling: colour, programme, organise, centre.\u0026#39; हमें इन मॉडलों को सुधारना ही नहीं पड़ना चाहिए। Whisper 99 भाषाओं पर ट्रेन हुआ है और फिर भी, जब तक कहा न जाए, अंग्रेज़ी अमेरिकी तरीके से लिखता है, क्योंकि जिन्होंने इसे बनाया वे अपनी वर्तनी को डिफ़ॉल्ट मानते हैं और बाकी सबकी को एक ऐसा विकल्प जो माँगना पड़े। यही वह चिढ़ाने वाला अमेरिकी डिफ़ॉल्टवाद है जिससे बाकी दुनिया नफ़रत करती है, और यह एक पूर्वाग्रह के तौर पर अंदर पका हुआ है। चैट मॉडल का system prompt भी, नीचे वाले सेक्शन में, इसी वजह से यही निर्देश रखता है।\nएक चैट विंडो, और 7,000 टोकन जो आपने कभी टाइप नहीं किए Open WebUI ब्राउज़र वाला फ़्रंट एंड है15, अपने कंटेनर में, उसी तरह [::1]:3000 से बँधा और NPU की ओर इशारा करता हुआ। इसका माइक्रोफ़ोन बटन अपने डिफ़ॉल्ट के बजाय NPU पर Whisper के पास जाता है, जो वरना एक मॉडल डाउनलोड करके उसे CPU पर चलाता।\nमैंने इसे जो पहला मैसेज भेजा वह बीस शब्दों का था। NPU तक वह 7,223 टोकन के प्रॉम्प्ट के रूप में पहुँचा, क्योंकि Open WebUI 0.13 अपने सभी built-in tools (memory, notes, calendar, automations, web search) की परिभाषाएँ हर मैसेज के साथ लगा देता है, और एक admin को इनमें से हर एक मिलता है।\nवही बीस शब्दों का सवाल NPU को भेजा गया प्रॉम्प्ट पहले शब्द का इंतज़ार Built-in tools चालू, डिफ़ॉल्ट 7,223 टोकन ~12 s मॉडल के लिए built-in tools बंद 127 टोकन 1 s से कम 7,000 टोकन कहाँ से आए आप टाइप करते हैं बीस शब्द Open WebUI जोड़ता है हर built-in tool की परिभाषा NPU पढ़ता है सब कुछ, हर मैसेज NPU को भेजा गया प्रॉम्प्ट tools चालू, डिफ़ॉल्ट 7,223 टोकन, पहले शब्द तक करीब 12 s tools बंद 127 टोकन, 1 s से कम वही बीस शब्दों का सवाल, Open WebUI के built-in tools चालू और बंद, स्केल पर बना। लोकल मॉडल के लिए वह डिफ़ॉल्ट बंद होना चाहिए। बारह सेकंड, हर जवाब पर।\nइसने मुझे पूरे आत्मविश्वास से यह भी बताया कि यह “trained by Google” है और “on Google\u0026rsquo;s advanced infrastructure” चल रहा है। यह एक Qwen मॉडल है, Alibaba का बनाया, एक लैपटॉप पर चलता हुआ। यह पूरी बकवास है, और ऐसा होना ही नहीं चाहिए।\nयह सेटअप की गलती नहीं है। मॉडल सिर्फ़ वही टेक्स्ट देखता है जो उसे भेजा जाता है, और ड्रॉप-डाउन में दिखने वाला नाम सर्वर के लिए एक लेबल है, मॉडल तक कभी नहीं जाता। तो वह जवाब अकेले मॉडल से आया, और उसने अपने बारे में वही एक बात गलत बताई जिस पर कभी शक नहीं होना चाहिए। यह एक डिज़ाइन की खामी है, और इसकी ज़िम्मेदारी उसकी है जिसने मॉडल भेजा।\nड्रॉप-डाउन का नाम कभी मॉडल तक नहीं पहुँचता आप क्या देखते हैं ड्रॉप-डाउन में मॉडल का नाम system prompt, अगर सेट किया आपके मैसेज सर्वर का लेबल, कभी नहीं भेजा मॉडल क्या देखता है system prompt, अगर सेट किया आपके मैसेज न नाम, न बनाने वाला, न मशीन भेजा system prompt के बिना अंदाज़ा लगाता है मॉडल को system prompt और बातचीत मिलती है। ड्रॉप-डाउन का नाम सर्वर के पास रहता है। Alibaba जानता था कि इसे कैसे रोकना है। Qwen 2.5 का chat template हर बातचीत “You are Qwen, created by Alibaba Cloud” से शुरू करता था, जब तक आप कुछ और न दें16। Qwen 3 ने वह लाइन हटा दी17, और Qwen 3.5 भी इसके बिना आता है18। उसकी जगह कुछ नहीं आया, और उस जवाब से लगता है कि मॉडल को यह कभी इतना अच्छे से सिखाया ही नहीं गया कि वह अपने दम पर संभाल ले। किसी 4B मॉडल से बिना प्रॉम्प्ट के “what are you?” पूछिए और वह अपने ट्रेनिंग डेटा के सबसे आम जवाब पर गिर जाता है, जो किसी और का है।\nक्या यह छोटी बात है? नहीं। जो मॉडल पूरे आत्मविश्वास से बताएगा कि उसे किसने बनाया और वह किसके डेटा सेंटर में चलता है, और दोनों गलत बताएगा, वह किसी भी ऐसी चीज़ के साथ यही करेगा जिसे वह जाँच नहीं सकता। यहाँ आपको सही जवाब पता है। ज़्यादातर समय नहीं पता होगा।\nइसलिए इसे एक system prompt में बताना पड़ता है:\nपूछा गया “what are you, and what are you running on?” जवाब कोई system prompt नहीं “a large language model trained by Google… Google\u0026rsquo;s advanced infrastructure” एक के साथ “Qwen 3.5, a large language model created by Alibaba… running locally on your Lenovo ThinkPad using the AMD Ryzen AI 7 PRO 350\u0026rsquo;s NPU via FastFlowLM” वही प्रॉम्प्ट इसे ब्रिटिश अंग्रेज़ी लिखने को कहता है, फिर से उसी अमेरिकी डिफ़ॉल्टवाद की वजह से जो Whisper में भी है। बताने पर यह करता है। फिर भी यह नहीं बता सकता कि आज कौन सा दिन है। बिना कैलेंडर और बिना इंटरनेट का मॉडल तारीखें और हाल की घटनाएँ अंदाज़े से बताता है, और प्रॉम्प्ट जो भी कहे, यह हमेशा मानेगा नहीं कि अंदाज़ा है।\nLinux पर AI चलाने में तीन साल AMD ने जनवरी 2023 में Ryzen AI को मंच पर “the first dedicated artificial intelligence hardware in an x86 processor” के तौर पर पेश किया19। उस keynote से आगे गिनिए:\nकब Linux पर क्या हुआ keynote के बाद 4 जनवरी 2023 Ryzen AI की घोषणा, Ryzen 7040 में 25 जनवरी 2024 amd/xdna-driver GitHub पर प्रकाशित4 1 साल 24 मार्च 2025 amdxdna mainline Linux में, 6.1420 2 साल 2 महीने 27 मार्च 2025 यह चिप, Ryzen AI 7 PRO 350, लॉन्च1 2 साल 2 महीने 11 मार्च 2026 FastFlowLM 0.9.35, इसकी पहली नेटिव Linux रिलीज़21 3 साल 2 महीने 11 अगस्त 2026 FastFlowLM 1.0.0, अब AMD के ROCm के तहत6 3 साल 7 महीने आज 7040 और 8040 के लिए अब भी कोई LLM रनटाइम नहीं2 3 साल 10 महीने Linux पर NPU पर एक लैंग्वेज मॉडल चलाने में ही तीन साल दो महीने, और वह भी AMD के अपने सॉफ़्टवेयर ने नहीं किया। FastFlowLM ने किया, एक प्रोजेक्ट जो कंपनी के बाहर शुरू हुआ और इस साल ROCm के तहत लिया गया। इसके Linux release notes “The wait is finally over” से शुरू होते हैं, फिर कहते हैं कि यह “the exact same recipe you already know and love on Windows” इस्तेमाल करता है21। Fisher-Price OS (Windows) को यह पहले मिला, और उन्होंने यह कहा भी। AMD का अपना Ryzen AI Software अब भी, अपने मौजूदा release notes में, कहता है “Model generation is not supported on Linux in this release”22।\nजिसने पहली पीढ़ी खरीदी उसका हाल और बुरा है। 2023 के Ryzen 7040 लैपटॉप में एक ऐसा NPU है जिसे Linux पर कोई language-model रनटाइम छूएगा नहीं, और कहीं कुछ प्रकाशित नहीं कि कोई आ रहा है। वही बैज।\nक्या मैं पूछ सकता हूँ क्यों? कौन नहीं, क्यों। AMD की प्रक्रिया में ऐसा क्या था जिसने एक चिप को नाम में AI के साथ बिकने दिया, जबकि Linux पर उस AI को इस्तेमाल करने का सॉफ़्टवेयर सालों बाद आया, और बाहर से? स्पेक शीट कहती है “Up to 50 TOPS”1। बैज कहता है Ryzen AI। दोनों लैपटॉप खरीदने वाले से किए गए बयान हैं, और Linux पर इस चिप के पहले साल में दोनों की कीमत कुछ भी नहीं थी।\nनिशाना Copilot पर, डेटा सेंटर पर नहीं ऐसा नहीं है कि AMD को Linux मुश्किल लगता है। डेटा सेंटर में Linux पहले दर्जे का है और AMD यह जानता है: Lawrence Livermore का El Capitan AMD EPYC प्रोसेसर और AMD Instinct accelerators है, यह इस साल जून तक दुनिया का सबसे तेज़ कंप्यूटर था23, और यह TOSS चलाता है, Livermore का अपना Red Hat Linux बिल्ड24। क्या आप सोच सकते हैं कि AMD एक Instinct accelerator बेचे और खरीदार से कहे कि Linux सॉफ़्टवेयर बाद में आएगा, किसी और से? जवाब ना होता। AMD ने तो इस NPU का कर्नेल ड्राइवर भी लिखा और उसे mainline में पहुँचाया। आखिरी परत, वह जो हार्डवेयर से वह काम करवाती है जिसके लिए वह बेचा गया, वही इंतज़ार में छोड़ दी गई।\nइसे कभी लैपटॉप प्रोजेक्ट होना ही नहीं चाहिए था। वही XDNA आर्किटेक्चर उसी साल एक डेटा सेंटर कार्ड में गया, Alveo V70, जिसे “the first Alveo production card leveraging AMD XDNA architecture with AI Engines” के तौर पर बेचा गया25। AI Engine के लिए एक सॉफ़्टवेयर स्टैक बनाइए, बाकी डेटा सेंटर की तरह पहले Linux, और लैपटॉप को यह मुफ़्त मिल जाता है। सर्वर को भी। एक छोटा, किफ़ायती accelerator ठीक वही है जो आप virtual machines में बाँटना चाहेंगे, हर एक को एक टुकड़ा, उन छोटे मॉडलों के लिए जिन्हें पूरा GPU नहीं चाहिए। कर्नेल ने यह इसी साल सीखा, नए AIE4 पार्ट्स पर NPU को virtual functions में बाँटना26। इस लैपटॉप के NPU पर यह बिल्कुल नहीं हो सकता।\nइसके बजाय मेहनत Fisher-Price OS (Windows) पर गई, और Copilot पर। AMD ने इस चिप की पीढ़ी ऐसे प्रोसेसर के रूप में लॉन्च की जो “Unlock Transformational AI Experiences for Windows Copilot+ PCs”27। लगभग किसी ने नहीं खरीदा। 2025 की पहली तिमाही में बिके Fisher-Price OS (Windows) PC में Copilot+ मशीनें 2.3% थीं, और Microsoft के नए Copilot फ़ीचर वैसे भी क्लाउड में चलते हैं: “only one of its new AI capabilities actually requires an NPU”28। Microsoft यह भी बताता है कि PC बनाने वालों से उसकी कमाई “lower PC market demand” पर 7% गिरी, और “roughly 30% of the installed base still on Windows 10”29। तो NPU का निशाना एक ऐसा ऑपरेटिंग सिस्टम था जिसे लोग अपग्रेड नहीं कर रहे, एक ऐसा असिस्टेंट चलाने के लिए जो उन्होंने माँगा नहीं, और जो ज़्यादातर NPU इस्तेमाल ही नहीं करता।\nऔर AI वहाँ बनता भी नहीं। जो लोग यह काम रोज़ी-रोटी के लिए करते हैं वे Linux चलाते हैं, क्योंकि उनके टूल वहीं चलते हैं। TensorFlow साफ़ कहता है कि 2.10 “was the last TensorFlow release that supported GPU on native-Windows”30। vLLM मॉडल सर्वर “does not support Windows natively”31। JAX अपने Fisher-Price OS (Windows) बिल्ड को experimental बताता है, और अपने AMD सपोर्ट को “AMD GPU (Linux)”32। जहाँ Fisher-Price OS (Windows) ये टूल चलाता भी है, वहाँ WSL 2 के ज़रिए, जो Microsoft के अपने शब्दों में “an actual Linux kernel inside a managed VM” है33। AMD ने अपनी AI चिप का निशाना उसी एक डेस्कटॉप पर लगाया जिसे AI पेशा इस्तेमाल नहीं करता। उसे आधा-अधूरा सपोर्ट करना काफ़ी नहीं है, AMD।\nफिर AMD निवेशकों के सामने खुद को AI कंपनी बताता है। 11 नवंबर 2025 को इसकी चेयर और CEO ने कहा कि AMD “is uniquely positioned to lead the next generation of high-performance and AI computing”, एक ऐसी रिलीज़ में जो अपने “AI PC portfolio 2.5x since 2024” बढ़ाने की शेखी बघारती है और “full-stack AI solutions” पर खत्म होती है34। Full stack। इस पोस्ट वाले AI PC पर उस स्टैक का ऊपरी हिस्सा एक ऐसे प्रोजेक्ट से आया जो AMD ने शुरू नहीं किया, और पहली पीढ़ी पर वह कभी आया ही नहीं। एक AI कंपनी जिसकी अपनी AI चिप को उसी ऑपरेटिंग सिस्टम पर AI चलाने के लिए तीन साल इंतज़ार करना पड़ा जिस पर उसका डेटा सेंटर कारोबार टिका है? हास्यास्पद।\nपहले दर्जे का सपोर्ट बताना आसान है। यह उसी दिन काम करता है जिस दिन आप मशीन खरीदते हैं, उसी ऑपरेटिंग सिस्टम पर जो आप चलाते हैं, उसी कंपनी से जिसने आपको चिप बेची। यह NPU अभी तक उस पर खरा नहीं उतरा। मैंने लैपटॉप बाकी चीज़ों के लिए खरीदा था और NPU साथ में आ गया, और सिर्फ़ इसी वजह से यह एक write-up है, शिकायत नहीं। जिसने भी इसे बैज पर लिखे AI के लिए खरीदा, और Linux चलाता है, उसने एक ऐसा वादा खरीदा जो देर से निभाया गया, और किसी और ने निभाया।\nजिस सिलिकॉन के पैसे दिए, उसके मालिक बनिए NPU लैपटॉप के साथ आया। जिस तरह इसे बेचा जाता है, यह वह हिस्सा है जो मशीन को AI के लिए तैयार बनाता है, और जो AI पेश किया जाता है वह किसी और का है, किसी और के डेटा सेंटर में, जो आपका टाइप किया पढ़ता है ताकि उसका भुगतान किसी और तरीके से हो सके। हार्डवेयर में ऐसा कुछ नहीं जिसे इस इंतज़ाम की ज़रूरत हो। 21 W पर एक 4B मॉडल सवाल का जवाब देता है, अगर आप समय दें तो 175,000 शब्दों का पेस्ट पढ़ लेता है, और जो आप बोलते हैं वह लिख देता है, और इसमें से कुछ भी मेज़ से बाहर नहीं जाता।\nयह तैयार सॉफ़्टवेयर नहीं है, और ऊपर का हर खुरदरा किनारा ढूँढने में एक घंटा और ठीक करने में एक-दो लाइनें लगीं। ओपन सोर्स को सच में चलाने की यही कीमत है। फिर भी यह वही क्षमता किराए पर वापस लेने से बेहतर सौदा है, और वह घंटा आपको यह समझ देता है कि यह काम कैसे करता है।\nकंटेनर इसे ईमानदार रखते हैं। होस्ट पर एक कर्नेल मॉड्यूल और उसके फ़र्मवेयर के सिवा कुछ नहीं, एक कंटेनर को एक डिवाइस, एक ऐसा एड्रेस जिस तक कोई और नहीं पहुँच सकता, और एक जाँच जो उसी पल फ़ेल होती है जब टुकड़े मेल खाना बंद कर दें। इसमें एक दिन लगा। यह चलता रहेगा, क्योंकि मुझे पता है इसकी हर लाइन वहाँ क्यों है, और जिस सुबह इनमें से कोई सच होना बंद होगा, जाँच मुझे बता देगी।\nAMD — Ryzen AI 7 PRO 350 — 8 कोर, 16 थ्रेड, Radeon 860M, “NPU TOPS: Up to 50 TOPS”, लॉन्च तारीख “3/27/2025”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLemonade — LLMs on Linux with FastFlowLM — सिर्फ़ XDNA2 (Ryzen AI 300/400, Strix Halo), XDNA1 नहीं; NPU फ़र्मवेयर 1.1.0.0 या उसके बाद; amd_iommu=off सेट न करें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — amdxdna — AMD NPU के लिए in-tree accelerator ड्राइवर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\namd/xdna-driver — ड्राइवर, XRT submodule और प्लगइन; XRT base पैकेज साथ आए submodule से बनाइए ताकि वह प्लगइन के साथ चले; रिपॉज़िटरी 25 जनवरी 2024 को बनी।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux v7.3 — drivers/accel/amdxdna/amdxdna_pci_drv.c — AMDXDNA_DRIVER_MAJOR 0, AMDXDNA_DRIVER_MINOR 10; v7.2 में भी यही।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nROCm/FastFlowLM — XDNA2 के लिए NPU LLM रनटाइम, OpenAI-compatible सर्वर, v1.0.0 से ROCm का हिस्सा; यहाँ इस्तेमाल की गई रिलीज़ v1.0.12 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFastFlowLM — LICENSE_BINARY.txt — साथ आने वाली NPU kernel बाइनरी की शर्तें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRPM 6.0.0 release notes — “RPM defaults to enforcing signature checking”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npodman-systemd.unit(5) — Quadlet .container units, जिनमें AddDevice=, Ulimit=, StopSignal= और Exec= शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nloginctl(1) — enable-linger बूट पर एक user manager शुरू करता है और लॉगआउट के बाद भी उसे चलता रखता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen3.5-4B — “Context Length: 262,144 natively”; hybrid Gated DeltaNet और gated attention परतें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nggml-org/llama.cpp — GPU रन के लिए इस्तेमाल हुई server-vulkan कंटेनर इमेज, बिल्ड 12352।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nmlc-ai/mlc-llm — 0.26 nightly पैकेज के साथ टेस्ट किया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nopenai/whisper-large-v3-turbo — “a state-of-the-art model for automatic speech recognition (ASR) and speech translation”; large-v3 से छाँटा गया, “the number of decoding layers have reduced from 32 to 4”; 809M पैरामीटर; MIT लाइसेंस।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nopen-webui/open-webui — यहाँ रिलीज़ v0.13.3 इस्तेमाल हुई।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen2.5-7B-Instruct — tokenizer_config.json — chat template का डिफ़ॉल्ट system message: “You are Qwen, created by Alibaba Cloud. You are a helpful assistant.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen3-4B — tokenizer_config.json — बिना डिफ़ॉल्ट system message वाला chat template।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQwen/Qwen3.5-4B — tokenizer_config.json — बिना डिफ़ॉल्ट system message वाला chat template।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — AMD Highlights Future of High-Performance and Adaptive Computing During Opening Keynote of CES 2023 — 4 जनवरी 2023: “AMD also unveiled Ryzen AI Technology – the first dedicated artificial intelligence hardware in an x86 processor.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKernel Newbies — Linux 6.14 — सोमवार 24 मार्च 2025 को रिलीज़; “an amdxdna driver for AMD NPUs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFastFlowLM v0.9.35 release notes — 11 मार्च 2026: “The wait is finally over… FastFlowLM is officially available natively on Linux!”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — Ryzen AI Software release notes — known issues: “Model generation is not supported on Linux in this release.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTOP500 — June 2026 — “LineShine debuts as the new No. 1 system, ending El Capitan\u0026rsquo;s run atop the list”; El Capitan “is based on AMD 4th generation EPYC processors… and AMD Instinct MI300A accelerators”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLLNL — TOSS: Speeding Up Commodity Cluster Computing — “a fully functional cluster operating system, based on Red Hat Linux”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — Alveo V70 — “the first Alveo production card leveraging AMD XDNA architecture with AI Engines… designed for AI inference efficiency”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux — accel/amdxdna: Add basic support for AIE4 devices — “Add initial support for AIE4 devices (PCI device IDs 0x17F2 and 0x1B0B), including… SR-IOV enablement”। ड्राइवर की टेबल virtual-function एंट्री सिर्फ़ उन्हीं पार्ट्स को देती है; इस लैपटॉप का NPU 17f0 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — AMD Unveils Next-Gen \u0026ldquo;Zen 5\u0026rdquo; Ryzen Processors to Power Advanced AI Experiences — Computex, 2 जून 2024: “AMD Ryzen AI 300 Series Processors Unlock Transformational AI Experiences for Windows Copilot+ PCs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEngadget — Microsoft\u0026rsquo;s Copilot+ AI PC plan fizzled, but it still served a purpose — 5 दिसंबर 2025: Copilot+ सिस्टम “made up just 2.3 percent of Windows machines sold in the first quarter of 2025”; “only one of its new AI capabilities actually requires an NPU”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWindows Latest — Microsoft admits its end of support was the real Windows 11 sales driver — 31 जुलाई 2026, Microsoft की results call को उद्धृत करते हुए: “Windows OEM and Devices revenue decreased 7%… driven by lower PC market demand”; “roughly 30% of the installed base still on Windows 10”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTensorFlow — Install TensorFlow with pip — “TensorFlow 2.10 was the last TensorFlow release that supported GPU on native-Windows.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nvLLM — GPU installation — “vLLM does not support Windows natively”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJAX — Installation — “Windows, x86_64 (experimental)” के लिए CPU wheels; NVIDIA, Google Cloud TPU, Mac और “AMD GPU (Linux)” के लिए GPU सेक्शन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Comparing WSL versions — “the use of an actual Linux kernel inside a managed VM”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD — AMD Unveils Strategy to Lead the $1 Trillion Compute Market and Accelerate Next Phase of Growth — Financial Analyst Day, 11 नवंबर 2025: “AMD is uniquely positioned to lead the next generation of high-performance and AI computing”; “AMD has expanded its AI PC portfolio 2.5x since 2024”; “AMD delivers full-stack AI solutions”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/hardware/ryzen-ai-npu-llm-in-a-container/","summary":"Ryzen AI लैपटॉप का NPU 50 TOPS है जो ज़्यादातर Linux इंस्टॉल पर खाली बैठा रहता है। यह पोस्ट AMD का amdxdna ड्राइवर बनाने और होस्ट पर सिर्फ़ कर्नेल मॉड्यूल रखने से शुरू होती है, फिर AMD के XRT रनटाइम के साथ FastFlowLM को उसी ड्राइवर से मेल खाते rootless podman कंटेनर में बनाती है, सब कुछ IPv6 loopback से बाँधती है और Quadlet से बूट पर शुरू करती है। फिर यह क्या करता है: नौ मॉडल का बेंचमार्क, 232,000 टोकन का कॉन्टेक्स्ट टेस्ट, रियल टाइम से दस गुना तेज़ Whisper स्पीच-टू-टेक्स्ट, Open WebUI और वे 7,000 छिपे टोकन जो वह हर मैसेज में जोड़ रहा था, और Radeon 860M iGPU पर llama.cpp के मुकाबले NPU की स्पीड और ऊर्जा, मापी हुई। आखिर में टाइमलाइन: AMD के Ryzen AI की घोषणा से Linux पर उसके NPU पर एक लैंग्वेज मॉडल चलने तक तीन साल, और वह भी एक ऐसे प्रोजेक्ट से जो AMD ने शुरू नहीं किया, जबकि मेहनत डेटा सेंटर और AI प्रोफ़ेशनल जिन Linux टूल्स का असल में इस्तेमाल करते हैं उन पर नहीं, बल्कि Fisher-Price OS (Windows) पर Copilot+ पर गई।","title":"Ryzen AI NPU पर LLM, एक कंटेनर में"},{"content":"पहले ही बता दूँ: मैं croit के लिए काम करता हूँ, जिसने FlashStore लिखा है। नीचे जो कुछ भी है वह v21.2.0 पर Ceph के सोर्स और डॉक्यूमेंटेशन से और croit के प्रकाशित ceph-rust स्नैपशॉट से पढ़ा गया है, और सबके लिंक पेज के नीचे हैं। जहाँ किसी तर्क के एक पक्ष में croit का अपना तर्क है, वहाँ मैं बताता हूँ कि वह तर्क किसका है।\nएक ही डेमन के दो रीराइट क्लासिक Ceph OSD एक थ्रेडेड C++ सर्वर है जो घूमती डिस्कों के ज़माने में बड़ा हुआ। तेज़ NVMe और तेज़ नेटवर्क पर यह अपने CPU का बड़ा हिस्सा ऐसे कामों पर खर्च करता है जो आपका डेटा स्टोर करना नहीं हैं: थ्रेड पूल के बीच ops को आगे-पीछे करना, लॉक लेना, दूसरे थ्रेड का इंतज़ार करना। दो प्रोजेक्ट OSD को पूरी तरह नए सिरे से लिखकर इसे ठीक करने निकले हैं।\nएक है Crimson, Ceph का अपना। Umbrella का डॉक्यूमेंटेशन इसे “the next generation ceph-osd” कहता है, जो “to deliver enhanced performance on fast network and storage devices” बनाया गया है1। दूसरा है croit का FlashStore OSD, ceph-rust प्रोजेक्ट से, जो 9 नवंबर 2026 से पब्लिक प्रीव्यू में है2।\nदोनों कहते हैं कि वे ड्रॉप-इन रिप्लेसमेंट हैं। दोनों कहते हैं कि वे NVMe के लिए हैं। दोनों प्रीव्यू में हैं, और आज किसी पर भी प्रोडक्शन डेटा नहीं रखना चाहिए। तो अगर आप NVMe Ceph चलाते हैं और सोच रहे हैं कि किस पर नज़र रखें, तो यह जानना फ़ायदेमंद है कि असल में दोनों कहाँ अलग हैं, क्योंकि वह जगह वह नहीं है जो सुर्खियाँ बताती हैं।\nयह तुलना दोनों को वैसे देखती है जैसे वे Ceph 21.2.0, Umbrella पर मिलते हैं: Crimson जैसा वह रिलीज़ उसे डॉक्यूमेंट और शिप करता है, बनाम FlashStore, जो उसी रिलीज़ के खिलाफ़ बनाया और टेस्ट किया गया है2। यह FlashStore बनाम Umbrella BlueStore के आगे की कड़ी है, और FlashStore के बारे में जो कुछ वहाँ पहले ही कहा जा चुका है उसे यहाँ मान लिया गया है।\nएक daemon के दो रीराइट क्लासिक ceph-osd C++, थ्रेड Crimson Ceph upstream, Seastar पर C++ croit-flashstore-osd croit, Rust, अपना runtime BlueStore डिफ़ॉल्ट SeaStore नेटिव CyanStore कोई डेटा नहीं FlashStore अकेला स्टोर क्लासिक OSD के दो रीराइट। Crimson चुनने के लिए तीन स्टोर रखता है, जिनमें BlueStore डिफ़ॉल्ट है; FlashStore का एक ही है। हर एक कहाँ से आता है पहला फ़र्क यह है कि इसे कौन बनाता है और कैसे।\nCrimson FlashStore किसने बनाया Ceph अपस्ट्रीम, मुख्य ट्री में croit भाषा C++ Rust फ़्रेमवर्क Seastar croit का अपना सिंगल-थ्रेड एग्ज़ीक्यूटर कोड ceph/ceph में क्लीन-रूम रीराइट, कोई Ceph कोड लिंक नहीं डेवलपमेंट अपस्ट्रीम, खुला प्रीव्यू में रीड-ओनली स्नैपशॉट; पहली प्रोडक्शन रिलीज़ के बाद खुला लाइसेंस Ceph का डेमन LGPL-3.0, क्लाइंट MPL-2.0 अपने ही शब्दों में स्थिति “not suitable for production use” “not yet recommended for production data” नियोजित GA कुछ नहीं बताया Q1 2027 Crimson, Ceph की अपनी रिपॉज़िटरी में रहता है और Ceph के अपने डेवलपर उसे बनाते हैं। यह Seastar पर लिखा गया है, जो थ्रेड-पर-कोर सर्वरों के लिए एक C++ फ़्रेमवर्क है और ScyllaDB से निकला है3। Umbrella के डॉक्यूमेंट साफ़ कहते हैं कि यह “is in a tech-preview stage and is not suitable for production use”1।\nFlashStore शून्य से Rust में लिखा गया है और इसमें कोई भी Ceph कोड लिंक नहीं है; Ceph का C++ एक रेफ़रेंस की तरह पढ़ा जाता है और croit के अपने स्पेसिफ़िकेशन से दोबारा लागू किया जाता है4। इसका README कहता है कि यह टेस्टिंग और मूल्यांकन के लिए है और “not yet recommended for production data”, और जनरल अवेलेबिलिटी 2027 की पहली तिमाही के लिए नियोजित है2। पब्लिक रिपॉज़िटरी एक रीड-ओनली स्नैपशॉट है: “no issue tracker, no contribution workflow”2।\nवह पंक्ति ध्यान से पढ़ने लायक है। Crimson खुले में डेवलप होता है, और कोई भी पुल रिक्वेस्ट पढ़ सकता है और उन पर बहस कर सकता है। FlashStore फ़िलहाल एक कंपनी से तैयार स्नैपशॉट के रूप में आता है: आप हर लाइन पढ़ सकते हैं, लेकिन अभी उसे पैच नहीं भेज सकते। यह प्रीव्यू का दौर है, योजना नहीं। प्रीव्यू इसलिए है कि कम्युनिटी का फ़ीडबैक इकट्ठा हो, जबकि croit अंदर अपने प्रोडक्शन टेस्ट केस चलाता है, उससे पहले कि वह OSD को इस्तेमाल के लिए सुरक्षित घोषित करे। खुला डेवलपमेंट उस पहली प्रोडक्शन रिलीज़ के बाद आता है, वही रास्ता जो कंपनी-प्रायोजित ज़्यादातर ओपन-सोर्स प्रोजेक्ट अपनाते हैं। यह बात किसी प्रकाशित रोडमैप से नहीं, croit के अंदर से आई है, इसलिए उन्हें इस पर कायम रखिए।\ncroit ने Crimson को फ़ोर्क करने पर विचार किया था और लिखकर रखा कि क्यों नहीं किया। उसका ADR कहता है कि Crimson “tries to support everything (HDD, alienstore/BlueStore, all pool types)”, और जोड़ता है “Complex code is never fast”4। यह Crimson के बारे में croit की राय है, कोई माप नहीं, और मैं इसे उसी तरह लूँगा। उसी ADR ने फ़ोर्क को आंशिक रूप से LGPL की वजह से भी खारिज किया4, और फिर croit ने आठ दिन बाद अपना ही डेमन LGPL-3.0 में लाइसेंस किया5। तो लाइसेंस असल में कभी वजह था ही नहीं।\nमेमोरी सेफ़्टी: Rust बनाम C++ OSD वह कोड है जो आपका डेटा रखता है। उसमें use-after-free या बफ़र ओवररन कोई ऐसा क्रैश नहीं है जिससे आप रीस्टार्ट करके निकल जाएँ; वह डिस्क पर करप्ट डेटा है, जो हर रेप्लिका पर कॉपी हो जाता है। यह ठीक वही किस्म का बग है जिसे डिज़ाइन से ही बाहर करने के लिए पश्चिमी साइबर एजेंसियाँ पिछले तीन साल से इंडस्ट्री से कह रही हैं।\nगाइडेंस किसने उस पर अपना नाम रखा वह क्या कहती है The Case for Memory Safe Roadmaps, दिसंबर 2023 CISA, NSA और FBI (अमेरिका), ASD का ACSC (ऑस्ट्रेलिया), CCCS (कनाडा), NCSC-UK, NCSC-NZ, CERT-NZ C और C++ मेमोरी अनसेफ़ हैं; उनसे दूर जाने का रोडमैप प्रकाशित करें Product Security Bad Practices v2.0, जनवरी 2025 CISA और FBI जहाँ मेमोरी-सेफ़ भाषाएँ उपलब्ध हैं, वहाँ C या C++ में नई क्रिटिकल-इंफ्रास्ट्रक्चर प्रोडक्ट लाइनें “dangerous” हैं संयुक्त गाइडेंस साफ़ कहती है: “Programming languages such as C and C++ are examples of memory unsafe programming languages”6। CISA और FBI इससे आगे जाते हैं, और “the development of new product lines for use in service of critical infrastructure or NCFs in a memory-unsafe language (e.g., C or C++)” को खतरनाक बताते हैं जब कोई मेमोरी-सेफ़ विकल्प इस्तेमाल हो सकता हो7। यह गाइडेंस है, कानून नहीं। लेकिन क्रिटिकल सेवाओं के नीचे का स्टोरेज ठीक वही कोड है जिसके लिए यह है, और ये दोनों नेक्स्ट-जनरेशन OSD हैं जिन्हें इसी पर परखा जाएगा।\nFlashStore इस पर खरा उतरता है। यह Rust में लिखा गया है, और croit का ADR वजह एक लाइन में देता है: “Storage = correctness-critical; memory-safety bugs = data loss”8। कंपाइलर unsafe चिह्नित कोड को छोड़कर हर जगह मेमोरी सेफ़्टी जाँचता है, और वही ADR उसे FFI, DMA, NVMe और नेटवर्क-ड्राइवर मॉड्यूल तक सीमित रखता है, हर एक के साथ एक SAFETY कमेंट8। मैंने स्नैपशॉट में इसे गिना: Rust की 696,125 लाइनों में से 1,216 लाइनें unsafe का ज़िक्र करती हैं, लगभग 0.17%, और वे RDMA, रनटाइम, NVMe और स्टोर crates में हैं जहाँ कोड हार्डवेयर से बात करता है। संयुक्त गाइडेंस खुद इस रास्ते का नाम लेती है, यह कहते हुए कि Rust “can contain the \u0026lsquo;unsafe\u0026rsquo; keyword”6, तो ईमानदार माप यही है: शून्य नहीं, लेकिन छोटा, बाड़ से घिरा, और वहीं जहाँ आप उम्मीद करेंगे। जो C यह कॉल करता है, SPDK और DPDK, वह भी इन्हीं सीमाओं के पीछे है8।\nCrimson इस पर खरा नहीं उतरता। यह C++ फ़्रेमवर्क पर C++ में लिखा गया नया OSD है13, और यही वह भाषा है जिसे ऊपर की एजेंसियाँ मेमोरी अनसेफ़ बताती हैं। इसकी हर लाइन उस दायरे से बाहर है जहाँ कंपाइलर मेमोरी सेफ़्टी जाँच सके, और अपने डिफ़ॉल्ट कॉन्फ़िगरेशन में यह स्टोर BlueStore को सौंप देता है, जो भी C++ है।\nCrimson FlashStore भाषा C++ Rust कंपाइलर मेमोरी सेफ़्टी जाँचता है नहीं हाँ, unsafe के बाहर बिना जाँचा कोड पूरा लगभग 0.17% लाइनें, ड्राइवर और FFI कोड डिफ़ॉल्ट स्टोर BlueStore, C++ FlashStore, Rust Five Eyes की मेमोरी-सेफ़्टी गाइडेंस पर खरा नहीं हाँ Ceph के डेवलपरों ने C++ लापरवाही से नहीं चुना; Crimson एक C++ कोड बेस से निकला, और जगह पर ही रीराइट करने का मतलब था उसी में रहना। यह एक उचित इंजीनियरिंग रास्ता है। फिर भी इससे नेक्स्ट-जनरेशन Ceph OSD उसी किस्म की भाषा में लिखा रह जाता है जिसे पाँच देशों की एजेंसियों ने नए क्रिटिकल कोड से छोड़ने को कहा है।\nहर एक क्लस्टर में कैसे जुड़ता है यह दोनों के बीच सबसे बड़ा व्यावहारिक फ़र्क है, और इसका परफ़ॉर्मेंस से कोई लेना-देना नहीं है।\nFlashStore OSD उन पूल में जुड़ता है जो आपके पास पहले से हैं। यह क्लासिक BlueStore OSD के बगल में उन्हीं प्लेसमेंट ग्रुप में बैठता है, और आप एक बार में एक ड्राइव बदलते हैं2।\nCrimson OSD ऐसा नहीं करता। पास तक नहीं। Umbrella के डॉक्यूमेंट कहते हैं: “Crimson OSD won\u0026rsquo;t instantiate PGs from non-Crimson pools”1। कोड ठीक यही करता है। जब मॉनिटर किसी Crimson OSD से बिना crimson फ़्लैग वाले पूल में PG बनाने को कहता है, तो वह “pool lacks crimson flag” लॉग करता है और बनाना रद्द कर देता है9।\nकौन किन पूल को सर्व करेगा आपका मौजूदा पूल crimson फ़्लैग नहीं क्लासिक OSD BlueStore FlashStore OSD वही PG Crimson OSD सिर्फ़ crimson पूल PG अनदेखे नया पूल, --crimson autoscale बंद FlashStore आपके मौजूदा पूल में PG लेता है। Crimson सिर्फ़ crimson फ़्लैग के साथ बने पूल को सर्व करता है, इसलिए उसे नए पूल चाहिए और डेटा उनमें कॉपी करना पड़ता है। तो Crimson ट्रायल का मतलब है नए पूल, crimson फ़्लैग के साथ बने हुए, और आपका डेटा उनमें ले जाया गया। और उन पूल के साथ शर्तें आती हैं जिन्हें मॉनिटर लागू करता है:\nCrimson पूल का नियम (Umbrella) कहाँ पूल बनाते समय PG ऑटोस्केलिंग बंद होनी चाहिए OSDMonitor, पूल क्रिएट10 PG मर्जिंग (pg_num घटाना) मना OSDMonitor, pg_num बदलाव11 PG स्प्लिटिंग सिर्फ़ तब जब crimson_allow_pg_split true हो वही, और वह ऑप्शन12 EC पूल ऑप्टिमाइज़्ड EC टाइप के ही होने चाहिए, कोई अपवाद नहीं OSDMonitor, पूल क्रिएट13 EC पूल पर कोई OMAP नहीं वही13 FlashStore क्लासिक पूल सर्व करता है, रेप्लिकेटेड और इरेज़र-कोडेड दोनों, और जिन EC कॉन्फ़िगरेशन को वह सपोर्ट नहीं करता उन्हें मॉनिटर पर रोकने के बजाय खुद छोड़ देता है14। दोनों में से कोई तरीका गलत नहीं है। लेकिन एक आपको अपने असली पूल लेआउट की कॉपी पर टेस्ट करने देता है, और दूसरा आपसे पहले एक अलग लेआउट बनवाता है।\nआपके मौजूदा पूल के लिए पार जाने का कोई रास्ता नहीं तो क्या आप किसी मौजूदा पूल को Crimson पूल में बदलकर, एक-एक ड्राइव करके उसे ले जा सकते हैं? नहीं।\nUmbrella के डॉक्यूमेंट कहते हैं कि Crimson “aiming to allow seamless migration from existing ceph-osd deployments”1। Aiming, यानी इरादा। रिलीज़ यह नहीं करता, और सोर्स दिखाता है कि क्यों नहीं कर सकता। crimson फ़्लैग ceph osd pool create का एक ऑप्शन है और कहीं नहीं15। ceph osd pool set में पहले से मौजूद पूल पर सेट करने के लिए कोई crimson वेरिएबल नहीं है16। और Crimson OSD बिना फ़्लैग वाले पूल के हर PG को नज़रअंदाज़ करता है, जैसा ऊपर बताया9। मुझे सोर्स या डॉक्यूमेंट में कोई कन्वर्ज़न टूल नहीं मिला।\nमौजूदा पूल को ले जाना Crimson (Umbrella) FlashStore, आज वही पूल रखें नहीं, नया पूल ज़रूरी हाँ क्या पूल पर बाद में फ़्लैग लग सकता है नहीं, सिर्फ़ बनाते समय ज़रूरत नहीं डेटा कैसे जाता है आप कॉपी करते हैं, पूल से पूल क्लस्टर बैकफ़िल करता है क्लाइंट को नई जगह दिखाना हाँ, नए पूल पर नहीं एक बार में एक ड्राइव नहीं हाँ इससे Crimson पर जाना एक ऐसी डेटा कॉपी बन जाता है जो आप खुद चलाते हैं: RBD इमेज “between different pools” लाइव-माइग्रेट हो सकती हैं17, और ऑब्जेक्ट या फ़ाइल डेटा को कॉपी करने के लिए वह चाहिए जो आपकी एप्लिकेशन इस्तेमाल करती हैं। फिर हर क्लाइंट को नए पूल की ओर मोड़ना पड़ता है।\nFlashStore उन पूल के साथ कम्पैटिबल है जो आप आज चलाते हैं। आप इसे एक ड्राइव पर तैयार करते हैं, क्लस्टर उसे दिए गए प्लेसमेंट ग्रुप बैकफ़िल करता है, और आपके क्लाइंट को कभी पता नहीं चलता कि उनके नीचे पूल बदला, क्योंकि वह बदला ही नहीं18। किसी रीराइट के आपके क्लस्टर में जुड़ने और उसके बगल में बैठने के बीच पूरा फ़र्क यही है।\nहर एक मॉनिटर को क्या बताता है Crimson अपना परिचय खुद देता है। बूट पर यह osd_type=crimson भेजता है19, और मॉनिटर इसे तब तक अंदर नहीं आने देता जब तक allow_crimson OSDMap फ़्लैग सेट न हो, और एक लॉग लाइन लिखता है कि crimson-osd “is considered unstable and may result in crashes or data loss”20। वहाँ तक पहुँचने में डॉक्यूमेंट के चार कमांड लगते हैं, जिनमें पहला enable_experimental_unrecoverable_data_corrupting_features नाम का ऑप्शन सेट करता है1।\nFlashStore इसका उल्टा करता है। यह कोई osd_type नहीं भेजता और osd_objectstore=bluestore रिपोर्ट करता है, तो मॉनिटर को एक क्लासिक OSD दिखता है और वह कोई सवाल नहीं पूछता21। पिछली पोस्ट इसकी वजह बताती है: Umbrella का मॉनिटर EC ओवरराइट जैसे फ़ीचर इस शर्त पर खोलता है कि पूल का हर OSD BlueStore रिपोर्ट करे21। यह आज प्रोडक्शन में चल रहे स्टॉक मॉनिटर और मैनेजर के लिए है। croit के अपने Ceph बिल्ड पर, जहाँ उन्हें इसे पहचानने के लिए पैच किया गया है, FlashStore खुद को flashstore रिपोर्ट करता है21।\nबूट पर मॉनिटर क्या जाँचता है Crimson OSD osd_type=crimson mon: allow_crimson सेट है? set-allow-crimson नहीं: बूट मना \"crashes or data loss\" FlashStore OSD कोई osd_type नहीं mon: क्लासिक OSD objectstore=bluestore बूट, फ़्लैग की ज़रूरत नहीं मौजूदा पूल सर्व करता है Crimson को नाम से, एक ऐसे फ़्लैग के पीछे अंदर आने देना पड़ता है जिसके बारे में मॉनिटर चेतावनी देता है। FlashStore क्लासिक OSD बनकर सीधे अंदर आ जाता है। मैं चाहूँगा कि सॉफ़्टवेयर मुझे बताए कि वह क्या है। Crimson बताता है। उसका तरीका ईमानदार है, और फ़्लैग का नाम इसमें कोई शक नहीं छोड़ता कि आप किस बात पर हामी भर रहे हैं। FlashStore का तरीका वह है जिससे ड्रॉप-इन उन स्टॉक मॉनिटर और मैनेजर पर काम करता है जो लोग आज चलाते हैं, और यह एक कम्पैटिबिलिटी उपाय है, अंतिम स्थिति नहीं। दोनों जानबूझकर हैं, और दोनों लिखकर रखे गए हैं। बस जब आप अपने OSD गिनें तो जान लीजिए कि आप किससे निपट रहे हैं।\nकोर: रिएक्टर बनाम पिन किए हुए पोलिंग थ्रेड दोनों प्रोजेक्ट ने थ्रेड पूल बाहर फेंक दिए। अच्छा किया। दोनों हर कोर पर एक थ्रेड चलाते हैं और अपना काम कोर के हिसाब से शार्ड करते हैं। फ़र्क इसमें है कि वे ऑपरेटर से कितना माँगते हैं और कोर को कितनी कसकर पकड़ते हैं।\nCrimson FlashStore काम की इकाई हर कोर पर Seastar रिएक्टर हर कोर पर पिन किया थ्रेड कोर की संख्या crimson_cpu_num, कोई डिफ़ॉल्ट नहीं, सेट करना ज़रूरी flashstore_cores, डिफ़ॉल्ट 8 कोर पर पिन सिर्फ़ crimson_cpu_set के साथ हाँ, flashstore_lcores खाली होने पर 200 µs पोल, फिर सो जाता है पोल, अडैप्टिव आइडल पूरा बिज़ी-पोल वैकल्पिक, crimson_poll_mode यही डिज़ाइन है, आइडल बैकऑफ़ के साथ डिप्लॉय के बाद बदलाव नहीं स्टोर शार्ड prepare पर तय Crimson पर crimson_cpu_num “does not have a default value”, इसे OSD डिप्लॉय होने से पहले सेट करना ज़रूरी है, और यह “cannot be changed after deployment”1। यह थ्रेड पिन नहीं करता जब तक आप crimson_cpu_set भी सेट न करें, जिसे डॉक्यूमेंट “generally less recommended due to its complexity” बताते हैं1। खाली होने पर रिएक्टर वापस सोने से पहले 200 µs पोल करता है, और एक पूरा पोल मोड “at the expense of 100% cpu usage” मौजूद है, जो डिफ़ॉल्ट रूप से बंद है22। SeaStore भी mkfs के बाद रिएक्टर की संख्या में बदलाव मना कर देता है23।\nFlashStore डिज़ाइन से पिन करता है, डिज़ाइन से पोल करता है, और खाली होने पर पीछे हट जाता है2425। इसके स्टोर शार्ड की संख्या स्टोर तैयार करते समय तय हो जाती है, वही पाबंदी, बस एक अलग जगह पर26।\nव्यवहार में दोनों पूरे कोर चाहते हैं और दोनों चाहते हैं कि आप डिप्लॉय करने से पहले उनका आकार तय करें। Crimson पोलिंग को एक विकल्प बनाता है जिसे आप चुनते हैं। FlashStore इसे डिफ़ॉल्ट बनाता है और आइडल लॉजिक को कुछ CPU वापस खींचने देता है।\nCrimson का डिफ़ॉल्ट स्टोर BlueStore है यही वह हिस्सा है जिसने मुझे चौंकाया। चौंकाना नहीं चाहिए था।\nCrimson में दो तरह के ऑब्जेक्ट स्टोर हैं। नेटिव स्टोर Seastar रिएक्टर के अंदर चलते हैं; नॉन-नेटिव स्टोर “a thread pool proxy” के ज़रिए “alien threads: worker threads not managed by Seastar” पर चलते हैं1। SeaStore नेटिव है। BlueStore नॉन-नेटिव है। और डिफ़ॉल्ट BlueStore है।\nडॉक्यूमेंट इस बारे में साफ़ बोलते हैं। SeaStore “is the primary native object store for Crimson OSD, though it is not the default as the support is in early stages”1। Cephadm, जब तक अलग से न कहा जाए, Crimson को --objectstore bluestore के साथ डिप्लॉय करता है, और तब भी SeaStore को --method raw से डिप्लॉय नहीं किया जा सकता; आपसे LVM इस्तेमाल करने को कहा जाता है1।\nCrimson का डिफ़ॉल्ट स्टोर, FlashStore के सामने Crimson, डिफ़ॉल्ट स्टोर Seastar रिएक्टर crimson_cpu_num thread pool proxy रिएक्टर से बाहर सौंपना alien threads crimson_bluestore_num_threads BlueStore BlueFS पर RocksDB FlashStore PG का मालिक कोर पिन, पोलिंग स्टोर शार्ड, वही कोर कोई सौंपना नहीं NVMe queue, वही कोर SPDK या io_uring डिफ़ॉल्ट Crimson OSD हर स्टोर ऑपरेशन अपने रिएक्टर से निकालकर BlueStore चलाने वाले साधारण थ्रेड के एक पूल को सौंप देता है। FlashStore पूरा रास्ता उसी कोर पर रखता है जिसके पास वह PG है। तो आज डिफ़ॉल्ट सेटिंग के साथ डिप्लॉय किया गया Crimson OSD उसी BlueStore, RocksDB और BlueFS के ऊपर एक Seastar फ़्रंट एंड चलाता है जो क्लासिक OSD इस्तेमाल करता है, और इसके लिए crimson_bluestore_num_threads थ्रेड अलग रखे जाते हैं22। स्टोर की तरफ़, क्लासिक OSD से कुछ भी नहीं बदला। माइग्रेशन का रास्ता बनाने का यह समझदारी भरा तरीका है। यही वजह भी है कि परफ़ॉर्मेंस पर “Crimson” की तुलना FlashStore से करने का बहुत कम मतलब है, जब तक आप यह न बताएँ कि Crimson कौन सा स्टोर चला रहा था।\nस्टोर की सही तुलना SeaStore बनाम FlashStore है। इस पोस्ट का बाकी हिस्सा वही है।\nSeaStore और FlashStore: मेटाडेटा कहाँ रहता है दोनों स्टोर शुरू से NVMe के लिए लिखे गए, दोनों कोर के हिसाब से शार्ड होते हैं, और दोनों अपना मेटाडेटा RocksDB की बजाय अपने खुद के B-tree में रखते हैं। फिर भी उनकी बनावट बहुत अलग है।\nSeaStore हर रिएक्टर को उसका अपना root देता है27। उसके नीचे एक onode tree, एक LBA tree और एक backref tree होते हैं। फिर हर ऑब्जेक्ट का onode अपने OMAP B-tree और अपने XATTR B-tree की ओर, और लॉजिकल पते वाले डेटा extent की ओर इशारा करता है27। LBA tree उन लॉजिकल पतों को फ़िज़िकल पतों से जोड़ता है, ताकि ऑब्जेक्ट के अपने tree बदले बिना कोई ब्लॉक डिस्क पर खिसक सके; डॉक्यूमेंट इसी indirection को वजह बताते हैं कि ज़्यादातर extent “can be relocated freely”27।\nFlashStore सब कुछ हर शार्ड पर एक copy-on-write B+tree में रखता है: onodes, xattrs, OMAP, हर 4 KiB ब्लॉक पर एक crc32c के साथ extent map, PG log, और allocator का bitmap28। Extent map सीधे फ़िज़िकल ब्लॉक की ओर इशारा करते हैं। बीच में कोई लॉजिकल परत नहीं है।\nमेटाडेटा कहाँ रहता है SeaStore root onode tree LBA tree backref tree onode OMAP अपना B-tree XATTR अपना B-tree डेटा लॉजिकल पता लॉजिकल पता, फिर LBA tree, फिर डिस्क FlashStore हर शार्ड पर एक COW B+tree onodes, xattrs OMAP extent maps + crc32c PG log, PG info allocator bitmap extent map, फिर डिस्क SeaStore: हर तरह की चीज़ के लिए एक tree, OMAP और xattrs के लिए हर ऑब्जेक्ट पर एक B-tree, और डेटा ढूँढने के लिए एक LBA tree। FlashStore: हर शार्ड पर एक tree, सीधे डिस्क की ओर इशारा करता हुआ। दोनों फ़ैसलों के पीछे वजह है। SeaStore का indirection ही उसके cleaner को सस्ता बनाता है: वह हर उस tree को दोबारा लिखे बिना जीवित डेटा खिसका सकता है जो उसकी ओर इशारा करता है। FlashStore को इसकी ज़रूरत नहीं, क्योंकि उसके पास cleaner है ही नहीं, जैसा नीचे बताया गया है। उसका ADR “Per-object omap subtree/root” को उन विकल्पों में गिनाता है जिन पर विचार करके उन्हें खारिज किया गया28।\nचेकसम पर एक फ़र्क जानने लायक है: SeaStore अपना crc32c पूरे cached extent पर गिनता है29, जबकि FlashStore हर 4 KiB ब्लॉक पर एक रखता है28।\nएक write किस क्रम में commit होता है SeaStore का डिफ़ॉल्ट डिवाइस टाइप SSD है, जो segmented backend इस्तेमाल करता है30। उस backend पर एक transaction एक journal record होता है जिसमें deltas होते हैं, और डेटा के साथ दो में से एक बात हो सकती है।\nछोटे, कम समय तक रहने वाले extent journal record के अंदर ही जा सकते हैं, और तब वही record पूरा commit होता है27। बड़े या लंबे समय तक रहने वाले extent अलग out-of-line segment में जाते हैं, और तब डॉक्यूमेंट क्रम तय करते हैं: “final record with the deltas should be written only once the other blocks are persisted”27। यह एक के बाद एक दो write हैं, वही आकार जो BlueStore के पहले-डेटा-फिर-RocksDB वाले commit का है।\nFlashStore डेटा extent और WAL यूनिट एक साथ लिखता है, नए डेटा का crc32c WAL record में रखता है ताकि replay उसे जाँच सके, और दोनों के durable होते ही acknowledge करता है28। डिवाइस तक एक ही चक्कर, आकार चाहे जो हो।\ncommit कब जा सकता है SeaStore छोटा extent journal record extent inline + deltas ack 1 चक्कर SeaStore out of line extent OOL segment में persist होने तक रुको journal record deltas ack 2 चक्कर FlashStore डेटा, नया 4 KiB WAL यूनिट, डेटा crc ack 1 चक्कर समय अपने डिफ़ॉल्ट segmented डिवाइस पर SeaStore: extent journal record में समा जाए तो एक चक्कर, out-of-line जाए तो एक के बाद एक दो। FlashStore: डेटा और log record साथ-साथ। इसका कितना असर होता है यह आपके वर्कलोड पर निर्भर है, ठीक वैसे ही जैसे BlueStore वाली तुलना में। कम queue depth पर, जहाँ क्लाइंट हर write का इंतज़ार करते हैं, दूसरा चक्कर असली latency है। लोड में, batching इसका ज़्यादातर हिस्सा छिपा देती है।\nजगह वापस पाना log-structured डिज़ाइन का दूसरा आधा हिस्सा सफ़ाई है।\nsegmented backend पर SeaStore हमेशा सिर्फ़ खुले segment में ही लिखता है। किसी segment को दोबारा इस्तेमाल करने से पहले उसके जीवित ब्लॉक कहीं और दोबारा लिखने पड़ते हैं, और डिज़ाइन डॉक्यूमेंट बताता है कि इसकी कीमत क्या है: “we must \u0026lsquo;clean\u0026rsquo; one byte of an existing segment for every byte written at steady state”27। spike से बचने के लिए यह इस सफ़ाई का कुछ हिस्सा चल रहे write में मिला देता है, और बाकी तब बैकग्राउंड में करता है जब ड्राइव शांत हो27। segment का डिफ़ॉल्ट आकार 64 MiB है31।\nSeaStore के पास NVMe के लिए एक दूसरा backend भी है, random block manager, जिसके बारे में डॉक्यूमेंट कहते हैं कि यह “Preferred for fast NVMe devices where overwrites are efficient enough that log structured updates aren\u0026rsquo;t worth the overhead”27। यह डिफ़ॉल्ट नहीं है। आप इसे seastore_main_device_type से चुनते हैं30।\nFlashStore में कोई segment cleaner नहीं है। बिल्कुल नहीं। बदला गया ब्लॉक एक checkpoint के उसके पार जाते ही शार्ड के allocator को वापस मिल जाता है, जो हर पाँच सेकंड पर होता है जब तक बिना persist हुआ काम बाकी हो, या उससे पहले जब WAL ring आधी भर जाए28। इसके डिज़ाइन डॉक्यूमेंट ने log-structured लेआउट को सीधे खारिज कर दिया28। इसका मतलब यह नहीं कि इसमें कोई बैकग्राउंड काम नहीं है: यह अब भी tree पेजों को merge और compact करता है और खाली जगह को defragment करता है, क्लाइंट I/O के हिसाब से रफ़्तार रखते हुए28। लेकिन जगह बनाने के लिए यह आपका जीवित डेटा कभी कॉपी नहीं करता।\nजगह वापस पाना SeaStore, segmented (डिफ़ॉल्ट) बंद segment जीवित + मृत ब्लॉक cleaner जीवित ब्लॉक खुले segment में दोबारा लिखता है segment खाली discard, दोबारा इस्तेमाल स्थिर अवस्था: लिखे हर byte पर लगभग एक byte साफ़ FlashStore ब्लॉक बदला गया नए extent से checkpoint तक रोका हर 5 s या WAL आधा भरने पर bitmap में वापस कोई जीवित डेटा नहीं खिसका SeaStore का डिफ़ॉल्ट backend sequential write की कीमत एक ऐसे cleaner से चुकाता है जो जीवित डेटा खिसकाता है। FlashStore checkpoint के बाद बदले गए ब्लॉक उसी जगह मुक्त करता है और कुछ भी नहीं खिसकाता। flash पर, जो ड्राइव के अंदर पहले से अपना garbage collection चलाता है, मैं चाहूँगा कि OSD उसके ऊपर दूसरा न चलाए। RBM backend के बारे में SeaStore के अपने डॉक्यूमेंट जो कहते हैं, उससे लगता है वे भी सहमत हैं। फ़र्क यह है कि FlashStore ने इसे एकमात्र विकल्प बनाया और SeaStore ने इसे नॉन-डिफ़ॉल्ट।\nकौन किस पर चलेगा Crimson (Umbrella) FlashStore HDD हाँ, BlueStore के साथ; SeaStore में HDD segment type है नहीं NVMe हाँ हाँ, एकमात्र लक्ष्य बिजली जाने पर सुरक्षा कोई घोषित ज़रूरत नहीं ज़रूरी, इसके बिना mkfs मना करता है डिवाइस लेआउट cephadm से SeaStore के लिए LVM पूरे namespace, कोई partition नहीं वायर प्रोटोकॉल सिर्फ़ msgr2 सिर्फ़ msgr2 I/O backend io_uring डिफ़ॉल्ट; linux-aio, epoll SPDK डिफ़ॉल्ट, io_uring tier पूल crimson फ़्लैग वाले नए पूल मौजूदा क्लासिक पूल मौजूदा डेटा ले जाना नए पूल में कॉपी करें उसी पूल में backfill डिप्लॉय का तरीका cephadm, --osd-type crimson पैकेज, croit-flashstore-tool सुझाया गया build main का नवीनतम CI build रिलीज़ स्नैपशॉट Crimson अपना दायरा बनाए रखता है। डॉक्यूमेंट कहते हैं कि SeaStore “may not be suitable for traditional HDDs”, लेकिन “Crimson will continue to support BlueStore ensuring compatibility with HDDs and slower SSDs”1, और SeaStore का डिज़ाइन डॉक्यूमेंट अब भी HDD में दिलचस्पी दर्ज करता है27। इसका messenger v1 को सीधे मना कर देता है, “ProtocolV1 is no longer supported”32, वही फ़ैसला जो FlashStore ने लिया33। इसके डॉक्यूमेंट “one of the latest available builds, as Crimson evolves rapidly” की सलाह देते हैं, जिसका व्यवहार में मतलब main की CI इमेज है1।\nFlashStore सब कुछ बिजली-सुरक्षा वाले NVMe तक सीमित कर देता है, और इसकी सादगी वहीं से आती है34। यह ठीक वही सौदा है जिसे croit का ADR दूसरी तरफ़ से बताता है।\nएक ही सवाल के दो जवाब दोनों प्रोजेक्ट एक ही बात से शुरू हुए: क्लासिक OSD तेज़ हार्डवेयर बर्बाद करता है। दोनों ने बहुत अलग जवाब दिए।\nCrimson का जवाब कम्युनिटी वाला है। OSD को उसी जगह, Ceph के अंदर, दोबारा लिखो, नया स्टोर परिपक्व होने तक हर पुराना स्टोर और हर पुरानी ड्राइव चालू रखो, और सबको काम होते हुए देखने दो। यह धीमा है, और दिखता भी है। Umbrella में डिफ़ॉल्ट Crimson OSD अब भी BlueStore को एक थ्रेड पूल के ज़रिए चलाता है, उसके अपने पूल आपके पूल से अलग बाड़ में हैं, और इसे चालू करने के लिए आपको “unrecoverable data corrupting” शब्द टाइप करने पड़ते हैं। लेकिन यह Ceph चलाने वाले हर किसी का है, और इसे कोई आपसे छीन नहीं सकता।\nFlashStore का जवाब vendor वाला है। एक सँकरा लक्ष्य चुनो, बिजली-सुरक्षा वाला NVMe, जो कुछ सिर्फ़ दूसरे हार्डवेयर के लिए था उसे बाहर फेंको, और एक ऐसा स्टोर शिप करो जो आपके मौजूदा पूल में सीधे बैठ जाए। यह तेज़ है, और यह भी दिखता है। लेकिन यह एक कंपनी से आता है, पहली production रिलीज़ तक read-only स्नैपशॉट के रूप में, और stock क्लस्टर में यह मॉनिटर को खुद को BlueStore बताकर अंदर आता है।\nमैं उसी कंपनी के लिए काम करता हूँ, इसलिए आगे जो लिखा है उसे उसी हिसाब से तौलिए। all-flash क्लस्टर के लिए croit ने सही तकनीकी दाँव लगाया। Ceph को एक प्रोजेक्ट के रूप में देखें तो Crimson ने सही दाँव लगाया। ये दोनों एक ही बात नहीं हैं। जो प्रोजेक्ट सबकी सेवा करता है वह HDD नहीं छोड़ सकता। एक vendor छोड़ सकता है, और उसे छोड़ना भी चाहिए, अगर उसके ग्राहक यही खरीदते हैं।\nजो मैं नहीं करूँगा, वह है किसी भी तरफ़ के benchmark चार्ट पर इन दोनों में से चुनना। Crimson के आँकड़े इस पर निर्भर हैं कि उसके तीन स्टोर में से कौन सा चल रहा था; FlashStore के आँकड़े croit की अपनी लैब से आते हैं। दोनों प्रोजेक्ट अपने डिज़ाइन डॉक्यूमेंट प्रकाशित करते हैं। उन्हें पढ़िए, फिर दोनों को उन ड्राइव पर रखिए जिन्हें आप सच में डिप्लॉय करेंगे, और अपना खुद का वर्कलोड चलाइए। जो तब भी वही करे जो उसके डॉक्यूमेंट कहते हैं, जब दाँव पर आपका डेटा हो, वही इंतज़ार के लायक है।\nCeph Umbrella, Crimson (Tech Preview) — “the next generation ceph-osd”, “not suitable for production use”, ज़रूरी फ़्लैग, crimson_cpu_num, नेटिव और नॉन-नेटिव backend, SeaStore “not the default”, --method raw समर्थित नहीं। स्रोत: doc/crimson/crimson.rst at v21.2.0।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit ceph-rust, README at snapshot 48f9014 — सीधे बैठ जाने (drop-in) का दावा, 9 नवंबर 2026 से प्रीव्यू, GA 2027 की पहली तिमाही, “not yet recommended for production data”, “no issue tracker, no contribution workflow”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSeastar — वह C++ फ़्रेमवर्क जिस पर Crimson बना है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0003, green-field, no Crimson fork — “Crimson = C++/seastar, tries to support everything (HDD, alienstore/BlueStore, all pool types) -\u0026gt; complexity. Complex code is never fast.”; fork “C++, complexity, LGPL” के कारण खारिज।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0164, licences — तारीख 2026-10-17; daemon LGPL-3.0-only।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA, NSA, FBI, ASD\u0026rsquo;s ACSC, CCCS, NCSC-UK, NCSC-NZ, CERT-NZ: The Case for Memory Safe Roadmaps (December 2023) — “Programming languages such as C and C++ are examples of memory unsafe programming languages”; Rust “can contain the \u0026lsquo;unsafe\u0026rsquo; keyword”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA and FBI: Product Security Bad Practices, v2.0 (January 2025) — critical infrastructure के लिए नई product line “in a memory-unsafe language (e.g., C or C++) where readily available alternative memory-safe languages could be used is dangerous”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0002, language: Rust — “Storage = correctness-critical; memory-safety bugs = data loss”; unsafe “confined to ffi/dma/nvme/net-driver modules with SAFETY comments”; SPDK और DPDK, FFI के ज़रिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/osd/shard_services.cc — “ignoring pgid {}, pool lacks crimson flag”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, crimson pool creation — “crimson-osd does not support changing pg_num or pgp_num, pg_autoscale_mode must be set to \u0026lsquo;off\u0026rsquo;”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, crimson pg_num changes — “pg merging is not yet supported in Crimson”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson_allow_pg_split — “Allow Crimson pools to increase their PG count (split)”, डिफ़ॉल्ट true।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, EC pools for Crimson — “For Crimson - only EC-optimized pools are supported”, “Omap is not supported by EC pools in crimson”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, erasure-coded pools — legacy और optimised EC डिफ़ॉल्ट रूप से सर्व होते हैं; असमर्थित पूल OSD मना कर देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, MonCommands.h, osd pool create — name=crimson,type=CephBool,req=false, अकेली जगह जहाँ यह फ़्लैग स्वीकार होता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, MonCommands.h, osd pool set — सेट किए जा सकने वाले variable; crimson उनमें नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, RBD image live-migration — “RBD images can be live-migrated between different pools”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, migrate from classic — एक ड्राइव जोड़ें या खाली करें, FlashStore तैयार करें, और backfill को डेटा ले जाने दें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/osd/osd.cc — m-\u0026gt;metadata[\u0026quot;osd_type\u0026quot;] = \u0026quot;crimson\u0026quot;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, OSDMonitor.cc, boot check — “Disallowing boot of crimson-osd without allow_crimson OSDMap flag”, “considered unstable and may result in crashes or data loss”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0019, report osd_objectstore=bluestore — कोई osd_type key नहीं, मॉनिटर के BlueStore feature gate।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson.yaml.in — crimson_reactor_idle_poll_time_us 200, crimson_poll_mode “at the expense of 100% cpu usage” डिफ़ॉल्ट false, crimson_bluestore_num_threads।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, seastore_require_partition_count_match_reactor_count — “disable osd shards changes upon restart”, डिफ़ॉल्ट true।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0006, thread-per-core runtime — हर कोर पर एक पिन किया busy-polling थ्रेड, हर PG एक कोर का।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0004, storage I/O — SPDK और io_uring tier, डिवाइस के हिसाब से समयबद्ध idle।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, configuration reference — flashstore_cores डिफ़ॉल्ट 8, flashstore_lcores, flashstore_store_shards prepare के समय तय।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, SeaStore developer documentation — हर रिएक्टर का root, onode, OMAP, LBA और backref tree, लिखे गए हर byte पर एक byte “clean”, journal record का क्रम, RBM backend। स्रोत: doc/dev/crimson/seastore.rst at v21.2.0।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0021, storage engine — हर शार्ड पर एक COW B+tree, समानांतर commit, checkpoint, बैकग्राउंड रखरखाव, खारिज किए गए विकल्प जिनमें log-structured और “Per-object omap subtree/root” शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/os/seastore/cached_extent.h — “Returns crc32c of buffer”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, seastore_main_device_type — “The main device type seastore uses (SSD or RANDOM_BLOCK_SSD)”, डिफ़ॉल्ट SSD।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, seastore_segment_size — डिफ़ॉल्ट 64 MiB।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, crimson/net/SocketMessenger.cc — “ProtocolV1 is no longer supported”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust ADR 0168, out of scope — msgr1 बाहर, सिर्फ़ v2।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, hardware and host requirements — PLP ज़रूरी, पूरे namespace।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/ceph/flashstore-against-crimson/","summary":"Crimson, Ceph का अपना OSD रीराइट है, C++ में, Seastar फ़्रेमवर्क पर, SeaStore नाम के नए नेटिव स्टोर के साथ; FlashStore croit का रीराइट है, Rust में, अपने खुद के स्टोर के साथ। दोनों प्रीव्यू में हैं और दोनों का निशाना NVMe और तेज़ नेटवर्क है। यह पोस्ट दोनों की तुलना वैसे करती है जैसे Ceph 21.2.0 Umbrella Crimson को शिप करता है, Ceph के सोर्स और डॉक्यूमेंटेशन और croit के ceph-rust स्नैपशॉट से: हर एक कहाँ से आता है और किस लाइसेंस में, Rust Five Eyes की मेमोरी-सेफ़्टी गाइडेंस पर खरा क्यों उतरता है और C++ क्यों नहीं, Crimson को अपने पूल और एक एक्सपेरिमेंटल फ़्लैग क्यों चाहिए जबकि FlashStore मौजूदा पूल में सीधे जुड़ जाता है, Umbrella में किसी मौजूदा पूल को Crimson पूल में बदलने का कोई तरीका क्यों नहीं है और इसलिए डेटा कॉपी करना पड़ता है, बूट पर हर एक मॉनिटर को क्या बताता है, Seastar रिएक्टर बनाम पिन किए हुए पोलिंग कोर, यह तथ्य कि डिफ़ॉल्ट Crimson OSD अब भी BlueStore चलाता है, SeaStore के onode, OMAP और LBA ट्री बनाम FlashStore का हर शार्ड पर एक ट्री, हर एक किस क्रम में राइट कमिट करता है, SeaStore का सेगमेंट क्लीनर, और हर एक कौन सा हार्डवेयर और कौन से पूल लेगा।","title":"FlashStore बनाम Crimson: एक ही OSD को दो बार नए सिरे से लिखना"},{"content":"पहले ही बता दूँ: मैं croit में काम करता हूँ, जिसने इसे लिखा है। नीचे सब कुछ दोनों प्रोजेक्ट के प्रकाशित source और documentation से पढ़ा गया है, जिनके लिंक पेज के नीचे हैं, और जहाँ croit के अपने docs croit के अपने कोड से मेल नहीं खाते, वहाँ मैं यह कहता हूँ।\nCeph का OSD, शून्य से दोबारा लिखा गया croit ने ceph-rust प्रकाशित किया है, Rust में शून्य से लिखा गया Ceph OSD, जिसमें BlueStore की जगह FlashStore नाम का अपना object store है1। यह 9 नवंबर 2026 को public preview में आया, और general availability 2027 की पहली तिमाही के लिए तय है1। यह fork नहीं है। प्रोजेक्ट का अपना नियम है कि Ceph का C++ reference के तौर पर पढ़ा जाता है, croit के अपने शब्दों में specification के रूप में लिखा जाता है, और फिर specification से implement किया जाता है2।\nCeph चलाने वाले किसी भी व्यक्ति के लिए मायने रखने वाला दावा drop-in वाला है। आपके monitors, managers, ceph CLI और clients जैसे हैं वैसे ही रहते हैं। FlashStore OSD उन्हीं pools और उन्हीं placement groups में जुड़ता है जिनमें classic OSDs पहले से हैं, और आप एक बार में एक ड्राइव बदलते हैं1।\nक्या बदला जाता है ceph-mon, ceph-mgr classic 21.2.0 clients librados, librbd, krbd एक pool, वही placement groups ceph-osd BlueStore BlueFS पर RocksDB C++, Ceph से croit-flashstore-osd FlashStore COW B+tree + WAL Rust, croit से सिर्फ़ OSD बदलता है। Monitors, managers और clients classic Ceph रहते हैं, और एक placement group में हर तरह के OSD पर एक copy हो सकती है। तो operator के लिए सवाल व्यावहारिक है। अगर आप BlueStore OSD को FlashStore वाले से बदलें, तो नीचे क्या अलग है? सैद्धांतिक रूप से नहीं, और सालों पुराने किसी conference talk वाले BlueStore के सामने नहीं। उस BlueStore के सामने जो आप आज सच में चलाते हैं अगर आप Umbrella, Ceph 21.2.0 पर हैं, वही release जिसके सामने FlashStore बनाया और टेस्ट किया गया है1।\nतो यहाँ तुलना यही है, और सिर्फ़ यही। Umbrella का BlueStore जैसा उसका अपना source और documentation बताते हैं, बनाम FlashStore जैसा उसका source और decision records बताते हैं।\nयह हर उस व्यक्ति को छूता है जिसके पास NVMe Ceph क्लस्टर हैं, और हर उसे जिसने देखा है कि एक OSD उसे कितने cores में पड़ता है। HDD क्लस्टर को यह बिल्कुल नहीं छूता, और उसकी वजह नीचे आती है।\nRepository में क्या है Repository croit के निजी development tree का read-only snapshot है। कोई issue tracker नहीं, कोई pull requests नहीं; updates नए snapshot commits के रूप में आते हैं1। यह preview का चरण है, और यह community की राय के लिए है जबकि croit इसे इस्तेमाल के लिए सुरक्षित घोषित करने से पहले अंदर अपने production test cases चलाता है। Open development पहली production release के बाद आता है, जैसा ज़्यादातर corporate-sponsored open-source प्रोजेक्ट्स में होता है। यह snapshot 10 नवंबर 2026 का है और इसमें लगभग 7,00,000 लाइनें Rust और 450 से ज़्यादा architecture decision records हैं, ADRs, यानी वे छोटे दस्तावेज़ जो दर्ज करते हैं कि हर design फ़ैसला क्यों लिया गया।\nइस तरह की तुलना के लिए ADRs ही काम का हिस्सा हैं। वे सीधे बात करते हैं, उनमें माप होते हैं, और वे यह भी दर्ज करते हैं कि क्या आज़माया गया और फेंक दिया गया, सिर्फ़ यह नहीं कि क्या रहा।\nComponent किसकी जगह लेता है Preview GA (योजना) FlashStore OSD ceph-osd + BlueStore नवंबर 2026 Q1 2027 librustyrados librados नवंबर 2026 Q1 2027 librustyrbd librbd नवंबर 2026 Q1 2027 RDMA (RoCEv2) transport Umbrella में कुछ नहीं नवंबर 2026 Q1 2027 CephFS2, Rust RGW MDS, RGW Q1 2027 Q2 2027 ceph-mon, ceph-mgr नहीं बदले गए लागू नहीं लागू नहीं इस पर कुछ भी बनाने से पहले licences जान लेने चाहिए। Daemon और tools LGPL-3.0-only हैं, client libraries MPL-2.0 हैं, और documentation CC-BY-SA-4.0 है3। Client libraries MPL इसलिए गईं ताकि कोई Rust प्रोग्राम उन्हें LGPL वाली relinking ज़िम्मेदारियों के बिना statically link कर सके; यह सोचा-समझा फ़ैसला है और ऐसे ही लिखा भी गया है3।\nPreview का मतलब वही है जो वह कहता है। croit का अपना README कहता है कि यह testing और evaluation के लिए है और “not yet recommended for production data”1। मैं भी अभी इस पर ग्राहकों का डेटा नहीं रखूँगा, और इस पोस्ट का बाकी कुछ भी इसे नहीं बदलता।\nदो stores, साथ-साथ OSD के दो हिस्से होते हैं। ऊपरी हिस्सा Ceph protocol बोलता है, placement groups का मालिक होता है, peering, recovery और scrub करता है। निचला हिस्सा, object store, “इन bytes को इस object में लिखो” को ड्राइव पर blocks में बदलता है और वादा करता है कि वे बिजली कटने पर भी बचेंगे।\nBlueStore, Umbrella का निचला हिस्सा है। इसका documentation कहता है कि यह “reads and writes to the devices directly in a \u0026lsquo;raw\u0026rsquo; fashion”4, और यह “raw block devices or partitions” इस्तेमाल करता है5। Object का डेटा सीधे block device पर जाता है। बाकी सब, object metadata, OMAP, और इसका अपना हिसाब-किताब, एक embedded RocksDB key/value database में जाता है, और RocksDB, BlueFS पर बैठता है, एक छोटा file system जो BlueStore उसके लिए साथ रखता है56।\nFlashStore यह सब हटा देता है। हर store shard का एक copy-on-write B+tree सब कुछ रखता है: collections, object metadata, extended attributes, extent maps, OMAP, PG log, reference counts और allocator का अपना bitmap भी7। उसके बगल में एक redo write-ahead log ring और data region है। न RocksDB, न BlueFS, और tune करने के लिए कोई दूसरा database नहीं।\nएक OSD के नीचे दो stacks Umbrella BlueStore FlashStore ceph-osd 8 op shards × 2 threads BlueStore object परत hybrid allocator object डेटा raw block, aio RocksDB onodes, omap, deferred BlueFS block या block.db kernel block परत commit से पहले flush HDD, SSD या NVMe, कोई भी partition croit-flashstore-osd हर core पर 1 pinned thread हर core पर store shard अपना allocator, कोई साझा lock नहीं object डेटा नए 4 KiB extents COW B+tree meta, omap, PG log WAL ring redo log, हर shard SPDK (vfio) या io_uring hot path पर कोई flush नहीं PLP वाला NVMe, 4 KiB, पूरा namespace Umbrella का BlueStore ऊपर ही data और metadata अलग करता है और metadata को RocksDB और BlueFS से गुज़ारता है। FlashStore इसकी जगह core के हिसाब से बाँटता है, और हर shard के अंदर एक tree वह सब रखता है जो object data नहीं है। दूसरा बड़ा फ़र्क ड्राइव का ही है। BlueStore kernel की block layer से होकर उस चीज़ तक जाता है जो आप उसे दें। FlashStore NVMe से या तो SPDK के साथ बात करता है, एक userspace driver जो vfio के ज़रिए device को kernel से ले लेता है, या kernel से होकर io_uring के साथ89। SPDK default backend है। io_uring वाला स्तर वहाँ काम करता है जहाँ vfio नहीं करता, और इसीलिए Proxmox build में मैं आख़िर में उसी पर पहुँचा।\nMetadata कहाँ रहता है यहीं से शुरू कीजिए। बाकी ज़्यादातर इसी से निकलता है।\nUmbrella BlueStore FlashStore Object metadata RocksDB keys हर shard का COW B+tree OMAP RocksDB keys default में वही B+tree; prepare के समय LSM या RocksDB का विकल्प PG log RocksDB keys वही B+tree Allocator की स्थिति hybrid allocator, freelist RocksDB में हर shard का bitmap, tree के अंदर Metadata device वैकल्पिक block.db और block.wal कोई नहीं, वही NVMe Data checksums default में हर 4 KiB पर crc32c हर 4 KiB पर crc32c, extent map में हर OSD में stores की संख्या एक हर core पर एक BlueStore की तरफ़ के defaults सीधे Umbrella की options file से हैं: key/value backend के रूप में RocksDB, hybrid allocator, crc32c checksums61011। BlueStore की metadata checksumming “is handled by RocksDB and uses the crc32c algorithm”, और डेटा के लिए इसकी लागत है “a checksum value (usually 4 bytes) for every 4 KB block of data”4। Checksums पर दोनों stores सहमत हैं। FlashStore हर 4 KiB block के लिए extent map में एक crc32c रखता है और read पर उसे जाँचता है7।\nबनावट पर दोनों अलग होते हैं। BlueStore का RocksDB एक log-structured merge tree है, तो वह लिखता है, फिर पीछे compaction करता है, यानी पहले से लिखा डेटा दोबारा लिखता है। FlashStore का tree copy-on-write से अपडेट होता है और checkpoints पर डिस्क पर उतारा जाता है: जब तक कुछ unpersisted है तब तक हर पाँच सेकंड, या जब WAL ring आधी भर जाए7।\nएक और नतीजा यह है कि FlashStore में metadata के लिए कोई तेज़ device नहीं, क्योंकि उसे इसकी ज़रूरत नहीं। Umbrella पर आप block.db को तेज़ ड्राइव पर रख सकते हैं, और BlueStore “as much metadata as it can on the DB device” रखेगा4। FlashStore मानता है कि हर ड्राइव पहले से तेज़ NVMe है, और अपना metadata डेटा के बगल में रखता है। जिस hardware को यह निशाना बनाता है उसके लिए यह उचित मान्यता है। HDD की कोई कहानी न होने की ठीक यही वजह भी है।\nOMAP अकेली जगह है जहाँ FlashStore दाँव बचाता है। Tree default है, पर store को उसी interface के पीछे croit के अपने LSM engine के साथ, या RocksDB के साथ prepare किया जा सकता है12। OMAP engine store बनाते समय चुना जाता है। चलते OSD पर आप उसे नहीं बदलते।\nएक 4 KiB write, दो तरीके यह वह फ़र्क है जो आप महसूस करेंगे, अगर कुछ महसूस करेंगे।\nFlash पर default settings के साथ Umbrella पर किसी object में 4 KiB write लीजिए। bluestore_min_alloc_size_ssd 4 KiB है और bluestore_prefer_deferred_size_ssd 0 है, तो पूरा 4 KiB write एक नए allocate किए गए 4 KiB में जाता है1314। BlueStore वह data write भेजता है, और transaction STATE_AIO_WAIT में तब तक रहता है जब तक ड्राइव न कहे कि हो गया15। तभी metadata RocksDB के लिए queue होता है, और RocksDB का sync thread commit से पहले block device को flush करता है16। फिर client को acknowledgement मिलता है।\nDevice तक दो चक्कर, एक के बाद एक।\nFlashStore दोनों एक साथ भेजता है। डेटा एक नए 4 KiB extent में जाता है और WAL unit उसी समय log ring में। WAL record में हर नए data block का crc32c होता है, ताकि crash के बाद replay बता सके कि डेटा पहुँचा या नहीं7। Acknowledgement, log के क्रम में, तब जाता है जब डेटा, WAL unit और हर पिछला transaction durable हो जाए7। ADR का इस design के लिए अपना तर्क है “parallel commit gives one device latency per ack”7।\nएक 4 KiB write, घड़ी के सामने BlueStore data write नया 4 KiB, aio, इंतज़ार RocksDB commit BlueFS log + flush ack 2 चक्कर FlashStore डेटा, नया 4 KiB WAL unit, data crc ack 1 चक्कर समय वही 4 KiB write। BlueStore RocksDB commit करने से पहले डेटा का इंतज़ार करता है; FlashStore डेटा और उसका log record साथ लिखता है। दो बातें इसे ईमानदार रखती हैं। व्यस्त OSD पर दोनों stores commits को batch करते हैं, तो load में फ़र्क हर write पर एक device latency से कम है। और NVMe पर device का एक चक्कर कुछ दसियों microseconds का होता है। आप इसे महसूस करेंगे या नहीं, यह इस पर निर्भर है कि आपके clients कम queue depth पर latency का इंतज़ार कर रहे हैं, जैसा RBD पर databases अक्सर करते हैं, या throughput धकेल रहे हैं, जहाँ यह घुल जाता है।\ncroit ने और आगे जाने की कोशिश की, ZFS की तरह हर transaction पर एक device write। उन्होंने इसे बनाया, मापा, और फेंक दिया: फ़ायदा सिर्फ़ queue depth 1 पर दिखा और जटिलता उसके लायक नहीं थी17। मैं इसे किसी भी benchmark chart से ज़्यादा महत्व देता हूँ। यह एक decision record है जो खुले में कहता है “हमने यह बनाया और यह इसके लायक नहीं था”।\n4 KiB से छोटा write छोटे write पर दोनों सच में अलग राह लेते हैं।\nमान लीजिए कोई client ऐसे block के बीच में 512 bytes overwrite करता है जिसमें पहले से डेटा है। Umbrella default में अब भी अपना मूल write path चलाता है; bluestore_write_v2, यानी नया काम, बंद शिप होता है18। उस path पर min_alloc_size से छोटा write, पहले से allocate किए गए block में, deferred write बन जाता है19। डेटा RocksDB transaction के अंदर L prefix वाली key के रूप में सफ़र करता है, और अपनी असली जगह तभी जाता है जब client को बताया जा चुका हो कि वह सुरक्षित है2021।\n4 KiB से छोटा write BlueStore, deferred 1 बाकी पढ़ो 4 KiB तक भरो 2 डेटा key L में RocksDB log 3 commit, flush client को ack 4 उसी जगह write वही 4 KiB फिर से 5 key L मिटाओ एक और commit FlashStore पूरा नया 4 KiB + WAL unit साथ-साथ, कभी उसी जगह नहीं client को ack पुराना block बाद में खाली इस्तेमाल हो रहे block में 4 KiB से छोटे write के लिए Umbrella का deferred path, बनाम FlashStore का नया extent। गुलाबी रंग हर उस बार को दिखाता है जब डेटा खुद लिखा जाता है। तो डेटा ड्राइव तक दो बार पहुँचता है। Umbrella का documentation इसे छिपाता नहीं: “writes smaller than min_alloc_size must first pass through the BlueStore WAL”4।\nFlashStore कभी भी live डेटा को उसी जगह overwrite नहीं करता, बस7। 2 KiB तक के objects और आगे जाते हैं और पूरी तरह tree में रहते हैं, तो एक WAL write ही पूरा commit है7।\nइसका मतलब यह भी है कि FlashStore के पास खाली करने को कोई deferred-write queue नहीं, mount पर कोई deferred replay नहीं, और साफ़ करने को कोई L keys नहीं। यह कीमत कहीं और चुकाता है: खाली हुए blocks अगले checkpoint तक रोके जाते हैं, तो खाली जगह एक checkpoint interval तक पीछे रहती है7।\nThreads बनाम cores OSD का ऊपरी हिस्सा भी उतना ही अलग है।\nUmbrella का ceph-osd एक classic threaded server है, और नीचे diagram के बाएँ हिस्से की हर संख्या flash पर इसका एक default है22। एक op रास्ते में उनमें से कई pools से गुज़रता है। वे locks के पीछे state साझा करते हैं।\nFlashStore पूरा सफ़र एक pinned, polling core पर रखता है, network card से ड्राइव तक और वापस23। हर placement group ठीक एक core का होता है, और PG जिस चीज़ को छूता है वह भी: “no locks, no atomics, no shared mutable state”24। Cores के बीच का traffic single-producer rings से जाता है, और message का मालिकाना उसके साथ जाता है।\nThreads बनाम cores Umbrella ceph-osd 3 messenger threads mClock op queue 8 shards × 2 threads bstore_kv_sync, bstore_kv_final RocksDB, BlueFS croit-flashstore-osd core 0 core 1 core n NIC queue msgr2, PGs store shard NVMe queue NIC queue msgr2, PGs store shard NVMe queue NIC queue msgr2, PGs store shard NVMe queue cores के बीच SPSC rings, कोई lock नहीं Umbrella एक op को thread pools के बीच सौंपता है। FlashStore उसे network से ड्राइव तक एक core पर रखता है, और cores को सिर्फ़ rings से पार करता है। Store भी इसी बँटवारे पर चलता है। flashstore_store_shards default में हर core पर एक shard है, हर एक की अपनी WAL ring, tree और allocator, और एक PG ठीक एक shard में रहता है257। BlueStore हर OSD पर एक store है, एक RocksDB के साथ।\nइसकी कीमत है, और ADR उसे बताता है: “idle cores burn CPU (accepted; optional adaptive sleep later)”23। बाद के काम में adaptive idle और device-timed waits जोड़े गए ताकि कम queue depth पर कोई core पूरी device latency तक न घूमता रहे8, पर सिद्धांत वही है, और जब आप कोई range pin नहीं करते तो flashstore_cores का default 8 है25। आप FlashStore को पूरे cores देते हैं।\nDedicated storage node पर यह ठीक है। Hyperconverged box पर, जहाँ वही cores VMs भी चलाते हैं, यह पहला हिसाब है जो लगाना चाहिए।\nड्राइव को अपना वादा निभाना होगा BlueStore ऐसी ड्राइव से निपटने के लिए लिखा गया है जो इस बारे में झूठ बोलती है कि डेटा कब सुरक्षित है। FlashStore ऐसी ड्राइव से निपटने से ही मना कर देता है।\nUmbrella BlueStore FlashStore Write को durable क्या बनाता है RocksDB commit से पहले block device flush PLP ड्राइव पर write का पूरा होना Hot path पर flush हाँ नहीं Volatile write cache वाली ड्राइव इस्तेमाल होती है, और flush होती है mkfs मना करता है; host check FAIL Override ज़रूरत नहीं सिर्फ़ lab: हर durable write पर FUA bit BlueStore की तरफ़ पहले बताया गया kv sync thread है16। FlashStore की तरफ़ durability ADR और host check है: PLP का मतलब है कि ड्राइव कोई volatile write cache रिपोर्ट नहीं करती, तो completion का मतलब है कि डेटा स्थिर media पर है2426।\nनिशाने के लिए यह सही फ़ैसला है, पर साफ़ समझिए कि यह क्या बाहर करता है, क्योंकि लगभग हर consumer NVMe में volatile cache होता है और PLP नहीं, और कीमत पर बिकने वाले काफ़ी “datacentre” सामान में भी यही है। PLP नहीं, तो FlashStore नहीं। आप इसके बारे में और कुछ भी सोचें।\nFlashStore किस पर नहीं चलेगा ज़रूरतें साथ रखिए और target market साफ़ दिखता है।\nUmbrella BlueStore FlashStore Media HDD, SSD, NVMe सिर्फ़ NVMe Power-loss protection ज़रूरी नहीं ज़रूरी, इसके बिना mkfs मना करता है Sector format 512 B या 4 KiB 4 KiB अपेक्षित, वरना चेतावनी Layout partitions, ceph-volume से LVM पूरे namespaces, कोई partition नहीं अलग DB/WAL device समर्थित ऐसी कोई चीज़ नहीं Encryption at rest ceph-volume से --dmcrypt दायरे से बाहर msgr1 clients default में bound मना, सिर्फ़ msgr2 Cache tiering deprecated, अब भी मौजूद मना, pool passive हो जाता है Kernel की ज़रूरत कोई भी समर्थित io_uring: Linux 5.19+, या backports वाला RHEL 9 का 5.14; SPDK के लिए hugepages BlueStore वाला कॉलम Umbrella का अपना है: ceph-volume logical volumes को “using dmcrypt by specifying the --dmcrypt flag” encrypt करता है27, और ms_bind_msgr1 का default अब भी true है28। FlashStore वाला कॉलम उसके hardware reference और उसके scope फ़ैसले से है2629।\nउनमें से दो एक तालिका की पंक्ति से ज़्यादा के हक़दार हैं।\nEncryption at rest बाहर है, वजह के साथ: SPDK dm-crypt को bypass करता है, और store के अंदर encryption की योजना नहीं है। ADR का जवाब है self-encrypting NVMe ड्राइव, या store के ऊपर client या RGW पर encryption29। अगर आपकी किसी compliance ज़रूरत में OSD पर dm-crypt का नाम है, तो आज यह रुकावट है।\nmsgr1 एक स्वीकार किए गए जोखिम के रूप में बाहर है। 5.11 से पुराने kernel clients और Nautilus से पहले के librados किसी FlashStore OSD से बात ही नहीं कर सकते29। ज़्यादातर इंतज़ाम इससे बहुत आगे निकल चुके हैं। कुछ नहीं निकले, और कोने में पड़ा भूला हुआ पुराना box ही इसका पता लगाता है।\nयह monitor को बताता है कि यह BlueStore है यही वह बात है जो लोगों को पकड़ेगी।\nDefault में, FlashStore OSD boot होकर monitors को osd_objectstore=bluestore बताता है30। यह छिप नहीं रहा। यह उसके बगल में अपनी flashstore_version और flashstore_build keys जोड़ता है30। वजह compatibility है: Umbrella monitor किसी pool पर EC overwrites जैसी features तभी देता है जब उसका हर OSD BlueStore रिपोर्ट करे, और Prometheus और telemetry जैसे manager modules उसी value पर branch करते हैं30। ADR साफ़ कहता है कि यहाँ bluestore “is a compat value for mon/mgr feature gates, not a product name”30।\nएक switch है, flashstore_report_objectstore=flashstore, जो सब कुछ का नाम बदल देता है: metadata, bluestore_bdev_* keys, perf logger, tell commands और BLUESTORE_* health codes। इसके लिए patched monitors चाहिए, और default bluestore ही रहता है2530। croit के अपने Ceph builds में वे patches हैं, तो उन पर FlashStore खुद को flashstore बताता है और आगे का कुछ भी लागू नहीं होता। bluestore नाम उन stock monitors और managers के लिए है जो लोग आज production में चलाते हैं।\nMonitor को क्या बताया जाता है FlashStore OSD default setting osd_objectstore=bluestore flashstore_version=… mon, mgr: BlueStore EC overwrites की अनुमति FlashStore OSD report=flashstore osd_objectstore=flashstore flashstore_bdev_* classic mon: BlueStore नहीं patched mon चाहिए दोनों पंक्तियों में store वही है। सिर्फ़ वह नाम बदलता है जो वह बताता है। वही store, दो नाम। Default Umbrella के monitors और managers को ख़ुश रखता है, इस कीमत पर कि FlashStore OSDs हर जगह BlueStore गिने जाते हैं। मैं समझता हूँ क्यों। String पर टिका monitor gate Ceph का design है, croit का नहीं, और bluestore कहने से मना करना unpatched क्लस्टर पर features बंद कर देगा। Stock क्लस्टर पर यही जाल है। हर dashboard, हर inventory script और आपका चलाया हर ceph osd count-metadata osd_objectstore FlashStore OSDs को BlueStore गिनेगा। Migration के दौरान, जब आपको सबसे ज़्यादा जानना होता है कि कौन सा OSD कौन सा है, वह सीधा-सादा field आपको कुछ नहीं बताता।\nतो osd_objectstore नहीं, ceph osd metadata में flashstore_version जाँचिए। पहला FlashStore OSD लगने से पहले इसे अपनी runbook में डालिए।\nवही knobs, अलग व्यवहार FlashStore Ceph के बहुत से मौजूदा options पढ़ता है, और यह ज़्यादातर अच्छी ख़बर है। हर option का मतलब वही नहीं जो Umbrella पर था, और जिनका नहीं है, वहीं tune किया गया क्लस्टर चौंकता है।\nOption Umbrella BlueStore FlashStore compression_mode, हर pool none, passive, aggressive, force वही चार, वही मतलब compression_algorithm default में snappy snappy, zlib, zstd, lz4; zstd level 1 पर तय bluestore_compression_max_blob_size_ssd 64 KiB 64 KiB chunks osd_memory_target 4 GiB, caches चलते हुए autotune शुरू में एक बार पढ़ा जाता है, store caches का आकार तय करता है, कोई autotune नहीं osd_op_queue mclock_scheduler स्वीकार और अनदेखा osd_mclock_* सक्रिय स्वीकार और अनदेखा csum_type default crc32c, xxhash विकल्प उपलब्ध crc32c तय; कोई और value चेतावनी log करती है31 Compression मेल खाता है। BlueStore का default mode none है और default algorithm snappy3233; FlashStore वही चार modes, वही pool options और वही 64 KiB chunking implement करता है, और ADR लिखता है कि 50% compressible 64 KiB chunk दोनों पर उतनी ही जगह लेता है34। यह हमेशा से होना तय नहीं था। ADR की file का नाम अब भी no-store-compression है, मूल फ़ैसले से, जो तब पलटा जब croit ने classic Ceph के साथ पूरी functional बराबरी का निर्देश तय किया34।\nMemory में बराबरी नहीं है। Umbrella चलते हुए BlueStore के caches को osd_memory_target के हिसाब से autotune करता है3536। FlashStore target को शुरू में एक बार पढ़ता है, उसे अपने shards में बाँटता है, और ceph config set से किया बदलाव अगले restart पर लागू होता है37। यह process को target पर रोकता भी नहीं: hugepages, network buffers और PG state उसके बाहर हैं37। तो osd_memory_target FlashStore के caches का आकार तय करता है। यह OSD की memory को उस तरह नहीं बाँधता जिसके आप शायद आदी हैं।\nऔर mClock को सीधे अनदेखा किया जाता है37। कम नहीं किया जाता। अनदेखा किया जाता है। Configure करने को कोई op scheduler नहीं, क्योंकि हर core अपने PGs का मालिक है। Recovery और backfill को इसकी जगह osd_max_backfills, osd_recovery_max_active और sleep options रोकते हैं37। अगर आपने Umbrella पर rebuild के लिए mClock profiles tune किए थे, तो वे settings FlashStore OSD पर कुछ नहीं करतीं, और कुछ भी आपको चेतावनी नहीं देगा।\nकोई conversion नहीं, किसी भी दिशा में आप BlueStore OSD को FlashStore वाले में convert नहीं कर सकते। croit की migration guide इस बारे में साफ़ है: “There is no in-place conversion of a BlueStore device”38। इसकी जगह यह दो क्रम देती है, और दोनों backfill हैं38:\nपहले जोड़ें, फिर हटाएँ पहले खाली करें, फिर जोड़ें ज़रूरत एक ख़ाली NVMe slot कुछ भी ख़ाली नहीं कदम 1 नई ड्राइव पर FlashStore prepare करें ceph osd out, clean होने तक रुकें कदम 2 active+clean का इंतज़ार करें classic OSD रोकें और purge करें कदम 3 classic OSD हटाएँ खाली हुई ड्राइव पर FlashStore prepare करें चलते समय जोखिम सामान्य backfill से ज़्यादा कुछ नहीं backfill ख़त्म होने तक एक copy कम और बाद में भी यह आसान नहीं होता। FlashStore के on-disk format में feature bits हैं, और mount किसी अनजान bit को मना करता है: “Every format change means mkfs; unknown bits refuse mount (no downgrade)”7। तो बाद की FlashStore release में format बदलाव वही खाली-करो-और-भरो है जो पहला migration था।\nपार जाने का एकमात्र रास्ता BlueStore OSD nvme0 पर osd.N FlashStore OSD नया mkfs कोई conversion नहीं, किसी भी तरफ़ क्लस्टर copies से backfill out, purge backfill in दोनों stores के बीच backfill ही एकमात्र पुल है, और दो FlashStore formats के बीच भी यही पुल है। Documentation एक बात गलत कहता है। Migration guide की checklist कहती है पक्का करें कि “the pools do not use erasure coding on croit-flashstore-osd OSDs”38। उसी snapshot की erasure-coding guide कहती है कि FlashStore default में legacy EC pools देता है, और optimised EC के लिए कोड का अपना default all है3940। दोनों में से एक पुराना है, और कोड के हिसाब से वह migration guide है। फिर भी, दोनों तरह के OSD में EC pools मिलाने से पहले मैं EC guide पूरी पढ़ूँगा, क्योंकि जिस विफलता का वह वर्णन करती है वह एक PG है जो degrade होता है और एक backfill जो अटक जाता है39।\nउन ड्राइव के लिए बना store जो हम सच में ख़रीदते हैं BlueStore हर चीज़ पर चलने के लिए बना था। घूमती डिस्क, सस्ते SSDs, NVMe, partitions, LVM, encrypted volumes, धीमे data device के आगे तेज़ DB device। यही चौड़ाई इसके default बनने की वजह है, और इसी वजह से इसमें deferred write path, हर commit से पहले flush, अपने file system पर key/value database, और यह सब चलाए रखने के लिए threads का pool है। इनमें से हर एक इसलिए है क्योंकि कहीं किसी ड्राइव को इसकी ज़रूरत थी।\nFlashStore उल्टे छोर से शुरू करता है। यह मानता है कि ड्राइव NVMe है, उसमें power-loss protection है, और वह इतनी तेज़ है कि अब software ही रुकावट है। फिर यह वह सब फेंक देता है जो सिर्फ़ दूसरी ड्राइवों के लिए था।\nक्या यह सही दाँव है? नए all-flash क्लस्टर के लिए, सही enterprise NVMe पर बने, हाँ। Ceph क्लस्टर उसी तरफ़ जा रहे हैं, और जो OSD अपने cores locks, सौंपने और पीछे compaction करते database पर खर्च करता है, वह हर दिन हर सेकंड ऐसे लचीलेपन की कीमत चुका रहा है जो ऐसा क्लस्टर कभी इस्तेमाल नहीं करेगा।\nपर दाँव की कीमत है, और मैं चाहूँगा कि आप उसे दाँव लगाने से पहले देखें। आप HDD, dm-crypt, msgr1, live memory tuning और mClock छोड़ते हैं। Stock क्लस्टर पर आपको ऐसा OSD मिलता है जो आपके monitors को बताता है कि वह BlueStore है, क्योंकि आज के monitors और managers उसके पास और कोई रास्ता नहीं छोड़ते; croit के अपने builds को इसकी ज़रूरत नहीं होगी। आपको ऐसा format मिलता है जिसमें आप convert नहीं कर सकते, और जिसके versions के बीच भी नहीं। और यह आपको preview में मिलता है, एक ही वेंडर से, जो संयोग से मुझे नौकरी देता है।\nतो सबूत source को मानिए, इस पोस्ट को नहीं और croit की benchmark report को नहीं। Decision records सार्वजनिक हैं और वे बताते हैं कि क्या मापा गया और क्या फेंका गया। उन्हें पढ़िए, उस सामान पर test क्लस्टर बनाइए जो आप सच में लगाएँगे, और अपना workload मापिए। अगर आपकी ड्राइवों पर यह वही करता है जो ADRs कहते हैं, तो आपको पता चल जाएगा। अगर नहीं करता, तो वह भी पता चल जाएगा, और आपने यह test क्लस्टर पर जाना होगा।\ncroit ceph-rust, README at snapshot 48f9014 — components, स्थिति और roadmap, “not yet recommended for production data”, v21.2.0 और v20.2.4 के साथ wire-compatible।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0003, green-field, no Crimson fork — “No fork, no linking of Ceph code”; Ceph source reference के रूप में पढ़ा गया, specs अपने शब्दों में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0164, licences — LGPL-3.0-only daemon और tools, MPL-2.0 client libraries, CC-BY-SA-4.0 docs, और MPL की वजह।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, BlueStore configuration reference — raw device access, DB device, “writes smaller than min_alloc_size must first pass through the BlueStore WAL”, checksums।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, storage devices — BlueStore “consumes raw block devices or partitions”; अंदरूनी metadata के लिए embedded RocksDB।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_kvbackend — default rocksdb।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0021, storage engine — हर shard का COW B+tree, WAL ring, parallel commit, checkpoints, inline data, रोके गए frees, “Every format change means mkfs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0004, storage I/O — vfio पर SPDK, बाद में io_uring के साथ दो स्तरों में संशोधित, device-timed idle।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, prepare and activate — spdk default backend है, kernel और kernel-cmd NVMe को kernel driver पर रखते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_allocator — default hybrid।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_csum_type — default crc32c।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust, croit-flashstore-tool usage — “fresh prepare/mkfs \u0026ndash;omap-engine btree|lsm|rocksdb”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_min_alloc_size_ssd — default 4 KiB।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_prefer_deferred_size_ssd — default 0।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, transaction state machine — लंबित aios transaction को key/value commit के लिए queue होने से पहले STATE_AIO_WAIT में ले जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, kv sync thread — RocksDB submit से पहले “flush/barrier on block device”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0027, single-IO atomic commit, rejected — “gain only at QD1”, बनाया गया और हटाया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_write_v2 — “Use faster write path”, default false।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, _do_write_small — head और tail read, फिर “chunk-aligned deferred overwrite”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, “journal deferred items” — deferred transaction उसी RocksDB transaction में एक key के रूप में रखा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, BlueStore.cc, key prefixes — PREFIX_DEFERRED = \u0026quot;L\u0026quot;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0 thread defaults — osd_op_num_shards_ssd 8; osd_op_num_threads_per_shard_ssd 2; osd_op_queue mclock_scheduler; ms_async_op_threads 3; BlueStore.cc thread creation, bstore_kv_sync और bstore_kv_final।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0006, thread-per-core runtime — हर core पर एक pinned busy-polling thread, PGs एक core के, “idle cores burn CPU (accepted \u0026hellip;)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0008, concurrency and durability — “no locks, no atomics, no shared mutable state”; PLP ज़रूरी, mkfs non-PLP को मना करता है, lab के लिए FUA override।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, configuration reference — flashstore_cores default 8, flashstore_store_shards auto, flashstore_report_objectstore।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, hardware and host requirements — volatile write cache FAIL, 4 KiB LBA, कोई partition नहीं, kernel और io_uring की ज़रूरतें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph Umbrella, ceph-volume encryption — “Logical volumes can be encrypted using dmcrypt by specifying the --dmcrypt flag”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, ms_bind_msgr1 — default true।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0168, encryption at rest, msgr1, cache tiering out of scope — “SPDK bypasses dm-crypt”; सिर्फ़ v1 वाले clients “cannot reach croit-flashstore-osd”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0019, report osd_objectstore=bluestore — monitor feature gates, अतिरिक्त flashstore_* keys, और flashstore रिपोर्टिंग विकल्प।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust, pgs.rs — “csum_type {v} unsupported; using fixed crc32c per 4096-byte block”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_compression_mode — default none।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_compression_algorithm — default snappy।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0059, per-pool store compression — BlueStore जैसे ही modes और options, zstd level 1 तय, 50% compressible पर जगह “identical to BlueStore”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, osd_memory_target — default 4 GiB।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph v21.2.0, bluestore_cache_autotune — default true।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nADR 0062, memory target and mClock — target एक बार पढ़ा जाता है, कोई autotune नहीं, RSS लागू नहीं; mClock options “ACCEPTED and IGNORED”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, migrate from classic — “There is no in-place conversion of a BlueStore device”; दो क्रम; EC checklist वाली पंक्ति।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust docs, erasure-coded pools — ec_enable_pools default all, ec_enable_optimized default all, और मना किया गया pool कैसा दिखता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nceph-rust, OSD config defaults — (\u0026quot;ec_enable_optimized\u0026quot;, \u0026quot;all\u0026quot;)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/ceph/flashstore-against-umbrella-bluestore/","summary":"croit का ceph-rust, Ceph OSD का clean-room Rust rewrite है, अपने object store FlashStore के साथ, 9 नवंबर 2026 से public preview में। यह पोस्ट उसे BlueStore के साथ रखती है, ठीक वैसे जैसा Ceph 21.2.0 Umbrella उसे शिप करता है, दोनों प्रोजेक्ट के source और documentation से पढ़कर: repository में क्या है और किन licences के तहत, हर store अपना metadata कहाँ रखता है, 4 KiB का write और 4 KiB से छोटा write हर एक में ड्राइव तक कैसे पहुँचता है, Umbrella के thread pools बनाम FlashStore का हर core पर एक thread, FlashStore power-loss protection को अनिवार्य क्यों बनाता है, यह किस पर नहीं चलता, यह आपके monitors को खुद को BlueStore क्यों बताता है, कौन से BlueStore options यह मानता है और कौन से अनदेखा करता है, और दोनों के बीच का एकमात्र रास्ता backfill क्यों है।","title":"FlashStore बनाम Umbrella BlueStore: croit ने OSD के नीचे क्या बदला"},{"content":"एक Rust OSD, उसी दिन जिस दिन वह आया croit ने 9 नवंबर 2026 को FlashStore OSD को public preview में डाला1। यह Rust में शुरू से लिखा गया एक Ceph OSD है, जिसमें BlueStore की जगह इसका अपना object store है, और यह Ceph का wire protocol बोलता है। दावा यह है कि यह उस cluster में सीधे बैठ जाता है जो आप पहले से चला रहे हैं: आपके monitors, आपके managers, आपका ceph CLI और आपके clients जैसे हैं वैसे ही रहते हैं, और आप एक बार में एक drive बदलते हैं1।\nयह दावा ज़्यादातर लोगों से ज़्यादा एक Proxmox shop के लिए मायने रखता है। एक hyperconverged Proxmox VE नोड पर Ceph कोई अलग से install करने वाली चीज़ नहीं है। वह Proxmox GUI से आता है, Proxmox की अपनी repositories से, Proxmox का build और patch किया हुआ, और पूरा काम pveceph चलाता है। अगर किसी और का OSD उसके अंदर बिना कुछ तोड़े बैठ सकता है, तो आपको tooling छोड़े बिना एक नया storage engine मिल जाता है। अगर नहीं बैठ सकता, तो आपको यह कड़वे तरीके से पता चलता है, उस नोड पर जो आपकी VMs भी चला रहा है।\nतो मैंने आज़माया।\nमैं croit के लिए काम करता हूँ, जो FlashStore बनाते हैं। इसीलिए मैंने इसे आने के दो दिन के अंदर आज़माया, और इसीलिए नीचे कुछ भी नरम नहीं किया गया है। यह एक preview है, README कहती है कि यह “not yet recommended for production data”1, और यह असली hardware पर इसमें क्या लगा उसका ब्योरा है, कोई brochure नहीं।\nएक नोड पर कौन क्या देता है RBD पर VM disk Proxmox के librbd के साथ QEMU Proxmox से: pveceph ceph-mon, ceph-mgr 21.2.0-pve1 CLI, GUI, pools, RBD storage 8006 wizard से install croit से: FlashStore croit-flashstore-osd 21.2.0 हर Optane पर एक daemon .deb से, हाथ से install SN750 boot drive: कभी OSD नहीं 8 × Optane P4800X, 4 KiB, पूरा namespace कौन क्या देता है। Proxmox monitor और manager install करता है, और GUI, pools और storage definition उसी के हैं। croit का package सिर्फ़ OSD daemons देता है, हर drive पर एक। छोटा जवाब: यह चलता है। इसे लिखते समय एक stock Proxmox VE 9.2 नोड पर आठ FlashStore OSDs एक VM को RBD pool दे रहे हैं, HEALTH_OK के साथ। लंबा जवाब यह है कि इसके लिए दो ऐसे fixes लगे जिनका documentation में ज़िक्र नहीं है, एक Proxmox के Ceph config रखने के तरीके की वजह से और एक Proxmox के kernel की वजह से, और बाकी post वही fixes हैं और वे कैसे मिले। अगर आपको बस इसे चालू करना है, तो अंत के पास एक script है जो यह सब करती है, और वह इसी नोड पर चलाई गई है।\nमशीन Lab एक अकेला नोड है, pve2, मेरे घर के LAN पर, और यह 2021 का एक घटिया Minisforum B550 mini PC है। Single-node Ceph वैसे नहीं है जैसे आप production चलाएँगे, और आगे वाला CRUSH rule उसी की कीमत है, लेकिन यहाँ का हर कदम उस नोड पर भी वैसा ही है जिसके पड़ोसी हों।\nProxmox VE pve-manager 9.2.26, kernel 7.0.14-28-pve, Debian 13.7 मशीन Minisforum B550 mini PC, 2021; board खुद को BESSTAR TECH B550, BIOS 5.17 बताता है CPU AMD Ryzen 7 5700G, 8 cores, 16 threads, 1 NUMA node Memory 58 GiB OSD drives 8 × Intel Optane P4800X 375 GB (6 Dell-branded, 2 Intel retail) Optanes तक PCIe आठों एक Broadcom PEX880xx switch के पीछे, APU से एक अकेले PCIe 3.0 x16 link पर Boot drive WD SN750 512 GB, VG pve, इस सब से बाहर रखा गया Network एक 2.5 GbE port, vmbr0 FlashStore snapshot-2026-11-10, upstream commit c5792750020e2 Optanes इसलिए हैं क्योंकि FlashStore की दो पक्की शर्तें हैं जिन पर बहुत सी drives fail होती हैं। Drive में power-loss protection होना चाहिए, और namespace 4096-byte blocks इस्तेमाल करे, पूरे namespace के रूप में, उस पर कोई partition या filesystem न हो1। FlashStore किसी write को तभी acknowledge करता है जब वह drive पर durable हो, इसलिए जो drive volatile cache के साथ durability के बारे में झूठ बोलती है उसे mkfs पर मना कर दिया जाता है3। हर P4800X अपने Identify data में कोई volatile write cache नहीं बताती (vwc 0), यानी drive खुद कह रही है कि cache किसी acknowledged write को खो नहीं सकता।\nइसलिए इस गहरी पड़ताल में सीमा mini PC की है, FlashStore की नहीं और drives की नहीं। आठ cores का मतलब हर OSD के लिए एक और कुछ भी फ़ालतू नहीं, 58 GiB को Ceph और VMs दोनों को खिलाना है, और आठ Optanes एक PCIe 3.0 link बाँटती हैं क्योंकि APU के पास देने को बस इतना ही है। नीचे के हर आँकड़े को इस मशीन की इजाज़त के रूप में पढ़ें।\nUmbrella, वरना कुछ नहीं FlashStore एक समय में एक Ceph release के लिए बनता है। Branch यह तय करती है: main Ceph 21.2.0 Umbrella बोलती है, और एक v20.2.4 branch 20.2.4 Tentacle बोलती है4। Daemon शुरू होते समय cluster की release जाँचता है और अपनी window से बाहर वाली release को मना कर देता है4। Release page के packages main से बने हैं, और binary खुद यही कहती है: croit-flashstore-osd 21.2.0 umbrella।\nProxmox VE 9 तीन Ceph repositories देता है, और उनमें से सिर्फ़ एक मेल खाती है।\nVersion की window Proxmox VE 9 की repositories FlashStore की branches ceph-squid: 19.2.7 squid branch नहीं ceph-tentacle: 20.2.5 20.2.5, 20.2.4 नहीं है v20.2.4: tentacle 20.2.4 ceph-umbrella: 21.2.0-pve1 21.2.0 मेल खाता है main: umbrella 21.2.0 Daemon अपनी window से बाहर की cluster release को मना कर देता है। Proxmox की Tentacle repository 20.2.4 से आगे निकल चुकी है, और Squid की कोई branch है ही नहीं। Umbrella 21.2.0-pve1 वह अकेली release है जिस पर दोनों पक्ष सहमत हैं। Tentacle Proxmox का default है, तो क्या वही सुरक्षित चुनाव है? वही है जो नहीं चलेगा। Proxmox repository में Tentacle 20.2.5-pve1 तक है, और FlashStore की Tentacle branch ठीक 20.2.4 को निशाना बनाती है। Proxmox की repository में Umbrella 21.2.0-pve1 है, वही release जिसे main निशाना बनाती है।\nProxmox यह नहीं छिपाता कि Umbrella क्या है। PVE/Ceph/Releases.pm उसे unsupported =\u0026gt; 1 के साथ सूचीबद्ध करती है5, और GUI wizard उसे चुनते ही साफ़ शब्दों में यही कहता है।\n“Technology Preview”, कोई enterprise repository नहीं, और installer apt को छूने से पहले terminal में दूसरी बार पूछता है, continue (y/N)?। यह सही मात्रा में चेतावनी है, और इसे पूरे stack के बारे में एक बयान की तरह पढ़ना चाहिए: एक preview Ceph release पर एक preview OSD।\nInstall stock Proxmox है। Datacenter → Ceph → Install, version Umbrella, repository No-Subscription, फिर public network और पहला monitor।\nतेरह packages upgrade हुए, 46 नए, 107 MB download हुआ। उस सूची में एक चीज़ Umbrella में नई है: ceph-osd के बगल में ceph-osd-classic। यहाँ दोनों में से कोई इस्तेमाल नहीं होता, क्योंकि कोई classic OSD कभी बनाया ही नहीं जाता। लगभग एक मिनट बाद mon.pve2 और mgr.pve2 चल रहे थे, ceph versions ने 21.2.0 … umbrella बताया, और health OK थी, अभी store करने को कुछ नहीं था।\n512 Bytes पर चार Drives आठ में से चार Optanes एक lab VM को pass through की गई थीं और अभी भी 512-byte format में थीं, उन पर पुराने ZFS labels थे। दो और का format सही था पर labels वही थे। दोनों का इलाज सीधा है: उन्हें VM से हटाओ, 4 KiB पर format करो, labels मिटाओ।\nP4800X 4096 bytes बिना metadata के LBA format 3 के रूप में देती है, जिसे nvme id-ns lbaf 3 : ms:0 lbads:12 बताता है।\nnvme format /dev/nvme0n1 --lbaf=3 --force --timeout=900000 wipefs -a /dev/nvme0n1 sgdisk --zap-all /dev/nvme0n1 पहली कोशिश fail हुई, और बाद की एक और भी। दोनों बार nvme format Interrupted system call के साथ लौटा और drive अभी भी 512 bytes पर थी। Kernel log में कारण है:\nnvme nvme0: I/O tag 0 (0000) opcode 0x2 (Admin Cmd) QID 0 timeout, reset controller nvme nvme1: I/O tag 9 (0009) opcode 0x6 (Admin Cmd) QID 0 timeout, reset controller Opcode 0x2 Get Log Page है और 0x6 Identify। दोनों में से कोई format नहीं है। P4800X पूरे medium को format करती है, और यहाँ इसमें प्रति drive 345 से 351 seconds लगे। जब तक यह चलता है, controller दूसरे admin commands का जवाब नहीं देता, तो जो भी drive से सवाल पूछता है वह इंतज़ार करता है। Kernel के 60-second admin timeout के बाद वह हार मान लेता है और controller को reset करता है, और reset format को मार देता है।\nFormat कैसे बीच में रुकता है nvme format 345 से 351 s प्रति P4800X Admin command smartctl, nvme list, GUI disk refresh 60 s timeout kernel reset करता है controller को Format रुका EINTR, rc 1 drive अभी भी 512 B इलाज: हर format को उसकी अपनी systemd unit में चलाएँ, एक बार में एक drive, और ख़त्म होने तक drives को और कुछ न भेजें। Timeout होने वाला command format नहीं है। कोई और drive से सवाल पूछता है, format के पीछे इंतज़ार करता है, और उसके बाद आने वाला reset format को बीच में रोक देता है। कोशिश Drive तक क्या पहुँचा नतीजा nvme0, पहली 09:53:04 पर एक Get Log Page, Ceph install के बीच रुका, अभी भी 512 B nvme0, एक unit में कुछ नहीं 345 s में 4 KiB nvme1 मेरा अपना nvme list, progress देखते हुए रुका, अभी भी 512 B nvme2, nvme3 कुछ नहीं 351 s और 350 s में 4 KiB nvme1, अकेले कुछ नहीं 346 s में 4 KiB इलाज यह है कि हर format को एक transient unit में लंबे timeout के साथ चलाएँ, एक बार में एक drive, और ख़त्म होने तक drives को छुएँ नहीं:\nsystemd-run --unit=fmt4k /root/fmt4k.sh journalctl -u fmt4k -f # read progress from the journal, not from the drive इस तरह progress की अकेली जाँच journal है, और controller तक कुछ नहीं पहुँचता। फिर आठों nvme list में 4 KiB दिखाने लगीं।\nPackage Release page पर .deb और .rpm packages हैं, उनमें Debian 13 trixie भी, जिस पर Proxmox VE 9 बना है2। एक ही build हर distribution के लिए है, जिसे glibc 2.34 या नया चाहिए6।\nB=https://github.com/croit/ceph-rust/releases/download/snapshot-2026-11-10-0b6783237291 curl -LO \u0026#34;$B/flashstore_21.2.0+git.20261110063351.c5792750020e_debian-trixie_amd64.deb\u0026#34; curl -LO \u0026#34;$B/sha256sums.txt\u0026#34; sha256sum flashstore_*_debian-trixie_amd64.deb grep debian-trixie/flashstore_ sha256sums.txt इसे हाथ से जाँचें। sha256sum -c इस download को नहीं जाँच सकता, क्योंकि checksum file इसे debian-trixie/flashstore_…_amd64.deb कहती है जबकि asset का नाम flashstore_…_debian-trixie_amd64.deb है। Hashes मेल खाते हैं, दोनों तरफ़ ce1fb352…26c8, तो file ठीक है और सिर्फ़ सूची assets से मेल नहीं खाती।\napt install ./flashstore_*_debian-trixie_amd64.deb croit-flashstore-osd --version croit-flashstore-osd 21.2.0 umbrella (build 0.0.0) git c5792750020e net tiers: kernel (+rdma upgrade) यह Proxmox के अपने ceph-osd और ceph-osd-classic के बगल में साफ़ install हुआ। Package एक छोटा ceph-osd.target सिर्फ़ उन hosts पर install करता है जिनमें यह नहीं है6, और Proxmox में पहले से है, तो FlashStore units उसी target से जुड़ती हैं जिससे classic units जुड़तीं।\nइसके ख़िलाफ़ script लिखने से पहले package के बारे में तीन बातें जानने लायक हैं:\nDocs क्या कहते हैं Package असल में क्या है Package का नाम apt remove flashstore …6 croit-flashstore-osd, asset file flashstore_… है Store backends main का production feature set knet,spdk,rdma,mimalloc है1 SPDK नहीं: --check बताता है “SPDK NVMe driver: compiled out” flashstore_dev के मान spdk:\u0026lt;pci\u0026gt;, या development builds में file:7 kernel tier, kernel:/dev/…, इस build में अकेला असली store path है बीच वाली पंक्ति मायने रखती है। SPDK tier, यानी user-space NVMe driver जिसे drive का vfio-pci से bind होना चाहिए, प्रकाशित Debian package में नहीं है। उसमें kernel tier है: drive kernel के अपने nvme driver पर रहती है और FlashStore io_uring के ज़रिए उससे बात करता है। Source दिखाता है कि यह compile होकर अंदर है, क्योंकि knet feature kernel-nvme को खींच लाता है8, जबकि host check की summary line इसे “compiled out of this build” कहती है। वह line ग़लत है। जो पाठक उस पर भरोसा करेगा वह वहीं रुक जाएगा।\nHost Check क्या कहता है croit-flashstore-osd --check सिर्फ़ पढ़ता है और कुछ भी लिखने से पहले चलता है। यह build, CPU, memory, IOMMU, हर NVMe controller, NIC, kernel और config जाँचता है, और हर finding के लिए सटीक fix छापता है9। इस नोड पर इसने 115 checks चलाए, और यह अच्छा है: हर finding के साथ उसे ठीक करने वाला command आता है, जिसने बहुत सारी खुदाई बचा दी।\nFinding नतीजा मैंने क्या किया Hugepages: कोई reserved नहीं FAIL जो 16 GiB माँगा वह reserve किया, /etc/sysctl.d में स्थायी SN750 boot drive: volatile write cache FAIL कुछ नहीं, यह OSD का उम्मीदवार नहीं है vfio-pci loaded नहीं WARN कुछ नहीं, इस build में इस्तेमाल करने को SPDK नहीं है memlock limit 8 MiB WARN कुछ नहीं, यह shell को मापता है; unit LimitMEMLOCK=infinity set करती है कोई isolcpus / nohz_full नहीं WARN दर्ज किया, latency tuning IOMMU translated, iommu=pt नहीं WARN दर्ज किया init_on_alloc=1 WARN दर्ज किया, वह कहता है बड़े reads पर CPU का 15 से 20 % लगता है 2.5 GbE port, default NIC rings, पाँच CPUs पर IRQs WARN दर्ज किया 8 × P4800X: कोई VWC नहीं, 4096+0 active, x4 at 8 GT/s, ख़ाली OK SEND_ZC और fixed buffers के साथ io_uring, kernel 7.0 OK दूसरे FAIL के लिए तैयार रहें। Check box के हर controller को गिनता है, और boot SSD में write cache है, तो वह power-loss test में fail होता है, जबकि वही check उसे सही-सही “in use, not a candidate” बताता है। Tutorial कहता है exit 0 का मतलब कोई FAIL नहीं9। किसी भी host पर जो consumer SSD से boot होता है, और बहुत से Proxmox hosts ऐसे हैं, --check exit 0 नहीं दे सकता, चाहे आप कुछ भी ठीक करें। Script exit code पर नहीं, हर check की line पर लिखें।\nTuning वाले WARNs वैसे ही रहे। हर एक के लिए kernel command line बदलनी पड़ती है और reboot करना पड़ता है, और यह एक deployment है, benchmark नहीं। किसी के इस box से कोई आँकड़ा बताने से पहले यही सही सूची है जिस पर काम करना है।\nआठ OSDs के लिए cores और hugepages FlashStore thread-per-core चलता है, और check साफ़ बताता है इसका मतलब क्या है: “one core = one shard/PG owner”, प्रति OSD ज़्यादा से ज़्यादा 8 cores, और हर OSD core अपने physical core पर, किसी SMT sibling के साथ बाँटे बिना। आठ physical cores और आठ OSDs का मतलब हर एक को एक core, flashstore_lcores = 0 से 7 तक, और SMT siblings Proxmox और VMs के लिए छोड़ दिए। Config में यह डालकर दोबारा चलाने पर check हर core plan को OK बताता है।\nएक box पर cores और hugepages हर physical core पर एक OSD; SMT siblings host के लिए 0: osd.0 1: osd.1 2: osd.2 3: osd.3 4: osd.4 5: osd.5 6: osd.6 7: osd.7 threads 8 से 15: Proxmox, VMs, OSD helper threads Hugepages: 16 GiB reserved, आठ OSDs ने 4 GiB इस्तेमाल किए 4 GiB इस्तेमाल में 12 GiB reserved और बेकार, host के 58 GiB में से हर OSD के लिए एक physical core। Hugepage pool check के default 2048 MiB प्रति OSD पर रखा गया है, और हर चलते OSD ने उसका एक चौथाई लिया है। Hugepages को फिर से देखें। Check प्रति OSD 2048 MiB माँगता है, जो daemon का default --mem है, तो आठ OSDs को 16 GiB reserved चाहिए। चलते समय हर OSD ने अपने 2048 में से 512 MiB इस्तेमाल किए। यह kernel backend के लिए croit के अपने design note से मेल खाता है, जो अपने payload allocator के लिए --mem का एक चौथाई रखता है10। तो इस box पर, आठों चलते हुए, 12 GiB RAM hugepages के रूप में reserved बैठी है जिसे कोई छूता नहीं, उस host पर जिसे VMs को भी खिलाना है। एक storage नोड को फ़र्क नहीं पड़ता। एक Proxmox नोड पर वह memory एक VM थी, और आगे उसे घटाकर उतना किया गया है जितना OSDs इस्तेमाल करते हैं।\nक्या मैं पूछ सकता हूँ कि यह ceph.conf क्यों नहीं पढ़ पाता? Drives format हो गईं, package अंदर, host check साफ़, और पहला OSD शुरू नहीं हुआ।\ncroit-flashstore-tool: refused: /etc/ceph/ceph.conf: Permission denied (os error 13) Proxmox पर /etc/ceph/ceph.conf एक symlink है जो /etc/pve/ceph.conf की ओर इशारा करता है, और /etc/pve pmxcfs है, वह cluster filesystem जो हर नोड का config एक जैसा रखता है। वहाँ की files root:www-data 0640 हैं, और pmxcfs इसे file के हिसाब से बदलने नहीं देता11। Proxmox के अपने Ceph daemons काम चला लेते हैं क्योंकि वे root के रूप में शुरू होते हैं, config पढ़ते हैं, और फिर ceph user पर आ जाते हैं, जो हर ceph-osd@ unit पर --setuser ceph --setgroup ceph करता है।\nFlashStore की unit root के रूप में शुरू नहीं होती। वह पहले instruction से ही User=ceph है, ExecStartPre समेत12, तो वह file को कभी पढ़ ही नहीं पाती।\nक्या मैं पूछ सकता हूँ कि Debian के लिए बना एक package, एक drop-in product के लिए, सबसे आम Debian-आधारित Ceph platform पर क्यों नहीं आज़माया गया? मैं यह नहीं पूछ रहा कि किसने। pveceph अपना config pmxcfs पर रखता है, और pveceph से चलने वाले नोड पर हर FlashStore OSD अपनी पहली शुरुआत पर इससे टकराएगा।\nDaemon में जवाब पहले से बना हुआ है। उसका source एक classic --setuser/--setgroup drop बताता है: “started as root by a classic unit (--setuser ceph --setgroup ceph), the daemon becomes that user before it opens the store, a socket or a file”13। तो एक drop-in जो unit को उसी तरह शुरू करे जैसे Proxmox अपने OSDs शुरू करता है, काफ़ी होना चाहिए।\nपूरा काफ़ी नहीं था। सीधे root के रूप में शुरू करने पर अगला इनकार drive से आया।\nactivate: device kernel:/dev/ng0n1 not ready: /dev/nvme0n1: Permission denied (os error 13) Unit का CapabilityBoundingSet CAP_DAC_OVERRIDE को छोड़ देता है12, तो root को आम file permissions मानने पड़ते हैं, और namespace nodes ceph:ceph के हैं। Root के रूप में शुरू करना और group को ceph रखना दोनों को ढक लेता है: config file root की है, ceph group drive खोलता है, और daemon कुछ और करने से पहले ceph पर आ जाता है।\nUnit शुरू करने के तीन तरीके जैसी आती है User=ceph Group=ceph /etc/pve/ceph.conf root:www-data 0640 conf पढ़ने पर Permission denied Root के रूप में शुरू CAP_DAC_OVERRIDE नहीं /dev/nvme0n1 ceph:ceph 0660 drive खोलने पर Permission denied Root, group ceph फिर --setuser ceph conf owner के रूप में पढ़ी, drive group के रूप में खुली, daemon ceph के रूप में चलता है जैसी unit आती है वह pmxcfs नहीं पढ़ सकती। सीधा root drive नहीं खोल सकता, क्योंकि bounding set override छीन लेता है। Group ceph वाला root दोनों करता है, फिर नीचे आ जाता है। # /etc/systemd/system/croit-flashstore-osd@.service.d/pve-ceph-conf.conf [Service] User=root Group=ceph ExecStart= ExecStart=/usr/bin/croit-flashstore-osd run --id %i --cluster ${CLUSTER} -f --setuser ceph --setgroup ceph Daemon अपने log में drop की पुष्टि करता है: set uid:gid to 64045:64045 (ceph)।\nएक छोटा fix भी है, SupplementaryGroups=www-data, और मैंने उसे इस्तेमाल नहीं किया। वह OSD को /etc/pve के नीचे की हर group-readable file पढ़ने देता, सिर्फ़ Ceph config नहीं। एक OSD का cluster के बाकी configuration को पढ़ने से कोई लेना-देना नहीं, और ऊपर वाला drop-in उसे उससे ज़रा भी ज़्यादा नहीं देता जितना Proxmox अपने OSDs को देता है।\nफिर device nodes। FlashStore के docs कहते हैं namespace node ceph के लिए writable होना चाहिए, “(udev rule)”14, और package कोई rule नहीं देता। यह rule drives को model से पहचानता है, तो numbering चाहे जो करे यह boot drive को नहीं पकड़ सकता:\n# /etc/udev/rules.d/70-croit-flashstore-optane.rules SUBSYSTEM==\u0026#34;nvme-generic\u0026#34;, KERNEL==\u0026#34;ng*n*\u0026#34;, ATTRS{model}==\u0026#34;Dell Express Flash NVMe P4800X*|INTEL SSDPE21*\u0026#34;, OWNER=\u0026#34;ceph\u0026#34;, GROUP=\u0026#34;ceph\u0026#34;, MODE=\u0026#34;0660\u0026#34; SUBSYSTEM==\u0026#34;block\u0026#34;, KERNEL==\u0026#34;nvme*n*\u0026#34;, ENV{DEVTYPE}==\u0026#34;disk\u0026#34;, ATTRS{model}==\u0026#34;Dell Express Flash NVMe P4800X*|INTEL SSDPE21*\u0026#34;, OWNER=\u0026#34;ceph\u0026#34;, GROUP=\u0026#34;ceph\u0026#34;, MODE=\u0026#34;0660\u0026#34; udevadm trigger के बाद सोलह Optane nodes ceph:ceph 0660 थे और SN750 root पर रही।\nवह Passthrough जो यह Kernel नहीं करेगा Kernel tier के दो modes हैं, और आप जो node देते हैं वही उनमें से चुनता है। kernel:/dev/ngXnY NVMe commands सीधे io_uring के ज़रिए drive को भेजता है, जिसे croit kernel-cmd कहते हैं। kernel:/dev/nvmeXnY block device पर O_DIRECT reads और writes करता है, जिसे kernel या direct कहा जाता है10। croit ने अपने हर परखे हुए cell में kernel-cmd को आगे मापा10, और README का अपना quick start इसे इस्तेमाल करता है1, तो मैंने यही configure किया।\nPermissions ठीक होने पर daemon ceph पर आया, अपना config पढ़ा, और पहले read पर रुक गया:\ncroit-flashstore-osd: --dev kernel:/dev/ng0n1: /dev/ng0n1: kernel-cmd fixed-buffer probe read: Errno(13) वही probe एक मिनट पहले activate में pass हुआ था, जिसके पास अभी भी root की capabilities थीं। तो सवाल यह है कि क्या यह kernel एक unprivileged process को /dev/ngXnY पर I/O commands भेजने देता है। इसका जवाब FlashStore के बिना दिया जा सकता है, वही read nvme-cli से, ceph के रूप में:\nकिसके रूप में /dev/ng0n1 पर command नतीजा ceph Identify Namespace अनुमति ceph Read, LBA 0, 4 KiB Permission denied root Read, LBA 0, 4 KiB अनुमति आठों Optanes ने यही जवाब दिया, उन दो समेत जिन्हें मैंने कभी format या reset नहीं किया था, जो Dell की जगह Intel का firmware चला रही थीं। तो यह drives नहीं हैं और सुबह के formats भी नहीं।\nUpstream कहता है कि यह चलना चाहिए। Linux 7.0 में nvme_cmd_allowed() एक unprivileged process को I/O command भेजने देता है जब drive का Commands Supported and Effects log उसे supported और बिना असामान्य effects के बताता है, और writable open सिर्फ़ उन commands के लिए माँगता है जो data लिखते या बदलते हैं15। P4800X का effects log Read को supported बताता है, 00000001, और कुछ नहीं। Read की अनुमति है।\nProxmox का kernel upstream वाला नहीं है। इस build के उसके changelog में ठीक इसी रास्ते पर एक backported fix है, CVE-2026-90227: nvme/ioctl: check SUBMIT_IO with nvme_cmd_allowed(), जो देखने में उस ioctl से अलग ioctl को ढकता है जिसे मैंने परखा। मैंने यह पक्का नहीं किया है कि 7.0.14-28-pve kernel का कौन सा बदलाव फ़र्क डालता है, और मैं अंदाज़ा नहीं लगाऊँगा। जो पक्का है वह बर्ताव है: इस kernel पर unprivileged NVMe passthrough I/O मना है।\nFlashStore के पास मना किए गए passthrough के लिए एक fallback है, और वह नहीं चला। croit का design note कहता है कि जब Identify मना हो, तो kernel-cmd device अपने block node पर direct I/O पर आ जाता है और startup पर यह बताता है10। यहाँ Identify की अनुमति है और Read की नहीं, तो fallback कभी trigger नहीं होता और OSD रुक जाता है।\nDrive तक दो रास्ते kernel-cmd: NVMe passthrough kernel: direct block I/O io_uring URING_CMD /dev/ng0n1, generic char user ceph को मना: EACCES io_uring READ/WRITE_FIXED /dev/nvme0n1, O_DIRECT चलता है: node पर सिर्फ़ rw चाहिए Passthrough NVMe ioctl permission check से गुज़रता है, और Proxmox का kernel user ceph को मना कर देता है। Block device पर direct I/O को node पर सिर्फ़ read और write चाहिए, जो udev rule पहले ही देता है। Direct I/O को फ़र्क नहीं पड़ता। प्रति OSD एक line है:\nflashstore_store_backend = kernel इसके साथ osd.0 चालू हो गया।\ncroit-flashstore-osd: store mounted (1 shards, replayed 4 txns in 16 ms) croit-flashstore-osd: set uid:gid to 64045:64045 (ceph) [ 1.398] crush location set (create-or-move updating item name \u0026#39;osd.0\u0026#39; weight 0.3359 at location {host=pve2,root=default} to crush map) [ 2.406] osd.0 is now active (up_from 10, map 10) 2.4 seconds में active।\nOSDs को Prepare करना और शुरू करना हर OSD को Ceph config में एक section मिलता है, जिसका Proxmox पर मतलब /etc/pve/ceph.conf को edit करना है, और इसे हाथ से करना ठीक है।\n[osd.0] flashstore_dev = spdk:0000:05:00.0 flashstore_store_backend = kernel flashstore_lcores = 0 Device को PCI address से नाम दिया जाता है, /dev/nvme0n1 से नहीं, और spdk: prefix का यहाँ मतलब SPDK नहीं है। Kernel backend set होने पर daemon हर शुरुआत पर sysfs में address देखता है और controller के मौजूदा nodes ढूँढता है10।\nDrive का ऐसा नाम जो बना रहे [osd.0] spdk:0000:05:00.0 sysfs lookup हर शुरुआत पर /dev/nvme0n1 /dev/ng0n1 nvme numbers probe के क्रम पर चलते हैं, और इस host पर बदल चुके हैं: SN750 अक्टूबर में nvme7 थी और अब nvme8 है। PCI address slot से तय होता है। nvme number probe के क्रम से तय होता है, जो तय नहीं है। यहाँ यह मायने रखता है। SN750 boot drive अक्टूबर में nvme7 थी और अब nvme8 है, और generic node minors भी drive के क्रम का पालन नहीं करते, ng1n1 minor 0 पर और ng0n1 minor 2 पर। जो config /dev/nvme4n1 कहता है वह reboot के बाद किसी और drive की ओर इशारा कर सकता है। जो config 0000:0b:00.0 कहता है वह नहीं कर सकता।\nफिर हर drive के लिए एक command, जो store लिखता है और OSD को monitor के साथ register करता है:\ncroit-flashstore-tool prepare --dev spdk:0000:05:00.0 --id 0 kernel-cmd /dev/ng0n1: fixed-buffer NVMe passthrough probe ok (IORING_URING_CMD_FIXED on) mkfs: device lba 4096 B x 91573146 (375083606016 B), awupf 1 lba, vwc false, max_xfer 32 lba mkfs: 1 store shards, WAL ring 4096 MiB each osd.0 prepared in /var/lib/ceph/osd/ceph-0 दो seconds, root के रूप में। prepare bootstrap key /var/lib/ceph/bootstrap-osd/ceph.keyring से पढ़ता है16, जिसे pveceph सिर्फ़ तब लिखता है जब वह पहली बार अपना कोई OSD बनाता है, तो बिना classic OSDs के इसे पहले लाना पड़ता है:\nceph auth get client.bootstrap-osd -o /var/lib/ceph/bootstrap-osd/ceph.keyring छह drives पहली बार में prepare हुईं। दो मना कर दी गईं:\ncroit-flashstore-tool: refused: device is not empty (non-zero data in the first 8192 bytes); --wipe destroys it croit-flashstore-tool: refused: device is not empty (non-zero data at 65536 bytes); --wipe destroys it lsblk और blkid दोनों ने उन दो drives को ख़ाली बताया था। उन पर एक पुराने lab के LVM volume group का text metadata area था, जो कब का हटाया जा चुका था, और आगे वाला label पहले ही शून्य किया जा चुका था। FlashStore का probe पहले 8 KiB और 64 KiB और 256 KiB वाले हिस्से पढ़ता है17, जो आम tools से आगे है, और वह सही था। किसी भी चीज़ वाली drive को मना करना, जब तक --wipe न कहा जाए, ठीक वही है जो एक OSD tool को करना चाहिए। उन्हें मिटाना drives के मालिक का फ़ैसला है, tool का नहीं। फ़ैसला होने के बाद --wipe ने दोनों को लगभग दो seconds में prepare किया, और वे आगे वाले install के बाद जुड़ीं, इसीलिए panel screenshot और install के आँकड़े छह दिखाते हैं।\nफिर उन्हें शुरू करें:\nsystemctl enable --now croit-flashstore-osd@0 ID CLASS WEIGHT TYPE NAME STATUS REWEIGHT PRI-AFF -1 2.01535 root default -3 2.01535 host pve2 0 nvme 0.33589 osd.0 up 1.00000 1.00000 1 nvme 0.33589 osd.1 up 1.00000 1.00000 2 nvme 0.33589 osd.2 up 1.00000 1.00000 3 nvme 0.33589 osd.3 up 1.00000 1.00000 4 nvme 0.33589 osd.4 up 1.00000 1.00000 5 nvme 0.33589 osd.5 up 1.00000 1.00000 हर OSD ने खुद को host=pve2 के नीचे device class nvme के साथ रखा। वे cluster को अपने बारे में क्या बताते हैं, उसे एक बार पढ़ना चाहिए:\nField Monitor और manager FlashStore OSDs ceph versions 21.2.0 (087cd25db8f1) umbrella (dev - None) 21.2.0 (b060042deb05) umbrella (dev - croit-flashstore-osd) किसने बनाया Proxmox, -pve1 packages croit, उस upstream v21.2.0 commit से जिसका README नाम लेती है1 osd_objectstore bluestore, हर bluestore_bdev_* field भरा हुआ असल में यह क्या है FlashStore, कोई BlueFS नहीं, कोई RocksDB नहीं BlueStore वाला जवाब जानबूझकर है। flashstore_report_objectstore का default bluestore है क्योंकि classic monitors कुछ features तभी चालू करते हैं जब हर OSD यह बताए, तो default एक mixed cluster को चलाए रखता है7। यह सच नहीं है, और cluster का metadata पढ़कर उस पर भरोसा करने से पहले यह जानना चाहिए।\nProxmox उन्हें क्या समझता है Proxmox OSD panel छहों को दिखाता है, up और in, class nvme, version 21.2.0, हर एक 344 GiB। वह उन्हें FileStore भी कहता है।\nFileStore वह object store है जिसकी जगह BlueStore आया। Proxmox यह label PVE/API2/Ceph/OSD.pm में तय करता है: अगर OSD के metadata में bluefs key है तो वह BlueStore है, और बाकी सब FileStore18। FlashStore में BlueFS नहीं है, क्योंकि उसके नीचे कोई RocksDB नहीं, तो वह एक field में BlueStore बताता है और दूसरे से FileStore का label पाता है। दोनों में से कोई सही नहीं। और panel वहीं है जहाँ ज़्यादातर Proxmox admins सबसे पहले देखते हैं।\nIdle पर latency columns 0 / 0 दिखाते हैं। नीचे वाले install के दौरान ceph osd perf ने छहों पर 0 से 3 ms की commit latencies बताईं।\nPanel में Start, Stop और Restart ceph-osd@N चलाते हैं, classic unit, जो चल नहीं रही19। इसलिए panel इन OSDs को देखने की जगह है, इन्हें चलाने की नहीं। Daemons को छूने वाली किसी भी चीज़ के लिए systemctl … croit-flashstore-osd@N और CLI इस्तेमाल करें, और इन पर Create: OSD और Destroy से दूर रहें।\nएक Pool, एक Storage और एक Fisher-Price OS (Windows) VM Cluster का पहला PG, manager का .mgr pool, OSDs चालू होते ही undersized+degraded पर बैठ गया। दोष अकेले नोड का है। Default replicated_rule हर copy को अलग host पर रखता है, और host एक ही है।\nceph osd crush rule create-replicated replicated_osd default osd nvme ceph osd pool set .mgr crush_rule replicated_osd Failure domain osd और device class nvme वाला rule20 हर copy को अलग OSD पर रखता है, और PG seconds में active+clean हो गया। तीन या ज़्यादा hosts वाले असली cluster पर host rule रखें और यह छोड़ दें।\nउसके बाद सब कुछ सामान्य Proxmox GUI है। Ceph → Pools → Create: नाम flashstore, size 3, min size 2, rule replicated_osd, Add as Storage पर tick। नीचे वाले load test के लिए बाद में यह size 2, min size 1 पर गया।\nProxmox ने pool और RBD storage definition एक ही बार में बनाई, और flashstore tree में 654 GiB इस्तेमाल लायक के साथ आया, जो 2 TiB raw को तीन copies से भाग देकर, overhead घटाकर है। 129 PGs active+clean हुए, और autoscaler ने थोड़ी देर बाद नए pool को 128 से 32 पर ला दिया।\nTest guest एक Fisher-Price OS (Windows) VM है। यह पसंद नहीं है, यह वह है जो ग्राहकों का बड़ा हिस्सा असल में अपने Proxmox pools पर चलाता है, तो वही load है जो गिना जाता है: 16 GiB memory, 4 cores, flashstore पर 60 GiB disk, discard और iothread चालू। यह disk से बहुत बात करता है और उसके साथ अकुशल है, और यही बात है: storage test को वह guest चाहिए जो disk पर सबसे ज़्यादा टिकता है।\nVM disk से Optane तक VM disk scsi0, 60 GiB QEMU + librbd 21.2.0-pve1 pool flashstore replicated_osd, size 2 FlashStore OSD, copy 1 FlashStore OSD, copy 2 Proxmox का classic librbd croit के OSDs से बात करता है; librustyrbd यहाँ install नहीं है। VM के writes Proxmox के दिए librbd से होकर, pool के rule में, और size 2 पर दो FlashStore OSDs तक जाते हैं। croit का अपना librustyrbd install नहीं है, तो यह Rust OSDs के सामने एक classic client है। Install के पहले पंद्रह मिनट में हर दस seconds पर pool का नमूना:\nPool writes active रहते median 9.3 MB/s, peak 302 MB/s Write operations peak 2,486 प्रति second Pool reads peak 60 MB/s इस्तेमाल हुई raw जगह छह OSDs में 35 GiB Health सभी 90 नमूनों में HEALTH_OK OSD restarts 0 OSD resident memory बाद में हर एक 565 से 871 MiB ये एक installer के आँकड़े हैं, VM और OSDs एक ही host पर और tuning WARNs अनछुए, और ये FlashStore की रफ़्तार के बारे में कुछ नहीं कहते। ये जो कहते हैं वह यह है कि एक classic Proxmox client ने Rust OSDs पर एक operating system install चलाया, 35 GiB raw, बिना किसी गड़बड़ी के, और यही वह दावा है जिसे परखने यह post निकली थी।\nLoad में यह क्या करता है Install साबित करता है कि यह चलता है। यह नहीं बताता कि VM इस्तेमाल करने में कैसी है।\nतो VM पर CrystalDiskMark 9.0.321 तीन बार चला: Real World Performance [+Mix] profile, Read\u0026amp;Write [+Mix], C: पर 16 GiB file और 70/30 read और write mix, एक बार तीन passes पर और दो बार नौ पर। वह profile सब कुछ एक thread पर एक बार में एक request चलाता है, जो एक desktop या छोटा database असल में करता है, datasheet नहीं।\nतब तक setup install से आगे बढ़ चुका था। VM में छह cores थे, और pool को GUI में size 2, min size 1 और 256 PGs पर बदला जा चुका था। Min size 1 के साथ size 2 एक box पर lab setting है: एक copy बचने पर pool ऐसे writes लेता रहता है जिन्हें एक failure खो सकता है। और कहीं, 3 और 2 रखें।\nDisk Proxmox के default पर थी, कोई cache नहीं, जो Proxmox 2 से default है22।\nReal World Performance [+Mix], 16 GiB 3 passes 9 passes फिर से 9 passes SEQ1M Q1T1 read 1,279.71 MB/s 1,675.33 MB/s 1,852.32 MB/s SEQ1M Q1T1 write 563.67 MB/s 576.65 MB/s 580.08 MB/s SEQ1M Q1T1 mix 1,043.75 MB/s 1,043.28 MB/s 986.10 MB/s RND4K Q1T1 read 5,342 IOPS, 186.57 µs 5,659 IOPS, 176.17 µs 5,706 IOPS, 174.73 µs RND4K Q1T1 write 2,419 IOPS, 412.51 µs 2,405 IOPS, 414.79 µs 2,435 IOPS, 409.77 µs RND4K Q1T1 mix 3,938 IOPS, 253.13 µs 3,826 IOPS, 260.49 µs 3,936 IOPS, 253.25 µs Writes और small-block latency हर run में लगभग 1% के अंदर रहते हैं। Sequential read तीनों में 45% चढ़ता है। यह पहला संकेत है कि read column वह नहीं माप रहा जो दिखता है।\nतीनों के दौरान host का हर पाँच seconds पर नमूना लिया गया, आठ Optanes के लिए /proc/diskstats से, pool के लिए ceph status से और हर process और thread के लिए /proc से, और दोनों नज़रिए एक ही कहानी नहीं बताते।\nWrites: drive छोटा हिस्सा है एक बार में एक 4 KiB random write, आख़िरी run प्रति write समय, VM को दिखा 409.77 µs प्रति write समय, हर Optane पर 17 µs हर VM write पर Optanes तक पहुँचे writes 4.05: दो copies, लगभग दो writes हर एक बड़े sequential writes VM से 580 MB/s, Optanes पर 1.14 GB/s, दूसरी copy इसे दोगुना करती है एक छोटे write में drive 5% से कम है। बाकी 393 µs सफ़र है: QEMU, librbd, OSD में messenger, खुद OSD, और दूसरी copy का इंतज़ार। इनमें से कुछ भी यहाँ अलग से नहीं मापा गया, तो मैं हर टुकड़े पर कोई संख्या नहीं रखूँगा। जो यह कहता है वह यह है कि इस box पर एक-एक करके I/O के लिए Optanes सीमा नहीं हैं, और तेज़ drive उस 410 को ज़्यादा नहीं हिलाएगी। सीमा client पर चली गई है, वह librbd जो Proxmox देता है, और जब croit का अपना librustyrbd यहाँ deploy होगा तो इस पर और आएगा।\nReads: cache, Optanes नहीं आख़िरी run में 4 KiB random read pass ने पूरी 16 GiB file पर प्रति second 5,700 reads किए, और आठ Optanes ने कुछ भी नहीं पढ़ा। Sequential pass pool पर 2.2 GB/s तक पहुँचा जबकि drives के अपने reads 755 MB/s से शून्य पर गिर गए। CrystalDiskMark guest के cache को बायपास करता है और QEMU में disk का कोई cache नहीं, तो काम करने वाली memory OSDs में है। flashstore_obj_cache इस build में default रूप से चालू है, size 2 पर file में हर OSD का हिस्सा लगभग 2 GiB है, और हर OSD लगभग 2.6 GiB तक बढ़ चुका था। FlashStore अपने hits नहीं बताता, तो इसे साबित नहीं, लगभग पक्का कहें। इसीलिए sequential read हर run के साथ बढ़ा: file का ज़्यादा हिस्सा पहले से वहाँ था। Read column को store का नहीं, cache का आँकड़ा मानें।\nCPU: cores कहाँ गए आख़िरी run, cores में Host busy OSDs Guest vCPUs librbd और Ceph client QEMU Passes के बीच idle 20 से 24% 3.3 0.1 0.03 0.03 4 KiB random write 30% 3.9 0.38 0.20 0.08 4 KiB random read 30% 3.6 0.47 0.39 0.15 Sequential mix 41 से 53% 3.8 1.5 से 2.3 0.5 0.12 VM के तीन columns उसके threads से आते हैं: QEMU guest के vCPUs को नाम देता है, और librbd के messenger और worker threads उसी process के अंदर चलते हैं।\nOSD column मुश्किल से हिलता है। आठ polling OSDs कुछ न करते हुए 3.3 cores लेते हैं और पूरे ज़ोर पर 3.9, तो 16-thread box पर किसी VM के कुछ माँगने से पहले CPU का पाँचवाँ हिस्सा जा चुका है। और कुछ भी अपनी सीमा के पास नहीं आया। सबसे व्यस्त अकेला thread 47% पर एक guest vCPU था, और librbd का सबसे व्यस्त 15% से नीचे रहा। एक बार में एक request पर सीमा इंतज़ार है, काम नहीं, और CPU का आँकड़ा इंतज़ार नहीं दिखा सकता।\nMemory: peak के लिए योजना बनाएँ तीनों runs में Health हर नमूने में HEALTH_OK, हर PG active+clean, कोई OSD restart नहीं इस्तेमाल में hugepages शुरू से अंत तक 4 GiB देने के लिए बची host memory, एक 16 GiB VM चलते हुए 3.1 से 4.0 GiB Hugepage वाली पंक्ति फिर से budget वाला section है, इस बार load में: प्रति OSD 512 MiB, और बाकी 12 GiB कभी नहीं छुए गए।\nआम memory वह संख्या है जिस पर नज़र रखनी है, क्योंकि ऊपर वाला cache उसी से बना है। एक बार read के file खींच लेने पर हर OSD लगभग 2.5 GiB पर बैठा, और 58.7 GiB host पर Ceph ने इतना रखा:\nPeak पर Ceph की memory, default 4 GiB target OSD processes, आठों मिलाकर 19.9 GiB, हर एक 2.4 से 2.6 GiB OSDs के लिए reserved hugepages 16 GiB, उसमें से 4 GiB इस्तेमाल Monitor और manager 0.3 GiB कुल 36.2 GiB, host का 62% Host के देने को बचा, एक 16 GiB VM चलते हुए 3.6 GiB यह वापस आती है, लेकिन किसी ऐसे समय पर नहीं जो मुझे दिखा। यह idle gaps समेत 25 मिनट तक 19.9 GiB पर रही, फिर आख़िरी run के अंत में 13.9 GiB पर गिरी, और host के पास फिर से देने को 10.2 GiB थे। उस सब के दौरान osd_memory_target प्रति OSD अपने default 4 GiB पर था, तो एक भी hugepage गिनने से पहले आठ OSDs 32 GiB के हक़दार थे। जिस नोड को VMs भी चलानी हैं, उस पर drives से पहले peak ही वह budget है जिसे निकालना है, और वहीं 12 बेकार GiB hugepages सबसे ज़्यादा चुभते हैं।\nएक साथ तीन VMs, तंग budget पर एक VM बहुत जगह छोड़ती है। तीन पर budget सही होना चाहिए। तो पहले दो settings बदलीं।\nceph config set osd osd_memory_target 1073741824 # 1 GiB per OSD, was 4 sysctl -w vm.nr_hugepages=2048 # what eight OSDs use, was 8192 Target को और कुछ नहीं चाहिए: हर OSD ने seconds में नया मान बताया, और फिर भी उन्हें एक-एक करके restart किया गया, अगले से पहले सभी 257 PGs वापस active+clean। Hugepages में एक पेच है। हर OSD शुरू होने से पहले croit-flashstore-prep एक पूरा --mem ख़ाली चाहता है, 2048 MiB, और कम हो तो pool बढ़ा देता है, लेकिन उसे कभी घटाता नहीं। घटाने के बाद osd.7 को restart करने पर pool सीधे वापस ऊपर गया:\ncroit-flashstore-prep[7]: hugepages 2048kB: free 256 \u0026lt; need 1024, nr_hugepages 2048 -\u0026gt; 2816 तो restart या reboot के बाद बचने वाली न्यूनतम सीमा है OSDs जितना इस्तेमाल करते हैं उतना और एक शुरुआत का margin: 2,816 pages, 5.5 GiB, उन 16 GiB के मुक़ाबले जो check माँगता है। नीचे वाली setup script अब ठीक इतना ही reserve करती है। आठों चालू होने पर वापस 2,048 पर घटाने से अगले restart तक 1.5 GiB और मिलते हैं।\nफिर VM के तीन clones ने, हर एक 10 GiB पर, एक ही समय में CrystalDiskMark चलाया: Real World Performance [+Mix], तीन passes, लेकिन 16 GiB की जगह हर एक 1 GiB file पर। इससे read column पहले से भी ज़्यादा cache का आँकड़ा बन जाता है, तो writes पढ़ें।\nCrystalDiskMark, एक साथ तीन VMs VM 104 VM 105 VM 106 तीनों अकेली एक VM SEQ1M Q1T1 write 346.99 MB/s 318.99 MB/s 446.98 MB/s 1,113 MB/s 580.08 MB/s SEQ1M Q1T1 read 796.05 MB/s 905.03 MB/s 1,160.93 MB/s 2,862 MB/s 1,852.32 MB/s RND4K Q1T1 write 1,901 IOPS 1,928 IOPS 1,862 IOPS 5,691 IOPS 2,435 IOPS RND4K Q1T1 write latency 524.56 µs 517.00 µs 535.42 µs 409.77 µs RND4K Q1T1 read 3,773 IOPS 3,916 IOPS 3,909 IOPS 11,598 IOPS 5,706 IOPS RND4K Q1T1 mix 2,978 IOPS 3,027 IOPS 3,411 IOPS 9,416 IOPS 3,936 IOPS तीन VMs को एक के 2.3 गुना छोटे writes मिले, और हर एक ने इसके लिए latency में लगभग 27% चुकाया। कारण अब भी Optanes नहीं थीं। वे 17 µs प्रति write पर 20,900 writes प्रति second के peak पर पहुँचीं, एक VM वाले वही 17 µs, और आठों में सबसे व्यस्त 14% व्यस्त थी।\nHost, पूरे run में हर पाँच seconds Default 4 GiB target, एक VM 1 GiB target, तीन VMs सबसे बड़ा OSD process 2.7 GiB peak पर 1.15 GiB, बाद में 0.8 आठों OSD processes मिलाकर 19.9 GiB peak पर 8.0 GiB, बाद में 5.8 Reserved hugepages 16 GiB, 4 इस्तेमाल 4 GiB, सब इस्तेमाल VMs को दी गई memory 16 GiB 30 GiB देने को बची host memory, सबसे कम पर 3.1 GiB 14.8 GiB Swap में बढ़त कोई नहीं कोई नहीं तो FlashStore खुद को osd_memory_target पर टिकाए रखता है। एक read pass के peak पर यह 15% ऊपर गया और वापस नीचे आया, cache अपना काम budget के अंदर कर रहा था, बाहर नहीं। Target और घटाने के बीच, उसी box पर 26 GiB VMs को वापस मिले।\nCPU cores में, तीन VMs Host busy OSDs Guests librbd और Ceph client QEMU तीन Fisher-Price OS (Windows) boots 81 से 89% 3.4 से 3.6 6.3 से 7.9 0.4 से 0.7 0.3 Benchmark 42 से 73% 3.7 से 4.5 1.2 से 4.0 0.4 से 1.6 0.2 से 0.4 बाद में idle 20 से 24% 3.3 0.3 0 0 तीन guests को boot करने ने उन्हें benchmark करने से ज़्यादा CPU लिया। नीचे का storage कभी उसके पास नहीं आया, जो mini PC की सीमा है, जैसा हमेशा होना ही था।\nयह सब, एक Script में ऊपर का सब कुछ एक script में है। उसे उन drives के PCI addresses दें जिन्हें आप OSDs बनाना चाहते हैं और बाकी वह करती है, उसी क्रम में जिसमें इस post ने किया, दोनों Proxmox fixes अंदर बने हुए।\n\u0026#8615; flashstore-pve-setup.sh: एक Proxmox VE नोड पर FlashStore OSDs flashstore-pve-setup.sh · 17 kB lspci -D -d ::0108 # find the drives bash flashstore-pve-setup.sh --dry-run 0000:05:00.0 # show the plan, change nothing bash flashstore-pve-setup.sh 0000:05:00.0 0000:06:00.0 यह जाँचती है यह लिखती है यह चलाती है Proxmox VE 9 और Ceph 21.2.0 Umbrella bootstrap-osd keyring ceph के रूप में एक passthrough read, kernel-cmd या kernel चुनने के लिए हर drive: NVMe, कोई write cache नहीं, mounted, partitioned या held नहीं root-फिर---setuser drop-in हर drive पर prepare और systemctl enable --now उन हिस्सों में कोई data नहीं जो FlashStore का अपना probe पढ़ता है हर drive के लिए एक udev rule, serial number से मिलाया host check, सिर्फ़ उस पर रुकते हुए जो OSDs को चाहिए 4 KiB blocks हर drive के लिए एक [osd.N] section, हर एक को एक physical core package download, release के SHA-256 के सामने जाँचा जब तक आप न कहें, कुछ भी नष्ट नहीं होता। --format-4k उस drive को दोबारा format करता है जो 4 KiB पर नहीं है, एक बार में एक, अपनी unit में ताकि कुछ उसे न रोके, और --wipe उसे data वाली drive पर लिखने देता है। --single-node replicated_osd rule जोड़ता है, और इसे दोबारा चलाने पर जो drives पहले से OSDs हैं उन्हें छोड़ देता है।\nइसे यहाँ परखा गया, सिर्फ़ लिखा नहीं गया। इसने SN750 को उसके write cache पर मना किया, osd.7 की drive को तब मना किया जब उस पर अभी भी store था, और फिर, osd.7 के purge होने और उसके nodes root को लौटाए जाने के बाद, उसे 10.5 seconds में शून्य से दोबारा बनाया, kernel backend खुद चुनते हुए। यह जो नहीं करेगी वह है Ceph install करना। उस कदम में आपसे एक Technology Preview स्वीकार करने को कहा जाता है, और यह आपका फ़ैसला है, script का नहीं।\nक्या ठीक होना चाहिए इनमें से कुछ भी एक ठाने हुए admin को नहीं रोकता, और यह सब एक व्यस्त admin को रोक देगा। हर बात एक बयान है जो croit package download करने वाले हर व्यक्ति से करता है, और हर एक से मैं पहली कोशिश में टकराया।\nकहाँ क्या होता है क्या ठीक करेगा systemd unit User=ceph pmxcfs नहीं पढ़ सकता, तो pveceph नोड पर OSD कभी शुरू नहीं होता root-फिर---setuser start ship करें, या एक Proxmox drop-in kernel-cmd fallback सिर्फ़ Identify मना होने पर fallback; PVE के kernel पर Read मना है और OSD रुक जाता है किसी भी मना किए गए passthrough I/O पर direct I/O पर fallback udev docs ceph को namespace nodes देने वाला rule माँगते हैं; कोई ship नहीं होता configured devices से जुड़ा एक rule ship करें --check summary kernel NVMe को “compiled out” कहता है जबकि वही अकेला compiled store path है label ठीक करें --check exit code boot SSD PLP test में fail होती है, तो exit 0 तक पहुँचा नहीं जा सकता सिर्फ़ configured या candidate devices को गिनें hugepages प्रति OSD 2048 MiB का आकार, और prep हर शुरुआत पर इतना ख़ाली चाहता है; kernel backend 512 इस्तेमाल करता है kernel backend को उतना रखें जितना वह इस्तेमाल करता है, और prep भी उतना ही माँगे sha256sums.txt file के नाम release assets से मेल नहीं खाते उन्हें प्रकाशित नामों से रखें package का नाम docs कहते हैं apt remove flashstore; package croit-flashstore-osd है एक नाम, या docs में सही नाम flashstore_dev reference सिर्फ़ spdk: और file: सूचीबद्ध kernel: और kernel backend के साथ spdk: को document करें इनमें से कुछ भी नया काम नहीं है। Daemon में privilege drop, direct backend और fallback logic पहले से हैं। बस उन्हें उस platform के लिए जोड़ा नहीं गया है जिस पर ज़्यादातर लोग इसे पहले आज़माएँगे।\nPreview वहीं है जहाँ यह पता चलता है इन सब findings के लिए preview सही जगह है, और उन्हें छोड़ने के लिए ग़लत जगह। Preview इसी के लिए है: कोई उसे घर ले जाता है, उस hardware पर लगाता है जो उसके पास सच में है, और लिखता है कि वह कहाँ गिरता है। जो हिस्से मायने रखते हैं वे टिके रहे। Store milliseconds में चालू हुआ, OSDs किसी और की tooling से बने cluster में जुड़े, और एक operating system install बिना किसी गड़बड़ी के उन पर गया।\nजिस चीज़ ने उसे लड़खड़ाया वह daemon के आसपास का सब कुछ था। एक ऐसे filesystem पर config file जिसे unit पढ़ नहीं सकी, एक kernel जो उस call को ना कहता है जिसे upstream अनुमति देता है, एक boot drive जिसे check गिनना बंद नहीं करता। इनमें से कुछ भी कठिन नहीं है। यह सब उस software के बीच का फ़र्क है जो चलता है और जो आपके box पर चलता है, और इसे पाटने का अकेला तरीका उन boxes पर परखना है जो लोगों के पास हैं, न कि उन पर जो आपने इसके लिए बनाए।\nइस सब के बावजूद, यह एक आशाजनक शुरुआत है। एक घटिया mini PC पर, client की तरफ़ अभी भी classic librbd और आठों drives एक PCIe 3.0 link पर, Optanes से यहाँ BlueStore से ज़्यादा काम लिया जाता है। जैसे-जैसे यह विकसित होगा मैं इस पर लौटूँगा और गहराई में जाऊँगा, जैसे-जैसे stack का ज़्यादा हिस्सा बदला जाएगा, और CephFS2 पर भी एक नज़र के साथ।\n“Drop-in” एक वादा है जो उस admin से किया जाता है जिसके पास source पढ़ने का समय नहीं। Proxmox के monitors, Proxmox का GUI, Proxmox का kernel और किसी और का package, यही ठीक वह स्थिति है जिसके लिए वह वादा है। अब यह उसे लगभग निभाता है। नौ छोटे fixes और यह निभा देगा, और मैं बुधवार सुबह उन्हें ढूँढने वाला होना पसंद करूँगा, बजाय उस ग्राहक के जो उन्हें शुक्रवार रात ढूँढता है।\ncroit/ceph-rust README — 9 नवंबर 2026 से public preview, “not yet recommended for production data”, requirements, quick start, production feature set, परखा गया Ceph commit।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust release snapshot-2026-11-10 — यहाँ इस्तेमाल हुए packages, flashstore_…_debian-trixie_amd64.deb और sha256sums.txt समेत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — hardware requirements — volatile write cache check, hugepages, kernel version के notes।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — branches and versions — main v21.2.0 को निशाना बनाती है, v20.2.4 v20.2.4 को; “The daemon refuses a cluster release outside its supported window.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager, PVE/Ceph/Releases.pm — umbrella release =\u0026gt; '21.2' और unsupported =\u0026gt; 1 के साथ सूचीबद्ध।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — build and install packages — distributions, glibc 2.34, ceph-osd.target का संभाल, apt remove वाली line।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — configuration reference — flashstore_dev, flashstore_lcores, flashstore_report_objectstore और इसका default bluestore क्यों है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit-flashstore-osd Cargo.toml — line 29, knet = [… \u0026quot;kernel-nvme\u0026quot;]।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — first OSD tutorial — सिर्फ़ पढ़ने वाला host check; “Exit 0 means no FAIL.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — ADR 0169, kernel NVMe backend — दोनों kernel modes, मापी गई तुलना, payload allocator budget, spdk: address resolution और सिर्फ़-Identify fallback (amendment 6)। Release वाली शाम ही repository में जोड़ा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE — Proxmox Cluster File System (pmxcfs) — /etc/pve के नीचे का cluster filesystem और उसकी तय ownership और permissions।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit-flashstore-osd@.service — User=ceph, ExecStartPre=… activate, और CAP_DAC_OVERRIDE के बिना एक CapabilityBoundingSet।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit-flashstore-osd privdrop.rs — classic --setuser/--setgroup privilege drop।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — prepare the host — “the namespace node must be readable and writable by user ceph (udev rule)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux v7.0, drivers/nvme/host/ioctl.c — nvme_cmd_allowed(), unprivileged NVMe passthrough का नियम।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — security — “prepare defaults --keyring to /var/lib/ceph/bootstrap-osd/\u0026lt;cluster\u0026gt;.keyring”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncroit/ceph-rust — prepare, activate and list — non-empty device probe और --wipe।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager, PVE/API2/Ceph/OSD.pm — osdtype तभी bluestore है जब metadata में bluefs हो, नहीं तो filestore।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager, PVE/Ceph/Services.pm — ceph_service_cmd() osd.N को systemd unit ceph-osd@N से जोड़ता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph documentation — CRUSH maps — replicated rules, failure domains और device classes।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCrystalDiskMark — Crystal Dew World का disk benchmark; “Various measure mode (Peak/Real World/Demo)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Performance Tweaks — disk cache modes: “cache=none seems to be the best performance and is the default since Proxmox 2.X”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/flashstore-osd-on-proxmox/","summary":"croit का FlashStore OSD, ceph-osd और BlueStore की जगह Rust में लिखा गया OSD है, जो 9 नवंबर 2026 से public preview में है। यह post उसे एक अकेले Proxmox VE 9.2 नोड पर hyperconverged चलाती है: monitor और manager के लिए PVE wizard से Ceph Umbrella 21.2.0, और Intel Optane P4800X drives पर FlashStore OSDs। इसमें है: Umbrella ही Proxmox की एकमात्र release क्यों है जो मेल खाती है, drives को 4 KiB पर format करना और वह controller reset जो format को बीच में तोड़ देता है, croit-flashstore-osd \u0026ndash;check क्या बताता है, shipped unit Proxmox की ceph.conf क्यों नहीं पढ़ पाती और उसे ठीक करने वाला drop-in, वह NVMe passthrough जिसे Proxmox का kernel मना करता है और direct backend जो चलता है, PCI address से OSDs को prepare करना, PVE का OSD panel उन्हें क्या समझता है, एक pool, RBD storage और उस पर install हुई Fisher-Price OS (Windows) VM, उस VM के अंदर से CrystalDiskMark जिसे drives के अपने counters के सामने पढ़ा गया, आठों OSDs के चलते Ceph की memory, 1 GiB memory target पर एक साथ तीन VMs, और एक setup script जो यह सब करती है, जिसे एक OSD को शून्य से दोबारा बनाकर परखा गया।","title":"Proxmox VE पर FlashStore OSD: एक नोड पर इसे चलाने में क्या लगा"},{"content":"एक कंसोल, कई ग्राहक अगर आप दूसरों के लिए Proxmox संभालते हैं, तो हर नया नोड वही काम है, बस थोड़ा अलग ढंग से। हर ग्राहक का अपना देश, time zone, root कीज़, डिस्क लेआउट, होस्ट नामकरण और subscription key होता है। किसी नए नोड पर इनमें से एक भी ग़लत हो, तो पता तब चलता है जब कोई पहली बार लॉग इन करता है, या जब पहली बार कोई ऑडिट पूछता है कि घड़ी एक घंटा आगे क्यों है।\nमैंने यह एक ऐसे ग्राहक के लिए बनाया जिसकी ठीक यही समस्या थी, और उन्होंने जो माँगा वह राहत देने वाली हद तक सीधा था। हर साइट अपने नामकरण, अपने root पासवर्ड और अपनी SSH कीज़ के साथ बने। साइट पर किसी को कुछ चालाकी नहीं करनी: वे सर्वर रैक में लगाते हैं, सही VLAN में प्लग करते हैं और चालू कर देते हैं। कोई serial number इकट्ठा नहीं करता, और कोई हर मशीन के लिए answer फ़ाइल नहीं लिखता। और इस तरह जोड़ा गया सर्वर साइट के मौजूदा क्लस्टर में पहुँच जाता है।\nउन्हें क्या चाहिए था यहाँ उसे क्या पूरा करता है साइट का अपना नामकरण, पासवर्ड और कीज़ हर साइट के लिए एक prepared answer, उस साइट के टोकन से चुना गया सही VLAN में लगाओ, चालू करो, चले जाओ DNS discovery, iPXE, और source subnet से टोकन चुनता Caddy न serial, न हर मशीन की answer फ़ाइल answers सिर्फ़ product पर फ़िल्टर करते हैं; साइट नेटवर्क से आती है नया सर्वर मौजूदा क्लस्टर में जुड़ता है इस पोस्ट में नहीं: PDM में first-boot हुक नहीं है, नीचे देखें यह पोस्ट पहले तीन को कवर करती है: एक ख़ाली सर्वर को चालू होने से लेकर सही साइट की सेटिंग वाले इंस्टॉल हुए Proxmox नोड तक पहुँचाना। यह आधा हिस्सा लगभग हर उस व्यक्ति के सामने आता है जिसके पास एक से ज़्यादा साइट हैं, MSP हो या न हो, इसलिए इसे अलग से रखना फ़ायदेमंद है। क्लस्टर में जोड़ना अलग काम है, और छूटे first-boot हुक वाला हिस्सा बताता है कि PDM अभी यह आपके लिए क्यों नहीं कर सकता।\nProxmox Datacenter Manager (PDM) 1.1 ने वह हिस्सा जोड़ा जो छूटा हुआ था1। अब यह Proxmox automated installer के लिए answer सर्वर का काम कर सकता है, ताकि एक ख़ाली मशीन बूट हो, बताए कि वह क्या है, एक prepared answer वापस पाए और कंसोल पर किसी के बिना ख़ुद को इंस्टॉल कर ले। किसी managed service provider (MSP) के लिए जो पहले से PDM को अपने मैनेजमेंट कंसोल की तरह चलाता है, हर ग्राहक की इंस्टॉल सेटिंग रखने की यही स्वाभाविक जगह है।\nजो आप नहीं चाहते वह है हर ग्राहक के लिए एक PXE सर्वर। उनमें से हर एक Trivial File Transfer Protocol (TFTP) सर्वर है, एक DHCP कॉन्फ़िग है, बूट फ़ाइलों का एक सेट है और एक ISO है जिसे हर बार दोबारा बनाना पड़ता है जब Proxmox कोई point release निकालता है। दस ग्राहक यानी दस ऐसे सेटअप जिन्हें अपडेट रखना है। यह स्केल नहीं होता। यहाँ लक्ष्य है एक PXE सेटअप, एक बूट इमेज, एक DNS रिकॉर्ड और एक PDM, और फिर भी हर साइट को उसका अपना answer मिले।\nहर साइट के लिए एक PXE सेटअप site1 10.10.50.0/24 site2 10.20.50.0/24 site3 10.30.50.0/24 443 पर Caddy catch टोकन अंदर साइट टोकन बाहर, subnet से चुना PDM answers सीमित टोकन से 8443 loopback पर हर साइट के लिए एक बूट इमेज, एक DNS रिकॉर्ड और एक DHCP सर्विस तैयार डिज़ाइन। हर साइट एक ही इमेज बूट करती है। Caddy subnet से पहचानता है कि अनुरोध किस साइट से आया और PDM को उस साइट का टोकन देता है, और PDM सिर्फ़ उसी टोकन तक सीमित answers देता है। PDM 1.1 अपने दम पर ज़्यादातर रास्ता तय कर लेता है। यह दो जगह कम पड़ता है, और इसके इर्द-गिर्द rollout की योजना बनाने से पहले दोनों जानने लायक़ हैं: इसके पास किसी answer को साइट से मैच करने का कोई तरीक़ा नहीं है, और किसी नए नोड को first-boot स्क्रिप्ट देने का कोई तरीक़ा नहीं है। यह पोस्ट दोनों को PDM के अपने source से साबित करती है, पहली के लिए रास्ता निकालती है, और पूरी चीज़ मेरे lab के PDM पर बनाती है जो 1.1.9 चला रहा है, proxy को इतना मज़बूत करके कि सीक्रेट रखने वाले हिस्से बंद रहें।\nPDM 1.1 आपको क्या देता है यह फ़ीचर Remotes → Automated Installations के नीचे है और इसके तीन हिस्से हैं: installations, prepared answers और authentication tokens2। Prepared answer installer के answer.toml का PDM वाला रूप है, जो हाथ से लिखने के बजाय एक फ़ॉर्म से भरा जाता है।\nहिस्सा क्या करता है काम की बारीकी Prepared answers देश, कीबोर्ड, time zone, root पासवर्ड hash, SSH कीज़, नेटवर्क, डिस्क लेआउट, subscription key, इंस्टॉल के बाद की कार्रवाई हर अनुरोध के लिए नए सिरे से बनता है Target filters तय करते हैं कि किस मशीन को कौन सा answer मिले installer की system information में JSON Pointer, वैल्यू के लिए glob3 Templating FQDN, admin email, IP, gateway और DNS फ़ील्ड में MiniJinja installation_nr जैसे counter हर बार answer दिए जाने पर बढ़ते हैं4 Authentication tokens installer Authorization: Bearer \u0026lt;name\u0026gt;:\u0026lt;secret\u0026gt; भेजता है PDM के API टोकन से अलग किस्म का टोकन; हर answer उन टोकन की सूची रखता है जिन्हें वह स्वीकार करता है2 Installations हर अनुरोध का एक रिकॉर्ड, पूरी system information के साथ post-install webhook के वापस कॉल करने पर in progress से finished हो जाता है Permissions देखने के लिए Sys.Audit, बदलने के लिए Sys.Modify दोनों /system/auto-installation पर4 Installer वाला हिस्सा कुछ समय से मौजूद है। proxmox-auto-install-assistant prepare-iso कमांड एक ऐसा ISO बनाता है जो अपना answer HTTP से लाता है, और Proxmox VE 9.2 ISO से यह वह kernel, initrd, ISO और boot.ipxe भी बना सकता है जो iPXE को पूरी चीज़ नेटवर्क पर बूट करने के लिए चाहिए5।\nCounter वह हिस्सा है जिसके जैसा अकेले answer.toml में कुछ नहीं। एक prepared answer अपने बनाए हर होस्ट को नंबर देता है, जबकि एक स्थिर फ़ाइल को हर मशीन के लिए कॉपी करना पड़ता। यह एक असली कदम आगे है, और फिर भी यह पहला प्रयास है। फ़ॉर्म अभी अकेली answer फ़ाइल के बराबर नहीं है6, और एक हिस्सा पूरी तरह ग़ायब है: 1.1 में किसी भी रूप में first-boot स्क्रिप्ट नहीं है7। वह कमी, और वह साइट जिस पर यह मैच नहीं कर सकता, अगले दो हिस्से हैं।\nयह साइट पर मैच नहीं कर सकता PDM किसी answer को इस तरह चुनता है कि installer जो system information भेजता है, उससे फ़िल्टर की तुलना करता है। तो सवाल यह है कि उस दस्तावेज़ में क्या है, क्योंकि जो उसमें नहीं है उस पर मैच नहीं हो सकता।\nKey क्या रखती है क्या यह साइट बता सकती है? product fullname, product (pve, pbs, pmg), enable_btrfs नहीं iso release, isorelease नहीं dmi system, baseboard और chassis: नाम, serial, UUID, SKU, asset tag तभी, अगर किसी ने asset tag में साइट लिख दी हो network_interfaces {link, mac} की एक सूची सिर्फ़ उस inventory के ज़रिए जो आप ख़ुद रखते हैं बस इतना ही है8,9। कोई एड्रेस नहीं, कोई hostname नहीं, कोई DHCP option नहीं, इस बारे में कुछ नहीं कि बॉक्स कहाँ प्लग है।\nDesktop Management Interface (DMI) फ़ील्ड तब तक आशाजनक लगते हैं जब तक आप असली वाले नहीं पढ़ते। मेरे lab का हर इंस्टॉल system name Standard PC (Q35 + ICH9, 2009) और ख़ाली serial और asset tag के साथ लौटा। असली सर्वर इन्हें भरते हैं, पर उससे जो vendor ने डाला, आपके ग्राहक के नाम से नहीं, और serial या MAC एड्रेस पर मैच करना तभी काम करता है जब आप हर उस chassis की सूची रखें जो आप कभी इंस्टॉल करेंगे, जो ठीक वही हिसाब-किताब है जिसे यह हटाने वाला था। हर होस्ट के लिए, हाँ। हर साइट के लिए, नहीं।\nतो बॉक्स किस नेटवर्क में प्लग है? PDM को कभी पता नहीं चलता। Installer जब भेजता है तब उसके हाथ में उसकी DHCP lease होती है, और किसी नए नोड के बारे में MSP जो एक बात पक्के तौर पर जानता है, वही वह पीछे छोड़ देता है। Source एड्रेस पर मैच करना, IPv4 हो या IPv6, एक खुला feature request है, और मैंने इसे ख़ुद bug 8263 के रूप में उठाया10।\nचुनने के नियमों में एक दूसरी सीमा छिपी है, और मेरा lab सीधे उसमें जा गिरा।\nPDM answer कैसे चुनता है 1. टोकन सही है? चालू, expire नहीं no लगभग आधे सेकंड बाद 401 रिकॉर्ड नहीं 2. उस टोकन के answers फ़ाइल के क्रम में, और कुछ नहीं 3. सारे फ़िल्टर मैच? सिर्फ़ strings, glob चलते हैं पहला answer render हुआ उसका हर counter 1 बढ़ता है कोई नहीं 4. इस टोकन पर default? पूरे PDM में एक default no 400: no answer file found Installations में रिकॉर्ड PDM का चुनाव, source से। टोकन पहले जाँचा जाता है और उसके बाद की हर चीज़ को सीमित करता है, default answer समेत। टोकन पहले जाँचा जाता है, और सिर्फ़ उसी टोकन पर अधिकृत answers पर विचार होता है, default समेत4। PDM पूरे सिस्टम में ठीक एक default answer की अनुमति देता है। इसलिए default flag से आप हर साइट को उसका अपना fallback नहीं दे सकते। मेरे lab में अपने ही टोकन पर fallback नाम का एक default answer था, और वह एक बार भी नहीं दिया गया, क्योंकि वह टोकन कभी कुछ भेजता ही नहीं। इसके बजाय हर साइट को अपने टोकन पर एक catch-all फ़िल्टर चाहिए, जैसे /product/product=*, फ़ाइल में सबसे आख़िर में रखा हुआ।\nउसी कोड से दो और बातें जो डिबग करते समय दिमाग़ में रखने लायक़ हैं:\nफ़ाइल के क्रम में पहला मैच जीतता है, और दूसरा मैच सिर्फ़ एक warning लॉग करता है। 1.1.1 से यही नियम है11। फ़िल्टर सिर्फ़ strings पर मैच करता है। /product/enable_btrfs एक boolean है और कभी किसी चीज़ से मैच नहीं करता, और array को index चाहिए, जैसे /network_interfaces/0/mac। 1.1.9 पर अनजान या expire हो चुके टोकन को लगभग आधे सेकंड की जानबूझकर देरी के बाद 401 मिलता है और कोई रिकॉर्ड नहीं बनता। सही टोकन पर कुछ मैच न हो तो body no answer file found के साथ 400 मिलता है, और उस कोशिश का रिकॉर्ड बनता है, पूरी system information के साथ। किसी नए chassis के असली serial और MAC एड्रेस पढ़ने का, उसके लिए फ़िल्टर लिखने से पहले, यही रिकॉर्ड सबसे तेज़ तरीक़ा है।\nयह first-boot स्क्रिप्ट नहीं चला सकता Installer ख़ुद first-boot हुक को सपोर्ट करता है। एक answer में [first-boot] सेक्शन हो सकता है, source = \u0026quot;from-iso\u0026quot; या \u0026quot;from-url\u0026quot; के साथ, before-network, network-online या fully-up के क्रम के साथ, और एक वैकल्पिक certificate fingerprint के साथ9। prepare-iso --on-first-boot from-iso वाले मामले के लिए ISO में एक स्क्रिप्ट डाल देता है।\nPDM वह सेक्शन कभी नहीं भेजता। एक बार भी नहीं। Installer के अपने answer type में यह फ़ील्ड है, first_boot: Option\u0026lt;FirstBootHookInfo\u0026gt;12। PDM के prepared answer में इसके लिए कोई फ़ील्ड ही नहीं है, और उससे answer बनाने वाला कोड बिना किसी शर्त के first_boot: None लिखता है4। फ़ॉर्म में कुछ नहीं, API में कुछ नहीं, और कॉन्फ़िग फ़ाइल में कुछ नहीं जो आप हाथ से जोड़ सकें। यह एक खुला feature request है, bug 7699, जून 2026 में दर्ज हुआ और यह लिखे जाने तक किसी को सौंपा नहीं गया7। लगभग पाँच महीने बाद भी इस पर Proxmox का कोई जवाब नहीं आया, और 8263 पर भी नहीं। चिंता की बात यही चुप्पी है। जिसने समय निकालकर लिखा कि आपका product कैसे बेहतर हो सकता है, वह एक जवाब का हक़दार है, भले ही जवाब ना हो, और यह आम पेशेवर शिष्टाचार है। और भी ज़्यादा तब, जब लिखने वाले पैसे देने वाले ग्राहक और partner हैं, जो अपना समय भी लगाने से पहले ही product में पैसा लगा रहे हैं।\nऔर ISO पर रखी स्क्रिप्ट आपको नहीं बचाती। Installer first-boot सर्विस सिर्फ़ if let Some(first_boot) = \u0026amp;answer.first_boot होने पर सेट करता है, और embed की गई फ़ाइल को कभी पढ़ने वाला यही अकेला रास्ता है13। जब आप ऐसी स्क्रिप्ट embed करते हैं जिसे कोई answer कभी नहीं माँगेगा, तो prepare-iso कोई चेतावनी नहीं देता। वह ISO पर पड़ी रहती है और कुछ नहीं करती।\nfirst-boot वाली कमी ISO पर स्क्रिप्ट prepare-iso --on-first-boot PDM का answer first_boot: None, हमेशा Installer first-boot हुक सेट करता है सिर्फ़ तब, जब answer में हो [first-boot] स्क्रिप्ट ISO पर ही रहती है और बिना चेतावनी कभी नहीं चलती दोनों आधे installer तक पहुँचते हैं, और PDM वाला आधा कभी हुक नहीं माँगता। ISO पर रखी स्क्रिप्ट बेकार का बोझ है। MSP के लिए यह किसी और से ज़्यादा मायने रखता है। Installer से निकला नोड एक ख़ाली सिस्टम है जिसमें hash किया हुआ root पासवर्ड और कुछ SSH कीज़ हैं। वह PDM remote नहीं है, किसी क्लस्टर में नहीं है, और उस पर आपकी monitoring, repositories या storage में से कुछ भी नहीं है। मेरे lab में तीनों नोड पूरे हुए और वापस कॉल किया, और PDM में SITEA remote को उसके बाद भी हाथ से जोड़ना पड़ा।\nइसलिए किसी नोड को पूरा करने के लिए आप जो भी इस्तेमाल करें, Ansible हो या कुछ और, उसे बाहर से चलाना होगा: post-installation webhook से, Installations सूची पर नज़र रखने वाले किसी job से, या किसी इंसान से। मैं इसे यहीं छोड़ रहा हूँ। यह पोस्ट इस बारे में है कि एक PXE सेटअप हर साइट को कैसे सेवा दे, और first-boot वाली कमी एक सीमा है जिसके हिसाब से योजना बनानी है, ऐसी नहीं जिसे मैं यहाँ लीप-पोत कर छिपाऊँ।\nटोकन ही साइट है PDM साइट नहीं देख सकता, पर वह answers को टोकन से सीमित करता है, और टोकन बस एक header है। जो header सेट करता है, वही चुनता है कि installer को answers का कौन सा सेट मिल सकता है। पूरी तरकीब यही है।\nतो PDM के सामने कुछ ऐसा रखिए जो जानता हो कि अनुरोध कहाँ से आया:\nबूट इमेज में एक catch टोकन है, catch-all:not-a-secret, जो हर इमेज में एक जैसा है और यहीं छपा है। यह PDM टोकन नहीं है और अपने दम पर कुछ नहीं खोलता। PDM के सामने एक Caddy reverse proxy उस answer अनुरोध का source subnet देखता है जिसमें catch टोकन है, और header को उस साइट के असली टोकन से बदल देता है। PDM site2-2026q4:\u0026lt;secret\u0026gt; देखता है और सिर्फ़ site2 के answers देता है। सीक्रेट कभी बूट इमेज के पास नहीं जाता, इसलिए खोई हुई USB stick या कॉपी किया गया ISO किसी को कुछ नहीं देता। किसी साइट का टोकन बदलना Caddy में बदलाव है, इमेज को दोबारा बनाना नहीं। और एक साइट जोड़ना Caddy कॉन्फ़िग की एक लाइन और PDM में एक नया टोकन है।\nयह इस बात पर टिका है कि source एड्रेस ईमानदार हो, जो आपके नेटवर्क का गुण है, proxy का नहीं। वह समझौता और बाक़ी समझौते नीचे “क्या तय करना बाक़ी है” में दिए गए हैं।\nइंस्टॉलर बिना बेक किए URL के PDM को कैसे ढूँढता है हर साइट के लिए एक इमेज तभी काम करती है जब इमेज में PDM का एड्रेस भी न हो। Installer अपना answer URL तीन जगहों पर, इस क्रम में, ढूँढता है14:\nInstaller अपना answer URL कहाँ पाता है 1. ISO में बेक किया URL? prepare-iso --url हाँ इस्तेमाल, DHCP और DNS से कुछ नहीं पूछा हर PDM की एक इमेज: यहाँ इससे बचे no 2. DHCP option 250? installer की lease से पढ़ा हाँ इस्तेमाल, fingerprint के लिए option 251 के साथ: यहाँ नहीं भेजा नहीं, या कोई DHCP error 3. DNS TXT lookup resolv.conf से search domain proxmox-auto-installer.example.doc URL और fingerprint, दोनों DNS से Installer जिस क्रम का पालन करता है। इमेज से URL हटा दें और कहीं option 250 न भेजें, तो हर साइट DNS तक पहुँच जाती है। नियम कोड क्या करता है आपके लिए इसका मतलब क्रम ISO में URL हो तो वह जीतता है; नहीं तो DHCP; DHCP की कोई भी विफलता DNS पर लौटती है14 इमेज को --url के बिना बनाइए, और कहीं भी option 250 मत भेजिए रिकॉर्ड के नाम URL के लिए proxmox-auto-installer.\u0026lt;search domain\u0026gt;, fingerprint के लिए proxmox-auto-installer-cert-fingerprint.\u0026lt;search domain\u0026gt; एक zone, दो TXT रिकॉर्ड Search domain /etc/resolv.conf की पहली search लाइन, एक space पर बाँटी गई ठीक एक domain दीजिए; दो मिलकर एक अमान्य नाम बन जाते हैं कोई domain नहीं Could not find search domain in resolv.conf. के साथ विफल जाँचिए कि DHCP option 15 या 119 भेजा जा रहा है TXT वैल्यू dig txt +short, हर \u0026quot; हटाया गया, फिर trim कई strings में बँटी TXT वैल्यू URL में एक space छोड़ देती है; उसे एक string रखिए Fingerprint DNS से तभी लिया जाता है जब URL भी DNS से आया हो और कोई बेक न किया गया हो PDM का certificate fingerprint प्रकाशित कीजिए, जो Caddy भी देता है टोकन Authorization: Bearer \u0026lt;token\u0026gt; के रूप में भेजा जाता है, ISO पर plain text में रखा जाता है9 इसीलिए इमेज में सिर्फ़ catch टोकन होता है Installer जिस certificate को जाँचता है, वह वही है जो 443 पर जवाब देता है। इस डिज़ाइन में Caddy वहाँ PDM का अपना certificate देता है, इसलिए client को 443 पर वही certificate दिखता है जो PDM का 8443 पर है, और प्रकाशित करने के लिए एक ही fingerprint है।\nबनाना: PDM, बूट फ़ाइलें और DNS उदाहरण domain example.doc और तीन साइटों, 10.10.50.0/24, 10.20.50.0/24 और 10.30.50.0/24, का इस्तेमाल करते हैं। .doc असली top-level domain नहीं है, इसलिए अपना वाला लगाइए। PDM, Caddy, dnsmasq और बूट फ़ाइलें सब एक होस्ट पर हैं, 10.10.50.10 पर pdm.example.doc, और दूर की साइटें अपने gateways पर एक DHCP relay के ज़रिए उस तक पहुँचती हैं। मैनेजमेंट 10.99.0.0/24 पर है और, इसलिए, वही अकेला नेटवर्क है जो कभी PDM का वेब UI देखता है।\nPDM में टोकन और answers Remotes → Automated Installations → Authentication Tokens के नीचे हर साइट के लिए एक टोकन जोड़िए और उसे आपकी rollout अवधि से मेल खाती expiry दीजिए। नाम गुप्त नहीं है, और आप उसे लॉग में देखेंगे, इसलिए उसे कुछ कहने दीजिए: site1-2026q4। जब सीक्रेट दिखे तो उसे कॉपी कर लीजिए।\nफिर हर साइट और हर product के लिए एक prepared answer जोड़िए, सिर्फ़ उसी साइट के टोकन पर अधिकृत:\nफ़ील्ड site1, Proxmox VE अधिकृत टोकन site1-2026q4 Target filter /product/product=pve देश, कीबोर्ड, time zone gb, en-gb, Europe/London Root एक्सेस SSH कीज़, और फ़ॉर्म से सेट किया गया पासवर्ड, जिसे PDM सिर्फ़ hash के रूप में रखता और भेजता है4 नेटवर्क DHCP, इंटरफ़ेस के नाम pin किए हुए FQDN {{ product.product }}-site1-{{ installation_nr }}.example.doc डिस्क आपका लेआउट, उदाहरण के लिए दो नामित डिस्कों पर ZFS mirror Post-installation webhook base URL https://pdm.example.doc, PDM के certificate fingerprint के साथ हर बार answer दिए जाने पर counter बढ़ता है, retries समेत, इसलिए नामों में नंबर छूट सकते हैं। तीन पूरे इंस्टॉल के बाद मेरे lab का counter 4 पर है। अगर आपको अनुमान लगाने लायक़ नाम चाहिए, तो FQDN from DHCP इस्तेमाल कीजिए और host name DHCP reservation पर रखिए।\nइस डिज़ाइन के लिए webhook base URL ही वह एक सेटिंग है जिसे बदलना पड़ता है। उसे पोर्ट 8443 पर ख़ुद PDM की ओर करना स्वाभाविक है, मेरे lab में यही था, और 8443 बंद होने वाला है। उसे Caddy की ओर कीजिए।\nबूट फ़ाइलें Proxmox repository वाले किसी भी Proxmox VE या Debian होस्ट पर:\napt install proxmox-auto-install-assistant xorriso mkdir -p /srv/www/pve-9.2 proxmox-auto-install-assistant prepare-iso proxmox-ve_9.2-1.iso \\ --fetch-from http \\ --answer-auth-token \u0026#39;catch-all:not-a-secret\u0026#39; \\ --pxe-loader ipxe \\ --output /srv/www/pve-9.2/ कोई --url नहीं, क्योंकि उसे DNS देता है। --pxe-loader ipxe का मतलब --pxe है, और --pxe के साथ आउटपुट एक ऐसी directory होनी चाहिए जो पहले से मौजूद हो15। आपको चार फ़ाइलें मिलती हैं: vmlinuz, initrd.img जो zstd से gzip में दोबारा compress किया गया है क्योंकि iPXE zstd initrd लोड नहीं कर सकता, /boot हटाया हुआ prepared ISO, और एक boot.ipxe मेन्यू जो दस सेकंड बाद automated install पर चला जाता है और बाक़ी फ़ाइलों को relative नाम से बुलाता है15। चारों को एक directory में रखिए।\nहर target में kernel, initrd और पूरा ISO रखने लायक़ memory होनी चाहिए। Proxmox VE 9.2 के notes इसे “at least 6 GiB of available memory on the host” बताते हैं5। वही notes 9.2 ISO के kernel की megaraid_sas controllers और JBOD (just a bunch of disks) मोड में कुछ NVMe ड्राइव के साथ एक ज्ञात समस्या बताते हैं, इस सलाह के साथ कि 9.1 ISO से इंस्टॉल करके upgrade करें5। नेटवर्क वाले रास्ते पर भरोसा करने से पहले अपना हार्डवेयर टेस्ट कीजिए।\nDNS रिकॉर्ड उस zone में जो DHCP के दिए एकमात्र search domain से मेल खाता है:\n$ORIGIN example.doc. pdm IN A 10.10.50.10 proxmox-auto-installer IN TXT \u0026#34;https://pdm.example.doc/api2/json/auto-install/answer\u0026#34; proxmox-auto-installer-cert-fingerprint IN TXT \u0026#34;63:C4:D6:...:85:07\u0026#34; Fingerprint PDM का अपना certificate है:\nopenssl x509 -in /etc/proxmox-datacenter-manager/auth/api.pem -noout -fingerprint -sha256 उन्हें वैसे ही जाँचिए जैसे installer जाँचेगा:\ndig txt +short proxmox-auto-installer.example.doc @10.10.50.10 # one quoted string, nothing split Caddy, PDM का इकलौता दरवाज़ा PDM का API [::]:8443 पर सुनता है, और यह binary में compile किया हुआ एक स्थिरांक है, कोई सेटिंग नहीं16। आप इसे loopback पर bind नहीं कर सकते। इसलिए Caddy अंदर आने का इकलौता रास्ता बनता है, और फ़ायरवॉल इसे पक्का करता है।\nPDM के सामने Caddy के routes अनुरोध क्या होता है answer POST, साइट subnet, catch टोकन उस साइट के टोकन में बदला post-hook POST, साइट subnet Authorization हटाया, आगे भेजा वेब UI या API, मैनेजमेंट subnet बिना छेड़े, PDM लॉगिन बाक़ी सब, कहीं से भी abort, PDM तक कभी नहीं पोर्ट 8443, बॉक्स के बाहर से nftables से drop Caddy को दिखने वाला हर अनुरोध पाँच में से किसी एक जगह ख़त्म होता है। सिर्फ़ पहले तीन कभी PDM तक पहुँचते हैं। PDM के ठीक दो routes हैं जो PDM लॉगिन के बिना काम करते हैं: installer टोकन के साथ POST /api2/json/auto-install/answer, और body में एक बार वाले टोकन के साथ POST …/installations/{uuid}/post-hook4। किसी provisioning नेटवर्क को सिर्फ़ इन्हीं दो तक पहुँचना चाहिए।\nCaddy 2.11.1 या उसके बाद का इस्तेमाल कीजिए। 2.11.1 ने एक path-matcher bypass, CVE-2026-27587, ठीक किया, जो ठीक उसी तरह की path gating है जिस पर यह निर्भर है17। Debian 13 का अपना पैकेज 2.6.2 है, इसलिए इसे trixie-backports से लीजिए, जिसमें 2.11.2 है, या Caddy की अपनी repository से18।\nCaddyfile, /etc/caddy/Caddyfile:\n{ # the admin API on a socket only root can open, never on TCP admin unix//run/caddy/admin.sock|0600 auto_https disable_redirects servers { protocols h1 h2 } } # PDM itself, on the loopback, trusted by its own certificate (pdm_upstream) { reverse_proxy https://[::1]:8443 { transport http { tls_trust_pool file /etc/proxmox-datacenter-manager/auth/api.pem tls_server_name pdm.example.doc } } log_append pdm_status {http.reverse_proxy.status_code} } # one site: name, subnet, PDM token name, PDM token secret (site) { @{args[0]} { method POST path /api2/json/auto-install/answer remote_ip {args[1]} header Authorization \u0026#34;Bearer catch-all:not-a-secret\u0026#34; } handle @{args[0]} { log_append site {args[0]} log_append pdm_token {args[2]} request_header Authorization \u0026#34;Bearer {args[2]}:{args[3]}\u0026#34; import pdm_upstream } } pdm.example.doc, 10.10.50.10 { tls /etc/proxmox-datacenter-manager/auth/api.pem /etc/proxmox-datacenter-manager/auth/api.key import site site1 10.10.50.0/24 site1-2026q4 {env.PDM_SECRET_SITE1} import site site2 10.20.50.0/24 site2-2026q4 {env.PDM_SECRET_SITE2} import site site3 10.30.50.0/24 site3-2026q4 {env.PDM_SECRET_SITE3} @post_hook { method POST path /api2/json/auto-install/installations/*/post-hook remote_ip 10.10.50.0/24 10.20.50.0/24 10.30.50.0/24 } handle @post_hook { request_header -Authorization import pdm_upstream } # the PDM web UI and API, from the management network only @mgmt remote_ip 10.99.0.0/24 handle @mgmt { import pdm_upstream } # anything else, from anywhere, never reaches PDM handle { abort } log { output file /var/log/caddy/pdm.log format filter { request\u0026gt;headers\u0026gt;Csrfpreventiontoken replace REDACTED } } } # boot files, to the sites and management only http://:80 { @hidden path_regexp /\\. handle @hidden { abort } @boot remote_ip 10.10.50.0/24 10.20.50.0/24 10.30.50.0/24 10.99.0.0/24 handle @boot { root * /srv/www file_server } handle { abort } } जो हिस्से सुरक्षा का काम कर रहे हैं, और हर एक वहाँ क्यों है:\nलाइन क्यों site matcher में header Authorization \u0026quot;Bearer catch-all:not-a-secret\u0026quot; इसके बिना साइट subnet से कोई भी POST असली टोकन पा जाता है; अनुरोध सही subnet से आना चाहिए और उसमें catch टोकन होना चाहिए request_header Authorization … header सेट करता है, client ने जो भी भेजा उसे ओवरराइट करते हुए, इसलिए नक़ली टोकन बदल दिया जाता है, कभी आगे नहीं भेजा जाता19 remote_ip सीधा peer; installers और Caddy के बीच कोई NAT या load balancer मत रखिए20 नामित handle blocks लिखे गए क्रम में रखे जाते हैं और आपस में अलग-अलग हैं, इसलिए बिना नाम वाला handle { abort } आख़िरी शब्द है21 @mgmt पूरा PDM UI और API, बिना छेड़े, ताकि PDM का अपना लॉगिन, API टोकन और cookies सामान्य रूप से काम करें; साइट subnet को इसमें से कुछ नहीं मिलता admin unix//…|0600 admin API का डिफ़ॉल्ट TCP localhost:2019 है, बिना किसी authentication के22 protocols h1 h2 Caddy डिफ़ॉल्ट रूप से HTTP/3 के लिए UDP 443 पर सुनता है22; यह उसे बंद करता है, बजाय ऐसा पोर्ट खुला छोड़ने के जिसे किसी ने खोलना नहीं चाहा @hidden file_server अपने root के नीचे की हर फ़ाइल देता है, dot फ़ाइलें भी, और hide के बारे में दस्तावेज़ कहता है कि वह security boundary नहीं है23 Csrfpreventiontoken replace REDACTED Caddy अपने access log में डिफ़ॉल्ट रूप से Authorization और Cookie को redact करता है, पर PDM के CSRF header को नहीं24 Path matcher PDM से ज़्यादा उदार है, और यही सही दिशा है। मैच करने से पहले Caddy path को साफ़ करता है, percent-encoding decode करता है, दोहराए गए slash मिलाता है और case को अनदेखा करता है20। इसलिए //answer, %61nswer और ANSWER सब answer route गिने जाते हैं, और /api2/extjs/… वाला रूप या आख़िर का slash किसी साइट route से मैच नहीं करता और abort तक गिर जाता है।\nउसमें दो फ़ैसलों को समझाने की ज़रूरत है।\nCaddy PDM का certificate देता है, सीधे PDM की फ़ाइलों से। Caddy api.pem और api.key वहीं से पढ़ता है जहाँ PDM उन्हें रखता है, इसलिए installers, webhook और browser सब वही certificate देखते हैं जो PDM 8443 पर दिखाता है, और भटकने के लिए कोई दूसरी कॉपी नहीं। उसे यह एक्सेस देने का सीधा तरीक़ा है caddy यूज़र को www-data में जोड़ना। अपने lab में मैंने जाँचा कि वह group membership असल में किन चीज़ों तक पहुँचती है, हर फ़ाइल को caddy यूज़र के रूप में टेस्ट करके:\n/etc/proxmox-datacenter-manager/ के नीचे फ़ाइल www-data में caddy पढ़ सकता है remotes.shadow, हर managed remote की credentials हाँ autoinst/tokens.shadow, installer टोकन का हर सीक्रेट हाँ auth/api.key, auth/csrf.key हाँ access/user.cfg, subscriptions/ हाँ उस सूची में कुछ भी किसी वेब proxy के आस-पास होने लायक़ नहीं। तब proxy का कोई bug PDM के संभाले हर क्लस्टर का compromise होगा।\nइसलिए Caddy www-data से बाहर रहता है और उसे ठीक उन दो फ़ाइलों पर ACL मिलता है जिनकी उसे ज़रूरत है, साथ में उनके ऊपर की दो directories से गुज़रने की अनुमति, उन्हें list किए बिना:\n#!/bin/sh # /usr/local/sbin/pdm-cert-acl # let Caddy read PDM\u0026#39;s certificate and key in place, and nothing else of PDM\u0026#39;s set -e D=/etc/proxmox-datacenter-manager; A=$D/auth setfacl -m u:caddy:x \u0026#34;$D\u0026#34; \u0026#34;$A\u0026#34; setfacl -m u:caddy:r \u0026#34;$A/api.pem\u0026#34; \u0026#34;$A/api.key\u0026#34; उसे चलाने के बाद lab पर caddy यूज़र के रूप में टेस्ट किया:\nPath caddy auth/api.pem, auth/api.key पढ़ सकता है auth/csrf.key, auth/authkey.key, auth/authkey.pub नहीं पढ़ सकता remotes.shadow, remotes.cfg, autoinst/tokens.shadow, access/user.cfg नहीं पढ़ सकता auth/ को list करना मना पेच renewal का है। PDM नया certificate एक नई फ़ाइल में लिखता है और उसे rename करके जगह पर रखता है, और नई फ़ाइल में पुरानी का ACL नहीं होता। इसलिए जब PDM renew करता है, systemd ACL वापस लगाता है और Caddy को reload करता है, किसी के कुछ किए बिना।\nयह जाँच कि certificate और key एक-दूसरे के हैं, क्योंकि renewal उन्हें एक-एक करके लिखता है:\n#!/bin/sh # /usr/local/sbin/pdm-cert-pair-ok # exit 0 only when PDM\u0026#39;s certificate and key belong together d=/etc/proxmox-datacenter-manager/auth c=$(openssl x509 -noout -pubkey -in \u0026#34;$d/api.pem\u0026#34;) || exit 1 k=$(openssl pkey -pubout -in \u0026#34;$d/api.key\u0026#34;) || exit 1 [ \u0026#34;$c\u0026#34; = \u0026#34;$k\u0026#34; ] दोनों फ़ाइलों पर नज़र रखने वाला एक path unit, और वह सर्विस जिसे वह शुरू करता है:\n# /etc/systemd/system/caddy-pdm-cert.path [Unit] Description=Watch the PDM certificate and key for renewal [Path] PathChanged=/etc/proxmox-datacenter-manager/auth/api.pem PathChanged=/etc/proxmox-datacenter-manager/auth/api.key Unit=caddy-pdm-cert.service [Install] WantedBy=multi-user.target # /etc/systemd/system/caddy-pdm-cert.service [Unit] Description=Let Caddy read the renewed PDM certificate in place, then reload Caddy [Service] Type=oneshot ExecCondition=/usr/local/sbin/pdm-cert-pair-ok ExecStart=/usr/local/sbin/pdm-cert-acl ExecStart=/usr/bin/systemctl try-reload-or-restart caddy.service apt install acl systemctl daemon-reload systemctl enable --now caddy-pdm-cert.path आगे का override हर Caddy start से पहले वही ACL स्क्रिप्ट चलाता है, ताकि Caddy के रुके रहते हुआ renewal कभी छूटे नहीं।\nजिन बारीकियों से यह काम करता है, हर एक जाँची हुई:\nहिस्सा क्यों दोनों फ़ाइलों पर नज़र पहला write unit को चलाता है; जब तक जोड़ी मेल नहीं खाती, शर्त उसे छोड़ देती है, और दूसरा write मेल खाती जोड़ी के साथ उसे फिर चलाता है ExecCondition विफल शर्त run को फ़ेल करने के बजाय छोड़ देती है, इसलिए आधा लिखा renewal कभी Caddy तक नहीं पहुँचता25 PathChanged तब चलता है जब लिखने के लिए खुली नज़र वाली फ़ाइल बंद होती है26; lab पर यह तब भी चला जब नई फ़ाइल को पुरानी के ऊपर rename किया गया हर run पर ACL स्क्रिप्ट rename करके लाई गई फ़ाइल में कोई ACL नहीं होता, इसलिए स्क्रिप्ट दोबारा चलने तक Caddy उसे पढ़ नहीं सकता try-reload-or-restart Caddy चल रहा हो तो reload करता है, न चल रहा हो तो कुछ नहीं करता Caddy के unit में reload --force --force के बिना Caddy वही कॉन्फ़िग देखता है और पुराना certificate देता रहता है वह आख़िरी पंक्ति अंदाज़ा नहीं है। एक अस्थायी Caddy 2.11.7 container में मैंने चलते सर्वर के पीछे certificate फ़ाइल बदली: सादे caddy reload ने पुराना certificate देना जारी रखा, और caddy reload --force ने नया दिया। पैकेज वाला unit पहले से --force के साथ reload करता है27, इसलिए अगर आप ExecReload override करें तो वह लाइन रखिए।\nLab पर मैंने PDM की api.key और api.pem उसी तरह बदलीं जैसे renewal करता है, नई फ़ाइलें लिखकर और उन्हें पुरानी के ऊपर rename करके। Rename के ठीक बाद api.key में caddy के लिए कोई ACL एंट्री नहीं थी। चार सेकंड के अंदर path unit चल चुका था, दोनों फ़ाइलों पर ACL वापस था, और Caddy उसी process ID के साथ अपनी जगह reload हो चुका था।\nटोकन का नाम और सीक्रेट अलग रखे जाते हैं। नाम Caddyfile में जाता है, जहाँ वह लॉग होता है। सीक्रेट एक environment फ़ाइल में जाता है जिसे सिर्फ़ root पढ़ सकता है, और Caddy उसे request के समय {env.*} से पढ़ता है।\nलॉग करें कि कौन सा टोकन इस्तेमाल हुआ, सीक्रेट कभी नहीं मेरे lab का इसका पहला रूप leak करता था। Caddy का पैकेज वाला unit इसे caddy run --environ के रूप में शुरू करता है, और --environ शुरू होने से पहले पूरा environment छाप देता है28,27। हर restart ने साइट टोकन को journal में साफ़ लिखावट में डाल दिया: जब तक मैंने गिना, उसकी आठ लाइनें हो चुकी थीं। Access log में कुछ नहीं, PDM के अपने लॉग में कुछ नहीं, सब उसी एक flag से।\nटोकन सीक्रेट और टोकन का नाम कहाँ जाते हैं सीक्रेट pdm-secrets.env सिर्फ़ root, 0600 Caddy का environment {env.PDM_SECRET_SITE1} Authorization header सिर्फ़ PDM तक का loopback hop नाम import लाइन, Caddyfile में access log, हर answer अनुरोध \"pdm_token\":\"site1-2026q4\" यहाँ कभी नहीं लिखा जाता journal --environ हटाया admin API unix socket, 0600 config dump सिर्फ़ placeholder सीक्रेट का एक काम है और एक रास्ता। जो आप लॉग करते हैं वह नाम है। इसलिए secrets फ़ाइल में सीक्रेट रहते हैं और कुछ नहीं:\ninstall -m 0600 /dev/null /etc/caddy/pdm-secrets.env printf \u0026#39;PDM_SECRET_SITE1=%s\\nPDM_SECRET_SITE2=%s\\nPDM_SECRET_SITE3=%s\\n\u0026#39; \\ \u0026#39;\u0026lt;secret1\u0026gt;\u0026#39; \u0026#39;\u0026lt;secret2\u0026gt;\u0026#39; \u0026#39;\u0026lt;secret3\u0026gt;\u0026#39; \u0026gt; /etc/caddy/pdm-secrets.env और unit override --environ हटाता है और admin socket को एक घर देता है:\n# systemctl edit caddy [Service] EnvironmentFile=/etc/caddy/pdm-secrets.env RuntimeDirectory=caddy RuntimeDirectoryMode=0700 # PDM\u0026#39;s certificate and key, read where PDM keeps them ExecStartPre=+/usr/local/sbin/pdm-cert-acl # the access log directory and its files belong to Caddy ExecStartPre=+/usr/bin/install -d -o caddy -g caddy -m 0750 /var/log/caddy ExecStartPre=+/usr/bin/chown -R caddy:caddy /var/log/caddy ExecStart= ExecStart=/usr/bin/caddy run --config /etc/caddy/Caddyfile ExecReload= ExecReload=/usr/bin/caddy reload --config /etc/caddy/Caddyfile --force + उन लाइनों को root के रूप में चलाता है, इससे पहले कि Caddy अपने यूज़र के रूप में शुरू हो। लॉग वाली लाइनें तब मायने रखती हैं जैसे ही कोई और चीज़ /var/log/caddy को छूती है: root का rotate किया हुआ लॉग, या टेस्ट करते समय हाथ से बनाई फ़ाइल, Caddy को अपना access log खोलने लायक़ नहीं छोड़ती। Lab पर मैंने pdm.log को root:root किया और Caddy restart किया; वह caddy:caddy के रूप में लौटा और Caddy ने कोई permission error लॉग नहीं की।\nइसे एडिट करने के बाद reload नहीं, restart कीजिए, क्योंकि reload environment दोबारा नहीं पढ़ता। {env.NAME} इस्तेमाल कीजिए, {$NAME} कभी नहीं: दूसरा रूप Caddyfile adapt होते समय बदला जाता है, इसलिए सीक्रेट JSON कॉन्फ़िग में, autosave फ़ाइल में और उन्हें dump करने वाली हर चीज़ में पहुँच जाता है29। यहाँ admin socket भी मायने रखता है। {env.*} process environment की किसी भी चीज़ को बिना allow-list के resolve करता है, इसलिए जो कोई TCP admin API के ज़रिए कॉन्फ़िग लोड कर सकता है, वह Caddy से कोई सीक्रेट पढ़वाकर अपने पास मँगा सकता है30।\nअब access log की हर answer लाइन साइट और टोकन का नाम बताती है, और header ख़ुद redact रहता है। Lab से, जहाँ दोनों का नाम siteA है:\n{\u0026#34;site\u0026#34;:\u0026#34;siteA\u0026#34;,\u0026#34;pdm_token\u0026#34;:\u0026#34;siteA\u0026#34;,\u0026#34;pdm_status\u0026#34;:400,\u0026#34;status\u0026#34;:400, \u0026#34;request\u0026#34;:{\u0026#34;headers\u0026#34;:{\u0026#34;Authorization\u0026#34;:[\u0026#34;REDACTED\u0026#34;]}}} मैंने इस पर भरोसा करने के बजाय इसे जाँचा। इस कॉन्फ़िग की podman कॉपी पर dummy सीक्रेट के साथ, और फिर lab पर, मैंने हर उस रास्ते से answers भेजे जो मैं सोच सका: सामान्य, debug logging चालू, 502 के लिए upstream बंद, एक reload और एक restart। फिर मैंने हर सीक्रेट को journal, access log, Caddy की config और data directories और adapt किए JSON में गिना। हर गिनती शून्य थी। Control run, यानी वही कॉन्फ़िग --environ के साथ शुरू किया गया, ने सीक्रेट दो बार छापा।\nउस टेस्ट से दो सावधानियाँ। debug चालू होने पर Caddy अपना पूरा adapt किया कॉन्फ़िग लॉग करता है, इसलिए catch टोकन और {env.*} placeholders वहाँ दिखते हैं; उनके पीछे की वैल्यू नहीं दिखीं। Production में debug वैसे भी बंद रखिए। और अगर कोई सीक्रेट पहले ही किसी journal से गुज़र चुका है, जैसे मेरा गुज़रा था, तो उसे PDM में दोबारा बनाइए और फ़ाइल अपडेट कीजिए; लॉग लाइनें मिटाना इसका इलाज नहीं है।\nफ़ायरवॉल: 8443 कभी बॉक्स से बाहर नहीं जाता मेरे lab में कोई फ़ायरवॉल था ही नहीं, इसलिए 8443 provisioning नेटवर्क के हर होस्ट को जवाब देता था और Caddyfile के हर नियम के चारों ओर से निकला जा सकता था। उसे बंद कीजिए। nftables, drop के डिफ़ॉल्ट के साथ:\n#!/usr/sbin/nft -f flush ruleset define SITES = { 10.10.50.0/24, 10.20.50.0/24, 10.30.50.0/24 } define MGMT = { 10.99.0.0/24 } table inet filter { chain input { type filter hook input priority filter; policy drop; iifname \u0026#34;lo\u0026#34; accept ct state established,related accept ct state invalid drop meta l4proto { icmp, ipv6-icmp } accept # PDM\u0026#39;s API listens on [::]:8443 and cannot be rebound tcp dport 8443 counter drop ip saddr $MGMT tcp dport { 22, 80, 443 } accept udp dport { 67, 69 } accept ip saddr $SITES meta l4proto { tcp, udp } th dport 53 accept ip saddr $SITES tcp dport { 80, 443 } accept } chain forward { type filter hook forward priority filter; policy drop; } } PDM के अपने remotes से कनेक्शन बाहर की ओर जाते हैं, इसलिए 8443 को अंदर की ओर बंद करने से वहाँ कुछ नहीं बदलता। पहली बार नया ruleset समय वाले rollback के साथ लोड कीजिए, ताकि कोई ग़लती आपको कंसोल तक जाने के बजाय नब्बे सेकंड की पड़े:\nsystemd-run --unit=nft-rollback --on-active=90 /usr/sbin/nft flush ruleset nft -f /etc/nftables.conf # still connected? then: systemctl stop nft-rollback.timer \u0026amp;\u0026amp; systemctl enable nftables Lab पर, यह सब करने के बाद:\nजाँच नतीजा मैनेजमेंट नेटवर्क से 8443 कोई कनेक्शन नहीं; drop counter बढ़ता हुआ मैनेजमेंट से, 443 पर Caddy के ज़रिए PDM वेब UI लॉग इन होता है और काम करता है साइट एड्रेस से PDM वेब UI abort catch टोकन के साथ साइट से answer POST साइट टोकन के साथ PDM तक पहुँचता है: जानबूझकर मैच न करने वाले probe को 400 no answer file found मिला वही probe सीधे PDM को, गढ़े हुए टोकन के साथ 401 catch टोकन के बिना answer POST, या /api2/extjs/… के रूप में abort जिन फ़ाइलों में PDM के सीक्रेट रहते हैं, caddy के रूप में पढ़ी गईं कोई भी पढ़ने लायक़ नहीं बदलाव के बाद से journal, access log या Caddy के data में साइट सीक्रेट 0 DHCP, iPXE और लूप सर्वर firmware अपनी पहली फ़ाइल सिर्फ़ TFTP से ला सकता है, इसलिए TFTP छोटा iPXE loader देता है और iPXE बाक़ी सब HTTP से लाता है। फँसाने वाली बात यह है कि iPXE अपना अलग DHCP अनुरोध भेजता है, और जो सर्वर उसका जवाब फिर से ipxe.efi से देता है, वह मशीन को हमेशा के लिए गोल-गोल घुमाता है। DHCP सर्वर को firmware और iPXE में फ़र्क़ करना होगा।\nसादा DHCP जवाब लूप क्यों बनाता है सादा जवाब: लूप firmware बूट फ़ाइल माँगता है जवाब: ipxe.efi iPXE शुरू होकर फिर माँगता है वही जवाब: ipxe.efi सर्वर firmware और iPXE में फ़र्क़ नहीं कर पाता, आगे नहीं बढ़ता iPXE को पहचानने वाला: चलता है firmware बूट फ़ाइल माँगता है iPXE नहीं: TFTP से ipxe.efi iPXE फिर माँगता है, option 175 के साथ जवाब: HTTP पर boot.ipxe URL kernel, initrd और ISO, फिर इंस्टॉल एक ही अनुरोध दो बार, एक ही जवाब दो बार। Option 175, जिसे सिर्फ़ iPXE भेजता है, वही तरीक़ा है जिससे सर्वर दूसरे अनुरोध को पहले से अलग पहचानता है। DHCP सर्वर लूप कैसे तोड़ता है dnsmasq option 175 वाले अनुरोधों को tag करता है, जिसे सिर्फ़ iPXE भेजता है, और उन्हें HTTP URL देता है31 ISC dhcpd if exists user-class and option user-class = \u0026quot;iPXE\u0026quot;32 FortiGate filename फ़ील्ड एक ही वैल्यू लेता है, इसलिए URL embed किया हुआ iPXE loader बनाइए और वही हर किसी को दीजिए dnsmasq, अपना नेटवर्क और बाक़ी दो relays के ज़रिए संभालता हुआ, सिर्फ़ reservations के साथ:\n# /etc/dnsmasq.d/pxe.conf local=/example.doc/ domain=example.doc address=/pdm.example.doc/10.10.50.10 txt-record=proxmox-auto-installer.example.doc,\u0026#34;https://pdm.example.doc/api2/json/auto-install/answer\u0026#34; txt-record=proxmox-auto-installer-cert-fingerprint.example.doc,\u0026#34;63:C4:D6:...:85:07\u0026#34; dhcp-authoritative dhcp-range=set:site1,10.10.50.0,static,255.255.255.0,1h dhcp-range=set:site2,10.20.50.0,static,255.255.255.0,1h dhcp-range=set:site3,10.30.50.0,static,255.255.255.0,1h dhcp-option=tag:site1,option:router,10.10.50.1 dhcp-option=tag:site2,option:router,10.20.50.1 dhcp-option=tag:site3,option:router,10.30.50.1 dhcp-option=option:dns-server,10.10.50.10 dhcp-option=option:domain-search,example.doc dhcp-match=set:ipxe,175 dhcp-match=set:efi64,option:client-arch,7 dhcp-match=set:efi64,option:client-arch,9 dhcp-boot=tag:efi64,tag:!ipxe,ipxe.efi dhcp-boot=tag:ipxe,http://pdm.example.doc/pve-9.2/boot.ipxe # no option 250 anywhere: DNS discovery depends on it enable-tftp tftp-root=/srv/tftp tftp-secure # TFTP block-size ceiling: lower it for an IPsec or other tunnel in the path tftp-mtu=1500 # dhcp-host=\u0026lt;mac\u0026gt;,\u0026lt;ip inside that site\u0026#39;s /24\u0026gt;,\u0026lt;hostname\u0026gt; dhcp-host=aa:bb:cc:dd:ee:01,10.10.50.21,pve01 dhcp-host=aa:bb:cc:dd:ee:02,10.20.50.21,pve01 static का मतलब है कोई pool नहीं: सिर्फ़ reserve की गई मशीनों को एड्रेस मिलता है, जो अनजान चीज़ों को installer वाले रास्ते से दूर रखता है। हर reservation का एड्रेस उसकी अपनी साइट के /24 के अंदर होना चाहिए, क्योंकि Caddy टोकन चुनने के लिए उसी एड्रेस का इस्तेमाल करता है। ग़लत subnet में reserve किया गया नोड ग़लत साइट का answer पाता है, या कुछ नहीं।\nReservations MAC एड्रेस की एक सूची हैं, और यह ठीक उसी तरह का हर-मशीन हिसाब-किताब है जो ग्राहक नहीं चाहता था। अगर सच में लगाओ और बूट करो ही ज़रूरत है, तो हर provisioning VLAN को इसके बजाय एक छोटा dynamic range दीजिए, उदाहरण के लिए dhcp-range=set:site1,10.10.50.100,10.10.50.150,255.255.255.0,1h। साइट अब भी subnet से आती है, इसलिए Caddy अब भी सही टोकन चुनता है, और installation_nr वाला FQDN template नोड को नाम देता है। इसकी क़ीमत “क्या तय करना बाक़ी है” की पहली पंक्ति है: उस VLAN में लगी कोई भी चीज़ अब साइट का answer ला सकती है, इसलिए VLAN ख़ुद gate बन जाता है।\ndnsmasq client के साथ TFTP block size तय करता है। अपने हाल पर छोड़ा जाए तो यह उसे अपने इंटरफ़ेस के MTU पर सीमित करता है31, जो तब तक काम करता है जब तक किसी साइट तक का रास्ता उस लिंक से छोटा न हो जिस पर dnsmasq बैठा है। इसलिए कॉन्फ़िग छत को विरासत में लेने के बजाय tftp-mtu=1500 के रूप में लिखता है। इससे यह नंबर उस व्यक्ति के सामने आता है जो IPsec tunnel या पैकेट में से कुछ खाने वाली किसी और चीज़ के पीछे की साइट संभालता है, और वह उसे उतना कम कर देता है जितना रास्ता सच में ले जाता है, बजाय आधे में अटकी transfer से पता चलने के। अगर कोई NIC ROM इस option के मिलने पर ही गड़बड़ करे, तो tftp-no-blocksize यह बातचीत बंद कर देता है।\nDebian के ipxe पैकेज से ipxe.efi को /srv/tftp में कॉपी कीजिए, dnsmasq यूज़र के स्वामित्व में, क्योंकि tftp-secure बाक़ी हर चीज़ को मना कर देता है। UEFI को प्राथमिकता दीजिए। Secure Boot को signed iPXE चाहिए, इसलिए या तो उसे सेट कीजिए या इंस्टॉल के लिए Secure Boot बंद करके बाद में फिर चालू कीजिए।\nबूट करें, देखें, और क्या टूटता है हार्डवेयर छूने से पहले किसी साइट नेटवर्क पर एक वर्चुअल मशीन से टेस्ट कीजिए: UEFI firmware, 8 GiB memory और उस VLAN पर एक NIC पूरी chain दोहरा देते हैं।\nबूट पर क्या होता है Target सर्वर UEFI नेटवर्क बूट 6 GiB या ज़्यादा 1. DHCP और TFTP एक lease, एक search domain, फिर ipxe.efi 2. पोर्ट 80 पर HTTP boot.ipxe, vmlinuz, initrd.img और ISO, memory में 3. DNS दो TXT रिकॉर्ड: answer URL और PDM का fingerprint 4. 443 पर Caddy, फिर PDM answer अभी, webhook reboot के बाद चार अलग बातचीत, हर एक की विफल होने पर देखने की अपनी जगह। और पूरी चीज़ क्रम में, चालू होने से लेकर उस installation तक जिसे PDM Finished मार्क करता है:\nचालू होने से पूरे इंस्टॉल तक Target dnsmasq, :80 Caddy :443 PDM DHCP: एक lease TFTP: ipxe.efi iPXE फिर माँगता है HTTP: kernel, initrd, ISO installer: एक domain DNS: दो TXT रिकॉर्ड POST, catch टोकन साइट टोकन in progress render किया answer, Caddy से डिस्क पर इंस्टॉल webhook, एक बार वाला टोकन Authorization हटाया Finished reboot; पहला बूट key activate करता है हर कदम, क्रम में। Webhook installer से reboot से पहले भेजा जाता है, इसलिए Finished का मतलब है इंस्टॉल हुआ, बूट हुआ नहीं; subscription key उसके बाद, पहले बूट पर, activate होती है। कदम क्या होता है कहाँ देखें 1 firmware TFTP से ipxe.efi पाता है, iPXE HTTP से boot.ipxe पाता है journalctl -u dnsmasq, Caddy का लॉग 2 दस सेकंड बाद मेन्यू automated एंट्री बूट करता है; kernel, initrd और ISO डाउनलोड होते हैं चार GET, उनमें से एक लगभग 1.6 GB 3 installer lease लेता है, search domain पढ़ता है, दोनों TXT रिकॉर्ड query करता है target पर /tmp/fetch_answer.log 4 Caddy को POST, टोकन बदला गया, PDM एक answer चुनता है Caddy का लॉग टोकन का नाम बताता है; PDM एक नया installation दिखाता है 5 इंस्टॉल चलता है /tmp/auto_installer.log, /tmp/install-low-level-start-session.log 6 अभी installer में ही, webhook Caddy के ज़रिए वापस कॉल करता है, फिर मशीन reboot होती है33 installation डिस्क, NIC और SSH host keys के साथ Finished पर पहुँच जाता है विफल होने पर installer एक shell पर रुक जाता है, जब तक answer में Reboot on Error सेट न हो, इसलिए टेस्ट करते समय उसे बंद रखिए।\nलक्षण संभावित कारण Could not find search domain in resolv.conf. DHCP ने कोई domain नहीं भेजा ऐसे नाम के लिए TXT query जिसमें space है एक से ज़्यादा search domain Got empty response. रिकॉर्ड ग़ायब, ग़लत zone, या option 6 किसी और DNS सर्वर की ओर है बीच में space वाला URL TXT वैल्यू कई strings में बँटी लॉग कहता है कि URL DHCP से आया नेटवर्क में कहीं option 250 है POST पर TLS error DNS वाला fingerprint Caddy का मौजूदा certificate नहीं है बिना जवाब के कनेक्शन बंद Caddy ने abort किया: ग़लत subnet, catch टोकन नहीं, या ऐसा route जो उन दो में से नहीं 400 no answer file found टोकन काम कर गया; कोई फ़िल्टर मैच नहीं हुआ और उस टोकन पर कोई default नहीं ग़लत answer overlap करते फ़िल्टर; फ़ाइल में पहला जीतता है status in progress पर अटका रहता है webhook base URL अब भी 8443 की ओर है iPXE बार-बार ख़ुद को reload करता है DHCP सर्वर iPXE को firmware से अलग नहीं पहचान रहा PXE-E32 TFTP timeout next-server ग़लत, या UDP 69 blocked Proxmox Backup Server जोड़ना रास्ते में कुछ भी Proxmox VE के लिए ख़ास नहीं है। PBS 4 ISO से उसी catch टोकन के साथ बूट फ़ाइलों का दूसरा सेट /srv/www/pbs-4/ में बनाइए, और हर साइट के लिए /product/product=pbs फ़िल्टर वाला एक PBS answer जोड़िए, उस साइट के टोकन पर अधिकृत। DNS रिकॉर्ड, Caddy, टोकन और फ़ायरवॉल नहीं बदलते।\nजिस साइट पर दोनों हों, वहाँ किसी चीज़ को तय करना होगा कि मशीन को कौन सा product मिले, और मेन्यू इसे तय करने की ग़लत चीज़ है। --timeout के बिना iPXE का choose कंसोल पर हमेशा किसी key के दबने का इंतज़ार करता है, जो unattended का उलटा है।\nइसके बजाय DHCP reservation को तय करने दीजिए। आप हर नोड को पहले से MAC एड्रेस से reserve करते हैं, इसलिए PBS वालों को tag कीजिए और हर tag को उसका अपना boot.ipxe भेजिए:\n# /etc/dnsmasq.d/pxe.conf, replacing the single iPXE dhcp-boot line dhcp-host=aa:bb:cc:dd:ee:01,10.10.50.21,pve01 dhcp-host=aa:bb:cc:dd:ee:31,set:pbs,10.10.50.31,pbs01 dhcp-boot=tag:ipxe,tag:!pbs,http://pdm.example.doc/pve-9.2/boot.ipxe dhcp-boot=tag:ipxe,tag:pbs,http://pdm.example.doc/pbs-4/boot.ipxe किसी reservation पर set:pbs उस एक मशीन को tag करता है31, और tag:!pbs दोनों बूट लाइनों को आपस में अलग रखता है, इसलिए यह सवाल ही नहीं उठता कि कौन जीतेगा। हर product का अपना boot.ipxe पहले से कीबोर्ड पर किसी के बिना दस सेकंड बाद अपनी automated एंट्री बूट करता है15।\nये लाइनें 2.91 पर dnsmasq --test पास करती हैं, जो मेरे lab का version है, और dhcp-host तथा tag के दस्तावेज़ी syntax का पालन करती हैं। मैंने अभी इनके ज़रिए कोई PBS नोड PXE-boot नहीं किया है, इसलिए इन पर भरोसा करने से पहले एक tag की गई मशीन आज़माइए।\nवहाँ से रास्ता Proxmox VE जैसा ही है। PBS installer \u0026quot;product\u0026quot;: \u0026quot;pbs\u0026quot; भेजता है, Caddy साइट का टोकन लगा देता है, और PDM उस साइट का PBS answer चुनता है। किसी भी मोड़ पर कुछ भी हाथ से नहीं चुना जाता, और नोड कौन सा product बनेगा यह एक ही जगह लिखा है, reservation में, उसके एड्रेस के बगल में।\nक्या तय करता है कहाँ रहता है कौन सा ISO बूट होगा DHCP reservation पर set:pbs tag किस साइट के answers लागू होंगे source subnet, Caddy के टोकन बदलने के ज़रिए उस साइट के अंदर कौन सा answer PDM में /product/product=pbs फ़िल्टर Installer सिर्फ़ ऑपरेटिंग सिस्टम बिछाता है। Datastore, OS डिस्क से अलग storage पर, नोड को पूरा करने वाली चीज़ का एक और काम है, जो हमें फिर छूटे first-boot हुक पर ले आता है।\nक्या तय करना बाक़ी है इनमें से कोई भी आपको यह डिज़ाइन इस्तेमाल करने से नहीं रोकता। हर एक के लिए किसी को ज़िम्मेदारी लेनी होगी।\nसमझौता क्यों मायने रखता है क्या करें source एड्रेस ही gate है provisioning VLAN पर मौजूद, या उस पर एड्रेस spoof कर सकने वाली, कोई भी चीज़ उस साइट का answer ला सकती है: root पासवर्ड hash, SSH कीज़, subscription key VLAN को अलग रखिए, port security, सिर्फ़ reservations, टोकन expiry, rollouts के बीच टोकन बंद कीजिए catch टोकन सीक्रेट नहीं है यह हर इमेज में और इस पेज पर है यह सिर्फ़ भटके हुए अनुरोधों को छाँटता है; gate subnet और Caddy में रखा असली टोकन है Caddy PDM की key पढ़ सकता है PDM का certificate देने का मतलब है कि proxy वह एक private key पढ़ता है सिर्फ़ api.pem और api.key पर ACL, PDM की और कोई चीज़ पढ़ने लायक़ नहीं, होस्ट कसकर बंद; key कभी उसे नहीं छोड़ती DNS पर भरोसा है नक़ली TXT रिकॉर्ड installer को कहीं और भेज देता है, और अगर fingerprint भी DNS से आता है तो नक़ल करने वाला दोनों को नियंत्रित करता है provisioning DNS की रक्षा कीजिए, या --cert-fingerprint से PDM का fingerprint बेक कीजिए और बदलने पर दोबारा बनाइए बूट फ़ाइलें सादे HTTP पर जाती हैं उन्हें रास्ते में पढ़ा या बदला जा सकता है नेटवर्क को अलग रखिए; आपका build सपोर्ट करे तो HTTPS पर iPXE webhook टोकन 16 random bytes, एक बार इस्तेमाल, callback के बाद मिटा दिया जाता है, पर कोई समय सीमा नहीं4 पुराने installation रिकॉर्ड हटाइए subscription key नेटवर्क आने के बाद एक बार activate होती है; विफल होने पर key मिटा दी जाती है और unit फ़ेल होता है, कोई retry नहीं34 नए नोड पर systemctl --failed जाँचिए PDM एक अकेला बिंदु है आज यह highly available नहीं है रुकावट नए इंस्टॉल रोकती है, चलते क्लस्टर नहीं एक मैनेजमेंट NIC answer में bond, VLAN या bridge के विकल्प नहीं हैं9 यह इंस्टॉल के बाद का काम है, उसी first-boot वाली समस्या के साथ पहला कदम, जिस पर ठीक से बनाया गया यह फ़ीचर की पहली release है, और पहली release के हिसाब से यह अच्छी है। Answer फ़ॉर्म समझदार है, चुनने के नियम एक बार पढ़ लेने पर साफ़ हैं, webhook काम करता है, और कोड खुला है, जो अकेली वजह है कि ऊपर का सब कुछ अंदाज़ा लगाने के बजाय साबित किया जा सका। Patch series public mailing list पर चार दौर से गुज़री, तब जाकर शामिल हुई35, और यह दिखता है।\nकमियाँ वही दो चीज़ें हैं जो एक इंस्टॉल सर्वर को provisioning सिस्टम बनाती हैं। साइट वह इकाई है जिसमें MSP सोचता है, और installer जब पूछता है तब उसी पर खड़ा होता है। First-boot हुक इंस्टॉल हुए नोड और पूरे हुए नोड के बीच का फ़र्क़ है। दोनों पहले से आधे मौजूद हैं: installer के पास हुक है और PDM के पास टोकन। मुझे उम्मीद है कि दोनों आएँगे, और जब आएँगे, तो इस डिज़ाइन के बीच का Caddy ग़ायब होने के बजाय सरल हो जाएगा, क्योंकि ऐसा proxy जो PDM के सीक्रेट पहुँच से बाहर रखे और 8443 को नेटवर्क से दूर, वैसे भी रखने लायक़ है।\nतब तक इसे इस तरह करने की वजह वही है जो शुरू में है। दस PXE सर्वर यानी दस चीज़ें जो दस अलग रफ़्तार से पुरानी पड़ती हैं, और हर एक पर तभी नज़र जाती है जब वह उसी दिन फ़ेल हो जिस दिन आपको उसकी ज़रूरत है। एक सेटअप, एक बार अपडेट रखा हुआ, जहाँ साइट नेटवर्क से तय होती है और सीक्रेट एक जगह रखे जाते हैं, संभालने के लिए कम है। संभालने के लिए कम का मतलब है ग़लत होने के लिए कम, और काम का ज़्यादातर हिस्सा यही है।\nProxmox — Proxmox Datacenter Manager 1.1 press release — automated installations, Remotes के नीचे एक नए टैब के साथ जो installation की प्रगति दिखाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Datacenter Manager documentation — Automated Installations — prepared answers, target filters, templating, और “a dedicated token mechanism, separate from the normal API tokens”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, lib/pdm-api-types/src/auto_installer.rs — target filter keys “are JSON Pointers as per [RFC6901], the values globs”; सिर्फ़ एक default answer।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, server/src/api/auto_installer/mod.rs — default answer से पहले टोकन की जाँच, फ़ाइल के क्रम में पहला मैच, first_boot: None, counter का बढ़ना, एक बार वाला post-hook टोकन, PDM लॉगिन के बिना पहुँचने लायक़ दो routes, और /system/auto-installation पर Sys.Audit/Sys.Modify अधिकार।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE Roadmap — Proxmox VE 9.2 — PXE और iPXE की तैयारी, “at least 6 GiB of available memory on the host”, और megaraid_sas तथा NVMe JBOD की ज्ञात समस्या।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Bugzilla 8078 — “prepared answer disk setup does not allow to specify multiple udev filters with same name”, 26 सितंबर 2026 को खुला, 7 नवंबर 2026 को status NEW।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Bugzilla 7699 — “Add on-first-boot parameter to the PDM remote installation”, 12 जून 2026 को खुला, 7 नवंबर 2026 को status NEW।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox, proxmox-installer-types/src/lib.rs — SystemInfo: product, ISO, DMI और network interfaces।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Automated Installation — [first-boot] और [network] विकल्प, भेजी जाने वाली system information, और यह कि auth टोकन “is stored in plain text inside the prepared ISO”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox Bugzilla 8263 — “[Feature Request] auto-installer: client source IP (or X-Forwarded-For) for answer selection and templating”, 31 अक्टूबर 2026 को खुला, 7 नवंबर 2026 को status NEW।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, debian/changelog — 1.1.1: “match prepared answers in the configuration\u0026rsquo;s stable order and let the first match win”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox, proxmox-installer-types/src/answer.rs — AutoInstallerConfig में first_boot: Option\u0026lt;FirstBootHookInfo\u0026gt; है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-auto-installer/src/bin/proxmox-auto-installer.rs — first-boot executable तभी सेट होता है जब answer में first_boot सेक्शन हो।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-fetch-answer/src/fetch_plugins/http.rs — पहले ISO URL, फिर DHCP, फिर DNS; TXT नाम; resolv.conf की parsing; quotes हटाकर dig txt +short; Bearer header।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-auto-install-assistant/src/main.rs — --pxe-loader का मतलब --pxe, आउटपुट directory, gzip initrd, ISO से हटाया गया /boot, और बनाया गया boot.ipxe।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-datacenter-manager, server/src/bin/proxmox-datacenter-api/main.rs — PDM_LISTEN_ADDR PDM_PORT यानी 8443 पर IPv6 unspecified एड्रेस है, build के समय तय।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy releases — 2.11.1 ने CVE-2026-27587 ठीक किया, escape sequences के ज़रिए path matcher bypass।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian sources — caddy — trixie में 2.6.2-12+deb13u1, trixie-backports में 2.11.2-1~bpo13+1।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — request_header — “With no prefix, the field is set (overwritten).”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Request matchers — remote_ip सीधा peer है; path मैच case-insensitive, URL-decoded और साफ़ किए हुए होते हैं, दोहराए slash मिलाकर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — handle — “only the first matching handle block will be evaluated”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Global options — admin का डिफ़ॉल्ट localhost:2019; protocols का डिफ़ॉल्ट h1 h2 h3।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — file_server — hide को security boundary नहीं मानना चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — log — Cookie, Set-Cookie, Authorization और Proxy-Authorization REDACTED के रूप में लॉग होते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd.service — ExecCondition= — 1 से 254 तक के exit code पर “the remaining commands are skipped and the unit is not marked as failed”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd.path — PathChanged= — “activated if the file which was open for writing gets closed”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncaddyserver/dist, init/caddy.service — ExecStart=/usr/bin/caddy run --environ --config /etc/caddy/Caddyfile।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Command line — --environ शुरू होने से पहले environment छापता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — Caddyfile concepts, environment variables — {$NAME} Caddyfile parse होने से पहले बदला जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ncaddyserver/caddy, replacer.go — env. से शुरू होने वाली हर key os.Getenv को दी जाती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndnsmasq manual page — dhcp-match, dhcp-boot, set:\u0026lt;tag\u0026gt; के साथ dhcp-host, enable-tftp, tftp-secure, tftp-mtu, tftp-no-blocksize और static ranges।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\niPXE — Configuring ISC dhcpd — if exists user-class and option user-class = \u0026quot;iPXE\u0026quot; iPXE को स्क्रिप्ट और firmware को loader देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, unconfigured.sh — proxmox-post-hook proxmox-auto-installer के सफल होते ही, reboot से पहले, चलता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-installer, proxmox-first-boot/proxmox-first-boot-subscription — “always drop the staged key, regardless of whether activation succeeded”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npdm-devel — \u0026ldquo;add auto-installer integration\u0026rdquo;, v4, 40 patches — वह series जिसने यह फ़ीचर जोड़ा, v3 से v4 के बदलाव के notes के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/pdm-unattended-installs-for-many-sites/","summary":"Proxmox Datacenter Manager 1.1 Proxmox के automated installer को answer फ़ाइलें दे सकता है, जिससे यह कई ग्राहक साइटें संभालने वाले MSP के लिए स्वाभाविक इंस्टॉल सर्वर बन जाता है। इस्तेमाल का मामला एक ग्राहक है जो चाहता था कि हर साइट अपने नाम, root पासवर्ड और SSH कीज़ के साथ बने, बस सर्वर को सही VLAN में लगाकर बूट करने से, न कोई serial number इकट्ठा करना, न हर मशीन के लिए answer फ़ाइल; यह पोस्ट बूट और इंस्टॉल वाला आधा हिस्सा कवर करती है, और क्लस्टर में जोड़ने को अलग छोड़ती है। PDM साइट पर answer मैच नहीं कर सकता, और नोड को first-boot स्क्रिप्ट नहीं दे सकता; दोनों बातें PDM के अपने source से दिखाई गई हैं। फिर भी यह हर साइट के लिए एक PXE सेटअप बनाती है: एक बूट इमेज जिसमें एक ग़ैर-गुप्त catch टोकन है, DNS TXT discovery ताकि इमेज में कोई URL न हो, और एक Caddy proxy जो source subnet देखकर catch टोकन को साइट के अपने bearer टोकन से बदल देता है। इसमें बताया गया है कि PDM answer कैसे चुनता है, iPXE के लिए prepare-iso, DNS रिकॉर्ड, dnsmasq और iPXE लूप, एक मज़बूत Caddy जो पूरा PDM UI 443 पर देता है जबकि nftables 8443 बंद रखता है, कौन सा टोकन इस्तेमाल हुआ यह सिर्फ़ नाम से लॉग करना, post-installation webhook, Proxmox Backup Server जोड़ना, और बचे हुए समझौते।","title":"हर ग्राहक के लिए एक PXE सेटअप: Proxmox Datacenter Manager के साथ unattended इंस्टॉल"},{"content":"Reform UK कहता है कि वह उन आम मेहनतकश लोगों की पार्टी है जिन्हें धोखा दिया गया है। तो मैंने वही किया जो मैं ऐसे किसी भी दावे के साथ करता हूँ। मैंने पढ़ा कि पार्टी ने असल में क्या लिखकर रखा है, उसके लोगों ने ऑन रिकॉर्ड क्या कहा है, रजिस्टर क्या दिखाते हैं कि उसका खर्च कौन उठाता है, और अदालतों, रेगुलेटरों और पत्रकारों ने क्या पाया है। फिर सबको साथ-साथ रख दिया।\nयह एक राय वाला लेख है, और यह खुलकर बहस करता है। लेकिन इसके हर तथ्य के साथ पेज के नीचे एक नंबर वाला स्रोत है, और जहाँ रिकॉर्ड किसी बात तक नहीं पहुँचता, वहाँ मैं साफ़ कहता हूँ। जहाँ किसी अदालत या रेगुलेटर ने Reform के पक्ष में फ़ैसला दिया, वह भी यहाँ है। जो दलील अपने खिलाफ़ जाने वाली बातें छिपाती है, वह दलील नहीं है।\nसवाल यह है कि Reform असल में किसके लिए है? शुरुआत इससे कीजिए कि वह उन लोगों के साथ क्या करेगा जो पहले से यहाँ रहते हैं।\nरद्द करो, दोबारा आवेदन करो, या चले जाओ Indefinite leave to remain (ILR, यानी स्थायी रूप से रहने की अनुमति) वह status है जो लोगों को सालों तक यहाँ कानूनी तौर पर रहने और काम करने के बाद मिलता है। यही वह चीज़ है जिससे कोई नर्स, इंजीनियर या केयर वर्कर वीज़ा रिन्यू करते रहना छोड़कर अपनी ज़िंदगी में आगे बढ़ पाता है। Reform इसे उनसे छीन लेगा।\nसिर्फ़ नए ILR देना बंद नहीं। जिनके पास पहले से है, उनसे भी छीनना। यह पार्टी के अपने शब्द हैं, अप्रैल 2026 के उसके अपने policy paper में:\n\u0026ldquo;Reform will abolish ILR as an immigration category completely, meaning no new awards and those currently holding it will have it rescinded… Anyone currently with ILR will need to reapply for visas that do not offer recourse to welfare.\u0026rdquo;1\nउसका policy पेज यही बात कम शब्दों में कहता है: “abolish ILR and rescind existing awards”, एक “5 year renewable visa” जिसमें “higher salary thresholds” हों, और “no recourse to benefits for foreign nationals”2।\nयहाँ बसे किसी व्यक्ति के साथ क्या होता है Reform के अपने शब्द उनका settled status “rescinded”1 उन्हें क्या करना होगा “reapply for visas that do not offer recourse to welfare”1 वह वीज़ा जिसके लिए वे दोबारा आवेदन कर सकते हैं “5 year renewable”, भाषा और “good character” टेस्ट के साथ2 उन्हें कितनी सैलरी चाहिए होगी सीमा “above median UK earnings”1 वह सीमा कितनी है तय नहीं: “determined based on net fiscal cost modelling close to the general election”1 किसे छूट है BN(O) वीज़ा वाले, यूक्रेन की स्कीमें, EU settled status “initially”1 इस टेबल को ऐसे व्यक्ति की नज़र से पढ़िए जो दस साल से यहाँ रह रहा है। आप income tax, National Insurance और council tax भरते हैं। हो सकता है आपका mortgage हो और बच्चे लोकल स्कूल में पढ़ते हों। इस योजना के तहत यहाँ रहने का आपका हक़ खत्म हो जाता है, और आप उसे वापस कमा पाएँगे या नहीं, यह एक सैलरी लाइन पर निर्भर है जो पार्टी आपको चुनाव से ठीक पहले तक नहीं बताएगी। अगर आप median से कम कमाते हैं, जो परिभाषा के हिसाब से आधे सब कामगार कमाते हैं, तो आपका वापसी का रास्ता उस रास्ते से पहले ही संकरा है जिससे आप आए थे।\nMedian से ऊपर की कमाई वाली शर्त रखना आसान है जब वह आप पर कभी लागू ही न होनी हो। यह वह पार्टी है जो हर चार में से तीन पाउंड विदेश में रहने वाले डोनरों से लेती है, जिसके नेता ने £5 मिलियन निजी तोहफ़े के रूप में लिए3 और सोने का प्रचार करने के चार घंटों के £135,0004। वह सीमा तय करने वाले किसी भी व्यक्ति को उसे कभी पार नहीं करना पड़ेगा। median से कम कमाने वाली केयर वर्कर को करना पड़ेगा।\nऔर उस वीज़ा का “good character” टेस्ट उन लोगों के सामने रखकर देखने लायक है जिन्होंने इसे लिखा है। वह मैं आखिर के पास करता हूँ।\nपार्टी का अपना paper वह बात मान लेता है जिसे इस योजना को वहीं रोक देना चाहिए था। वह “skilled workers being the only group to remain fiscally contributory over the course of their lifetimes” की बात करता है1। ये वे लोग हैं जो, Reform के अपने हिसाब से, जितना लेते हैं उससे ज़्यादा देते हैं, और योजना इनमें से हर एक को वापस renewable वीज़ा पर डाल देती है।\nPaper के साथ इंसाफ़ करें तो, निकाला जाना अपने आप नहीं होता। जो नए टेस्ट पास कर ले, वह रह सकता है। लेकिन किसी ने, Reform ने भी नहीं, यह प्रकाशित नहीं किया है कि काम करने और टैक्स भरने वाले कितने लोग उनमें फ़ेल होंगे, और किसी स्वतंत्र संस्था ने इस योजना का खर्च आँका ही नहीं है।\nवे आँकड़े जिनसे इसे बेचा गया पहला बड़ा आँकड़ा £234 बिलियन था, जिसे Farage ने 2025 में यह कहकर बताया कि “our changes will save British taxpayers”। Full Fact (एक fact-checking संस्था) ने पाया कि यह बेनिफ़िट का आँकड़ा था ही नहीं, और जिस think tank के रिसर्च से यह आया था उसने कहा “the overall cost estimates should no longer be used”5।\nतो अप्रैल 2026 का paper एक नया आँकड़ा इस्तेमाल करता है, £622 बिलियन। यह Reform की अपनी modelling है, किसी स्वतंत्र संस्था की नहीं, और paper खुद दो लाइन बाद दूसरा आँकड़ा देता है: “£154 bn if discounted at the 3.5% rate suggested by the HM Treasury Green Book”1। Green Book वह तरीका है जिससे Treasury (वित्त मंत्रालय) कहता है कि हर सरकारी खर्च गिना जाना चाहिए। सरकार के अपने तरीके से, बड़ा आँकड़ा तीन-चौथाई सिकुड़ जाता है।\nक्या मैं पूछ सकता हूँ कि जो पार्टी लोगों से सीधी बात करने का दावा करती है, वह उसी आँकड़े से शुरुआत क्यों करती है जिसके बारे में उसका अपना paper कहता है कि यह गिनने का गलत तरीका है?\nवह बेनिफ़िट बिल जिसे वे छुएँगे नहीं Reform कहता है कि वह बेनिफ़िट का बिल काटेगा, और अगस्त 2026 में उसने योजना प्रकाशित कर दी। यह हर उस व्यक्ति के लिए Universal Credit, Jobseeker\u0026rsquo;s Allowance, Child Benefit, मुफ़्त childcare, Housing Benefit, Pension Credit और disability benefits बंद कर देगी जो ब्रिटिश नागरिक नहीं है6। बड़ा दावा हर साल £50 बिलियन की बचत का है7।\nइसका मतलब क्या है, यह तय करने से पहले देखिए कि बेनिफ़िट का बिल असल में जाता कहाँ है।\nबेनिफ़िट का बिल कहाँ जाता है, 2025/26 Great Britain में बेनिफ़िट खर्च 2025/26, £ बिलियन स्टेट पेंशन 146.1 पेंशनरों के दूसरे बेनिफ़िट 31.6 कामकाजी उम्र के बेनिफ़िट 126.1 Reform के £50bn बाकी 5.3 Triple Lock के वादे से सुरक्षित कटौती जहाँ पड़नी है Great Britain में 2025/26 का बेनिफ़िट खर्च, DWP की अपनी टेबलों से। इसका 57.5% पेंशनरों को जाता है, और अकेली State Pension 47.3%। Reform ने State Pension को सुरक्षित रखा है, इसलिए £50bn की कटौती लगभग पूरी की पूरी £126bn वाले कामकाजी उम्र के कॉलम से आनी है। सारे बेनिफ़िट खर्च का लगभग आधा State Pension है: 2025/26 में £309 बिलियन में से £146 बिलियन8। Reform ने 2 अप्रैल 2026 को Triple Lock (पेंशन हर साल कम से कम तय दर से बढ़ाने की गारंटी) बनाए रखने का वादा किया9, उन महीनों के बाद जिनमें Farage ने कहा था “It\u0026rsquo;s open for debate” और Tice ने कहा था “we\u0026rsquo;re not guaranteeing the triple lock”9। जिस दिन welfare योजना लॉन्च हुई, पार्टी ने कहा “nothing that we talk about today is about pensioners”10।\nतो State Pension सुरक्षित है। यह साफ़-साफ़ कहिए, क्योंकि मैंने इसे काटने वाली Reform की कोई योजना ढूँढी और ऐसी कोई है ही नहीं। जैसा इस साइट की पेंशन वाली पोस्ट बताती है, State Pension का पैसा आज काम कर रहे लोग भरते हैं।\nयहीं से हिसाब शुरू होता है। अगर पेंशन को हाथ नहीं लगाना, तो £50 बिलियन बाकी सब में से आएगा। Institute for Fiscal Studies (IFS, एक स्वतंत्र आर्थिक रिसर्च संस्था) ने यह जोड़ लगाया: Reform की योजना है “to save around £50 billion a year, almost entirely from a working-age benefits bill that, in 2030–31, is forecast to be a little over £200 billion”7।\nयह किस पर पड़ता है रिकॉर्ड क्या दिखाता है State Pension पर पेंशनर सुरक्षित, Triple Lock बरकरार9 गरीब पेंशनर जो ब्रिटिश नागरिक नहीं हैं Pension Credit खो देते हैं, जो सिर्फ़-नागरिकों वाली सूची में है6 Universal Credit पर गैर-नागरिक करीब 13 लाख (1.3 million), जिनमें से 650,000 काम नहीं कर रहे7 Universal Credit पर गैर-नागरिक जो काम करते हैं बाकी करीब 650,000, IFS के आँकड़ों पर: काम करते हैं, टैक्स कटता है, और फिर भी top-up खो देते हैं IFS उनके लिए क्या उम्मीद करता है “large overnight cuts to claimants\u0026rsquo; incomes” और “significant increases in hardship”7 PIP पर विकलांग लोग Personal Independence Payment खत्म करके एक “health security allowance”, जो मौजूदा पाने वालों में से दो-तिहाई तक को बाहर कर सकता है11 लंबे समय से क्लेम करने वाले जिन्हें काम के लायक माना गया हफ़्ते में 20 घंटे का community work, वरना पैसा बंद11 कामकाजी उम्र का कोई व्यक्ति जिसने दशकों तक NI भरा है settled status जाता है, बेनिफ़िट जाते हैं, और जब तक वे पेंशन की उम्र से नीचे हैं, दस्तावेज़ों में कुछ भी उस पेंशन को नहीं बचाता जो उन्होंने जोड़ी है वह आखिरी पंक्ति दोनों दस्तावेज़ों को साथ पढ़कर मेरी समझ है, Reform का कहा हुआ नहीं। लेकिन वे वहीं ले जाते हैं। Reform का FAQ कहता है कि विदेशी नागरिक जो “of pension age who\u0026rsquo;ve made sufficient National Insurance Contributions” हैं, उनका यहाँ रहने का हक़ और उनकी State Pension बनी रहती है2। पेंशन की उम्र तक पहुँच गए तो आप सुरक्षित हैं। पैंतालीस के हैं, बीस साल का योगदान है, तो आप बिना किसी सहारे के renewable वीज़ा पर हैं।\nजो पहले से काम कर रहे हैं यह वह हिस्सा है जिसे “benefits” शब्द छिपाने के लिए है। Universal Credit बेरोज़गारी का भत्ता नहीं है। अप्रैल 2026 में इस पर 31 लाख (3.1 million) लोग काम कर रहे थे, यानी इसे क्लेम करने वाले सभी लोगों का 37.7%12। वे काम पर जाते हैं, अपनी कमाई पर income tax और National Insurance भरते हैं, और Universal Credit उन तनख़्वाहों को पूरा करता है जो गुज़ारे के लिए बहुत कम हैं।\nReform के अपने target group पर हिसाब लगाइए। IFS के मुताबिक Universal Credit पर करीब 13 लाख गैर-नागरिक हैं, जिनमें से 650,000 काम नहीं कर रहे7। एक में से दूसरा घटाइए और करीब 650,000 काम कर रहे हैं। Reform की योजना उनका Universal Credit, Housing Benefit, Child Benefit और मुफ़्त childcare बंद कर देती है6, और childcare ही वह चीज़ है जिसकी वजह से कम तनख़्वाह वाला कोई माँ-बाप काम पर जा भी पाता है।\nक्या मैं पूछ सकता हूँ कि इससे पैसा किसका बचता है? टैक्स भरने वाले का नहीं। जो कामगार top-up खोता है, वह या तो और घंटे लेता है जो हैं ही नहीं, या काम छोड़ देता है और ज़्यादा महँगा पड़ता है, या देश छोड़ देता है और टैक्स और मेहनत दोनों साथ ले जाता है। जिन्हें यह सूट करता है, वे वे लोग हैं जो इतनी कम तनख़्वाह देते हैं कि सरकार को उसे पूरा करना पड़ता है। Reform कम तनख़्वाह को नहीं छूता। वह कामगार को छूता है।\nयह एक ऐसी योजना है जो उन वोटरों को बचाती है जिनके वोट डालने आने की संभावना सबसे ज़्यादा है, और पूरा बिल कामकाजी उम्र के लोगों पर डाल देती है, चाहे वे काम कर रहे हों या नहीं। उनमें से बहुत-से उन्हीं पेंशनों का पैसा भर रहे हैं जिन्हें यह योजना बचाती है।\nवादे जिनका हिसाब नहीं बैठता हमें पता है कि Reform के वादे कितने टिकते हैं, क्योंकि उसने जाँचने लायक काफ़ी वादे किए हैं। यह रहा रिकॉर्ड, एक-एक वादा:\nवादा उसका क्या हुआ 2024 का manifesto: हर साल करीब £90bn की टैक्स कटौती IFS: “the sums in this manifesto do not add up”, जो “by a margin of tens of billions of pounds per year” से गलत हैं13। अक्टूबर 2025 में Tice: “A manifesto is based on a point in time.”14 settled status खत्म करके £234bn की बचत जिस think tank से यह आया: “should no longer be used”5 उसकी जगह £622bn Reform की अपनी modelling। Treasury के अपने तरीके से, £154bn1 £10bn में 600,000 तक लोगों को deport करना पार्टी का अपना ब्योरा, £4bn जमा £1.5bn जमा £2bn, कुल £7.5bn बनता है, और किसी ने दोनों का मेल नहीं बिठाया15 welfare से हर साल £50bn IFS: लगभग सब कामकाजी उम्र की मदद से, और “How much this saves would depend on how many of this group became citizens in response”716 बिजली-गैस के बिल £200 कम, फिर £150, फिर £250 एक साल में आँकड़ा तीन बार बदला17182, और policy पेज कहता है कि खर्च “to the Treasury” चला जाता है, यानी आप उसे बिल की जगह टैक्स में भरते हैं2 “Reform Councils will freeze, then cut your council tax bills” एक ने भी नहीं किया। Reform की चलाई councils ने इसे औसतन 3.94% बढ़ाया19 Kent में net zero से £40m की बचत council ने बाद में इन्हें “forward-looking assumptions” कहा, और किसी auditor ने इन पर मुहर नहीं लगाई20 Triple Lock “we\u0026rsquo;re not guaranteeing the triple lock”, फिर अप्रैल 2026 में गारंटी9 इनमें से दो पर Reform कुछ हद तक सही निकला, और जो सही है वह सही है। उसकी councils ने council tax को 4.86% के राष्ट्रीय औसत से कम बढ़ाया19, और Triple Lock बनाए रखना एक असली वादा है। लेकिन जो वादा हर बार किसी के हिसाब जाँचने पर बदल जाए, वह योजना नहीं है। वह बिक्री की बातें हैं, और जिन्हें बेचा जा रहा है वही लोग भुगतेंगे जब हिसाब नहीं बैठेगा।\nऔर सिर्फ़ हिसाब ही नहीं बदलता। पार्टी और उसके लोगों ने क्या कहा और कब, इसे लाइन से रखिए:\nतब बाद में EU settled status वालों को बेनिफ़िट योजना से छूट, सितंबर 202521 EU नागरिकों समेत विदेशी नागरिकों के बेनिफ़िट छीने, अगस्त 20266 Triple Lock “open for debate”9 गारंटी, अप्रैल 20269 £90bn का manifesto “A manifesto is based on a point in time”14 Jenrick: “put Reform out of business”22 Reform का होने वाला chancellor (वित्त मंत्री)23 Farage 2024 में चुनाव नहीं लड़ेगा लड़ा, £5m के निजी तोहफ़े के कुछ हफ़्ते बाद3 Putin, जिसकी तारीफ़ “as an operator” की गई24 Putin, “a very bad dude”25 लोग अपनी राय बदलते हैं, और जो नेता कभी नहीं बदलता वह और बुरा है। लेकिन जिस पार्टी की राय आखिरी poll, आखिरी डोनर या आखिरी बुरी हेडलाइन के हिसाब से घूमती है, वह आपको यह नहीं बता रही कि वह क्या करेगी। वह आपको बता रही है कि उसे क्या लगता है कि उसे सत्ता दिलाएगा। उस रिकॉर्ड पर मेरी राय यह है कि Reform सत्ता पाने के लिए कुछ भी कहेगा, और वह असल में क्या मानता है, यह आपको बाद में पता चलेगा।\nReform का मालिक कौन है ज़्यादातर ब्रिटिश पार्टियाँ क्लब हैं। Labour और Conservatives unincorporated associations (बिना कंपनी बने संगठन) हैं, जिनके असल मालिक उनके सदस्य हैं। Reform shareholders वाली एक कंपनी थी, और उसका ज़्यादातर हिस्सा उसके नेता के पास था।\nजो कंपनी The Brexit Party Limited के रूप में शुरू हुई और बाद में Reform UK Party Limited बनी, उसका Companies House (ब्रिटेन का कंपनी रजिस्टर) रिकॉर्ड दिखाता है कि इस पर किसका कब्ज़ा था26:\nकौन नियंत्रण से तक Catherine Blaiklock “significant influence or control” 23 नवंबर 2018 3 मई 2019 Nigel Farage shares का “More than 50% but less than 75%”, और directors नियुक्त करने का हक़ 8 मई 2019 19 फ़रवरी 2025 Richard Tice shares का “More than 25% but not more than 50%” 1 मई 2019 19 फ़रवरी 2025 guarantee से सीमित एक नई कंपनी 75% या ज़्यादा 19 फ़रवरी 2025 अब तक Tice के share का नोटिस 15 अगस्त 2024 को फ़ाइल हुआ, उस तारीख के पाँच साल बाद जो उसमें दर्ज है26।\n20 फ़रवरी 2025 को पार्टी chairman ने घोषणा की: “Nigel Farage has handed over ownership of Reform UK to its members. Reform UK is now a non-profit, with no shareholders, limited by guarantee.”27\nउसका आधा सच है। अब कोई shareholder नहीं है। पुरानी कंपनी के shares £15 में नई कंपनी को गए, और £2.97 मिलियन की net assets £1 में गईं, इसलिए निकलते वक्त किसी को अचानक मोटा फ़ायदा नहीं हुआ28। इतना उन्हें मानना पड़ेगा।\nलेकिन “handed over ownership to its members” वह नहीं है जो नई कंपनी के अपने audited accounts कहते हैं। Note 20: “The company has two members, who have equal voting rights. Neither member has individual control of the company and, accordingly, there is no ultimate controlling party.”28\nदो members। कंपनी कानून में, guarantee से सीमित किसी कंपनी के मालिक और नियंत्रक उसके members होते हैं, और इसके दो हैं। accounts उनके नाम नहीं बताते। जो लोग membership फ़ीस भरते हैं, वे पार्टी चलाने वाली कंपनी के members नहीं हैं। उन्होंने मिलकर 2025 में इसमें £4.5 मिलियन डाले28, और उनका इस पर कोई नियंत्रण नहीं है। इसलिए “handed over ownership to its members” उस चीज़ का बयान है जो filing में है ही नहीं।\nयह किसके प्रति जवाबदेह है जो पार्टी क्लब है, वह अपने सदस्यों के प्रति जवाबदेह होती है, क्योंकि सदस्य ही क्लब हैं। कंपनी उन लोगों के प्रति जवाबदेह होती है जो कंपनी को नियंत्रित करते हैं, और यही बात पकड़कर रखनी है। जब नई कंपनी बनी, उसके दो guarantors Farage और तब के chairman Zia Yusuf थे29। Yusuf ने जून 2025 में बोर्ड छोड़ दिया, और Farage अब भी director है30। accounts यह नहीं बताते कि अभी वे दो members कौन हैं।\nByline Times (एक खोजी समाचार प्रकाशन) ने सितंबर 2025 में अपनाया गया पार्टी का संविधान हासिल किया31। यह रहा कि वह subs भरने वालों को क्या देता है, और ऊपर क्या रखता है:\nसदस्यों को क्या मिलता है नेता क्या अपने पास रखता है Conference के प्रस्ताव सिर्फ़ सलाह, Board को बस उन पर चर्चा करनी है आंतरिक चुनावों में वोटिंग Article 4.3 के तहत, Board के पूरे विवेक पर Board की 8 में से 3 सीटें, चुनी हुई 3 सीटें जिन्हें वह नियुक्त करता है, साथ में वह खुद और एक chairman जिसे वह नियुक्त करता है और हटा सकता है नेता के खिलाफ़ अविश्वास प्रस्ताव 50% सदस्यों, यानी करीब 135,000 लोगों के लिखित अनुरोध चाहिए, जिनकी जाँच उसका अपना chairman करेगा, और फ़ैसला वह Board करेगा जिसमें वह खुद बैठता है Board की बैठकें, आम तौर पर साल में दो उनके बीच “all powers of the Board are delegated to the party leader who may exercise those powers at his discretion” उस टेबल की हर पंक्ति उसी एक दस्तावेज़ से है, और इसकी रिपोर्ट करने के लिए Byline Times को इसकी कॉपी हासिल करनी पड़ी31। Reform के अपने पूर्व deputy leader Ben Habib ने कहा कि यह “puts Farage\u0026rsquo;s leadership in a virtually unassailable position”32।\nक्या मैं पूछ सकता हूँ कि अगर नेता गलती करे तो Reform का एक सदस्य असल में क्या कर सकता है? एक चिट्ठी लिख सकता है, और 134,999 और लोगों से भी लिखवा सकता है, उस आदमी को जिसे नेता ने नियुक्त किया है। यह जवाबदेही नहीं है, यह सुझाव पेटी है। जो पार्टी देश चलाना चाहती है, उसे कम से कम अपने सदस्यों के प्रति जवाबदेह होना चाहिए। यह अपने नेता के प्रति जवाबदेह है।\nइसे उस आदमी की मिल्कियत वाली कंपनी के रूप में बनाया गया था जो इसका नेता था, और छह साल तक यह ठीक वही रही26। अब कोई dividend नहीं ले रहा, और मैं ऐसा दिखावा नहीं करूँगा कि ले रहा है। लेकिन मुट्ठी भर लोगों की चलाई कंपनी, जिसमें सदस्यों की जगह पैसा देने वाले ग्राहक हों, एक बिज़नेस मॉडल है, लोकतंत्र नहीं। पैसा इसके इर्द-गिर्द बनता है, इसमें से नहीं, जैसा अगले हिस्से दिखाते हैं।\nपैसा विदेश से आता है Reform का खर्च भारी मात्रा में उन लोगों से चलता है जो यहाँ रहते ही नहीं।\nElectoral Commission (चुनाव आयोग) का रजिस्टर reporting सीमा से ऊपर का हर डोनेशन दर्ज करता है, किसने दिया और कब। यह दर्ज नहीं करता कि डोनर कहाँ रहते हैं, इसलिए निवास की जानकारी रिपोर्टिंग से आती है। जिन छह डोनरों के विदेश में रहने की रिपोर्ट है, उन्हें लेकर Reform के पैसे का कितना हिस्सा उनसे आया, यह रहा3334:\nविदेश में रहने वाले डोनरों के डोनेशन का हिस्सा विदेश में रहने वाले डोनरों के डोनेशन, कुल का % Brexit Party, 2019 से 2020 75% Reform, 2025 66% Reform, जनवरी से मार्च 2026 78% Reform, अप्रैल से जून 2026 81% Reform, जुलाई 2025 से जून 2026 78% Conservatives, 2025-26 3.6% Labour, 2025-26 0.15% रजिस्टर, विदेश में बताए गए छह डोनर Independent की गिनती विदेश में रहने वाले बताए गए डोनरों से आए डोनेशन का हिस्सा, Electoral Commission के रजिस्टर से। जुलाई 2025 से जून 2026 तक यह 78% है, लगभग सब दो आदमियों से। The Independent की अपनी गिनती 2025-26 के लिए, थोड़ी अलग परिभाषा पर, Reform के लिए 80% है, जबकि Conservatives के लिए 3.57% और Labour के लिए 0.15%। लगभग सारा बोझ दो नाम उठाते हैं।\nडोनर वह कहाँ रहता है Reform और Brexit Party को, रजिस्टर पर सितंबर 2026 में घोषित Christopher Harborne 1990 के दशक से Thailand में, 2011 से Thai नागरिक3536 £25.19m33 £36m37 Ben Delo 2026 तक Hong Kong में38 £8m33 £36m37 यानी सितंबर में दो दिनों में £72 मिलियन, दो crypto अरबपतियों से, एक पार्टी में। Tice ने कहा कि Delo ने पूरा पैसा पहले ही दे दिया “so that the Labour Party can\u0026rsquo;t legislate against it”37।\nइनमें से हर डोनेशन कानूनी था, और यह साफ़ कहना ज़रूरी है। UK के electoral register पर दर्ज कोई भी ब्रिटिश नागरिक permissible donor (डोनेशन देने के लिए योग्य) है, चाहे वह कहीं भी रहता हो, और दोनों आदमी ब्रिटिश नागरिक हैं। Channel 4 ने रिपोर्ट किया कि Harborne ने “specifically re-registered as a UK resident to cast his vote for the Brexit referendum whilst declaring just a few months later in a UK company documents that he lived in Thailand”, जिसे विशेषज्ञों ने “gaping loophole” कहा35। बड़ा छेद, हाँ। गैरकानूनी, नहीं।\nजब सरकार ने मार्च 2026 में विदेश में रहने वाले ब्रिटिश नागरिकों के डोनेशन पर साल में £100,000 की सीमा लगाने का कदम उठाया39, तो Delo ने देना बंद नहीं किया। उसने देश बदल लिया। वह Hong Kong से पहले ही £4 मिलियन दे चुका था, और उसने घोषणा की कि वह ब्रिटेन आ रहा है ताकि सीमा उस पर लागू न हो, और दूसरे अमीर प्रवासियों से भी ऐसा ही करने को कहा38।\nयहाँ रहना और यहाँ टैक्स भरना Reform की immigration योजना में आपकी जगह पक्की नहीं करेगा। यहाँ न रहना आपको उस पार्टी को पैसा देने से नहीं रोकता जिसने वह योजना लिखी।\nटैक्स के बिना प्रतिनिधित्व टैक्स भरने और कोई आवाज़ न होने के लिए एक मुहावरा है: taxation without representation। Reform की फ़ंडिंग इसका उल्टा है। एक आवाज़, और वह भी बहुत बड़ी, उन लोगों से जो नतीजे के साथ जीते नहीं।\nयह कोई नई चिंता नहीं है, और यह मेरी नहीं है। Parliament ने 2009 में इससे निपट लिया था। Political Parties and Elections Act 2009 की Section 10 कहती है कि कोई पार्टी किसी से £7,500 से ज़्यादा नहीं ले सकती, जब तक वह income tax के लिए “resident, ordinarily resident and domiciled in the United Kingdom” न हो40। उस नियम के तहत Harborne £7,500 से ऊपर एक पैसा भी नहीं दे सकता था।\nइसे कभी चालू ही नहीं किया गया। Legislation.gov.uk अब भी इस section को “Prospective” बताता है, जिसका मतलब है कि यह “has never come into force”40। सत्रह साल और चार सरकारें। फिर 16 जनवरी 2024 से वह पुराना नियम खत्म कर दिया गया जिसके तहत विदेश में रहने वाले ब्रिटिश नागरिक पंद्रह साल बाद register से हट जाते थे, इसलिए अब कोई नागरिक ज़िंदगी भर उस पर बना रह सकता है, और डोनेशन देता रह सकता है41।\nराजनीति में विदेशी पैसे पर सरकार की अपनी समीक्षा, Rycroft Review, जो मार्च 2026 में Parliament के सामने रखी गई, किसी का नाम लिए बिना इस पैटर्न का वर्णन करती है:\n\u0026ldquo;wealthy individuals who have chosen to live abroad in order to have their wealth taxed abroad are nevertheless currently entitled to make unlimited donations to UK political parties. Despite choosing to minimise their contribution to the UK Exchequer, these individuals have the opportunity to make potentially game-changing donations into British politics.\u0026rdquo;42\nऔर जोखिम के बारे में, यह कहती है कि ये डोनेशन “pose an additional risk of foreign money leaching into British politics”, क्योंकि “tracing the source of funds offered by individuals living abroad is more complex than for domestic donations”42।\nविदेशी पैसे को भ्रष्टाचार का जोखिम क्यों माना जाता है पार्टी फ़ंडिंग में भ्रष्टाचार पर Council of Europe के नियम देशों से कहते हैं कि वे “specifically limit, prohibit or otherwise regulate donations from foreign donors”43। वे नियम एक ऐसे दस्तावेज़ में हैं जिसका पूरा शीर्षक ही भ्रष्टाचार के बारे में है। करीब 63% देश पार्टियों को विदेशी डोनेशन पर पूरी तरह रोक लगाते हैं44। International IDEA, जो इस पर नज़र रखती है, इसकी वजह एक वाक्य में देती है जो Reform के बारे में ही लिखा गया लग सकता है:\n\u0026ldquo;A party that receives a significant amount of its funds from overseas may be less reliant on generating funds at home, thus weakening the ties between it and the citizens it should represent.\u0026rdquo;44\nऐसे असली दोषसिद्ध मामले हैं जहाँ विदेशी पैसे ने राजनीतिक नतीजे खरीदे। अमेरिका में Lev Parnas को एक अमीर रूसी के पैसे से गैरकानूनी डोनेशन देने का दोषी ठहराया गया45, और Imaad Zuberi को चुनावी अभियानों में विदेशी पैसा पहुँचाने के लिए 12 साल की सज़ा मिली46। यहाँ, Reform Wales का एक पूर्व नेता Vladimir Putin के एक दोस्त तक जाने वाली रिश्वत के लिए साढ़े दस साल की सज़ा काट रहा है, जिसकी बात आगे आती है।\nअब दूसरा पक्ष, क्योंकि यह मायने रखता है। इनमें से किसी भी मामले में विदेश में रहने वाला कोई ब्रिटिश नागरिक किसी पार्टी को कानूनी तौर पर पैसा नहीं दे रहा था। Council of Europe के अपने कानूनी सलाहकार कहते हैं कि विदेश में रहने वाले नागरिक, अगर वे देश में वोट दे सकते हैं, तो आम तौर पर उन पर “should not be restricted”47, और Rycroft Review ने पूरी रोक को “overly heavy-handed” माना42। उसे इस बात का भी कोई सबूत नहीं मिला कि 2024 का चुनाव विदेशी दखल से बिगड़ा42। प्रवासियों के यहाँ असली रिश्ते होते हैं। परिवार, पेंशन, एक घर जहाँ वे लौटना चाहते हैं।\nतो समस्या यह नहीं है कि कौन दे रहा है। समस्या है कितना।\nदेश क्या विदेश में रहने वाले नागरिक डोनेशन दे सकते हैं? सीमा Ireland हाँ किसी पार्टी को साल में €3,10048 Canada नागरिक और permanent residents साल में C$1,77549 United States हाँ federal contribution की सीमाएँ50 United Kingdom, मार्च 2026 तक हाँ कोई नहीं हर तुलनीय लोकतंत्र जो अपने विदेश में रहने वाले नागरिकों को डोनेशन देने देता है, वह यह सीमित करता है कि वे कितना दे सकते हैं। इस साल तक ब्रिटेन ऐसा नहीं करता था। Bangkok से एक वोट एक आवाज़ है, मेरी तरह ही। एक दिन में £36 मिलियन आवाज़ नहीं है। वह एक पार्टी का बजट है।\nब्रिटिश कौन माना जाए, और यह तय करने का पैसा कौन देता है इस पोस्ट के दोनों हिस्सों को साथ रखिए। Reform यह लाइन लगातार कसता जा रहा है कि यहाँ कौन belong करता है। settled status जाता है। बेनिफ़िट सिर्फ़ नागरिकों के लिए हो जाते हैं6। जब लोगों ने पूछा कि यहाँ बसा कोई परिवार क्या करे, तो Reform के एक MP ने सुझाव दिया कि वे नागरिकता के लिए आवेदन करें10। Gorton and Denton उपचुनाव में उसका उम्मीदवार और आगे गया: “It takes more than a piece of paper to make somebody \u0026lsquo;British\u0026rsquo;.”51\nफिर देखिए कि वह लाइन खींचने वाली पार्टी का पैसा कौन दे रहा है। एक आदमी जो तीस साल से Thailand में रहता है और Thai नागरिकता रखता है36। एक आदमी जिसने Hong Kong से पैसा दिया, फिर जब सीमा आड़े आई तो यहाँ आ गया38। उनके ब्रिटिश पासपोर्ट ही इस पैसे को कानूनी बनाते हैं। Reform के अपने तर्क पर, इसके लिए एक कागज़ के टुकड़े से ज़्यादा चाहिए।\nजो नर्स दस साल से यहाँ रहकर टैक्स भर रही है, उसे साबित करना पड़ता है कि वह यहाँ की है। जो डोनर तीस साल पहले चला गया, उसे नहीं, बशर्ते कागज़ पूरे हों। मुझे नहीं लगता कि यह ब्रिटिश लोगों की पार्टी है। मुझे लगता है कि यह वह पार्टी है जो तय करती है कि ब्रिटिश कौन माना जाए, और जिसका पैसा वे लोग देते हैं जो यहाँ रहते ही नहीं।\nडोनर किस चीज़ का कारोबार करते हैं दोनों बड़े डोनर कहते हैं कि उन्हें बदले में कुछ नहीं चाहिए। Harborne ने अपने £36 मिलियन को “a philanthropic gift to our country” कहा, और कहा “My competitive spirit inspired me to match it”52। Farage ने इसे और छोटे में कहा: “You know what Ben Delo and Christopher Harborne want? Nothing.”53\nमैं आपको यह नहीं बताने वाला कि कोई क्या चाहता है। मैं बताऊँगा कि उनके पास क्या है, उसके खिलाफ़ क्या पाया गया है, और Reform ने ठीक उन्हीं उद्योगों के बारे में क्या कहा और किया है। बिंदु आप खुद जोड़ लीजिए।\nChristopher Harborne उसके पास क्या है रिकॉर्ड क्या दिखाता है Tether, सबसे बड़ा stablecoin 12%, अमेरिका के एक मानहानि मुकदमे में उसके अपने बयान के अनुसार54 QinetiQ, Ministry of Defence (रक्षा मंत्रालय) का एक contractor 14.98%, Delaware की एक कंपनी के ज़रिए55। MoD ने मई 2025 में QinetiQ के साथ अपना £1.5bn का testing contract बढ़ाया56 AML Global, जेट फ़्यूल ब्रोकर इसका इकलौता person with significant control वही है57। The Guardian के मुताबिक $140m से ज़्यादा के अमेरिकी सैन्य contracts58 दूसरा राजनीतिक डोनेशन Conservatives को करीब £1.79m33, और Boris Johnson के निजी दफ़्तर को £1m59 Tether कंपनी का अपना एक रिकॉर्ड है। उसे Harborne से अलग रखिए, जो एक अल्पांश shareholder है और जिस पर यहाँ किसी चीज़ का आरोप नहीं है।\nNew York का Attorney General: “Bitfinex and Tether recklessly and unlawfully covered-up massive financial losses.” उन्होंने गलती माने बिना $18.5m चुकाए60। अमेरिका के commodities रेगुलेटर ने Tether पर $41m का जुर्माना लगाया और पाया कि 26 महीने के एक नमूने में उसके tokens के पीछे पर्याप्त reserves “for only 27.6% of the days” थे61। UN Office on Drugs and Crime: “USDT on the TRON blockchain has become a preferred choice for crypto money launderers in East and Southeast Asia.”62 Tether इससे इनकार करता है। जब National Crime Agency ने एक laundering नेटवर्क तोड़ा जिसने रूस के युद्ध में मदद के लिए एक बैंक खरीदा था, The Guardian ने रिपोर्ट किया कि ज़ब्त crypto का “vast majority” Tether का जारी किया हुआ था, और जोड़ा कि “there is no suggestion that Harborne himself is implicated”63। उसके वकीलों का जवाब यह है कि Tether के किसी निवेशक को इस बात का दोष देना कि यूज़र उसके tokens से क्या करते हैं, “akin to claiming the US Treasury is an accomplice in money laundering because it prints the US dollar” है63। Harborne के बारे में यह ठीक बात है। Tether के बारे में यह कोई खास जवाब नहीं है।\nBen Delo Delo ने BitMEX नाम का एक crypto exchange सह-स्थापित किया। 2022 में उसने New York में “willfully failing to establish, implement, and maintain an anti-money laundering… program at BitMEX” का दोष कबूल किया, और $10m का जुर्माना भरा “representing pecuniary gain derived from the offense”64।\nWillfully का मतलब है कि उसे पता था कि यह ज़िम्मेदारी है और उसने इसे न निभाने का चुनाव किया। US Attorney के अपने शब्द: “Arthur Hayes and Benjamin Delo built a company designed to flout those obligations; they willfully failed to implement and maintain even basic anti-money laundering policies.” नतीजे पर Department of Justice का फ़ैसला: “As a result of its willful failure to implement AML and KYC programs, BitMEX was in effect a money laundering platform.”64 इसने 2014 से 2020 के बीच एक भी suspicious activity report फ़ाइल नहीं की, 2018 में यह बताए जाने के बाद भी कि हैक किया गया पैसा इसके ज़रिए जा रहा है64। बाद में BitMEX पर खुद $100m का जुर्माना लगा65।\nयह plea money laundering का दोष सिद्ध होना नहीं है, और उस पर खुद किसी का पैसा launder करने का आरोप नहीं लगा। मार्च 2025 में Donald Trump ने उसे माफ़ कर दिया66। Delo अब इसे “a regulatory failing that isn\u0026rsquo;t even a crime in the UK” कहता है67।\nReform ने उनके उद्योगों के बारे में क्या कहा और किया है डोनरों का हित Reform का रुख, उसके अपने शब्दों या कामों में Stablecoins, जिन्हें सरकारी digital pound कमज़ोर कर सकता है Farage ने Bank of England के Governor से “Britcoin” छोड़ने की पैरवी की, और कहा कि इसे रोकने के लिए वह “prepared to go to prison” है68 Tether LBC पर Farage: Tether “is about to be valued as a $500 billion company”, और ब्रिटेन को इसे “embrace” करना चाहिए69 crypto उद्योग crypto वाले श्रोताओं से Farage: “When it comes to your industry… then I am your champion.”69 राजनीति में crypto का पैसा “We are the first political party in Britain who can accept donations in bitcoin and other cryptocurrencies.”70 crypto पर टैक्स crypto पर capital gains tax 24% से 10% करने का वादा, और Bank of England का एक bitcoin reserve70 विदेशी डोनरों पर सीमा और crypto डोनेशन पर रोक Tice: Reform इसे पलट देगा, “overturn it”71 रक्षा “incentives and tax breaks to boost the UK defence industry”58 Reform कहता है कि Harborne ने पार्टी से “had not discussed defence spending, defence policy or foreign policy”58। उसके वकील कहते हैं कि उसके कारोबारी हित “unconnected in any way whatsoever with his political affiliations” हैं58। मेरे पास इसके उलट कोई सबूत नहीं है और मैं कोई दावा नहीं कर रहा। मैं टेबल की ओर इशारा कर रहा हूँ।\n£5 मिलियन का तोहफ़ा Harborne के अपने वकीलों के अनुसार, 5 अप्रैल 2024 को उसने Nigel Farage को निजी तौर पर £5 मिलियन दिए72। कुछ हफ़्ते बाद Farage ने आम चुनाव न लड़ने का अपना फ़ैसला पलट दिया3। तोहफ़ा घोषित नहीं किया गया। The Guardian ने अप्रैल 2026 में इसका खुलासा किया।\nउसकी सफ़ाइयाँ एक के बाद एक आईं:\nकब Farage ने £5m को क्या बताया अप्रैल 2026, Telegraph से अपनी निजी सुरक्षा के लिए पैसा3 मई 2026, Sun से “unconditional basis” पर दिया गया, “a reward for campaigning for Brexit for 27 years”73 जुलाई 2026 कुछ ऐसा जिसे वह “spend on Ferraris” कर सकता था74 अगस्त 2026 “If I\u0026rsquo;ve made one sin, it\u0026rsquo;s that I haven\u0026rsquo;t filled in a piece of paper. I\u0026rsquo;ve broken no law.”75 Standards Commissioner (MPs के आचरण की जाँच करने वाले अधिकारी) ने 13 मई 2026 को “Failure to register an interest” की जाँच शुरू की76। 7 जुलाई को Farage ने उपचुनाव कराने के लिए अपनी सीट से इस्तीफ़ा दिया। जाँच रोकी गई, फिर 14 अगस्त को, जिस दिन उसके दोबारा चुने जाने की घोषणा हुई, फिर से खोली गई75। George Cottrell के बारे में भी शिकायतें की गई हैं, जो Farage का दोस्त और धोखाधड़ी का दोषी है, और जिसके बारे में Sunday Times ने खुलासा किया था कि उसने 2024 के चुनाव से पहले social media के काम, रहने की जगह और सुरक्षा का खर्च उठाया। Commissioner ने यह पुष्टि नहीं की है कि वे भुगतान अब जाँच का हिस्सा हैं या नहीं77। Jenrick ने इस प्रक्रिया को “a bit of a kangaroo court. It\u0026rsquo;s a stitch up.” कहा78।\nअभी तक कोई फ़ैसला नहीं आया है। Farage कहता है कि कोई घोषणा ज़रूरी नहीं थी, और हो सकता है अंत में वह सही निकले। लेकिन उसकी सफ़ाइयाँ उस टेबल में ऊपर से नीचे फिर पढ़िए। सुरक्षा, फिर इनाम, फिर Ferraris। हर सफ़ाई तभी सामने आई जब पिछली की धज्जियाँ उड़ाई जा रही थीं।\nवे डोनर जिन्हें कोई नहीं जाँचता कानून किसी कंपनी डोनर से एक ही सवाल पूछता है: क्या वह यहाँ रजिस्टर्ड है और यहाँ कारोबार कर रही है? यह नहीं पूछता कि पैसा कहाँ से आया, कंपनी इतना दे सकती है या नहीं, या इसके पीछे असल में कौन है। दो डोनर दिखाते हैं कि क्या-क्या निकल जाता है।\n$10 बिलियन का ट्रस्ट, एक डिज़ाइन फ़र्म और Iran Sasan Ghandehari Iran में जन्मा एक ब्रिटिश अरबपति है, जिसके बारे में रिपोर्ट है कि वह Switzerland में tax resident है और डोनेशन दे पाने के लिए अपना निवास UK ला रहा है। Reform से उसका वादा: “one or two million, it\u0026rsquo;s going to be more”, और “maybe number two, number three. It\u0026rsquo;s going to be regular payments.”79 उसके परिवार के HP Trust ने, जिसकी कीमत वह करीब $10 बिलियन आँकता है, जनवरी 2026 में Davos में Farage के accreditation के लिए £50,482.16 चुकाए80, वही यात्रा जिस पर Farage ने “fight the globalists” का वादा किया81।\nफिर वह फ़र्म है।\nInterior Architecture Landscape Ltd इसने Reform को क्या दिया सात तोहफ़ों में £200,000, जून से अगस्त 202582 Companies House क्या दिखाता है एक landscape architecture फ़र्म; 2021 से John Richard Simpson के नियंत्रण में; उससे पहले, दिसंबर 2020 से मई 2021 तक, Richard Darby के83 FT और Guardian ने क्या पाया FT: Darby HP Trust के लिए काम कर चुका था, और फ़र्म कर्ज़ में थी और उसके किसी client का सबूत नहीं था; Guardian: HMRC (ब्रिटेन का टैक्स विभाग) ने इसके खिलाफ़ winding-up petition (कंपनी बंद कराने की अर्ज़ी) दायर की थी84 Guardian ने क्या पाया Simpson ने Orico General Trading को संभाला था, Dubai की एक कंपनी जो HP Trust की थी और Iran में telecoms उपकरण भेजती थी85 वे क्या कहते हैं Ghandehari का वकील: परिवार फ़र्म का client था लेकिन “not responsible for its donations”। फ़र्म: Simpson “exercises genuine control over the company\u0026rsquo;s affairs” और तोहफ़े जायज़ ब्रिटिश कारोबार से आए8485 और वह प्रोजेक्ट जिसे Orico सप्लाई करती थी। Guardian की रिपोर्ट किए गए एक फ़्रांसीसी arbitration फ़ैसले के अनुसार, HP Trust के Ori Group के पास 2013 से 2016 के बीच Iran के एक fibre-optic उपक्रम का 49% था। बाकी 51% Astan Quds Razavi का था, वह धार्मिक संस्था जिस पर अमेरिका ने 2021 में तब के supreme leader के फ़ायदे के लिए Iran की अर्थव्यवस्था के “major parts” पर नियंत्रण रखने के लिए प्रतिबंध लगाए85। Ghandehari के वकील कहते हैं कि प्रोजेक्ट को फ़्रांसीसी और अमेरिकी अधिकारियों ने मंज़ूरी दी थी और उसका मकसद जानकारी तक पहुँच बढ़ाना था, कि यह उसके परिवार की Iran वाली संपत्ति ज़ब्त होने के साथ खत्म हुआ, और कि वह तीस साल से Iran नहीं गया। प्रतिबंध उपक्रम खत्म होने के पाँच साल बाद आए, और कुछ भी यह नहीं दिखाता कि Reform को दिया गया कोई पैसा Iran से आया।\nतो मैं यह नहीं कहूँगा कि आया। मैं यह कहूँगा। Farage Tehran पर सख्त रुख रखता है। उसका Davos पास एक ऐसे ट्रस्ट ने चुकाया जो supreme leader की संस्था के साथ कारोबार में था, और £200,000 उसकी पार्टी तक एक ऐसी फ़र्म से पहुँचे जिसके मालिक ने उसी ट्रस्ट की Dubai वाली सप्लाई कंपनी को बंद किया। Labour के एक MP ने Companies House से यह देखने को कहा है कि इसका असली मालिक कौन है84। Reform हर immigrant के कागज़ जाँचना चाहता है। मुझे Reform का कोई सार्वजनिक बयान नहीं मिला कि उसने इस पैसे के बारे में क्या जाँचा।\nकगार पर खड़ी कंपनियाँ Byline Times ने कम से कम सात ऐसी कंपनियाँ पाईं जिन्होंने strike-off (रजिस्टर से हटाए जाने), बंद होने या साफ़ दिखती आर्थिक मुसीबत का सामना करते हुए मिलकर Reform को £485,000 दिए86। FK Building सबसे साफ़ उदाहरण है, क्योंकि उसकी अपनी filings पूरी कहानी बताती हैं:\nतारीख FK Building Ltd 26 अगस्त 2025 Companies House इसे रजिस्टर से हटाने का नोटिस जारी करता है87 6 अक्टूबर 2025 देर से accounts फ़ाइल, जिनमें £290,543 की net liabilities87 7 अक्टूबर 2025 strike-off रुका87 8 अक्टूबर 2025 Reform को £100,000 देती है88 फ़रवरी 2026 सहयोगी कंपनियाँ FK Group, FK Construction और FK Facades £19 मिलियन से ज़्यादा के कर्ज़ के साथ administration (दिवालिया प्रक्रिया) में जाती हैं; 54 नौकरियाँ Keenan Holdings में जाती हैं, जिसकी मालिक Deborah Keenan है, जिसे संस्थापक की बेटी बताया जाता है86899091 6 जुलाई 2026 FK Building liquidation में जाती है; इसके directors का अपना बयान £3.1 मिलियन की कमी दिखाता है, जिसमें £409,647 HMRC के बकाया हैं92 16 अक्टूबर 2026 FK Resolv, ग्रुप का building-safety और remediation कारोबार, FK Group से FKR Group Ltd को जाता है, जो 25 जून 2026 को बनी कंपनी है और FK Building के director Francis Anthony Keenan की है9394 तोहफ़ा कानूनी था। Electoral Commission कहता है कि डोनेशन “are not the subject of an investigation”, और उसने एक नियम माँगा है कि डोनर कंपनी को असल में मुनाफ़ा कमाना चाहिए86। administration के बाद स्टाफ़ और एक सहायक कंपनी को परिवार की कंपनी में ले जाना कानूनी है, और administrators को इसका हिसाब लेनदारों को देना होता है। लेकिन देखिए कि सब कुछ आखिर में कहाँ पहुँचा। जब तक नियम नहीं बदलता, जो कंपनी टैक्स वाले का पैसा नहीं चुका सकती, वह फिर भी Reform को पैसा दे सकती है। लेनदारों के पास, HMRC समेत, खाली कंपनियाँ और £3.1 मिलियन का गड्ढा है। Keenans के पास स्टाफ़ और remediation कारोबार है। Reform के पास £100,000 हैं।\nकमाई प्रोफ़ाइल से होती है यहाँ मुझे आपसे सीधी बात करनी है, क्योंकि जो कहानी साफ़ दिखती है वह पूरी तरह सच्ची नहीं है।\nमैं पार्टी को अपने बड़े लोगों को पैसा देते ढूँढने निकला था, और filings में ऐसा रत्ती भर भी नहीं है। Farage “Unpaid Leader” के रूप में रजिस्टर्ड है4। Tice ने पार्टी को करीब £1 मिलियन बिना ब्याज उधार दिए और उसमें से £613,000 को डोनेशन में बदल दिया3395। 2025 में पार्टी £7.66 मिलियन के surplus पर बैठी थी28। membership का पैसा किसी की जेब में जाता नहीं दिखता।\nपैसा उसमें है जो प्रोफ़ाइल पार्टी के बाहर कमाता है। Farage का अपना register of interests496:\nFarage को किसने पैसा दिया किसके लिए रकम GB News presenting, 2025 करीब £330,000 से £370,000 Direct Bullion “brand ambassador”, 4 घंटे £135,000 Direct Bullion तीन महीने तक हर महीने “up to four hours”, मई 2026 £270,000 Cameo personalised वीडियो, 2025 £62,868 Blockworks, एक crypto मीडिया फ़र्म 2 घंटे £30,000 Club for Growth, Washington एक भाषण, साथ में Palm Beach की £9,466 की यात्रा £27,857 Direct Bullion ने दिसंबर 2024 से उसे £685,500 दिए हैं, और Byline Times ने पाया कि सोने की इस फ़र्म की marketing Reform सरकार को अशांति से जोड़ती थी और दर्शकों से सोना खरीदने को कहती थी97। उसका GB News का पैसा उसकी अपनी कंपनी Thorn In The Side Ltd में जाता है, जिसके बारे में Guardian लिखता है कि यह “not illegal” है98। उस कंपनी की net assets £3.1 मिलियन हैं और वह Farage को उसका अपना स्टूडियो किराए पर देने के लिए साल में £10,000 देती है99।\nStandards Commissioner ने पाया कि इसमें से £384,000 देर से रजिस्टर करके उसने MPs का code 17 बार तोड़ा, और माना कि यह “inadvertent because of staffing and other administrative issues” था100।\nपार्टी का कुछ पैसा उसके करीबी लोगों तक गया है। पार्टी के अपने खर्च के returns दिखाते हैं कि अंदर के लोगों और साथियों की चलाई पाँच फ़र्मों को £440,571 दिए गए। £202,124 Oak Hall Studios को गए, जिसे David Bull चलाता है, जो बाद में पार्टी chairman बना। Jupiter Visual Communications को £125,672 दिए गए और उसने बाद में £50,000 वापस दे दिए101102। किसी ने यह नहीं दिखाया कि इनमें से कोई काम नहीं हुआ या ज़्यादा दाम पर हुआ, और मैं ऐसा नहीं कह रहा।\nतो “cash cow” गलत तस्वीर है। सही तस्वीर एक platform की है। पार्टी ही वह चीज़ है जो Nigel Farage को चार घंटे के £135,000 के लायक बनाती है।\nCrypto: प्रचार के पैसे मिलते हैं, कीमत वोटर चुकाते हैं ऊपर वाली Blockworks की फ़ीस इकलौती नहीं थी। यह रहा Reform के इर्द-गिर्द crypto का कारोबार, Farage के अपने register, अदालतों और पार्टी के अपने दस्तावेज़ों से:\nक्या रिकॉर्ड Reform से रिश्ता BTC Inc सितंबर 2025 में करीब 11 घंटों के लिए Farage को £7,410 दिए103 वह Bitcoin conference चलाती है जहाँ Reform ने अपना crypto बिल लॉन्च किया104 Blockworks अक्टूबर 2025 में 2 घंटों के लिए Farage को £30,000 दिए105 पार्टी नेता को पैसा देने वाली एक crypto मीडिया फ़र्म Zebu Group 22 अक्टूबर 2025 को 2 घंटों के लिए Farage को £20,000 दिए106 उसी दिन उसने Reuters से, जब पूछा गया कि क्या crypto कारोबार Reform को पैसा देते हैं, कहा “not that I\u0026rsquo;m aware of”107 Stack BTC plc bitcoin रखने वाली एक कंपनी; Farage की कंपनी के पास इसका करीब 6.3% है, 5p और 10p प्रति share पर खरीदा108109 पार्टी नेता एक shareholder है: “I have long been one of the UK\u0026rsquo;s few political advocates for Bitcoin” “Farage coin”, “NIG Finance”, “Stonks Finance”, “Trump Mania” उसके पैसे लेकर बनाए Cameo क्लिप्स से प्रचारित memecoins, £72 प्रति क्लिप से; Guardian जिन-जिन की कीमत आँक सका, वे सब बाद में गिरे110 पार्टी नेता के पैसे लेकर किए गए प्रचार Celsius का CEL token £133 का एक Cameo जिसमें इसके बनाने वालों से इसके लिए “fight” करने को कहा110। अलग से, Celsius के संस्थापक को धोखाधड़ी के लिए 12 साल की जेल हुई, और CEL की कीमत “at times” “customer deposits” से टिकाई गई थी111 पार्टी नेता का पैसे लेकर किया गया प्रचार Tether UN पूर्वी और दक्षिण-पूर्वी एशिया में US$37 बिलियन के scam नुकसान को एक ऐसे बाज़ार में रखता है जो उसके अनुसार stablecoins पर चलता है; Tether कहता है कि उसने $5 बिलियन से ज़्यादा freeze किए हैं और 340 enforcement एजेंसियों के साथ काम करता है112113 Reform के सबसे बड़े डोनर के पास 12% Reform का crypto बिल Bitcoin conference में लॉन्च, फिर 30 मई 2026 को पार्टी की वेबसाइट से हटा दिया गया104 पार्टी की अपनी policy, बिना किसी सफ़ाई के वापस crypto डोनेशन सरकार की समीक्षा चेतावनी देती है कि crypto “channel foreign money into the political system” कर सकता है; Electoral Commission कहता है “Reform has not shared any crypto wallet address with us”114115 पार्टी ने इन्हें लेने का इंतज़ाम किया Farage का प्रवक्ता कहता है कि लोग किसी Cameo क्लिप के साथ बाद में क्या करते हैं, वह “is clearly outside Mr Farage\u0026rsquo;s knowledge or control”110, और ऊपर की हर फ़ीस घोषित की गई थी। Reform ने कोई crypto डोनेशन रिपोर्ट नहीं किया है, और Harborne और Delo के बड़े तोहफ़े नकद आए। किसी ने नहीं पाया कि Farage ने कोई नियम तोड़ा।\nअब देखिए कि कीमत कौन चुकाता है। इस देश के लोगों ने 2025 में investment fraud में £879.8 मिलियन गँवाए, औसतन £25,612 प्रति व्यक्ति, “often representing pension savings”। 60 से ऊपर के लोग इसकी रिपोर्ट करने की सबसे ज़्यादा संभावना रखते हैं116। 2024 में 66 प्रतिशत रिपोर्टों में संपत्ति crypto थी, और 55 से 64 साल के लोगों ने सबसे ज़्यादा गँवाया117। crypto पर FCA (वित्तीय रेगुलेटर) की अपनी सलाह एक लाइन की है: “you should be prepared to lose all your money”118।\nतो जो पार्टी पेंशनर के लिए बोलने का दावा करती है, उसके नेता को crypto फ़र्में पैसा देती हैं, उसके पास एक bitcoin कंपनी के shares हैं, और उसने उन coins के क्लिप बेचे जो गिर गए, जबकि crypto में अपनी पेंशन गँवाने वाले लोग ठीक वही उम्र का समूह हैं जिसके लिए खड़े होने का वह दावा करता है। इसमें बदबू आने के लिए यह ज़रूरी नहीं कि उसने किसी को ठगा हो। बस इतना काफ़ी है कि वह इसे बेचता रहे।\nTice: प्रॉपर्टी, टैक्स और £28,864 की एक कंपनी जिसने £500,000 दिए Richard Tice, Reform का deputy leader और Boston and Skegness का MP है। राजनीति से पहले वह प्रॉपर्टी कंपनियाँ चलाता था: 14 साल तक परिवार के Sunley Group का joint chief executive, फिर 2010 से 2014 तक CLS Holdings का chief executive119। उसके बाद उसका अपना प्रॉपर्टी कारोबार आया, Quidnet।\nQuidnet REIT, जिसका नियंत्रण उसके पास है, ने 2025 में £690,000 का pre-tax घाटा उठाया, उसकी इमारतें 52% किराए पर थीं और £13.4 मिलियन का बैंक कर्ज़ था, और फिर भी उसने उस साल £359,501 के dividends दिए और जनवरी 2026 में फिर उतने ही120। MP रहते हुए वह इससे हर तिमाही फ़ीस लेता है121।\nटैक्स पर, उसने हमें ठीक-ठीक बता दिया है कि वह कहाँ खड़ा है:\n\u0026ldquo;How many friends of yours would voluntarily choose to pay more tax than they are legally obliged to do?… Don\u0026rsquo;t morally or voluntarily give more tax to incompetent, wasteful hard-left, socialist governments.\u0026rdquo;122\nयह उन रिपोर्टों पर उसका जवाब था कि उसकी कंपनियों ने REIT ढाँचे के ज़रिए करीब £600,000 का corporation tax बचाया। एक दूसरी रिपोर्ट ने कहा कि उसे और उसके Jersey ट्रस्ट को दिए गए dividends पर करीब £91,000 नहीं काटे गए। Tice ने इसे “technicality” कहा और कहा कि कुल मिलाकर HMRC को सही रकम मिली123। उसके खिलाफ़ HMRC का कोई फ़ैसला नहीं है, और वह कहता है कि सारा टैक्स भरा गया।\nवह कंपनी जिसने आधा मिलियन दिया Britain Means Business Ltd, जो पहले Leave Means Leave थी, का इकलौता director और नियंत्रक Tice है124। जून 2024 में इसने एक ही हफ़्ते में Reform को £500,000 दिए33। इसके अपने फ़ाइल किए accounts इसकी net assets 2023 के अंत में £28,864 और 2024 के अंत में £10,479 बताते हैं, एक कर्मचारी के साथ124।\nBritain Means Business आँकड़ा Reform को दिया, 9 और 11 जून 2024 £500,000 Net assets, 2023 के अंत में £28,864 Net assets, 2024 के अंत में £10,479 पहले Leave Means Leave के रूप में Reform को दिया, मार्च 2020 £990,000 क्या मैं पूछ सकता हूँ कि 2023 के अंत में £28,864 की कंपनी को छह महीने बाद £500,000 कहाँ से मिले? उसके accounts नहीं बताते। Electoral Commission ने फ़रवरी 2025 में डोनेशन Metropolitan Police को भेजे, और Met, Political Parties, Elections and Referendums Act की section 61 के तहत संभावित अपराधों की जाँच कर रही है, जो इन नियमों से बचने से जुड़ी है कि कौन डोनेशन दे सकता है। दो लोगों से caution के तहत पूछताछ हुई है और किसी को गिरफ़्तार नहीं किया गया125। रिपोर्टिंग कहती है कि एक डोनर, Fiona Cottrell, ने उस जून Britain Means Business को £1 मिलियन दिए और उसका आधा Reform तक गया125। Byline Times पूछता है कि बाकी का क्या हुआ95। Tice का जवाब: “as far as I\u0026rsquo;m concerned, she\u0026rsquo;s a permissible donor and that\u0026rsquo;s the end of it.”126\nTice ने जाँच को “a politically motivated smear campaign” कहा127। जब उसने यह कहा, तब तक वह 17 महीने से चल रही थी।\nउसकी संगत कौन Tice के साथ क्या साझा रिकॉर्ड क्या दिखाता है Arron Banks Leave.EU की सह-स्थापना की; Tice 2016 से 2017 तक इसके बोर्ड पर था128 Electoral Commission ने Leave.EU पर जुर्माना लगाया, जो अपील पर घटकर £66,000 हुआ। कोई फ़ैसला Tice का नाम नहीं लेता129 George Cottrell कोई साझा कंपनी नहीं दिसंबर 2024 में Tice की कंपनी Tisun Investments में £78,100 का लोन डाला। Standards Commissioner ने जाँच से मना कर दिया130 Fiona Cottrell कोई साझा कंपनी नहीं तीन तोहफ़ों में Reform को £750,000 दिए33 Nicholas Tribe, Anthony Yiannakis, John Purcell हर एक के साथ उसकी तीन या चार प्रॉपर्टी कंपनियाँ131 कोई डोनेशन नहीं और कोई regulatory रिकॉर्ड नहीं। साझा बोर्ड बस एक साझा बोर्ड है उसकी खुद भी जाँच चल रही है। Standards Commissioner की सूची में है “Richard Tice MP (opened 20 August 2026) Rule 13 Disclosing details in relation to an investigation”76, जब उसने एक पुरानी शिकायत के बारे में X पर सार्वजनिक रूप से बात की और उसके पीछे वाले समूह को “anti semitic anti Israel lobby group” कहा132। अभी तक कोई नतीजा नहीं।\nJenrick: बिज़नेस से बाहर करने चले थे, खुद दफ़्तर में पहुँच गए अगस्त 2024 में Robert Jenrick ने कहा: “I want to put Reform out of business. I want to make them redundant.”22 अप्रैल 2025 में: “I want to send Nigel Farage back to retirement.”133\n15 जनवरी 2026 को Kemi Badenoch ने उन्हें शैडो कैबिनेट से निकाल दिया, उस चीज़ के लिए जिसे उन्होंने “irrefutable evidence that he was plotting” कहा, यानी दल बदलने की साज़िश134। वे उसी दिन Reform में शामिल हो गए, बोले “I want Nigel to be prime minister”, और Newark में इस्तीफ़ा देकर उपचुनाव लड़ने से मना कर दिया135। एक महीने बाद Reform ने उन्हें अपना चांसलर उम्मीदवार घोषित कर दिया23।\nतब अब “put Reform out of business”22 चांसलर के लिए Reform की पसंद23 “send Nigel Farage back to retirement”133 “I want Nigel to be prime minister”135 Conservative कैबिनेट मंत्री “the two main parties are rotten… They both broke Britain”136 नौ महीने। “out of business” बस इतने दिन चला।\nWestferry जनवरी 2020 में, हाउसिंग सेक्रेटरी के तौर पर, Jenrick ने पूर्वी लंदन में Richard Desmond की Westferry Printworks योजना को मंज़ूरी दी। उनके अपने अफ़सरों ने टाइमिंग दर्ज की: “SoS is/was insistent that decision issued this week ie tomorrow - as next week the viability of the scheme is impacted by a change in the London CIL regime.”137 लेवी में उस बदलाव से योजना को लगभग £40 million का नुकसान होता138। मंज़ूरी के दो हफ़्ते बाद Desmond ने Conservatives को £12,000 दिए139। दोनों एक फ़ंडरेज़िंग डिनर में साथ बैठे थे, जहाँ, Commons में Jenrick के ही शब्दों में, Desmond ने “did bring out his iPhone and show me some images of the development”137।\nजब मामला अदालत पहुँचा, Jenrick ने मान लिया कि फ़ैसला “unlawful by reason of apparent bias” था, और उसे रद्द कर दिया गया139। उन्होंने कहा: “We don\u0026rsquo;t believe there was any bias.”140 मिनिस्टीरियल कोड के तहत कभी कोई निष्कर्ष नहीं निकला और प्रधानमंत्री ने मामला बंद मान लिया137। रिकॉर्ड यही है: ज़ाहिरी पक्षपात की स्वीकारोक्ति, और असली पक्षपात का कोई निष्कर्ष नहीं।\nउसके बाद से उनके 2024 के Conservative लीडरशिप कैंपेन को दिए गए £37,500 के बारे में, जो कथित तौर पर किसी विदेशी स्रोत से आए थे, Electoral Commission का रेफ़रल 6 जनवरी 2026 को Met तक पहुँचा, उनके दल बदलने से नौ दिन पहले। Met जाँच कर रही है। Jenrick इस कहानी को “entirely false” कहते हैं, “an establishment determined to stop Reform” का काम141। किसी पर आरोप तय नहीं हुआ है। उन्होंने एक डिनर में कहा कि Birmingham के Handsworth में “I didn\u0026rsquo;t see another white face. That\u0026rsquo;s not the kind of country I want to live in”142। सितंबर 2026 में Reform के सम्मेलन में एक महिला प्रदर्शनकारी को बालों से घसीटकर बाहर निकाला गया और मारा गया। Jenrick: “Oh boohoo… come on, get a life.”143 फिर: “He should be given a medal for what he did.”144 इमिग्रेशन मंत्री के तौर पर उन्होंने Commons को बताया कि डिटेंशन में रखे 71% विदेशी अपराधी खुद को मॉडर्न स्लेवरी का शिकार बता रहे थे। UK Statistics Authority के प्रमुख ने कहा कि Home Office के अपने आँकड़े लगभग पाँचवाँ हिस्सा दिखाते थे145। Brussels में Farage Farage बीस साल MEP रहे, 1999 से 2020 तक, उसी पार्लियामेंट में जिससे वे ब्रिटेन को बाहर निकालना चाहते थे। उससे क्या मिलता था, इस पर वे साफ़ थे। 2009 में, जब पूछा गया कि 1999 से उन्हें खर्चों और भत्तों में कितना मिला: “It is a vast sum… I don\u0026rsquo;t know what the total amount is but - oh lor - it must be pushing £2 million.”146 अपने भत्तों से वे अपनी पत्नी को वेतन देते थे146।\nरिकॉर्ड स्रोत जनवरी 2018 से उनके वेतन से €40,000 काटे गए, यह वह पैसा था जो Christopher Adams को उनके असिस्टेंट के तौर पर दिया गया जबकि Adams UKIP के नेशनल नॉमिनेटिंग ऑफ़िसर थे, और जो “cannot be proved by Farage” पार्लियामेंट का स्रोत, Guardian147 उन्होंने 37% वोटों में हिस्सा लिया और 751 MEPs में 748वें नंबर पर रहे VoteWatch, Guardian147 Arron Banks की कंपनी Rock Services से दो साल की ऑफ़िस जगह, 1 जुलाई 2019 को घोषित, उसके खत्म होने के बाद और Banks की मदद की जाँच खुलने के छह हफ़्ते बाद उनकी अपनी घोषणाएँ148 ड्राइवर वाली कार, £4.4m के Chelsea मकान का किराया और अमेरिका के दौरे, Banks से £450,000 तक बताए गए, कभी घोषित नहीं Channel 4 के इनवॉइस, Independent149 EU की अदालत में उनका इकलौता केस, Council के अध्यक्ष को “damp rag” कहने पर 10 दिन की सज़ा के ख़िलाफ़, “manifestly inadmissible” कहकर खारिज, खर्चा उन्हीं पर General Court150 हर बार उनकी तरफ़ ने इसे उत्पीड़न कहा। €40,000 पर उनके ग्रुप ने कहा कि यह “a vindictive campaign by the European parliament of selective persecution of Eurosceptic MEPs” था147। Banks की मदद पर Farage: “it\u0026rsquo;s a purely private matter”151। €40,000 को उन्होंने कभी अदालत में चुनौती नहीं दी। पैसा वसूल लिया गया।\nपर जो सही है वह सही है, और इनमें से एक शिकायत जीती भी। 2016 में पार्लियामेंट ने UKIP के दबदबे वाली यूरोपीय पार्टी ADDE से €172,654.92 लौटाने को कहा। 2019 में EU General Court ने वह फ़ैसला रद्द कर दिया, क्योंकि फ़ैसला करने वाले पैनल के एक सदस्य ने पहले ही सार्वजनिक रूप से UKIP पर “fraudulent manipulation” का आरोप लगाया था, और अदालत ने पाया कि उसकी निष्पक्षता “seriously compromised” थी152। उस मामले में “vindictive” वाली बात सही ठहरी। पार्टी की फ़ाउंडेशन IDDE ने माना कि €33,863.50 अयोग्य था और अपना केस हार गई, जब पार्लियामेंट ने “serious allegations regarding the establishment of a system whereby donations were received in exchange for the award of contracts” को EU की एंटी-फ़्रॉड ऑफ़िस के पास भेजा153। एंटी-फ़्रॉड ऑफ़िस ने क्या निष्कर्ष निकाला, वह प्रकाशित नहीं हुआ है।\nPutin, Trump और एक रिश्वतखोर नेता Nathan Gill मार्च 2021 से Wales में Reform के नेता थे। नवंबर 2025 में रिश्वत के आठ मामलों में अपराध क़बूल करने के बाद उन्हें साढ़े दस साल की जेल हुई। जज ने पाया कि “The architect of these bribes was Oleg Voloshyn, a former pro-Russian Ukrainian MP”, और यह कि Viktor Medvedchuk, “a close friend of Vladimir Putin”, “the ultimate source of the requests and the money you received” थे154। ये अपराध 2018 और 2019 में हुए, जब वे Brexit Party के MEP थे। अदालत ने Reform के बारे में कोई निष्कर्ष नहीं दिया, और Reform ने उनके आचरण को “reprehensible, treasonous and unforgivable” कहा155। Farage ने उन्हें “bad apple” कहा25।\nPutin पर Farage के अपने शब्द मौसम के साथ बदलते रहे हैं:\nकब Putin पर Farage 2014 दुनिया का वह नेता जिसकी वे सबसे ज़्यादा तारीफ़ करते थे: “As an operator, but not as a human being, I would say Putin.”24 जून 2024 “We provoked this war. It\u0026rsquo;s – you know, of course it\u0026rsquo;s [Putin\u0026rsquo;s] fault, he\u0026rsquo;s used what we\u0026rsquo;ve done as an excuse.”156 अक्टूबर 2025 “Obviously, Putin is a very bad dude”25 Trump पर रिकॉर्ड ज़्यादा स्थिर है। DeSmog की गिनती से 2024 के चुनाव के बाद Farage Trump से जुड़े पंद्रह कार्यक्रमों में बोल चुके हैं, जिनमें Republican कन्वेंशन और CPAC शामिल हैं157। सितंबर 2025 में उन्होंने US Congress के सामने गवाही दी158 और Oval Office से पोस्ट किया: “It\u0026rsquo;s good to be back in the Oval Office.”159 उनके रजिस्टर में Club for Growth और Hillsdale College जैसी अमेरिकी कंज़र्वेटिव संस्थाओं से फ़ीस और यात्रा दर्ज है4। डोनर Delo के पास Trump की माफ़ी है66।\nरिकॉर्ड जो नहीं दिखाता वह है पार्टी में अमेरिकी पैसा। रजिस्टर पर US सरकार या Trump से जुड़ा कोई डोनेशन नहीं है, DeSmog खुद कहता है कि सीधी फ़ंडिंग का “no suggestion” है, और Elon Musk ने महीनों की बातों के बाद कुछ नहीं दिया और फिर दुनिया को बताया “Farage doesn\u0026rsquo;t have what it takes”160। अमेरिकी पैसा लाने की एक कथित कोशिश की पुलिस जाँच चल रही है, जिस पर आगे बात होगी।\nकमरे में और कौन है डोनरों का पैसा सिर्फ़ पार्टी में नहीं जाता। उससे नेता को दूसरों की मेज़ पर कुर्सी मिलती है। आधिकारिक रिकॉर्ड पर दर्ज दौरे ये हैं, और यह कि उनका खर्च किसने उठाया:\nदौरा किसने पैसे दिए रकम रिकॉर्ड Trump के दूसरे शपथ ग्रहण में Farage, जनवरी 2025 Christopher Harborne £27,616.76 Electoral Commission161 Farage और दो स्टाफ़ अमेरिका, नवंबर 2025, “speaking engagement and charity event”, बताया गया कि Mar-a-Lago में Bassim Haidar, Reform के एक डोनर £54,921.02 Farage का रजिस्टर162, DeSmog163 Farage UAE, दिसंबर 2025, “to attend the F1 and for meetings” Abu Dhabi सरकार और Abu Dhabi F1 £10,000 Farage का रजिस्टर164 Tice Israel, सितंबर 2025, “meetings with President and Foreign Minister” RFOI Ltd दो लोगों के £6,250 Tice का रजिस्टर165 Israel गया Reform का एक प्रतिनिधिमंडल, नवंबर 2025, जिसमें पार्टी चेयरमैन, बोर्ड का एक सदस्य और Tice के चीफ़ ऑफ़ स्टाफ़ थे Israel का विदेश मंत्रालय £4,861.27 प्रति व्यक्ति London Assembly रजिस्टर166, Lancashire Lead167, Novara168 यानी Washington, Palm Beach, Abu Dhabi और Israel, सब बारह महीनों के अंदर, और एक का भी खर्च उन लोगों ने नहीं उठाया जिनकी आवाज़ होने का Reform दावा करती है।\nअमेरिकी कमरा MAGA से रिश्ते Farage की स्पीकिंग डायरी पर नहीं रुकते। GB News के मालिक Paul Marshall और Legatum ने Alliance for Responsible Citizenship की स्थापना भी की और उसे पैसा भी देते हैं। फ़रवरी 2025 में उसके London सम्मेलन में Farage मुख्य वक्ता थे, साथ में US House Speaker Mike Johnson, Trump के Energy Secretary Chris Wright और Vivek Ramaswamy, और बताया गया कि Peter Thiel वीडियो से जुड़े169। DeSmog को मिली डोनरों की एक सूची में Ben Delo का नाम है, Trump के डोनर Ken Griffin और Anthony Pratt के बगल में170।\nऔर Tether, जिसका 12% Reform के सबसे बड़े डोनर के पास है, Trump की सरकार से जुड़ा है। Cantor Fitzgerald ने, जिसे डील तय होते समय Howard Lutnick चलाते थे, जो अब Trump के Commerce Secretary हैं, लगभग 5% हिस्सेदारी पर सौदा किया171, और Tether की नई अमेरिकी शाखा Bo Hines चलाते हैं, जो Trump की अपनी क्रिप्टो काउंसिल से आए172। ये कंपनी के रिश्ते हैं, Harborne के अपने नहीं। पर कंपनी उन्हीं की है।\nIsrael वाला कमरा Tice के दौरे का पैसा RFOI Ltd ने दिया, यानी Reform Friends of Israel ने। यह एक प्राइवेट लिमिटेड कंपनी है, जून 2025 में बनी और पब्लिक रिलेशन्स बिज़नेस के तौर पर रजिस्टर्ड173।\nCompanies House पर RFOI Ltd डायरेक्टर और सिग्निफ़िकेंट कंट्रोल वाला व्यक्ति, 16 जून से 8 दिसंबर 2025 Roy Zabludowicz, 75% या उससे ज़्यादा वोटिंग अधिकार173 उनका बाहर जाना 11 फ़रवरी 2026 को फ़ाइल हुआ, दर्ज तारीख़ के दो महीने बाद173 8 दिसंबर 2025 से डायरेक्टर Jason Pearlman और Lois Perry173 Jason Pearlman Israel के राष्ट्रपति Rivlin के मीडिया सलाहकार, फिर 2018 से Henry Jackson Society के डिप्टी डायरेक्टर174, फिर दो कार्यकाल तक राष्ट्रपति Herzog के मीडिया सलाहकार175। उनके यह काम लेने को Farage ने “a real coup” कहा176 Henry Jackson Society 2018 से Pearlman का नियोक्ता, एक ट्रांसअटलांटिक विदेश नीति और सुरक्षा थिंक टैंक174। इसके सह-संस्थापक और एग्ज़ीक्यूटिव डायरेक्टर Alan Mendoza नवंबर 2025 में वैश्विक मामलों के मुख्य सलाहकार बनकर Reform में आए, जिसे Farage ने “an excellent addition” कहा177178 Lois Perry मई से जून 2024 तक UKIP की नेता, फिर दिसंबर 2024 से Heartland Institute UK/EU की एग्ज़ीक्यूटिव डायरेक्टर, जो एक अमेरिकी क्लाइमेट-डिनायल थिंक टैंक की यूरोपीय शाखा है, जिसकी लॉन्चिंग में Farage “special guest of honour” थे179180 अब इसे कौन कंट्रोल करता है कंपनी फ़ाइल करती है कि कोई रजिस्टर करने लायक व्यक्ति नहीं है173 उसी महीने और साल में जन्मे एक Roy Zabludowicz Tamares की दो कंपनियों के डायरेक्टर, Chaim Zabludowicz के साथ181 Chaim “Poju” Zabludowicz Tamares Group के प्रमुख हैं, उन्होंने BICOM की स्थापना की और उसकी अध्यक्षता की, जो Israel की ओर से UK सरकार के साथ लॉबिंग करती है, और Conservatives को लगभग £380,000 दे चुके हैं। परिवार का बिज़नेस Soltam के इर्द-गिर्द बना था, जो एक इज़राइली रक्षा कॉन्ट्रैक्टर है182। Declassified UK कहता है कि RFOI के Roy Zabludowicz “appears to be” उनके बेटे हैं183, और मैं बात उन्हीं के शब्दों पर छोड़ता हूँ।\nदेखिए अब इसे कौन चलाता है। एक डायरेक्टर Israel के राष्ट्रपति कार्यालय से आए, Henry Jackson Society होते हुए, जिसके प्रमुख अब वैश्विक मामलों पर Reform के मुख्य सलाहकार हैं। दूसरी एक अमेरिकी थिंक टैंक की यूरोपीय शाखा चलाती हैं जिसे लॉन्च करने में Farage ने मदद की। Reform की Friends of Israel कंपनी वह जगह है जहाँ Israel वाला कमरा और अमेरिकी कमरा मिलते हैं।\nतो RFOI एक और प्राइवेट कंपनी है। जब इसने दौरे का पैसा दिया तब एक आदमी इसे कंट्रोल करता था, और उसके हटने के बाद से यह फ़ाइल करती है कि इसे कोई कंट्रोल नहीं करता। आप देख सकते हैं कि कौन उड़ा। आप यह नहीं देख सकते कि पैसा किसने दिया। मेरे हिसाब से यही इसका मक़सद है: एक कंपनी जो इसलिए है कि Reform के Israel दौरों का पैसा कौन दे रहा है, यह छिपा रहे। इसकी फ़ाइलिंग में ऐसा कुछ नहीं जो मुझे कुछ और सोचने की वजह दे।\nदो महीने बाद Israel की सरकार ने Reform के अपने एक प्रतिनिधिमंडल का खर्च उठाया। Novara, Declassified UK का हवाला देते हुए, उस छह दिन के दौरे पर मंत्रालय का कुल खर्च £50,000 से ज़्यादा बताता है, और यात्रा में Golan Heights शामिल थे168। Lancashire में Reform के काउंसिल लीडर गए, और उसके लिए काउंटी कैबिनेट की एक बैठक रद्द की गई167। London Assembly में Reform का एक सदस्य भी गया166। यानी एक विदेशी सरकार की मेहमान सूची, पार्टी चेयरमैन और उसके बोर्ड से लेकर देश के दोनों छोर की लोकल सरकार तक, Lancashire County Hall और London का City Hall।\nजून 2026 में Tice ने Israel-समर्थक प्रभाव पर Commons की बहस के पीछे की याचिका को “antisemitic in its very motivation and at its core” कहा। जुलाई में एक शिकायत खुली कि उन्हें बोलने से पहले दौरे की घोषणा करनी चाहिए थी184, और 27 अक्टूबर 2026 को Standards Commissioner ने उसे कोड का उल्लंघन मानकर सही ठहराया, अनजाने में हुआ बताकर185।\nजो पार्टी पैंतालीस साल के एक केयर वर्कर को रिन्यू होने वाले वीज़ा पर रखेगी, वह अपने डिप्टी लीडर की फ़्लाइटें एक ऐसी कंपनी से लेती है जिसके अंदर कोई झाँक नहीं सकता, और अपने चेयरमैन की एक विदेशी सरकार से। क्या मैं पूछ सकता हूँ कि Reform सरकार में विदेश नीति कौन तय करेगा? इस रिकॉर्ड पर तो वोटर नहीं।\nरूसी कमरा Reform के रजिस्टर पर कोई रूसी पैसा नहीं है, और मैं ऐसा होने का दिखावा नहीं करूँगा। जो है वह यह है:\nमामला रिकॉर्ड पर क्या है दूसरा पक्ष Farage को Harborne का £5m का तोहफ़ा Defence Secretary ने Farage से पुष्टि माँगी कि इसका कोई हिस्सा “derived from transactions with Russian state-linked energy companies” नहीं था, यह कहते हुए कि पत्र का मक़सद “is not to make allegations”186 Harborne की फ़्यूल कंपनी AML Global कहती है कि उसने “complied fully with all UK and international sanctions”186 AML Global के US सेना के फ़्यूल कॉन्ट्रैक्ट Unearthed की गिनती से, उनमें नामित रिफ़ाइनरियों ने 62 million टन से ज़्यादा रूसी, ईरानी या वेनेज़ुएलाई कच्चा तेल लिया187 Unearthed खुद कहता है कि “there is no suggestion that the company has breached UK or international sanctions”187 Tice का French Riviera में ठहरना, अगस्त 2025 Lubov Chernukhin से £1,400 की मेहमाननवाज़ी, जिनके पति 2004 तक रूस के डिप्टी फ़ाइनेंस मिनिस्टर थे188 वे कहती हैं कि दंपति का Putin के शासन से कोई संबंध नहीं और उन्होंने युद्ध की निंदा की है188 इनमें से कुछ भी किसी के ख़िलाफ़ निष्कर्ष नहीं है, और दाहिना कॉलम इसलिए है ताकि आप खुद तौल सकें। इसे Nathan Gill और Farage के “As an operator… Putin” के बगल में रखिए, तो Defence Secretary का वाक्य ही दिमाग़ में रह जाता है: एक पार्टी “under a Russian cloud that only transparency can lift”186।\nGB News के मालिकों के बारे में बार-बार दोहराई जाने वाली एक रूसी कहानी झूठी है। यह दावा कि Legatum के संस्थापक के रूसी इंटेलिजेंस से संबंध थे, एक US अदालत ने “a complete fabrication” ठहराया, और एक जूरी ने इसके पीछे के जाँचकर्ता के ख़िलाफ़ उन्हें $8 million दिलाए189। वह इस पोस्ट में या किसी और पोस्ट में नहीं आनी चाहिए।\n“We Just Don\u0026rsquo;t Have British-Resident Donors” सितंबर 2026 में Channel 4 News और Verbatim ने एक अंडरकवर जाँच प्रसारित की। एक अमीर अमेरिकी के बेटे बनकर एक रिपोर्टर Reform के पॉलिसी प्रमुख James Orr और एक वरिष्ठ सहयोगी Dan Jukes से मिला, और एक US कंपनी से उन तीन पोल्स का भुगतान करवाने का इंतज़ाम किया जो पार्टी ने करवाए थे, लगभग £32,500190191। बाद में पिता का रोल करने वाले एक अभिनेता को Farage से मिलवाया गया, एक कहीं बड़े डोनेशन के बारे में जो US से आना था190।\nOrr ने कैमरे पर वह बात कह दी जो धीमे से कही जाती है: “we just don\u0026rsquo;t have British-resident donors, British entities, that would support us.”191 Farage एक पोल के बारे में यह कहते फ़िल्माए गए: “It worked. Boom.”192\nक्या हुआ कब प्रसारण 3 सितंबर 2026 Reform: “a hoax perpetuated by foreign-funded climate-change activists”193 4 सितंबर Orr और Jukes हट गए, और पार्टी चेयरमैन ने कहा कि उनके लौटने का “no chance” है192 4 सितंबर Met: “potential offences requiring investigation”, डोनेशन की अपनी मौजूदा जाँच में जोड़ा गया194 9 सितंबर Reform की अपनी जाँच, उसके अपने बैरिस्टर और जनरल सेक्रेटरी द्वारा चलाई गई, ने पाया “no breach of electoral law by Reform UK”195 7 अक्टूबर Farage ने इसे “loose pub talk” और “a clear case of entrapment” कहा196। पार्टी किसी गलत काम से इनकार करती है, और किसी पर आरोप तय नहीं हुआ है। पर जो पार्टी अपने ही अफ़सरों से खुद को बरी करवाती है, जबकि उन्हीं घटनाओं की आपराधिक जाँच अभी खुली है, उसने कुछ भी बरी नहीं किया।\nबिंदुओं को जोड़ना पूरी बात एक पन्ने पर यह है। ठोस लाइनें आधिकारिक रिकॉर्ड पर हैं: कोई रजिस्टर, कोई फ़ाइलिंग, किसी अदालत या रेगुलेटर का निष्कर्ष, या किसी के अपने शब्द। डैश वाली लाइनें किसी नामित मीडिया संस्थान की रिपोर्टिंग हैं। आरोपों को कोई लाइन नहीं मिलती।\nबिंदुओं को जोड़ना Paul Marshall\u0026#160;(GBR) GB News का 40% Legatum\u0026#160;(ARE) GB News का 40% GB News £131m का घाटा ARC सम्मेलन Marshall, Legatum Abu Dhabi सरकार\u0026#160;(ARE) Farage यात्रा का पैसा Bassim Haidar\u0026#160;(IRL) NGA में जन्मे, US यात्रा Tether, 12% Cantor Fitzgerald हिस्सा Howard Lutnick\u0026#160;(USA) Chris Harborne\u0026#160;(THA) £25.2m + £36m QinetiQ, 14.98% MoD कॉन्ट्रैक्टर Nigel Farage\u0026#160;(GBR) £5m तोहफ़ा, £585k Trump और MAGA\u0026#160;(USA) 15 कार्यक्रम Britcoin का विरोध क्रिप्टो टैक्स कटौती Heartland\u0026#160;(USA) US क्लाइमेट डिनायल Nick Candy\u0026#160;(GBR) ट्रेज़रर Nathan Gill\u0026#160;(GBR) जेल, Putin-साथी की रिश्वत Reform UK 75 से 80% विदेश से BitMEX में क़बूलनामा Trump की माफ़ी Ben Delo\u0026#160;(GBR, ex-HKG) £8m + £36m Henry Jackson Society प्रमुख: Reform सलाहकार इज़राइली मंत्रालय\u0026#160;(ISR) Reform यात्रा का पैसा नवंबर 2025, £50k+ £4,861 प्रति व्यक्ति कौन गए David Bull, चेयर Gawain Towler, बोर्ड Tice के चीफ़ ऑफ़ स्टाफ़ Atkinson, Lancashire Wilson, London Richard Tice\u0026#160;(GBR) डिप्टी लीडर RFOI Limited Reform Friends of Israel RFOI डायरेक्टर Roy Zabludowicz\u0026#160;(GBR) दिसंबर 2025 तक, 75%+ Jason Pearlman\u0026#160;(GBR) पूर्व Herzog, पूर्व HJS Lois Perry\u0026#160;(GBR) Heartland UK/EU Britain Means Business Reform को £500k Met जाँच खुली, कोई आरोप नहीं क्रिप्टो फ़र्में Farage को £57k फ़ीस Stack BTC: उनका 6.3% Ghandehari\u0026#160;(CHE) HP Trust, ~$10bn Davos पास £50k दिया IAL Ltd लैंडस्केप डिज़ाइन फ़र्म Reform को £200k Keenan परिवार\u0026#160;(GBR) स्टाफ़ रखा, FK Resolv FK Building Ltd Reform को £100k HMRC का £410k बकाया आधिकारिक रिकॉर्ड नामित मीडिया की रिपोर्टिंग Reform को कौन पैसा देता है, उसे दिखाने वाले चैनल को कौन पैसा देता है, उसके दौरों का खर्च कौन उठाता है, कौन-सी क्रिप्टो कंपनियाँ उसके नेता को पैसे देती हैं, उनके पास क्या है, और Reform की नीतियाँ उसे कहाँ छूती हैं। हर लाइन का स्रोत नीचे की टेबल में है। एक लाइन किसी संबंध का तथ्य है, गलत काम का निष्कर्ष नहीं। संबंध हमें कैसे पता है Dubai की फ़र्म Legatum और Paul Marshall, दोनों के पास GB News का लगभग 40% है, जो £131m गँवा चुका है Wikipedia197, Left Foot Forward198 GB News Farage को प्रेज़ेंटर के तौर पर पैसे देता है, जुलाई 2024 से दिसंबर 2025 तक £585,000 रजिस्टर ऑफ़ इंटरेस्ट्स4, The New World199 Tice GB News पर प्रेज़ेंट कर चुके हैं The New World199 Marshall और Legatum ARC सम्मेलन को पैसा देते हैं, जहाँ Farage बोले Left Foot Forward169, DeSmog170 Trump के शपथ ग्रहण की Farage की यात्रा का पैसा Harborne देते हैं Electoral Commission161 Reform के डोनर Bassim Haidar Farage की US यात्रा का पैसा देते हैं, बताया गया Mar-a-Lago Farage का रजिस्टर162, DeSmog163 Abu Dhabi सरकार Farage की UAE यात्रा में पैसा लगाती है Farage का रजिस्टर164 Howard Lutnick की चलाई एक फ़र्म ने, जो अब Trump के Commerce Secretary हैं, Tether में हिस्सेदारी का सौदा किया The Block171 Farage और ट्रेज़रर Nick Candy Trump और MAGA कार्यक्रमों में बोलते हैं; Farage Heartland में, जो Reform के सम्मेलन में एक पैनल चलाता है DeSmog157 RFOI की डायरेक्टर Lois Perry Heartland UK/EU चलाती हैं DeSmog179 Harborne Reform और Brexit Party को £25.19m देते हैं, ऊपर से £36m का एलान Electoral Commission रजिस्टर33, BBC37 Harborne Farage को निजी तौर पर £5m देते हैं, अघोषित Guardian, उनके वकीलों की बताई तारीख़72 Harborne के पास Tether का 12% है उनकी अपनी US अदालत की प्लीडिंग54 Harborne के पास MoD कॉन्ट्रैक्टर QinetiQ का 14.98% है स्टॉक एक्सचेंज फ़ाइलिंग55, MoD56 Farage Britcoin के ख़िलाफ़ लॉबी करते हैं और Tether का प्रचार करते हैं Guardian68, Byline Times69 Reform क्रिप्टो टैक्स में कटौती और डोनेशन कैप पलटने का वादा करती है The Block70, Guardian71 कैप से बचने के लिए कदम उठाने के बाद Delo £8m देते हैं, ऊपर से £36m का एलान रजिस्टर33, Searchlight38 Delo ने BitMEX मामले में अपराध क़बूल किया, Trump ने माफ़ किया US Department of Justice6466 Farage MAGA कार्यक्रमों में बोलते हैं और अमेरिकी कंज़र्वेटिव संस्थाओं से पैसे पाते हैं रजिस्टर ऑफ़ इंटरेस्ट्स4, DeSmog157 Tice की कंपनी Britain Means Business £500,000 देती है, जबकि उसकी बैलेंस शीट £29,000 से कम है रजिस्टर33, Companies House124 उस कंपनी के ज़रिए आए डोनेशन और स्टिंग की Met जाँच करती है PA के ज़रिए Met के बयान125194 Reform Wales के पूर्व नेता Gill को उस पैसे से रिश्वत मिली जिसका सिरा Putin के एक साथी तक जाता है सज़ा सुनाते समय की टिप्पणियाँ154 RFOI Ltd, जिसे उस समय अकेला एक आदमी कंट्रोल करता था, Tice की Israel यात्रा का पैसा देती है Tice का रजिस्टर165, Companies House173 RFOI के डायरेक्टर Jason Pearlman Henry Jackson Society के डिप्टी डायरेक्टर थे, जिसके प्रमुख Alan Mendoza वैश्विक मामलों पर Reform के मुख्य सलाहकार बने Henry Jackson Society174, City AM177 इज़राइली विदेश मंत्रालय Israel गए Reform प्रतिनिधिमंडल का पैसा देता है London Assembly रजिस्टर166 Ghandehari का HP Trust Farage के Davos पास के लिए £50,482.16 देता है Farage का रजिस्टर80 IAL Ltd Reform को £200,000 देती है; इसे HP Trust का एक पूर्व कर्मचारी कंट्रोल करता था, और इसके मालिक ने HP Trust की Dubai सप्लाई कंपनी अपने हाथ में ले ली Electoral Commission82, Companies House83, FT और Guardian8485 FK Building अपना स्ट्राइक-ऑफ़ रुकने के अगले दिन Reform को £100,000 देती है, फिर HMRC का कर्ज़ लेकर लिक्विडेशन में चली जाती है Electoral Commission88, Companies House8792 नौकरियाँ और रेमेडिएशन का बिज़नेस Keenan परिवार की कंपनियों के पास चले जाते हैं Companies House919493 BTC Inc, Blockworks और Zebu Farage को फ़ीस में £57,410 देते हैं; उनकी कंपनी के पास Stack BTC का 6.3% है Farage का रजिस्टर103105106108 दाहिने कॉलम को ऊपर से नीचे पढ़िए। उसमें से कुछ भी मेरी राय नहीं है। राय यह है कि बायाँ कॉलम जोड़कर क्या बनता है, और अपनी राय मैं आख़िर में दूँगा।\n“The Bad Apples Are Gone” जून 2024 में Channel 4 ने Clacton में Reform के एक कैनवसर को फ़िल्माया जो Rishi Sunak के लिए एक नस्लीय गाली इस्तेमाल कर रहा था और सुझा रहा था कि प्रवासियों को “target practice” के लिए इस्तेमाल किया जाए200। Farage ने कहा कि वह आदमी “an actor by profession” था201। Ofcom ने Channel 4 के ख़िलाफ़ 270 से ज़्यादा शिकायतें खारिज कर दीं, यह कहते हुए कि उन्होंने “not raise substantive issues warranting further investigation”202, और यह साबित करने वाला कोई सबूत कभी सामने नहीं आया कि उसे प्लांट किया गया था। फिर Farage ने एक वादा किया: “Have we had a few bad apples? We have… the bad apples are gone. We\u0026rsquo;ll never have them back.”203\nदो साल बाद ITV ने एक रिपोर्टर को साल भर पार्टी के अंदर रखा। उसके प्रोग्राम Undercover: A Year in Reform ने Solihull के एक काउंसलर और डिप्टी मेयर को फ़िल्माया जो एशियाई परिवारों को “absolute parasites” कह रहे थे और कह रहे थे “stick them on planes and f*** them off to Pakistan”, Bromley की एक काउंसलर को जो अश्वेत बच्चों को “like f****** animals” कह रही थी, और एक एक्टिविस्ट को जो कह रहा था “you cannot be a Muslim and British… it\u0026rsquo;s like oil and water”204205। Reform का जवाब: “There is no room for racism in Reform UK”, और “a handful of individuals who do not share our values will initially make it through vetting.”206\nमुट्ठी भर। ITV से पहले रिकॉर्ड पर यह था, हर एक किसी मुख्यधारा के मीडिया संस्थान ने रिपोर्ट किया:\nकौन पद क्या कहा क्या हुआ Ian Cooper Staffordshire County Council के Reform लीडर “No foreign national or first generation migrant should be allowed to sit in Parliament” सदस्यता रद्द207 Chris Parry मेयर पद के उम्मीदवार Lammy “must go home to the Caribbean”; बाद में एक यहूदी स्वयंसेवी समूह की तुलना “Islamists on horseback” से की पहली बार के बाद रखे गए, दूसरी बार के बाद निलंबित208 Sarah Pochin MP “adverts full of black people, full of Asian people” Farage ने इसे “ugly” कहा, कोई कार्रवाई नहीं209 Senga Beresford MSP मुसलमानों के बारे में “deport the lot of them” पर “yes” लिखा स्कॉटिश नेता: “something fruity in the past”, कोई कार्रवाई नहीं210 Stuart Prior काउंसलर गोरे लोगों को “the master race” कहने वाले पोस्ट (वे इनकार करते हैं कि अकाउंट उनका था) निष्कासित211 Glenn Gibbins Sunderland के काउंसलर नाइजीरियाई लोगों को “melted down” करके “fill in the pot holes” किया जाए निलंबित, फिर वापस लिए गए, फिर पुलिस ने आरोप लगाए212 और ऊपर से, नेता के अपने शब्दों में। 2024 में मुसलमानों पर: “I\u0026rsquo;m afraid I found some of the recent surveys saying that 46% of British Muslims support Hamas.”213 मार्च 2026 में, रमज़ान की एक सार्वजनिक इफ़्तार पर, यह आयोजन “the attempt to overtake, intimidate and dominate our way of life” था, और “we have to stop this kind of mass demonstration”214।\nकिसी अदालत या रेगुलेटर ने Reform को एक पार्टी के तौर पर नस्लवादी नहीं पाया है। Ofcom और Essex Police ने 2024 के मामलों में क्लीन चिट दी, इक्वैलिटी रेगुलेटर से की गई एक शिकायत का कुछ नहीं निकला, और Gibbins के केस की सुनवाई अभी बाकी है212। Farage के स्कूल के दिनों के आरोप विवादित हैं और वे उनसे इनकार करते हैं। पर जनता ने अपना मन बना लिया है: YouGov ने पाया कि 47% वयस्क मानते हैं कि Reform आम तौर पर नस्लवादी है, और जातीय अल्पसंख्यक वयस्कों में 69%215216।\nकट्टरता के लिए निलंबित, गर्मियों तक वापस निलंबन का एलान होता है। वापसी का नहीं। रिकॉर्ड एक पैटर्न दिखाते हैं:\nकौन किस बात पर निलंबित वापसी Tom Pickup, Lancashire एक WhatsApp ग्रुप जिसमें एक सदस्य ने “mass Islam genocide” की माँग की; उनकी अपनी टिप्पणियाँ “inappropriate” तीन महीने बाद व्हिप बहाल, फिर एडल्ट सोशल केयर के कैबिनेट मेंबर बनाए गए217218 Paul Cutts, Doncaster पोस्ट जिन्होंने “targeted the Muslim faith in a derogatory way” लगभग छह हफ़्ते में व्हिप बहाल219 Glenn Gibbins, Sunderland नाइजीरियाई लोगों वाला पोस्ट “final written warning” के साथ वापस, फिर आरोप लगे220212 Ben Rowe, Plymouth पोस्ट जिनमें कहा गया कि “the Jews” “forcing other races on our societies” थे “final written warning” के साथ वापस220 अब देखिए पार्टी वफ़ादारी तोड़ने वालों से कैसे पेश आती है। Rupert Lowe, एक MP जिनकी नेतृत्व से अनबन हुई, निलंबित किए गए, पार्टी ने पुलिस में रिपोर्ट किया और निष्कासित कर दिया। Crown Prosecution Service ने कोई आरोप नहीं लगाया221। Kent में, जिन काउंसलरों की एक लीक हुए वीडियो के बाद अपने लीडर से अनबन हुई, उन्हें “undermining the interests of the party” के लिए निष्कासित कर दिया गया222।\nITV ने फ़िल्माया कि यह अंदर से कैसा दिखता है। पार्टी के कम्युनिकेशंस डायरेक्टर Ed Sumner ने अंडरकवर रिपोर्टर से कहा कि “defend the indefensible” के लिए तैयार रहे, एक उम्मीदवार को “clearly a racist” कहा और कहा कि उन्हें उम्मीद है उसे निकाल दिया जाएगा। उसी उम्मीदवार के बारे में Farage का निर्देश: “He must apologise to Lammy, if David Lammy\u0026rsquo;s taken offence.”223 उसे रखा गया। एक अफ़सर से जब कहा गया कि एक काउंसलर की एक व्हाइट-नेशनलिस्ट डेटिंग साइट पर प्रोफ़ाइल है: “It\u0026rsquo;s not a resignation issue, is it?”224\nनस्लवादी पोस्ट पर तीन महीने और वापसी का रास्ता। वफ़ादारी तोड़ने पर बाहर का रास्ता। किसी फ़ुटेज में कोई यह कहता नहीं दिखता कि निलंबन दिखावे के लिए हैं, और मैं ऐसा दावा नहीं कर रहा। टेबल काफ़ी है। जो पार्टी नस्लवाद को उसी तरह अनुशासित करती जैसे वह असहमति को करती है, उसकी टेबल कहीं छोटी होती।\nसब कुछ बदनाम करने की साज़िश है इनमें से हर कहानी को एक ही जवाब मिला। यह बदनाम करने की साज़िश थी, धोखा था, प्लांट था, एस्टैब्लिशमेंट था। तो मैंने गिना। बारह बार पार्टी या उसके वरिष्ठ लोगों ने रिकॉर्ड पर किसी कहानी को खारिज किया, और उसके बाद क्या हुआ:\nकहानी उन्होंने क्या कहा आगे क्या हुआ Clacton का कैनवसर, 2024 “an actor by profession”201 कैंपेन से हटाया गया; Ofcom ने 270+ शिकायतें खारिज कीं202 Farage का £5m का तोहफ़ा, 2026 “There is no case to answer”; “a stitch up”78225 वे मानते हैं कि उन्होंने इसे लिया और घोषित नहीं किया; Standards जाँच खुली है76 Sunderland के काउंसलर, 2026 Tice: “all of this smearing and this sneering”226 पुलिस ने आरोप लगाए और फिर से निलंबित212 Jenrick का लीडरशिप डोनेशन, 2026 “just a smear… put out by the Conservative Party”227 Met जाँच खुली141 Met की डोनेशन जाँच, 2026 Tice: “a politically motivated smear campaign”127 पहले से 17 महीने से खुली, दो लोगों से सावधानी के तहत पूछताछ125 डोनेशन स्टिंग, 2026 “a hoax”, “yet another establishment attack”, “entrapment”193196 एक दिन में दो सहयोगी बाहर; पाँच दिन में Met जाँच192194 ITV अंडरकवर, 2026 “no depth that the establishment won\u0026rsquo;t sink to”228 काउंसलरों ने इस्तीफ़ा दिया या निलंबित हुए229 Coutts पर BBC, 2023 Farage ने बैंक को “very, very dishonest” कहा230 वे सही थे: BBC ने माफ़ी माँगी231 Lowe, 2025 Lowe: “a sinister attempt to weaponise the criminal justice system against me”232 वे सही थे: कोई आरोप नहीं221 तीन और अभी अनसुलझे हैं। बारह में से सात कम से कम आंशिक रूप से सही निकलीं। दो बार खारिज करना सही था। किसी ब्रॉडकास्टर के ख़िलाफ़ पार्टी की एक भी शिकायत सही नहीं ठहराई गई।\nअलग-अलग लोगों और अलग-अलग सालों में वही शब्द दोहराए जाते हैं: “the establishment”, “plant”, “election interference”। जब ITV का वीडियो आया, Reform ने पत्रकारों की पुलिस में रिपोर्ट कर दी। News Media Association ने इसे “a sinister approach that stifles public-interest reporting” कहा और कहा कि आरोपों का “used to intimidate journalists or deflect attention from the issues their reporting has exposed” नहीं होना चाहिए233। NUJ ने इसे “a thinly-masked Strategic Lawsuit Against Public Participation (SLAPP) style move” कहा234। Hampshire पुलिस ने कहा कि वह सामग्री की समीक्षा कर रही है, और Met ने कहा कि उसे ऐसी किसी रिपोर्ट की जानकारी नहीं233।\nयह क्यों काम करता है, और यह काफ़ी क्यों नहीं है रिसर्च में इसका एक नाम है। किसी सच्ची कहानी को फ़र्ज़ी बताने से नेता को “the liar\u0026rsquo;s dividend” मिलता है235। American Political Science Review में 15,000 से ज़्यादा लोगों पर हुई एक स्टडी ने पाया कि मिसइन्फ़ॉर्मेशन के झूठे दावे नेता का समर्थन बढ़ाते हैं, और चुप रहने या माफ़ी माँगने से ज़्यादा बढ़ाते हैं। उसने यह भी पाया कि वीडियो सबूत के सामने यह तरीका ज़्यादातर नाकाम रहता है236। शायद इसीलिए ITV के वीडियो का जवाब पुलिस थी।\nसार्वजनिक पद पर बैठा हर व्यक्ति जिस मानक पर हस्ताक्षर करता है वह है Seven Principles of Public Life। जवाबदेही: सार्वजनिक पद धारकों को “must submit themselves to the scrutiny necessary to ensure this”। ईमानदारी: उन्हें “should be truthful”237। MPs का Code of Conduct इन्हीं पर बना है238। किसी चीज़ को बदनाम करने की साज़िश कहना ऐसा उल्लंघन नहीं है जिस पर Standards Commissioner कार्रवाई कर सके, और मैं यह नहीं कह रहा कि है। मैं यह कह रहा हूँ कि यह जाँच के सामने खुद को पेश करने का ठीक उल्टा है।\nFarage जानते हैं कि असली खंडन कैसा दिखता है, क्योंकि उन्होंने एक किया है। जब BBC ने उनकी Coutts वाली कहानी गलत बताई, उन्होंने बैंक से अपनी फ़ाइल निकलवाई, बात साबित की, और BBC ने माफ़ी माँगी231। बदनामी से ऐसे निपटा जाता है: सबूत से। Society of Editors ने इसे एक वाक्य में कहा: “If a council believes a report is inaccurate, it should challenge it with evidence.”239 जब सबूत होता है, तो पेश किया जाता है। जब नहीं होता, तो आपको “establishment” मिलता है।\nआप उन्हें इतना ज़्यादा क्यों देखते हैं 650 में से Reform के पाँच MP हैं। टेलीविज़न देखकर आपको यह पता नहीं चलेगा।\nCardiff University गिनती है कि शाम के मुख्य बुलेटिन क्या कवर करते हैं। उनके आँकड़े240241242:\nपैमाना Reform तुलना 2025 की पहली छमाही में पार्टी वाले BBC News at Ten बुलेटिन 25% Lib Dems, 72 MP: 17% किसी आइटम का मुख्य विषय, BBC और ITV at Ten, 2025 69 आइटम Conservatives 45, Lib Dems 14, Greens 4 सबसे ज़्यादा ज़िक्र वाली विपक्षी पार्टी, सितंबर 2025 Reform, 37 Conservatives, आधिकारिक विपक्ष, 25 ITV News at Ten पर Farage, सितंबर 2025 49 ज़िक्र Badenoch 33, Davey 10 BBC की वजह ओपिनियन पोल हैं242। ठीक है। तो उसे बराबरी से लागू कीजिए। उन्हीं रिसर्चरों ने पाया कि 2025 की दूसरी छमाही में Greens पोल्स में 11% से 17% पर पहुँचे, और उनकी कवरेज टस से मस नहीं हुई242। जो नियम हमेशा सिर्फ़ एक पार्टी को ऊपर उठाए, वह नियम नहीं है।\nऔर उस एयरटाइम में जो जाता है वह संदेश है, रिकॉर्ड नहीं। इस पोस्ट के ज़्यादातर निष्कर्ष कहीं न कहीं रिपोर्ट हो चुके हैं, कुछ BBC ने भी किए। जो कोई ऑन एयर नहीं करता वह है उन्हें जोड़ना। आम बचाव निष्पक्षता का है, और BBC के अपने नियम उसे गिरा देते हैं: “Achieving impartiality does not preclude making evidence-based judgements or making an editorial judgement to focus scrutiny on a particular position”, और “false equivalence does not achieve impartiality and should be avoided”243। हर पार्टी पर वही जाँच चलाइए, वही कॉलम और सबूत का वही मानक, और वह निष्पक्ष है। किसी पर भी न चलाना तटस्थता नहीं है। वह बस रिकॉर्ड को अनकहा छोड़ देता है। और जो लोग बिना जानकारी के रह जाते हैं वे वही हैं जिन पर Reform का तरीका टिका है, वे वोटर जिन्हें आसानी से हाँका जा सके, जिन्हें हर रात नारा मिलता है और निष्कर्ष कभी नहीं।\nयह नया भी नहीं है। Farage Question Time पर 38 बार आ चुके हैं, लगभग सारे उससे पहले जब वे कभी Commons में बैठे। सर्वकालिक सूची में उनसे ऊपर हर नाम लंबे समय तक MP या मंत्री रहा है, और साल में 1.9 बार के हिसाब से उनकी दर उन सबमें सबसे ज़्यादा है244245।\nअपना एक प्रोपेगैंडा चैनल फिर GB News है, जिसका मालिकाना और पैसा काफ़ी हद तक Dubai से आता है। उस पर आगे और। Andrew Neil, जिन्होंने इसे शुरू करने में मदद की, कहते हैं कि अब यह Reform के लिए वही भूमिका निभाता है जो Trump के लिए Fox News निभाता है: “they have turned GB News into the Reform channel”199।\nReform की हस्ती GB News उन्हें क्या देता है Nigel Farage, नेता उनका अपना शो, जुलाई 2024 से दिसंबर 2025 तक £585,000 फ़ीस, और उनकी कंपनी के पास GB News के लगभग पाँच लाख शेयर199 Lee Anderson, MP शुक्रवार रात के एक शो के लिए MP की तनख़्वाह के ऊपर साल के £100,000199 Richard Tice, डिप्टी लीडर प्रेज़ेंटर199 Matt Goodwin प्रेज़ेंटर, जिन्होंने Gorton and Denton उपचुनाव पर एक शो होस्ट किया, उसमें Reform का उम्मीदवार घोषित होने से चार दिन पहले199 Reform छोड़ने के बाद Ben Habib और Rupert Lowe दोनों में से हर एक के अपनी पार्टी शुरू करते ही न्योते बंद हो गए246 The New World ने 20 अनुभवी पत्रकारों को इसके घंटों के प्रसारण के सामने बिठाया, हर प्रोग्राम पर दो, और पाया “a systemic use of Reform politicians, candidates and supporters”199। एक समीक्षक ने Farage के अपने प्रोग्राम को “Farage propaganda dressed up as a panel show” कहा199।\nतो इसे वही कहिए जो यह है। जो चैनल पार्टी के नेता, उसके डिप्टी लीडर और उसके एक MP को प्रेज़ेंट करने के पैसे देता है, उसके उम्मीदवारों को बुक करता है, जो उसे छोड़कर जाते हैं उन्हें हटा देता है, और विरोधी पक्ष का एक मेहमान बिठाता है ताकि उसकी बात दबाई जा सके, वह किसी झुकाव वाला न्यूज़ चैनल नहीं है। वह ब्रॉडकास्टिंग लाइसेंस वाला Reform का प्रोपेगैंडा चैनल है। यह मेरी राय है, और उसका सबूत ऊपर की टेबल में है।\nDubai से मालिकाना, Dubai से पैसा Reform ब्रिटेन को ब्रिटिश लोगों के लिए होने की बात करती है। देखिए जो चैनल इसे बेचता है उसका मालिक कौन है।\nGB News की पैरेंट कंपनी All Perspectives Ltd का मालिक कहाँ हिस्सेदारी Legatum Limited, एक प्राइवेट इन्वेस्टमेंट फ़र्म, जिसकी स्थापना New Zealand में जन्मे Christopher Chandler ने की Dubai, United Arab Emirates लगभग 40%197247 Sir Paul Marshall, हेज फ़ंड मैनेजर, The Spectator और UnHerd के मालिक भी London लगभग 40%197 एग्ज़ीक्यूटिव, एडिटर और प्रेज़ेंटर, उनमें Farage की कंपनी भी बाकी197199 GB News के चेयरमैन Alan McCormick Legatum में पार्टनर हैं197। चैनल लॉन्च करने के लिए जुटाए गए £60 million में से ज़्यादातर Legatum, Marshall और Discovery से आए197।\nऔर इसने कभी मुनाफ़ा नहीं कमाया। मई 2025 तक के साल में £26.2 million के रेवेन्यू पर इसे £22 million का नुकसान हुआ, और 2021 में लॉन्च के बाद से £131 million का। मालिकों ने उस साल इसे ऑन एयर रखने के लिए £17.7 million और डाले198248। कोई बिज़नेस पैसा कमाने के लिए पाँच साल ऐसे घाटे में नहीं चलता। वह उसके लिए चलता है जो उससे खरीदा जाता है।\nअब इसे पार्टी डोनेशन के क़ानून के बगल में रखिए। कोई कंपनी किसी ब्रिटिश राजनीतिक पार्टी को पैसा तभी दे सकती है जब वह Companies Act के तहत रजिस्टर्ड हो, UK में इनकॉर्पोरेटेड हो और UK में बिज़नेस करती हो249। Legatum इनमें से कुछ भी नहीं है। यह Reform को एक पैसा भी नहीं दे सकती।\nइसे ज़रूरत भी नहीं है। Dubai की एक फ़र्म का पैसा उस चैनल का घाटा भरता है जो Reform के नेता, उसके डिप्टी लीडर और उसके एक MP को पैसे देता है, उसके उम्मीदवारों को ऑन एयर लाता है, और अपनी शामें Reform के विषयों पर बिताता है। इसमें से कुछ भी डोनेशन नहीं है, इसलिए इसमें से कुछ भी Electoral Commission के रजिस्टर पर नहीं आता। Farage अपनी फ़ीस को कमाई के तौर पर घोषित करते हैं, और सिस्टम को बस इतना ही दिखता है4।\nमैं यह नहीं कह रहा कि कोई मनी लॉन्ड्रिंग कर रहा है। वह अपराध है, उसका किसी पर आरोप नहीं लगा है, और मैं यह नहीं कहूँगा। पर जो रास्ता विदेश के पैसे को किसी पार्टी के नेता और उसके संदेश तक पहुँचने देता है, रजिस्टर पर बिना किसी डोनेशन के, ठीक वैसी चीज़ है जिसकी जाँच और ऑडिट होनी चाहिए, भले बस तसल्ली के लिए। मैं यह कह रहा हूँ कि असर वही है, और यह क़ानूनी है। जिस पैसे को क़ानून पार्टी के सामने वाले दरवाज़े से अंदर जाने से रोकता है, वह एक टेलीविज़न चैनल के ज़रिए पार्टी के नेता और पार्टी के संदेश तक पहुँच जाता है, और डोनेशन के नियम उसे कभी देखते ही नहीं। Electoral Commission के चेयर ने MPs को बताया कि नियम कमज़ोर और पुराने हैं246। कमज़ोर और पुराना ऐसा ही दिखता है।\nक्या मैं पूछ सकता हूँ कि जो पार्टी यह सीमित करना चाहती है कि कौन ब्रिटिश गिना जाए, और यह नियम बनाना चाहती है कि कौन रह सकता है, उसे Gulf के पैसे से ऑन एयर ले जाए जाने में कोई दिक्कत क्यों नहीं है? दो सबसे बड़े डोनरों ने अपनी ज़िंदगी Thailand और Hong Kong में बनाई। ब्रॉडकास्टर का दो-पाँचवाँ हिस्सा Dubai में है। जिन वोटरों से ब्रिटेन को पहले रखने को कहा जाता है, इस पूरी कड़ी में सिर्फ़ उन्हीं की इसमें से किसी चीज़ पर कोई आवाज़ नहीं है।\nऔर रेगुलेटर? Ofcom ने अक्टूबर 2024 में GB News पर £100,000 का जुर्माना लगाया, चुनाव से पहले Rishi Sunak को बिना चुनौती वाला मंच देने के लिए, “the seriousness and repeated nature of this breach” का हवाला देते हुए250। GB News Jacob Rees-Mogg के शो को लेकर Ofcom को High Court ले गया और फ़रवरी 2025 में जीत गया251। उसके बाद Ofcom ने GB News के Farage के इस्तेमाल की अपनी जाँच छोड़ दी246। तो पोल्स में सबसे आगे चल रही पार्टी के नेता को न्यूज़ प्रेज़ेंट करने के पैसे मिलते हैं, एक ऐसे चैनल पर जिसका कुछ पैसा Dubai से आता है, और कोई जाँच नहीं कर रहा।\nइसे इस पोस्ट की बाकी बातों के बगल में रखिए। पार्टी का पैसा विदेश से आता है। उसके नेता की कमाई एक ऐसे चैनल से आती है जिसका कुछ पैसा विदेश से आता है। चैनल पार्टी को ऑन एयर लाता है, और BBC उन पोल्स के पीछे चलता है जिन्हें बनाने में वह एयरटाइम मदद करता है। इसमें से कुछ भी काम करे, इसके लिए किसी को आदेश देने की ज़रूरत नहीं।\nवही प्लेबुक इसमें से कुछ भी नया नहीं है। यह MAGA की प्लेबुक है, और Reform इसे पन्ना-दर-पन्ना चलाती है।\nउस प्लेबुक के लेखक ने हमें बताया कि यह किसके लिए है। फ़रवरी 2016 में अपनी Nevada जीत का जश्न मनाते हुए Donald Trump ने उन समूहों को गिनाया जिन्होंने उन्हें वोट दिया था: “We won with highly educated. We won with poorly educated.” फिर: “I love the poorly educated!”252 आठ साल बाद Pew Research Center की वेरिफ़ाइड वोटरों पर स्टडी ने पाया कि बिना कॉलेज डिग्री वाले वोटरों ने उन्हें 14 पॉइंट से समर्थन दिया, जबकि डिग्री वालों ने Harris को 16 से253।\nब्रिटेन अलग नहीं है। 2024 के चुनाव में Reform को उन लोगों में 23% वोट मिले जिनकी सबसे ऊँची योग्यता GCSE या उससे नीचे है, ग्रेजुएट्स में 8% के मुक़ाबले254। दो साल बाद वह पहले समूह में 40% पर सबसे आगे है, और ग्रेजुएट्स में 14% पर पाँचवें नंबर पर255।\nतो मैं सीधी बात कहूँगा। Reform का वोट उन लोगों पर बना है जिनके पास सबसे कम औपचारिक शिक्षा है, और इसका तरीका उनके आसानी से हाँके जा सकने पर टिका है। एक आँकड़ा जिसे वे जाँचेंगे नहीं। एक बलि का बकरा जो उन्हें बना-बनाया थमा दिया जाता है। जैसे ही कोई जाँचता है, बदनामी का शोर। यह कोई इत्तेफ़ाक़ नहीं कि Farage को कौन पसंद करता है। यह बिज़नेस मॉडल है, वही जो Trump ने खुलकर कहा, और इसे चलाने वाले इस भरोसे पर हैं कि जिनका वे इस्तेमाल कर रहे हैं वे कभी हेडलाइन के आगे नहीं पढ़ेंगे।\nMAGA की चाल Reform का संस्करण प्रेस “the enemy of the American People” है256 पत्रकारों की पुलिस में रिपोर्ट, रिपोर्टरों पर सम्मेलन में पाबंदी233257 हर खुलासा “fake news” है हर खुलासा “smear”, “hoax”, “plant” है193201 “Drain the swamp”, जबकि अरबपति इसका पैसा देते हैं “the establishment”, जबकि दो क्रिप्टो अरबपति इसका पैसा देते हैं37 एक क्रिप्टो बॉस के लिए माफ़ी Reform का खर्च उठाने वाले क्रिप्टो बॉस के पास वही माफ़ी है66 क्रिप्टो एक मुहिम के तौर पर “When it comes to your industry… then I am your champion”69 एक बड़ा आँकड़ा, जुड़े या न जुड़े £234bn, फिर £622bn, फिर Treasury के अपने तरीके से £154bn51 DeSmog की गिनती से, जुलाई 2024 में चुने जाने के बाद से Farage Trump से जुड़े पंद्रह कार्यक्रमों में बोल चुके हैं, और जुलाई 2026 में CPAC की नई ब्रिटिश शाखा से कहा “I\u0026rsquo;ve spoken at over 10 CPACs in America”157। सूची यह है:\nकब कहाँ क्या है जुलाई 2024 Milwaukee Republican National Convention अगस्त 2024 Arizona Arizona Liberty Network सितंबर 2024 Chicago Heartland Institute की 40वीं सालगिरह का फ़ंडरेज़र, मुख्य वक्ता के तौर पर नवंबर 2024 Pennsylvania Trump कैंपेन की एक रैली दिसंबर 2024 London Heartland UK/EU की लॉन्चिंग, जिसे RFOI की Lois Perry चलाती हैं दिसंबर 2024 New York New York Young Republicans Club फ़रवरी 2025 London Alliance for Responsible Citizenship फ़रवरी 2025 Washington CPAC जून 2025 London Westminster में Heartland का एक एनर्जी पैनल सितंबर 2025 Washington National Conservatism, Project 2025 के एक निर्माता Russell Vought के साथ अक्टूबर 2025 Michigan Hillsdale College मार्च 2026 Washington Club for Growth, जिसने 2024 में Republican उम्मीदवारों के लिए $163 million जुटाए जून 2026 London Alliance for Responsible Citizenship जुलाई 2026 London CPAC Great Britain, मुख्य आकर्षण के तौर पर जुलाई 2026 Washington “Redcoats and Rebels” Independence Day कार्यक्रम इसमें शपथ ग्रहण और Mar-a-Lago की दो मुलाक़ातें जोड़िए, जिनमें वे बिना बोले शामिल हुए157। लगभग उन्हीं दो सालों में उन्होंने Commons में अपने निर्वाचन क्षेत्र Clacton का नाम छह बार लिया, और वहाँ अपने एक-चौथाई भाषण ब्रिटिश सरकार की नीति पर Trump के हमलों का समर्थन करने में लगाए157।\nइनमें से कई मेज़बानों ने Project 2025 लिखने में मदद की, जो Trump के दूसरे कार्यकाल का ब्लूप्रिंट है। Heartland उनमें से एक है। उसने Reform के 2025 के सम्मेलन में एक पैनल भी चलाया और कहता है कि वह क्लाइमेट पॉलिसी पर पार्टी को सलाह देता है157। और यह सिर्फ़ Farage नहीं हैं। DeSmog Reform के पॉलिसी प्रमुख James Orr, ट्रेज़रर Nick Candy, MPs Danny Kruger और Suella Braverman, Zia Yusuf और Matt Goodwin, सबको MAGA समूहों के लिए बोल चुके लोगों में गिनाता है। Orr Edmund Burke Foundation की UK शाखा के चेयर हैं, जो National Conservatism सम्मेलन चलाती है, और Yusuf Heritage Foundation में बोले, वह संस्था जिसने Project 2025 बुलाया था, और Trump जैसे “mass deportations” का वादा किया157।\nअपने करियर में दस से ज़्यादा CPAC। चुने जाने के बाद अपने निर्वाचन क्षेत्र का छह बार ज़िक्र। वे मौसम के लिए नहीं गए थे। वे धंधा सीखने गए थे।\nधंधा ऐसे चलता है। ऐसे लोग ढूँढिए जिन्हें निराश किया गया है, और जिन्हें नाराज़ होने का पूरा हक़ है। उन्हें दोष देने के लिए कोई ऐसा दीजिए जो उनसे भी ग़रीब हो। उन्हें एक आँकड़ा खिलाइए। जब आँकड़ा ढह जाए, दूसरा खिलाइए। जब कोई जाँचे, उसे बदनामी कहिए और जाँचने वाले को एस्टैब्लिशमेंट। और बिल उन्हीं लोगों को भेजिए जिनसे आपने कहा था कि आप उनके लिए लड़ रहे हैं। अमेरिका में यह काम कर गया। Reform दाँव लगा रही है कि यह यहाँ भी काम करेगा, और दाँव यह है कि आप कभी कोई पॉलिसी पेपर, Companies House की फ़ाइलिंग या रजिस्टर ऑफ़ इंटरेस्ट्स नहीं पढ़ेंगे।\nयह पोस्ट वही पढ़ाई है।\nक्या वे अपना ही कैरेक्टर टेस्ट पास कर पाएँगे? Reform चाहती है कि यहाँ बसा हर प्रवासी यहाँ रहते रहने के लिए “good character” टेस्ट पास करे2। Home Office के पास पहले से एक है, ब्रिटिश बनने के लिए आवेदन करने वालों के लिए, और उसकी केसवर्कर गाइडेंस साफ़ बताती है कि किससे फ़ेल होते हैं258। तो एक सोच-प्रयोग कीजिए। Reform की अपनी हस्तियों को Home Office के अपने टेस्ट से गुज़ारिए।\nHome Office का टेस्ट गाइडेंस क्या कहती है रिकॉर्ड में क्या है आपराधिकता मना करें अगर किसी ने “not respected or are not prepared to abide by the law”, उदाहरण के लिए कोई सज़ा258 Wales में Reform के पूर्व नेता, रिश्वत के लिए साढ़े दस साल154 बदनामी इसमें शामिल है “publicly expressing unsavoury views on a subject such as race, religion or sexuality”258 “46% of British Muslims support Hamas”213; “I didn\u0026rsquo;t see another white face”142; “adverts full of black people”209 साफ़गोई “Concealment of information or lack of frankness will raise doubt about, and therefore reflect poorly on, the applicant\u0026rsquo;s character”258 £5m का तोहफ़ा घोषित नहीं3; 17 देर से हुए रजिस्ट्रेशन100; Arron Banks की दो साल की मदद खत्म होने के बाद घोषित148 क़ानून का सम्मान ऊपर जैसा258 हाउसिंग सेक्रेटरी के तौर पर एक फ़ैसला, जिसे “unlawful by reason of apparent bias” माना गया139 वित्तीय साख “they have failed to pay taxes for which they were liable”258 Tice के ख़िलाफ़ HMRC का कोई निष्कर्ष नहीं, तो इसमें वे पास हैं केसवर्कर को समझदारी से काम लेना होता है, और गाइडेंस यह कहती है258। हर पंक्ति अकेले किसी आवेदन को नहीं डुबोएगी, और ये ब्रिटिश नागरिक हैं जो यह टेस्ट कभी नहीं देंगे। बात यही है। वे नर्सों और इंजीनियरों के लिए ऐसा कैरेक्टर टेस्ट लिख रहे हैं जिसमें उनकी अपनी फ़्रंट बेंच को मुश्किल होगी, और उन्हें खुद यह कभी देना नहीं पड़ेगा।\nआरोप न लगना बेदाग़ होने का सर्टिफ़िकेट नहीं है जब भी इनमें से कोई मामला ठंडा पड़ता है, कोई कहता है “पर किसी पर आरोप तो लगा नहीं”। तो साफ़-साफ़ समझ लें कि इसका मतलब क्या है।\nआरोप न लगाने का फ़ैसला बेगुनाही का निष्कर्ष नहीं है। Crown Prosecution Service तभी आरोप लगाती है जब सज़ा की असल संभावना के लिए पर्याप्त सबूत हों और मुक़दमा जनहित में हो259। जो केस यह कसौटी पार नहीं करता उसकी सुनवाई नहीं हुई है। किसी को बरी नहीं किया गया है। उसे बस कभी अदालत के सामने रखा ही नहीं गया।\nऔर इस पोस्ट की ज़्यादातर बातें अभी उस मुक़ाम तक पहुँची भी नहीं हैं। Met की डोनेशन जाँच खुली है। दो लोगों से सावधानी के तहत पूछताछ हुई है और आरोप पर कोई फ़ैसला नहीं हुआ है125। Farage और Tice की Standards जाँचें खुली हैं76। Jenrick के डोनेशन की जाँच चल रही है141। Gibbins का मुक़दमा 9 नवंबर को शुरू होता है212।\nपर इसमें से कुछ किसी अदालत या रेगुलेटर तक पहुँच चुका है, और वह हिस्सा कोई बदनामी नहीं कह सकता। निष्कर्षों को साथ-साथ रखिए:\nकौन Reform से रिश्ता निष्कर्ष Nathan Gill Wales में Reform के नेता थे Old Bailey, नवंबर 2025: रिश्वत के लिए साढ़े दस साल की जेल, पैसा Putin के एक दोस्त तक जाता है154 Ben Delo दूसरे सबसे बड़े डोनर US फ़ेडरल कोर्ट, 2022: जानबूझकर एंटी-मनी-लॉन्ड्रिंग जाँच न चलाने का अपराध क़बूल किया; बाद में Trump ने माफ़ किया6466 BitMEX वह एक्सचेंज जिसके सह-संस्थापक Delo थे US Department of Justice, जनवरी 2025: Bank Secrecy Act के तहत $100 million का जुर्माना65 Tether 12% सबसे बड़े डोनर के पास New York Attorney General और CFTC, 2021: $18.5 million का सेटलमेंट, और अपने रिज़र्व गलत बताने पर $41 million का जुर्माना6061 Crispin Odey 2023 में Reform को £10,000 दिए FCA और Upper Tribunal, सितंबर 2026: “unfit” ठहराकर फ़ाइनेंशियल सर्विसेज़ से प्रतिबंधित और £1.53 million जुर्माना; इसके पीछे के आरोपों पर FCA ने कोई निष्कर्ष नहीं दिया, जिनसे वे इनकार करते हैं260 Reform UK खुद पार्टी Electoral Commission, सितंबर 2022: 2019 के चुनाव खर्च की रिपोर्ट में अपराध; कोई सज़ा नहीं261 Robert Jenrick चांसलर के लिए Reform की पसंद High Court, 2020: माना कि Westferry पर उनका फ़ैसला “unlawful by reason of apparent bias” था139 Richard Tice डिप्टी लीडर Standards Commissioner, अक्टूबर 2026: Israel-समर्थक प्रभाव पर बहस में RFOI के पैसे वाली Israel यात्रा घोषित न करके MPs का कोड तोड़ा; “inadvertent” पाया गया185 Andy Osborn Reform के North East Cambridgeshire चेयरमैन, फिर काउंटी काउंसलर Westminster Magistrates\u0026rsquo; Court, अप्रैल 2026: एक प्रतिद्वंद्वी उम्मीदवार के बारे में झूठा बयान छापने के लिए Representation of the People Act के तहत दोषी, जुर्माना और अयोग्य262 Kent County Council 2025 से Reform के हाथ में Information Commissioner, जुलाई 2026: अपनी “efficiency” मुहिम के रिकॉर्ड पर फ़्रीडम ऑफ़ इन्फ़ॉर्मेशन क़ानून तोड़ा, और फिर से जवाब देने का आदेश मिला263 Wales के एक नेता से लेकर डोनर सूची और पार्टी के अपने खातों तक, हर स्तर पर एक निष्कर्ष है। इनमें से एक बदक़िस्मती है। दस एक ढर्रा है।\nजिस बात का किसी अदालत ने निष्कर्ष नहीं दिया, उसमें मैं आपको किसी को दोषी नहीं बताऊँगा। मैं आपको बताऊँगा कि मैं क्या सोचता हूँ, और आप उसे तौल सकते हैं। जो पार्टी हर सवाल का जवाब “smear” से देती है, पुलिस के देखते रहते अपने ही बैरिस्टर से खुद को बरी करवाती है, नस्लवादियों को वापस लेती है और आलोचकों को बाहर निकालती है, उसने यह नहीं दिखाया कि उसके पास जवाब देने को कुछ नहीं है। उसने यह दिखाया है कि उसका जवाब देने का कोई इरादा नहीं है।\nReform असल में किसके लिए है? आपके लिए नहीं। कभी थी ही नहीं।\nReform एक ठगी है, और कोई चालाक ठगी भी नहीं। यह कामकाजी लोगों से कहती है कि यह उनकी पार्टी है, फिर एक ऐसी योजना लिखती है जो दस साल से यहाँ टैक्स भर रही नर्स से उसका सेटल्ड स्टेटस छीन लेती है, बेनिफ़िट की पूरी कटौती कामकाजी उम्र के लोगों पर लाद देती है, और तनख़्वाह की ऐसी शर्त रखती है जिसे इसके अपने डोनरों को कभी पार नहीं करना पड़ेगा। यह कामकाजी लोगों के लिए खड़ा होना नहीं है। यह उनका इस्तेमाल करना है।\nपैसे का पीछा कीजिए और वह सिर्फ़ एक दिशा में बहता है। अंदर Bangkok में बैठे एक थाई नागरिक से, और एक क्रिप्टो बॉस से जिसने जानबूझकर एक ऐसा एक्सचेंज चलाना क़बूल किया जिसे US सरकार ने “in effect a money laundering platform” कहा, Trump से माफ़ी पाई, और डोनेशन कैप से बचने के लिए देश बदल लिया। ऊपर एक नेता तक जिसने £5 million जेब में डाले और कभी घोषित नहीं किए, और सोना बेचने के चार घंटों के £135,000। चार घंटे। न कोई हुनर, न कोई प्रोडक्ट, न कोई मेहनत। बस बातें, और उनमें से बहुत-सी बकवास, उस दर पर जिसे कमाने में वह नर्स, जिसे वे रिन्यू होने वाले वीज़ा पर रखना चाहते हैं, सालों लगाएगी। बाहर पार्टी के अपने अंदरूनी लोगों की चलाई फ़र्मों तक। और बिल आपके सिर आता है।\nतो पूछिए कि जब हर चार में से तीन पाउंड विदेश में रहने वाले दो आदमियों से आते हैं, तो पार्टी किसके प्रति जवाबदेह है। अपने सदस्यों के प्रति नहीं, जो कंपनी को कंट्रोल तक नहीं करते। अपने वोटरों के प्रति नहीं, जिनका इनाम है रिन्यू होने वाला वीज़ा और बेनिफ़िट में कटौती। यह उनके प्रति जवाबदेह है जो पैसा बंद कर सकते हैं। देखिए Reform किसके लिए लड़ती है: कोई डिजिटल पाउंड नहीं जो Tether के लिए ख़तरा बने, क्रिप्टो पर 10% टैक्स, विदेशी डोनरों पर कैप पलटना, डिफ़ेंस इंडस्ट्री के लिए टैक्स छूट। इनमें से हर एक उससे मेल खाता है जो इसके पैसे देने वालों के पास है।\nमैं आपको कोई आदेश दिया जाता हुआ नहीं दिखा सकता, और मैं यह दावा नहीं कर रहा कि दिया गया। मुझे ज़रूरत भी नहीं। जो पार्टी दो आदमियों के पैसे पर ज़िंदा है, उसे बताने की ज़रूरत नहीं कि वे क्या चाहते हैं। उसे पहले से पता है। ठीक से बनी कठपुतली ऐसी ही दिखती है। किसी को डोर खींचनी नहीं पड़ती, क्योंकि कठपुतली खुद हिलती है।\nवे कंट्रोल वापस लेने की बात करते हैं। फिर उन्होंने इसे Bangkok के एक आदमी को और एक ऐसे आदमी को सौंप दिया जो सिर्फ़ इसलिए घर लौटा ताकि पैसे देता रह सके, और उन्होंने यह पैसों के लिए किया।\nये उसूलों वाले लोग नहीं हैं। इसके होने वाले चांसलर पिछले साल इसे बिज़नेस से बाहर करना चाहते थे। Putin पर इसके नेता की लाइन हवा के साथ बदलती है। इसका डिप्टी आपसे कहता है कि क़ानून जितना ज़रूरी बनाता है उससे ज़्यादा “morally or voluntarily give more tax” न दें। उसूलों वाले लोग हर बार पल भर में पलटी नहीं मारते जब किसी डोनर, किसी पोल या किसी हेडलाइन को उनकी ज़रूरत हो। जिनकी क़ीमत होती है वे मारते हैं, और रजिस्टर आपको दिखाता है कि वह क़ीमत कौन चुका रहा है।\nऔर दोहरे मापदंड को देखिए, क्योंकि पूरी पार्टी एक टेबल में है।\nReform यहाँ बसे प्रवासी से क्या माँगती है Reform के अपने दायरे के रिकॉर्ड पर क्या है “good character” टेस्ट पास करो, वरना रहने का अधिकार खो दो Wales के इसके पूर्व नेता, Putin के एक दोस्त तक जाने वाली रिश्वत लेने के लिए साढ़े दस साल कोई आपराधिकता नहीं Farage का एक दोस्त, US में वायर फ़्रॉड का दोषी, जिसने उनके 2024 के कैंपेन के इर्द-गिर्द सोशल मीडिया, रहने और सिक्योरिटी का पैसा दिया और Tice की कंपनी को £78,100 उधार दिए क़ानून का सम्मान करो इसका दूसरा सबसे बड़ा डोनर, जिसने अमेरिकी क़ानून की ज़रूरी एंटी-मनी-लॉन्ड्रिंग जाँचें जानबूझकर न चलाना क़बूल किया, और Trump की माफ़ी लेकर निकल गया अधिकारियों के साथ साफ़गोई एक नेता जिसके £5 million अघोषित हैं और 17 रजिस्ट्रेशन देर से हुए मीडियन से ज़्यादा कमाओ या चले जाओ एक नेता जिसे चार घंटे बोलने के £135,000 मिले इनमें से कोई भी उस केसवर्कर के आगे नहीं निकल पाता जिसे Reform नर्स के सिर पर खड़ा करना चाहती है। उसके लिए एक नियम। उनके लिए दूसरा। यह चूक नहीं है। यही डिज़ाइन है।\nऔर इनमें से किसी ने भी कभी ईमानदारी से एक दिन की मेहनत करके ऐसी कोई चीज़ नहीं बनाई जिसे आप उठाकर हाथ में पकड़ सकें। देखिए इस पोस्ट में क्या है। नेता को बोलने के पैसे मिलते हैं। डिप्टी अपना पैसा प्रॉपर्टी और डिविडेंड से बनाता है। होने वाले चांसलर ने राजनीति को ही करियर बना लिया है। इनमें से किसी को भी औज़ारों का एक सेट और किसी साइट, वार्ड या प्रोडक्शन लाइन पर एक हफ़्ता दीजिए, और देखिए बातें उन्हें कितनी दूर ले जाती हैं। फिर भी यही आदमी एक केयर वर्कर से कह रहे हैं कि उसे साबित करना होगा कि उसने अपनी जगह कमाई है।\nऔर अब वह हिस्सा जिस पर आपको ठिठक जाना चाहिए। वह मेहनत करने वाले बहुत-से लोग, जो रोज़ी के लिए बनाते हैं, ठीक करते हैं, उठाते हैं और देखभाल करते हैं, उन्हीं को वोट दे रहे हैं। Reform का सबसे मज़बूत वोट उन लोगों में है जिनके पास सबसे कम योग्यताएँ हैं255, वही जिनके ठीक यही काम करने की सबसे ज़्यादा संभावना है। उन्हें एक पार्टी बेची जा रही है ऐसे आदमियों द्वारा जो उनका काम नहीं कर सकते, ऐसे आदमियों के पैसे से जो यहाँ रहते नहीं, और जो उनके बगल में लाइन पर काम कर रहे लोगों का सहारा और स्टेटस काट देगी। यह अपने ही कसाई को वोट देने जैसा है। और उन्हें छुरी इसलिए नहीं दिखती क्योंकि Reform ने उन्हें इसके बदले नफ़रत करने को कोई थमा दिया है। नमाज़ पढ़ते मुसलमान। किसी विज्ञापन में अश्वेत चेहरे। अगले वार्ड की प्रवासी नर्स। लोगों का गुस्सा बगल में काम कर रहे इंसान की ओर मोड़ दीजिए और वे यह देखना बंद कर देते हैं कि उनकी जेब कौन काट रहा है। ठगी अपने सबसे बेहतरीन रूप में यही है, और यह उस कट्टरता पर चलती है जिसे पार्टी जानबूझकर भड़काती है। जिन्हें यह लूटती है, वही इसके लिए तालियाँ बजा रहे हैं।\nऔर उनमें से बहुत-से उन्हीं बेनिफ़िट्स पर हैं जिन्हें Reform काटेगी। विकलांग वोटरों में Reform आगे है264। जो सीटें यह Labour से छीनने की कोशिश कर रही है, वे बहुत ज़्यादा उन्हीं में से हैं जहाँ लोग सेहत से जुड़े बेनिफ़िट्स पर सबसे ज़्यादा निर्भर हैं265। Reform के हर MP का बहुमत उनके अपने निर्वाचन क्षेत्र में PIP लेने वालों की संख्या से कम है266, और PIP वही बेनिफ़िट है जिसे Reform एक ऐसे अलाउंस के लिए खत्म कर देगी जो इसे लेने वाले दो-तिहाई लोगों तक को बाहर कर सकता है11। वे अपना ही सहारा वोट देकर छोड़ने के लिए लाइन लगा रहे हैं, और ऐसा करते हुए तालियाँ बजा रहे हैं।\nऔर जब उन्हें देखभाल की ज़रूरत होगी, तो Reform के हिसाब से कौन करेगा? 2023 में इंग्लैंड में NHS की हर दस में से तीन नर्सें और NHS के एक-तिहाई से ज़्यादा डॉक्टर UK के नागरिक नहीं थे267। सोशल केयर 2020/21 से 130,000 ब्रिटिश वर्कर खो चुका है268, और सालों तक यह कमी विदेश से भर्ती किए गए लोगों ने पूरी की, अकेले 2023/24 में उनमें से 105,000269। यही वे लोग हैं जिन्हें Reform मीडियन कमाई से ऊपर की तनख़्वाह की शर्त के साथ वापस रिन्यू होने वाले वीज़ा पर डाल देगी। केयर वर्करों को डिपोर्ट कीजिए, और विकलांग Reform वोटर सिर्फ़ एक बेनिफ़िट नहीं खोता। वह उस इंसान को खोता है जो आकर उसे नहलाता है, खाना खिलाता है और बिस्तर से उठाता है। Reform में किसी ने नहीं बताया कि उनकी जगह कौन लेगा, क्योंकि Reform में किसी को कभी ऐसे इंसान की ज़रूरत नहीं पड़ेगी जिसका पैसा वह न दे सके।\nइसे वही कहिए जो यह है। जो पार्टी नस्लवादी पोस्ट के कुछ महीनों के अंदर काउंसलरों को वापस ले लेती है, उनमें से एक को एडल्ट सोशल केयर चलाने के लिए तरक़्क़ी देती है, और अपने आलोचकों को दिनों में बाहर कर देती है, वह नस्लवादी पार्टी है, उसका प्रेस ऑफ़िस चाहे जो कहे। उसे बताया गया है। उसे फ़िल्माया गया है। उसने चुना।\nऔर हर बार पकड़े जाने पर यह बदनामी का रोना रोती है। जिन बारह कहानियों को इसने बदनामी कहा, उनमें से सात सही निकलीं। जो कहानी सच निकले उस पर बदनामी का रोना रोना बचाव नहीं है। यह मान लेना है कि आपके पास और कुछ है ही नहीं।\nदेशभक्ति? छोड़िए भी। Bangkok और Hong Kong के पैसे पर चलने वाली पार्टी, MAGA रैलियों में लाइन लगाती हुई, जो यहाँ रहने, काम करने और टैक्स भरने वालों को बाहर फेंक देगी जबकि दशकों पहले देश छोड़ चुके अरबपति इसे चलाए रखते हैं। यह देशभक्ति नहीं है। यह एक बैंक खाते के चारों ओर लिपटा झंडा है।\nऔर इसे वोट देना भी देशभक्ति नहीं है। देशभक्त उन लोगों का ख़याल रखता है जो इस देश को चलाते हैं, नर्स, इंजीनियर, केयर वर्कर, चाहे उन्होंने किसी भी पासपोर्ट से शुरुआत की हो। अपना वोट एक ऐसी पार्टी को सौंपना जो उन्हें निकाल बाहर करेगी, और जिसका पैसा ऐसे आदमी देते हैं जो यहाँ रहते नहीं, अपने देश से प्यार करना नहीं है। यह उसी के ख़िलाफ़ इस्तेमाल होना है। न ऊपर बैठे आदमी देशभक्त हैं, न उन्हें वहाँ बिठाने वाले लोग, वे चाहे जो झंडा लहराएँ।\nतो, Reform असल में किसके लिए है? रजिस्टर पर दर्ज नामों के लिए। उसे पढ़िए। अगर आपका नाम वहाँ नहीं है, तो आपका हित भी वहाँ नहीं है।\nReform UK — The Cost of the Boriswave — पार्टी का पॉलिसी पेपर, अप्रैल 2026: ILR धारकों के बारे में \u0026ldquo;will have it rescinded\u0026rdquo;, सैलरी थ्रेशोल्ड \u0026ldquo;above median UK earnings\u0026rdquo;, \u0026ldquo;£154 bn if discounted at the 3.5% rate suggested by the HM Treasury Green Book\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nReform UK — Policies (archived 19th October 2026) — \u0026ldquo;abolish ILR and rescind existing awards\u0026rdquo;, \u0026ldquo;5 year renewable visa\u0026rdquo;, पर्याप्त National Insurance वाले पेंशनभोगी अपना निवास और State Pension रखते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage was given undisclosed £5m by crypto billionaire in 2024 — 29 अप्रैल 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Members\u0026rsquo; Financial Interests: Nigel Farage — interests API के ज़रिए पढ़ा गया, 28 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFull Fact — Daily Mail corrects report about Reform UK\u0026rsquo;s disputed immigration savings — 3 अक्टूबर 2025; थिंक टैंक ने कहा \u0026ldquo;the overall cost estimates should no longer be used\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuronews — Reform UK pledges to strip all foreign nationals of benefits — 17 अगस्त 2026; सिर्फ़-नागरिकों वाली सूची के बेनिफ़िट, Pension Credit समेत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIFS — Reform UK\u0026rsquo;s plan for welfare: IFS response (archived) — 17 अगस्त 2026; \u0026ldquo;almost entirely from a working-age benefits bill\u0026rdquo;, Universal Credit पर 1.3 million गैर-UK नागरिक।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — Benefit expenditure and caseload tables 2026 — Spring Forecast 2026; 2025/26 में Great Britain का कुल £309.06bn, पेंशनभोगी £177.65bn, State Pension £146.07bn, कामकाजी उम्र £126.08bn।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Farage guarantees the triple lock on pensions — 2 अप्रैल 2026, पहले की \u0026ldquo;open for debate\u0026rdquo; और \u0026ldquo;we\u0026rsquo;re not guaranteeing the triple lock\u0026rdquo; टिप्पणियों के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSTV News — Reform\u0026rsquo;s welfare pledges aim to please pensioners — 17 अगस्त 2026; \u0026ldquo;nothing that we talk about today is about pensioners\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Week — Are welfare cuts Reform\u0026rsquo;s stumbling block? — अगस्त 2026; PIP की जगह एक \u0026ldquo;health security allowance\u0026rdquo; जो \u0026ldquo;could exclude up to two-thirds of current recipients\u0026rdquo;, 20 घंटे का सामुदायिक काम।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — Universal Credit statistics, 29th April 2013 to 14th May 2026 — \u0026ldquo;3.1 million people on Universal Credit in any employment … in April 2026, which was 37.7% of all people on Universal Credit\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIFS — Reform UK manifesto: initial reaction (archived) — जून 2024; The Irish Times, 17th June 2024 में उद्धृत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Reform to U-turn on £90 billion tax cuts — अक्टूबर 2025; Times Radio पर Tice: \u0026ldquo;A manifesto is based on a point in time.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIrish News (PA) — Reform could deport 600,000 asylum seekers under immigration plan — 26 अगस्त 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBig Issue — Reform UK\u0026rsquo;s £50 billion benefits plan — अगस्त 2026; IFS के Tom Waters।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEnergy Live News — Reform promises to scrap green levies and VAT on energy bills — 17 मार्च 2026, लगभग £200।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEnergy Live News — Reform UK say they will cut bills by £150 with levy change — 7 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFull Fact — Did Reform UK break its promises on council tax? — 9 अप्रैल 2026, 6 मई 2026 को अपडेट: 3.94% बनाम 4.86%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via inkl) — Reform-run Kent council accused of fabricating £40m net zero savings — फ़रवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Reform defends savings claim amid questions on scope of welfare plans — 22 सितंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Jenrick says he wants to put Reform UK out of business — 28 अगस्त 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform UK names Robert Jenrick as pick for chancellor — 17 फ़रवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHuffPost UK — Farage says Putin is his most admired leader — 31 मार्च 2014।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Farage calls Putin \u0026lsquo;very bad dude\u0026rsquo; — 16 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — 11694875, persons with significant control — वह कंपनी जो The Brexit Party Limited के रूप में शुरू हुई; 19 फ़रवरी 2025 तक Farage और Tice की शेयरहोल्डिंग।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Nigel Farage hands ownership of Reform to members, says party — 20 फ़रवरी 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Reform UK Party Limited (16260766), filing history — 2025 के ऑडिटेड अकाउंट्स, 30 सितंबर 2026 को फ़ाइल: नोट 20 \u0026ldquo;two members\u0026rdquo;, नोट 19 में £15 और £1 के ट्रांसफ़र, मेंबरशिप आय £4,524,299, सरप्लस £7,660,122।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via inkl) — Not-for-profit appears to own Reform UK despite Farage\u0026rsquo;s \u0026ldquo;democratisation\u0026rdquo; pledge — फ़रवरी 2025; Farage और Zia Yusuf नई कंपनी के गारंटर हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Reform UK Party Limited (16260766), officers — Farage 18 फ़रवरी 2025 से डायरेक्टर; Yusuf ने 5 जून 2025 को इस्तीफ़ा दिया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Chairman Farage: how Reform UK operates as a democratic party in name only — 18 अगस्त 2026; सितंबर 2025 में अपनाया गया संविधान, Articles 4.3 और 6.20।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Nigel Farage sets up a new private company for Reform UK — फ़रवरी 2025; Habib ने FT से कहा: \u0026ldquo;puts Farage\u0026rsquo;s leadership in a virtually unassailable position\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donations register — Reform UK और Brexit Party (PP7931) के डोनेशन और लोन, 28 अक्टूबर 2026 को पढ़े गए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent (via inkl) — Data reveals the percentage of Reform donors recently based overseas — 27 अक्टूबर 2026; Reform के लिए 80%, Conservatives 3.57%, Labour 0.15%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChannel 4 News — How a crypto billionaire used \u0026lsquo;gaping loopholes\u0026rsquo; to bankroll Reform — 27 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Christopher Harborne, the mystery billionaire bankrolling Reform UK — 25 अप्रैल 2026; 2011 में Chakrit Sakunkrit के नाम से थाई नागरिकता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Second crypto billionaire matches £36m Reform donation — 12 सितंबर 2026; Tice: \u0026ldquo;so that the Labour Party can\u0026rsquo;t legislate against it\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSearchlight — Crypto billionaire quits Hong Kong to bankroll Reform UK — 9 अप्रैल 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Cap on donations from overseas electors and ban on crypto donations — 25 मार्च 2026; £100,000 सालाना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPolitical Parties and Elections Act 2009, section 10 — \u0026ldquo;resident, ordinarily resident and domiciled in the United Kingdom\u0026rdquo;, स्टेटस \u0026ldquo;Prospective\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNewcastle City Council — Elections Act 2022: overseas electors — 15 साल की सीमा 16 जनवरी 2024 से हटा दी गई।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Rycroft Review — countering foreign financial influence and interference in UK politics — मार्च 2026, पैराग्राफ़ 39, 51 से 53।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCouncil of Europe — Recommendation Rec(2003)4 on common rules against corruption in the funding of political parties — Article 7, विदेशी दानदाताओं से डोनेशन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInternational IDEA — written submission to the Australian Parliament — 2017; 63% देश पार्टियों को विदेशी डोनेशन पर रोक लगाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNHPR (NPR/AP) — Lev Parnas sentenced to 20 months — 29 जून 2022।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCourthouse News — Trump donor sentenced to 12 years for unlawful campaign contributions — 18 फ़रवरी 2021।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nVenice Commission and OSCE/ODIHR — Guidelines on Political Party Regulation, 2nd edition — दिसंबर 2020, पैराग्राफ़ 229 और 230।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ngov.ie — Political donations — विदेश में रहने वाले Irish नागरिक डोनेट कर सकते हैं; किसी पार्टी को सालाना €3,100 की सीमा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElections Canada — contribution limits 2026 — सिर्फ़ नागरिक और स्थायी निवासी, $1,775।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Federal Election Commission — Foreign nationals — विदेश में रहने वाले US नागरिक फ़ेडरल सीमाओं के भीतर दे सकते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEastern Eye — Reform candidate faces backlash over comments on British identity — 28 जनवरी 2026, Matt Goodwin के पहले के लेखन को उद्धृत करते हुए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYorkshire Post — Yorkshire-born billionaire Christopher Harborne donates £36m to Reform — 12 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAl Jazeera — Second crypto billionaire donates record sum to Reform UK — 12 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nReason (Volokh Conspiracy) — Cryptocurrency trader\u0026rsquo;s defamation lawsuit against Wall Street Journal can go forward — Delaware Superior Court, दिसंबर 2024: \u0026ldquo;Harborne owned 12% of Bitfinex and its sister company Tether\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQinetiQ — Holding(s) in Company, 9th June 2026 — Klear Kite LLC, \u0026ldquo;ultimately controlled by Christopher Harborne\u0026rdquo;, 14.98%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Major £1.5 billion defence contract with British firm — 23 मई 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — AML Global Payments LLP (OC305889), persons with significant control.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Arms and the £5m man: Christopher Harborne\u0026rsquo;s military empire — 30 अगस्त 2026, Reform और उनके वकीलों के जवाबों के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — The £1m man: why did Boris Johnson take his donor to Ukraine? — 10 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNew York Attorney General — Bitfinex and Tether settlement — 23 फ़रवरी 2021।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCFTC — Tether and Bitfinex ordered to pay fines — 15 अक्टूबर 2021; रिज़र्व \u0026ldquo;for only 27.6% of the days\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUNODC — Casinos, Money Laundering, Underground Banking, and Transnational Organized Crime in East and Southeast Asia — जनवरी 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Cryptocurrency linked to Farage donor used for Russian war effort — 21 नवंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Department of Justice, SDNY — Founders of cryptocurrency exchange plead guilty to Bank Secrecy Act violations (archived) — 24 फ़रवरी 2022।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Department of Justice — BitMEX fined $100 million for violating the Bank Secrecy Act — जनवरी 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Department of Justice — Clemency grants by President Donald J. Trump — Benjamin Delo, 27 मार्च 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — British crypto billionaire Ben Delo says he has given £4m to Reform UK — 8 अप्रैल 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage trying to block Britcoin plans — 18 जून 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Crypto investor donates £9 million to Reform UK after Nigel Farage plugs his company — 4 दिसंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Block — Nigel Farage pledges UK bitcoin reserve and crypto capital gains tax cut — मई 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Political donations in cryptocurrency blocked — 25 मार्च 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Farage said he would need \u0026lsquo;a million a year\u0026rsquo; to stand as an MP in 2024 — 15 जुलाई 2026; Harborne के वकीलों के मुताबिक़ गिफ़्ट की तारीख़ 5 अप्रैल 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProtos — Farage says £5m Harborne gift was reward for Brexit — 14 मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Tories ask HMRC to investigate Farage over £5m gift — 22 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Standards watchdog investigation into Nigel Farage\u0026rsquo;s financial gifts — 14 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nParliamentary Commissioner for Standards — allegations currently under investigation — 28 अक्टूबर 2026 को पढ़ा गया: Farage (13 मई 2026 को खुला, Rule 5), Tice (20 अगस्त 2026 को खुला, Rule 13)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage questions claim of second standards investigation — 1 सितंबर 2026; Cottrell \u0026ldquo;paid for social media work, accommodation and security before the 2024 election\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Farage concluded he faced stitch-up amid probe into £5m gift, Jenrick says — 9 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Reform gains financial backing from another billionaire — जुलाई 2026, Telegraph के हवाले से; Swiss टैक्स रेज़िडेंसी और प्रस्तावित शिफ़्ट।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 14397 — Sasan Ghandehari, \u0026ldquo;Accreditation (£50,482.16) cost for me and one staffer\u0026rdquo;, Davos, जनवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via inkl) — Nigel Farage\u0026rsquo;s trip to Davos hosted and paid for by family trust of billionaire — जनवरी 2026; \u0026ldquo;the $10bn family trust of an Iranian-born billionaire\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donations from Interior Architecture Landscape Ltd — कुल £200,000 के सात गिफ़्ट, 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Interior Architecture Landscape Ltd (08363406), persons with significant control.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Labour MP calls for Companies House to probe origins of £200,000 gift to Reform — फ़रवरी 2026, FT और Ghandehari के वकील तथा फ़र्म के बयानों के हवाले से।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIran International — Reform UK donor had ties to Iran supreme leader-linked foundation, Guardian reports — 23 अक्टूबर 2026, एक French arbitration फ़ैसले पर Guardian की जाँच की रिपोर्टिंग; Ori Group 49%, Astan Quds Razavi 51%; Orico General Trading; वकीलों का जवाब।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Reform UK donations from collapsing firms are \u0026ldquo;not under investigation\u0026rdquo;, says elections watchdog — 3 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Building Limited (12545681), filing history.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donation C0835464 — FK Building Ltd, £100,000, 8 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Group Limited (07732053) — administration में; FK Construction (09890502) और FK Facades (02874877) भी।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBuilding — More than 50 jobs saved after administrators appointed at facades firm FK Group — 54 नौकरियाँ Keenan Holdings में ट्रांसफ़र।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Keenan Holdings Limited (11920973), persons with significant control — Deborah Ruth Keenan, 75% या अधिक।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Building Limited, insolvency — 6 जुलाई 2026 से creditors\u0026rsquo; voluntary liquidation; statement of affairs: कमी £3,149,939, HMRC £25,618 और £384,029।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FK Resolv Ltd (08222605), persons with significant control — FK Group बंद, FKR Group Limited नोटिफ़ाई, 16 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — FKR Group Limited (17302053) — 25 जून 2026 को निगमित; Francis Anthony Keenan, 75% या अधिक।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Reform UK accounts raise fresh questions about origins of Richard Tice donations — 7 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Nigel Farage declares £270,000 payment for promoting gold bullion.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Gold firm that employs Nigel Farage predicts unrest and violence under a Reform government — 25 अगस्त 2026; दिसंबर 2024 से £685,500।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage uses private company to pay less tax on GB News earnings — 5 सितंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Thorn In The Side Ltd (07650770) — 31 मई 2025 तक के अकाउंट्स: नेट एसेट्स £3,144,967; नोट 8, एक डायरेक्टर से £10,000 सालाना पर स्टूडियो लीज़।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nParliamentary Commissioner for Standards — rectification, Mr Nigel Farage MP — 20 जनवरी 2026; Rule 5 के सत्रह उल्लंघन, \u0026ldquo;inadvertent\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Reform UK paid £440,000 to firms linked to party insiders — 14 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — spending search — Reform UK के कैंपेन खर्च रिटर्न, सप्लायर के हिसाब से जोड़े गए: पाँच फ़र्मों में £440,571.23; Jupiter का £50,000 डोनेशन C0836534 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13453 — BTC Inc, £7,410, 22 सितंबर 2025 को प्राप्त।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProtos — Reform UK pulls crypto bill from website — 30 मई 2026 को हटाया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13771 — Blockworks Inc, £30,000, 2 घंटे, 13 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13773 — Zebu Group Ltd, £20,000, 2 घंटे, 22 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — Nigel Farage took £50,000 from crypto firms, then said he was not aware of the industry funding his party — 22 मई 2026; Reuters वाला जवाब पार्टी दानदाताओं के बारे में था, उनकी अपनी फ़ीस के बारे में नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 15047 — \u0026ldquo;Shares in Stack BTC PLC that are wholly owned by Thorn in the Side Ltd.\u0026rdquo;; साथ ही एंट्री 15050।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nStack BTC plc — Strategic investment by Nigel Farage MP (Investegate) — कंपनी की घोषणा और Farage का कोट।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage Cameo videos backed cryptocurrencies that collapsed in value — 19 मार्च 2026; प्रवक्ता का जवाब।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Attorney, Southern District of New York — Founder of Celsius sentenced to 12 years for fraud and market manipulation — 8 मई 2025; \u0026ldquo;At times, they used customer deposits to fund these market purchases.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUNODC — Inflection Point (2025) — East और Southeast Asia में नुक़सान \u0026ldquo;up to an estimated US $37 billion\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTether — freezes and law enforcement support — Tether के अपने आँकड़े: $5 billion से ज़्यादा फ़्रीज़, 340+ एजेंसियाँ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Rycroft Review (PDF) — \u0026ldquo;there is a risk that cryptoassets are used as the vehicle to channel foreign money into the political system in the UK\u0026rdquo;; सिफ़ारिश 3, एक moratorium।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nByline Times — The elections watchdog doesn\u0026rsquo;t know where Reform UK\u0026rsquo;s crypto donations are coming from — 16 मार्च 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCity of London Police — UK victims lost £2.4 million every day to investment fraud in 2025 — अप्रैल 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPolice Professional — investment fraud figures for 2024 — क्रिप्टो \u0026ldquo;66 per cent of all reports\u0026rdquo;; \u0026ldquo;Those aged 55-64 suffered the greatest financial losses\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFCA — Crypto basics — \u0026ldquo;you should be prepared to lose all your money\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — CLS Holdings plc (02714781), officers — Tice 11 मई 2010 से 7 अप्रैल 2014 तक डायरेक्टर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Quidnet REIT Ltd (09718143), filing history — 2025 के अकाउंट्स, 29 सितंबर 2026 को फ़ाइल।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Members\u0026rsquo; Financial Interests: Richard Tice — Quidnet REIT फ़ीस, शेयरहोल्डिंग।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Richard Tice defends company\u0026rsquo;s tax arrangements — 15 मार्च 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Tice company did not withhold tax on dividends — 12 अप्रैल 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Britain Means Business Ltd (10893794) — पहले Leave Means Leave Ltd; माइक्रो-एंटिटी अकाउंट्स, नेट एसेट्स £28,864 (2023) और £10,479 (2024)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSTV News (ITV/PA) — Met Police investigate donations by Richard Tice company to Reform UK — 26 जुलाई 2026; फ़रवरी 2025 में Electoral Commission का रेफ़रल, दो लोगों से caution के तहत पूछताछ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Police investigate £500,000 in donations to Reform UK from Richard Tice firm.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nShropshire Star (PA) — Tice claims politically motivated smear amid scrutiny of Reform UK finances — जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Leave.EU Group Ltd (09763501), officers — Tice 29 जनवरी 2016 से 25 मई 2017 तक डायरेक्टर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFull Fact — EU referendum Electoral Commission fines — Leave.EU का £70,000 का जुर्माना अपील पर घटाकर £66,000 किया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Richard Tice, Reform loan and George Cottrell: standards watchdog — 29 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Richard Tice, appointments — Quidnet, Enjoyouretirement और Galecroft कंपनियों में सह-डायरेक्टर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Standards watchdog investigating Reform\u0026rsquo;s Richard Tice — 3 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Robert Jenrick rules out Tory pact with Reform UK — 25 अप्रैल 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Robert Jenrick defects to Reform after Tory sacking — 15 जनवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Robert Jenrick joins Reform UK — 15 जनवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Read in full: Robert Jenrick\u0026rsquo;s speech — जनवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Jenrick releases documents on Westferry decision — 24 जून 2020।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Richard Desmond housing project unlawfully approved — 27 मई 2020।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Westferry: Jenrick admits decision was unlawful — 11 जून 2020; \u0026ldquo;unlawful by reason of apparent bias\u0026rdquo;, Desmond का £12,000 डोनेशन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Westferry approval to be quashed — 27 मई 2020।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Police investigate £37,500 donation to Jenrick leadership campaign — 8 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Jenrick complained of not seeing another white face in Handsworth — 6 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — Robert Jenrick on protester at Reform conference — 6 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHuffPost UK — Jenrick says Reform supporter who attacked woman should get a medal — 10 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — Statistics Authority on Jenrick\u0026rsquo;s modern slavery claim — 6 जुलाई 2023।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Observer — Ukip leader Nigel Farage boasts of his £2m in expenses — 24 मई 2009।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage\u0026rsquo;s EU salary docked over claim he misspent public funds — 12 जनवरी 2018; VoteWatch रैंकिंग और EFDD का जवाब।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuropean Parliament — Declaration of financial interests, Nigel Farage, revision 4 — तारीख़ 1 जुलाई 2019।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — EU authorities asked to investigate Farage over Arron Banks gifts — 19 मई 2019।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEU General Court — Case T-564/11, Farage v Parliament and Buzek — 5 सितंबर 2012 का आदेश।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Independent — Farage referred to advisory committee over Banks support — 21 मई 2019।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCourt of Justice of the EU — press release 138/19, Case T-48/17 ADDE v Parliament — 7 नवंबर 2019; 2016 का फ़ैसला निष्पक्षता की कमी के कारण रद्द।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEU General Court — Case T-118/17, IDDE v Parliament — 8 फ़रवरी 2018 का फ़ैसला, पैराग्राफ़ 6, 9 और 55।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJudiciary of England and Wales — R v Nathan Gill, sentencing remarks — 21 नवंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAl Jazeera — Ex-leader of Reform UK in Wales jailed for 10 years over pro-Russia bribes — 21 नवंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Nigel Farage says the West provoked Russia to invade Ukraine — 21 जून 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Nigel Farage has spoken at 15 Donald Trump and MAGA events since the 2024 election — 20 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS House Judiciary Committee — Europe\u0026rsquo;s Threat to American Speech and Innovation — 3 सितंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGazette — Clacton MP meets Donald Trump — 4 सितंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nITV News (archived) — Elon Musk says Nigel Farage doesn\u0026rsquo;t have what it takes to lead Reform — 5 जनवरी 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission — donation V0598867 — Christopher Harborne से Nigel Farage को, £27,616.76, 17 जनवरी 2025 को स्वीकार, \u0026ldquo;Second inauguration of Donald Trump\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13939 — Bassim Haidar, \u0026ldquo;Flights for me (£19,072.01) and two staffers (£35,849.01)\u0026rdquo;, US, 6 से 9 नवंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Nigel Farage\u0026rsquo;s donor-funded flights to Donald Trump — 26 जनवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 14207 — UAE, 6 से 8 दिसंबर 2025, \u0026ldquo;To attend the F1 and for meetings\u0026rdquo;; Government of Abu Dhabi £1,000, Abu Dhabi F1 £9,000।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Parliament — Register of Interests, entry 13577 — Richard Tice, Israel, 26 से 30 सितंबर 2025, दानदाता RFOI Ltd, £6,250, \u0026ldquo;Education and meetings with President and Foreign Minister\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLondon Assembly — Alex Wilson, gifts and hospitality — \u0026ldquo;Reform UK Delegation to Israel including flights, accommodation and meals\u0026rdquo;, Israel Ministry of Foreign Affairs, £4,861.27।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLancashire Lead — Reform UK\u0026rsquo;s Lancashire leader takes Israel trip, cancelled meetings — 30 नवंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNovara Media — Israel spent £50k on lobbying trips for Reform — 9 जुलाई 2026, Declassified UK के हवाले से; डेलीगेट्स और यात्रा कार्यक्रम।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — Kemi Badenoch and Nigel Farage to speak at climate denial festival — फ़रवरी 2025, ARC कॉन्फ़्रेंस के वक्ताओं की सूची।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Revealed: the Trump donors, Reform-backing billionaires and oil companies funding the Alliance for Responsible Citizenship — 24 जून 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Block — Lutnick\u0026rsquo;s Cantor Fitzgerald negotiated a 5% ownership stake in Tether, WSJ.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFortune — Tether names Bo Hines to run its US stablecoin — 12 सितंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — RFOI Limited (16521255), persons with significant control — और officers; SIC 70210, पब्लिक रिलेशंस।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHenry Jackson Society — Henry Jackson Society appoints Jason Pearlman as new Deputy Director — 2 मार्च 2018; \u0026ldquo;three and a half years as international media adviser to Israel\u0026rsquo;s President Reuven Rivlin\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJewish News — Jason Pearlman steps down as President\u0026rsquo;s media adviser.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJewish News — Nigel Farage\u0026rsquo;s party launching Reform Jewish Alliance and Friends of Israel groups — फ़रवरी 2026; Pearlman पर Farage, \u0026ldquo;a real coup\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCity AM — Top foreign policy analyst and Tory councillor jumps ship to Reform — नवंबर 2025; Henry Jackson Society के प्रमुख Mendoza, Reform में शामिल होंगे \u0026ldquo;as its chief adviser on global affairs\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFitzrovia News — Second Westminster Conservative councillor defects to Reform UK — 20 नवंबर 2025; Mendoza \u0026ldquo;co-founder and executive director\u0026rdquo;; Farage: \u0026ldquo;an excellent addition\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — Lois Perry — Heartland Institute UK/Europe का लॉन्च, दिसंबर 2024, Farage \u0026ldquo;special guest of honour\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — Lois Perry — मई से जून 2024 तक UKIP नेता; Heartland Institute UK/EU के एग्ज़ीक्यूटिव डायरेक्टर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCompanies House — Tamares Real Estate Investments (UK) Limited (02792424), officers — Roy Zabludowicz, जन्म मार्च 1990, 18 जून 2021 से डायरेक्टर, Chaim Zabludowicz के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — Poju Zabludowicz — Tamares, BICOM, Soltam, Conservative डोनेशन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeclassified UK — Friends of Israel groups have funded 56 trips for British politicians — 26 नवंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJTA — Reform UK deputy leader faces inquiry over Israel visit — 4 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nParliamentary Commissioner for Standards — Mr Richard Tice MP, rectification, Rule 6 — 27 अक्टूबर 2026 को प्रकाशित; \u0026ldquo;the failure to declare this interest was a breach of Rule 6\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — John Healey asks Nigel Farage if any of gift may have come from Russia-linked profits — 22 मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUnearthed (Greenpeace) — Christopher Harborne, jet fuel and Russian, Iranian oil — 1 जुलाई 2026, The Times के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Richard Tice stayed with Tory donor Lubov Chernukhin — 10 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNZ Herald — False Russian spy claim against top NZ businessman Christopher Chandler — और Law.com, $8,000,001 का वर्डिक्ट, 22 अक्टूबर 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCNN — Reform UK faces criminal investigation — 9 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAl Jazeera — Why is Farage\u0026rsquo;s Reform accused of violating UK foreign funding rules? — 4 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Irish Times — Nigel Farage aides step down after undercover report — 4 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuronews — Reform UK reported to police over claims of illegal donations — 4 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChannel 4 News — Met Police launch criminal investigation into Reform UK donations — 9 सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHeart (Global) — Reform UK internal inquiry clears own adviser — 7 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Farage on foreign funding claims — सितंबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — GB News — \u0026ldquo;Marshall and Legatum jointly own the company through All Perspectives Ltd., in which they each own around 40%\u0026rdquo;; चेयरमैन Alan McCormick \u0026ldquo;a partner at Legatum\u0026rdquo;; £60 million का लॉन्च राउंड।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — GB News reveals £22 million in new losses — मार्च 2026; 2024/25 में £22m का घाटा, लॉन्च से अब तक £130m से ज़्यादा, All Perspectives से £17.7m और, रेवेन्यू £26.2m।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe New World — The GB News Files (PDF) — मार्च 2026; 20 समीक्षक; Farage के £585,000 और शेयरहोल्डिंग, Anderson के £100,000, Goodwin का by-election शो, Andrew Neil।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform canvasser filmed by Channel 4 — 27 जून 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHuffPost UK — Reform activists did not commit a criminal offence, police say — 3 जुलाई 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Ofcom will not investigate Channel 4 over Reform UK undercover sting — 3 जुलाई 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Farage claims bad apples are gone from Reform UK — 30 जून 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nITV News (archived) — Inside Reform: councillors\u0026rsquo; extreme and racist views on camera — 14 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Undercover footage shows Reform activist claiming Muslims cannot be British — 17 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Reform UK should take immediate action against racism, Burnham says — अक्टूबर 2026, Reform के बयान के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star — Reform UK kick Staffordshire County Council leader out of party — 5 दिसंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe JC — Reform mayoral candidate suspended after likening Jewish security group to Islamists on horseback — मार्च 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Nigel Farage on Sarah Pochin\u0026rsquo;s adverts remarks — अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe National — Scottish Reform UK MSP who backed deporting Muslims elected — 8 मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform councillor expelled over posts — 11 मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Reform councillor charged over pothole post — जुलाई 2026; ट्रायल 9 नवंबर 2026 के लिए लिस्टेड, आरोप से इनकार।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage under fire after saying Muslims do not share British values — 26 मई 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian — Nigel Farage condemned over call to ban public prayer for Muslims — 19 मार्च 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — Do Britons think Reform UK are racist? — सितंबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — What do Britain\u0026rsquo;s ethnic minorities think of British politics? — अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Reform councillor\u0026rsquo;s whip restored — 10 फ़रवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBlog Preston — Politician in charge of Lancashire\u0026rsquo;s care homes — जून 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — Doncaster Reform councillor suspended over posts — 15 फ़रवरी 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNovara Media — Reform quietly readmits suspended councillors — 16 जून 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — No charges to be brought against ex-Reform MP Rupert Lowe — 14 मई 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nExpress \u0026amp; Star (PA) — Four Reform councillors suspended after footage of tense meeting leaked — 20 अक्टूबर 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIBTimes UK — ITV Exposure: Reform UK, Farage, Parry and vetting — 16 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Daily Britain — ITV undercover Reform UK documentary — 19 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBreakingNews.ie (PA) — Farage insists no case to answer on undeclared £5 million gift — 6 मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNewswav — Reform accused of failing to condemn racism after councillor\u0026rsquo;s Nigerians post — मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNation.Cymru (PA) — Jenrick blames Tory smear amid probe into leadership campaign donations — मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIBTimes UK — Reform UK investigates members after ITV undercover report — 15 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLBC — Reform councillors and the ITV sting — अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGB News — Nigel Farage responds to Coutts — 4 जुलाई 2023।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC News — BBC apologises to Nigel Farage over Coutts report — 24 जुलाई 2023।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Spectator — Lowe brands Farage a \u0026lsquo;viper\u0026rsquo; after charges dropped — 14 मई 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNation.Cymru (PA) — Reform UK branded \u0026lsquo;sinister\u0026rsquo; for reporting journalists to police — 22 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPress Gazette — Reform says it has reported ITV to the police — 21 अक्टूबर 2026, NUJ के बयान के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChesney and Citron — Deep Fakes: A Looming Challenge for Privacy, Democracy, and National Security — California Law Review, 2019।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSchiff, Schiff and Bueno — The Liar\u0026rsquo;s Dividend: Can Politicians Claim Misinformation to Evade Accountability? — American Political Science Review, 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCommittee on Standards in Public Life — The Seven Principles of Public Life.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons — Code of Conduct for Members, HC 1083 — \u0026ldquo;inspired and informed by the Seven Principles of Public Life\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSociety of Editors — Society calls for reversal of Reform UK ban in Derbyshire — 1 अक्टूबर 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe London Economic — Reform become most referenced opposition party on BBC and ITV News at Ten — 15 दिसंबर 2025; Cardiff University, सितंबर 2025: Reform 37, Conservatives 25; ITV पर Farage 49।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe London Economic — Reform, with 0.7% of all MPs, featured in 25% of BBC\u0026rsquo;s recent 10pm news bulletins — 2 नवंबर 2025; Cardiff University की \u0026ldquo;Enhancing Impartiality\u0026rdquo; स्टडी, 2025 के पहले छह महीने, Lib Dems 17%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNation.Cymru — Why isn\u0026rsquo;t the Greens\u0026rsquo; growing success reflected in media coverage? — 28 फ़रवरी 2026, Cardiff University के रिसर्चर Maxwell Modell, Matt Walsh और Stephen Cushion द्वारा; 2025 में लीड की गई ख़बरें, BBC का पोलिंग वाला तर्क, Greens 11% से 17%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBBC Editorial Guidelines — Impartiality — सिद्धांत 2.2.6 और 2.2.7।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — List of Question Time episodes, highest appearance makers — Farage के 38 अपीयरेंस, साल में 1.9; Clarke 1.4, Williams 1.7, Campbell 1.6, Harman 1.3, Kennedy 1.4।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe London Economic — Nigel Farage set for 38th appearance on Question Time — 2 दिसंबर 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProspect — GB News seems to have become Reform TV, and Ofcom hasn\u0026rsquo;t stopped it — Alan Rusbridger, 21 मार्च 2026; Marshall और Legatum, Habib और Lowe, Ofcom का Farage जाँच छोड़ना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWikipedia — Legatum — \u0026ldquo;a private investment firm, headquartered in Dubai\u0026rdquo;, 2006 में New Zealand में जन्मे Christopher Chandler द्वारा स्थापित, जो GB News के सह-मालिक हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Nerve — For GB News\u0026rsquo;s funders, a £130m loss is a small price to pay for vast influence — 2021 के मध्य से £131m का घाटा, मई 2025 तक के साल में £22m।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPolitical Parties, Elections and Referendums Act 2000, section 54 — एक अनुमत कंपनी दानदाता का Companies Act 2006 के तहत रजिस्टर्ड होना, \u0026ldquo;incorporated within the United Kingdom\u0026rdquo;, और \u0026ldquo;business in the United Kingdom\u0026rdquo; चलाना ज़रूरी है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfcom — Ofcom fines GB News £100,000 — 31 अक्टूबर 2024; Rules 5.11 और 5.12, \u0026ldquo;the seriousness and repeated nature of this breach\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMishcon de Reya — High Court quashes Ofcom\u0026rsquo;s decisions against GB News — Rees-Mogg प्रोग्रामों पर 28 फ़रवरी 2025 का फ़ैसला।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSnopes — Did Trump say \u0026lsquo;I love the poorly educated\u0026rsquo;? — Nevada caucus की जीत का भाषण, 23 फ़रवरी 2016; एट्रिब्यूशन सही आँका गया। साथ ही The Week।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPew Research Center — Behind Trump\u0026rsquo;s 2024 victory: voting patterns of validated voters — जून 2025; बिना कॉलेज डिग्री वाले वोटरों ने Trump को 14 पॉइंट से तरजीह दी, ग्रेजुएट्स ने Harris को 16 से।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — How Britain voted in the 2024 general election — GCSE या उससे कम पढ़ाई वालों में Reform 23%, उससे ऊँची पढ़ाई वालों में 8%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYouGov — How would Britain vote two years since the 2024 election? — 2026; GCSE या उससे कम वालों में Reform 40%, ग्रेजुएट्स में 14% के साथ पाँचवें नंबर पर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGood Morning America (ABC) — Trump calls media \u0026rsquo;enemy of the American people\u0026rsquo; — 17 फ़रवरी 2017।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMiddle East Eye — Reform UK bans Middle East Eye journalist from party conference — 2 सितंबर 2026; Guardian के Anna Isaac और Peter Geoghegan पर भी रोक।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Office — Nationality: good character requirement, version 7.0 — 30 अप्रैल 2026 को प्रकाशित केसवर्कर गाइडेंस: आपराधिकता, बदनामी, \u0026ldquo;lack of frankness\u0026rdquo;, वित्तीय मज़बूती।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCrown Prosecution Service — The Code for Crown Prosecutors — Full Code Test: दोषसिद्धि की वास्तविक संभावना, फिर जनहित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFCA — Upper Tribunal upholds Crispin Odey ban — सितंबर 2026, \u0026ldquo;unfit to work in financial services\u0026rdquo;, जुर्माना £1,529,374; और Decision Notice, मार्च 2025। 4 अगस्त 2023 को Reform UK को Odey के £10,000 Electoral Commission की एंट्री C0572678 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nElectoral Commission (via Wired-Gov) — Investigations concluded, 27th September 2022 — Reform UK, \u0026ldquo;Failure to deliver a complete campaign spending report\u0026rdquo; और \u0026ldquo;Late payment of claims\u0026rdquo;, \u0026ldquo;No sanction\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLocal Government Lawyer — Reform member found guilty over false statements about rival — अप्रैल 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInformation Commissioner — decision notice IC-411617-G3G8, Kent County Council — 16 जुलाई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGB News — With Reform UK leading among disabled voters — Opinium, मार्च 2025: विकलांग उत्तरदाताओं में Reform 29%, Labour 20% (407 का एक सबसैंपल)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPoliticsHome — Labour seats at risk from Reform have higher rates of people relying on disability benefits — 3 जून 2025; Trussell का विश्लेषण, 247 में से 140 सीटें सबसे ऊपरी एक-तिहाई में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Spectator Australia — Can Reform really end benefits Britain? — अगस्त 2026; \u0026ldquo;every Reform MP has an electoral majority smaller than the number of PIP claimants living in their constituency\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Guardian (via Eastern Eye) — One in five NHS staff in England are non-UK nationals — सितंबर 2023 का NHS Digital डेटा: 20.4% स्टाफ़, 30% नर्सें और हेल्थ विज़िटर, 36.3% डॉक्टर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLocalGov — Social care vacancy rate falls to decade low but challenges ahead — 24 जून 2026, Skills for Care: 2020/21 से British नागरिकों द्वारा भरे गए पद 130,000 कम।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCare Provider Alliance — The size and structure of the adult social care sector and workforce in England, July 2025 — Skills for Care रिपोर्ट का सारांश: अंतरराष्ट्रीय भर्तियाँ 2023/24 में 105,000 से गिरकर 2024/25 में 50,000।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/politics/who-is-reform-actually-for/","summary":"Reform UK पर एक राय वाला लेख, जो पार्टी के अपने दस्तावेज़ों और सार्वजनिक रिकॉर्ड से बना है। यहाँ रहने, काम करने और टैक्स भरने वाले लोगों से indefinite leave to remain छीनने की उसकी योजना। एक welfare योजना जो State Pension को बचाती है और कामकाजी उम्र की मदद काटती है। एक पार्टी कंपनी जो 2025 तक नेता की मिल्कियत थी, और एक संविधान जो सदस्यों के हाथ में बस एक सुझाव पेटी छोड़ता है। काम करने वाले Universal Credit क्लेमेंट और देखभाल करने वाले (carers), जिन्हें यह योजना हटा देगी। 75 से 80% डोनेशन विदेश में रहने वाले डोनरों से, 2009 में Parliament का पास किया हुआ domicile टेस्ट जो कभी लागू ही नहीं हुआ, और Council of Europe और सरकार की अपनी समीक्षा ऐसे पैसे के बारे में क्या कहती है। डोनरों के कारोबार: Tether, QinetiQ, crypto, और अमेरिका में एक guilty plea और फिर माफ़ी। £5m का तोहफ़ा, Farage की कमाई और MEP के रूप में उसका रिकॉर्ड, Tice की प्रॉपर्टी और टैक्स, Jenrick का पलटना और Westferry, Putin और Trump से रिश्ते, Trump के शपथ ग्रहण, Mar-a-Lago, Abu Dhabi और Israel की यात्राओं का पैसा किसने दिया, RFOI Ltd, Ghandehari ट्रस्ट और दिवालिया होने की कगार पर खड़ी कंपनियाँ जिन्होंने £485,000 दिए, Farage को पैसे देने वाली crypto कंपनियाँ और crypto धोखाधड़ी में पैसा गँवाते पेंशनर, BBC पर Reform को मिलने वाली कवरेज और GB News पर उसकी अपनी कुर्सी, नस्लवाद और अनुशासन का रिकॉर्ड, और 12 में से 7 आरोप जो सच निकले। फिर शीर्षक वाला सवाल।","title":"Reform असल में किसके लिए है? पैसा, लोग और रिकॉर्ड"},{"content":"वही बजट, एक अलग रसोई 2026 का बजट “breathing space” कहकर बेचा गया1। यह पोस्ट उसे एक घर के लिए पढ़ती है, और किसी के लिए नहीं। इसकी एक साथी पोस्ट है, Breathing Space For Whom?, जो बताती है कि यह बड़ी कंपनियों और उनके पीछे के टैक्सों के साथ क्या करता है।\nएक दंपती, दोनों 67 या उससे ऊपर और स्टेट पेंशन की उम्र पार, जो पूरी नई स्टेट पेंशन के सिवा किसी चीज़ पर नहीं जीते। हर एक के लिए यह हफ़्ते के £241.30 है2, दोनों मिलाकर साल के £25,095। वे गैस से घर गरम करते हैं, साल में 13,375 kWh, क्योंकि गैस बॉयलर से गरम होने वाला एक आम घर इतना ही इस्तेमाल करता है। वे एक पेट्रोल कार चलाते हैं, साल में 4,000 मील। काउंसिल टैक्स बैंड A से D, इंग्लैंड में। बचत से कोई आमदनी नहीं, कोई प्राइवेट पेंशन नहीं, कोई किराया नहीं।\nसाफ़ समझ लीजिए कि यह आमदनी क्या है। स्टेट पेंशन एक बेनिफ़िट है, और HMRC इसे उन सरकारी बेनिफ़िट में गिनता है जिन पर इनकम टैक्स लगता है3। वे कोई टैक्स नहीं देते, और इसकी सिर्फ़ एक वजह है। इनकम टैक्स हर व्यक्ति पर अलग लगता है, इसलिए दोनों में से हर एक का अपना £12,570 का Personal Allowance है4, और पूरी नई स्टेट पेंशन साल की £12,547.60 है2। कोई और आमदनी न हो तो हर पेंशन रेखा से £22.40 नीचे बैठती है। और यह पेंशन कोई ऐसा पैसा भी नहीं है जो उन्होंने जमा किया और जो उनका इंतज़ार कर रहा था। सरकार का अपना वर्णन है कि यह “unfunded” और “Pay As You Go” है, और कि “State Pension payments paid to current pensioners are financed from National Insurance contributions paid by current workers”5। उन्होंने अपने से पहले के पेंशनरों का खर्च उठाया, और आज काम करने वाले लोग उनका उठाते हैं। इस बजट में इसमें किया गया हर बदलाव इस बात का फ़ैसला है कि लोगों का एक समूह दूसरे को कितना देता है।\nसवाल यह है कि “breathing space” कहकर बेचा गया बजट उन्हें कोई जगह देता है या नहीं? थोड़ी, एक बार। फिर वह उसे वापस लेने लगता है, और उनकी आमदनी में सबसे बड़ा बदलाव 2030 तक नहीं आता।\nपेंशनर दंपती का हिसाब बजट का हर घरेलू कदम जो उन्हें छूता है, Treasury के अपने दस्तावेज़ से:\nकदम कब उन पर लागू? साल का असर £100 Household Energy Payment, बैंड A से D जनवरी 2027 हाँ +£100, एक बार बिजली पर 0% VAT, तीन महीने और अप्रैल से जुलाई 2027 हाँ, 28p पर 2,500 kWh, कोई ऑफ़-पीक EV टैरिफ़ नहीं लगभग +£11, एक बार 5p फ़्यूल ड्यूटी कटौती छह महीने और जुलाई 2027 तक हाँ, पेट्रोल कार लगभग +£12, एक बार गैस स्टैंडिंग चार्ज यूनिट रेट में 2027 के अंत में, या बाद में हाँ, और ज़्यादा इस्तेमाल पर नुकसान −£44 Gas Shipper Obligation आम टैक्स में 2028 में आना था हाँ, और हर पेंशन टैक्स-फ़्री अलाउंस से नीचे है लगभग +£5 बिजली स्टैंडिंग चार्ज, कैप पर 54.83p रोज़, साल के £200 “details next year” जैसा है वैसा £0 £2 बस किराया कैप 2027 नहीं, वे पहले से मुफ़्त सफ़र करते हैं £0 Pension Credit नहीं, उनकी आमदनी ज़्यादा है £0 Winter Fuel Payment, हर एक को £100 बदला नहीं हाँ, पर नया नहीं £0 बदलाव इनकम टैक्स अप्रैल 2030 तक कोई नहीं, हर एक अलाउंस से £22.40 नीचे £0 Triple Lock में बदलाव अप्रैल 2030 हाँ 2030 से कम बढ़ोतरी सारी बिजली पूरे रेट पर खरीदी जाती है। EV न होने से रात का सस्ता टैरिफ़ लेने का कोई मतलब नहीं, इसलिए Ofgem के आम 2,500 kWh में से हर एक6 लगभग 28p का पड़ता है। यूनिट में साल के £700 और स्टैंडिंग चार्ज में £200, और तीन महीने के लिए £900 पर 5% VAT लगभग £11 है।\nजोड़ लीजिए। 2027 में दंपती लगभग £123 बेहतर हैं, और इसमें लगभग सब कुछ £100 का भुगतान है। गैस सुधार आने के बाद वे हर साल लगभग £39 घाटे में हैं। £123 तीन साल से थोड़ा ज़्यादा में खत्म।\nगैस पर चलने वाले पेंशनर दंपती के साथ बजट क्या करता है गैस पर पेंशनर दंपती, £ में बदलाव £100 Household Energy Payment, सिर्फ़ 2027 +£100 बिजली पर 0% VAT, 2027 के तीन महीने +£11 फ़्यूल ड्यूटी कटौती, जुलाई 2027 तक छह महीने और +£12 Gas Shipper Obligation खत्म, साल का +£5 गैस स्टैंडिंग चार्ज यूनिट रेट में, साल का −£44 2028 से हर साल, सारे कदम −£39 हर कदम जो दंपती का पैसा बदलता है। तीन 2027 में एक बार के हैं। जो दो टिकते हैं, वे गैस लेवी पर छोटा फ़ायदा और गैस स्टैंडिंग चार्ज पर बड़ा नुकसान हैं, इसलिए 2028 से वे साल के £39 नीचे हैं। एक बार वाले पैसे पहले वसंत तक खर्च हो जाते हैं। जो टिकता है वह गैस सुधार है, और वह उल्टी दिशा में जाता है।\nगैस सुधार उनके लिए उल्टा काम करता है गैस स्टैंडिंग चार्ज को यूनिट रेट में डालना उस घर की मदद करता है जो कम गैस इस्तेमाल करता है। जो ज़्यादा इस्तेमाल करता है, उसे नुकसान होता है, और यह दंपती ज़्यादा इस्तेमाल करता है।\nआम बिल भरने वाले के लिए गैस स्टैंडिंग चार्ज साल का £108 है1, अक्टूबर कैप पर रोज़ 29.68p7। बजट Ofgem से कहता है कि इसे “through gas unit rates instead” वसूला जाए1। Ofgem के आम 9,500 kWh6 पर फैलाएँ तो हर kWh पर लगभग 1.14p जुड़ता है।\nसाल में गैस इस्तेमाल अभी स्टैंडिंग चार्ज यूनिट रेट से वापस फ़र्क 9,500 kWh, Ofgem का आम £108 £108 £0 13,375 kWh, यह दंपती £108 £153 −£44 जो दंपती अपना घर ठीक से गरम रखते हैं, वे साल के £44 ज़्यादा देते हैं। सर्दियों में एक पेंशनर दंपती को ठीक यही करना चाहिए। Treasury यह जानता है। वह कहता है कि “a number of households may be less able to make the most of the reform” और “targeted mitigation” का वादा करता है1। वह यह नहीं बताता कि वह मदद क्या है, किसे मिलेगी, या कब।\nतो जिन लोगों को सुधार महँगा पड़ता है, उन्हें बताया जाता है कि मदद आ रही है, बिना किसी ब्योरे के। जिन्हें इससे फ़ायदा होता है, जैसे मुझे, उन्हें वह अपने आप मिल जाता है।\nहाइड्रोजन लेवी, उल्टी दिशा में Gas Shipper Obligation गैस बिलों पर हाइड्रोजन के लिए एक प्रस्तावित लेवी थी। बजट इसे खत्म करता है और हाइड्रोजन का खर्च आम टैक्स से उठाता है1। तनख़्वाह वाले घर के लिए इसका मतलब बस इतना है कि बिल मीटर से पे-स्लिप पर चला गया।\nइस दंपती के लिए यह असली फ़ायदा है, और जो सही है वह सही है। गैस की हर यूनिट पर लेवी उनसे उतना लेती जितनी गैस वे जलाते हैं, और वे बहुत जलाते हैं। सरकार का अपना अनुमान औसत घरेलू गैस बिल पर साल के “approximately £2.60 - £4.50” था8, जो उनके इस्तेमाल पर लगभग £5 बनता है। सिर्फ़ पूरी स्टेट पेंशन पर वे कोई इनकम टैक्स नहीं देते, इसलिए आम टैक्स वाला तरीका उन्हें सीधे कुछ नहीं लगता। वे VAT और बाकी हर वह टैक्स अब भी देते हैं जिससे यह चलता है, पर मीटर पर जितना देते उससे बहुत कम।\nइससे हाइड्रोजन कोई बेहतर दाँव नहीं बन जाता। इसका मतलब है कि खर्च गैस जलाने वाले घर से हटकर तनख़्वाह कमाने वाले घर पर चला गया है।\nपेट्रोल कार को कटौती मिलती है, और वह मील के हिसाब से देती रहती है पेट्रोल कार को कुछ मिलता है। 5p की फ़्यूल ड्यूटी कटौती, जो जनवरी में खत्म होनी थी, “by a further six months to 1 July 2027” बढ़ा दी गई है1।\nफ़्यूल ड्यूटी विस्तार, पेट्रोल कार आँकड़ा साल के मील 4,000 फ़्यूल इकॉनमी, एक आम छोटी पेट्रोल कार 45 mpg, माना गया साल के लीटर लगभग 404 अतिरिक्त छह महीनों के लीटर लगभग 202 अभी पंप का दाम, पेट्रोल £1.97 प्रति लीटर साल का फ़्यूल बिल लगभग £796 5p कटौती और उस पर लगा VAT 6p प्रति लीटर, पंप दाम का लगभग 3% इस बजट से बचत लगभग £12, एक बार तो £1.97 प्रति लीटर पर साल के लगभग £796 के फ़्यूल बिल में यह विस्तार £12 का है। कटौती के बाद भी साल के लगभग £800 टंकी में जाते हैं।\nऔर वे पहले से प्रति मील टैक्स देते हैं। उसका नाम फ़्यूल ड्यूटी है। पेट्रोल पर 52.95p प्रति लीटर लगता है9, और ड्यूटी पर ऊपर से VAT। 45 mpg पर यह है:\nमील के हिसाब से टैक्स पेट्रोल कार, फ़्यूल ड्यूटी इलेक्ट्रिक कार, अप्रैल 2028 से eVED प्रति मील लगभग 5.3p, VAT के साथ 6.4p 3p10 4,000 मील पर लगभग £214, VAT के साथ £257 £120 तो नई Electric Vehicle Excise Duty कोई ऐसा प्रति-मील टैक्स नहीं है जो पहली बार आ रहा हो। पेट्रोल चलाने वाले जब से फ़्यूल ड्यूटी है तब से हर बार टंकी भरते हुए इसे देते आए हैं, और eVED की दर से लगभग दुगना। बजट की 5p कटौती इसे छह महीने के लिए थोड़ा कम करती है। रोकती नहीं।\nलोगों को तेल पर टिकाए रखना ख़राब नीति है, और मैं यह कह चुका हूँ। इस घर के लिए फिर भी यह एक छोटा, असली फ़ायदा है।\nPension Credit के लिए ज़्यादा, बाकी किसी चीज़ के लिए कम यह वह है जो किसी बिल पर नहीं दिखता। Pension Credit दंपती की आमदनी को “£363.25 if you have a partner” तक पूरा करता है11। इस दंपती के पास दोनों मिलाकर हफ़्ते के £482.60 हैं। वे हफ़्ते के £119.35 ऊपर हैं, इसलिए वे इसके लिए दावा नहीं कर सकते, और इसके साथ आने वाली कोई चीज़ उन्हें नहीं मिलती।\nदंपती की हफ़्ते की आमदनी रकम पूरी नई स्टेट पेंशन, दोनों की £482.60 Pension Credit दंपती को यहाँ तक पूरा करता है £363.25 रेखा से ऊपर £119.35 सबसे ग़रीब पेंशनरों के लिए बनी मदद के लिए बहुत ठीक-ठाक। फिर भी तय आमदनी पर। और उस आमदनी से वह गैस बिल भरना है जिसे बजट ने अभी बड़ा कर दिया है। Winter Fuel Payment उन तक पहुँचता है, “£100 if you and the person you live with were both born between 28 September 1946 and 27 June 1960”12, दोनों मिलाकर £200। यह बजट इसे नहीं बदलता।\nउन्हें £2 बस किराया कैप की भी ज़रूरत नहीं। मुफ़्त बस पास की उम्र इस पर निर्भर है कि आप कहाँ रहते हैं13:\nकहाँ मुफ़्त बस सफ़र कब से Scotland, Wales, Northern Ireland 60 London, सिर्फ़ London के अंदर 60 London के बाहर का England स्टेट पेंशन की उम्र, 66 से 67 होती हुई यह पोस्ट सबसे ऊँची उम्र लेती है, क्योंकि ज़्यादातर England उसी के तहत रहता है। स्टेट पेंशन की उम्र “between 2026 and 2028” 66 से 67 हो रही है14, इसलिए England में पास अब 67 पर आता है, Cardiff या Glasgow के पेंशनर से सात साल बाद। यह दंपती उस उम्र को पार कर चुका है, इसलिए वे मुफ़्त सफ़र करते हैं। यह असली फ़ायदा है। बस नया नहीं है, और England के दंपती ने इसके लिए सबसे लंबा इंतज़ार किया।\nलाइसेंस, चश्मा, और कौन देता है Pension Credit की रेखा से ऊपर होना उस टॉप-अप से ज़्यादा महँगा पड़ता है, क्योंकि बहुत सारी दूसरी मदद उसी से जुड़ी है। चश्मा इसका सबसे साफ़ उदाहरण है।\nNHS की आँखों की जाँच “anyone aged 60 or over” के लिए मुफ़्त है। चश्मा नहीं। उसके लिए NHS ऑप्टिकल वाउचर, दूसरों के अलावा, उन लोगों को मिलता है जिन्हें “Pension Credit Guarantee Credit” मिलता है15। इस दंपती को Pension Credit नहीं मिल सकता, इसलिए वाउचर भी नहीं, और वे अपना चश्मा ख़ुद ख़रीदते हैं। बचा हुआ एकमात्र रास्ता means-tested NHS Low Income Scheme है, जो एक फ़ॉर्म भरना है और जिससे आंशिक मदद मिल सकती है या कुछ नहीं।\nऔर ड्राइविंग लाइसेंस ठीक इसी पर ज़ोर डालने वाला है। Department for Transport ने “Introducing mandatory eyesight testing for older drivers” पर परामर्श किया है, “drivers aged 70 and over” के लिए, “part of the driving licence renewal process” के रूप में, जो “current self-declaration system” की जगह लेगा16। परामर्श 11 मई 2026 को बंद हुआ और नतीजा अभी नहीं आया। इसमें यह नहीं लिखा कि पैसा कौन देगा। ऑप्टोमेट्रिस्ट की अपनी संस्था साफ़ कहती है कि “Any additional costs to cover the administration of this must be funded by the driver”17।\nबुज़ुर्ग ड्राइवर, Pension Credit रेखा से ऊपर कौन देता है आँखों की जाँच 60 से NHS पर मुफ़्त15 जाँच के बाद ज़रूरी चश्मा वे ख़ुद, कोई वाउचर नहीं15 अनिवार्य लाइसेंस आँख-जाँच का कोई भी प्रशासनिक खर्च तय नहीं, ऑप्टोमेट्रिस्ट कहते हैं ड्राइवर17 इनमें से कुछ भी बजट में नहीं है, और यही बात है। तय आमदनी वाला दंपती कार इसलिए रखता है क्योंकि दुकान और डॉक्टर तक वही पहुँचाती है। सरकार इस ओर बढ़ रही है कि उसे रखने के लिए उन्हें अपनी आँखें साबित करनी पड़ें, और जो चश्मा उन्हें पास कराता है वह उसी स्टेट पेंशन से आता है जिससे गैस बिल।\nफ़्रीज़ से सुरक्षित, जब तक सुरक्षा खत्म न हो फ़्रीज़ किए गए अलाउंस के नीचे की वह £22.40 की जगह ही अकेली स्टेट पेंशन को इनकम टैक्स से बाहर रखती है।\nउन पर फ़िस्कल ड्रैग अलग तरह से काम करता है। काम करने वाला व्यक्ति इसे हर साल नकद में देता है, क्योंकि हर तनख़्वाह बढ़ोतरी एक ऐसे बैंड में पड़ती है जिसे खिसकना चाहिए था। यह दंपती अभी कुछ नहीं देता, क्योंकि उनकी पूरी आमदनी अलाउंस के नीचे है। फ़्रीज़ उनसे जगह छीनता है। ONS के सितंबर के महँगाई आँकड़ों18 पर क़ानून का अपना इंडेक्सिंग नियम19 चलाइए, तो अलाउंस ऐसा दिखता:\nटैक्स वर्ष Personal Allowance, इंडेक्स्ड फ़्रीज़ एक स्टेट पेंशन के ऊपर जगह, इंडेक्स्ड जगह, फ़्रीज़ 2026-27 £16,080 £12,570 £3,532 £22 2027-28 £16,650 £12,570 £3,663 −£417 2027-28 की पंक्ति मानती है कि Triple Lock सिर्फ़ सितंबर की 3.5% महँगाई देता है, जो वह कम से कम देता है। इससे पूरी नई स्टेट पेंशन हफ़्ते की £249.75, साल की £12,987 हो जाती है, और दोनों में से हर एक फ़्रीज़ किए गए अलाउंस से £417 ऊपर चला जाता है। 20% पर यह हर एक के लगभग £83, दंपती के £167, हर साल, ऐसे टैक्स में जो सिर्फ़ फ़्रीज़ की वजह से है। इंडेक्स्ड होने पर स्टेट पेंशन इनकम टैक्स के पास भी नहीं आती।\nतो पेंशनर पर ड्रैग बिल के रूप में नहीं दिखता। वह एक नई राहत के रूप में दिखता है। बजट अप्रैल 2027 से Pension Tax Allowance लाता है, ताकि वे पेंशनर जिनकी “with incomes at or under the value of the full new State Pension will not be brought into paying tax because of State Pension uprating in this Parliament”1।\nयह उस गड्ढे पर लगाया पैबंद है जो फ़्रीज़ ने खोदा, और यह सही काम है। अब तारीख़ें पढ़िए:\nकब तक Pension Tax Allowance “6 April 2027 until 5 April 2030”1 Personal Allowance £12,570 पर फ़्रीज़ 5 अप्रैल 20314 सुरक्षा फ़्रीज़ से एक साल पहले खत्म होती है। 2030-31 के लिए Treasury सिर्फ़ इतना कहता है कि वह “will consider arrangements beyond April 2030 in the usual way”1। तो सिर्फ़ स्टेट पेंशन पर जीने वाले दंपती के लिए एक साल ऐसा है जिसमें, आज लिखे नियमों के हिसाब से, फ़्रीज़ उन्हें इनकम टैक्स में डाल सकता है, और उसका इलाज बाद में सोचने का एक वादा है।\nकाम से £790 की पेंशन जोड़िए, और फ़िस्कल ड्रैग उसे ले जाता है अब दोनों में से एक को काम से पेंशन दीजिए। ऑटो-एनरोलमेंट रिटायर होने से चार साल पहले उन तक पहुँचा, और एम्प्लॉयर ने सिर्फ़ उतना डाला जितना क़ानून ने मजबूर किया, जो अप्रैल 2019 से क्वालिफ़ाइंग कमाई का 3% है20। क़ानूनी न्यूनतम पर चार साल से साल की लगभग £790 की एन्युइटी मिलती है। आज रिटायर होने वाले बहुत लोगों के पास लगभग इतना ही है, क्योंकि उन्हें बस न्यूनतम ही दिया गया और वह इतनी देर से आया कि कुछ बड़ा नहीं बन सका।\nदूसरे साथी में कोई बदलाव नहीं। जिसके पास £790 है, उसके लिए इसकी कीमत यह है:\nटैक्स वर्ष आमदनी अलाउंस से ऊपर इनकम टैक्स £790 एन्युइटी, जो बचती है 2026-27 £13,337.60 £767.60 £153.52 £636.48 2026-27, अगर अलाउंस इंडेक्स्ड होता £13,337.60 £0 £0 £790 2027-28, फ़्रीज़, Pension Tax Allowance £13,777 £1,207 £158 से £241 £549 से £632 2027-28, अगर अलाउंस इंडेक्स्ड होता £13,777 £0 £0 £790 2030-31 से आगे, Pension Tax Allowance खत्म कम से कम £13,777 कम से कम £1,207 कम से कम £241 ज़्यादा से ज़्यादा £549 पहले इंडेक्स्ड पंक्तियाँ पढ़िए। अलाउंस को दामों के साथ रखा जाता, इस साल £16,080 और अगले साल £16,650, तो एन्युइटी पर कोई टैक्स नहीं लगता, और फिर भी £2,700 या उससे ज़्यादा जगह बचती। इस टेबल में टैक्स का हर पाउंड फ़िस्कल ड्रैग है और कुछ नहीं। कोई दर नहीं बढ़ी। अलाउंस खड़ा रहा और स्टेट पेंशन उस तक बढ़ती गई।\nइस साल £790 उनकी आमदनी को फ़्रीज़ किए गए अलाउंस से £767.60 ऊपर ले जाता है, और उसका 20% £153.52 है।\nअप्रैल 2027 से Pension Tax Allowance उन्हें नहीं बचाता। यह सिर्फ़ उन पेंशनरों के लिए है जिनकी आमदनी “regardless of source, is below or at the value of the full new State Pension”, और जो “just above” हैं, उनके लिए यह “gradually withdrawn through a taper” होता है1। Treasury ने टेपर प्रकाशित नहीं किया, इसलिए टैक्स £158 और £241 के बीच है: £158 सिर्फ़ एन्युइटी का 20% है, और £241 फ़्रीज़ अलाउंस से ऊपर की हर चीज़ का 20%। अप्रैल 2030 से Pension Tax Allowance खत्म होता है और फ़्रीज़ नहीं, इसलिए यह £241 या उससे ज़्यादा है, और हर स्टेट पेंशन बढ़ोतरी के साथ बढ़ता है।\nउन्हें इसका कोई बिल नहीं मिलेगा। HMRC स्टेट पेंशन पर देय टैक्स प्राइवेट पेंशन से वसूलता है: “you\u0026rsquo;ll usually pay more tax to include any tax you need to pay on your State Pension. Your tax code will change to collect this”21। इसलिए एन्युइटी पहले से कटी हुई आती है, और £241 में से £83 उसके ज़रिए वापस टैक्स की जा रही स्टेट पेंशन है। यह £790 की एन्युइटी से 31% कटौती है, वह 20% बेसिक रेट नहीं जो दिखना चाहिए था।\nक्या मैं पूछ सकता हूँ कि जिसने वही किया जो उसे कहा गया, जितने चार साल वर्कप्लेस स्कीम उसके लिए थी उतने उसमें रहा और बचत की, उसकी स्टेट पेंशन उसकी बचत के ज़रिए टैक्स क्यों होती है? एम्प्लॉयर ने न्यूनतम दिया क्योंकि उसे बस न्यूनतम देना था। सरकार ने अलाउंस फ़्रीज़ किया क्योंकि फ़्रीज़ बिना हेडलाइन के पैसा जुटाता है। दोनों के बीच, एक छोटी पेंशन का लगभग एक तिहाई हर साल कटता है, और इंडेक्स्ड अलाउंस इसका एक-एक पैसा छोड़ देता।\n2030 में Triple Lock हटता है इस दंपती की आमदनी में सबसे बड़ा बदलाव हिसाब में नहीं है, क्योंकि वह अप्रैल 2030 तक शुरू नहीं होता।\nतब तक स्टेट पेंशन “by the highest of 2.5%, inflation or earnings growth” बढ़ती है1। अप्रैल 2030 से यह “by the highest of 2.5%, inflation, or the amount required to maintain its value relative to earnings as reached in April 2029” बढ़ती है1। Treasury इसे “ratchet” हटाना कहता है। Treasury के लिए इसकी कीमत, उसके अपने शब्दों में:\nबदला हुआ Triple Lock, स्टेट पेंशन खर्च में कमी Treasury का अनुमान 2030 के दशक के आख़िर तक साल के £15 billion 2040 के दशक के आख़िर तक साल के £50 billion यह पैसा कहीं से नहीं आता, ऐसा नहीं है। यह स्टेट पेंशन की उन बढ़ोतरियों से आता है जो वरना दी जातीं, यानी उस पर जीने वाले हर पेंशनर की आमदनी से। बजट कहता है कि वह व्यक्तिगत देखभाल “free at the point of use” के साथ एक National Care Service चलाएगा1, और यह शायद रखने लायक हो। पर इसका पैसा वही लोग दे रहे हैं जिन्हें इसकी ज़रूरत पड़ेगी, और इस पोस्ट का दंपती सबसे पहले देता है, 2030 से हर उस बढ़ोतरी में जो जितनी होती उससे छोटी है।\nबॉयलर के लिए कुछ नहीं यह वह घर है जिसकी इंसुलेशन और हीट पंप का पैसा सबसे ज़्यादा मदद करता।\nसाल में 13,375 kWh गैस इस्तेमाल करने वाला दंपती ठीक वही है जिसके लिए Warm Homes Plan है। यह बजट उसके कैपिटल ग्रांट से £1 billion रक्षा पर खर्च के लिए लेता है1। यह हीट पंप ग्रांट को साल के £400 million पर रोके रखता है1, एक हीट पंप पर £7,50022। और यह इंसुलेशन, हीट पंप, सोलर और बैटरी लगाने पर VAT को अप्रैल 2027 से 0% से वापस 5% होने देता है23।\nजो उनका बिल हमेशा के लिए घटाता बजट क्या करता है इंसुलेशन VAT वापस 5%, Warm Homes ग्रांट £1 billion कम हीट पंप ग्रांट जस का तस, VAT वापस 5% सोलर और बैटरी VAT वापस 5% तय आमदनी और बिना बचत के, इनमें से कोई सामान मदद के बिना नहीं ख़रीदा जाता। तो दंपती गैस बॉयलर रखते हैं, 13,375 kWh जलाते रहते हैं, स्टैंडिंग चार्ज सुधार से बढ़ा यूनिट रेट देते हैं, और अगली सर्दी के £100 का इंतज़ार करते हैं।\nतय आमदनी मेहनत करके बाहर नहीं निकल सकती काम करने वाला घर ज़्यादा काम ले सकता है, नौकरी बदल सकता है, या अपना पैसा सोलर और बैटरी में लगा सकता है। तय आमदनी वाले पेंशनर दंपती के पास इनमें से कुछ नहीं। उनकी आमदनी तब हिलती है जब सरकार उसे हिलाती है, और 2030 से वह कम हिलेगी। उनका एनर्जी बिल एक ऐसा बाज़ार तय करता है जिसे यह बजट ठीक करने के बजाय सब्सिडी देता है, और जो एक सुधार उनके बिल को सीधे छूता है वह उन्हें साल के £44 का पड़ता है, और “targeted mitigation” खाली छोड़ दिया गया है।\nउन्हें वह चाहिए जिसका पैसा इस बजट में कोई एक बार भी देने को तैयार नहीं: उनका घर इंसुलेट हो और बॉयलर बदला जाए, ताकि बिल नीचे आए और नीचे रहे। इसके बजाय उन्हें £100 मिलते हैं, जो सब देते हैं, काउंसिल टैक्स के रास्ते उन्हीं एनर्जी कंपनियों तक पहुँचते हैं, और अगले साल फिर चाहिए। यह सांस लेने की जगह नहीं है। यह उन्हें उसी पुरानी गैस पर, उसी पुराने दाम पर, एक-एक सर्दी करके टिकाए रखना है।\nHM Treasury — Budget 2026: Breathing Space for Today, Fresh Hope for the Future — 28 अक्टूबर 2026 को संसद के सामने रखी गई बजट रिपोर्ट। Triple Lock 1.28, 1.29, 5.23 और Box 5A; Pension Tax Allowance 3.19 और 6.182; एनर्जी के कदम 3.4 से 3.9 और 6.24 से 6.27; फ़्यूल ड्यूटी 3.13 और 6.211; Warm Homes Plan और Boiler Upgrade Scheme 4.36।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — The new State Pension: what you\u0026rsquo;ll get — “The full rate of new State Pension is £241.30 a week.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Income Tax: taxable and tax-free state benefits — स्टेट पेंशन टैक्स लगने वाले सरकारी बेनिफ़िट में सूचीबद्ध है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — Maintaining the Personal Allowance and basic rate limit until 5 April 2031 — Personal Allowance £12,570 पर “until 5 April 2031” रोका गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — Third State Pension age review: independent report call for evidence — National Insurance Fund स्टेट पेंशन देता है; “this is unfunded and is often referred to as a ‘Pay As You Go’ system”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Summary of changes to the energy price cap, revised TDCV — 1 जुलाई 2026 से आम खपत: “2,500 kWh of electricity, 9,500 kWh of gas”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Changes to energy price cap between 1 October and 31 December 2026 — गैस स्टैंडिंग चार्ज रोज़ 29.68p और यूनिट रेट 7.97p/kWh, VAT सहित; बिजली यूनिट रेट 26.32p/kWh और स्टैंडिंग चार्ज रोज़ 54.83p, 31 मार्च 2027 तक बिना VAT।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Gas Shipper Obligation analytical annex — औसत घरेलू गैस बिल पर साल के “approximately £2.60 - £4.50”, 2028 से 2037।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Tax on shopping and services: Fuel Duty — पेट्रोल, डीज़ल, बायोडीज़ल और बायोएथेनॉल “52.95 pence per litre”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHM Treasury — Electric Vehicle Excise Duty (eVED) — 1 अप्रैल 2028 से इलेक्ट्रिक कारों के लिए 3p प्रति मील, प्लग-इन हाइब्रिड के लिए 1.5p।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Pension Credit: what you\u0026rsquo;ll get — “your joint weekly income to £363.25 if you have a partner” तक पूरा करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Winter Fuel Payment: how much you\u0026rsquo;ll get — 28 सितंबर 1946 और 27 जून 1960 के बीच पैदा हुए दंपती में हर एक को £100, अगर उन्हें कोई योग्य बेनिफ़िट नहीं मिलता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Apply for an older person\u0026rsquo;s bus pass — England में “free travel when you reach the State Pension age”; London, Wales, Scotland और Northern Ireland में 60 पर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDWP — State Pension age timetable — “The State Pension age for men and women will now increase to 67 between 2026 and 2028.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNHS — Free NHS eye tests and optical vouchers — 60 या उससे ऊपर के हर व्यक्ति के लिए मुफ़्त आँखों की जाँच; चश्मे के लिए वाउचर Pension Credit Guarantee Credit पाने वालों और दूसरे सूचीबद्ध समूहों को, सिर्फ़ उम्र पर नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDepartment for Transport — Introducing mandatory eyesight testing for older drivers — परामर्श, 7 जनवरी से 11 मई 2026, नतीजे का इंतज़ार।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAssociation of Optometrists — response on mandatory eyesight testing for older drivers — मई 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nONS — CPI annual rate, all items, series D7G7 — सितंबर 2021 3.1%, 2022 10.1%, 2023 6.7%, 2024 1.7%, 2025 3.8%, 2026 3.5%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIncome Tax Act 2007, section 57 — Personal Allowance “the consumer prices index for the September before the start of a tax year” से इंडेक्स होता है और “up to the nearest amount which is a multiple of £10” तक राउंड होता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Workplace pensions: what you, your employer and the government pay — अप्रैल 2019 से एम्प्लॉयर का न्यूनतम हिस्सा 3%, कुल न्यूनतम योगदान 8%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Tax when you get a pension: how your tax is paid — अगर आपको प्राइवेट पेंशन मिलती है, “Your tax code will change to collect” आपकी स्टेट पेंशन पर टैक्स।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Boiler Upgrade Scheme: what you can get — एयर सोर्स या ग्राउंड सोर्स हीट पंप के लिए £7,500।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — VAT on energy-saving materials and heating equipment (VAT Notice 708/6) — ज़ीरो रेट “from 1 May 2023 to 31 March 2027”, जिसमें इंसुलेशन, हीट पंप, सोलर पैनल और बैटरी आते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/politics/breathing-space-on-a-state-pension/","summary":"2026 का बजट उस दंपती के लिए क्या करता है जो सिर्फ़ पूरी नई स्टेट पेंशन पर जीते हैं, दोनों मिलाकर साल के £25,095, घर को साल में 13,375 kWh गैस से गरम करते हैं और 4,000 मील पेट्रोल कार चलाते हैं। Treasury के अपने दस्तावेज़ से एक हिसाब: £100 का Household Energy Payment, बिजली पर 0% VAT, फ़्यूल ड्यूटी में कटौती, गैस स्टैंडिंग चार्ज का यूनिट रेट में जाना, जो ज़्यादा गैस इस्तेमाल करने वाले को महँगा पड़ता है, और Gas Shipper Obligation का आम टैक्स में जाना, जो इस बार मदद करता है। फिर वे चीज़ें जो किसी बिल पर नहीं दिखतीं: Pension Credit के लिए हफ़्ते में £119 ज़्यादा आमदनी और उसके साथ मिलने वाली चश्मे की मदद का न मिलना, बुज़ुर्ग ड्राइवरों के लिए अनिवार्य आँखों की जाँच पर चल रहा परामर्श, फ़िस्कल ड्रैग जो उनसे नकद नहीं बल्कि Personal Allowance के नीचे की जगह छीनता है, उसे ढकने वाला Pension Tax Allowance जो फ़्रीज़ से एक साल पहले खत्म हो जाता है और £790 की कार्यस्थल एन्युइटी पर टैक्स लगाता है जिसे इंडेक्सिंग छोड़ देती, अप्रैल 2030 से Triple Lock में बदलाव जो 2030 के दशक के आख़िर तक Treasury के लिए साल के £15 billion का है, और इंसुलेशन और हीट पंप का वह पैसा जो उनकी सबसे ज़्यादा मदद करता, काटा गया या उस पर टैक्स लगा।","title":"स्टेट पेंशन पर सांस लेने की जगह: गैस पर चलने वाले पेंशनर दंपती के लिए 2026 का बजट"},{"content":"ब्रीदिंग स्पेस बजट, मेरी रसोई से पढ़ा गया 2026 का बजट आज Breathing Space for Today, Fresh Hope for the Future शीर्षक से पेश हुआ1। दावा है ऊर्जा बिलों में मदद, ड्राइवरों के लिए मदद और हाई स्ट्रीट के लिए मदद, जिसका ख़र्च बैंक और बचत व किराये की आमदनी वाले लोग उठाएँगे।\nतो मैंने वही किया जो मैं हर बिल के साथ करता हूँ। दस्तावेज़ पढ़ा और अपने घर पर उसका हिसाब लगाया।\nमेरे काम वाले किसी इंसान के लिए यह घर काफ़ी आम है। 40% टैक्स देने वाला। मैं घर से काम करता हूँ, पर पार्टनर का दफ़्तर आना-जाना अब भी गाड़ी से होता है, इसलिए EV साल में क़रीब 20,000 मील चलती है। छत पर सोलर और गैराज में बैटरी, और ग्रिड से ली गई हर यूनिट 7p के ऑफ़-पीक रेट पर आती है। गैस अब भी जुड़ी है, पर सिर्फ़ गर्म पानी और थोड़ी हीटिंग के लिए, साल में क़रीब 5,350 kWh। काउंसिल टैक्स बैंड A से D, इंग्लैंड में। बचत से कोई आमदनी नहीं और किराये से भी नहीं, क्योंकि हमारे जितने बड़े मॉर्गेज के बाद बचाने को कुछ बचता ही नहीं।\nइसमें से कोई भी सामान किसी सरकारी मदद से नहीं आया। अपना बिल घटाने में मैंने अपना पैसा लगाया है: सोलर, बैटरी, EV, और साल-दर-साल गैस कम करते जाना। मैंने यह अपने पैरों पर खड़े होने के लिए किया, किसी ग्रांट की उम्मीद में नहीं, और अब भी ग्रांट नहीं माँग रहा। मेरी उम्मीद बस इतनी है कि ऐसा करने के लिए मुझसे ज़्यादा न वसूला जाए।\nसवाल यह है कि क्या ऐसे घर को इस बजट से टैक्स बिल के अलावा कुछ मिलता है? ज़्यादातर नहीं। हिसाब यह रहा।\nनीचे का हर आँकड़ा Treasury के अपने दस्तावेज़, Ofgem, HMRC या सरकार के अपने कंसल्टेशन पेपर से है, भाषण से नहीं और अख़बारों की कवरेज से नहीं। आज घूम रहे बजट के एक सारांश ने कई बातें ग़लत बताईं, और जहाँ ऐसा हुआ वहाँ मैंने साफ़ कहा है।\nमेरे जैसे घर का हिसाब यह बजट का हर घरेलू उपाय है जो इस घर को छू सकता है, और यहाँ उसकी क़ीमत। प्लस का मतलब पैसा आया, माइनस का मतलब गया।\nउपाय कब यहाँ लागू? साल भर की क़ीमत £100 Household Energy Payment, इंग्लैंड में बैंड A से D जनवरी 2027 हाँ +£100, एक बार बिजली पर 0% VAT, तीन महीने बढ़ाया गया अप्रैल से जुलाई 2027 हाँ, पर सारी ख़रीदी बिजली 7p ऑफ़-पीक पर है कुछ पाउंड, एक बार गैस स्टैंडिंग चार्ज, 28.75p रोज़, यूनिट रेट में 2027 के अंत तक, या बाद में हाँ, और कम खपत वाले जीतते हैं +£46 बिजली स्टैंडिंग चार्ज, 56.61p रोज़, £207 साल “details next year” जैसा है वैसा रहता है £0 Gas Shipper Obligation आम टैक्स पर 2028 से आनी थी बिल से हटकर टैक्स पर लगभग £0, दूसरे रास्ते से भरा गया 5p फ़्यूल ड्यूटी कटौती बढ़ाई गई जुलाई 2027 तक नहीं, यह EV है £0 टैक्स-फ़्री माइलेज 55p और 35p तक अप्रैल 2027 नहीं, दफ़्तर आना-जाना नहीं गिना जाता2 £0 £2 बस किराया सीमा 2027 बस इस्तेमाल नहीं होती £0 सस्ते स्थानीय सार्वजनिक EV चार्जर वसंत 2027 नहीं, घर पर चार्ज होती है £0 बचत और प्रॉपर्टी आय पर इनकम टैक्स 2 पॉइंट ऊपर अप्रैल 2027 न बचत, न किराया £0 कैश ISA £20,000 पर बरक़रार 2027 नहीं, बचाने को कुछ नहीं बचता £0 Lifetime ISA, Your First Home 2027 नहीं, अपने घर के लिए हम पहले ही मेहनत कर चुके £0 Electric Vehicle Excise Duty 3p प्रति मील, 20,000 मील अप्रैल 2028 हाँ −£600, CPI के साथ बढ़ता इनकम टैक्स सीमाएँ जमी हुई, फ़िस्कल ड्रैग अप्रैल 2031 तक हाँ इस साल −£3,544 तक, 2027-28 में −£4,112 जोड़िए। 2027 में घर £100 से थोड़ा ज़्यादा फ़ायदे में है, और लगभग सारा फ़ायदा एक बार के £100 भुगतान से है। अप्रैल 2028 से सालाना उपाय मिलकर क़रीब £554 साल का नुक़सान बन जाते हैं, हर साल, महँगाई के साथ बढ़ते हुए। अकेला eVED महीने के £50 ले जाता है, यानी शुरू होने के दो महीने बाद £100 ख़त्म, और फिर वापस नहीं आता। और यह फ़िस्कल ड्रैग से पहले है, जो अकेले ही 40% टैक्स देने वाले से इस साल £3,544 तक ले सकता है।\nगैस पर बचत, बिजली पर कोई नहीं जहाँ श्रेय बनता है, वहाँ देना चाहिए। यह सचमुच का फ़ायदा है, और यह मेरी अपनी शुरुआती राय के ख़िलाफ़ जाता है।\nTreasury के अपने आँकड़े के मुताबिक़ आम बिल भरने वाले के लिए गैस स्टैंडिंग चार्ज साल के £108 हैं1। Ofgem की अक्टूबर की कैप गैस स्टैंडिंग चार्ज 29.68p रोज़ रखती है, जो वही £108 है3। आप इसे भरते हैं चाहे बहुत गैस जलाएँ या लगभग नहीं, जो उस घर के लिए बिल्कुल उल्टा है जो अपनी गैस खपत घटाता आया है।\nबजट Ofgem से कहता है कि घरेलू बिलों पर इसे ख़त्म करे, “aiming for delivery by the end of 2027 or as soon as possible after then”, और सप्लायर लागत “through gas unit rates instead” वसूलें1।\nब्योरा अभी तय नहीं है, इसलिए यह अनुमान है, कोटेशन नहीं। अगर वह £108 Ofgem के आम घर के 9,500 kWh पर फैलाया जाए4, तो हर kWh पर क़रीब 1.14p जुड़ता है। 5,350 kWh पर यह घर उसमें से क़रीब £61 यूनिट रेट के ज़रिए वापस भरता है और £108 के फ़िक्स्ड चार्ज भरना बंद कर देता है। कैप पर यह साल में क़रीब £47 का फ़ायदा है। इस घर का अपना टैरिफ़ 28.75p रोज़ लेता है, साल के £105, और उसी हिसाब से यह क़रीब £46 साल का फ़ायदा बनता है।\nसाल में गैस खपत अभी स्टैंडिंग चार्ज यूनिट रेट से वसूली अंतर 5,350 kWh, इस घर की खपत, कैप पर £108 £61 +£47 9,500 kWh, Ofgem का आम घर £108 £108 £0 14,000 kWh, बड़ा पुराना घर £108 £160 −£52 बराबरी का बिंदु आम घर है। कम इस्तेमाल करने वाला हर कोई जीतता है, और गैस पर बड़ा हवादार घर गर्म करने वाला हारता है, जिसे Treasury भी मानती है जब कहती है “a number of households may be less able to make the most of the reform” और “targeted mitigation” का वादा करती है1। इसलिए यह एक निष्पक्ष सुधार है, और उन घरों को इनाम देता है जो पहले ही खपत घटा चुके। £46 मैं ले लूँगा।\nअब दूसरा। सोलर और बैटरी वाले घर के लिए असली फ़िक्स्ड चार्ज गैस वाला नहीं है। वह बिजली का स्टैंडिंग चार्ज है। यह घर 56.61p रोज़ भरता है, अक्टूबर की कैप पर 54.83p के मुक़ाबले3, और यह साल के £207 है, इसके गैस चार्ज का लगभग दोगुना। आप जितनी ज़्यादा बिजली ख़ुद बनाते और जमा करते हैं, आपके बिजली बिल में उस फ़िक्स्ड चार्ज का हिस्सा उतना बड़ा होता जाता है, क्योंकि वह पूरा भरना पड़ता है चाहे आप 3,000 kWh लें या 30। जिस 7p पर यह घर ऑफ़-पीक बिजली लेता है, उस पर £207 का स्टैंडिंग चार्ज क़रीब 2,950 kWh बिजली की क़ीमत है, जो एक भी यूनिट आने से पहले भर दी जाती है।\nबिजली पर 0% VAT भी यहाँ ज़्यादा कुछ नहीं करता। VAT 7p पर लगता है, इसलिए यह हमेशा से सिर्फ़ 0.35p प्रति kWh था। तीन महीने का विस्तार स्टैंडिंग चार्ज पर क़रीब £2.50 और हर 100 kWh पर 35p का है। असली बचत सस्ती ऑफ़-पीक बिजली थी। VAT कटौती उसके ऊपर की रेज़गारी है।\nबजट इसे यूनिट रेट में नहीं ले जाता। वह सिर्फ़ “reform electricity standing charges” का वादा करता है, ब्योरा “next year”1। तो सुधार उस घर को इनाम देता है जिसने अपनी गैस घटाई, और उस घर को, जो अपनी बिजली ख़ुद बनाता है, अपने बिल का सबसे बड़ा फ़िक्स्ड चार्ज भरते छोड़ देता है, बिना छुए।\nहाइड्रोजन लेवी खिसकी है, गई नहीं बजट Gas Shipper Obligation हटाने को “providing savings for businesses and households” बताता है1। यह बचत नहीं है। यह वही बिल है, दूसरे पते पर भेजा गया।\nGas Shipper Obligation एक योजना में थी, लेवी अभी शुरू नहीं हुई थी। उसका अपना कंसल्टेशन उसे “a funding mechanism for the Hydrogen Production Business Model” बताता है5, जो गैस शिपर्स से लिया जाता और गैस की हर यूनिट पर आगे बढ़ाया जाता, और सरकार के अनुमान में औसत घर पर इसकी लागत 2028 से 2037 तक साल के “approximately £2.60 - £4.50” होती6। इस घर की गैस खपत पर यह साल के क़रीब £2 है।\nबजट इसे किसी बिल तक पहुँचने से पहले ही ख़त्म कर देता है। इसकी जगह: “Hydrogen Allocation Round 1 funding will be met with a £27 million uplift to DESNZ RDEL in 2027-28”, और सरकार भविष्य के हाइड्रोजन कॉन्ट्रैक्ट सार्वजनिक पैसे से चलाएगी “if the government commits to them and subject to value for money”1।\nतो हाइड्रोजन का पैसा अब भी भरा जाता है। अगले साल £27 million आम टैक्स से, और भविष्य के कॉन्ट्रैक्ट “publicly fund” करने के वादे पर कोई ऊपरी सीमा ही नहीं है। हम सब अब भी भर रहे हैं, बस मीटर की जगह टैक्स रिटर्न से।\nऔर आप किस रास्ते से भरते हैं, यह मायने रखता है। गैस की हर यूनिट पर लगी लेवी आपसे इस हिसाब से लेती है कि आप कितनी गैस जलाते हैं, इसलिए जिस घर ने गैस को गर्म पानी तक घटा दिया, वह उसका बहुत कम हिस्सा भरता है। आम टैक्स आपसे आमदनी के हिसाब से लेता है। कम गैस वाले 40% टैक्स देने वाले के लिए यह उल्टा है: गैस बिल से £2 हटते हैं, और लागत का एक हिस्सा ऊँची दर पर वापस आ जाता है। फ़ायदे में भारी गैस इस्तेमाल करने वाले रहते हैं, सबसे पहले बड़ी औद्योगिक साइटें, क्योंकि प्रति-यूनिट लेवी सबसे ज़्यादा उन्हीं से वसूलती।\nआज घूम रहे सारांश ने दो और बातें ग़लत बताईं। लेवी किसी के बिल पर कभी थी ही नहीं, क्योंकि शुरू नहीं हुई थी। और यह तेल और गैस कंपनियों को नहीं जाती।\nये पहले राउंड के ग्यारह प्रोजेक्ट हैं, सरकार की अपनी सूची से7:\nप्रोजेक्ट मुख्य डेवलपर क्षमता Barrow Green Hydrogen Carlton Power 21.0 MW Bradford Low Carbon Hydrogen Hygen 24.5 MW Cromarty Hydrogen Scottish Power और Storegga 10.6 MW Green Hydrogen 3 HYRO 10.6 MW HyBont Marubeni Europower 5.2 MW HyMarnham JG Pears और GeoPura 9.3 MW Langage Green Hydrogen Carlton Power 7.0 MW Tees Green Hydrogen EDF Renewables Hydrogen 5.2 MW Trafford Green Hydrogen Carlton Power 10.5 MW West Wales Hydrogen MorGen Energy और Trafigura 14.2 MW Whitelee Green Hydrogen Scottish Power 7.1 MW हर एक इलेक्ट्रोलिटिक हाइड्रोजन है, बिजली से बनी। डेवलपर बिजली कंपनियाँ, रिन्यूएबल शाखाएँ और ट्रेडिंग हाउस हैं। BP, Shell और नॉर्थ सी की बाक़ी कंपनियाँ इसमें नहीं हैं।\nहाइड्रोजन ग़लत दाँव है पहला राउंड “a weighted average strike price of £241/MWh” पर तय हुआ और 125 MW उत्पादन के लिए “over £2 billion of revenue support” देगा7।\nउस स्ट्राइक प्राइस को घरेलू भाषा में रखिए। £241 प्रति MWh यानी 24.1p प्रति kWh। अक्टूबर की कैप पर गैस 7.97p प्रति kWh है, VAT समेत3। यानी हाइड्रोजन उस गैस से तीन गुना क़ीमत पर ख़रीदी जा रही है जिसकी जगह वह लेगी, और £2 billion उस फ़र्क़ को भरने के लिए है, क्योंकि वह बाज़ार भाव पर अपने दम पर बिक नहीं सकती। Gas Shipper Obligation इसी के लिए थी। यह एक ऐसे ईंधन की सब्सिडी थी जो मुक़ाबला नहीं कर सकता, और इसे आम टैक्स पर ले जाने से सब्सिडी बनी रहती है, बस चेक पर दस्तख़त करने वाला बदलता है।\nतो टैक्स देने वाला ख़रीद क्या रहा है?\nसूची फिर देखिए। इनमें से हर प्रोजेक्ट बिजली से हाइड्रोजन बनाता है। यानी योजना यह है कि बिजली लो, पानी को गैस में बदलने में उसका बड़ा हिस्सा गँवाओ, गैस को पाइप से इधर-उधर भेजो, और उसे जला दो। उधर वही बिजली हीट पंप में डालो तो लगभग तीन गुना गर्मी निकलती है:\n1 kWh बिजली क्या करती है नतीजा एयर सोर्स हीट पंप चलाती है, UK के 742 घरों का मीडियन 2.8 kWh गर्मी, 280%8 इसकी जगह जलाने के लिए हाइड्रोजन बनाती है उतनी ही गर्मी के लिए “five to six times more electricity” चाहिए9 ये आँकड़े रिसर्च से हैं, मेरे नहीं। 32 स्वतंत्र अध्ययनों की एक समीक्षा ने पाया कि हाइड्रोजन हीटिंग हीट पंप से कम कुशल है और गर्मी की हर यूनिट पर महँगी है, और जैसा रिपोर्ट हुआ, यह “makes absolutely no sense for heating homes and buildings”9। हीट पंप 100% से ज़्यादा कुशल होता है क्योंकि वह गर्मी बनाता नहीं, खिसकाता है। हाइड्रोजन वहाँ कभी नहीं पहुँच सकती, क्योंकि वह बिजली से शुरू होती है और हर क़दम पर उसका कुछ हिस्सा खो देती है।\nतो हाइड्रोजन समय और पैसे की बर्बादी है, और इस देश को 100% इलेक्ट्रिक की ओर जाना चाहिए: हीट पंप और वह सारा सामान जो बिजली की हर यूनिट से एक से ज़्यादा यूनिट गर्मी निकालता है, और सड़क पर EV। बजट उल्टा करता है। हीट पंप ग्रांट को वहीं रोके रखता है, Warm Homes से एक billion काटता है, और सरकार के हर भविष्य के हाइड्रोजन कॉन्ट्रैक्ट को सार्वजनिक पैसे से चलाने का वादा करता है, बिना किसी लिखी सीमा के।\nवह रोड टैक्स जो बाक़ी सब पर भारी है अब वह उपाय जो सचमुच इस घर का पैसा लेता है, और बजट खुलकर बताता है कि यह क्यों है। वह Electric Vehicle Excise Duty को “strengthening the tax base \u0026hellip; to respond to the long-term decline in fuel duty receipts” का हिस्सा बताता है1।\neVED की घोषणा बजट 2025 में हुई थी और यह बजट उसे पक्का करता है, एक माइलेज अनुमान टूल और एक ऑप्ट-इन “eVED Connect” के साथ जो गाड़ी से आपका माइलेज पढ़ता है1। दर है “3 pence per mile for BEVs” और “1.5 pence per mile for PHEVs”, 1 अप्रैल 2028 से, और 2029-30 से CPI के साथ बढ़ती हुई10।\nसाल के 20,000 मील पर यह £600 है। हर साल, महँगाई से जुड़ा। इनमें से ज़्यादातर मील दफ़्तर आने-जाने के हैं, और बजट जिन टैक्स-फ़्री माइलेज दरों को बढ़ाता है वे “to and from your work, unless it\u0026rsquo;s a temporary place of work” यात्रा को नहीं ढकतीं2। यानी दफ़्तर के सफ़र पर नया टैक्स लगता है और राहत कोई नहीं।\nइसे फ़्यूल ड्यूटी वाली पंक्ति के सामने रखिए। 5p की कटौती अब छठी बार बढ़ाई गई है1:\nएक ही बजट, दो गाड़ियाँ पेट्रोल या डीज़ल यह EV 5p फ़्यूल ड्यूटी कटौती और RPI टालना, £1,355 million मिलता है £0 अप्रैल 2028 से eVED नहीं लगता 3p प्रति मील, 20,000 मील पर साल के £600 जिस घर ने वही किया जो सरकार ने कहा था, उसी के पास अब सरकार राजस्व के लिए लौट रही है।\nक्या फ़्यूल ड्यूटी कटौती कम से कम लोगों को किसी सस्ते विकल्प तक पहुँचने में मदद करती है? देखिए Table 6.1 में परिवहन का पैसा कहाँ जाता है1:\nTable 6.1 में परिवहन उपाय लागत लोगों को किस ओर धकेलता है 5p फ़्यूल ड्यूटी कटौती और RPI टालना £1,355 million, दो साल पेट्रोल और डीज़ल टैक्स-फ़्री माइलेज दरें ऊपर £230 million, दो साल ज़्यादा बिज़नेस मील चलाना £2 बस किराया सीमा £230 million, दो साल, ऊर्जा बजट से बस सस्ते स्थानीय सार्वजनिक EV चार्जर, तरीक़ा अभी तय नहीं £100 million, दो साल, फिर कुछ नहीं इलेक्ट्रिक Carbon Price Support हटाना £235 million, 2028 से पाँच साल सस्ती जीवाश्म-ईंधन बिजली यह सस्ते परिवहन की ओर बदलाव को ठीक नहीं करता। यह लोगों को तेल पर बने रहने के पैसे देता है। फ़्यूल ड्यूटी एक क़ीमत का संकेत है, और जब डीज़ल “exceeding £2 per litre in October 2026” है1, तब Treasury ने उस संकेत को फिर कुंद करना चुना, बजाय पैसे को उससे निकलने के रास्ते पर ख़र्च करने के। बस सीमा और चार्जर मिलकर पंप को मिलने वाले का क़रीब एक चौथाई पाते हैं, और चार्जर का पैसा अभी कोई योजना भी नहीं है। यह £100 million है “reduce costs for local, lower-powered public chargers” के लिए, वसंत 2027 से, सड़क पर चार्ज करने वाले ड्राइवर के लिए “around £150 per year” के बराबर, और Department for Transport “set out next steps in due course” करेगा। उन ड्राइवरों को सार्वजनिक चार्जर पर अपने घर का टैरिफ़ इस्तेमाल करने देना, जो असल में इसे ठीक करता, एक टास्कफ़ोर्स के पास है “to explore” करने के लिए, एक “complex proposal that will take time to consider”1। हर विस्तार अगले को ख़त्म करना और कठिन बनाता है, और जो घर तेल को पहले ही पीछे छोड़ चुके, वही इसके लिए प्रति-मील टैक्स भर रहे हैं।\nफ़िस्कल ड्रैग: वह टैक्स बढ़ोतरी जिसकी कोई घोषणा नहीं करता 40% टैक्स देने वाले पर सबसे बड़े टैक्स के लिए किसी नई घोषणा की ज़रूरत ही नहीं, और वह अभी से eVED से लगभग छह गुना ज़्यादा ले सकता है। यह फ़िस्कल ड्रैग है।\nPersonal Allowance और बेसिक रेट सीमा “at their 6 April 2021 levels” पर तय की गई थीं, और अब “until 5 April 2031” वहीं रखी गई हैं11। यानी दस साल £12,570 पर और ऊँची दर की सीमा £50,270 पर, जबकि बजट ख़ुद कहता है “consumer prices today are around 33% higher than the 2020 average”1। हर वेतन बढ़ोतरी जो सिर्फ़ महँगाई के बराबर चलती है, आपकी आमदनी का और हिस्सा 40% बैंड में धकेल देती है। आपका वेतन ज़्यादा कुछ ख़रीदता नहीं, फिर भी उस पर ज़्यादा टैक्स लगता है।\nसरकार के अपने आँकड़ों में फ़िस्कल ड्रैग सीमाएँ तय 6 अप्रैल 2021 के स्तर पर जमी रहेंगी 5 अप्रैल 2031 तक, दस साल 2020 से क़ीमतें लगभग 33% ऊपर अकेले 2028 से 2031 के विस्तार से अतिरिक्त टैक्स £3,365m, £7,780m, फिर £12,435m सालाना 2030-31 तक इनकम टैक्स के दायरे में खिंचे लोग 700,000 राजस्व वाली पंक्ति Treasury की अपनी लागत गणना है11, और यह ड्रैग को बढ़ता दिखाती है, क्योंकि जमा हुआ हर साल पिछले साल के ऊपर चढ़ता है।\nतो अगर सीमाएँ कभी जमाई न गई होतीं, तो कहाँ होतीं? क़ानून पहले से बताता है कि इसे कैसे निकालें। दोनों हर अप्रैल उपभोक्ता मूल्य सूचकांक से बढ़ती हैं, “for the September before the start of a tax year”, Personal Allowance अगले £10 तक ऊपर गोल की जाती है12 और बेसिक रेट सीमा अगले £100 तक13। यह रहा वही नियम ONS के अपने सितंबर के आँकड़ों पर, 3.1%, 10.1%, 6.7%, 1.7%, 3.8% और 3.5%14:\nटैक्स वर्ष Personal Allowance, सूचकांकित ऊँची दर की सीमा, सूचकांकित जमी हुई अतिरिक्त इनकम टैक्स, 40% वाला 2022-23 £12,960 £51,860 £12,570 और £50,270 £396 2023-24 £14,270 £57,170 £12,570 और £50,270 £1,720 2024-25 £15,230 £61,030 £12,570 और £50,270 £2,684 2025-26 £15,490 £62,090 £12,570 और £50,270 £2,948 2026-27 £16,080 £64,480 £12,570 और £50,270 £3,544 2027-28 £16,650 £66,750 £12,570 और £50,270 £4,112 ऊँची दर की सीमा अभी £64,480 होनी चाहिए, £50,270 नहीं। यानी £14,210 की आमदनी अब 40% पर टैक्स हो रही है जिस पर क़ानून वरना 20% लगाता, या कुछ भी नहीं।\nअतिरिक्त टैक्स वाला कॉलम उस 40% टैक्स देने वाले के लिए है जो सूचकांकित सीमा से ऊपर और £100,000 से नीचे कमाता है। Personal Allowance का हर अतिरिक्त पाउंड 40p बचाता है और बेसिक रेट बैंड का हर अतिरिक्त पाउंड 20p, इसलिए 2026-27 बनता है £3,510 पर 40% और £10,700 पर 20%। अप्रैल 2027 तक के पाँच साल जोड़िए तो यह £11,292 है, एक भी नया टैक्स घोषित होने से पहले। यह सिर्फ़ इनकम टैक्स है, और इसमें National Insurance शामिल नहीं, क्योंकि ऊपरी NI सीमा को सूचकांकित करने से उसी आमदनी का ज़्यादा हिस्सा 2% की जगह 8% पर जाता, जो उल्टी दिशा में खींचता है।\nकोई हर साल खड़े होकर इसकी घोषणा नहीं करता। यह वह टैक्स है जो 40% टैक्स देने वाला सबसे भरोसे से भरता है, और यही वह है जिसे इस बजट ने छोड़ देना चुना।\nऔर सबसे पहले कम कमाने वाले चुकाते हैं पाउंड में देखें तो जमी सीमाओं से सबसे ज़्यादा 40% बैंड खोता है। पर देखिए कि सबसे ज़्यादा चोट किसे लगती है। यह रहा वही नियम 2026-27 में चार कामगारों पर, सिर्फ़ इनकम टैक्स:\nकामगार, 2026-27 अभी दिया इनकम टैक्स अगर सीमाएँ साथ चलतीं साल का अतिरिक्त वेतन का हिस्सा पार्ट-टाइम, £16,000 £686 £0 £686 4.3% National Living Wage पर फ़ुल-टाइम, £23,132 £2,112 £1,410 £702 3.0% £40,000 £5,486 £4,784 £702 1.8% 40% टैक्स देने वाला, £70,000 £15,432 £11,888 £3,544 5.1% देखने लायक़ पार्ट-टाइमर है। £12,570 और £16,080 के बीच कमाने वाला हर कोई अब उस पैसे पर इनकम टैक्स दे रहा है जिसे क़ानून छोड़ देता, और पॉलिसी पेपर उम्मीद करता है कि जमी सीमाएँ “700,000 individuals into Income Tax by 2030 to 2031” लाएँगी11। 40% टैक्स देने वाला £3,544 झेल सकता है और बड़बड़ा सकता है। £16,000 में से £686 कभी फ़ालतू नहीं थे। और National Insurance उसी जमी हुई £12,570 से शुरू होता है, इसलिए कम कमाने वाले वह भी ऊपर से भरते हैं।\nअब वह सुर्ख़ी जो बजट आपको दिखाना चाहता है। National Living Wage अप्रैल 2027 में £13.21 प्रति घंटा हो जाता है, “equivalent to an increase of £910 in the gross annual earnings of a full-time worker”1, अभी के £12.71 से15। उसी साल, 2027-28 में, जमी Personal Allowance उसी कामगार से क़ानून की तुलना में £816 ज़्यादा इनकम टैक्स ले लेती है। बढ़ोतरी असली है। Treasury उसका ज़्यादातर हिस्सा पहले ही ख़र्च कर चुकी है।\nफिर वे लोग जिन्हें उसने बचाना चुना। अप्रैल 2027 से एक नया Pension Tax Allowance का मतलब है कि वे पेंशनर “with incomes at or under the value of the full new State Pension will not be brought into paying tax because of State Pension uprating in this Parliament”1। यह जमी सीमाओं का इलाज है, और निष्पक्ष है। क्या मैं पूछ सकता हूँ कि यह पेंशनरों पर ही क्यों रुक जाता है? उसी आमदनी वाला कामगार, जो उसके लिए पूरा हफ़्ता काम करता है, उसे कोई छूट नहीं मिलती।\nबिल में मदद, या नाकाम बाज़ार के लिए सब्सिडी? शुरुआत इससे कि £100 असल में है क्या। आज घूम रहे सारांश ने इसे आपके बैंक खाते में भुगतान बताया। बजट इसे “£100 council tax rebate for households in bands A to D” कहता है1, जो जनवरी 2027 से काउंसिल देंगी। जो भी हो, यह ऊर्जा बिल पर ख़र्च होता है।\nऔर न यह, न 0% VAT, ऊर्जा की क़ीमत बदलता है। बिल उतना ही बड़ा रहता है। बस उसका एक हिस्सा टैक्स देने वाला भरता है। तो बिल का पैसा जाता कहाँ है? जुलाई 2026 से आम बिल का Ofgem का अपना ब्योरा4:\nआम बिल कहाँ जाता है, जुलाई से सितंबर 2026 हिस्सा थोक ऊर्जा, contracts for difference समेत 45% नेटवर्क 25% संचालन, क़र्ज़ और उद्योग लागत 16% नीतिगत लागत 6% VAT 5% सप्लायर के लिए मुनाफ़ा भत्ता (EBIT) 2.6% हेडरूम और लेवलाइज़ेशन 1.5% हर दस में से सात पाउंड जनरेटरों और नेटवर्क कंपनियों को जाते हैं। सप्लायर का मुनाफ़ा मार्जिन कैप में ही लिखा है। तो £3,685 million सार्वजनिक पैसा है, आम टैक्स से जुटाया गया, बैंक सरचार्ज की मदद से, और उसका हर पाउंड उन्हीं निजी हाथों में पहुँचता है। यह ऊर्जा में मदद नहीं है। यह ऊर्जा बाज़ार की सब्सिडी है, आपके काउंसिल टैक्स के रास्ते भेजी गई ताकि मदद जैसी दिखे।\nसब्सिडी आख़िर किस चीज़ की? Treasury के अपने हिसाब से घरेलू ऊर्जा की क़ीमतें 2020 के औसत से 73% ऊपर हैं1, और घरेलू ऊर्जा क़र्ज़ “has almost tripled to over £5 billion”1। जिस बाज़ार ने रूस के यूक्रेन पर हमले के बाद से इतना घरेलू क़र्ज़ चढ़ा दिया, वह नाकाम बाज़ार है। यह बजट उसे ठीक नहीं करता। यह इस सर्दी उसका बिल भरता है, और अगली सर्दी फिर भरना पड़ेगा, क्योंकि क़ीमत में कुछ नहीं हिला।\nइसे उसके सामने रखिए जो यही बजट जनरेटरों से वापस माँगता है। Electricity Generator Levy मार्च 2028 तक 45% से 55% हो जाती है, और Table 6.1 के मुताबिक़ इससे £95 million आते हैं1। अगले छह साल में टैक्स देने वाला £3,685 million उन बिलों में डालता है जिनसे उन जनरेटरों को भुगतान होता है। विंडफ़ॉल लेवी £95 million वापस निकालती है। यह लगभग 39 के मुक़ाबले 1 है।\nइसमें से £1,475 million बैंकों का सरचार्ज के ज़रिए भरना निष्पक्ष हिस्सा है, और मैं यह कहूँगा। पर जो सब्सिडी क़ीमत को वहीं छोड़ दे, वह टिकने वाला कुछ नहीं ख़रीदती। टिकने वाली ऊर्जा मदद वही है जो नीचे “छत के लिए कुछ नहीं” में है, वह जो घर की ज़रूरत ही घटा दे।\nतो पैसा मिलता किसे है अगर इस घर को नहीं, तो किसे? बजट की अपनी लागत तालिका, Table 6.1, 2026-27 से 2031-32 तक हर उपाय की लागत देती है1, इसलिए यहाँ अंदाज़े की ज़रूरत नहीं। यह रहीं सबसे बड़ी सौग़ातें, छह साल का जोड़।\nबजट 2026 में पैसा किसे मिलता है Treasury पर छह साल की लागत, 2026-27 से 2031-32, £ million घरेलू बिल सब्सिडी 3,685 मोटर चालक: फ़्यूल ड्यूटी, माइलेज 2,510 10,000 निर्माता 2,320 कचरा जलाना, कार्बन बिना क़ीमत 1,505 Founders' Relief 1,285 छोटी हाई-स्ट्रीट फ़र्में 1,165 Trading Allowance £3,000 तक 745 घरों के नाम पर दिया गया बड़ी फ़र्में और अमीर छोटी फ़र्में बजट 2026 की Table 6.1 की सबसे बड़ी सौग़ातें, 2026-27 से 2031-32 तक का जोड़। नीला घरों के नाम पर दिया गया, गुलाबी बड़ी फ़र्मों और अमीरों को जाता है, सुनहरा छोटी फ़र्मों को। 10,000 निर्माताओं को लगभग उतना मिलता है जितना देश के सारे मोटर चालकों को। घरों वाली पट्टी सबसे बड़ी सौग़ात दिखती है। ऊपर वाला खंड बताता है कि वह पैसा असल में कहाँ पहुँचता है।\nपर गुलाबी पट्टियों पर नज़र डालिए।\n10,000 निर्माता, £2,320 million। अप्रैल 2027 से British Industrial Competitiveness Scheme “eligible businesses \u0026hellip; from the indirect costs of the Renewables Obligation, Feed in Tariffs and Capacity Market schemes” को छूट देती है1, और उनके बिजली बिल “by up to 25%” घटाती है। अकेले 2027-28 में यह £1,235 million है, औसतन क़रीब £123,500 प्रति फ़र्म, जबकि घर को £100। यही तीन योजनाएँ इस घर की ख़रीदी हर kWh पर बनी रहती हैं। कचरे से ऊर्जा, £1,505 million। कचरा जलाने पर कार्बन क़ीमत टालना। इसे एक पंक्ति से ज़्यादा चाहिए, इसलिए नीचे इसके अपने पैराग्राफ़ हैं। फ़ाउंडर, £1,285 million। एक नया Founders\u0026rsquo; Relief: “a 10% CGT rate on up to £10 million of lifetime gains for qualifying founders of high-growth, innovative companies”1। Table 6.1 में कचरे से ऊर्जा वाली पंक्ति नौ शब्दों की है: “Delay the inclusion of energy from waste in the ETS”1। यह रहा इसके पीछे क्या है।\nकचरा जलाना और कार्बन क़ीमत 2024 की योजना UK Emissions Trading Scheme में पूरा शामिल करना “from 2028”16 किस पर शुल्क लगता सिर्फ़ जीवाश्म CO2, जो जलाया जाता है उसमें का प्लास्टिक16 27 अगस्त 2026 को फ़ैसला “will not take place in 2028”, कोई नई तारीख़ नहीं17 Treasury का नुक़सान, 2028-29 से 2031-32 £1,505 million1 पावर स्टेशन पहले से इस स्कीम में हैं, “the power sector in scope of the UK ETS” के साथ16, और 2028 तक वे ऊपर से Carbon Price Support भी भरते हैं, “£18/tCO2e on fossil-fuel powered electricity generation”1। प्लास्टिक जलाने वाला इंसिनरेटर इसमें से कुछ नहीं भरता, और कब भरेगा इसकी कोई तारीख़ नहीं।\nसीधी बात कहूँ तो फ़ायदा सिर्फ़ ऑपरेटरों को नहीं है। कार्बन लागत “passed through to local authorities” होती, और काउंसिलों की अपनी रीसाइक्लिंग संस्था ने इस टालने का स्वागत “some immediate relief” कहकर किया17। यह ठीक है, क्योंकि जो प्लास्टिक काउंसिल को थमाया जाता है वह काउंसिल ने नहीं बनाया। पर सरकार के अपने कंसल्टेशन ने इसका जवाब पहले ही ढूँढ लिया था। उसने लागत को पैकेजिंग Extended Producer Responsibility के ज़रिए बाँटने का प्रस्ताव दिया था, वह योजना जो बाज़ार में पैकेजिंग उतारने वाली फ़र्मों से उसका पैसा भरवाती है, और अनुमान लगाया था कि “between 20-30% of fossil waste by weight that is incinerated is within scope”16। यानी जिन्होंने प्लास्टिक बनाया, उनसे वसूलो।\nइसकी जगह कोई नहीं भरता। ऑपरेटर बच जाते हैं, पैकेजिंग बनाने वाले बच जाते हैं, और £1,505 million Treasury के खाते से कट जाते हैं। कार्बन फिर भी चिमनी से ऊपर जाता है।\nफिर डेटा सेंटर। एक नया Data Centre Covenant उनसे “their fair share of energy” भरने को कहता है। सभी डेटा सेंटर “encouraged to meet the tests” हैं, और सिर्फ़ विशेष सहायता चाहने वाले रणनीतिक डेटा सेंटरों के लिए यह ज़रूरी है1। बदले में एक Ministerial Control Centre “accelerate time to power” करेगा, भविष्य की ग्रिड क्षमता आरक्षित करेगा और “reallocating capacity released when other projects leave the connections queue” करेगा1। देश में बिजली के सबसे बड़े नए उपभोक्ता उस क़तार में आगे कर दिए जाते हैं जिसमें बाक़ी सब इंतज़ार करते हैं, उन कसौटियों पर जिन पर खरा उतरने के लिए उनमें से ज़्यादातर को बस प्रोत्साहित किया जाना है।\nफ़ाउंडर्स रिलीफ़ का मतलब तभी समझ आता है जब उसे उसी तालिका में उन लोगों के साथ किए गए बर्ताव के बग़ल में रखें जो आम कारोबार खड़े करते हैं।\nबड़े आइडिया का बिल छोटी फ़र्म भरती है Table 6.1 में दो अदला-बदली हैं, और दोनों में पैसा छोटा कारोबार भरता है।\nदो अदला-बदली: कौन किसे भरता है बेचने वाले मालिक, बढ़ते फ़ाउंडर BADR की जीवनभर सीमा आधी £1,085m लिए नया Founders' Relief, 10% पर £1,285m दिए ऑनलाइन विक्रेता, हाई-स्ट्रीट दुकानें प्लेटफ़ॉर्म VAT वसूलें £1,270m लिए दुकानों और पब को रेट्स राहत £1,165m दिए जुटाया बाँटा Table 6.1 की दो अदला-बदली, छह साल का जोड़, गुलाबी जुटाया गया और नीला बाँटा गया। कारोबार बेचने वाले मालिकों से छीनी गई राहत तेज़ी से बढ़ती कंपनियों के फ़ाउंडरों को जाती है, और हाई स्ट्रीट की रेट्स राहत का पैसा ऑनलाइन विक्रेता भरते हैं। पहली अदला-बदली फ़ाउंडर बनाम मालिक है। Business Asset Disposal Relief वह राहत है जिसका इस्तेमाल एक प्लंबर, एक दुकान या एक छोटी इंजीनियरिंग फ़र्म तब करती है जब मालिक कारोबार बेचता है या रिटायर होता है। 6 अप्रैल 2026 से होने वाली बिक्री पर यह पहले से 18% है18। यह बजट उसकी जीवनभर की सीमा आधी कर देता है, “from £1 million to £500,000 from April 2027”, जिससे £1,085 million आते हैं1। उसी तालिका में Founders\u0026rsquo; Relief “high-growth, innovative companies” को £10 million तक पर 10% देता है और उसकी लागत £1,285 million है।\nBusiness Asset Disposal Relief Founders\u0026rsquo; Relief किसके लिए कोई भी जो योग्य कारोबार बेचे “high-growth, innovative companies” के फ़ाउंडर दर 18% 10% जीवनभर की सीमा £1 million से घटाकर £500,000 £10 million छह साल का असर £1,085 million जुटाता है £1,285 million लगते हैं Treasury का बचाव है कि “three-quarters of BADR claimants will still receive relief on their entire gain”1। यह सच है, और असल बात भी यही है। जो एक चौथाई इसे खोते हैं, वे वही हैं जिन्होंने पूरी कामकाजी ज़िंदगी में आधे million से ज़्यादा का कुछ खड़ा किया, और उनकी राहत उन लोगों को चली गई जिनका मुनाफ़ा दस million तक जाता है।\nदूसरी अदला-बदली हाई स्ट्रीट बनाम ऑनलाइन विक्रेता है। दुकानों, पब और हॉस्पिटैलिटी के लिए छोटे कारोबार की रेट्स राहत असली है और स्वागत योग्य है: 70,000 और फ़र्में जो बिज़नेस रेट्स बिल्कुल नहीं भरेंगी, तीनों रेट्स उपायों पर £1,165 million की लागत से। Treasury साफ़ बताती है कि इसका पैसा कैसे आता है: “by ensuring businesses with significant sales online pay the VAT they owe, by requiring online marketplaces to collect it on their behalf”1। इससे £1,270 million आते हैं।\nयानी हाई स्ट्रीट की छोटी फ़र्मों का पैसा ऑनलाइन की छोटी फ़र्में भर रही हैं। कोई बड़ा कुछ नहीं डाल रहा।\nवॉर्म होम्स बाहर, हथियार अंदर इस बजट की सबसे बड़ी प्राथमिकता-बदली किसी बिल पर है ही नहीं। वह रक्षा है।\nजून में सरकार ने 2026-27 से 2029-30 के बीच Defence Investment Plan के लिए £15 billion की घोषणा की थी। यह बजट उसके आख़िरी £4.7 billion “further reducing departmental capital budgets by 1% from 2027‑28 to 2029‑30 to raise £3 billion” करके और Treasury के कैपिटल रिज़र्व से £1.7 billion लेकर जुटाता है1। हर विभाग का निर्माण बजट इसकी क़ीमत भरता है।\nऊर्जा विभाग का हिस्सा वह है जो मेरे जैसे घर पर आकर गिरता है:\nरक्षा के लिए ऊर्जा विभाग से कटौती रक़म Warm Homes Plan कैपिटल ग्रांट £1 billion हाइड्रोजन प्रोजेक्ट £500 million कार्बन कैप्चर, उपयोग और भंडारण £200 million Great British Energy £200 million यह Treasury की अपनी सूची है1। इसकी दो पंक्तियों से मुझे कोई शिकायत नहीं। हाइड्रोजन और कार्बन कैप्चर सार्वजनिक पैसे की बर्बादी हैं, और ऊपर “हाइड्रोजन ग़लत दाँव है” में दिए कारणों से उनसे £500 million और £200 million काटना सही फ़ैसला है। उन्हें पूरा काट देना चाहिए था। कार्बन कैप्चर इसलिए है कि जीवाश्म ईंधन थोड़ा और जलता रहे, और बिलों को लेकर गंभीर सरकार उस उद्योग पर टैक्स लगाती, उसे चलाए रखने के पैसे न देती।\nWarm Homes वाली पंक्ति इसका उल्टा है। सरकार कहती है वह “remains committed to heat pump deployment”, उसी पैराग्राफ़ में जहाँ Warm Homes Plan से एक billion निकालती है। वह यह ज़रूर कहती है कि कम आय वाले घरों और सोशल हाउसिंग के लिए उस योजना का ज़्यादातर पैसा “is protected”, और यह दर्ज करना निष्पक्ष है। पर घर की ऊर्जा ज़रूरत घटाना ऊर्जा मदद का वह इकलौता रूप है जिसे अगली सर्दी फिर नहीं भरना पड़ता, और इसी को काटकर यह पैसा जुटाया गया।\nअगर ग्रांट का पैसा जा रहा है, तो दायित्व उसके साथ नहीं जाना चाहिए। इंग्लैंड और वेल्स में निजी किराये के घरों के लिए पहले से एक नियम है: “Private landlords of all tenancies will be required to comply with the higher standard by 1 October 2030”, EPC C का लक्ष्य19। पर ब्योरा पढ़िए:\nनिजी किराये के घर, 2030 का मानक नियम क्या कहता है अंतिम तारीख़ 1 अक्टूबर 2030 मकान मालिक को ज़्यादा से ज़्यादा कितना ख़र्च करना है “up to £10,000 per property”, औसत £5,400 हीट पंप या सोलर ज़रूरी? दोनों में से कोई नहीं, दूसरा उपाय “at the discretion of the landlord” यह ख़र्च की सीमा और एक मेन्यू वाला मानक है। Warm Homes ग्रांट काटने के साथ इसका उल्टा आना चाहिए था: एक अनिवार्य नियम कि हर निजी किराये के घर में 2030 तक इन्सुलेशन, हीट पंप और सोलर हो, वरना उसे किराये पर नहीं दिया जा सकता। किराया मकान मालिक लेता है। ऊर्जा बिल किरायेदार भरता है। सख़्त नियम के बिना मकान मालिक के पास ऐसा पैसा ख़र्च करने का कोई कारण नहीं जो सिर्फ़ किसी और का पैसा बचाए, और किरायेदार बिल भी भरता है और अपने टैक्स से उन पर लगी सब्सिडी भी।\nफिर लक्ष्य। सरकार बताएगी कि “how we will meet our NATO commitment of spending 3.5% of GDP on defence by 2035, with a target date for 3% in 2030”1। उसके ऊपर National Wealth Fund और British Business Bank “deploy up to £5 billion over the next four years into defence, dual use and other sectors” करेंगे1, और UK Export Finance को “to support UK defence exports” ज़्यादा क्षमता मिलती है1।\nइसमें से कुछ का मैं समर्थन करता हूँ, और साफ़ कहूँगा। रूस ने यूक्रेन पर हमला किया। पुतिन की जंग इसकी वजह है, और यूक्रेन का अपना बचाव करना सही है। इस सर्दी यूक्रेन की हवाई सुरक्षा के लिए अतिरिक्त £500 million1 वह पैसा है जिससे मुझे कोई गिला नहीं।\nपर देखिए कि पैसा असल में किसके पास जाता है। ये 2025/26 के लिए Ministry of Defence के अपने मान्यता-प्राप्त आँकड़े हैं20:\nउद्योग के साथ MoD का ख़र्च, 2025/26 आँकड़ा उद्योग को भुगतान, UK और विदेशी £43.4 billion सिर्फ़ दस सप्लायरों को जाने वाला हिस्सा 40% अकेले BAE Systems £7.3 billion से थोड़ा ज़्यादा, 16.5% किसी एक सप्लायर का इतना बड़ा हिस्सा आख़िरी बार 2007/08 बिना प्रतिस्पर्धा वाले कॉन्ट्रैक्ट से भुगतान 47%, £20.5 billion तो क्या हम सब हथियार कंपनियों को टैक्स दे रहे हैं? हाँ, MoD की अपनी गिनती से। और इसका लगभग आधा बिना किसी प्रतिस्पर्धा के ख़र्च होता है।\nऔर इसका कुछ हिस्सा सीधे देश से बाहर चला जाता है। ये वही दस सप्लायर हैं MoD की अपनी डेटा तालिका से, हर एक के मुख्यालय के साथ21:\nMoD के शीर्ष दस सप्लायर, 2025/26 £ million UK? BAE Systems PLC 7,258 UK Babcock International Group PLC 3,288 UK Rolls-Royce Holdings PLC 1,562 UK QinetiQ Group PLC 1,114 UK Airbus Group SE 834 नहीं, यूरोपीय, नीदरलैंड्स में पंजीकृत Leonardo SpA 778 नहीं, इटली Thales 736 नहीं, फ़्रांस Serco Group PLC 726 UK Leidos Holdings Inc. 646 नहीं, अमेरिका The Boeing Company 597 नहीं, अमेरिका शीर्ष दस में से आधे विदेशी हैं, और उन्होंने मिलकर £3,591 million लिए, दसों को मिले पैसे का पाँचवाँ हिस्सा। बात शीर्ष दस पर नहीं रुकती। उसी तालिका में नीचे स्पेन सरकार की अपनी औद्योगिक होल्डिंग कंपनी, Sociedad Estatal de Participaciones Industriales, £389 million पर है, और फ़्रांस सरकार की शेयरहोल्डिंग एजेंसी, Agence des participations de l\u0026rsquo;État, £300 million पर21। यह UK का रक्षा पैसा है जो सीधे दो विदेशी सरकारों को जाता है।\nऔर उस सूची के दो सबसे बड़े UK नाम? यह पूछने लायक़ है कि वे इस पैसे का क्या करते हैं। यह रहे उनके अपने खाते:\nउनके अपने खातों से BAE Systems, 2025 Babcock, मार्च 2026 तक का साल MoD से भुगतान, 2025/2621 £7,258m £3,288m रिसर्च और डेवलपमेंट £407m अपने पैसे से22 £203.3m ख़र्च दर्ज23 दिया गया डिविडेंड £1,027m £36.7m शेयर बायबैक £502m £155.3m शेयरधारकों को लौटाया £1,529m £192.0m BAE ने एक ही साल में अपने शेयरधारकों को £1,529 million लौटाए, अपनी रिसर्च में लगाए £407 million का लगभग चार गुना। उसने रिसर्च और डेवलपमेंट टैक्स क्रेडिट में £29 million भी लिए22, यानी टैक्स देने वाला फिर हाथ बँटा रहा है। MoD ने उसे एक साल में £7.3 billion दिए, और शेयरधारक £1.5 billion ले गए।\nBabcock उल्टा है, और जो सही है वह सही है। उसने रिसर्च पर उससे ज़्यादा ख़र्च किया जितना लौटाया। वह अपनी दुनिया भर की आमदनी का 63.5% MoD से भी लेती है20, जिसका मतलब है कि उसे असल में टैक्स देने वाला चला रहा है। जो कंपनी सार्वजनिक पैसे पर इतनी निर्भर हो, उसे उसी जनता के लिए चलाया जाना चाहिए जो उसका पैसा भरती है।\nफिर वह पैसा जो किसी कॉन्ट्रैक्टर को छूता ही नहीं। MoD ने Foreign Military Sales के ज़रिए £744 million भेजे, “a mechanism used to purchase equipment from the US Government”, जो £43.4 billion के ऊपर से दिए गए, और उसमें से £469 million Boeing के लिए थे20। यह हमारा टैक्स है जो दूसरी सरकार के हथियार कार्यक्रम में जाता है, और मेरी राय में यह उसी वैश्विक अस्थिरता को पैसा दे रहा है जिससे बचने के लिए फिर हमसे कहा जाता है कि और ख़र्च करो। बजट का अपना नया Multilateral Defence Mechanism “joint procurement across partners” के लिए बना है1, यानी विदेश में और ज़्यादा ऑर्डर, कम नहीं।\nमेरी स्थिति सीधी है। UK के रक्षा पैसे का एक भी पाउंड विदेशी कॉन्ट्रैक्टर को नहीं जाना चाहिए। अगर यह देश अपनी हर कमाई का 3.5% रक्षा पर ख़र्च करने जा रहा है, तो उसका हर पाउंड यहीं हुनर, फ़ैक्ट्रियाँ और नौकरियाँ बनाए, और यहीं टैक्स भरे। यहीं बनाओ, वरना मत ख़रीदो।\nक्या मैं पूछ सकता हूँ कि MoD इसे गिनता तक क्यों नहीं? उसके अपने आँकड़े “UK and foreign owned organisations” को कुल भुगतान एक ही आँकड़े में देते हैं, दोनों में कोई बँटवारा नहीं20। जो संख्या कोई छापता ही नहीं, उसे आप घटा नहीं सकते।\nजो बिल्कुल नहीं है, वह है ख़र्च घटाने की कोई कोशिश। मैंने पूरे 162 पन्ने खोजे:\nबजट 2026 में शब्द कितनी बार आता है defence 120 से ज़्यादा diplomacy 0 ceasefire 0 de-escalation 0 रक्षा उद्योग बढ़ाने, उसे निजी पैसे से चलाने और उसका ज़्यादा निर्यात करने पर पूरा एक अध्याय है, और उसकी ज़रूरत घटाने पर एक पंक्ति भी नहीं। जिस हथियारों की होड़ को कोई रोकने की कोशिश नहीं कर रहा, उसके विजेताओं की एक ही सूची है, और वे MoD की सप्लायर तालिकाओं में दर्ज हैं, इंग्लैंड की किसी रसोई में नहीं।\nछत के लिए कुछ नहीं सबसे सस्ती kWh वह है जो घर को कभी ख़रीदनी ही न पड़े। लॉफ़्ट में इन्सुलेशन और छत पर सोलर हर सर्दी लौटाते रहते हैं, £100 का भुगतान ख़र्च होने के बहुत बाद तक। तो बिल घटाने के नाम पर बेचा गया बजट उनके लिए क्या करता है?\nवह VAT बढ़ा देता है।\nघर में ऊर्जा बचाने वाली सामग्री लगाना “from 1 May 2023 to 31 March 2027” शून्य-दर पर है, और सूची में इन्सुलेशन, सोलर पैनल, बैटरी और हीट पंप आते हैं24। यह बजट इसे ख़त्म होने देता है। पैराग्राफ़ 6.215 का शीर्षक है “Revert to reduced rate on energy saving materials (ESMs) as planned”, और 1 अप्रैल 2027 से यह फिर 5% है, बस हीट बैटरी को सूची में जोड़ा गया है1। £10,000 के सोलर और बैटरी काम पर यह £500 ज़्यादा है।\nयानी एक ही दस्तावेज़ में, जो बिजली आप ख़रीदते हैं उससे VAT हटता है, और उस सामान पर वापस लगता है जो आपको ख़रीदने से रोकता है।\nफिर शब्द गिनिए। 162 पन्नों में “insulation” शून्य बार आता है। “Rooftop” और “solar panel” शून्य बार। हीट पंप का दो बार ज़िक्र है, और दोनों उसी पैराग्राफ़ में जो रक्षा के लिए Warm Homes Plan से £1 billion निकालता है1।\nऔर हीट पंप ग्रांट का क्या? Boiler Upgrade Scheme “£7,500 towards an air source heat pump” देती है25, और बजट “maintain the Boiler Upgrade Scheme at current funding levels of £400 million in 2027‑28 and rising broadly in line with inflation thereafter” करेगा1। कटौती नहीं, पर बढ़ोतरी भी नहीं। £7,500 प्रति पंप के हिसाब से £400 million साल में ज़्यादा से ज़्यादा क़रीब 53,000 हीट पंप हैं। Treasury UK में लगभग 29 million घर गिनती है1। इस रफ़्तार से हर घर तक पहुँचने में 500 साल से ज़्यादा लगेंगे।\nबजट 2026 का ऊर्जा पैसा छह साल का आँकड़ा सर्दी के बाद क्या बचता है £100 भुगतान और बिजली पर 0% VAT £3,685 million ख़र्च कुछ नहीं, सब गया Warm Homes Plan कैपिटल ग्रांट £1 billion की कटौती कम इन्सुलेटेड घर इन्सुलेशन, सोलर और बैटरी पर VAT 0% से वापस 5% ख़ुद करना महँगा अपना सामान ख़ुद के पैसे से लगवाने के बाद मुझे साफ़ दिखता है कि क्या ग़ायब है। अगर कोई सरकार बिल हमेशा के लिए घटाना चाहती, तो वह हर उस घर को इन्सुलेट करती जिसे ज़रूरत है और हर उस छत पर सोलर लगाती जो उसे उठा सके, शुरुआत यहाँ से बनने वाले हर नए घर से। इसे एक बार, ठीक से कर दो, और मदद को अगली सर्दी फिर ख़रीदने की ज़रूरत नहीं पड़ती। यह बजट सर्दी का पैसा भरता है और इलाज पर टैक्स लगाता है।\nनहीं, eBay पर अपना सामान बेचने पर टैक्स नहीं लग रहा बहुत लोगों ने ऑनलाइन मार्केटप्लेस वाले नियम को ऐसे पढ़ा कि अब eBay या Vinted पर अपना पुराना सामान बिना VAT बिल के बेचना ख़त्म। ऐसा नहीं है, और बजट यह साफ़ शब्दों में कहता है।\nअक्टूबर 2027 से प्लेटफ़ॉर्म VAT वसूलेंगे “on sales by UK VAT-registered businesses and any other UK business with a minimum annual sales threshold per platform of £90,000”। नियम “will not apply to non-business (i.e. personal) sales, second-hand goods, or business-to-business transactions”1।\nउलझन तीन अलग-अलग सीमाओं से आती है जिन्हें ऐसे बताया जाता है जैसे वे एक ही नियम हों:\nनियम सीमा इसका मतलब प्लेटफ़ॉर्म द्वारा नई VAT वसूली एक प्लेटफ़ॉर्म पर साल में £90,000 बेचने वाला कारोबार प्लेटफ़ॉर्म वह VAT वसूलता है जो कारोबार पर पहले से बनता था 2024 से प्लेटफ़ॉर्म की HMRC को रिपोर्टिंग साल में 30 बिक्री, या क़रीब £1,700 प्लेटफ़ॉर्म आपकी रिपोर्ट करता है। यह टैक्स नहीं है कारोबार है या नहीं HMRC के नौ “badges of trade” तय करते हैं कि आप पर टैक्स बनता भी है या नहीं रिपोर्टिंग पर HMRC दो टूक है: “A platform reporting your details to HMRC does not automatically mean you owe tax”26। प्लेटफ़ॉर्म आपकी रिपोर्ट नहीं करते अगर आप “make fewer than 30 sales of goods in a calendar year” और “receive less than 2,000 euros (about £1,700)”26। और उसके अपने प्रेस ऑफ़िस से: “if you are not trading and just occasionally sell unwanted items online – there is no tax due”27।\nतो ज़्यादा बेचने वाला विक्रेता कौन है? सामान की कोई गिनती तय नहीं है। आप कारोबार कर रहे हैं या नहीं, यह HMRC के badges of trade तय करते हैं, जिनमें “profit-seeking motive”, “the number of transactions”, “the nature of the asset” और “changes to the asset” शामिल हैं, और HMRC ख़ुद कहता है “the presence or absence of a particular badge is unlikely, by itself, to provide a conclusive answer”28। लॉफ़्ट ख़ाली करना कारोबार नहीं है, चाहे वह 30 से ज़्यादा चीज़ों या £1,700 से ऊपर तक जाए और आपकी रिपोर्ट हो जाए। मुनाफ़े पर आगे बेचने के लिए माल ख़रीदना कारोबार है।\nग़ौर कीजिए कि वह रिपोर्टिंग कसौटी असल में क्या है। यह 30 से कम बिक्री और क़रीब £1,700 से कम है, इसलिए दोनों में से किसी एक को पार करते ही रिपोर्ट हो जाती है। अपनी पुरानी कार eBay पर £1,700 से ज़्यादा में बेचिए, तो वह एक बिक्री ही काफ़ी है। ऐसा हो तो घबराइए मत। रिपोर्ट होना टैक्स बिल नहीं है, और HMRC Capital Gains Tax को “most personal possessions worth £6,000 or more, apart from your car” पर बताता है29। जो कार आपने ख़ुद चलाई, वह इसके बाहर है।\nपर रिपोर्ट आपके बारे में है, कार के बारे में नहीं, और कार के छूट में होने से उस साल बेची बाक़ी हर चीज़ छूट में नहीं आ जाती। हर दूसरी बिक्री अपने आप में आँकी जाती है, बिल्कुल जैसे हमेशा से। आपकी अपनी अनचाही चीज़ें अब भी कारोबार नहीं हैं, और £6,000 से कम की कोई एक निजी चीज़ Capital Gains Tax के बाहर है29। पर जो कुछ आपने मुनाफ़े पर आगे बेचने के लिए ख़रीदा, वह कारोबार है, और रिपोर्ट होने के बाद HMRC के सामने आपकी बिक्री होती है। अगर उसमें से कुछ कारोबार है, तो साल के पहले £1,000 टैक्स-फ़्री हैं, जो इस बजट के तहत 6 अप्रैल 2027 से £3,000 हो जाते हैं1। इसलिए हर चीज़ का नोट रखिए: अपनी थी, या बेचने के लिए ख़रीदी थी।\nऔर लॉफ़्ट के मामले में रिपोर्टिंग ख़ुद बर्बादी है। अपना घर ख़ाली करने वाले का ब्योरा HMRC को भेजा जाता है, प्लेटफ़ॉर्म रिपोर्ट बनाने का ख़र्च उठाता है और HMRC उसे प्रोसेस करने का, और निजी बिक्री पर वसूलता कुछ नहीं, क्योंकि कुछ बनता ही नहीं। यह सिर्फ़ ख़र्च है, और फिर भी आपके टैक्स बिल पर आकर गिरता है।\nतो इस बजट को लेकर डर बेकार था। अगले बजट को लेकर चिंता बेकार नहीं है। मशीनरी अब बन चुकी है। प्लेटफ़ॉर्म 2024 से विक्रेताओं की HMRC को रिपोर्ट कर रहे हैं, और अक्टूबर 2027 से वे कारोबारी विक्रेताओं के लिए स्रोत पर VAT वसूलेंगे। निजी बिक्री की छूट बजट की एक पंक्ति है, और बजट की एक पंक्ति अगले बजट में बिना कुछ नया बनाए हटाई जा सकती है। पाइप एक बार बिछ गई, तो उसे चौड़ा करना एक पंक्ति का बदलाव है। सिर्फ़ इसलिए कि आज छूट है, मैं उसके टिके रहने पर दाँव नहीं लगाऊँगा।\nबजट की उस पंक्ति में असली बात ऊपर वाली अदला-बदली है।\nब्रीदिंग स्पेस की क़ीमत आप चुकाते हैं ब्रीदिंग स्पेस बजट के लिए अच्छा शब्द है। सुनने में राहत जैसा लगता है। लागत तालिकाएँ पढ़िए तो इसे बेहतर ऐसे कहा जाएगा: फ़ैसलों का एक सेट कि किसकी साँस रोकी जाए।\nजिस घर का हिसाब मैंने यहाँ लगाया, उसने वही किया जो यह देश कहता है कि वह चाहता है। वह इलेक्ट्रिक हो गया। अपनी बिजली ख़ुद बनाता और जमा करता है। गैस लगभग छोड़ चुका है। उसके साल के 20,000 मील बिजली पर चलते हैं, उसमें से बहुत कुछ अपनी छत से, और पंप से कुछ नहीं चाहिए।\nयह आत्मनिर्भरता है, और इसका इनाम है प्रति-मील टैक्स और जमी हुई सीमा, साथ में पहली सर्दी उसे नरम करने के लिए £100। बजट कुछ जगहों पर समझदार है। यह निष्पक्ष है कि बैंक ऊर्जा भुगतान का एक हिस्सा भरें, और निष्पक्ष है कि कम गैस वाला उपभोक्ता उस गैस का फ़िक्स्ड चार्ज भरना बंद करे जो वह मुश्किल से इस्तेमाल करता है। पर नीचे का ढर्रा काफ़ी साफ़ है। मदद वहाँ जाती है जहाँ बिल सबसे ज़ोर से चिल्लाता है: बड़ा औद्योगिक उपभोक्ता, दस million के मुनाफ़े वाला फ़ाउंडर, वह डेटा सेंटर जिसे कल ही ग्रिड चाहिए, उस कॉन्ट्रैक्ट पर बैठी हथियार कंपनी जिस पर किसी और को बोली लगाने ही नहीं दी गई। जिस शांत घर ने ख़ुद को सँभाल लिया, राजस्व वहीं से आता है, ठीक इसलिए क्योंकि वह शिकायत नहीं करता और कहीं जा नहीं सकता।\nऔर उस ब्रीदिंग स्पेस की क़ीमत आप एक से ज़्यादा बार भरते हैं। आप अपने टैक्स से बिल पर सब्सिडी भरते हैं, आप बिल भरते हैं, और अगली सर्दी फिर दोनों भरते हैं, क्योंकि इस बजट में कुछ भी इस बात पर निशाना नहीं साधता कि बिल ऊँचा क्यों है। यही फ़्यूल ड्यूटी कटौती पर लागू होता है, जो फिर बढ़ाई गई क्योंकि जिस तेल को वह सहारा देती है उसकी जगह कभी कुछ नहीं आया, और उन हाइड्रोजन कॉन्ट्रैक्टों पर जिन्हें हर साल पैसा चाहिए क्योंकि वह ईंधन अपने पैरों पर खड़ा नहीं हो सकता। इलाज का पैसा एक बार भरा जाता है। सब्सिडी का पैसा हर साल भरा जाता है, उन्हीं लोगों द्वारा, जब तक जड़ की वजह वहीं पड़ी रहे। यही वह चुनाव है जो यह बजट पंक्ति दर पंक्ति करता है: साँस नली साफ़ करने की जगह एक और सर्दी के लिए साँस रोके रखो।\nवजह कभी ठीक इसलिए नहीं होती क्योंकि लागत कभी उन लोगों पर नहीं पड़ती जो उसे ठीक कर सकते हैं। यह बजट बोझ उन पर नहीं डालता जिन्हें सब्सिडी से फ़ायदा होता है, इसलिए उनके पास कुछ बदलने का कोई कारण नहीं। जो मकान मालिक घर को मानक तक नहीं लाएगा, वह किराया लेता रहता है जबकि किरायेदार बिल भरता है और टैक्स देने वाला उस पर सब्सिडी। तेल कंपनियों के पास साफ़ तकनीक में पैसा लगाने का कोई कारण नहीं जब तक Treasury पंप पर उनका माल सस्ता रखती है। और गैस उद्योग उसी फ़िज़ूल मॉडल पर चलता रहता है, एक बार जलाओ और और ख़रीदो, जबकि ज़मीन में पहले से बिछे पाइप ईंधन की जगह गर्मी पहुँचाने वाली डिस्ट्रिक्ट हीटिंग की शुरुआत बन सकते हैं। जब तक कोई और सस्ते, फ़िज़ूल रास्ते पर चलते रहने का पैसा दे रहा है, तब तक कोई महँगा, समझदार काम नहीं करता। और इस बजट की हर अदला-बदली एक ही दिशा में जाती है। सरकार यह पक्का करती है कि बड़े कॉर्पोरेशन ठीक रहें, और छोटा आदमी भरता है।\nमुझे पता है कि यह बजट इस घर को कितना पड़ता है, और मैं देख सकता हूँ कि दस्तावेज़ के सामने उसकी क्या क़ीमत लिखी है। ये एक ही संख्या नहीं हैं। यह फ़र्क़ ही वजह है कि भाषण की जगह लागत तालिकाएँ ख़ुद पढ़िए, क्योंकि भाषण लिखने वालों में से कोई उन्हें आपके लिए नहीं पढ़ेगा।\nHM Treasury — Budget 2026: Breathing Space for Today, Fresh Hope for the Future — 28 अक्टूबर 2026 को संसद में रखी गई बजट रिपोर्ट। ऊर्जा उपाय पैराग्राफ़ 3.2 से 3.9 और Box 3.A, ईंधन, माइलेज और EV चार्जिंग 3.12 से 3.16, eVED 1.30 और 2.38, BADR 2.53, BICS 4.24 और 6.31, Gas Shipper Obligation 4.22 और 6.27, डेटा सेंटर 4.137 और 4.138, Warm Homes Plan और Boiler Upgrade Scheme 4.36, रक्षा 2.5, 2.6, 5.28 से 5.36, जिसमें 5.30 पर Multilateral Defence Mechanism, और 6.134 से 6.141, ऊर्जा बचाने वाली सामग्री 6.215, Founders\u0026rsquo; Relief 6.257, Trading Allowance 6.254, ऑनलाइन मार्केटप्लेस 6.154, National Living Wage 3.18, Pension Tax Allowance 3.19 और 6.182, Carbon Price Support 4.25, लागत Table 6.1।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Claim tax relief for your job expenses: vehicles you use for work — “This does not include travelling to and from your work, unless it\u0026rsquo;s a temporary place of work.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Changes to energy price cap between 1 October and 31 December 2026 — गैस स्टैंडिंग चार्ज 29.68p रोज़ और यूनिट रेट 7.97p/kWh, 5% VAT समेत; 1 अक्टूबर 2026 से 31 मार्च 2027 तक बिजली बिना VAT।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOfgem — Summary of changes to the energy price cap, 1 July to 30 September 2026, revised TDCV — 1 जुलाई 2026 से आम घरेलू खपत: “2,500 kWh of electricity, 9,500 kWh of gas”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Funding mechanism for the Hydrogen Production Business Model: proposed design of the Gas Shipper Obligation — कंसल्टेशन, जनवरी से अप्रैल 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Gas Shipper Obligation analytical annex — 2028 से 2037 तक औसत घरेलू गैस बिल पर साल के “approximately £2.60 - £4.50”, खपत-आधारित डिज़ाइन पर, 2023 की क़ीमतों में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Hydrogen Production Business Model / Net Zero Hydrogen Fund: HAR1 successful projects — ग्यारह प्रोजेक्ट, उनके डेवलपर और क्षमता, £241/MWh का भारित औसत स्ट्राइक प्राइस और “over £2 billion of revenue support”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEnergy Systems Catapult — Heat pumps shown to be three times more efficient than gas boilers — सरकारी पैसे से चला Electrification of Heat ट्रायल, 742 हीट पंप लगाए गए: “The median SPF observed in ASHP systems \u0026hellip; was 2.80 (280%)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJan Rosenow, \u0026ldquo;Is heating homes with hydrogen all but a pipe dream? An evidence review\u0026rdquo;, Joule, 2022 — 32 स्वतंत्र अध्ययन; उद्धरण जैसा IEEE Spectrum, 4 अक्टूबर 2022 में रिपोर्ट हुआ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHM Treasury — Electric Vehicle Excise Duty (eVED) — पॉलिसी पेपर, 13 जुलाई 2026: बैटरी और हाइड्रोजन कारों के लिए 3p प्रति मील, प्लग-इन हाइब्रिड के लिए 1.5p, 1 अप्रैल 2028 से।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — Maintaining the Personal Allowance and basic rate limit until 5 April 2031 — बजट 2025 पॉलिसी पेपर: सीमाएँ “at their 6 April 2021 levels” पर तय, “until 5 April 2031” बरक़रार, 2030-31 तक 700,000 लोग इनकम टैक्स के दायरे में, और विस्तार का Exchequer पर असर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIncome Tax Act 2007, section 57 — Personal Allowance “the consumer prices index for the September before the start of a tax year” से सूचकांकित होती है और “up to the nearest amount which is a multiple of £10” गोल की जाती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIncome Tax Act 2007, section 21 — बेसिक रेट सीमा उसी तरह सूचकांकित होती है और “up to the nearest amount which is a multiple of £100” गोल की जाती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nONS — CPI annual rate, all items, series D7G7 — सितंबर 2021 3.1%, 2022 10.1%, 2023 6.7%, 2024 1.7%, 2025 3.8%, 2026 3.5%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — National Minimum Wage and National Living Wage rates — 1 अप्रैल 2026 से 21 साल और उससे ऊपर के कामगारों के लिए £12.71 प्रति घंटा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK ETS Authority — UK Emissions Trading Scheme scope expansion: waste, consultation, 2024 — कचरे से ऊर्जा और इंसिनरेशन को “from 2028” शामिल करना, सिर्फ़ जीवाश्म CO2, और पैकेजिंग Extended Producer Responsibility के ज़रिए लागत बाँटना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLARAC — UK ETS will not be extended to waste incineration in 2028 — 27 अगस्त 2026, टालने पर काउंसिलों की रीसाइक्लिंग संस्था; साथ में देखें LocalGov, 27 अगस्त 2026।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Business Asset Disposal Relief — “18% on all gains on qualifying assets disposed of from 6 April 2026”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDESNZ — Improving the energy performance of privately rented homes: government response — 21 जनवरी 2026 को अपडेट: अनुपालन “by 1 October 2030”, मकान मालिकों को “invest up to £10,000 per property”, औसत £5,400, दूसरा उपाय “at the discretion of the landlord”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMinistry of Defence — MOD trade, industry and contracts 2026 — मान्यता-प्राप्त सरकारी आँकड़े, 1 अक्टूबर 2026: 2025/26 में उद्योग के साथ £43.4 billion, 40% दस सप्लायरों को, BAE Systems 16.5%, बिना प्रतिस्पर्धा वाले भुगतान 47% (£20.5 billion); Foreign Military Sales £744 million, जिसमें £469 million Boeing; UK और विदेशी स्वामित्व के हिसाब से ख़र्च का कोई बँटवारा नहीं; Babcock को MoD भुगतान उसकी वैश्विक आमदनी के 63.5% के बराबर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMinistry of Defence — Data tables relating to MOD trade, industry and contracts 2026 — Table 4a, 2025/26 में £50 million या उससे ज़्यादा पाने वाली निजी क्षेत्र की होल्डिंग कंपनियाँ। देश वहाँ के हैं जहाँ हर होल्डिंग कंपनी का मुख्यालय या पंजीकरण है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBAE Systems — Preliminary results announcement 2025 — 18 फ़रवरी 2026: अपने पैसे से R\u0026amp;D “£407m”, “dividends increased to £1,027m”, बायबैक “at a cost of £502m”, “the Group returned £1,529m to shareholders”, रिसर्च और डेवलपमेंट टैक्स क्रेडिट £29m।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBabcock International — Annual Report and Financial Statements 2026 — 31 मार्च 2026 तक का साल: “Total research and development costs expensed in the period was £203.3 million”, “£36.7 million dividends paid” और “£155.3 million purchase of own shares”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — VAT on energy-saving materials and heating equipment (VAT Notice 708/6) — “A zero rate applies to the installation of certain specified energy-saving materials from 1 May 2023 to 31 March 2027”, जिसमें इन्सुलेशन, सोलर पैनल, बैटरी और हीट पंप आते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Boiler Upgrade Scheme: what you can get — एयर सोर्स या ग्राउंड सोर्स हीट पंप के लिए £7,500, बायोमास बॉयलर के लिए £5,000।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — Selling goods or services on a digital platform — 30 बिक्री और €2,000 की रिपोर्टिंग सीमाएँ, और यह कि रिपोर्टिंग “does not automatically mean you owe tax”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC — No tax changes for online sellers — प्रेस रिलीज़, 4 दिसंबर 2024।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHMRC Business Income Manual — BIM20205, the badges of trade — नौ badges, और यह कि कोई एक अकेले निर्णायक नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGOV.UK — Capital Gains Tax: what you pay it on — कर-योग्य संपत्तियों में “most personal possessions worth £6,000 or more, apart from your car” शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/politics/breathing-space-for-whom/","summary":"2026 का बजट असल में क्या करता है उस 40% टैक्स देने वाले के लिए जो घर से काम करता है, जिसकी EV पार्टनर के दफ़्तर आने-जाने में साल के 20,000 मील चलती है, जिसके पास सोलर और बैटरी है, और जिसने गैस को गर्म पानी और थोड़ी हीटिंग तक घटा दिया है। Treasury के अपने दस्तावेज़ से हर उपाय का हिसाब: £100 का Household Energy Payment, बिजली पर 0% VAT, गैस स्टैंडिंग चार्ज का यूनिट रेट में जाना जबकि बिजली का बड़ा स्टैंडिंग चार्ज वहीं रहता है, Gas Shipper Obligation का गैस बिल से हटकर आम टैक्स पर जाना और वह पैसा किसे मिलता है, बिजली से बनी हाइड्रोजन 280% वाले हीट पंप से क्यों हारती है, 20,000 मील के सफ़र पर eVED मील शुल्क, और 2021 से 2031 तक जमी हुई सीमाओं का फ़िस्कल ड्रैग, जिसे क़ानून के हिसाब से निकाला गया है, 40% टैक्स देने वाले के लिए भी और उन कम कमाने वालों के लिए भी जिन पर यह सबसे पहले पड़ता है। फिर बजट की अपनी लागत तालिका से कि पैसा किसे मिलता है: 10,000 ऊर्जा-खपत वाले निर्माता, कचरा जलाकर बिजली बनाने वाले, तेज़ी से बढ़ती कंपनियों के फ़ाउंडर बनाम कारोबार बेचने वाले आम मालिक, छोटे ऑनलाइन विक्रेताओं के पैसे से छोटी हाई-स्ट्रीट फ़र्में, ग्रिड की क़तार में आगे डेटा सेंटर, और Warm Homes Plan में कटौती करके चलाया गया रक्षा विस्तार, साथ में MoD के अपने आँकड़े कि कितना BAE Systems को जाता है और कितना बिना प्रतिस्पर्धा के ख़र्च होता है। इन्सुलेशन और छत पर सोलर के लिए यह क्या नहीं करता, जहाँ VAT वापस 5% हो जाता है, और हीट पंप ग्रांट का क्या हुआ। और नया ऑनलाइन मार्केटप्लेस VAT नियम eBay पर अपना सामान बेचने के लिए क्या मायने रखता है।","title":"ब्रीदिंग स्पेस किसके लिए? EV, सोलर और बैटरी वाले घर से 2026 का बजट"},{"content":"ड्राइव तक कम bytes पहुँचते हैं VDO Linux kernel की deduplication और compression layer है। यह एक volume group के नीचे बैठता है और 4 KiB blocks में काम करता है। जो भी block यह पहले देख चुका है, उसे एक बार ही रखता है।\nहार्डवेयर के लिए इसका मतलब सीधा है। ड्राइव तक कम bytes पहुँचते हैं। मैंने VDO से होकर एक बार में 30 सेकंड तक ऐसा mix लिखा जो 75% duplicate और 50% compressible था, और ड्राइव के अपने counters ने बताया कि guest ने जितना लिखा, उसका उसे 23 से 28% मिला। एक template disk के छह full clones ने मिलकर 8 data blocks जोड़े। बत्तीस किलोबाइट।\nड्राइव तक पहुँचे bytes बिना VDO, कोई भी डेटा 100% VDO, 4k random, 75% dup 28% VDO, 128k, 75% dup 23% VDO, 128k, random डेटा 100% guest के bytes का ड्राइव तक पहुँचा हिस्सा, 30 s runs, दो का औसत। Mix: 75% duplicate, 50% compressible। guest के लिखे bytes बनाम ड्राइव को मिले bytes, हर workload के 30 सेकंड, दो runs का औसत। बिना VDO के ड्राइव को सब कुछ मिलता है। VDO के साथ उसे एक असल जैसे mix का लगभग एक चौथाई मिलता है, और पूरी तरह random डेटा का सब कुछ। कम bytes का मतलब है कम घिसाव, और ड्राइव पर या उसके आगे के controller पर किसी भी cache के लिए कम काम। वहाँ तक पहुँचने में CPU और latency लगती है, और तेज़ ड्राइव पर वह क़ीमत नीचे बिना VDO वाले उसी Optane के मुक़ाबले नापी गई है। धीमी घूमती disks पर वही क़ीमत seek times में घुल जाती है, और यहीं बात दिलचस्प होती है।\nदो नियम आगे की हर चीज़ को आकार देते हैं। stack thick on thick है: VDO के ऊपर कुछ भी, और ख़ुद VDO भी, ड्राइव से ज़्यादा जगह का वादा नहीं कर सकता। और VDO का अपना metadata, उसका index और उसके journals, NVMe पर रह सकते हैं जबकि डेटा कहीं धीमी जगह पर रहे।\nयहाँ का हर आँकड़ा एक ही Proxmox VE 9.2 host से आता है: 16 CPUs वाला Ryzen 7 5700G, kernel 7.0.14-25-pve, LVM 2.03.31 और Debian के vdo 8.3.1.1 tools, दो Intel Optane ड्राइव पर, जिन्हें बाद में मिटा दिया गया।\nVDO क्या है और कहाँ बैठता है kernel dm-vdo को एक device-mapper target बताता है जो “provides block-level deduplication, compression, and thin provisioning”1। हर आने वाले 4 KiB block का hash बनाया जाता है। अगर वैसा ही block पहले से रखा है, तो VDO copy की जगह एक reference दर्ज करता है। जो blocks duplicate नहीं हैं, वे LZ4 से गुज़रते हैं और एक physical block में कई ठूँसे जाते हैं, और जिन blocks में सिर्फ़ zeros हैं, वे रखे ही नहीं जाते2।\nपूरी चीज़ LVM चलाता है। lvcreate --type vdo एक VDO pool बनाता है, जिसमें असली blocks रहते हैं, और उसके ऊपर एक VDO LV, जिसका वर्चुअल आकार जो आप माँगें2। VDO LV पर एक thick volume group जाता है, और Proxmox उसे आम lvm स्टोरेज की तरह इस्तेमाल करता है।\nThick on thick: VDO पर LVM VM disks: thick LVs guests को यही दिखता है Volume group vdovg, 35 GiB Proxmox यह पढ़ता है: lvm स्टोरेज इस line के नीचे Proxmox को कुछ नहीं दिखता VDO LV vdolv, 35 GiB वर्चुअल dedup, LZ4, zero blocks छोड़े VDO pool vdopool, 40 GiB असली blocks: vdostats यह पढ़ता है ड्राइव: nvme8n1 वर्चुअल 35 GiB, क्षमता से कभी ज़्यादा नहीं Proxmox को एक आम thick volume group दिखता है। VDO उसके physical volume के नीचे बैठता है, इतने आकार का कि वह कभी ड्राइव में समाने से ज़्यादा का वादा न कर सके। Layer lab में नाम यह क्या करता है VM disks vm-9901-disk-0 वग़ैरह thick LVs, Proxmox द्वारा बनाए गए Volume group vdovg, 35 GiB सादा LVM, जिसे Proxmox का lvm स्टोरेज पढ़ता है VDO LV vdolab/vdolv, 35 GiB वर्चुअल dedup, LZ4, zero blocks छोड़ दिए जाते हैं VDO pool vdolab/vdopool, 40 GiB असली blocks, VDO का metadata और index Physical nvme8n1 VG vdolab Thick on thick, वरना बिल्कुल नहीं VDO अपने आप में एक thin provisioner है: VDO LV को कोई भी वर्चुअल आकार दिया जा सकता है। उसे pool की क्षमता से बड़ा बनाएँ, तो ऊपर वाला volume group एक वादे पर thick है, जो एक layer नीचे खिसका हुआ thin on thin ही है। पहली बार बनाते समय मैंने ठीक यही किया था, 40 GiB pool पर 120 GiB VDO LV, और Proxmox एक तिहाई स्टोरेज ख़ाली दिखा रहा था जबकि VDO भरा हुआ था।\nइसलिए VDO LV का आकार उतना रखें जितना pool सच में संभाल सकता है, उससे ज़्यादा नहीं। lvcreate यह आँकड़ा छापता है, इस 40 GiB pool पर “can address 36.00 GB”, और logical space के लिए VDO का block map भी उसी जगह से आता है, इसलिए मैंने इसे 35 GiB दिया।\nफिर मैंने इसे कठिन तरीक़े से साबित किया। एक VM disk, जिसने Proxmox द्वारा दिया जा सकने वाला हर extent ले लिया, 34 GiB, और शुरू से आख़िर तक ऐसे random डेटा से भरी गई जिसके साथ VDO कुछ नहीं कर सकता:\n# vdostats --human-readable Device Size Used Available Use% Space saving% vdolab-vdopool-vpool 40.0G 38.1G 1.9G 95% 0% disk अपने ही अंत पर ख़त्म हुई, जैसा thick disk को होना चाहिए। VDO के पास तब भी 1.9 GiB ख़ाली था, जो Proxmox के पास बाँटने को बचे 1 GiB से ज़्यादा था। Proxmox का आँकड़ा ही असली सीमा है, और VDO पहले ख़त्म नहीं हो सकता।\nआप जो छोड़ते हैं वह overcommit है: deduplication जो जगह बचाता है, वह ऐसी ड्राइव के रूप में दिखती है जिस पर कभी लिखा नहीं जाता, Proxmox के लिए अतिरिक्त disks के रूप में नहीं। इस पोस्ट के लिए यही सही सौदा है, क्योंकि यह हार्डवेयर के बारे में है। और इस पर lvmthin pool भी न रखें। दो thin layers यानी हिसाब की दो किताबें3।\nएक byte रखने से पहले की क़ीमत VDO एक deduplication index, UDS index, pool पर ही रखता है। एक ख़ाली 40 GiB pool ने 4.0 GiB इस्तेमाल और 36.0 GiB उपलब्ध बताया। उसी vdo package का vdolistmetadata डिवाइस के हर metadata block की सूची देता है, और लगभग पूरे हिस्से का हिसाब देता है:\nहिस्सा 4 KiB blocks आकार UDS index 679,127 2.59 GiB Recovery journal 32,768 128 MiB Reference counts और journals, 18 slabs 6,372 25 MiB उन्नीसवें slab के लिए बहुत छोटी जगह 336,555 1.28 GiB कुल लगभग 4.0 GiB बचे हुए हिस्से वाली line जानने लायक़ है: slabs 2 GiB के होते हैं, इसलिए pool का आकार पूरे slabs और overhead के हिसाब से रखें, वरना बचा हुआ हिस्सा बस बेकार पड़ा रहता है।\nRAM दूसरा बिल है। pool व्यस्त हो या ख़ाली, यह चुकाना पड़ता है:\nक़ीमत lvmvdo(7) का नियम यह 40 GiB pool स्थिर 38 MiB 38 MiB Block map cache हर MiB cache पर 1.15 MiB, कम से कम 150 MiB 150 MiB (128 MiB default) Physical space हर TiB पर 268 MiB 11 MiB UDS index (dense) कम से कम 250 MiB, default 256 MiB कुल लगभग 455 MiB default dense index लगभग 256 GiB की deduplication window कवर करता है, क्योंकि 1 GiB RAM वाला dense index “maintains a 1 TiB deduplication window”2। 128 MiB block map cache का आकार “efficient access to 100 GB of logical space at a time” के लिए है, और kernel डॉक्यूमेंटेशन इसे वह सबसे ज़रूरी value बताता है जिसे working set बढ़ने के साथ बदलना चाहिए1।\nStack बनाना LVM को LV पर PV देखने दें volume group एक LV पर बैठता है, और LVM default रूप से LVs को physical volumes के रूप में नज़रअंदाज़ करता है। devices/scan_lvs इसे चालू करता है, और LVM के reference में इसके साथ आने वाली चेतावनी है: “Caution is required to avoid using PVs that belong to guest images stored on LVs”4। वरना अपनी disk के अंदर LVM इस्तेमाल करने वाले guest के volume groups host पर दिखने लगेंगे।\nइसलिए filter भी बदलता है। वही edit। इस host का stock filter सिर्फ़ ZFS zvols और RBD डिवाइसों को अस्वीकार करता था। मैंने हर Proxmox VM disk के लिए एक reject जोड़ा:\n# lvmconfig devices/global_filter devices/scan_lvs global_filter=[\u0026#34;r|/dev/zd.*|\u0026#34;,\u0026#34;r|/dev/rbd.*|\u0026#34;,\u0026#34;r|/dev/mapper/.*-(vm|base)--[0-9]+--disk--[0-9]+|\u0026#34;] scan_lvs=1 वही reference कहता है कि scan_lvs “does not enable autoactivation of layered VGs”4। Proxmox को इसकी ज़रूरत नहीं है। उसका LVM plugin VM शुरू होने पर हर disk को lvchange -aey से activate करता है5। मैंने इसे उसी हालत में test किया जिसमें boot चीज़ें छोड़ता है, सब कुछ deactivated और फिर वही pvscan udev runs: VDO के नीचे वाला VG ऊपर आ गया, और qm start ने VM की disk ख़ुद activate कर दी। पेच नीचे है। VDO के नीचे वाला VG अधूरा होने पर वही qm start “Volume group \u0026ldquo;vdovg\u0026rdquo; not found” के साथ फ़ेल हुआ।\nVDO pool, thick, settings उसी creation line पर formatter Debian के vdo package में है6:\n# apt install vdo फिर pool। -L असली जगह है, -V वर्चुअल आकार, जो pool की संभाल-सीमा के अंदर रखा गया है। thread layout और discard size उसी line पर जाते हैं, क्योंकि इनमें से कोई भी बाद में pool के हर VM को रोके बिना बदला नहीं जा सकता:\n# pvcreate /dev/nvme8n1 Physical volume \u0026#34;/dev/nvme8n1\u0026#34; successfully created. # vgcreate vdolab /dev/nvme8n1 Volume group \u0026#34;vdolab\u0026#34; successfully created # lvcreate -y --type vdo -L 40G -V 35G -n vdolv vdolab/vdopool /dev/nvme8n1 --vdosettings \u0026#34;logical_threads=4 physical_threads=4 hash_zone_threads=2 cpu_threads=3 bio_threads=2 ack_threads=1 max_discard=4096\u0026#34; Wiping vdo signature on /dev/vdolab/vdopool. The VDO volume can address 36.00 GB in 18 data slabs, each 2.00 GB. It can grow to address at most 16.00 TB of physical storage in 8192 slabs. If a larger maximum size might be needed, use bigger slabs. Logical volume \u0026#34;vdolv\u0026#34; created. # dmsetup table vdolab-vdopool-vpool 0 73402368 vdo V4 /dev/dm-7 10485760 4096 32768 16380 deduplication on compression on maxDiscard 4096 ack 1 bio 2 bioRotationInterval 64 cpu 3 hash 2 logical 4 physical 4 thread layout वही है जो आगे 16-CPU host के लिए नापा गया है; max_discard=4096 का अपना section है।\nVolume group और Proxmox स्टोरेज # pvcreate /dev/vdolab/vdolv Physical volume \u0026#34;/dev/vdolab/vdolv\u0026#34; successfully created. # vgcreate vdovg /dev/vdolab/vdolv Volume group \u0026#34;vdovg\u0026#34; successfully created # pvesm add lvm vdo-lvm --vgname vdovg --content images,rootdir --on-volume-remove discard=1 # pvesm status | grep -E \u0026#34;Name|vdo-lvm\u0026#34; Name Type Status Total (KiB) Used (KiB) Available (KiB) % vdo-lvm lvm active 36696064 0 36696064 0.00% on-volume-remove discard=1 मायने रखता है, और इसे नीचे कवर किया गया है।\nDeduplication ने क्या बचाया मैंने वे चीज़ें लिखीं जो एक Proxmox host सच में रखता है और हर एक के बाद VDO के block counters पढ़े। logical blocks used वह है जो ऊपर की layers ने लिखा; data blocks used वह है जो VDO ने रखा। दोनों 4 KiB blocks हैं।\nक्या लिखा गया Logical blocks जुड़े Data blocks जुड़े बचत Rocky Linux 10 rootfs, 4 GiB disk पर ext4 114,505 60,537 47% उसके छह full clones (qm clone --full, हर एक लगभग 4 s) 6,291,456 8 99.9999% Proxmox Datacenter Manager 1.1 ISO, 1.36 GiB 356,172 351,965 1.2% उसका -auto rebuild, लगभग वही bytes 356,399 40 99.99% 4 GiB zeros 1,048,575 0 100% 1 GiB random डेटा 262,143 262,144 0% हर clone ने पूरे 4 GiB लिखे, zeros समेत, क्योंकि thick LV पर full clone हर block copy करता है। VDO ने zeros को कुछ नहीं के रूप में रखा और बाक़ी को references के रूप में।\nVDO उस डेटा में बहुत अच्छा है जो वह पहले देख चुका है। और कुछ-नहीं में भी। जो डेटा पहले से compressed या encrypted है, उस पर यह बेकार है, इसीलिए पहला ISO, जो ज़्यादातर squashfs है, सिर्फ़ 1.2% बचा पाया।\ntemplate और उसके छह clones रखे जाने पर Proxmox ने स्टोरेज 80.01% इस्तेमाल दिखाया, 35 में से 28 GiB thick disks। ड्राइव पर 4.3 GiB था, और उसमें से ज़्यादातर index था। thick स्टोरेज पर बात यही है: Proxmox वह गिनता है जो बाँटा गया है, और ड्राइव वह ढोती है जो सच में अलग है।\nड्राइव को असल में क्या मिलता है disk पर बचत एक तस्वीर है। हार्डवेयर को धारा की परवाह है। इसलिए मैंने लिखते समय ड्राइव तक पहुँचने वाले bytes नापे: 30 सेकंड के लिए fio, पहले और बाद में /sys/block से ड्राइव का write counter, उसी Optane पर VDO के साथ और बिना, हर एक दो बार।\nOptane पर किसकी तुलना हुई Optane, बिना VDO VDO, 16 threads fio, 30 s सादा LV nvme8n1: write counter यहाँ पढ़ा fio, 30 s vdovg में LV VDO LV: dedup, LZ4 VDO pool nvme8n1: write counter यहाँ पढ़ा Optane पर हर साथ-और-बिना आँकड़े के पीछे के दो stacks: वही fio jobs, वही ड्राइव, write counter सबसे नीचे पढ़ा गया। counter ईमानदार है। पूरे run में इसका जोड़ 794 GB रहा, और ड्राइव का अपना SMART “Data Units Written” भी 794 GB ही बढ़ा।\nWorkload, 30 s बिना VDO VDO के साथ, 16 threads ड्राइव तक पहुँचे bytes 4k random write, QD32, 4 jobs, 75% dup, 50% compress 582,013 IOPS, p99 244 µs 460,887 IOPS, p99 1.05 ms 28% 128k write, QD8, 75% dup, 50% compress 2,345 MiB/s, p99 490 µs 2,179 MiB/s, p99 1.02 ms 23% 4k random write, QD32, 4 jobs, random डेटा 571,721 IOPS 272,366 से 381,005 IOPS 59 से 100% 128k write, QD8, random डेटा 2,346 MiB/s 1,051 से 1,854 MiB/s 100% एक असल जैसे mix पर VDO ने नंगी ड्राइव के throughput का 79 से 93% बनाए रखा और उसे एक चौथाई bytes भेजे। पूरी तरह random डेटा पर यह कुछ नहीं बचाता और बहुत ख़र्च करता है, और दोनों runs इतने अलग थे कि मैं सिर्फ़ दायरा दे रहा हूँ।\ntail latency VDO की अपनी processing है, ड्राइव नहीं। लगभग एक millisecond का p99, नंगी ड्राइव के एक चौथाई के मुक़ाबले।\nOptane के पास राहत देने को कोई cache नहीं ये ड्राइव ख़ुद ऐसा कहती हैं: nvme id-ctrl से vwc 0, /sys/block में write through। Optane बिना DRAM या SLC staging के अपनी जगह पर लिखता है, इसलिए इस हार्डवेयर पर फ़ायदा bytes और घिसाव में है, किसी ड्राइव cache के धीरे भरने में नहीं। SLC cache वाला NAND SSD, या write-back cache वाला RAID controller, वह जगह है जहाँ कम bytes से तेज़ जवाब भी मिलता है। वह नीचे का RAID6 section है।\nVDO के threads को CPUs से मिलाना बिना कुछ बदले LVM VDO को दस threads देता है: एक logical, एक physical, एक hash zone, दो CPU, चार bio submission, एक acknowledgement। 16-CPU host पर इससे मशीन का ज़्यादातर हिस्सा बेकार बैठा रहता है, जबकि VDO का block map काम एक अकेले logical thread के पीछे क़तार में लगा रहता है।\nkernel डॉक्यूमेंटेशन इन knobs को समझाता है1। logical threads में से हर एक “a disjoint section of the block map” का मालिक है, physical threads “a disjoint section of the data blocks” के, और दोनों “can increase throughput”, जबकि ज़रूरत से ज़्यादा threads “can waste resources and increase contention”। logical threads 60 तक जाते हैं, physical 16 तक, और pool को हर physical thread के लिए कम से कम एक slab चाहिए। 18 slabs पर इसमें जगह है।\nLayout logical physical hash cpu bio ack कुल LVM defaults 1 1 1 2 4 1 10 16 CPUs से मिलाया 4 4 2 3 2 1 16 उसका दोगुना 8 8 4 6 2 2 30 हर layout ने वही fio jobs दो बार चलाए, बारी-बारी से, random डेटा के साथ, और साथ में सातों clone disks एक साथ पढ़ी गईं, वैसे ही जैसे सात VMs एक साथ boot होते हैं:\nTest, दो runs का औसत Defaults 16 CPUs से मिलाया उसका दोगुना 4k random write, QD32, 4 jobs 292,466 IOPS 365,314 IOPS 302,461 IOPS 4k random write p99, 4 jobs 2.1 से 3.7 ms 1.5 से 1.6 ms 2.1 से 2.2 ms 1M sequential write 1,153 MiB/s 1,729 MiB/s 1,507 MiB/s 4k random read, QD32, 4 jobs 507,450 IOPS 503,827 IOPS 485,263 IOPS सात clone disks एक साथ पढ़ी गईं 7.5 s 3.1 s 3.4 s CPU गिनती से मिलाया layout लगभग सब कुछ जीतता है: एक चौथाई ज़्यादा parallel writes, sequential writes पर आधा और, सात disks 2.4 गुना तेज़ पढ़ी गईं, और tail ज़्यादा कसी हुई। फिर से दोगुना करना हर जगह बुरा है। यही वह contention है जिसकी डॉक्यूमेंटेशन चेतावनी देता है। defaults सबसे कम स्थिर भी थे, सात-disk read runs के बीच 6.1 से 8.8 s तक झूलता रहा।\nइसलिए नियम है हर CPU पर एक VDO thread, ऊपर की तरह types में बाँटा हुआ, और physical threads slab गिनती से सीमित।\nतेज़ हार्डवेयर पर VDO की क़ीमत बिना VDO वाला वही Optane, threads मिलाए हुए VDO के मुक़ाबले, random डेटा, दो runs का औसत:\nTest Optane, बिना VDO VDO, 16 threads 4k random write, QD1 42,294 IOPS, 19.4 µs 55,806 IOPS, 12.1 µs 4k random write, QD32 142,416 IOPS 144,292 IOPS 4k random write, QD32, 4 jobs 572,293 IOPS 365,314 IOPS 4k random read, QD1 55,276 IOPS, 14.4 µs 27,988 IOPS, 31.4 µs 4k random read, QD32, 4 jobs 586,463 IOPS 503,827 IOPS 1M sequential write, QD8 2,348 MiB/s 1,729 MiB/s सात template disks एक साथ पढ़ी गईं 11.1 s 3.1 s इसे सीधे पढ़ें। एक अकेला random read VDO से होकर दोगुने से ज़्यादा समय लेता है। parallel random writes एक तिहाई से ज़्यादा खोते हैं, sequential writes एक चौथाई। इतनी तेज़ ड्राइव पर हर read पर VDO का 17 µs का अतिरिक्त काम ही read का ज़्यादातर हिस्सा है।\nVDO से होकर QD1 write का तेज़ होना कोई मुफ़्त का खाना नहीं है। बिल्कुल नहीं। VDO write को ड्राइव पर पहुँचने से पहले acknowledge कर देता है, और kernel डॉक्यूमेंटेशन साफ़ कहता है कि “unflushed writes may or may not persist after a crash”1। वह आँकड़ा एक acknowledgement नापता है। जो guest flush करता है, और हर filesystem करता है, उसे वही durability मिलती है जो वह माँगता है।\nसात-disk वाली line वह है जिसे VDO सीधे जीतता है, और साफ़ होना ज़रूरी है कि क्यों। सात सादी copies को 28 GiB असली bytes पढ़ने पड़ते हैं, zeros समेत। VDO साझा blocks का एक सेट पढ़ता है और zeros छोड़ देता है।\nतो तेज़ flash पर VDO latency के बदले bytes का सौदा करता है। फिर भी उनमें से हर microsecond स्थिर क़ीमत है, और नीचे की ड्राइव धीमी होने पर यह नहीं बढ़ती।\nVDO का metadata NVMe पर रखना VDO में कोई अलग metadata डिवाइस नहीं है। सब कुछ एक ही pool LV पर रहता है। लेकिन dm-vdo source दिखाता है कि layout तय है, और एक LV अलग-अलग ड्राइव के टुकड़ों से बनाया जा सकता है।\nformat code block map roots को data region की शुरुआत से रखता है, फिर slab summary और recovery journal को अंत से, और बीच को slabs से भरता है7। UDS index इन सबसे पहले बैठता है, geometry block के ठीक बाद। vdolistmetadata ने lab pool पर इसकी पुष्टि की:\nBlocks क्या कहाँ बैठता है 0 से 679,188 geometry, UDS index, super block, block map roots पहले 2.59 GiB हर 2 GiB slab के अंदर data, block map leaves, 130 reference blocks और 224-block slab journal पूरे pool में फैले हुए 10,452,928 से 10,485,695 recovery journal आख़िरी 128 MiB, लगभग 10,485,696 से 10,485,759 slab summary बिल्कुल आख़िरी 256 KiB तो pool LV को तीन टुकड़ों में बनाएँ: सिरा NVMe पर, बीच धीमी ड्राइव पर, पूँछ NVMe पर। NVMe पर metadata के साथ VDO VM disks: thick LVs guests को यही दिखता है Volume group vdovg Proxmox यह पढ़ता है VDO LV, 35 GiB वर्चुअल dedup, LZ4, zeros छोड़े सिरा बीच: slabs पूँछ VDO pool LV, तीन segments धीमी ड्राइव: nvme8n1 डेटा, reference counts NVMe: nvme6n1 index, roots, recovery journal metadata को अलग करके पूरा stack। Proxmox को वही volume group दिखता है; नीचे pool LV दो ड्राइव पर तीन segments है। फिर उसे VDO pool में बदलें, जिसे lvmvdo(7) किसी मौजूदा LV के लिए दर्ज करता है2। यहाँ nvme6n1 NVMe की जगह है और nvme8n1 धीमी ड्राइव की:\n# lvcreate -y -L 3G -n splitpool vdolab /dev/nvme6n1 Logical volume \u0026#34;splitpool\u0026#34; created. # lvextend -l +9408 vdolab/splitpool /dev/nvme8n1 Size of logical volume vdolab/splitpool changed from 3.00 GiB (768 extents) to 39.75 GiB (10176 extents). Logical volume vdolab/splitpool successfully resized. # lvextend -l +64 vdolab/splitpool /dev/nvme6n1 Size of logical volume vdolab/splitpool changed from 39.75 GiB (10176 extents) to 40.00 GiB (10240 extents). Logical volume vdolab/splitpool successfully resized. # lvconvert -y --type vdo-pool -n splitlv -V 35G vdolab/splitpool --vdosettings \u0026#34;logical_threads=4 physical_threads=4 hash_zone_threads=2 cpu_threads=3 bio_threads=2 ack_threads=1 max_discard=4096\u0026#34; WARNING: Converting logical volume vdolab/splitpool to VDO pool volume with formatting. THIS WILL DESTROY CONTENT OF LOGICAL VOLUME (filesystem etc.) The VDO volume can address 36.00 GB in 18 data slabs, each 2.00 GB. It can grow to address at most 16.00 TB of physical storage in 8192 slabs. If a larger maximum size might be needed, use bigger slabs. Logical volume \u0026#34;splitlv\u0026#34; created. Converted vdolab/splitpool to VDO pool volume and created virtual vdolab/splitlv VDO volume. फिर जाँचें कि VDO ने अपना metadata वहीं रखा जहाँ extents हैं:\n# vdolistmetadata /dev/mapper/vdolab-splitpool_vdata | grep -v \u0026#34;slab [0-9]* \\(reference\\|journal\\)\u0026#34; 0 .. 0: geometry block 1 .. 679127: index 679128 .. 679128: super block 679129 .. 679188: block map tree roots 10452928 .. 10485695: recovery journal 10485696 .. 10485759: slab summary एक extent 1,024 blocks का है। NVMe का सिरा extents 0 से 767 है, blocks 0 से 786,431, जो index और roots को कवर करता है, साथ में पहले slab के डेटा का लगभग 420 MiB भी चला आता है। NVMe की पूँछ extents 10,176 से 10,239 है, blocks 10,420,224 से आगे, जो recovery journal और slab summary को कवर करती है।\nVDO का metadata सिरों पर, NVMe पर extents 0 से 767 extents 768 से 10,175 10,176 से 10,239 NVMe (nvme6n1) धीमी ड्राइव (nvme8n1) NVMe (nvme6n1) UDS index, super block, block map roots 18 slabs: डेटा, block map leaves, reference counts, slab journals recovery journal, slab summary पैमाने पर नहीं: सिरा 3 GiB, बीच 36.75 GiB, पूँछ 256 MiB। pool LV तीन segments में। VDO का तय metadata दोनों सिरों पर बैठता है, इसलिए दोनों सिरे NVMe पर जाते हैं और slabs धीमी ड्राइव पर। VDO का कितना काम इसके साथ चला जाता है, हर 30-सेकंड run में, हर डिवाइस पर गिना हुआ:\nWorkload NVMe write I/Os Data ड्राइव write I/Os NVMe का हिस्सा 4k random write, 75% dup, 50% compress 388,430 से 538,223 3.42 से 3.63 million 10 से 13% 128k write, 75% dup, 50% compress 458,214 से 634,167 3.30 से 3.53 million 12 से 15% 4k random write, random डेटा 181,457 से 384,507 3.25 से 8.49 million 4 से 5% 4k random read 0 writes, 2% reads 0 write operations का लगभग दसवाँ हिस्सा: recovery journal, index updates, और NVMe सिरे पर slab 0 का वह टुकड़ा। ये छोटे, बिखरे metadata writes हैं, ठीक वैसे जिन्हें घूमती disk सबसे बुरी तरह संभालती है। NVMe पर ये कुछ भी नहीं।\nदो सीमाएँ। per-slab metadata, यानी reference counts, slab journals और block map leaves, slabs के अंदर रहता है और डेटा के साथ ही रहता है। और मैंने split pool को बढ़ाकर test नहीं किया। journal अंत से रखा जाता है, इसलिए किसी भी lvextend के बाद भरोसा करने से पहले फिर से vdolistmetadata चलाकर देखें कि वह कहाँ गया।\nbcache पर VDO: एक NVMe, दो काम bcache धीमी disks के आगे flash रखने का दूसरा तरीक़ा है। मैं इसे पहले से घूमती ड्राइव पर Ceph के नीचे चलाता हूँ, जिसकी हर setting bcache वाली पोस्ट में समझाई गई है। तो सवाल यह है कि जब VDO bcache cache के ऊपर बैठता है तो वह उस cache के साथ क्या करता है।\nएक NVMe दोनों flash काम करता है, दो partitions में बँटा हुआ:\nडिवाइस आकार काम nvme8n1p1 32 GiB bcache cache, writeback nvme8n1p2 8 GiB VDO का सिरा और पूँछ: index, roots, recovery journal, slab summary nvme6n1 349 GiB bcache backing डिवाइस, जहाँ डेटा रहता है /dev/bcache0 349 GiB VDO pool का बीच, slabs दोनों ड्राइव फिर से Optane हैं, इसलिए nvme6n1 घूमती disk की जगह खड़ी है। नीचे के हर आँकड़े के लिए यह याद रखें। यहाँ backing डिवाइस तेज़ है, इसलिए यह नापता है कि cache तक क्या पहुँचता है, यह नहीं कि spindle को उसे ख़ाली करने में कितना समय लगता है।\nbcache पर VDO: एक NVMe, दो काम VM disks: thick LVs guests को यही दिखता है Volume group vdovg Proxmox यह पढ़ता है VDO LV, 35 GiB वर्चुअल dedup, LZ4, zeros छोड़े सिरा बीच: slabs पूँछ VDO pool LV, तीन segments bcache0, writeback guest bytes का एक चौथाई p1: cache nvme6n1: डेटा 32 GiB cache, 349 GiB backing p2: VDO का metadata p1 और p2: एक Optane, nvme8n1 bcache पर VDO। pool के सिरे metadata partition पर जाते हैं, slabs bcache से होकर जाते हैं, और दोनों partitions एक Optane साझा करते हैं। partitions और cache set, उस पोस्ट की settings के साथ:\n# sgdisk --zap-all /dev/nvme8n1 # sgdisk -n 1:0:+32G -c 1:bcache-cache -n 2:0:+8G -c 2:vdo-meta /dev/nvme8n1 # blockdev --rereadpt /dev/nvme8n1 # apt install bcache-tools # make-bcache -C /dev/nvme8n1p1 -B /dev/nvme6n1 --writeback # B=/sys/block/bcache0/bcache # echo 0 \u0026gt; $B/sequential_cutoff # echo 40 \u0026gt; $B/writeback_percent # echo 81920 \u0026gt; $B/writeback_rate # echo 20480 \u0026gt; $B/writeback_rate_minimum # CS=/sys/fs/bcache/47bac36f-a1d5-4e8e-8695-2e7ff944172d # echo 0 \u0026gt; $CS/congested_read_threshold_us # echo 0 \u0026gt; $CS/congested_write_threshold_us वे echo lines अगले reboot तक चलती हैं। bcache पोस्ट का udev rule उन्हें स्थायी बनाता है।\nफिर pool, ऊपर की तरह ही बँटा हुआ, दोनों सिरों के लिए nvme8n1p2 और बीच के लिए bcache0:\n# pvcreate /dev/bcache0 /dev/nvme8n1p2 # vgcreate vdolab /dev/bcache0 /dev/nvme8n1p2 # lvcreate -y -L 3G -n vdopool vdolab /dev/nvme8n1p2 # lvextend -l +9408 vdolab/vdopool /dev/bcache0 # lvextend -l +64 vdolab/vdopool /dev/nvme8n1p2 # lvconvert -y --type vdo-pool -n vdolv -V 35G vdolab/vdopool --vdosettings \u0026#34;logical_threads=4 physical_threads=4 hash_zone_threads=2 cpu_threads=3 bio_threads=2 ack_threads=1 max_discard=4096\u0026#34; # lvs -a --segments -o lv_name,lv_size,segtype,seg_start_pe,seg_size_pe,devices vdolab LV LSize Type Start SSize Devices vdolv 35.00g vdo 0 8960 vdopool(0) vdopool 40.00g vdo-pool 0 10240 vdopool_vdata(0) [vdopool_vdata] 40.00g linear 0 768 /dev/nvme8n1p2(0) [vdopool_vdata] 40.00g linear 768 9408 /dev/bcache0(0) [vdopool_vdata] 40.00g linear 10176 64 /dev/nvme8n1p2(768) vdolistmetadata ने split build जैसी ही block ranges छापीं, इसलिए index और दोनों journals nvme8n1p2 पर बैठते हैं। vdovg और Proxmox स्टोरेज ऊपर ठीक पहले की तरह जाते हैं।\nCache तक क्या पहुँचता है तुलना है सीधे bcache0 पर एक 8 GiB LV बनाम vdovg में एक 8 GiB LV, वही fio jobs 30 सेकंड के लिए, दो बार, हर run के बीच cache को flush करके साफ़ किया गया। /sys/class/block के device counters बताते हैं कि bytes कहाँ गए।\nbcache पर किसकी तुलना हुई सिर्फ़ bcache bcache पर VDO fio, 30 s bcache0 पर 8 GiB LV bcache0, writeback p1: cache nvme6n1: डेटा fio, 30 s vdovg में 8 GiB LV VDO LV और pool, 16 threads bcache0, writeback p2: meta p1: cache nvme6n1: डेटा bcache आँकड़ों के पीछे के दो stacks। वही cache, वही backing ड्राइव; फ़र्क सिर्फ़ ऊपर VDO का है। 75% dup, 50% compress, 30 s सिर्फ़ bcache bcache पर VDO 4k random write, QD32, 4 jobs 212,222 और 205,585 IOPS 390,206 और 304,757 IOPS p99 1.89 और 2.04 ms 1.45 और 2.54 ms guest ने लिखा 24.29 और 23.53 GiB 44.67 और 34.88 GiB bcache cache में लिखा गया 25.00 और 24.26 GiB 11.48 और 10.44 GiB VDO के metadata partition पर लिखा गया 1.18 और 0.59 GiB हर guest byte पर cache writes 103% 26 और 30% अंत में cache में dirty बचा 6.0 और 6.5 GiB 5.5 और 5.2 GiB 128k write, QD8 2,001 और 1,985 MiB/s 1,878 और 1,416 MiB/s हर guest byte पर cache writes, 128k 101% 24 और 27% अकेला bcache लगभग 210,000 छोटे writes प्रति सेकंड पर रुक गया, और उसने हर byte cache में लिखा, ऊपर से 3% अपना। आगे VDO रखें तो cache ने एक चौथाई bytes लिए। पहले run में उसी cache ने फिर 390,206 writes प्रति सेकंड उठाए, लगभग दोगुने, और फिर भी धीमी ड्राइव के इंतज़ार में कम dirty डेटा के साथ ख़त्म हुआ। cache ही सीमा था। VDO ने उसे खिसका दिया।\nदूसरा run उस pool के लिए ईमानदार है जो इस्तेमाल में रहा है। fio default रूप से हर run में अपने generators को एक ही तरह seed करता है8, इसलिए दूसरे run ने वह डेटा लिखा जिसे index पहले देख चुका था, और जो उन blocks की ओर इशारा करता था जो तब तक discard हो चुके थे। VDO index को सिर्फ़ संकेत मानता है और साझा करने से पहले हर उम्मीदवार block को पढ़कर जाँचता है कि वह सच में duplicate है9। सिर्फ़-write वाले test के दौरान उस दूसरे run ने 7.11 GiB cache से और 1.20 GiB data ड्राइव से वापस पढ़ा। पहले ने 0.12 GiB पढ़ा था। बासी सलाह मुफ़्त नहीं है, और जिस pool पर VMs आते-जाते रहते हैं, वहाँ यह हमेशा कुछ न कुछ रहेगी।\nrandom डेटा इसका दूसरा पहलू है:\nRandom डेटा, 30 s सिर्फ़ bcache bcache पर VDO 4k random write, QD32, 4 jobs 205,984 और 203,066 IOPS 203,186 और 85,882 IOPS p99 2.04 और 2.15 ms 5.7 और 17.7 ms 128k write, QD8 2,038 और 2,017 MiB/s 878 और 357 MiB/s 4k random read, QD1 36,609 और 36,639 IOPS, 21.6 µs 26,345 और 26,202 IOPS, 33.6 और 33.7 µs 4k random read, QD32, 4 jobs 471,585 और 471,730 IOPS 335,461 और 336,941 IOPS बचाने को कुछ नहीं, इसलिए VDO सिर्फ़ overhead है, और बासी-index वाले run पर इसने छोटे writes को आधे से भी कम कर दिया। दोनों columns में हर read cache से आया। ऊपर VDO का 12 µs वही स्थिर क़ीमत है जो यह नंगे Optane पर जोड़ता है।\nतो जहाँ डेटा दोहराता है, वहाँ दोनों अच्छी तरह साथ चलते हैं। cache को एक चौथाई bytes मिलते हैं, वह किसी burst को ज़्यादा देर झेलता है, और spindles पर वापस लिखने को कम होता है। जहाँ दोहराता नहीं, वहाँ bcache अकेले बेहतर है।\nHDD Hardware RAID6 पर: सोचा हुआ, नापा नहीं मेरे पास test करने को कोई HDD RAID6 host नहीं है, इसलिए यह section ऊपर के नापों पर बनाया गया तर्क है। इस पर भरोसा करने से पहले अपना array नापें।\nHDD RAID6 पर VDO, तर्क से VM disks: thick LVs guests को यही दिखता है Volume group vdovg Proxmox यह पढ़ता है VDO LV, thick dedup, LZ4, zeros छोड़े सिरा बीच: slabs पूँछ VDO pool LV, तीन segments RAID6 virtual disk guest bytes का एक चौथाई Controller write-back cache चार गुना गुंजाइश HDDs एक seek VDO के 17 µs निगल जाता है NVMe index और journals spindles से दूर वह stack जिस पर यह section तर्क करता है, जिसे मैंने नापा नहीं: controller cache के पीछे RAID6 virtual disk पर slabs, index और journals एक NVMe पर। HDD RAID6 पर VDO क्या बदलता है array तक पहुँचने वाले writes लगभग एक चौथाई, नापे गए mix जैसे mix पर Controller write-back cache एक चौथाई दर से भरता है, इसलिए burst को लगभग चार गुना देर झेलता है VDO की CPU क़ीमत हर read पर 17 µs, 5 से 10 ms के seek में खो जाती है Recovery journal writes write I/Os का लगभग दसवाँ हिस्सा, छोटे और flushed: इन्हें NVMe पर रखें Index lookups vdostats में dedupe advice timeouts पर नज़र रखें; धीमे स्टोरेज पर VDO खोजना छोड़कर duplicate फिर भी लिख सकता है एक clone को शुरू से आख़िर तक पढ़ना धीमा: उसके blocks template के blocks की ओर इशारा करते हैं, जो array पर बिखरे हैं पहली दो lines हार्डवेयर वाला जवाब हैं। जब तक controller के battery या flash-backed cache में जगह है, guest को cache की latency दिखती है। जब वह भर जाता है, guest को spindles दिखते हैं। उसे एक चौथाई bytes भेजें, तो वही cache लगभग चार गुना गुंजाइश देता है, और उसे ख़ाली करने को एक चौथाई ही होता है। ऊपर का bcache section यही है, controller के cache की जगह software cache के साथ नापा हुआ।\nतीसरी वजह है कि VDO तेज़ disks से ज़्यादा धीमी disks पर जँचता है। Optane पर VDO ने read latency दोगुनी कर दी। 7,200 rpm ड्राइव पर वही स्थिर क़ीमत एक seek में घुल जाती है।\nआख़िरी तीन क़ीमतें हैं। एक जैसे clones का boot storm तेज़ होता है, लेकिन एक clone को शुरू से आख़िर तक पढ़ना धीमा होता है, क्योंकि deduplication उसे बिखेर देता है। और VDO के अपने छोटे writes भी array पर ही उतरते हैं, जो ऊपर के split layout का आधार है: index और journal NVMe पर, slabs RAID6 पर।\nDisk delete करना: Proxmox से उसे discard करवाएँ LV हटाने से LVM में उसके extents ख़ाली हो जाते हैं। यह VDO को नहीं बताता कि blocks अब इस्तेमाल में नहीं हैं, इसलिए VDO उन्हें रखे रहता है। kernel डॉक्यूमेंटेशन बताता है कि यह क्यों मायने रखता है: “If the vdo is thinly provisioned, discarding unused blocks is essential to prevent the target from running out of space”1। thick स्टोरेज पर यह ख़त्म नहीं हो सकता, लेकिन जो blocks discard नहीं हुए, वे फिर भी उस डेटा के लिए रोकी गई ड्राइव जगह हैं जिसका कोई मालिक नहीं।\nस्टोरेज पर on-volume-remove discard=1 option इसका इलाज है। Proxmox इसे “discard (TRIM) requests before removal” भेजना बताता है5:\nDelete VDO blocks ख़ाली हुए सादा lvm स्टोरेज, 1 GiB रखने वाली disk 0 on-volume-remove discard=1 के साथ, वही 262,140, पूरा 1 GiB फिर भी बड़ी disk पर यह धीमा है। fill test वाली 34 GiB disk delete करने में Proxmox को 262.6 s लगे, जबकि उसी तरह के डेटा पर blkdiscard ने 15 GiB 2.25 s में कर दिया। इसलिए किसी भी बड़ी चीज़ के लिए पहले disk को blkdiscard करें और फिर delete करें।\ndiscard का आकार भी मायने रखता है। VDO का default max_discard हर request पर एक 4 KiB block है1:\n15 GiB random डेटा का discard बीता समय CPU (sys) max_discard=1, default 8.06 s 8.06 s max_discard=4096, 16 MiB 2.25 s 0.00 s guests के अंदर, ड्राइव का Discard option चालू करें ताकि उनका TRIM स्टोरेज तक पहुँचे10, और fstrim को schedule पर चलाएँ।\nयह कहाँ अपनी जगह कमाता है जँचता है नहीं जँचता एक जैसे कुछ templates से बने बहुत से VMs databases और गहराई पर latency से बँधा काम write-back controller cache के पीछे HDD RAID6 all-NVMe host जिसे हर microsecond चाहिए VDO के metadata के लिए NVMe के साथ घूमता डेटा पहले से compressed डेटा: media, backups, ISOs घूमते डेटा के आगे bcache, जहाँ डेटा दोहराता है ऐसे डेटा के आगे bcache जो दोहराता नहीं ड्राइव जहाँ write endurance ही सीमा है encrypted guest disks, जो कभी deduplicate नहीं होतीं ऐसा host जिसके पास हर pool के लिए आधा गीगाबाइट RAM फ़ालतू है छोटा pool, जहाँ index दसवाँ हिस्सा खा जाता है Setting Default इस पर रखें बाद में बदलना VDO वर्चुअल आकार -V जो आप माँगें pool की संभाल-सीमा से ज़्यादा नहीं सिर्फ़ बढ़ा सकते हैं, कभी घटा नहीं सकते VDO threads 10, एक logical हर CPU पर एक, ऊपर की तरह बँटे हुए सिर्फ़ pool के VMs रोककर max_discard 1, यानी 4 KiB 4096, यानी 16 MiB सिर्फ़ pool के VMs रोककर स्टोरेज पर on-volume-remove सेट नहीं discard=1 हाँ, pvesm set हर वर्चुअल disk पर Discard बंद चालू हाँ, हर disk पर scan_lvs और filter 0, VM-disk reject नहीं 1, VM disks अस्वीकार हाँ, lvm.conf में इनमें से कुछ भी कठिन नहीं है। इनमें से कुछ भी default नहीं है।\nसबसे सस्ता write वह है जो आप कभी भेजते ही नहीं VDO के बारे में मुझे जो बात खटकती है, वह यह है कि इसे कितनी बुरी तरह बेचा जाता है। यह disk में उसकी क्षमता से ज़्यादा भरने के तरीक़े के रूप में सामने आता है, और यह इसका सबसे कम काम का पहलू है। पहली बार बनाते समय मैंने अनजाने में यही किया, और Proxmox एक तिहाई स्टोरेज ख़ाली दिखा रहा था जबकि VDO भरा हुआ था। Overcommit एक क़र्ज़ है, और ड्राइव उसे पूरी write speed पर वसूलती है।\nअसली क़ीमत उस line में है जिसे ज़्यादातर लोग कभी नापते ही नहीं। ड्राइव तक एक चौथाई bytes पहुँचने का मतलब है एक चौथाई घिसाव और ऐसा controller cache जो चार गुना देर चलता है। यह क्षमता नहीं है। यह हार्डवेयर का उसी नतीजे के लिए कम काम करना है, और यही अकेली ऐसी बचत है जो बाद में पलटकर नहीं काटती।\nइसमें CPU लगता है, और तेज़ flash पर latency लगती है, और दोनों स्थिर हैं। यही सौदा है, सीधे शब्दों में: processor का समय ख़र्च किया जाता है ताकि डिब्बे का धीमा, महँगा हिस्सा कम काम करे। RAID controller या bcache के पीछे घूमती disks पर, index और journal एक NVMe पर रखकर, यह हिसाब अच्छा बैठता है। all-Optane host पर ज़्यादातर नहीं बैठता।\nऔर यह अपना ख़याल ख़ुद नहीं रखेगा। इस काम के लिए हर ज़रूरी default ग़लत है: सोलह CPUs पर दस threads, ऐसा discard size जो एक core जला देता है, ऐसा वर्चुअल आकार जिसे आप कुछ भी रख सकते हैं, और स्टोरेज config में कुछ भी नहीं जो Proxmox से जगह वापस देने को कहे। इसमें से कुछ भी छिपा नहीं है। सब डॉक्यूमेंटेशन में है।\nतो इसे thick बनाएँ, एक बार, ठीक से, settings creation line पर और metadata वहाँ जहाँ उसे होना चाहिए। ऐसा करें और ड्राइव एक चौथाई काम करती है। इसे छोड़ दें, तो आपने एक और ऐसी layer ख़रीद ली है जो अपनी क्षमता से ज़्यादा का वादा करती है।\nLinux kernel documentation — dm-vdo — target “provides block-level deduplication, compression, and thin provisioning”; “If the vdo is thinly provisioned, discarding unused blocks is essential to prevent the target from running out of space”; “unflushed writes may or may not persist after a crash”; 128 MB block map cache “efficient access to 100 GB of logical space at a time” सपोर्ट करता है; thread parameters, उनकी सीमाएँ और tuning की सलाह; maxDiscard “in 4096-byte blocks”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nlvmvdo(7) — Support for Virtual Data Optimizer in LVM — VDO pool और VDO LV, lvconvert --type vdo-pool से मौजूदा LV को बदलना, memory इस्तेमाल, dense index और RAM के हर GiB पर उसकी 1 TiB window, और “You cannot reduce the size of a VDOPoolLV”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — drivers/md/dm-thin.c — disable_discard_passdown_if_not_supported() तब discard passdown बंद कर देता है जब data डिवाइस पूरा thin chunk नहीं ले सकता, और thin pool के नीचे VDO का default यही करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLVM2 — conf/example.conf.in — devices/scan_lvs: “Caution is required to avoid using PVs that belong to guest images stored on LVs” और “This option does not enable autoactivation of layered VGs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-storage — LVMPlugin.pm — on-volume-remove property, “Use \u0026lsquo;discard=1\u0026rsquo; to issue discard (TRIM) requests before removal”; volumes vgchange -aly से नहीं, बल्कि अलग-अलग lvchange -aey से activate किए जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian trixie — package vdo — “Management tools for Virtual Data Optimizer”, version 8.3.1.1-1, जो vdoformat, vdostats और vdolistmetadata देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — drivers/md/dm-vdo/encodings.c — vdo_initialize_layout() block map partition शुरुआत में, slab summary और recovery journal partitions अंत में, और slab depot बची हुई जगह से बनाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfio documentation — randrepeat — “Seed all random number generators in a predictable way so the pattern is repeatable across runs. Default: true.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — Design of dm-vdo — “vdo treats the locations in the index as hints, and reads each indicated block to verify that it is indeed a duplicate before sharing the existing block with a new one.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE documentation — Qemu/KVM Virtual Machines, Trim/Discard — “For the guest to be able to issue TRIM commands, you must enable the Discard option on the drive.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/vdo-dedup-for-local-lvm/","summary":"VDO kernel की deduplication और compression layer है। thick LVM volume group के नीचे यह Proxmox VE local disks को ऐसा बनाता है कि VMs जो भी block साझा करते हैं, उसकी एक ही copy लिखी जाती है, इसलिए ड्राइव तक कहीं कम bytes पहुँचते हैं। यह पोस्ट इसे Proxmox VE 9 host पर thick on thick बनाती है: VDO का आकार उतना जितनी जगह सच में है, ताकि ऊपर कुछ भी overcommit न कर सके, lvm.conf की scan_lvs setting और उसका filter, और VDO के threads CPU गिनती से मिलाए हुए। यह नापती है कि deduplication ने एक template और छह full clones, दो ISOs, zeros और random डेटा पर कितना बचाया, guest ने जितना लिखा उसके मुक़ाबले ड्राइव को सच में कितने bytes मिले, और बिना VDO वाले उसी Intel Optane के मुक़ाबले VDO की क़ीमत क्या है। फिर यह pool बनाती है जिसमें VDO का index और journals NVMe पर हैं और डेटा दूसरे डिवाइस पर, vdolistmetadata से layout साबित करती है, नापती है कि I/O कैसे बँटता है, फिर VDO को bcache के ऊपर रखती है, जहाँ एक NVMe bcache cache और VDO के metadata के बीच बँटा है, और नापती है कि VDO के साथ और बिना cache तक कितने bytes पहुँचते हैं। यह सोचकर बताती है कि HDD hardware RAID6 पर इन सबका क्या मतलब है, और delete पर discard को कवर करती है।","title":"Proxmox Local LVM के नीचे VDO: ड्राइव तक कम bytes पहुँचते हैं"},{"content":"दो सेटिंग जो आपने एक बार कीं और भूल गए Proxmox VE 9 बिना कहे आपके लिए दो काम की चीज़ें करता है। यह Fisher-Price OS (Windows) गेस्ट को वे पैरावर्चुअल फ़ीचर देता है जिनकी उसे KVM पर ठीक से चलने के लिए ज़रूरत है, और बूट पर ताज़ा CPU माइक्रोकोड लोड करता है।\nदोनों अपने आप होते हैं। दोनों एक ऐसे फ़ैसले पर भी टिके हैं जो आपने एक बार लिया था, शायद सालों पहले, और तब से देखा नहीं।\nपहला उस OS टाइप पर टिका है जो आपने VM बनाते समय चुना था। Microsoft Windows वाली कोई एंट्री चुनिए और Proxmox हर स्टार्ट पर Hyper-V enlightenments जोड़ देता है। इसे Other पर छोड़ दीजिए, जो डिस्क इम्पोर्ट करते समय या कुछ पुराना क्लोन करते समय आसानी से हो जाता है, और गेस्ट को इनमें से एक भी नहीं मिलता। वह बूट होता है, चलता है, धीमा चलता है, और कोई कुछ नहीं बताता।\nदूसरा इस पर टिका है कि होस्ट वर्ज़न 9 तक कैसे पहुँचा। 9.0 इंस्टॉलर Debian का firmware कंपोनेंट चालू करता है और आपके CPU का माइक्रोकोड पैकेज इंस्टॉल करता है। 8.x से अपग्रेड हुआ होस्ट वही रिपॉज़िटरी रखता है जो उसके पास थीं, और ज़्यादातर पर इसका मतलब है कोई माइक्रोकोड पैकेज नहीं। कर्नेल 6.17.9 या नए पर चल रहे AMD Zen 5 होस्ट पर यह सैद्धांतिक कमी नहीं है: EPYC CPU टाइप वाले गेस्ट स्टार्ट होना बंद कर देते हैं।\nदो डिफ़ॉल्ट, दो भूले हुए चुनाव VM: उसका OS टाइप तय करता है OS टाइप, एक बार सेट Microsoft Windows Other या Linux hv_ फ़्लैग जुड़ते हैं हर स्टार्ट पर कुछ भी नहीं और कोई चेतावनी नहीं होस्ट: वह 9 तक कैसे पहुँचा Proxmox VE 9 होस्ट 9.x इंस्टॉलर 8.x से अपग्रेड माइक्रोकोड पैकेज इंस्टॉल है कोई पैकेज नहीं pve8to9 सिर्फ़ चेताता है दोनों डिफ़ॉल्ट उस चुनाव पर टिके हैं जो कुछ भी गड़बड़ होने से बहुत पहले किया गया था। हर मामले में दाईं ओर का रास्ता वह है जिसके बारे में कोई चेतावनी नहीं देता। इस पोस्ट का बाकी हिस्सा दोनों को बारी-बारी से लेता है: यह क्या है, Proxmox कौन सा सटीक नियम लगाता है, जहाँ यह गायब है वहाँ इसे कैसे चालू करें, और कैसे साबित करें कि यह लग गया। नियम एक लाइव 9.2 होस्ट पर qemu-server और pve-manager के कोड से लिए गए हैं, याद से नहीं, क्योंकि उनमें से दो वैसे नहीं हैं जैसा ज़्यादातर लोग अंदाज़ा लगाएँगे।\nEnlightenment असल में क्या है असली हार्डवेयर के लिए लिखा गया गेस्ट ऑपरेटिंग सिस्टम ऐसी चीज़ों पर बहुत मेहनत करता है जो VM के अंदर बेकार हैं। वह इम्यूलेट किए चिप के ज़रिए टाइमर प्रोग्राम करता है, ऐसे vCPU के पकड़े lock पर घूमता रहता है जो शेड्यूल भी नहीं हुआ, और जब होस्ट कुछ मिलीसेकंड चुरा लेता है तो watchdog चला देता है।\nपैरावर्चुअलाइज़ेशन इसे ठीक करता है: गेस्ट को पता चल जाता है कि वह गेस्ट है और वह सीधे हाइपरवाइज़र से बात करता है। Linux यह KVM के अपने इंटरफ़ेस से करता है। Fisher-Price OS (Windows) सिर्फ़ एक पैरावर्चुअल बोली बोलता है, Hyper-V की, इसलिए KVM वह बोली लागू करता है और गेस्ट को बताता है कि वह Hyper-V के अनुकूल हाइपरवाइज़र पर चल रहा है। इसके हर हिस्से को enlightenment कहते हैं।\nजब तक कोई माँगे नहीं, इसमें से कुछ भी चालू नहीं होता। QEMU का दस्तावेज़ इस पर साफ़ है: “No Hyper-V enlightenments are enabled by default by either KVM or QEMU”1। Proxmox पर माँगने वाला qemu-server है, और वह सिर्फ़ तब माँगता है जब OS टाइप Microsoft Windows वाली एंट्री में से एक हो।\nयह फ़र्क आप किसी भी होस्ट पर देख सकते हैं। यह मेरे 9.2 नोड पर एक Linux VM है, ostype: l26, CPU टाइप host:\n# qm showcmd 101 --pretty | grep -- -cpu -cpu host,+kvm_pv_eoi,+kvm_pv_unhalt \\ Linux की अपनी पैरावर्चुअल इंटरप्ट और spinlock हैंडलिंग के लिए दो KVM फ़्लैग, और hv_ फ़्लैग एक भी नहीं। Linux के लिए सही। उस गेस्ट के लिए गलत जो सिर्फ़ Hyper-V समझता है।\nहर enlightenment क्या करता है, QEMU के विवरण से1:\nफ़्लैग गेस्ट को क्या मिलता है क्या बचता है hv_time Hyper-V रेफ़रेंस क्लॉक और TSC पेज बिना exit के टाइमस्टैम्प पढ़ना hv_relaxed watchdog टाइमआउट बंद करने का निर्देश vCPU के शेड्यूल से हटने पर झूठे टाइमआउट hv_vapic APIC के लिए VP assist पेज बिना exit के end-of-interrupt hv_spinlocks पैरावर्चुअल spinlock, होस्ट को बताने से पहले दोबारा कोशिश की गिनती ऐसे lock पर घूमना जिसका मालिक चल ही नहीं रहा hv_vpindex अपना वर्चुअल प्रोसेसर इंडेक्स अगले चार के लिए शर्त hv_runtime हर vCPU असल में कितनी देर चला चुराए गए समय की ईमानदार तस्वीर hv_synic, hv_stimer सिंथेटिक इंटरप्ट कंट्रोलर और टाइमर इम्यूलेट किया टाइमर हार्डवेयर hv_ipi एक hypercall में कई vCPU को IPI भेजना हर लक्ष्य CPU पर एक APIC exit hv_reset हाइपरवाइज़र के ज़रिए रीसेट hv_evmcs enlightened VMCS, सिर्फ़ Intel तेज़ nested वर्चुअलाइज़ेशन hv_tlbflush पैरावर्चुअल TLB shoot-down उन vCPU का इंतज़ार जो चल ही नहीं रहे OS टाइप ही स्विच है नियम एक ही फ़ंक्शन में है, qemu-server की CPUConfig.pm में get_hyperv_enlightenments2। पहले OS टाइप को एक वर्ज़न नंबर में बदला जाता है: win11 11 बनता है, win10 10, w2k8 और wvista दोनों 6, और XP व 2003 वाले टाइप 5। Linux, Other और बाकी सब 0 बनते हैं।\nफिर गेट क्रम से चलते हैं।\nqemu-server कौन से hv_ फ़्लैग जोड़ता है, गेट दर गेट OS टाइप से hv_ फ़्लैग तक, कोड के चलने के क्रम में OS टाइप वर्ज़न 6 से नीचे? हाँ रुकिए: कुछ नहीं जुड़ता OVMF फ़र्मवेयर और वर्ज़न 8 से नीचे? हाँ रुकिए: कुछ नहीं जुड़ता मशीन 2.3, फिर 2.6 या बाद की जोड़ता है spinlocks vapic time reset vpindex runtime वर्ज़न 7 या ऊपर जोड़ता है relaxed synic stimer ipi Intel होस्ट, वर्ज़न 11, मशीन 11.0+pve2 जोड़ता है evmcs qemu-server इन्हें इसी क्रम में लगाता है। 6 से नीचे का वर्ज़न पहले गेट पर रुक जाता है, और 8.x टाइप से पुराना UEFI गेस्ट दूसरे पर, और कुछ भी नहीं जुड़ता। नियम पढ़ना एक बात है। उसे चलाना बेहतर है। इसलिए मैंने दो 9.2 होस्ट पर इंस्टॉल की हुई CPUConfig.pm लोड की, AMD वाली पंक्तियों के लिए मेरा AMD Ryzen नोड और Intel वाली के लिए एक Intel Celeron N5100 नोड, और हर कॉम्बिनेशन के साथ वह फ़ंक्शन बुलाया:\nOS टाइप फ़र्मवेयर मशीन वर्ज़न होस्ट जोड़े गए enlightenments l26 या other कोई भी कोई भी कोई भी कोई नहीं wxp (5) SeaBIOS 11.0 कोई भी कोई नहीं w2k8 (Vista/2008) SeaBIOS 11.0 कोई भी spinlocks, vapic, time, reset, vpindex, runtime win7 SeaBIOS 11.0 कोई भी ऊपर के छह और relaxed, synic, stimer, ipi win7 OVMF 11.0 कोई भी कोई नहीं win10 OVMF 11.0+pve2 Intel पूरे दस, evmcs नहीं win11 OVMF 11.0+pve1 Intel पूरे दस, evmcs नहीं win11 OVMF 11.0+pve2 Intel पूरे दस और evmcs win11 SeaBIOS 11.0+pve2 AMD पूरे दस, evmcs नहीं GUI के पास जाने से पहले इसमें तीन बातें जानने लायक हैं।\n8.x से पुराने OS टाइप वाले UEFI गेस्ट को कुछ नहीं मिलता। जब फ़र्मवेयर OVMF हो और वर्ज़न 8 से नीचे हो, तो कोड जल्दी लौट जाता है। 7/2008r2 का जो गेस्ट आपने UEFI पर ले जाया, उसने चुपचाप अपना हर enlightenment खो दिया।\nhv_evmcs को एक साथ तीन चीज़ें चाहिए। Intel होस्ट, 11/2022/2025 OS टाइप, और मशीन वर्ज़न 11.0+pve2 या बाद का। 10/2016/2019 गेस्ट को यह डिफ़ॉल्ट से कभी नहीं मिलता, उसका मशीन वर्ज़न चाहे जितना नया हो।\nहोस्ट का वेंडर VM स्टार्ट होते समय पढ़ा जाता है। जाँच उस नोड पर read_cpuinfo बुलाती है जो VM स्टार्ट कर रहा है, उस पर नहीं जहाँ VM बना था। मिले-जुले Intel और AMD क्लस्टर में एक ही VM को एक नोड पर hv_evmcs मिलता है और दूसरे पर नहीं, और यह हर cold start पर नए सिरे से तय होता है।\nपुराने मशीन-वर्ज़न गेट (2.3, 2.6, 2.12, 3.1) सिर्फ़ उन VM के लिए मायने रखते हैं जो QEMU के बहुत पुराने ज़माने की मशीन पर पिन हैं। आज आप जो भी बनाएँगे, वह इन्हें पार कर लेता है।\nइसलिए वह OS टाइप चुनिए जो गेस्ट के सबसे करीब हो, सूची का सबसे नया नहीं। 10/2016/2019 गेस्ट 10/2016/2019 पर होना चाहिए। Proxmox का दस्तावेज़ इन फ़्लैग के अलावा टाइप के मायने रखने का दूसरा कारण भी देता है: यह ऐसी चीज़ें भी सेट करता है जैसे वर्चुअल RTC लोकल टाइम पर चलेगी या नहीं3।\nआपके पुराने VM जुलाई फ़िक्स से क्यों चूकते हैं डिफ़ॉल्ट से hv_evmcs नई चीज़ है। यह qemu-server 9.2.0 में 15 जुलाई 2026 को आया, “mitigate guest freezes and 100% CPU usage seen on certain Intel CPUs with Windows guests that use Virtualization-Based Security (VBS)” के लिए4, और यह मशीन वर्ज़न 11.0+pve2 से बँधा है।\nवही बंधन पेंच है, क्योंकि Proxmox Microsoft Windows OS टाइप वाले हर VM का मशीन वर्ज़न उसके बनने के पल पर पिन कर देता है। दस्तावेज़ कारण देता है: “Windows is sensitive to changes in the virtual hardware - even between cold boots”3। यह समझदारी भरा फ़ैसला है। इसका मतलब यह भी है कि जून 2026 में बना VM 11.0+pve1 या उससे पुराने पर बैठा है, और तब तक वहीं रहेगा जब तक कोई उसे हिलाए नहीं।\nक्या कोई आपके लिए उसे हिलाएगा? नहीं। नया डिफ़ॉल्ट नए VM पर लागू होता है और उन VM पर जिन्हें आप जानबूझकर आगे बढ़ाते हैं, और किसी पर नहीं।\nअगर आपके Intel होस्ट पर VBS चालू वाले 11/2022/2025 गेस्ट चल रहे हैं, और उनमें से कोई 100% CPU पर जम गया है, तो सबसे पहले यह जाँचिए:\nqm config \u0026lt;vmid\u0026gt; | grep -E \u0026#39;^(ostype|machine):\u0026#39; ostype: win11 के साथ pc-q35-11.0+pve2 से नीचे की machine: लाइन हो, तो फ़िक्स पाने के लिए उसे ऊपर ले जाना होगा। उसे हिलाने से गेस्ट को दिखने वाला वर्चुअल हार्डवेयर बदलता है, और पिनिंग ठीक इसी से बचाती है। इसलिए यह मेंटेनेंस विंडो में कीजिए, पहले बैकअप या स्नैपशॉट लेकर, Hardware → Machine → Edit से, Advanced पर टिक लगाकर, और वर्ज़न चुनकर।\nअगर लाइन pc-i440fx- से शुरू होती है, तो वर्ज़न छोटी समस्या है: उस गेस्ट को i440fx पर होना ही नहीं चाहिए, उन कारणों से जो Always Use Q35, Not i440fx में हैं, और नीचे सेट करना, और साबित करना कि लग गया इसे कवर करता है।\nउन्हीं कुछ महीनों में दो और जुड़े हुए डिफ़ॉल्ट आए, और जब आप वहाँ हों तो इन्हें जानना अच्छा है। qemu-server 9.1.12 ने 11/2022/2025 टाइप के लिए cet-ibt और cet-ss फ़्लैग बंद किए, क्योंकि QEMU 11.0 और उन्हें दिखाने वाले 7.x कर्नेल के साथ VBS वाले गेस्ट बूट नहीं हो रहे थे4। और 9.1.14 ने CPU की level प्रॉपर्टी खोली, जिसे दस्तावेज़ “a known workaround for Hyper-V boot failures of Windows guests on recent Intel hosts when the CPU type is host or max” बताता है3।\nQEMU की तरफ़, रिलीज़ दर रिलीज़ qemu-server कमांड लाइन बनाता है। pve-qemu-kvm वह QEMU है जो उसे चलाता है, और जुलाई फ़िक्स को दोनों चाहिए।\nमशीन वर्ज़न 11.0+pve2 सिर्फ़ तब चुना जा सकता है जब QEMU 11.0 बाइनरी इंस्टॉल हो, क्योंकि qemu-server होस्ट पर मिले QEMU से नया कोई भी मशीन वर्ज़न मना कर देता है5। +pve2 qemu-server का अपना रिवीज़न काउंटर है, QEMU का नहीं, इसलिए कोई भी 11.0 बिल्ड इसे पूरा करता है। जिस दिन 9.2.0 आया, जोड़ी ऐसी दिखती थी:\nपैकेज वर्ज़न रिलीज़ क्या लाता है qemu-server 9.2.0 15 जुलाई 2026 hv-evmcs डिफ़ॉल्ट और मशीन 11.0+pve2 pve-qemu-kvm 11.0.2-1 1 जुलाई 2026 QEMU 11.0.2, उस दिन का ताज़ा pve-qemu-kvm, न्यूनतम 11.0.0-1 5 मई 2026 पहला QEMU 11.0 बिल्ड क्या apt पक्का करेगा कि आपके पास दोनों हों? नहीं। qemu-server 9.2.0 pve-qemu-kvm (\u0026gt;= 7.1~) से ज़्यादा सख्त कुछ घोषित नहीं करता6, इसलिए जिस नोड पर QEMU 10.x पर रोका गया है, वह नया qemu-server चुपचाप ले लेता है और फिर वह मशीन वर्ज़न दे नहीं पाता जिस पर फ़िक्स टिका है। हर नोड पर दोनों जाँचिए। यह आज मेरा 9.2 होस्ट है, दोनों से काफ़ी आगे:\n# pveversion -v | grep -E \u0026#39;^(qemu-server|pve-qemu-kvm):\u0026#39; pve-qemu-kvm: 11.0.3-4 qemu-server: 9.2.11 Proxmox VE 9.0 के 10.0.2 पर आने के बाद से7 हर QEMU रिलीज़ में Fisher-Price OS (Windows) गेस्ट के लिए अपने फ़िक्स रहे हैं। ये वे हैं जो गेस्ट को छूते हैं, Proxmox के पैकेज changelog8 और QEMU के अपस्ट्रीम changelog से9:\nQEMU Proxmox बिल्ड गेस्ट के लिए क्या ठीक किया 10.0 10.0.2-1, 17 जून 2025 “PCI Label Id” बग, अंग्रेज़ी में हानिरहित पर लोकलाइज़्ड इंस्टॉल को अटका सकता था 10.1 10.1.2-3, 17 नवंबर 2025 VNC क्लिपबोर्ड की एक regression जिसने माउस पॉइंटर तोड़ दिया 10.1 10.1.2-5, 22 दिसंबर 2025 TPM डिस्क वाले VM के बैकअप अटकना, एक io_uring फ़िक्स 11.0 11.0.0-1, 5 मई 2026 उस FUSE export में regression जिसे swtpm TPM स्टेट के लिए इस्तेमाल करता है 11.0 11.0.2-1, 1 जुलाई 2026 Hyper-V enlightenments को CPUID फ़्लैग के रूप में पहचानना, ताकि कस्टम CPU मॉडल उन्हें रख सके QEMU 11.0 ने कुछ तोड़ा भी: उसने cet-ibt और cet-ss दिखाना शुरू किया, जिससे VBS गेस्ट बूट होना बंद हुए और qemu-server 9.1.12 को उन्हें बंद करना पड़ा, जैसा ऊपर बताया।\nउन्हीं रिलीज़ में guest agent के फ़िक्स अलग मामला हैं। QEMU 10.1, 10.2 और 11.0 हर एक ने guest agent की VSS और filesystem-freeze हैंडलिंग के हिस्से ठीक किए, जिनमें वह “Access denied Event ID 8194” भी है जो 11.0 ने ठीक किया9। इसमें से कुछ भी pve-qemu-kvm के साथ नहीं आता। उस गेस्ट का agent virtio-win ड्राइवर ISO पर आता है10, इसलिए वह सिर्फ़ तब बदलता है जब आप VM के अंदर agent अपडेट करते हैं।\nवे दो फ़्लैग जो आप हाथ से सेट कर सकते हैं Proxmox आपको किसी VM में मनमाने CPU फ़्लैग नहीं जोड़ने देता। Hardware → Processors → Edit, Advanced पर टिक, और Extra CPU Flags एक तय सूची देता है, जो CPUFlags.pm में परिभाषित है11। उस सूची की दो एंट्री enlightenments हैं, और ये वही दो हैं जिन्हें Proxmox डिफ़ॉल्ट से सेट नहीं करता, या जुलाई तक नहीं करता था।\nफ़्लैग Proxmox का अपना विवरण कब सेट करें hv-tlbflush “Improve performance in overcommitted Windows guests. May lead to guest bluescreens on old CPUs.” वैकल्पिक। पहले एक VM पर आज़माइए और नज़र रखिए। hv-evmcs “Improve performance for nested virtualization. Only supported on Intel CPUs.” गेस्ट के अंदर nested Hyper-V, WSL2 या VBS, Intel पर। 11.0+pve2 पर 11/2022/2025 के लिए पहले से चालू। दोनों को qemu-server 6.0-6 में 23 जुलाई 2019 को opt-in बनाया गया, changelog में इन्हें “sometimes problematic” कहा गया4। hv-tlbflush सात साल से वैसा ही है। पूरे क्लस्टर पर लगाने से पहले उसे कितनी टेस्टिंग चाहिए, इसका यह अच्छा इशारा है।\nhv-evmcs पर QEMU का अपना नोट है कि यह सिर्फ़ Intel के लिए है, और “some virtualization features (e.g. Posted Interrupts) are disabled when hv-evmcs is enabled”1। जो गेस्ट nested वर्चुअलाइज़ेशन नहीं कर रहा, उस पर इसे हाथ से चालू करने से आपको कुछ नहीं मिलता और वह कीमत चुकानी पड़ती है।\nसेट करना, और साबित करना कि लग गया नए VM के लिए: Create VM → OS, Type को Microsoft Windows और Version को सबसे करीबी मेल पर सेट कीजिए।\nमौजूदा VM के लिए: Options → OS Type → Edit, वर्ज़न चुनिए, OK। जब आप मौजूदा VM को Microsoft Windows टाइप पर बदलते हैं तो Proxmox मशीन वर्ज़न पिन करता है, ठीक वैसे ही जैसे बनाते समय4, इसलिए कॉन्फ़िग में machine: लाइन भी बदलने की उम्मीद रखिए।\nऔर इसे q35 पर रखिए। Enlightened गेस्ट का pc-i440fx पर कोई काम नहीं। यह बिना PCIe बस वाला चिपसेट है, और कारण passthrough से कहीं आगे जाते हैं; वे सब Always Use Q35, Not i440fx में हैं।\nविज़ार्ड आपको रोकेगा नहीं, और ज़्यादातर Microsoft Windows टाइप के लिए वह आपको वहीं रख देगा। Proxmox का अपना दस्तावेज़ Intel 440FX को “the default” कहता है3, और GUI के OS डिफ़ॉल्ट इसे ठीक एक एंट्री के लिए बदलते हैं: 11/2022/2025 को machine: 'q35' और bios: 'ovmf' मिलता है12। बाकी हर Microsoft Windows टाइप सामान्य डिफ़ॉल्ट लेता है, जो कोई मशीन सेट ही नहीं करते। इसलिए Next दबाते हुए बना 10/2016/2019 गेस्ट i440fx पर पहुँचता है, enlightened भी और गलत चिपसेट पर भी।\nविज़ार्ड में चुना OS टाइप मिलने वाली मशीन मिलने वाला फ़र्मवेयर 11/2022/2025 q35 OVMF 10/2016/2019 और हर पुराना Microsoft Windows टाइप i440fx SeaBIOS Other, Linux i440fx SeaBIOS विज़ार्ड पूरा करने से पहले System टैब पर इसे बदलिए। जो VM पहले से है, उसका चिपसेट बदलना मशीन वर्ज़न बढ़ाने से बड़ा वर्चुअल हार्डवेयर बदलाव है, इसलिए वही मेंटेनेंस-विंडो और बैकअप के नियम लागू होते हैं, और q35 वाली पोस्ट बताती है कि गेस्ट इस पर क्या करता है।\nफिर इसे ठीक से बंद कीजिए। Enlightenments QEMU कमांड लाइन के आर्ग्युमेंट हैं, और वह लाइन सिर्फ़ तब बनती है जब QEMU प्रोसेस शुरू होता है। गेस्ट के अंदर से रीस्टार्ट वही प्रोसेस रखता है, इसलिए पुराने फ़्लैग रहते हैं। शट डाउन कीजिए, stopped का इंतज़ार कीजिए, फिर Start।\nहोस्ट से साबित कीजिए, क्योंकि जवाब वहीं है:\nqm showcmd \u0026lt;vmid\u0026gt; --pretty | grep -o \u0026#34;hv_[a-z_]*[=0-9a-fx]*\u0026#34; | sort -u यह वह दिखाता है जो qemu-server अगले स्टार्ट पर QEMU को देगा। Intel पर 11.0+pve2 वाले 11/2022/2025 गेस्ट को ग्यारह दिखाने चाहिए: hv_evmcs, hv_ipi, hv_relaxed, hv_reset, hv_runtime, hv_spinlocks=0x1fff, hv_stimer, hv_synic, hv_time, hv_vapic और hv_vpindex। वही गेस्ट AMD पर दस दिखाता है। खाली नतीजे का मतलब है कि OS टाइप Microsoft Windows वाला नहीं है, या UEFI पर 8.x से पहले का टाइप है।\nअगर बदलाव के बाद गेस्ट बूट न हो, तो enlightenments को कारण मानने या हटाने के लिए एक स्टार्ट के लिए OS टाइप को वापस Other पर कीजिए। वह उनके बिना चलता है। बस बुरा चलता है।\nमाइक्रोकोड: यह क्या ठीक करता है और कहाँ से आता है दूसरा डिफ़ॉल्ट हाइपरवाइज़र के नीचे बैठता है, ऊपर नहीं।\nCPU माइक्रोकोड प्रोसेसर के लिए वेंडर का अपना फ़र्मवेयर है। अपडेट सुरक्षा कमज़ोरियाँ और गंभीर CPU बग ठीक करते हैं, और Proxmox की एडमिन गाइड वह बात कहती है जो स्पीड की कीमत से चिंतित किसी के लिए मायने रखती है: “a patched microcode is usually still more performant than an unpatched microcode where the kernel itself has to do mitigations”13।\nयह तीन जगहों से आ सकता है, और ये एक-दूसरे से स्वतंत्र हैं।\nस्रोत कब लगता है कौन देता है आज मेरे 9.2 होस्ट पर बोर्ड BIOS/UEFI अपडेट हर पावर-ऑन पर, स्थायी बोर्ड या सर्वर वेंडर जो भी आख़िरी BIOS में था Debian non-free-firmware बूट में जल्दी, initramfs से Debian intel-microcode 3.20251111.1~deb13u1, amd64-microcode 3.20250311.1 Proxmox VE रिपॉज़िटरी बूट में जल्दी, initramfs से Proxmox amd64-microcode 3.20251202.1~bpo13+1, कोई Intel पैकेज नहीं BIOS वाला रास्ता वह है जिसे Proxmox recommended कहता है13। Early-loading वाला रास्ता तब का सहारा है जब बोर्ड वेंडर BIOS अपडेट देना बंद कर चुका हो, जो कुछ साल पुरानी किसी भी चीज़ पर आम तौर पर हो चुका होता है।\nतीसरी पंक्ति ने मुझे चौंकाया। Proxmox अपनी रिपॉज़िटरी में trixie वाले Debian से नया amd64-microcode रखता है14, उसी pin priority के साथ, इसलिए apt Proxmox वाला चुनता है। Proxmox रिपॉज़िटरी कॉन्फ़िगर किए AMD होस्ट पर आप यही वर्ज़न चलाएँगे, और जैसा अगला सेक्शन दिखाता है, यही वह वर्ज़न है जो मायने रखता है।\nबूट के दौरान माइक्रोकोड कहाँ लगता है एक बूट, बाएँ से दाएँ पावर ऑन BIOS माइक्रोकोड Bootloader initramfs लोड करता है कर्नेल शुरू early अपडेट होस्ट चालू गेस्ट स्टार्ट Late loading रुका हुआ स्थायी, बोर्ड वेंडर initramfs से, Debian या Proxmox blacklist: /etc/modprobe.d Early loading कर्नेल के कुछ और शुरू करने से पहले होती है। चलते सिस्टम पर late loading वह रास्ता है जिसे Debian रोकता है, और वह रुका ही रहता है। Early loading वह है जो यह पोस्ट सेट करती है। माइक्रोकोड initramfs में जाता है और कर्नेल उसे बूट की बिल्कुल शुरुआत में लगाता है, कुछ और चलने से पहले।\nLate loading इसे चलते सिस्टम पर लगाती है। कर्नेल के अपने दस्तावेज़ में “Why is late loading dangerous?” नाम का सेक्शन है और 5.19 से यह डिफ़ॉल्ट रूप से चालू नहीं है15। Debian भी इसे रोकता है। यह मेरे होस्ट की फ़ाइल है, जस की तस:\n# cat /etc/modprobe.d/amd64-microcode-blacklist.conf # The microcode module attempts to apply a microcode update when # it autoloads. This is not always safe, so we block it by default. blacklist microcode इसे छेड़िए मत। ऊपर वाले होस्ट पर यह मौजूद है और फिर भी सफल early अपडेट दिखाता है, इसलिए यह किसी चीज़ के रास्ते में नहीं है।\nदोनों रास्तों को रीबूट चाहिए। इससे बचने का कोई तरीका नहीं।\nऔर यह सिर्फ़ x86 के लिए है। Proxmox की गाइड साफ़ कहती है कि “There is no equivalent operating-system-level microcode package for arm64”13।\nअपग्रेड किए होस्ट के पास यह क्यों नहीं होता non-free-firmware में “non-free” लाइसेंस के बारे में है, पैसे या Proxmox सब्सक्रिप्शन के बारे में नहीं। Debian का विकी समझाता है: कर्नेल वाला हिस्सा फ़्री सॉफ़्टवेयर है, पर वेंडर का अपडेट डेटा “opaque” है, “and its contents are unknown to Debian”16। इसीलिए यह अपने अलग कंपोनेंट में रहता है, और इसीलिए Debian सिस्टम को यह तब तक नहीं मिलता जब तक वह कंपोनेंट चालू न हो।\nProxmox VE 9.0 का इंस्टॉलर इसे चालू करता है। रिलीज़ नोट्स कहते हैं कि ISO “Install the microcode package matching the current platform” करेगा, और कि “installations now have the non-free-firmware repository enabled”7। अपग्रेड इनमें से कुछ नहीं करता, क्योंकि वह 8.x वाली रिपॉज़िटरी लाइनें रखता है।\nनया 9.x इंस्टॉल 8.x से अपग्रेड non-free-firmware इंस्टॉलर चालू करता है जो 8.x में था, अक्सर गायब माइक्रोकोड पैकेज पहचाने गए CPU के लिए इंस्टॉल कोई नहीं, जब तक आप कंपोनेंट न जोड़ें क्या बताता है कुछ ज़रूरी नहीं pve8to9, एक FAIL और एक WARN के रूप में, और सिर्फ़ अगर आप इसे चलाएँ बाद के अपडेट apt full-upgrade और रीबूट वही, एक बार पैकेज लग जाने के बाद चेकर इसे पकड़ता है, मेरी उम्मीद से ज़्यादा ज़ोर से। यह मेरे Intel नोड पर है, जो 8.x से आया:\n# pve8to9 | grep -i -B1 -A2 microcode PASS: Legacy file \u0026#39;/etc/sysctl.conf\u0026#39; is not present. INFO: Checking if matching CPU microcode package is installed. FAIL: unable to determine installed intel-microcode version. WARN: The matching CPU microcode package \u0026#39;intel-microcode\u0026#39; could not be found! Consider installing it to receive the latest security and bug fixes for your CPU. apt install intel-microcode SKIP: NOTE: Expensive checks, like CT cgroupv2 compat, not performed without \u0026#39;--full\u0026#39; parameter FAIL एक साइड इफ़ेक्ट है: वर्ज़न लुकअप किसी भी इंस्टॉल न हुए पैकेज के लिए विफलता लॉग करता है, माइक्रोकोड जाँच के अपनी चेतावनी तक पहुँचने से पहले17। जो भी हो, pve8to9 एक चेकर है, गेट नहीं। यह अपग्रेड नहीं चलाता और उसे रोक नहीं सकता, इसलिए अपग्रेड सीधे इसके पास से निकल जाता है।\nक्या व्यवहार में इससे फ़र्क पड़ता है? यहाँ दो मामले हैं जहाँ पड़ता है, और पहला मेरा है।\nवह Intel नोड एक Celeron N5100 है। उसकी sources सूची में non-free-firmware पहले से था, इसलिए पैकेज एक कमांड दूर था, और 27 अक्टूबर 2026 तक किसी ने वह कमांड नहीं चलाई थी। किसी और ने ध्यान दिया हो या नहीं, कर्नेल ने दिया:\n# dmesg | grep -i microcode [ 0.000000] x86/CPU: Running old microcode [ 0.497219] microcode: Current revision: 0x0000001d # lscpu | grep -i \u0026#39;old microcode\u0026#39; Vulnerability Old microcode: Vulnerable कर्नेल “a table of released microcode” रखता है, और जो CPU उससे पुराने पर बूट हुआ वह “will say \u0026lsquo;Vulnerable\u0026rsquo;”18। पुराना कितना पुराना? Intel के रिलीज़ नोट्स इस चिप के लिए इसका जवाब देते हैं19:\nरिवीज़न Intel रिलीज़ इस होस्ट पर 0x1d microcode-20210608 जो बोर्ड फ़र्मवेयर आज लोड करता है 0x2400001f microcode-20220207 0x24000023 microcode-20220510 इस बोर्ड का BIOS बनने से छह महीने पहले आ चुका 0x24000024 microcode-20230214 0x24000026 microcode-20240312 Debian के intel-microcode 3.20251111.1~deb13u1 में BIOS वर्ज़न 5.19 है, तारीख 8 नवंबर 2022, और यह अब भी वह पहला माइक्रोकोड लोड करता है जो Intel ने इस पार्ट के लिए कभी जारी किया, जबकि इसके बनते समय दो नए पहले से बाहर थे। Early-loading रास्ता ठीक इसी मामले के लिए है: चार अपडेट एक ऐसे पैकेज में पड़े थे जिसे होस्ट पहले से देख सकता था। मैंने यह लिखते हुए इसे इंस्टॉल किया, और उससे जो हुआ वह इसे चालू करना में है, क्योंकि उसमें एक पेंच दिखता है।\nदूसरा मामला AMD का है। Zen 5 पार्ट में RDSEED इंस्ट्रक्शन में एक बग है20। Proxmox के 9.1 रिलीज़ नोट्स दर्ज करते हैं कि आगे क्या होता है: 6.17.9 से आगे के कर्नेल, “without active microcode update will disable the RDSEED32 CPU-bit, and will fail to run Qemu guests with a CPU type that exposes that bit (for example EPYC or EPYC-v4)”21। फ़िक्स amd64-microcode 3.20251202.1~bpo13+1 या नया है, जो Proxmox रिपॉज़िटरी का वर्ज़न है, Debian का नहीं।\nउसके अंदर एक दूसरा जाल भी है। जिन Zen 5 बोर्ड का BIOS AMD की Entrysign कमज़ोरी के फ़िक्स से पहले का है, उन पर कर्नेल नया माइक्रोकोड लेने से मना करता है और No sha256 digest for patch ID लॉग करता है, और Proxmox की सलाह है BIOS अपडेट21। इसलिए उस हार्डवेयर पर OS वाला रास्ता तभी काम करता है जब बोर्ड वेंडर ने अपना हिस्सा कर दिया हो।\nइसे चालू करना पहले दर्ज कीजिए कि आप कहाँ हैं। होस्ट पर, root के रूप में:\npveversion grep -m1 vendor_id /proc/cpuinfo # GenuineIntel or AuthenticAMD grep microcode /proc/cpuinfo | uniq # revision running now dpkg -l intel-microcode amd64-microcode 2\u0026gt;/dev/null | grep ^ii dmesg | grep -i microcode lscpu \u0026gt; /root/lscpu-before.txt # vulnerabilities and mitigations अगर dpkg पहले से मेल खाता पैकेज ii दिखाता है, तो होस्ट तैयार है और आप सीधे नतीजा जाँचने पर जा सकते हैं।\nकंपोनेंट चालू कीजिए। Trixie का apt deb822 .sources फ़ॉर्मैट पसंद करता है, और Proxmox की अपग्रेड गाइड पुरानी एक-लाइन फ़ाइलों को बदलने के लिए apt modernize-sources बताती है, जो मूल फ़ाइलें .bak के रूप में रखता है22। फिर /etc/apt/sources.list.d/debian.sources में मुख्य और security दोनों stanza की Components: लाइन में non-free-firmware जोड़िए। यह मेरे होस्ट की फ़ाइल है, जो इंस्टॉलर से आई थी:\nTypes: deb URIs: http://deb.debian.org/debian/ Suites: trixie trixie-updates Components: main contrib non-free-firmware Signed-By: /usr/share/keyrings/debian-archive-keyring.gpg Types: deb URIs: http://security.debian.org/debian-security/ Suites: trixie-security Components: main contrib non-free-firmware Signed-By: /usr/share/keyrings/debian-archive-keyring.gpg दोनों stanza, क्योंकि Debian stable को माइक्रोकोड दोनों रास्तों से भेजता है। Security आर्काइव में intel-microcode 3.20250812.1~deb13u1 है जबकि मुख्य आर्काइव 3.20251111.1~deb13u1 पर आगे बढ़ चुका है23, और आपको जो सबसे नया हो वह चाहिए।\nCPU से मेल खाता पैकेज इंस्टॉल कीजिए।\napt update apt install intel-microcode # Intel apt install amd64-microcode # AMD सिर्फ़ अपने वेंडर वाला। उसके बाद नया माइक्रोकोड साधारण apt full-upgrade के साथ आता है, और हर नए वर्ज़न को पहले की तरह रीबूट चाहिए।\nइसे इंस्टॉल करने से initramfs दोबारा बनता है, क्योंकि early माइक्रोकोड को वहीं रहना होता है। कर्नेल इसे initrd के आगे लगे एक बिना कंप्रेस किए आर्काइव से पढ़ता है, kernel/x86/microcode/GenuineIntel.bin या AuthenticAMD.bin के रूप में15, और पैकेज की इंस्टॉल स्क्रिप्ट इसे वहाँ रखने के लिए initramfs ट्रिगर चलाती है24। यह मेरा Intel नोड है, इस पोस्ट के लिखे जाते समय पैकेज लेते हुए:\n# grep -A6 \u0026#39;Setting up intel-microcode\u0026#39; /var/log/apt/term.log Setting up intel-microcode (3.20251111.1~deb13u1) ... intel-microcode: microcode will be updated at next boot Processing triggers for man-db (2.13.1-1) ... Processing triggers for initramfs-tools (0.148.4) ... update-initramfs: Generating /boot/initrd.img-7.0.14-24-pve Running hook script \u0026#39;zz-proxmox-boot\u0026#39;.. Re-executing \u0026#39;/etc/kernel/postinst.d/zz-proxmox-boot\u0026#39; in new private mount namespace.. zz-proxmox-boot Proxmox का हुक है। जिस होस्ट के EFI पार्टिशन proxmox-boot-tool संभालता है, उस पर यह नई इमेज कॉपी करता है; इस होस्ट पर सिंक करने को कुछ नहीं।\nअब देखिए उसने कौन सी इमेज बनाई। कोई कर्नेल न बताया जाए तो update-initramfs -u सिर्फ़ सबसे नई इमेज दोबारा बनाता है: “The default is the latest kernel version”25। वही नोड, ठीक उसके बाद:\n# uname -r 7.0.14-23-pve # for f in /boot/initrd.img-*; do echo \u0026#34;$f: $(lsinitramfs $f 2\u0026gt;/dev/null | grep -c GenuineIntel.bin)\u0026#34;; done /boot/initrd.img-7.0.12-1-pve: 0 /boot/initrd.img-7.0.14-11-pve: 0 /boot/initrd.img-7.0.14-12-pve: 0 /boot/initrd.img-7.0.14-19-pve: 0 /boot/initrd.img-7.0.14-23-pve: 0 /boot/initrd.img-7.0.14-24-pve: 1 /boot/initrd.img-7.0.14-8-pve: 0 सात में से एक इमेज में माइक्रोकोड है, और वह वह नहीं जिस पर होस्ट चल रहा है।\nअगला बूट initramfs में माइक्रोकोड है CPU किस रिवीज़न पर पहुँचता है 7.0.14-24, डिफ़ॉल्ट एंट्री हाँ पैकेज का 0x24000026 7.0.14-23, पिन की हुई या fallback एंट्री नहीं BIOS का 0x1d कोई भी पुराना नहीं BIOS का 0x1d इसलिए इंस्टॉल के बाद हर इमेज दोबारा बनाइए, और हर माइक्रोकोड अपडेट के बाद फिर से, क्योंकि हर एक वही सिर्फ़-सबसे-नई वाला रीबिल्ड चलाता है। फिर साबित करने के लिए ऊपर वाला लूप दोबारा चलाइए:\nupdate-initramfs -u -k all रीबूट कीजिए और जाँचिए। यह मेरा AMD 9.2 होस्ट है, Proxmox रिपॉज़िटरी का पैकेज लगने के बाद:\n# grep microcode /proc/cpuinfo | uniq microcode\t: 0xa500012 # dmesg | grep -i microcode [ 0.587928] microcode: Current revision: 0x0a500012 [ 0.587930] microcode: Updated early from: 0x0a50000d Updated early from वह लाइन है जो इसे साबित करती है। Proxmox की अपनी एडमिन गाइड अब भी पुराना शब्द-विन्यास दिखाती है, microcode updated early to revision13; मौजूदा कर्नेल ऊपर वाली दो लाइनें छापता है26। दोनों में से कोई भी रूप हो, मतलब है कि यह काम कर गया।\nऐसी लाइन का न होना अपने आप में खराबी नहीं है। यह सिर्फ़ तब दिखती है जब पैकेज में CPU के बिल्ट-इन रिवीज़न और BIOS के लोड किए रिवीज़न दोनों से नया कुछ हो। एक पैकेज बहुत सारे CPU मॉडल कवर करता है, और गाइड सही है कि उस पर लिखी तारीख यह नहीं बताती कि आपके मॉडल को आख़िरी बार कब कुछ मिला13।\nइसे पूरे क्लस्टर पर लगाना रिपॉज़िटरी बदलाव और इंस्टॉल हर नोड पर एक साथ हो सकते हैं। रीबूट तक कुछ नहीं बदलता। रीबूट एक बार में एक नोड, और अगला नोड नीचे जाने से पहले हर नोड स्वस्थ होना चाहिए।\nमाइक्रोकोड का रोलिंग रीबूट, हर दौर में एक नोड हर नोड, फिर अगला जाँच quorum, Ceph OK मेंटेनेंस गेस्ट हटते हैं noout वैकल्पिक रीबूट dmesg जाँचें इंतज़ार OSD up और in छोड़ना unset, वापस लाएँ अगला नोड, वही कदम हर दौर में एक नोड। Ceph वाले दो कदम सिर्फ़ hyper-converged क्लस्टर पर लागू होते हैं, और noout वाली जोड़ी वैकल्पिक है। कदम कमांड कब पूरा क्लस्टर स्वस्थ pvecm status, ceph -s quorate, HEALTH_OK नोड खाली करना ha-manager crm-command node-maintenance enable \u0026lt;node\u0026gt;, non-HA गेस्ट हाथ से माइग्रेट उस पर कोई गेस्ट नहीं बचा वैकल्पिक, Ceph ceph osd set noout ceph -s में फ़्लैग दिखे रीबूट, जाँच dmesg | grep -i microcode नया रिवीज़न दिख रहा है Ceph ठीक हुआ ceph -s सारे OSD up और in, HEALTH_OK छोड़ना node-maintenance disable \u0026lt;node\u0026gt;, ceph osd unset noout HA गेस्ट वापस आ गए HA मेंटेनेंस मोड दर्ज करता है कि हर HA गेस्ट कहाँ से आया था और नोड के मेंटेनेंस से बाहर आने पर उसे वापस ले जाता है27। Non-HA गेस्ट आपकी ज़िम्मेदारी हैं।\nnoout पर राय बँटी है और दोनों तरफ़ की बात में दम है। Ceph चुप OSD को जल्दी down मार्क करता है पर out सिर्फ़ mon_osd_down_out_interval के बाद, जो डिफ़ॉल्ट से दस मिनट है28, और out ही rebalance शुरू करता है। सामान्य रीबूट उससे काफ़ी पहले वापस आ जाता है। लंबे POST, फ़र्मवेयर प्रॉम्प्ट या धीमे RAID कंट्रोलर वाला सर्वर शायद न आए। noout सेट करने से धीमा रीबूट rebalance में नहीं बदलता। कीमत है इसे हटाना याद रखना, और भूला हुआ noout बाद में असली विफलता छिपा देता है।\nपूरा क्लस्टर एक ही विंडो में कीजिए। अलग-अलग माइक्रोकोड रिवीज़न पर चलते नोड ठीक वही स्थिति हैं जिसमें CPU टाइप host वाला गेस्ट, जो भौतिक CPU के फ़ीचर सीधे देखता है, live-migrate होकर ऐसे नोड पर जा सकता है जो फ़ीचर का अलग सेट बताता है।\nजब माइक्रोकोड अपडेट गड़बड़ हो कम होता है, पर होता है, और Proxmox की गाइड इसे ठीक से कवर करती है13।\nस्थिति यह कीजिए क्यों आपको नए माइक्रोकोड पर शक है एक बार dis_ucode_ldr के साथ बूट कीजिए सिर्फ़ उस बूट के लिए loader बंद करता है29 पुराना रिवीज़न ठीक, नया नहीं पहले वाला वर्ज़न इंस्टॉल करके hold कीजिए purge करने से और भी पुराना BIOS रिवीज़न चलता रह सकता है कुछ हफ़्ते बाद apt-mark unhold, फिर full-upgrade कहीं और का फ़िक्स उसी माइक्रोकोड वर्ज़न पर इसे ठीक कर सकता है एक बार के बूट के लिए: GRUB मेन्यू (छिपा हो तो Shift दबाए रखिए), Proxmox एंट्री पर E, linux से शुरू होने वाली लाइन के अंत में dis_ucode_ldr जोड़िए, फिर Ctrl+X। GRUB की जगह systemd-boot वाला होस्ट एडमिन गाइड के bootloader अध्याय में कवर है।\nIntel पर डाउनग्रेड:\napt list -a intel-microcode # what versions exist apt install intel-microcode=\u0026lt;version\u0026gt; # pick the earlier one apt-mark hold intel-microcode # stop the next upgrade undoing it reboot AMD पर amd64-microcode लगाइए। डाउनग्रेड कीजिए, purge कभी नहीं।\nडिफ़ॉल्ट उससे किया वादा है जो अपेक्षित रास्ते से आया इनमें से कोई भी बग नहीं है। Proxmox ने दोनों बार समझदारी का काम किया: जहाँ सुरक्षित है वहाँ फ़ीचर चालू, जहाँ शायद न हो वहाँ बंद, और उस वर्चुअल हार्डवेयर को पिन करना जिस पर गेस्ट नखरे करता है। इंस्टॉलर ठीक किया गया, अपग्रेड चेकर इसे पकड़ता है, changelog बताता है कि क्या और कब बदला। Proxmox ने अपना हिस्सा कर दिया है।\nपर डिफ़ॉल्ट उस व्यक्ति से किया गया वादा है जिसने चीज़ें वैसे कीं जैसी वेंडर ने उम्मीद की थी। नया इंस्टॉल, सही OS टाइप, जुलाई के बाद बना VM। जिसके भी सिस्टम का कोई इतिहास है, और असली कुछ भी चलाने वाले हर किसी का होता है, वह इस वादे से कुछ हद तक बाहर है, और यह कमी खुद को घोषित नहीं करती। यह दिखती है ऐसे गेस्ट के रूप में जो थोड़ा धीमा है, ऐसे VBS freeze के रूप में जिसे कोई मशीन वर्ज़न से नहीं जोड़ता, या ऐसे Zen 5 नोड के रूप में जहाँ कर्नेल अपडेट के बाद EPYC गेस्ट स्टार्ट नहीं होते।\nरिलीज़ नोट्स बताते हैं कि नए इंस्टॉल को क्या मिलता है। आपके होस्ट असल में क्या चला रहे हैं, इस पर वे कुछ नहीं कहते, और ये दो अलग सवाल हैं। दूसरे का जवाब देने का इकलौता तरीका है जाकर देखना: गेस्ट पर qm showcmd, होस्ट पर dmesg, कॉन्फ़िग में मशीन लाइन। इनमें से किसी में भी हर बॉक्स पर एक मिनट से ज़्यादा नहीं लगता।\nवह एक मिनट ही काम है। Proxmox आपको जाँचने के औज़ार देता है, इसलिए आपने जो माना और जो चल रहा है, उसके बीच की दूरी पाटना आपका काम है, उनका नहीं।\nQEMU documentation — Hyper-V Enlightenments — “No Hyper-V enlightenments are enabled by default by either KVM or QEMU”; हर फ़्लैग का विवरण; hv-evmcs “The feature is Intel-only” और “some virtualization features (e.g. Posted Interrupts) are disabled when hv-evmcs is enabled”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — CPUConfig.pm — get_hyperv_enlightenments: OVMF और वर्ज़न गेट, मशीन-वर्ज़न गार्ड, और hv_evmcs के लिए GenuineIntel जाँच। यहाँ qemu-server 9.2.11 से चलाया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE admin guide — Qemu/KVM Virtual Machines — “You can choose between the default Intel 440FX or the Q35 chipset” और “switch from the default SeaBIOS to OVMF”; “For Windows guests, the machine version is pinned during creation, because Windows is sensitive to changes in the virtual hardware - even between cold boots”; level प्रॉपर्टी और उन गेस्ट के लिए cet-ibt/cet-ss डिफ़ॉल्ट।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — Debian changelog — 9.2.0 (15 जुलाई 2026) मशीन 11.0+pve2 से Intel पर 11/2022/2025 गेस्ट के लिए hv-evmcs चालू करता है; 9.1.14 level खोलता है; 9.1.12 cet-ibt और cet-ss बंद करता है; Microsoft Windows OS टाइप पर बदलने पर पिनिंग (जनवरी 2025); 6.0-6 (23 जुलाई 2019) “Make sometimes problematic \u0026lsquo;hv-tlbflush\u0026rsquo; and \u0026lsquo;hv-evmcs\u0026rsquo; CPU flags optional”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — Machine.pm — जब मशीन का QEMU major.minor इंस्टॉल की हुई बाइनरी से नया हो तो can_run_pve_machine_version false लौटाता है; +pveN रिवीज़न उसी फ़ाइल में सूचीबद्ध हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server 9.2.0 — debian/control — 15 जुलाई 2026 के “bump version to 9.2.0” कमिट पर रनटाइम डिपेंडेंसी pve-qemu-kvm (\u0026gt;= 7.1~) है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE Roadmap — 9.0, Installation ISO — “Install the microcode package matching the current platform… This also means that installations now have the non-free-firmware repository enabled.”; उसी रिलीज़ में “QEMU 10.0.2” सूचीबद्ध है\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-qemu — Debian changelog — 10.0.2-1 (17 जून 2025) “update QEMU and downstream patches for 10.0.2 release”, जिसमें नीचे वाला अपस्ट्रीम 10.0 फ़िक्स है; 10.1.2-3 “a regression with VNC clipboard breaking mouse pointer in Windows guests”; 10.1.2-5 “backup with TPM disk potentially getting stuck” का io_uring फ़िक्स; 11.0.0-1 “regression when using fuse export for swtpm”; 11.0.2-1 “recognize Hyper-V enlightenments in the list of supported CPUID flags”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU upstream changelogs, 10.0 — “Workaround \u0026lsquo;PCI Label Id\u0026rsquo; Windows bug, which is normally harmless but on localized versions can lead to guest hangs”; guest agent के VSS और freeze फ़िक्स के लिए 10.1, 10.2 और 11.0, जिनमें “Fix guest-fs-freeze cause \u0026lsquo;Access denied Event ID 8194\u0026rsquo; in Event Viewer” भी है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Qemu-guest-agent — उस गेस्ट के लिए, “First you have to download the virtio-win driver iso”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox qemu-server — CPUFlags.pm — हर VM की फ़्लैग सूची, ऊपर उद्धृत hv-tlbflush और hv-evmcs विवरणों के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager — OSDefaults.js — win11 एंट्री machine: 'q35' और bios: 'ovmf' सेट करती है; बाकी Microsoft Windows एंट्री generic लेती हैं, जो कोई मशीन सेट नहीं करता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE admin guide — CPU Microcode Updates — early OS अपडेट, BIOS/UEFI रास्ता recommended के रूप में, arm64 के लिए कोई OS पैकेज नहीं, dis_ucode_ldr प्रक्रिया, और purge की जगह डाउनग्रेड।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE pve-no-subscription repository for trixie — amd64-microcode 3.20251202.1~bpo13+1 रखती है और कोई intel-microcode नहीं, 27 अक्टूबर 2026 को पढ़ा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — The Linux Microcode Loader — “Since kernel 5.19, late loading is not enabled by default”, और सेक्शन “Why is late loading dangerous?”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian Wiki — Microcode — CPU वेंडर का दिया “opaque” अपडेट डेटा “is non-free, and its contents are unknown to Debian”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox pve-manager — pve8to9.pm — check_cpu_microcode_package चेतावनी लॉग करता है; उससे पहले बुलाया जाने वाला $get_pkg लुकअप किसी भी इंस्टॉल न हुए पैकेज के लिए “unable to determine installed $pkg version.” को विफलता के रूप में लॉग करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — Old Microcode — “The kernel keeps a table of released microcode. Systems that had microcode older than this at boot will say \u0026lsquo;Vulnerable\u0026rsquo;.” (अंदर के उद्धरण चिह्न double से single किए गए)\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIntel — Linux Processor Microcode Data Files, release notes — 06-9c-00/01 की JSL पंक्तियाँ, “Celeron N4500/N4505/N5100/N5105”, रिलीज़ 20210608 से 20240312 तक; 0x24000026 Debian के पैकेज में 06-9c-00 के हेडर से पढ़ा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAMD security bulletin AMD-SB-7055 — Zen 5 प्रोसेसर पर RDSEED की समस्या।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE Roadmap — 9.1 known issues, AMD Zen5 CPU issue with RDSEED — गेस्ट स्टार्ट विफलता, ठीक किया गया पैकेज वर्ज़न, और Entrysign BIOS फ़िक्स के बिना वाले बोर्ड पर No sha256 digest संदेश।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki — Upgrade from 8 to 9 — apt modernize-sources deb822 में बदलता है और पुरानी फ़ाइलें .bak प्रत्यय के साथ रखता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian packages — intel-microcode in trixie — stable और security वर्ज़न, होस्ट पर apt-cache policy से मिलाए गए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian sources — intel-microcode.postinst — dpkg-trigger --no-await update-initramfs, फिर “microcode will be updated at next boot”; amd64-microcode भी यही करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian manual — update-initramfs(8) — -k के लिए, “The default is the latest kernel version”, और “all” “on all installed kernel versions that already have an initramfs (with -d or -u)” पर काम करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — arch/x86/kernel/cpu/microcode/core.c — “Current revision: 0x%08x” और “Updated early from: 0x%08x” छापता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE admin guide — High Availability, maintenance mode — HA सर्विस हटाई जाती हैं, और “automatically once the maintenance mode is disabled and the node is back online” वापस लाई जाती हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCeph documentation — Configuring Monitor/OSD Interaction — mon_osd_down_out_interval, “The number of seconds Ceph waits before marking a Ceph OSD Daemon down and out”, डिफ़ॉल्ट 10 मिनट।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel documentation — kernel parameters — dis_ucode_ldr: “Disable the microcode loader.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/hyper-v-enlightenments-and-microcode/","summary":"Proxmox VE 9 Fisher-Price OS (Windows) गेस्ट के लिए Hyper-V enlightenments चालू करता है और नए होस्ट पर CPU माइक्रोकोड इंस्टॉल करता है, पर सिर्फ़ तब जब VM को Microsoft Windows OS टाइप दिया गया हो और होस्ट 9.x इंस्टॉलर से आया हो। यह पोस्ट बताती है कि enlightenments क्या करते हैं, qemu-server उन्हें चुनने के लिए कौन से सटीक नियम लगाता है (एक लाइव 9.2 होस्ट पर नापा हुआ), मशीन वर्ज़न पिनिंग पुराने VM को जुलाई 2026 के hv-evmcs फ़िक्स से दूर क्यों रखती है, उस फ़िक्स को कौन सा pve-qemu-kvm बिल्ड चाहिए और 10.0 के बाद हर QEMU रिलीज़ ने इन गेस्ट के लिए क्या ठीक किया, ये q35 पर क्यों होने चाहिए और i440fx पर कभी नहीं (जो विज़ार्ड अब भी ज़्यादातर को दे देता है), वे दो फ़्लैग जो आप हाथ से सेट कर सकते हैं, कैसे साबित करें कि VM क्या चला रहा है, माइक्रोकोड कहाँ से आता है (बोर्ड फ़र्मवेयर, Debian और Proxmox की अपनी रिपॉज़िटरी), अपग्रेड किए होस्ट के पास यह क्यों नहीं होता (उदाहरण में एक Intel नोड जो चार Intel रिलीज़ पीछे है), इसे इंस्टॉल करने पर होने वाला initramfs रीबिल्ड और वे पुराने कर्नेल जो वह रीबिल्ड छोड़ देता है, उसके बाद आने वाली Zen 5 RDSEED खराबी, इसे चालू करना, Ceph क्लस्टर पर रोलिंग रीबूट, और खराब अपडेट को वापस लेना।","title":"Proxmox VE 9 के दो डिफ़ॉल्ट जो शायद आपके पास नहीं हैं: Hyper-V Enlightenments और CPU माइक्रोकोड"},{"content":"Google का मैप, मेरे कैमरे, एक ऐप मुझे कार स्क्रीन पर एक ही चीज़ चाहिए थी। Google का मैप, Google का ट्रैफ़िक और Google का टर्न-बाय-टर्न, और ऊपर मेरा अपना स्पीड कैमरा डेटा, जो मुझे सिर्फ़ उन कैमरों के लिए अलर्ट करे जो सच में सड़क की मेरी तरफ़ की ओर हैं।\nAndroid Auto पर मुझे ऐसा कुछ नहीं मिला। Google Maps में मैप और रूटिंग है, पर उसमें अपना कैमरा डेटाबेस लोड करने का कोई तरीका नहीं। तो मैं इसे बना रहा हूँ।\nइसका नाम है AutoNavAlerts। यह Google के Navigation SDK पर बना एक Android Auto नेविगेशन ऐप है, जिसके ऊपर कैमरा और पॉइंट-ऑफ़-इंटरेस्ट अलर्ट सिस्टम लिखा गया है। पहला कैमरा स्रोत PocketGPSWorld है, मेरे अपने पेड सब्सक्रिप्शन से। कोड Apache License 2.01 के तहत github.com/damo2929/AutoNavAlerts पर सार्वजनिक है।\nयह एक सीरीज़ का पहला भाग है। इसमें है कि ऐप क्या करता है, Google किसी थर्ड-पार्टी ऐप को कार स्क्रीन पर क्या करने देता है और क्या नहीं, और यह कैसे बना, क्योंकि इसकी लगभग हर लाइन Claude ने लिखी है, Anthropic का AI मॉडल, और नियम तय करना, टेस्ट करना और नतीजे की ज़िम्मेदारी लेना मेरा काम रहा। वह आख़िरी हिस्सा अपने आप में एक कहानी है।\nयह वर्ज़न 0.1.0 है। यह sideload किया गया है, Play Store पर नहीं है, और इसकी एक ही असली ड्राइव हुई है। इसे बिल्ड लॉग की तरह पढ़िए, प्रोडक्ट लॉन्च की तरह नहीं।\nआज यह क्या करता है टेस्ट बिल्ड में यह है, और हर हिस्सा किसलिए है:\nहिस्सा क्या करता है नेविगेशन ट्रैफ़िक के साथ Google मैप, जगह की सर्च, ETA के साथ रूट प्रीव्यू, कार स्क्रीन, रेल और ड्राइवर डिस्प्ले पर टर्न-बाय-टर्न किसी कॉन्टैक्ट तक ड्राइव नाम बोलिए या टाइप कीजिए, और कॉन्टैक्ट के सेव किए पते Places के नतीजों के ऊपर आ जाते हैं। सिर्फ़ वही पता Google को जाता है जो आप चुनते हैं आपके म्यूज़िक के साथ चलता है सिर्फ़ नेविगेशन टेम्पलेट, ताकि स्प्लिट स्क्रीन में म्यूज़िक का कार्ड बना रहे। अलर्ट की आवाज़ म्यूज़िक धीमा करती है, कभी रोकती नहीं कैमरा अलर्ट हर कैमरे के लिए तीन चरण, सिर्फ़ आपकी चलने की दिशा वाले कैमरों के लिए, उसी सड़क पर जिस पर आप हैं एवरेज स्पीड ज़ोन ज़ोन तभी शुरू होता है जब उसी लिमिट वाला दूसरा कैमरा आपके आगे हो, और आख़िरी कैमरे पर ख़त्म होता है स्पीड पैनल आपकी स्पीड और सड़क की लिमिट, हमेशा साथ-साथ, नीचे दाईं ओर ऑफ़लाइन स्पीड लिमिट UK के लिए OpenStreetMap लिमिट का एक डाउनलोड: फ़ोन पर 29 MB में 1,326,619 सड़कें। ड्राइव करते समय कुछ भी लुकअप नहीं होता इलेक्ट्रिक कार के रूट सबसे तेज़ रूट और Google का एनर्जी-एफ़िशिएंट रूट साथ-साथ, और चुनते आप हैं कैमरा डेटा आपका अपना PocketGPSWorld सब्सक्रिप्शन, रोज़ चेक होता है, नेविगेशन के दौरान कभी बदला नहीं जाता। या iGO, KML, GPX, OV2 या CSV फ़ाइलें इम्पोर्ट कीजिए कैमरा रिपोर्ट करें कार में एक टैप से पोज़ीशन, दिशा और लिमिट सेव होती है, चाहें तो बोली हुई टिप्पणी के साथ। रिव्यू और भेजना फ़ोन पर होता है, ड्राइव करते समय कभी नहीं कैमरा अलर्ट ही ऐप के होने की वजह हैं, इसलिए अगला सेक्शन उन्हीं का है।\nकैमरा तभी गिना जाता है जब वह आपकी ओर हो दूसरी कैरिजवे के लिए बजने वाला स्पीड कैमरा अलर्ट किसी अलर्ट के न होने से भी बुरा है। वह आपको उसे अनदेखा करना सिखा देता है। इसलिए डिज़ाइन का पहला सख़्त नियम यह है कि कैमरा तभी अलर्ट देता है जब वह आपकी चलने की दिशा की ओर हो, और यह नियम कभी ढीला नहीं होता, किसी डिफ़ॉल्ट से टाला नहीं जाता और डेटा अटपटा होने पर छोड़ा नहीं जाता।\nएक पोज़ीशन फ़िक्स कैमरा अलर्ट कैसे बनता है इनपुट हर फ़िक्स पर चार जाँच आउटपुट कार की रफ़्तार और GPS जब कार इन्हें साझा करे फ़ोन GPS हर सेकंड 10 फ़िक्स आपके अपने कैमरा सेट फ़ोन पर 1. काफ़ी पास 2. आपके आगे 3. आपकी ओर मुँह 4. आपकी सड़क पर कार के मैप पर बैनर बोला गया अलर्ट, म्यूज़िक धीमा मैप पर कैमरा हाइलाइट कोई भी जाँच फ़ेल: अलर्ट नहीं; उल्टी ओर मुँह वाला कैमरा तीर के साथ धुँधला दिखता है एक fix अलर्ट कैसे बनता है। एक सेकंड में दस तक पोज़ीशन चार जाँचों से गुज़रती हैं; सिर्फ़ वही कैमरा बोला जाता है और अलर्ट बनता है जो चारों पास करे। इंजन हर पोज़ीशन fix पर चलता है, एक सेकंड में दस तक। आसपास के हर कैमरे के लिए वह चार सवाल पूछता है, इसी क्रम में:\nजाँच कब पास होती है किसलिए है काफ़ी पास ट्रिगर दूरी और 200 m के अंदर, ज़्यादा से ज़्यादा 3 km मीलों दूर के कैमरों पर कोई काम नहीं आपके आगे कैमरे की ओर का bearing आपकी दिशा से 45° के अंदर आपके पीछे का कैमरा बीत चुका आपकी ओर कैमरे का bearing आपकी दिशा से 45° के अंदर, या मोड़ पर कैमरे की ओर के bearing से दूसरी कैरिजवे चुप रहती है आपकी सड़क पर आगे के रूट से 50 m के अंदर, या फ़्री ड्राइव में 40 m का कॉरिडोर जो दूरी के साथ चौड़ा होता है बगल की सड़क चुप रहती है 45° उदार नहीं है। PocketGPSWorld की TomTom फ़ाइलें कैमरे की दिशा आठ कंपास पॉइंट में देती हैं, तो उसमें से 22.5° किसी और चीज़ से पहले ही डेटा खा जाता है। GPS की दिशा कुछ डिग्री और लेती है, और सड़क का मोड़ कुछ और। इसीलिए किसी और चीज़ को इसमें से खाने की इजाज़त नहीं है।\nजो कैमरा दिशा की जाँच में फ़ेल होता है वह फिर भी मैप पर दिखता है, धुंधला, एक तीर के साथ जो बताता है कि वह किधर है। आप उसे देख सकते हैं। बस वह आपसे बात नहीं करता।\n70 mph पर अलर्ट के तीन चरण डिफ़ॉल्ट बढ़त: आपकी रफ़्तार पर 15 सेकंड, यहाँ 70 mph आप, 70 mph कैमरा आपकी ओर दूसरी ओर की सड़क, उल्टा मुँह: धुँधला, चुप पहला अलर्ट 469 m पहले, 15 s दूसरा अलर्ट 235 m पहले, 7.5 s गुज़रते हुए 100 गज़ (91 m) पैमाने पर नहीं; 242 m और 142 m की न्यूनतम सीमा कम रफ़्तार पर पहले दो को अलग रखती है 70 mph पर डिफ़ॉल्ट 15 सेकंड की बढ़त के साथ तीन चरण। पहले दो आपकी स्पीड से समय तय करते हैं; गुज़रते समय का अलर्ट 100 yards पर तय है और आवाज़ चालू रहते बंद नहीं किया जा सकता। चरण समय से तय होते हैं, तय दूरियों से नहीं। पहला अलर्ट आपकी मौजूदा स्पीड पर 15 सेकंड पहले आता है और दूसरा उसके आधे पर, दोनों की एक न्यूनतम सीमा है ताकि वे तीसरे पर चढ़ न जाएँ। तीसरा 100 yards पर तय है, और आवाज़ चालू हो तो अनिवार्य है। पास आते समय ट्रिगर दूरी सिर्फ़ बढ़ती है, इसलिए ज़ोर से ब्रेक लगाने पर वह चेतावनी छोटी नहीं होती जो आपको पहले से मिलनी थी।\nGoogle कार स्क्रीन पर ऐप को क्या करने देता है यहीं बात दिलचस्प होती है, क्योंकि Android Auto पर थर्ड-पार्टी ऐप Google Maps नहीं है। वह Android Auto की Car App Library के नियमों के अंदर चलता है, जो ऐप्स को “a set of visual templates approved for driver safety”2 देती है, और उतने के अंदर जितना Navigation SDK खोलना चुनता है।\nतीन कमियों ने ऐप को किसी भी उस चीज़ से ज़्यादा आकार दिया जो मैंने बनाना चुना:\nक्या कार पर Google Maps Navigation SDK पर बना ऐप दुर्घटना, पुलिस या सड़क के काम की रिपोर्ट अंदर ही है उपलब्ध नहीं। Google का अपना डॉक्यूमेंटेशन: “real-time disruptions are not available on Android Auto”3 सड़क की स्पीड लिमिट दिखती है सिर्फ़ यह कि आप उससे कितने प्रतिशत ऊपर हैं, और सिर्फ़ तब जब आप तेज़ चला रहे हों4 SDK के अपने मैप कंट्रोल पर टच लागू नहीं कुछ नहीं। Android Auto “limits screen surface interaction to a series of SurfaceCallback methods”2 स्पीड लिमिट को ही लीजिए। Google उसे जानता है। Google ऐप को बताएगा कि आप उससे कितने ऊपर हैं, प्रतिशत और गंभीरता के रूप में, और जब आप नीचे हैं तब कुछ भी नहीं। क्या मैं पूछ सकता हूँ कि ड्राइवर को लिमिट तभी जानने की इजाज़त क्यों है जब वह उसे पहले ही तोड़ रहा हो? इसका जवाब मुझे मिलने वाला नहीं, तो ऐप इसके इर्द-गिर्द काम करता है। जब आप ऊपर हैं, तो वह आपकी स्पीड और प्रतिशत से लिमिट वापस निकाल लेता है। नीचे होने पर वह उस कैमरे का इस्तेमाल करता है जिसकी ओर आप जा रहे हैं, फिर OpenStreetMap डाउनलोड का, और जब कोई लिमिट है ही नहीं तो कुछ न दिखाने की जगह डैश दिखाता है।\nघटना की रिपोर्ट का भी यही हाल है। रिपोर्टिंग API फ़ोन के नेविगेशन व्यू पर हैं, कार वाले पर नहीं। किसी ने Google से यह पहले ही माँगा है5, और वह अब भी खुला है। ऐप रन टाइम पर इन API को चेक करता है, तो अगर कोई बाद का SDK इन्हें जोड़ दे, तो Google का रिपोर्ट बटन मेरे कोड में बिना बदलाव के आ जाएगा। एक GitHub Actions जॉब हर तिमाही चेक करता है और जिस दिन ऐसा हो उसी दिन issue खोल देता है।\nटच वाले नियम ने मुझे सच में पकड़ लिया। SDK का कार मैप अपना arrival कार्ड, हेडर, re-centre बटन, स्पीडोमीटर और ट्रिप बार ख़ुद बनाता है। उनमें से कोई टैप नहीं ले सकता, क्योंकि कोई टच SDK के व्यू तक पहुँचता ही नहीं। वे बटन जैसे दिखते हैं और करते कुछ नहीं। इसलिए वे सब बंद हैं, और ऐप अपने कंट्रोल वहाँ बनाता है जहाँ टैप सच में पहुँचता है।\nअपनी key लाइए, अपना डेटा लाइए दो फ़ैसले इस ऐप को पैसे और लाइसेंस के मामले में ईमानदार रखते हैं, और दोनों सोच-समझकर लिए गए हैं।\nकोई बिल्ट-इन Maps key नहीं है। Google Maps Platform को “a billing-enabled Cloud project”6 चाहिए, और Navigation SDK को ऐसा प्रोजेक्ट चाहिए जिसमें वह चालू हो7। अगर मैं key के साथ भेजता, तो सबकी ड्राइविंग का बिल मुझ पर आता, या key लीक हो जाती और बिल फिर भी मुझ पर आता। इसलिए हर यूज़र अपनी key लाता है, अपने Google Cloud अकाउंट में। फ़ोन ऐप आपके अपने Google अकाउंट से एक बना सकता है, या आप एक पेस्ट कर दीजिए। वह फ़ोन पर एन्क्रिप्ट करके रखी जाती है। किसी तरह का कोई फ़ॉलबैक नहीं है, और जब तक आपकी key नहीं डलती, ऐप SDK की एक भी कॉल नहीं करेगा।\nऐप में कोई कैमरा डेटा नहीं है। PocketGPSWorld अपना डेटाबेस व्यक्तिगत इस्तेमाल के लिए लाइसेंस करता है, हर डाउनलोड पर सदस्य का वॉटरमार्क लगाता है, और उसे ऐसी किसी जगह रखने से मना करता है जहाँ ख़रीदार के सिवा कोई और पहुँच सके। इसलिए ऐप उसे कभी साथ नहीं भेजता, कभी होस्ट नहीं करता और कभी फ़ोनों के बीच सिंक नहीं करता। आप अपने सब्सक्रिप्शन से लॉग इन करते हैं, और फ़ोन आपकी अपनी वॉटरमार्क वाली कॉपी ऐसे प्राइवेट स्टोरेज में डाउनलोड करता है जो बैकअप से बाहर है। बेंच पर वह 33 सेट में 19,826 कैमरे थे, हर फ़ाइल का एक सेट, कभी मिलाए नहीं गए।\nऑटोमैटिक सिंक इस बारे में शालीन है। वह PocketGPSWorld का सार्वजनिक RSS फ़ीड दिन में एक बार पढ़ता है8 और लॉग इन तभी करता है जब नई रिलीज़ हो। आप नेविगेट कर रहे हों तब वह कैमरे कभी नहीं बदलता।\nउनके लाइसेंस का एक क्लॉज़ इससे पूरी तरह तय नहीं होता, वह जो डेटा को किसी एप्लिकेशन में शामिल करने के बारे में है। अपने इस्तेमाल के लिए मैं इसे स्वीकार करता हूँ। ऐप किसी और तक जाने से पहले, PocketGPSWorld को पूछते हुए एक ईमेल जाएगा।\nदो दिन, 87 commits, और पहले एक डिज़ाइन डॉक्यूमेंट अब वह हिस्सा जिस पर लोग बहस करेंगे। यह कोड मैंने टाइप नहीं किया। Claude ने किया, Claude Code के ज़रिए, दो मॉडल इस्तेमाल करके, Claude Fable और Claude Opus। रिक्वायरमेंट मैंने लिखे, हर फ़ैसला मैंने किया, बेंच मैंने चलाया, कार मैंने चलाई और जो वापस आया उसे मैंने रिव्यू किया। AI के लिखे बदलावों वाले हर commit में एक trailer है जो यह बताता है, और README में भी।\nये आँकड़े हैं, सीधे रिपॉज़िटरी से पढ़े हुए:\nमाप मान Commits 87, 11 अक्टूबर 22:10 से 13 अक्टूबर 2026 12:44 तक Claude co-author लाइन वाले commits 83 (56 Fable, 27 Opus) ऐप और उसकी core library में Kotlin 15,334 लाइनें यूनिट टेस्ट 211, 3,464 लाइनों में DESIGN.md, स्पेसिफ़िकेशन 1,763 लाइनें, किसी भी कोड से पहले लिखी गईं डिज़ाइन डॉक्यूमेंट पहले आया, और यह करने वाले किसी को भी मैं जो सबसे काम की बात बता सकता हूँ वह यही है। उसकी पहली लाइन कहती है कि जब तक वह मंज़ूर न हो, कोई कोड नहीं लिखा जाता, और बाद का कोई भी बदलाव पहले वहीं होता है। हर class के आगे उसका काम लिखा है। हर threshold की एक वजह है। मेरा तय किया हर नियम मेरे नाम से, तारीख़ के साथ, चिह्नित है।\nयह इसलिए मायने रखता है क्योंकि मॉडल भूल जाता है। लंबा सेशन सारांश में बदल जाता है, और सारांश मोटी बात रखता है और ब्योरा गिरा देता है, और बग ब्योरे में ही होते हैं। रिपॉज़िटरी की अपनी AGENTS.md यह साफ़ कहती है: इन फ़ाइलों के किसी सारांश पर भरोसा मत करो, न याद से, न पिछले सेशन से। एजेंट डॉक्यूमेंट पर वापस जाता है। हर बार।\nदूसरे चरण पर दो एजेंटों ने साथ-साथ भी काम किया, एक गाइडेंस, मैप और स्क्रीन पर, दूसरा लोकेशन, अलर्ट, आवाज़ और मैप मार्कर पर। हर एक के पास फ़ाइलों की एक लिखी हुई सूची थी, और उनके बीच के इंटरफ़ेस पहले से तय थे: जोड़ो, नाम मत बदलो। वे साफ़ मर्ज हुए क्योंकि सीमा किसी के शुरू करने से पहले तय हो चुकी थी, बाद में खोजी नहीं गई।\nहर सख़्त नियम किसी देखी हुई चीज़ से आया डिज़ाइन में सख़्त नियमों की एक सूची है, और उनमें से एक भी व्हाइटबोर्ड से नहीं आया। हर एक इस चीज़ को Desktop Head Unit9 पर, यानी PC पर Google के कार-स्क्रीन एमुलेटर पर, या कार में चलते देखकर और उसे कुछ ग़लत करते देखकर आया।\nसख़्त नियम मैंने क्या देखा जिससे यह नियम बना कैमरा तभी अलर्ट देता है जब वह आपकी ओर हो दूसरी कैरिजवे के अलर्ट शोर हैं जो आपको अलर्ट अनदेखा करना सिखाते हैं कार स्क्रीन पर ऐसा कुछ नहीं जो काम न करे स्क्रीन पर दो stop बटन, उनमें से एक बेजान कोई फ़ंक्शन दो बार नहीं वही जोड़ी, साथ में दो re-centre बटन, दो स्पीड डिस्प्ले एक ही cancel, Google का कोने में X वाला कार्ड Android Auto का अपना है, ऐप की प्रकाशित ट्रिप से बना, इसलिए ऐप का अपना stop बटन हटा कार स्क्रीन पर कोई हिलना नहीं कार खड़ी थी और More स्क्रीन काँप रही थी, क्योंकि वह हर सेकंड एक जैसी स्क्रीन दोबारा भेजती थी और Android Auto हर रिफ़्रेश को एनिमेट करता है हर बटन दाईं ओर कार स्क्रीन के अपना साइज़ बताने तक मैप बटन ऊपर बाईं ओर बैठे रहते थे; अब शुरू से दाएँ किनारे पर नीचे की ओर एक कॉलम, बाईं ओर हमारा कुछ नहीं कोई बिल्ट-इन Maps key नहीं, कभी नहीं किसी की ड्राइविंग का बिल किसी और पर नहीं जाता काँपना मेरा पसंदीदा है, क्योंकि यह इतना छोटा है और यह ship हो जाता। एक लाइव GPS पंक्ति हर सेकंड टिक करती थी। हर टिक पूरी स्क्रीन बिना बदले दोबारा भेजता था, और होस्ट उसे एनिमेट करता था, तो कार के खड़े रहते नीचे की हर पंक्ति हिलती थी। फ़िक्स एक तुलना है: सिर्फ़ तब दोबारा बनाओ जब कोई लाइन बदली हो। नियम फ़िक्स से बड़ा है। जो स्क्रीन स्थिर है उसे स्थिर दिखना चाहिए, और यह स्क्रीनशॉट की एक झड़ी से चेक होता है जो सब एक जैसे होने चाहिए।\nजब AI कोड लिखता है तो असली काम यही है। वह थकता नहीं और दोबारा लिखने का बुरा नहीं मानता, पर वह कार स्क्रीन देख नहीं सकता। आप देख सकते हैं। जो देखा उसे तारीख़ के साथ नियम के रूप में लिख देना ही उसे तीन सेशन बाद लौटने से रोकता है।\nकोड ने क्या ग़लत किया, और वह कैसे पकड़ा गया बहुत कुछ। उसमें कुछ भी अनोखा नहीं था, और हर एक चलाकर पकड़ा गया, पढ़कर नहीं:\nग़लती उसने क्या किया कैसे पकड़ी गई रूट ग़लत हिस्से से मिलाया गया खड़ी कार से Google का रूट उत्तर गया, एक गोलचक्कर पर U-टर्न लिया और उसी सड़क पर दक्षिण लौटा। matcher ने कार को 10 m दूर उत्तर जाने वाले हिस्से से जोड़ दिया, तो दक्षिण जाने वाला हर कैमरा एक किलोमीटर से ज़्यादा “off road” था। कोई अलर्ट नहीं आया बेंच पर स्क्रिप्ट वाली ड्राइव; अलर्ट लॉग ने हर कैमरे के लिए offRoad lateral=1204 कहा स्पीच watchdog बहुत छोटा वह 1.5 s और हर अक्षर पर 70 ms देता था। संख्याएँ बोलने में इससे ज़्यादा समय लगता है, तो दूसरे चरण का हर अलर्ट वाक्य के बीच में कट जाता था एक बेंच रन के स्पीच रिकॉर्ड इंजन में एक rate limit तीन सेकंड की विंडो के साथ, एक जंक्शन पर दो कैमरों में से एक हमेशा के लिए खो जाता था पहली असली ड्राइव पर चुप हो गए अलर्ट को ट्रेस करके पुरानी दिशा एमुलेटर कुछ भी करो 0° का bearing बताता है, तो दक्षिण जाने वाली सड़क पर हर कैमरा दिशा की जाँच में फ़ेल होता था A61 पर नीचे की ओर एक सिम्युलेटेड रन लिमिट के बदलाव कैमरा अलर्ट की तरह बोले गए आगे लिमिट का बदलाव पहले चरण के कैमरा अलर्ट की तरह क़तार में लगा बेंच पर स्पीच लॉग दूसरी वाली पर ज़रा रुकना बनता है। हर अलग टेस्ट पास हुआ। कोड अपने ही पैमाने पर सही था। बस उसका टाइमआउट किसी ऐसे ने चुना था जिसने कभी फ़ोन को ज़ोर से दूरी पढ़ते नहीं सुना। इसे पकड़ने वाला टेस्ट है एक असली आवाज़, समय नापकर, एक असली रन पर।\nपहली असली ड्राइव 12 अक्टूबर को मैंने अपने फ़ोन पर एक रिलीज़ बिल्ड डाला और उसे XPENG G6 में वायरलेस Android Auto पर लेकर निकला। दो चीज़ें ग़लत हुईं। खड़े-खड़े सेट किया रूट चलना शुरू करने के कुछ सेकंड में अपने आप हट गया। और कुछ अलर्ट बोले गए और कुछ नहीं, किसी ऐसे पैटर्न में नहीं जो मुझे दिखे।\nफिर उससे बुरी समस्या। पढ़ने को कुछ बचा ही नहीं। मेरे फ़ोन का ColorOS ऐप की लॉग लाइनें फेंक देता है, तो ड्राइव ने कोई सबूत छोड़ा ही नहीं। ऐप था, Google का SDK था या ख़ुद Android Auto? मैं नहीं कह सकता था।\nतो पहली ड्राइव का फ़िक्स कोड का बदलाव नहीं था। वह सबूत था। ऐप अब फ़ोन पर हर समय दो लॉग लिखता है, एक रूटिंग और मैप के लिए और एक हर अलर्ट फ़ैसले के लिए, 15 सेकंड के बैच में, साथ में एक वैकल्पिक ड्राइव रिकॉर्डर जो हर पोज़ीशन सेव करता है ताकि ड्राइव बेंच पर दोबारा चलाई जा सके। फिर अंदाज़ों को ठीक किया गया, हर एक को कम करने और यह लॉग करने के लिए लिखा गया कि उसने किया। गाइडेंस जिस भी तरह ख़त्म हो सकती है, अब हर तरह यह दर्ज करती है कि उसे किसने ख़त्म किया।\nतब से बेंच पर Android Auto ने एक बार stop बुलाया, एक गाइडेड ड्राइव में 2 मिनट 35 सेकंड पर। उस समय मैं head unit पर इधर-उधर क्लिक कर रहा था, तो सबसे ज़्यादा संभावना है कि वह उसके अपने कार्ड का X था। जब कोई स्क्रीन नहीं छू रहा, तब ऐसा नहीं हुआ है। अगली ड्राइव इसे तय कर देगी, क्योंकि इस बार ड्राइव निशान छोड़ती है।\nआगे क्या बेंच की सूची अब भी लंबी है। अगली ड्राइव cancel बटन, मोड़ और ग़लत दिशा वाले हालात, कार के GPS और फ़ोन के GPS के बीच हैंड-ओवर, और यह चेक करेंगी कि G6 का ड्राइवर डिस्प्ले किसी थर्ड-पार्टी ऐप के टर्न कार्ड दिखाता भी है या नहीं।\nइस सीरीज़ के अगले भाग अलर्ट इंजन के गणित में ठीक से जाएँगे, स्पीड लिमिट के जुगाड़, PocketGPSWorld के फ़ॉर्मैट, और ख़ुद बेंच: Android Auto ऐप को बिना कार, एक स्क्रिप्ट वाले GPS और ऐसे एमुलेटर के साथ कैसे टेस्ट करते हैं जो सोचता है कि हर सड़क उत्तर की ओर जाती है।\nमशीन टाइप करती है, मानक आपका है मैंने AI के कोड लिखने पर बहुत बातें सुनी हैं, ज़्यादातर उन लोगों से जो इसे बेच रहे हैं या जो इससे डरे हुए हैं। मुझे जो मिला वह दोनों से ज़्यादा नीरस है, और ज़्यादा काम का।\nयह तेज़ टाइप करता है और ऊबता नहीं। यह बिना एक आह भरे चौथी बार एक स्क्रीन दोबारा लिख देगा। जो यह नहीं करेगा वह है यह नोटिस करना कि More स्क्रीन काँपती है, या कोई वाक्य कट गया, या एक बेजान बटन एक चालू बटन के बगल में बैठा है। यह कार नहीं देख सकता। वे देखना मेरे ज़िम्मे थे, और वे ठीक सिर्फ़ इसलिए हैं क्योंकि मैंने हर एक को एक नियम के रूप में लिख दिया जिसे किसी भी चीज़ को छूने से पहले इसे पढ़ना होता है।\nइसलिए ज़िम्मेदारी अपनी जगह से नहीं हिलती। कोड मेरा है क्योंकि जिस मानक पर उसे परखा जाता है वह मैंने तय किया और कार में मैं बैठा हूँ। जिसने इसे ईमानदार रखा उसमें से कुछ भी AI का तरीका नहीं है। कोड से पहले स्पेसिफ़िकेशन लिखना, जो सीखा उसे लिख लेना, और अंदाज़ा लगाने की जगह सबूत रखना, यही तो ठीक इंजीनियरिंग हमेशा से रही है। टूल उसे नहीं बदलता। वह बस जल्दी पता चलवा देता है कि कौन इसे छोड़ रहा था।\nApache License, Version 2.0 — वह लाइसेंस जिसके तहत AutoNavAlerts का कोड प्रकाशित है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: Android Auto — Car App Library “a set of visual templates approved for driver safety” देती है, और “Android Auto limits screen surface interaction to a series of SurfaceCallback methods”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: real-time disruptions — “real-time disruptions are not available on Android Auto”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: speed alerts — onSpeedingUpdated(float percentageAboveLimit, SpeedAlertSeverity speedAlertSeverity): लिमिट से ऊपर का प्रतिशत और एक गंभीरता, ख़ुद लिमिट नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ngooglemaps/flutter-navigation-sdk issue #726 — “Incident reporting on Android Auto \u0026amp; CarPlay”, 17 जून 2026 को खोला गया, अब भी खुला।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle Maps Platform — Get started — “you must create a billing-enabled Cloud project and enable the desired APIs or SDKs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Navigation SDK for Android: set up your project — “A Google Cloud console project with the Navigation SDK enabled.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPocketGPSWorld — UK का स्पीड कैमरा डेटाबेस जिससे ऐप सिंक करता है, हर यूज़र के अपने सब्सक्रिप्शन से।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — Test using the Desktop Head Unit — Android Auto कार स्क्रीन के लिए Google का एमुलेटर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/android/autonavalerts-part-one-a-sat-nav-of-my-own/","summary":"AutoNavAlerts एक Android Auto नेविगेशन ऐप है जो मैं Google के Navigation SDK पर बना रहा हूँ: Google का मैप, ट्रैफ़िक, सर्च और टर्न-बाय-टर्न, और उसके ऊपर एक कैमरा अलर्ट सिस्टम जो मेरा अपना PocketGPSWorld सब्सक्रिप्शन लोड करता है और सिर्फ़ उन कैमरों के लिए अलर्ट देता है जो मेरी चलने की दिशा की ओर हैं। भाग एक बताता है कि यह आज क्या करता है, Google किसी थर्ड-पार्टी ऐप को कार स्क्रीन पर क्या करने देता है और क्या रोक कर रखता है (घटना की रिपोर्ट, स्पीड लिमिट, उसके अपने कंट्रोल पर टच), हर यूज़र अपनी Maps key और अपना कैमरा डेटा क्यों लाता है, और कोड Claude के साथ कैसे लिखा गया: पहले एक डिज़ाइन डॉक्यूमेंट, दो दिन से कम में 87 commits, टेस्ट बेंच से निकले सख़्त नियम, एजेंटों के लिखे बग और हर एक कैसे पकड़ा गया, और कार में पहली असली ड्राइव।","title":"AutoNavAlerts, भाग एक: Android Auto के लिए मेरा अपना सैट-नैव"},{"content":"जब आप पेज माँगते हैं, कुछ नहीं चलता इस हफ़्ते PHP project ने PHP2Shell के fixes जारी किए, और उसकी advisory में लिखा था कि हमला “before any application code runs” हो सकता है1। PHP के लिए इसका क्या मतलब है, इस पर मैंने PHP: Twenty-Nine Years Of Leaving The Door Open में लिखा। यह पोस्ट जवाब का दूसरा आधा है। क्या हो अगर कुछ चले ही नहीं?\nयह ब्लॉग ऐसे ही काम करता है। जब आपने यह पेज माँगा, मेरा कोई program शुरू नहीं हुआ, कोई database नहीं पढ़ा गया, कोई login नहीं जाँचा गया, कोई HTML नहीं बनी। पहले से मौजूद एक फ़ाइल वापस भेज दी गई। बस इतना ही।\nयह फ़र्क़ ऐसा दिखता है, एक ही दिन नापा गया, लैब में ताज़ा install किए गए एक stock WordPress के ख़िलाफ़ और इस साइट के ख़िलाफ़, जैसी यह अभी live है:\nStock WordPress 7.1.3 यह साइट REST API routes 133 0 Writes लेने वाले REST routes 62 0 XML-RPC methods 80 0 Server पर execute होने वाली फ़ाइलें 1,514 PHP 0 साइट परोसने वाले user से लिखी जा सकने वाली फ़ाइलें 3,785 में से 3,785 कोई नहीं: लिखने के लिए कुछ चलता ही नहीं Database 12 tables, app अकाउंट के पास हर privilege कोई नहीं Login पेज wp-login.php, live कोई नहीं; वह path 404 लौटाता है होम पेज पर POST, PUT या DELETE PHP चलता है और पेज फिर भी बना देता है edge पर 405 से ठुकराया जाता है; कुछ नहीं चलता इनमें से कोई भी शून्य मेरी बंद की गई कोई setting नहीं है। ये शून्य इसलिए हैं क्योंकि जिस चीज़ को ये गिनते हैं, वह यहाँ है ही नहीं। जो login पेज कभी बना ही नहीं, उस पर हमला नहीं हो सकता।\nStock WordPress internet पर क्या खोलकर रखता है मैं यह बात याद से नहीं कहना चाहता था, इसलिए मैंने इसे नापा। आधिकारिक wordpress और mariadb container images, मेरी अपनी मशीन पर podman में, localhost से बँधे, कुछ भी जोड़े बिना install किए: जो साथ आता है उसके अलावा कोई plugin नहीं, default theme, एक administrator। PHP 8.3.36 पर WordPress 7.1.3। फिर मैंने गिना कि यह किन चीज़ों का जवाब देता है।\nRequest का जवाब कौन देता है: WordPress बनाम static site WordPress की request इस साइट की request internet web server PHP हर request पर code चलाता है WordPress core: 1,514 PHP फ़ाइलें साथ में हर plugin और theme 133 REST routes, 80 XML-RPC methods सब फ़ाइलें उसी user से writable database, ALL PRIVILEGES login पेज, admin, cron, uploads internet Cloudflare edge एक फ़ाइल वापस भेजी जाती है 6,343 फ़ाइलें, पहले से बनी हमारा कोई code नहीं चलता POST, PUT, DELETE: 405 server पर लिखने को कुछ नहीं कोई database नहीं न login पेज, न admin, न cron Request का जवाब कौन देता है। WordPress पर हर page view core, plugins और एक database से होकर PHP चलाता है, उन फ़ाइलों पर जिन्हें वही user दोबारा लिख सकता है। यहाँ एक तैयार फ़ाइल वापस भेजी जाती है और कुछ नहीं चलता। सबसे बड़ी अकेली surface REST API है। पाँच namespaces, 133 routes, 257 route और method जोड़े, और 62 routes जो किसी न किसी तरह का write लेते हैं। यह WordPress 4.7 के साथ core में आया था, “with REST API endpoints for posts, comments, terms, users, meta, and settings”2। और आपसे कहा जाता है कि इसे बंद न करें: “You should not disable the REST API; doing so will break WordPress Admin functionality that depends on the API being active.”3 तो यह चालू रहता है।\nDefault रूप से क्या खुला है WordPress का अपना documentation क्या कहता है XML-RPC, 80 methods 3.5 से default रूप से चालू: “Enable XML-RPC by default, remove Writing Settings option”4 REST API, 133 routes “content that is public on your site is generally publicly accessible via the REST API”5 users की सूची GET /wp/v2/users अपने default view में हर author का display name, slug, link और avatar लौटाता है6 wp-login.php और xmlrpc.php “xmlrpc.php is a frequent brute‑force target”; “Apply rate limits to /wp-login.php and /xmlrpc.php globally.”7 wp-cron.php “WP-Cron works by checking, on every page load, a list of scheduled tasks to see what needs to be run.”8 theme और plugin editor “This is often the first tool an attacker will use if able to login, since it allows code execution.”9 Users वाली सूची पर दोबारा नज़र डालने लायक़ है। मेरी लैब में उस endpoint पर एक anonymous request ने एक administrator अकाउंट लौटा दिया, display name और slug के साथ। जिसने कभी login नहीं किया, वह कुछ आज़माने से पहले ही जान लेता है कि साइट के अकाउंट कौन से हैं, एक ताज़ा install पर, डिज़ाइन के मुताबिक़। किसी को ग़लत configure नहीं करना पड़ा।\nफिर फ़ाइलें। आधिकारिक image Apache को www-data के रूप में चलाती है, और पूरा web root www-data का है। सभी 3,785 फ़ाइलें, जिनमें 1,514 PHP फ़ाइलें हैं, उसी user से लिखी जा सकती हैं जो code चलाता है। हर फ़ाइल। Code भी। wp-config.php, जिसमें database का पासवर्ड है, web root में mode 644 पर पड़ी है। WordPress जिस database अकाउंट से चलता है, उसके पास अपने database पर ALL PRIVILEGES हैं।\nयह PHP वाली पोस्ट का one-process model है, live और बिना बदलाव, आधिकारिक image से। यह कोई बुरी तरह चलाई गई साइट नहीं है। यह वह शुरुआती बिंदु है जिससे हर WordPress साइट शुरू होती है, पहला plugin लगने से पहले।\nऔर ज़्यादातर मुसीबत plugins से आती है। Patchstack ने 2025 में WordPress ecosystem में 11,334 नई कमज़ोरियाँ गिनीं। “91% of new vulnerabilities were found in plugins, and 9% were found in themes. There were only 6 vulnerabilities reported in the WordPress core.”10 लगभग आधी कमज़ोरियों का सार्वजनिक होने तक कोई fix नहीं था, और जिन पर हमलावरों की नज़र थी, उनके बड़े पैमाने पर exploit होने का median समय पाँच घंटे था10।\nयह साइट internet पर क्या रखती है यह ब्लॉग 6,343 फ़ाइलें है। यह रही पूरी, क़िस्म के हिसाब से:\nफ़ाइल की क़िस्म संख्या यह क्या है .html 3,486 पेज, पाँच भाषाओं में .xml 1,576 RSS feeds और sitemaps .svg 1,181 diagrams, covers, icons .png 46 screenshots .json 10 search index और build stamps .js 4 छोटी scripts जो आपके browser में चलती हैं, server पर नहीं .css, fonts और बाक़ी 40 styling, और पोस्ट के साथ जुड़ी फ़ाइलें Server पर execute होने वाली 0 इसमें कुछ .py और .sh फ़ाइलें भी हैं। ये पोस्ट के साथ जुड़ी scripts हैं जिन्हें पाठक डाउनलोड करते हैं, और server इन्हें text के रूप में भेजता है। Server पर इन्हें कुछ नहीं चलाता। Server पर इन्हें चलाने के लिए कुछ है ही नहीं।\nयह Cloudflare पर static assets के रूप में deploy होती है, बिना किसी Worker script के। Deploy configuration में कोई entry point नहीं है, और Cloudflare का documentation बताता है कि इसका क्या मतलब है: “The main key is optional for assets-only Workers.”11 जब माँगा गया path किसी फ़ाइल से मेल खाता है, “that file will be served”, Worker code चलाए बिना, और “If no Worker script is present, a 404 Not Found response is returned.”12 इसकी कोई क़ीमत भी नहीं है: “Requests to static assets are free and unlimited.”13\nCloudflare एक चुनाव है, ज़रूरत नहीं। Output फ़ाइलों का एक फ़ोल्डर है, और कोई भी HTTPS server जो फ़ाइल भेज सके, उसे परोस सकता है: nginx, Caddy, सिर्फ़ static फ़ाइलें परोसने वाला Apache, या CDN के पीछे एक object storage bucket। Links relative हैं, तो वही build domain root से या किसी subdirectory से बिना बदलाव के चलता है; इसे built साइट को /preview/ के नीचे परोसकर और छह पेजों के सभी 592 local references resolve होने की पुष्टि करके जाँचा गया था। Host बदलना एक फ़ोल्डर कॉपी करना है। Cloudflare से जुड़ा अकेला हिस्सा _headers फ़ाइल है; कहीं और, वही headers server की अपनी configuration में जाते हैं। जो चीज़ साथ जाती है वही असली गुण है। जो भी इसे परोसे, उसे सिर्फ़ फ़ाइलें भेजनी हैं, तो उसे कभी आपका code चलाना नहीं पड़ता।\nतो live साइट ऐसे जवाब देती है:\n$ for m in POST PUT DELETE; do curl -s -o /dev/null -w \u0026#34;$m %{http_code}\\n\u0026#34; -X $m https://blogs.damiendye.uk/en/; done POST 405 PUT 405 DELETE 405 $ for p in wp-login.php xmlrpc.php wp-admin/ wp-json/; do curl -s -o /dev/null -w \u0026#34;%{http_code} $p\\n\u0026#34; https://blogs.damiendye.uk/$p; done 404 wp-login.php 404 xmlrpc.php 404 wp-admin/ 404 wp-json/ कुछ जवाब नहीं देता। यही डिज़ाइन है।\nSecurity headers हर फ़ाइल के साथ repository की एक सादी text _headers फ़ाइल से जाते हैं, जिसे Cloudflare deploy पर पढ़ता है14। Content Security Policy हर script, style, image, font और connection को इसी एक origin तक बाँध देती है। उसकी कमी के बारे में मैं साफ़ बात कहूँगा: script-src और style-src में अब भी 'unsafe-inline' है, क्योंकि theme पेज में कुछ छोटी scripts लिख देती है। उस फ़ाइल पर यही बाक़ी काम है, और repository में ठीक इसी रूप में लिखा हुआ है।\nऔर publish करने के लिए किसी दरवाज़े की ज़रूरत नहीं। WordPress पर publish करना HTTP पर एक write है: editor, REST API और XML-RPC इसीलिए हैं क्योंकि पोस्ट server तक ऐसे ही पहुँचती हैं, और इनमें से हर एक अंदर आने का रास्ता है। यहाँ, मैं पोस्ट एक text फ़ाइल के रूप में लिखता हूँ और Git repository में push करता हूँ, और build तैयार फ़ाइलों को Cloudflare की deploy API से upload करता है। साइट परोसने वाली कोई चीज़ web से write नहीं लेती, क्योंकि किसी को इसकी ज़रूरत नहीं। Repository भी private है। मेरे credentials के बिना GitHub से उसे माँगिए और जवाब 404 है, तो source, drafts और history भी internet पर नहीं हैं।\nAttack surface एक गिनती है, एहसास नहीं OWASP attack surface को “the sum of all paths for data/commands into and out of the application, and the code that protects these paths”15 के रूप में परिभाषित करता है, और कहता है कि इसे छोटा करने का तरीक़ा है “turning off features and interfaces that aren\u0026rsquo;t being used”15। UK का National Cyber Security Centre इसे और सीधे कहता है: “If would-be attackers can\u0026rsquo;t reach an interface, they can\u0026rsquo;t attack it.”16 उसकी Cyber Essentials योजना इसे एक ज़रूरत बना देती है: “remove or disable unnecessary software (including applications, system utilities and network services)”17।\nतो रास्ते गिनिए, कितने हैं इससे नहीं, वे क्या हैं इससे:\nअंदर या बाहर का रास्ता WordPress Static site login और पासवर्ड का अंदाज़ा लगाना wp-login.php, XML-RPC कोई नहीं admin interface /wp-admin/, एक code editor के साथ कोई नहीं programmable API REST और XML-RPC, writes के साथ कोई नहीं हर request पर server-side code core, theme, हर plugin कोई नहीं database हाँ, ऊपर की हर चीज़ से पहुँच में कोई नहीं server पर लिखा जा सकने वाला storage uploads, और stock image में, सब कुछ कोई नहीं visitors से चलने वाले scheduled jobs page load पर wp-cron.php कोई नहीं third-party code जिसे patch करते रहना है हर plugin और theme, server पर build tools, server से बाहर चुराया गया session हमलावर को क्या देता है साइट login करने के लिए कुछ नहीं नौ पंक्तियाँ। इनमें से एक भी server पर code नहीं चलाती। हर एक की वजह एक ही है। काम किसी के पेज माँगने से पहले हो चुका था।\nआख़िरी से पहले वाली पंक्ति ईमानदार पेच है, और इस पोस्ट का बाक़ी हिस्सा उसी के बारे में है। Static site भी code चलाती है। बस वह उसे कहीं और, एक बार, publish करने से पहले चलाती है।\nHugo build को ईमानदार कैसे रखता है Hugo “a static site generator written in Go”18 है, तो build करने वाला program ख़ुद memory safe और compiled है, जो PHP वाली पोस्ट के बाद मायने रखता है। उसका security पेज रेखा ठीक वहीं खींचता है जहाँ यह पोस्ट: output “runs directly in the browser”, पर “during development and site building, the hugo executable itself is the runtime environment.”19 और परोसने के बारे में, साफ़: “We have no online production server”19। अच्छा है।\nBuild के अंदर, यह default रूप से कसकर बंद है। “Hugo\u0026rsquo;s built-in security policy, which restricts access to os/exec, remote communication, and similar operations, is configured via allowlists. By default, access is restricted.”20\nHugo का default यह क्या रोकता है “No arbitrary commands”19 कोई template मशीन पर shell command नहीं चला सकता exec.allow सिर्फ़ Sass, Go, Git, Node और PostCSS तक सीमित20 सिर्फ़ नाम वाले tools, तय flags के साथ funcs.getenv सिर्फ़ ^HUGO_ और ^CI$ तक सीमित20 templates environment से आपके secrets नहीं पढ़ सकते remote fetches IP-address और localhost hosts को ठुकराते हैं20 कोई template आपके अपने network में नहीं पहुँच सकता modules की go.sum से जाँच19 छेड़छाड़ की गई dependency से build फ़ेल होता है यह साइट इनमें से एक को जान-बूझकर चौड़ा करती है। यह funcs.getenv में CI commit variables जोड़ती है, ताकि /en/version.json पर build stamp दर्ज कर सके कि live साइट किस commit से बनी। यह सोच-समझकर लिया और लिखा गया फ़ैसला है, जो allowlist का मक़सद ही है। इसलिए यह कोई छेद नहीं है। यह एक फ़ैसला है।\nजोखिम कहाँ जाता है: build Server हटा दीजिए और जोखिम ग़ायब नहीं होता। वह उस चीज़ पर चला जाता है जो फ़ाइलें बनाती है। SLSA framework दोनों ख़तरों के ठीक नाम देता है: एक “build integrity threat”, जहाँ हमलावर “behavior to an artifact without changing its source code” डाल देता है, और एक “dependency threat”, “compromising some other artifact that the former depends on at build time” के ज़रिए21।\nCode कहाँ चलता है: WordPress, यह साइट, और offline build CODE कहाँ चलता है PUBLIC तक क्या पहुँचता है WordPress public server, हर request पर PHP, plugins, database यह साइट Cloudflare का build container, हर push पर सिर्फ़ static फ़ाइलें Offline बना आपकी अपनी मशीन, एक बार सिर्फ़ static फ़ाइलें build अब भी Hugo, theme और अपनी मशीन पर भरोसा करता है हर model में code कहाँ चलता है। WordPress इसे हर visitor के लिए public server पर चलाता है। यह साइट इसे हर push पर एक बार Cloudflare के build container में चलाती है। Offline build होने पर यह एक बार आपकी अपनी मशीन पर चलता है। यह साइट बीच वाली पंक्ति में है, और मैं इसका उल्टा दिखाने वाला नहीं हूँ। यह repository में हर push पर Cloudflare के build container में बनती है। वह container वह server नहीं है जो आपको जवाब देता है, और build ख़त्म होते ही वह चला जाता है। पर build चलने तक, साइट पर पहुँचने वाली हर चीज़ के लिए उस पर भरोसा किया जाता है।\nऔर build में दो कमियाँ थीं, दोनों मुझे यह पोस्ट लिखते समय मिलीं। एक ठीक हो चुकी है। एक चुनाव है।\nकमी यह क्यों मायने रखती है स्थिति Hugo binary भरोसे पर ली जाती थी: script के अपने download में checksum जाँच नहीं थी, और CI में वह download छोड़कर Cloudflare की build image में install की गई कॉपी इस्तेमाल करती थी बदली गई binary जो चाहे बना देती ठीक हुई, 23 अक्टूबर 2026: build अब हमेशा Hugo ख़ुद download करता है, उसे release के प्रकाशित SHA-256 से जाँचता है22, और मेल न खाने पर build करने से इनकार करता है theme हर build पर अपनी upstream master branch के पीछे चलती है upstream में बदलाव यहाँ बिना किसी commit के live साइट बदल सकता है खुली है, चुनाव से; उपाय है इसे किसी commit पर pin करना, या go.sum से ढके Hugo module में ले जाना19 पहली वाली उस तरह की चीज़ है जो सिर्फ़ अपनी build script लाइन-दर-लाइन पढ़कर मिलती है। Script version जाँचती थी। पर version string वह है जो binary अपने बारे में कहती है। वह bytes के बारे में कुछ साबित नहीं करती। अब bytes जाँचे जाते हैं:\nFetching Hugo Extended 0.167.0... Hugo verified: sha256 0163f5c3deddac1f494a1629ddc40c65d18de9d5794facd98f7f96ac2c7d8957 और उसी tarball की एक कॉपी, जिसमें एक byte जोड़ा गया है, ठुकरा दी जाती है:\nRefusing to build: hugo_extended_0.167.0_linux-amd64.tar.gz does not match the release checksum expected 0163f5c3deddac1f494a1629ddc40c65d18de9d5794facd98f7f96ac2c7d8957 got 92682d765d9d34bc53d6f818d56e598d34b5b8267a1cc3b9971da0f53c792251 Theme एक सोचा-समझा सौदा है, reproducibility के बदले नयापन, और इसी रूप में लिखा हुआ है। पर यह ठीक वही dependency threat है जिसका SLSA वर्णन करता है, और ईमानदारी इसे कह देने में है। किसी भी कमी ने live साइट को कभी किसी visitor के सामने उजागर नहीं किया। दोनों build पर किया गया भरोसा थीं, और मैं चाहूँगा कि उन्हें ख़ुद सूची में रखूँ, बजाय इसके कि कोई पाठक उन्हें ढूँढे।\nChecksum की भी एक सीमा है। वह साबित करता है कि आपने जो फ़ाइल download की, वह release पेज वाली ही फ़ाइल है। वह यह साबित नहीं करता कि उसे वहाँ किसने रखा: release की फ़ाइलों में कोई signature नहीं है22। यह integrity है, authenticity नहीं, और project आज इससे ज़्यादा कुछ नहीं देता।\nइसे offline, एक बार build करना सबसे सख़्त रूप build को किसी और की मशीन से हटा देता है। अपनी मालिकी और नियंत्रण वाली मशीन पर build कीजिए, जो बनाया उसे जाँचिए, और सिर्फ़ तैयार फ़ाइलें upload कीजिए। Internet पर कुछ भी आपका build नहीं चलाता, और host को output के अलावा कभी कुछ नहीं दिखता।\nकदम क्यों ठीक वही Hugo release install कीजिए और उसे प्रकाशित SHA-256 से जाँचिए आपको पता है कि आपकी साइट किस binary से बनी theme और हर module को commits पर pin कीजिए, और go.sum commit कीजिए build तभी बदलता है जब आप उसे बदलें एक साफ़ output directory में build कीजिए, --buildDrafts के बिना जो आप publish करते हैं, वही है जो आप publish करना चाहते थे भेजने से पहले output में कोई भी executable चीज़ ढूँढिए static site में ऐसा कुछ नहीं होना चाहिए जिसे server चलाए सिर्फ़ output directory upload कीजिए, सिर्फ़ deploy वाले credential से host के पास कभी आपका source, आपके tools या आपकी history नहीं होती ऐसे host से परोसिए जो static फ़ाइलों के लिए कोई code नहीं चलाता serve के समय patch करने के लिए कुछ बचता ही नहीं यह कुछ commands हैं, कोई project नहीं। और इससे बदल जाता है कि आपको नुक़सान पहुँचाने के लिए हमलावर को कहाँ होना पड़ेगा। WordPress साइट बदलने के लिए उन्हें server पर एक request चाहिए। इस तरह की साइट बदलने के लिए उन्हें आपकी build मशीन चाहिए। यह कहीं छोटा निशाना है, और ऐसा है जिसका plug आप निकाल सकते हैं।\nदस हज़ार पेज, नापे हुए हर request पर code चलाने की एक क़ीमत attack surface है। बिजली दूसरी है, और डिस्क भी। तो मैंने दोनों पर एक जैसा load डाला: होम पेज के लिए 10,000 requests, एक बार में दस, उसी लैपटॉप से, localhost पर सादे HTTP पर ताकि किसी भी तरफ़ TLS का ख़र्च न हो। एक तरफ़ लैब वाला stock WordPress। दूसरी तरफ़, इस साइट की असली built फ़ाइलें एक container में nginx से परोसी गईं, क्योंकि Cloudflare के edge पर मैं meter नहीं लगा सकता। हर run से पहले और बाद मैंने हर container का इस्तेमाल किया CPU time उसके cgroup से पढ़ा, हर एक के तीन runs।\n10,000 पेज requests Stock WordPress 7.1.3 nginx पर यह साइट CPU time, तीन runs 409 s, 530 s, 575 s 0.15 s, 0.18 s, 0.19 s प्रति पेज CPU time 41 से 57 ms 15 से 19 µs प्रति सेकंड पेज 168 से 236 23,679 से 28,044 Load के दौरान memory 302 से 310 MiB, और database के लिए 145 MiB 15 MiB फ़ेल हुई requests 0 0 यानी उन्हीं दस हज़ार पेजों के लिए दो से साढ़े तीन हज़ार गुना processor time। उन CPU-seconds में से हर एक दीवार से खींचा गया और गर्मी में बदल गया। Static वाली तरफ़ ने सभी 10,000 पेज लगभग उतने processor time में परोस दिए जितना WordPress ने अपने तीन या चार पेजों पर ख़र्च किया।\nडिस्क भी यही कहानी कहती है:\nडिस्क पर और memory में Stock WordPress यह साइट इसे चलाने के लिए container images 803 MB WordPress, 334 MB MariaDB 166 MB nginx, या Cloudflare पर कुछ भी नहीं साइट ख़ुद 115 MB web root, एक ख़ाली साइट के लिए 114 MB, पाँच भाषाएँ, हर पोस्ट और diagram Database 163 MB फ़ाइलें, जिनमें 0.72 MB data कोई नहीं ख़ाली बैठे memory 170 MiB, और database के लिए 139 MiB 13 MiB WordPress के आँकड़े एक sample पोस्ट वाले ताज़ा install के हैं। Static आँकड़े यह पूरा ब्लॉग हैं।\nWordPress के साथ इंसाफ़ करें तो, एक full-page cache plugin CPU का बहुत सा फ़ासला पाट देगा। पर देखिए कि वह उपाय क्या है। वह हर पेज की एक static कॉपी है, PHP के आगे रखी हुई ताकि PHP न चले। इलाज वही चीज़ है जिसकी यह पोस्ट वकालत करती है, उस चीज़ के किनारे बोल्ट से लगाई हुई जिसके ख़िलाफ़ यह पोस्ट है, और उसके पीछे login पेज, API और database सब अब भी मौजूद हैं।\nआप क्या छोड़ते हैं ईमानदार सूची, क्योंकि static site हर काम का सही औज़ार नहीं है:\nआप छोड़ते हैं यह साइट इसकी जगह क्या करती है comments कोई नहीं; पाठक email कर सकते हैं server-side search साइट के साथ बना एक JSON index, आपके browser में खोजा जाता है server को post करने वाले forms कोई नहीं logins और members\u0026rsquo; areas कोई नहीं; यहाँ सब कुछ public है browser में editing पोस्ट एक git repository में text फ़ाइलें हैं build के बिना तुरंत publish एक build में एक-दो मिनट लगते हैं अगर आपको दुकान, members\u0026rsquo; area या user accounts चाहिए, तो आपको server पर चलने वाली कोई चीज़ चाहिए, और यह पोस्ट आपसे इसके उल्टा नहीं कह रही। यह आपसे यह कह रही है कि एक ब्लॉग, एक brochure साइट या documentation के एक सेट को इनमें से किसी की ज़रूरत नहीं। ज़्यादातर WordPress साइटें इन तीन में से एक हैं। ईमानदारी से तय कीजिए कि आपकी कौन सी है।\nएक बार build कीजिए और उसे बेजान परोसिए जो बात मुझे खटकती है, वह यह है कि कितना जोखिम बिना किसी वजह के ढोया जाता है। एक कंपनी पेज जो साल में दो बार बदलता है, एक database, एक login पेज, 62 writable routes वाली API और एक scheduled-job runner चलाता है जो हर बार किसी के आने पर चलता है। यह सब उसी HTML को बनाने के लिए जो उसने कल बनाई थी। हर दिन।\nयह कोई तकनीकी फ़ैसला नहीं है। यह एक आदत है, और ऐसी आदत जिसका कोई बिल बनाता है। Hosting, plugins, security add-ons, गड़बड़ होने पर सफ़ाई। इसकी क़ीमत एक managed WordPress plan के रूप में लगाई जाती है। इसका असली ख़र्च है उनमें से हर रास्ता खुला रखना, patch करना और उस पर नज़र रखना, ऐसी सामग्री के लिए जो फ़ाइलों का एक फ़ोल्डर हो सकती थी।\nजिस standard पर मैं इस साइट को रखता हूँ, वह सीधा है। जिसकी ज़रूरत नहीं, वह नहीं चलता। हर कमी वहाँ लिखी जाती है जहाँ अगला व्यक्ति उसे पाएगा, build की दोनों कमियों समेत, और उनमें से एक पहले ही बंद हो चुकी है। यह चालाक होने के बारे में नहीं है। Standard वह चीज़ है जिसे आप तब निभाते हैं जब कोई देख नहीं रहा, और कोई ब्लॉग को तब तक नहीं देखता जब तक वह किसी और का code परोसना शुरू न कर दे।\nतो एक बार build कीजिए, जो बनाया उसे जाँचिए, और उसे बेजान परोसिए। जो कुछ भी हमले के लिए बचा है, वह आपकी मशीन पर है, जहाँ उसे होना चाहिए।\nPHP — News archive 2026, 21st October — “We consider the risk highest for mod_php, with a demonstrated exploit where an unauthenticated request can trigger the attack before any application code runs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress 4.7 release notes — “WordPress 4.7 comes with REST API endpoints for posts, comments, terms, users, meta, and settings.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress REST API Handbook — Frequently Asked Questions — “You should not disable the REST API; doing so will break WordPress Admin functionality that depends on the API being active.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress 3.5 release notes — “Enable XML-RPC by default, remove Writing Settings option”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress REST API Handbook — “content that is public on your site is generally publicly accessible via the REST API”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress REST API reference — Users — GET /wp/v2/users, default context “view”; view context में name, slug, link, avatar_urls।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Brute force attacks — “xmlrpc.php is a frequent brute‑force target”; “Apply rate limits to /wp-login.php and /xmlrpc.php globally.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress Plugin Handbook — Cron — “WP-Cron works by checking, on every page load, a list of scheduled tasks to see what needs to be run.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Hardening WordPress — Dashboard editor “is often the first tool an attacker will use if able to login, since it allows code execution.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — State of WordPress Security in 2026 — 2025 का data: 11,334 नई कमज़ोरियाँ; 91% plugins, 9% themes, core में 6; 46% सार्वजनिक होने तक ठीक नहीं; बड़े पैमाने पर exploit होने में median 5 घंटे।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Wrangler configuration — “The main key is optional for assets-only Workers.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Workers static assets — मेल खाने वाली फ़ाइल “will be served”, Worker code चलाए बिना; “If no Worker script is present, a 404 Not Found response is returned.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Static assets billing and limitations — “Requests to static assets are free and unlimited.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Static assets headers — headers “a plain text file called _headers” से सेट होते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOWASP — Attack Surface Analysis Cheat Sheet — “the sum of all paths for data/commands into and out of the application, and the code that protects these paths”; इसे “turning off features and interfaces that aren\u0026rsquo;t being used” से घटाइए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Making compromise difficult, 2.2 Reduce attack surface — “If would-be attackers can\u0026rsquo;t reach an interface, they can\u0026rsquo;t attack it.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Cyber Essentials: Requirements for IT infrastructure v3.2 — “remove or disable unnecessary software (including applications, system utilities and network services)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo — Introduction — “Hugo is a static site generator written in Go, optimized for speed and designed for flexibility.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo — Security model — “during development and site building, the hugo executable itself is the runtime environment”; “We have no online production server”; “No arbitrary commands”; go.sum checksum मेल न खाने पर build फ़ेल होता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo — Configure security — “By default, access is restricted”; default exec, getenv और http allowlists।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSLSA v1.2 — Threats — build integrity threat: “behavior to an artifact without changing its source code”; dependency threat: “compromising some other artifact that the former depends on at build time”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHugo v0.167.0 release — 36 assets, जिनमें hugo_0.167.0_checksums.txt (SHA-256) है; कोई signature, SBOM या attestation फ़ाइल नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/security/a-static-site-has-nothing-to-break-into/","summary":"यह ब्लॉग Hugo से बनता है और 6,343 सादी फ़ाइलों के रूप में परोसा जाता है, किसी भी request पर मेरा कोई code नहीं चलता। इसके सामने, podman लैब में नापा गया एक stock WordPress 7.1.3: 133 REST routes, जिनमें 62 writes लेते हैं, 80 XML-RPC methods, 1,514 PHP फ़ाइलें, उसकी 3,785 में से हर फ़ाइल web server के अपने user से लिखी जा सकती है, और एक database अकाउंट जिसके पास हर privilege है। यह पोस्ट दोनों attack surfaces गिनती है, बताती है कि Hugo का अपना security model build के समय क्या करता है, खुलकर मानती है कि serve के समय कुछ न चलने पर जोखिम कहाँ जाता है, जिसमें इस साइट के build की दो कमियाँ भी हैं, जिनमें से एक अब ठीक हो चुकी है, और बताती है कि static site को offline, एक बार कैसे build करें और सिर्फ़ तैयार फ़ाइलें upload करें।","title":"Static Site में घुसने के लिए कुछ है ही नहीं"},{"content":"PHP2Shell, इसी हफ़्ते 21 अक्टूबर 2026 को PHP प्रोजेक्ट ने एक साथ चार रिलीज़ निकालीं, 8.5.12, 8.4.27, 8.3.36 और 8.2.35, ताकि खुद interpreter में मिली दो critical खामियाँ ठीक हों1। WordPress में नहीं। किसी plugin में नहीं। PHP में।\nदोनों को CVSS 4.0 पर 9.2 रेटिंग मिली है। दोनों बिना लॉगिन remote code execution देती हैं। जिन researchers ने इन्हें ढूँढा, उन्होंने दायरा सीधे शब्दों में बताया: “Every PHP version released in the last decade is affected by at least one of these vulnerabilities, going back to version 5.4.”2\nबाकी बात PHP प्रोजेक्ट की अपनी advisory कहती है:\nAdvisory क्या कहती है आपके लिए इसका मतलब “unauthenticated remote code execution” आपकी साइट पर किसी को अकाउंट की ज़रूरत नहीं “risk highest for mod_php” सबसे आम पुराना Apache सेटअप सबसे बुरी हालत में है “before any application code runs” आपका अपना कोड, कितना भी सावधान हो, कुछ नहीं कर पाता “There are no complete mitigations, updating is the only safe choice.” कोई config बदलाव आपको नहीं बचाता “PHP 8.1 and older no longer receive updates” वेब के एक बड़े हिस्से को कोई fix मिलता ही नहीं और किसी को बताए जाने से पहले ही इसका इस्तेमाल हो रहा था। Amazon के honeypot नेटवर्क ने 17 अक्टूबर को एक कोशिश दर्ज की, खुलासे से चार दिन पहले3। watchTowr ने 21 तारीख को इसे असली हमलों में देखा, और पैच के कुछ ही घंटों में काम करने वाले proof of concept सार्वजनिक हो गए4।\nदोनों बग memory-safety बग हैं। एक इस बात में है कि memory ख़त्म होने के बाद interpreter कैसे सफ़ाई करता है। दूसरा use-after-free है: एक request की memory free की जाती है और फिर दोबारा पढ़ी जाती है, और उसी worker पर अगली request उसे देख सकती है56। यह दूसरा वाला याद रखिए। यह आगे फिर आएगा।\nइसमें कुछ भी नया नहीं है। यही इस पोस्ट की बात है। PHP2Shell किसी सावधान भाषा के साथ हुई दुर्घटना नहीं है। यह लगभग तीस साल लंबे रिकॉर्ड का ताज़ा पन्ना है, और उसका हर आँकड़ा सार्वजनिक है।\nएक process में सब कुछ नवंबर 2014 से अप्रैल 2017 तक मैं Pulsant के cloud और hosting प्लेटफ़ॉर्म पर third-line Linux इंजीनियर था। उस काम का एक हिस्सा e-commerce ग्राहकों के लिए PHP-FPM environment सेट करना और उन्हें तेज़ चलाने के लिए tune करना था।\nPHP में सेंध आम बात थी। कभी-कभार नहीं। आम। और उनकी जड़ में दो कारण थे: ख़राब डिप्लॉयमेंट, और front end और back end के बीच कोई बँटवारा नहीं।\nदूसरे वाले को भाषा ही default बना देती है। एक आम PHP साइट एक process होती है। पेज template, business logic और SQL सब एक ही request handler में रहते हैं, अक्सर एक ही फ़ाइल में। वह process एक ही operating system user के रूप में चलता है। वह डेटाबेस पासवर्ड पढ़ सकता है, क्योंकि पासवर्ड कोड के बगल वाली फ़ाइल में है। और आम तौर पर वह अपने web root में लिख भी सकता है, क्योंकि uploads और updates ऐसे ही काम करते हैं।\nएक process में सब कुछ, बनाम अपनी-अपनी सीमाओं वाले tiers आम PHP डिप्लॉयमेंट अपनी-अपनी सीमाओं वाले tiers इंटरनेट एक worker, एक OS user HTML templates business logic SQL, उसी फ़ाइल में बना wp-config.php: DB पासवर्ड uploads/: लिखने योग्य खुद कोड: लिखने योग्य एक बग, सब तक पहुँच डेटाबेस, पूरे अधिकार इंटरनेट front end पेज बनाता है, credentials नहीं back end service अपना user, अपना कोड नहीं लिख सकता सिर्फ़ एक सीमित API डेटाबेस, least privilege बाएँ, आम PHP साइट: सब कुछ एक worker में, एक user, सब कुछ से बस एक बग दूर। दाएँ, अपनी-अपनी सीमाओं वाले tiers: front end के पास कोई credentials नहीं, और back end खुद को दोबारा नहीं लिख सकता। यह PHP के डिप्लॉय होने के बारे में मेरी राय नहीं है। यह वही है जो PHP और WordPress खुद लिखते हैं।\nस्रोत वह क्या कहता है PHP manual, Apache module जब PHP Apache module के रूप में चलता है तो “it inherits Apache\u0026rsquo;s user permissions”, और “a malicious script could access and modify the database, even without a username and password”7 PHP manual, Apache install “The mod_php approach embeds PHP directly into every Apache httpd worker process.”8 WordPress, wp-config यह फ़ाइल “is located in the root of your WordPress file directory and contains … database connection information”9 WordPress, file permissions wp-config.php “is initially created with 644 permissions, and it\u0026rsquo;s a hazard to leave it like that”10 WordPress, hardening डेटाबेस user को “only needs” SELECT, INSERT, UPDATE और DELETE, फिर “it is NOT recommended to revoke these privileges”11 वह आख़िरी पंक्ति फिर से पढ़िए। vendor आपको बताता है कि least privilege कैसा दिखेगा, फिर कहता है कि ऐसा मत कीजिए, क्योंकि updates schema बदलते हैं।\nबँटे हुए मॉडल से तुलना कीजिए। front end पेज बनाता है और उसके पास कोई राज़ नहीं होता। back end एक अलग service है, अपने user, एक सीमित API और अपने ही कोड पर लिखने की कोई अनुमति के बिना। डेटाबेस अकाउंट वही कर सकता है जो back end को चाहिए, उससे ज़्यादा कुछ नहीं। OWASP की गाइडेंस यही बात अपने शब्दों में कहती है: “The application\u0026rsquo;s backend database should be isolated from other servers”, “a dedicated internal network segment” पर12। PHP का अपना manual कहता है कि applications को “should never connect to the database as its owner or a superuser”13।\nइसमें कुछ भी अनोखा नहीं है। एक सही प्रक्रिया ऐसी ही दिखती है। यहाँ यह क्यों मायने रखता है, वह सीधी बात है। बँटे हुए मॉडल में front end का बग हमलावर को एक front end दिलाता है। आम PHP मॉडल में कहीं भी एक बग उन्हें templates, कोड, credentials और डेटा, सब एक बार में दिला देता है।\nPHP-FPM मदद करता है, और PHP की अपनी install गाइड अब इसे Apache के तहत PHP चलाने का सुझाया गया तरीका बताती है8। इसके pools workers को “with different uid/gid/chroot/environment” शुरू कर सकते हैं14। लेकिन हर साइट का एक pool भी आख़िर एक process में एक साइट ही है, जिसके पास उस साइट का सब कुछ है। यह ग्राहकों के बीच बेहतर दीवार है। यह application के अंदर की दीवार नहीं है।\nनीचे के हर सेक्शन में यह तस्वीर ध्यान में रखिए। रिकॉर्ड का हर बग इसी process पर गिरता है।\nउनतीस साल के CVE National Vulnerability Database PHP interpreter के ख़िलाफ़ दर्ज हर CVE को एक ही product identifier, cpe:2.3:a:php:php के तहत रखता है। उससे पूछिए, और जवाब है 75715।\nहर साल PHP interpreter CVE, memory-corruption हिस्से के साथ PHP interpreter के ख़िलाफ़ दर्ज CVE, प्रकाशन के साल के हिसाब से सभी CVE: 757 memory corruption: कम से कम 288 40 80 120 114 120 1997 2002 2007 2012 2016 2021 2026 प्रकाशित होने के साल के हिसाब से PHP interpreter के ख़िलाफ़ हर CVE, ऊपर memory-corruption का हिस्सा। 23 अक्टूबर 2026 को NVD API से गिना गया। यह गिनती सिर्फ़ interpreter की है। न WordPress, न Drupal, न plugins, न frameworks। बस वह प्रोग्राम जो आपका PHP चलाता है।\nअवधि CVE Memory corruption क्या चल रहा था 1997 से 2006 93 3 शुरुआती वेब, वर्गीकरण बहुत कम 2007 114 19 Month of PHP Bugs 2008 से 2014 187 54 लगातार चलता सिलसिला 2015 से 2017 208 122 unserialize और memory वाले साल 2018 से 2023 100 63 कम, फिर भी ज़्यादातर memory 2024 से 2026 55 27 PHP2Shell इसी दौर में आता है कुल 757 288 दो उछाल साफ़ दिखते हैं। पहला मार्च 2007 है, जब PHP security टीम के एक पूर्व सदस्य ने Month of PHP Bugs चलाया, जिसमें Zend Engine, PHP core और उसके extensions की खामियाँ “on a day by day basis” सामने रखी गईं16। उन्होंने PHP Security Response Team की स्थापना की थी, फिर उसे छोड़ दिया, और कारण बताया: “I dislike the ways bugs are handled”17। जब किसी प्रोजेक्ट की security टीम का संस्थापक बाहर निकलकर रोज़ एक बग प्रकाशित करता है, तो इससे पता चलता है कि अंदर क्या चल रहा था।\nदूसरा उछाल 2016 है: 120 CVE, जिनमें 65 memory corruption। इस पर आगे और।\nmemory वाला आँकड़ा न्यूनतम है, अनुमान नहीं। NVD कई पुराने बगों को weakness type देने के बजाय “Other” टैग करता है, जिनमें अगले सेक्शन के कुछ use-after-free भी हैं। असली आँकड़ा ज़्यादा है। मैं वही इस्तेमाल कर रहा हूँ जो दिखा सकता हूँ।\nइंजन C में लिखा है memory-safety वाली बात यहाँ सावधानी से रखनी होगी, क्योंकि कोई PHP डेवलपर बिल्कुल सही कहेगा कि उनका कोड कभी malloc नहीं बुलाता। PHP scripts हाथ से memory नहीं संभालते। आप PHP में वैसा buffer overflow नहीं लिख सकते जैसा C में लिख सकते हैं।\nआपको लिखने की ज़रूरत ही नहीं। आपका script चलाने वाला interpreter C में लिखा है, और उसके extensions भी C में लिखे हैं। आपकी साइट को मिलने वाला हर अविश्वसनीय byte, हर header, हर upload, हर form field, हर cookie, आपके कोड तक पहुँचने से पहले उसी C से parse होता है। जब वह C गलत होता है, तो आपके सावधान PHP का कोई मतलब नहीं रहता। PHP2Shell ने यह साबित कर दिया: advisory कहती है कि हमला “before any application code runs” चल सकता है1।\nरिकॉर्ड दिखाता है कि उस C ने क्या-क्या गलत किया है:\nCWE वर्ग यह क्या है PHP interpreter CVE CWE-119 memory buffer गलतियाँ, सामान्य 93 CWE-125 सीमा से बाहर पढ़ना 50 CWE-190 integer overflow 35 CWE-189 numeric गलतियाँ, पुराना टैग 33 CWE-416 free के बाद इस्तेमाल 27 CWE-787 सीमा से बाहर लिखना 26 CWE-476 null pointer dereference 20 security एजेंसियाँ जब memory safety की बात करती हैं तो इन्हीं वर्गों का मतलब होता है। नवंबर 2022 में NSA ने संगठनों को सलाह दी “to consider making a strategic shift from programming languages that provide little or no inherent memory protection, such as C/C++, to a memory safe language when possible”18। दिसंबर 2023 में CISA ने, जिसके सह-लेखकों में UK का National Cyber Security Centre भी था, इस पर एक आँकड़ा रखा: “two-thirds of reported vulnerabilities in memory unsafe programming languages still relate to memory issues”19।\nकोई भी दस्तावेज़ PHP का नाम नहीं लेता। उन्हें ज़रूरत नहीं। वे उस भाषा का नाम लेते हैं जिससे PHP बना है।\nसबसे बुरा दोहराया गया उदाहरण unserialize() है, वह function जो सहेजी गई string को वापस PHP objects में बदलता है। इसमें एक ही वर्ग का बग, एक ही जगह, एक से ज़्यादा बार आया है:\nCVE कहाँ NVD क्या दर्ज करता है CVE-2014-8142 process_nested_data unserialize में use-after-free20 CVE-2015-0231 वही function “exists because of an incomplete fix for CVE-2014-8142”21 CVE-2015-2787 __wakeup handling unserialize में use-after-free CVE-2016-5771 SPL, garbage collection के साथ unserialize में use-after-free22 CVE-2016-5773 ZipArchive, garbage collection के साथ unserialize में use-after-free PHP manual यह जानता है। इस function के पेज पर चेतावनी है: “Do not pass untrusted user input to unserialize() regardless of the options value of allowed_classes.”23 यानी एक भाषा आपको बता रही है कि उसका अपना एक built-in function उस चीज़ पर इस्तेमाल करना सुरक्षित नहीं जिसे ज़्यादातर वेब कोड दिन भर संभालता है।\nफिर PHP-FPM है, वह process manager जिसे PHP की अपनी install गाइड mod_php के बजाय सुझाती है। अक्टूबर 2019 में CVE-2019-11043 ने दिखाया कि “in certain configurations of FPM setup it is possible to cause FPM module to write past allocated buffers … opening the possibility of remote code execution”24। जिस configuration की बात थी वह nginx का एक आम सेटअप था। यह 24 अक्टूबर 2019 को ठीक हुआ25। CISA ने बाद में इसे असली हमलों में इस्तेमाल होने वाली vulnerabilities की अपनी catalogue में जोड़ा, ransomware अभियानों में इस्तेमाल के निशान के साथ26।\nPHP Foundation ने interpreter के source का एक ठीक-ठाक security audit करवाया, और इसका श्रेय उसे मिलना चाहिए। 10 अप्रैल 2025 को प्रकाशित नतीजों में 27 मुद्दे मिले, जिनमें 17 के security असर थे27। यह अच्छा तरीका है और इसे सामान्य होना चाहिए। साथ ही यह 17 और है, उस codebase के audit में जिस पर लगभग तीन दशक से सार्वजनिक बग रिपोर्टें आ चुकी थीं।\nभाषा ने एक मंज़िल ऊपर वही गलतियाँ कीं C एक परत है। उसके ऊपर की भाषा ने अपने डिज़ाइन में उसी तरह की गलती की: उस input पर भरोसा करना जिस पर भरोसा करने का कोई कारण नहीं था, और उसे रोकने में सालों लगाना।\nफ़ीचर यह क्या करता था default बंद या deprecated हटाया गया समय register_globals request parameters को script variables बना देता था 4.2.0 में बंद, 22 अप्रैल 200228 5.4.0, 1 मार्च 201229 दस साल magic quotes input को अपने आप escape करता था, और गलत तरीके से 5.3.0 में deprecated, 30 जून 2009 5.4.0, 1 मार्च 201230 तीन साल preg_replace /e replacement को PHP कोड की तरह चलाता था 5.5.0 में deprecated, 20 जून 201331 7.0.0, 3 दिसंबर 201532 ढाई साल allow_url_include include को नेटवर्क से कोड लाने देता था 7.4.0 में deprecated33 phar metadata फ़ाइल access पर अपने आप unserialise होता था 8.0 में ठीक34 0 == \u0026quot;foobar\u0026quot; true निकलता था 8.0 में ठीक35 register_globals अपनी अलग पंक्ति का हकदार है। सालों तक request का कोई भी parameter, मान लीजिए ?admin=1, आपके script में एक variable बन जाता था, और अगर आपका कोड $admin को set करने से पहले जाँचता था, तो हमलावर ने उसे आपके लिए पहले ही set कर दिया होता था। PHP manual ने खुद इसे बंद करने को “the most controversial change in PHP” कहा29। default बंद से पूरी तरह हटाने तक दस साल। प्रोजेक्ट ने इतने लंबे समय तक एक ऐसा फ़ीचर बर्दाश्त किया जिसे वह ख़तरनाक जानता था, क्योंकि उसे हटाने से साइटें टूटतीं।\nphar वाला मामला वही पैटर्न है, एक परत नीचे। 2018 में Sam Thomas ने Black Hat पर दिखाया कि phar:// path पर सामान्य फ़ाइल operations हमलावर का दिया metadata unserialise कर देते थे, जिससे unserialize() वाली समस्या उन functions तक पहुँच गई जिन्हें कोई ख़तरनाक नहीं मानता था36। 2020 के आख़िर में PHP 8.0 ने यह अपने आप करना बंद किया, “to fix potential security vulnerabilities due to object instantiation, autoloading, etc.”34।\nफिर type juggling। PHP का == तुलना से पहले types बदल देता है, इसलिए जो strings नंबर जैसी दिखती हैं उनकी तुलना नंबर की तरह होती है। जिस RFC ने PHP 8.0 में इसका एक हिस्सा ठीक किया, उसने सीधे कहा: “This results in many surprising comparison results, the most notable of which is that 0 == ‘foobar’ returns true.”35\nवह fix असली था। साथ ही अधूरा भी था। यह वही जाँच है, आधिकारिक php:7.4-cli और php:8.5-cli containers में चलाई गई, दूसरा वाला 8.5.12 है, यानी वही रिलीज़ जिसमें इस हफ़्ते PHP2Shell का पैच आया, दोनों आउटपुट साथ-साथ:\n$ php -r \u0026#39;var_dump(0 == \u0026#34;foobar\u0026#34;);\u0026#39; bool(true) # 7.4.33 bool(false) # 8.5.12 $ php -r \u0026#39;var_dump(\u0026#34;0e462097431906509019562988736854\u0026#34; == \u0026#34;0e830400451993494058024219903391\u0026#34;);\u0026#39; bool(true) # 7.4.33 bool(true) # 8.5.12 दो अलग strings, बराबर। दोनों 0e से शुरू होती हैं और आगे अंक हैं, इसलिए PHP दोनों को शून्य गुणा दस की किसी घात के रूप में पढ़ता है, और शून्य बराबर शून्य। दोनों MD5 hash जैसी दिखती हैं। सहेजे गए password hash की तुलना === या hash_equals() के बजाय == से कीजिए, और कोई भी input जिसका hash संयोग से इसी तरह शुरू होता हो, मेल खा जाएगा। यह सालों से दर्ज है। यह अब भी सबसे नई रिलीज़ में काम करता है।\nएक उदाहरण में पूरी भाषा यही है। एक fix जो आया, आधी समस्या पीछे छूट गई, और सुरक्षित तरीके के लिए आपको यह पता होना चाहिए कि एक अलग operator मौजूद है।\nलगभग हर साल एक shell किसी भी प्लेटफ़ॉर्म से पूछने लायक सवाल यह नहीं कि उसमें कितने बग रहे। सवाल यह है कि कितनी बार कोई बिना पासवर्ड और बिना किसी के कुछ क्लिक किए पूरा सर्वर ले सकता था।\nNVD हर CVE को score देता है। 757 को ठीक उसी score के लिए छाँटिए, नेटवर्क से हमला, कोई privileges नहीं, कोई user interaction नहीं, confidentiality और integrity पर ऊँचा असर, और आपको 172 मिलते हैं15।\nहर साल बिना लॉगिन पूरे कब्ज़े की रेटिंग, और हर साल पुष्ट इस्तेमाल पूरे remote कब्ज़े की रेटिंग, बिना लॉगिन, बिना user action PHP interpreter CVE, CVSS नेटवर्क, बिना privileges, बिना interaction, ऊँचा असर: 172 20 40 60 65 1997 2002 2007 2012 2016 2021 2026 पुष्ट इस्तेमाल: CISA KEV में PHP और PHP applications हर साल जोड़ी गई प्रविष्टियाँ, कुल 81; catalogue नवंबर 2021 में शुरू हुई 16 2021 16 2022 10 2023 8 2024 11 2025 20 2026 ऊपर: interpreter के वे CVE जिन्हें बिना लॉगिन और बिना user action पूरे कब्ज़े का score मिला। नीचे: हर साल CISA की असली हमलों वाली vulnerabilities की catalogue में जोड़े गए PHP और PHP applications। 172, उन 28 सालों में से 23 में जिनमें कोई भी PHP CVE है। सिर्फ़ पाँच ख़ाली हैं। अकेले 2016 में 65 हैं।\nseverity score एक रेटिंग है, सेंध नहीं। इसलिए तस्वीर का दूसरा हिस्सा CISA की Known Exploited Vulnerabilities catalogue है, जिसमें सिर्फ़ वही खामियाँ आती हैं जिनका असली इस्तेमाल पुष्ट हो26। 21 अक्टूबर 2026 तक उसकी 1,754 प्रविष्टियों में 81 खुद PHP या PHP में लिखे applications हैं:\nजोड़े जाने का साल PHP और PHP applications पूरी catalogue 2021 16 311 2022 16 555 2023 10 187 2024 8 186 2025 11 245 2026, 21 अक्टूबर तक 20 270 2026 पहले ही catalogue में PHP का सबसे बुरा साल है, और PHP2Shell अभी उसमें है भी नहीं। इस साल वालों में तीन खुद WordPress core में हैं: दो 21 जुलाई को जोड़े गए, और एक remote file inclusion 25 सितंबर को।\nransomware में इस्तेमाल के लिए ज्ञात KEV प्रविष्टियाँ क्या CVE-2019-11043 PHP-FPM buffer overflow CVE-2024-4577 PHP-CGI argument injection CVE-2021-3129 Laravel Ignition CVE-2018-7600, CVE-2018-7602 Drupal और catalogue PHP को बहुत कम गिनती है। यह US federal systems के इर्द-गिर्द बनी है और इसमें CVE के साथ पुष्ट इस्तेमाल चाहिए। इसमें WordPress plugin की 3 प्रविष्टियाँ हैं। WordPress plugin ecosystem ने अकेले 2025 में 11,334 vulnerabilities दर्ज कीं37। 81 वह हिस्सा है जो किसी आधिकारिक व्यक्ति ने लिखा।\nWordPress इसे कई गुना कर देता है WordPress सभी वेबसाइटों का 39.6% है, और उन साइटों का 58.3% जिनका content management system पहचाना जा सकता है38। जिन साइटों में यह दिखता है, उनमें 69.3% की server-side भाषा PHP है39। इसलिए PHP का रिकॉर्ड जो भी हो, WordPress उसे वेब के एक बहुत बड़े हिस्से तक पहुँचाता है, और फिर अपना रिकॉर्ड जोड़ता है।\nमुख्य समस्या core नहीं है। plugins हैं।\n2024 2025 WordPress ecosystem की नई vulnerabilities, Patchstack 7,96640 11,33437 plugins में 96% 91% core में 7 6 सार्वजनिक खुलासे तक ठीक नहीं हुईं 33% 46% बड़े पैमाने पर इस्तेमाल तक का median समय, सबसे ज़्यादा निशाना बने बग 5 घंटे Wordfence ने अपने डेटाबेस से 2024 के लिए 8,223 गिने, 2023 से 68% ज़्यादा, और पाया कि “Roughly 35% of the vulnerabilities disclosed in 2024 remain unpatched in 2025”41। अलग डेटाबेस, अलग कुल, एक जैसी शक्ल।\n2025 के आँकड़ों पर एक पल रुकिए। लगभग आधी vulnerabilities का सार्वजनिक होने तक developer की तरफ़ से कोई fix नहीं था। और जिन पर हमलावर सच में जाते हैं, उनमें खुलासे से बड़े पैमाने पर इस्तेमाल तक का median अंतर पाँच घंटे है। ज़्यादातर लोग हर पाँच घंटे में अपने plugin updates नहीं देखते। ज़्यादातर लोग देख ही नहीं सकते।\nplugin मॉडल ही गुणक है। किसी साइट की सुरक्षा उस पर लगे किसी भी चीज़ के सबसे लापरवाह लेखक पर टिकी होती है, और Wordfence ने पाया कि खामी बताए जाने पर “over one third of developers are unreachable or unresponsive”41। Patchstack ने 2024 में 1,614 plugins और themes गिने जिन्हें ऐसे security मुद्दों के कारण repository से हटाया गया जिन्हें किसी ने ठीक नहीं किया40। और एक-process मॉडल के कारण हर plugin साइट के पूरे अधिकारों के साथ चलता है।\nघटनाओं की सूची लंबी है। ये वे हैं जिनके पीछे प्राथमिक स्रोत हैं:\nसाल क्या पैमाना 2011 TimThumb, कई themes में शामिल एक image script, जिससे हमलावर “upload and execute arbitrary PHP code” कर सकते थे42 “many commercial and free themes” 2014 RevSlider, SoakSoak अभियान के पीछे43 “compromising over 100,000 WordPress sites” 2016 Mossack Fonseca, Panama Papers वाली फ़र्म: उसकी साइट “may have been breached via a vulnerable version of Revolution Slider”44 साइट पर इस्तेमाल हो सकने वाला वर्ज़न चल रहा था; डेटा कैसे निकला यह कभी नहीं दिखाया गया 2017 WordPress 4.7.0 और 4.7.1 में REST API content injection, default रूप से चालू45 Sucuri की गिनती में Google पर 66,000 बिगाड़े गए पेज46; चार दिन बाद Wordfence की गिनती में 1,893,69047 2020 WP File Manager, बिना लॉगिन code execution, पैच से पहले ही इस्तेमाल48 “over 700,000 active installations” 2025 SureTriggers, बिना लॉगिन admin अकाउंट बनाना49 “exploitation attempts observed within hours after disclosure” 2016 वाली पंक्ति में मैंने सावधानी रखी है। Wordfence ने दिखाया कि फ़र्म की साइट पर slider का ऐसा वर्ज़न चल रहा था जिसका इस्तेमाल बहुत आसान था। उसने यह नहीं दिखाया कि दस्तावेज़ इसी रास्ते से लिए गए, और मैं सबूत से ज़्यादा दावा नहीं करूँगा।\nMalware टिका कैसे रहता है अंदर आना आधा काम है। अंदर बने रहना बाकी आधा है, और PHP इसे आसान बनाता है, ऐसे कारण से जो सीधे एक-process वाली तस्वीर पर लौटता है।\ninterpreter कोई भी .php फ़ाइल चला देगा जिस तक वह पहुँच सके। web root आम तौर पर उसी user के लिए लिखने योग्य होता है जो कोड चलाता है। इसलिए हमलावर के पास फ़ाइल लिखने का कोई भी रास्ता हो, एक upload form, एक plugin बग, एक file manager, तो वह ऐसा script लिख सकता है जो हर बार किसी के माँगने पर चलता है। यही web shell है: एक छोटी फ़ाइल, आपकी साइट में बैठी, आदेश लेती हुई।\nCISA सालों से कहता आया है कि ये ज़्यादातर किन भाषाओं में लिखे जाते हैं: “The most commonly observed web shells are written in languages that are widely supported, such as PHP and ASP.”50 NSA और Australian Signals Directorate की साझा गाइडेंस इन्हें “a long-standing, pervasive threat that continues to evade many security tools” कहती है, और पकड़ने में मुश्किल, क्योंकि ये “easily modified by attackers and often employ encryption, encoding, and obfuscation”51।\nसफ़ाई के आँकड़े बताते हैं कि ये कितनी बार मौजूद होते हैं:\nस्रोत नतीजा Sucuri, 2022, 43,374 साइटें साफ़ की गईं “69.63% of compromised websites were found to have at least one backdoor”; 1,188,864 backdoors हटाए गए52 Sucuri, 2022 “90% of credit card skimmers were found in the form of malicious PHP code”52 Sucuri, 2023, 39,594 साइटें साफ़ की गईं “49.21% of compromised websites were found with at least one website backdoor”; संक्रमणों में WordPress 95.5%53 Wordfence, 2024 “just under one million distinct sites infected with malware”41 तो सबसे हाल के सफ़ाई वाले साल में, हैक हुई आधी साइटों में disk पर वापस आने का रास्ता अब भी पड़ा था। डेटाबेस restore कीजिए, plugin पैच कीजिए, और हमलावर अपनी छोड़ी फ़ाइल से वापस आ जाता है।\nइसका कोई चालाक इलाज नहीं है। उबाऊ, सही इलाज है, और NSA ने उसे लिख दिया: “web applications should not have permission to write directly to a web accessible directory or modify web accessible code”51। वह एक वाक्य इस पोस्ट की शुरुआत वाला बँटा हुआ tier मॉडल है, एक खुफ़िया एजेंसी के मुँह से।\nकहाँ गड़बड़ होती है उसे रोकने वाला control runtime user कोड लिख सकता है कोड एक अलग deploy user का, runtime user के लिए सिर्फ़ पढ़ने योग्य uploads web root के अंदर आते हैं uploads “outside of the webroot” रखें, या किसी दूसरे सर्वर पर54 PHP uploads में कुछ भी चला देगा web server पर upload paths के लिए script चलाना बंद, और “disable per directory configuration overrides on upload directories”54 नई फ़ाइल पर किसी का ध्यान नहीं जाता एक ज्ञात-सही प्रति के मुकाबले file integrity monitoring51 डेटाबेस अकाउंट कुछ भी कर सकता है डेटाबेस user पर least privilege13 WordPress की hardening गाइड, जितना भी उसका मूल्य हो, uploads directory में PHP चलना रोकने का ज़िक्र तक नहीं करती11। इसीलिए यह तालिका उसके बजाय OWASP और NSA का हवाला देती है।\nध्यान दीजिए कि उस तालिका में क्या नहीं है। PHP की अपनी hardening settings। manual उनके बारे में ईमानदार है। disable_functions “can be circumvented and should not be considered a sufficient security measure for shared hosting environments”, और open_basedir “is just an extra safety net, that is in no way comprehensive, and can therefore not be relied upon when security is needed”55। जब किसी भाषा का अपना दस्तावेज़ बताए कि उसके security knobs security सीमाएँ नहीं हैं, तो उस पर भरोसा कीजिए। इसलिए सीमा process के बाहर से आनी चाहिए।\nphp.net में भी सेंध लगी अगर प्रोजेक्ट का अपना infrastructure मज़बूत होता, तो आप कह सकते थे कि यह रिकॉर्ड एक कठिन समस्या को अच्छी तरह संभालने का नतीजा है। उसमें दो बार सेंध लग चुकी है।\nकब क्या हुआ 22 से 24 अक्टूबर 2013 “JavaScript malware was served to a small percentage of php.net users”; “two servers were compromised”, तरीका “unknown at this time”56 28 मार्च 2021 “two malicious commits were pushed to the php-src repo”, दो core developers के नाम से57 2021 वाली ही मायने रखती है। किसी ने भाषा के अपने source tree में कोड डाल दिया, उसे बनाए रखने वाले लोगों का भेस बनाकर। यह पकड़ा गया। प्रोजेक्ट का जवाब उद्धृत करने लायक है क्योंकि वह सही जवाब है, सीधे शब्दों में: “maintaining our own git infrastructure is an unnecessary security risk”, और repositories GitHub पर चली गईं57।\nजहाँ श्रेय बनता है वहाँ देना चाहिए: वह अच्छा फ़ैसला था, जल्दी लिया गया, और खुले में समझाया गया। लेकिन देखिए यह क्या मानता है। सालों तक वेब के ज़्यादातर हिस्से को चलाने वाली भाषा का आधिकारिक source खुद चलाए गए infrastructure पर रहा, जिसे खुद प्रोजेक्ट ने ऐसा जोखिम माना जो उसे नहीं उठाना चाहिए था।\nआधा वेब ऐसा वर्ज़न चलाता है जिसे कोई पैच नहीं करता ऊपर की हर बात यह मानकर चलती है कि साइट अप-टू-डेट है। बहुत सारी नहीं हैं।\nphp.net अभी चार branches को सपोर्ट करता है। 8.2 को सिर्फ़ security fixes मिलते हैं, 31 दिसंबर 2026 तक। 8.3, 8.4 और 8.5 बाकी हैं58। उससे पुराना सब end of life है: 8.1, 31 दिसंबर 2025 से, 8.0 नवंबर 2023 से, 7.4 नवंबर 2022 से59।\nअब वह हिस्सा जो असल में चल रहा है, नापा हुआ:\nPHP का कितना हिस्सा ऐसे वर्ज़न पर चलता है जिन्हें php.net अब पैच नहीं करता इस्तेमाल में PHP वर्ज़न, php.net सपोर्ट स्थिति के हिसाब से PHP साइटें (W3Techs) 48.3% 18.0% 33.7% WordPress installs 34.7% 23.5% 41.8% अभी बिना सपोर्ट 8.2, 31 दिसंबर 2026 से बिना सपोर्ट 8.3 और बाद के सपोर्ट स्थिति के हिसाब से इस्तेमाल में PHP वर्ज़न। PHP साइटें W3Techs के वर्ज़न हिस्सों से; WordPress installs wordpress.org के अपने आँकड़ों से। दोनों 23 अक्टूबर 2026 को पढ़े गए। आज बिना सपोर्ट 1 जनवरी 2027 से बिना सपोर्ट PHP साइटें, W3Techs6061 48.3% लगभग 66% WordPress installs, wordpress.org62 34.7% लगभग 58% अकेला PHP 7.4, जिसका सपोर्ट लगभग चार साल से ख़त्म है, अपना वर्ज़न दिखाने वाली सभी PHP साइटों का लगभग पाँचवाँ हिस्सा है। WordPress का अपना requirements पेज PHP 8.3 माँगता है, फिर कहता है कि WordPress “also works with PHP 7.4+”, और साथ में बताता है कि वे वर्ज़न “have reached their official End Of Life”63। जो vendor अब भी एक मरे हुए वर्ज़न पर चलता है, उसने आपको आगे न बढ़ाने का फ़ैसला कर लिया है।\nदो ईमानदार चेतावनियाँ। W3Techs सिर्फ़ उन साइटों का वर्ज़न देखता है जो उसे दिखाती हैं। और कुछ Linux distributions पुराने PHP builds में fixes backport करते हैं, इसलिए “php.net से बिना सपोर्ट” हमेशा “बिना पैच” नहीं होता। लेकिन PHP2Shell इसी की परीक्षा है। इस बार प्रोजेक्ट ने 7.4, 8.0 और 8.1 के लिए source patches प्रकाशित किए1, और फिर भी किसी को उन्हें build करना, भेजना और install करना है। ऐसे shared host पर जो एक ऐसा वर्ज़न चला रहा है जिसका कोई मालिक नहीं, वह कोई, कोई नहीं है।\nमैंने इसे छोड़ दिया। आपको भी छोड़ने के बारे में सोचना चाहिए। मैं PHP लिखता था। Pulsant के बाद मैंने यह भाषा छोड़ दी, उन मुद्दों के कारण जो इसने पैदा किए और उस काम के कारण जो उन मुद्दों ने बनाया। कोई एक बुरी घटना नहीं। सालों तक वही दो कारण, साइट दर साइट, और सफ़ाई उस पर आती जो उस समय शिफ़्ट पर हो।\nतो मैं सीधे कहूँगा। अगर चुनाव आपका है, तो इसे छोड़ने के बारे में सोचिए। इस काम के लिए अब बेहतर औज़ार मौजूद हैं, और Go वह है जिसकी ओर मैं आपको सबसे पहले इशारा करूँगा।\nफ़ैशन के कारण नहीं। इसलिए कि यह default रूप से उस ज़्यादातर चीज़ को हटा देता है जिसे यह पोस्ट गिनती रही है:\nआम PHP साइट एक Go service Memory safety C में लिखा इंजन, 288 memory-corruption CVE डिज़ाइन से memory safe; NSA और CISA दोनों इसका नाम लेते हैं1819 कोड चलाना हर request पर फिर से parse और compile, जब तक OPcache लोड न हो, जो 8.5 से पहले एक extension है जिसे आपको खुद जोड़ना होता है; फिर C में लिखे interpreter से चलता है; 8.0 से एक JIT, default रूप से बंद6465 एक बार, पहले से, native machine code में compile66 request को जवाब देना web server हर request एक interpreter को सौंपता है एक compiled binary खुद HTTP का जवाब देता है web root में डाली गई फ़ाइल .php फ़ाइल उसी पल चल जाती है जब कोई उसे माँगता है path के कारण disk से कोई फ़ाइल नहीं चलती HTML output echo कच्चा लिखता है; escaping एक function है जिसे आपको याद रखना होता है html/template default रूप से, संदर्भ के हिसाब से escape करता है67 SQL PDO में prepared statements हैं, अगर आप उन्हें इस्तेमाल करें दर्ज तरीका parameters को arguments के रूप में देता है68 जिन पर आप निर्भर हैं उनकी ज्ञात खामियाँ ख़बरों से पता चलता है govulncheck सिर्फ़ वही बताता है जिन्हें आपका कोड सच में बुलाता है69 हिस्से कहाँ रहते हैं कोड, config और uploads एक ही लिखने योग्य tree में एक सिर्फ़ पढ़ने योग्य binary, config और uploads कहीं और compiled होना दो बार मायने रखता है। यह तेज़ है: Go programs “are compiled ahead of time to native machine code”, नीचे कोई virtual machine नहीं, और इसके घोषित डिज़ाइन लक्ष्यों में एक है “to approach the performance of C for comparable programs”66। और यह ज़्यादा सुरक्षित है, क्योंकि request के रास्ते में run time पर कोड parse करने वाला कोई interpreter नहीं, और नेटवर्क और आपके प्रोग्राम के बीच 757 CVE वाला कोई C इंजन नहीं। PHP, अपने भरोसे छोड़ा जाए, तो उल्टा करता है। OPcache के बिना यह हर request पर हर script को लोड, parse और compile करता है, बेवजह, किसी व्यस्त साइट पर मिनट में हज़ारों बार। OPcache इसे रोकने के लिए है, “removing the need for PHP to load and parse scripts on each request”64। लेकिन यह box से निकलते ही चालू नहीं होता। 8.4 तक यह एक अलग shared extension है जिसे किसी को zend_extension से लोड और configure करना होता है। सिर्फ़ PHP 8.5 इसे अंदर ही बनाता है: “The Opcache extension is now always built into the PHP binary and is always loaded”70। इस बदलाव के लिए प्रोजेक्ट का अपना RFC कहता है “running PHP in production without OPcache is generally considered a mistake”71। W3Techs के हिसाब से 8.5 PHP 8 साइटों के 4.5% पर है60, तो आज चल रही लगभग हर चीज़ के लिए हर request पर हर script compile करने का इलाज अब भी एक add-on है जिसे किसी को याद रखना पड़ा। और लोड होने पर भी, यह जो cache करता है वह C interpreter के चलाने के लिए bytecode है। Go compile का काम एक बार करता है, प्रोग्राम के कोई request देखने से पहले।\nतेज़ और ज़्यादा सुरक्षित, बशर्ते कोड ठीक से लिखा गया हो। वह आख़िरी शर्त ही अगले कुछ पैराग्राफ़ का पूरा विषय है।\nGo का template package अपना डिज़ाइन एक पंक्ति में रखता है: यह “HTML output safe against code injection” बनाता है, और “The escaping is contextual, so actions can appear within JavaScript, CSS, and URI contexts.”67 इसकी डेटाबेस गाइड भी उतनी ही सीधी है: “You can avoid an SQL injection risk by providing SQL parameter values as sql package function arguments.”68 ये defaults हैं। PHP में ये ऐसी चीज़ें हैं जिन्हें जाकर लाना आपको पता होना चाहिए।\nजिस पंक्ति को मैं रेखांकित करूँगा वह डाली गई फ़ाइल वाली है। 2023 में Sucuri ने जो हैक साइटें साफ़ कीं, उनमें आधी के disk पर अब भी backdoor था53, और यह सिर्फ़ इसलिए काम करता है क्योंकि interpreter कोई भी script चला देगा जिस तक वह पहुँच सके। एक compiled service scripts ढूँढने नहीं जाती। डाली गई फ़ाइल के जुड़ने के लिए वहाँ कुछ भी नहीं है।\nअब ईमानदार हिस्सा, क्योंकि कोई भाषा इलाज नहीं है। Go ज़्यादा memory safe है, पूरी तरह नहीं। इसका अपना memory model कहता है कि slice, map या interface value पर data race “can in turn lead to arbitrary memory corruption”72, और Go उसे पकड़ने का औज़ार साथ देता है। -race के साथ build कीजिए, या go test -race चलाइए, और binary एक ऐसे detector के साथ compile होती है जो race होते ही उसे बता देता है। यह races को compile time के बजाय run time पर पकड़ता है, और “can\u0026rsquo;t find races in code paths that are not executed”, इसलिए इसे हर test run में और असली जैसे load के तहत होना चाहिए73। PHP के पास ऐसा कुछ नहीं है। एक request की memory को अगली से अलग रखना पूरी तरह इंजन पर छोड़ा गया है, और PHP2Shell वही इंजन है जो इसे गलत कर रहा है: एक request की free की गई memory, उसी worker पर अगली request से पढ़ी गई6। उसके अलावा, Go वह memory-corruption वर्ग रोकता है जिसे यह पोस्ट गिनती रही है, और दो और के लिए सुरक्षित तरीके को आसान तरीका बनाता है। यह टूटी हुई लॉगिन जाँच, छूटी हुई permission जाँच या strings जोड़कर बनाई गई query को नहीं रोकता, अगर आप ऐसा करने पर अड़े रहें। Go अपनी security advisories भी अपने vulnerability database से प्रकाशित करता है69। और root के रूप में किसी लिखने योग्य directory से चलाई गई Go service भी ख़राब तरीके से डिप्लॉय की गई है।\nयह जो बदलता है वह default है। PHP का default एक process है जिसमें सब कुछ है। Go का default एक प्रोग्राम है जो एक काम करता है, जो इस पोस्ट की शुरुआत वाला बँटवारा है, ज़्यादातर काम पहले ही हो चुका। अगर Go आपकी टीम को नहीं जँचता, तो Rust दूसरा रास्ता है। दोनों पहले से native code में compile होते हैं। Rust “with no runtime or garbage collector” चलता है74, और Go का compiler और runtime Go 1.5 से “implemented in Go and assembler, without C” हैं75।\nC# और Java भी एजेंसियों की memory-safe सूची में हैं18, लेकिन वे उस समस्या से बाहर निकलने का रास्ता नहीं हैं जिससे यह पोस्ट शुरू हुई। हर एक C++ में लिखी virtual machine पर चलता है। OpenJDK का HotSpot “around 3000 C/C++ header and source files, comprising more than 1.2 million lines of code” है76, और .NET का garbage collector और JIT compiler CoreCLR tree में C++ source हैं77। यह PHP जैसी ही शक्ल है: नेटवर्क और आपके कोड के बीच एक बड़ा native इंजन। और Java डिज़ाइन से चल रहे application में कोड लोड करता है। इसका मानक class loader इसलिए है कि “to load classes and resources from a search path of URLs referring to both JAR files and directories”78, और Log4Shell ने इसे remote code execution बना दिया: जो हमलावर किसी log message को नियंत्रित करता था वह “can execute arbitrary code loaded from LDAP servers”79। यह सीधे CISA की catalogue में गया26। यह PHP वाला ही दरवाज़ा है, सामने ज़्यादा तामझाम के साथ।\nतो Go या Rust चुनिए। पहले back end ले जाइए, एक endpoint एक बार में, और PHP front end को तब तक कुछ भी चुराने लायक न रखने दीजिए, जब तक वह भी न जा सके।\nअगर आप अब भी इसे ऐसे डिप्लॉय कर रहे हैं, तो क्या आप खुद को पेशेवर कह सकते हैं? ऊपर इतने सबूत हैं कि यह राय नहीं रह गई। तो सवाल सीधे यह है। अगर आप अब भी PHP को ऐसे एक process के रूप में डिप्लॉय कर रहे हैं जिसमें कोड, credentials और एक लिखने योग्य web root है, तो क्या आप खुद को पेशेवर कह सकते हैं?\nयह इस पर निर्भर है कि आप तीन में से कौन से व्यक्ति हैं। और यह जानना कि आप कौन से हैं, कोई ऐसी चीज़ नहीं जो आपके साथ होती है। यह पक्का करना कि आप जानते हैं, यही काम है।\nआपकी एक असली मजबूरी है, और आपने उसे लिख रखा है। जिस product पर कारोबार निर्भर है वह सिर्फ़ PHP में है। migration की लागत निकाली जा चुकी है और वह अगले साल के बजट में है। ठीक है। यह पेशेवर है, बशर्ते कारण काग़ज़ पर हो और उसके बगल में तारीख हो, runtime user कोड न लिख सके, uploads न चल सकें, डेटाबेस अकाउंट छोटा किया गया हो, और आपने इस हफ़्ते PHP2Shell पैच किया हो। आप जानबूझकर एक ज्ञात जोखिम चला रहे हैं, उन दीवारों के साथ जो आप उसके चारों ओर खड़ी कर सकते हैं।\nआपको कभी बताया ही नहीं गया। किसी ने आपको रिकॉर्ड नहीं दिखाया, और जिस tutorial से आपने सीखा उसने सब कुछ एक directory में रखा। यह एक कमी है, और सबमें कमियाँ होती हैं। जिस पल आपने यहाँ तक पढ़ लिया, यह कमी नहीं रहती।\nआप जानते हैं, और फिर भी बनाते हैं। आपने आँकड़े देखे हैं, या उनमें से काफ़ी। आप जानते हैं कि डेटाबेस पासवर्ड web root में पड़ा है और web root लिखने योग्य है। आप इसे ऐसे डिप्लॉय करते हैं क्योंकि यह जल्दी होता है, क्योंकि ग्राहक बेहतर के पैसे नहीं देगा, और क्योंकि किसी ने आपसे इसका कारण नहीं पूछा। यह सवाल इसी मामले पर है। चूक आपकी जानकारी की कमी नहीं है। चूक उस कमी के पार निर्माण करना है जिसे आप पहले ही देख चुके हैं और कभी भरने वापस नहीं गए।\nसब कभी न कभी वहाँ थे। अपनी मर्ज़ी से वहाँ बने रहना ही वह हिस्सा है जिसका बचाव नहीं हो सकता।\nदरवाज़ा हमेशा खुला था यह रिकॉर्ड पढ़ते हुए मुझे जो खटकता है वह यह नहीं कि PHP में बग हैं। हर भाषा में होते हैं। यह है कि उसमें से कितना कम कभी आश्चर्य था।\nप्रोजेक्ट 2002 में जानता था कि register_globals ख़तरनाक है और उसने इसे 2012 में हटाया। इसका manual आपको बताता है कि unserialize() पर भरोसा न करें, disable_functions पर भरोसा न करें, open_basedir पर भरोसा न करें। इसका अपना दस्तावेज़ कहता है कि mod_php के तहत script बिना पासवर्ड डेटाबेस तक पहुँच सकता है। एजेंसियाँ सालों से कहती आई हैं कि जिस भाषा से यह बना है, वहीं से दो-तिहाई memory बग आते हैं। हर चेतावनी वहाँ है, लिखित में, उन लोगों की ओर से जिन्हें पता होना चाहिए।\nऔर यह फिर भी जीतता रहा, क्योंकि यह सस्ता था। host करने में सस्ता, सीखने में सस्ता, शुक्रवार तक वेबसाइट चाहने वाले ग्राहक को बेचने में सस्ता। एक directory, एक process, एक फ़ाइल में एक पासवर्ड, और एक साइट जो चलती थी। इसकी कीमत एक shared hosting plan लगाई गई। इसकी असली लागत कभी invoice पर नहीं आई: सफ़ाई, disk पर छोड़े गए backdoors, malicious PHP से उठाए गए ग्राहकों के card नंबर, खुलासे और हमले के बीच की पाँच घंटे की खिड़की।\nयही वह हिस्सा है जिसके लिए मेरे पास कोई धैर्य नहीं। बग नहीं। वह फ़ैसला, जो बार-बार उन लोगों ने लिया जो बेहतर जानते थे, कि सस्ता तरीका काफ़ी अच्छा है क्योंकि कोई जाँच नहीं रहा था। मानक वह चीज़ है जिसे आप तब निभाते हैं जब कोई जाँच नहीं रहा होता। front end और back end के बीच का बँटवारा, सिर्फ़ पढ़ने योग्य कोड, छोटा किया गया डेटाबेस अकाउंट: इनमें कुछ भी नया नहीं, कुछ भी महँगा नहीं, और इन सबसे ऊपर की कई घटनाएँ लिखने लायक भी न रहतीं।\nPHP2Shell इस रिकॉर्ड का अंत नहीं है। यह बस इस हफ़्ते की प्रविष्टि है। भाषा इसे पैच करेगी, hosts कभी न कभी update पहुँचाएँगे, और वर्ज़न का हिस्सा वैसे ही धीरे-धीरे ऊपर खिसकेगा जैसे हमेशा खिसकता है। अगला आपको कितना महँगा पड़ेगा, यह PHP तय नहीं करता। यह इससे तय होता है कि आपने वे दीवारें बनाईं जो इसने कभी नहीं दीं, या किसी ऐसी चीज़ पर चले गए जो उनके साथ आती है।\nPHP — News archive 2026, 21st October — “PHP 8.5.12, 8.4.27, 8.3.36 and 8.2.35 fix two critical vulnerabilities that can allow unauthenticated remote code execution”; “We consider the risk highest for mod_php, with a demonstrated exploit where an unauthenticated request can trigger the attack before any application code runs”; “There are no complete mitigations, updating is the only safe choice.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWiz Research — PHP2Shell — 21 अक्टूबर 2026; “Every PHP version released in the last decade is affected by at least one of these vulnerabilities, going back to version 5.4”; “All of the disclosed vulnerabilities are memory-safety issues”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAWS Security Blog — PHP2Shell exploitation prior to public disclosure in MadPot — 17 अक्टूबर 2026 को दर्ज इस्तेमाल की एक कोशिश।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nwatchTowr — PHP2Shell FAQ — 21 अक्टूबर 2026 को असली हमलों में इस्तेमाल देखा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2026-109618 — out-of-memory error handling आधा शुरू किया गया request डेटा छोड़ देता है जिसे cleanup सही मान लेता है; remote code execution।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2026-109619 — free किए जाने के बाद इस्तेमाल हुई request memory; remote code execution; 5.4.0 से प्रभावित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Installed as an Apache module — “When PHP is used as an Apache module it inherits Apache\u0026rsquo;s user permissions”; “a malicious script could access and modify the database, even without a username and password”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Apache 2.x on Unix systems — “The mod_php approach embeds PHP directly into every Apache httpd worker process.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — wp-config.php — WordPress directory के root में होती है और डेटाबेस connection की जानकारी रखती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Changing file permissions — wp-config.php “is initially created with 644 permissions, and it\u0026rsquo;s a hazard to leave it like that”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Hardening WordPress — डेटाबेस privileges, file permissions; uploads में PHP चलना रोकने पर कोई गाइडेंस नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOWASP — Database Security Cheat Sheet — “The application\u0026rsquo;s backend database should be isolated from other servers”; एक समर्पित internal network segment।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Database design — “Applications should never connect to the database as its owner or a superuser.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — FastCGI Process Manager — ऐसे pools जो workers को “with different uid/gid/chroot/environment” शुरू करते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD CVE API, virtualMatchString=cpe:2.3:a:php:php — 23 अक्टूबर 2026 को पूछा गया: 757 CVE। memory corruption को CWE-119, 120, 121, 122, 125, 129, 131, 189, 190, 191, 415, 416, 476, 680, 787, 824, 843 या 908 के रूप में गिना गया: 288। पूरा remote कब्ज़ा CVSS 3.x AV:N/PR:N/UI:N/C:H/I:H के रूप में गिना गया, या जहाँ 3.x score नहीं है वहाँ CVSS 2 में नेटवर्क, बिना authentication, confidentiality और integrity पर पूरा असर: 172।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMonth of PHP Bugs, php-security.org, Wayback Machine — “During March 2007 old and new security vulnerabilities in the Zend Engine, the PHP core and the PHP extensions will be disclosed on a day by day basis.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Register — Stefan Esser interview, 7th February 2007 — Hardened-PHP Project के संस्थापक, जिन्होंने हाल ही में PHP Security Response Team छोड़ी थी: “I dislike the ways bugs are handled”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNSA — Software Memory Safety, November 2022, Wayback Machine — “a strategic shift from programming languages that provide little or no inherent memory protection, such as C/C++, to a memory safe language when possible.” साथ ही: “Examples of memory safe language include C#, Go, Java®, Ruby™, Rust®, and Swift®.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA and partners — The Case for Memory Safe Roadmaps, December 2023 — अन्य के साथ UK NCSC सह-लेखक; “two-thirds of reported vulnerabilities in memory unsafe programming languages still relate to memory issues.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2014-8142 — unserialize के दौरान process_nested_data में use-after-free।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2015-0231 — unserialize में use-after-free जो “exists because of an incomplete fix for CVE-2014-8142”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2016-5771 — unserialize और garbage collection से शुरू होने वाला SPL use-after-free।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — unserialize — “Do not pass untrusted user input to unserialize() regardless of the options value of allowed_classes.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2019-11043 — “in certain configurations of FPM setup it is possible to cause FPM module to write past allocated buffers … opening the possibility of remote code execution.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP 7 ChangeLog — 24 अक्टूबर 2019 को 7.3.11, 7.2.24 और 7.1.33 में ठीक, bug #78599।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Known Exploited Vulnerabilities catalogue — JSON feed वर्ज़न 2026.10.21, 1,754 प्रविष्टियाँ; vendor और product के हिसाब से PHP या PHP में लिखे applications की 81; ransomware इस्तेमाल feed में दर्ज के अनुसार।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe PHP Foundation — PHP core security audit results, 10th April 2025 — “The audit identified 27 issues, with 17 having security implications”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP 4 ChangeLog — 4.2.0, 22 अप्रैल 2002: “register_globals defaults to \u0026lsquo;off\u0026rsquo; now”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Using Register Globals, Wayback Machine — “DEPRECATED as of PHP 5.3.0 and REMOVED as of PHP 5.4.0”; “the most controversial change in PHP”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Magic Quotes, Wayback Machine — “DEPRECATED as of PHP 5.3.0 and REMOVED as of PHP 5.4.0”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Deprecated features in PHP 5.5.x, Wayback Machine — “The preg_replace() /e modifier is now deprecated.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Pattern Modifiers, Wayback Machine — e “DEPRECATED in PHP 5.5.0, and REMOVED as of PHP 7.0.0.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Deprecated features in PHP 7.4 — “The allow_url_include ini directive is deprecated.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Backward incompatible changes in PHP 8.0 — phar metadata “will no longer be automatically unserialized, to fix potential security vulnerabilities due to object instantiation, autoloading, etc.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP RFC — Saner string to number comparisons — PHP 8.0 में लागू; “the most notable of which is that 0 == ‘foobar’ returns true.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSam Thomas, Black Hat USA 2018 — It\u0026rsquo;s A PHP Unserialization Vulnerability Jim, But Not As We Know It — phar:// paths पर फ़ाइल operations metadata को unserialise करते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — State of WordPress Security in 2026 — 2025 का डेटा: 11,334 नई vulnerabilities, 91% plugins, core में 6, 46% खुलासे तक ठीक नहीं, बड़े पैमाने पर इस्तेमाल तक median 5 घंटे।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — WordPress — “58.3% of all the websites whose content management system we know. This is 39.6% of all websites.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — PHP — “PHP is used by 69.3% of all the websites whose server-side programming language we know.” 23 अक्टूबर 2026 को पढ़ा गया। PHP साइटों में major वर्ज़न: 8 का 65.3%, 7 का 26.9%, 5 का 7.7%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — State of WordPress Security in 2025 — 2024 का डेटा: 7,966 नई vulnerabilities, 96% plugins, core में 7, 33% खुलासे तक ठीक नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — 2024 Annual WordPress Security Report — 8,223 vulnerabilities, 68% बढ़ोतरी; “Roughly 35% of the vulnerabilities disclosed in 2024 remain unpatched in 2025”; “just under one million distinct sites infected with malware”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMark Maunder — Zero day vulnerability in many WordPress themes, 1st August 2011 — timthumb.php “many commercial and free themes” के साथ शामिल; हमलावर “upload and execute arbitrary PHP code” कर सकते थे।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — RevSlider vulnerability leads to massive WordPress SoakSoak compromise, 15th December 2014 — “compromising over 100,000 WordPress sites”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — Mossack Fonseca breach, Revolution Slider possible cause, 7th April 2016, Wayback Machine — “may have been breached via a vulnerable version of Revolution Slider”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — Content injection vulnerability in WordPress REST API, 1st February 2017 — “allows an unauthenticated user to modify the content of any post or page”; 4.7.0 और 4.7.1 पर default रूप से चालू।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — WordPress REST API vulnerability abused in defacement campaigns, 6th February 2017 — एक अभियान के लिए, “Google alone shows 66,000+ pages compromised”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — Rapid growth in REST API defacements, 10th February 2017, Wayback Machine — Google पर indexed बिगाड़े गए पेज “from 1,496,020 to 1,893,690” बढ़े; Sucuri की पहले की गिनती 66,000 थी।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordfence — 700,000 WordPress users affected by zero-day in File Manager plugin, 1st September 2020, Wayback Machine — “a WordPress plugin with over 700,000 active installations”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPatchstack — SureTriggers vulnerability exploited within 4 hours, 10th April 2025 — बिना लॉगिन administrator बनाना; “exploitation attempts observed within hours after disclosure”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Compromised Web Servers and Web Shells, TA15-314A — “The most commonly observed web shells are written in languages that are widely supported, such as PHP and ASP.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNSA and ASD — Detect and Prevent Web Shell Malware, April 2020, Wayback Machine — “web applications should not have permission to write directly to a web accessible directory or modify web accessible code”; पीछे के उपाय के रूप में file integrity monitoring।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — 2022 Website Threat Research Report — 43,374 साइटें साफ़ की गईं; 69.63% में कम से कम एक backdoor; 1,188,864 backdoors हटाए गए; 90% card skimmers malicious PHP में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSucuri — 2023 Hacked Website and Malware Threat Report — 39,594 साइटें साफ़ की गईं; 49.21% में कम से कम एक backdoor; संक्रमणों में WordPress 95.5%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOWASP — File Upload Cheat Sheet — uploads “outside of the webroot” रखें; “disable per directory configuration overrides on upload directories”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Description of core php.ini directives — disable_functions “can be circumvented”; open_basedir “can therefore not be relied upon when security is needed”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP — News archive 2013, 24th October — 22 से 24 अक्टूबर 2013 तक malware परोसा गया; दो सर्वर compromise हुए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP internals — Changes to Git commit workflow, 28th March 2021 — php-src में दो malicious commits डाले गए; git.php.net सर्वर बंद और GitHub आधिकारिक बनाया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP — Supported versions — 8.2 को 31 दिसंबर 2026 तक security fixes; 8.3, 8.4 और 8.5 सपोर्टेड। 23 अक्टूबर 2026 को पढ़ा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP — Unsupported branches — 8.1 का end of life 31 दिसंबर 2025, 8.0 का 26 नवंबर 2023, 7.4 का 28 नवंबर 2022।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — PHP version 8 — PHP 8 के अंदर subversion हिस्से; major-version हिस्सों के साथ मिलाकर बिना सपोर्ट वाले वर्ज़न पर 48.3% PHP साइटें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nW3Techs — PHP version 7 — PHP 7 साइटों में 7.4 का 73.4%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Statistics — wordpress.org को रिपोर्ट करने वाली WordPress साइटों के PHP वर्ज़न; 34.7% 8.2 से नीचे। 23 अक्टूबर 2026 को पढ़ा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWordPress — Requirements — “PHP version 8.3 or greater”; 7.4+ के साथ काम करता है, जो “reached their official End Of Life”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — OPcache introduction — “OPcache improves PHP performance by storing precompiled script bytecode in shared memory, thereby removing the need for PHP to load and parse scripts on each request.” PHP 8.4 तक, zend_extension से लोड होने वाला एक shared extension।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — OPcache runtime configuration — opcache.jit PHP 8.0.0 से उपलब्ध, default “disable”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Frequently Asked Questions — “Go programs are compiled ahead of time to native machine code”; runtime “does not include a virtual machine”; “One of Go\u0026rsquo;s design goals is to approach the performance of C for comparable programs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — package html/template — “implements data-driven templates for generating HTML output safe against code injection”; “The escaping is contextual, so actions can appear within JavaScript, CSS, and URI contexts.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Avoiding SQL injection risk — “You can avoid an SQL injection risk by providing SQL parameter values as sql package function arguments.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Vulnerability management — एक चुना हुआ vulnerability database; govulncheck “only surfaces vulnerabilities that actually affect you, based on which functions in your code are transitively calling vulnerable functions”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP manual — Backward incompatible changes in PHP 8.5 — “The Opcache extension is now always built into the PHP binary and is always loaded. The INI directives opcache.enable and opcache.enable_cli are still honored.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPHP RFC — Make OPcache a non-optional part of PHP — PHP 8.5 में लागू; “running PHP in production without OPcache is generally considered a mistake”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — The Go Memory Model — multiword values पर races “can in turn lead to arbitrary memory corruption”; go build -race के ज़रिए ThreadSanitizer races बताता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo — Data Race Detector — tests go test -race के साथ चलाएँ; “The race detector only finds races that happen at runtime, so it can\u0026rsquo;t find races in code paths that are not executed.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRust — rust-lang.org — “Rust is blazingly fast and memory-efficient: with no runtime or garbage collector”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGo 1.5 Release Notes — “The compiler and runtime are now implemented in Go and assembler, without C.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenJDK — The HotSpot Group — “around 3000 C/C++ header and source files, comprising more than 1.2 million lines of code”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndotnet/runtime — src/coreclr — garbage collector (gc/gc.cpp) और JIT (jit/compiler.cpp) C++ हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJava SE 21 — URLClassLoader — “to load classes and resources from a search path of URLs referring to both JAR files and directories”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNVD — CVE-2021-44228 — “An attacker who can control log messages or log message parameters can execute arbitrary code loaded from LDAP servers”; 10 दिसंबर 2021 को CISA KEV में जोड़ा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/security/php-twenty-nine-years-of-leaving-the-door-open/","summary":"PHP2Shell, 21 अक्टूबर 2026 को सामने आया, खुद PHP interpreter में बिना लॉगिन का remote code execution है, 5.4 तक का हर वर्ज़न, और पैच आने से पहले ही इसका इस्तेमाल हो रहा था। यह एक लंबे रिकॉर्ड की ताज़ा कड़ी है: 1997 से interpreter के ख़िलाफ़ 757 CVE, जिनमें कम से कम 288 memory corruption और 172 बिना लॉगिन पूरे सर्वर पर कब्ज़े वाले। यह पोस्ट वह रिकॉर्ड NVD और CISA KEV catalogue से गिनती है, समझाती है कि C में लिखा इंजन और register_globals हटाने में दस साल लगाने वाली भाषा एक ही गलती दो बार क्यों करते हैं, देखती है कि WordPress आँकड़ों के साथ क्या करता है, web shell कैसे टिके रहते हैं और उन्हें कैसे रोकें, php.net में खुद दो बार सेंध, वेब का वह हिस्सा जो अब भी ऐसे वर्ज़न चला रहा है जिन्हें कोई पैच नहीं करता, और यह कि आम डिप्लॉयमेंट, एक process जिसमें templates, logic, SQL और डेटाबेस पासवर्ड सब है, इन हर बग को सब कुछ क्यों बना देता है। और यह भी कि मैंने खुद PHP क्यों छोड़ी, और क्यों मुझे लगता है कि आपको भी Go जैसी memory-safe भाषा की ओर जाने के बारे में सोचना चाहिए।","title":"PHP: उनतीस साल से दरवाज़ा खुला छोड़ना"},{"content":"आज आपकी मशीन ने जो भी नाम lookup किया, उस पर भरोसा कर लिया, और उस पर मैंने पूरी एक पोस्ट लिखी है। यह पोस्ट इस बारे में है कि lookup के बाद मेल के साथ क्या होता है। छोटी बात यह है: मेल उस सर्वर को भेजी जाती है जिसे DNS ने चुना, ऐसे चैनल पर जो तभी encrypted है जब कोई आपत्ति न करे, और उसमें ऐसा संदेश जाता है जिसे रास्ते में कोई भी पढ़ और बदल सकता है। और इसे रोकने के लिए जो सुरक्षा बनाई गई थी, उसमें से लगभग कुछ भी चालू नहीं है।\nयह एक टूटी हुई चीज़ नहीं है। ये सात हैं, और हर एक इस तरह बनी है कि गलत होने पर भी मेल चली जाए। कोई error नहीं। इनवॉइस पहुँच जाता है। पासवर्ड रीसेट पहुँच जाता है। बस वे किसी ऐसे के पास भी, या उसके ज़रिए भी, पहुँच जाते हैं जिसे उन्हें कभी नहीं देखना चाहिए था, और कहीं कुछ नहीं बताता।\nयह पोस्ट उन सभी सेटिंग्स को सही करने का तर्क है, और हर एक की असली कीमत का सबूत। इसके बाद की तीन पोस्ट इसे असली सर्वरों पर बनाती हैं: Postfix, Microsoft 365 और Stalwart। यह पोस्ट बताती है कि क्यों।\nवह हमला जिसे स्टैंडर्ड बताता है और फिर रोकने से मना करता है दो मेल सर्वरों के बीच की पाइप से शुरू कीजिए, क्योंकि ज़्यादातर लोग इसे पहले से हल हुआ मानते हैं। STARTTLS वह कमांड है जो SMTP कनेक्शन को TLS पर ले जाती है। ज़्यादातर मेल सर्वर इसे सपोर्ट करते हैं, ज़्यादातर मेल रास्ते में encrypted रहती है, और यह हल हुई समस्या लगती है, जब तक आप यह न पढ़ें कि यह upgrade पेश कैसे किया जाता है।\nपाने वाला सर्वर अपनी ग्रीटिंग में STARTTLS का प्रस्ताव देता है। भेजने वाला सर्वर प्रस्ताव देखता है और उसे ले लेता है। उस प्रस्ताव पर कोई साइन नहीं है, और उसे कुछ भी नहीं बचाता। तो उनके बीच रास्ते पर बैठी कोई मशीन वह लाइन मिटा सकती है, और नतीजा यह है, जो लैब में एक ऐसे भेजने वाले से पकड़ा गया जो सामान्य opportunistic डिफ़ॉल्ट पर सेट था:\n~\u0026gt; EHLO client.test [stripped] STARTTLS removed from the greeting *** Host did not advertise STARTTLS -\u0026gt; MAIL FROM:\u0026lt;carol@sender.test\u0026gt; -\u0026gt; Please pay invoice 1042 to sort code 20-00-00, account 12345678. \u0026lt;- 250 2.0.0 Ok: queued as D6A84132069C भेजने वाले को STARTTLS का प्रस्ताव नहीं दिखा, तो उसने वही किया जिसका मतलब opportunistic है: फिर भी भेज दिया, सादे टेक्स्ट में। बीच की मशीन ने पूरा संदेश पढ़ लिया, इनवॉइस और बैंक की जानकारी समेत। मेल डिलीवर हो गई। किसी तक कोई error नहीं पहुँचा।\nयह हमला मैंने नहीं गढ़ा। RFC 3207, वह स्टैंडर्ड जो STARTTLS को परिभाषित करता है, अपने ही Security Considerations में इसे ठीक-ठीक बताता है:\nA man-in-the-middle attack can be launched by deleting the \u0026ldquo;250 STARTTLS\u0026rdquo; response from the server. This would cause the client not to try to start a TLS session.1\nवही सेक्शन बचाव भी बताता है, और वह साफ़ है: TLS को अनिवार्य कर पाना। “both clients and servers MUST be able to be configured to require successful TLS negotiation … for selected hosts before messages can be successfully transferred.”1 तो पाने वाले को इसे अनिवार्य करने के लिए कॉन्फ़िगर कीजिए, और STARTTLS हटाया गया सेशन मना कर दिया जाता है:\n[stripped] STARTTLS removed from the greeting *** Host did not advertise STARTTLS -\u0026gt; MAIL FROM:\u0026lt;carol@sender.test\u0026gt; \u0026lt;** 530 5.7.0 Must issue a STARTTLS command first सिवाय इसके कि आप ऐसा नहीं कर सकते, पब्लिक MX पर तो नहीं, क्योंकि वही स्टैंडर्ड इसकी मनाही करता है:\nA publicly-referenced SMTP server MUST NOT require use of the STARTTLS extension in order to deliver mail locally.2\nये दोनों उद्धरण साथ पढ़िए। स्टैंडर्ड एक man-in-the-middle हमला बताता है, कहता है कि बचाव TLS को अनिवार्य करना है, और फिर कहता है कि आपके पब्लिक मेल सर्वर को उसे अनिवार्य करने की इजाज़त नहीं है। इसे दोबारा पढ़िए। यह नियम 2002 में लिखा गया था ताकि उन सर्वरों के बीच मेल चलती रहे जो अभी सब TLS नहीं कर पाते थे। यह आज भी लागू है, और इसी वजह से इंटरनेट का ज़्यादातर हिस्सा आज भी सादे टेक्स्ट में मेल स्वीकार करता है, और इसी वजह से STARTTLS हटाना आज भी काम करता है।\nहमलावर का एक सक्षम रूप भी है। TLS अनिवार्य करने वाला पाने वाला आपको नहीं बचाता, क्योंकि हमलावर को सेशन सादे टेक्स्ट में आगे भेजना ही नहीं पड़ता। वह भेजने वाले का downgrade हुआ सादा टेक्स्ट पढ़ सकता है और पाने वाले से अपना एकदम वैध TLS कनेक्शन खोल सकता है, जिसे एक अच्छा सर्टिफ़िकेट दिखता है और वह संतुष्ट हो जाता है। लैब में मैंने दोनों हिस्से दिखाए: वह stripping जो भेजने वाले को उजागर करती है, और एक सादा TLS client जिसे सख़्त पाने वाला बिना शिकायत स्वीकार कर लेता है। पाने वाले की policy इसे नहीं रोक सकती। इसे सिर्फ़ भेजने वाले का यह इनकार रोकता है कि बिना authenticated TLS के वह भेजेगा ही नहीं, और DANE3 और MTA-STS4 का पूरा तर्क यही है, जो इस पोस्ट में आगे आते हैं।\nसात सेटिंग्स, और हर एक कैसे खुली विफल होती है पाइप दो समस्याओं में से एक है। दूसरी पहचान है: encrypted पहुँचा संदेश भी बस यह दावा कर रहा है कि वह उसी का है जिसका वह कहता है। तो खेल में सात सेटिंग्स हैं, इन दो कामों में बँटी हुई, और उनमें जो बात साझा है, वही पहले सीखने लायक है।\nसात सेटिंग्स, दो सवाल, और गलत होने पर हर एक क्या करती है क्या पाइप निजी है? ट्रांसपोर्ट: दोनों मेल सर्वरों के बीच क्या भेजने वाला असली है? पहचान: संदेश किसका होने का दावा करता है STARTTLS encrypt करता है, अगर कोई दख़ल न दे गलत: हटाया गया, सादे टेक्स्ट में भेजा MTA-STS HTTPS policy: TLS ज़रूरी है गलत: “testing” कुछ लागू नहीं करता DANE / TLSA DNSSEC सर्वर की key pin करता है गलत: पुराना रिकॉर्ड डिलीवरी रोकता है TLS-RPT भेजने वाले विफल TLS बताते हैं ग़ायब: विफलताएँ दिखती नहीं SPF कौन से host भेज सकते हैं गलत: ~all बस कंधे उचकाना है DKIM संदेश पर हस्ताक्षर गलत: selector नहीं, जाँचने को कुछ नहीं DMARC दोनों विफल हों तो क्या करें गलत: हमेशा p=none दोनों के नीचे: IPv6। बिना AAAA रिकॉर्ड वाला MX, IPv6-only भेजने वाले से मेल नहीं ले सकता। इनमें से हर एक गलत हो सकती है और मेल चलती रहती है, इसीलिए किसी का ध्यान नहीं जाता यहाँ हर एक है: वह क्या बचाती है, और गलत सेट होने पर क्या करती है। आख़िरी कॉलम देखिए। उसमें लगभग हमेशा लिखा है कि मेल फिर भी जाती है।\nसेटिंग काम क्या बचाती है गलत सेट हो, तो… STARTTLS ट्रांसपोर्ट दो सर्वरों के बीच की hop को encrypt करती है ग्रीटिंग से हटाई गई, सादे टेक्स्ट में भेजी गई MTA-STS ट्रांसपोर्ट HTTPS पर प्रकाशित policy कि TLS ज़रूरी है testing में छोड़ी गई, कुछ लागू नहीं करती DANE / TLSA ट्रांसपोर्ट DNSSEC सर्वर की key को pin करता है, TLS downgrade नहीं हो सकता पुराना रिकॉर्ड, और आपको आने वाली मेल टल जाती है TLS-RPT ट्रांसपोर्ट भेजने वाले विफल TLS की रिपोर्ट आपको भेजते हैं5 प्रकाशित नहीं, तो विफलताएँ अदृश्य SPF पहचान कौन से सर्वर किसी डोमेन के लिए भेज सकते हैं ~all कंधे उचकाना है, इनकार नहीं DKIM पहचान संदेश पर एक हस्ताक्षर कोई selector प्रकाशित नहीं, जाँचने को कुछ नहीं DMARC पहचान SPF और DKIM विफल हों तो क्या करना है p=none देखता है, और कुछ नहीं करता इन सात में से छह, गलत सेट होने पर भी, मेल डिलीवर कर देती हैं। DANE अपवाद है। पूरी सूची में यही अकेली सेटिंग है जो बंद विफल होती है: इसे गलत कीजिए तो आपकी मेल लीक होने के बजाय रुक जाती है। यह बात याद रखिए, क्योंकि यही वजह निकलती है कि लोग इससे डरते हैं, और यही वजह कि यह सबसे कीमती है।\nपहचान वाली तीनों पर एक-एक बात, क्योंकि इस सीरीज़ का बाक़ी हिस्सा इन पर टिका है। SPF उन सर्वरों की सूची देता है जिन्हें किसी डोमेन के लिए भेजने की इजाज़त है, और एक नियम पर ख़त्म होता है: -all का मतलब “और कोई नहीं”, ~all का मतलब “और कोई नहीं, लेकिन फिर भी डिलीवर कर दो”। DKIM संदेश पर एक cryptographic हस्ताक्षर जोड़ता है, ताकि कोई भी बदलाव दिख जाए, बशर्ते डोमेन ने जाँचने के लिए सच में एक key प्रकाशित की हो। DMARC दोनों को जोड़ता है और पाने वाले को बताता है कि उनके विफल होने पर क्या करना है, और क्या वे उस From: पते से मेल खाते हैं जो पढ़ने वाले को असल में दिखता है। ये RFC 7208, 6376 और 7489 हैं, और हर एक अपनी अलग पोस्ट के लायक है।6 7 8\nअकेला DMARC छेड़छाड़ किया इनवॉइस निकल जाने देता है पहचान की परत में ठीक वहीं एक छेद है जहाँ सबसे ज़्यादा कीमत चुकानी पड़ती है, और इसे दिखाना ज़रूरी है, क्योंकि “हमारे पास DMARC reject पर है” वह बात है जो लोग तब कहते हैं जब उन्हें लगता है कि वे सुरक्षित हैं।\nDMARC पास हो जाता है अगर SPF या DKIM में से कोई एक पास हो और From: डोमेन से मेल खाए। कोई एक, दोनों नहीं। तो किसी डोमेन का असली साइन किया हुआ संदेश लीजिए, body में बैंक की जानकारी बदल दीजिए, और उसी जगह से आगे भेज दीजिए:\nDMARC ने बदला इनवॉइस पास किया। DKIM विफलता पर छोड़ने ने नहीं क्या भेजा गया क्या पहुँचा इनवॉइस 1042, DKIM-साइन sort code 20-00-00, 12345678 बदला गया वही संदेश, वही हस्ताक्षर sort code 40-11-22, 87654321 SPF: pass सूची वाले पते से भेजा DKIM: fail body hash मेल नहीं खाता DMARC: pass एक मेल खाता पास काफ़ी है पाने वाला क्या करता है अकेला DMARC डिलीवर। नई बैंक जानकारी असली जैसी दिखती हुई पहुँचती है। DKIM विफलता पर छोड़ें 554 5.7.1 DKIM signature does not verify लैब में पकड़ा गया: Rspamd 3.12.1 ने इसे R_SPF_ALLOW, R_DKIM_REJECT और DMARC_POLICY_ALLOW दिया। DMARC पूछता है कि क्या कोई एक जाँच पास हुई। सही पते से आया बदला हुआ इनवॉइस एक पास कर लेता है SPF फिर भी पास होता है, क्योंकि संदेश एक अधिकृत सर्वर से आया। DKIM हस्ताक्षर अब विफल होता है, क्योंकि body बदली गई। लेकिन DMARC को सिर्फ़ एक मेल खाता पास चाहिए, और SPF ने वह दे दिया, तो DMARC पास होता है और नए खाता नंबर वाला संदेश बिलकुल असली जैसा दिखते हुए डिलीवर हो जाता है। मैंने इसे लैब में पकड़ा: Rspamd ने इसे R_SPF_ALLOW, R_DKIM_REJECT और DMARC_POLICY_ALLOW दिया, और अपने आप यह डिलीवर हो जाता। इसे रोकने वाली अकेली चीज़ एक नियम था जो टूटे हस्ताक्षर पर सीधे reject करता है। p=reject वाला डोमेन उस छेड़छाड़ से सुरक्षित नहीं है जिसे पकड़ने के लिए वह हस्ताक्षर था। काम पूरा मानने से पहले यह जानना ज़रूरी है।\nDANE उतना ही अच्छा है जितना उसके नीचे का DNSSEC अब वे ट्रांसपोर्ट सेटिंग्स जो सच में सक्षम हमलावर को रोकती हैं, क्योंकि वे फ़ैसला भेजने वाले के हाथ में दे देती हैं। उनमें DANE सबसे मज़बूत है। यह किसी डोमेन को DNS में, एक TLSA रिकॉर्ड में, उस key का fingerprint प्रकाशित करने देता है जो उसका मेल सर्वर पेश करेगा, ताकि भेजने वाला सर्वर मेल न खाने वाली हर चीज़ को मना कर सके।9 कोई certificate authority नहीं, TLS handshake का जवाब देने वाले पर कोई भरोसा नहीं। डोमेन का मालिक कहता है “यह मेरी key है”, और बात वहीं ख़त्म।\nसिवाय इसके कि DNS जवाब जाली बनाए जा सकते हैं, तो सादे DNS में प्रकाशित fingerprint की कोई कीमत नहीं: जो हमलावर STARTTLS हटाता है, वही आपको नकली key से मेल खाता नकली fingerprint दे सकता है। DANE का तभी कोई मतलब है जब जिस DNS में वह रहता है, वह DNSSEC से साइन हो, ताकि fingerprint खुद जाली न बन सके। पूरी कड़ी यही है, और इसीलिए यह पोस्ट उस सीरीज़ में है जो DNSSEC से शुरू हुई। अगर आप उससे नहीं मिले हैं, तो नींव /hi/dns/dnssec-the-root-is-signed-you-are-not/ में है, और एक लाइन में: root साइन है, नाम लेने लायक हर TLD साइन है, और फिर यह ठीक उन नामों पर रुक जाता है जिन्हें लोग असल में इस्तेमाल करते हैं।\nTLSA रिकॉर्ड की कीमत उतनी ही है जितनी उसके ऊपर के हस्ताक्षर की साइन: alpha.test साइन नहीं: plain.test test. का trust anchor resolver को दी गई अकेली key DS 38044 alpha.test साइन, parent ने गवाही दी RRSIG _25._tcp.mail.alpha.test TLSA 3 1 1 093a80cac907a52e… मेल खाना चाहिए mail.alpha.test की public key SHA-256 093a80cac907a52e… plain.test न DS, न हस्ताक्षर कोई गवाह नहीं _25._tcp.mail.plain.test TLSA 3 1 1 0f09fe00d00d74c1… कोई भी इसे जाली बना सकता है भेजने वाले ने नज़रअंदाज़ किया कोई DANE policy लौटी ही नहीं 3 1 1 को पढ़ना 3: सर्वर की अपनी key, कोई CA नहीं। 1: सिर्फ़ public key। 1: SHA-256। उसी key पर सर्टिफ़िकेट renew कीजिए और रिकॉर्ड कभी नहीं बदलना पड़ता। दोनों ज़ोन TLSA रिकॉर्ड प्रकाशित करते हैं। साबित सिर्फ़ एक कर सकता है डायग्राम में दो डोमेन हैं जो दोनों TLSA रिकॉर्ड प्रकाशित करते हैं। एक साइन किए ज़ोन में है, जहाँ root से fingerprint तक हस्ताक्षरों की अटूट कड़ी है, तो भेजने वाला उस पर भरोसा कर सकता है। दूसरा बिना साइन के ज़ोन में है, तो उसका fingerprint बस bytes हैं जो कोई भी लिख सकता था, और सही ढंग से चलने वाला भेजने वाला उसे पूरी तरह नज़रअंदाज़ करता है और उसे DANE की कोई सुरक्षा नहीं मिलती। एक ही रिकॉर्ड, दो तरह प्रकाशित। असली होना सिर्फ़ एक साबित कर सकता है।\nप्रकाशित करने वाला रिकॉर्ड 3 1 1 है: CA की नहीं, सर्वर की अपनी key; पूरा सर्टिफ़िकेट नहीं, public key; SHA-256 से hash की हुई। बीच वाला अंक ही ऑपरेशन में फ़ायदा देता है, क्योंकि सर्टिफ़िकेट के बजाय key को pin करने का मतलब है कि रिकॉर्ड हर renewal में बचा रहता है, जब तक आप वही key रखें। Postfix वाली पोस्ट में पूरी प्रक्रिया है और वह जाल भी जिसमें लोग फँसते हैं: सर्टिफ़िकेट renew करने का आम तरीका हर बार नई key बनाता है और चुपचाप रिकॉर्ड तोड़ देता है। यहाँ के लिए इतना याद रखिए कि 3 1 1 और key का दोबारा इस्तेमाल ऐसा रिकॉर्ड है जिसे आप एक बार प्रकाशित करके छोड़ देते हैं।\nघर के नियम, और हर एक की कीमत ऊपर की हर बात कुछ नियमों की छोटी सूची बन जाती है, और अगली तीन पोस्ट असली सर्वरों को इन्हीं पर परखती हैं। ये नरम नहीं किए गए, और ये मुफ़्त नहीं हैं। यहाँ ये बिल के साथ हैं, क्योंकि जिस नियम की कीमत आप छिपा रहे हैं, उसे रखने का फ़ैसला आपने असल में किया ही नहीं।\nनियम क्या रोकता है आपको क्या कीमत चुकानी पड़ती है अंदर सादा टेक्स्ट नहीं अंदर आने वाली hop पर पढ़ना और छेड़छाड़ जिस भेजने वाले का सर्वर TLS नहीं कर सकता, वह आप तक नहीं पहुँच सकता बाहर सादा टेक्स्ट नहीं बाहर जाने वाली hop पर वही बिना TLS वाले सर्वर को मेल भेजी जाने के बजाय टल जाती है बाहर DANE या MTA-STS सक्षम man-in-the-middle उनकी तरफ़ पुराना रिकॉर्ड, और उन्हें आपकी मेल टल जाती है हर MX पर IPv6 IPv6-only भेजने वाले की पहुँच से बाहर होना AAAA रिकॉर्ड और संभालने को dual-stack सर्वर relay सिर्फ़ लॉगिन से आपका सर्वर दूसरों का spam धोकर आगे भेजे IP के भरोसे कहीं से भी भेजना बंद; यूज़र को authenticate करना होगा लॉगिन अपने नाम से ही भेजे कोई कर्मचारी सहकर्मी की जालसाज़ी करे हर यूज़र के नियम, envelope और header दोनों में लागू अनजान sender डोमेन छोड़ दें backscatter और गैर-मौजूद नामों की जालसाज़ी कुछ भी वैध नहीं; इनका कभी असली भेजने वाला था ही नहीं SPF और DKIM विफलता reject करें जालसाज़ी और छेड़छाड़ बिना SRS के forward हुई मेल bounce हो जाती है forwarding की कीमत ही चुभती है, और वह असली है: सिर्फ़ SPF पर reject कीजिए तो ऐसी जगह से forward हुआ संदेश, जो भेजने वाले के SPF रिकॉर्ड में नहीं है, मना हो जाता है, क्योंकि पाने वाले को forwarder बिलकुल जालसाज़ जैसा दिखता है। इसके इलाज हैं, SRS और ARC,10 और Postfix वाली पोस्ट यह विफलता दिखाती है। ईमानदार बात यह है कि ये नियम कुछ ऐसी मेल bounce करते हैं जिसे ढीला सर्वर डिलीवर कर देता। इनका मकसद यही है। उसमें से कुछ मेल को bounce ही होना चाहिए था, और बाक़ी आपको एक ऐसे forwarding सेटअप के बारे में बता रही है जो इस भरोसे पर चल रहा था कि कोई जाँचेगा नहीं।\nयह खुली विफल होती है, और यह रहा सबूत यह पूरी पोस्ट इस दावे पर टिकी है कि ये सेटिंग्स खुली विफल होती हैं, चुपचाप, तो देखकर आप काम करने वाली और टूटी हुई में फ़र्क़ नहीं कर सकते। यह सैद्धांतिक चिंता नहीं है। अगली पोस्ट के लिए Postfix सर्वर बनाते समय इनमें से हर विफलता हुई, और हर एक ऐसी सेटिंग थी जो कॉन्फ़िगर दिखती थी और कुछ नहीं करती थी।\nलैब में पाँच खुली विफलताएँ, और वह एक जो बंद विफल हुई सेटिंग, और कब चुभती है असल में क्या किया Postfix: dane गंतव्य कोई TLSA प्रकाशित नहीं करता खुली विफल opportunistic पर गिरा: सादे टेक्स्ट में भेजा Postfix: login-mismatch जाँच port 25 पर, जहाँ login बंद है खुली विफल log चेतावनी के साथ छोड़ी: हमारा डोमेन जाली बना Rspamd: local.d में local_addrs सूची छोटी करने की कोशिश खुली विफल जुड़ा, बदला नहीं: 10/8 और fd00::/8 बिना जाँच अकेला DMARC DKIM विफल, SPF पास खुली विफल बदला इनवॉइस डिलीवर बिना साइन के ज़ोन में TLSA बिलकुल असली जैसा दिखता है खुली विफल नज़रअंदाज़: DANE बिलकुल नहीं TLSA साइन, गलत सर्टिफ़िकेट रिकॉर्ड पुराना है बंद विफल टाला गया: कुछ नहीं भेजा हर पंक्ति लैब का capture है, मैनुअल का पाठ नहीं। छह में से पाँच में मेल चलती रही। समस्या यही है छह असली सेटिंग्स, हर एक अगली पोस्ट के Postfix सर्वर को बनाते समय से। पाँच खुली विफल हुईं: उन्होंने मेल डिलीवर की, बिना किसी error के, बिलकुल ऐसे दिखते हुए जैसे ठीक काम कर रही हों। छठी, पुराना DANE रिकॉर्ड, बंद विफल हुई। यही वह है जिससे सब डरते हैं, और यही अकेली है जिसने संदेश लीक करने के बजाय उसे बचाया। सबक डायग्राम के आख़िरी कॉलम में ही रखा है: जिस सेटिंग से लोग इसलिए बचते हैं कि वह उनकी मेल रोक सकती है, वही अकेली है जो वैसा बर्ताव करती है जैसा किसी सुरक्षा नियंत्रण को करना चाहिए।\nउसकी हर पंक्ति एक capture है, मैनुअल का पाठ नहीं। काम करने वाली और टूटी सेटिंग में फ़र्क़ जानने का तरीका है वह संदेश भेजना जिसे उसे रोकना चाहिए, और देखना कि क्या लौटता है। यह मैं यहाँ एक बार कहूँगा और सीरीज़ के बाक़ी हिस्से में तीन बार साबित करूँगा।\nतो असल में इनमें से कुछ भी करता कौन है? यह कहना एक बात है कि सेटिंग्स मायने रखती हैं। यह पूछना दूसरी बात है कि जिन संस्थाओं की मेल सबसे ज़्यादा मायने रखती है, उन्होंने इन्हें चालू किया है या नहीं। तो मैंने पूछा, सिर्फ़ read-only DNS और एक validating resolver से, 22 अक्टूबर 2026 को: मेल पाने वाले छब्बीस डोमेन, बैंक, बड़े प्रदाता, जर्मन विशेषज्ञ और certificate authorities, हर एक इस पोस्ट की सात चीज़ों के लिए जाँचा गया।11\nडोमेन MX पर AAAA DNSSEC DANE (TLSA) MTA-STS DMARC SPF UK के बैंक barclays.co.uk — — — — reject -all hsbc.co.uk — — — — reject — lloydsbank.com — — — — reject -all natwest.com — — — — reject — santander.co.uk — — — — reject — nationwide.co.uk — — — — reject — monzo.com सभी — — — reject — starlingbank.com — — — — reject — मेल प्रदाता gmail.com सभी — — enforce — all नहीं outlook.com — — — enforce — -all yahoo.com — — — testing reject all नहीं icloud.com — — — — quarantine all नहीं fastmail.com — — — testing — ~all proton.me — हाँ हाँ enforce quarantine ~all जर्मन प्रदाता posteo.de — हाँ हाँ enforce — ~all mailbox.org सभी हाँ हाँ enforce reject ~all gmx.de — हाँ हाँ — quarantine all नहीं web.de — हाँ हाँ testing quarantine all नहीं t-online.de — — — testing — ~all Certificate authorities letsencrypt.org सभी — — — reject -all digicert.com सभी — — — quarantine — sectigo.com — — — — reject -all globalsign.com सभी — — — reject — UK सार्वजनिक क्षेत्र hmrc.gov.uk — — — enforce reject — nhs.uk — — — — reject -all ncsc.gov.uk — — — enforce reject -all पहले DMARC का कॉलम नीचे तक पढ़िए, क्योंकि वही ज़्यादातर भरा है। इनमें से ज़्यादातर DMARC policy प्रकाशित करते हैं, और ज़्यादातर बैंक reject पर हैं। DMARC वह सेटिंग है जो हो जाती है, क्योंकि ऑडिटर यही पूछता है और सप्लायर यही बेच सकता है, और यह दिखती है: आप इसे lookup करके टिक लगा सकते हैं। यही वह सेटिंग भी है जिसने, अकेले, इस पोस्ट में पहले एक छेड़छाड़ किया इनवॉइस निकल जाने दिया।\nअब DANE का कॉलम पढ़िए, यहाँ की अकेली सेटिंग जो downgrade नहीं हो सकती और जाली नहीं बन सकती। छब्बीस में से पाँच डोमेन। हर एक या तो जर्मन प्रदाता है या Proton। UK का एक भी बैंक नहीं। एक भी certificate authority नहीं, वे कंपनियाँ जिनका पूरा धंधा ही keys की गारंटी देना है। जिस हमले से यह पोस्ट शुरू हुई, उसके ख़िलाफ़ सबसे मज़बूत सुरक्षा मुट्ठी भर ऐसे लोग करते हैं जिन्हें परवाह है, और कोई नहीं जो बस नियम-पालन भर करता है।\nबैंकों की पंक्ति सबसे तीखी है। आठ बैंक, हर एक DMARC reject पर, और उन सब में मिलाकर: कोई DANE नहीं, कोई लागू MTA-STS नहीं, और IPv6 पर पहुँच वाला सिर्फ़ एक, Monzo। चार certificate authorities में से दो अपने apex पर कोई SPF रिकॉर्ड प्रकाशित नहीं करतीं। HMRC और NatWest का भी नहीं है। ये छोटे-मोटे संगठन नहीं हैं जिन्हें फ़ुर्सत नहीं मिली। ये वे संस्थाएँ हैं जो आपको वह मेल भेजती हैं जिसके नकली होने से आप सबसे ज़्यादा डरते हैं, और उनके पास जो सुरक्षा है वह वह बिल्ला है जो सबसे मज़बूत दिखता है और सबसे कम करता है।\nIPv6 का कॉलम अपने आप में एक छोटा घोटाला है। छब्बीस में से बीस के मेल सर्वर पर कोई AAAA रिकॉर्ड है ही नहीं, तो IPv6-only नेटवर्क पर चलने वाला भेजने वाला उन तक नहीं पहुँच सकता, और यह संख्या एक ही दिशा में जा रही है। मैंने /hi/networking/we-never-ran-out-of-addresses/ में उद्योग के इस काम को पूरा करने से इनकार के बारे में लिखा था, और यह फिर से है, इस बार मेल के रास्ते में। इसकी शक्ल वही है जो /hi/dns/dnssec-the-root-is-signed-you-are-not/ में gov.uk की गिनती की थी: कठिन हिस्सा सालों पहले हो चुका, registries इसे मुफ़्त देती हैं, और जिन्हें सबसे साफ़ तौर पर इसका इस्तेमाल करना चाहिए, उन्होंने नहीं किया। केंद्रीय gov.uk तो तालिका में ही नहीं है, क्योंकि वह कोई MX प्रकाशित नहीं करता। वह मेल पाता ही नहीं। टेस्ट पास करने का यह भी एक तरीका है।\nअगर आप अब भी यह नहीं कर रहे, तो क्या आप खुद को प्रोफ़ेशनल कह सकते हैं? इस पोस्ट में नाम लिया गया हर स्टैंडर्ड, और उसके नीचे की गिनती, एक ही दिशा दिखाते हैं: यह शोध की समस्या नहीं, चालू करने की समस्या है, और चालू करने का काम वे लोग नहीं कर रहे जो इसके लिए सबसे अच्छी जगह पर हैं। जब सबूत इतना एकतरफ़ा हो, तो सवाल अकादमिक नहीं रहता और ऐसा बन जाता है जिसका जवाब आपको अपने सर्वरों के बारे में देना है। अगर आप किसी ऐसी संस्था की मेल चलाते हैं जो दूसरों का पैसा या दूसरों की सेहत संभालती है, और आपका MX कोई DANE नहीं करता, कोई MTA-STS लागू नहीं करता और IPv6 पर पहुँचा नहीं जा सकता, तो क्या आप इसे प्रोफ़ेशनल काम कह सकते हैं?\nतीन ईमानदार जवाब हैं, और सिर्फ़ पहले दो टिकते हैं। हाँ, लिखी हुई वजह और उसके सामने तारीख़ के साथ: आप ऐसे प्लेटफ़ॉर्म पर हैं जो अभी DANE नहीं देता, आपने यह बात उठाई है, और अगले साल की योजना में इसकी एक लाइन है। यह एक प्रोफ़ेशनल है जो असली बाधा को संभाल रहा है, और यह ठीक है। हाँ, क्योंकि आपको पता नहीं था, और अब पता है, और आप इसी हफ़्ते पता करने जा रहे हैं कि आपका सर्वर कहाँ खड़ा है। कोई यह जानते हुए पैदा नहीं हुआ। और नहीं: आप इतना जानते थे कि बेचैन हों, आपने यहाँ तक पढ़ा है, और आप tab बंद करेंगे और कुछ नहीं बदलेंगे, क्योंकि मेल चल रही है और कोई error नहीं आ रहा और कोई आपको मजबूर नहीं कर रहा। वह आख़िरी जवाब जानकारी की कमी नहीं है। वह एक फ़ैसला है कि जिस चीज़ के लिए आप ज़िम्मेदार हैं उसे टूटा रहने दिया जाए, क्योंकि टूटा होना ज़्यादा शांत है।\nस्टैंडर्ड आपको यह करने पर मजबूर नहीं करता। पूरी समस्या यही है, और पूरा मुद्दा भी यही है। जानना कोई ऐसी चीज़ नहीं जो आपके साथ हो जाती है, और कोई आकर आपको नहीं बताएगा कि आपका मेल सर्वर दो साल से चुपचाप सादे टेक्स्ट में भेज रहा है। इसलिए यह पक्का करना कि आपको पता हो, यही काम है, और यह किसी और का नहीं।\nस्टैंडर्ड वह वादा है जो आप तब निभाते हैं जब कोई नहीं देख रहा इसके सारे हिस्से सालों पहले पूरे हो चुके थे। STARTTLS 2002 का है, SPF, DKIM और DMARC एक दशक या उससे ज़्यादा पुराने हैं, मेल के लिए DANE 2015 में तय हुआ, MTA-STS 2018 में। इसमें से कुछ भी किसी लाइसेंस के पीछे नहीं है, किसी vendor की ज़रूरत नहीं, और जो registries DNSSEC रिकॉर्ड रखेंगी वे उन्हें मुफ़्त देती हैं। कठिन इंजीनियरिंग हो चुकी है। जो बचा है वह आसान हिस्सा है, वह हिस्सा जो तभी आसान है जब कोई परवाह करे: इसे चालू करना, जाँचना कि यह सच में चालू है, और सर्टिफ़िकेट renew होने और रिकॉर्ड को पीछे-पीछे चलने पर इसे चालू रखना।\nअसल में पूरी बात वही आख़िरी हिस्सा है। स्टैंडर्ड वह दस्तावेज़ नहीं है। दस्तावेज़ बीस साल से मौजूद है और मेल फिर भी सादे टेक्स्ट में जाती है। स्टैंडर्ड वह चीज़ है जो आप तब निभाते हैं जब कोई error मैसेज आपको मजबूर नहीं कर रहा, जब आप चुपचाप इसे छोड़ दें तो भी मेल वैसे ही चलती, जब अकेले आप ही होंगे जिसे कभी पता चलेगा। इनमें से हर सेटिंग ठीक इसीलिए खुली विफल होती है कि किसी को परवाह करने पर मजबूर न होना पड़े। मतलब परवाह करना ही पूरा काम है।\nइसका कोई इनाम नहीं मिलता। जो इनवॉइस बदला नहीं गया, वह बिलकुल उस इनवॉइस जैसा दिखता है जो बदला गया। जो पासवर्ड रीसेट रास्ते में किसी ने नहीं पढ़ा, वह बिलकुल उस जैसा दिखता है जो किसी ने पढ़ा। फ़र्क़ सिर्फ़ उन दिनों का है जब किसी ने कोशिश की, और उन दिनों जिस इंसान ने यह सब चालू किया और जाँचा कि यह काम कर रहा है, उसे कभी पता नहीं चलता कि उस पर हमला हुआ, क्योंकि हमला काम नहीं किया। बाहर से ठीक से काम करना ऐसा ही दिखता है: कुछ नहीं हो रहा, ऐसी वजहों से जो किसी को दिखती नहीं।\nतो फिर भी हर सेटिंग सही कीजिए। इसलिए नहीं कि कोई जाँच रहा है, क्योंकि कोई नहीं जाँच रहा। इसलिए कीजिए कि आप ही वह हैं जिसने कहा था कि मेल सुरक्षित है, और हमारे यहाँ उस बात की आज भी कुछ कीमत है।\nRFC 3207 §6 — SMTP Service Extension for Secure SMTP over TLS, Security Considerations: “A man-in-the-middle attack can be launched by deleting the ‘250 STARTTLS’ response from the server”, और यह कि clients और servers “MUST be able to be configured to require successful TLS negotiation … for selected hosts”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3207 §4 — “A publicly-referenced SMTP server MUST NOT require use of the STARTTLS extension in order to deliver mail locally. This rule prevents the STARTTLS extension from damaging the interoperability of the Internet\u0026rsquo;s SMTP infrastructure.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7672 — opportunistic DANE TLS के ज़रिए SMTP सुरक्षा, जो मेल के लिए 3 1 1 रिकॉर्ड और उन downgrade हमलों को परिभाषित करता है जिनका यह सामना करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8461 — SMTP MTA Strict Transport Security (MTA-STS)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8460 — SMTP TLS Reporting (TLS-RPT)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7208 — Sender Policy Framework (SPF), ईमेल में डोमेन के इस्तेमाल को अधिकृत करने के लिए, संस्करण 1।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6376 — DomainKeys Identified Mail (DKIM) हस्ताक्षर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7489 — Domain-based Message Authentication, Reporting, and Conformance (DMARC)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6698 और RFC 7671 — DNS-Based Authentication of Named Entities (DANE) TLSA रिकॉर्ड, और उसका operational update।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8617 — Authenticated Received Chain (ARC), जो एक forwarder को यह गवाही देने देता है कि उससे पहले authentication पास हुआ था।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n22 अक्टूबर 2026 को एक validating resolver (1.1.1.1) के सामने read-only DNS से मापा गया, और हर MTA-STS policy को HTTPS से लाया गया। हर डोमेन के लिए: क्या हर MX host AAAA रिकॉर्ड प्रकाशित करता है; क्या MX lookup validate हुआ (AD flag); क्या _25._tcp.\u0026lt;mx\u0026gt; में साइन किए ज़ोन में TLSA रिकॉर्ड है; प्रकाशित MTA-STS mode; _dmarc.\u0026lt;domain\u0026gt; पर DMARC policy; और apex SPF रिकॉर्ड पर all qualifier। इनमें से किसी सर्वर को कुछ भी नहीं भेजा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/email/why-every-mail-setting-has-to-be-right/","summary":"ईमेल सुरक्षा की हर परत इस तरह बनी है कि वह सुरक्षित ढंग से रुकने के बजाय काम करती रहे। ग्रीटिंग से STARTTLS की लाइन हटा दीजिए और opportunistic भेजने वाला सादे टेक्स्ट में भेजता रहता है, जिसे RFC 3207 एक हमला भी बताता है और पब्लिक सर्वर पर उससे बचाव करने से मना भी करता है। यह पोस्ट उस man-in-the-middle को लैब में पकड़ती है, फिर उन सात सेटिंग्स से गुज़रती है जो रास्ते में संदेश को बचाती हैं: हर एक क्या बचाती है, क्या नहीं, और गलत होने पर कैसे खुली विफल होती है। फिर DANE तक: DNSSEC के बिना TLSA रिकॉर्ड बेकार क्यों है, 3 1 1 और key का दोबारा इस्तेमाल क्यों मायने रखता है, और पुराना रिकॉर्ड ही वह अकेली विफलता क्यों है जो खोलती नहीं, बंद करती है। उसके बाद UK के बैंकों, बड़े मेल प्रदाताओं और certificate authorities की read-only गिनती, कि असल में कितने इनमें से कुछ भी करते हैं।","title":"मेल की हर सेटिंग सही क्यों होनी चाहिए"},{"content":"अपने distribution से Postfix install कीजिए और defaults मान लीजिए, तो आपके पास एक ऐसा mail server है जो आपकी mail हर उस server को खुले में भेजता है जो TLS नहीं देता, और किसी से भी mail ले लेता है जो किसी का भी होने का दावा करे। Debian का ship हुआ main.cf दोनों TLS स्तर may पर रखता है। SPF कुछ नहीं जाँचता। DKIM कुछ नहीं जाँचता। जो sender domain मौजूद नहीं, वह स्वीकार हो जाता है।\nयह bug नहीं है। यह वही है जो standards ने बीस साल पहले माँगा था, और internet पर बहुत-से mail servers आज भी ऐसे ही चलते हैं।\nयह पोस्ट दूसरी तरह का बनाती है। यह इस series की lead पोस्ट के घर के नियम लेती है और उनमें से हर एक को एक काम करते Postfix में डालती है, साथ में वह जवाब जो हर नियम कुछ मना करते समय देता है। नियमों का तर्क उस पोस्ट में है और मैं उसे दोबारा नहीं दूँगा। यह वाली build है।\nनियम Debian का Postfix, जैसा ship होता है यह build उल्लंघन पर क्या मिलता है अंदर plaintext नहीं TLS दिया जाता है, कभी ज़रूरी नहीं हर listener पर encrypt 530 5.7.0 Must issue a STARTTLS command first बाहर plaintext नहीं मिले तो TLS, नहीं तो खुला text encrypt, जहाँ publish हो वहाँ DANE या MTA-STS deferred, dsn=4.7.4 या dsn=4.7.5 हर चीज़ पर IPv6 inet_protocols = all वही, साथ में हर MX पर AAAA नीचे का हर test दोनों families पर चला सिर्फ़ login पर relay mynetworks के लिए relay port 25 कभी relay नहीं करता, 587 और 465 को login चाहिए 554 5.7.1 … Relay access denied Login अपने ही नाम से भेजे जाँचा नहीं जाता envelope और From: दोनों login से बँधे 553 5.7.1 … not owned by user Sender domain मौजूद होना चाहिए जाँचा नहीं जाता reject_unknown_sender_domain, code 550 550 5.1.8 … Domain not found SPF फ़ेल, DKIM फ़ेल जाँचा नहीं जाता Rspamd, ज़बरदस्ती reject के साथ 554 5.7.1 SPF hard fail / DKIM signature does not verify इस पोस्ट का हर जवाब एक चलते server से, IPv4 और IPv6 पर कैप्चर किया गया। कई settings तब तक कुछ नहीं करती निकलीं जब तक कुछ और भी सेट न हो। इनमें से हर एक मुझे उसे कुछ न करते देखकर मिली। उन्हें नीचे अलग से बताया गया है, क्योंकि यही वे हैं जो आपको काटेंगी।\nLab एक अलग-थलग network, हर host दोनों address families पर DNS और POLICY network maillab: 10.89.50.0/24 और fd89:50::/64, internal lab-ns BIND 9.20.30, test. sign .10 और ::10 lab-resolver unbound 1.26.1, जाँचता है .11 और ::11 lab-tlspol postfix-tlspol 1.14.4 .25 और ::25 lab-alpha Postfix 3.10.13 alpha.test .20 और ::20 lab-bravo Stalwart 0.16.27 bravo.test .21 और ::21 lab-plain Postfix, TLS नहीं plain.test .22 और ::22 lab-client swaks, test sender sender.test .50 और ::50 MAIL SERVERS certificates के लिए फेंकने लायक CA। इन पोस्ट का हर test दोनों families पर चला। पोस्ट की हर चीज़ पहले यहाँ चलाई गई। इस पर से कुछ भी internet तक नहीं पहुँच सकता, इसलिए इस पर कुछ भी internet के बारे में अंदाज़ा नहीं है हिस्सा Version काम Postfix 3.10.13, Debian trixie alpha.test के लिए MX और submission server Dovecot 2.4.1 logins के passwords, हर mail protocol बंद Rspamd, Redis 3.12.1, 8.0.2 SPF, DKIM, DMARC, DKIM signing postfix-tlspol 1.14.4 TLSA और MTA-STS से outbound policy BIND, unbound 9.20.30, 1.26.1 एक signed private test. zone, और एक resolver जो उसे validate करता है Domain किसलिए है alpha.test वह server जो यह पोस्ट बनाती है bravo.test Stalwart, जिसकी अपनी पोस्ट है plain.test बुरा पड़ोसी: unsigned zone, कोई STARTTLS नहीं sender.test SPF -all, DKIM, DMARC p=reject: जालसाज़ी, छेड़छाड़ और forwarding के लिए हर listener दोनों families पर bind होता है, और हर MX का एक A और एक AAAA record है। यहाँ IPv6 कोई अतिरिक्त चीज़ नहीं है। इसके बिना mail server एक ख़राबी है, और यह साबित करना कि इसमें है, आसान है: हर check दो बार चलाइए।\nचरण-दर-चरण एक SMTP session एक तय क्रम है, और इस build के हर नियम की उसमें एक स्वाभाविक जगह है। क्रम एक वजह से मायने रखता है: जितनी जल्दी सबूत इजाज़त दे, उतनी जल्दी मना करो। जो sender domain मौजूद नहीं, वह MAIL FROM पर पता चल जाता है, इसलिए मना करने से पहले body लेने की कोई वजह नहीं। छेड़छाड़ वाली body DATA के बाद ही पता चलती है, इसलिए वहीं मना होती है।\nहर नियम कहाँ काटता है, और server ने क्या कहा चरण नियम, और LAB में कैप्चर हुआ जवाब EHLO STARTTLS AUTH MAIL FROM RCPT TO DATA TLS चालू होने तक AUTH नहीं दिया जाता smtpd_tls_auth_only = yes इसे छोड़ें तो और कुछ स्वीकार नहीं 530 5.7.0 Must issue a STARTTLS command first सिर्फ़ 587 और 465; port 25 पर login नहीं 554 5.7.1 Client host rejected: Access denied sender domain मौजूद होना चाहिए 550 5.1.8 Sender address rejected: Domain not found हमारे अपने domain को login चाहिए 554 5.7.1 Our own domain: send through submission login पते का मालिक होना चाहिए 553 5.7.1 not owned by user alice@alpha.test port 25 कभी relay नहीं करता 554 5.7.1 Relay access denied Rspamd: SPF, DKIM, DMARC 554 5.7.1 SPF hard fail / DKIM does not verify From: header login ही होना चाहिए 554 5.7.1 You may only send as your own address Postfix MAIL FROM rejections को RCPT TO तक रोकता है, इसलिए वे तीन जवाब एक कदम बाद आते हैं। हर नियम का एक चरण है। जितनी जल्दी सबूत इजाज़त दे, उतनी जल्दी reject करो बाकी पोस्ट इन चरणों से क्रम में गुज़रती है: अंदर TLS, बाहर TLS, logins और relaying, sender पते, फिर Rspamd body के साथ क्या करता है।\nअंदर आने वाला plaintext नहीं एक line:\nsmtpd_tls_security_level = encrypt जो client STARTTLS छोड़ने की कोशिश करता है, उसे इनकार के सिवा कुछ नहीं मिलता:\n\u0026lt;- 220 mail.alpha.test ESMTP Postfix -\u0026gt; MAIL FROM:\u0026lt;carol@sender.test\u0026gt; \u0026lt;** 530 5.7.0 Must issue a STARTTLS command first अब पढ़िए कि उस setting के बारे में Postfix का अपना manual क्या कहता है:\nAccording to RFC 2487 this MUST NOT be applied in case of a publicly-referenced SMTP server. Instead, this should be used on dedicated servers, for example submission (port 587).1\nRFC 2487, RFC 3207 का पुराना नंबर है, और वही नियम वजह है कि internet के ज़्यादातर MX hosts आज भी खुले में mail स्वीकार करते हैं। मैं इसे फिर भी एक publicly referenced MX पर लगा रहा हूँ। जान-बूझकर। Lead पोस्ट बताती है कि मुझे यह नियम ग़लत क्यों लगता है, और क़ीमत असली है: जिस sender का server TLS नहीं कर सकता, वह आप तक नहीं पहुँच सकता। 2026 में यह ऐसा server है जिससे आप mail नहीं चाहते।\nबाहर जाने वाला plaintext नहीं यह वह आधा हिस्सा है जो ज़्यादातर guides ग़लत करती हैं, क्योंकि सीधी-सी setting वह नहीं करती जो उसका नाम कहता है।\nPostfix का एक dane security level है। इसे सेट कीजिए और आप उम्मीद करेंगे कि mail authenticated होकर बाहर जाएगी। ऐसा नहीं होता। यह रहा जो postconf(5) कहता है कि यह तब करता है जब दूसरा छोर कुछ publish नहीं करता:\nWhen DNSSEC-validated TLSA records are not found the effective tls security level is \u0026ldquo;may\u0026rdquo;.2\nmay opportunistic TLS है, जिसे TLS_README साफ़ शब्दों में बताता है: “Otherwise, messages are sent in the clear.”3 ज़्यादातर internet कोई TLSA record publish नहीं करता। तो अकेले smtp_tls_security_level = dane का मतलब है उन गिने-चुने domains के लिए DANE जो इसे करते हैं, और बाकी हर उस के लिए खुला text जिसका server STARTTLS नहीं देता। Opportunistic, बेहतर नाम के साथ।\nइलाज यह है कि encrypt को फ़र्श बनाया जाए और हर destination को उससे ऊपर उठाया जाए जब वह कुछ बेहतर publish करे। उठाने का काम postfix-tlspol करता है। यह एक छोटा policy server है, MIT licensed, जिससे Postfix एक socketmap पर हर recipient domain के बारे में पूछता है। यह पहले signed zone में काम के TLSA records देखता है, फिर MTA-STS, और वह policy बताता है जो Postfix को इस्तेमाल करनी चाहिए:\nsmtp_dns_support_level = dnssec smtp_tls_security_level = encrypt smtp_tls_mandatory_protocols = \u0026gt;=TLSv1.2 smtp_tls_policy_maps = socketmap:inet:[fd89:50::25]:8642:QUERYwithTLSRPT तीन policies, और कोई भी plaintext नहीं पूछो DOMAIN क्या PUBLISH करता है POSTFIX कौन-सी POLICY लेता है postfix-tlspol हर recipient domain पर, DNSSEC पर काम का TLSA signed zone में MTA-STS, enforce HTTPS पर fetch हुई policy दोनों नहीं ज़्यादातर internet dane-only server की key मेल खानी चाहिए secure match=… CA certificate, सिर्फ़ सूचीबद्ध MX encrypt TLS ज़रूरी, authenticated नहीं और जब यह पूरा न हो सके, MAIL इंतज़ार करती है STARTTLS नहीं दिया: dsn=4.7.4 key मेल नहीं खाती: dsn=4.7.5 Ship हुआ dane स्तर एक चौथी पंक्ति जोड़ देता: TLSA नहीं, तो खुले में भेजो। यह setup उसे बाहर रखता है इसकी README साफ़ बताती है कि यह क्या लौटाता है: यह “Verify TLSA records for correctness and supported parameters, only then the dane-only policy (Mandatory DANE) will be returned.”4 तीन lab domains के बारे में पूछने पर, इसने ठीक यही कहा:\nlevel=INFO msg=\u0026#34;Evaluated policy\u0026#34; origin=network domain=alpha.test policy=dane-only ttl=214 level=INFO msg=\u0026#34;Evaluated policy\u0026#34; origin=network domain=bravo.test policy=dane-only ttl=198 level=INFO msg=\u0026#34;No policy found\u0026#34; origin=network domain=plain.test ttl=1800 plain.test के लिए कोई policy नहीं, यानी Postfix encrypt वाले फ़र्श पर लौटता है, और plain.test कोई STARTTLS नहीं देता। Mail इंतज़ार करती है:\npostfix/smtp[194]: 78598130DA54: to=\u0026lt;someone@plain.test\u0026gt;, relay=mail.plain.test[fd89:50::22]:25, delay=0.02, delays=0.01/0.01/0.01/0, dsn=4.7.4, status=deferred (TLS is required, but was not offered by host mail.plain.test[fd89:50::22]) और वह मामला जो साबित करता है कि DANE कुछ कर रहा है। Build की शुरुआत में, bravo.test पर Stalwart अब भी अपना bootstrap certificate serve कर रहा था जबकि zone असली वाले का TLSA record publish कर रहा था। एक server जिसका certificate बिल्कुल ठीक था, बस वह नहीं जिसकी domain के मालिक ने ज़मानत दी थी:\npostfix/smtp[196]: server certificate verification failed for mail.bravo.test[fd89:50::21]:25: num=65:no matching DANE TLSA records postfix/smtp[196]: 79160130DA56: to=\u0026lt;someone@bravo.test\u0026gt;, relay=mail.bravo.test[10.89.50.21]:25, delay=5.9, delays=0/0.01/5.9/0, dsn=4.7.5, status=deferred (Server certificate not verified) दोनों मामलों में deferred सही जवाब है। Deferred message दिनों तक दोबारा कोशिश में रहता है, जिससे दूसरी तरफ़ को अपना छोर ठीक करने का समय मिलता है, और कुछ नहीं खोता। खुले में भेजा गया message वापस नहीं लिया जा सकता। इसलिए इंतज़ार करना हमेशा सस्ती नाकामी है।\nResolver भरोसे की श्रृंखला का हिस्सा है smtp_dns_support_level = dnssec Postfix से उसके resolver से validated जवाब माँगवाता है, और फिर resolver के AD bit पर भरोसा करवाता है, वह flag जो कहता है “मैंने signatures जाँच लिए”। Postfix खुद कुछ validate नहीं करता। वह भरोसा करता है। /etc/resolv.conf में जो भी resolver लिखा है, वही अब तय कर रहा है कि आपकी mail authenticated है या नहीं।\nआपको ऐसी सलाह मिलेगी कि glibc वह bit फेंक देता है जब तक resolv.conf में options trust-ad न हो। मैंने इसे test किया, और इस Postfix पर इससे कोई फ़र्क़ नहीं पड़ता: DANE option के साथ भी मेल खाया और उसके बिना भी। Source वजह बताता है। जब भी Postfix DNSSEC माँगता है, वह flag खुद सेट करता है:\nif (DNS_WANT_DNSSEC_VALIDATION(flags)) flags |= (RES_USE_EDNS0 | RES_TRUSTAD); यह src/dns/dns_lookup.c से है।5 तो जो मायने रखता है वह resolver का कोई option नहीं है। वह यह है कि आप किस resolver की ओर इशारा करते हैं। उसे validate करना चाहिए, और उस तक का रास्ता ऐसा होना चाहिए जिस पर आप भरोसा करते हों, जिसका व्यवहार में मतलब है कि वह mail server पर ही चले या ऐसे network पर जहाँ कोई और न पहुँच सके। Internet के पार का एक public resolver ख़ुशी से आपके लिए AD सेट कर देगा। आपके और उसके बीच बैठा कोई भी ऐसा कर देगा।\nDANE: key publish करें, certificate नहीं एक TLSA record यह पक्का करता है कि भेजने वाले server को connect करने पर क्या दिखना चाहिए। इस्तेमाल करने वाला 3 1 1 है, और तीनों अंकों में से हर एक एक चुनाव है:\nField Value मतलब यही क्यों Usage 3, DANE-EE server के अपने certificate से मिलान chain में भरोसा करने या फ़ेल होने को कोई CA नहीं Selector 1, SPKI सिर्फ़ public key का hash उसी key पर हर renewal झेल जाता है Matching 1, SHA-256 एक digest, पूरी key नहीं हर DANE client को इसे support करना ही होता है RFC 7672 उस combination की वजह एक line में देता है:\nthis record type works for all clients and need not change across certificate renewals with the same key.6\nHash एक pipeline है, और यह रहा lab certificate और signed zone के serve किए record के सामने:\n$ openssl x509 -in mail.alpha.test.crt -noout -pubkey \\ | openssl pkey -pubin -outform DER | sha256sum 093a80cac907a52eb41d17df20163c95f2e15d6702c76f65174d7fc32460c69f - $ dig +dnssec _25._tcp.mail.alpha.test TLSA ;; flags: qr rd ra ad; QUERY: 1, ANSWER: 2, AUTHORITY: 0, ADDITIONAL: 1 _25._tcp.mail.alpha.test. 165 IN TLSA 3 1 1 093A80CAC907A52EB41D17DF20163C95F2E15D6702C76F65174D7FC3 2460C69F Lab ने “need not change” वाला हिस्सा संयोग से साबित कर दिया। आधे रास्ते में, Python 3.13 के सख़्त certificate checks ने lab certificates को authority key identifier न होने पर ठुकरा दिया, इसलिए हर एक दोबारा जारी किया गया। वही private keys, नए certificates। एक भी TLSA record नहीं बदला, और किसी भी DANE sender को पता नहीं चला।\nअब जाल। ज़्यादातर लोग अपने certificates certbot से renew करते हैं, अपने-आप, हर कुछ हफ़्तों में। certbot के अपने documentation से:\nNot reusing private keys is the default behavior of Certbot.7\nतो default renewal हर बार नई key बनाता है। TLSA record मेल खाना बंद कर देता है, और DANE जाँचने वाला हर sender renewal वाले दिन आपकी mail defer करने लगता है। आपकी ओर कुछ नहीं टूटता। कुछ भी आपको नहीं बताता। certbot को --reuse-key के साथ चलाइए और record उसके पीछे रखे हर certificate से ज़्यादा जीता है। जब key सच में बदलनी हो, तो उसका एक क्रम है:\nवही key: करने को कुछ नहीं। नई key: चार कदम, क्रम से उसी KEY पर RENEW करना certificate renew करें वही private key TLSA नहीं बदला 093a80… पहले और बाद publish करने को कुछ नहीं DANE senders अनजान रहते KEY बदलना 1. नया TLSA publish करें पुराने के बगल में 2. दो TTL इंतज़ार caches में पुराना set है 3. key बदलें server नई दिखाता है 4. पुराना हटाएँ सिर्फ़ अब, पहले कभी नहीं कदम 2 छोड़ें तो पुराना record cache करने वाला हर DANE sender उसकी मियाद ख़त्म होने तक आपकी mail defer करता है। Renewal पर key दोबारा इस्तेमाल कीजिए और TLSA record उसके पीछे रखे हर certificate से ज़्यादा जीता है दूसरा कदम वह है जिसे लोग छोड़ देते हैं। नतीजा है deferred mail जब तक पुराना record हर cache से उम्र पूरी करके निकल न जाए, और यह ठीक उन्हीं senders से आती है जो security ठीक से कर रहे हैं।\nबिना login कोई relay नहीं Relaying का मतलब है mail को ऐसे domain के लिए आगे भेजना जिसकी मंज़िल आप नहीं हैं। Open relay वह तरीका है जिससे spam किसी और की साख के ज़रिए धोया जाता है। इसे बंद करने का पुराना तरीका था एक address range पर भरोसा करना, ताकि office network से कुछ भी relay कर सके। यह जगह के आधार पर भरोसा है। Guest WiFi, VPN users और कभी-कभार किसी compromised laptop वाले network पर, जगह की क़ीमत बहुत कम है।\nइसलिए machine के सिवा किसी पते पर भरोसा नहीं:\nmynetworks = 127.0.0.0/8 [::1]/128 smtpd_relay_restrictions = reject_unauth_destination Port 25 सिर्फ़ इस domain के लिए आने वाली mail के लिए है और कुछ नहीं। यह कभी relay नहीं करता, किसी के लिए नहीं:\n\u0026lt;** 554 5.7.1 \u0026lt;someone@plain.test\u0026gt;: Relay access denied Users submission से भेजते हैं: STARTTLS के साथ port 587, या पहले byte से TLS के साथ 465। दोनों कुछ भी करने से पहले login चाहते हैं। Dovecot passwords जाँचता है, हर mail protocol बंद करके ताकि वह और कुछ न करे, और Postfix एक socket से उससे पूछता है। master.cf में submission listener:\nsubmission inet n - y - - smtpd -o smtpd_tls_security_level=encrypt -o smtpd_sasl_auth_enable=yes -o smtpd_tls_auth_only=yes -o smtpd_client_restrictions=permit_sasl_authenticated,reject -o smtpd_sender_restrictions=reject_sender_login_mismatch -o smtpd_relay_restrictions=permit_sasl_authenticated,reject smtpd_tls_auth_only का मतलब है कि TLS चालू होने तक server AUTH देता ही नहीं, इसलिए password कभी खुले में तार पार नहीं करता। Plaintext EHLO के जवाब में AUTH lines: शून्य। जो client 587 से जुड़कर बिना login भेजने की कोशिश करता है, वह कहीं नहीं पहुँचता:\n\u0026lt;** 554 5.7.1 \u0026lt;unknown[fd89:50::50]\u0026gt;: Client host rejected: Access denied एक login अपने पतों का मालिक है Login साबित करता है कि आप कौन हैं। यह इस बारे में कुछ नहीं कहता कि आप किन पतों के नाम से भेज सकते हैं। उस कड़ी के बिना, server का कोई भी user finance director के नाम से भेज सकता है, और mail signed होकर ऐसे deliver होगी जैसे असली हो। Postfix दोनों को पते-से-मालिक के map से बाँधता है:\nalice@alpha.test alice@alpha.test bob@alpha.test bob@alpha.test postmaster@alpha.test alice@alpha.test Submission ports पर reject_sender_login_mismatch इसे envelope sender पर लागू करता है। alice के रूप में logged in, bob के नाम से भेजने की कोशिश:\n\u0026lt;** 553 5.7.1 \u0026lt;bob@alpha.test\u0026gt;: Sender address rejected: not owned by user alice@alpha.test यह envelope को ढकता है। यह From: header को नहीं ढकता, जो वह पता है जो recipient असल में देखता है, और postconf(5) इसी restriction के notes में यही कहता है:\nto enforce that the From: header address matches the envelope sender (MAIL FROM) address, use an external filter such as a Milter8\nRspamd यहाँ पहले से milter है, इसलिए header check एक छोटा Lua नियम है जो logged-in user की From: पते से तुलना करता है, और जो symbol वह उठाता है उस पर ज़बरदस्ती reject:\nrspamd_config.AUTH_FROM_NOT_LOGIN = { callback = function(task) local user = task:get_user() if not user then return false end local from = task:get_from(\u0026#39;mime\u0026#39;) if not from or not from[1] or not from[1].addr then return true, \u0026#39;no From address\u0026#39; end if string.lower(from[1].addr) ~= string.lower(user) then return true, from[1].addr .. \u0026#39; is not \u0026#39; .. user end return false end, score = 0.0, description = \u0026#39;Authenticated user sent with a From: address that is not their own\u0026#39;, group = \u0026#39;headers\u0026#39;, } Alice MAIL FROM:\u0026lt;alice@alpha.test\u0026gt; और From: bob@alpha.test के साथ भेजती है:\n\u0026lt;** 554 5.7.1 You may only send as your own address Display name ठीक है और case बदलना भी। Alice \u0026lt;ALICE@alpha.test\u0026gt; निकल जाता है, क्योंकि तुलना पते पर होती है और case को नज़रअंदाज़ करती है।\nवह check जो खुद को बंद कर लेता है यह रही उन settings में से पहली जो चुपचाप कुछ नहीं करतीं। बाहरी लोगों को port 25 पर आपके अपने domain की जालसाज़ी से रोकने का सीधा तरीका है login-mismatch checks वहाँ भी लगाना। Postfix configuration स्वीकार करता है, start होता है, और यह log करता है:\nwarning: restriction `reject_authenticated_sender_login_mismatch\u0026#39; ignored: no SASL support warning: restriction `reject_unauthenticated_sender_login_mismatch\u0026#39; ignored: no SASL support Port 25 पर SASL बंद है, बिल्कुल सही, क्योंकि वहाँ कोई login नहीं करता। इसलिए check छोड़ दिया जाता है। Mail स्वीकार हो जाती है। एकमात्र सबूत एक log में warning है जिसे कोई नहीं पढ़ता, और check के जाने से internet पर कोई भी इस server को MAIL FROM:\u0026lt;alice@alpha.test\u0026gt; भेज सकता था और उसे alice के सहकर्मियों तक ऐसे deliver करवा सकता था जैसे उसी ने लिखा हो।\nइलाज है port 25 पर अपने domains को नाम लेकर मना करना, क्योंकि हमारी mail वहाँ कभी जायज़ तरीके से नहीं आती:\nsmtpd_sender_restrictions = reject_non_fqdn_sender, reject_unknown_sender_domain, check_sender_access texthash:/etc/postfix/own_domains जहाँ own_domains में एक line है, alpha.test REJECT Our own domain: send through submission with a login। बाहर से test किया:\n\u0026lt;** 554 5.7.1 \u0026lt;alice@alpha.test\u0026gt;: Sender address rejected: Our own domain: send through submission with a login ऐसे sender domains जो मौजूद नहीं हैं अगर MAIL FROM का domain मौजूद नहीं है, तो उसे कभी कुछ वापस नहीं भेजा जा सकता, और उससे कभी कुछ जायज़ नहीं आया। reject_unknown_sender_domain तब mail मना करता है जब उस domain के पास “no DNS MX and no DNS A record” हो।9 इसके लिए Postfix का default reply code 450 है, एक अस्थायी failure, जो जालसाज़ को बाद में दोबारा कोशिश करने का न्योता देता है। मैंने इसे 550 कर दिया।\npostconf(5) उस setting के बारे में दो टूक है: “Do not change this unless you have a complete understanding of RFC 5321.”10 ठीक है। यह रहा तर्क। एक 4xx sender से queue करके दोबारा कोशिश करने को कहता है, जो तब सही है जब जवाब बदल सकता हो। जिस domain के पास अभी कोई records नहीं, उसके अगले पाँच मिनट में उग नहीं आएँगे। Postfix इसे उस मामले से अलग रखता है जहाँ जवाब अभी पता नहीं है: DNS failure को unknown_address_tempfail_action संभालता है, जो अब भी defer करता है। Code बदलने से सिर्फ़ वह मामला बदलता है जिसका जवाब है।\nLab ने तीनों test किए, साथ में वह जिसकी IPv6 नियम परवाह करता है। postconf के शब्द “A record” कहते हैं, और जिस domain का इकलौता पता AAAA record है उसे ग़ायब नहीं माना जाना चाहिए:\nSender domain DNS क्या कहता है जवाब nosuch-lab.co.uk NXDOMAIN 550 5.1.8 \u0026lt;someone@nosuch-lab.co.uk\u0026gt;: Sender address rejected: Domain not found v6only-lab.co.uk सिर्फ़ AAAA, न A, न MX स्वीकार dnsfail-lab.co.uk SERVFAIL 450 4.1.8 … Sender address rejected: Domain not found, बाद में दोबारा कोशिश sender.test MX, A, AAAA स्वीकार व्यवहार में “A record” AAAA को भी ढकता है, और सिर्फ़-IPv6 domain सुरक्षित है। इनकार MAIL FROM पर आता है, sender के body का एक भी byte भेजने से पहले। Postfix default से MAIL FROM rejection को पहले RCPT TO तक रोके रखता है, इसलिए जवाब आपकी उम्मीद से एक कदम बाद आता है, और इसीलिए चरण वाला diagram उसे वहाँ दिखाता है।\nSPF, DKIM और DMARC, दाँतों के साथ ये तीनों lead पोस्ट में ठीक से समझाए गए हैं। हर एक एक line में: SPF बताता है कि कौन-से servers किसी domain के लिए भेज सकते हैं, DKIM message पर signature करता है ताकि बदलाव दिख जाएँ, और DMARC बताता है कि उनके फ़ेल होने पर क्या करना है और क्या वे दिखने वाले From: domain से मेल खाते हैं। घर का नियम है SPF hard fail पर reject करना और ऐसे DKIM signature पर जो मौजूद हो और verify न हो। Unsigned mail DKIM failure नहीं है। उसे sender के domain पर DMARC p=reject संभालता है।\nRspamd तीनों को एक milter में करता है, साथ में बाहर जाने वाली mail के लिए DKIM signing। Postfix उसे हर message देता है, और अगर Rspamd जवाब नहीं दे रहा, तो mail बिना जाँचे निकलने के बजाय इंतज़ार करती है:\nsmtpd_milters = inet:127.0.0.1:11332 non_smtpd_milters = $smtpd_milters milter_default_action = tempfail Rspamd scores पर काम करता है, और इसके बारे में समझने वाली पहली बात यही है। बिना कुछ बदले, SPF फ़ेल होने की वजह से कुछ भी reject नहीं होता। कुछ भी नहीं। हर नतीजा कुछ अंक जोड़ता या घटाता है, और कुल 15 पार करने पर message reject होता है। force_actions module वह है जो एक अकेले नतीजे को फ़ैसले में बदलता है:\nrules { SPF_FAIL_REJECT { action = \u0026#34;reject\u0026#34;; expression = \u0026#34;R_SPF_FAIL\u0026#34;; message = \u0026#34;SPF hard fail: this host is not allowed to send for that domain\u0026#34;; } DKIM_FAIL_REJECT { action = \u0026#34;reject\u0026#34;; expression = \u0026#34;R_DKIM_REJECT\u0026#34;; message = \u0026#34;DKIM signature does not verify: the message was changed or forged\u0026#34;; } DMARC_REJECT { action = \u0026#34;reject\u0026#34;; expression = \u0026#34;DMARC_POLICY_REJECT\u0026#34;; message = \u0026#34;DMARC policy of the sender\u0026#39;s domain says reject\u0026#34;; } } sender.test से पाँच messages, lab के client से भेजे गए। SPF record ip6:fd89:50::50 की इजाज़त देता है और कुछ नहीं, इसलिए वही client IPv4 पर भेजे तो वह उस domain के लिए एक अनधिकृत server है। Forwarded message भी ठीक ऐसा ही दिखता है:\nमामला कैसे भेजा SPF DKIM DMARC Rspamd score जवाब A signed, सूचीबद्ध IPv6 पते से pass pass pass 15 में 3.59 स्वीकार B signed, फिर bank details बदले pass fail pass 15 में 2.30 554 5.7.1 DKIM signature does not verify C unsigned, IPv4 से fail none reject 15 में 5.00 554 5.7.1 SPF hard fail D signed और सही-सलामत, IPv4 से fail pass pass 15 में 2.30 554 5.7.1 SPF hard fail E unsigned, सूचीबद्ध IPv6 पते से pass none pass 15 में 3.80 स्वीकार मामला B देखिए। यह एक invoice है जिसका sort code और account number signature के बाद बदल दिया गया। दूसरे शब्दों में, invoice धोखाधड़ी। SPF pass हुआ, क्योंकि यह सही server से आया। DMARC pass हुआ, क्योंकि SPF pass हुआ और From: domain से मेल खाया। अपने scores पर Rspamd ने इसे 15 में 2.30 दिए और इसे deliver कर देता। इसे रोकने वाली इकलौती चीज़ टूटे signature पर ज़बरदस्ती reject थी। अकेला DMARC एक छेड़छाड़ वाले message को तब तक निकलने देता है जब तक दोनों में से एक check बचा रहे, और किसी domain को सिर्फ़ इसलिए सुरक्षित कहने से पहले कि उसका DMARC reject कहता है, यह जानने लायक है।\nमामला D क़ीमत है, और इसे साफ़ कहा जाना चाहिए। एक सही ढंग से signed, अछूता message इसलिए मना होता है कि वह SPF record में न होने वाले server से आया। Forwarding यही करती है: forwarder आपका message अपने पते से आगे भेजता है। अकेले SPF पर reject करने का मतलब है कि -all वाले domains की forwarded mail bounce होती है। Forwarder पर SRS इसे ठीक करता है, और SPF पर DKIM को तरजीह देना भी करता, पर घर का नियम घर का नियम है, और क़ीमत लिखित में जाती है।\nवह default जो हर private network पर भरोसा करता है दूसरी setting जो चुपचाप कुछ नहीं करती। Rspamd उन पतों के लिए SPF और कुछ दूसरे checks छोड़ देता है जिन्हें वह local मानता है, और options.inc में ship हुई सूची यह है:\nlocal_addrs = [192.168.0.0/16, 10.0.0.0/8, 172.16.0.0/12, fd00::/8, 169.254.0.0/16, fe80::/10]; हर private range, दोनों families। अगर आपका MX किसी private पते पर load balancer, NAT या proxy के पीछे बैठा है, तो उस सबके लिए SPF चुपचाप छूट जाता है। Lab में, जो पूरी तरह private addressing है, यह बदलने तक SPF कभी फ़ेल नहीं हुआ।\nसीधा इलाज काम नहीं करता। Rspamd में local settings के लिए दो directories हैं, और उसका FAQ अंतर साफ़ बताता है: local.d “Merges with defaults. Collections and lists are combined”, जबकि override.d “Replaces defaults.”11 local.d/options.inc में एक संकरी सूची ship हुई सूची के साथ मिला दी जाती है, यानी वह कुछ भी संकरा नहीं करती। इसे override.d/options.inc में जाना होगा:\nlocal_addrs = [127.0.0.0/8, ::1]; और rspamadm configdump options से आप जाँचते हैं कि Rspamd के पास असल में क्या पहुँचा, न कि वह जो आपको लगता है कि आपने लिखा।\nइस build में greylisting भी बंद है। यह अनजान senders को अस्थायी rejection भेजता है और दोबारा कोशिश पर उन्हें स्वीकार करता है, जो कुछ spam रोकता है, पर Rspamd का greylisting SPF और DMARC के बोलने से पहले जवाब दे देता है, इसलिए test करते समय आपको वहाँ deferral दिखता है जहाँ आप फ़ैसले की उम्मीद कर रहे थे।12 ऊपर के tests इसके बंद होने पर ही मायने रखते हैं।\nआपके अपने bounces, आपके अपने DMARC से मना आख़िरी जाल तब सामने आया जब lab में Stalwart ने इस server का एक bounce मना कर दिया। Postfix bounces ख़ाली envelope sender और From: MAILER-DAEMON@mail.alpha.test के साथ भेजता है। Envelope sender न होने पर, इकलौता बचा SPF check उस नाम पर होता है जो server ने HELO में दिया, mail.alpha.test, जिसका कोई SPF record नहीं था। Bounce signed भी नहीं था। इसलिए DMARC alpha.test की policy पर लौटा, p=reject पाया, और receiving server ने ठीक वही किया जो domain ने उससे कहा था:\nsmtp.dmarc-fail … domain = \u0026#34;alpha.test\u0026#34;, policy = \u0026#34;reject\u0026#34;, result = DMARC check failed (dmarc.fail) { causedBy = Policy not aligned } Domain की अपनी policy उसकी अपनी delivery failures को फेंक रही थी। हर MX host name को उसका अपना SPF record मिलता है, जो इसे ठीक करता है:\nmail IN TXT \u0026#34;v=spf1 a -all\u0026#34; छह settings जो पूरी दिखती हैं ऊपर के जालों की शक्ल एक जैसी है। हर एक ऐसी setting है जो पूरी दिखती है, कोई error नहीं देती, और कुछ नहीं करती।\nपूरी दिखती है असल में क्या होता है किससे मिला smtp_tls_security_level = dane जहाँ भी TLSA publish नहीं, वहाँ खुला text postconf(5) पढ़कर port 25 पर login-mismatch checks छोड़ दिए जाते हैं, log में एक warning एक जालसाज़ी भेजकर local.d में संकरा किया local_addrs default में मिला दिया, कुछ संकरा नहीं rspamadm configdump sender पर DMARC p=reject SPF pass हो तो छेड़छाड़ वाली mail निकल जाती है मामला B certbot renewals नई key, TLSA मेल खाना बंद certbot के docs पढ़कर अपने domain पर DMARC p=reject आपके अपने bounces मना एक मना हुआ bounce इनमें से दो documentation में हैं, अगर आप सही पेज का सही पैराग्राफ़ पढ़ें। बाकी चार सिर्फ़ तब मिले जब वह message भेजा गया जिसे रोकने के लिए नियम था और देखा गया कि क्या वापस आया। Configuration को वापस पढ़कर उससे सहमत होने से इनमें से एक भी नहीं मिला। अगर इस पोस्ट से एक आदत लेनी हो, तो वही लीजिए, क्योंकि यहाँ की हर line किसी server में copy की जा सकती है और फिर भी काम न कर रही हो।\nDefaults किसी और का फ़ैसला हैं इस पोस्ट का हर इनकार एक ऐसी setting है जो Postfix में सालों से है। DANE भी, जो यहाँ सबसे नई चीज़ है, 2.11 से इसमें है।13 इसमें से कुछ भी नया नहीं, कुछ भी महँगा नहीं, और नीचे का server वही मुफ़्त software है जो हमेशा था। एक बदले हुए invoice को निकलने देने वाले mail server और उसे DATA पर मना करने वाले mail server के बीच की दूरी configuration का एक पन्ना और testing की एक दोपहर है।\nतो internet का इतना कम हिस्सा ऐसे क्यों चलता है? क्योंकि defaults फ़ैसला करते हैं, और defaults इसलिए सेट किए गए थे कि mail एक ऐसे internet पर निकल जाए जहाँ TLS अपवाद था। तब वह एक समझदार फ़ैसला था। उन्हें अब अकेला छोड़ दीजिए और आपने अपने security फ़ैसले उस चुनाव को सौंप दिए जो किसी ने 2002 में किया, एक ऐसे network के लिए जो अब मौजूद नहीं, उस mail के बारे में जो आपकी नहीं थी।\nMail server चलाना इस बात का फ़ैसला है कि उससे जो गुज़रता है उसकी ज़िम्मेदारी आपकी है। वे settings उसी फ़ैसले का लिखित रूप हैं। Defaults वह हैं जो आपको तब मिलता है जब किसी ने यह फ़ैसला किया ही नहीं।\npostconf(5): smtpd_tls_security_level — encrypt स्तर: “According to RFC 2487 this MUST NOT be applied in case of a publicly-referenced SMTP server.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): smtp_tls_security_level — dane स्तर: “When DNSSEC-validated TLSA records are not found the effective tls security level is ‘may’.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPostfix TLS_README: Opportunistic TLS — “The SMTP transaction is encrypted if the STARTTLS ESMTP feature is supported by the server. Otherwise, messages are sent in the clear.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostfix-tlspol on GitHub — Postfix के लिए MIT licensed MTA-STS और DANE policy server: “Verify TLSA records for correctness and supported parameters, only then the dane-only policy (Mandatory DANE) will be returned.” यहाँ version 1.14.4 इस्तेमाल हुआ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPostfix source, src/dns/dns_lookup.c — “Automatically turns on the RES_TRUSTAD flag on systems that support this flag”, और वह code जो DNSSEC validation माँगे जाने पर ऐसा करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7672 §3.1.1 — opportunistic DANE TLS के ज़रिए SMTP security। SMTP servers के लिए TLSA records “should, in most cases, be ‘DANE-EE(3) SPKI(1) SHA2-256(1)’ records”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCertbot user guide, command-line options — --reuse-key: “When renewing, use the same private key as the existing certificate. (default: False)”, और --no-reuse-key के नीचे: “Not reusing private keys is the default behavior of Certbot.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): reject_known_sender_login_mismatch — “to enforce that the From: header address matches the envelope sender (MAIL FROM) address, use an external filter such as a Milter”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): reject_unknown_sender_domain — तब reject करता है जब MAIL FROM domain के पास “no DNS MX and no DNS A record” हो, या ग़लत बना MX हो।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npostconf(5): unknown_address_reject_code — default 450: “Do not change this unless you have a complete understanding of RFC 5321.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRspamd FAQ: the difference between local.d and override.d — local.d “Merges with defaults. Collections and lists are combined”; override.d “Replaces defaults. Entire sections are overwritten.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRspamd greylisting module — “The greylisting module triggers a soft reject action, which is intended to be interpreted by the MTA as a temporary rejection”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPostfix TLS_README: DANE — “Postfix ≥ 2.11 supports the new dane and dane-only security levels”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/email/postfix-dane-done-properly/","summary":"बिना कुछ बदले Postfix तब खुले में भेजता है जब दूसरा छोर TLS नहीं देता, और किसी से भी mail ले लेता है जो किसी का भी होने का दावा करे। यह दूसरा build है: logins के लिए Dovecot के साथ Postfix 3.10.13, SPF, DKIM और DMARC के लिए Rspamd, और DANE व MTA-STS के लिए postfix-tlspol। न अंदर plaintext न बाहर, port 25 कभी relay नहीं करता, एक login envelope और From header में अपने पतों का मालिक है, जो sender domains मौजूद नहीं वे मना होते हैं, और छेड़छाड़ किया या जाली message कभी DATA से आगे नहीं जाता। हर जवाब एक lab में IPv4 और IPv6 पर कैप्चर हुआ, साथ में वे छह settings जो चुपचाप कुछ नहीं करतीं जब तक कुछ और भी सेट न हो, certbot का वह default जो renewal पर DANE तोड़ देता है, और forwarded mail में इस सबकी क़ीमत।","title":"Postfix, DANE और हर setting ठीक से"},{"content":"पिछली दो पोस्ट में एक ऐसा mail server बनाया गया जो कुछ नियमों पर खरा उतरता है, एक बार चार packages से और एक बार एक अकेली binary से। लगभग कोई ऐसा नहीं करता। लोग Microsoft को पैसा देते हैं, अपना domain Exchange Online की ओर कर देते हैं और सारा काम उसी पर छोड़ देते हैं। इसलिए यहाँ सही सवाल “मैं इसे कैसे बनाऊँ” नहीं है, बल्कि यह है: “अगर मैं उस platform के पैसे पहले ही दे चुका हूँ जिस पर देश का ज़्यादातर हिस्सा चलता है, तो क्या मैं उसे उन्हीं नियमों पर खरा उतार सकता हूँ?”\nMicrosoft के अपने documentation और असली tenants के DNS पर एक read-only नज़र से जवाब यह है: कुछ नियम अच्छी तरह, कई बिल्कुल नहीं, और platform आपको यह नहीं बताएगा कि कौन-सा कौन-सा है। यह mail security का Fisher-Price संस्करण है। कोने गोल कर दिए गए हैं, धारदार औज़ार हटा दिए गए हैं, और जिन कुछ controls की ओर आप असल में हाथ बढ़ाते, वे चालू करने के लिए मौजूद ही नहीं हैं। हर दावा Microsoft के उस पेज से cited है जिसे 22 अक्टूबर 2026 को जाँचा गया, और हर DNS नतीजा dig से दोहराया जा सकता है।\nस्कोरकार्ड यहाँ lead पोस्ट, /hi/email/why-every-mail-setting-has-to-be-right/, के घर के नियम हैं, और उनके सामने वह जो Exchange Online एक administrator को असल में करने देता है।\nनियम Exchange Online फ़ैसला अंदर plaintext नहीं TLS सिर्फ़ हर partner connector पर, नामित domain या IP से माँगा जा सकता है पूरे tenant का कोई स्विच नहीं बाहर plaintext नहीं default से opportunistic; ज़बरदस्ती TLS के लिए हर destination का connector चाहिए default नहीं Outbound DANE default से चालू; हर connector पर Mandatory mode मौजूद अच्छा Outbound MTA-STS हमेशा चालू, अपने-आप validate अच्छा IPv6 inbound हर accepted domain पर, tenant या Microsoft opt-out कर सकते हैं व्यवहार में अटका हुआ अनजान sender domains गिराना कोई documented control नहीं ग़ायब Relay के लिए login ज़रूरी SMTP AUTH, पर basic auth 2026 के अंत तक चालू, और IP relay किसी भी पते से भेजता है आधा-अधूरा Login अपने ही नाम से भेजे SMTP AUTH Send As लागू करता है; Direct Send को कोई auth नहीं चाहिए एक छेद SPF फ़ेल reject करना reject नहीं; default से बंद एक setting इसे spam मार्क करती है नहीं DKIM फ़ेल reject करना कोई control सिर्फ़ DKIM पर reject नहीं करता नहीं Inbound DANE + DNSSEC GA, पर opt-in, और उस host पर नहीं जिसे हर tenant इस्तेमाल करता है शुरू हुआ, अधूरा इनमें से पाँच सीधा “नहीं” हैं या ग़ायब हैं। इसकी शक्ल तीन कॉलम की है: वे चीज़ें जो Microsoft तय करता है और सही करता है, वे कुछ जिन्हें आपको चालू करने दिया जाता है, और वे जो स्विच करने के लिए मौजूद ही नहीं हैं।\nMicrosoft क्या तय करता है, आप क्या बदल सकते हैं, और क्या आपको नहीं मिल सकता MICROSOFT तय करता है, और अच्छा करता है Outbound DANE, चालू Outbound MTA-STS, चालू mail host spam filter भरोसेमंद delivery आपको कभी पूछना नहीं पड़ा। यह पहले से सही था। आप चालू कर सकते हैं sender DMARC का पालन (चालू) partner तक TLS ज़रूरी IPv6, हर domain पर Direct Send reject (opt-in) signed host पर जाना छोटी सूची, और ज़्यादातर opt-in है। चालू करने को उपलब्ध नहीं सबसे inbound TLS ज़रूरी SPF hard fail reject फ़ेल DKIM reject अनजान sender गिराना आपके host पर DNSSEC जो controls आप सबसे ज़्यादा चाहते थे। शीशे के पीछे। Lead पोस्ट के खतरों के लिए जिन controls की आपको सबसे ज़्यादा ज़रूरत है, वे दाएँ कॉलम में हैं आगे पढ़िए कि हर एक वहाँ क्यों है, क्योंकि वजहें फ़ैसलों से भी ज़्यादा भारी पड़ती हैं।\nजो यह अच्छा करता है, साफ़ शब्दों में पहले श्रेय, क्योंकि वह कमाया गया है। Outbound रास्ते पर Exchange Online सच में अच्छा है। DANE validation 2022 से default से चालू है, MTA-STS validation अपने-आप होता है और “nothing administrators need to do to apply it”,1 और हर connector पर Mandatory DANE mode 2026 की शुरुआत में आया।2 यह उससे ज़्यादा है जितना ज़्यादातर self-hosted servers बिना कुछ किए दे पाते हैं।\nDNSSEC के साथ inbound DANE 28 अक्टूबर 2024 को generally available हुआ, और जो tenant नए host पर चला गया है उस पर TLSA records validate होते हैं।34 तो क्षमता मौजूद है। पेच उसके आसपास की हर चीज़ में है, और वही इस पोस्ट का बाकी हिस्सा है।\nअंदर plaintext नहीं: कोई स्विच नहीं है घर का पहला नियम यह है कि server खुले में आने वाली mail को मना कर दे। Exchange Online पर हर sender से यह माँगने का कोई तरीका नहीं है। TLS माँगा जा सकता है, पर सिर्फ़ एक partner connector पर, नामित domains या IP ranges तक सीमित, और यह parameter “applies only to Partner type connectors”।5 बाकी सबके लिए default opportunistic है।6 आप अपने नामित partners से TLS माँग सकते हैं। पूरे internet से नहीं माँग सकते, और यह नियम उन्हीं senders के बारे में है। पूरे tenant पर inbound TLS माँगने वाला कोई control documented नहीं है।\nअनजान sender domains गिराना: कहीं documented नहीं Postfix build उस mail को मना करता है जिसका sender domain मौजूद नहीं है, MAIL FROM पर, body से पहले। मैंने anti-spam, authentication और anti-phishing documentation में Exchange Online का इसके बराबर कुछ ढूँढा, और कुछ नहीं है। सबसे क़रीबी चीज़ composite authentication है, और Microsoft साफ़ कहता है कि “a composite authentication failure doesn\u0026rsquo;t directly result in a message being blocked”।7 इसलिए मैं इसे सावधानी से कहूँगा: Microsoft ऐसा कोई control documented नहीं करता जो किसी नामौजूद sender domain की mail गिरा दे। Filtering में कुछ undocumented होता हो या नहीं, यह मैं बाहर से नहीं देख सकता, और आप भी नहीं, और असल बात यही है।\nSPF और DKIM फ़ेल reject करना: नहीं, और नहीं यह वह बात है जिस पर किसी administrator को ठिठक जाना चाहिए। घर का नियम है कि जो message SPF पर hard fail हो, या जिसका DKIM signature मौजूद हो पर verify न हो, उसे reject किया जाए। Exchange Online दरवाज़े पर इनमें से कुछ भी नहीं करता।\nSPF के लिए एक setting है, advanced spam filter में दबी हुई। Default से यह “Off” है, और चालू होने पर भी message को reject नहीं करती: यह किसी unlisted sender की mail को “as high confidence spam” मार्क करती है।8 इसे दो बार पढ़िए। जिस domain का SPF -all कहता है, उसे कोई forge करे तो Exchange Online जो सबसे कड़ा कदम उठाएगा वह है उसे Junk में डाल देना, और वह भी शुरुआत में बंद है। DKIM के लिए कुछ भी नहीं है: कोई setting किसी message को सिर्फ़ इसलिए reject नहीं करती कि उसका signature verify नहीं हुआ। फ़ेल हुआ signature DMARC और composite score में जाता है, और बात वहीं ख़त्म।\nReject एक मामले में होता है: जब sender का domain DMARC p=reject publish करता है, तो Exchange Online default से उसका सम्मान करता है और SMTP के समय 550 5.7.1 के साथ मना कर देता है।9 अच्छा है, और default से चालू है, पर यह पूरी तरह इस पर टिका है कि sender ने सही काम किया हो। दूसरे builds ने आपकी अपनी inbound सुरक्षा के लिए जो controls इस्तेमाल किए, SPF फ़ेल पर reject और टूटे signature पर reject, वे चालू करने के लिए मौजूद ही नहीं हैं।\nIPv6: दो साल बाद भी NCSC तक इस पर नहीं पहुँचा जा सकता इस series में IPv6 अनिवार्य है। Exchange Online इसे inbound पर support करता है, हर accepted domain पर, opt-in के बाद, और इस शर्त के साथ कि Microsoft अपने-आप “a small percentage of our customers” को opt out कर देता है।10 यह rollout अक्टूबर 2024 में तीन से छह महीने का बताकर घोषित हुआ था। तो मैंने Microsoft 365 चलाने वाले बाईस UK संगठनों के mail host का AAAA record पढ़ा। दो साल बाद, नौ के पास कोई नहीं है।\nMX पर IPv6 नहीं IPv6 है hmrc.gov.uk ons.gov.uk ncsc.gov.uk met.police.uk nhs.net cam.ac.uk, ucl.ac.uk, kcl.ac.uk lloydsbank.com jisc.ac.uk, ja.net mod.uk, justice.gov.uk ofcom.org.uk ico.org.uk gov.wales vodafone.co.uk, bt.com sheffield.gov.uk, birmingham.gov.uk National Cyber Security Centre के अपने mailbox तक IPv6 पर नहीं पहुँचा जा सकता, न HMRC, न NHS mail सेवा, न Ministry of Defence, न Information Commissioner, न Lloyds Bank।4 हर एक को Microsoft ने opt out किया या उसने कभी opt in ही नहीं किया, यह DNS से नहीं बताया जा सकता। नतीजा एक ही है, और सभी बाईस उस पुराने mail host पर हैं जिसे, जैसा हम अभी देखेंगे, sign नहीं किया जा सकता।\nDNSSEC: जिस host को आप असल में इस्तेमाल करते हैं, उसके लिए योजना नहीं यहीं documentation और DNS एक-दूसरे से सहमत होना बंद कर देते हैं, और यह इस पोस्ट की सबसे तीखी खोज है। Inbound DANE को DNSSEC चाहिए, और DNSSEC के लिए mail host का signed zone में होना ज़रूरी है। हर साधारण Exchange Online tenant का MX mail.protection.outlook.com के नीचे के किसी host की ओर है। मैंने जाँचा कि यह zone signed है या नहीं, और यह साबित तौर पर नहीं है:\n$ dig @1.1.1.1 +dnssec DS protection.outlook.com ;; flags: qr rd ra ad; ANSWER: 0 protection.outlook.com. 60 IN NSEC \\000.protection.outlook.com. NS RRSIG NSEC जिसे सब इस्तेमाल करते हैं वह sign नहीं हो सकता; जो हो सकता है, उस पर कोई नहीं गया जहाँ हर TENANT है नया HOST, अगर आप MIGRATE करें *.mail.protection.outlook.com Zone unsigned है NSEC साबित करता है: कोई DS नहीं यहाँ DANE काम नहीं कर सकता publish करने को कोई TLSA नहीं Microsoft: sign करने की योजना नहीं *.mx.microsoft Zone DNSSEC signed है DS मौजूद, chain validate होती है TLSA 3 1 1, DANE काम करता है Opt-in, हाथ से MX बदलना नमूने का कोई UK tenant नहीं गया एक signed बयान कि delegation unsigned है। लगभग हर tenant बाईं ओर है Parent zone signed है, और वह एक authenticated NSEC record लौटाता है जो साबित करता है कि protection.outlook.com के लिए कोई DS नहीं है। यह एक signed बयान है कि delegation unsigned है। तो हर *.mail.protection.outlook.com MX, यानी धरती पर लगभग हर Microsoft 365 tenant, एक unsigned zone में है और DANE नहीं कर सकता।\nनया, signed infrastructure एक अलग नाम के नीचे है, mx.microsoft, और उस पर जाना एक manual, opt-in बदलाव है। कितनों ने किया है? मैंने लगभग पैंतीस UK domains का नमूना लिया, एक भी उस पर नहीं था। Signed host पर जो tenants मुझे मिले, वे सब डच थे। और Microsoft की अपनी अप्रैल 2026 की पोस्ट कहती है कि योजना उस host को ठीक करने की नहीं है जिसे सब इस्तेमाल करते हैं:\nCurrently, there are no plans to enable DNSSEC on the mail flow domain mail.protection.outlook.com.2\nतो: DNSSEC और DANE एक नए host पर उपलब्ध हैं, अगर आप opt in करें और migrate करें, और जिस host पर हर मौजूदा tenant असल में है, वह Microsoft के अपने बयान के मुताबिक़ sign नहीं होगा। क्षमता ship हो गई। Default नहीं हिला, और हिलने वाला भी नहीं है।\nMicrosoft के अपने दो सबसे बड़े domains यह बँटवारा दिखाते हैं, और उनमें से एक उन tenants से भी बुरा है जिन्हें वह सीख देता है:\nmicrosoft.com outlook.com Mail host mail.protection.outlook.com olc.protection.outlook.com Zone signed नहीं नहीं DMARC policy p=reject p=none MTA-STS enforce enforce MX पर IPv6 हाँ नहीं outlook.com, यानी consumer mail सेवा, DMARC p=none publish करती है: वह दुनिया से कहती है कि उसकी mail जाँचो और फ़ेल होने पर कुछ मत करो, और lead पोस्ट इसी setting को कंधे उचकाना कहती है।4 Microsoft का corporate domain बेहतर करता है। दोनों में से कोई host signed नहीं है।\nDocumentation खुद से बहस करता है जब किसी vendor का अपना documentation किसी security control पर खुद से उलटी बात करता है, तो यह बाल की खाल निकालना नहीं है। यह एक ग्राहक है जिसे किसी ऐसी चीज़ के बारे में दो असंगत बातें बताई जा रही हैं जो तय करती है कि उसकी mail सुरक्षित है या नहीं, और मैं इस पर उसी तरह ध्यान देता हूँ जैसे किसी भी ऐसे supplier पर देता जिसे इसे सही करने के पैसे मिलते हैं। तीन उदाहरण, सब Microsoft के publish किए पेजों से, सब 22 अक्टूबर 2026 को live।\nक्या एक पेज कहता है दूसरा कहता है SPF all qualifier -all hard fail की सिफ़ारिश soft fail की सिफ़ारिश MTA-STS wildcard MX mx: *.mail.protection.outlook.com publish करें wildcards “must not be used” मुख्य host पर DNSSEC DANE और DNSSEC का प्रचार “no plans to enable DNSSEC on mail.protection.outlook.com” SPF वाला पेज -all, “hard fail”, की सिफ़ारिश करता है।11 Direct Send वाली पोस्ट “a Soft Fail SPF configuration” की सिफ़ारिश करती है।12 दोनों मौजूदा हैं, और एक को मानने वाले ग्राहक को दूसरा डाँटता है। MTA-STS पर, inbound पेज tenant से mx: *.mail.protection.outlook.com publish करने को कहता है, उसी पेज पर कहता है कि “wildcards or \u0026lsquo;*\u0026rsquo; must not be used as the MX prefix in all MTA-STS scenarios”,1 और फिर एक उदाहरण छापता है जो ठीक वही wildcard इस्तेमाल करता है। मैं Microsoft से कुछ नया ईजाद करने को नहीं कह रहा। मैं पूछ रहा हूँ कि जो पेज ग्राहक को उसकी mail flow बचाने का तरीका बताता है, वह उस एक line पर खुद से सहमत क्यों नहीं हो सकता जो असल में बचाव करती है।\nफिर Direct Send का छेद, जो पहचान का नियम, नियम छह, सामने के दरवाज़े पर ही फ़ेल होना है।\nएक दरवाज़ा जाँचता है कि आप कौन हैं; दूसरा नहीं AUTHENTICATED SUBMISSION DIRECT SEND SMTP AUTH, port 587 login ज़रूरी है Send As लागू होता है ग़लत sender मना होता है: 5.7.60 … send as this sender वह दरवाज़ा जो आपको जाँचता है कोई authentication नहीं default से चालू Reject Direct Send opt-in है और सिर्फ़ envelope जाँचता है, दिखने वाला From कभी नहीं वह दरवाज़ा जो नहीं जाँचता Authenticated submission नक़ली sender को मना कर देता है। दूसरा रास्ता कुछ नहीं माँगता किसी tenant में उसके अपने users में से किसी के नाम से बिना किसी authentication के mail भेजने का एक तरीका है, क्योंकि यह “does not require any form of authentication”,12 और यह default से चालू है। इसे बंद करने वाली setting, RejectDirectSend, default से बंद है, सिर्फ़ envelope sender जाँचती है, दिखने वाला From: नहीं, और अठारह महीने बाद भी “no fixed date for General Availability”।12 एक paid platform ने किसी tenant के अपने domain को spoof करने का बिना authentication वाला तरीका ship किया, उसे default से चालू छोड़ा, और उसका इलाज एक opt-in toggle है जिसकी कोई release date नहीं और जो जाँचता है उसमें भी एक दरार है। यह वह लहजा है जो मैं उस supplier के लिए रखता हूँ जो यह रुख़ अपनाता है कि यह मुश्किल है। यह मुश्किल नहीं है। इसलिए मैं ऐसा दिखावा नहीं करूँगा। यह एक default है जो ग़लत सेट हुआ और वैसे ही छोड़ दिया गया।\nक्या आप इस पर इसे सही बना सकते हैं? ज़्यादातर नहीं तो यह रहा ईमानदार हिसाब, और वह यह नहीं है कि Microsoft 365 ख़राब mail है। यह भरोसे से deliver करता है, इसकी outbound security सच में अच्छी है, और जिस संगठन के पास mail की कोई विशेषज्ञता नहीं, उसके लिए यह उस server से ज़्यादा सुरक्षित है जिसे वे वरना ग़लत configure कर देते। सब सच है, और सब उस बात से हटकर है जो यह series कह रही है।\nबात नियंत्रण की है, और lead पोस्ट के खतरों के लिए जो controls सबसे ज़्यादा मायने रखते हैं, उन पर Exchange Online आपको नियंत्रण नहीं देता। आप internet से inbound TLS नहीं माँग सकते, SPF hard fail reject नहीं कर सकते, नक़ली signature reject नहीं कर सकते, और ऐसे domain की mail नहीं गिरा सकते जो मौजूद ही नहीं है। एक अकेली transport सुरक्षा जिसे forge नहीं किया जा सकता, DNSSEC के साथ DANE, उस host पर बंद है जिस पर आप हैं, और उस तक पहुँचाने की कोई योजना नहीं। और सामने के दरवाज़े का बिना authentication वाला छेद default से चालू है, बंद करने की कोई तारीख़ नहीं।\nFisher-Price संस्करण का यही मतलब है। यह नहीं कि यह बच्चों के लिए है, बल्कि यह कि धारदार औज़ार छीन लिए गए हैं, आपके हाथ में गोल वाले थमा दिए गए हैं, और आपसे कहा गया है कि यह आपकी भलाई के लिए है। जो बहुत-सी दुकानों के लिए है भी। बहुत-से संगठनों के लिए सच में है। पर जिसने यहाँ तक पढ़ा है और समझ गया है कि धारदार औज़ार किसलिए थे, उसके लिए यह एक ऐसा platform है जिसने आपकी ओर से तय कर दिया है कि आपकी कौन-सी security settings आप छू सकते हैं। जो आप सबसे ज़्यादा चाहते थे, वे शीशे के पीछे हैं।\nपैसे आप दोनों तरह देते हैं। कम से कम इतना तो जान लीजिए कि इनमें से कौन-से नियम इसने चुपचाप तय कर दिया है कि आप नहीं रख सकते।\nMicrosoft Learn — Enhance mail flow with MTA-STS — अपने-आप outbound MTA-STS validation; साथ में यह कि “MTA-STS policy files aren\u0026rsquo;t something that Exchange Online can host”, और wildcard पर खुद से उलटा मार्गदर्शन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — Modernizing DNS security for Exchange Online mail flow (23 अप्रैल 2026) — हर connector के DANE/MTA-STS modes, और “Currently, there are no plans to enable DNSSEC on the mail flow domain mail.protection.outlook.com.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — General Availability of Inbound SMTP DANE with DNSSEC (28 अक्टूबर 2024)।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDNS 22 अक्टूबर 2026 को एक validating resolver के सामने dig @1.1.1.1 +dnssec से जाँचा गया। protection.outlook.com एक authenticated NSEC लौटाता है जो साबित करता है कि कोई DS नहीं (unsigned); mx.microsoft signed है और उसके tenants validate होने वाले 3 1 1 TLSA records publish करते हैं। बाईस UK संगठनों के *.mail.protection.outlook.com MX host पर AAAA records पढ़े गए; नौ के पास कोई नहीं, जिनमें ncsc.gov.uk, hmrc.gov.uk, nhs.net और mod.uk शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — New-InboundConnector — RequireTLS parameter “applies only to Partner type connectors”, SenderDomains या sender IP तक सीमित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Exchange Online uses TLS to secure email connections — “By default, Exchange Online always uses opportunistic TLS”, और अगर recipient encryption नहीं देता तो बिना encryption भेज देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Email authentication in EOP — “a composite authentication failure doesn\u0026rsquo;t directly result in a message being blocked.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Advanced Spam Filter settings — “SPF record: hard fail” setting default से “Off” है और मेल खाने वाली mail को reject करने के बजाय high confidence spam मार्क करती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Configure DMARC to validate the From address — Honor DMARC default से चालू होने पर, sender की p=reject policy “Rejected during SMTP (550 5.7.1)” होती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — IPv6 updates for Exchange Online (30 अक्टूबर 2024) — तीन से छह महीने का rollout, और “a small percentage of our customers” का अपने-आप opt-out।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Set up SPF — “For Microsoft 365 domains, we recommend -all (hard fail).”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Tech Community — Introducing more control over Direct Send (28 अप्रैल 2025, संशोधित 20 मई 2026) — Direct Send “does not require any form of authentication”; RejectDirectSend default से False है, सिर्फ़ envelope sender जाँचता है, और “There is no fixed date for General Availability”; और soft-fail SPF की सिफ़ारिश।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/email/microsoft-365-the-fisher-price-it-edition/","summary":"ज़्यादातर संगठन अपना mail server नहीं चलाते। वे Microsoft को पैसा देते हैं और Exchange Online काम करता है। इसलिए यह पोस्ट Microsoft 365 को ठीक उन्हीं घर के नियमों पर परखती है जिन पर Postfix और Stalwart वाले build खरे उतरे, और इसके लिए सिर्फ़ Microsoft के अपने documentation और असली tenants के read-only DNS का इस्तेमाल करती है। कुछ नियम यह अच्छी तरह निभाता है: outbound DANE और MTA-STS default से चालू हैं, और DNSSEC के साथ inbound DANE आख़िरकार GA हो गया। कई नियम यह बिल्कुल नहीं निभा सकता। हर sender से inbound TLS माँगने का कोई documented तरीका नहीं, SPF hard fail को दरवाज़े पर reject करने का कोई तरीका नहीं, सिर्फ़ फ़ेल हुए DKIM signature पर reject करने वाला कुछ नहीं, और ऐसे sender domain की mail गिराने का कोई control नहीं जो मौजूद ही नहीं है। जिस mail host को हर tenant असल में इस्तेमाल करता है, उस पर DNSSEC की साफ़ तौर पर कोई योजना नहीं है। जो IPv6 rollout छह महीने में होना था, उसके दो साल बाद भी NCSC का अपना mailbox IPv6 पर नहीं पहुँचा जा सकता। और documentation wildcards, SPF और DNSSEC पर खुद से उलटी बात करता है। देश की ज़्यादातर mail इसी platform पर चलती है, और यह वह है जो यह आपको करने देगा और जो नहीं करने देगा।","title":"Microsoft 365: Fisher-Price IT संस्करण"},{"content":"पिछली पोस्ट का Postfix build चार packages का जोड़ है, जिन्हें एक milter socket, एक SASL socket और एक socketmap आपस में तालमेल में रखते हैं। Stalwart यह सब एक binary में करता है। सब कुछ।\nचार packages का जोड़, एक binary के सामने चार PACKAGES, आपस में जुड़े एक BINARY Postfix 3.10 MTA, TLS, relay Dovecot 2.4 SASL logins Rspamd 3.12, Redis SPF, DKIM, DMARC postfix-tlspol 1.14 DANE, MTA-STS sasl socket milter socketmap Stalwart 0.16.27 SMTP अंदर और बाहर IMAP और JMAP SPF, DKIM, DMARC, ARC DKIM signing DANE और MTA-STS TLS reporting spam filter Sieve scripting mail store जोड़ने को कुछ नहीं चार packages और उनके बीच के sockets, उस एक process के सामने जिसमें यह सब पहले से है SMTP, IMAP और JMAP, mail store, SPF, DKIM, DMARC, ARC, DKIM signing, DANE, MTA-STS, TLS reporting, एक spam filter और एक Sieve engine, एक process में जिसे आप एक बार start करते हैं। न जोड़ने को milter, न socket पर policy daemon, न कोई दूसरा package जिसे पहले वाले से सहमत होना पड़े। इस series के हर उस नियम के लिए जिसके लिए Postfix पर अलग tool लगा, Stalwart के पास जवाब पहले से अंदर है।\nयह असली फ़ायदा है, और यह पोस्ट इसका उलटा दिखावा नहीं करती। पर “अंदर बना हुआ” और “default से सुरक्षित” अलग-अलग दावे हैं, और उनके बीच की दूरी ही यह पूरी पोस्ट है। मैंने Stalwart 0.16.27 को ठीक उन्हीं घर के नियमों पर परखा जिन पर Postfix build खरा उतरा, उसी lab में, और हर जवाब कैप्चर किया। सारे नियम लग जाते हैं। उन्हें लगाना अलग बात है।\nSettings एक database हैं, file नहीं उस चीज़ से शुरू करते हैं जो सबको चौंकाती है, क्योंकि उसके बाद सब कुछ उसी से तय होता है। Postfix main.cf में configure होता है, एक text file जिसे आप पढ़ सकते हैं, diff कर सकते हैं और अगले server पर copy कर सकते हैं। Stalwart की एक configuration file है, और वह पूरी यह है:\n{\u0026#34;@type\u0026#34;:\u0026#34;RocksDb\u0026#34;,\u0026#34;path\u0026#34;:\u0026#34;/var/lib/stalwart/\u0026#34;} यह database का नाम बताती है। बाकी हर setting, listeners, TLS policy, spam नियम, Sieve scripts, उस database के अंदर रहती है, और आप उसे JMAP API से या stalwart-cli से बदलते हैं, फिर reload करते हैं:\nstalwart-cli apply --file house-policy.json stalwart-cli create Action/ReloadSettings एक web interface भी है।1 Configuration एक चलती सेवा की state है, disk पर पड़ी file नहीं, और यह दोनों तरफ़ काटता है। आपको एक live API मिलता है और हाथ से reload करने को कोई daemon नहीं। आप वह खो देते हैं जो एक text file मुफ़्त में देती है: एक diff, एक comment, एक commit, दोबारा deploy करने को एक भरोसेमंद copy। जो लोग Stalwart को declarative ढंग से चलाते हैं, वे आख़िर में उस plan file को version control में रखते हैं जिसे apply खाता है, जो सही सहज बुद्धि है, और ठीक वही file-आधारित config भी जो शुरू में उनके पास नहीं थी।\nजैसा ship होता है, वैसे क्या स्वीकार करता है नियम लगाने से पहले, यह रहा Stalwart बिना कुछ बदले जो करता है। यह उचित आधार-रेखा है, और यह भरोसा नहीं दिलाती।\nजैसा ship होता है, Stalwart… एक plaintext session, बिना STARTTLS स्वीकार छेड़छाड़ किया हुआ signed invoice स्वीकार SPF पर फ़ेल होने वाला message स्वीकार अपने ही domain की जालसाज़ी स्वीकार ऐसा sender domain जो मौजूद नहीं स्वीकार सिर्फ़-cleartext server को delivery खुले में भेजा port 25 पर open relay मना ग़लत envelope sender के साथ login मना From: header जाली बनाने वाला login स्वीकार invalid certificate की ओर outbound, retry पर स्वीकार उस कॉलम में दो इनकार ही अच्छी ख़बर हैं, और logged-in user तब भी दिखने वाला From: जाली बना सकता था।\nइनमें से कुछ भी Stalwart के लिए अनोखा नहीं है। यह ढीले defaults का वही सेट है जिसके साथ लगभग हर mail server ship होता है, उसी बीस साल पुरानी वजह से, और यही इस series की lead पोस्ट का पूरा तर्क है: /hi/email/why-every-mail-setting-has-to-be-right/। जो server सब कुछ करता है, वह ऐसा server नहीं है जो सब कुछ सुरक्षित ढंग से करता है। वह अब भी आपको configure करना है।\nनियम रखने की चार जगहें यहीं एक-binary वाला design काम करने में सच में अलग हो जाता है। Postfix पर लगभग हर inbound नियम एक smtpd_*_restrictions line या एक milter है। Stalwart पर वही नियम चार अलग तरीकों में जाते हैं, और आपको चारों चाहिए।\nएक binary, नियम configure करने की चार जगहें तरीका यह क्या लागू करता है, और जवाब Network listener NetworkListener 587 पर submission TLS करता है; relay के लिए login ज़रूरी। 503 5.5.1 You must authenticate first. MAIL-stage expression MtaStageMail TLS नहीं, अनजान sender, या ऐसा sender जिसका मालिक login नहीं। 550 5.7.1 Sender address not allowed. Spam tags, reject पर सेट SpamTag SPF hard fail, DMARC reject, resolve न होने वाला sender host। 550 5.7.1 … excessive spam score. Sieve system script SieveSystemScript DKIM verify होना चाहिए; From header login होना चाहिए। 503 5.5.3 … does not verify / send as your own. एक binary, पर नियम एक listener setting, एक expression, एक spam tag या एक Sieve script हो सकता है एक expression language, एक tag-से-action map और एक Sieve script तीन अलग syntax हैं, और यह listener settings से पहले की बात है। एक binary, सीखने को चार चीज़ें। पर policy लगने के बाद, captures नियम-दर-नियम Postfix build से मेल खाते हैं:\nनियम Stalwart का जवाब अंदर plaintext नहीं 550 5.7.1 Sender address not allowed. port 25 पर relay 550 5.1.2 Relay not allowed. बिना login के 587 पर relay 503 5.5.1 You must authenticate first. दूसरे envelope sender के नाम से भेजने वाला login 501 5.5.4 You are not allowed to send from this address. From: header जाली बनाने वाला login 503 5.5.3 You may only send as your own address signed, सही-सलामत, aligned message स्वीकार छेड़छाड़ किया signed message 503 5.5.3 DKIM signature does not verify SPF hard fail 550 5.7.1 … excessive spam score. हर जवाब चलते lab server का है, IPv4 और IPv6 दोनों पर। नियम टिकते हैं। अब वे तीन जगहें जहाँ वहाँ तक पहुँचने में मुझे कुछ सीखने को मिला।\nDKIM failure के लिए Sieve script चाहिए, सीधी-सी setting नहीं Stalwart के पास अंदर का DKIM नतीजा है और फ़ेल signature के लिए एक spam tag, DKIM_REJECT, और सीधी बात यह लगती है कि उसी पर reject करें। यह उस मामले को नहीं पकड़ता जो मायने रखता है। जब किसी signed message की body रास्ते में बदली जाती है, जो invoice-धोखाधड़ी का वह मामला है जिस पर पूरी series बार-बार लौटती है, तो Stalwart का DKIM verifier नतीजा neutral बताता है, fail नहीं। mail-auth का source पढ़ने पर, body-hash mismatch neutral वाले खाने में जाता है, इसलिए reject tag कभी नहीं चलता और छेड़छाड़ वाला message deliver हो जाता है।2\nइसलिए DKIM नियम इसके बजाय एक Sieve script है, जो verification नतीजे को सीधे देखती है और जो कुछ भी साफ़ pass या signature की असली ग़ैरमौजूदगी नहीं है, उसे मना कर देती है:\nif anyof (string :is \u0026#34;${env.dkim.result}\u0026#34; \u0026#34;neutral\u0026#34;, string :is \u0026#34;${env.dkim.result}\u0026#34; \u0026#34;fail\u0026#34;, string :is \u0026#34;${env.dkim.result}\u0026#34; \u0026#34;permerror\u0026#34;) { ereject \u0026#34;DKIM signature does not verify: the message was changed or forged\u0026#34;; stop; } Unsigned mail का नतीजा ख़ाली रहता है और उसे छोड़ दिया जाता है, क्योंकि unsigned होना DKIM failure नहीं है; उसे p=reject पर DMARC संभालता है। Script लगने के बाद, छेड़छाड़ वाला invoice DATA पर मना हो जाता है:\nB REFUSED (503, b\u0026#39;5.5.3 DKIM signature does not verify: the message was changed or forged\u0026#39;) यही script From:-header वाला नियम भी ढोती है, क्योंकि header की login से तुलना भी Sieve का काम है। दो नियम, एक script, और इनमें से कोई भी वह setting नहीं जिसकी ओर आप पहले हाथ बढ़ाते।\nUnknown-sender check जितना दिखता है उससे कमज़ोर है Postfix पर, जो sender domain मौजूद नहीं है वह MAIL FROM पर मना हो जाता है, body का एक भी byte भेजे जाने से पहले, एक साफ़ 550 5.1.8 Domain not found के साथ। Stalwart भी उसी इनकार तक पहुँचता है, पर देर से और ज़्यादा नाज़ुक ढंग से।\nयह check एक spam tag है, FROMHOST_NORES_A_OR_MX, जो तब चलता है जब sender का domain न किसी A record पर resolve हो न किसी MX पर। इसलिए इनकार पूरा message मिल जाने के बाद आता है, spam-score rejection के रूप में:\n550 5.7.1 Message rejected due to excessive spam score. यह लंबे रास्ते से सही जवाब है, और इसकी दो बातें मायने रखती हैं। पहली, spam-filter का source पढ़ने पर, check तभी चलता है जब sender का पता एक “is valid” test पास कर ले, जहाँ valid का मतलब है कि domain किसी जाने-पहचाने public suffix के नीचे है, इसलिए एक गढ़ा हुआ top-level domain A-और-MX check को पूरी तरह छोड़ देता है। दूसरी, और यही चुभती है: lookup DNS error को DNS ग़ैरमौजूदगी से अलग बरतता है। जो domain साफ़ “no such name” के बजाय SERVFAIL लौटाता है, उसे कोई tag नहीं मिलता, और message स्वीकार हो जाता है। Postfix उसे defer करता है। Stalwart उसे अंदर आने देता है। यह ठीक उसी अस्पष्ट मामले पर fail-open है जिसके लिए एक security control होता है, और इस build में वह एक जगह जहाँ Stalwart Postfix के मुक़ाबले नापने लायक कम सुरक्षित है।\nजब तक आप न बदलें, IPv6 एक fallback है इस series में IPv6 दोनों दिशाओं में अनिवार्य है। Stalwart बिना किसी झंझट के दोनों families पर सुनता है। पेच outbound में है: ship हुआ route पहले IPv4 resolve करता है, इसलिए dual-stack destination तक IPv4 से पहुँचा जाता है और IPv6 सिर्फ़ fallback रहता है। उसी lab में Postfix ने IPv6 इस्तेमाल किया। Stalwart ने तब तक v4 इस्तेमाल किया जब तक route को v6 पसंद करने पर नहीं बदला गया:\n\u0026#34;ipLookupStrategy\u0026#34;: \u0026#34;v6ThenV4\u0026#34; उसके बाद dual-stack server को delivery IPv6 पर जाती है, जिसकी पुष्टि logs में v6 पते तक पहुँचने से हुई। यह एक setting है। यह default भी नहीं है, और IPv6 की अनिवार्यता पर default उलटा है।\nMTA-STS लागू करता है, और जल्दी bounce करता है Stalwart अपनी MTA-STS policy खुद publish करता है, जो सच में अच्छी बात है, अलग web server की ज़रूरत नहीं जैसे Postfix build को nginx चाहिए। पर यह testing mode में ship होता है, जो कुछ भी लागू नहीं करता, और यह mail host के certificate के नीचे serve होती है न कि ऐसे certificate के जो policy host के नाम से मेल खाए, इसलिए verify करने वाला fetch तब तक फ़ेल होता है जब तक आप दोनों ठीक न करें। Mode को enforce पर करें और mta-sts host के लिए certificate load करें, तो policy ठीक से serve और check होती है:\nmta-sts.policy-fetch strict = true mta-sts.authorized भेजने वाला पक्ष भी लागू करता है, और ऐसे destination को मना करता है जिसकी policy उसका MX सूचीबद्ध नहीं करती। पर यह ग़लत ढंग से मना करता है: mismatch पहली कोशिश पर ही स्थायी failure है, और message bounce हो जाता है। RFC 8461 साफ़ कहता है कि ऐसा नहीं होना चाहिए:\nIn all cases, MTAs SHOULD treat such failures as transient errors and retry delivery later.3\nStalwart fail करने से पहले policy दोबारा fetch करता है, इसलिए standard का सख़्त नियम, कि आप पहले नई policy देखें, पूरा होता है। नरम वाला SHOULD, कि आप failure को अस्थायी मानें और दोबारा कोशिश करें, पूरा नहीं होता। क़ीमत है एक bounce हुआ message जहाँ deferral ज़्यादा दयालु होता, उस failure पर जो आम तौर पर अस्थायी होता है।\nOutbound TLS: ज़रूरी, फिर जहाँ हो सके वहाँ ज़्यादा मज़बूत Postfix build की तरह, outbound पक्ष encrypt को फ़र्श बनाता है और हर destination को उससे ऊपर उठाता है जब destination इसका हक़दार हो। Stalwart का MtaTlsStrategy हर तरीके के लिए एक स्तर सेट करता है, और घर की policy यह है:\nतरीका घर की setting असर STARTTLS require किसी को भी कभी खुले में नहीं भेजना DANE optional जहाँ signed TLSA publish हो, वहाँ authenticate MTA-STS optional जहाँ enforced policy publish हो, उसका पालन Invalid certs बंद जो certificate verify न हो, वह mail को defer कर देता है STARTTLS पर require वह फ़र्श है जो ship हुए default में नहीं है: बिना बदले, outbound strategy retry पर invalid certificate स्वीकार करने पर लौट आती थी। फ़र्श सेट होने पर, जो destination काम का TLS नहीं देता उसे defer किया जाता है, downgrade नहीं।\nDANE मौजूद है, पर lab इसे साबित नहीं कर सका सबसे मज़बूत outbound control, DANE, बाकी की तरह अंदर बना है, और इसका outbound TLS वैसे ही बंद होकर फ़ेल होता है जैसे होना चाहिए: ऐसे server की ओर भेजने पर जिसका certificate यह verify नहीं कर सका, Stalwart ने मना किया और खुले में भेजने के बजाय message रोक लिया। जो बंद lab नहीं कर सका, वह है DANE को सफल होते दिखाना, और यह एक असली सीमा है जो दर्ज करने लायक है।\nStalwart DANE तभी चालू करता है जब वह DNS root key को खुद validate कर सके, एक ऐसे resolver connection से जो सादा UDP न हो। एक private lab root यह नहीं दे सकता, इसलिए यह DANE बंद कर देता है और एक ऐसे path पर warning log करता है जो default से मौजूद ही नहीं है। चूकना आसान है। इससे बुरा, signed zone के लिए यह फिर TLSA records को “not DNSSEC signed” बताता है जबकि असली वजह उसका अपना resolver है। संदेश ग़लत चीज़ पर दोष डालता है।\nStalwart ठीक इसी के लिए एक read-only delivery diagnostic ship करता है: एक endpoint जो पूरा outbound रास्ता चलाता है और कभी कोई message नहीं भेजता। यह हर कदम चलते-चलते stream करता है:\nGET /api/live/delivery/\u0026lt;domain\u0026gt;?timeout=20 कदम क्या बताता है MX lookup mail servers, और lookup validate हुआ या नहीं MTA-STS fetch हुई policy, और MX authorised है या नहीं TLS-RPT वह reporting पता जो domain publish करता है TLSA DANE records, और वे DNSSEC signed हैं या नहीं Connect, EHLO, STARTTLS TLS तक का session, cipher के साथ DANE verify, QUIT certificate का मेल, फिर साफ़ hang-up न MAIL FROM, न RCPT TO, कुछ deliver नहीं। यह वह check है जिसे किसी असली DANE domain के सामने चलाकर वह positive मामला देखा जा सकता है जो यह lab नहीं दिखा सकता।\nDANE का positive मामला साबित करने का मतलब है इसे internet से जुड़े instance से असली DANE-publish करने वाले domains के सामने चलाना। यह इस series का वह एक test है जो बंद lab नहीं कर सकता, और lab आपको जो दिखा सकता है उसका ईमानदार किनारा।\nतो क्या अंदर बना हुआ बेहतर है? यह वह बात है जिसके चारों ओर पूरी पोस्ट घूम रही थी। अंदर बना होना install करने में कम, जोड़ने में कम, versions के पार तालमेल में रखने में कम है, और एक ऐसे अकेले process में असली मूल्य है जहाँ SPF नतीजा DKIM check के लिए बस मौजूद है और दोनों Sieve script के लिए मौजूद हैं, बीच में कोई socket नहीं। एक छोटे deployment के लिए जो चलाने और update करने को एक चीज़ चाहता है, यह सच में अच्छा जवाब है, और ऊपर का कुछ भी इसे इस्तेमाल न करने की वजह नहीं है।\nपर इस series का हर कठिन हिस्सा एक binary में जाने के बाद भी बचा रहा। Defaults अब भी ढीले ship होते हैं। नियम अब भी ढूँढने और चालू करने पड़ते हैं, एक के बजाय चार तरीकों में। DKIM-fail rejection को अब भी हाथ से लिखी script चाहिए। Unknown-sender check अब भी DNS error पर खुला छोड़ देता है। MTA-STS अब भी bounce करता है जहाँ उसे defer करना चाहिए। Code एक process में रहने से इनमें से कुछ भी आसान नहीं हुआ। ये समस्या के गुण हैं, packaging के नहीं।\nदोनों builds को साथ रखिए और पैटर्न साफ़ है:\nPostfix build Stalwart चलाने को हिस्से 4 packages, 3 sockets 1 binary Configuration main.cf, एक text file एक database, API पर SPF, DKIM, DMARC Rspamd milter अंदर बना DANE, MTA-STS out postfix-tlspol अंदर बना MTA-STS publishing अलग nginx अंदर बना DKIM-fail reject Rspamd force action एक Sieve script (अंदर का tag चूकता है) Unknown sender MAIL FROM पर 550 DATA के बाद 550, SERVFAIL पर खुला MTA-STS mismatch out defer, retry पहली कोशिश पर bounce IPv6 outbound default से इस्तेमाल v6-first पर बदलने तक fallback जैसे ship हुए defaults ढीले ढीले यही ईमानदार निष्कर्ष है, और वही जिस पर Postfix पोस्ट दूसरे रास्ते से पहुँची। Mail को सुरक्षित binaries की गिनती नहीं बनाती। उसे यह बनाता है कि कोई तय करे कि हर नियम मायने रखता है, ढूँढे कि वह कहाँ रहता है, उसे चालू करे, और वह message भेजकर जाँचे जिसे रोकने के लिए वह है कि उसने रोका। Stalwart आपको यह सब करने देता है, एक process में, एक साफ़-सुथरे API पर। अकेला छोड़ दें तो यह एक plaintext session, एक जाली sender और एक बदला हुआ invoice भी स्वीकार कर लेगा, ठीक बाकी सब की तरह। Binary एक है। काम एक नहीं।\nStalwart documentation — JMAP management API और stalwart-cli से configuration, settings एक file के बजाय data store में। यहाँ version 0.16.27 इस्तेमाल हुआ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nmail-auth, the library Stalwart uses for DKIM — इसका DKIM verifier body-hash mismatch को failure के बजाय neutral नतीजा बताता है, इसीलिए सिर्फ़ failure tag पर reject छेड़छाड़ वाली body को नहीं पकड़ता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8461 §5 — SMTP MTA Strict Transport Security: policy-validation failure पर, “In all cases, MTAs SHOULD treat such failures as transient errors and retry delivery later”, और sender के अपडेटेड policy देखने से पहले message “MUST NOT be permanently failed”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/email/stalwart-dane-and-the-rest-built-in/","summary":"Stalwart एक binary में पूरा mail server है: SMTP, IMAP और JMAP, SPF, DKIM, DMARC, ARC, DANE, MTA-STS, TLS reporting, एक spam filter और mail store, न कोई milter जोड़ना, न बगल में कोई policy daemon चलाना। यह पोस्ट इसे Postfix build वाले घर के नियमों पर परखती है और lab में हर जवाब कैप्चर करती है। सारे नियम लग जाते हैं, पर कहानी बारीकियों में है: settings एक file के बजाय database में रहती हैं, जैसे ship होते हैं वैसे defaults plaintext और छेड़छाड़ किया invoice स्वीकार कर लेते हैं, हर नियम चार configuration तरीकों में से किसी अलग में जाता है, DKIM-fail reject के लिए Sieve script चाहिए क्योंकि अंदर का check छेड़छाड़ वाली body को neutral बताता है, unknown-sender check पूरा message आने के बाद ही चलता है और DNS error पर खुला छोड़ देता है, और MTA-STS sender पहली ही कोशिश में bounce कर देता है जहाँ standard कहता है कि उसे defer करना चाहिए। अंदर बना होना सच में कम जोड़-तोड़ है। यह default से सुरक्षित होने के बराबर नहीं है।","title":"Stalwart: DANE और बाकी सब, अंदर ही बना हुआ"},{"content":"पूरे घर के लिए एक पासवर्ड WiFi पासवर्ड हर उस चीज़ के साथ शेयर होता है जो कभी भी जुड़ी हो। लैपटॉप, फ़ोन, TV, दरवाज़े का वह कैमरा जिसका फ़र्मवेयर लगने के बाद से किसी ने अपडेट नहीं किया, वह मेहमान जिसे क्रिसमस पर पासवर्ड दिया गया था, और उसके बाद उस मेहमान के पास आया हर फ़ोन। ये सब एक ही नेटवर्क पर बैठे हैं। इनमें से हर एक बाकी हर एक से बात कर सकता है।\nइसे आम तरीके से बाँटने का मतलब है ज़्यादा SSID। एक स्टाफ़ के लिए, एक IoT के लिए, एक मेहमानों के लिए, हर एक का अपना पासवर्ड और अपना VLAN। यह चलता है। फिर एक पासवर्ड लीक होता है, और आप उस SSID के हर डिवाइस के पास नया पासवर्ड लेकर घूम रहे होते हैं, और यही वह काम है जो कभी होता ही नहीं।\nखाली वायर्ड पोर्ट इससे भी बुरा है। कोई पासवर्ड ही नहीं। प्लग लगाइए और आप उस VLAN पर हैं जिस पर पोर्ट सेट था।\nसर्टिफ़िकेट के साथ 802.1X इसे उलट देता है। हर डिवाइस अपना सर्टिफ़िकेट रखता है और एक भी पैकेट गुज़रने से पहले साबित करता है कि वह क्या है, और फिर नेटवर्क तय करता है कि वह कहाँ जाएगा, न डिवाइस, न वह जिसने पासवर्ड बाँटा। एक SSID। हर स्विच पोर्ट एक जैसा। लैपटॉप स्टाफ़ VLAN पर पहुँचता है, कैमरा IoT VLAN पर, और जिस डिवाइस को आपने कभी सर्टिफ़िकेट नहीं दिया वह कहीं नहीं पहुँचता।\nएक शेयर किया पासवर्ड हर VLAN का एक SSID 802.1X, एक SSID कौन अंदर आता है जिसके पास भी पासवर्ड है जिसके पास भी उस SSID का पासवर्ड है सिर्फ़ वह डिवाइस जिसके पास आपका दिया सर्टिफ़िकेट है कौन सा VLAN सब एक पर जिस SSID से जुड़े, वही उस डिवाइस के लिए RADIUS सर्वर जो कहे एक खोए डिवाइस को बाहर करना हर जगह पासवर्ड बदलिए हर जगह उस SSID का पासवर्ड बदलिए एक सर्टिफ़िकेट रिवोक कीजिए वायर्ड पोर्ट खुले खुले WiFi जैसी ही जाँच ब्रॉडकास्ट होने वाले SSID 1 हर VLAN का एक 1 यह पोस्ट यही बनाती है। step-ca सर्टिफ़िकेट जारी करता है और हर डिवाइस का रोल उनमें लिखता है, FreeRADIUS हर सर्टिफ़िकेट को CA और उसकी रिवोकेशन सूची से जाँचता है, उसमें से रोल पढ़ता है और एक VLAN के साथ जवाब देता है, और स्विच या एक्सेस पॉइंट डिवाइस को वहीं रखता है जहाँ उसे कहा गया है। उपकरण Netgear या TP-Link हैं, जो जहाँ हो सके TLS पर FreeRADIUS से बात करते हैं। असली उपकरणों के पास जाने से पहले यह सब यहाँ चलाया गया: CA और RADIUS सर्वर कंटेनर में, और स्विच पोर्ट और WiFi नेटवर्क सिम्युलेटर में।\nचार हिस्से, और फ़ैसला सिर्फ़ एक करता है 802.1X तीन रोल का नाम लेता है1। supplicant वह डिवाइस है जो जुड़ना चाहता है। authenticator स्विच पोर्ट या एक्सेस पॉइंट है। authentication server RADIUS है। सर्टिफ़िकेट जारी करने वाला CA जोड़िए और पूरा सिस्टम यही है।\n802.1X लॉगिन में कौन क्या करता है डिवाइस supplicant स्विच या AP authenticator आगे भेजता है, तय कुछ नहीं FreeRADIUS VLAN चुनता है step-ca सर्टिफ़िकेट और CRL EAP-TLS पोर्ट खुलता है RadSec VLAN 10 CRL, HTTPS सर्टिफ़िकेट, एक बार जारी स्विच या AP सिर्फ़ आगे भेजता है। EAP डिवाइस से FreeRADIUS तक पहले EAPOL के अंदर और फिर RADIUS के अंदर जाता है, और जवाब तीन attributes में VLAN लेकर लौटता है। step-ca कभी कोई लॉगिन नहीं देखता; उसने सर्टिफ़िकेट पहले ही साइन कर दिए थे और रिवोकेशन सूची प्रकाशित करता है। स्विच और AP कुछ तय नहीं करते। वे बस आगे भेजते हैं। जब तक डिवाइस ऑथेंटिकेट नहीं हो जाता, पोर्ट EAP के सिवा कुछ नहीं जाने देता। authenticator उस EAP को RADIUS में लपेटता है, सर्वर को भेजता है, और जवाब पर अमल करता है। Access-Accept पोर्ट खोल देता है। अगर Accept में tunnel attributes हैं, तो पोर्ट या WiFi क्लाइंट उनके बताए VLAN पर जाता है। RFC 3580 तय करता है कि वे कौन से तीन attributes हैं, जो RADIUS के tunnel attributes से उधार लिए गए हैं23:\nAttribute मान मतलब Tunnel-Type VLAN (13) यह टनल एक VLAN है Tunnel-Medium-Type IEEE-802 (6) एक 802 नेटवर्क पर Tunnel-Private-Group-Id \u0026quot;10\u0026quot; VLAN ID, स्ट्रिंग के रूप में भेजी गई तो स्विच का ब्रांड जितना आप सोचते हैं उससे कम मायने रखता है। फ़ैसला उस बॉक्स पर होता है जिसे आप चलाते हैं। dynamic VLAN करने वाला हर वेंडर यही तीन attributes पढ़ता है। RFC साफ़ कहता है कि VLAN ID “encoded as a string”3 होती है, इसीलिए वह कोट्स में है।\nसर्टिफ़िकेट क्यों, और सिर्फ़ TLS 1.3 क्यों EAP के कई तरीके हैं, और इस्तेमाल होने वालों में से ज़्यादातर TLS में लिपटा एक पासवर्ड हैं। इंसान के लिए यह चलता है। कैमरे के लिए यह बेकार है, क्योंकि वहाँ कुछ टाइप करने वाला कोई नहीं, और हज़ार कैमरों में शेयर किया पासवर्ड फिर से वही WiFi पासवर्ड है।\nतरीका डिवाइस को क्या साबित करता है अगर डिवाइस गलत सर्वर पर भरोसा कर ले एक डिवाइस को बाहर करना EAP-TLS उसका अपना सर्टिफ़िकेट और प्राइवेट की सर्वर को सर्टिफ़िकेट पता चलता है, जो वैसे भी पब्लिक है सर्टिफ़िकेट रिवोक कीजिए PEAP with MS-CHAPv2 एक यूज़रनेम और पासवर्ड सर्वर एक हैंडशेक पकड़ लेता है जिसे क्रैक करके पासवर्ड निकाला जा सकता है पासवर्ड बदलिए EAP-TTLS with PAP एक यूज़रनेम और पासवर्ड सर्वर को पासवर्ड ही भेज दिया जाता है पासवर्ड बदलिए बीच वाला कॉलम ही EAP-TLS की वजह है। MS-CHAPv2 को टूटे हुए दस साल से ज़्यादा हो गए। Microsoft की अपनी advisory कहती है कि “an attacker who obtained the MS-CHAP v2 authentication traffic could then use the exploit code to decrypt a user\u0026rsquo;s credentials”4। उसे PEAP में लपेटना तभी बचाता है जब हर डिवाइस जाँचे कि वह किससे बात कर रहा है, और जैसा डिवाइस वाला सेक्शन दिखाता है, बहुत से नहीं जाँचते। EAP-TLS में एक्सचेंज के अंदर चुराने को कोई सीक्रेट नहीं है। प्राइवेट की कभी डिवाइस से बाहर नहीं जाती5। क्रैक करने को कुछ नहीं।\nTLS 1.2 सर्टिफ़िकेट को हवा में डाल देता है TLS 1.2 पर EAP-TLS में एक खामी है जो आसानी से छूट जाती है। डिवाइस एन्क्रिप्शन शुरू होने से पहले अपना सर्टिफ़िकेट भेजता है। खुले में। WiFi सुनने वाला कोई भी उसे पढ़ सकता है, और चूँकि यह पोस्ट डिवाइस का रोल सर्टिफ़िकेट में लिखती है, वे उसे भी पढ़ सकते हैं।\nयहाँ मापा गया, डिवाइस के भेजे हर EAP मैसेज में डिवाइस का नाम और उसका रोल खोजकर:\nरन TLS डिवाइस का नाम खुले में रोल OU=staff खुले में Identity laptop1 1.2 हाँ हाँ Identity laptop1 1.3 हाँ, identity में नहीं Identity anonymous 1.3 नहीं नहीं TLS 1.3 इसे ठीक करता है। RFC 9190 कहता है कि TLS 1.3 के साथ “the use of privacy is mandatory and does not cause any additional round trips”6। बाहरी identity अब भी खुले में जाती है, इसलिए उसमें भी डिवाइस का नाम नहीं होना चाहिए। RFC एक anonymous identity की सलाह देता है6। यहाँ असली identity की ज़रूरत किसी को नहीं, क्योंकि FreeRADIUS डिवाइस कौन है यह सर्टिफ़िकेट से पढ़ता है। बाहर anonymous हो, तो छिपकर सुनने वाले को आखिरी पंक्ति मिलती है: कुछ भी नहीं।\nइसलिए यह बिल्ड सिर्फ़ TLS 1.3 चलाता है। FreeRADIUS दोनों सिरों पर उसी पर बँधा है। जो डिवाइस इसे नहीं बोल सकता वह नहीं जुड़ता। इसकी एक कीमत है, और वह डिवाइस वाले सेक्शन में गिनी गई है, छिपाई नहीं गई। FreeRADIUS का अपना कॉन्फ़िग अब भी कैपिटल अक्षरों में कहता है कि 1.2 पर सीमा रखिए, क्योंकि “most EAP supplicants WILL NOT DO TLS 1.3 PROPERLY”7। जहाँ श्रेय बनता है वहाँ देना चाहिए: वह कॉन्फ़िग इस पूरी पोस्ट का सबसे ईमानदार डॉक्यूमेंटेशन है, और नीचे का लगभग हर जाल उसमें कहीं न कहीं लिखा है, अगर आप कमेंट पढ़ें। जिस नेटवर्क पर डिवाइस आप चुनते हैं, वहाँ यह बेहतर डिवाइस चुनने की वजह है।\nसर्टिफ़िकेट में रोल डालना VLAN इस बात से तय होता है कि डिवाइस क्या है, और वह बात सर्टिफ़िकेट में जाती है। step-ca उसे एक template से वहाँ लिख सकता है, वही तरीका जो क्लाइंट सर्टिफ़िकेट वाली पोस्ट CRL distribution point के लिए इस्तेमाल करती है। CA को खुद शुरू करना step-ca in a container में कवर है, और यह वहीं से Home Network CA नाम के CA के साथ आगे बढ़ता है।\nहर डिवाइस सर्टिफ़िकेट को अपना रोल उसके subject की organisational unit (OU) में मिलता है। template रोल को रिक्वेस्ट से लेता है और सूची में न होने वाली किसी भी चीज़ को मना कर देता है8:\n{{- $roles := list \u0026#34;staff\u0026#34; \u0026#34;iot\u0026#34; \u0026#34;media\u0026#34; }} {{- if not (has .Insecure.User.role $roles) }} {{- fail \u0026#34;role must be one of staff, iot or media\u0026#34; }} {{- end }} { \u0026#34;subject\u0026#34;: { \u0026#34;commonName\u0026#34;: {{ toJson .Subject.CommonName }}, \u0026#34;organizationalUnit\u0026#34;: {{ toJson .Insecure.User.role }} }, \u0026#34;sans\u0026#34;: {{ toJson .SANs }}, \u0026#34;keyUsage\u0026#34;: [\u0026#34;digitalSignature\u0026#34;], \u0026#34;extKeyUsage\u0026#34;: [\u0026#34;clientAuth\u0026#34;], \u0026#34;crlDistributionPoints\u0026#34;: [\u0026#34;http://ca.home.example/1.0/crl\u0026#34;] } इसे अपना अलग provisioner दीजिए, ताकि डिवाइस कभी आम इस्तेमाल वाले admin से न निकलें, और एक साल वह सबसे लंबा सर्टिफ़िकेट हो जिसे यह साइन करेगा:\nstep ca provisioner add network --type JWK --create \\ --x509-max-dur 8760h --x509-default-dur 24h \\ --x509-template templates/device.tpl --x509-template template को फ़ाइल की ओर इशारा करने की बजाय ca.json में कॉपी कर देता है, इसलिए बाद में device.tpl एडिट करने से तब तक कुछ नहीं बदलता जब तक आप step ca provisioner update network --x509-template templates/device.tpl फिर से न चलाएँ। फिर हर डिवाइस का सर्टिफ़िकेट उसके रोल के साथ जारी कीजिए:\nstep ca certificate laptop1 laptop1.crt laptop1.key \\ --provisioner network --not-after 8760h --set role=staff $ openssl x509 -in laptop1.crt -noout -subject -ext extendedKeyUsage subject=OU=staff, CN=laptop1 X509v3 Extended Key Usage: TLS Web Client Authentication रोल न हो या अनजाना रोल हो, तो कुछ नहीं मिलता:\n$ step ca certificate norole norole.crt norole.key --provisioner network The request could not be completed: role must be one of staff, iot or media. .Insecure.User को insecure इसलिए कहते हैं क्योंकि वह वही है जो रिक्वेस्ट करने वाला भेजे। यहाँ यह ठीक है। network provisioner का एक पासवर्ड है, वह सिर्फ़ आपके पास है, और जो उससे साइन कर सकता है वह पहले से ही जो चाहे सर्टिफ़िकेट बना सकता है, इसलिए खुद टाइप किया रोल उसे कुछ अतिरिक्त नहीं देता।\nRADIUS सर्वर को भी एक सर्टिफ़िकेट चाहिए, ताकि डिवाइस जाँच सकें कि वे किससे बात कर रहे हैं। वह किसी भी दूसरे सर्वर सर्टिफ़िकेट की तरह admin provisioner से आता है, और डिफ़ॉल्ट 24 घंटे चलता है, step ca renew --daemon से रिन्यू होता है, जैसे step-ca वाली पोस्ट ACME न कर सकने वाली किसी भी सर्विस के लिए करती है। डिवाइस नाम और CA जाँचते हैं, सीरियल नहीं। रोज़ का रिन्यूअल उनके लिए कुछ नहीं बदलता।\nसर्टिफ़िकेट Provisioner अवधि Extended key usage क्या रखता है radius.home.example admin 24 घंटे, रोज़ रिन्यू सर्वर और क्लाइंट वह नाम जो डिवाइस जाँचते हैं laptop1 network 1 साल सिर्फ़ क्लाइंट OU=staff cam1 network 1 साल सिर्फ़ क्लाइंट OU=iot tv1 network 1 साल सिर्फ़ क्लाइंट OU=media switch1, ap1 nas 1 साल सिर्फ़ क्लाइंट OU=nas, RadSec के लिए; नीचे देखिए FreeRADIUS: VLAN तय करना FreeRADIUS 3.2.10, प्रोजेक्ट की अपनी कंटेनर image में। कॉन्फ़िग के तीन टुकड़े काम करते हैं: EAP मॉड्यूल, VLAN चुनने वाली एक policy, और अपवादों की एक सूची।\nEAP मॉड्यूल सिर्फ़ EAP-TLS, सिर्फ़ TLS 1.3, और हर लॉगिन पर CRL की जाँच:\neap { default_eap_type = tls tls-config tls-common { certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt check_crl = yes ca_path_reload_interval = 300 tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; } tls { tls = tls-common } } फ़ाइल क्या रखती है radius.crt सर्वर सर्टिफ़िकेट, फिर step-ca का intermediate, जैसे step ca certificate उसे लिखता है radius.key उसकी प्राइवेट की; यहाँ की हर चीज़ की तरह, freerad यूज़र के पढ़ने लायक, वरना FreeRADIUS शुरू नहीं होगा ca/ root, intermediate और intermediate की CRL, openssl rehash ca/ से hash की हुई बीच वाली पंक्ति ने यहाँ पहली बार शुरू होना रोक दिया, हालाँकि की की वजह से नहीं: root सर्टिफ़िकेट पर Permission denied, क्योंकि CA से निकली हर फ़ाइल सिर्फ़ उसके मालिक के पढ़ने लायक थी। FreeRADIUS freerad के रूप में चलता है, इसलिए तीनों उसके पढ़ने लायक होनी चाहिए।\ncheck_crl = yes डिवाइस के सर्टिफ़िकेट को intermediate की CRL से जाँचता है। यह खुद intermediate को नहीं जाँचता, इसलिए क्लाइंट सर्टिफ़िकेट वाली पोस्ट के nginx से अलग, FreeRADIUS को root CRL की ज़रूरत नहीं। अगर आप चाहें तो check_all_crl उसे चालू कर देता है7। ca_path_reload_interval जितना दिखता है उससे ज़्यादा मायने रखता है, और नीचे उसका अपना सेक्शन है।\nPolicy इस CA ने अब तक जो भी सर्टिफ़िकेट जारी किया है, वह TLS जाँच पास कर लेगा। ACME से सर्टिफ़िकेट पाने वाले वेब सर्वर भी। इसलिए policy इस काम के लिए न बनी हर चीज़ बाहर फेंकती है: क्लाइंट-auth usage नहीं, या रोल नहीं, तो रिजेक्ट।\nFreeRADIUS VLAN कैसे चुनता है TLS 1.3 हैंडशेक, CRL Client-auth usage है? डिवाइस सूची में है? सर्टिफ़िकेट में रोल? रोल नहीं: रिजेक्ट रिजेक्ट सूची जीतती है: cam1, VLAN 99 staff, 10 iot, 20 media, 30 हाँ नहीं कोई नहीं नहीं हाँ हर डिवाइस वाली सूची से पहले पूछा जाता है और जवाब हो तो वही जीतती है। वरना सर्टिफ़िकेट का रोल VLAN चुनता है। जिस सर्टिफ़िकेट में दोनों में से कुछ नहीं, वह मना कर दिया जाता है, और यही CA के वेब सर्वर सर्टिफ़िकेट को नेटवर्क पर आने से रोकता है। vlan_by_certificate { if (\u0026amp;TLS-Client-Cert-X509v3-Extended-Key-Usage-OID !~ /1\\.3\\.6\\.1\\.5\\.5\\.7\\.3\\.2/) { reject } device_vlan if (!\u0026amp;reply:Tunnel-Private-Group-Id) { if (\u0026amp;TLS-Client-Cert-Subject =~ /\\/OU=([^\\/]+)/) { switch \u0026#34;%{1}\u0026#34; { case \u0026#34;staff\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;10\u0026#34; } } case \u0026#34;iot\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;20\u0026#34; } } case \u0026#34;media\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;30\u0026#34; } } case { reject } } } else { reject } } update reply { \u0026amp;Tunnel-Type := VLAN \u0026amp;Tunnel-Medium-Type := IEEE-802 } } यह policy.d/vlan में जाता है, और एक लाइन, vlan_by_certificate, sites-available/default के post-auth सेक्शन में सबसे ऊपर जाती है। Post-auth वह जगह है जहाँ TLS हैंडशेक पूरा होने के बाद सर्टिफ़िकेट की जानकारी उपलब्ध होती है9।\nअपवादों की सूची ज़्यादातर डिवाइस का फ़ैसला रोल करता है। सबका नहीं। यह सूची उन थोड़े से डिवाइस के लिए है जिनका नहीं करना चाहिए: एक कैमरा जो अजीब बर्ताव करने लगा है और वजह पता करने से पहले उसे quarantine करना है, या एक हफ़्ते के लिए उधार दिया गया डिवाइस। यह एक passwd मॉड्यूल है जो दो कॉलम वाली फ़ाइल पढ़ता है, सर्टिफ़िकेट के common name के हिसाब से:\npasswd device_vlan { filename = ${modconfdir}/device_vlan/devices format = \u0026#34;*TLS-Client-Cert-Common-Name:=Tunnel-Private-Group-Id\u0026#34; delimiter = \u0026#34;,\u0026#34; } # certificate CN,VLAN cam1,99 attribute के आगे का = उसे check items की बजाय reply में डालता है10। किसी डिवाइस को दूसरी जगह भेजना एक टेक्स्ट फ़ाइल में एक लाइन है, न कोई सर्टिफ़िकेट दोबारा जारी करना, न डिवाइस पर कुछ छूना।\nVLAN रोल वहाँ क्या रहता है 10 staff लैपटॉप और फ़ोन जिन पर आप भरोसा करते हैं 20 iot कैमरे, सेंसर, हर वह चीज़ जो घर फ़ोन करती है 30 media TV और स्ट्रीमर 99 सिर्फ़ सूची से Quarantine: ज़्यादा से ज़्यादा इंटरनेट, लोकल कुछ नहीं स्विच को छूने से पहले इसे साबित करना eapol_test wpa_supplicant के साथ आता है और एक साथ डिवाइस और स्विच दोनों बनता है, सीधे RADIUS सर्वर से बात करते हुए। पहले इसे इस्तेमाल कीजिए। बाद में जब कुछ न चले, तो आपको पता होगा कि किस आधे हिस्से को देखना है।\nnetwork={ key_mgmt=WPA-EAP eap=TLS phase1=\u0026#34;tls_disable_tlsv1_3=0\u0026#34; identity=\u0026#34;anonymous\u0026#34; ca_cert=\u0026#34;/etc/pki/home/root_ca.crt\u0026#34; domain_match=\u0026#34;radius.home.example\u0026#34; client_cert=\u0026#34;/etc/pki/home/laptop1.crt\u0026#34; private_key=\u0026#34;/etc/pki/home/laptop1.key\u0026#34; } eapol_test -c laptop1.conf -a 192.0.2.10 -s \u0026lt;shared secret\u0026gt; जवाब, FreeRADIUS के अपने debug log से:\n(8) Sent Access-Accept (8) Tunnel-Private-Group-Id = \u0026#34;10\u0026#34; (8) Tunnel-Type = VLAN (8) Tunnel-Medium-Type = IEEE-802 डिवाइस सर्टिफ़िकेट में रोल सूची में जवाब VLAN laptop1 staff नहीं Accept 10 cam1 iot 99 Accept 99 tv1 media नहीं Accept 30 laptop2 staff, रिवोक किया हुआ नहीं Reject, certificate revoked कोई नहीं radius.home.example कोई नहीं नहीं Reject, रोल नहीं कोई नहीं laptop1, TLS 1.3 बंद staff नहीं Reject, protocol version कोई नहीं वह आखिरी पंक्ति लाइव जाने से पहले जानने लायक है। wpa_supplicant 2.11 अब भी EAP के लिए TLS 1.3 बंद करके आता है, “experimental - disabled by default”11 कहकर। phase1 लाइन छोड़ दीजिए और एक बिल्कुल ठीक लैपटॉप मना कर दिया जाता है।\nएक स्विच पोर्ट, सिम्युलेट किया हुआ eapol_test स्विच को छोड़ देता है। स्विच का आधा हिस्सा देखने के लिए, hostapd में एक वायर्ड ड्राइवर है जो एक Linux interface को 802.1X पोर्ट बना देता है। एक वर्चुअल केबल उसे लैपटॉप बने wpa_supplicant से जोड़ती है, और वह उसी FreeRADIUS की ओर इशारा करता है।\ninterface=port1 driver=wired ieee8021x=1 use_pae_group_addr=1 auth_server_addr=192.0.2.10 auth_server_port=1812 auth_server_shared_secret=\u0026lt;shared secret\u0026gt; एक अच्छे लैपटॉप और एक रिवोक किए हुए लैपटॉप के बारे में पोर्ट का नज़रिया:\nport1: CTRL-EVENT-EAP-SUCCESS2 4a:42:cf:cf:09:5a port1: AP-STA-CONNECTED 4a:42:cf:cf:09:5a port1: STA 4a:42:cf:cf:09:5a IEEE 802.1X: authorizing port port1: CTRL-EVENT-EAP-FAILURE2 de:d8:8c:88:6e:f2 port1: IEEE 802.1X: Force disconnection of de:d8:8c:88:6e:f2 after EAP-Failure in 10 ms इसकी dynamic VLAN हैंडलिंग चालू कीजिए और यह मिला हुआ VLAN बताता है, लैपटॉप के लिए vlan=10 और quarantine किए कैमरे के लिए vlan=99, फिर कहता है could not add dynamic VLAN interface। यह एक Linux पोर्ट की ईमानदारी है: वह खुल और बंद हो सकता है, पर खुद को किसी VLAN पर नहीं ले जा सकता। managed स्विच वह हिस्सा हार्डवेयर में करता है, और नीचे वेंडर की सेटिंग्स वही आधा हिस्सा कवर करती हैं।\nरिवोकेशन: वह CRL जिसे FreeRADIUS HUP पर अनदेखा करता है खोया हुआ लैपटॉप ही वह मामला है जिसके लिए यह सब है। उसे CA पर रिवोक कीजिए। admin provisioner सीरियल नंबर के लिए एक revocation token साइन करता है, जो लैपटॉप की की के बिना चलता है, क्योंकि लैपटॉप आपके पास होगा ही नहीं:\nSERIAL=$(step certificate inspect laptop2.crt --format json | jq -r .serial_number) TOKEN=$(step ca token \u0026#34;$SERIAL\u0026#34; --revoke --provisioner admin) step ca revoke \u0026#34;$SERIAL\u0026#34; --token \u0026#34;$TOKEN\u0026#34; --reason \u0026#34;laptop lost\u0026#34; Certificate with Serial Number 306546036599704679037436836531698019860 has been revoked. जब generateOnRevoke चालू हो, तो step-ca अपनी CRL तुरंत दोबारा बनाता है, जैसा क्लाइंट सर्टिफ़िकेट वाली पोस्ट में सेट किया गया है। उसे FreeRADIUS की ca/ डायरेक्टरी में कॉपी कीजिए और लैपटॉप बाहर। बस, बाहर नहीं हुआ। वह सीधे वापस अंदर आ गया।\nनई CRL डिस्क पर आने के बाद क्या किया गया रिवोक किया लैपटॉप कुछ नहीं अब भी जुड़ता है kill -HUP अब भी जुड़ता है। log कहता है HUP - No files changed. Ignoring ca_path_reload_interval से ज़्यादा इंतज़ार मना, certificate revoked FreeRADIUS रीस्टार्ट मना, certificate revoked HUP कॉन्फ़िगरेशन फ़ाइलें दोबारा लोड करता है, और ca_path में रखी CRL उनमें से एक नहीं है, इसलिए FreeRADIUS अपनी कॉन्फ़िग फ़ाइलों की सूची जाँचता है, किसी को बदला हुआ नहीं पाता, और मेमोरी में पुरानी CRL के साथ चलता रहता है। जो उसे उठाता है वह ca_path_reload_interval है। डिफ़ॉल्ट कॉन्फ़िग में यह बंद है। इसे 300 सेकंड से कम रखिए और FreeRADIUS शुरू होते समय आपकी बात पलट देता है:\nca_path_reload_interval is set too low, reset it to 300 तो 300 ही सही। नई CRL आने के पाँच मिनट के अंदर रिवोकेशन लागू हो जाता है। उसे एक timer पर लाइए, जैसे क्लाइंट सर्टिफ़िकेट वाली पोस्ट nginx के लिए पहले से करती है, बस इस डायरेक्टरी में। अगर अभी खोए डिवाइस के लिए पाँच मिनट बहुत लंबे हैं, तो FreeRADIUS रीस्टार्ट कीजिए।\nCRL एक साथ सबको बाहर भी कर सकती है। तो दोनों तरफ़ से देखिए। ये दोनों अच्छे सर्टिफ़िकेट के साथ टेस्ट किए गए:\nCRL की हालत FreeRADIUS क्या कहता है कौन जुड़ता है मौजूदा कुछ नहीं हर अच्छा डिवाइस ca/ से गायब error 3 : unable to get certificate CRL कोई नहीं next-update समय निकल चुका error 12 : CRL has expired कोई नहीं step-ca की CRL डिफ़ॉल्ट रूप से 24 घंटे चलती है। अगर उसे लाने वाला timer रुक जाए, तो अगले दिन नेटवर्क का हर डिवाइस फ़ेल होता है। इसे नरम करने के लिए allow_expired_crl मौजूद है7। इसे इस्तेमाल मत कीजिए। जो नेटवर्क एक सूची पुरानी पड़ जाने पर सबको अंदर आने देता है, उसने कुछ भी जाँचना बंद कर दिया है, और इसीलिए इसका इलाज timer पर नज़र रखना है, जाँच बंद करना नहीं।\nRADIUS अब भी MD5 और एक shared secret है अब तक की हर चीज़ डिवाइस और FreeRADIUS के बीच की बातचीत को बचाती है। EAP-TLS शुरू से अंत तक चलता है, और बीच का स्विच या AP उसे नहीं पढ़ सकता। उसे ले जाने वाला RADIUS पैकेट अलग बात है।\nक्लासिक RADIUS एक shared secret के साथ UDP है, और secret MD5 के ज़रिए इस्तेमाल होता है। अगर पैकेट में कुछ कीमती न होता तो यह बहुत कम मायने रखता, पर WiFi क्लाइंट का Access-Accept उस क्लाइंट के ट्रैफ़िक की कीज़ ले जाता है। MS-MPPE-Recv-Key और MS-MPPE-Send-Key वह master key हैं जिससे AP उस क्लाइंट का ट्रैफ़िक एन्क्रिप्ट करता है, और RFC 2548 उन्हें b(1) = MD5(S + R + A) और एक XOR से बचाता है, जहाँ S shared secret है12। उसमें कोई forward secrecy नहीं। आज RADIUS ट्रैफ़िक कैप्चर कीजिए, अगले साल किसी कॉन्फ़िग बैकअप या स्विच के running config से secret निकालिए, और कैप्चर की हर की डिक्रिप्ट हो जाती है, साथ में वह WiFi ट्रैफ़िक भी जिसे वह बचा रही थी।\nतो सवाल यह नहीं कि secret काफ़ी लंबा है या नहीं। सवाल यह है कि वायरलेस नेटवर्क की कीज़ MD5 के नीचे तार पर जा ही क्यों रही हैं। ज़रूरत नहीं है।\nखतरा UDP पर सादा RADIUS Message-Authenticator ज़रूरी करने पर RadSec, TLS 1.3, दोनों तरफ़ सर्टिफ़िकेट जाली Access-Accept (BlastRADIUS) बिना EAP वाली रिक्वेस्ट पर मुमकिन, MAB समेत रुक गया रुक गया कैप्चर से WiFi कीज़ पढ़ना जिसे भी कभी secret पता चले वही TLS session keys चाहिए, जो कभी स्टोर नहीं होतीं management नेटवर्क पर स्विच बनकर बैठा कोई बॉक्स सिर्फ़ secret चाहिए वही एक जाने-पहचाने पते से nas रोल वाला सर्टिफ़िकेट चाहिए कौन देखता है कि कौन सा डिवाइस लॉग इन हुआ रास्ते में बैठा कोई भी वही कोई नहीं BlastRADIUS, और वह लाइन जो उसे रोकती है BlastRADIUS, CVE-2024-3596, स्विच और सर्वर के बीच रास्ते में बैठे हमलावर को जवाब साइन करने वाले MD5 पर हमला करके reject को accept में बदलने देता है13। इलाज है हर रिक्वेस्ट और हर जवाब पर Message-Authenticator attribute13। RFC 3579 ने EAP ले जाने वाली हर चीज़ पर इसे हमेशा ज़रूरी रखा है14, इसलिए EAP-TLS कभी कमज़ोर जगह नहीं था। MAB था, क्योंकि MAC address की जाँच में कोई EAP नहीं होता और बहुत से स्विच इसे इसके बिना भेजते थे।\nFreeRADIUS 3.2.10 इसे शुरू से ही ज़रूरी रखता है, radiusd.conf में require_message_authenticator = yes के साथ। यहाँ हाथ से बनाई MAB रिक्वेस्ट से टेस्ट किया गया:\nरिक्वेस्ट जवाब Message-Authenticator नहीं कोई जवाब नहीं। log में Packet does not contain required Message-Authenticator attribute Message-Authenticator के साथ एक जवाब, अनजाने MAC के लिए Access-Reject उस सेटिंग को वैसे ही रहने दीजिए। कॉन्फ़िग चेतावनी देता है कि इसे और limit_proxy_state दोनों को no करना “will allow MITM attackers to create fake Access-Accept packets to the NAS”15।\nइससे जालसाज़ी बंद हो जाती है। कीज़ के लिए यह कुछ नहीं करता।\nRadSec: TLS 1.3 के अंदर RADIUS उपलब्ध सबसे ऊँचा स्टैंडर्ड RadSec है, TLS पर ले जाया गया RADIUS, हर सिरे पर एक सर्टिफ़िकेट के साथ16। स्विच या AP एक सर्टिफ़िकेट से साबित करता है कि वह कौन है, FreeRADIUS अपने सर्टिफ़िकेट से, और पूरी RADIUS बातचीत, कीज़ समेत, forward secrecy वाले TLS 1.3 के अंदर रहती है। IETF इसे standards track पर ला रहा है; 2012 के experimental RFC की जगह लेने वाला draft “Has enough positions to pass”17।\nस्विच और AP भी बाकी सब की तरह step-ca से सर्टिफ़िकेट पाते हैं, एक तीसरे provisioner से जिसका template OU=nas लिखता है और कुछ नहीं। इसका मतलब है कि डिवाइस सर्टिफ़िकेट से स्विच बनकर नहीं बैठा जा सकता, और स्विच सर्टिफ़िकेट, जिसमें VLAN policy का पहचाना कोई रोल नहीं, नेटवर्क पर आने के काम भी नहीं आ सकता।\nlisten { ipaddr = * port = 2083 type = auth proto = tcp virtual_server = default clients = radsec tls { certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt require_client_cert = yes check_crl = yes ca_path_reload_interval = 300 verify { tmpdir = ${run_dir} client = \u0026#34;${raddbdir}/nas-only.sh %{TLS-Client-Cert-Filename}\u0026#34; } tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; } } clients radsec { client switch1 { ipaddr = 192.0.2.21 proto = tls secret = radsec } } #!/bin/sh # Accept a RadSec client certificate only if step-ca issued it with the nas role. openssl x509 -in \u0026#34;$1\u0026#34; -noout -subject -nameopt compat | grep -q \u0026#39;/OU=nas/\u0026#39; secret सच में radsec शब्द ही है। ईमानदारी से। TLS पर यह कुछ नहीं करता, और FreeRADIUS का अपना उदाहरण कहता है “TLS clients MUST have the shared secret set to ‘radsec’”18। दो चीज़ें जो स्वाभाविक लगती हैं, नहीं चलतीं, और दोनों ठोकर खाकर पता चलीं। check_cert_cn = %{client:shortname} हैंडशेक के समय खाली हो जाता है, इसलिए हर स्विच Certificate CN (switch1) does not match specified value () के साथ मना होता है; इसीलिए verify स्क्रिप्ट है। और listener freeradius -X के नीचे शुरू नहीं होगा, जो threads बंद कर देता है: Threading must be enabled for TLS sockets to function properly। इसकी जगह freeradius -fxx -l stdout से debug कीजिए।\nFreeRADIUS तक हर हॉप की सुरक्षा FreeRADIUS पोर्ट 2083 सिर्फ़ OU=nas Omada, hostapd RadSec अंदर ही RadSec, TLS 1.3 Netgear सिर्फ़ UDP radsecproxy वही mgmt VLAN UDP + Msg-Auth RadSec step-ca हर सर्टिफ़िकेट जारी करता है HTTPS पर CRL, root पिन हर हॉप कहाँ सुरक्षित है। RadSec बोलने वाले उपकरण TLS 1.3 पर सीधे FreeRADIUS तक जाते हैं। सिर्फ़ UDP बोलने वाले उपकरण उसी management VLAN पर radsecproxy से बात करते हैं, और सिर्फ़ वही छोटा हॉप सादा RADIUS है। CRL step-ca से HTTPS पर आती है, root पिन करके। पहले वाला सिम्युलेट किया स्विच पोर्ट, RadSec इस्तेमाल करने के लिए दोबारा बनाया, उन्हीं टेस्ट के सामने:\nस्विच क्या दिखाता है कहाँ से नतीजा switch1, OU=nas अपने लिस्ट किए पते से TLS 1.3 चालू; laptop1 VLAN 10 पर अधिकृत, रिवोक किया laptop2 मना laptop1 का सर्टिफ़िकेट स्विच के पते से हैंडशेक में मना; verify स्क्रिप्ट 1 लौटाती है switch1, OU=nas बिना लिस्ट वाले पते से Ignoring request … from unknown client कौन से उपकरण यह कर सकते हैं Authenticator RadSec टिप्पणी hostapd 2.11 हाँ, अगर इसके साथ बिल्ड हो इसकी defconfig में CONFIG_RADIUS_TLS=y कमेंट आउट है19। Alpine का पैकेज इसे बंद रखता है और कॉन्फ़िग मना कर देता है: unsupported RADIUS type 'TLS'। इसके साथ बिल्ड करने पर पहली बार में चल गया TP-Link Omada AP और स्विच Controller 6.1 से, मौजूदा फ़र्मवेयर के साथ “Added support for RadSec (RADIUS over TLS) to secure SSID, MAC-Based, and 802.1X authentications on both APs and Switches”20 TP-Link Omada RADIUS proxy नहीं कंट्रोलर की अपनी proxy “does not support the RadSec feature”21 Netgear M4250 और M4350 डॉक्यूमेंटेड नहीं CLI मैनुअल में RadSec का ज़िक्र नहीं, और shared secret पर सीमा: “The secret must be an alphanumeric value not exceeding 16 characters”22 Netgear WAX और WBE AP डॉक्यूमेंटेड नहीं मैनुअल RADIUS पोर्ट को UDP बताते हैं, और डिफ़ॉल्ट secret sharedsecret23 क्या मैं पूछ सकता हूँ कि 2026 में पूरी तरह managed कहकर बेचा गया स्विच अपने RADIUS सर्वर से TLS पर बात क्यों नहीं कर सकता? यह नहीं कि किसने तय किया। प्रोसेस में ऐसा क्या था जिसने इसे ऐसे ही शिप होने दिया, जब TP-Link का कंट्रोलर, hostapd और एक मुफ़्त proxy, सब कर सकते हैं। सोलह रैंडम alphanumeric अक्षर लगभग 95 bits हैं, और क्रैक वह नहीं होता। बात यह है कि बचाव के नाम पर बस यही है: TLS का कोई विकल्प नहीं, WiFi कीज़ की रखवाली करती 1999 की एक MD5 स्कीम, और एक AP जो secret को sharedsecret शब्द पर सेट करके आता है। Netgear उपकरणों पर radsecproxy वैकल्पिक नहीं है।\nradsecproxy, सिर्फ़ UDP बोलने वाले उपकरणों के लिए जहाँ स्विच या AP RadSec नहीं कर सकता, वहाँ उसके बगल में radsecproxy रखिए। यह UDP RADIUS अंदर लेता है और RadSec बाहर भेजता है24, इसलिए सादा हॉप सर्वर तक का पूरा रास्ता नहीं, बल्कि स्विच और proxy के बीच management VLAN के कुछ मीटर भर है:\nListenUDP *:1812 tls stepca { CACertificateFile /etc/radsecproxy/root_ca.crt CertificateFile /etc/radsecproxy/radsecproxy.crt CertificateKeyFile /etc/radsecproxy/radsecproxy.key TlsVersion TLS1_3 } client switches { host 192.0.2.32/27 type udp secret \u0026lt;long random secret\u0026gt; RequireMessageAuthenticator on } server freeradius { host radius.home.example port 2083 type tls tls stepca secret radsec certificateNameCheck on } realm * { server freeradius } नाम इस्तेमाल कीजिए। पता नहीं। host 10.89.0.100 के साथ proxy ने सर्वर को मना कर दिया, और सही किया: No subjectaltname matching address 10.89.0.100। नाम के साथ यह TLSv1.3 with cipher TLS_AES_256_GCM_SHA384 के रूप में चालू हुआ, और उन्हीं डिवाइस को इसके ज़रिए वही जवाब मिले: laptop1 VLAN 10, cam1 99, tv1 30, laptop2 रिजेक्ट। बिना Message-Authenticator वाली रिक्वेस्ट proxy पर ही रुक गई: ignoring request from client switches … missing required message-authenticator।\nउस UDP हॉप को ईमानदार रखिए। छोटा, और घेरा हुआ। स्विच का management पता और proxy एक ऐसे management VLAN पर हैं जहाँ कोई क्लाइंट VLAN route नहीं कर सकता, और फ़ायरवॉल यही कहता है।\nCRL लाना भी CRL साइन होती है, इसलिए कोई उसे जाली नहीं बना सकता। पर कोई पुरानी CRL फिर से चला सकता है जो अब भी वैध हो, और उससे बाद में किया गया रिवोकेशन छिप जाता है। उसे सादे HTTP की बजाय step-ca से HTTPS पर, उसका अपना root पिन करके लाइए:\ncurl -fsS --cacert /etc/freeradius/certs/eaptls/ca/root_ca.crt --tlsv1.3 \\ -o /tmp/crl.der https://ca.home.example:9000/1.0/crl किसी और root के सामने यही कमांड curl के exit 60 के साथ फ़ेल होती है, और FreeRADIUS अपने पास की सूची रखे रहता है।\nयह कहाँ जा रहा है RFC 9765, RADIUS/1.1, TLS पर चलने पर RADIUS से MD5 पूरी तरह हटा देता है: “the RADIUS shared secret is no longer used, and all MD5-based packet authentication and attribute obfuscation methods are removed”25। यह Experimental है। FreeRADIUS 3.2 में यह एक build flag --with-radiusv11 के पीछे है, “for testing interoperability”26, और ऑफ़िशियल 3.2.10 image इसके साथ बिल्ड नहीं है; विकल्प binary में है ही नहीं। TLS 1.3 के साथ RadSec वह सबसे ऊँचा स्टैंडर्ड है जो आप आज लगा सकते हैं, और RADIUS/1.1 वह है जहाँ यह आगे जाता है।\nस्विच: Netgear और TP-Link रखने लायक हर managed स्विच dynamic VLAN के साथ 802.1X करता है, और बिल्ला कुछ भी कहे, सेटिंग्स उन्हीं पाँच चीज़ों पर आती हैं। इन दोनों का फ़र्क बारीकियों में है, और TP-Link की तरफ़ की एक बारीकी बदल देती है कि आप एक डेस्क की केबलिंग कैसे करते हैं।\nसेटिंग Netgear M4250 और M4350 TP-Link Omada स्विच RADIUS सर्वर Security \u0026gt; Management Security \u0026gt; RADIUS \u0026gt; Server Configuration27 Omada कंट्रोलर में एक RADIUS Profile28 802.1X चालू Security \u0026gt; Port Authentication \u0026gt; Basic \u0026gt; 802.1X Configuration: Dot1x Admin Mode, Authentication Admin Mode27 Authentication \u0026gt; 802.1X, Authentication Type “Port Based”28 RADIUS से VLAN VLAN Assignment Mode, “The default is Disable”27 “enable \u0026lsquo;VLAN Assignment\u0026rsquo;”28 गायब VLAN तब तक नहीं बनता जब तक Dynamic VLAN Creation Mode चालू न हो, वह भी डिफ़ॉल्ट रूप से बंद27 “the switch will create the related VLAN automatically”29 Access पोर्ट Control Mode Auto 802.1X Control mode Auto28 Uplink, RADIUS सर्वर का पोर्ट, AP पोर्ट Force Authorized 802.1X बंद: “Keep 802.1X authentication disabled on ports connected to the authentication server, the internet and the management computer”29 दोनों में से जो भी हो, पहले स्विच पर VLAN बनाइए। जो VLAN इसलिए मौजूद है क्योंकि किसी लॉगिन ने उसे जादू से बना दिया, वह ऐसा VLAN है जिसे किसी ने कॉन्फ़िगर नहीं किया, और जिस पर किसी ने फ़ायरवॉल नियम नहीं लगाया।\nTP-Link पर हर पोर्ट का एक VLAN TP-Link की अपनी गाइड कहती है “VLAN Assignment takes effect only when the control type is Port Based”29। Port based का मतलब है कि ऑथेंटिकेट होने वाला पहला डिवाइस पूरे पोर्ट का VLAN तय करता है। उस पोर्ट पर एक डेस्क स्विच लगाइए, या एक फ़ोन जिसके पार एक PC जुड़ा है, और दूसरा डिवाइस पहले वाले के VLAN पर सवार होकर आ जाता है, बिना कभी सर्टिफ़िकेट माँगे। staff पोर्ट पर इसका मतलब है कि उस फ़ोन के पीछे जो भी जुड़ा है, वह staff पर है।\nतो TP-Link पर: हर access पोर्ट पर एक डिवाइस। दीवार और डिवाइस के बीच कुछ नहीं। Netgear का MAC-based मोड एक पोर्ट के हर डिवाइस को अलग से ऑथेंटिकेट करता है; GS710TUP मैनुअल इसे “multiple supplicants connected to the same port”30 की इजाज़त देने वाला बताता है।\nMAB, उस प्रिंटर के लिए जो इनमें से कुछ नहीं कर सकता कुछ उपकरणों में 802.1X क्लाइंट होता ही नहीं। MAC Authentication Bypass स्विच को डिवाइस का MAC address यूज़रनेम और पासवर्ड दोनों के रूप में RADIUS को भेजने देता है, और दोनों वेंडर उसी पोर्ट पर 802.1X के साथ इसे सपोर्ट करते हैं। Netgear पहले 802.1X आज़माता है और फिर पीछे हटता है: “if a client tries 802.1X authentication… and authentication fails, the interface proceeds with MAB authentication”27। TP-Link MAC को “12 hexadecimal digits, all lowercase and no punctuation”29 के रूप में भेजता है।\nMAC address कोई पहचान नहीं है। कोई भी अपने नेटवर्क कार्ड को एक कमांड में प्रिंटर का MAC दे सकता है, अपने साथ लाए लैपटॉप से, उसी प्रिंटर के बगल में खड़े होकर जिसकी केबल उसने अभी उधार ली है। इसलिए MAB को अपनी अलग सूची मिलती है, और policy उसे कभी IoT VLAN या quarantine के सिवा कुछ नहीं देगी:\nmab { if (!\u0026amp;EAP-Message \u0026amp;\u0026amp; \u0026amp;User-Name =~ /^[0-9a-f]{12}$/ \u0026amp;\u0026amp; \u0026amp;User-Password == \u0026amp;User-Name) { mab_vlan if (ok \u0026amp;\u0026amp; \u0026amp;reply:Tunnel-Private-Group-Id =~ /^(20|99)$/) { update control { \u0026amp;Auth-Type := Accept } update reply { \u0026amp;Tunnel-Type := VLAN \u0026amp;Tunnel-Medium-Type := IEEE-802 } } else { reject } } } यह authorize में सबसे पहले जाता है, mab_vlan नाम के एक passwd मॉड्यूल के साथ जो डिवाइस सूची की तरह ही mac,vlan लाइनें पढ़ता है। सर्टिफ़िकेट policy if (\u0026amp;EAP-Message) में लिपटी है ताकि वह MAB को न छुए। टेस्ट किया गया:\nMAB रिक्वेस्ट सूची की एंट्री जवाब aabbccddeeff 20 Accept, VLAN 20 112233445566 कोई नहीं Reject ccddeeff0011 10, staff VLAN Reject। सूची कुछ भी कहे, policy किसी MAC को staff पर नहीं रखेगी प्रिंटर का MAC चुराकर बनने वाले को प्रिंटर का VLAN मिलता है और इससे ज़्यादा कुछ नहीं। एक MAC address को कभी भी इससे ज़्यादा नहीं मिलना चाहिए।\nऊपर की Omada स्विच सेटिंग्स को एक सिम्युलेट किए Omada Software Controller, 6.2.14.11, से भी जाँचा गया, एक कंटेनर में जिसके पीछे कोई हार्डवेयर नहीं था। इसके अंग्रेज़ी interface strings यहाँ इस्तेमाल हुई हर सेटिंग का नाम लेते हैं: RadSec विकल्प, जहाँ “a TLS-encrypted transmission tunnel will be established between the client and the RADIUS server”, “Enable VLAN Assignment for Wireless Network”, “Require Message-Authenticator”, “Limit Proxy-State”, और RadSec के लिए क्लाइंट सर्टिफ़िकेट और की का import। कंट्रोलर कॉन्फ़िगर करता है; वह कोई ट्रैफ़िक नहीं गुज़ारता, इसलिए यह बस इतना साबित करता है कि ये सेटिंग्स उस वर्ज़न में मौजूद हैं, इससे ज़्यादा नहीं। Netgear के पास चलाने को ऐसा कुछ नहीं, इसलिए उसका कॉलम Netgear के अपने मैनुअल से है और यहाँ टेस्ट नहीं हुआ।\nएक्सेस पॉइंट: एक SSID, हर VLAN एक्सेस पॉइंट वह जगह है जहाँ अकेला SSID अपना फ़ायदा दिखाता है। एक WPA-Enterprise नेटवर्क, और हर क्लाइंट उस VLAN पर रखा जाता है जो RADIUS उसके लिए बताता है। AP उस क्लाइंट के ट्रैफ़िक को उसके VLAN से टैग करता है और केबल से ऊपर भेजता है, इसलिए AP को फ़ीड करने वाले स्विच पोर्ट को हर वह VLAN टैग करके ले जाना होगा जो RADIUS दे सकता है। एक छोड़ दीजिए और डिवाइस बिल्कुल ठीक ऑथेंटिकेट होता है और कभी कोई address नहीं पाता।\nएक SSID, सिम्युलेट किया हुआ किसी भी वेंडर की बात पर भरोसा करने से पहले, पूरी चीज़ सिम्युलेट किए रेडियो पर चली। Linux का mac80211_hwsim वर्चुअल WiFi कार्ड बनाता है जो असली WPA-Enterprise करते हैं। इस मशीन का kernel यह मॉड्यूल साथ नहीं देता, इसलिए टेस्ट ने वही kernel एक छोटी KVM वर्चुअल मशीन में बूट किया और वहाँ लोड किया, Fedora के अपने साइन किए पैकेज से, hostapd 2.11 एक्सेस पॉइंट के रूप में और तीन wpa_supplicant स्टेशन अपने-अपने network namespace में31:\ninterface=wlan0 driver=nl80211 ssid=Home ieee8021x=1 wpa=2 wpa_key_mgmt=WPA-EAP rsn_pairwise=CCMP ieee80211w=1 auth_server_addr=192.0.2.10 auth_server_port=1812 auth_server_shared_secret=\u0026lt;shared secret\u0026gt; dynamic_vlan=2 vlan_tagged_interface=trunk0 vlan_bridge=brvlan dynamic_vlan=2 का मतलब है “required”: जिस लॉगिन के जवाब में VLAN नहीं, वह किसी डिफ़ॉल्ट पर डालने की बजाय मना कर दिया जाता है। हर स्टेशन TLS 1.3 पर anonymous के रूप में लॉग इन हुआ, और AP का अपना log दिखाता है कि RADIUS ने उसे क्या कहा:\nwlan0: STA 02:00:00:00:01:00 RADIUS: VLAN ID 10 wlan0: STA 02:00:00:00:02:00 RADIUS: VLAN ID 99 wlan0: STA 02:00:00:00:03:00 RADIUS: VLAN ID 30 WPA: group state machine entering state GTK_INIT (VLAN-ID 10) WPA: group state machine entering state GTK_INIT (VLAN-ID 30) WPA: group state machine entering state GTK_INIT (VLAN-ID 99) एक SSID, तीन VLAN laptop1 OU=staff cam1 सूची पर tv1 OU=media एक्सेस पॉइंट SSID “Home” VLAN 10, key A VLAN 99, key B VLAN 30, key C स्विच trunk पोर्ट 10, 30, 99 टैग एक केबल एक SSID, तीन डिवाइस, तीन VLAN। AP हर क्लाइंट को उसके अपने VLAN interface पर उसकी अपनी group key के साथ रखता है, और तीनों को एक टैग किए trunk से ऊपर भेजता है। AP को फ़ीड करने वाले स्विच पोर्ट को हर वह VLAN ले जाना होगा जिसका नाम RADIUS ले सकता है। स्टेशन सर्टिफ़िकेट VLAN Bridge अपना gateway TV का VLAN laptop1 OU=staff 10 brvlan10 पहुँच में कोई जवाब नहीं cam1 OU=iot, सूची पर 99 brvlan99 पहुँच में tv1 OU=media 30 brvlan30 पहुँच में group key वाली लाइनें वह हिस्सा हैं जो लोग चूक जाते हैं। WiFi पर broadcast और multicast फ़्रेम नेटवर्क के हर किसी के साथ शेयर की गई एक group key से एन्क्रिप्ट होते हैं, और अगर तीनों VLAN एक ही key शेयर करते, तो स्विच कुछ भी समझे, कैमरा लैपटॉप के broadcasts हवा से पढ़ सकता था। hostapd हर VLAN के लिए अलग group key रखता है, और log हर एक के लिए एक शुरू होते दिखाता है। WPA3-Enterprise में यही रन, WPA-EAP-SHA256 के साथ management frame protection ज़रूरी, वही तीन VLAN और वही तीन group keys लाया।\nसेटिंग Netgear WAX और WBE TP-Link Omada EAP Security WPA2 Enterprise या WPA3 Enterprise WPA2-Enterprise या WPA3-Enterprise, CCMP-128 वाले only मोड समेत RADIUS से VLAN Dynamic VLAN, Enable23 “Enable VLAN Assignment for Wireless Network”28 जवाब में VLAN नहीं क्लाइंट SSID के अपने VLAN पर जाता है23 डॉक्यूमेंटेड नहीं; यहाँ FreeRADIUS बिना VLAN के कभी Accept नहीं भेजता RADIUS transport सिर्फ़ UDP, इसलिए radsecproxy मौजूदा फ़र्मवेयर के साथ Controller 6.1 से RadSec20 Netgear की दो बारीकियाँ काटने से पहले जानने लायक हैं। जिस क्लाइंट को RADIUS सर्वर कोई VLAN नहीं देता, वह “automatically assigned the VLAN ID that you configured for the SSID”23 होता है, इसलिए SSID का अपना VLAN quarantine पर रखिए, staff पर नहीं; यहाँ FreeRADIUS हमेशा एक भेजता है, पर fallback को फिर भी बंद होकर फ़ेल होना चाहिए। और dynamic VLAN “is mutually exclusive with a captive portal, NAT mode, wireless client isolation, and a multicast DNS (mDNS) gateway”23, इसलिए उसी SSID पर guest portal नहीं हो सकता।\nWAX620 पर WPA3-Enterprise 192-bit मोड है: “the encryption is automatically set to GCMP256”32, management frame protection ज़रूरी के साथ। जो क्लाइंट GCMP-256 नहीं कर सकते वे इससे नहीं जुड़ेंगे। बदलने से पहले अपना सबसे पुराना डिवाइस टेस्ट कीजिए, जैसे TLS 1.3 के लिए।\nडिवाइस, और वह जाँच जिसे हर कोई छोड़ देता है हर डिवाइस को तीन चीज़ें चाहिए: अपना सर्टिफ़िकेट और की, root सर्टिफ़िकेट, और उस RADIUS सर्वर का नाम जिसकी उसे उम्मीद करनी चाहिए। ज़्यादातर गाइड पहली दो कवर करती हैं। तीसरी में से कुछ भी छोड़ दीजिए और तब भी चलता है, और समस्या यही है।\nतीसरी चीज़ ही डिवाइस को गलत सर्वर पर भरोसा करने से रोकती है। यहाँ एक नकली RADIUS सर्वर दो बार खड़ा किया गया: एक बार उसी CA के एक बिल्कुल वैध सर्टिफ़िकेट के साथ, जो ha.home.example को जारी हुआ था, और एक बार self-signed सर्टिफ़िकेट के साथ। एक लैपटॉप को तीन अलग क्लाइंट सेटिंग्स के साथ हर एक की ओर किया गया:\nक्लाइंट क्या जाँचता है असली सर्वर वही CA, दूसरा नाम Self-signed CA और सर्वर का नाम जुड़ता है मना, Domain mismatch मना सिर्फ़ CA जुड़ता है जुड़ता है मना कुछ नहीं जुड़ता है जुड़ता है जुड़ता है बीच वाली पंक्ति देखिए। आपका CA घर के हर वेब सर्वर का सर्टिफ़िकेट साइन करता है। सिर्फ़ CA जाँचने वाला डिवाइस उनमें से किसी पर भी अपने RADIUS सर्वर के रूप में भरोसा करेगा, इसलिए जिसके हाथ उनमें से एक भी key लग जाए, किसी भूले हुए टेस्ट बॉक्स से या ऐसे वेब सर्वर से जिसे किसी ने पैच नहीं किया, वह आपके SSID वाला एक्सेस पॉइंट खड़ा कर सकता है और आपके डिवाइस बिना चूँ किए उससे जुड़ जाएँगे। EAP-TLS के साथ वे कोई पासवर्ड नहीं सौंपते, पर वे हमलावर के नेटवर्क पर हैं और उस पर भरोसा कर रहे हैं। TLS 1.3 इसे नहीं बदलता; 1.3 के नीचे वही तीन पंक्तियाँ लौटीं। सिर्फ़ नाम की जाँच बदलती है।\nAndroid वहाँ पहले पहुँचा। “Do not validate” विकल्प “for security reasons”33 हटा दिया गया, हालाँकि वह नोट करता है कि “saved enterprise configurations that are set up to turn off server certificate validation aren\u0026rsquo;t affected”33। एक पुराना फ़ोन अब भी ऐसा एक लिए घूम रहा हो सकता है।\nLinux (NetworkManager) macOS, iOS, iPadOS Android सर्टिफ़िकेट और की 802-1x.client-cert, 802-1x.private-key configuration profile में Identity payload Wi-Fi सर्टिफ़िकेट के रूप में इंस्टॉल Root सर्टिफ़िकेट 802-1x.ca-cert Certificate payload, PayloadCertificateAnchorUUID के ज़रिए भरोसा34 CA certificate फ़ील्ड सर्वर का नाम 802-1x.domain-match35 TLSTrustedServerNames34 Domain फ़ील्ड; API में setDomainSuffixMatch36 TLS 1.3 802-1x.phase1-auth-flags tls-1-3-enable TLSMinimumVersion और TLSMaximumVersion \u0026quot;1.3\u0026quot;; maximum का डिफ़ॉल्ट \u0026quot;1.2\u0026quot; है34 setMinimumTlsVersion(TLS_V1_3), API level 34 से, जहाँ डिवाइस सपोर्ट करे36 Linux पर पूरी चीज़ एक कमांड है। इसे nmcli --offline से जाँचा गया, जो चलते सिस्टम को छुए बिना वह कनेक्शन प्रिंट करता है जो वह बनाएगा:\nnmcli connection add type wifi con-name Home ifname \u0026#39;*\u0026#39; ssid Home \\ wifi-sec.key-mgmt wpa-eap 802-1x.eap tls 802-1x.identity anonymous \\ 802-1x.ca-cert /etc/pki/home/root_ca.crt \\ 802-1x.domain-match radius.home.example \\ 802-1x.client-cert /etc/pki/home/laptop1.crt \\ 802-1x.private-key /etc/pki/home/laptop1.key \\ 802-1x.private-key-password-flags not-required \\ 802-1x.phase1-auth-flags tls-1-3-enable वायर्ड पोर्ट के लिए यही है, type ethernet के साथ और बिना SSID। उस तरफ़ का जाल Apple के maximum TLS वर्ज़न का डिफ़ॉल्ट 1.2 होना है: जो profile इसे छोड़ देता है, वह ऐसा Mac बनाता है जिसे यह नेटवर्क मना कर देता है।\nसिर्फ़ TLS 1.3 की कीमत इस बिल्ड की ईमानदार सीमा वे डिवाइस हैं जो इसे नहीं कर सकते। सालों पुराने embedded supplicant वाला कैमरा या TV 1.2 पर EAP-TLS चला सकता है और 1.3 कभी नहीं, और आपकी तरफ़ कोई सेटिंग इसे ठीक नहीं करती। TLS वर्ज़न FreeRADIUS के सर्टिफ़िकेट देखने से पहले तय हो जाता है, इसलिए वह IoT रोल के लिए अपवाद नहीं बना सकता।\nतो हर डिवाइस को खरीदने से पहले टेस्ट कीजिए। बाद में नहीं। उसे सिर्फ़ 1.3 वाले FreeRADIUS की ओर कीजिए और log पढ़िए: recv TLS 1.3 Handshake, ClientHello या protocol version आपको जो चाहिए सब बता देता है। जो डिवाइस फ़ेल हो, वह MAB के साथ वायर्ड पोर्ट पर जाता है, या नेटवर्क पर नहीं जाता। सबसे खराब चीज़ के हिसाब से पूरे नेटवर्क को कमज़ोर करना ही वह तरीका है जिससे शेयर किया पासवर्ड शुरू हुआ था।\nपूरा कॉन्फ़िग, फ़ाइल दर फ़ाइल ऊपर की हर चीज़ उन्हीं लाइनों तक काटी गई है जो अपनी बात कहती हैं। यह पूरा है। यहाँ की हर फ़ाइल लैब में चली, एक खाली step-ca और stock FreeRADIUS tree से लेकर VLAN 10 पर एक लैपटॉप तक, और नीचे की कॉपियाँ वही फ़ाइलें हैं, बस लैब के पते तालिका वाले पतों से बदले गए हैं। इन्हें एक डाउनलोड के रूप में लीजिए, eap-tls-configs.tar.gz, या लिंक से एक-एक फ़ाइल।\nनाम पता यह क्या है ca.home.example सिर्फ़ नाम से step-ca, पोर्ट 9000 radius.home.example 192.0.2.10 FreeRADIUS, 2083 पर RadSec radsecproxy 192.0.2.11 radsecproxy, UDP अंदर, RadSec बाहर switch1, ap1 192.0.2.21, 192.0.2.31 RadSec बोलने वाले उपकरण सिर्फ़ UDP वाले उपकरण 192.0.2.32 से .63 radsecproxy के ज़रिए; नीचे का Linux AP .33 पर ap2 है फ़ाइल कहाँ जाती है उसका काम step-ca/templates/device.tpl CA में /home/step/templates/ रोल OU में, सिर्फ़ client auth step-ca/templates/nas.tpl CA में /home/step/templates/ OU=nas, RadSec के लिए step-ca/setup.sh CA में एक बार चलाइए network और nas provisioners जोड़ता है step-ca/issue.sh वहाँ चलाइए जहाँ step CA पर भरोसा करता है हर सर्टिफ़िकेट, और रिवोकेशन का तरीका freeradius/install.sh freeradius/ से चलाइए बाकी सब जगह पर रखता है freeradius/mods-available/eap RADDB/mods-available/ EAP-TLS, TLS 1.3, CRL जाँच freeradius/mods-available/device_vlan RADDB/mods-available/ हर डिवाइस वाली सूची पढ़ता है freeradius/mods-available/mab_vlan RADDB/mods-available/ MAB सूची पढ़ता है freeradius/mods-config/device_vlan/devices RADDB/mods-config/device_vlan/ सर्टिफ़िकेट नाम से VLAN freeradius/mods-config/device_vlan/mab RADDB/mods-config/device_vlan/ MAC address से VLAN freeradius/policy.d/vlan RADDB/policy.d/ सर्टिफ़िकेट के लिए VLAN चुनता है freeradius/policy.d/mab RADDB/policy.d/ MAC के लिए VLAN चुनता है, सिर्फ़ 20 या 99 freeradius/sites-available/default.patch RADDB पर लागू दोनों policies को बुलाता है freeradius/sites-available/tls RADDB/sites-available/ RadSec listener और उसके क्लाइंट freeradius/nas-only.sh RADDB/ सिर्फ़ OU=nas सर्टिफ़िकेट को अंदर आने देता है freeradius/clients.conf RADDB/ उसी बॉक्स पर टेस्टिंग के लिए UDP systemd/radius-crl-refresh /usr/local/sbin/ CRL लाता और जाँचता है systemd/radius-crl-refresh.service /etc/systemd/system/ उसे चलाता है systemd/radius-crl-refresh.timer /etc/systemd/system/ हर घंटे systemd/radius-cert-renew.service /etc/systemd/system/ सर्वर सर्टिफ़िकेट रिन्यू करता है radsecproxy/radsecproxy.conf /etc/radsecproxy.conf UDP अंदर, RadSec बाहर hostapd/hostapd-wired.conf /etc/hostapd/ एक Linux 802.1X स्विच पोर्ट hostapd/hostapd-wifi.conf /etc/hostapd/ एक Linux एक्सेस पॉइंट, एक SSID clients/wpa_supplicant-wired.conf डिवाइस वायर्ड लॉगिन clients/wpa_supplicant-wifi.conf डिवाइस WiFi लॉगिन clients/nmcli.sh डिवाइस वही, NetworkManager के ज़रिए FreeRADIUS हर distribution पर अलग जगह रहता है, और उसकी फ़ाइलों को इससे फ़र्क नहीं पड़ता, क्योंकि उनके अंदर का हर path कॉन्फ़िग डायरेक्टरी से बनता है। install.sh उस डायरेक्टरी को RADDB के रूप में लेता है। इसे नीचे के तीनों पर चलाया गया, और FreeRADIUS की अपनी कॉन्फ़िग जाँच, -XC, हर एक पर पास हुई। सिर्फ़ ऑफ़िशियल image पर इस पोस्ट का हर टेस्ट चला; बाकी दो पर वह जाँच ही पूरा सबूत है, एक कंटेनर में, इसलिए असली Fedora बॉक्स पर SELinux इसका हिस्सा नहीं था।\nऑफ़िशियल image Debian 13 Fedora FreeRADIUS 3.2.10 3.2.7 3.2.8 RADDB /etc/freeradius /etc/freeradius/3.0 /etc/raddb किस यूज़र के रूप में चलता है freerad freerad radiusd सर्विस कंटेनर freeradius radiusd टेस्ट किया इस पोस्ट की हर चीज़ install.sh और -XC install.sh और -XC दोनों systemd units /etc/freeradius और freeradius सर्विस का नाम लेती हैं। Debian या Fedora पर, दोनों को तालिका के हिसाब से बदलिए। और कुछ नहीं हिलता।\nstep-ca डिवाइस template वही है जो सर्टिफ़िकेट में रोल डालना में है, लाइन दर लाइन, ऊपर एक कमेंट के साथ। nas template वही विचार है, रोल पक्का करके:\nstep-ca/templates/nas.tpl\n{{- /* Certificates for switches, access points and radsecproxy, used for RadSec. OU=nas is what FreeRADIUS checks for; it maps to no VLAN, so a nas certificate cannot get a device on the network. */ -}} { \u0026#34;subject\u0026#34;: { \u0026#34;commonName\u0026#34;: {{ toJson .Subject.CommonName }}, \u0026#34;organizationalUnit\u0026#34;: \u0026#34;nas\u0026#34; }, \u0026#34;sans\u0026#34;: {{ toJson .SANs }}, \u0026#34;keyUsage\u0026#34;: [\u0026#34;digitalSignature\u0026#34;], \u0026#34;extKeyUsage\u0026#34;: [\u0026#34;clientAuth\u0026#34;], \u0026#34;crlDistributionPoints\u0026#34;: [\u0026#34;http://ca.home.example/1.0/crl\u0026#34;] } setup.sh दोनों provisioners जोड़ता है। इसे step-ca कंटेनर के अंदर एक बार चलाइए। यह हर एक के लिए पासवर्ड माँगता है, और जो CRL ब्लॉक यह प्रिंट करता है वह हाथ से ca.json में जाता है:\nstep-ca/setup.sh\n#!/bin/sh # Run inside the step-ca container, as the step user, once. # Adds the two provisioners this post uses. Each asks for a password for # its own key; keep both. set -e step ca provisioner add network --type JWK --create \\ --x509-max-dur 8760h --x509-default-dur 24h \\ --x509-template /home/step/templates/device.tpl step ca provisioner add nas --type JWK --create \\ --x509-max-dur 8760h --x509-default-dur 24h \\ --x509-template /home/step/templates/nas.tpl # Then add this block at the top level of /home/step/config/ca.json and # restart the container: # # \u0026#34;crl\u0026#34;: { # \u0026#34;enabled\u0026#34;: true, # \u0026#34;generateOnRevoke\u0026#34;: true, # \u0026#34;cacheDuration\u0026#34;: \u0026#34;24h\u0026#34;, # \u0026#34;idpURL\u0026#34;: \u0026#34;http://ca.home.example/1.0/crl\u0026#34; # } issue.sh इस पोस्ट का हर सर्टिफ़िकेट बनाता है, और रिवोकेशन वाले सेक्शन का तरीका उस दिन के लिए कमेंट में रखता है जब आपको उसकी ज़रूरत हो। वह तरीका इस CA पर भी चलाया गया, इसी काम के लिए बनाए एक laptop2 पर:\nstep-ca/issue.sh\n#!/bin/sh # Issue the certificates. Run anywhere the step CLI trusts the CA. set -e # The RADIUS server: default 24 hours, renewed daily by radius-cert-renew.service. step ca certificate radius.home.example radius.crt radius.key --provisioner admin # Devices: a year each, the role decides the VLAN. step ca certificate laptop1 laptop1.crt laptop1.key --provisioner network --not-after 8760h --set role=staff step ca certificate cam1 cam1.crt cam1.key --provisioner network --not-after 8760h --set role=iot step ca certificate tv1 tv1.crt tv1.key --provisioner network --not-after 8760h --set role=media # Switches, APs and radsecproxy, for RadSec. step ca certificate switch1 switch1.crt switch1.key --provisioner nas --not-after 8760h step ca certificate ap1 ap1.crt ap1.key --provisioner nas --not-after 8760h step ca certificate radsecproxy radsecproxy.crt radsecproxy.key --provisioner nas --not-after 8760h # A lost device: revoke by serial, no key needed. # SERIAL=$(step certificate inspect laptop2.crt --format json | jq -r .serial_number) # TOKEN=$(step ca token \u0026#34;$SERIAL\u0026#34; --revoke --provisioner admin) # step ca revoke \u0026#34;$SERIAL\u0026#34; --token \u0026#34;$TOKEN\u0026#34; --reason \u0026#34;laptop lost\u0026#34; FreeRADIUS डाउनलोड की freeradius डायरेक्टरी से install.sh चलाइए। यह फ़ाइलें अंदर कॉपी करता है, डिफ़ॉल्ट site को patch करता है, और links बनाता है। बस इतना ही करता है:\nfreeradius/install.sh\n#!/bin/sh # Puts these files into a stock FreeRADIUS 3.2 tree. Run from this # directory. RADDB is /etc/freeradius on the official image, # /etc/freeradius/3.0 on Debian and Ubuntu, /etc/raddb on Fedora. set -eu RADDB=${RADDB:-/etc/freeradius} cp mods-available/eap mods-available/device_vlan mods-available/mab_vlan \u0026#34;$RADDB/mods-available/\u0026#34; mkdir -p \u0026#34;$RADDB/mods-config/device_vlan\u0026#34; cp mods-config/device_vlan/devices mods-config/device_vlan/mab \u0026#34;$RADDB/mods-config/device_vlan/\u0026#34; cp policy.d/vlan policy.d/mab \u0026#34;$RADDB/policy.d/\u0026#34; cp sites-available/tls \u0026#34;$RADDB/sites-available/\u0026#34; cp clients.conf \u0026#34;$RADDB/\u0026#34; install -m 0755 nas-only.sh \u0026#34;$RADDB/nas-only.sh\u0026#34; patch -d \u0026#34;$RADDB\u0026#34; -p0 --forward \u0026lt; sites-available/default.patch for m in eap device_vlan mab_vlan; do ln -sfn ../mods-available/$m \u0026#34;$RADDB/mods-enabled/$m\u0026#34; done ln -sfn ../sites-available/tls \u0026#34;$RADDB/sites-enabled/tls\u0026#34; # The certificates go in $RADDB/certs/eaptls: radius.crt, radius.key, # and ca/ holding root_ca.crt, intermediate_ca.crt and the CRL. All of # it readable by the user FreeRADIUS runs as: freerad, or radiusd on # Fedora. mkdir -p \u0026#34;$RADDB/certs/eaptls/ca\u0026#34; patch stock डिफ़ॉल्ट site में दो लाइनें है। यह 3.2.10 पर बनाया गया था और 3.2.7 और 3.2.8 पर एक offset से बुरा कुछ नहीं होने के साथ लागू होता है:\nfreeradius/sites-available/default.patch\n--- sites-available/default +++ sites-available/default @@ -301,6 +301,9 @@ # Make *sure* that \u0026#39;preprocess\u0026#39; comes before any realm if you # need to setup hints for the remote radius server authorize { +\t# MAC Authentication Bypass, policy.d/mab. +\tmab + # # Take a User-Name, and perform some checks on it, for spaces and other # invalid characters. If the User-Name appears invalid, reject the @@ -810,6 +813,9 @@ # Once we KNOW that the user has been authenticated, there are # additional steps we can take. post-auth { +\t# The VLAN for a certificate login, policy.d/vlan. +\tvlan_by_certificate + # # If you need to have a State attribute, you can # add it here. e.g. for later CoA-Request with mods-available/eap stock वाले की जगह लेता है। पूरा:\nfreeradius/mods-available/eap\n# EAP for 802.1X: EAP-TLS only, TLS 1.3 only, CRL checked on every login. # Replaces the stock mods-available/eap. mods-enabled/eap links to it. eap { default_eap_type = tls timer_expire = 60 ignore_unknown_eap_types = no max_sessions = ${max_requests} tls-config tls-common { # The server certificate followed by step-ca\u0026#39;s intermediate, # exactly as \u0026#34;step ca certificate\u0026#34; writes it. certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key # Root, intermediate and the intermediate\u0026#39;s CRL, hashed with # \u0026#34;openssl rehash\u0026#34;. radius-crl-refresh keeps the CRL current. ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt check_crl = yes # A HUP does not reload a CRL. This does, at 300 s, the minimum. ca_path_reload_interval = 300 tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; cipher_list = \u0026#34;DEFAULT\u0026#34; ecdh_curve = \u0026#34;\u0026#34; cache { enable = no } verify { } } tls { tls = tls-common } } policy.d/vlan पहले वाली policy है, उस if (\u0026amp;EAP-Message) wrapper के साथ जिसका ज़िक्र MAB सेक्शन करता है:\nfreeradius/policy.d/vlan\n# Called first in post-auth. Picks the VLAN for a certificate login: # the per-device list first, then the role in the certificate\u0026#39;s OU. vlan_by_certificate { # Certificate logins only. MAB is decided in authorize. if (\u0026amp;EAP-Message) { # Only certificates made for this job: client auth, and a role. if (\u0026amp;TLS-Client-Cert-X509v3-Extended-Key-Usage-OID !~ /1\\.3\\.6\\.1\\.5\\.5\\.7\\.3\\.2/) { reject } # 1. The per-device list wins. device_vlan # 2. Otherwise the role in the certificate decides. if (!\u0026amp;reply:Tunnel-Private-Group-Id) { if (\u0026amp;TLS-Client-Cert-Subject =~ /\\/OU=([^\\/]+)/) { switch \u0026#34;%{1}\u0026#34; { case \u0026#34;staff\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;10\u0026#34; } } case \u0026#34;iot\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;20\u0026#34; } } case \u0026#34;media\u0026#34; { update reply { \u0026amp;Tunnel-Private-Group-Id := \u0026#34;30\u0026#34; } } case { reject } } } else { reject } } update reply { \u0026amp;Tunnel-Type := VLAN \u0026amp;Tunnel-Medium-Type := IEEE-802 } } } policy.d/mab वही policy है जो MAB वाले सेक्शन में है, और mods-available/device_vlan और nas-only.sh वैसे ही हैं जैसे पहले दिखाए गए, तीनों में एक कमेंट जोड़ा गया है। MAB सूची का मॉड्यूल और दोनों सूचियाँ:\nfreeradius/mods-available/mab_vlan\n# MAC Authentication Bypass: MAC address to VLAN, for kit with no # 802.1X client. The mab policy only accepts VLAN 20 or 99 from here. # mods-enabled/mab_vlan links to it. passwd mab_vlan { filename = ${modconfdir}/device_vlan/mab format = \u0026#34;*User-Name:=Tunnel-Private-Group-Id\u0026#34; delimiter = \u0026#34;,\u0026#34; } freeradius/mods-config/device_vlan/devices\n# Certificate CN,VLAN. Overrides the role in the certificate. # cam1 is quarantined while it is looked at. cam1,99 freeradius/mods-config/device_vlan/mab\n# MAC (12 hex digits, lowercase, no punctuation),VLAN. 20 or 99 only. aabbccddeeff,20 sites-available/tls stock RadSec उदाहरण की जगह लेता है। verify की temporary डायरेक्टरी ${run_dir} है, जो पहले से मौजूद है और उसी यूज़र की है जिसके रूप में FreeRADIUS चलता है, इसलिए कुछ बनाना नहीं है:\nfreeradius/sites-available/tls\n# RadSec: RADIUS over TLS 1.3 on port 2083, for switches, access # points and radsecproxy. Replaces the stock sites-available/tls; # sites-enabled/tls links to it. Requests go to the default site. listen { ipaddr = * port = 2083 type = auth proto = tcp virtual_server = default clients = radsec limit { max_connections = 16 lifetime = 0 idle_timeout = 30 } tls { certificate_file = ${certdir}/eaptls/radius.crt private_key_file = ${certdir}/eaptls/radius.key ca_path = ${certdir}/eaptls/ca ca_file = ${certdir}/eaptls/ca/root_ca.crt require_client_cert = yes check_crl = yes ca_path_reload_interval = 300 # Only certificates from step-ca\u0026#39;s nas provisioner. verify { # Where FreeRADIUS writes the certificate for the script to read. tmpdir = ${run_dir} client = \u0026#34;${raddbdir}/nas-only.sh %{TLS-Client-Cert-Filename}\u0026#34; } tls_min_version = \u0026#34;1.3\u0026#34; tls_max_version = \u0026#34;1.3\u0026#34; cipher_list = \u0026#34;DEFAULT\u0026#34; ecdh_curve = \u0026#34;\u0026#34; cache { enable = no } } } # One entry per switch, AP and proxy, by management address. Over TLS # the secret does nothing, and FreeRADIUS requires it to be \u0026#34;radsec\u0026#34;. clients radsec { client switch1 { ipaddr = 192.0.2.21 proto = tls secret = radsec } client ap1 { ipaddr = 192.0.2.31 proto = tls secret = radsec } client radsecproxy { ipaddr = 192.0.2.11 proto = tls secret = radsec } } clients.conf stock वाले की जगह लेता है और उसी बॉक्स पर eapol_test को अंदर आने देता है, और कुछ नहीं। स्विच और AP RadSec पर या proxy के ज़रिए आते हैं:\nfreeradius/clients.conf\n# UDP clients. Kit talks RadSec (sites-available/tls) or goes through # radsecproxy, so plain RADIUS is only for testing on this host with # eapol_test. Replaces the stock clients.conf. client localhost { ipaddr = 127.0.0.1 proto = * secret = CHANGE-ME-test-only require_message_authenticator = yes nas_type = other } पहले कॉन्फ़िग जाँचिए। फिर इसे foreground में शुरू कीजिए, threads चालू करके ताकि RadSec चले:\nfreeradius -XC freeradius -fxx -l stdout इसे ताज़ा रखना radius-crl-refresh root पिन करके CRL लाता है, और ऐसी CRL मना करता है जो intermediate से साइन न हो या पहले से पुरानी हो, इसलिए खराब fetch पुरानी सूची को जगह पर छोड़ देता है। यह कभी अच्छी सूची को कबाड़ से नहीं बदलता:\nsystemd/radius-crl-refresh\n#!/bin/sh # Fetch step-ca\u0026#39;s CRL over HTTPS with the root pinned, and put it where # FreeRADIUS reads it. FreeRADIUS picks it up within ca_path_reload_interval. # Installed as /usr/local/sbin/radius-crl-refresh. set -eu CA_URL=\u0026#34;${CA_URL:-https://ca.home.example:9000}\u0026#34; DIR=\u0026#34;${DIR:-/etc/freeradius/certs/eaptls/ca}\u0026#34; TMP=$(mktemp -d) trap \u0026#39;rm -rf \u0026#34;$TMP\u0026#34;\u0026#39; EXIT curl -fsS --cacert \u0026#34;$DIR/root_ca.crt\u0026#34; --tlsv1.3 -o \u0026#34;$TMP/crl.der\u0026#34; \u0026#34;$CA_URL/1.0/crl\u0026#34; openssl crl -inform DER -in \u0026#34;$TMP/crl.der\u0026#34; -out \u0026#34;$TMP/crl.pem\u0026#34; # Refuse a list that is not signed by our intermediate, or already stale. openssl crl -in \u0026#34;$TMP/crl.pem\u0026#34; -noout -CAfile \u0026#34;$DIR/intermediate_ca.crt\u0026#34; 2\u0026gt;\u0026amp;1 | grep -q \u0026#39;verify OK\u0026#39; next=$(date -d \u0026#34;$(openssl crl -in \u0026#34;$TMP/crl.pem\u0026#34; -noout -nextupdate | cut -d= -f2)\u0026#34; +%s) [ \u0026#34;$next\u0026#34; -gt \u0026#34;$(date +%s)\u0026#34; ] install -m 0644 \u0026#34;$TMP/crl.pem\u0026#34; \u0026#34;$DIR/intermediate.crl.pem.new\u0026#34; mv -f \u0026#34;$DIR/intermediate.crl.pem.new\u0026#34; \u0026#34;$DIR/intermediate.crl.pem\u0026#34; openssl rehash \u0026#34;$DIR\u0026#34; systemd/radius-crl-refresh.service\n[Unit] Description=Fetch step-ca\u0026#39;s CRL for FreeRADIUS Wants=network-online.target After=network-online.target [Service] Type=oneshot ExecStart=/usr/local/sbin/radius-crl-refresh systemd/radius-crl-refresh.timer\n[Unit] Description=Fetch step-ca\u0026#39;s CRL for FreeRADIUS every hour [Timer] OnBootSec=1min OnUnitActiveSec=1h RandomizedDelaySec=5min Persistent=true [Install] WantedBy=timers.target सर्वर सर्टिफ़िकेट 24 घंटे चलता है, इसलिए वह खुद को रिन्यू करता है। यहाँ रिन्यूअल ने key और दोनों फ़ाइलों की permissions वैसी ही रखीं, जो मायने रखता है क्योंकि FreeRADIUS उन्हें freerad के रूप में पढ़ता है। यह HUP भेजने की बजाय FreeRADIUS रीस्टार्ट करता है। वजह वही जो CRL की:\nsystemd/radius-cert-renew.service\n# Keeps FreeRADIUS\u0026#39;s 24-hour server certificate renewed, and restarts # FreeRADIUS on each renewal so it loads the new one. Once, as root: # step ca bootstrap --ca-url https://ca.home.example:9000 --fingerprint \u0026lt;root fingerprint\u0026gt; # chgrp freerad radius.key \u0026amp;\u0026amp; chmod 0640 radius.key # Renewal rewrites radius.crt and keeps the key and both files\u0026#39; modes. [Unit] Description=Renew FreeRADIUS\u0026#39;s server certificate from step-ca Wants=network-online.target After=network-online.target [Service] ExecStart=/usr/bin/step ca renew --daemon \\ --exec \u0026#34;systemctl restart freeradius\u0026#34; \\ /etc/freeradius/certs/eaptls/radius.crt /etc/freeradius/certs/eaptls/radius.key Restart=on-failure RestartSec=5min [Install] WantedBy=multi-user.target radsecproxy radsecproxy/radsecproxy.conf\n# radsecproxy beside switches and APs that only speak UDP RADIUS. # Takes UDP in on the management VLAN, sends RadSec over TLS 1.3 out. ListenUDP *:1812 LogLevel 3 LogDestination file:///var/log/radsecproxy.log tls stepca { CACertificateFile /etc/radsecproxy/root_ca.crt CertificateFile /etc/radsecproxy/radsecproxy.crt CertificateKeyFile /etc/radsecproxy/radsecproxy.key TlsVersion TLS1_3 } # The kit that only speaks UDP, from 192.0.2.32 to .63 on the management # VLAN. Netgear caps the secret at 16 alphanumeric characters, so use all # 16, random: # openssl rand -base64 32 | tr -dc \u0026#39;A-Za-z0-9\u0026#39; | head -c 16 client switches { host 192.0.2.32/27 type udp secret CHANGE-ME-16chars RequireMessageAuthenticator on } server freeradius { host radius.home.example port 2083 type tls tls stepca secret radsec certificateNameCheck on } realm * { server freeradius } hostapd स्विच पोर्ट की जगह खड़ा एक Linux बॉक्स, RadSec बोलता हुआ। यही वह फ़ाइल है जिससे सिम्युलेट किया पोर्ट चला:\nhostapd/hostapd-wired.conf\n# A Linux box as an 802.1X wired port, talking RadSec to FreeRADIUS. # Needs hostapd built with CONFIG_DRIVER_WIRED=y and CONFIG_RADIUS_TLS=y. interface=eth1 driver=wired ieee8021x=1 use_pae_group_addr=1 eap_reauth_period=3600 nas_identifier=switch1 auth_server_addr=192.0.2.10 auth_server_port=2083 auth_server_type=TLS auth_server_shared_secret=radsec auth_server_ca_cert=/etc/hostapd/root_ca.crt auth_server_client_cert=/etc/hostapd/switch1.crt auth_server_private_key=/etc/hostapd/switch1.key logger_syslog=-1 logger_syslog_level=2 और एक एक्सेस पॉइंट के लिए। यह UDP पर radsecproxy के ज़रिए जाता है, जैसे एक Netgear AP जाएगा, और यही वह फ़ाइल है जिससे सिम्युलेट किए रेडियो चले:\nhostapd/hostapd-wifi.conf\n# A Linux access point: one WPA2/WPA3-Enterprise SSID, each client on the # VLAN RADIUS names. This one talks UDP to radsecproxy, like the Netgear # APs. For RadSec, build hostapd with CONFIG_RADIUS_TLS=y and use the # auth_server_* block from hostapd-wired.conf instead. interface=wlan0 driver=nl80211 ssid=Home country_code=GB hw_mode=g channel=6 ieee8021x=1 eapol_version=2 wpa=2 # WPA-EAP for WPA2-Enterprise; WPA-EAP-SHA256 with ieee80211w=2 for WPA3-Enterprise. wpa_key_mgmt=WPA-EAP WPA-EAP-SHA256 rsn_pairwise=CCMP ieee80211w=1 nas_identifier=ap2 own_ip_addr=192.0.2.33 auth_server_addr=192.0.2.11 auth_server_port=1812 auth_server_shared_secret=CHANGE-ME-16chars radius_require_message_authenticator=1 # 2 = required: no VLAN in the answer means no network. dynamic_vlan=2 vlan_naming=1 vlan_tagged_interface=eth0 vlan_bridge=brvlan ctrl_interface=/run/hostapd logger_syslog=-1 logger_syslog_level=2 डिवाइस nmcli.sh वही कमांड है जो डिवाइस वाले सेक्शन में है, और उसका वायर्ड जुड़वाँ। NetworkManager के बिना, wpa_supplicant ये लेता है:\nclients/wpa_supplicant-wired.conf\n# Linux client, wired 802.1X. Run: wpa_supplicant -D wired -i eth0 -c this-file ctrl_interface=/run/wpa_supplicant ap_scan=0 network={ key_mgmt=IEEE8021X eapol_flags=0 eap=TLS phase1=\u0026#34;tls_disable_tlsv1_3=0\u0026#34; identity=\u0026#34;anonymous\u0026#34; ca_cert=\u0026#34;/etc/pki/home/root_ca.crt\u0026#34; domain_match=\u0026#34;radius.home.example\u0026#34; client_cert=\u0026#34;/etc/pki/home/laptop1.crt\u0026#34; private_key=\u0026#34;/etc/pki/home/laptop1.key\u0026#34; } clients/wpa_supplicant-wifi.conf\n# Linux client, WiFi, without NetworkManager. TLS 1.3, anonymous identity, # and the server name checked. ctrl_interface=/run/wpa_supplicant network={ ssid=\u0026#34;Home\u0026#34; key_mgmt=WPA-EAP WPA-EAP-SHA256 ieee80211w=1 eap=TLS phase1=\u0026#34;tls_disable_tlsv1_3=0\u0026#34; identity=\u0026#34;anonymous\u0026#34; ca_cert=\u0026#34;/etc/pki/home/root_ca.crt\u0026#34; domain_match=\u0026#34;radius.home.example\u0026#34; client_cert=\u0026#34;/etc/pki/home/laptop1.crt\u0026#34; private_key=\u0026#34;/etc/pki/home/laptop1.key\u0026#34; } हर फ़ाइल किसके सामने टेस्ट हुई फ़ाइलें किसके सामने चलाई नतीजा step-ca/ step-ca 0.30.2, एक नया CA सभी 7 सर्टिफ़िकेट अपने रोल के साथ जारी; laptop2 तरीके से जारी और रिवोक freeradius/ 3.2.10, install.sh से इंस्टॉल laptop1 VLAN 10, cam1 99, tv1 30, एक nas सर्टिफ़िकेट मना; MAB aabbccddeeff VLAN 20, एक अनजाना MAC मना radius-crl-refresh TLS 1.3 पर step-ca CRL इंस्टॉल और hash; रिवोक किया लैपटॉप पाँच मिनट के अंदर मना, बिना रीस्टार्ट radius-cert-renew.service step ca renew 0.30.2 सर्टिफ़िकेट रिन्यू; key और permissions अछूते radsecproxy.conf radsecproxy 1.11.2 इसके ज़रिए EAP-TLS स्वीकार; Message-Authenticator के साथ MAB VLAN 20, उसके बिना ड्रॉप hostapd-wired.conf hostapd 2.11, RadSec के साथ बिल्ड TLS 1.3 पर VLAN 10, 99 और 30 hostapd-wifi.conf, wpa_supplicant-wifi.conf सिम्युलेट किए रेडियो, radsecproxy के ज़रिए एक SSID पर तीन स्टेशन, VLAN 10, 99 और 30; लिखी हुई क्लाइंट फ़ाइल और एक सिर्फ़ WPA3 वाला स्टेशन, दोनों जुड़े wpa_supplicant-wired.conf eapol_test 2.11 ऊपर की तालिका जैसे ही जवाब systemd units systemd-analyze verify कोई शिकायत नहीं, सिवाय इसके कि दोनों प्रोग्राम यहाँ इंस्टॉल नहीं हैं क्या सबको बाहर कर देता है इनमें से हर एक इसे बनाते समय सामने आया या टेस्ट किया गया, सिवाय trunk पर गायब VLAN के, जिसे दिखाने के लिए असली स्विच चाहिए। लगभग सब बंद होकर फ़ेल होते हैं। फ़ेल होने का सही तरीका यही है, और फिर भी एक बुरी सुबह।\nखराबी आपको क्या दिखता है इलाज CRL expire हो गई या गायब हर डिवाइस मना; CRL has expired या unable to get certificate CRL CRL को timer पर लाइए और उस पर नज़र रखिए नई CRL उठाई नहीं गई रिवोक किया डिवाइस अब भी जुड़ता है ca_path_reload_interval = 300, या FreeRADIUS रीस्टार्ट क्लाइंट पर TLS 1.3 बंद protocol version, डिवाइस मना tls_disable_tlsv1_3=0, tls-1-3-enable या Apple profile keys सर्टिफ़िकेट फ़ाइलें freerad के पढ़ने लायक नहीं FreeRADIUS शुरू नहीं होगा, Permission denied उन्हें freerad के पढ़ने लायक बनाइए, key सिर्फ़ उसी के लिए बिना रोल वाला सर्टिफ़िकेट policy से मना --set role= के साथ network provisioner से दोबारा जारी कीजिए VLAN स्विच पर या AP के trunk पर नहीं डिवाइस ऑथेंटिकेट होता है, कोई address नहीं मिलता VLAN बनाइए और हर उस trunk पर टैग कीजिए जहाँ डिवाइस पहुँच सकता है गलत RADIUS shared secret कोई जवाब नहीं; FreeRADIUS log करता है invalid Message-Authenticator! (Shared secret is incorrect.) और स्विच हार मानने तक दोबारा कोशिश करता है clients.conf में और स्विच या AP पर वही secret डिवाइस सर्वर का नाम नहीं जाँचता कुछ नहीं। यह चलता है, और किसी नकली के साथ भी चलेगा हर डिवाइस पर सर्वर का नाम सेट कीजिए बिना Message-Authenticator वाली रिक्वेस्ट चुपचाप ड्रॉप; स्विच दोबारा कोशिश करता है और हार मान लेता है स्विच पर इसे चालू कीजिए, या आगे radsecproxy रखिए freeradius -X के नीचे RadSec listener Threading must be enabled for TLS sockets freeradius -fxx -l stdout RadSec के बिना बिल्ड किया hostapd unsupported RADIUS type 'TLS' CONFIG_RADIUS_TLS=y के साथ बिल्ड कीजिए, या radsecproxy इस्तेमाल कीजिए radsecproxy को सर्वर का पता दिया गया No subjectaltname matching address radius.home.example इस्तेमाल कीजिए यह डिफ़ॉल्ट रूप से हर कॉर्पोरेट नेटवर्क पर क्यों नहीं है? इस पोस्ट में कुछ भी नया नहीं है। EAP-TLS अक्टूबर 1999 में प्रकाशित हुआ था37। VLAN attributes सितंबर 2003 में आए3। ऊपर के दोनों स्विच निर्माता अपने मैनुअल में dynamic VLAN डॉक्यूमेंट करते हैं, और CA, RADIUS सर्वर और proxy open source हैं और इनकी कोई कीमत नहीं। व्यावसायिक रास्ता लीजिए तो यही चीज़ एक line item बन जाती है: Cisco ISE के Essentials tier में “RADIUS authentication, authorization, and accounting, including 802.1X, MAC authentication bypass” रखता है, “concurrent active endpoints” के हिसाब से लाइसेंस, जहाँ एक endpoint नेटवर्क के “printers, fax machines, or other types of network devices”38 में से एक हो सकता है। जो भी रास्ता हो, यह क्षमता बीस साल से ज़्यादा से उपकरणों में बैठी है।\nतो 2026 में एक कॉर्पोरेट नेटवर्क अब भी ऐसे पासवर्ड पर क्यों चलता है जिसे सब शेयर करते हैं?\nक्या मैं पूछ सकता हूँ कि इतने सारे एडमिन और MSP परवाह ही क्यों नहीं करते? यह नहीं कि कौन। यह कि क्या इसे चलते रहने देता है। तीन ईमानदार जवाब हैं, क्योंकि तीन मामले हैं।\nकुछ को पता नहीं। और यही कमी है, बहाना नहीं। अपना स्विच क्या कर सकता है यह जानना कोई ऐसी चीज़ नहीं जो आपके साथ हो जाती है। यह पक्का करना कि आपको पता है, यही काम है, और यह बताने वाला मैनुअल मुफ़्त डाउनलोड है।\nकुछ को पता है, और वे इसे छोड़ देते हैं। शेयर किया पासवर्ड चलता है। उसके बारे में कोई टिकट नहीं उठाता। हर डिवाइस का एक सर्टिफ़िकेट ऐसे कामों का एक सेट है जिनका कोई दिखने वाला नतीजा नहीं, उस दिन तक जब एक लैपटॉप गायब होता है, और इसीलिए यह कभी सूची में जगह नहीं जीतता। एक MSP के लिए हिसाब और भी सीधा है: एक पासवर्ड वाला सपाट नेटवर्क सपोर्ट करने में सस्ता है, कोई कॉन्ट्रैक्ट इसे नहीं मापता, और क्लाइंट कभी नहीं पूछता। MSP सीरीज़ बताती है कि वे incentives कहाँ ले जाते हैं, और यह छोटे बिल पर वही पैटर्न है। सवाल इसी मामले पर है: वह एडमिन जिसके पास यह करने वाला स्विच है, जो यहाँ तक पढ़ चुका है, और शेयर की key इसलिए रखे हुए है क्योंकि कोई उससे इसका जवाब नहीं माँगेगा।\nकुछ सच में अभी नहीं कर सकते। बिना supplicant वाला प्रिंटर, TLS 1.3 न करने वाला TV, वह line-of-business बॉक्स जिसे उसका वेंडर अपडेट नहीं करेगा। यह एक असली मजबूरी है और जवाब हाँ है, इसका बचाव किया जा सकता है: एक घेरे हुए VLAN पर MAB, वजह लिखी हुई, और उसके बगल में एक तारीख कि बॉक्स कब जाएगा।\nकमी gap होना नहीं है। gaps सबके होते हैं। कमी है एक कॉर्पोरेट नेटवर्क को ऐसे gap के ऊपर चलाना जिसे आप कभी बंद करने गए ही नहीं, ऐसे उपकरणों पर जो उसे बंद करने की क्षमता के साथ आए थे।\nहर किसी ने कभी शेयर किया पासवर्ड चलाया था। कॉर्पोरेट नेटवर्क पर अपनी मर्ज़ी से उसे रखे रहना ही वह हिस्सा है जिसका बचाव नहीं हो सकता।\nCyber Essentials इसे क्यों नहीं माँगता क्योंकि इसका इरादा कभी था ही नहीं। Cyber Essentials सरकार-समर्थित बेसलाइन है, और “a growing number of organisations require suppliers to be certified to bid for work”39। यह “the most common internet based cyber security threats”39 के खिलाफ़ बना है, और इसकी requirements साफ़ बताती हैं कि यह कहाँ रुकता है। वायरलेस उपकरण वहाँ scope से बाहर हैं जहाँ हमलावर इंटरनेट से उन तक नहीं पहुँच सकता, क्योंकि “the Cyber Essentials scheme isn\u0026rsquo;t concerned with attacks that can only be launched within the signal range of the wireless device”40। इसके पाँच controls हैं फ़ायरवॉल, secure configuration, security updates, user access control और malware protection40। इनमें से कोई नहीं पूछता कि नेटवर्क पर आने की इजाज़त ही किसे है। सबसे करीब यह यहाँ पहुँचता है: “change any default or guessable account passwords”40, और रिसेप्शन डेस्क पर छपी WiFi key कोई account नहीं है।\nVLAN इसमें एक बार आते हैं। किसी संगठन का एक “sub-set”, जो “segregated from the rest of the organisation by a firewall or VLAN”40 हो, अलग से assess किया जा सकता है। तो स्कीम VLAN से सिर्फ़ एक जगह मिलती है, नेटवर्क के कम हिस्से के चारों ओर लकीर खींचने के तरीके के रूप में।\nअपनी शर्तों पर यह ठीक है। यह इंटरनेट से होने वाले हमलों के खिलाफ़ एक फ़र्श है, और यह खुद यही कहता है। मुश्किल यह है कि दीवार पर सर्टिफ़िकेट टँग जाने के बाद एक फ़र्श का क्या होता है। वह लक्ष्य बन जाता है, फिर छत, और एक बिज़नेस इसे पास कर सकता है जबकि हर डिवाइस एक सपाट नेटवर्क पर उस पासवर्ड के पीछे है जो सफ़ाई करने वाले को भी पता है। लैपटॉप लेकर इमारत के पास से गुज़रने वाला कोई भी उस threat model के अंदर है जो मायने रखता है, और उसके बाहर जिसका assessment हुआ।\nपासवर्ड एक ऐसा वादा है जिसे कोई नहीं निभाता इसे बनाते हुए जो बात मुझे लगी, वह यह कि इसमें कितना कम मुश्किल था। इसका हर जाल कहीं न कहीं लिखा था, किसी कॉन्फ़िग कमेंट या वेंडर मैनुअल में, और हर एक लैब में एक दोपहर के आगे झुक गया।\nऔर फिर भी घर फ़्रिज पर लिखे WiFi पासवर्ड पर चलता है। इसलिए नहीं कि विकल्प मुश्किल है, बल्कि इसलिए कि पासवर्ड डिफ़ॉल्ट है, और डिफ़ॉल्ट को कभी अपना बचाव नहीं करना पड़ता। सबको पता है कि यह शेयर होता है। सबको पता है कि यह लीक होता है। कोई इसे नहीं बदलता, क्योंकि बदलने का मतलब है नया पासवर्ड लेकर उस जगह के हर डिवाइस के पास घूमना, इसलिए यह सालों तक वही रहता है, हर मेहमान, हर किरायेदार और हर उस फ़ोन के बीच से जो इसे सेव किए-किए रीसाइक्लिंग बिन में चला गया, और यह हर उस इंसान को अंदर आने देता है जिसके पास यह कभी रहा।\nहर डिवाइस का एक सर्टिफ़िकेट इस बात का अलग विचार है कि नेटवर्क किसलिए है। नेटवर्क को पता होना चाहिए कि कोई चीज़ क्या है, सिर्फ़ यह नहीं कि किसी ने कभी उसमें सही शब्द टाइप किया था। यह एक ऐसा स्टैंडर्ड है जिस पर आप खुद को रखते हैं जब कोई जाँच नहीं रहा, और रखने लायक स्टैंडर्ड बस यही होता है। कैमरा लैपटॉप के बगल में सिर्फ़ इसलिए नहीं बैठता कि वह उसी SSID पर था। वह वहाँ बैठता है जहाँ आप उसे रखते हैं, आपके अपने उपकरणों पर, आपके लिखे और पढ़ सकने वाले नियम के नीचे। जब वह गड़बड़ करे, तो टेक्स्ट फ़ाइल की एक लाइन से हट जाता है। जब वह गायब हो, तो एक कमांड उसे बाहर कर देती है।\nबदले में चाहिए बस काम। पीछे timer वाली एक CRL, डायरी में तारीख वाले सर्टिफ़िकेट, खरीदने से पहले टेस्ट किए डिवाइस। यही कीमत है, और यह सही दिशा में है: आप उस मेहनत से चुकाते हैं जो आपको दिखती है, उस पासवर्ड से नहीं जो सालों से चुपचाप लोगों को अंदर आने दे रहा है।\nRFC 3748 — Extensible Authentication Protocol (EAP) — EAP, और peer, authenticator और authentication server के रोल जिनके बीच यह चलता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2868 — RADIUS Attributes for Tunnel Protocol Support — वे tunnel attributes परिभाषित करता है जिन्हें RFC 3580 VLAN के लिए दोबारा इस्तेमाल करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3580 — IEEE 802.1X RADIUS Usage Guidelines — सेक्शन 3.31, “Tunnel-Type=VLAN (13) Tunnel-Medium-Type=802 Tunnel-Private-Group-ID=VLANID”, और “the VLANID integer value is encoded as a string”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Security Advisory 2743314 — “An attacker who obtained the MS-CHAP v2 authentication traffic could then use the exploit code to decrypt a user\u0026rsquo;s credentials.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5216 — The EAP-TLS Authentication Protocol — EAP पर दोनों तरफ़ सर्टिफ़िकेट से ऑथेंटिकेशन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9190 — EAP-TLS 1.3 — “TLS 1.3 also encrypts certificates and some of the extensions. When using EAP-TLS with TLS 1.3, the use of privacy is mandatory and does not cause any additional round trips”; सेक्शन 2.1.7 identity response में anonymous NAIs की सलाह देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — mods-available/eap — check_crl, check_all_crl “Check if intermediate CAs have been revoked”, allow_expired_crl, और “most EAP supplicants WILL NOT DO TLS 1.3 PROPERLY”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Certificate templates — --set से भेजा यूज़र डेटा template को .Insecure.User के रूप में मिलता है; मानों को हमेशा toJson में लपेटिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — dictionary.freeradius.internal — policy जो TLS-Client-Cert-* attributes पढ़ती है, जिनमें TLS-Client-Cert-Subject और TLS-Client-Cert-X509v3-Extended-Key-Usage-OID शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — mods-available/passwd — “Attributes marked as \u0026lsquo;=\u0026rsquo; are added to reply_items instead of default configure_items”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nwpa_supplicant — wpa_supplicant.conf — “tls_disable_tlsv1_3=0 - enable TLSv1.3 (experimental - disabled by default)”, और domain_match, “Constraint for server domain name”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2548 — Microsoft Vendor-specific RADIUS Attributes — MS-MPPE-Send-Key और MS-MPPE-Recv-Key, “b(1) = MD5(S + R + A) c(1) = p(1) xor b(1)” के रूप में एन्क्रिप्ट, जहाँ S shared secret है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBlastRADIUS — CVE-2024-3596; सुझाया गया बचाव है “to mandate that clients and servers always send and require Message-Authenticator attributes for all requests and responses”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3579 — RADIUS Support For EAP — “the Message-Authenticator attribute MUST be used to protect all Access-Request, Access-Challenge, Access-Accept, and Access-Reject packets containing an EAP-Message attribute.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — radiusd.conf — require_message_authenticator और limit_proxy_state; दोनों को “no” करना “will allow MITM attackers to create fake Access-Accept packets to the NAS!”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6614 — TLS Encryption for RADIUS — RadSec, मई 2012, Experimental।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIETF — RadSec: RADIUS over TLS and DTLS — इच्छित दर्जा Proposed Standard, RFC 6614 और RFC 7360 की जगह लेता हुआ; 13 अक्टूबर 2026 को जाँचने पर IESG state “Has enough positions to pass”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — sites-available/tls — RadSec listener, require_client_cert, proto = tls, और “TLS clients MUST have the shared secret set to ‘radsec’”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhostapd 2.11 source — hostapd/defconfig: “Include support fo RADIUS/TLS into the RADIUS client”, #CONFIG_RADIUS_TLS=y।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link — Omada Software Controller 6.1 release note — “Added support for RadSec (RADIUS over TLS) to secure SSID, MAC-Based, and 802.1X authentications on both APs and Switches”, जिसके लिए नवीनतम AP और स्विच फ़र्मवेयर चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link Omada — 802.1X configuration — RADIUS Proxy: “It does not support the RadSec feature”; RadSec के साथ, “it is recommended to disable Require Message-Authenticator”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — M4250 and M4350 CLI manual — radius server key: “The secret must be an alphanumeric value not exceeding 16 characters”; RadSec का कोई ज़िक्र नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — WAX630 user manual — “Enter the number of the UDP port on the access point that is used to access the RADIUS server”, और “By default, the password is sharedsecret.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nradsecproxy — “made to be able to deploy RadSec (RADIUS over TLS) so that all RADIUS communication across network links could be done using TLS, without modifying existing RADIUS software”। यहाँ 1.11.2 के साथ टेस्ट किया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9765 — RADIUS/1.1 — अप्रैल 2025, Experimental: “the RADIUS shared secret is no longer used, and all MD5-based packet authentication and attribute obfuscation methods are removed.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFreeRADIUS 3.2.10 — ChangeLog — RADIUS/1.1 “Disabled by default, can be enabled by passing --with-radiusv11 to the configure script. For now, this is for testing interoperability.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — M4250 user manual — VLAN Assignment Mode, “The default is Disable”; Dynamic VLAN Creation Mode; Authentication Order, “if a client tries 802.1X authentication (based on the user and client credentials) and authentication fails, the interface proceeds with MAB authentication.” M4350 मैनुअल में यही टेक्स्ट है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link Omada — Dynamic VLAN with the VLAN Assignment function of RADIUS — स्विच: Authentication Type “Port Based”, “enable \u0026lsquo;VLAN Assignment\u0026rsquo;”, “make sure the 802.1X Control mode is Auto”; एक्सेस पॉइंट: RADIUS profile में “Enable VLAN Assignment for Wireless Network”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTP-Link — Configuration guide for 802.1X VLAN assignment and MAB — “VLAN Assignment takes effect only when the control type is Port Based”; गायब VLAN अपने आप बनते हैं; MAB MAC को “12 hexadecimal digits, all lowercase and no punctuation” के रूप में भेजता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — GS710TUP user manual — MAC-based port control “allows multiple supplicants connected to the same port”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhostapd — hostapd.conf — dynamic VLAN “parsed from following RADIUS attributes based on RFC 3580 and RFC 2868”; dynamic_vlan “2 = required; reject authentication if RADIUS server does not include VLAN ID”; vlan_tagged_interface और vlan_bridge। hostapd 2.11 पैकेज से पढ़ा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetgear — WAX620 user manual — WPA3 Enterprise: “the encryption is automatically set to GCMP256”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPixel Phone Help — Connect to Wi-Fi networks — “The \u0026lsquo;Do not validate\u0026rsquo; setting option used in EAP-PEAP, EAP-TLS and EAP-TTLS configurations has been removed for security reasons.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nApple — WiFi.EAPClientConfiguration — TLSTrustedServerNames, “If a server presents a certificate that isn\u0026rsquo;t in this list, the system doesn\u0026rsquo;t trust it”; TLSMaximumVersion का डिफ़ॉल्ट 1.2 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetworkManager — 802-1x settings — domain-match: “Constraint for server domain name”, साथ में ca-cert, client-cert, private-key और phase1-auth-flags।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — WifiEnterpriseConfig — setDomainSuffixMatch; TLS_V1_3 “Added in API level 34”, और WifiManager.isTlsV13Supported() बताता है “whether or not TLS v1.3 is supported”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2716 — PPP EAP TLS Authentication Protocol — मूल EAP-TLS specification, अक्टूबर 1999, जिसकी जगह अब RFC 5216 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — ISE licences — Essentials में “RADIUS authentication, authorization, and accounting, including 802.1X, MAC authentication bypass and easy connect” शामिल; “Concurrent active endpoints refer to the total number of supported users and devices… printers, fax machines, or other types of network devices.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — About Cyber Essentials — “A growing number of organisations require suppliers to be certified to bid for work”; यह “the most common internet based cyber security threats” से बचाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Cyber Essentials: Requirements for IT Infrastructure v3.3 — अप्रैल 2026। वायरलेस डिवाइस वहाँ scope से बाहर हैं जहाँ उन पर इंटरनेट से हमला नहीं हो सकता: “the Cyber Essentials scheme isn\u0026rsquo;t concerned with attacks that can only be launched within the signal range of the wireless device”; पाँच technical controls; “change any default or guessable account passwords”; एक sub-set “is part of the organisation whose network is segregated from the rest of the organisation by a firewall or VLAN”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/networking/eap-tls-one-ssid-every-device-on-its-vlan/","summary":"वायर्ड स्विच पोर्ट और एक अकेले WPA2/WPA3-Enterprise SSID के लिए सर्टिफ़िकेट वाला 802.1X (EAP-TLS), जहाँ RADIUS सर्वर तय करता है कि हर डिवाइस किस VLAN पर जाएगा। step-ca 0.30.2 हर डिवाइस सर्टिफ़िकेट में एक रोल लिखता है और बिना रोल वाला सर्टिफ़िकेट देने से मना करता है; FreeRADIUS 3.2.10 उस रोल को VLAN से जोड़ता है, हर डिवाइस की एक सूची को उसे बदलने देता है, और सिर्फ़ TLS 1.3 चलाता है। शेयर किया हुआ WiFi पासवर्ड समस्या क्यों है, सर्टिफ़िकेट क्यों और TLS 1.3 क्यों, रिवोकेशन का वह जाल जहाँ FreeRADIUS HUP पर नई CRL को अनदेखा करता है, सर्वर का नाम न जाँचने वाला डिवाइस किस पर भरोसा कर लेगा, Message-Authenticator और TLS 1.3 पर RadSec से RADIUS ट्रैफ़िक को ही सुरक्षित करना, सिर्फ़ UDP बोलने वाले उपकरणों के लिए radsecproxy, एक वायर्ड पोर्ट और एक WiFi नेटवर्क शुरू से अंत तक सिम्युलेट किया हुआ, Netgear और TP-Link सेटिंग्स, Linux, Apple और Android क्लाइंट सेटिंग्स, हर कॉन्फ़िग फ़ाइल पूरी और डाउनलोड के रूप में, और इतने सारे एडमिन और MSP अब भी इसकी परवाह क्यों नहीं करते और Cyber Essentials उनसे यह क्यों नहीं माँगता।","title":"एक SSID, हर डिवाइस अपने VLAN पर: step-ca सर्टिफ़िकेट के साथ 802.1X"},{"content":" अपडेट, 11 अक्टूबर 2026, 16:30: तब से मैंने BIOS 1.30 फ़्लैश किया है। यह ऑफ़सेट ठीक नहीं करता। tscsync अब भी कोर को एक लाइन में लाता है, लेकिन दो sync बूट पर कर्नेल ने फिर भी TSC छोड़ दिया, warp check से नहीं बल्कि अपने clocksource watchdog से: BIOS 1.30: sync टिकता है, TSC फिर भी जाता है। tsc=nowatchdog जोड़ने पर TSC टिका रहा, और real-time clock के ख़िलाफ़ पाँच मिनट के माप में न कोई warp मिला न कोई drift: tsc=nowatchdog: पाँच मिनट, कोई warp नहीं। एक बूट कई बूट की कतार नहीं है, इसलिए मैं इसे टिका हुआ कह रहा हूँ, ठीक हुआ नहीं।\nहर बूट, वही चेतावनी मेरे ThinkPad E595 के कर्नेल लॉग में यह हर एक बूट पर बैठा था:\nTSC synchronization [CPU#0 -\u0026gt; CPU#2]: Measured 6601281288 cycles TSC warp between CPUs, turning off TSC clock. tsc: Marking TSC unstable due to check_tsc_sync_source failed clocksource: Switched to clocksource hpet कुछ क्रैश नहीं हुआ। डेस्कटॉप पर कुछ नहीं उछला। मशीन बूट होने के पल से अपनी पूरी घड़ी चुपचाप एक धीमी टाइमर चिप पर चलाती रही, और अगर मैं किसी और चीज़ के लिए journal न पढ़ रहा होता तो यह हमेशा ऐसे ही चलता रहता।\nTime Stamp Counter (TSC) हर CPU कोर के अंदर एक काउंटर है जो एक तय दर से टिक करता है। इसे पढ़ना एक अकेला instruction है। Linux इसे अपनी मुख्य घड़ी की तरह इस्तेमाल करता है, लेकिन सिर्फ़ तब जब हर कोर गिनती पर सहमत हो1। अगर एक कोर पीछे है तो कर्नेल उस पर भरोसा नहीं कर सकता और High Precision Event Timer (HPET) पर लौट आता है, जो एक अलग टाइमर डिवाइस है। tscsync के लेखक ने HPET पर एक clock read करीब 1.2 µs का मापा, TSC पर दसियों नैनोसेकंड के मुकाबले, और कर्नेल और डेस्कटॉप हर सेकंड दसियों हज़ार बार घड़ी पढ़ते हैं1। यह latency और बैटरी है, हर बूट पर चुकाई गई, बिना किसी फ़ायदे के।\nतो कोर कितना पीछे था? तीन सेकंड से ज़्यादा। 2.1 GHz के लैपटॉप पर यह 6.6 अरब cycles है।\nफ़र्मवेयर क्या सौंपता है मैसेज CPU 0 और CPU 2 का नाम लेता है, लेकिन गड़बड़ी CPU 2 में नहीं है। बूट लोडर से tscsync के मापने पर, और शुरू होने के बाद कर्नेल के मापने पर, तस्वीर हर बार एक ही है:\nकोर CPU 0 से ऑफ़सेट इसका मतलब CPU 0, boot processor (BSP) 0 संदर्भ, और वही अलग निकला CPU 1 से 7, बाकी कोर (APs) करीब +6.2 से +6.8 अरब cycles आपस में 32 cycles के अंदर सहमत 2,096 MHz पर फ़ासला 2.9 से 3.3 सेकंड boot processor पीछे है, हर बूट सात कोर सहमत हैं। एक तीन सेकंड लेट है। फ़र्मवेयर boot processor को चालू करता है, उस पर अपना काम करता है, और उस एक काउंटर को बाकी के साथ लाइन में लाए बिना ही बूट लोडर को सौंप देता है।\ntscsync से पहले और बाद boot processor का TSC पहले: जैसा फ़र्मवेयर सौंपता है बाद में: tscsync sync mode में CPU 0 (BSP) CPU 1 CPU 2 CPU 3 CPU 4 CPU 5 CPU 6 CPU 7 CPU 0 (BSP) CPU 1 CPU 2 CPU 3 CPU 4 CPU 5 CPU 6 CPU 7 CPU 0 करीब 6.8 अरब cycles (3.25 s) पीछे CPU 1 से 7, 32 cycles के अंदर सहमत BSP आगे खिसका, हर कोर 45 cycles के अंदर Linux TSC clocksource रखता है बाएँ: फ़र्मवेयर क्या सौंपता है। सात application processors 32 cycles के अंदर सहमत हैं; boot processor उनसे करीब 6.8 अरब cycles पीछे है। दाएँ: tscsync के UEFI में boot processor को आगे खिसकाने के बाद, हर कोर 45 cycles के अंदर है और कर्नेल का warp check पास होता है। Linux इसे बस ठीक क्यों नहीं कर सकता? Intel CPU पर एक register है, IA32_TSC_ADJUST, जो कर्नेल को किसी कोर का काउंटर थोड़ा खिसकाने देता है, और जहाँ यह होता है वहाँ कर्नेल का sync कोड इसे इस्तेमाल करता है2। AMD Zen CPU में यह नहीं है। इसके बिना Linux में कुछ भी ऑफ़सेट ठीक नहीं कर सकता, और काउंटर सीधे लिखने की कर्नेल के अंदर की कोशिश (tsc=directsync) को upstream ने भरोसे लायक न मानकर ठुकरा दिया3।\nतो कर्नेल वही अकेली ईमानदार चीज़ करता है जो बचती है। वह मापता है, दो कोर के बीच समय को पीछे जाते पाता है, चेतावनी छापता है और TSC इस्तेमाल करना बंद कर देता है2।\nचालीस बूट, चालीस warp एक बूट एक किस्सा है। इस मशीन का journal 30 मई 2026 तक जाता है, तो मैंने उससे पूछा।\nबूट Warp, cycles 2,096 MHz पर warp 30 मई से 11 अक्टूबर 2026 40 में से 40 6.16 से 9.88 अरब 2.94 से 4.72 s Median 6.57 अरब 3.14 s करीब 27 s के पूरे power-off के बाद 1 6.60 अरब 3.15 s tscsync sync mode में, BIOS 1.28 1 कोई लॉग नहीं TSC बना रहा BIOS 1.30, tscsync बंद 1 6.13 अरब 2.92 s BIOS 1.30, tscsync sync mode में 2 कोई लॉग नहीं watchdog ने TSC छोड़ा, नीचे देखिए BIOS 1.30, sync mode और tsc=nowatchdog 1 कोई लॉग नहीं TSC बना रहा हर बूट। cold boot, reboot, इतने लंबे power-off के बाद भी कि आप सोचें कुछ भी पुराना बचा नहीं होगा। मात्रा ऊपर-नीचे होती है, जो एक Lenovo Legion पर tscsync के लेखक की अपनी खोज से मेल खाता है: वहाँ warp लगभग पूरी तरह इस बात के साथ बढ़ता है कि बूट लोडर शुरू होने से पहले मशीन फ़र्मवेयर में कितना समय बिताती है3। जो बूट लोगो पर ज़्यादा देर रुकता है वह और पीछे निकलता है।\nललचाने वाला इलाज कर्नेल कमांड लाइन पर tsc=reliable है, जो Linux को जाँचना बंद करने को कहता है। ऐसा मत कीजिए। कोर सच में तीन सेकंड अलग हैं, और जाँच बंद करने से यह नहीं बदलता; इससे बस कर्नेल एक ऐसी घड़ी इस्तेमाल करने लगता है जो किसी task के कोर बदलने पर पीछे कूद जाती है। tscsync का README भी यही कहता है, और उसके बाद आने वाली ऑडियो और वीडियो की अटकन का नाम लेता है1।\nक्या मैं पूछ सकता हूँ कि यह अब भी क्यों भेजा जा रहा है? मैं यह नहीं पूछ रहा कि किसने। मैं पूछ रहा हूँ कि Lenovo की प्रक्रिया में ऐसा क्या था जिसने एक ऐसा BIOS बाहर जाने दिया जो हर बूट पर एक कोर को तीन सेकंड पीछे छोड़ देता है।\nजवाब tscsync के design notes में है, और वह तारीफ़ के लायक नहीं। Fisher-Price OS (Windows) बूट पर TSC खुद लिख देता है3। जिस लैपटॉप को सिर्फ़ उसी पर जाँचा गया हो वह पास हो जाता है, क्योंकि ऑपरेटिंग सिस्टम चुपचाप फ़र्मवेयर के पीछे सफ़ाई कर देता है। Linux अपनी सुरक्षा जाँच चालू रखता है और जो उसे दिया गया वही बताता है, और ठीक इसी वजह से गड़बड़ी वहाँ दिखती है और कहीं नहीं।\nअजीब बात यह है कि बताया जाता है यह पहले भी ठीक हो चुका है। यूज़र बताते हैं कि Lenovo ने इसी तरह का बग ThinkPad A485, T14s Gen 1 AMD और E495 पर BIOS अपडेट से ठीक किया4। E495 इस मशीन का 14-इंच वाला भाई है, और दोनों एक ही BIOS बाँटते हैं: पैकेज के लिए Lenovo का अपना readme दोनों को लिस्ट करता है5।\nमेरा E595 1.28 पर था और हर बूट पर warp करता था। Lenovo ने तब से 1.29 और 1.30 प्रकाशित किए हैं, और किसी की change list TSC के बारे में एक शब्द नहीं कहती; 1.30 “system randomly freeze since BIOS V1.27” और कुछ सुरक्षा मुद्दे ठीक करता है5। तो मैंने 1.30 डाला और फिर मापा। उस पर पहले बूट ने, tscsync बंद रखकर, 6,126,446,316 cycles का warp लॉग किया: 2.92 सेकंड, CPU#0 -\u0026gt; CPU#2, हमेशा जैसा। 1.30 इसे ठीक नहीं करता। दोनों मॉडल एक BIOS बाँटते हैं, तो अगर E495 वाली रिपोर्ट सही होती तो यह मशीन भी ठीक हो जाती। रिपोर्ट किसी BIOS वर्ज़न का नाम नहीं लेती और कोई लॉग लिंक नहीं करती4।\nक्या Lenovo 2019 के एक लैपटॉप पर उस गड़बड़ी के लिए वापस जाएगा जिसे वह ऑपरेटिंग सिस्टम उनसे छिपाता है जिस पर वे टेस्ट करते हैं? नहीं।\ntscsync, पहले माप tscsync एक छोटा UEFI प्रोग्राम है जो Linux से ठीक पहले GRUB या systemd-boot से चलता है। यह फ़र्मवेयर की अपनी multiprocessor services के ज़रिए हर कोर से उसका TSC माँगता है, boot processor से हर कोर का ऑफ़सेट निकालता है, पीछे रहे काउंटर को तब तक आगे खिसकाता है जब तक वे सहमत न हों, फिर कर्नेल के अपने warp check जैसे एक टेस्ट से नतीजा जाँचता है1। यह कभी flash, NVRAM या फ़र्मवेयर सेटिंग्स नहीं लिखता; जो काउंटर यह बदलता है वे power-off पर रीसेट हो जाते हैं1।\nबूट लोडर को सौंपने के लिए यह बहुत कुछ है, इसलिए बनाने से पहले मैंने कोड पढ़ा, commit 230eaa9 पर। फिर इंस्टॉल वैसे ही किया जैसे प्रोजेक्ट कहता है:\nकदम कमांड क्या वापस आया बिल्ड make GRUB और systemd-boot बाइनरी इंस्टॉल, read-only sudo scripts/install.sh measure mode, काउंटर में कुछ नहीं लिखा Power off, बूट, देखिए tscsync-status CPU 0 सभी 7 APs से 2,964 ms पीछे, APs माइक्रोसेकंड के अंदर सहमत चालू कीजिए sudo scripts/set-mode.sh sync अगले बूट पर लागू Measure mode वह हिस्सा है जो ऐसे किसी भी टूल में नकल करने लायक है। यह कुछ भी बदलने की इजाज़त मिलने से पहले आपके अपने हार्डवेयर पर गड़बड़ी दिखाता है, और अगर कोई बूट कभी Linux तक नहीं पहुँचता तो एक hang guard इसे बंद कर देता है1।\nsync mode में पहला बूट, सीधे tscsync-status से:\nsurvey (read-only): cpu 1 apic 1: offset 6815086011 rtt 126 BAD ... cpu 7 apic 7: offset 6815086010 rtt 378 BAD 0 ok, 7 not ok moving BSP forward by ~6815086010 cycles to match cpu 7: bsp vs cpu 7 apic 0: before 6815086001 after 3 rtt 357 iter 3 warps bsp/ap 0/0 OK AP pass (corrects any AP still off): 7 ok, 0 not ok total 121 ms और कर्नेल, एक सेकंड बाद:\nclocksource: Switched to clocksource tsc-early tsc: Refined TSC clocksource calibration: 2096.066 MHz clocksource: Switched to clocksource tsc कोई warp लाइन नहीं। कोई “unstable” नहीं। /sys/devices/system/clocksource/clocksource0/current_clocksource में tsc लिखा है। वह घड़ी पाने के लिए 121 ms का बूट टाइम जो हार्डवेयर के पास शुरू से होनी चाहिए थी। यह BIOS 1.28 पर था। 1.30 इतना साफ़-सुथरा नहीं रहा।\nवे 21 नैनोसेकंड जिन्हें Linux ने नकार दिया उस रिपोर्ट में एक लाइन है जो जितनी बुरी है उससे ज़्यादा बुरी दिखती है, और उसे छिपाने के बजाय समझाना ठीक है। tscsync के आखिरी verify pass ने एक कोर पर झंडा उठाया:\ncpu 7 apic 7: offset 45 rtt 357 warps bsp/ap 0/0 BAD 6 ok, 1 not ok RESULT: some APs out of sync (Linux will fall back to HPET) 45 cycles करीब 21 नैनोसेकंड है। tscsync मोटे तौर पर 10 cycles के अंदर सहमति का लक्ष्य रखता है1, तो अपने ही लक्ष्य से CPU 7 चूक गया, और उसने यह कहा। फिर Linux बूट हुआ और HPET पर लौटा ही नहीं।\nदोनों जाँच अलग सवाल पूछ रही हैं:\ntscsync का ऑफ़सेट फ़ैसला कर्नेल का warp test सवाल काउंटर कितने अलग हैं? क्या कोर के बीच समय कभी पीछे जाता है? तरीका एक timed round trip से अनुमान कोर बारी-बारी से पढ़ते हैं, पिछली रीडिंग से तुलना2 पास का निशान करीब 10 cycles कोई रीडिंग पिछली से कम नहीं इस बूट पर CPU 7 45 cycles, BAD कोई warp नहीं, TSC बना रहा उसी लाइन पर warps bsp/ap 0/0 tscsync का कर्नेल जैसा टेस्ट चलाना है। उसने कोई नहीं देखा। कर्नेल ने भी नहीं।\nप्रोजेक्ट पहले से जानता है कि उसका फ़ैसला कर्नेल से सख़्त हो सकता है। उसकी हार्डवेयर लिस्ट के एक IdeaPad में चार कोर 28 से 42 cycles पर झंडे वाले थे जिन्हें कर्नेल ने मान लिया, और 2.1 से एक धीमा round trip BAD के बजाय UNSURE बताया जाता है4। उस स्थिति के लिए README का नियम सही है: कर्नेल की अपनी जाँच फ़ैसला करती है, और अगर clocksource tsc है तो वह पास हो गई1। इस मशीन पर 357 cycles का round trip धीमा नहीं है, इसलिए यह BAD निकला। जो टूल अपना हिसाब दिखाए और फिर आखिरी बात कर्नेल पर छोड़ दे, वही सही तरीका है।\nBIOS 1.30: sync टिकता है, TSC फिर भी जाता है 1.30 पर मैंने tscsync को वापस sync mode में डाला और दो बार रीबूट किया। दोनों बार इसने अपना काम किया। इसने boot processor को करीब 6.17 अरब cycles आगे खिसकाया, हर कोर कुछ दर्जन cycles के अंदर निकला, और कर्नेल ने कोई warp लॉग नहीं किया। दोनों बार Linux फिर भी कुछ सेकंड बाद HPET पर पहुँच गया:\ntsc: Detected 2095.890 MHz processor tsc: Refined TSC clocksource calibration: 2096.053 MHz clocksource: Watchdog remote CPU 5 read timed out clocksource: Marking clocksource tsc unstable due to frequency skew clocksource: Watchdog hpet interval: 495136113ns clocksource: Clocksource tsc interval: 496026671ns tsc: Marking TSC unstable due to clocksource watchdog यह एक अलग जाँच है। warp test हर कोर के चालू होते समय चलता है और पूछता है कि क्या कोर के बीच समय कभी पीछे जाता है। clocksource watchdog बूट के बाद भी चलता रहता है। हर आधे सेकंड या उसके आसपास यह तुलना करता है कि TSC कितना आगे बढ़ा और HPET कितना, और अगर वे एक छोटे से अंतर से ज़्यादा असहमत हों तो TSC को unstable मार्क कर देता है6। एक बार मार्क हो गया तो अगले बूट तक मार्क रहता है।\nकर्नेल की दो जाँच, और कौन सा बूट ऑप्शन किसे छोड़ता है फ़र्मवेयर CPU 0 ~3 s पीछे tscsync, UEFI में CPU 0 आगे करता है Linux शुरू कोर चालू होते हैं Warp check एक बार, बूट पर Watchdog हर 0.5 s, HPET से तुलना डिफ़ॉल्ट दोनों चालू: 1.30 पर TSC गया ✓\u0026#160;जाँचा ✓\u0026#160;जाँचा tsc=nowatchdog यह बूट: TSC बना रहा ✓\u0026#160;जाँचा ✗\u0026#160;छोड़ा tsc=reliable सलाह नहीं: असली warp छिपाता है ✗\u0026#160;छोड़ा ✗\u0026#160;छोड़ा दो अलग जाँच TSC को छुड़वा सकती हैं। warp check एक बार चलता है, हर कोर के चालू होते समय; tscsync इस मशीन को उसके पार ले जाता है। watchdog हर आधे सेकंड HPET से तुलना करता रहता है। tsc=nowatchdog सिर्फ़ दूसरी को छोड़ता है, जबकि tsc=reliable दोनों को छोड़ता है और असली warp को छिपा देगा। 1.30 पर बूट Warp check HPET interval TSC interval HPET के मुकाबले TSC पहला sync बूट पास 495,426,793 ns 495,006,210 ns करीब 850 ppm धीमा दूसरा sync बूट पास 495,136,113 ns 496,026,671 ns करीब 1,800 ppm तेज़ तो क्या TSC गलत दर पर चल रहा है? नहीं। मशीन चालू रहते मैंने TSC को कर्नेल की HPET-आधारित raw clock के ख़िलाफ़ 30 सेकंड तक, 5-सेकंड की खिड़कियों में, मापा। हर खिड़की 2,096.062 MHz पर निकली, कर्नेल के अपने calibration से करीब 4 parts per million। असली दर की गड़बड़ी दो बूट के बीच धीमे से तेज़ पर नहीं झूलती और फिर गायब नहीं होती। बूट की शुरुआत में कोई चीज़ आधे सेकंड की एक खिड़की को बिगाड़ देती है, और उससे ठीक पहले वाली remote CPU 5 read timed out लाइन एक कोर के थोड़ी देर जवाब न देने की ओर इशारा करती है। फ़र्मवेयर का CPU से समय चुराना इससे मेल खाएगा। मैंने यह साबित नहीं किया है।\nदो बूट ही कुल सबूत हैं। मैं अभी नहीं कह सकता कि यह 1.30 है, संयोग है, या कुछ ऐसा जो tscsync का लिखना छेड़ देता है। 1.28 पर एक sync बूट ने TSC रखा और 1.30 पर दो ने खो दिया, और BIOS को दोष देने के लिए यह काफ़ी नहीं है।\nइस मामले के लिए tsc=reliable से संकरा एक कर्नेल ऑप्शन है। tsc=nowatchdog TSC के लिए clocksource watchdog बंद करता है और बूट-टाइम warp check को छोड़ देता है7। अगर tscsync कभी sync करने में नाकाम रहा, तो कर्नेल फिर भी warp पकड़ लेगा और HPET पर लौट जाएगा। अगला टेस्ट यही था। आँकड़े, और tscsync की अपनी रिपोर्टिंग में कुछ सुझाए बदलाव, प्रोजेक्ट के issue tracker पर हैं8।\ntsc=nowatchdog: पाँच मिनट, कोई warp नहीं मैंने tsc=nowatchdog जोड़ा और रीबूट किया। tscsync ने boot processor को 6,207,104,421 cycles आगे खिसकाया, कर्नेल ने न कोई warp लॉग किया न कोई skew, और current_clocksource में tsc था। 1.30 पर इसे बनाए रखने वाला पहला बूट।\nइससे बस यह साबित होता है कि TSC को छुड़वाने वाला watchdog था। इससे यह साबित नहीं होता कि TSC पर चलना सुरक्षित है, और watchdog बंद होने पर कर्नेल में अब कुछ भी नज़र नहीं रख रहा। तो मैंने खुद नज़र रखी।\nमेरी पहले वाली दर जाँच यहाँ किसी काम की नहीं थी। वह TSC को CLOCK_MONOTONIC_RAW के ख़िलाफ़ मापती थी, जो तब तक ठीक था जब कर्नेल HPET पर चल रहा था। TSC पर वह घड़ी TSC से ही बनती है, तो टेस्ट काउंटर की तुलना खुद से करता। HPET को user space से पढ़ा भी नहीं जा सकता, क्योंकि Fedora का कर्नेल CONFIG_HPET_MMAP के बिना बना है। real-time clock (RTC) पढ़ा जा सकता है। यह अपने क्रिस्टल पर चलता है, और कर्नेल इसके सेकंड काउंटर के हर टिक पर एक प्रोग्राम को जगा देगा9।\nतो मैंने एक छोटी जाँच लिखी, tsccheck। यह खुद को CPU 0 पर पिन करती है और हर 15 सेकंड चार टेस्ट चलाती है:\nजाँच कैसे गड़बड़ी कैसी दिखती है दर RTC के सेकंड टिक के बीच गिने गए TSC cycles MHz का एक तरफ़ खिसकना ऑफ़सेट CPU 0 से हर कोर तक 3,000 round trips, ऑफ़सेट सबसे तेज़ वाले से बढ़ता हुआ ऑफ़सेट Warps हर round trip में, क्या किसी कोर ने पहले देखी वैल्यू से कम पढ़ा शून्य से ऊपर कुछ भी Clocksource current_clocksource पढ़ना tsc के सिवा कुछ भी round trip इसका मूल है। CPU 0 अपना काउंटर पढ़कर आगे देता है, दूसरा कोर अपना पढ़कर वापस देता है, और CPU 0 फिर पढ़ता है। अगर कोर सहमत हैं तो बीच वाली रीडिंग बाकी दोनों के बीच आनी चाहिए:\nCPU 0 और दूसरे कोर के बीच एक round trip CPU 0 CPU 1 से 7, एक बार में एक समय t0 t1 t2 मध्यबिंदु ऑफ़सेट ऑफ़सेट = t1 − (t0 + t2) / 2 3,000 trips में सबसे तेज़ से warp अगर t1 \u0026lt; t0 या t2 \u0026lt; t1 समय पीछे गया: एक भी गड़बड़ी है एक round trip। दूसरे कोर की रीडिंग, t1, की तुलना CPU 0 की दो रीडिंग के मध्यबिंदु से होती है, और 3,000 trips में सबसे तेज़ वाला ऑफ़सेट देता है। पहले देखी गई रीडिंग से कम कोई भी रीडिंग warp है, ऑफ़सेट चाहे जो हो। जो लूप यह करता है:\nfor (int i = 0; i \u0026lt; ITERS; i++) { uint64_t t0 = rdtsc_o(); /* CPU 0 */ atomic_store(\u0026amp;pp.t0, t0); atomic_store(\u0026amp;pp.seq, 2 * i + 1); /* the other core reads t1 now */ while (atomic_load(\u0026amp;pp.seq) != 2 * i + 2) ; uint64_t t2 = rdtsc_o(); /* CPU 0 again */ uint64_t t1 = atomic_load(\u0026amp;pp.t1); if (t1 \u0026lt; t0 || t2 \u0026lt; t1) r.warps++; /* time went backwards */ if (i \u0026gt; 100 \u0026amp;\u0026amp; t2 - t0 \u0026lt; r.rtt) { r.rtt = t2 - t0; r.offset = (int64_t)(t1 - (t0 + (t2 - t0) / 2)); } } पूरा प्रोग्राम x86-64 Linux के लिए सादा C है, जिसमें tscsync या इस लैपटॉप से बँधा कुछ नहीं। /dev/rtc0 के लिए इसे root चाहिए, और तीसरा argument journalctl -k -b | grep 'Refined TSC' से आपके अपने कर्नेल का आँकड़ा है:\ngcc -O2 -Wall -pthread -o tsccheck tsccheck.c sudo ./tsccheck 15 20 2096.073 \u0026#8615; tsccheck.c, पूरी जाँच 161 लाइनों में tsccheck.c · 4 kB SHA-256 02eba1966a0097196acd5dfdcad9c4b315cafc1854c60f34c5b56080e6c38408।\nपाँच मिनट में बीस सैंपल, बूट के ठीक बाद:\nमाप नतीजा Clocksource सभी 20 सैंपल में tsc, कोई कर्नेल मैसेज नहीं Warps करीब 420,000 round trips में 0 CPU 0 से सबसे बुरा ऑफ़सेट 85 cycles, करीब 41 ns, कोई रुझान नहीं पूरे रन पर दर 2,096.027 MHz, पहले मिनट से 2,096.022 से 2,096.031 के अंदर हर 15-सेकंड की खिड़की में दर 2,095.943 से 2,096.104 MHz हर 15-सेकंड खिड़की में, और पूरे रन पर TSC की दर +20 ppm 0 ppm -20 ppm -40 ppm -60 ppm 0 s 60 s 120 s 180 s 240 s 300 s कर्नेल का आँकड़ा, 2,096.073 MHz 15 s: खिड़की -11.3 ppm, पूरा रन -11.3 ppm 30 s: खिड़की -61.1 ppm, पूरा रन -36.2 ppm 45 s: खिड़की -23.5 ppm, पूरा रन -32.0 ppm 60 s: खिड़की +15.0 ppm, पूरा रन -20.2 ppm 75 s: खिड़की -21.6 ppm, पूरा रन -20.5 ppm 90 s: खिड़की -21.8 ppm, पूरा रन -20.7 ppm 105 s: खिड़की -19.6 ppm, पूरा रन -20.6 ppm 120 s: खिड़की -50.5 ppm, पूरा रन -24.3 ppm 135 s: खिड़की +5.8 ppm, पूरा रन -20.9 ppm 150 s: खिड़की -20.3 ppm, पूरा रन -20.9 ppm 165 s: खिड़की -23.6 ppm, पूरा रन -21.1 ppm 180 s: खिड़की -13.7 ppm, पूरा रन -20.5 ppm 195 s: खिड़की -29.5 ppm, पूरा रन -21.2 ppm 210 s: खिड़की -22.3 ppm, पूरा रन -21.3 ppm 225 s: खिड़की -20.0 ppm, पूरा रन -21.2 ppm 240 s: खिड़की -24.7 ppm, पूरा रन -21.4 ppm 255 s: खिड़की -19.1 ppm, पूरा रन -21.3 ppm 270 s: खिड़की -22.2 ppm, पूरा रन -21.3 ppm 285 s: खिड़की -62.0 ppm, पूरा रन -23.5 ppm 300 s: खिड़की +9.2 ppm, पूरा रन -21.9 ppm एक 15 s खिड़की, 61 ppm धीमी अब तक पूरा रन 15-सेकंड खिड़की अब तक पूरा रन RTC के ख़िलाफ़ दर, कर्नेल के आँकड़े से parts per million में। अकेली खिड़कियाँ जोड़ों में उछलती हैं; पूरे रन का आँकड़ा पहले मिनट के अंदर 21 से 22 ppm धीमे पर सपाट हो जाता है और वहीं रहता है। खिड़कियाँ जितनी बुरी हैं उससे बुरी दिखती हैं। एक देर से आया RTC टिक एक खिड़की को लंबा और अगली को छोटा कर देता है, इसलिए गलतियाँ जोड़ों में आती हैं जो एक-दूसरे को काट देती हैं: 30 सेकंड पर 61 parts per million (ppm) धीमा, 60 पर 15 ppm तेज़। drift खुद को नहीं काटता। पूरे रन का आँकड़ा मुश्किल से हिला।\nपूरे रन का आँकड़ा पूरे पाँच मिनट कर्नेल के 2,096.073 MHz से 22 ppm नीचे बैठा रहता है। यह दो क्रिस्टल के बीच का फ़ासला है, और यह स्थिर रहा। chrony ने, इंटरनेट टाइम सर्वर के ख़िलाफ़ घड़ी को सँभालते हुए, इसे 16 से 19 ppm धीमा पाया10। वही दिशा, वही आकार।\nऑफ़सेट उन्हीं कुछ वैल्यू के बीच कूदते हैं, दोनों तरफ़ 10, 21 और 33 cycles, और कोई कोर दूर नहीं खिसकता। यह करीब 550 cycles के round trip का शोर है। tscsync का verify फिर भी इनमें से कुछ को BAD कहेगा। कर्नेल नहीं कहेगा।\nक्या TSC टिका रहा? हाँ, मेरे पास के हर माप पर। एक बूट के बाद पाँच मिनट अब भी कई बूट की कतार नहीं है। अगला कदम यही जाँच लंबे uptime के बाद, और फिर कुछ और रीस्टार्ट पर।\nइलाज की जगह फ़र्मवेयर में है tscsync को होना ही नहीं चाहिए। इसका अपना README यही कहता है: फ़र्मवेयर वेंडर इस तरीके और कोड को लेने के लिए स्वागत है, “which is where this should be fixed”1। Lenovo के पास सोर्स है। tscsync के लेखक के पास सिर्फ़ वही था जो उनका लैपटॉप उन्हें बताता, और 80 बूट के लॉग1।\nयही बात चुभती है। इलाज के लिए कंपनी के बाहर के एक अजनबी को मापना, डायग्नोज़ करना और रास्ता निकालना पड़ा, जबकि हार्डवेयर बेचने वाली फ़र्म ने उसे उसी एक ऑपरेटिंग सिस्टम पर जाँचा जो गड़बड़ी छिपाता है। जिस मशीन को आप इसलिए ठीक नहीं कर सकते कि उसका फ़र्मवेयर बंद है, वह असल में आपकी नहीं, शर्तों के साथ उधार पर है। signed updates वाला खुला फ़र्मवेयर इसे एक बार, ठीक से, किसी भी ऐसे व्यक्ति से ठीक करवा देता जिसे देखने की परवाह होती।\nतब तक, tscsync के लेखक का अच्छा काम। पहले measure mode, एक hang guard, आँकड़े खुले में और एक ईमानदार फ़ैसला तब भी जब वह कर्नेल से असहमत हो। low-level टूल ऐसे ही बनने चाहिए।\nउसी फ़र्मवेयर वाला हर KVM होस्ट लैपटॉप पर इसकी कीमत थोड़ी latency और थोड़ी बैटरी है। हाइपरवाइज़र पर हर गेस्ट भी यह चुकाता है, और आगे की कोई भी बात Proxmox की वजह से नहीं है। यह सब Linux कर्नेल के KVM कोड में है, इसलिए KVM पर बने हर होस्ट पर यही है, ऊपर चाहे जो हो: Proxmox VE, oVirt, OpenStack, या सादा QEMU और libvirt11।\nजब होस्ट अपना TSC खो देता है तो KVM क्या करता है KVM अपने गेस्ट को एक स्थिर घड़ी तभी देता है जब होस्ट खुद TSC पर चलता हो। कर्नेल सोर्स में master clock, यानी किसी VM के हर vCPU के लिए एक साझा समय संदर्भ, तभी चालू होता है जब host_tsc_clocksource true हो12। HPET पर गिरिए और यह बंद हो जाता है, और कई चीज़ें एक साथ बदलती हैं:\nहोस्ट TSC पर होस्ट HPET पर, TSC unstable मार्क KVM master clock12 चालू बंद एक vCPU दूसरे कोर पर जाता है12 अपडेट करने को कुछ नहीं उस VM के हर vCPU पर clock update ज़बरदस्ती, सेकंड में 10 तक गेस्ट का TSC ऑफ़सेट12 जैसा है वैसा हर बार जाने पर दोबारा लिखा, और catch-up mode में डाला गेस्ट को PVCLOCK_TSC_STABLE_BIT12 सेट सेट नहीं गेस्ट का clock_gettime()13 user space में पढ़ा एक system call, गेस्ट के बूट होते समय एक बार तय vCPUs में गेस्ट के clock reads14 स्वतंत्र हर read एक साझा global वैल्यू से जाँचा जाता है आखिरी पंक्ति वह है जो बुरी तरह बढ़ती है। stable bit के बिना गेस्ट कर्नेल भरोसा नहीं कर सकता कि हर vCPU की घड़ी बाकी से सहमत है, इसलिए हर read की तुलना “last_value, a global accumulator” से होती है और अगर वह नया हो तो atomic compare-and-exchange से बदला जाता है14। गेस्ट का हर vCPU उसी एक वैल्यू पर लिखता है। जितने ज़्यादा vCPU घड़ी पढ़ते हैं, उतना ज़्यादा वे उस पर कतार लगाते हैं।\nइसमें से कुछ भी एरर के रूप में नहीं दिखता। गेस्ट का clocksource अब भी kvm-clock पढ़ता है, और गेस्ट में कुछ भी आपको नहीं बताएगा कि वह धीमा क्यों हुआ।\nहोस्ट का clocksource KVM गेस्ट तक कैसे पहुँचता है होस्ट TSC पर होस्ट clocksource: tsc पढ़ने को एक instruction KVM master clock चालू गेस्ट के लिए stable bit सेट गेस्ट user space में पढ़ता है vDSO, करीब 28 ns होस्ट HPET पर होस्ट clocksource: hpet टाइमर डिवाइस तक एक चक्कर KVM master clock बंद stable bit नहीं, हर vCPU move पर update गेस्ट system call करता है एक साझा वैल्यू, करीब 190 ns Proxmox VE, oVirt, OpenStack या सादे QEMU और libvirt पर वही कर्नेल कोड होस्ट का clocksource तय करता है कि हर गेस्ट को क्या मिलता है। TSC पर गेस्ट घड़ी user space में पढ़ते हैं। HPET पर KVM अपना master clock छोड़ देता है, हर vCPU move clock updates करवाता है, और हर गेस्ट clock read एक system call बन जाता है जिसे उस एक वैल्यू से जाँचा जाता है जो हर vCPU बाँटता है। इसकी कीमत, मापकर मैंने इसे सिद्धांत पर छोड़ने के बजाय इसी लैपटॉप पर मापा। होस्ट का clocksource चलते-चलते बदला जा सकता है, जो KVM का master clock वैसे ही बंद कर देता है जैसे बूट-टाइम fallback करता है। एक फेंकने वाले गेस्ट ने 4 vCPUs के साथ होस्ट का अपना कर्नेल बूट किया, और एक छोटा initramfs जिसका अकेला प्रोग्राम clock_gettime() का समय मापता है। हर तरीके से दो रन, पहले होस्ट, फिर गेस्ट:\nहर clock read के नैनोसेकंड, TSC पर होस्ट बनाम HPET पर होस्ट होस्ट स्केल 0 से 2,400 ns होस्ट, 1 थ्रेड, होस्ट TSC पर: 24 ns 24 ns होस्ट, 1 थ्रेड, होस्ट HPET पर: 1,542 ns 1,542 ns 1 थ्रेड होस्ट, सभी 8 कोर, होस्ट TSC पर: 29 ns 29 ns होस्ट, सभी 8 कोर, होस्ट HPET पर: 1,922 ns 1,922 ns सभी 8 कोर गेस्ट, 4 vCPU स्केल 0 से 300 ns गेस्ट, 4 vCPU, 1 vCPU, होस्ट TSC पर: 28 ns 28 ns गेस्ट, 4 vCPU, 1 vCPU, होस्ट HPET पर: 187 ns 187 ns 1 vCPU गेस्ट, 4 vCPU, सभी 4 vCPU, होस्ट TSC पर: 31 ns 31 ns गेस्ट, 4 vCPU, सभी 4 vCPU, होस्ट HPET पर: 244 ns 244 ns सभी 4 vCPU होस्ट clocksource tsc होस्ट clocksource hpet हर clock_gettime() कॉल के नैनोसेकंड, हर तरीके के दो रन का औसत। होस्ट HPET पर 61 से 73 गुना धीमा होता है; गेस्ट एक vCPU के साथ करीब 7 गुना और चारों के साथ 8 गुना। पैनल अलग-अलग स्केल पर हैं, क्योंकि होस्ट की HPET वाली पट्टियाँ गेस्ट वाली को सपाट कर देतीं। गेस्ट HPET की कीमत सीधे नहीं चुकाता, क्योंकि kvm-clock नीचे अब भी TSC पढ़ता है। वह जो खोता है वह user-space read और vCPUs के बीच की स्वतंत्रता है, और अकेले उसी से यह सात गुना धीमा है। चारों vCPU एक साथ पढ़ें तो कीमत और बढ़ती है, जो वही साझा global वैल्यू काम कर रही है। 32 या 64 vCPU वाला गेस्ट उस पर और ज़्यादा कतार लगाता है। मैंने वह नहीं मापा।\nइस पर एक आँकड़ा रखिए। जो गेस्ट एक vCPU पर सेकंड में दस लाख बार घड़ी पढ़ता है, वह स्वस्थ होस्ट पर उस vCPU का 2.8% इसमें खर्च करता है, और इस वाले पर 19%। डेटाबेस, Java Virtual Machine (JVM) और हर वह चीज़ जो अपने काम पर टाइमस्टैंप लगाती है, घड़ी बहुत पढ़ती है।\nयह रन इसे कम करके भी आँकता है। clocksource हाथ से बदलने पर master clock बंद होता है लेकिन TSC unstable मार्क नहीं होता, इसलिए ऊपर की टेबल वाले offset rewrites कभी चले ही नहीं। इस E595 पर बूट-टाइम fallback इसे unstable मार्क करता है, और उस हालत वाला होस्ट दोनों चुकाता है।\n\u0026#8615; clockbench.c, बेंचमार्क, होस्ट पर या गेस्ट के init के रूप में चलाइए clockbench.c · 2 kB होस्ट की जाँच, और सीमाएँ गेस्ट की घड़ियाँ आख़िर नाज़ुक क्यों होती हैं, यह मैंने ptp_kvm वाली पोस्ट में बताया था; यह वही समस्या है जो नीचे से आ रही है। होस्ट की जाँच कीजिए, गेस्ट की नहीं:\njournalctl -k -b | grep -iE \u0026#39;TSC warp|TSC unstable\u0026#39; cat /sys/devices/system/clocksource/clocksource0/current_clocksource tscsync GRUB या systemd-boot से चलता है1, जो ज़्यादातर KVM होस्ट को कवर करता है। Proxmox VE GRUB इस्तेमाल करता है, या ZFS root और Secure Boot बंद वाले UEFI इंस्टॉल पर systemd-boot15। फिर भी, किसी production node के पास ले जाने से पहले सीमाओं के बारे में ईमानदार रहिए।\nसीमा इसके बारे में क्या करें सिर्फ़ AMD Zen और Hygon1 TSC_ADJUST वाले Intel होस्ट कर्नेल पहले से ठीक कर देता है इसकी हार्डवेयर लिस्ट की हर मशीन लैपटॉप है4 सर्वर को बिना टेस्ट हुआ मानिए और रिपोर्ट कीजिए sync mode अपनी लिस्ट से बाहर के हार्डवेयर को मना करता है जब तक आप opt in न करें1 override करने से पहले वजह पढ़िए पहला sync बूट अटक सकता है पहले measure mode, out-of-band console खुला, एक बार में एक node BIOS अपडेट गड़बड़ी ठीक कर सकता है उसके बाद वापस measure पर रखिए और जाँचिए1 साफ़ sync के बाद भी watchdog से TSC जा सकता है हर बूट के बाद current_clocksource जाँचिए; अगर watchdog वजह है तो tsc=nowatchdog, फिर खुद मापिए जो फ़र्मवेयर गड़बड़ी एक लैपटॉप की थोड़ी बैटरी खाती है, वह एक हाइपरवाइज़र से उसके चलाए हर गेस्ट का एक टुकड़ा लेती है, हर उस सेकंड जब वह चालू है, और गेस्ट के मालिकों के पास इसे देखने का कोई रास्ता नहीं। यही वजह है कि आप जो भी होस्ट चलाते हैं, किसी ने भी बनाया हो, हर एक पर current_clocksource जाँचिए।\ntscsync README — यह क्या करता है, HPET clock-read की कीमत, tsc=reliable इलाज क्यों नहीं है, सुरक्षा मॉडल, और UNSURE नियम।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kernel/tsc_sync.c — TSC_ADJUST का इस्तेमाल, warp test और “Measured %Ld cycles TSC warp between CPUs, turning off TSC clock.” मैसेज।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ntscsync — docs/DESIGN.md — AMD Zen में IA32_TSC_ADJUST नहीं है, tsc=directsync upstream ने ठुकराया, Windows बूट पर TSC खुद लिखता है, और Legion Pro 5 पर फ़र्मवेयर समय के साथ warp का बढ़ना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ntscsync — docs/HARDWARE.md — टेस्ट की गई मशीनें, -28 से -42 cycles पर मान लिए गए IdeaPad 5 के कोर, और A485, E495 और T14s Gen 1 पर बताए गए BIOS सुधार।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLenovo — BIOS Update Utility readme, ThinkPad E495/E595, version 1.30 — एक पैकेज पर दोनों मॉडल, 1.30 (14 मई 2024) तक का वर्ज़न इतिहास, और उसकी change list।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — kernel/time/clocksource.c — clocksource watchdog, उसकी interval तुलना और “Marking clocksource %s unstable due to frequency skew” मैसेज।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — kernel-parameters — tsc=reliable runtime verification और बूट-टाइम stability checks बंद करता है; tsc=nowatchdog सिर्फ़ clocksource watchdog बंद करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ntscsync issue #1 — Lenovo ThinkPad E595 — 1.28 और 1.30 की रिपोर्ट, watchdog विश्लेषण और सुझाए गए बदलाव।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — Real Time Clock (RTC) Drivers for Linux — “The clock can also be set to generate an interrupt upon every clock update, thus generating a 1Hz signal”, /dev/rtc से पढ़ा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nchrony — chronyc manual — tracking: “The \u0026lsquo;frequency\u0026rsquo; is the rate by which the system\u0026rsquo;s clock would be wrong if chronyd was not correcting it.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKVM — Management Tools — Proxmox VE, oVirt, OpenStack और libvirt-आधारित टूल, सब KVM संभालते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kvm/x86.c — pvclock_update_vm_gtod_copy(): “If the host uses TSC clock, then passthrough TSC as stable to the guest”, और PVCLOCK_TSC_STABLE_BIT सिर्फ़ master clock के साथ सेट होता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kernel/kvmclock.c — गेस्ट VDSO_CLOCKMODE_PVCLOCK user-space clock तभी चालू करता है जब PVCLOCK_TSC_STABLE_BIT सेट हो।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — arch/x86/kernel/pvclock.c — PVCLOCK_TSC_STABLE_BIT के बिना हर read एक atomic compare-and-exchange के साथ “last_value, a global accumulator” से जाँचा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE — Host Bootloader — डिफ़ॉल्ट रूप से GRUB, ZFS root और Secure Boot बंद वाले UEFI इंस्टॉल के लिए systemd-boot।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/hardware/sorting-tsc-when-your-firmware-is-broken/","summary":"चार महीने तक हर बूट पर मेरे ThinkPad E595 ने Linux को एक CPU कोर बाकी सात से तीन सेकंड पीछे सौंपा, और कर्नेल ने TSC छोड़कर HPET पकड़ लिया। चेतावनी का मतलब क्या है, AMD Zen मशीन के पास Linux के अंदर से इसे ठीक करने का कोई रास्ता क्यों नहीं, 40 बूट का journal फ़र्मवेयर के बारे में क्या कहता है, tsc=reliable गलत जवाब क्यों है, और tscsync कर्नेल के देखने से पहले ही UEFI में काउंटर कैसे मापता और खिसकाता है, उस एक कोर समेत जिसे उसने BAD कहा और Linux ने फिर भी मान लिया। BIOS 1.30 के लिए अपडेट: यह ऑफ़सेट ठीक नहीं करता, और tscsync के कोर मिला देने के बाद भी दो बूट पर कर्नेल के clocksource watchdog ने TSC छोड़ दिया। tsc=nowatchdog के साथ यह टिका रहा, और real-time clock के ख़िलाफ़ पाँच मिनट की जाँच में, सोर्स समेत, न कोई warp मिला न कोई drift। आखिर में, किसी भी KVM हाइपरवाइज़र पर, Proxmox हो या न हो, fallback क्या करता है: master clock चला जाता है, गेस्ट अपना तेज़ clock read खो देते हैं, और इस लैपटॉप पर गेस्ट का clock read सात गुना धीमा निकला।","title":"फ़र्मवेयर टूटा हो तो TSC कैसे ठीक करें"},{"content":"कीज़ की जगह सर्टिफ़िकेट क्यों SSH पहली बार इस्तेमाल पर भरोसा कर लेता है। किसी नई मशीन से जुड़िए, वह आपको एक फ़िंगरप्रिंट दिखाता है और पूछता है कि क्या आपको यकीन है। कोई जाँच नहीं करता। हर कोई yes टाइप कर देता है। यह वही आदत है जो ब्राउज़र की चेतावनी पर क्लिक करके आगे बढ़ जाने की है, और ठीक यही बीच में बैठी मशीन चाहती है कि आप करें।\nदूसरी दिशा भी इससे बेहतर नहीं है। हर सर्वर हर यूज़र के लिए एक authorized_keys फ़ाइल रखता है, और हर फ़ाइल बढ़ती जाती है। कीज़ जोड़ी जाती हैं और कभी हटाई नहीं जातीं। कोई नौकरी छोड़ता है, और उसकी की किसी ऐसे बॉक्स पर पड़ी रहती है जिसे कोई याद नहीं रखता, उस दिन तक जब तक उससे फ़र्क न पड़े। किसी सर्वर को दोबारा बनाइए और हर क्लाइंट चिल्लाता है कि होस्ट की बदल गई है, तो लोग वह चेतावनी भी डिलीट करना सीख जाते हैं।\nSSH सर्टिफ़िकेट अथॉरिटी दोनों को खत्म कर देती है। CA हर होस्ट की की साइन करता है, और क्लाइंट फ़िंगरप्रिंट की सूची पर नहीं, CA पर भरोसा करते हैं। CA हर यूज़र की की कुछ घंटों के लिए साइन करता है, और सर्वर कीज़ की सूची पर नहीं, CA पर भरोसा करते हैं। पहली बार जुड़ने पर स्वीकार करने को कुछ नहीं, किसी के जाने पर साफ़ करने को कुछ नहीं, और एक यूज़र सर्टिफ़िकेट जो कल तक अपने आप खत्म हो जाता है।\nयह step-ca के X.509 वाले हिस्से से अलग सेटअप है, जो Your Own Certificate Authority: step-ca In A Container में कवर है, और इसीलिए इसकी अपनी पोस्ट है। वही कंटेनर, अलग कीज़, हर मशीन पर अलग फ़ाइलें। यहाँ सब कुछ step-ca 0.30.2 और OpenSSH 10.0 के साथ एक Podman pod में चलाया गया।\nCA के बिना step-ca के साथ क्लाइंट किसी नए सर्वर से मिलता है फ़िंगरप्रिंट दिखाता है, आप yes टाइप करते हैं होस्ट सर्टिफ़िकेट को CA से जाँचता है, कुछ नहीं पूछता सर्वर दोबारा बनाया जाता है हर क्लाइंट चेतावनी देता है कि की बदल गई नई की साइन कीजिए, क्लाइंट को पता भी नहीं चलता किसी यूज़र को एक्सेस मिलता है उसकी की हर सर्वर पर authorized_keys में जाती है CA उसकी की साइन करता है, हर सर्वर उसे मान लेता है कोई यूज़र चला जाता है हर सर्वर पर उसकी की ढूँढकर डिलीट कीजिए साइन करना बंद कीजिए; उसका सर्टिफ़िकेट 16 घंटे में बेकार हर सर्वर क्या रखता है हर यूज़र के लिए एक authorized_keys एक CA पब्लिक की कौन किस पर साइन करता है, और कौन किस पर भरोसा step-ca host CA key user CA key क्लाइंट user cert, 16 घंटे host CA पर भरोसा सर्वर host cert, 30 दिन user CA पर भरोसा user key पर साइन host key पर साइन ssh, कोई सवाल नहीं हर एक दूसरे का cert जाँचता है CA दोनों तरफ़ साइन करता है। क्लाइंट को सिर्फ़ होस्ट CA की पर भरोसा करना है, और सर्वर को सिर्फ़ यूज़र CA की पर। कोई भी दूसरे की कीज़ की सूची नहीं रखता। SSH CA चालू करना SSH कीज़ step-ca के पहले सेटअप पर बनती हैं, वरना कभी नहीं। पहली बार शुरू करते समय DOCKER_STEPCA_INIT_SSH=true सेट कीजिए1, और लॉग में दो अतिरिक्त कीज़ दिखती हैं:\nSSH Host CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... SSH User CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... की क्या साइन करती है कौन इस पर भरोसा करता है होस्ट CA हर सर्वर की होस्ट की हर क्लाइंट, known_hosts में यूज़र CA हर व्यक्ति की लॉगिन की हर सर्वर, sshd_config में यह एक sshpop प्रोविज़नर भी जोड़ता है, जिसकी वजह से होस्ट बाद में अपना सर्टिफ़िकेट खुद रिन्यू कर पाता है। अगर CA पहले से SSH के बिना चल रहा है, तो कोई स्विच नहीं है जिसे दबाया जाए। वह एक नया CA है।\nहोस्ट को साइन करना सर्वर की मौजूदा होस्ट की लीजिए, उसे साइन कीजिए, और सर्टिफ़िकेट सर्वर को वापस दीजिए:\nstep ssh certificate --host --sign \\ --provisioner admin --provisioner-password-file prov-pass \\ nas.home.example ssh_host_ecdsa_key.pub क्रम मायने रखता है। जब प्रोविज़नर वाले फ़्लैग होस्टनेम और की फ़ाइल के बाद थे, तो step ने मना कर दिया:\ntoo many positional arguments were provided in \u0026#39;step ssh certificate \u0026lt;key-id\u0026gt; \u0026lt;key-file\u0026gt;\u0026#39; हर फ़्लैग पहले रखिए और यह साइन कर देता है। सर्टिफ़िकेट, जैसा ssh-keygen -L उसे पढ़ता है:\nफ़ील्ड मान टाइप ecdsa-sha2-nistp256-cert-v01@openssh.com host certificate Key ID nas.home.example Principals nas.home.example वैधता 30 दिन, 2026-10-09T18:34:30 से 2026-11-08T17:35:30 तक प्रिंसिपल वह नाम है जिससे क्लाइंट को जुड़ना होगा। किसी ऐसे नाम से जुड़िए जो सर्टिफ़िकेट पर नहीं है और क्लाइंट उसे स्वीकार नहीं करेगा, इसलिए होस्ट जिस-जिस नाम से जवाब देता है, हर नाम साइन कीजिए।\nसर्वर sshd_config में दो लाइनें2:\nHostCertificate /etc/ssh/ssh_host_ecdsa_key-cert.pub TrustedUserCAKeys /etc/ssh/ssh_user_ca_key.pub HostCertificate क्लाइंट को होस्ट सर्टिफ़िकेट देता है, और उसकी की \u0026ldquo;must match a private host key already specified\u0026rdquo;2। TrustedUserCAKeys यूज़र CA की पब्लिक की है, \u0026ldquo;trusted to sign user certificates for authentication\u0026rdquo;2। रीस्टार्ट से पहले sshd -t चलाइए। किसी भी पाथ में टाइपो हो तो sshd Could not load host certificate कहता है, और यह अभी पता चलना कहीं बेहतर है बजाय किसी लॉक हो चुके सेशन से।\nटेस्ट सर्वर पर कोई authorized_keys है ही नहीं। ls /home/damien/.ssh/authorized_keys का जवाब No such file or directory आता है, और नीचे वाले लॉगिन फिर भी काम करते हैं।\nयूज़र CA की पेयर बनाता है और एक ही बार में साइन कर देता है:\nstep ssh certificate damien id_ecdsa \\ --provisioner admin --provisioner-password-file prov-pass फ़ील्ड मान टाइप user certificate Principals damien वैधता 16 घंटे Extensions permit-agent-forwarding, permit-port-forwarding, permit-X11-forwarding, permit-pty, permit-user-rc सोलह घंटे ही असली बात है। यह एक कामकाजी दिन को कवर करता है और रात में खत्म हो जाता है। किसी यूज़र को हटाना ज़्यादातर बस इतना है कि कल उसके लिए साइन न किया जाए।\nक्लाइंट known_hosts में एक लाइन उन सारे फ़िंगरप्रिंट की जगह ले लेती है जो वह वरना जमा करता3:\n@cert-authority *.home.example ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAy... इसका मतलब है: home.example के नीचे का कोई भी होस्ट जिसका सर्टिफ़िकेट इस की से साइन हुआ है, असली है। @cert-authority मार्कर ही इसे किसी एक होस्ट की की के बजाय CA लाइन बनाता है।\nटेस्ट ने क्या दिखाया चारों टेस्ट एक ऐसे क्लाइंट से जिसके पास यूज़र सर्टिफ़िकेट और वह एक known_hosts लाइन के सिवा कुछ नहीं था, StrictHostKeyChecking=yes के साथ, ताकि मौके पर कुछ भी स्वीकार न हो सके:\nटेस्ट नतीजा साइन की हुई की, अपने सर्टिफ़िकेट के साथ, damien के रूप में logged in as damien, exit 0 वही की, सर्टिफ़िकेट हटाकर Permission denied (publickey,password,keyboard-interactive) सर्टिफ़िकेट से root के रूप में लॉगिन Permission denied: सर्टिफ़िकेट में सिर्फ़ damien का नाम है होस्ट CA लाइन के बिना क्लाइंट Host key verification failed. तीसरा वही है जो लोगों से छूट जाता है। सर्टिफ़िकेट बॉक्स का हर अकाउंट नहीं खोलता, सिर्फ़ वे प्रिंसिपल जो उसमें लिखे हैं। किसी के authorized_keys में रखी की ऐसा नहीं कर सकती।\nरिन्यू करना होस्ट अपना सर्टिफ़िकेट उसी की से रिन्यू करता है जो उसके पास पहले से है। यह sshpop प्रोविज़नर है, जो \u0026ldquo;allows a client to renew, revoke, or rekey an SSH certificate using that certificate for authentication with the CA\u0026rdquo;4। कोई पासवर्ड नहीं5:\nstep ssh renew --force ssh_host_ecdsa_key-cert.pub ssh_host_ecdsa_key सीरियल कब तक वैध साइन किया 15166325869329416997 2026-11-08 17:35:30 रिन्यू किया 6678957789797316768 2026-11-08 17:35:59 नया सीरियल और ताज़ा 30 दिन। इसे हफ़्ते वाले टाइमर पर लगाइए और होस्ट कभी एक्सपायर नहीं होगा। इसके बाद sshd रीलोड कीजिए, वरना पुराना सर्टिफ़िकेट मेमोरी में बना रहता है।\nयूज़र दोबारा माँगकर रिन्यू करते हैं। दिन में एक step ssh certificate, या दिन के पहले लॉगिन पर, और पूरा काम बस इतना ही है।\nयह कहाँ कमज़ोर पड़ता है स्थिति क्या होता है क्या करें CA डाउन मौजूदा सर्टिफ़िकेट चलते रहते हैं; किसी को नया नहीं मिलता CA को ऐसी चीज़ पर चलाइए जो चालू रहे; यूज़र के पास 16 घंटे की गुंजाइश है होस्ट सर्टिफ़िकेट एक्सपायर क्लाइंट होस्ट को मना कर देते हैं, जैसे वह कोई अजनबी हो रिन्यूअल टाइमर, और उसके बाद sshd रीलोड किसी यूज़र को कल नहीं, आज ही जाना है उसका सर्टिफ़िकेट एक्सपायर होने तक काम करता है sshd_config में RevokedKeys रद्द कीज़ की सूची लेता है2 होस्टनेम प्रिंसिपल में नहीं क्लाइंट होस्ट को मना कर देता है जिस-जिस नाम से वह जवाब देता है, हर नाम साइन कीजिए सेटअप पर SSH CA नहीं बना इसे जोड़ने का कोई तरीका नहीं नया CA, SSH चालू करके सेटअप CA की SSH कीज़ चोरी जिसके पास वे हैं वह कहीं भी लॉगिन कर सकता है और कोई भी होस्ट बन सकता है CA को उसके अपने बॉक्स पर रखिए, बैकअप के साथ, हो सके तो ऑफ़लाइन आखिरी वाला ही सौदा है। हर authorized_keys फ़ाइल अपना छोटा सा जोखिम थी। अब एक बड़ा जोखिम है, एक जगह पर। यह बेहतर है, क्योंकि एक जगह पर नज़र रखी जा सकती है और उसे कसकर बंद किया जा सकता है, लेकिन सिर्फ़ तब जब कोई ऐसा करे।\nभरोसा वहाँ जहाँ उसे जाँचा जा सके फ़िंगरप्रिंट वाले प्रॉम्प्ट और authorized_keys फ़ाइल में एक बात साझा है। दोनों किसी इंसान से बिना किसी जानकारी के भरोसे का फ़ैसला करने को कहते हैं, हर दिन, हमेशा। लोग इसमें अच्छे नहीं हैं और कभी होंगे भी नहीं, तो वे फ़ैसला करना छोड़ देते हैं और yes टाइप करने लगते हैं।\nCA उस फ़ैसले को एक जगह ले जाता है, एक बार, जहाँ उसे ठीक से किया जा सके। पूरा विचार यही है, और यही हर उस स्टैंडर्ड के पीछे है जो रखने लायक है: सावधानी वाला काम एक बार कीजिए, उसे लिख लीजिए, और लोगों से हफ़्ते में सौ बार उसे दिमाग में करने को कहना बंद कीजिए। मशीन सिग्नेचर जाँचती है। आप CA जाँचते हैं। यह काम का ऐसा बँटवारा है जो टिकता है।\nsmallstep/certificates — docker/entrypoint.sh — DOCKER_STEPCA_INIT_SSH=true से step ca init में --ssh जुड़ जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenBSD manual — sshd_config(5) — HostCertificate: \u0026ldquo;The certificate\u0026rsquo;s public key must match a private host key already specified by HostKey\u0026rdquo;; TrustedUserCAKeys: \u0026ldquo;public keys of certificate authorities that are trusted to sign user certificates for authentication\u0026rdquo;; RevokedKeys: \u0026ldquo;Keys listed in this file will be refused for public key authentication\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenBSD manual — sshd(8), SSH_KNOWN_HOSTS FILE FORMAT — “@cert-authority” मार्कर \u0026ldquo;to indicate that the line contains a certification authority (CA) key\u0026rdquo;।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Provisioners, SSHPOP — \u0026ldquo;An SSHPOP provisioner allows a client to renew, revoke, or rekey an SSH certificate using that certificate for authentication with the CA.\u0026rdquo;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step ssh renew — होस्ट सर्टिफ़िकेट रिन्यू करने के लिए इस्तेमाल हुआ कमांड।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/certificates/step-ca-ssh-certificates/","summary":"step-ca 0.30.2 को SSH सर्टिफ़िकेट अथॉरिटी के रूप में इस्तेमाल करना, OpenSSH 10.0 के साथ टेस्ट किया हुआ। सर्टिफ़िकेट authorized_keys और पहली बार के भरोसे से बेहतर क्यों हैं, step-ca के पहले सेटअप पर SSH CA चालू करना, होस्ट की साइन करना (और आर्ग्युमेंट का वह क्रम जिस पर यह अटकता है), sshd_config की दो लाइनें और known_hosts में अकेली @cert-authority लाइन, 16 घंटे का यूज़र सर्टिफ़िकेट, चार लॉगिन टेस्ट जिनमें गलत यूज़र और अविश्वसनीय होस्ट भी हैं, sshpop से होस्ट सर्टिफ़िकेट रिन्यू करना, और यह कहाँ कमज़ोर पड़ता है।","title":"step-ca से साइन हुए SSH लॉगिन: अब authorized_keys की ज़रूरत नहीं"},{"content":"फ़ोन कठिन मामला क्यों हैं step-ca के defaults servers के लिए बने हैं। Server हर सुबह खुद को renew करता है, और आपकी अपनी Certificate Authority: Container में step-ca दिखाता है कि यह ACME clients और हर उस चीज़ के लिए कैसे काम करता है जो step ca renew चला सकती है। वह पोस्ट CA शुरू करना, उसके दो passwords और root पर भरोसा करना भी बताती है, और यह पोस्ट वहीं से आगे बढ़ती है। Home Assistant app के लिए client certificate रखने वाला फ़ोन कुछ भी renew नहीं कर सकता, और जब कोई फ़ोन खो जाए तो आपको उसे आज ही बाहर करना होता है, उसका certificate ख़त्म होने पर नहीं। पाँच defaults रास्ते में खड़े हैं, और उनमें से कोई शोर नहीं मचाता। वे बस आपको ऐसे certificates देते हैं जो कल मर जाते हैं और ऐसी revocation list जो सबको ठुकरा देती है।\nDefault यह फ़ोन के साथ क्या करता है उपाय Certificates ज़्यादा से ज़्यादा 24 घंटे चलते हैं फ़ोन का certificate कल मर जाता है, और Home Assistant app उसे renew नहीं कर सकता ca.json में maxTLSCertDuration बढ़ाएँ CRL बंद खोए फ़ोन को revoke करने से कहीं कुछ नहीं बदलता crl block चालू करें CRL का scope certificates से मेल नहीं खाता nginx हर फ़ोन ठुकराता है, अच्छे वाले भी idpURL सेट करें और crlDistributionPoints वाला template जोड़ें Intermediate के लिए कोई CRL नहीं nginx फिर भी हर फ़ोन ठुकराता है साल में एक बार एक ख़ाली root CRL sign करें CRL 24 घंटे चलता है जब यह ख़त्म होता है, nginx फिर से हर फ़ोन ठुकराता है इसे timer पर refresh करें Cloudflare अपने free plan पर इसका CA वाला आधा हिस्सा आपके लिए करता है, जैसा Cloudflare वाला संस्करण दिखाता है। खुद करने का मतलब है पाँचों करना। नीचे के tests Home Assistant CA नाम के CA पर चले, जो output में दिखने वाला नाम है।\nपहला default: Certificates एक दिन चलते हैं एक साल माँगिए और CA मना कर देता है:\nThe request was forbidden by the certificate authority: requested duration of 8760h1m0s is more than the authorized maximum certificate duration of 24h1m0s. Servers और ACME clients के लिए यह सही default है, जो किसी के ध्यान दिए बिना दिन भर renew करते हैं। फ़ोन अपवाद है। Home Assistant app के पास अपना client certificate renew करने का कोई तरीका नहीं, तो 24 घंटे के certificate का मतलब है हर दिन हर फ़ोन तक चलकर जाना।\nValidity की अवधि एक setting है, और वह step-ca के अपने config में रहती है। ca.json में हर provisioner claims लेता है1:\n\u0026#34;claims\u0026#34;: { \u0026#34;maxTLSCertDuration\u0026#34;: \u0026#34;8760h\u0026#34;, \u0026#34;defaultTLSCertDuration\u0026#34;: \u0026#34;24h\u0026#34; } Claim मतलब सेट किया maxTLSCertDuration सबसे लंबा certificate जो यह provisioner sign करेगा 8760h, एक साल defaultTLSCertDuration बिना माँगे जो मिलता है 24h पर छोड़ा, ताकि एक साल हमेशा सोच-समझकर चुना जाए minTLSCertDuration सबसे छोटा जो यह sign करेगा छुआ नहीं Container restart कीजिए और एक साल पास हो जाता है। एक साल फ़ैसला है, नियम नहीं। छोटा मतलब चोरी हुए certificate के काम आने का कम समय, और उन्हें दोबारा install करने के लिए घर के ज़्यादा चक्कर।\nदूसरा default: CRL बंद है Certificate revocation list (CRL), CA की sign की हुई उन certificates की सूची है जो उसने वापस ले लिए हैं। इसी से खोया फ़ोन उसके certificate के expire होने से पहले बाहर होता है, और step-ca बिना कहे इसे नहीं बनाता। Docs इस feature को experimental बताते हैं1।\n\u0026#34;crl\u0026#34;: { \u0026#34;enabled\u0026#34;: true, \u0026#34;generateOnRevoke\u0026#34;: true, \u0026#34;cacheDuration\u0026#34;: \u0026#34;24h\u0026#34; } Field क्या करता है Default enabled CRL बनाता ही है बंद generateOnRevoke certificate revoke होते ही सूची दोबारा बनाता है बंद cacheDuration हर सूची कितनी देर valid रहती है 24 घंटे1 idpURL वह URL जिसे सूची कहती है कि वह cover करती है CA का अपना नाम और /1.0/crl2 वे 24 घंटे याद रखिए। वे लौटकर आते हैं।\nतीसरा default: ऐसा CRL जिसे कुछ भी स्वीकार नहीं करेगा CRL चालू करके, एक फ़ोन revoke कीजिए और दोनों फ़ोनों को उसके सामने जाँचिए:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl.pem -crl_check phone1.crt phone2.crt CN=phone1 error 44 at 0 depth lookup: different CRL scope error phone1.crt: verification failed CN=phone2 error 44 at 0 depth lookup: different CRL scope error phone2.crt: verification failed दोनों फ़ेल, अच्छा फ़ोन भी। वह सूची nginx के आगे रखिए और कोई अंदर नहीं आता।\nसूची खुद बताती है क्यों। step-ca हर CRL पर एक critical Issuing Distribution Point लगाता है, जो कहता है “यह सूची उन certificates को cover करती है जो यहाँ इशारा करते हैं”। उसके जारी किए certificates कहीं इशारा नहीं करते:\n$ openssl crl -in crl.pem -noout -text X509v3 Issuing Distribution Point: critical Full Name: URI:https://localhost/1.0/crl $ openssl x509 -in phone1.crt -noout -ext crlDistributionPoints No extensions in certificate OpenSSL ऐसी सूची लागू नहीं करेगा जिसका scope certificate से मेल न खाए। तो यह बंद होकर फ़ेल होता है। जो सही है, और किसी के काम का नहीं।\nCRL कहता है कि वह cover करता है Certificate कहता है कि उसका CRL यहाँ है नतीजा जैसा आता है https://localhost/1.0/crl, critical कहीं नहीं different CRL scope, सब मना idpURL और एक template http://ca.home.example/1.0/crl http://ca.home.example/1.0/crl अच्छे फ़ोन पास, revoked फ़ेल Default URL वह भी नहीं जिस पर CA सेवा देता है। step-ca का source यह कहता भी है: “this is currently using the port 443 by default”2। दो settings इसे ठीक करती हैं, और दोनों में वही URL होना चाहिए। idpURL, ca.json के crl block में जाता है, और provisioner पर एक template हर certificate में मेल खाता crlDistributionPoints लगाता है3:\n{ \u0026#34;subject\u0026#34;: {{ toJson .Subject }}, \u0026#34;sans\u0026#34;: {{ toJson .SANs }}, \u0026#34;keyUsage\u0026#34;: [\u0026#34;digitalSignature\u0026#34;], \u0026#34;extKeyUsage\u0026#34;: [\u0026#34;serverAuth\u0026#34;, \u0026#34;clientAuth\u0026#34;], \u0026#34;crlDistributionPoints\u0026#34;: [\u0026#34;http://ca.home.example/1.0/crl\u0026#34;] } \u0026#34;options\u0026#34;: { \u0026#34;x509\u0026#34;: { \u0026#34;templateFile\u0026#34;: \u0026#34;templates/leaf-crl.tpl\u0026#34; } } फ़ोनों के certificates दोबारा जारी कीजिए, क्योंकि सिर्फ़ नए certificates में यह field होता है, और वही जाँच सही जवाब देती है:\nCN=phone2 error 23 at 0 depth lookup: certificate revoked error phone2.crt: verification failed phone1.crt: OK Root को भी CRL चाहिए उस जाँच ने सिर्फ़ फ़ोन का certificate देखा। nginx पूरी chain देखता है। यह OpenSSL का CRL_CHECK_ALL flag सेट करता है4, और इसका documentation साफ़ कहता है: “When using intermediate certificates, their CRLs should be specified in the same file”5। step-ca अपने intermediate से certificates जारी करता है और सिर्फ़ intermediate के revocations की सूची बनाता है। कुछ भी नहीं बताता कि intermediate खुद अब भी ठीक है या नहीं:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl.pem -crl_check_all phone1.crt O=Home Assistant CA, CN=Home Assistant CA Intermediate CA error 3 at 1 depth lookup: unable to get certificate CRL कौन सा CRL किस certificate को cover करता है Root CA जैसा है वैसे भरोसेमंद Intermediate हर cert sign करता है phone1 ठीक phone2 revoked Server ha.example.com sign करता है nginx हर कड़ी जाँचता है बिना CRL वाली कड़ी मना Root CRL 365 दिन, OpenSSL से step-ca CRL 24 घंटे, phone2 दर्ज cover करता है cover करता है Root के नीचे हर कड़ी को अपने ऊपर वाले certificate से एक CRL चाहिए। step-ca नीचे की पंक्ति cover करता है। जब तक आप खुद root CRL sign न करें, intermediate को कुछ भी cover नहीं करता। उपाय root का sign किया एक CRL है जो कुछ भी revoke नहीं करता। OpenSSL इसे root key और CA की अपनी password file से बनाता है, और यह एक साल चल सकता है क्योंकि root रोज़-रोज़ कुछ revoke नहीं करता:\n[ca] default_ca = root [root] database = index.txt crlnumber = crlnumber default_md = sha256 default_crl_days = 365 private_key = root_ca_key certificate = root_ca.crt crl_extensions = crl_ext [crl_ext] authorityKeyIdentifier = keyid:always touch index.txt \u0026amp;\u0026amp; echo 1000 \u0026gt; crlnumber openssl ca -config root-crl.cnf -gencrl -passin file:password -out root.crl.pem दोनों सूचियाँ एक file में, और पूरी chain पास होती है:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl-chain.pem -crl_check_all phone1.crt phone2.crt CN=phone2 error 23 at 0 depth lookup: certificate revoked error phone2.crt: verification failed phone1.crt: OK एक साल बाद की तारीख़ डायरी में लिख लीजिए। जब root CRL ख़त्म होगा, हर फ़ोन फिर बाहर हो जाएगा।\nCRL प्रकाशित करना CRL को वहाँ रहना होगा जहाँ हर certificate का URL इशारा करता है। CA पर नहीं।\nफ़ैसला क्यों आगे एक web server, port 9000 नहीं Port 9000, step-ca की पूरी API है, signing समेत। सूची के सिवा किसी को उसमें से कुछ नहीं चाहिए सादा HTTP, HTTPS नहीं RFC 5280 कहता है कि distribution point “SHOULD include at least one LDAP or HTTP URI”6। HTTPS पर लाने के लिए certificate जाँच चाहिए, जिसके लिए सूची चाहिए। HTTP यह चक्र तोड़ता है छेड़छाड़ की चिंता नहीं सूची signed है। एक byte बदलिए और signature फ़ेल सिर्फ़ दो CRL paths जवाब देते हैं बाकी सब 404 है दोनों web servers यह कुछ लाइनों में करते हैं, और दोनों सूची को step-ca से सीधे आगे भेजते हैं और root CRL को file की तरह परोसते हैं:\nserver { listen 80; listen [::]:80; server_name ca.home.example; location = /1.0/crl { proxy_pass https://127.0.0.1:9000; proxy_ssl_trusted_certificate /etc/step/root_ca.crt; proxy_ssl_verify on; proxy_ssl_name localhost; } location = /root.crl { alias /etc/step/root.crl; default_type application/pkix-crl; } location / { return 404; } } http://ca.home.example { handle /1.0/crl { reverse_proxy https://127.0.0.1:9000 { transport http { tls_trust_pool file /etc/step/root_ca.crt tls_server_name localhost } } } handle /root.crl { header Content-Type application/pkix-crl root * /etc/step file_server } handle { respond 404 } } Request nginx Caddy /1.0/crl 200, application/pkix-crl, issuer intermediate 200, application/pkix-crl, issuer intermediate /root.crl 200, application/pkix-crl 200, application/pkix-crl /roots.pem, /1.0/sign और बाकी API 404 404 दोनों IPv4 के साथ IPv6 पर भी जवाब देते हैं, और देने चाहिए। Caddy default में दोनों पर सुनता है। nginx सिर्फ़ वहीं सुनता है जहाँ कहा जाए, तो अकेला listen 80; सिर्फ़ IPv4 है और उसके बगल में listen [::]:80; चाहिए। ::1 पर टेस्ट किया, nginx में वह लाइन आने के बाद दोनों से सूची 200 के साथ लौटी। step-ca खुद शुरू से दोनों पर सुनता है।\nटेस्ट ports 8080 और 8081 पर चला, तो test certificates के URL में port था। असल इस्तेमाल में यह port 80 है और URL ठीक वही है जो template कहता है।\nइसे ताज़ा रखना step-ca का बनाया हर CRL 24 घंटे आगे का nextUpdate रखता है। उसके बाद वह expire हो चुका है, और expire हुई सूची उसी तरह फ़ेल होती है जैसे ग़ायब सूची:\n$ openssl verify -CAfile client-ca.pem -CRLfile crl-chain.pem -crl_check_all \\ -attime $(( $(date +%s) + 172800 )) phone1.crt error 12 at 0 depth lookup: CRL has expired यह अच्छा फ़ोन है। दो दिन बाद। बाहर, क्योंकि किसी ने नई सूची नहीं लाई।\nCRL प्रकाशित करना और ताज़ा रखना step-ca :9000, पूरी API अंदर रखी गई nginx या Caddy port 80, v4 और v6 /1.0/crl, /root.crl बाकी सब 404 सूची ख़त्म 24 घंटे बाद, हर फ़ोन मना Timer हर कुछ घंटे mTLS proxy ssl_crl, reload CRL लाओ reload रुका step-ca की API अंदर रहती है। Web server सिर्फ़ दो सूचियाँ देता है, और एक timer ताज़ा सूची लाकर proxy को reload करता है। Timer रोकिए और सूची एक दिन बाद ख़त्म हो जाती है, हर फ़ोन बाहर। nginx ssl_crl सिर्फ़ शुरू होने या reload होने पर पढ़ता है। तो किसी चीज़ को सूची लानी होगी, file दोबारा बनानी होगी और हर कुछ घंटे में nginx reload करना होगा, जब तक यह चलता है, कोई देख रहा हो या न हो।\n#!/bin/sh # Fetch step-ca\u0026#39;s CRL, add the root CRL, and reload nginx only if both parse. set -eu dir=${CRL_DIR:-/etc/nginx/pki} tmp=$(mktemp) trap \u0026#39;rm -f \u0026#34;$tmp\u0026#34; \u0026#34;$tmp.pem\u0026#34;\u0026#39; EXIT curl -fsS --max-time 20 \u0026#34;${CRL_URL:-http://ca.home.example/1.0/crl}\u0026#34; -o \u0026#34;$tmp\u0026#34; openssl crl -inform DER -in \u0026#34;$tmp\u0026#34; -out \u0026#34;$tmp.pem\u0026#34; openssl crl -in \u0026#34;$dir/root.crl.pem\u0026#34; -noout cat \u0026#34;$tmp.pem\u0026#34; \u0026#34;$dir/root.crl.pem\u0026#34; \u0026gt; \u0026#34;$dir/crl-chain.pem.new\u0026#34; mv \u0026#34;$dir/crl-chain.pem.new\u0026#34; \u0026#34;$dir/crl-chain.pem\u0026#34; ${RELOAD:-nginx -s reload} Run नतीजा सामान्य नई सूची अपनी जगह, nginx reload, phone1 200, revoked phone2 400 CA तक नहीं पहुँचा जा सका curl: (22) The requested URL returned error: 404, exit 22, पुरानी सूची छुई नहीं, कोई reload नहीं असली काम set -e कर रहा है। नाकाम fetch कभी अच्छी file के ऊपर ख़ाली file नहीं लिखनी चाहिए, क्योंकि टूटी सूची भी पुरानी सूची की तरह ही सबको बाहर कर देती है। इसे systemd timer या cron से हर कुछ घंटे में चलाइए। इससे कुछ भी ख़त्म होने से पहले इसे कई मौके मिलते हैं। इसमें कुछ भी चालाकी नहीं, और यही वह हिस्सा है जो दरवाज़े को काम करता रखता है।\nफ़ोन को उसका certificate जारी करना हर फ़ोन का एक certificate, फ़ोन के नाम पर, एक साल के लिए:\nstep ca certificate phone1 phone1.crt phone1.key \\ --provisioner admin --provisioner-password-file prov-pass \\ --not-after 8760h --kty EC फ़ोन को certificate, उसकी key और intermediate एक PKCS12 file में चाहिए, और step इसे खुद बनाता है7:\nstep certificate p12 phone1.p12 phone1.crt phone1.key \\ --ca certs/intermediate_ca.crt MAC: sha256, Iteration 2048 PKCS7 Encrypted data: PBES2, PBKDF2, AES-256-CBC, Iteration 2048, PRF hmacWithSHA256 यह आधुनिक encryption है, जिसे Home Assistant Companion के docs legacy container पर लौटने से पहले पहले आज़माने को कहते हैं8।\nफ़ोन को CA से तीन चीज़ें चाहिए, एक नहीं:\nFile किस रूप में install करें क्यों root_ca.crt CA certificate ताकि फ़ोन उस server certificate पर भरोसा करे जो step-ca ने proxy के लिए जारी किया intermediate_ca.crt CA certificate root और CA के असल में sign किए हर certificate के बीच की chain phone1.p12 VPN और app user certificate फ़ोन की अपनी key, वह चीज़ जो उसे अंदर ले जाती है Home Assistant Android app built-in CA certificates के साथ-साथ यूज़र के install किए CA certificates पर भी भरोसा करता है9, तो step-ca का server certificate काम करता है। इस काम के लिए यह बेहतर ताला भी है। Hostname सिर्फ़ घर के अंदर और फ़ोनों के लिए मायने रखता है, और जिस device के पास आपका root नहीं, वह server पर भरोसा ही नहीं करता, उसके पार जाना तो दूर।\nजब फ़ोन खो जाए:\nstep ca revoke --cert phone2.crt --key phone2.key --reason \u0026#34;phone lost\u0026#34; Certificate with Serial Number 89334534279272070053632987406394420097 has been revoked. नई सूची उसी वक़्त बनती है, और अगला refresh उसे nginx के आगे रख देता है।\nCA एक वादा है जो आप हर दिन निभाते हैं इसे चलाते हुए मुझे यह बात खटकी कि काम का कितना कम हिस्सा certificates जारी करना है। एक command। बस इतना। सारा काम उसके आसपास के वादों में है: कि revoked फ़ोन बाहर रहे, कि अच्छा फ़ोन अंदर रहे, कि सूची कभी पुरानी न हो। step-ca पहला वादा निभाता है और बाकी आप पर छोड़ता है, और इसके defaults मानते हैं कि आप servers का एक बेड़ा हैं जो हर सुबह खुद को renew करते हैं।\nयह कमी नहीं, यह वह है जिसके लिए इसे बनाया गया। पर यही उस बीच की दूरी है जो एक tool करता है और जो बताकर उसे बेचा जाता है। “अपना CA चलाइए” एक container और एक दोपहर जैसा लगता है। यह एक container, एक दोपहर, एक template, डायरी में तारीख़ वाला एक root CRL, और एक timer है जिसे आप उस दिन तक भूल जाएँगे जिस दिन वह रुक जाए।\nफिर भी कीजिए। जो CA आप चलाते हैं उसे कोई और बंद नहीं कर सकता, उसकी कीमत नहीं बदल सकता, उसे पढ़ नहीं सकता। बस यह जानिए कि keys का मालिक होने का मतलब है काम-धंधों का मालिक होना, और वही काम-धंधे दरवाज़े को बंद रखते हैं।\nSmallstep — step-ca configuration — maxTLSCertDuration, defaultTLSCertDuration, minTLSCertDuration; crl block “(experimental)” है, cacheDuration “Defaults to 24h”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsmallstep/certificates v0.30.2 — authority/tls.go — CRL का Issuing Distribution Point, सेट हो तो idpURL, वरना CA का अपना नाम और /1.0/crl, critical चिह्नित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Certificate templates — crlDistributionPoints “defines URLs with the certificate revocation list”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnginx — src/event/ngx_event_openssl.c — ssl_crl, X509_V_FLAG_CRL_CHECK|X509_V_FLAG_CRL_CHECK_ALL सेट करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnginx — ngx_http_ssl_module, ssl_crl — “When using intermediate certificates, their CRLs should be specified in the same file.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5280 — Internet X.509 PKI Certificate and CRL Profile — section 4.2.1.13: DistributionPointName “SHOULD include at least one LDAP or HTTP URI”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step certificate p12 — certificate, उसकी key और CA certificates को एक PKCS12 file में पैक करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Networking, TLS Client Authentication — पहले मौजूदा PKCS12 default आज़माएँ, OpenSSL -legacy container सिर्फ़ उसके फ़ेल होने पर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/android — network_security_config.xml — trust anchors system और user हैं: “Additionally trust user added CAs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/certificates/step-ca-client-certificates-mtls/","summary":"Mutual TLS के लिए client certificates जारी करने में step-ca 0.30.2, nginx 1.30.5 और Caddy 2.11.7 के साथ शुरू से अंत तक टेस्ट किया गया। फ़ोन कठिन मामला क्यों हैं, ca.json में 24 घंटे की certificate सीमा बढ़ाना, CRL चालू करना, idpURL और एक template के मेल खाता distribution point जोड़ने तक वह “different CRL scope” के साथ क्यों फ़ेल होता है, पूरी chain के लिए nginx को चाहिए root CRL, IPv4 और IPv6 पर सादे HTTP से CRL प्रकाशित करना, वह refresh job जो expire हुए CRL को सबको बाहर करने से रोकता है, और फ़ोन का certificate जारी करना, पैक करना, install करना और revoke करना।","title":"step-ca से Client Certificates, और वे Defaults जो सबको बाहर कर देते हैं"},{"content":"वही ताला, आपका अपना दरवाज़ा Cloudflare के ज़रिए Home Assistant ऐप, सर्टिफ़िकेट से बंद ताले को Cloudflare के edge पर लगाता है। फ़ोन के पास सर्टिफ़िकेट होता है, Cloudflare उसे जाँचता है, और जिसके पास सर्टिफ़िकेट नहीं वह घर तक कभी नहीं पहुँचता। यह काम करता है, मुफ़्त है, और इसका मतलब है कि दरवाज़ा Cloudflare के हाथ में है और गुज़रता हुआ ट्रैफ़िक वह पढ़ता है।\nयह वही ताला है, बस दरवाज़ा आपके अपने घर में। सर्टिफ़िकेट nginx या Caddy जाँचता है। उसे आपकी अपनी certificate authority जारी करती है। रास्ते में कोई और नहीं है। जिसके पास सर्टिफ़िकेट नहीं, उसे login पेज अब भी दिखता ही नहीं, इसलिए बदलता यह नहीं कि अजनबी अंदर आते हैं या नहीं। बदलता यह है कि काम कौन करता है, और कुछ बिगड़ने पर जोखिम कौन उठाता है।\nयहाँ सब कुछ बनाया और जाँचा गया: Podman में nginx 1.30.5 और Caddy 2.11.7, step-ca 0.30.2 से सर्टिफ़िकेट, और हर proxy पर बिना सर्टिफ़िकेट, सही सर्टिफ़िकेट, revoke किए गए सर्टिफ़िकेट और WebSocket upgrade के साथ request, IPv4 और IPv6 दोनों पर। टेस्ट में backend एक छोटा सा stand-in था जो मिले हुए header वापस लौटा देता है, इसलिए नतीजे ठीक वही दिखाते हैं जो Home Assistant को मिलता।\nCloudflare हटने पर क्या बदलता है घर पर nginx या Caddy के साथ mTLS फ़ोन cert रखता है कोई और cert नहीं बाढ़ cert नहीं चाहिए घर का नेटवर्क Router port 443 कोई DDoS ढाल नहीं nginx या Caddy आपके CA तक chain? revoke नहीं हुआ? IPv4 और IPv6 step-ca Home Assistant proxy पर भरोसा मना handshake में पास फ़ेल अब सब कुछ आपके router पर आता है। सही सर्टिफ़िकेट के बिना आने वाली हर चीज़ को proxy Home Assistant तक पहुँचने से पहले ही लौटा देता है। बाढ़ जैसे ट्रैफ़िक को सर्टिफ़िकेट की ज़रूरत नहीं होती, और ऊपर उसे सोखने वाला कोई नहीं, इसलिए वह सीधे आपकी लाइन पर गिरता है। Cloudflare वाला संस्करण घर पर nginx या Caddy सर्टिफ़िकेट कौन जाँचता है Cloudflare का edge, एक WAF rule से आपका proxy, TLS handshake के दौरान Certificate authority Cloudflare-managed आपकी अपनी, client सर्टिफ़िकेट के लिए step-ca Decrypt हुआ ट्रैफ़िक कौन देखता है Cloudflare, फिर Home Assistant आपका proxy और Home Assistant, और कोई नहीं बाहर से अंदर का रास्ता एक tunnel, सिर्फ़ outbound proxy तक एक port forward DDoS कहाँ गिरता है Cloudflare पर आपकी घर की लाइन पर किसी अजनबी के connection की कीमत घर पर कुछ नहीं proxy पर एक TLS handshake, Home Assistant का login कभी नहीं IPv4 और IPv6 दोनों, Cloudflare किसी का भी जवाब देता है दोनों, अगर लाइन पर दोनों हैं और proxy दोनों पर सुनता है Revocation built in, rule इसे जाँचता है nginx CRL जाँचता है; Caddy allowlist रखता है जब provider बंद हो remote access नहीं कुछ नहीं बदलता चलाने का खर्च मुफ़्त plan मुफ़्त, साथ में CA पर आपका समय सबसे ज़रूरी दो पंक्तियाँ उलटी दिशा में खींचती हैं। कोई और आपका ट्रैफ़िक नहीं पढ़ता और न आपको बंद कर सकता है, और यही संप्रभुता है, ऐसा करने की पूरी वजह। लेकिन port forward लौट आया है, इसलिए scan और बाढ़ Cloudflare की जगह आपकी लाइन पर आते हैं। Cloudflare वाली पोस्ट की तुलना में दिखाए गए सादे port forward से फ़र्क यह है कि पहुँचने पर उन्हें क्या मिलता है: एक proxy जो handshake के दौरान ही connection गिरा देता है, Home Assistant का login पेज नहीं।\nयह साफ़ समझ लीजिए कि इससे क्या मिलता है और क्या नहीं। आपका अपना reverse proxy आपको DDoS से कोई सुरक्षा नहीं देता। mTLS अजनबी को अंदर आने से रोकता है। अजनबी को आपकी लाइन भर देने से वह कुछ नहीं रोकता, और लाइन भरने के लिए बाढ़ को सर्टिफ़िकेट नहीं चाहिए। Cloudflare हर plan पर, मुफ़्त वाले पर भी, यह आपके लिए सोख लेता है1। यहाँ ऊपर सोखने वाला कोई नहीं, इसलिए काफ़ी बड़ी बाढ़ पूरे घर को इंटरनेट से हटा देती है, और proxy सिर्फ़ उन connection को मना कर सकता है जो उस तक पहुँचते हैं।\nnginx या Caddy दोनों काम कर देते हैं। फ़र्क एक जगह है जो मायने रखती है। Revocation।\nnginx और Caddy के साथ revocation nginx: एक CRL, timer लाता है step-ca revoke, नई CRL /1.0/crl सादा HTTP Timer लाना, reload nginx chain जाँचता है Caddy: एक allowlist, हाथ से रखी आप हर reissue पर Allowlist सटीक certs Reload हर बदलाव के बाद Caddy leaf verifier nginx को एक timer CRL देता है और वह हर connection पर उसे जाँचता है। Caddy में CRL support नहीं है, इसलिए revocation उन सटीक सर्टिफ़िकेट की एक सूची है जिसे आप हाथ से रखते हैं। nginx 1.30.5 Caddy 2.11.7 बिना सर्टिफ़िकेट Handshake पूरा, 400 No required SSL certificate was sent Handshake मना, curl exit 55 Revoke किया गया सर्टिफ़िकेट मना, 400 The SSL certificate error सिर्फ़ CA check के साथ सीधे अंदर Revocation का तरीका एक CRL, पूरी chain पर जाँचा गया सर्टिफ़िकेट की एक allowlist, leaf verifier ऐप के लिए WebSocket Upgrade और Connection header सेट करने पड़ते हैं बिना अतिरिक्त config के काम करता है IPv6 सिर्फ़ listen [::]:443 जोड़ने पर default में दोनों पर सुनता है Config लगभग 30 लाइनें लगभग 15 लाइनें फ़ैसला revocation पर करना है। Caddy का documentation standard Caddy के साथ आने वाला ठीक एक verifier बताता है, leaf, और वह जाँचता है कि सर्टिफ़िकेट “is one of a defined set of permitted certificates”2। client सर्टिफ़िकेट के लिए न CRL है, न OCSP। Caddy को सिर्फ़ CA पर टिकाइए और revoke किया गया फ़ोन अंदर चला आता है। टेस्ट ने ठीक यही दिखाया: phone2, जिसे एक घंटा पहले revoke किया गया था, को 200 मिला। Allowlist यह छेद बंद करती है। यह एक ऐसी सूची भी है जिसे आप तब तक हाथ से रखते हैं जब तक इसे चलाते हैं।\nnginx config map $http_upgrade $connection_upgrade { default upgrade; \u0026#39;\u0026#39; close; } server { listen 443 ssl; listen [::]:443 ssl; server_name ha.example.com; ssl_certificate /etc/nginx/pki/server-chain.pem; ssl_certificate_key /etc/nginx/pki/server.key; ssl_protocols TLSv1.2 TLSv1.3; # The mTLS half: only certificates from our CA, and not revoked. ssl_client_certificate /etc/nginx/pki/client-ca.pem; ssl_verify_client on; ssl_verify_depth 2; ssl_crl /etc/nginx/pki/crl-chain.pem; location / { proxy_pass http://192.0.2.10:8123; proxy_http_version 1.1; proxy_set_header Host $host; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_header X-Forwarded-Proto $scheme; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection $connection_upgrade; } } लाइन यह क्यों है listen [::]:443 ssl इसके बिना nginx सिर्फ़ IPv4 पर है, और IPv6 नेटवर्क पर फ़ोन के पास पहुँचने की कोई जगह नहीं ssl_verify_client on सर्टिफ़िकेट नहीं, तो प्रवेश नहीं। optional request को आगे जाने देता ताकि बाद में फ़ैसला हो ssl_verify_depth 2 step-ca एक intermediate से sign करता है, इसलिए chain है फ़ोन, intermediate, root। default 1 बीच में रुक जाता है3 ssl_client_certificate intermediate और root एक फ़ाइल में ssl_crl step-ca की CRL और root की एक CRL एक फ़ाइल में। nginx chain की हर कड़ी जाँचता है, इसलिए उसे दोनों चाहिए Upgrade और Connection ऐप Home Assistant से WebSocket पर बात करता है। इनके बिना ऐप load होकर वहीं अटका रहता है CRL फ़ाइल वह हिस्सा है जिस पर ध्यान चाहिए, और उसका सब कुछ step-ca से client सर्टिफ़िकेट में है: step-ca की CRL तब तक क्यों reject होती है जब तक एक template उसका scope ठीक न करे, nginx को root से भी CRL क्यों चाहिए, और वह timer जो उसके expire होने से पहले उसे ताज़ा करता है। यह छोड़ दीजिए और nginx हर फ़ोन को बाहर कर देगा, सही वाले भी।\nटेस्ट में क्या लौटा:\nClient IPv4 IPv6 बिना सर्टिफ़िकेट 400 No required SSL certificate was sent 400 phone1 200, X-Forwarded-For: 127.0.0.1 200, X-Forwarded-For: ::1 phone2, revoke किया गया 400 The SSL certificate error 400 phone1, WebSocket upgrade 200, Upgrade: websocket आगे गया 200, Upgrade: websocket आगे गया IPv6 listen लाइन जोड़ने से पहले IPv6 request connect ही नहीं हुई। curl exit 7।\nCaddy config ha.example.com { tls /etc/caddy/pki/server-chain.pem /etc/caddy/pki/server.key { client_auth { mode require_and_verify trust_pool file /etc/caddy/pki/client-ca.pem verifier leaf { file /etc/caddy/pki/allowed-phones.pem } } } reverse_proxy 192.0.2.10:8123 } require_and_verify का मतलब है कि सर्टिफ़िकेट होना चाहिए और CA तक chain होना चाहिए2। verifier leaf revocation है। सिर्फ़ allowed-phones.pem में मौजूद सर्टिफ़िकेट अंदर आते हैं, इसलिए किसी फ़ोन को revoke करने का मतलब है उसका सर्टिफ़िकेट उस फ़ाइल से निकालना और reload करना।\nClient IPv4 IPv6 बिना सर्टिफ़िकेट Handshake मना Handshake मना phone1, सूची में 200, X-Forwarded-For: 127.0.0.1 200, X-Forwarded-For: ::1 phone2, revoke किया गया, सिर्फ़ CA check 200 phone2, सूची में नहीं Handshake मना Handshake मना phone1, HTTP/1.1 पर WebSocket upgrade 200, Upgrade: websocket आगे गया Allowlist का अपना एक जाल है, और टेस्ट सीधे उसमें जा गिरा। सूची में सटीक सर्टिफ़िकेट रहते हैं, नाम नहीं। किसी फ़ोन का सर्टिफ़िकेट दोबारा जारी कीजिए और नया वाला सूची में नहीं होता। टेस्ट के बीच में phone1 को दोबारा जारी किया गया और सूची दोबारा बनने तक Caddy ने उसे tls alert bad certificate के साथ मना कर दिया। अब हर renewal दो काम है। सर्टिफ़िकेट जारी कीजिए, फिर सूची update कीजिए। दूसरा भूल गए तो फ़ोन बेवजह बाहर रह जाता है।\nशुरू होने पर Caddy यह log भी करता है: enabling strict SNI-Host enforcement because TLS client auth is configured। यह उसका सही काम करना है: request को handshake में वही host name माँगना होगा जो HTTP request में है, ताकि कोई एक साइट का सर्टिफ़िकेट check पास करके फिर दूसरी न माँग सके।\nHome Assistant की तरफ़ Cloudflare वाले संस्करण जैसी ही सेटिंग, बस अलग proxy की ओर। Settings → System → Network → HTTP server में4:\nसेटिंग मान क्यों Trust X-Forwarded-For On इसके बिना Home Assistant proxy से आई request मना कर देता है Trusted proxies सिर्फ़ proxy का पता, IPv4 और IPv6, जैसे 192.0.2.20 और 2001:db8::20 सिर्फ़ वही box किसी की ओर से forward करने का दावा कर सकता है Enable IP banning On ban उस असली client पते पर लगते हैं जो proxy आगे भेजता है Home Assistant URL, Internet https://ha.example.com ऐप इसे अपना external URL मान लेता है proxy का IPv4 पता ही नहीं, IPv6 पता भी सूची में डालिए। टेस्ट में IPv6 पर nginx client पते के तौर पर ::1 आगे भेजता दिखता है, और असल इस्तेमाल में फ़ोन जहाँ से आया वही भेजता है। अगर Home Assistant सिर्फ़ proxy के IPv4 पते पर भरोसा करता है, तो proxy से IPv6 पर पहुँचने वाली हर request मना हो जाती है।\nफ़ोन step-ca से फ़ोन को तीन फ़ाइलें चाहिए। इसका सब कुछ step-ca client सर्टिफ़िकेट वाली पोस्ट में है, और CA खुद सेट करना आपकी अपनी Certificate Authority में।\nफ़ाइल किस रूप में install करें Root सर्टिफ़िकेट CA certificate Intermediate सर्टिफ़िकेट CA certificate फ़ोन की PKCS12 फ़ाइल VPN and app user certificate5 proxy पर लगा server सर्टिफ़िकेट भी step-ca से आता है। Home Assistant का Android ऐप user के install किए CA सर्टिफ़िकेट पर भरोसा करता है6, इसलिए वह इसे मान लेता है, और यह झंझट नहीं, दूसरा ताला है। जिस डिवाइस के पास आपका root नहीं, वह server पर भरोसा ही नहीं करता, उसके अपने सर्टिफ़िकेट का सवाल आने से पहले ही।\nफिर ऐप का connection security level Most secure पर रखिए, Cloudflare वाले संस्करण की तरह7।\nयह कहाँ कमज़ोर पड़ता है स्थिति क्या होता है क्या करें CRL expire हो जाए nginx हर फ़ोन मना कर देता है step-ca पोस्ट की तरह timer से ताज़ा कीजिए Root CRL expire हो जाए वही, एक साल बाद डायरी में एक तारीख Caddy, फ़ोन revoke किया गया allowlist से न हटे तो अंदर आ जाता है सूची रखिए, या nginx लीजिए Caddy, फ़ोन का सर्टिफ़िकेट दोबारा जारी सूची update होने तक बाहर हर सर्टिफ़िकेट के साथ सूची update कीजिए घर की लाइन carrier-grade NAT के पीछे, IPv6 नहीं port forward तक कुछ नहीं पहुँच सकता IPv6, या Cloudflare वाला संस्करण घर की लाइन पर निशाना साधी बाढ़ सिर्फ़ Home Assistant नहीं, पूरा घर offline Cloudflare वाला संस्करण, अगर यह आपको किसी तीसरे पक्ष से ज़्यादा परेशान करता है iPhone, Wear OS Cloudflare वाले संस्करण जैसा: Android ही documented ऐप है, Wear OS setup के समय PKCS12 माँगता है5 भरोसा करने से पहले टेस्ट कीजिए इनमें से कुछ भी छिपा नहीं है। हर एक एक काम है। उसके आगे तारीख या command लिख दीजिए तो वह काम बना रहता है, अचानक आई मुसीबत नहीं।\nपूरी चीज़ का मालिक होना Cloudflare वाला संस्करण और यह, दोनों एक ही अजनबी को बाहर रखते हैं। फ़र्क यह है कि ऐसा करते समय आपको किस पर भरोसा करना पड़ता है।\nCloudflare के साथ आप एक कंपनी पर भरोसा करते हैं कि वह दरवाज़ा थामे, ट्रैफ़िक decrypt करे और इसे मुफ़्त देती रहे। इसके साथ आप खुद पर भरोसा करते हैं कि आप CRL ताज़ा करेंगे, सूची ठीक रखेंगे और तारीख आने पर ध्यान देंगे। दोनों में से कोई भी भरोसे से मुक्त नहीं। एक उसे ऐसे किसी पर फैला देता है जिसे आप कुछ नहीं देते और फ़ोन नहीं कर सकते। दूसरा उसे घर में रखता है, जहाँ आप उसे टूटते देख सकते हैं और ठीक कर सकते हैं।\nघर के मुख्य दरवाज़े के लिए मुझे पता है कि मैं क्या चुनूँगा। काम कुछ फ़ाइलें और एक timer है। इसलिए यह असल में बस इतना माँगता है कि आप इसकी देखभाल करें, और किसी भी चीज़ का मालिक होने का मतलब हमेशा यही रहा है।\nCloudflare — DDoS Protection — अपने आप DDoS पहचान और रोकथाम, “Available on all plans”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCaddy — tls directive, client_auth — require_and_verify “Require clients to present a valid certificate that is verified”; “The one verifier, currently, shipped in standard Caddy is leaf”, जो जाँचता है कि सर्टिफ़िकेट “is one of a defined set of permitted certificates”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnginx — ngx_http_ssl_module — ssl_verify_depth का default 1 है; ssl_crl: “When using intermediate certificates, their CRLs should be specified in the same file.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant — HTTP integration — reverse proxy, trusted proxies और IP banning; 2026.8 से ये सेटिंग UI में हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Getting Started, TLS client authentication — “VPN \u0026amp; app user certificate” के रूप में install करें; Wear OS को onboarding के दौरान सर्टिफ़िकेट PKCS12 के रूप में चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/android — network_security_config.xml — trust anchor हैं system और user: “Additionally trust user added CAs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Connection security level — Most secure बिना encryption वाला URL सिर्फ़ घर के नेटवर्क पर इस्तेमाल करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/homeassistant/home-assistant-app-mtls-nginx-caddy/","summary":"घर पर nginx या Caddy से Home Assistant ऐप को client सर्टिफ़िकेट पर बंद करना, जिसमें Cloudflare की जगह step-ca certificate authority है। Cloudflare के रास्ते से हटने पर क्या बदलता है, एक nginx config और एक Caddy config, हर एक को बिना सर्टिफ़िकेट, सही सर्टिफ़िकेट, revoke किए गए सर्टिफ़िकेट और WebSocket upgrade के साथ IPv4 और IPv6 पर जाँचा गया, nginx CRL क्यों जाँच सकता है और Caddy सिर्फ़ allowlist क्यों रख सकता है, Home Assistant की trusted-proxy सेटिंग, फ़ोन पर क्या install होना चाहिए, और यह कहाँ कमज़ोर पड़ता है।","title":"सर्टिफ़िकेट से बंद Home Assistant ऐप, nginx या Caddy के साथ और बिना Cloudflare के"},{"content":"अपना CA क्यों चलाएँ देखिए आज घर के नेटवर्क पर क्या-क्या है। एक NAS, Proxmox, Home Assistant, एक प्रिंटर, राउटर का एडमिन पेज। इनमें से हर एक self-signed सर्टिफ़िकेट के साथ HTTPS देता है। जो भी ब्राउज़र वहाँ जाता है, चेतावनी दिखाता है। लोग उसे क्लिक करके आगे बढ़ जाते हैं। फिर अगली पर, फिर उसके बाद वाली पर, जब तक सर्टिफ़िकेट की चेतावनी को क्लिक करके पार करना बस आदत न बन जाए। हमलावर को ठीक यही आदत चाहिए।\nपब्लिक CA इसे ठीक नहीं करता। Let\u0026rsquo;s Encrypt localhost के लिए सर्टिफ़िकेट जारी नहीं करेगा, “because nobody uniquely owns it”1, और यही बात हर उस नाम पर लागू होती है जो सिर्फ़ घर के अंदर मौजूद है। असली डोमेन के लिए भी, वह जो भी सर्टिफ़िकेट जारी करता है वह पब्लिक Certificate Transparency logs में जाता है2। nas.yourname.uk के लिए एक ले लीजिए, और आपके NAS का नाम अब सार्वजनिक रिकॉर्ड है।\nआपका अपना CA दोनों को ठीक करता है। अंदर आप जो भी नाम इस्तेमाल करते हैं, वह उन पर साइन करता है। कहीं कुछ प्रकाशित नहीं होता। जब हर डिवाइस उसके root पर भरोसा कर लेता है, चेतावनियाँ बंद हो जाती हैं, और चेतावनी फिर से किसी मतलब की चीज़ बन जाती है।\nstep-ca, Smallstep का ओपन सोर्स CA है, और यह एक कंटेनर में चलता है। यहाँ सब कुछ Podman में step-ca 0.30.2 पर चलाया गया, Caddy 2.11.7 और nginx 1.30.5 इसके क्लाइंट थे।\nइस्तेमाल step-ca इसे क्या देता है सेक्शन हर डिवाइस आपके सर्टिफ़िकेट पर भरोसा करे इंस्टॉल करने को एक root, एक बार root पर भरोसा ACME बोलने वाली किसी भी चीज़ के लिए अंदरूनी HTTPS Let\u0026rsquo;s Encrypt वाला ही प्रोटोकॉल, अंदरूनी नामों के लिए ACME से अंदरूनी HTTPS जिन सर्विसों में ACME क्लाइंट नहीं है ऐसे सर्टिफ़िकेट जो टाइमर पर खुद रिन्यू होते हैं जो सर्विसें ACME नहीं कर सकतीं फ़ोन और दूसरे क्लाइंट सर्टिफ़िकेट ऐसी keys जिनसे डिवाइस अंदर आता है, और उन्हें revoke करने का तरीका अपनी अलग पोस्ट: डिफ़ॉल्ट इसके ख़िलाफ़ हैं SSH लॉगिन authorized_keys की जगह सर्टिफ़िकेट अपनी अलग पोस्ट: अलग सेटअप इनमें से दो की अपनी पोस्ट है, क्योंकि हर एक अपना अलग सेटअप है। step-ca से क्लाइंट सर्टिफ़िकेट फ़ोन और mTLS के बारे में है, जहाँ पाँच डिफ़ॉल्ट बदलने पड़ते हैं। step-ca से साइन किए SSH लॉगिन SSH के बारे में है, जो हर मशीन पर अलग keys और अलग फ़ाइलें इस्तेमाल करता है।\nइसे शुरू करना इमेज पहली बार चलने पर कुछ environment variables से खुद को initialise करती है3। इनमें से दो ऐसी चीज़ें तय करते हैं जो बाद में दोबारा शुरू किए बिना नहीं बदल सकतीं, इसलिए इन्हें पहले दिन ही सेट करें।\nVariable क्या करता है DOCKER_STEPCA_INIT_NAME हर सर्टिफ़िकेट पर issuer का नाम DOCKER_STEPCA_INIT_DNS_NAMES वे नाम जिन पर CA जवाब देता है DOCKER_STEPCA_INIT_ACME=true अंदरूनी HTTPS के लिए एक ACME provisioner जोड़ता है DOCKER_STEPCA_INIT_SSH=true SSH host और user CA keys भी बनाता है ACME और SSH वाले स्विच इमेज का entrypoint पढ़ता है4। इन्हें अभी चालू कर दें, चाहे आज आपको इनमें से एक ही चाहिए। SSH बाद में जोड़ने का मतलब है नया CA बनाना।\npodman run -d --name step-ca \\ -v step:/home/step \\ -p 9000:9000 \\ -e DOCKER_STEPCA_INIT_NAME=\u0026#34;Home CA\u0026#34; \\ -e DOCKER_STEPCA_INIT_DNS_NAMES=\u0026#34;localhost,ca.home.example\u0026#34; \\ -e DOCKER_STEPCA_INIT_ACME=true \\ -e DOCKER_STEPCA_INIT_SSH=true \\ docker.io/smallstep/step-ca:0.30.2 यह एक root बनाता है, उस root से साइन किया एक intermediate, SSH keys, और तीन provisioners, फिर पोर्ट 9000 पर सेवा देता है:\nX.509 Root Fingerprint: cd2f8d4c60af32a0a534781cd63b4e2a9ce362e2c1ae5983b56a370bfa2c2489 SSH Host CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... SSH User CA Key: ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAy... Serving HTTPS on :9000 ... Provisioner प्रकार किस पर साइन करता है admin JWK पासवर्ड के साथ आप जो भी माँगें acme ACME उन क्लाइंट्स के सर्टिफ़िकेट जो साबित करते हैं कि नाम उनका है sshpop SSHPOP SSH host सर्टिफ़िकेट के रिन्यूअल Provisioner, CA के लिए “कौन माँग रहा है” का जवाब है। हर एक के अपने नियम हैं, और आगे का ज़्यादातर काम उन्हीं नियमों को सेट करना है।\nएक CA, पाँच इस्तेमाल step-ca कंटेनर Root, intermediate भरोसे के लिए एक root acme admin sshpop CRL provisioners हर डिवाइस root पर भरोसा, एक बार Caddy, ACME 24 घंटे, खुद रिन्यू ACME नहीं step ca renew --daemon फ़ोन 1 साल, CRL से revoke SSH अपनी अलग पोस्ट एक root, एक बार भरोसा, और अंदर आने के हर रास्ते के लिए एक provisioner। ACME क्लाइंट और रिन्यू होने वाली सर्विसें 24 घंटे के डिफ़ॉल्ट के साथ ठीक हैं; फ़ोन के लिए इसे बदलना पड़ता है; SSH की अपनी पोस्ट है। वर्ज़न पिन करें। जिस दिन यह लिखा गया, latest 0.30.2 था, और CA आख़िरी चीज़ है जिसे आप किसी pull पर अपने नीचे से बदलता देखना चाहेंगे।\nएक नहीं, दो पासवर्ड Smallstep की Docker गाइड कहती है कि एक ही बनाया गया पासवर्ड “the encrypted CA keys and the default CA provisioner” दोनों के लिए है, जो secrets/password में रखा जाता है3। इस इमेज पर ऐसा नहीं होता। उस पासवर्ड से सर्टिफ़िकेट जारी करने की कोशिश करें, provisioner मना कर देता है:\nfailed to decrypt JWE: invalid password इमेज का अपना entrypoint इसे समझाता है। वह दो रैंडम पासवर्ड बनाता है, एक CA keys के लिए और एक provisioner के लिए। Provisioner वाला एक बार लॉग में छपता है, फिर shred कर दिया जाता है4:\necho \u0026#34;👉 Your CA administrative password is: $(\u0026lt; $STEPPATH/provisioner_password )\u0026#34; ... shred -u $STEPPATH/provisioner_password पासवर्ड क्या खोलता है आख़िर में कहाँ रहता है secrets/password root और intermediate keys volume में, हर बार CA शुरू होने पर इस्तेमाल होता है Provisioner पासवर्ड admin provisioner, जो आपके माँगे हर सर्टिफ़िकेट पर साइन करता है पहली बार चलने के लॉग में, और कहीं नहीं इसलिए पहली बार शुरू करते समय लॉग पढ़ें और वह दूसरा पासवर्ड कहीं सुरक्षित रखें। उसे खो दिया तो provisioner को हाथ से एडिट करके हटाए बिना आप एक और सर्टिफ़िकेट जारी नहीं कर सकते। अगर आप खुद पासवर्ड चुनना चाहें तो पहली बार शुरू करने से पहले DOCKER_STEPCA_INIT_PASSWORD सेट करें; तब entrypoint उसे दोनों के लिए इस्तेमाल करता है4।\nroot पर भरोसा जब तक आप न बताएँ, कुछ भी आपके CA पर भरोसा नहीं करता। एक Debian मशीन Caddy से step-ca के साइन किए पेज को माँगती है:\n$ curl https://nas.home.example/ curl: (60) SSL certificate problem: unable to get local issuer certificate root को कॉपी कर दें, और वही request पास हो जाती है:\ncp root_ca.crt /usr/local/share/ca-certificates/home-ca.crt update-ca-certificates $ curl https://nas.home.example/ internal service, certificate from step-ca पूरा काम बस इतना है। हर डिवाइस पर एक बार। step certificate install जिस भी सिस्टम पर चले, वहाँ यही करता है5। trust store में सिर्फ़ root जाता है। intermediate हर सर्टिफ़िकेट के साथ चलता है, और जिस फ़ोन को क्लाइंट सर्टिफ़िकेट दिखाना है उसे भी इसकी ज़रूरत है, जो क्लाइंट सर्टिफ़िकेट वाली पोस्ट में है।\nroot को उस मुख्य दरवाज़े की चाबी की तरह रखें जो वह अब है। जिसके पास भी root की private key है, वह किसी भी नाम का सर्टिफ़िकेट बना सकता है, और जो भी डिवाइस उस पर भरोसा करता है, उसे मान लेगा।\nACME से अंदरूनी HTTPS ACME वह प्रोटोकॉल है जो Let\u0026rsquo;s Encrypt इस्तेमाल करता है, और step-ca इसे अंदरूनी नामों के लिए बोलता है6। जिस भी चीज़ में ACME क्लाइंट है, उसे अंदरूनी सर्टिफ़िकेट वैसे ही मिलते हैं जैसे पब्लिक, रिन्यूअल समेत। Caddy के लिए यह दो global लाइनें हैं:\n{ acme_ca https://ca.home.example:9000/acme/acme/directory acme_ca_root /etc/caddy/root_ca.crt } nas.home.example { reverse_proxy 192.0.2.30:5000 } पहली बार शुरू होने पर Caddy ने जो लॉग किया:\n\u0026#34;msg\u0026#34;:\u0026#34;trying to solve challenge\u0026#34;,\u0026#34;identifier\u0026#34;:\u0026#34;nas.home.example\u0026#34;,\u0026#34;challenge_type\u0026#34;:\u0026#34;tls-alpn-01\u0026#34; \u0026#34;msg\u0026#34;:\u0026#34;certificate obtained successfully\u0026#34;,\u0026#34;identifier\u0026#34;:\u0026#34;nas.home.example\u0026#34; जाँच नतीजा Challenge tls-alpn-01, Caddy ने पोर्ट 443 पर जवाब दिया Issuer Home CA Intermediate CA अवधि 24 घंटे, 17:31 से अगले दिन 17:32 तक रिन्यूअल Caddy का अपना काम, कुछ सेट नहीं करना 24 घंटे का सर्टिफ़िकेट डरावना लगता है। है नहीं। ACME क्लाइंट समय ख़त्म होने से काफ़ी पहले रिन्यू कर लेता है, हर दिन, किसी के कुछ किए बिना। चोरी हुई key की कीमत एक दिन है। step-ca इसी डिफ़ॉल्ट के आसपास बना है, और यहाँ यह बिल्कुल सही है।\nChallenge के लिए यह ज़रूरी है कि CA उस नाम तक पहुँच सके जिस पर वह साइन कर रहा है। step-ca को nas.home.example resolve करना होगा और tls-alpn-01 के लिए पोर्ट 443 पर, या http-01 के लिए पोर्ट 80 पर उससे जुड़ना होगा। अंदरूनी DNS, जिसे दोनों तरफ़ इस्तेमाल करें, सबसे पहले ठीक करने वाली चीज़ है।\nजो सर्विसें ACME नहीं कर सकतीं बहुत से उपकरणों में ACME क्लाइंट नहीं होता: हाइपरवाइज़र का वेब UI, प्रिंटर, कोई पुराना appliance। उनके लिए सर्टिफ़िकेट admin provisioner से जारी करें और step ca renew से रिन्यू करें:\nstep ca certificate proxmox.home.example pve.crt pve.key step ca renew --force pve.crt pve.key Serial कब तक वैध जारी हुआ 241943140971… 2026-10-10 17:33:03 step ca renew के बाद 206409156462… 2026-10-10 17:33:06 नया serial, ताज़े 24 घंटे, और कोई पासवर्ड नहीं माँगा गया। मौजूदा सर्टिफ़िकेट साबित करता है कि कौन माँग रहा है, और बात यही है: रिन्यूअल के लिए मशीन पर उस key के अलावा कोई secret नहीं रखना पड़ता जो उसके पास पहले से है। हाँ, सर्टिफ़िकेट का अभी वैध होना ज़रूरी है, इसलिए जो रिन्यूअल अपनी खिड़की चूक जाए, उसका मतलब है हाथ से दोबारा जारी करना।\nचालू छोड़ दें तो यह अपने आप रिन्यू होता है। --daemon डिफ़ॉल्ट रूप से अवधि के दो-तिहाई पर रिन्यू करता है, और --exec हर रिन्यूअल के बाद एक कमांड चलाता है, जहाँ reload आता है7:\nstep ca renew --daemon --exec \u0026#34;systemctl reload nginx\u0026#34; pve.crt pve.key इसे एक systemd unit से चलाएँ और मशीन अपना ध्यान खुद रखती है। भूल जाएँ, और 24 घंटे में सर्विस वही चेतावनी दिखाने लगेगी जिससे छुटकारा पाने आप निकले थे।\nCA आसान हिस्सा है step-ca चलाने में एक कमांड लगी। एक Debian मशीन से उस पर भरोसा करवाने में दो। Caddy को दो लाइनें चाहिए थीं और फिर उसने कुछ नहीं माँगा। यही वह हिस्सा है जिसे लोग सालों टालते रहते हैं, हर अंदरूनी पेज पर ब्राउज़र की चेतावनी के साथ जीते हुए, और इस सूची में यही सबसे सस्ता काम है।\nकीमत उस सब की है जिसे सर्टिफ़िकेट जारी होने के बाद छूता है: हर डिवाइस पर root, वे रिन्यूअल जिन पर कोई नज़र नहीं रखता, वह एक सर्विस जो ACME नहीं कर सकती और जिसे याद रखना पड़ता है। इनमें कुछ भी मुश्किल नहीं। सब कुछ उस तरह का काम है जो तभी ठीक से होता है जब कोई उसका ज़िम्मा ले।\nघर का नेटवर्क एक छोटी जागीर है। उसे भी वही मिलना चाहिए जो किसी ठीक-ठाक जागीर को मिलता है: एक root, सावधानी से रखा हुआ, सोच-समझकर भरोसा किया हुआ, और ऐसी चेतावनी जो दिखे तो उसका कोई मतलब हो। इसलिए CA चालाकी वाला हिस्सा नहीं है। चालाकी वाला हिस्सा है फिर कभी क्लिक करके आगे न बढ़ना।\nLet\u0026rsquo;s Encrypt — Certificates for localhost — “localhost” के लिए जारी नहीं कर सकता, “because nobody uniquely owns it, and it’s not rooted in a top level domain”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLet\u0026rsquo;s Encrypt — Certificate Transparency logs — “Let\u0026rsquo;s Encrypt submits all certificates we issue to CT logs.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — Run a private CA in Docker — DOCKER_STEPCA_INIT_* variables; कहता है कि बनाया गया पासवर्ड “the encrypted CA keys and the default CA provisioner” के लिए है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsmallstep/certificates — docker/entrypoint.sh — अलग password और provisioner_password फ़ाइलें बनाता है, provisioner पासवर्ड एक बार छापकर shred कर देता है; दिया गया एक पासवर्ड दोनों में लिखा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step certificate install — root सर्टिफ़िकेट को सिस्टम के trust store में इंस्टॉल करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — ACME basics — step-ca का ACME provisioner और वह कौन-से challenge प्रकार सपोर्ट करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSmallstep — step ca renew — --daemon के साथ, “By default, it will renew the certificate before 2/3 of the validity period of the certificate has elapsed”; --exec “certificate reloads on your services” देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/certificates/step-ca-in-a-container/","summary":"Smallstep का step-ca 0.30.2, Podman या Docker कंटेनर में, घर के अंदर की हर चीज़ का सर्टिफ़िकेट अथॉरिटी, सब कुछ जाँचा हुआ। अंदरूनी नामों के लिए प्राइवेट CA, self-signed और पब्लिक सर्टिफ़िकेट दोनों से बेहतर क्यों है; ACME और SSH चालू करके इसे शुरू करना; इमेज जो दो पासवर्ड बनाती है और हर एक कहाँ जाता है; हर डिवाइस पर root पर भरोसा; Caddy या ACME बोलने वाली किसी भी चीज़ के लिए अंदरूनी HTTPS; और जो सर्विसें ACME नहीं जानतीं उनके लिए step ca renew। क्लाइंट सर्टिफ़िकेट और SSH की अपनी-अपनी पोस्ट है।","title":"आपका अपना सर्टिफ़िकेट अथॉरिटी: कंटेनर में step-ca"},{"content":"बाहर से Home Assistant तक पहुँचने की दिक्कत यहाँ घर Home Assistant चलाता है: लाइटें, हीटिंग, AC, कार चार्जर, अलार्म। घर से दूर यह सब फ़ोन के ऐप से ही चलता है, और घर को फ़ोनों की जगह भी इसी से पता चलती है, क्योंकि ऐप बैकग्राउंड में लोकेशन और सेंसर भेजता रहता है।\nतो इसे तब भी चलना है जब घर पर कोई नहीं। सवाल यह है कि कैसे।\nआम जवाब है Home Assistant को एक hostname और लॉगिन पेज के साथ इंटरनेट पर डाल देना। यह चलता है। इसका मतलब यह भी है कि दुनिया में कोई भी लॉगिन पेज तक पहुँच सकता है, उस पर पासवर्ड आज़मा सकता है, और उसके पीछे जो है उसे टटोल सकता है। लॉगिन पेज इंटरनेट और आपके दरवाज़ों के तालों के बीच खड़ा एक पासवर्ड है।\nमुझे यह नहीं चाहिए था। ज़रूरतें छोटी थीं:\nआम लोगों की पहुँच में कोई लॉगिन पेज नहीं। जब तक डिवाइस हमारा न हो, कुछ जवाब ही न दे। Home Assistant ऐप बैकग्राउंड में चलता रहे, बिना किसी के लॉगिन पर टैप किए। फ़ोनों पर कुछ अतिरिक्त न चले। कोई VPN agent नहीं। Cloudflare का फ़्री प्लान। Tunnel पहले से है। ये चार शर्तें शुरू करने से पहले ही ज़्यादातर आम विकल्पों को बाहर कर देती हैं।\nहर विकल्प असल में क्या देता है Home Assistant का अपना documentation अंदर आने के रास्ते गिनाता है: Home Assistant Cloud, VPN, reverse proxy या port forwarding1। आखिरी दो के अपने संस्करण Cloudflare जोड़ता है। नीचे देखिए कि वे इन चार ज़रूरतों पर कैसे खरे उतरते हैं, हर एक में क्या गड़बड़ हो सकती है, और बैटरी पर हर एक की क्या कीमत है।\nविकल्प लॉगिन पेज तक कौन पहुँच सकता है ऐप बैकग्राउंड में चलता है फ़ोन पर अतिरिक्त असली कीमत क्या है जोखिम बैटरी पर असर IPv4 और IPv6 Home Assistant पर port forward हर कोई हाँ कुछ नहीं बिल पर मुफ़्त। हर स्कैन और पासवर्ड का अंदाज़ा Home Assistant पर चलता है, और DDoS आपकी घर की लाइन पर गिरता है लॉगिन पेज हर स्कैनर के लिए खुला। राउटर में सीधे LAN तक एक छेद। carrier-grade NAT के पीछे वाली घर की लाइन में forward करने को कोई port ही नहीं2। ऐप: Android और iPhone पर चलता है, यह बस एक URL है सामान्य IPv4 के लिए अपना public पता चाहिए, carrier-grade NAT नहीं। IPv6 के लिए firewall में pinhole चाहिए, और IPv4-only Wi-Fi पर फ़ोन वहाँ नहीं पहुँच सकता Cloudflare Tunnel, और कुछ नहीं हर कोई हाँ कुछ नहीं मुफ़्त। DDoS Cloudflare झेलता है, पर हर पासवर्ड का अंदाज़ा अब भी Home Assistant पर चलता है लॉगिन पेज हर स्कैनर और पासवर्ड लिस्ट के लिए खुला। एक पासवर्ड का सही अंदाज़ा और हमलावर के पास आपके LAN पर एक मशीन है। ऐप: Android और iPhone पर चलता है, यह बस एक URL है सामान्य दोनों। Cloudflare किसी पर भी जवाब देता है3, और घर सिर्फ़ बाहर dial करता है4 Tunnel के साथ Cloudflare Access लॉगिन सिर्फ़ लॉगिन के बाद नहीं, बैकग्राउंड कॉल लॉगिन से टकराती हैं कुछ नहीं मुफ़्त। अजनबी Cloudflare पर रुकते हैं, Home Assistant पर कोई लोड नहीं लोकेशन और सेंसर बिना किसी के ध्यान दिए रिपोर्ट करना बंद कर देते हैं। सिर्फ़ Home Assistant publish है, लॉगिन के पीछे। ऐप: Access को जो service-token header चाहिए वह भेज नहीं सकता5 सामान्य दोनों, tunnel जैसा ही Tunnel के साथ WARP private network बाहर कोई नहीं हाँ WARP agent मुफ़्त। स्कैन करने को कुछ public नहीं ऐसे UDP ports पर चलता है जिन्हें होटल या ऑफ़िस का नेटवर्क ब्लॉक कर सकता है6। Android एक समय में एक ही VPN चलने देता है7। एक route पूरा LAN हर enrolled फ़ोन पर डाल सकता है8। ऐप: कुछ नहीं चाहिए, पर WARP के Android और iPhone क्लाइंट हैं और Wear OS घड़ी के लिए कोई नहीं9 ज़्यादा, हमेशा चालू VPN दोनों। agent Cloudflare तक किसी पर भी पहुँचता है6 Home Assistant Cloud URL वाला हर कोई हाँ कुछ नहीं £6.50 महीना या £65 साल10। पासवर्ड के अंदाज़े अब भी Home Assistant पर चलते हैं लॉगिन पेज public। अंदर आने का रास्ता किसी और कंपनी के हाथ में: उनकी सेवा बंद तो अंदर आने का रास्ता नहीं। एक पासवर्ड का सही अंदाज़ा और हमलावर के पास आपके LAN पर एक मशीन है। ऐप: Android और iPhone पर चलता है सामान्य घर पर कोई भी, यह Nabu Casa relay तक बाहर dial करता है11। फ़ोन के लिए IPv6 documented नहीं nginx या Caddy पर port forward, क्लाइंट सर्टिफ़िकेट के साथ सिर्फ़ सर्टिफ़िकेट वाले डिवाइस हाँ एक सर्टिफ़िकेट और आपके अपने CA का root बिल पर मुफ़्त। एक अजनबी की कीमत proxy पर एक TLS handshake है, Home Assistant लॉगिन कभी नहीं, और DDoS आपकी घर की लाइन पर गिरता है राउटर में proxy तक एक छेद, Home Assistant तक नहीं। CA आप चलाते हैं, और एक पुराना CRL हर फ़ोन को बाहर कर देता है। ऐप: नीचे वाली सर्टिफ़िकेट पंक्ति जैसा सामान्य port forward जैसा। nginx को IPv6 पर सुनने के लिए कहना पड़ता है, Caddy यह default में करता है Tunnel के साथ क्लाइंट सर्टिफ़िकेट सिर्फ़ सर्टिफ़िकेट वाले डिवाइस हाँ एक सर्टिफ़िकेट मुफ़्त। अजनबी edge पर लौटा दिए जाते हैं, Home Assistant पर कोई लोड नहीं खोया हुआ फ़ोन revoke होने तक अंदर आ जाता है। 443 पर सादा HTTPS, सिर्फ़ वहीं ब्लॉक जहाँ वेब ब्लॉक है। सिर्फ़ Home Assistant publish है, और सिर्फ़ सर्टिफ़िकेट वालों के लिए। ऐप: Android पर supported; iPhone ऐप documented नहीं; Wear OS को setup के समय PKCS12 फ़ाइल चाहिए12 सामान्य दोनों, tunnel जैसा ही Tunnel IPv4 बनाम IPv6 का सवाल भी हटा देता है। Cloudflare फ़ोन को उसके पास जो भी हो उस पर जवाब देता है, और घर सिर्फ़ बाहर dial करता है, तो carrier-grade NAT के पीछे वाली घर की लाइन, या IPv6 वाली पर बिना public IPv4 वाली लाइन, बाकी किसी भी लाइन जैसी ही चलती है। Port forward के लिए आपका अपना public IPv4 पता चाहिए, या दोनों सिरों पर IPv6। इतनी सारी घर की लाइनों में अब भी इन दोनों में से कोई क्यों नहीं, यह अपनी अलग कहानी है, We Never Ran Out of Addresses. We Ran Out of Effort. में।\nअकेला tunnel राउटर ठीक करता है, exposure नहीं। cloudflared सिर्फ़ outbound कनेक्शन बनाता है, तो forward करने को कोई inbound port नहीं होता13, पर जो hostname वह publish करता है वह अब भी पूछने वाले हर किसी को लॉगिन पेज दिखाता है।\nक्या Cloudflare Access इसे ठीक करता है? ब्राउज़र के लिए हाँ, और Zero Trust VDI Without the Cloud Bill वाले desktop इसे इसी तरह इस्तेमाल करते हैं। ऐप के लिए इसका आकार गलत है। Access एक इंसान को लॉगिन पेज के सामने खड़ा करता है, और ऐप के बैकग्राउंड ट्रैफ़िक में कोई इंसान नहीं होता। आम जुगाड़ है header में भेजा गया service token, और ऐप वह भेज नहीं सकता। उसका web view POST requests या WebSockets में headers जोड़ने का कोई तरीका नहीं देता, और ऐप Home Assistant से इन्हीं के ज़रिए बात करता है। developers की चर्चा क्लाइंट सर्टिफ़िकेट पर ही पहुँचती है, “a better (more secure) alternative” के रूप में5।\nWARP यह कर देता, और इसे बाहर रखा गया क्योंकि इसका मतलब है हर फ़ोन पर एक agent। VPN सामान्य लिंक से ज़्यादा बैटरी खाता है, क्योंकि यह दिन भर खुला रखा गया एक tunnel है, ऐप बात कर रहा हो या नहीं। यह ऐसे UDP ports पर चलता है जिन्हें होटल या ऑफ़िस का नेटवर्क गिरा सकता है, और ठीक तभी आप बाहर रह जाते हैं जब घर से दूर हों6। और Android एक समय में एक ही VPN चलाता है7, तो WARP और ऑफ़िस का VPN दोनों साथ नहीं चल सकते। Home Assistant Cloud अच्छी सेवा है और development का खर्च उठाती है, पर यह subscription है, और URL अब भी उसे लॉगिन पेज दिखाता है जो उसे ढूँढ ले। यह आपके घर का रास्ता भी किसी और कंपनी को सौंप देती है। उनकी सेवा, उनका account, उनकी कीमत, उनकी शर्तें। यह संप्रभुता का नुकसान है, और हर cloud offering यही सौदा माँगती है: अभी सुविधा, और हमेशा के लिए नियंत्रण किसी और के पास।\nCloudflare किस्म में अलग नहीं है, और कुछ और दिखाना बेईमानी होगी। इस टेबल का हर tunnel विकल्प इसे रास्ते में रखता है, और यह TLS को अपने edge पर ख़त्म करता है, इसी से WAF नियम सर्टिफ़िकेट की जाँच पढ़ पाता है। फ़र्क यह है कि यह कितना पकड़ता है। यहाँ यह फाटक पकड़ता है। Home Assistant, उसका डेटा और उसके पासवर्ड घर में रहते हैं, और अगर Cloudflare चला जाए तो घर चलता रहता है, जो “जहाँ यह कमज़ोर पड़ता है” के नीचे टेबल की आखिरी पंक्ति है। अगर इतना भरोसा भी आप सौंपना नहीं चाहते, तो nginx और Caddy वाला संस्करण यही जाँच आपके अपने घर में, आपके अपने CA से करता है, और बदले में port forward और CA के काम अपने सिर लेता है।\nबचता है क्लाइंट सर्टिफ़िकेट। Home Assistant एक भी byte देखे, उससे पहले फ़ोन साबित करता है कि वह क्या है।\nइंटरनेट के लिए खुला रहने की असली कीमत बिल पर मुफ़्त होना मुफ़्त होने जैसा नहीं है। इंटरनेट को जवाब देने वाली हर चीज़ इसकी कीमत मशीन के लोड में चुकाती है। Home Assistant के अपने लॉगिन पर हर पासवर्ड का अंदाज़ा 12-round bcrypt जाँच है, और यह तब भी चलती है जब username मौजूद ही न हो, तो किसी अजनबी के अंदाज़े की कीमत ठीक उतनी ही है जितनी आपके लॉगिन करने की14। यह लोड उस बॉक्स पर पड़ता है जो घर चलाता है, चौबीसों घंटे, जब तक स्कैनर आते रहें। और वे आते रहते हैं।\nमैंने इस build पर इसे नापा। Hostname 14 अक्टूबर 2026 को 22:38 पर लाइव हुआ और कहीं publish नहीं हुआ था। दो घंटे के अंदर Cloudflare ने उस पर सिंगापुर, कनाडा, जर्मनी, नीदरलैंड, ग्रीस और अमेरिका के बीस-बाईस पतों से सौ से कहीं ज़्यादा requests दर्ज कर लीं, ज़्यादातर एक ही crawler नए नाम पर बार-बार चल रहा था। मैं साबित नहीं कर सकता कि उन्हें यह कैसे मिला, पर समय certificate transparency की ओर इशारा करता है: Let\u0026rsquo;s Encrypt जारी किया हर सर्टिफ़िकेट log करता है15, और स्कैनर उन logs पर नज़र रखते हैं। इनमें से हर request edge पर रुक गई। Home Assistant ने इसमें से कुछ नहीं देखा। एक byte भी नहीं।\nPort forward इससे भी बुरा है, क्योंकि यह आपके घर का पता दाँव पर लगाता है। उस पर निशाना साधा गया DDoS आपका broadband भर देता है, और फिर सिर्फ़ Home Assistant नहीं, पूरा घर इंटरनेट से कट जाता है। Tunnel के पीछे बाढ़ Cloudflare झेलता है, Free समेत हर प्लान पर16, और 2017 के बाद से इसने हमले के आकार की वजह से किसी ग्राहक को बाहर नहीं किया17। सर्टिफ़िकेट आखिरी कदम उठाता है। अजनबी edge पर लौटा दिया जाता है, और Home Assistant उस पर कुछ भी खर्च नहीं करता।\nफिर वह नेटवर्क है जिस पर Home Assistant बैठा है। यह किसी टापू पर बैठा web app नहीं है। यह घर के LAN पर कैमरों, NAS और लैपटॉप के बगल में बैठा है, और इनमें से बहुतों के credentials इसके पास हैं। इसके लॉगिन को पार कर लीजिए और आपके पास घर के अंदर एक मशीन है, सिर्फ़ dashboard नहीं। Port forward राउटर में एक छेद है जो सीधे उस मशीन की ओर है। WARP उल्टी तरफ़ से गड़बड़ करता है, ज़रूरत से ज़्यादा उदार होकर: एक route पूरा private network हर enrolled फ़ोन पर publish कर सकता है, और उसे सीमित करना एक अलग policy है जिसे लिखना आपको याद रखना पड़ता है8। वैसा फ़ोन खो दीजिए और पाने वाला आपके LAN पर है। सर्टिफ़िकेट एक hostname publish करता है, उन डिवाइसों के लिए जिनके पास सर्टिफ़िकेट है, और नेटवर्क पर बाकी कुछ भी बाहर से पहुँच में नहीं आता।\nफ़्री प्लान पर mTLS: कौन सा हिस्सा मुफ़्त है ऑनलाइन काफ़ी सलाह कहती है कि Cloudflare पर mTLS के लिए Enterprise चाहिए। ऐसा नहीं है। Cloudflare mTLS दो बार बेचता है, और उनमें से सिर्फ़ एक को Enterprise चाहिए।\nक्लाइंट सर्टिफ़िकेट के साथ WAF नियम Cloudflare Access mTLS प्लान Free, Pro, Business, Enterprise सिर्फ़ Zero Trust Enterprise Certificate authority Cloudflare-managed (अपना लाना Enterprise है) सिर्फ़ अपना शामिल सर्टिफ़िकेट हर zone पर 100 active लागू नहीं लागू कौन करता है आपका लिखा WAF custom rule एक Access policy Revocation built in, नियम इसे जाँचता है आपका अपना CRL और एक Worker हमें पहला कॉलम चाहिए। Cloudflare पर अपना CA लाना Enterprise है। Cloudflare के बाहर इसकी कोई कीमत नहीं, और step-ca से क्लाइंट सर्टिफ़िकेट इसे कवर करता है। Cloudflare की अपनी तुलना इसे साफ़ कहती है: Application Security offering में हर zone पर 100 क्लाइंट सर्टिफ़िकेट मुफ़्त शामिल हैं, जबकि Access mTLS एक Zero Trust Enterprise feature है18। Free, Pro और Business प्लानों को हर zone पर 100 active सर्टिफ़िकेट मिलते हैं, और एक को revoke करते ही उसकी जगह खाली हो जाती है19। दो फ़ोन उनमें से दो इस्तेमाल करते हैं।\nफ़्री प्लान को पाँच WAF custom rules भी मिलते हैं20। इसे एक चाहिए।\nजाँच कैसे काम करती है Cloudflare mTLS से Home Assistant तक request का रास्ता फ़ोन HA ऐप सर्टिफ़िकेट है बाकी कोई भी एक स्कैनर सर्टिफ़िकेट नहीं Cloudflare edge, फ़्री प्लान Handshake mTLS चालू ha.example.com सर्टिफ़िकेट माँगता है WAF नियम verified? revoked नहीं? वरना Block ब्लॉक HA तक कभी नहीं घर का नेटवर्क cloudflared सिर्फ़ outbound tunnel Home Assistant सिर्फ़ उसी proxy पर भरोसा IP banning चालू लॉगिन दूसरा ताला है पास फ़ेल हर request: handshake के दौरान edge सर्टिफ़िकेट माँगता है, WAF नियम हर unverified या revoked चीज़ को ब्लॉक करता है, और तभी request tunnel से नीचे Home Assistant तक जाती है। काम Cloudflare अपने edge पर करता है। जब किसी hostname के लिए mTLS चालू होता है, तो TLS handshake क्लाइंट से सर्टिफ़िकेट माँगता है21। अकेले इससे कुछ ब्लॉक नहीं होता। जो क्लाइंट सर्टिफ़िकेट नहीं भेजता वह भी कनेक्ट होता है। बस वह verification field false के साथ पहुँचता है।\nब्लॉक करने का काम WAF नियम करता है। Cloudflare सर्टिफ़िकेट जाँच का नतीजा अपनी rules language में fields के रूप में देता है22:\n(http.host eq \u0026#34;ha.example.com\u0026#34; and (not cf.tls_client_auth.cert_verified or cf.tls_client_auth.cert_revoked)) Action: Block दूसरी पंक्ति एक वजह से है। Revoke किया गया सर्टिफ़िकेट भी verify होता है, क्योंकि cert_revoked true होने का मतलब है cert_verified भी true है23। सिर्फ़ पहला field जाँचिए और revoked सर्टिफ़िकेट सीधे अंदर चला आता है। खोए फ़ोन का सर्टिफ़िकेट revoke करने का कोई मतलब नहीं जब तक नियम यह न पूछे।\nजिसका श्रेय है उसे: Home Assistant Android thread के लोगों ने यह नियम निकाला और पोस्ट किया5। अच्छा write-up, और इसने काफ़ी खोजबीन बचा दी।\nHome Assistant वाला हिस्सा Home Assistant को बताना पड़ता है कि वह proxy के पीछे है, और यह वैकल्पिक नहीं है। reverse proxy से आई requests design से ब्लॉक होती हैं, जब तक Home Assistant को उस पर भरोसा करने को न कहा जाए24। Tunnel का cloudflared connector भी एक proxy गिना जाता है।\n2026.8 से ये सेटिंग configuration.yaml में नहीं, UI में हैं, Settings → System → Network → HTTP server के नीचे24। इन्हें save करने से Home Assistant restart होता है, और फिर एक administrator के पास नई सेटिंग confirm करने के लिए पाँच मिनट होते हैं, वरना वे अपने आप वापस हो जाती हैं। खुद को बाहर बंद करने से पहले यह सुरक्षा जाल जान लेना अच्छा है।\nसेटिंग मान क्यों Trust X-Forwarded-For On इसके बिना proxy से आई requests मना हो जाती हैं Trusted proxies सिर्फ़ cloudflared मशीन का पता सिर्फ़ वही बॉक्स किसी के लिए forward करने का दावा कर सके Enable IP banning On, गिनती के कुछ प्रयास ban असली क्लाइंट के पते पर लगता है, Cloudflare के पर नहीं Home Assistant URL, Internet https://ha.example.com ऐप इसे अपने external URL के रूप में उठाता है Trusted proxies वाली entry जानबूझकर संकरी है। पूरे subnet पर भरोसा कीजिए और उसमें कोई भी डिवाइस क्लाइंट का पता गढ़ सकता है, जिससे ban list बेकार हो जाती है।\nफिर ऐप। Companion ऐप का documentation इस setup को नाम से कवर करता है। अगर Home Assistant TLS client authentication करने वाले reverse proxy के पीछे है, तो ऐप सर्टिफ़िकेट माँगता है, और उसे यह “VPN \u0026amp; app user certificate” के रूप में install चाहिए12। बिना सर्टिफ़िकेट वाले फ़ोन पर आपको error या खाली स्क्रीन मिलती है, और जिस फ़ोन को अंदर नहीं आना चाहिए उसके लिए यही सही नतीजा है।\nऐप का connection security level Most secure पर रखिए। तब सादा http:// लोकल पता सिर्फ़ घर के Wi-Fi पर इस्तेमाल होता है, और बाकी हर जगह ऐप HTTPS hostname इस्तेमाल करता है या कनेक्ट ही नहीं करता25। इसके लिए Android पर location permission “Allow all the time” चाहिए, जो बैकग्राउंड लोकेशन के लिए ऐप को वैसे भी चाहिए।\nइसे बनाना, कदम दर कदम कदम कहाँ क्या 1 Cloudflare tunnel एक public hostname, ha.example.com, जोड़िए जो LAN पर Home Assistant की ओर इशारा करे। पहले बॉक्स का पता पक्का कीजिए। मेरा उसके MAC से बना IPv6 पता है, तो वह खिसक नहीं सकता 2 SSL/TLS → Client Certificates हर फ़ोन के लिए एक सर्टिफ़िकेट। key अपनी मशीन पर बनाइए और Cloudflare को एक CSR दीजिए, जिसे API मानता है26। key उस बॉक्स से कभी बाहर नहीं जाती जिसने उसे बनाया। key Cloudflare से बनवाइए तो वह एक बार दिखती है, फिर कभी नहीं19 3 Client Certificates → Hosts ha के लिए mTLS चालू कीजिए 4 Security → WAF → Custom rules ऊपर वाला block नियम जोड़िए 5 SSL/TLS → Edge Certificates Always Use HTTPS चालू, न्यूनतम TLS 1.2 6 Home Assistant → Network Trusted proxy, IP banning, external URL, फिर पाँच मिनट के अंदर confirm 7 एक Linux बॉक्स हर फ़ोन के लिए एक PKCS12 फ़ाइल बनाइए 8 हर फ़ोन इसे VPN और app user certificate के रूप में install कीजिए, ऐप की server settings में चुनिए, फिर ऐप को force-stop करके दोबारा खोलिए। ऐप को Most secure पर रखिए 9 टेस्ट मोबाइल डेटा, Wi-Fi बंद। ऐप कनेक्ट होता है। बिना सर्टिफ़िकेट वाला ब्राउज़र ब्लॉक होता है हर फ़ोन का एक सर्टिफ़िकेट, एक साझा नहीं। जब फ़ोन खोता है, तो आप उस फ़ोन को revoke करते हैं और दूसरा चलता रहता है।\nफ़ोन को सर्टिफ़िकेट और key एक PKCS12 फ़ाइल में चाहिए। Cloudflare सर्टिफ़िकेट PEM में लौटाता है और key आपके पास पहले से है, तो दोनों को जोड़िए:\nopenssl pkcs12 -export -in phone1.pem -inkey phone1.key \\ -name \u0026#34;ha-phone1\u0026#34; -out phone1.p12 यहीं लोग अटकते हैं। Android फ़ाइल के अंदर के encryption को लेकर नखरे करता है, और Home Assistant documentation कहता है कि पहले मौजूदा default आज़माइए और OpenSSL के -legacy flag वाले legacy container पर तभी जाइए जब वह मना हो जाए27। यही सलाह community threads में मिलती है जहाँ Apple के सामान पर ठीक install हुई फ़ाइल Android ने ठुकरा दी5। लैपटॉप पर openssl नहीं? Python का cryptography module दोनों container लिखता है, मौजूदा वाला और legacy वाला, और मेरा उसी से बना।\nइसे install करने का menu रास्ता फ़ोन बनाने वालों और Android संस्करणों के बीच बदलता रहता है। Pixel के लिए Google का अपना पेज शुरुआत की जगह है28। menu कुछ भी कहें, आपको user credential store चाहिए, CA store नहीं।\nआखिरी hop को encrypt करना Tunnel cloudflared पर ख़त्म होता है, और cloudflared घर में अपनी VM में चलता है। वहाँ से Home Assistant तक पहला build LAN पर सादा HTTP था। रास्ते का एक हिस्सा बिना TLS के, उस नेटवर्क के अंदर जिसमें कैमरे हैं। काफ़ी नहीं। इसलिए इसे एक ठीक-ठाक सर्टिफ़िकेट मिला, और उसके हिस्से नीचे हैं।\nहिस्सा सेटिंग क्यों Let\u0026rsquo;s Encrypt add-on DNS challenge, provider dns-cloudflare, उस एक zone पर Zone, DNS, Edit तक सीमित token29 HTTP challenge यहाँ नहीं चल सकता। validator के पास कोई क्लाइंट सर्टिफ़िकेट नहीं, तो WAF नियम उसे ब्लॉक कर देता है Home Assistant HTTP server सर्टिफ़िकेट /ssl/fullchain.pem, key /ssl/privkey.pem, trusted proxy और IP banning एक ही save में दो की जगह एक restart Tunnel ingress https://[address]:8123 और originServerName hostname पर सेट30 cloudflared origin सर्टिफ़िकेट verify करता है, उसे न देखने को कहने के बजाय अंदरूनी DNS घर के अंदर hostname बॉक्स के अपने पते से जवाब देता है घर पर फ़ोन सीधे उस तक जाते हैं। LAN URL में :8123 है; बाहर वाले में नहीं होना चाहिए, क्योंकि Cloudflare उस port को proxy नहीं करता31 रिन्यूअल एक automation add-on को हर रात चलाता है और 1 और 15 तारीख को Home Assistant restart करता है HTTP server सर्टिफ़िकेट शुरू में एक बार लोड करता है और फिर कभी दोबारा नहीं पढ़ता32 रास्ते में दो चीज़ें चुभीं। HTTP server की सेटिंग save करने से Home Assistant restart होता है, और लौटने पर वह सिर्फ़ HTTPS बोलता है, तो जिस tab से आपने save किया वह दोबारा कनेक्ट नहीं हो सकता। HTTPS पता खोलिए, वहाँ लॉगिन कीजिए, और पाँच मिनट वाला confirmation उस तरफ़ से हो जाता है।\nदूसरी है रिन्यूअल। Let\u0026rsquo;s Encrypt नब्बे दिन देता है और add-on तीस बचे होने पर renew करता है, तो महीने में दो restart हमेशा नया सर्टिफ़िकेट हफ़्तों पहले उठा लेते हैं। रोज़ का restart घर के लिए झंझट होगा और उससे कुछ नहीं मिलता।\nफ़ोन ने मुझे क्या सिखाया इसके ऊपर का सब कुछ फ़ोन हाथ में आने से पहले लिखा गया था। तीन चीज़ें उसके बाद ही दिखीं।\nसर्टिफ़िकेट Credential storage में User credentials के नीचे पहुँचता है, VPN और apps के लिए installed के रूप में चिह्नित, और install करते समय आप जो नाम टाइप करते हैं वही नाम बाद में हर chooser दिखाता है33। दो बार install कीजिए और दो entries मिलती हैं। दोनों चलती हैं। मुझे ऐसे ही पता चला।\nफिर ब्राउज़र। सर्टिफ़िकेट install होने के बाद Chrome ने पहली बार hostname पर पहुँचते ही system chooser दिखाया, सर्टिफ़िकेट भेजा, और लॉगिन पेज पर पहुँच गया। Helium, एक de-Googled Chromium build जो मैं भी चलाता हूँ, सीधे block पेज पर गया और keychain से कभी पूछा ही नहीं। वही फ़ोन, वही सर्टिफ़िकेट, वही मिनट।\nक्लाइंट Android keychain से पूछता है edge ने क्या देखा Chrome हाँ, एक chooser के साथ सर्टिफ़िकेट verified, Home Assistant तक Helium नहीं ब्लॉक, हर request Companion ऐप, web view हाँ, जब server setting सर्टिफ़िकेट की ओर इशारा करे Dashboard लोड हुआ Companion ऐप, native client हाँ, पर सिर्फ़ force-stop के बाद तब तक webhook posts ब्लॉक, उसके बाद 200 समय ऐप ने खाया। इसके दो क्लाइंट हैं: web view जो dashboard बनाता है, और एक native जो सेंसर और लोकेशन webhook पर post करता है। server settings में TLS client certificate सेट कीजिए और dashboard तुरंत चलता है। webhook posts edge पर ब्लॉक होती रहीं, क्योंकि native client ने अपना TLS setup ऐप शुरू होते समय बनाया था और उसे दोबारा नहीं बनाता। ऐप force-stop कीजिए, फिर खोलिए, और edge log दिखाता है कि posts 200 के साथ Home Assistant तक पहुँच रही हैं। ऐप में कुछ भी आपको यह नहीं बताता।\nऔर URL। घर का Wi-Fi बंद होने पर ऐप ने hostname को port 8123 पर आज़माया, क्योंकि मैंने जो external URL टाइप किया था उसमें LAN वाले से port चला आया था। वह port Cloudflare की ओर जाता है, Cloudflare उस पर सुनता नहीं, और ऐप दस-दस सेकंड के timeouts पर बैठा रिपोर्ट करता रहा कि वह कनेक्ट नहीं कर पा रहा। बाहर वाला URL बस hostname है। Port अंदर रहता है।\nजहाँ यह कमज़ोर पड़ता है यहाँ कुछ भी खुरदुरे किनारों से मुक्त नहीं, तो ये रहे वे।\nस्थिति क्या होता है क्या करें फ़ोन खोया या बेचा revoke होने तक उसका सर्टिफ़िकेट चलता रहता है Client Certificates में revoke कीजिए। नियम revocation जाँचता है Wear OS घड़ी फ़ोन में installed सर्टिफ़िकेट इस्तेमाल नहीं कर सकती घड़ी के अपने setup के दौरान PKCS12 फ़ाइल दीजिए12 iPhone Companion docs इस हिस्से को सिर्फ़ Android का बताते हैं भरोसा करने से पहले टेस्ट कीजिए घर से दूर लैपटॉप ब्राउज़र ब्लॉक, कोई सर्टिफ़िकेट नहीं ब्राउज़र में सर्टिफ़िकेट install कीजिए, या इसे मान लीजिए Android keychain छोड़ देने वाला ब्राउज़र Helium सीधे block पेज पर जाता है Chrome या ऐप। सर्वर की तरफ़ से कुछ मदद नहीं कर सकता Home Assistant पर सर्टिफ़िकेट renew हुआ restart तक पुराना ही दिया जाता है automation में महीने में दो बार का restart Cloudflare बंद कोई रिमोट एक्सेस नहीं घर लोकल रूप से चलता रहता है। लोकल चलाने का मतलब यही है ब्राउज़र वाली बात feature है, कमी नहीं। बिना सर्टिफ़िकेट की हर चीज़ अजनबी है, और इसमें मेरा अपना लैपटॉप भी शामिल है जब तक मैं उसे एक न दूँ।\nचाबी, पासवर्ड नहीं पासवर्ड वह है जो आप जानते हैं, और जो कुछ भी आप जानते हैं उसका अंदाज़ा लगाया जा सकता है, उसे phish किया जा सकता है, दोबारा इस्तेमाल किया जा सकता है या किसी और के breach से लीक किया जा सकता है। इंटरनेट पर पासवर्ड पेज डालिए और आप botnet और wordlist वाले हर किसी के ख़िलाफ़ संख्याओं के खेल में उतर गए। आप इसे सालों जीत सकते हैं। हारना बस एक बार है।\nसर्टिफ़िकेट वह है जो डिवाइस के पास है। कोई इसका अंदाज़ा नहीं लगाता। कोई इसे लाख बार नहीं आज़माता, क्योंकि request edge पर ही गिरा दी जाती है, इससे पहले कि आज़माने को कुछ हो। लॉगिन पेज अब भी है और अब भी मायने रखता है, पर अब वह दूसरा ताला है, अकेला नहीं।\nउस पेज के पीछे जो है वह web app नहीं है। वह ताले, हीटिंग, कार चार्जर और कैमरे हैं। इसे सामने के दरवाज़े जैसा मानिए, क्योंकि यह वही है।\nजिस बात पर मैं बार-बार लौटता हूँ वह यह है कि इसमें से किसी की कोई कीमत नहीं। Cloudflare फ़्री प्लान पर सर्टिफ़िकेट और नियम मुफ़्त देता है। Home Assistant ऐप वाला हिस्सा अपने ही Companion docs में documented करता है। इसकी कीमत बस एक शाम है, manuals ठीक से पढ़ने में, और इसलिए पूरे इंटरनेट की ओर मुँह किए पासवर्ड पेज का default एक ऐसा चुनाव है जो लोग उन्हें न पढ़कर करते हैं।\nHome Assistant — Remote access — अंदर आने के रास्तों के रूप में Home Assistant Cloud, VPN, reverse proxy और port forwarding।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6598 — IANA-Reserved IPv4 Prefix for Shared Address Space — Carrier-Grade NAT के लिए 100.64.0.0/10 range, जहाँ कई ग्राहक एक public पता साझा करते हैं और किसी को inbound port नहीं मिलता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — IPv6 compatibility — हर प्लान पर default में चालू; Cloudflare proxied hostnames के लिए “auto generates AAAA DNS records to allow IPv6 clients to connect”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Tunnel run parameters, edge-ip-version — cloudflared default में IPv4 पर Cloudflare से जुड़ता है; 6 या auto उसे IPv6 इस्तेमाल करवाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/android PR #3593 — Add custom header support — web view POST या WebSocket requests में headers नहीं जोड़ सकता; service tokens की जगह क्लाइंट सर्टिफ़िकेट सुझाए गए; users Android पर सर्टिफ़िकेट format की दिक्कतें बता रहे हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Cloudflare One client firewall requirements — UDP 2408 पर WireGuard, UDP 500, 1701 और 4500 पर fallback; UDP 443 पर MASQUE।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — VpnService — “There can be only one VPN connection running at the same time.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Connect an IP/CIDR — “You can connect an entire private network, a subnet, or an application defined by a static IP”; उस ट्रैफ़िक को छानने वाली Gateway network policies एक अलग, सुझाया गया कदम हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Download Cloudflare One Client — Windows, macOS, Linux, iOS 15+, Android 5.0+ और ChromeOS के लिए क्लाइंट; कोई Wear OS क्लाइंट सूचीबद्ध नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNabu Casa — Pricing — Home Assistant Cloud £6.50 महीना या £65.00 साल, टैक्स शामिल नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNabuCasa/hass-nabucasa — remote.py — Home Assistant Nabu Casa के साथ register होता है, उसे एक relay server मिलता है, और वह उस तक बाहर जुड़ता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Getting Started, TLS client authentication — “VPN \u0026amp; app user certificate” के रूप में install करें; Wear OS को onboarding के दौरान PKCS12 के रूप में सर्टिफ़िकेट चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Cloudflare Tunnel — cloudflared सिर्फ़ outbound कनेक्शन बनाता है, तो origin पर कोई inbound listener नहीं होता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant core — auth/providers/homeassistant.py — पासवर्ड 12 rounds पर bcrypt से hash होते हैं; अनजान username भी एक dummy checkpw चलाता है “to make timing the same as if user was found”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLet\u0026rsquo;s Encrypt — Certificate Transparency logs — “submits all certificates we issue to CT logs”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — DDoS Protection — अपने आप DDoS पहचान और रोकथाम, “Available on all plans”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare blog — Unmetered Mitigation — “Cloudflare will no longer terminate customers, regardless of the size of the DDoS attacks they receive, regardless of the plan level they use.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Use mTLS with Cloudflare protected resources — “100 Client Certificates per Zone are included for free”; Access mTLS एक “Zero Trust Enterprise only feature” है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Create a client certificate — Free, Pro और Business पर हर zone में 100 active सर्टिफ़िकेट; revoke करने से जगह खाली होती है; बनने के बाद सर्टिफ़िकेट और key दोबारा नहीं दिखते।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — WAF custom rules — availability टेबल: Free प्लान पर पाँच custom rules।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Enable mTLS — हर hostname के लिए mTLS चालू करना, फिर WAF custom rule से उसे लागू करना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Client certificate variables — WAF custom rules के लिए उपलब्ध mTLS fields।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — cf.tls_client_auth.cert_revoked — “When true, the cf.tls_client_auth.cert_verified field is also true.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant — HTTP integration — reverse proxies, trusted proxies और IP banning; सेटिंग 2026.8 में UI में गईं और पाँच मिनट के अंदर confirm न हों तो वापस हो जाती हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Connection security level — Most secure सिर्फ़ घर के नेटवर्क पर बिना encryption वाला URL इस्तेमाल करता है; Android पर location “Allow all the time” चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare API — Create Client Certificate — एक csr और validity_days लेता है; private key आपके पास रहती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Companion — Networking, TLS Client Authentication — पहले मौजूदा PKCS12 default आज़माएँ, OpenSSL -legacy container सिर्फ़ तब जब वह विफल हो।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — Pixel Phone Help, Add \u0026amp; remove certificates — Pixel पर सर्टिफ़िकेट हाथ से install करना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHome Assistant Let\u0026rsquo;s Encrypt add-on — documentation — DNS challenge; Cloudflare token “requires only the Zone:DNS:Edit permission”; सर्टिफ़िकेट तभी renew होते हैं जब add-on दोबारा शुरू किया जाए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Origin configuration parameters — originServerName, वह hostname जो cloudflared origin सर्टिफ़िकेट पर अपेक्षित करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare — Network ports — HTTP और HTTPS ports की तय सूची जिन्हें Cloudflare proxy करता है; 8123 उसमें नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nhome-assistant/core — components/http/server.py — _create_ssl_context async_bind से एक बार load_cert_chain बुलाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAndroid Developers — KeyChain — user-installed credentials और choosePrivateKeyAlias chooser जिसे कोई ऐप एक चुनने के लिए बुलाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/homeassistant/home-assistant-app-over-cloudflare-mtls/","summary":"घर से दूर Android ऐप से Home Assistant तक पहुँचना, इंटरनेट पर लॉगिन पेज खोले बिना। रिमोट एक्सेस के विकल्प exposure, असली लागत (बिल के साथ मशीन का लोड और DDoS भी), ब्लॉक होने के जोखिम और बैटरी पर कैसे तुलना करते हैं, Cloudflare Access और service token ऐप के लिए ठीक क्यों नहीं, फ़्री प्लान के क्लाइंट सर्टिफ़िकेट और एक WAF custom rule tunnel के hostname को सिर्फ़ उन फ़ोनों तक कैसे बाँधते हैं जिनके पास सर्टिफ़िकेट है, reverse proxy के लिए Home Assistant की कौन सी सेटिंग चाहिए, PKCS12 फ़ाइल बनाना, origin पर Let\u0026rsquo;s Encrypt सर्टिफ़िकेट लगाना और रिन्यूअल के लिए restart क्यों ज़रूरी है, पहले दो घंटों में स्कैनरों ने क्या किया, और फ़ोन, Chrome, Helium और Companion ऐप के दो क्लाइंटों ने सर्टिफ़िकेट के साथ क्या किया। खुद होस्ट किया nginx या Caddy वाला तरीका एक अलग पोस्ट में है।","title":"Cloudflare पर Home Assistant ऐप, एक सर्टिफ़िकेट से लॉक, फ़्री प्लान पर"},{"content":"मैं अपने लैपटॉप में YubiKey से लॉगिन करता हूँ। PIN, touch, डेस्कटॉप। कोई पासवर्ड टाइप नहीं होता।\nफिर पहला app जिसे कोई रखा हुआ secret चाहिए, शुरू होता है और GNOME एक बॉक्स सामने रख देता है: “An application wants access to the keyring \u0026lsquo;Login\u0026rsquo;, but it is locked.” हर लॉगिन पर। वही बॉक्स, वही सवाल, उस पासवर्ड के लिए जिसके बारे में मुझे अभी बताया गया था कि उसकी ज़रूरत नहीं है।\nकोई एक हिस्सा ख़राब नहीं है। हर हिस्सा वही कर रहा है जिसके लिए उसे बनाया गया था। दिक़्क़त यह है कि keyring इस मान्यता पर डिज़ाइन किया गया था कि लॉगिन में हमेशा पासवर्ड होता है, और बिना पासवर्ड वाला लॉगिन यह मान्यता तोड़ देता है, किसी को बताए बिना।\nKey से लॉगिन keyring को भूखा क्यों छोड़ता है Login keyring वह जगह है जहाँ डेस्कटॉप वे secrets रखता है जो apps उसे सौंपते हैं: Wi-Fi keys, ब्राउज़र की storage keys, वे tokens जिनसे chat clients, password managers और conferencing apps साइन-इन बने रहते हैं। यह डिस्क पर आपके लॉगिन पासवर्ड से एन्क्रिप्ट होकर पड़ा रहता है, और Secret Service API1 वह तरीक़ा है जिससे apps अंदर की चीज़ माँगते हैं।\nआम तौर पर आपको यह कभी दिखता ही नहीं। आप लॉगिन स्क्रीन पर पासवर्ड टाइप करते हैं, PAM stack उसे अकाउंट से मिलाकर जाँचता है, और उसी stack में नीचे एक keyring module चुपचाप वही पासवर्ड उठाकर keyring खोल देता है, डेस्कटॉप पूरी तरह दिखने से पहले ही। एक पासवर्ड, दो काम।\nमेरा stack इस लाइन से शुरू होता है:\nauth sufficient pam_u2f.so cue sufficient का मतलब है कि YubiKey सफल होते ही authentication वहीं ख़त्म। Yubico बिना पासवर्ड वाले लॉगिन के लिए ठीक यही लिखता है2। यह काम करता है। इसका मतलब यह भी है कि पासवर्ड वाला कदम कभी चलता ही नहीं, तो stack में कोई पासवर्ड होता ही नहीं जिसे keyring module उठा सके। Keyring तब तक लॉक रहता है जब तक कोई उसे माँगे नहीं, और माँगने वाला वह app होता है जो सबसे पहले शुरू होता है।\nअंदर आने के दो रास्ते, और हर एक keyring को क्या देता है अंदर आने के दो रास्ते, और हर एक keyring को क्या देता है Keyring सिर्फ़ पासवर्ड से खुलता है। YubiKey लॉगिन पासवर्ड बनाता ही नहीं, तो script उसे देती है। पासवर्ड लॉगिन pam_unix पासवर्ड जाँचता है pam_oo7 वही पासवर्ड oo7-daemon को देता है login keyring उससे डिक्रिप्ट होता है keyring खुला, कोई prompt नहीं YubiKey लॉगिन (PIN + touch) pam_u2f sufficient है, auth stack वहीं ख़त्म पासवर्ड वाला कदम नहीं चलता, पासवर्ड है ही नहीं oo7-daemon को कुछ नहीं मिलता keyring लॉक, पहली बार में prompt Autostart script PIN + touch, key hmac-secret लौटाती है रखा पासवर्ड डिक्रिप्ट, keyring अनलॉक Keyring पढ़ने वाले apps उसके खुलने तक रुकते हैं, तो कोई भी पहले prompt नहीं उठा सकता। पासवर्ड वाला लॉगिन keyring को वही एक चीज़ देता है जिससे वह खुलता है। Key वाला लॉगिन उसे कुछ नहीं देता। दाईं ओर की autostart script वही है जो यह पोस्ट बनाती है। आम उपाय, और हर एक की क़ीमत इसके चार आम जवाब हैं। हर एक कुछ न कुछ छोड़ देता है।\nउपाय आपको क्या मिलता है क़ीमत क्या है Prompt पर पासवर्ड टाइप कीजिए कुछ बनाना नहीं पड़ता Prompt, हर लॉगिन पर। Key ने आपको कुछ भी नहीं बचाया खाली keyring पासवर्ड Prompt ग़ायब हर रखा हुआ secret डिस्क पर बिना एन्क्रिप्शन के पड़ा है लॉगिन पर पासवर्ड और key असली two-factor, keyring अपने आप खुलता है हर लॉगिन पर पासवर्ड टाइप करना, जिससे बचने के लिए ही key ली थी TPM में सील किया पासवर्ड, लॉगिन पर अनलॉक न prompt, न टाइपिंग जिसे भी उस मशीन पर session मिल जाए, उसे secrets मिल जाते हैं। न PIN, न key YubiKey hmac-secret (यह पोस्ट) न prompt, PIN + touch, पासवर्ड लॉगिन भी चलता रहता है लॉगिन के बाद दूसरा PIN और touch, और एक script जिसकी देखभाल करनी है खाली पासवर्ड वही है जिस पर ज़्यादातर forum threads ख़त्म होते हैं, और यह सबमें सबसे बुरा है। TPM वाला रास्ता ठीक-ठाक है, पर TPM आपसे कभी कुछ पूछता नहीं, तो वह लैपटॉप से निकाली गई डिस्क की रक्षा करता है, उस session की नहीं जिस पर कोई तब बैठ गया जब आप चाय बना रहे थे। मैं चाहता था कि keyring उसी चीज़ से बँधा हो जिससे मेरा लॉगिन बँधा है: key, और उसके साथ का PIN।\nKey एक secret रख सकती है FIDO2 key सिर्फ़ हाँ या ना से ज़्यादा करती है। CTAP 2.1 standard में hmac-secret नाम का एक extension है, जो “is used by the platform to retrieve a symmetric secret from the authenticator when it needs to encrypt or decrypt data using that symmetric secret”3।\nयह काम सीधे तरीक़े से करता है। जब आप credential बनाते हैं, key कुछ random values बनाकर अपने अंदर रख लेती है। बाद में आप उसे एक salt भेजते हैं, और वह उस salt का HMAC लौटाती है, अपनी छुपी value को key बनाकर। वही credential, वही salt, हर बार वही जवाब। दूसरी key, कुछ नहीं।\nयहाँ जो बात मायने रखती है: key ऐसी दो छुपी values रखती है, CredRandomWithUV और CredRandomWithoutUV3। UV यानी user verification, जो इस key पर PIN है। PIN के साथ माँगिए तो एक secret मिलता है। सिर्फ़ touch से माँगिए तो बिल्कुल अलग। तो PIN secret के आगे लगाया गया कोई check नहीं है। वह secret का हिस्सा है।\nइनपुट कहाँ रहता है अकेले इससे क्या मिलता है Credential ID और salt ~/.local/share/yubikey-keyring/, सादी फ़ाइलें कुछ नहीं। ये secret नहीं हैं एन्क्रिप्टेड keyring पासवर्ड उसी फ़ोल्डर में, password.enc डिक्रिप्शन secret के बिना कुछ नहीं छुपी credential value YubiKey के अंदर, कभी बाहर नहीं जाती Salt और touch के बिना कुछ नहीं PIN आपके दिमाग़ में PIN वाला secret चुनता है। ग़लत PIN, कोई secret नहीं, और key उस कोशिश को गिनती है चारों मिलकर अकाउंट पासवर्ड वापस देते हैं। कोई एक हटा दीजिए और आप prompt पर हैं, जहाँ आप वैसे भी होते।\nClaude के साथ मैंने क्या बनाया Keyring पासवर्ड जान-बूझकर मेरा अकाउंट पासवर्ड ही है। इससे पासवर्ड लॉगिन सामान्य तरीक़े से चलता रहता है: लॉगिन स्क्रीन पर टाइप कीजिए और PAM stack keyring ख़ुद खोल देता है, कोई script शामिल नहीं। मदद की ज़रूरत YubiKey वाले रास्ते को है।\nहिस्सा काम yubikey-keyring-setup एक बार का। Key पर hmac-secret चालू करके FIDO2 credential बनाता है। PIN और touch चाहिए yubikey-keyring-reset अकाउंट पासवर्ड माँगता है, कुछ भी छूने से पहले उसे unix_chkpwd से असली अकाउंट से मिलाता है, PIN वाले secret से एन्क्रिप्ट करता है, पुराने keyring का backup लेता है और नया बनाता है yubikey-keyring-unlock लॉगिन पर चलता है। PIN dialog, touch, डिक्रिप्ट, अनलॉक। PIN के दो मौक़े, फिर हार मानकर आपको सामान्य prompt पर छोड़ देता है wait-for-keyring Keyring पढ़ने वाले हर app की autostart entry को लपेटता है। हर एक को 60 सेकंड तक रोकता है जब तक keyring खुल न जाए Secret fido2-assert4 से निकलता है, hmac-secret के लिए -h, touch के लिए -p और PIN के लिए -v के साथ। पासवर्ड OpenSSL से एन्क्रिप्ट होता है, AES-256, निकाले गए secret पर PBKDF2 के 200,000 rounds के साथ। लॉगिन पर पासवर्ड सिर्फ़ एक pipe से होकर जाता है। निकाला गया secret और, reset के दौरान, टाइप किया गया पासवर्ड थोड़ी देर /tmp के नीचे एक private temporary directory में रहते हैं, जो Fedora पर RAM वाला tmpfs है, और इस्तेमाल होते ही मिटा दिए जाते हैं। दोनों में से कोई भी कभी command line पर नहीं जाता जहाँ ps उसे देख सके।\nwait-for-keyring वह हिस्सा है जिसे लोग छोड़ देंगे। मत छोड़िए। Autostart का क्रम पक्का नहीं होता, और अगर कोई app मेरे PIN टाइप करने से एक सेकंड पहले अपना token माँग ले, तो GNOME मेरे वाले के ऊपर पुराना prompt खड़ा कर देता है, और उपाय टूटा हुआ लगता है जबकि वह टूटा नहीं है।\nScripts आपकी हैं, ले जाइए: yubikey-keyring.zip, SHA-256 9b3670cf0f38c1b93e7738d2f68abef0380786d918491973e3ebefa5143e6263। इसमें scripts, एक installer, एक README और नीचे बताया गया test harness है। इसमें कोई credential, salt या पासवर्ड नहीं है। वे setup चलाने पर आपकी अपनी मशीन पर बनते हैं। README पढ़िए, फिर अपने असली keyring के पास कुछ भी जाने देने से पहले test/run.sh चलाइए।\nबनाते समय क्या सामने आया यह एक घंटे का काम होना था। शाम का ज़्यादातर हिस्सा उन चीज़ों पर गया जिनका documentation में ज़िक्र ही नहीं है।\nDaemon मेरे नीचे से बदल चुका था इस समस्या के लिए मैंने जितनी guides पढ़ी हैं, सब gnome-keyring-daemon से बात करती हैं, और हर एक मुझे ग़लत दिशा में भेजती, क्योंकि मेरी मशीन पर जवाब देने वाला process oo7-daemon 0.7.0 था, एक beta। लैपटॉप उसी शाम पहले Fedora 45 पर गया था, 5,464 कदमों का एक dnf transaction, और oo7 उसी के साथ आया था।\noo7 Secret Service का Rust में बना implementation है, जिसका अपना server और अपना PAM module है5। उसके पक्ष में यह बात है कि वह पासवर्ड से अनलॉक करने के लिए gnome-keyring का private D-Bus interface लागू करता है, तो मौजूदा टूल चलते रहते हैं। उस interface का नाम org.gnome.keyring.InternalUnsupportedGuiltRiddenInterface है6। नाम ही बता देता है कि उस पर कितना भरोसा करना है। यह काम करता है, मैंने टेस्ट किया है, और फिर भी मुझे उम्मीद है कि यह किसी दिन बदलेगा।\nपहला टाइप किया गया पासवर्ड keyring का पासवर्ड बन जाता है इसी ने पूरी शाम की गुत्थी सुलझाई।\nजब oo7 शुरू होता है और उसे कोई keyring फ़ाइल नहीं मिलती, तो वह फ़ाइल नहीं बनाता। वह apps को login नाम का एक लॉक placeholder दिखाता है, और उस placeholder को अनलॉक करने के लिए कोई भी पहला पासवर्ड जो इस्तेमाल करे, वही keyring का पासवर्ड बन जाता है, हालाँकि फ़ाइल तभी लिखी जाती है जब कोई app अपना पहला secret रखता है।\nमेरी keyring फ़ाइल 20:45 पर बनी थी, और उसका पहला item एक ऐसे app से आया था जो कुछ सेकंड पहले शुरू हुआ था। तो 20:45 पर मैंने एक prompt में कुछ टाइप किया जिसे मैं रास्ते से हटाना चाहता था, और वही पासवर्ड बन गया। उसके बाद मैंने जो भी आज़माया, कुछ भी उसे नहीं खोल पाया। अनलॉक वाला code भी दोषी नहीं था: मैंने यह एक throwaway keyring पर जाने-पहचाने पासवर्ड के साथ साबित किया, जो साफ़-साफ़ लॉक, अनलॉक और डिलीट हुआ।\nफिर मैंने placeholder को एक throwaway daemon पर जाँचा। फ़ाइल बनने से पहले कोई भी पासवर्ड उसे अनलॉक कर देता है, ग़लत पासवर्ड भी। तो उस समय कुछ भी नहीं बताता कि आपने अभी-अभी एक पासवर्ड सेट कर दिया है। पता अगले लॉगिन पर चलता है, जब सही पासवर्ड, जहाँ तक आपको पता है, ठुकरा दिया जाता है।\nस्थिति किसी भी पासवर्ड से अनलॉक क्या लिखा जाता है कोई keyring फ़ाइल नहीं, placeholder दिखता है सफल अभी कुछ नहीं पहला item रखा गया लागू नहीं फ़ाइल बनती है, जो भी टाइप हुआ था उससे एन्क्रिप्ट उसके बाद हर लॉगिन सिर्फ़ 20:45 वाला पासवर्ड चलता है लागू नहीं तो मैंने उसका पीछा करना छोड़ दिया। Reset पुराने keyring का backup लेता है, placeholder को अकाउंट पासवर्ड से अनलॉक करता है, और तुरंत एक marker item रख देता है ताकि फ़ाइल वहीं और उसी समय लिखी जाए, एक ऐसे पासवर्ड से जो मुझे पता है।\nFIDO2 टूल PIN सिर्फ़ terminal से लेते हैं fido2-cred और fido2-assert PIN सिर्फ़ controlling terminal से पढ़ते हैं, और कहीं से नहीं। लॉगिन पर शुरू हुई script के पास कोई terminal नहीं होता। तो एक छोटा wrapper है जो टूल को pseudo-terminal के नीचे चलाता है, उसके output में PIN शब्द का इंतज़ार करता है, और एक dialog से PIN टाइप कर देता है। Python की बीस लाइनें। सुंदर नहीं, पर काम करता है, और PIN कभी किसी फ़ाइल या argument list को नहीं छूता।\nइसे ऐसी जगह टेस्ट कीजिए जहाँ यह आपको नुक़सान न पहुँचा सके Claude Code ने जो सबसे काम की चीज़ की, वह थी reset script पर मेरे असली keyring के साथ भरोसा करने से इनकार। उसने पूरा flow पहले एक private D-Bus session (dbus-run-session) पर दूसरे oo7-daemon के ख़िलाफ़ चलाया, एक throwaway home directory, एक नक़ली पुराने keyring और एक ऐसे टेस्ट पासवर्ड के साथ जिसमें £, @, \u0026quot; और # थे।\nपहला run फ़ेल हुआ। अच्छा हुआ। Reset ने पुराने keyring को उसके backup में भेजा, daemon दोबारा शुरू किया, oo7 का placeholder login देखा, उसे असली keyring समझा और रुक गया। मेरी मशीन पर इससे मैं बिना किसी keyring के रह जाता, और एक backup जिसे हाथ से वापस रखना पड़ता। अब script placeholder को ठुकराने की जगह अनलॉक करती है, और अगर backup लेने के बाद कुछ भी फ़ेल हो, तो वह पुराना keyring अपने आप वापस रख देती है।\nClaude Code की अपनी safety check ने भी reset के एक पहले वाले version को असली keyring पर तब तक रोके रखा जब तक मैंने पुष्टि नहीं की। उस समय खीज हुई। फ़ैसला बिल्कुल सही था।\nटेस्ट, throwaway daemon पर नतीजा Terminal prompt से reset, पुराने keyring का backup पास नए keyring पर पुराना पासवर्ड ठुकराया गया नया daemon, जैसे लॉगिन पर लॉक हालत में शुरू ग़लत पासवर्ड ठुकराया गया सही पासवर्ड, वही रास्ता जो पासवर्ड लॉगिन लेता है अनलॉक नया daemon, unlock script से PIN + touch अनलॉक Keyring पहले से खुला होने पर unlock script तुरंत बाहर, touch नहीं माँगा फिर एक बार असली चीज़ पर, keyring को हाथ से लॉक करके और unlock script को वैसे ही चलाकर जैसे लॉगिन चलाता है: PIN, touch, खुल गया।\nकच्ची कोरें यह चलता हुआ setup है, तैयार product नहीं, और ये वे हिस्से हैं जिनके बारे में मुझे पता है।\nहर key लॉगिन पर दो बार PIN। एक लॉगिन स्क्रीन पर PAM के लिए, एक keyring के लिए। ये key से दो अलग requests हैं और key इन्हें जोड़ेगी नहीं। सिर्फ़ touch वाला keyring एक बचा लेगा, पर तब लॉगिन के बाद PIN किसी चीज़ की रक्षा नहीं करेगा। अकाउंट पासवर्ड बदलिए और रखी हुई कॉपी पुरानी पड़ जाती है। Unlock script चुपचाप फ़ेल होने की जगह notification में यह बता देती है। Reset फिर से चलाइए और बात बन जाती है। Key खो जाए तो आप फिर पासवर्ड टाइप करने पर आ जाते हैं। कुछ नहीं खोता, क्योंकि पासवर्ड अब भी अकाउंट पासवर्ड ही है। कुछ apps अपनी autostart फ़ाइलें ख़ुद दोबारा लिख देते हैं। अगर इनमें से कोई कभी फिर prompt उठाए, तो वजह यही है, और wrapper को वापस लगाना होगा। oo7 एक beta है, और अनलॉक call एक ऐसे interface से जाती है जिसके नाम में “Unsupported” है। oo7 के हर update के बाद भरोसा करने से पहले एक टेस्ट लॉगिन ज़रूरी है। समापन Keyring कभी टूटा नहीं था। Key भी नहीं। दोनों लॉगिन क्या होता है, इस बारे में अलग-अलग मान्यताओं पर बने थे, और ऊपर किसी ने उन्हें जोड़ा नहीं। बिना पासवर्ड वाला लॉगिन Yubico ने document किया है, Fedora के authselect profiles में आता है और एक feature flag से चालू होता है। उसमें कहीं कुछ भी आपको यह नहीं बताता कि जिस पल आप इसे इस्तेमाल करते हैं, आपके डेस्कटॉप का हर secret एक ऐसे पासवर्ड के पीछे बंद रहता है जिसे आप अब टाइप ही नहीं कर रहे।\nइसलिए यह खाई उस पर आ पड़ती है जो मशीन पर बैठा है, और उपाय उतना ही अच्छा है जितनी उस व्यक्ति की समझ कि secret असल में कहाँ रहता है। आसान जवाब, खाली पासवर्ड, वही है जिसकी ओर ज़्यादातर लोगों को भेजा जाता है, और वह एक dialog box के बदले आपके हर token की बिना एन्क्रिप्शन वाली फ़ाइल दे देता है। वह उपाय नहीं है। वह चुपचाप हार मान लेना है।\nसही रूप पूरे समय वहीं था। Key एक secret रख सकती है, standard साफ़ शब्दों में यही कहता है, और PIN उस secret का हिस्सा हो सकता है, उसके आगे का दरवाज़ा नहीं। इसे जोड़ने में एक शाम और एक test harness लगा। इनमें से किसी की भी ज़रूरत नहीं पड़नी चाहिए थी।\nfreedesktop.org, Secret Service API Draft — वह D-Bus API जिससे डेस्कटॉप apps secrets रखते और निकालते हैं, और जिसे gnome-keyring और oo7 दोनों लागू करते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYubico, pam-u2f — “For a passwordless experience, where the authenticator PIN can be used in place of the user password”, उदाहरण वाली लाइन auth sufficient pam_u2f.so authfile=/etc/u2f_mappings cue pinverification=1 के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFIDO Alliance, Client to Authenticator Protocol 2.1, section 12.5 HMAC Secret Extension — “This extension is used by the platform to retrieve a symmetric secret from the authenticator when it needs to encrypt or decrypt data using that symmetric secret”, और “The authenticator generates two random 32-byte values (called CredRandomWithUV and CredRandomWithoutUV)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nYubico, libfido2 fido2-assert manual — assertion माँगने वाला command-line टूल, hmac-secret, user presence और PIN के विकल्पों के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nlinux-credentials/oo7 on GitHub — “server: org.freedesktop.secrets server implementation” और “pam: PAM integration for the server implementation”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\noo7 source, server/src/gnome/internal.rs — gnome-keyring के internal unlock interface का oo7 वाला implementation, UnlockWithMasterPassword सहित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/random/yubikey-login-locked-keyring/","summary":"YubiKey से लॉगिन कीजिए और GNOME फिर भी पासवर्ड माँगता है, क्योंकि login keyring उस पासवर्ड से एन्क्रिप्ट है जो आपके लॉगिन ने कभी दिया ही नहीं। यह पोस्ट बताती है कि pam_u2f का sufficient होना keyring को भूखा क्यों छोड़ता है, आम उपायों की क़ीमत क्या है (खाली पासवर्ड, हर बार पासवर्ड टाइप करना, TPM), और मैंने जो उपाय बनाया: key का FIDO2 hmac-secret, PIN और touch के पीछे बंद, जो अकाउंट पासवर्ड की रखी हुई कॉपी को डिक्रिप्ट करके लॉगिन पर oo7-daemon को अनलॉक करता है। फिर वह सब जो बनाते समय सामने आया: Fedora 45 ने gnome-keyring की जगह oo7 लगा दिया था, oo7 का placeholder keyring पहला टाइप किया गया पासवर्ड अपना बना लेता है, FIDO2 टूल PIN सिर्फ़ terminal से पढ़ते हैं, और एक reset script जो मुझे बिना किसी keyring के छोड़ देती, जिसे पहले एक throwaway daemon पर टेस्ट करके पकड़ा गया। Scripts, एक installer और वह test harness डाउनलोड के लिए उपलब्ध हैं।","title":"मेरी YubiKey से लॉगिन हो जाता है। मेरे keyring को कभी बताया ही नहीं गया।"},{"content":"Licence पहले से firmware में है बहुत से लोगों के पास Fisher-Price OS (Windows) का licence है, बिना उन्होंने कभी उसकी product key देखे। वह मशीन के साथ आया था, और key उस मशीन के firmware में, MSDM नाम के एक छोटे ACPI table में रहती है।\nफिर मशीन वह जगह नहीं रहती जहाँ काम होता है। या तो उसका मालिक वह licence उस VM में चाहता है जो अब वह आपसे किराये पर लेता है, या मशीन खुद wipe होकर Proxmox host बन जाती है, और उसके साथ आई OS की प्रति ऊपर एक VM के रूप में वापस चाहिए।\nयांत्रिक रूप से, यह QEMU का एक option है। समस्या यही है। QEMU कोई भी table बिना जाँचे guest को दे देता है, guest जो भी key मिले उससे activate हो जाता है, और stack में कहीं कुछ नहीं पूछता कि licence इनमें से किसी की इजाज़त देता है या नहीं। यह post बताती है कि table क्या है, उसे खराब table आगे बढ़ाए बिना VM में कैसे पहुँचाएँ, उसे ले जाने के बारे में Microsoft की शर्तें क्या कहती हैं, और volume licence उसके पास क्यों नहीं जाता।\nTable क्या है OEM Activation 3.0 के बाद से, PC बनाने वाला key को case के नीचे sticker पर नहीं छापता, जहाँ phone camera वाला कोई भी उसे copy कर ले, बल्कि key मशीन के firmware में जाती है। Microsoft का factory tooling “injects the product keys into the firmware”, और उसका validation step जाँचता है “that the MSDM table exists” और यह कि उसका header और entries “comply with the correct formats”1। इस तरह तैयार मशीन “activated by using the OA3 DPK in the firmware” होती है2। MSDM एक सामान्य ACPI table है, और Linux पर यह सीधे firmware से पढ़ा जाता है:\nsudo cat /sys/firmware/acpi/tables/MSDM \u0026gt; msdm.bin जिस laptop पर यह लिखा गया, उसमें एक है। 85 bytes।\nMicrosoft की प्रकाशित specification MSDM signature के साथ standard 36-byte ACPI header परिभाषित करती है, और फिर रुक जाती है। Header के बाद सब कुछ एक “Proprietary data structure that contains all the licensing data necessary to enable Windows activation” है3।\nBytes क्या रखता है कहाँ से पता 0 से 35 standard ACPI header: signature MSDM, length, checksum, OEM ID Microsoft की specification 36 से 55 20 bytes के fields: version, data type, data length असली tables, कोई प्रकाशित specification नहीं 56 से 84 29 अक्षरों की product key, पाँच-पाँच के पाँच समूह असली tables, कोई प्रकाशित specification नहीं आप QEMU को जो भी दें, वह आगे बढ़ा देगा QEMU का -acpitable file= लेता है “whole ACPI table from the specified files, including all ACPI headers (possible overridden by other options)”4, और फिर guest को MSDM table ठीक वैसा दिखता है जैसा laptop का firmware दिखाता। इसे जानबूझकर एक नकली key से जाँचा गया। Bytes दूसरी तरफ़ बिल्कुल वैसे ही निकले, signature से आखिरी अक्षर तक।\nQEMU कुछ भी नहीं ठुकराता। टूटे upload के साथ hw/acpi/core.c यह करता है5:\nFile में क्या गलत है QEMU क्या करता है guest को क्या दिखता है Header की length file से मेल नहीं खाती चेतावनी देता है, फिर length को असली आकार से बदल देता है एक valid header Checksum का जोड़ शून्य नहीं आता उसे दोबारा गिनता है, हर table पर, हर बार एक valid checksum Key कटी हुई या बिगड़ी हुई कुछ नहीं, header के बाद का data उसका काम नहीं टूटी key के चारों ओर valid दिखने वाला table Guest के पास फ़र्क बताने का कोई तरीका नहीं है, और आपके पास भी नहीं, जब तक कोई support ticket न खोले। किसी को इसका पता सबसे पहले तब चलता है जब किसी customer का activation fail होता है।\nतो अगर customers इन्हें upload करते हैं, तो QEMU के देखने से पहले उन्हें जाँचिए:\n#!/usr/bin/env python3 \u0026#34;\u0026#34;\u0026#34;Refuse anything that is not a well-formed MSDM table before QEMU sees it.\u0026#34;\u0026#34;\u0026#34; import re, struct, sys t = open(sys.argv[1], \u0026#39;rb\u0026#39;).read() fail = lambda why: sys.exit(f\u0026#34;{sys.argv[1]}: {why}\u0026#34;) if len(t) \u0026lt; 56: fail(f\u0026#34;{len(t)} bytes, too short for an MSDM table\u0026#34;) sig, length = t[:4], struct.unpack_from(\u0026#39;\u0026lt;I\u0026#39;, t, 4)[0] if sig != b\u0026#39;MSDM\u0026#39;: fail(f\u0026#34;signature is {sig!r}, not MSDM\u0026#34;) if length != len(t): fail(f\u0026#34;header says {length} bytes, file is {len(t)}\u0026#34;) if sum(t) \u0026amp; 0xff: fail(\u0026#34;checksum does not sum to zero\u0026#34;) ver, _, dtype, _, dlen = struct.unpack_from(\u0026#39;\u0026lt;5I\u0026#39;, t, 36) if (ver, dtype) != (1, 1): fail(f\u0026#34;version {ver}, data type {dtype}: expected 1 and 1\u0026#34;) if dlen != 29 or 56 + dlen != length: fail(f\u0026#34;data length {dlen}: expected 29\u0026#34;) key = t[56:].decode(\u0026#39;ascii\u0026#39;, \u0026#39;replace\u0026#39;) if not re.fullmatch(r\u0026#39;([0-9A-Z]{5}-){4}[0-9A-Z]{5}\u0026#39;, key): fail(\u0026#34;data is not a 5x5 product key\u0026#34;) print(f\u0026#34;OK OEM {t[10:16].decode(errors=\u0026#39;replace\u0026#39;).strip()!r} key *****-*****-*****-*****-{key[-5:]}\u0026#34;) जाँच file को किस पर कसती है fail होने का मतलब Signature, length, checksum Microsoft का दस्तावेज़ी header file टूटी है Version, data type, data length, key का आकार असली tables का आकार इसे हाथ से देखिए, “यह जाली है” नहीं यह key कभी print नहीं करता, सिर्फ़ आखिरी समूह। Log file में पड़ी product key ऐसी product key है जिसे कोई और इस्तेमाल कर सकता है।\nएक अच्छे table और उसकी तीन टूटी प्रतियों पर चलाने पर:\nOK OEM \u0026#39;EXMPLE\u0026#39; key *****-*****-*****-*****-EEEEE bad-sum.bin: checksum does not sum to zero bad-trunc.bin: header says 85 bytes, file is 70 bad-sig.bin: signature is b\u0026#39;SLIC\u0026#39;, not MSDM यह कहाँ जाता है, और इसे वहाँ कौन रख सकता है Customer के upload से उस key तक जिससे guest activate होता है Customer का table msdm.bin, 85 bytes उनकी अपनी मशीन से Validator signature, length, checksum, key का आकार रखा गया /etc/pve/priv/ सिर्फ़ root, हर node VM args -acpitable file= सिर्फ़ root सेट करे QEMU length दोबारा लिखता है, checksum फिर गिनता है, कुछ नहीं ठुकराता Guest ACPI में MSDM, activation key पढ़ता है Validator QEMU के आगे बैठता है क्योंकि QEMU टूटे header को ठुकराने के बजाय ठीक कर देगा। Table cluster filesystem के private हिस्से में रहता है, तो वह VM के साथ किसी भी node पर जाता है और उसे सिर्फ़ root पढ़ सकता है। Product key एक राज़ है। उसकी जगह कहीं नहीं है जहाँ www-data पढ़ सके, और pmxcfs /etc/pve में ठीक एक जगह देता है जहाँ वह नहीं पढ़ सकता6:\nTable कहाँ रह सकता है कौन पढ़ सकता है हर उस node पर जहाँ VM migrate हो सकती है /etc/pve/priv सिर्फ़ root हाँ /etc/pve में कहीं और group पढ़ सकता है, web interface का www-data भी हाँ एक node पर कोई directory जो आप सेट करें नहीं 85 bytes पर यह pmxcfs की 1 MiB file सीमा के आसपास भी नहीं है7:\nmkdir -p /etc/pve/priv/msdm check-msdm.py upload.bin \u0026amp;\u0026amp; cp upload.bin /etc/pve/priv/msdm/9000.bin qm set 9000 --args \u0026#34;-acpitable file=/etc/pve/priv/msdm/9000.bin\u0026#34; qm set --args पूरी पंक्ति बदल देता है। अगर VM के args में पहले से SMBIOS या firmware options हैं, तो सबको एक साथ लिखिए। और क्योंकि args सिर्फ़ root के लिए है, यह आपके provisioning का काम है, ऐसा कुछ नहीं जो customer web interface से कर सके। यही सही दिशा है। Customer file देता है, आपका tooling उसे जाँचता और जोड़ता है।\nTable key ले जाता है, अधिकार नहीं यहाँ इस feature के लिए ठंडा दिमाग चाहिए। MSDM table को VM में ले जाना key को ले जाता है। Licence को नहीं।\nMicrosoft की अपनी शर्तें यही कहती हैं, और जो पंक्तियाँ मायने रखती हैं वे एक तालिका में आ जाती हैं:\nमामला Microsoft क्या कहता है स्रोत OEM licence, उसे ले जाना किसी दूसरे user को हस्तांतरणीय “only with the licensed device” OEM licence शर्तें8 OEM licence, कितने installs “only one instance of the software for use on one device, whether that device is physical or virtual” OEM licence शर्तें8 OEM licence, सीधे शब्दों में मूल PC से “locked” “and cannot be transferred to any other PC” Microsoft small business blog9 अपवाद हस्तांतरण के प्रावधान “do not apply” जहाँ software Germany या कुछ और देशों की सूची में खरीदा गया OEM licence शर्तें8 Customers के लिए host करना Services Provider License Agreement “hosted applications to end customers” के लिए है SPLA10 Desktop editions hosted VMs के रूप में “VMs must be hosted by a Qualified Multitenant Hoster (QMTH)” Microsoft Learn11 Table हमेशा customer की अपनी लाइसेंस वाली मशीन से आता है, आपके hosts से कभी नहीं। जो मामला शब्दों के बिल्कुल अंदर बैठता है, वह सबसे सीधा है: वह मशीन जिसके साथ licence बेचा गया था, अब Proxmox चला रही है, और Fisher-Price OS (Windows) की वही प्रति उस पर एक अकेली VM में ले जाई गई है। यह अब भी एक device पर एक instance है, और OEM शर्तें इसकी इजाज़त देती हैं “whether that device is physical or virtual”8। दूसरी VM, या दूसरी मशीन, और यह नहीं रहता।\nउस एक मामले में customer की मशीन और हाइपरवाइज़र एक ही box हैं, तो upload करने को कुछ नहीं और copy करने को कुछ नहीं। Proxmox kernel firmware का MSDM table पहले से /sys/firmware/acpi/tables/ के नीचे दिखाता है, जिसे सिर्फ़ root पढ़ सकता है, और Proxmox पर QEMU root के रूप में चलता है, तो वह table सीधे वहीं से ले सकता है:\nqm set 100 --args \u0026#34;-acpitable file=/sys/firmware/acpi/tables/MSDM\u0026#34; Copy के बजाय live table की ओर इशारा करने के दो नतीजे हैं। Path उसी node पर पढ़ा जाता है जिस पर VM शुरू होती है, तो यह standalone host पर ठीक है, cluster में नहीं: VM migrate कीजिए और उसे या तो उस node का table मिलेगा, यानी दूसरी मशीन पर दूसरा licence, या वह शुरू ही नहीं होगी, क्योंकि QEMU गायब file को can't open file … No such file or directory के साथ ठुकरा देता है। और यह एक पंक्ति है, जिसका मतलब है कि दूसरी VM पर भी paste करने को एक ही पंक्ति। वह दूसरी VM ही वह मामला है जिसे शर्तें cover नहीं करतीं, तो इसे एक VM पाती है, और कोई नहीं।\nतो feature बनाइए। तरीका ठोस है, और ऐसे customers हैं जिन्हें इसका इस्तेमाल करने का हक है; जिसने अपना licence Germany में खरीदा, वह उनमें से हो सकता है। लेकिन हक को उसकी सही जगह रखिए: आपकी terms of service में, customer यह वादा करता है कि उसके पास ऐसा licence है जो उसे आपकी VM में चलाने को cover करता है, और यह वादा upload button के कुछ भी करने से पहले होता है। Validator साबित करता है कि table सही बना है। कुछ भी साबित नहीं करता कि उसे इस्तेमाल करना उनका हक है।\nVolume licences कभी table के पास नहीं जाते क्या volume licence वाला customer वही रास्ता ले सकता है? नहीं। Table के ढोने के लिए कुछ है ही नहीं।\nMSDM OEM channel का है और किसी का नहीं। Microsoft की अपनी planning guide कहती है कि OEM activation “is available only for computers that are purchased through OEM channels and have the Windows operating system preinstalled”12। Volume licences तीन दूसरे models में से किसी एक से activate होते हैं, “Multiple Activation Keys (MAK)”, “KMS” और “Active Directory-based activation”12, और इन सब में key operating system में install होती है। उसे firmware से कुछ नहीं पढ़ता।\nतरीका Key कहाँ रहती है Guest किससे बात करता है Proxmox VM में OEM, OA 3.0 firmware में MSDM table Microsoft के activation servers ऊपर वाला -acpitable रास्ता MAK guest में install Microsoft, एक बार, key के activations में गिना जाता है internet access या phone से चलता है KMS guest में एक generic key (GVLK) TCP 1688 पर customer का KMS host उस तक route चाहिए, और कुछ भी activate करने से पहले 25 clients या 5 servers Active Directory guest में एक GVLK customer के domain controllers, कम से कम हर 180 दिन VM का उनके domain से जुड़ा होना ज़रूरी AVMA guest में एक generic key Hyper-V host का अपना Datacenter licence बिल्कुल उपलब्ध नहीं तो volume customer के लिए हाइपरवाइज़र पर बनाने को कुछ नहीं है। उनकी key उनकी image में जाती है, और आपका हिस्सा network का रास्ता है: उनके KMS host तक port 1688, या उनके domain controllers तक VPN। MSDM की जगह खाली रहती है, और उसे रहना चाहिए।\nदो चीज़ें लोगों को फँसाती हैं। Volume media पर मिली generic key अपने आप कुछ activate नहीं करती, क्योंकि “the GVLK doesn\u0026rsquo;t work unless a valid KMS host key can be found”12, तो customer की Enterprise ISO से बनी VM जिसके पास घर तक कोई route नहीं, बिना activate हुए पड़ी रहती है। और desktop volume licence अपने आप में licence नहीं है। Volume programmes “cover upgrades to Windows client operating systems only”, और “an existing retail or OEM operating system license is needed for each computer”12। Volume licence एक base licence के ऊपर बैठता है, अक्सर वही OEM वाला जिसके बारे में पिछला हिस्सा था, और वह आपकी VM में चल सकता है या नहीं, यह अब भी उस तालिका वाला hosting का सवाल है, activation का नहीं।\nAVMA अपनी एक अलग पंक्ति का हकदार है, क्योंकि यही वह है जो जवाब जैसा दिखता है। यह Microsoft का तरीका है जिससे कोई host अपने server guests को activate करता है, “the VM activation to the licensed virtualization host” से बाँधकर, और इसके लिए चाहिए “a Windows Server Datacenter edition with the Hyper-V server host role installed”13। बाकी के बारे में Microsoft साफ़ है: “AVMA doesn\u0026rsquo;t work with other server virtualization technologies”13। Proxmox पर server guests आपकी SPLA keys से या customer के अपने KMS से activate होते हैं।\nStack में कुछ भी कागज़ात नहीं जाँचता यहाँ हर परत अपना काम करती है और उससे ज़्यादा कुछ नहीं। Firmware एक key रखता है। QEMU bytes copy करता है और header ठीक कर देता है। Guest key पढ़ता है और उससे activate हो जाता है। इनमें से कोई नहीं बता सकता कि नीचे की मशीन वही है जिसके साथ licence बेचा गया था, और इनमें से किसी का यह काम कभी था भी नहीं।\nतो जाँच उस पर आती है जो हाइपरवाइज़र चलाता है। Licence उसे खरीदने वाले व्यक्ति और Microsoft के बीच का समझौता है, और आपका प्लेटफ़ॉर्म उसमें पक्ष नहीं है, लेकिन key को वही ले जाता है, और इससे सवाल आपका हो जाता है, आपने माँगा हो या नहीं।\nUpload button के कुछ भी करने से पहले जवाब लिख लीजिए। एक मशीन, एक VM, customer का अपना licence और उनका वचन कि यह इसे cover करता है। इसकी कोई कीमत नहीं लगती, और यह आपको उतना ही बचाता है जितना उन्हें। Software उसे दी गई कोई भी key ले जाएगा। उसे ले जाना चाहिए था या नहीं, यह सवाल सिर्फ़ कोई इंसान जवाब दे सकता है, तो पक्का कीजिए कि किसी ने दिया है।\nMicrosoft Learn, OA 3.0 on the factory floor — “injects the product keys into the firmware”; /Validate जाँचता है “that the MSDM table exists”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Validate an OEM Activation key — “is activated by using the OA3 DPK in the firmware”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, Microsoft Software Licensing Tables (SLIC and MSDM) — table 2, offset 36: “Proprietary data structure that contains all the licensing data necessary to enable Windows activation.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU, System Emulation, Invocation — हर type के -smbios fields; -acpitable “For file=, take whole ACPI table from the specified files, including all ACPI headers”; -boot “Currently Seabios for X86 system support it.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU v11.0.3, hw/acpi/core.c — “ACPI table has wrong length” एक warn_report है, फिर length बदल दी जाती है और checksum दोबारा गिना जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-cluster, src/pmxcfs/pmxcfs.c — priv के नीचे के paths 0777700 पर masked हैं, बाकी सब 0777750 पर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-cluster, src/pmxcfs/memdb.h — #define MEMDB_MAX_FILE_SIZE (1024 * 1024) // 1 MiB।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, Windows 11 OEM licence terms — “you may transfer the license to use the software directly to another user, only with the licensed device”; हस्तांतरण के प्रावधान “do not apply if you acquired the software in Germany” या सूची वाले देशों में। संग्रहीत प्रति; live page automated requests ठुकरा देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, small business blog archive — “the OEM Windows license is \u0026rsquo;locked\u0026rsquo; to the original PC it comes with and cannot be transferred to any other PC.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft, Services Provider License Agreement — “for service providers and software development companies licensing eligible Microsoft products to provide software services and hosted applications to end customers.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Windows subscription activation for VDA — “VMs must be hosted by a Qualified Multitenant Hoster (QMTH).”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Plan for volume activation — तीन volume activation models; servers के लिए “at least five computers” और clients के लिए “at least 25 computers” वाली KMS सीमाएँ, TCP port 1688 पर; Active Directory-based activation के लिए domain “at least once every 180 days”; “the GVLK doesn\u0026rsquo;t work unless a valid KMS host key can be found”; volume licences “cover upgrades to Windows client operating systems only”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Automatic Virtual Machine Activation in Windows Server — “AVMA requires a Windows Server Datacenter edition with the Hyper-V server host role installed”; “AVMA doesn\u0026rsquo;t work with other server virtualization technologies.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/moving-an-oem-licence-into-a-proxmox-vm/","summary":"Fisher-Price OS (Windows) का OEM licence PC के firmware में MSDM नाम के एक ACPI table में रहता है, और QEMU ऐसा कोई भी table बिना जाँचे guest को दे देता है। इसमें बताया गया है कि table में क्या है, एक validator जो टूटे tables को उससे पहले ठुकरा देता है जब QEMU चुपचाप उनके headers ठीक कर दे, उन्हें Proxmox cluster filesystem के private हिस्से में रखना, OEM licence ले जाने पर Microsoft की शर्तें, वह एक मामला जिसकी वे साफ़ इजाज़त देती हैं, जब लाइसेंस वाली मशीन ही हाइपरवाइज़र हो तो table सीधे host से लेना, और MAK, KMS, Active Directory और AVMA activation कभी table को क्यों नहीं छूते।","title":"OEM licence को Proxmox VM में ले जाना, और उसके साथ क्या-क्या जाता है"},{"content":"आपका VM बूट होने पर आपका ग्राहक क्या देखता है आप अपने नाम से वर्चुअल मशीनें बेचते हैं। ग्राहक एक को चालू करता है, और स्क्रीन पर सबसे पहले किसी और का लोगो आता है।\nयह एक साधारण Proxmox VM है। कुछ भी टूटा नहीं है, और Proxmox कुछ गलत नहीं कर रहे: यह उनका प्रोडक्ट और उनका नाम है, firmware और जिस इंटरफ़ेस में यह दिखता है, दोनों उन्होंने लिखे हैं, और उन्हें इसे वहाँ रखने का पूरा हक है, ठीक वैसे ही जैसे एक सर्वर vendor बॉक्स के आगे अपना बैज लगाता है। बस यह आपका नहीं है।\nलोगो तो बस शुरुआत है। Proxmox के मौजूदा firmware, pve-edk2-firmware 4.2026.08-1, पर एक साधारण UEFI guest guest के अंदर से dmidecode से पढ़ने पर यह बताता है:\nguest कहाँ देखता है उसे क्या मिलता है किसका नाम बूट स्क्रीन Proxmox का लोगो Proxmox Firmware vendor (SMBIOS टाइप 0) Proxmox distribution of EDK II Proxmox Firmware वर्ज़न 4.2026.08-1 Proxmox का पैकेज वर्ज़न सिस्टम निर्माता (टाइप 1) QEMU QEMU प्रोडक्ट का नाम (टाइप 1) Standard PC (Q35 + ICH9, 2009) QEMU चेसिस निर्माता (टाइप 3) QEMU QEMU Baseboard (टाइप 2) मौजूद ही नहीं किसी का नहीं मैनेजमेंट वेब इंटरफ़ेस Proxmox का लोगो, ऊपर बाईं ओर Proxmox बूट लोगो firmware पर भी नहीं रुकता। UEFI firmware जो इमेज बनाता है, उसे BGRT नाम की एक ACPI टेबल, Boot Graphics Resource Table, के ज़रिए ऑपरेटिंग सिस्टम को सौंप देता है। यह टेबल इसीलिए है कि बता सके “an image was drawn on the screen during boot”1, और फिर ऑपरेटिंग सिस्टम उसे अपनी बूट स्क्रीन पर दोबारा दिखाता है। Fisher-Price OS (Windows) इसे अपने spinner के ऊपर रखता है, और Microsoft BGRT को “the standard interface that Windows uses to access the logo”2 कहता है। Linux पर Fedora की डिफ़ॉल्ट Plymouth थीम भी यही करती है3। तो Proxmox के firmware पर चलने वाला guest किसी के लॉग इन करने से पहले ही Proxmox का लोगो दो बार दिखा देता है।\nइसमें से कुछ भी बदलना मुश्किल नहीं है। बदला हुआ बनाए रखना मुश्किल है। अगला apt full-upgrade इसका आधा हिस्सा चुपचाप वापस कर देगा, और जो आधा वापस नहीं करेगा, असल चिंता उसी की होनी चाहिए। यह पोस्ट ज़्यादातर उसी के बारे में है।\nब्रांडिंग का हर हिस्सा बूट में कहाँ आता है चालू करना QEMU config से SMBIOS और ACPI टेबल बनाता है Firmware OVMF अपना बना-बनाया लोगो, SeaBIOS splash सौंपना SMBIOS टेबल, BGRT वाला ACPI और MSDM OS बूट स्क्रीन BGRT से firmware लोगो फिर बनाती है चलता guest स्ट्रिंग पढ़ता है, activation पढ़ता है MSDM key VM config पैकेज फ़ाइल VM config पैकेज फ़ाइल VM config /etc/pve में, हर अपग्रेड के बाद बचा रहता है /usr/share के नीचे, apt इसे बदल देता है ब्रांडिंग बूट में पाँच जगह से आती है। तीन VM के अपने config से आती हैं और apt कुछ भी करे, बनी रहती हैं। दो Proxmox के किसी पैकेज की फ़ाइलों से आती हैं, और अपग्रेड उन्हीं को वापस ले लेता है। उस सौंपने वाली कड़ी में MSDM टेबल ब्रांडिंग है ही नहीं। उसमें एक लाइसेंस key होती है, और उसे VM में ले जाने पर अलग पोस्ट है: Moving an OEM Licence Into a Proxmox VM।\n/usr/share के नीचे सब कुछ apt का है नीचे का हर फ़ैसला एक ही नियम से तय होता है। जो फ़ाइल किसी पैकेज ने इंस्टॉल की, वह उस पैकेज की फ़ाइल है। उसे वहीं एडिट करेंगे तो उस पैकेज का अगला अपग्रेड बिना कुछ कहे आपका बदलाव मिटा देगा, क्योंकि dpkg के हिसाब से वह बस अपनी फ़ाइल वहीं वापस रख रहा है जहाँ उसने छोड़ी थी।\nइसलिए ब्रांडिंग का हर हिस्सा ऐसी जगह रहना चाहिए जो apt की न हो। एक Proxmox node पर ऐसी तीन जगहें हैं, और हर एक की अपनी कीमत है:\nकहाँ रहता है वहाँ कैसे पहुँचता है अपग्रेड के बाद बचता है आपको क्या कीमत चुकानी पड़ती है /etc/pve में VM config smbios1, और बाकी सब के लिए args हाँ, config को कोई पैकेज कभी नहीं छूता args सिर्फ़ root के लिए है, और GUI में नहीं दिखता ऐसी फ़ाइल जिसे छोड़ने को dpkg से कहा गया है dpkg-divert हाँ, पैकेज की कॉपी .distrib नाम से जाती है अपग्रेड अब उस फ़ाइल तक नहीं पहुँचते, जो firmware के मामले में मायने रखता है पैकेज tree के बाहर आपकी अपनी डायरेक्टरी /usr/local, args से संदर्भित हाँ, यह किसी पैकेज की नहीं इसे हर node पर खुद रखना पड़ता है Diversion का Debian का अपना वर्णन सबसे साफ़ है: “a way of forcing dpkg not to install a file into its location, but to a diverted location”4। वेब इंटरफ़ेस के लिए यही काफ़ी है। Firmware के लिए यह दो विकल्पों में से एक है, और ज़्यादा खतरनाक वाला।\nचेसिस कुछ स्ट्रिंग और एक अनुमति जाँच भर है SMBIOS वह टेबल है जिससे मशीन अपना परिचय देती है: इसे किसने बनाया, यह कौन सा मॉडल है, इसका सीरियल नंबर क्या है, बोर्ड और केस क्या हैं5। dmidecode इसे पढ़ता है, आपने नेटवर्क पर जो भी asset inventory टूल चलाया है वह इसे पढ़ता है, Fisher-Price OS (Windows) का सिस्टम इन्फ़ॉर्मेशन पैनल इसे पढ़ता है, और ज़्यादातर लाइसेंस जाँचें भी, जो तय करती हैं कि कोई सॉफ़्टवेयर किसी मशीन पर चलेगा भी या नहीं। VM पर इसे QEMU लिखता है। इसीलिए ऊपर की टेबल में QEMU और Standard PC है।\nटाइप 1, smbios1 के ज़रिए Proxmox VM config में एक SMBIOS संरचना देता है: टाइप 1, System Information, smbios1 के रूप में6। इसमें manufacturer, product, version, serial, sku, family और uuid आते हैं।\nपेच qemu-server में है, docs में नहीं। uuid को छोड़कर हर field को एक base64 पैटर्न, [A-Za-z0-9+\\/]+={0,2}, से मेल खाना होता है, इसलिए जिस सादे मान में स्पेस हो, वह सीधे ठुकरा दिया जाता है। असली स्ट्रिंग को base64=1 सेट करके base64 में encode किया जाता है, और qemu-server QEMU की कमांड लाइन बनाने से पहले उन्हें फिर decode करता है7। GUI का SMBIOS एडिटर हर save पर यही करता है, इस comment के साथ: “smbios values can be arbitrary, so encode and mark config as such”8। कमांड लाइन पर यह आपका काम है:\nb() { printf %s \u0026#34;$1\u0026#34; | base64 -w0; } qm set 9000 --smbios1 \u0026#34;uuid=$(qm config 9000 | sed -n \u0026#39;s/.*uuid=\\([0-9a-f-]*\\).*/\\1/p\u0026#39;),base64=1,\\ manufacturer=$(b \u0026#39;Example Cloud Ltd\u0026#39;),product=$(b \u0026#39;EC Compute Instance\u0026#39;),\\ version=$(b \u0026#39;2026.10\u0026#39;),family=$(b \u0026#39;General Purpose\u0026#39;),sku=$(b \u0026#39;ec-gp-4c16g\u0026#39;)\u0026#34; ध्यान दें कि uuid वापस डाला जा रहा है। यह guest की मशीन पहचान है, और --smbios1 को आप जो भी देते हैं वह पूरे option के रूप में सेव होता है, इसलिए पहले इसे पढ़ें और रखें।\nहर VM की नहीं, template की ब्रांडिंग करें। Proxmox का clone एक नया बना UUID पाता है और smbios1 का बाकी हर field रखता है, इसलिए हर clone अपनी पहचान और आपकी स्ट्रिंग के साथ निकलता है9, एक अपवाद के साथ, जो नीचे है।\nटाइप 0, 2, 3 और 11, args के ज़रिए smbios1 टाइप 1 पर रुक जाता है। Firmware vendor, baseboard, चेसिस और OEM स्ट्रिंग सब args से जाते हैं, वह लाइन जिसे Proxmox सीधे QEMU को देता है, और जिसे उसका अपना documentation “for experts only”6 कहता है। QEMU का -smbios option हर टाइप के fields लेता है10:\nargs: -smbios \u0026#39;type=0,vendor=Example Cloud Ltd,version=EC-FW 1.0,date=10/04/2026,uefi=on\u0026#39; -smbios \u0026#39;type=2,manufacturer=Example Cloud Ltd,product=EC Virtual Board,version=1.0\u0026#39; -smbios \u0026#39;type=3,manufacturer=Example Cloud Ltd,version=1.0,asset=EC-ASSET-123,sku=ec-gp\u0026#39; -smbios \u0026#39;type=11,value=example-cloud:instance=123\u0026#39; इन लाइनों के साथ QEMU पर बूट करने पर guest का dmidecode यह पढ़ता है:\nसंरचना Field साधारण ब्रांडेड टाइप 0 Vendor Proxmox distribution of EDK II Example Cloud Ltd टाइप 0 Version 4.2026.08-1 EC-FW 1.0 टाइप 1 Manufacturer QEMU Example Cloud Ltd टाइप 1 Product Name Standard PC (Q35 + ICH9, 2009) EC Compute Instance टाइप 1 Family निर्दिष्ट नहीं General Purpose टाइप 2 Manufacturer संरचना मौजूद नहीं Example Cloud Ltd टाइप 2 Product Name संरचना मौजूद नहीं EC Virtual Board टाइप 3 Manufacturer QEMU Example Cloud Ltd टाइप 3 Asset Tag निर्दिष्ट नहीं EC-ASSET-123 टाइप 11 String 1 संरचना मौजूद नहीं example-cloud:instance=123 रास्ते में चार जाल मिले। चारों चुपचाप होते हैं।\nटाइप 0 देने से “UEFI is supported” गायब हो जाता है। OVMF अपना टाइप 0 तभी लिखता है जब QEMU ने कोई न दिया हो; QEMU की टेबल पर चलने वाला loop टाइप 0 मिलते ही NeedSmbiosType0 = FALSE कर देता है11। आपकी vendor स्ट्रिंग Proxmox की जगह ले लेती है, और मकसद यही है। लेकिन QEMU का टाइप 0 OVMF की firmware विशेषताओं की जगह भी ले लेता है, और uefi=on के बिना “UEFI is supported” वाली लाइन dmidecode से गायब हो जाती है। uefi=on से इसे वापस लाएँ। UEFI guests के लिए vendor स्ट्रिंग की इससे बेहतर जगह वैसे भी है, खुद firmware के अंदर, जो आगे है।\nचेसिस टाइप सेट नहीं किया जा सकता। QEMU का टाइप 3 manufacturer, version, serial, asset और sku लेता है, और कुछ नहीं10। यह Other ही रहता है।\nएक टाइप की दो परिभाषाएँ मिल जाती हैं, और बाद वाली जीतती है। qemu-server अपना -smbios type=1 कमांड लाइन पर शुरू में रखता है और आपके args बिल्कुल आखिर में12, इसलिए args में दूसरा -smbios type=1,manufacturer=… पहले वाले को फेंकता नहीं: QEMU ने उन्हें field दर field मिला दिया, manufacturer args से आया, और UUID वहीं रहा जहाँ smbios1 ने रखा था। चौथे जाल के लिए यह मायने रखता है।\nदोनों हिस्सों के मालिक अलग हैं। qemu-server अनुमतियाँ option दर option जाँचता है। smbios1 हार्डवेयर options के साथ है और उसे VM.Config.HWType चाहिए, जबकि args नीचे के catch-all में गिरता है, जो कहता है “only root can set”13। Board, चेसिस, firmware vendor और OEM स्ट्रिंग सिर्फ़ आपकी हैं। टाइप 1 नहीं। जिसे भी आपने हार्डवेयर के अधिकार दिए हैं, वह इसे फिर से लिख सकता है, और होस्टेड प्रोडक्ट में वह ग्राहक भी हो सकता है। अगर manufacturer स्ट्रिंग मायने रखती है, तो उसे args में भी सेट करें। बाद वाली परिभाषा जीतती है।\nसीरियल नंबर पहले से config में है टाइप 1 में जो होना चाहिए, उसका ज़्यादातर हिस्सा पहले से VM config में बैठा है। नाम अच्छा सीरियल नंबर बनता है, क्योंकि qemu-server वहाँ सिर्फ़ DNS नाम मानता है14: छोटा, छापने लायक, उसमें कभी comma नहीं, और VM के बारे में वह इकलौती चीज़ जिसे ग्राहक पहचानेगा।\nटाइप 1 field कहाँ से लिया web-01 नाम के, production;web टैग वाले 4-core, 16 GiB VM के लिए Serial Number name web-01 SKU Number cores × sockets, और memory ec-4c16g Family tags की पहली एंट्री production UUID smbios1 का पहले से मौजूद UUID बिना बदलाव Manufacturer, Product आपकी अपनी तय स्ट्रिंग Example Cloud Ltd, EC Compute Instance दो चीज़ें बाहर रहती हैं। Node हर migration पर बदलता है, और vmgenid का तो बदलना ही काम है: इसका पूरा काम guest को यह बताना है कि उसे snapshot से वापस लाया गया है या template से बनाया गया है15। दोनों में से कोई पहचान नहीं है।\n#!/bin/bash # /usr/local/sbin/ec-smbios VMID: rebuild smbios1 from the VM\u0026#39;s own config. set -euo pipefail id=$1 cfg=$(qm config \u0026#34;$id\u0026#34; --current) get() { sed -n \u0026#34;s/^$1: //p\u0026#34; \u0026lt;\u0026lt;\u0026lt;\u0026#34;$cfg\u0026#34;; } b() { printf %s \u0026#34;$1\u0026#34; | base64 -w0; } name=$(get name) [ -n \u0026#34;$name\u0026#34; ] || { echo \u0026#34;VM $id has no name to use as a serial\u0026#34; \u0026gt;\u0026amp;2; exit 1; } cores=$(get cores); sockets=$(get sockets); vcpu=$(( ${cores:-1} * ${sockets:-1} )) mem=$(get memory); mem=${mem#current=}; mem=${mem%%,*}; mem=${mem:-512} (( mem % 1024 )) \u0026amp;\u0026amp; size=\u0026#34;${mem}m\u0026#34; || size=\u0026#34;$(( mem / 1024 ))g\u0026#34; tag=$(get tags); tag=${tag%%;*} uuid=$(get smbios1 | grep -o \u0026#39;uuid=[0-9a-fA-F-]*\u0026#39; | cut -d= -f2 || true) uuid=${uuid:-$(cat /proc/sys/kernel/random/uuid)} s=\u0026#34;uuid=$uuid,base64=1,manufacturer=$(b \u0026#39;Example Cloud Ltd\u0026#39;),product=$(b \u0026#39;EC Compute Instance\u0026#39;)\u0026#34; s+=\u0026#34;,serial=$(b \u0026#34;$name\u0026#34;),sku=$(b \u0026#34;ec-${vcpu}c${size}\u0026#34;)\u0026#34; [ -n \u0026#34;$tag\u0026#34; ] \u0026amp;\u0026amp; s+=\u0026#34;,family=$(b \u0026#34;$tag\u0026#34;)\u0026#34; qm set \u0026#34;$id\u0026#34; --smbios1 \u0026#34;$s\u0026#34; डिफ़ॉल्ट मान qemu-server के अपने हैं, एक core, एक socket और 512 MiB16, इसलिए जो config इन्हें छोड़ देता है उसे भी सही SKU मिलता है। टेबल वाले config पर चलाने पर, जहाँ qm की जगह एक script था जो वही config देता था, इसकी लिखी लाइन QEMU तक उसी तरह decode होकर पहुँची जैसे qemu-server करता है, और guest के dmidecode ने web-01, ec-4c16g, production और पहले से मौजूद UUID वापस पढ़ा। बिना नाम वाले VM को खाली सीरियल देने के बजाय ठुकरा दिया जाता है।\nइसकी सबसे स्पष्ट जगह एक hookscript लगती है। वह गलत जगह है। qemu-server pre-start hook को उस config lock के अंदर चलाता है जो उसने VM शुरू करने के लिए लिया था, और QEMU की कमांड लाइन उस config से बनाता है जो hook चलने से पहले लोड हुआ था17। जो hook सीरियल फिर से लिखता है, वह अगली शुरुआत बदलता है, इस वाली नहीं।\nइसलिए इसे अपनी provisioning से चलाएँ, उन चार मौकों पर जब इसके इनपुट बदलते हैं: create, clone, rename और resize। Clone वाला ही काटता है। Clone UUID को छोड़कर smbios1 का हर field रखता है9, इसलिए इसे छोड़ दें तो web-template से बना हर VM सीरियल में template का नाम बताएगा।\nबूट लोगो दो अलग-अलग जगह रहता है guest कौन सा लोगो दिखाता है, यह उसके firmware पर निर्भर है। Proxmox जो दो firmware देता है, वे इसे बिल्कुल अलग जगहों से लेते हैं:\nSeaBIOS (bios: seabios, डिफ़ॉल्ट) OVMF (bios: ovmf, UEFI) लोगो कहाँ से आता है एक JPEG जो QEMU बूट पर देता है firmware में compile किया गया bitmap Proxmox की फ़ाइल /usr/share/qemu-server/bootsplash.jpg, 640×480 Logo.bmp, 400×120, 8 bit, OVMF_CODE_4M*.fd में बना हुआ मालिक पैकेज qemu-server pve-edk2-firmware-ovmf हर VM के लिए बदलें args: -boot splash=… args से VM को दूसरे firmware की ओर भेजें कुछ दोबारा बनाए बिना बदलें हाँ नहीं BGRT से guest OS तक पहुँचता है नहीं हाँ SeaBIOS: कमांड लाइन पर एक JPEG qemu-server हर शुरू होने वाले VM पर एक ही -boot option लगाता है, menu=on,strict=on,reboot-timeout=1000,splash=/usr/share/qemu-server/bootsplash.jpg18। QEMU का documentation कहता है कि तस्वीर “when option splash=sp_name is given and menu=on, If firmware/BIOS supports them. Currently Seabios for X86 system support it”10 दिखाई जाती है। OVMF इससे splash-time के सिवा कुछ नहीं लेता, जिसे वह बूट मेनू के timeout के रूप में इस्तेमाल करता है, और OvmfPkg में कहीं भी splash फ़ाइल का ज़िक्र नहीं है19।\nइसे बदलना VM config में एक लाइन है:\nargs: -boot splash=/etc/pve/branding/splash.jpg दूसरा -boot पहले से टकराता नहीं। QEMU इसे उसी तरह मिलाता है जैसे -smbios को, बाद वाला मान जीतता है, और दो splash फ़ाइलें देने पर screenshot में दूसरी दिखी। फ़ाइल के लिए /etc/pve सही जगह है, क्योंकि यह cluster filesystem है और हर node वही splash देखता है, और इसकी 1 MiB प्रति फ़ाइल की सीमा 640×480 के JPEG से बहुत दूर है20।\nइमेज को खुद तीन शर्तें पूरी करनी होती हैं, और किसी में भी गलती से लोगो या उसके रंग चले जाते हैं:\nशर्त क्यों वरना क्या होता है JPEG या 24-bit BMP QEMU VM शुरू होने से पहले फ़ाइल जाँचता है splash file … format not recognized; must be JPEG or 24 bit BMP Baseline JPEG, 4:2:0 chroma SeaBIOS का decoder इसके सिवा कुछ नहीं संभालता21 ERR_NOT_SEQUENTIAL_DCT या ERR_NOT_YCBCR_221111, और खाली स्क्रीन 640×480, Proxmox की अपनी जैसी SeaBIOS VGA BIOS से ठीक तस्वीर के साइज़ का mode माँगता है मेल खाता mode नहीं, splash नहीं ज़्यादातर इमेज टूल डिफ़ॉल्ट रूप से baseline 4:2:0 लिखते हैं, इसलिए लोगो खोने का आम तरीका “save for web” वाला कोई option है जो चुपचाप progressive encoding चालू कर देता है। आपके हर इमेज viewer में वह बिल्कुल वैसी ही दिखती है, और SeaBIOS कुछ भी नहीं दिखाता।\nरंगों का जाल इसमें एक दोपहर लगी। वही JPEG, SeaBIOS 1.17.0 के दो builds में, दो अलग रंगों में निकलता है:\nयह SeaBIOS की jpeg.c में है। 24 bits-per-pixel वाले writer में एक little-endian शाखा है जो हर pixel के पहले byte में नीला रखती है, और 32 bits-per-pixel वाले writer, PIC_32, में ऐसी कोई शाखा नहीं है और वह वहाँ लाल लिख देता है21। Little-endian framebuffer पर इससे लाल और नीला आपस में बदल जाते हैं। नीला सुनहरा निकलता है, और नारंगी नीला निकलेगा।\nकौन सा writer चलेगा, यह VGA BIOS के दिए video mode पर निर्भर है:\nFirmware 640×480 के लिए VBE mode Bits per pixel रंग QEMU upstream का prebuilt SeaBIOS 1.17.0, जैसा pve-qemu-kvm 11.0.3-4 देता है 0x111 16 सही, 65,536 तक सीमित Fedora 44 का अपना seabios 1.17.0-10 build 0x142 32 लाल और नीला बदले हुए Mode नंबर SeaBIOS की अपनी टेबल के हैं22, और Proxmox वाली पंक्ति पैकेज के असली blobs से जाँची गई: QEMU के prebuilt rel-1.17.0-0-gb52ca86e094d से byte दर byte एक जैसे। तो Proxmox पर आपके रंग सही हैं, लेकिन वे सिर्फ़ 65,536 हैं, और कोई हल्का gradient पट्टियों में दिखेगा। और अगर आपका लोगो कभी किसी और hypervisor पर गलत रंगों में दिखे, तो गलती आपके JPEG की नहीं है।\nUEFI लोगो firmware में compile होता है UEFI guests ज़्यादा मुश्किल आधा हिस्सा हैं, और आधुनिक Proxmox पर ज़्यादातर guests यही हैं।\nबदलने के लिए कोई splash option नहीं है। लोगो firmware इमेज के अंदर एक bitmap है, और Proxmox का build उसे debian/rules की एक लाइन से वहाँ रखता है:\ndebian/setup-build-stamp: cp -a debian/Logo.bmp MdeModulePkg/Logo/Logo.bmp यह edk2 build होने से पहले उनकी 400×120, 8-bit Logo.bmp को TianoCore वाली पर कॉपी कर देता है23। वही फ़ाइल firmware vendor को build-time constant के रूप में सेट करती है, PcdFirmwareVendor=L\u0026quot;Proxmox distribution of EDK II\u0026quot;, और पहली टेबल का टाइप 0 vendor यहीं से आता है23।\nनया लोगो, नया firmware। ऐसा firmware पाने का तरीका जो बिल्कुल Proxmox वाले जैसा व्यवहार करे, यही है कि उसे बिल्कुल Proxmox की तरह बनाया जाए: उनका tree, उस tag पर जो उनके दिए पैकेज से मेल खाता है, उनके patches, उनके flags, और सिर्फ़ एक bitmap बदला हुआ। pve-edk2-firmware 4.2026.08-1 edk2 को 2970e56 पर pin करता है, जो upstream का edk2-stable202608 tag है23।\ngit clone https://git.proxmox.com/git/pve-edk2-firmware.git cd pve-edk2-firmware git checkout f37039e52d228a7844a90aa2aaf1e161ebd04fcd # 4.2026.08-1 git submodule update --init --recursive cd edk2 QUILT_PATCHES=../debian/patches quilt push -a cp /path/to/your/Logo.bmp MdeModulePkg/Logo/Logo.bmp . ./edksetup.sh \u0026amp;\u0026amp; make -C BaseTools F=\u0026#34;-DNETWORK_HTTP_BOOT_ENABLE=TRUE -DNETWORK_IP6_ENABLE=TRUE -DNETWORK_TLS_ENABLE -DSECURE_BOOT_ENABLE=TRUE -DPVSCSI_ENABLE=TRUE -DTPM2_ENABLE=TRUE --pcd PcdUninstallMemAttrProtocol=TRUE -DFD_SIZE_4MB\u0026#34; P=(--pcd \u0026#34;PcdFirmwareVendor=LExample Cloud Ltd\\\\0\u0026#34; --pcd \u0026#34;PcdFirmwareVersionString=L4.2026.08-1+ec1\\\\0\u0026#34;) build -a IA32 -a X64 -t GCC -p OvmfPkg/OvmfPkgIa32X64.dsc $F \u0026#34;${P[@]}\u0026#34; -b RELEASE cp Build/Ovmf3264/RELEASE_GCC/FV/OVMF_CODE.fd OVMF_CODE_4M.fd rm -rf Build/Ovmf3264 build -a IA32 -a X64 -t GCC -p OvmfPkg/OvmfPkgIa32X64.dsc $F -DSMM_REQUIRE=TRUE \u0026#34;${P[@]}\u0026#34; -b RELEASE cp Build/Ovmf3264/RELEASE_GCC/FV/OVMF_CODE.fd OVMF_CODE_4M.secboot.fd Flags उसी commit पर debian/rules से उठाए गए हैं। Vendor स्ट्रिंग पर ध्यान दें: उनका Makefile इसे double quotes में लिखता है, make का shell उन्हें हटा देता है, और edk2 को यह बिना quotes के मिलता है, इसलिए यहाँ भी ऐसे ही दिया गया है, और इसे दोबारा quote करना build error है। Bitmap को उनकी तरह 400×120 और 8 bit रखें, तो बूट स्क्रीन पर और कुछ नहीं खिसकता।\nआपको दोनों इमेज चाहिए। qemu-server 4M EFI disk वाले किसी भी Q35 VM को OVMF_CODE_4M.secboot.fd पर बूट करता है, यानी वह build जिसमें SMM ज़रूरी है, और सादा OVMF_CODE_4M.fd सिर्फ़ i440fx के लिए इस्तेमाल करता है24। मौजूदा Proxmox पर लगभग हर UEFI guest secboot वाला ही चलाता है।\nइस तरह बनाने पर, Proxmox के tree से bitmap और दो स्ट्रिंग के सिवा कुछ बदले बिना, SMM इमेज ऐसे बूट होती है:\nऔर guest का अपने firmware के बारे में नज़रिया भी साथ में बदल जाता है, कमांड लाइन पर एक भी -smbios option के बिना:\nguest के अंदर से पढ़ा गया Proxmox का 4.2026.08-1 उसी tree से दोबारा बना Firmware vendor Proxmox distribution of EDK II Example Cloud Ltd Firmware वर्ज़न 4.2026.08-1 4.2026.08-1+ec1 “UEFI is supported” सूची में है सूची में है ACPI टेबल BGRT, WSMT और बाकी वही सेट इससे UEFI guests के लिए build-time vendor बेहतर जवाब बन जाता है। यह OVMF का अपना टाइप 0 है, इसलिए UEFI bit अपनी जगह रहता है और किसी को uefi=on याद रखने की ज़रूरत नहीं। टाइप 0 के लिए args वाला रास्ता SeaBIOS guests के लिए है, और उनके लिए जो firmware बिल्कुल दोबारा नहीं बना रहे।\nनया firmware VM को देने के दो तरीके qemu-server firmware ढूँढने की जगह hardcode करता है: OVMF.pm में /usr/share/pve-edk2-firmware/ के नीचे paths की एक टेबल है, जो machine टाइप और Secure Boot options से तय होती है, और VM config, GUI या API में कहीं ऐसा कोई option नहीं जो कोई दूसरी फ़ाइल चुने24। दो रास्ते बचते हैं।\nब्रांडेड OVMF बनाना, और उसे VM को देने के दो तरीके Proxmox का tree pve-edk2-firmware 4.2026.08-1 आपकी ब्रांडिंग Logo.bmp + vendor स्ट्रिंग वही build, वही flags OVMF_CODE_4M.fd + .secboot.fd A: हर node पर divert हर UEFI VM को मिलता है, VM config नहीं बदलता B: हर VM पर args से एक-एक VM चुनें, Proxmox की फ़ाइलें अछूती apt full-upgrade Proxmox का नया firmware आता है, आपका पुराना रहता है Post-Invoke hook वर्ज़न अलग हैं, अगली शुरुआत से पहले rebuild करें एक build, अंदर जाने के दो रास्ते। किसी भी तरह, अगला अपग्रेड Proxmox का नया firmware आपके वाले के बगल में इंस्टॉल करता है और आपके वाले को वैसा ही छोड़ देता है, इसीलिए नीचे वाला hook है। रास्ता A: हर node पर divert करें। dpkg को बताएँ कि Proxmox की दोनों code इमेज अब कहीं और की हैं, और अपनी उनकी जगह रखें:\nD=/usr/share/pve-edk2-firmware for f in OVMF_CODE_4M.fd OVMF_CODE_4M.secboot.fd; do dpkg-divert --package example-branding --add --rename --divert \u0026#34;$D/$f.distrib\u0026#34; \u0026#34;$D/$f\u0026#34; install -m 0644 \u0026#34;/root/branding/$f\u0026#34; \u0026#34;$D/$f\u0026#34; done अगली शुरुआत से node का हर UEFI VM आपका firmware बूट करता है। VM config में कोई बदलाव नहीं।\nरास्ता B: चुने हुए VMs को उसकी ओर भेजें। इमेज अपनी डायरेक्टरी में रखें और firmware को एक-एक VM के लिए override करें। -blockdev पर जाने के बाद से qemu-server code इमेज को pflash0 नाम के block node के रूप में जोड़ता है और उसे -machine में नाम देता है24, और QEMU दूसरे -machine को उसी तरह मिलाता है जैसे -boot को, इसलिए args अपना एक node जोड़कर pflash0 को उसकी ओर भेज सकता है:\nargs: -blockdev driver=raw,node-name=brandcode,read-only=on,file.driver=file,file.filename=/usr/local/share/example-branding/OVMF_CODE_4M.secboot.fd -machine pflash0=brandcode इसे लंबे रास्ते से जाँचा गया। Proxmox का secboot firmware pflash0 के रूप में ठीक वैसे जोड़ा गया जैसे qemu-server करता है, SMM चालू करके, फिर उसके बाद वह args लाइन जोड़ी गई, और guest ने लोगो और vendor स्ट्रिंग दोनों के साथ ब्रांडेड इमेज बूट की। ऊपर का screenshot वहीं से आया।\nरास्ता A, divert रास्ता B, हर VM पर args किन VMs को मिलता है node का हर UEFI VM सिर्फ़ वे VM जिन पर आप सेट करें Proxmox की फ़ाइलें .distrib पर चली जाती हैं अछूती VM config बिना बदलाव एक args लाइन, सिर्फ़ root Machine टाइप मेल खाना चाहिए संभाला हुआ, दोनों इमेज divert हैं आपका काम: Q35 के लिए secboot इमेज वापस लेना dpkg-divert --remove --rename लाइन हटा दें Migration target node भी divert होना चाहिए target node पर फ़ाइल होनी चाहिए Code इमेज लगभग 3.5 MB की है, जबकि pmxcfs में प्रति फ़ाइल सीमा 1 MiB है20। इसलिए यह /etc/pve में नहीं जा सकती, और कोई भी रास्ता लें, इसे हर node पर रखना होगा। किसी VM को ऐसे node पर migrate करें जहाँ यह नहीं है, तो रास्ते के हिसाब से दो में से एक नतीजा मिलता है: रास्ता A में Proxmox का अपना firmware और लोगो फिर से, या रास्ता B में ऐसा VM जो शुरू ही नहीं होगा, क्योंकि QEMU ऐसी फ़ाइल नहीं खोल सकता जो वहाँ है ही नहीं।\nवह अपग्रेड जो आपको पीछे छोड़ देता है लोगो के लिए diversion सही औज़ार है। Firmware अलग बात है।\nDiversion का मतलब है कि Proxmox के अपग्रेड अब उस फ़ाइल तक नहीं पहुँचते। आपने ठीक यही माँगा था। यही चीज़ edk2 के security fixes को आपके guests तक पहुँचने से भी रोकती है: 4.2026.08-1 के लिए Proxmox का changelog “Besides many bug and security fixes” से शुरू होता है और आगे CVE-2024-13745 का fix गिनाता है25, और पिछली release से बने ब्रांडेड build में इसमें से कुछ नहीं है। कोई आपको नहीं बताता।\nयह जाँचा गया, माना नहीं गया। Proxmox की repository वाले एक Debian trixie container में pve-edk2-firmware-ovmf 4.2025.05-3 इंस्टॉल हुआ, दोनों code इमेज divert की गईं, और पैकेज 4.2026.08-1 पर अपग्रेड किया गया:\nअपग्रेड के बाद नतीजा dpkg-query -W pve-edk2-firmware-ovmf 4.2026.08-1 Proxmox की नई इमेज OVMF_CODE_4M.fd.distrib के रूप में इंस्टॉल, hash बदला ब्रांडेड इमेज बिना बदलाव, अब भी 4.2025.05-3 से बनी इसके बारे में console पर कुछ कुछ नहीं, नीचे वाले hook तक तो एक hook जोड़ें। apt हर dpkg run के बाद DPkg::Post-Invoke commands की एक सूची चलाता है26। दर्ज करें कि आपने Proxmox के किस वर्ज़न से build किया, और हर run के बाद तुलना करें:\ncat \u0026gt; /usr/local/sbin/example-branding-check \u0026lt;\u0026lt;\u0026#39;EOF\u0026#39; #!/bin/sh built=$(cat /usr/local/share/example-branding/ovmf.built-from 2\u0026gt;/dev/null) now=$(dpkg-query -W -f \u0026#39;${Version}\u0026#39; pve-edk2-firmware-ovmf 2\u0026gt;/dev/null) [ \u0026#34;$built\u0026#34; = \u0026#34;$now\u0026#34; ] \u0026amp;\u0026amp; exit 0 echo \u0026#34;W: branded OVMF was built from pve-edk2-firmware-ovmf $built, Proxmox now ships $now.\u0026#34; \u0026gt;\u0026amp;2 echo \u0026#34;W: guests still boot the old firmware. Rebuild before the next VM restart.\u0026#34; \u0026gt;\u0026amp;2 exit 0 EOF chmod +x /usr/local/sbin/example-branding-check echo \u0026#39;DPkg::Post-Invoke { \u0026#34;/usr/local/sbin/example-branding-check\u0026#34;; };\u0026#39; \\ \u0026gt; /etc/apt/apt.conf.d/80example-branding उसी अपग्रेड पर इसने यह छापा:\nW: branded OVMF was built from pve-edk2-firmware-ovmf 4.2025.05-3, Proxmox now ships 4.2026.08-1. W: guests still boot the old firmware. Rebuild before the next VM restart. यह जानबूझकर 0 के साथ exit करता है। अगर कोई Post-Invoke command fail हो तो apt रुक जाता है26, और ब्रांडिंग की जाँच किसी node को आधा अपग्रेड छोड़ने की वजह नहीं है। एक ज़ोरदार चेतावनी काफ़ी है।\nएक बात और। Restart। guest नया firmware तभी लेता है जब उसका QEMU process restart होता है, इसलिए rebuild का मतलब है Proxmox से stop और start, guest के अंदर से reboot नहीं। Proxmox के अपने firmware updates भी चलते VM तक ठीक इसी तरह पहुँचते हैं। बस उनके लिए आपको पहले rebuild याद नहीं रखना पड़ता।\nया Proxmox के firmware को छोड़ ही दें अब तक का हर लोगो वाला रास्ता firmware बदलता है, और पिछला खंड उसका बिल है। एक रास्ता ऐसा है जो नहीं बदलता, और इसका prototype इसी पोस्ट के लिए बनाया गया।\nQEMU में एक PCI device एक option ROM ले सकता है, कोई भी फ़ाइल जिसे आप romfile= से नाम दें27, और OVMF वहाँ मिलने वाला EFI ड्राइवर चलाता है। Proxmox का build इसे चलाता है चाहे यह signed हो या नहीं: OVMF PcdOptionRomImageVerificationPolicy को 0x00 पर सेट करता है, यानी हमेशा चलाओ28। OVMF अपना लोगो boot device selection में देर से बनाता है29 और BGRT सिर्फ़ ReadyToBoot पर बनाता है, boot loader को सौंपने से ठीक पहले। और edk2 का BGRT ड्राइवर EDKII_BOOT_LOGO2_PROTOCOL के ज़रिए बदली हुई इमेज लेता है, और जब भी इमेज बदली हो, ReadyToBoot पर टेबल फिर से बनाता है30।\nइसे बस इतना ही चाहिए। ड्राइवर TPL_NOTIFY पर ReadyToBoot का इंतज़ार करता है, जो BGRT ड्राइवर के अपने TPL_CALLBACK handler से पहले चलता है, स्क्रीन साफ़ करता है, अपना लोगो बनाता है और वही इमेज सौंप देता है। Build होने पर यह 8 KB की एक फ़ाइल है, एक लाइन से जुड़ी:\nargs: -device pci-testdev,romfile=/etc/pve/branding/brandrom.rom 8 KB पर यह pmxcfs की 1 MiB सीमा के काफ़ी अंदर है20, इसलिए 3.5 MB की firmware इमेज के उलट यह /etc/pve में रह सकती है और VM के साथ हर node तक जा सकती है।\nइसे Proxmox के अपने firmware पर जाँचा गया, सीधे pve-edk2-firmware-ovmf 4.2026.08-1 से: OVMF_CODE_4M.secboot.fd, जिसमें Microsoft की keys OVMF_VARS_4M.ms.fd में पहले से enrolled थीं, SMM के साथ Q35 पर, और Fedora के signed shim से बूट किया गया ताकि Secure Boot चालू रहे और लागू हो:\nguest से पढ़ा गया ROM के बिना ROM के साथ SecureBoot variable 1 1 स्क्रीन पर Proxmox का लोगो लगभग 250 ms तक Proxmox का, फिर आपका BGRT इमेज, 440,340 पर 400×120 Proxmox की, SHA-256 be5afe4b… ROM की, SHA-256 6c494576… बदली गई firmware फ़ाइलें कोई नहीं कोई नहीं आखिरी पंक्ति ही असली बात है। Proxmox का firmware अछूता है, इसलिए उनकी अगली security release अगले restart के साथ आपके guests तक पहुँचती है, और पिछले खंड की कोई बात लागू नहीं होती।\nयह मुफ़्त नहीं है:\nकीमत क्यों Proxmox का लोगो लगभग एक चौथाई सेकंड दिखता है OVMF इसे किसी option ROM ड्राइवर को स्क्रीन मिलने से पहले बना देता है; सिर्फ़ rebuild इससे बचाता है guest को एक और PCI device दिखता है, बिना ड्राइवर ROM को किसी device पर सवार होना पड़ता है, और pci-testdev QEMU का कुछ न करने वाला device है टाइप 0 अब भी Proxmox कहता है vendor स्ट्रिंग compile की हुई है; ऊपर की तरह uefi=on के साथ args से सेट करें सिर्फ़ root यह एक args लाइन है और इसके नीचे की खोज साफ़ कहने लायक है। Microsoft की keys enrolled और Secure Boot लागू होने वाले guest पर firmware में एक unsigned ड्राइवर चला, क्योंकि Proxmox का OVMF option ROMs की जाँच नहीं करता। यहाँ यह काम का है। इसका यह भी मतलब है कि इस firmware पर Secure Boot boot loaders को जाँचता है, VM के हार्डवेयर config से जो भी जुड़ा हो उसे नहीं, और चूँकि args सिर्फ़ root लिखता है, यह सवाल इस बारे में है कि आपके nodes पर root किसके पास है।\nयह एक prototype है। यह Proxmox के firmware के साथ QEMU 10.2.2 पर चला है, अभी Proxmox node पर नहीं, और आगे जो है वह source है, प्रोडक्ट नहीं:\ngithub.com/damo2929/RebrandPCIRom: option ROM ड्राइवर, लोगो converter और container build।\nवेब इंटरफ़ेस दो पैकेज है वेब इंटरफ़ेस के ऊपर बाईं ओर का लोगो pve-manager में नहीं है। Workspace.js pwt prefix के साथ एक proxmoxLogoSvg component माँगता है, और वह proxmox-widget-toolkit में रहता है, जिसे Backup Server और Mail Gateway भी साझा करते हैं31। सिर्फ़ टैब icons pve-manager में हैं:\nक्या फ़ाइल पैकेज Header लोगो, 200×35 पर बना /usr/share/javascript/proxmox-widget-toolkit/images/proxmox_logo.svg proxmox-widget-toolkit Browser टैब icon /usr/share/pve-manager/images/favicon.ico pve-manager 128×128 icon, touch icon भी /usr/share/pve-manager/images/logo-128.png pve-manager तीनों सादी फ़ाइलें हैं, इसलिए यह dpkg-divert का काम है, और यहाँ पिछले खंड वाली कीमत बिल्कुल लागू नहीं होती, क्योंकि लोगो के कोई security fixes नहीं छूटते और पिछले महीने का favicon दिखाने वाले node से किसी का guest कम सुरक्षित नहीं होता।\ndivert() { dpkg-divert --package example-branding --add --rename --divert \u0026#34;$1.distrib\u0026#34; \u0026#34;$1\u0026#34; install -m 0644 \u0026#34;$2\u0026#34; \u0026#34;$1\u0026#34; } divert /usr/share/javascript/proxmox-widget-toolkit/images/proxmox_logo.svg /root/branding/logo.svg divert /usr/share/pve-manager/images/favicon.ico /root/branding/favicon.ico divert /usr/share/pve-manager/images/logo-128.png /root/branding/logo-128.png उसी container में, असली पैकेजों पर जाँचा गया:\nकदम नतीजा proxmox-widget-toolkit 5.2.9 पर divert, अपना SVG इंस्टॉल Proxmox का SVG proxmox_logo.svg.distrib नाम से बदला गया 5.2.10 पर अपग्रेड अपना SVG अब भी अपनी जगह, Proxmox की 5.2.10 वाली कॉपी .distrib में dpkg --verify proxmox-widget-toolkit कोई शिकायत नहीं, dpkg diversion के बारे में जानता है apt-get install --reinstall proxmox-widget-toolkit अपना SVG अब भी अपनी जगह dpkg-divert --remove --rename Proxmox का original वापस, byte दर byte दो चीज़ें Proxmox की ही रहती हैं। Header इमेज एक तय 200×35 बॉक्स में बनती है, इसलिए अपना SVG उसी आकार में बनाएँ वरना वह दब जाएगा। और alt टेक्स्ट Proxmox कहता है और इमेज https://www.proxmox.com से लिंक होती है, दोनों JavaScript component में लिखे हैं, किसी ऐसी फ़ाइल में नहीं जिसे आप divert कर सकें31। इन्हें बदलने का मतलब है एक minified bundle को patch करना जो हर अपग्रेड पर टूटेगा। Alt टेक्स्ट के लिए यह लायक नहीं।\nProxmox का लाइसेंस और trademark आपसे क्या माँगते हैं Proxmox VE AGPL वर्ज़न 3 के तहत लाइसेंस है32, और उस लाइसेंस का सेक्शन 13 नेटवर्क वाला clause है: “if you modify the Program, your modified version must prominently offer all users interacting with it remotely through a computer network … an opportunity to receive the Corresponding Source of your version”33। क्या तीन इमेज बदलना Program को modify करना गिना जाएगा? यह वकील का सवाल है। सस्ता जवाब यह है कि अपनी इमेज और divert script कहीं सार्वजनिक रखें और login पेज से उसका लिंक दें। इसकी कीमत कुछ नहीं, और सवाल वहीं खत्म।\nTrademark वाला पक्ष ज़्यादा साफ़ है। Proxmox का media kit कहता है “Don\u0026rsquo;t alter the logo or incorporate the logo or symbol into your logo”34। तो उनके लोगो को पूरी तरह अपने से बदलें, कभी उसका रंग बदला या फेरबदल किया हुआ रूप नहीं, और अपने प्रोडक्ट के नाम से Proxmox को बाहर रखें।\nउस पर आपका नाम, तो रखरखाव भी आपका VM की ब्रांडिंग सस्ती है। कुछ SMBIOS स्ट्रिंग, एक JPEG, एक bitmap और वेब इंटरफ़ेस में तीन इमेज: एक दोपहर का काम, जिसका ज़्यादातर हिस्सा यह पता करने में जाता है कि चीज़ें कहाँ रहती हैं।\nउसे बनाए रखना असली काम है। और यही हिस्सा छोड़ दिया जाता है।\nSMBIOS स्ट्रिंग और splash अपना ख्याल खुद रखते हैं, क्योंकि वे ऐसे config में रहते हैं जिसे कोई पैकेज कभी नहीं छुएगा, और वेब इंटरफ़ेस का लोगो अपना ख्याल खुद रखता है क्योंकि dpkg को उसके बारे में बता दिया गया है। Firmware ऐसा नहीं करता। जिस दिन आपने अपना लोगो firmware इमेज में डाला, उस दिन आपने किसी और की release process का एक हिस्सा अपने हाथ में ले लिया। Proxmox security fixes वाला नया firmware बनाते, जाँचते और भेजते हैं, जो उनके ग्राहकों को अगले अपग्रेड के साथ मिलता है, और आपके ग्राहकों को तब, जब आप rebuild करने का समय निकालें।\nजानते-बूझते किया जाए तो यह सौदा ठीक है। जिस होस्टिंग कंपनी के guests दो release पीछे का firmware बूट करते हैं क्योंकि लोगो changelog से ज़्यादा ज़रूरी था, उसने प्रोडक्ट नहीं बनाया। उसने एक स्टिकर बनाया है।\nअगर बूट स्क्रीन पर आपका नाम है, तो उसके पीछे के firmware को ताज़ा रखना आपकी ज़िम्मेदारी है, चाहे उसे किसी ने भी लिखा हो। कोई जाँच नहीं करेगा। इसीलिए यह करना ज़रूरी है।\nUEFI Forum, ACPI Specification 6.6, §5.2.23 Boot Graphics Resource Table — “The Boot Graphics Resource Table (BGRT) is an optional table that provides a mechanism to indicate that an image was drawn on the screen during boot”। आर्काइव की हुई कॉपी; लाइव पेज स्वचालित अनुरोधों को 403 देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn, Boot screen components — “This is the standard interface that Windows uses to access the logo.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora Project, Changes/FlickerFreeBoot — “a new plymouth theme which incorporates the firmware\u0026rsquo;s bootsplash image”; Fedora की plymouth.spec bgrt को डिफ़ॉल्ट थीम बनाती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian, dpkg-divert(1), trixie — “File diversions are a way of forcing dpkg(1) not to install a file into its location, but to a diverted location.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDMTF, DSP0134 System Management BIOS Reference Specification 3.10.0 — टाइप 1 System Information, टाइप 2 baseboard, टाइप 3 “the system\u0026rsquo;s mechanical enclosure(s)”, टाइप 11 “free-form strings defined by the OEM”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE, qm.conf(5) — smbios1: “Specify SMBIOS type 1 fields”; args: “Arbitrary arguments passed to kvm … this option is for experts only.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, the smbios1 format and command-line builder — uuid को छोड़कर हर field का पैटर्न [A-Za-z0-9+\\/]+={0,2} है; base64 सेट होने पर मान decode किए जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-manager, www/manager6/Parser.js, printQemuSmbios1 — “smbios values can be arbitrary, so encode and mark config as such”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/API2/Qemu.pm, clone — “auto generate a new uuid”, smbios1 के बाकी fields रखे जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU, System Emulation, Invocation — हर टाइप के -smbios fields; -acpitable “For file=, take whole ACPI table from the specified files, including all ACPI headers”; -boot “Currently Seabios for X86 system support it.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/SmbiosPlatformDxe/SmbiosPlatformDxe.c — OVMF अपना टाइप 0 तभी जोड़ता है जब QEMU की टेबल देखने के बाद भी NeedSmbiosType0 सेट हो।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, custom args — args को तोड़कर कमांड लाइन के आखिर में जोड़ा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/API2/Qemu.pm, config permission checks — smbios1 हार्डवेयर टाइप का option है जिसे VM.Config.HWType चाहिए; fallback “catches args, lock, etc.” और “only root can set” के साथ रुक जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, the name option — format =\u0026gt; 'dns-name'।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, vmgenid — “notify the guest operating system when the virtual machine is executed with a different configuration (e.g. snapshot execution or creation from a template)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer/Memory.pm — memory default =\u0026gt; 512; QemuServer.pm में cores और sockets का डिफ़ॉल्ट 1 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, vm_start — लाइन 5457 पर lock_config, 5581 पर exec_hookscript($conf, $vmid, 'pre-start', 1), और 5634 पर उसी $conf के साथ config_to_command, बीच में दोबारा लोड नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer.pm, -boot — menu=on,strict=on,reboot-timeout=1000,splash=/usr/share/qemu-server/bootsplash.jpg।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/Library/QemuBootOrderLib/QemuBootOrderLib.c — OVMF -boot से सिर्फ़ etc/boot-menu-wait, यानी splash-time का मान, पढ़ता है, और कुछ नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-cluster, src/pmxcfs/memdb.h — #define MEMDB_MAX_FILE_SIZE (1024 * 1024) // 1 MiB।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSeaBIOS, src/jpeg.c — PIC little-endian पर पहले नीला लिखता है, लाइन 946 पर PIC_32 बिना endian शाखा के पहले लाल लिखता है; ERR_NOT_SEQUENTIAL_DCT और ERR_NOT_YCBCR_221111 ही ठुकराए गए formats हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSeaBIOS, vgasrc/svgamodes.c — mode 0x111 16 bits पर 640×480 है, 0x142 32 पर 640×480।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-edk2-firmware, debian/rules at 4.2026.08-1 — cp -a debian/Logo.bmp MdeModulePkg/Logo/Logo.bmp, PcdFirmwareVendor स्ट्रिंग और OVMF build flags।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nqemu-server, src/PVE/QemuServer/OVMF.pm — /usr/share/pve-edk2-firmware/ के नीचे hardcoded firmware टेबल, SMM का चुनाव, और pflash0 block node।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npve-edk2-firmware, debian/changelog — 4.2026.08-1: “Besides many bug and security fixes … fix CVE-2024-13745”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian, apt.conf(5), trixie — “Pre-Invoke, Post-Invoke: This is a list of shell commands to run before/after invoking dpkg(1) … should any fail APT will abort.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nQEMU v11.0.3, hw/pci/pci.c — DEFINE_PROP_STRING(\u0026quot;romfile\u0026quot;, PCIDevice, romfile), एक property जो हर PCI device में होती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/OvmfPkgIa32X64.dsc — gEfiSecurityPkgTokenSpaceGuid.PcdOptionRomImageVerificationPolicy|0x00, वह platform फ़ाइल जिसे Proxmox build करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, OvmfPkg/Library/PlatformBootManagerLib/BdsPlatform.c — BootLogoEnableLogo (), PlatformBootManagerAfterConsole से बुलाया जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nedk2-stable202608, BootGraphicsResourceTableDxe.c — लाइन 239 पर SetBootLogo2 इमेज कॉपी करता है; 417 पर ReadyToBoot handler “If BGRT data change happens” टेबल को हटाकर फिर से लगाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nproxmox-widget-toolkit, src/Logo.js — proxmoxLogoSvg, 200×35, alt: 'Proxmox', proxmox.com से लिंक; pve-manager Workspace.js से prefix: 'pwt' के साथ इस्तेमाल।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox VE wiki, FAQ — “Proxmox VE code is licensed under the GNU Affero General Public License, version 3.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGNU Affero General Public License v3, §13 Remote Network Interaction — ऊपर टेक्स्ट में पूरा उद्धृत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProxmox, Media kit — “Don\u0026rsquo;t alter the logo or incorporate the logo or symbol into your logo.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/branding-a-proxmox-vm/","summary":"एक साधारण Proxmox VM बूट पर Proxmox का लोगो दिखाता है, firmware vendor स्ट्रिंग में Proxmox लिखता है और हर SMBIOS टेबल में खुद को QEMU बताता है। यह पोस्ट यह सब आपके प्रोडक्ट के नाम से बदल देती है: SMBIOS टाइप 0, 1, 2, 3 और 11, जिनमें सीरियल नंबर और SKU VM के अपने नाम और साइज़ से भरे जाते हैं; SeaBIOS स्प्लैश और उसका रंगों वाला जाल; Proxmox के अपने tree से बना ब्रांडेड OVMF, या एक option ROM ड्राइवर जो Secure Boot चालू रहते हुए भी firmware को छुए बिना लोगो और BGRT बदल देता है; और वेब इंटरफ़ेस का लोगो। हर बदलाव ऐसी जगह रखा गया है कि अपग्रेड उसे चुपचाप वापस न कर सके, और जिस एक चीज़ को अपग्रेड खतरनाक रूप से पुराना छोड़ सकता है, यानी firmware, उसके लिए एक hook है जो इसकी सूचना देता है।","title":"Proxmox VM की ब्रांडिंग, और अगले अपग्रेड के बाद भी उसे बनाए रखना"},{"content":"इस पोस्ट में सब कुछ मेरी अपनी डेस्क पर चल रहे NetBox 4.7.2 पर चलाया गया, जिसमें एक असली एस्टेट लोड है: एक साइट, एक कैबिनेट, चौदह डिवाइस, केबल, पावर और एड्रेस के साथ, तीन कस्टमरों में बँटे हुए। हर स्क्रीनशॉट उसी इंस्टेंस का है, और हर एरर मैसेज वही है जो मुझे सच में मिला।\nयह उसी क्रम में चलती है जिसमें आप इससे मिलेंगे। यह चीज़ क्या है, आपको यह क्यों चाहिए, वह fork जिसके बारे में आप खोजने के एक हफ़्ते के अंदर सुनेंगे, इसे खड़ा कैसे करें, इसे किस क्रम में भरना पड़ता है, और फिर आपको इससे वापस क्या मिलता है। कस्टमाइज़ेशन और एक्सटेंशन का काम आखिर में है, क्योंकि जब तक आपने उस चीज़ का आकार नहीं देखा जिसे आप बढ़ा रहे हैं, तब तक उसका कोई मतलब नहीं बनता।\nNetBox क्या है NetBox एक डेटाबेस है, जिसकी इस बारे में बहुत पक्की राय है कि नेटवर्क किन चीज़ों से बनता है, और उसके ऊपर एक वेब एप्लिकेशन। यह PostgreSQL पर चलने वाला एक Django एप्लिकेशन है, जून 2016 में DigitalOcean के रिलीज़ करने के बाद से Apache 2.0 के तहत open source है, और आज इस प्रोजेक्ट की देखरेख NetBox Labs वॉलंटियर मेंटेनरों की एक टीम के साथ करती है।12\nइसके नीचे दस एप्लिकेशनों में फैले 149 मॉडल हैं, जिन तक 146 REST endpoints और एक GraphQL endpoint से पहुँचा जाता है। यह गिनती किसी फ़ीचर पेज से नहीं पढ़ी गई, बल्कि इसी पोस्ट के लिए बनाए गए इंस्टेंस से गिनी गई:\nएप्लिकेशन मॉडल एप्लिकेशन मॉडल dcim 56 virtualization 7 extras 23 tenancy 6 ipam 18 wireless 3 circuits 11 users 7 vpn 10 core 8 इनमें से छप्पन DCIM हैं, यानी फ़िज़िकल लेयर: साइट, लोकेशन, रैक, डिवाइस टाइप, डिवाइस, और हर तरह का पोर्ट, बे और केबल टर्मिनेशन जो किसी डिवाइस में हो सकता है। अठारह IPAM हैं। बाकी में सर्किट, टनल और IKE पॉलिसी, वर्चुअल मशीन और क्लस्टर, वायरलेस लिंक, tenancy, और वह मशीनरी आती है जो पूरी चीज़ को बढ़ाने लायक बनाती है।\nगिनती असली बात नहीं है। असली बात जोड़ हैं, और इसे देखने का सबसे तेज़ तरीका वह स्क्रीन है जिसके लिए NetBox सबसे ज़्यादा जाना जाता है।\nकैबिनेट से शुरू कीजिए, क्योंकि यही वह स्क्रीन है जो इस चीज़ को बेचती है।\nवह एलिवेशन डेटा से बनता है, अपलोड नहीं किया गया। हर डिवाइस वहाँ इसलिए है क्योंकि कोई रिकॉर्ड कहता है कि वह उन रैक यूनिटों में है, उस दिशा में मुँह किए, और रंग उस रोल से आते हैं जो आपने उसे दिया। जगह का इस्तेमाल 28.6% दिखता है क्योंकि NetBox ने उसे खुद निकाला। उस नंबर को कोई मेंटेन नहीं करता।\nइससे दो बातें निकलती हैं जो तस्वीर से ज़्यादा कीमती हैं।\nआप पूछ सकते हैं कि कौन-सी यूनिट खाली हैं, और ऐसा जवाब पा सकते हैं जिस पर काम किया जा सके। आप यूनिटों को उनमें कुछ लगने से पहले रिज़र्व भी कर सकते हैं, और यही फ़र्क है उस जगह को बेचने में जो आपके पास है और उस जगह को बेचने में जो आपको लगता है कि आपके पास है।\nयह जानबूझकर क्या नहीं करेगा जो प्रोडक्ट जानता है कि वह क्या नहीं है, वह उस प्रोडक्ट से कहीं ज़्यादा दुर्लभ है जो सब कुछ खराब तरीके से करता है, और NetBox का अपना डॉक्यूमेंटेशन इस पर साफ़-साफ़ बोलता है। यह नेटवर्क मॉनिटरिंग, DNS सर्विस, RADIUS, कॉन्फ़िगरेशन मैनेजमेंट या फ़ैसिलिटी मैनेजमेंट नहीं देता।1\nइससे भी ज़रूरी बात, यह आपके नेटवर्क की चाही गई स्थिति रखता है, उसकी ऑपरेशनल स्थिति नहीं, और डॉक्यूमेंटेशन कहता है कि लाइव नेटवर्क स्टेट का ऑटोमेटेड इम्पोर्ट “strongly discouraged” है, क्योंकि हर रिकॉर्ड को पहले किसी इंसान को जाँचना चाहिए।1\nबाकी सब इसी फ़ैसले पर टिका है, और यही वह फ़ैसला है जिससे लोग बहस करते हैं। बहस यह होती है: source of truth को तो सच होना चाहिए, तो नेटवर्क को discover करो और उसे लोड कर दो। जवाब यह है कि discover किया गया नेटवर्क आपको बताता है कि वहाँ क्या है, और वहाँ जो है उसमें वह हर गलती शामिल है जो किसी ने कभी की। 2021 में गलत VLAN में छोड़ा गया एक स्विच पोर्ट एक तथ्य है। वह एक इरादा नहीं है।\nNetBox इरादा रखता है। आपकी मॉनिटरिंग असलियत रखती है। दिलचस्प नंबर इन दोनों का फ़र्क है, और एक ही इनपुट से फ़र्क नहीं निकाला जा सकता।\nदूसरा सिद्धांत भी उतनी ही साफ़ भाषा में लिखा है: अगर एक तरफ़ अपेक्षाकृत आसान अस्सी प्रतिशत वाला हल हो और दूसरी तरफ़ कहीं ज़्यादा जटिल पूरा हल, तो आसान वाला चुनिए।1 आपको यह पहली बार तब महसूस होगा जब आप कुछ ऐसा मॉडल करना चाहेंगे जो यह मॉडल नहीं करता, और आखिर के पास कई सेक्शन इसी पर हैं कि उस दीवार से टकराने पर क्या करें।\nNetBox करता है NetBox नहीं करता रिकॉर्ड रखता है कि वहाँ क्या होना चाहिए poll करता है कि वहाँ क्या है किसी पोर्ट का इच्छित VLAN रखता है बताता है कि पोर्ट डाउन है बताता है कि कोई prefix किस कस्टमर का है उसके लिए उन्हें बिल भेजता है किसी डिवाइस का कॉन्फ़िगरेशन टेम्पलेट से रेंडर करता है उसे डिवाइस पर पुश करता है सर्किट, प्रोवाइडर और कमिट को ट्रैक करता है सर्किट को मॉनिटर करता है बताता है कि डिवाइस किस रैक में है, और किस U में कैबिनेट खोलता है उस दाएँ कॉलम को उन टूल्स की सूची की तरह पढ़िए जिनकी आपको अब भी ज़रूरत है। उसे गलत पढ़ेंगे तो आप NetBox को उन सबमें बदलने की कोशिश करेंगे, और इसी तरह एक source of truth एक और ऐसा सिस्टम बन जाता है जिस पर कोई भरोसा नहीं करता।\nआपको इसकी ज़रूरत क्यों है किसी managed service provider से पूछिए कि किसी कस्टमर के नेटवर्क का आधिकारिक रिकॉर्ड कहाँ रहता है, और आपको एक जवाब मिलेगा। उनके दो इंजीनियरों से अलग-अलग पूछिए और आपको दो जवाब मिलेंगे।\nएक किसी स्प्रेडशीट की ओर इशारा करेगा। एक किसी ऐसे डायग्राम की ओर जिसे आखिरी बार किसी ने 2023 में सेव किया था और जो अब कंपनी छोड़ चुका है। कोई और कहेगा कि फ़ायरवॉल कॉन्फ़िग ही डॉक्यूमेंटेशन है, जो कम से कम ईमानदार है, क्योंकि कॉन्फ़िग बताता है कि बॉक्स क्या कर रहा है। बस यह नहीं बताता कि क्यों, या किसने माँगा था, या उस बॉक्स के पीछे के चार कस्टमरों में से कौन उस नियम के पैसे दे रहा है।\nनाकामी कभी वह दिन नहीं होती जब आप देखते हैं कि रिकॉर्ड गलत है। नाकामी वह दिन होती है जब किसी को उसकी ज़रूरत पड़ती है।\nमौका आपको क्या दिखाना है न दिखा पाने की कीमत रिन्यूअल की बातचीत मासिक चार्ज से क्या मिलता है, उसका मद-वार हिसाब कॉम्पिटिटर का कोटेशन मद-वार है, क्योंकि उन्होंने जाकर गिना कोई इंजीनियर नोटिस दे देता है जो कुछ वह जानता था, सब लिखा हुआ छह महीने तक पता लगाना, एक-एक टिकट करके कोई कस्टमर छोड़कर जाता है उनकी अपनी एस्टेट का विवरण उसे जोड़ने में तीन हफ़्ते, और एक रेफ़रेंस जो वे ईमानदारी से देंगे कोई ऑडिटर स्कोप का सवाल पूछता है कौन-से सिस्टम पर्सनल डेटा रखते हैं, और वे फ़िज़िकली कहाँ हैं रेगुलेटर को कुछ ऐसा बताया गया जो बाद में सच नहीं निकला किसी माइग्रेशन की कीमत लगानी है वहाँ असल में क्या है, उसकी गिनती आप अंदाज़े पर बोली लगाते हैं और फ़र्क खुद भरते हैं इनमें से कुछ भी अनोखा नहीं है। यह हर मंगलवार की बात है।\nइससे आपको जो मिलता है वह डॉक्यूमेंटेशन नहीं है। डॉक्यूमेंटेशन वह चीज़ है जिसे आप लिखते हैं और फिर मेंटेन करना बंद कर देते हैं। आपको मिलता है एक डेटाबेस जो विरोधाभास रखने से मना करता है, और ऐसे सवालों के जवाब देता है जो किसी ने पहले से पूछने की सोची भी नहीं थी। इस पोस्ट में आगे एक कैबिनेट है जो किट से 28.6 प्रतिशत भरी निकलती है और पावर से 90.7 प्रतिशत। उसे ढूँढने कोई नहीं निकला था। वह बस एक बार डिवाइस टाइप पर wattage डालने से सामने आ गई।\nईमानदार चेतावनी भी इसके साथ आती है, और आखिरी सेक्शन उसी के बारे में है। कोई रिकॉर्ड उतना ही कीमती है जितना उसे सही रखने में आपका खर्च होता है। लेकिन विकल्प है एक ऐसा बिज़नेस जो खुद का वर्णन नहीं कर सकता, और यह बात सबसे पहले अक्सर किसी कस्टमर को पता चलती है।\nदूसरा वाला: Nautobot खोज शुरू करने के करीब एक हफ़्ते के अंदर आप इससे टकराएँगे, इसलिए यह जानना फ़ायदेमंद है कि हुआ क्या था।\n2021 में Network to Code ने NetBox को fork किया और नतीजे का नाम Nautobot रखा। कोई soft fork या डिस्ट्रिब्यूशन नहीं: एक hard fork जो पाँच साल से अलग रास्ते पर है। इसके अपने v1.0 रिलीज़ नोट्स इसे “a divergent fork of NetBox 2.10” कहते हैं, रिपॉज़िटरी 19 फ़रवरी 2021 को बनी और v1.0.0 26 अप्रैल 2021 को आया।3\nउनके बताए कारण उनके अपने ब्लॉग पर हैं और मेरे शब्दों के बजाय उन्हीं के शब्दों में पढ़ने लायक हैं। तीन चीज़ों ने इसे आगे बढ़ाया। वे एंटरप्राइज़ सपोर्ट बेचना चाहते थे: “We need to offer high-touch support models with Service Level Agreements (SLAs) we can guarantee. We need flexibility to offer Long-term Support (LTS) for customers who can\u0026rsquo;t upgrade at the pace of a fast moving open source project.” वे चाहते थे कि source of truth डॉक्यूमेंटेशन परोसने के बजाय एक ऑटोमेशन प्लेटफ़ॉर्म के केंद्र में बैठे। और “there became a growing divergence in our vision about what a Source of Truth for networking should look like and how to get there”।4\nउस पहले कारण के साथ उसकी तारीख जोड़नी ज़रूरी है, क्योंकि वह अब सच नहीं रहा। फ़रवरी 2021 में NetBox के पीछे कोई कंपनी नहीं थी जो आपको कुछ बेचती। NetBox Labs की स्थापना 2023 तक नहीं हुई थी, IBM द्वारा NS1 को खरीदने के बाद यह उससे अलग होकर बनी, और इसके सह-संस्थापक NetBox के अपने लीड मेंटेनर हैं।5\nऔर यह कोई तीसरी पार्टी नहीं है जिसने किसी और के प्रोजेक्ट पर बिज़नेस खड़ा कर लिया। NetBox Labs ही NetBox की संरक्षक है: प्रोजेक्ट का अपना डॉक्यूमेंटेशन कहता है “the open source project is stewarded by NetBox Labs and a team of volunteer maintainers”।1 वे self-managed इंस्टॉल के लिए NetBox Enterprise बेचते हैं, NetBox Cloud के रूप में इसे आपके लिए होस्ट करते हैं, और 24/7 सपोर्ट देते हैं।6\nतो “NetBox के लिए सपोर्ट खरीदा नहीं जा सकता” उस समय कहना ठीक था जब Network to Code ने fork किया, और अब कहना ठीक नहीं है। दोनों प्रोजेक्ट के पीछे एक कमर्शियल कंपनी है जो कॉन्ट्रैक्ट पर साइन करेगी, और NetBox के मामले में वह कंपनी वही है जो प्रोजेक्ट की देखरेख करती है।\nजो लाइन ज़्यादातर लोग छोड़ देते हैं वह अगली है, और यही वजह है कि यह कोई गंदी कहानी नहीं है: “the NetBox project team suggested that we should consider forking.”\nकोई fork इससे ज़्यादा सभ्य मुश्किल से होता है। दो समूह अलग-अलग चीज़ें चाहते थे, लंबे समय तक यह कहते रहे, और एक codebase पर लड़ने के बजाय अलग हो गए। दोनों हिस्से अब भी Apache 2.0 हैं। किसी ने ऐसा कुछ नहीं लिया जिसका उसे हक नहीं था।\nयह fork असल में किस लिए था Nautobot 1.0 के रिलीज़ नोट्स बताते हैं कि NetBox 2.10 के मुकाबले इसमें क्या जोड़ा गया, और यह सूची किसी भी ब्लॉग पोस्ट से बेहतर तरीके से बहस को समझाती है:3\nNautobot ने 2021 में क्या जोड़ा NetBox आज कहाँ है GraphQL सपोर्ट NetBox में है डेटा सोर्स के रूप में Git इंटीग्रेशन NetBox में है, synchronized data sources के रूप में Single sign-on NetBox में है Secrets NetBox में एक प्लगइन से है Scripts और reports को Jobs में मिलाना NetBox 4.7 में scripts को एक प्लगइन में ले जा रहा है सभी मॉडलों पर custom fields NetBox में custom fields का व्यापक सपोर्ट है डेटा वैलिडेशन प्लगइन API NetBox में custom validation rules हैं डेटाबेस ऑब्जेक्ट के रूप में बदले जा सकने वाले स्टेटस NetBox के स्टेटस अब भी एक Python choice set हैं मॉडलों के बीच यूज़र-परिभाषित रिलेशनशिप NetBox में इसका कोई समकक्ष नहीं UUID primary keys NetBox integer keys इस्तेमाल करता है प्लगइन API में सुधार NetBox का प्लगइन फ़्रेमवर्क तब से काफ़ी बढ़ा है ऊपर का ज़्यादातर आधा हिस्सा एक जैसा हो चुका है। Nautobot ने 2021 में जो कई चीज़ें दीं, वे बाद में NetBox में आईं, और जब दो प्रोजेक्ट सबके सामने एक ही समस्याएँ हल कर रहे हों तो आम तौर पर यही होता है।\nनीचे की तीन चीज़ें एक जैसी नहीं हुईं, और वे दिखावटी नहीं बल्कि आर्किटेक्चर की हैं। मैंने 2021 के नोट्स पर भरोसा करने के बजाय आज दोनों codebase जाँचे।\nNautobot का Status एक डेटाबेस मॉडल है, जिसे उसके अपने सोर्स में “Model for database-backend enum choice objects” कहा गया है, यानी स्टेटस एक row है जिसे कोई UI में जोड़ सकता है। NetBox के स्टेटस एक Python choice set से आते हैं, इसीलिए नीचे वाला FIELD_CHOICES सेक्शन configuration.py एडिट करके और रीस्टार्ट करके एक स्टेटस जोड़ता है। Nautobot में Relationship और RelationshipAssociation मॉडल हैं, तो आप बिना कोड लिखे दो मौजूदा ऑब्जेक्ट टाइप के बीच रिलेशनशिप परिभाषित कर सकते हैं। NetBox का इस समस्या का जवाब एक प्लगइन है, जिसे नीचे सेक्शनों की एक पूरी कड़ी मिली है। और Nautobot की primary keys UUID हैं, जबकि NetBox की integers।\nउन्होंने वह काम भी किया जिसके लिए उन्होंने fork किया था। आज की तारीख में Nautobot एक ही दिन 3.2.x और 2.4.x रिलीज़ कर रहा है, जो मौजूदा वर्शन के साथ चलती एक असली long-term मेंटेनेंस लाइन है, और यह तीन बताए गए कारणों में से एक था।\nकौन-सा चुनें पहले ईमानदार नंबर। NetBox के 21,625 stars और 3,133 forks हैं; Nautobot के 1,617 और 422।7 दोनों पर पिछले दो दिनों के अंदर push हुआ है, दोनों Apache 2.0 हैं, और दोनों के पीछे अब एक कमर्शियल कंपनी है जो सपोर्ट और होस्टिंग बेचती है।\nयह अंतर क्वालिटी पर फ़ैसला नहीं है। यह पाँच साल की बढ़त को दिखाता है, और इस बात को कि source of truth ढूँढने वाले ज़्यादातर लोग पहले NetBox पाते हैं। लेकिन यह उस चीज़ का फ़ैसला ज़रूर करता है जो आम तौर पर फ़ीचर्स से ज़्यादा मायने रखती है: आप जो चुनेंगे उसके लिए आपको कितने प्लगइन, इंटीग्रेशन, Ansible मॉड्यूल, फ़ोरम के जवाब और सहकर्मी मिलेंगे।\nतो: अगर आपको एक इन्वेंटरी और ऐसा source of truth चाहिए जिसे दूसरे सिस्टम पढ़ें, और आपको सबसे बड़ा इकोसिस्टम और सबसे आसान हायरिंग चाहिए, तो जवाब NetBox है, और इस पोस्ट का बाकी हिस्सा उसी के बारे में है। अगर source of truth चाहने की आपकी वजह खास तौर पर उससे ऑटोमेशन चलाना है, या आप चाहते हैं कि स्टेटस और रिलेशनशिप कोई कॉन्फ़िगरेशन फ़ाइल और रीस्टार्ट नहीं बल्कि आपकी टीम परिभाषित करे, तो फ़ैसला करने से पहले Nautobot को ठीक से देखिए।\nकिसी को भी आपको इनमें से कोई एक सिर्फ़ सपोर्ट के नाम पर बेचने मत दीजिए। अब दोनों तरफ़ यह मौजूद है, और जो अंतर पाँच साल बाद भी रहेंगे वे ऊपर की टेबल वाले हैं।\nजो आपको नहीं करना चाहिए वह है किसी एक को इसलिए चुनना क्योंकि किसी ने आपसे कहा कि दूसरा मर चुका है। दोनों में से कोई नहीं मरा, और दोनों इसी हफ़्ते रिलीज़ निकाल रहे थे।\nइसे चालू करना दो रास्ते, और इस पोस्ट के लिए मैंने दोनों चलाए। अगर आपको यह बीस मिनट में चलता हुआ चाहिए तो कंटेनर, अगर इस पर बोझ टिकने वाला है तो होस्ट पर पैकेज।\nकंटेनर स्टैक कम्युनिटी netbox-docker मेंटेन करती है, जो जल्दी वाला जवाब है:8\ngit clone -b release https://github.com/netbox-community/netbox-docker.git cd netbox-docker tee docker-compose.override.yml \u0026lt;\u0026lt;\u0026#39;EOF\u0026#39; services: netbox: ports: - 8000:8080 EOF docker compose pull docker compose up इससे आपको एप्लिकेशन, PostgreSQL, Redis और एक बैकग्राउंड वर्कर मिलते हैं, आपस में जुड़े हुए। मैंने हिस्से देखने के लिए यही चीज़ podman के तहत हाथ से बनाई, और हिस्से जानने लायक हैं क्योंकि उनमें से दो लोगों को पकड़ लेते हैं:\nकंटेनर क्या करता है अगर आप इसे छोड़ दें netbox gunicorn के पीछे Django एप्लिकेशन कुछ नहीं चलता postgres डेटाबेस, 15 या उसके बाद का कुछ नहीं चलता redis / valkey दो डेटाबेस: एक टास्क के लिए, एक कैशिंग के लिए कुछ नहीं चलता netbox-worker rqworker, जो टास्क क्यू खाली करता है webhooks कभी फ़ायर नहीं होते, बैकग्राउंड जॉब कभी नहीं चलते, और कुछ भी आपको चेतावनी नहीं देता netbox-housekeeping समय-समय पर होने वाली सफ़ाई change log रिकॉर्ड कभी expire नहीं होते असली बात वह चौथी row है। वर्कर के बिना सब कुछ ठीक दिखता है। Event rules क्यू में लगते हैं और वहीं पड़े रहते हैं।\nपहली बार चलाने पर दो चीज़ों ने मुझे काटा, और दोनों में से कोई भी ऐसे एरर मैसेज में नहीं है जिसे आप खोजें।\nपहला migration बहुत समय लेता है। एक मिनट नहीं। इस मशीन पर कई मिनट लगे, क्योंकि NetBox 4.7 django-mptt की जगह PostgreSQL ltree लाता है और रास्ते में हर hierarchical टेबल दोबारा बनाता है। कंटेनर बस वहाँ बैठा migrations लगाता रहता है। उसे छेड़िए मत।\nAPI_TOKEN_PEPPERS के बिना आप v2 API token नहीं बना सकते, और इसका इकलौता संकेत लॉग में एक चेतावनी है:\nUserWarning: API_TOKEN_PEPPERS is not defined. v2 API tokens cannot be used. कम से कम एक सेट कीजिए, कम से कम पचास कैरेक्टर का, इससे पहले कि आप यह ढूँढने निकलें कि API आपको क्यों ठुकरा रहा है।\nहोस्ट पर, पैकेजों से डॉक्यूमेंटेड रास्ता Ubuntu 24.04 पर टेस्ट किया गया है। मैंने इसे एक साफ़ मशीन पर शुरू से आखिर तक चलाया, और नतीजा यह रहा:\nकंपोनेंट 24.04 ने मुझे क्या दिया NetBox 4.7 को क्या चाहिए PostgreSQL 16.15 15 या उसके बाद का Redis 7.0.15 6.0 या उसके बाद का Python 3.12.3 3.12, 3.13 या 3.14 Django 6.1.1 NetBox के साथ आता है NetBox v4.7.2 ये न्यूनतम ज़रूरतें NetBox की अपनी हैं, और 4.7 ने PostgreSQL और Redis दोनों की निचली सीमा बढ़ा दी।9\nपूरा काम पाँच स्टेप का है।\n# 1. the services sudo apt install -y postgresql redis-server sudo -u postgres psql -c \u0026#34;CREATE DATABASE netbox;\u0026#34; sudo -u postgres psql -c \u0026#34;CREATE USER netbox WITH PASSWORD \u0026#39;something-you-generated\u0026#39;;\u0026#34; sudo -u postgres psql -c \u0026#34;ALTER DATABASE netbox OWNER TO netbox;\u0026#34; sudo -u postgres psql -d netbox -c \u0026#34;GRANT CREATE ON SCHEMA public TO netbox;\u0026#34; # 2. the build dependencies sudo apt install -y python3 python3-pip python3-venv python3-dev build-essential libxml2-dev libxslt1-dev libffi-dev libpq-dev libssl-dev zlib1g-dev git # 3. the application, at a release tag rather than at main sudo mkdir -p /opt/netbox \u0026amp;\u0026amp; cd /opt/netbox sudo git clone https://github.com/netbox-community/netbox.git . sudo git checkout v4.7.2 sudo adduser --system --group netbox sudo chown -R netbox /opt/netbox/netbox/media/ /opt/netbox/netbox/scripts/ /opt/netbox/netbox/reports/ # 4. the configuration: five values, no more cd /opt/netbox/netbox/netbox/ sudo cp configuration_example.py configuration.py python3 /opt/netbox/netbox/generate_secret_key.py # run it twice sudo $EDITOR configuration.py # 5. let the upgrade script do the rest sudo /opt/netbox/upgrade.sh वे पाँच वैल्यू हैं ALLOWED_HOSTS, DATABASES, REDIS, SECRET_KEY और API_TOKEN_PEPPERS। आखिरी दो को अलग-अलग जनरेट कीजिए और एक को दूसरे के लिए दोबारा इस्तेमाल मत कीजिए। इसलिए key generator दो बार चलाइए और नतीजे अलग-अलग लाइनों में पेस्ट कीजिए।\nupgrade.sh वर्चुअल एनवायरनमेंट बनाता है, हर Python dependency इंस्टॉल करता है, migrations चलाता है, ऑफ़लाइन इस्तेमाल के लिए डॉक्यूमेंटेशन बनाता है और static फ़ाइलें इकट्ठा करता है। किसी नई मशीन पर खत्म होने पर यह एक चेतावनी छापता है जो डरावनी दिखती है पर है नहीं:\nWARNING: No existing virtual environment was detected. A new one has been created. Update your systemd service files to reflect the new Python and gunicorn executables. (If this is a new installation, this warning can be ignored.) फिर एक superuser, और यह चल पड़ता है:\nsource /opt/netbox/venv/bin/activate cd /opt/netbox/netbox \u0026amp;\u0026amp; python3 manage.py createsuperuser किसी भी असली काम के लिए इसके आगे runserver नहीं, gunicorn लगाइए। कॉन्फ़िगरेशन और unit फ़ाइलें पहले से रिपॉज़िटरी में हैं, और यही बात जानने लायक है क्योंकि लोग अपनी खुद की लिख बैठते हैं:\nsudo cp /opt/netbox/contrib/gunicorn.py /opt/netbox/gunicorn.py sudo cp -v /opt/netbox/contrib/*.service /etc/systemd/system/ sudo systemctl daemon-reload sudo systemctl enable --now netbox netbox-rq netbox.service gunicorn को 127.0.0.1:8001 पर चलाता है, netbox-rq.service वर्कर चलाता है, और TLS टर्मिनेट करने और /static सर्व करने के लिए आगे nginx या Apache लगता है। दो सर्विस, और दूसरी वही वर्कर है जो कंटेनर स्टैक को चाहिए।\nइसे किस क्रम में भरना पड़ता है नया NetBox राय रखने वाला एक खाली डेटाबेस है, और उसके साथ पहला घंटा आम तौर पर यह पता लगाने में जाता है कि वे राय क्या हैं। आप एक डिवाइस जोड़ने जाते हैं, और यह आपको जोड़ने नहीं देता।\nवे लाल तारांकन ही पूरा सबक हैं। NetBox किसी चीज़ को तब तक रिकॉर्ड नहीं करेगा जब तक वे चीज़ें मौजूद न हों जिन पर वह टिकी है, और यह अड़ियलपन नहीं है: बिना टाइप वाला डिवाइस एक ऐसी row है जो उनमें से किसी भी सवाल का जवाब नहीं दे सकती जिनके लिए डिवाइस होता है।\nतो अंदाज़ा लगाने के बजाय मैंने मॉडल से पूछा कि कौन-सी foreign keys सच में अनिवार्य हैं, और फिर API से हर नियम तोड़ने की कोशिश की यह देखने के लिए कि क्या लौटता है।\nPOST /api/dcim/device-types/ no manufacturer {\u0026#34;manufacturer\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/dcim/devices/ no device type {\u0026#34;device_type\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/dcim/interfaces/ no device {\u0026#34;device\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/ipam/aggregates/ no RIR {\u0026#34;rir\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/circuits/circuits/ no provider, no type {\u0026#34;provider\u0026#34;: [\u0026#34;This field is required.\u0026#34;], \u0026#34;type\u0026#34;: [\u0026#34;This field is required.\u0026#34;]} POST /api/virtualization/virtual-machines/ nothing at all {\u0026#34;__all__\u0026#34;: [\u0026#34;A virtual machine must be assigned to a site, cluster, or device.\u0026#34;]} हर एक ने मना किया, और ठीक-ठीक बताया कि कौन-सी चीज़ गायब है। यही जानकारी पहले से ज़रूरी चीज़ों की सूची के रूप में:\nबनाने के लिए पहले ज़रूरी वैकल्पिक, पर आप इसे पहले चाहेंगे Tenant कुछ नहीं एक Tenant group Region, Site group कुछ नहीं उसी तरह का एक parent, ये nest होते हैं Site कुछ नहीं एक Region, एक Site group, एक Tenant Location एक Site एक parent Location, एक Tenant Rack type एक Manufacturer Rack एक Site एक Location, Rack group, Rack role, Rack type, Tenant Device type एक Manufacturer Device role कुछ नहीं एक parent Device role, ये nest होते हैं Device एक Device role, एक Device type, एक Site एक Rack और पोज़िशन, एक Platform, एक Tenant Interface, और हर दूसरा कंपोनेंट एक Device Cable टर्मिनेट करने के लिए दो चीज़ें एक Tenant Aggregate एक RIR एक Tenant VLAN कुछ नहीं एक VLAN group, एक Role, एक Tenant Prefix कुछ नहीं एक Site, एक VLAN, एक Role, एक VRF, एक Tenant IP address कुछ नहीं असाइन करने के लिए एक Interface, एक Tenant Circuit एक Provider और एक Circuit type एक Tenant Circuit termination एक Circuit उतरने के लिए एक Site Cluster एक Cluster type एक Cluster group, एक Site, एक Tenant Virtual machine एक Site, एक Cluster या एक Device एक Platform, एक Tenant VM interface एक Virtual machine दूसरा कॉलम वह है जो आपको महँगा पड़ता है। Prefixes, IP addresses, VLANs और tenants को कुछ भी नहीं चाहिए, तो पहले दिन आपको उन्हें किसी भी क्रम में बनाने से कोई नहीं रोकता। वे किसी काम के हैं या नहीं, यह अलग सवाल है, क्योंकि जिस एड्रेस के पीछे कोई इंटरफ़ेस नहीं वह सूची की एक row है, और जिस डिवाइस का कोई tenant नहीं उसे आप बाद में फिर से एडिट करेंगे।\nअसल में किस क्रम में काम करें इससे एक क्रम निकलता है। इसके हिसाब से नीचे चलिए और कुछ भी आपको कभी मना नहीं करेगा।\nपहले, वे चीज़ें जिन पर बाकी सब टिका है। इनमें से कुछ भी रोमांचक नहीं है और इन्हें गलत करना सस्ता पड़ता है।\nTenant groups, फिर tenants। इन्हें बाकी सबसे पहले कीजिए। अट्ठाईस मॉडल tenant लेते हैं, जिनमें Site, Location और Rack भी हैं, तो अगर कस्टमर अभी मौजूद नहीं हैं तो आप उन्हें चलते-चलते नहीं लगा सकते और बाद में bulk-edit करते रहेंगे। Regions और site groups। दोनों वैकल्पिक, दोनों अपने अंदर nest होते हैं, और एक-दूसरे से स्वतंत्र हैं। Regions भूगोल के लिए हैं, site groups काम के लिए, और आप एक, दोनों या कोई भी नहीं इस्तेमाल कर सकते हैं। Sites। लगभग हर चीज़ की जड़। Site को कुछ नहीं चाहिए, इसीलिए यह पहली चीज़ है जो आप सच में बना सकते हैं। Locations। इन्हें एक site चाहिए, और ये nest होती हैं, तो rows वाला hall जिसमें pods हैं, तीन स्तर गहरा एक ही मॉडल है। Rack roles और rack groups। दोनों वैकल्पिक। Rack groups फ़्लैट होते हैं और locations के साथ दूसरी धुरी की तरह बैठते हैं, जो rows और pods के लिए काम आता है। Manufacturers, फिर rack types। Rack type को एक manufacturer चाहिए। अगर आप कैबिनेट खुद मॉडल नहीं कर रहे तो rack types छोड़ दीजिए। Racks। इन्हें एक site चाहिए। अगर आप इसे एक location भी देते हैं, तो वह location उसी site की होनी चाहिए, और NetBox यह जाँचता है। फिर हार्डवेयर कैटलॉग, हार्डवेयर नहीं। एक भी डिवाइस जोड़ने से पहले आपको manufacturers, device types, device roles और, व्यवहार में, platforms चाहिए।\nManufacturers। स्टेप 6 से आपके पास कुछ पहले से हो सकते हैं, क्योंकि rack types को भी इनकी ज़रूरत है। Module types को भी। Device types, हर एक को एक manufacturer चाहिए। Device roles, जो nest होते हैं, और platforms। यही वह स्टेप है जिसे लोग छोड़ देते हैं, और यही तय करता है कि बाकी काम में कितनी टाइपिंग लगेगी। Device type अपने interfaces, ports और bays को टेम्पलेट के रूप में साथ रखता है, तो उससे बनाया गया हर डिवाइस सही कंपोनेंट्स के साथ पहले से तैयार आता है। टाइप एक बार सही कर लीजिए, और उनमें से चालीस रैक करना बस चालीस नाम हैं।\nउस सूची में Platform अलग है, क्योंकि डिवाइस को सख्ती से इसकी ज़रूरत नहीं। फिर भी इसे अभी कर लीजिए। बाद में config template और NAPALM ड्राइवर यही साथ रखता है, और पूरी एस्टेट पर वापस जाकर इसे सेट करना वही शाम खा जाएगा जो आप tenants पर लगाते।\nफिर खुद किट।\nDevices। Role, type और site तीनों ज़रूरी हैं। Rack और position वैकल्पिक हैं, और अगर आप इन्हें देते हैं तो इन्हें site से मेल खाना चाहिए। Components, अगर device type ने इन्हें पहले से नहीं दिया। Cables, कंपोनेंट्स के बीच। फिर एड्रेसिंग, क्योंकि एड्रेस को रहने के लिए एक इंटरफ़ेस चाहिए और इंटरफ़ेस स्टेप 12 के बाद ही मौजूद होता है।\nRIRs, फिर aggregates। Prefix और VLAN roles, VRFs, VLAN groups फिर VLANs। Prefixes, फिर अलग-अलग IP addresses। फिर कमर्शियल लेयर।\nProviders, provider accounts और circuit types। Circuits, फिर उन्हें sites पर terminate कीजिए। और वर्चुअल एस्टेट, जो फ़िज़िकल वाली की नकल है।\nCluster types और cluster groups, फिर clusters। Virtual machines, जिन्हें एक site, एक cluster या एक device चाहिए, फिर उनके interfaces। स्टेप 1 से 10 एक दोपहर का काम है और एडमिन जैसे लगते हैं। इनमें कुछ भी चमकदार नहीं है। यही वह दोपहर भी है जो तय करती है कि स्टेप 11 एक सुबह लेगा या एक पखवाड़ा।\nवे नियम जो बाद में काटते हैं ज़रूरी फ़ील्ड्स आसान आधा हिस्सा हैं, क्योंकि वे तुरंत फ़ेल होते हैं और बताते हैं क्यों। जो लोगों को पकड़ते हैं वे consistency के नियम हैं, जो तभी चलते हैं जब आपके पास खुद का विरोध करने लायक डेटा हो जाता है:\ndevice at Leeds, put in a Manchester rack {\u0026#34;rack\u0026#34;: [\u0026#34;Rack MCR1-A07 (A07) does not belong to site Leeds Edge.\u0026#34;]} device at Leeds, in a Manchester location {\u0026#34;location\u0026#34;: [\u0026#34;Location Hall 2 does not belong to site Leeds Edge.\u0026#34;]} rack at Leeds, in a Manchester location {\u0026#34;__all__\u0026#34;: [\u0026#34;Assigned location must belong to parent site (Leeds Edge).\u0026#34;]} a second device in a unit that is already taken {\u0026#34;position\u0026#34;: [\u0026#34;U39.0 is already occupied or does not have sufficient space to accommodate this device type: MX204 (1.0U)\u0026#34;]} अगर कोई पूछे कि यह सब झंझट क्यों, तो मैं उस आखिरी वाले की ओर इशारा करूँगा। NetBox जानता है कि डिवाइस 1U है, जानता है कि कैबिनेट में क्या है, और आपको एक ही जगह में दो चीज़ें रिकॉर्ड नहीं करने देगा। आपकी स्प्रेडशीट आपको पूरी दोपहर यह करने देगी और एक शब्द नहीं बोलेगी, और आपको तब पता चलेगा जब कोई हाथ में बॉक्स लिए hall में खड़ा होगा।\nइनमें से कोई भी कॉन्फ़िगर नहीं किया जा सकता और किसी को किया भी नहीं जाना चाहिए। यही एक रिकॉर्ड और एक ख्वाहिश के बीच का फ़र्क है।\nइस्तेमाल: हर स्क्रीन आपको क्या देती है एस्टेट लोड होने के बाद, यह रहा जो आपको असल में इससे वापस मिलता है। नीचे सब कुछ वही इंस्टेंस है: एक कैबिनेट, चौदह डिवाइस, तीन कस्टमरों में केबल और एड्रेस के साथ।\nडिवाइस अपने कंपोनेंट्स ही है उन हाइपरवाइज़रों में से किसी एक में क्लिक कीजिए, और दिलचस्प टैब summary नहीं, interfaces है।\nएक row आर-पार पढ़िए। इंटरफ़ेस, उसकी स्पीड, आपने उसके बारे में क्या लिखा, उस पर एड्रेस, केबल पर लेबल, और दूसरे सिरे का पोर्ट। यह एक query है, और यही उस सवाल का जवाब है जो हर कोई असल में पूछता है: “यह किसमें लगा है”।\nदेखिए एड्रेस कहाँ बैठा है। यह eno1 पर है, सर्वर पर नहीं। यह तब तक बाल की खाल लगता है जब तक आपके पास एक ऐसा बॉक्स न हो जिसमें एक मैनेजमेंट इंटरफ़ेस, दो डेटा इंटरफ़ेस और एक loopback हो, और कोई पूछे कि उसकी ओर से कौन-सा एड्रेस जवाब देता है। जो मॉडल एड्रेस को डिवाइस पर टाँगता है वह आपको नहीं बता सकता। यह बता सकता है, और यह एक इंटरफ़ेस पर चार एड्रेस वाला बिल्कुल आम मामला भी संभाल सकता है।\nकेबल के पीछे चलिए केबल कंपोनेंट्स पर टर्मिनेट होती हैं, डिवाइसों पर नहीं। एक सिरे पर इंटरफ़ेस, दूसरे पर इंटरफ़ेस, या एक front port, एक rear port, एक power outlet, एक circuit termination। पूरा फ़ीचर इसी बारीकी पर टिका है, और इसीलिए ऊपर की इंटरफ़ेस सूची बिना बताए अपने कॉलम में दूसरा सिरा छाप सकी।\nकेबल को डिवाइस से डिवाइस मॉडल कीजिए तो आपने एक तस्वीर बनाई है। उसे पोर्ट्स पर टर्मिनेट कीजिए तो NetBox उस पर चल सकता है।\nयहाँ एक हॉप है, क्योंकि यह direct attach केबल है। बीच में पैच पैनल रखिए और यह उन पर चलता है, पैनल दर पैनल, और बताता है कि तीन कैबिनेटों से होकर जाने वाले रन के दूसरे सिरे पर क्या है। वरना इस काम में एक टॉर्च लगती है और कोई जो tone probe का दूसरा सिरा पकड़े खड़ा हो।\nट्रेस हर सिरे की पूरी लोकेशन भी छापता है। साइट, hall, कैबिनेट, face, रैक यूनिट। अगर आप कभी किसी कॉल पर किसी remote hands इंजीनियर को यह समझाने में लगे रहे हैं कि किस बॉक्स को देखना है, तो उस लाइन की पूरी कीमत वहीं है।\nएड्रेस, एक टैब की तरह नहीं बल्कि एक ट्री की तरह IPAM वह आधा हिस्सा है जिसके लिए लोग आते हैं।\nइंडेंटेशन खुद एड्रेसों से निकाला जाता है। आप NetBox को नहीं बताते कि 10.20.20.0/24 10.20.0.0/16 के अंदर है, वह खुद समझ लेता है, और अगले साल जब कोई उसके बीच में एक /26 जोड़ेगा तब भी समझता रहेगा।\nहर row में वे चीज़ें हैं जिनसे आप असल में फ़िल्टर करते हैं: वह किस VLAN से मैप होता है, role, और वह किस कस्टमर का है। इस्तेमाल भी गिना जाता है।\nकिसी एक को खोलिए और आपको उसके अंदर के एड्रेस मिलते हैं, और खाली जगहें भी।\nवे हरी rows खाली जगह हैं, इस्तेमाल हुई जगह के साथ ही दिखाई गई। एक API कॉल है जो आपको किसी prefix से अगला खाली एड्रेस दे देती है, और IPAM ऑटोमेशन का यही एक टुकड़ा है जो तुरंत अपनी कीमत वसूल लेता है, क्योंकि वरना लोग यही काम स्प्रेडशीट पर आँखें गड़ाकर और उम्मीद करके करते हैं।\nएक इंटरफ़ेस जितने चाहें उतने एड्रेस ले सकता है, दोनों फ़ैमिली के, और आप हर फ़ैमिली का एक डिवाइस का primary चुनते हैं।\nएक पोर्ट पर दो IPv4 और दो IPv6, जो एक आम मंगलवार है और जिसे डिवाइस-केंद्रित मॉडल बिल्कुल भी व्यक्त नहीं कर सकता।\nएड्रेस उस नेटवर्क के मास्क के साथ डालिए जिस पर वे हैं, /32 के रूप में नहीं। NetBox 10.20.20.11/32 स्वीकार कर लेगा और उसे सही prefix के नीचे रख देगा, क्योंकि containment होस्ट एड्रेस से निकाला जाता है। जो वह नहीं करेगा वह है बाद में आपके फ़ैसले पर सवाल उठाना: मास्क ठीक वैसे ही स्टोर होता है जैसा टाइप किया गया और जो भी उसे पढ़े उसे वैसा ही लौटाया जाता है, तो LAN एड्रेस पर /32 डिवाइस कॉन्फ़िगरेशन में /32 ही रेंडर करता है। यह आज फ़ॉर्म में नहीं, तीन महीने बाद किसी config template में काटता है।\nएक इंस्टॉल, तीन कस्टमर NetBox के ज़्यादातर ऑब्जेक्ट किसी tenant को असाइन किए जा सकते हैं। कोई एंटरप्राइज़ इसे बिज़नेस यूनिट्स के लिए इस्तेमाल करता है। अगर आप managed services बेचते हैं, तो आप हर कस्टमर के लिए एक बनाते हैं।\nदाईं ओर का वह पैनल “इस कस्टमर के पास क्या है” का जवाब है, और उसने खुद को खुद जोड़ा। कोई रिपोर्ट नहीं, कोई स्प्रेडशीट नहीं, उस इंजीनियर से पूछना नहीं जिसने इसे बनाया।\ntenancy का मतलब क्या है, इस पर सावधान रहना ज़रूरी है, क्योंकि पहले दिन इसे गलत करने का मतलब बाद में एक साल तक उधेड़ना है। Tenant का मतलब है कि ऑब्जेक्ट उस कस्टमर के लिए समर्पित है। जो राउटर सिर्फ़ उन्हें सर्व करता है उसे उनका tenant मिलता है। जो फ़ायरवॉल उनमें से चार को सर्व करता है वह उनमें से किसी का नहीं है, तो उसे कोई tenant नहीं मिलता, और रिश्ता कहीं और जाता है। उस पर और बात आगे, क्योंकि यही वह जगह है जहाँ ज़्यादातर लोगों को पता चलता है कि उन्हें अपना कुछ जोड़ना पड़ेगा।\nनंबर Device Type पर डालिए यही वह स्टेप है जो एक इन्वेंटरी को सवालों का जवाब देने वाली चीज़ से अलग करता है, और इसकी कीमत है हर device type पर करीब दस मिनट।\nएक device type अपना वज़न और, अपने power port टेम्पलेट्स के ज़रिए, अपनी पावर खपत साथ रख सकता है। इन्हें एक बार टाइप पर डाल दीजिए और उससे बनाया गया हर डिवाइस इन्हें विरासत में पाएगा। इन्हें छोड़ दीजिए और NetBox खुशी-खुशी आपको बताएगा कि कैबिनेट 28.6% भरी है, और कुछ नहीं।\nमैंने यहाँ सभी पाँच टाइप पर वज़न डाला, हर एक को maximum और allocated खपत वाले दो power port टेम्पलेट दिए, PDU टाइप को एक inlet और बारह outlets दिए, फिर एक power panel और कैबिनेट में दो feeds बनाए और सब कुछ केबल से जोड़ा: हर डिवाइस का PSU1 PDU A से, हर PSU2 PDU B से, और हर PDU का inlet उसके feed से।\nफिर रैक पेज पूरी तरह बदल जाता है।\nजगह का इस्तेमाल 28.6%। पावर का इस्तेमाल 90.7%।\nवह कैबिनेट किट से एक तिहाई भरी है और पावर लगभग खत्म, और यह आपकी एस्टेट के बारे में ऐसा तथ्य है जो कोई स्प्रेडशीट कभी खुद नहीं बताएगी। यही तथ्य तय करता है कि अगला ऑर्डर वहाँ रैक होगा या कहीं और, और यह उस डेटा से निकला जो आपने एक बार, टाइप्स पर डाला।\nदो चीज़ें जो इसे शून्य दिखाती रहेंगी शुरू में मुझे 0.0% मिला, दो बार, और दोनों वजहें जानने लायक हैं क्योंकि दोनों में से कोई एरर नहीं देती।\nOutlets को inlet का हवाला देना होगा। PDU पर एक power outlet में power_port फ़ील्ड होता है जो उसी डिवाइस के upstream पोर्ट की ओर इशारा करता है। इसे खाली छोड़िए और चेन टूट जाती है: NetBox के पास यह जानने का कोई तरीका नहीं कि वे बारह outlets उस inlet से फ़ीड होते हैं, तो कुछ भी जुड़ता नहीं।\nInlet के draw फ़ील्ड्स खाली छोड़िए। यह उल्टा लगने वाला है। NetBox किसी power port की खपत उसमें लगी चीज़ों से तभी गिनता है जब उसके अपने दोनों draw फ़ील्ड खाली हों:\nif self.allocated_draw is None and self.maximum_draw is None: ...aggregate the downstream power ports... # otherwise return {\u0026#39;allocated\u0026#39;: self.allocated_draw or 0, ...} मैंने मददगार बनकर PDU inlet पर maximum_draw: 7400 सेट कर दिया था, क्योंकि PDU की रेटिंग यही है। इसलिए NetBox ने मेरी बात मानी, allocated_draw को unset माना, और शून्य दिखाया। दोनों साफ़ कीजिए और वह खुद गिन लेता है:\nmcr1-pdu-a INPUT -\u0026gt; allocated 5340 VA, maximum 8480 VA, across 12 outlets mcr1-pdu-b INPUT -\u0026gt; allocated 5340 VA, maximum 8480 VA, across 12 outlets feed MCR1-A07-A: available 5888 VA (230 V x 32 A x 80% max utilisation) RACK power utilisation: 90.7 % RACK weight: 166.6 kg of 900 kg तो नियम यह है: पत्तियों पर असली नंबर डालिए, और बीच के पोर्ट्स खाली छोड़िए ताकि NetBox उन्हें जोड़ सके। एडमिन द्वारा परिभाषित वैल्यू हमेशा गिनी गई वैल्यू पर भारी पड़ती है, जो सही व्यवहार है और PDU पर करने के लिए ठीक गलत चीज़।\nकूलिंग, जो नई है वर्शन 4.7 ने DCIM में कूलिंग जोड़ी, और यह उस आधे हिस्से के साथ आई जो महँगा होता जा रहा है। एक रैक air, hybrid या liquid की cooling capability और किलोवाट में क्षमता रखता है; एक device type cooling method रखता है। इनके ऊपर chillers और CRAC यूनिट्स के लिए cooling sources हैं, किसी रैक तक जाने वाले loop को दिखाने वाले cooling feeds हैं, और cold plates और manifolds के लिए खुद डिवाइसों पर intake और outflow कंपोनेंट्स हैं।\nऊपर की कैबिनेट Hybrid, 15.00 kW दिखाती है, क्योंकि मैंने रैक को यही बताया। अगर इस साल आप liquid cooled किट की डिलीवरी ले रहे हैं, तो यह उस चीज़ का मॉडल है जिसे आप अभी स्प्रेडशीट में रख रहे हैं।\nएक इंस्टॉल, कई कस्टमर Tenancy ही वह वजह है कि एक प्रोवाइडर हर कस्टमर के लिए एक के बजाय एक ही NetBox चला सकता है, और यह समझना फ़ायदेमंद है कि यह क्या करती है और, उससे भी ज़रूरी, क्या नहीं करती।\nNetBox के अट्ठाईस मॉडलों में tenant फ़ील्ड है। Sites, locations, racks और rack reservations। Devices, cables और virtual device contexts। Prefixes, IP addresses, ranges, aggregates, VLANs, VLAN groups, VRFs, route targets, ASNs। Circuits और circuit groups। Clusters और virtual machines। Tunnels, L2VPNs, wireless LANs और links। Power feeds और cooling feeds।\nयह हर वह संज्ञा है जिसका बिल बनता है। इसे लगातार सेट कीजिए और “इस कस्टमर के पास क्या है” एक जाँच-पड़ताल नहीं रह जाता।\nलेकिन tenant एक लेबल है, ताला नहीं। यह कहता है कि ऑब्जेक्ट उस कस्टमर के लिए समर्पित है। यह किसी भी लॉग इन कर सकने वाले को सब कुछ पढ़ने से नहीं रोकता, जो एक कंपनी के अंदर ठीक है और उसी पल बेकार है जब किसी कस्टमर का अकाउंट हो।\nइससे दो बातें निकलती हैं, और दूसरी वह है जिसे लोग गलत करते हैं।\nTenant का मतलब है समर्पित। जो राउटर सिर्फ़ एक कस्टमर को सर्व करता है उसे उनका tenant मिलता है। जो फ़ायरवॉल उनमें से चार को सर्व करता है वह उनमें से किसी का नहीं, तो उसे कुछ नहीं मिलता, और आप रिश्ता उस चीज़ पर रिकॉर्ड करते हैं जो आपने असल में बेची। साझा किट पर ज़बरदस्ती tenant लगाने से tenancy पर बनी हर रिपोर्ट चुपचाप गलत हो जाती है।\nऔर एक्सेस पूरी तरह अलग तंत्र है।\nअलगाव permissions में रहता है NetBox की object permissions एक JSON constraint लेती हैं, और वह constraint एक Django ORM फ़िल्टर है। यह किसी भी चीज़ के बनने से पहले queryset को छोटा कर देता है, तो हर view, export, API कॉल और search उसके साथ छोटा हो जाता है।\nतीन फ़ील्ड काम करते हैं। वे object types जिन पर यह लागू होती है, वे actions जो यह देती है, और नीचे वह constraint। बाकी सब हिसाब-किताब है।\nयह रही डिवाइस सूची एडमिनिस्ट्रेटर के रूप में।\nऔर यह वही URL है, वही इंस्टॉल, कस्टमर के रूप में साइन इन करके।\nचौदह की जगह दो rows, और बाईं ओर का मेन्यू देखिए। वह सिमटकर उन चार चीज़ों तक रह गया है जिन्हें छूने की उस अकाउंट को अनुमति है। किसी ने इसे कॉन्फ़िगर नहीं किया। नेविगेशन उन्हीं permissions से बनता है, तो कस्टमर को कभी ऐसी किसी चीज़ का लिंक नहीं दिखता जो उसे मना कर दे।\nयह मना करने के दो तरीके यह बारीकी जानने लायक है, क्योंकि दोनों इनकार अलग-अलग बातें कहते हैं और दोनों जानबूझकर हैं।\nकस्टमर का token माँगता है उसे मिलता है /api/dcim/devices/ 200, दो में से एक row /api/dcim/devices/1/, उनका अपना 200 /api/dcim/devices/2/, किसी और का 404 /api/tenancy/tenants/ 403 /api/dcim/sites/, कभी दिया ही नहीं गया 403 कोई token नहीं 403 404 का मतलब है टाइप आपका है पर वह row नहीं। Constraint ने उसे queryset से हटा दिया, तो जहाँ तक रिक्वेस्ट की बात है, वह मौजूद ही नहीं। वहाँ 403 यह पक्का कर देता कि वह मौजूद है, और एक जिज्ञासु कस्टमर IDs पर चलकर आपकी एस्टेट गिन लेता।\n403 का मतलब है टाइप कभी आपका था ही नहीं। Tenants और sites कभी दिए ही नहीं गए, तो वे सीधे मना कर देते हैं, और कस्टमर यह गिन नहीं सकता कि प्लेटफ़ॉर्म पर और कौन है।\nफिर उन्हें लिखने दीजिए Read-only आसान मामला है। असली सवाल यह है कि क्या एडिट अधिकार वाले कस्टमर पर उनके लिए भरोसा किया जा सकता है, तो मैंने उसी constraint के तहत change दिया और बाहर निकलने का रास्ता ढूँढने लगा।\nकोशिश नतीजा अपना डिवाइस एडिट करना 200, सेव हुआ दूसरे कस्टमर का डिवाइस एडिट करना 404 अपना डिवाइस एडिट करके उसे दूसरे कस्टमर के tenant में ले जाना 403 अपना डिवाइस डिलीट करना 403, delete कभी दिया ही नहीं गया तीसरी row ही असली है। अपना डिवाइस किसी और के tenant को दे देना निकलने का सबसे सीधा रास्ता है, क्योंकि रिक्वेस्ट आने के समय ऑब्जेक्ट आपकी constraint के अंदर होता है और बाद में बाहर। NetBox constraint को उस स्थिति पर जाँचता है जिसमें ऑब्जेक्ट छोड़ा जाएगा, इसलिए वह मना कर देता है। मैंने status code पर भरोसा करने के बजाय डिवाइस वापस पढ़ा, और tenant हिला नहीं था।\nघर में बनी ज़्यादातर multi-tenancy यही छेद खुला छोड़ देती है, और इसे आम तौर पर कोई टेस्ट नहीं, कोई कस्टमर ढूँढता है।\nऐसे वेरिएबल जिन्हें विरासत में मिलना चाहिए यह रहा वह फ़र्क जिसे लोग गलत समझते हैं, और इसे सही करने से बहुत सारी एडिटिंग बचती है।\nएक custom field किसी एक ऑब्जेक्ट पर एक वैल्यू है। आप इसे हर ऑब्जेक्ट पर सेट करते हैं, और यह वहीं रहती है। खुद उस चीज़ के बारे में किसी तथ्य के लिए अच्छा: asset tag, सपोर्ट कॉन्ट्रैक्ट नंबर, कमीशनिंग की तारीख।\nएक config context किसी विशेषता से जुड़ी वैल्यू है, जिसे उस विशेषता से मेल खाने वाली हर चीज़ विरासत में पाती है। ऐसे वेरिएबल के लिए अच्छा जो नीचे बहना चाहिए: आपके NTP सर्वर, आपके syslog टारगेट, आपकी SNMP community, आपका DNS डोमेन, आपका मैनेजमेंट VLAN, आपकी बैकअप विंडो।\nअगर आप पाते हैं कि आप चालीस डिवाइसों पर एक ही custom field को एक ही वैल्यू पर सेट कर रहे हैं, तो आपको config context चाहिए था।\nContext कोई भी JSON हो सकता है, और इसे region, site group, site, location, device type, role, platform, cluster, cluster type, cluster group, tenant group, tenant या tag से जोड़ा जा सकता है। उस सूची में tenant है, जिसका प्रोवाइडर के लिए मतलब है कि किसी एक कस्टमर के बारे में हर जगह सच तथ्य उनके लिए जोड़े गए हर डिवाइस पर उनके पीछे-पीछे जाता है।\nमर्ज हर key पर अलग होता है, और weight तय करता है कि हर key पर कौन जीतेगा।\nदाएँ पैनल को बाएँ के सामने पढ़िए। Region weight 1000 पर चार keys देता है। Site weight 2000 पर एक key देती है। Rendered context region का domain, NTP सर्वर और community बिना छुए रखता है, और site का syslog सर्वर ले लेता है, क्योंकि सिर्फ़ उसी key पर किसी ने दावा किया था।\nआप अपवाद लिखते हैं, अपवाद समेत हर चीज़ की नई कॉपी नहीं। पूरी कीमत यही है, और इसीलिए यह वहाँ स्केल करता है जहाँ हर डिवाइस की वेरिएबल फ़ाइल नहीं करती।\nLocal context अपने ऊपर की हर चीज़ पर भारी है विरासत के ढेर का एक शिखर है, और वह खुद ऑब्जेक्ट है। किसी डिवाइस पर local context data उस पर लागू हर source context पर भारी पड़ता है, उनके weight चाहे जो हों।\nमैंने इसे mcr1-core-01 पर सेट किया:\n{\u0026#34;syslog_servers\u0026#34;: [\u0026#34;10.20.10.99\u0026#34;], \u0026#34;note\u0026#34;: \u0026#34;this box logs somewhere else\u0026#34;} और उसका rendered context यह बन गया:\n{ \u0026#34;note\u0026#34;: \u0026#34;this box logs somewhere else\u0026#34;, \u0026#34;domain\u0026#34;: \u0026#34;mcr1.example.net\u0026#34;, \u0026#34;ntp_servers\u0026#34;: [\u0026#34;172.16.10.22\u0026#34;, \u0026#34;172.16.10.33\u0026#34;], \u0026#34;snmp_community\u0026#34;: \u0026#34;n0rthwest\u0026#34;, \u0026#34;syslog_servers\u0026#34;: [\u0026#34;10.20.10.99\u0026#34;] } Local syslog सर्वर ने weight 2000 वाले site override और weight 1000 वाले region, दोनों को हरा दिया। जिस चीज़ के बारे में इसने कुछ नहीं कहा वह सब अब भी विरासत में आया, तो domain, NTP सर्वर और community बिना छुए आए, और नई key बस जुड़ गई।\nयह उस एक बॉक्स के लिए आपातकालीन रास्ता है जो सच में अलग है, और पैनल साफ़ बताता है कि यह सभी source contexts को overwrite करता है। अगर आप पाते हैं कि आप इसे एक के बजाय कई डिवाइसों पर इस्तेमाल कर रहे हैं, तो आपने एक ऐसी विशेषता ढूँढ ली है जो उन डिवाइसों में साझा है और आपको उस पर scoped एक context चाहिए था।\nतीन जाल बिना scope वाला context global होता है। एक बनाइए और उसे किसी चीज़ को असाइन करना भूल जाइए, और वह आपके हर डिवाइस और वर्चुअल मशीन पर लागू हो जाता है। यह डॉक्यूमेंटेड व्यवहार है और कभी-कभी आप यही चाहते हैं। यह चुपचाप भी होता है।\nअगर आप keys तक आसानी से पहुँचना चाहते हैं तो उनमें hyphen नहीं हो सकते। Context data JSON है, तो ntp-servers बिल्कुल वैध है, लेकिन Jinja वेरिएबल नाम JSON keys नहीं हैं। {{ ntp-servers }} घटाव की तरह पार्स होता है और UndefinedError: 'ntp' is undefined देता है। hyphen वाले डेटा पर {{ ntp_servers }} लिखिए और आपको एक खाली स्ट्रिंग मिलती है, HTTP 200, और कहीं कोई चेतावनी नहीं। Keys में underscore इस्तेमाल कीजिए और सीधा-सादा टेम्पलेट काम करता है।\nएक profile टाइपो रोक सकता है। Config context profile संबंधित contexts को एक साथ रखता है और सेव के समय उनके डेटा पर एक JSON schema लागू करता है। मैंने एक को ऐसा schema दिया जिसमें syslog_servers का IPv4 स्ट्रिंग्स का array होना ज़रूरी था, फिर वे दो गलतियाँ कीं जो लोग असल में करते हैं:\n{\u0026#34;syslog-server\u0026#34;: [\u0026#34;10.1.1.1\u0026#34;]} singular, by accident 400 Data does not conform to profile schema: \u0026#39;syslog-servers\u0026#39; is a required property {\u0026#34;syslog_servers\u0026#34;: [...], \u0026#34;syslog_port\u0026#34;: 99999} 400 Data does not conform to profile schema: 99999 is greater than the maximum of 65535 वहीं ठुकराई गईं जहाँ किसी ने उन्हें किया, चार सौ डिवाइस बाद नहीं।\nकॉन्फ़िगरेशन रेंडर करना Context data और एक Jinja टेम्पलेट मिलकर आपको एक कॉन्फ़िगरेशन फ़ाइल देते हैं। डिवाइस device के रूप में scope में है, उसका मर्ज किया गया context आम वेरिएबल्स के रूप में scope में है, और आप उसके कंपोनेंट्स पर चल सकते हैं।\nउस पेज पर हर चीज़ अलग-अलग जगह से आई, और यही असली बात है:\nलाइन कहाँ से आई host-name mcr1-core-01 डिवाइस से domain-name mcr1.example.net रीजन के config context से location \u0026quot;Manchester DC1 / MCR1-A07 / U39\u0026quot; साइट, रैक और उसमें पोज़िशन से server 172.16.10.22 रीजन के context से, weight 1000 host 10.20.10.99 any notice डिवाइस के अपने local context से, जो साइट और रीजन दोनों पर भारी पड़ा family inet address 10.20.10.11/24 उस इंटरफ़ेस के एड्रेस से, मास्क वैसा ही जैसा टाइप किया गया टेम्पलेट पहले डिवाइस, फिर role, फिर platform से तय होता है, और अगर तीनों में से किसी के पास नहीं है तो रिक्वेस्ट फ़ेल हो जाती है। तो आप एक बार किसी platform को टेम्पलेट असाइन करते हैं, और उस सॉफ़्टवेयर पर चलने वाला हर डिवाइस उसी से रेंडर होता है, जब तक उसका role या खुद डिवाइस कुछ और न कहे। Platform इसी के लिए है: ऑपरेटिंग सिस्टम या वेंडर सॉफ़्टवेयर फ़ैमिली, हार्डवेयर नहीं।\nNetBox रेंडर करता है। पुश नहीं करता। आउटपुट को बॉक्स तक पहुँचाना आपके ऑटोमेशन का काम है, और जिस दिन टेम्पलेट का कोई बग वरना चार सौ डिवाइस दोबारा कॉन्फ़िगर कर देता, उस दिन आप खुश होंगे कि ये दो अलग सिस्टम हैं।\nप्लगइन प्लगइन NetBox के साथ इंस्टॉल किया गया एक Django एप्लिकेशन है। यह मॉडल जोड़ सकता है, पेज जोड़ सकता है, दोनों APIs बढ़ा सकता है, मौजूदा टेम्पलेट्स में कंटेंट डाल सकता है, नेविगेशन जोड़ सकता है, बैकग्राउंड जॉब क्यू जोड़ सकता है और आगे के Django apps लोड कर सकता है। ऐसा बहुत कम है जो यह नहीं कर सकता, क्योंकि नीचे से यह बस Django है।\nएक इंस्टॉल करना चार कमांड और एक रीस्टार्ट है:\nsource /opt/netbox/venv/bin/activate pip install netbox-topology-views netbox-qrcode # add the package names to PLUGINS in configuration.py, then python3 manage.py migrate python3 manage.py collectstatic --no-input sudo systemctl restart netbox netbox-rq कंटेनर स्टैक पर वही पैकेज plugin_requirements.txt में जाते हैं और आप इमेज दोबारा बनाते हैं। दोनों तरह से, वर्शन पिन कीजिए और पहले compatibility matrix देखिए, क्योंकि जो प्लगइन किसी NetBox रिलीज़ के साथ कदम नहीं मिला पाया वह खुद को बंद करने के बजाय पूरे एप्लिकेशन को शुरू होने से मना कर देगा।\nप्रकाशित कैटलॉग में 31 हैं। ये वे हैं जिनके बारे में जानना फ़ायदेमंद है, उस लाइसेंस के साथ जिसके तहत हर एक असल में आता है:\nप्लगइन क्या करता है लाइसेंस DNS source of truth के रूप में zones, records और name servers MIT BGP Sessions, communities और routing policies Apache 2.0 Topology Views आपकी केबलों से बने ग्राफ़िकल topology मैप Apache 2.0 Floorplan ग्राफ़िकल site और location मैप LGPL 3.0 QR Code asset लेबल के लिए racks, devices और cables पर कोड Apache 2.0 ACLs Access lists और rules Apache 2.0 Prometheus SD Prometheus को उसकी होस्ट सूची सीधे NetBox से देता है MIT Documents circuits और devices से जुड़े डॉक्यूमेंट Apache 2.0 Lifecycle हार्डवेयर end of life, लाइसेंस और कॉन्ट्रैक्ट Apache 2.0 Contract कॉन्ट्रैक्ट और इनवॉइस MIT Reorder Rack रैक यूनिट्स को drag and drop करना Apache 2.0 Branching आपके डेटा की अलग-थलग, मर्ज की जा सकने वाली branches NetBox Limited Use Custom Objects UI में परिभाषित नए object types NetBox Limited Use Prometheus SD पूरे विचार का ईमानदार रूप है। NetBox जानता है कि क्या मौजूद है, तो NetBox को ही मॉनिटरिंग सिस्टम को बताने दीजिए, और होस्ट्स की एक दूसरी सूची मेंटेन करना बंद कीजिए जो भटकती रहती है।\nआखिरी दो rows पर कुछ बनाने से पहले एक बात जान लीजिए। NetBox खुद Apache 2.0 है और 2016 में DigitalOcean के रिलीज़ करने के बाद से है, और आज इस प्रोजेक्ट की देखरेख NetBox Labs वॉलंटियर मेंटेनरों की एक टीम के साथ करती है।21 NetBox Branching और NetBox Custom Objects ऐसे नहीं हैं: ये NetBox Limited Use License 1.0 के तहत आते हैं, जो इस्तेमाल की अनुमति देता है “only as part of a NetBox installation obtained from NetBox Labs or a NetBox distributor authorized by NetBox Labs, and only for your own internal use”, और जो सॉफ़्टवेयर इस्तेमाल करने का अधिकार नहीं देता “to provide a managed service or software products that includes, integrates with, or extends NetBox in a way that competes with any product or service of NetBox Labs”। अगर आपने NetBox Community GitHub से इंस्टॉल किया है और इसे कस्टमरों की ओर से चलाते हैं, तो उनके पीछे कोई schema लगाने से पहले शर्तें खुद पढ़िए।10 NetBox की अपनी इंस्टॉलेशन गाइड इसका ज़िक्र किए बिना दोनों प्लगइन की सिफ़ारिश करती है।11\nCustom Fields Custom field किसी मौजूदा मॉडल में एक attribute जोड़ता है। वैल्यू हर ऑब्जेक्ट के साथ JSON के रूप में स्टोर होती हैं, तो कोई migration नहीं और कोई रीस्टार्ट नहीं, और तेरह टाइप हैं जिनमें दूसरे NetBox रिकॉर्ड्स के object और multi-object references भी शामिल हैं।\nवहाँ दो फ़ील्ड हैं, मेरे चुने हुए “Asset” हेडिंग के नीचे। उनके दाईं ओर Dimensions पैनल देखिए: 9.5 kg, जो इस डिवाइस पर किसी ने टाइप नहीं किया। यह device type से आया।\nCustom fields वैलिडेट होते हैं, और यह जानना फ़ायदेमंद है, क्योंकि नीचे वाले रास्ते से यह एक असली फ़र्क है। मैंने कॉन्ट्रैक्ट फ़ील्ड को एक regular expression दिया और API ने उसे लागू किया:\nPATCH {\u0026#34;custom_fields\u0026#34;: {\u0026#34;support_contract\u0026#34;: \u0026#34;nonsense\u0026#34;}} {\u0026#34;__all__\u0026#34;: [\u0026#34;Invalid value for custom field \u0026#39;support_contract\u0026#39;: Value must match regex \u0026#39;^[A-Z]{2,4}-[0-9]{6}$\u0026#39;\u0026#34;]} 4.7 में दो चीज़ें बदलीं जो बड़े पैमाने पर मायने रखती हैं। डिफ़ॉल्ट वैल्यू वाला फ़ील्ड बनाना, या कोई फ़ील्ड डिलीट करना, हर उस ऑब्जेक्ट का स्टोर किया डेटा दोबारा लिखता है जिस पर वह लागू होता है, तो बड़ी टेबल पर वह काम एक बैकग्राउंड जॉब को सौंपा जाता है और चलते समय फ़ील्ड “provisioning” या “deleting” दिखाता है। फ़ील्ड सिर्फ़ active रहते हुए ही लाइव होता है: इन दोनों में से किसी भी ऑपरेशन के दौरान वह ऑब्जेक्ट्स पर, फ़ॉर्म्स में, फ़िल्टर्स में या किसी भी API में नहीं दिखता। इसके लिए एक वर्कर का चलना ज़रूरी है, वरना यह उसी हालत में अनिश्चित काल तक पड़ा रहता है।\nजब आप खुद उस चीज़ के बारे में कोई तथ्य जोड़ रहे हों तो custom field इस्तेमाल कीजिए। जब वैल्यू नीचे बहनी चाहिए तो config context। जब जिस चीज़ की आपको ज़रूरत है वह मौजूद ही न हो, तो अगला सेक्शन।\nCustom Select मेन्यू, और जो साथ आता है उसे बदलना इस हेडिंग के नीचे दो अलग तंत्र हैं और वे अलग समस्याएँ हल करते हैं। एक आपके अपने फ़ील्ड्स के लिए है। दूसरा NetBox के फ़ील्ड्स को दोबारा लिखता है।\nChoice set, आपके अपने select फ़ील्ड के लिए “selection” टाइप का custom field अपने विकल्प एक choice set से लेता है, जो एक ऑब्जेक्ट है जिसे आप UI में किसी भी दूसरी चीज़ की तरह मैनेज करते हैं। तो “support tier” एक असली dropdown बन जाता है, न कि फ़्री टेक्स्ट जिसे कोई तीन तरह से लिखेगा।\nयह लागू होता है, API के ज़रिए भी:\nPATCH {\u0026#34;custom_fields\u0026#34;: {\u0026#34;support_tier\u0026#34;: \u0026#34;platinum\u0026#34;}} {\u0026#34;__all__\u0026#34;: [\u0026#34;Invalid value for custom field \u0026#39;support_tier\u0026#39;: Invalid choice (platinum) for choice set Support tier.\u0026#34;]} Choice sets साझा होते हैं, तो एक सेट कई मॉडलों पर एक ही फ़ील्ड को चला सकता है, और एक जगह सूची बदलने से वह हर जगह बदल जाती है।\nFIELD_CHOICES, NetBox के अपने फ़ील्ड्स के लिए यह वह है जिसके होने का लोगों को पता ही नहीं। NetBox के कई built-in choice फ़ील्ड्स को configuration.py से बढ़ाया या बदला जा सकता है, जिनमें device status, site status, rack status, circuit status और बहुत कुछ शामिल है।12\nजो साथ आता है उसमें जोड़ने के लिए आखिर में plus का निशान लगाइए। सूची पूरी तरह बदलने के लिए उसे छोड़ दीजिए।\nFIELD_CHOICES = { # add to what NetBox ships with \u0026#39;dcim.Device.status+\u0026#39;: ( (\u0026#39;burn-in\u0026#39;, \u0026#39;Burn-in\u0026#39;, \u0026#39;cyan\u0026#39;), {\u0026#39;value\u0026#39;: \u0026#39;awaiting-rma\u0026#39;, \u0026#39;label\u0026#39;: \u0026#39;Awaiting RMA\u0026#39;, \u0026#39;color\u0026#39;: \u0026#39;orange\u0026#39;, \u0026#39;description\u0026#39;: \u0026#39;Faulty, with the vendor\u0026#39;}, ), # replace the stock list outright \u0026#39;dcim.Site.status\u0026#39;: ( (\u0026#39;surveyed\u0026#39;, \u0026#39;Surveyed\u0026#39;, \u0026#39;purple\u0026#39;), (\u0026#39;building\u0026#39;, \u0026#39;Building out\u0026#39;, \u0026#39;orange\u0026#39;), (\u0026#39;active\u0026#39;, \u0026#39;Active\u0026#39;, \u0026#39;green\u0026#39;), (\u0026#39;closing\u0026#39;, \u0026#39;Closing\u0026#39;, \u0026#39;red\u0026#39;), ), } मैंने इस इंस्टेंस पर ठीक यही डाला। Device status सात स्टॉक वैल्यू और मेरी दो के साथ लौटा:\noffline, active, planned, staged, failed, inventory, decommissioning, burn-in, awaiting-rma और site status सिर्फ़ मेरी वैल्यू के साथ लौटा, स्टॉक सूची गायब:\nsurveyed, building, active, closing एक choice value, label और colour का सादा tuple हो सकता है, या एक dictionary जो एक description भी लेती है जो फ़ॉर्म में subtitle की तरह दिखता है। और ये हर जगह native वैल्यू की तरह बर्ताव करते हैं, क्योंकि जहाँ तक बाकी NetBox का सवाल है, ये native वैल्यू ही हैं:\nवह badge मेरा status है, मेरे रंग में, किसी भी दूसरे की तरह sort और filter होता हुआ।\nइसे इस्तेमाल करने से पहले तीन बातें जानने लायक हैं।\nबदलने से स्टॉक वैल्यू मेन्यू से हटती हैं, डेटाबेस से नहीं। जिस ऑब्जेक्ट के पास पहले से उनमें से कोई वैल्यू है वह उसे रखता है, लेकिन वह वैल्यू अब पेश नहीं की जाती और अगली बार कोई उस ऑब्जेक्ट को एडिट करे तो वह वैध विकल्प नहीं होगी। अगर आप कोई सूची बदलते हैं, तो जाँच लीजिए कि कोई चीज़ उस वैल्यू पर तो नहीं बैठी जिसे आपने अभी हटाया।\nयह कॉन्फ़िगरेशन फ़ाइल में रहता है, तो इसे रीस्टार्ट चाहिए और इसे कोई UI यूज़र नहीं बदल सकता। प्रोवाइडर के लिए यही सही तरीका है: आपका बिज़नेस किन स्टेटस को मानता है, यह गवर्नेंस का फ़ैसला है, किसी मंगलवार दोपहर का नहीं।\nबदलने से पहले बढ़ाइए। स्टॉक वैल्यू वही हैं जिन्हें हर प्लगइन, स्क्रिप्ट और इंटीग्रेशन देखने की उम्मीद करता है। जोड़ने में कुछ खर्च नहीं होता। बदलना एक ऐसा फ़ैसला है जो हमेशा के लिए आपका है।\nCustom Objects यह रही एक असली कमी। NetBox clusters, virtual machines और virtual disks मॉडल करता है। वह उस datastore को मॉडल नहीं करता जिस पर वे डिस्क असल में रहती हैं, और Proxmox या VMware चलाने वाले किसी के लिए भी यही वह ऑब्जेक्ट है जो आपके खरीदे स्टोरेज को उसे इस्तेमाल करने वाले वर्कलोड से जोड़ता है।\nCustom Objects प्लगइन आपको बिना कोई कोड लिखे UI या API से एक नया object type परिभाषित करने देता है। तो:\nसात फ़ील्ड, जिनमें से दो ही असली बात हैं। cluster एक असली NetBox cluster का single object reference है, protect पर सेट, ताकि कोई किसी cluster को उसके स्टोरेज के नीचे से डिलीट न कर सके। provisioned_by उन डिवाइसों का multi-object reference है जो असल में इसे सर्व करते हैं।\nइससे आपको एक पूरा-पूरा ऑब्जेक्ट मिलता है, अपनी नेविगेशन एंट्री, list view, filters, import और export के साथ:\nऔर क्योंकि references असली हैं, रिश्ता दूसरे सिरे से भी दिखता है। Cluster खोलिए और datastores उसके सामने सूचीबद्ध हैं।\nएक custom object type वह ज़्यादातर चीज़ें विरासत में पाता है जो किसी NetBox ऑब्जेक्ट को NetBox ऑब्जेक्ट बनाती हैं: list और detail views, एक नेविगेशन एंट्री, REST endpoints, full-text search, change logging, journaling, tags, bookmarks, import और export, event rules और notifications। इनमें से कुछ भी लिखना नहीं पड़ा।\nयह टेबल होने का नाटक करता कोई JSON blob भी नहीं है। प्लगइन असली DDL चलाता है, और PostgreSQL में जो दिखता है वह असली constraints वाली एक असली टेबल है:\nTable \u0026#34;public.custom_objects_2\u0026#34; Column | Type | Nullable | Default -----------------+----------+----------+------------------ id | bigint | not null | identity name | varchar | | cluster_id | bigint | | backing | varchar | | capacity_gb | bigint | | thin_provisioned| boolean | | Indexes: \u0026#34;custom_objects_2_name_key\u0026#34; UNIQUE CONSTRAINT, btree (name) Foreign-key constraints: ... FOREIGN KEY (cluster_id) REFERENCES virtualization_cluster(id) ON DELETE RESTRICT मैंने जो protect माँगा था वह ON DELETE RESTRICT बन गया, और यह काम करता है: उस cluster को डिलीट करने पर 409 लौटता है, जो बताता है कि उस पर क्या निर्भर है।\nइस पर भरोसा करने से पहले दो बातें वैलिडेशन फ़ॉर्म पर है, API पर नहीं। यही वह है जो किसी ऑटोमेशन को पकड़ लेगा। मैंने एक custom object type के फ़ील्ड्स पर required, एक regular expression और संख्या की सीमाएँ घोषित कीं, और फिर REST API से उनमें लिखा:\nमैंने क्या घोषित किया मैंने क्या भेजा नतीजा validation_regex ऐसी वैल्यू जो किसी से मेल नहीं खाती 201 Created required: true फ़ील्ड पूरी तरह छोड़ दिया 201 Created validation_minimum: 1 एक ऋणात्मक संख्या 201 Created unique: true एक डुप्लिकेट 400, ठुकराया on_delete_behavior: protect संदर्भित ऑब्जेक्ट डिलीट करना 409, ठुकराया जो दो टिके वे वही दो हैं जो डेटाबेस constraints बने। बाकी सिर्फ़ वेब फ़ॉर्म पर मौजूद हैं, तो टाइप करता इंसान बँधा है और रात की sync नहीं। इसकी तुलना ऊपर वाले core custom field से कीजिए, जहाँ वही regular expression API से लागू हुआ। जब तक यह नहीं बदलता, जिस भी चीज़ पर कोई इनवॉइस निर्भर है उसे किसी असली constraint के पीछे रखिए।\nटाइप डिलीट करने से एक टेबल ड्रॉप होती है। फ़ील्ड डिलीट करने से एक कॉलम ड्रॉप होता है। यह वेब फ़ॉर्म से चलने वाला DDL है, जिसे वह चलाता है जिसके पास permission है, और डॉक्यूमेंटेशन भी यही कहता है।13 इन्हें कौन डिलीट कर सकता है, इसे सीमित रखिए।\nकब इसके बजाय असली प्लगइन लिखें अगर ऑब्जेक्ट मायने रखता है, अगर ऑटोमेशन उसमें लिखता है, और अगर उसमें कचरा मिलने पर आप परेशान होंगे, तो मॉडल खुद लिखिए। एक न्यूनतम NetBox प्लगइन एक PluginConfig, एक मॉडल, एक serializer, एक viewset, एक table, एक form, कुछ views और एक URL map है, और यह दो सौ लाइनों से कम का बनता है, ज़्यादातर घोषणाएँ। PrimaryModel को subclass करने से आपको tags, custom fields, change logging, journaling, export templates और ownership मुफ़्त में मिलते हैं, और मॉडल पर लगाई हर constraint हर जगह लागू होती है, क्योंकि NetBox की अपनी serializer मशीनरी उसे चलाती है।\nकम्युनिटी एक cookiecutter template और एक पूरा plugin tutorial मेंटेन करती है। खाली डायरेक्टरी के बजाय वहीं से शुरू कीजिए।\nऔर लाइसेंस वही होता है जो आप चुनें, जिसे बाद में कोई नहीं बदल सकता।\nCustom Validation, और Validation क्लासें ऊपर सब कुछ यह रिकॉर्ड करने के बारे में है कि वहाँ क्या है। यह उस चीज़ को रिकॉर्ड करने से मना करने के बारे में है जो नहीं होनी चाहिए।\nNetBox हर ऑब्जेक्ट को लिखने से पहले वैलिडेट करता है, और आप उसके ऊपर अपने नियम जोड़ सकते हैं। तीन तंत्र हैं, तीनों configuration.py में रहते हैं, और मिलकर वे लगभग वह सब कवर करते हैं जो किसी हाउस स्टैंडर्ड को चाहिए।\nएक: सादे नियम, कोई कोड नहीं Validator फ़ील्ड नामों से शर्तों की एक सादी mapping हो सकता है। कोई Python नहीं, और यह इंस्टॉलों के बीच ले जाया जा सकता है क्योंकि यह बस डेटा है।\nCUSTOM_VALIDATORS = { \u0026#39;dcim.site\u0026#39;: ( {\u0026#39;description\u0026#39;: {\u0026#39;required\u0026#39;: True}}, ), \u0026#39;dcim.device\u0026#39;: ( {\u0026#39;name\u0026#39;: {\u0026#39;regex\u0026#39;: r\u0026#39;^[a-z0-9]+-[a-z]+-([0-9]{2}|[a-z])$\u0026#39;}}, ), } उपलब्ध शर्तें हैं min, max, min_length, max_length, regex, required, prohibited, eq और neq। आप dotted path से किसी संबंधित ऑब्जेक्ट तक पहुँच सकते हैं, तो site पर region.name पूरी तरह जायज़ है, और आप request.user.username पर भी मैच कर सकते हैं, हालाँकि डॉक्यूमेंटेशन बिल्कुल सही कहता है कि इसके लिए permissions इस्तेमाल कीजिए।\nदोनों नियम तुरंत चलते हैं:\nPOST a site with no description {\u0026#34;__all__\u0026#34;: [\u0026#34;Custom validation failed for description: [\u0026#39;This field must not be empty.\u0026#39;]\u0026#34;]} POST a device named \u0026#34;Server1\u0026#34; {\u0026#34;__all__\u0026#34;: [\u0026#34;Custom validation failed for name: [\u0026#39;Enter a valid value.\u0026#39;]\u0026#34;]} वह दूसरा एक नामकरण स्टैंडर्ड है, लागू किया हुआ। किसी विकी पेज पर लिखा नहीं, किसी के दिमाग में नहीं, ऐसी चीज़ नहीं जिसके लिए नए आए इंसान को तीन हफ़्ते बाद किसी रिव्यू में डाँट पड़े। डेटाबेस इसे लेगा ही नहीं।\nदो: validator क्लास, जब नियम एक वाक्य हो सादे नियम एक फ़ील्ड को एक स्थिरांक से जाँचते हैं। असली हाउस नियम आम तौर पर शर्तों वाले होते हैं: यह तभी मायने रखता है जब वह। इनके लिए आप CustomValidator को subclass करते हैं, validate() को override करते हैं, और fail() कॉल करते हैं।\nमैंने तीन /opt/netbox/netbox/house_rules.py पर एक मॉड्यूल में रखे:\nfrom extras.validators import CustomValidator class BillableKitNamesItsCustomer(CustomValidator): \u0026#34;\u0026#34;\u0026#34;Anything in a role we sell has to say whose it is.\u0026#34;\u0026#34;\u0026#34; BILLABLE_ROLES = {\u0026#39;hypervisor\u0026#39;} def validate(self, instance, request): role = getattr(instance, \u0026#39;role\u0026#39;, None) if role and role.slug in self.BILLABLE_ROLES and not instance.tenant: self.fail( f\u0026#34;A {role} is billable kit, so it must name the customer it belongs to.\u0026#34;, field=\u0026#39;tenant\u0026#39;, ) class RackedDeviceNeedsAPosition(CustomValidator): \u0026#34;\u0026#34;\u0026#34;A device in a rack with no rack unit is a device nobody can find.\u0026#34;\u0026#34;\u0026#34; def validate(self, instance, request): if instance.rack and instance.position is None: if instance.device_type and instance.device_type.u_height: self.fail( \u0026#34;A device in a rack needs a rack unit. Somebody has to find it.\u0026#34;, field=\u0026#39;position\u0026#39;, ) class CustomerPrefixNeedsATenant(CustomValidator): \u0026#34;\u0026#34;\u0026#34;A customer prefix that names no customer cannot be billed.\u0026#34;\u0026#34;\u0026#34; def validate(self, instance, request): role = getattr(instance, \u0026#39;role\u0026#39;, None) if role and role.slug == \u0026#39;customer\u0026#39; and not instance.tenant: self.fail( \u0026#34;A customer prefix must be assigned to a tenant.\u0026#34;, field=\u0026#39;tenant\u0026#39;, ) और उन्हें dotted path से जोड़ा:\nCUSTOM_VALIDATORS = { \u0026#39;dcim.device\u0026#39;: ( {\u0026#39;name\u0026#39;: {\u0026#39;regex\u0026#39;: r\u0026#39;^[a-z0-9]+-[a-z]+-([0-9]{2}|[a-z])$\u0026#39;}}, \u0026#39;house_rules.BillableKitNamesItsCustomer\u0026#39;, \u0026#39;house_rules.RackedDeviceNeedsAPosition\u0026#39;, ), \u0026#39;ipam.prefix\u0026#39;: ( \u0026#39;house_rules.CustomerPrefixNeedsATenant\u0026#39;, ), } ध्यान दीजिए कि एक मॉडल validators का एक tuple लेता है, सादे नियम और क्लासें आपस में मिली हुई, और सब चलते हैं। एक अकेला validator भी iterable के रूप में ही देना पड़ता है, जिसमें पाँच मिनट आसानी से बर्बाद हो जाते हैं।\nफिर नियम वही करते हैं जो वे कहते हैं:\nPOST a hypervisor with no tenant {\u0026#34;tenant\u0026#34;: [\u0026#34;A Hypervisor is billable kit, so it must name the customer it belongs to.\u0026#34;]} POST a device into a rack with no position {\u0026#34;position\u0026#34;: [\u0026#34;A device in a rack needs a rack unit. Somebody has to find it.\u0026#34;]} POST a prefix with role \u0026#34;customer\u0026#34; and no tenant {\u0026#34;tenant\u0026#34;: [\u0026#34;A customer prefix must be assigned to a tenant.\u0026#34;]} POST a leaf switch with no tenant accepted, because a leaf switch is not in BILLABLE_ROLES क्योंकि fail() एक field लेता है, मैसेज पेज के ऊपर नहीं बल्कि फ़ॉर्म में सही बॉक्स पर आता है, और यही फ़र्क है उस नियम में जिसे लोग सीख लेते हैं और उस नियम में जिससे लोग चिढ़ते हैं।\ncustom objects वाले सेक्शन की कमी का जवाब भी यही है। वहाँ का वैलिडेशन सिर्फ़ वेब फ़ॉर्म पर था। CustomValidator मॉडल लेयर में चलता है, तो यह UI, REST API, GraphQL mutations, bulk imports और किसी भी स्क्रिप्ट के काम पर लागू होता है। नियम लिखने की एक जगह है और उसके इर्द-गिर्द कोई रास्ता नहीं।\nतीन: protection rules, डिलीट के लिए CUSTOM_VALIDATORS लिखने की रखवाली करता है। PROTECTION_RULES डिलीट की रखवाली करता है, और यह ठीक वही दो रूप लेता है।\nPROTECTION_RULES = { \u0026#39;dcim.device\u0026#39;: ( {\u0026#39;status\u0026#39;: {\u0026#39;eq\u0026#39;: \u0026#39;offline\u0026#39;}}, ), } यह कहता है कि कोई डिवाइस तभी डिलीट हो सकता है जब वह offline हो। जिसका नतीजा:\nDELETE an active device {\u0026#34;detail\u0026#34;: \u0026#34;Deletion is prevented by a protection rule: [\\\u0026#34;Custom validation failed for status: [\u0026#39;Ensure this value is equal to offline.\u0026#39;]\\\u0026#34;]\u0026#34;} set it to offline, then DELETE 204 No Content किसी इंसान और एक लाइव डिवाइस के बीच दो कीस्ट्रोक की रुकावट, और यह पूरे एप्लिकेशन का सबसे सस्ता बीमा है। Decommissioning प्रोसेस को ही वह चीज़ बनाइए जो delete बटन खोलती है।\nवह जो आपको पकड़ लेगा मौजूदा डेटा तब तक जाँचा नहीं जाता जब तक आप उसे अगली बार छूते नहीं। नियम जोड़ने से पहले से मौजूद चीज़ें वापस जाकर वैलिडेट नहीं होतीं। यह चुपचाप बैठा रहता है जब तक कोई ऐसा ऑब्जेक्ट सेव न करे जो इसे तोड़ता है, और फिर उन्हें एक ऐसे फ़ैसले के बारे में एरर मिलता है जिससे उनका कोई लेना-देना नहीं था।\nमैंने इसे होते देखा। mcr1-hv-06 मेरे यह सब लिखने से पहले बना था, बिना tenant वाले एक हाइपरवाइज़र के रूप में। वह बिल्कुल आराम से वहाँ पड़ा था। फिर मैंने उसका description एडिट किया:\nPATCH {\u0026#34;description\u0026#34;: \u0026#34;touching it to trigger revalidation\u0026#34;} {\u0026#34;tenant\u0026#34;: [\u0026#34;A Hypervisor is billable kit, so it must name the customer it belongs to.\u0026#34;]} एडिट का tenant से कोई लेना-देना नहीं था। नियम फिर भी चला, क्योंकि वैलिडेशन पूरे ऑब्जेक्ट पर चलता है।\nयह सही व्यवहार है और यही वह तरीका भी है जिससे एक नया नियम सपोर्ट टिकट बन जाता है। किसी नियम को चालू करने से पहले उन ऑब्जेक्ट्स के लिए query चलाइए जो उसमें फ़ेल होंगे और पहले उन्हें ठीक कीजिए। API इसे आसान बनाता है: नियम एक फ़िल्टर है, तो उस role वाले और बिना tenant वाले डिवाइस माँगिए, और आपकी सूची तैयार है।\nनियम उसके बाद चालू कीजिए। फिर वह सिर्फ़ नई गलतियाँ पकड़ता है, और वह इसी के लिए है।\nइसे Ansible से चलाना जिस source of truth को कोई नहीं पढ़ता वह सड़ जाएगा। netbox.netbox collection वह तरीका है जिससे ज़्यादातर लोग ऐसा होने से रोकते हैं, और यह दोनों दिशाओं में काम करता है: NetBox Ansible को बताता है कि क्या मौजूद है, और Ansible NetBox को बताता है कि उसने क्या बनाया।\nयह वर्शन 3.23.0 पर है, GPL-3.0 लाइसेंस के तहत, और Galaxy से 13.4 मिलियन से ज़्यादा बार डाउनलोड हुआ है। इसमें 91 मॉड्यूल और एक inventory प्लगइन है।14 नीचे सब कुछ उसी इंस्टेंस पर चलाया गया, एक ऐसे कंटेनर से जिसमें ansible-core 2.21.4, pynetbox 7.8.0 और collection के अलावा कुछ नहीं था।\nइन्वेंटरी एक query है, फ़ाइल नहीं यही वह आधा हिस्सा है जो पहली ही दोपहर में अपनी कीमत वसूल लेता है। nb_inventory आपकी Ansible इन्वेंटरी सीधे NetBox से बनाता है:\nplugin: netbox.netbox.nb_inventory api_endpoint: http://netbox:8080 token: \u0026#34;{{ lookup(\u0026#39;env\u0026#39;, \u0026#39;NETBOX_TOKEN\u0026#39;) }}\u0026#34; config_context: false group_by: - sites - device_roles - tenants - racks device_query_filters: - has_primary_ip: true इससे यह बनता है, बिना किसी के होस्ट सूची मेंटेन किए:\n@sites_manchester-dc1: @device_roles_hypervisor: |--mcr1-core-01 |--mcr1-hv-01 |--mcr1-core-02 |--mcr1-hv-02 |--mcr1-hv-01 |--mcr1-hv-03 |--mcr1-hv-02 |--mcr1-hv-04 ... |--mcr1-hv-05 @racks_MCR1-A07: @tenants_ravenscroft-legal: |--mcr1-core-01 |--mcr1-hv-01 |--mcr1-core-02 |--mcr1-hv-02 ... @tenants_padgate-foods: @device_roles_core-router: |--mcr1-hv-03 |--mcr1-core-01 |--mcr1-hv-04 |--mcr1-core-02 @tenants_hartley-components: |--mcr1-hv-05 दाएँ कॉलम को देखिए। क्योंकि डिवाइसों पर tenancy सेट है, आपको हर कस्टमर का एक ग्रुप मुफ़्त में मिलता है, तो --limit tenants_ravenscroft-legal ठीक एक कस्टमर की किट पर play चलाता है। NetBox में एक डिवाइस जोड़िए और अगले रन पर वह ग्रुप में है। एक को decommission कीजिए और वह चला गया। कोई कुछ एडिट नहीं करता।\nहर होस्ट वह सब साथ लेकर आता है जो NetBox उसके बारे में जानता है:\nansible_host \u0026#34;2001:db8:20:20::11\u0026#34; primary_ip4 \u0026#34;10.20.20.11\u0026#34; primary_ip6 \u0026#34;2001:db8:20:20::11\u0026#34; device_roles [\u0026#34;hypervisor\u0026#34;] sites [\u0026#34;manchester-dc1\u0026#34;] racks [\u0026#34;MCR1-A07\u0026#34;] tenants [\u0026#34;ravenscroft-legal\u0026#34;] device_types [\u0026#34;sys-1029u-tn10rt\u0026#34;] manufacturers [\u0026#34;supermicro\u0026#34;] status {\u0026#34;label\u0026#34;: \u0026#34;Active\u0026#34;, \u0026#34;value\u0026#34;: \u0026#34;active\u0026#34;} कुल बाईस keys, और उनमें से एक आपको चौंकाने से पहले ध्यान देने लायक है। ansible_host IPv6 एड्रेस है, क्योंकि उस डिवाइस पर primary v6 सेट है। मैंने इसे दो और डिवाइसों से जाँचा जिनके पास सिर्फ़ v4 है और वे v4 के साथ लौटे, तो नियम यह है कि जहाँ primary v6 मौजूद है वहाँ प्लगइन v6 को तरजीह देता है। जो सही है, और यह उस तरह की चीज़ भी है जिसे आप अभी पता करना पसंद करेंगे, बजाय यह सोचते हुए कि कोई play ऐसे रास्ते से क्यों जुड़ रहा है जिसके बारे में आपने सोचा ही नहीं था।\nवापस लिखना मॉड्यूल दूसरी दिशा हैं, और जो रखने लायक है वह IP allocation है, क्योंकि NetBox जानता है कि क्या खाली है और आपकी playbook नहीं जानती।\n- name: Rack the device netbox.netbox.netbox_device: netbox_url: \u0026#34;{{ nb_url }}\u0026#34; netbox_token: \u0026#34;{{ nb_token }}\u0026#34; data: name: mcr1-hv-07 device_type: SYS-1029U-TN10RT device_role: Hypervisor site: Manchester DC1 rack: MCR1-A07 position: 14 face: Front tenant: Hartley Components state: present - name: Let NetBox pick the next free address out of the customer prefix netbox.netbox.netbox_ip_address: netbox_url: \u0026#34;{{ nb_url }}\u0026#34; netbox_token: \u0026#34;{{ nb_token }}\u0026#34; data: prefix: 10.20.22.0/24 tenant: Hartley Components assigned_object: device: mcr1-hv-07 name: eno1 state: new देखिए उसमें क्या नहीं है। कोई IP एड्रेस नहीं। आप prefix का नाम देते हैं और NetBox अगला खाली एड्रेस लौटा देता है:\nTASK [Let NetBox pick the next free address out of the customer prefix] **** changed: [localhost] \u0026#34;device : mcr1-hv-07 (created)\u0026#34; \u0026#34;interface: eno1 (created)\u0026#34; \u0026#34;address : 10.20.22.1/24 (allocated)\u0026#34; और एक सेकंड बाद यह UI में मौजूद है, अभी किसी से केबल नहीं जुड़ी पर रैक किया हुआ, tenant और एड्रेस के साथ:\nउस playbook का जाल इसे एक भी लाइन बदले बिना दूसरी बार चलाइए और यह होता है:\n\u0026#34;device : mcr1-hv-07 (already correct)\u0026#34; \u0026#34;interface: eno1 (already correct)\u0026#34; \u0026#34;address : 10.20.22.2/24 (allocated)\u0026#34; डिवाइस और इंटरफ़ेस idempotent हैं। एड्रेस नहीं है, और यह बग नहीं है। state: present का मतलब है “इसे ऐसा दिखाओ”। state: new का मतलब है “मुझे एक नया दो”, हर एक बार, और इसने ठीक यही किया: दो रन के बाद एक इंटरफ़ेस पर दो एड्रेस।\nजब आप सच में कुछ नया provision कर रहे हों तब यह ठीक है, और अगर आप इसे रोज़ रात चलने वाले किसी जॉब में डाल दें तो यह चुपचाप एक prefix खा जाएगा। एक बार allocate कीजिए और नतीजा रिकॉर्ड कीजिए, या जो एड्रेस आपके पास पहले से है उसके साथ state: present इस्तेमाल कीजिए। मॉड्यूल वही कर रहा है जो आपने कहा। सवाल यह है कि क्या आपने वही कहा जो आपका मतलब था।\nबात सिर्फ़ Ansible की नहीं है Collection पर ध्यान इसलिए जाता है क्योंकि ज़्यादातर नेटवर्क टीमें पहले से Ansible पर हैं, लेकिन असली प्रोडक्ट API है और बहुत सारी चीज़ें उसे बोलती हैं।\nचीज़ यह क्या है लाइसेंस pynetbox वह Python क्लाइंट जिसे collection खुद इस्तेमाल करता है Apache 2.0 terraform-provider-netbox NetBox ऑब्जेक्ट्स को Terraform resources की तरह मैनेज करना, e-breuninger द्वारा सक्रिय रूप से मेंटेन MPL 2.0 nornir_netbox Nornir इन्वेंटरी के रूप में NetBox, उन लोगों के लिए जो YAML के बजाय Python करते हैं Apache 2.0 Prometheus SD Prometheus को उसके scrape targets NetBox से देता है MIT go-netbox एक Go क्लाइंट, हालाँकि मई 2025 के बाद से इसे छुआ नहीं गया रिपॉज़िटरी देखिए Diode discover किया गया डेटा अंदर धकेलने के लिए NetBox Labs की अपनी ingestion pipeline NetBox Limited Use जो पहले से इस तरह इंफ़्रास्ट्रक्चर मैनेज कर रहा है, उसके लिए Terraform वाली एंट्री दिलचस्प है, क्योंकि यह एक ही plan से क्लाउड resource और उसे दर्ज करने वाला NetBox रिकॉर्ड दोनों बनाने देती है, दूसरा आधा हिस्सा किसी की याददाश्त पर छोड़ने के बजाय।15\nDiode पर वही लाइसेंस है जो Branching और Custom Objects पर है, तो उस पर कुछ बनाने से पहले वही पढ़ाई लागू होती है।\nवह दोपहर असल में क्या खरीदती है ऊपर का सब कुछ मुझे एक मशीन पर एक दिन में लगा, और उस दिन का ज़्यादातर हिस्सा डेटा भरने में गया ताकि स्क्रीनों में कुछ हो। इंस्टॉल दोनों तरह से बीस मिनट का है। फ़ैसले ही असली हिस्सा हैं और वे सब पहले घंटे में हो जाते हैं: सबसे पहले tenants, डिवाइसों से पहले device types, नंबर किट पर नहीं बल्कि टाइप्स पर।\nइसके बदले आपको जो मिलता है वह डॉक्यूमेंटेशन नहीं है। यह फ़र्क कोई तब तक नहीं करता जब तक उसके पास दोनों न रहे हों: डॉक्यूमेंटेशन वह चीज़ है जिसे आप लिखते हैं और फिर मेंटेन करना बंद कर देते हैं। आपको मिलता है एक डेटाबेस जो विरोधाभास रखने से मना करता है: यह आपको एक रैक यूनिट में दो चीज़ें, या किसी दूसरी साइट की location में एक रैक, या ऐसे टाइप पर डिवाइस जो मौजूद ही नहीं, नहीं रखने देगा। इनमें से हर इनकार एक बहस है जो आप छह महीने बाद नहीं कर रहे होंगे।\nऔर यह आपको वे बातें बताएगा जो किसी ने पूछी नहीं। वह कैबिनेट किट से 28.6% भरी है और पावर से 90.7%। उसे ढूँढने कोई नहीं निकला था। वह एक बार device type पर wattage डालने से सामने आई, और यही फ़र्क है अगला ऑर्डर वहाँ रैक करने और कठिन तरीके से पता लगाने के बीच।\nईमानदार चेतावनी वही है जो हर source of truth के साथ होती है। यह उतना ही कीमती है जितना इसे सही रखने में आपका खर्च होता है, और इसका इकलौता रूप जो किसी व्यस्त तिमाही में बचता है वह है जिसमें डेटा गलत होने पर कुछ दिखाई देने लायक तरीके से टूटता है। अपनी मॉनिटरिंग, अपनी provisioning या अपने फ़ायरवॉल नियमों को इससे पढ़ने के लिए जोड़िए, और एक गलत एंट्री वह डॉक्यूमेंटेशन समस्या नहीं रह जाती जिस पर कोई कभी पहुँचेगा। वह किसी मंगलवार सुबह साढ़े नौ बजे का outage बन जाती है, जिस पर किसी का नाम होता है। यह एक कीमत जैसा लगता है। यही पूरा तंत्र है।\nइसके लिए कोई आपको धन्यवाद भी नहीं देगा। सही रिकॉर्ड इस रूप में दिखता है: वह माइग्रेशन जिसमें एक तिमाही के बजाय एक पखवाड़ा लगा, वह ऑडिट जिसमें एक दोपहर लगी, वह कस्टमर जिसे फ़ोन पर सीधा जवाब मिला। इनमें से कुछ भी किसी रिपोर्ट पर आपके नाम के आगे नहीं आता।\nफिर भी कीजिए। विकल्प है एक ऐसा बिज़नेस जो खुद का वर्णन नहीं कर सकता, और जो बिज़नेस खुद का वर्णन नहीं कर सकता वह चलाया नहीं जा रहा। उसे याद रखा जा रहा है, हर साल कम लोगों द्वारा।\nNetBox, Introduction — “Today, the open source project is stewarded by NetBox Labs and a team of volunteer maintainers”, और 2015 में DigitalOcean पर शुरुआत, जून 2016 में open source हुआ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, LICENSE.txt — Apache License 2.0, copyright DigitalOcean, LLC। शुरुआत और देखरेख the introduction से।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNautobot v1.0.0 release notes — “a divergent fork of NetBox 2.10”, 26 अप्रैल 2021 को प्रकाशित, और NetBox 2.10 के मुकाबले इसमें जो जोड़ा गया उसकी सूची।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetwork to Code, \u0026ldquo;Why Did Network to Code Fork NetBox?\u0026rdquo;, 25 फ़रवरी 2021 — SLA और long-term support का तर्क, दृष्टिकोण का अलग होना, और “the NetBox project team suggested that we should consider forking”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox Labs की स्थापना 2023 में IBM द्वारा NS1 के अधिग्रहण के बाद उससे अलग होकर हुई, सह-संस्थापक NetBox के लीड मेंटेनर Jeremy Stretch हैं, और इसने अप्रैल 2023 में $20m Series A की घोषणा की: NetBox Labs, \u0026ldquo;Let\u0026rsquo;s Go: Announcing NetBox Labs\u0026rdquo; और the Series A announcement।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox Labs, NetBox Enterprise — self-managed कमर्शियल edition, “24/7 expert assistance from the NetBox Labs team” के साथ; NetBox Cloud होस्ट किया गया विकल्प है। खास SLA शर्तें उस पेज पर प्रकाशित नहीं हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nदोनों प्रोजेक्ट के star और fork की गिनती, रिलीज़ की तारीखें और लाइसेंस 30 सितंबर 2026 को GitHub API से पढ़े गए: netbox-community/netbox और nautobot/nautobot। Nautobot की समानांतर 3.2.x और 2.4.x रिलीज़ दोनों 28 सितंबर 2026 की तारीख की हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetbox-community/netbox-docker — कम्युनिटी का कंटेनर स्टैक, Apache 2.0।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, Installation — समर्थित वर्शनों की टेबल, और बढ़ी हुई PostgreSQL और Redis न्यूनतम ज़रूरतों के लिए the v4.7 release notes। वर्शन और edition netbox/release.yaml से पढ़े गए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox Limited Use License 1.0 — netbox-custom-objects पर, और हूबहू वैसा ही netbox-branching पर। दोनों उद्धृत धाराएँ शब्दशः हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, HTTP Server installation, \u0026ldquo;What\u0026rsquo;s Next?\u0026rdquo; — “Some of the most popular plugins include” NetBox Branching, NetBox Custom Objects, NetBox DNS और NetBox BGP, लाइसेंस शर्तों के किसी ज़िक्र के बिना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNetBox, Data Validation configuration — FIELD_CHOICES, और वह plus-sign suffix जो बदलने के बजाय बढ़ाता है: “To replace the available choices, specify the app, model, and field name separated by dots \u0026hellip; To extend the available choices, append a plus sign”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetboxlabs/netbox-custom-objects documentation — “Deleting a Custom Object Type drops an entire database table and should be done with caution.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetbox.netbox on Ansible Galaxy और netbox-community/ansible_modules — वर्शन 3.23.0, GPL-3.0, 91 मॉड्यूल और साथ में nb_inventory inventory प्लगइन। डाउनलोड की गिनती 30 सितंबर 2026 को Galaxy से पढ़ी गई। दिखाया गया सब कुछ ansible-core 2.21.4 और pynetbox 7.8.0 के साथ चलाया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nलाइसेंस, गतिविधि और star की गिनती 30 सितंबर 2026 को हर प्रोजेक्ट से पढ़ी गई: pynetbox (Apache 2.0), terraform-provider-netbox (MPL 2.0, Terraform registry पर v6.0.0-rc.1), nornir_netbox (Apache 2.0), netbox-plugin-prometheus-sd (MIT), go-netbox (आखिरी push 9 मई 2025) और Diode, जिस पर Branching और Custom Objects वाला ही NetBox Limited Use License 1.0 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/netbox/what-is-netbox/","summary":"NetBox 4.7.2 की एक प्रैक्टिकल सैर, खाली डेमो पर नहीं बल्कि एक पूरी एस्टेट लोड करके। हर स्क्रीन में क्या रहता है और आप उससे क्या करते हैं: रैक एलिवेशन, केबल ट्रेस, IPAM ट्री, डुअल-स्टैक इंटरफ़ेस, और वह कैबिनेट जो किट से सिर्फ़ 28.6 प्रतिशत भरी है पर पावर से 90.7 प्रतिशत। इसे कंटेनर स्टैक के रूप में और पैकेजों से किसी होस्ट पर कैसे खड़ा करें, दोनों शुरू से आखिर तक चलाए हुए। इसे भरने का क्रम, जो इस बात से निकाला गया है कि कौन-सी foreign keys सच में अनिवार्य हैं। एक इंस्टॉल को कस्टमरों में कैसे बाँटें ताकि दूसरे कस्टमर का डिवाइस 404 लौटाए और बिना अनुमति वाला ऑब्जेक्ट टाइप 403। Config contexts और वह inheritance जो उन्हें custom fields से ज़्यादा कीमती बनाती है। NetBox के अपने स्टेटस मेन्यू में अपनी वैल्यू जोड़ना। अपने बिज़नेस का ऑब्जेक्ट जोड़ने के तीन तरीके, जिनमें बिना कोड के मॉडल किया गया एक datastore भी है। वैलिडेशन नियम और validator क्लास कैसे लिखें ताकि डेटाबेस वह चीज़ ठुकरा दे जो आपका हाउस स्टैंडर्ड मना करता है। और 2021 के उस fork की कहानी जिससे Nautobot बना, वह किस लिए था, और तब से क्या एक जैसा हो गया है। साथ में netbox.netbox Ansible collection से पूरी चीज़ चलाना, जहाँ इन्वेंटरी एक फ़ाइल नहीं बल्कि एक query है और एक मॉड्यूल आर्ग्युमेंट हर बार चलने पर चुपचाप एक नया एड्रेस दे देता है।","title":"NetBox: इसमें क्या रहता है, और इसे अपनी चीज़ें कैसे रखवाएँ"},{"content":"आज आपकी मशीन ने जो भी नाम lookup किया, उस पर उसने भरोसा कर लिया। आपका बैंक, आपके updates, आपका mail server। नेटवर्क से एक जवाब आया और कहीं भी किसी चीज़ ने यह नहीं जाँचा कि वह उस संस्था से आया है जो नाम की मालिक है, या उससे जिसने सबसे पहले एक packet पहुँचा दिया। किसी आम DNS जवाब पर कोई signature नहीं होता, जाँचने को कुछ नहीं होता, और अगर कुछ गड़बड़ हो तो उसे पकड़ने वाला भी कुछ नहीं होता। 1983 में यह एक समझदारी भरा design था, और बहुत पहले यह समझदारी नहीं रह गया।\nDNSSEC ठीक इसी का इलाज है, और यह न नया है न महँगा। zone का मालिक अपने records पर sign करता है। उसके ऊपर वाला zone उसकी key का एक hash प्रकाशित करता है और उस पर sign करता है, और ऐसे ही ऊपर तक, जब तक chain एक अकेली root key तक नहीं पहुँच जाती जिसे आपका resolver जन्म से जानता है। जो भी चीज़ इस chain को जाँचती है, वह असली जवाब और जाली जवाब में फ़र्क़ बता सकती है। यह 2005 से एक standard है, root जुलाई 2010 से signed है, और registries ये records मुफ़्त में प्रकाशित करती हैं।1 2\nपेड़ का सबसे ऊपरी हिस्सा पूरा हो चुका है। इस लेख के लिए मैंने लाइव root zone गिना, और 1,438 में से 1,351 top level domain signed हैं, जिनमें 1,038 के 1,038 generic domain शामिल हैं। फिर यह खाई में गिर जाता है। जो 2,390 gov.uk डोमेन अब भी resolve होते हैं, उनमें से उनतालीस signed हैं, और उनमें से नौ parish council हैं। MI6 ने यह कर लिया। National Cyber Security Centre ने नहीं किया।\nयह लेख बताता है कि एक जाली जवाब की असली क़ीमत क्या है और signing उसके बारे में क्या करती है, 27 सितंबर 2026 को लाइव root zone से गिना हुआ, और फिर नीचे सरकार, बैंकों, उन distributions से जिनसे आप software install करते हैं, और certificate authorities तक। हर डोमेन के लिए एक command, किसी की इजाज़त की ज़रूरत नहीं, और हर नाम सूची में दिया गया है ताकि आप मेरे गणित से नहीं, मेरे चुनाव से बहस कर सकें। इसके नीचे वह सवाल है जिसका जवाब मैं असल में चाहता था। Mockapetris के DNS लिखने के बयालीस साल बाद, क्या लगभग कोई sign इसलिए नहीं करता कि लगभग किसी ने कभी समझा ही नहीं कि DNS क्या वादा कर रहा था?\nDNSSEC क्या है, और किसलिए है एक वाक्य में: DNSSEC, DNS जवाबों पर एक cryptographic signature लगाता है, ताकि resolver साबित कर सके कि जवाब zone के मालिक से आया है, न कि उससे जो सबसे पहले जवाब देने में कामयाब हो गया।\nयह encryption नहीं है, firewall नहीं है और filter नहीं है। यह एक signature है, और keys की एक chain है जो पीछे एक ऐसी अकेली key तक जाती है जिस पर आपका resolver पहले से भरोसा करता है। पूरा विचार बस इतना है।\nअब हमला, क्योंकि protocol तभी समझ में आता है जब आप देख लें कि यह किसलिए है।\nकोई नाम पूछने वाला resolver एक query भेजता है और इंतज़ार करता है। जवाब का मिलान कुछ fields पर होता है: query का नाम, type, source और destination address और port, और एक 16 bit transaction ID। जो भी असली जवाब आने से पहले इन fields से मेल खाता packet बना दे, वह जीत जाता है। resolver उस जालसाज़ी को cache कर लेता है और हर उस client को दे देता है जो पूछे, उतनी देर तक जितनी देर हमलावर ने कहा।\nDan Kaminsky का 2008 का काम वह है जो सबको आधा याद है।3 मायने वाली बात यह नहीं कि cache poisoning मौजूद थी, क्योंकि उसके बारे में सालों पहले से पता था। बात यह है कि उन्होंने अंदाज़े को बिना रुके दोहराने का तरीक़ा खोज लिया। ऐसा नाम पूछिए जो है ही नहीं, और हर नाकाम कोशिश की कोई क़ीमत नहीं और वह तुरंत दोबारा कोशिश करने देती है, तो हमलावर अब एक दिन तक चलने वाले cached record के ख़िलाफ़ एक बार की दौड़ नहीं लगा रहा। industry का जवाब था randomness जोड़ना: random transaction ID के ऊपर random source port, जिससे अंदाज़ा 65,536 में एक से बढ़कर लगभग दो अरब में एक हो गया।\nयह बड़ी संख्या है। यह सबूत नहीं है।\nResolver उन fields पर मिलान करता है जिनका हमलावर अंदाज़ा लगा सकता है SIGNING के बिना: पहला मेल खाता PACKET जीतता है resolver पूछता है, फिर इंतज़ार असली server अपने समय पर जवाब देता है off-path हमलावर बस पहले पहुँचना है पाँच fields मेल खाएँ तो स्वीकार, और हर एक का अंदाज़ा लग सकता है: नाम · type · addresses · source port · 16-bit transaction ID SIGNING के साथ: जवाब सबूत साथ लाता है एक signature जो उसी root key तक जुड़ता है जो resolver के पास पहले से थी। अंदाज़े से यह नहीं बनता। Resolver उन fields पर मिलान करता है जिनका हमलावर अंदाज़ा लगा सकता है। Signing अंदाज़े की जगह गणित रख देती है और यह बचाव तब से घिसता जा रहा है, क्योंकि इनमें से हर field एक ऐसा अंदाज़ा है जिसे कठिन बनाया गया, न कि एक ऐसा तथ्य जिसे जाँचा जा सके। port randomisation को एक NAT बिगाड़ देता है जो port को अनुमान लगाने लायक़ ढंग से बदलता है। fragmentation हमले मिलान को पूरी तरह किनारे कर देते हैं। off-path हमले नए-नए रूपों में लौटते रहते हैं, और हर एक को अपना अलग patch मिलता है।\nSigning बहस ख़त्म कर देती है। एक signed जवाब या तो ऐसी key से verify होता है जिसे resolver root तक जोड़ सके, या नहीं होता, और कितना भी अंदाज़ा लगाने से हमलावर को valid signature नहीं मिलता।\nवह दौड़ जीतकर उन्हें असल में क्या मिलता है ठोस बात करते हैं, क्योंकि “cache poisoning” सुनने में अमूर्त लगता है और उसके नतीजे अमूर्त नहीं हैं।\nवे क्या जाली बनाते हैं उन्हें क्या मिलता है आपकी site का A record ट्रैफ़िक, और एक login form जो आपके जैसा दिखता है आपके MX records हर आने वाला email, password reset समेत वह नाम जिस पर certificate authority जाँच करती है ऐसे डोमेन का valid certificate जो उनका नहीं है वह नाम जहाँ से आपकी मशीनें updates लाती हैं कुछ नहीं आता, और किसी को बताया नहीं जाता आपका NS delegation ऊपर का सब कुछ एक साथ, जितनी देर TTL कहे तीसरी पंक्ति एक DNS समस्या को certificate समस्या बना देती है। Domain-validated issuance ऐसे काम करता है कि आपसे एक record प्रकाशित करवाया जाता है और फिर उसे lookup किया जाता है। अगर हमलावर उस lookup के दौरान CA को दिखने वाले जवाब पर क़ाबू कर ले, तो CA आपके नाम का असली काग़ज़ उन्हें जारी कर देती है, और उसके बाद browser का ताला उनका है। जो कुछ भी जाँचना users को सिखाया गया है, सब यही कहेगा कि site ठीक है।\nचौथी पंक्ति चुपचाप वाली है। जाली जवाब को किसी को कहीं भेजना ज़रूरी नहीं। update service को एक black hole की तरफ़ मोड़ देना काफ़ी है, और stack में कुछ भी ऐसा नहीं बना जो उन updates के बारे में शोर मचाए जो कभी आए ही नहीं।\nSigning इसके बारे में क्या करती है तरीक़ा अपनी साख से ज़्यादा सीधा है।\nहर signed zone के पास एक key pair होता है। zone का मालिक हर record set पर private हिस्से से sign करता है और उसके साथ एक RRSIG प्रकाशित करता है। public हिस्सा zone में DNSKEY के रूप में जाता है। अब तक इससे कुछ साबित नहीं होता, क्योंकि जो हमलावर A record जाली बना सकता है, वह उसके साथ DNSKEY भी जाली बना सकता है।\nइसे बंद करता है DS record, और DS parent zone में रहता है, आपके में नहीं। यह आपकी key का एक hash है, जिसे आपके ऊपर वाला zone प्रकाशित और sign करता है। तो uk आपकी key की गवाही देता है, root uk की गवाही देता है, और आपका resolver जन्म से ठीक एक चीज़ जानता है: root की key।2\nहर parent अपने child की गवाही देता है, और एक गायब DS नीचे सब तोड़ देता है वह एक चीज़ जो RESOLVER जन्म से जानता है root key resolver के साथ आती है बाक़ी सब पूछकर सीखा जाता है, और ऊपर वाला स्तर उसे साबित करता है। uk का DS uk signed, और root उसकी गवाही देता है आपके zone का DS damiendye.uk अपने records पर RRSIG से sign करता है DS, child की key का hash है, जिसे parent प्रकाशित और sign करता है। तो सिर्फ़ parent ही आपको chain में डाल सकता है। आप नहीं। और अगर एक DS गायब हो Chain वहीं रुक जाती है। नीचे सब unverifiable है, नीचे का zone कितनी भी सावधानी से signed हो। हर parent अपने child की गवाही देता है, और एक गायब DS उसके नीचे सब कुछ तोड़ देता है काम तीन तरह के records करते हैं, और आपको पता होना चाहिए कि कौन क्या है, क्योंकि उनमें से सिर्फ़ एक किसी और का काम है:\nRecord कहाँ रहता है क्या कहता है DNSKEY आपका zone यह रही मेरी public key RRSIG आपका zone इस record set पर यह रहा मेरा signature DS आपके parent का zone मैं उस key की गवाही देता हूँ पहले दो आप पूरी दोपहर अकेले प्रकाशित करते रह सकते हैं और कुछ नहीं बदलता। जब तक parent एक DS प्रकाशित नहीं करता, आप एक ऐसा signed zone हैं जिसे कोई verify नहीं कर सकता, जो बस अतिरिक्त मेहनत वाला एक unsigned zone है।\n$ dig +short @127.0.0.53 uk DS 43876 8 2 A107ED2AC1BD14D924173BC7E827A1... $ dig +short @127.0.0.53 damiendye.uk DS 2371 13 2 A5B2825C57899A5A15EE9703832C8358E0D19EF29DC72DD83C691ED77C33BD7F $ dig +short @127.0.0.53 bbc.co.uk DS (nothing) बीच वाला इसी site का zone है। uk उसकी गवाही देता है, algorithm 13 ECDSA P-256 है, और इसलिए एक validating resolver इसके बारे में हर जवाब को root तक साबित कर सकता है। bbc.co.uk कुछ नहीं लौटाता, इसलिए वह ऐसा नहीं कर सकता।\nएक command बता देता है कि कोई zone chain of trust में है या नहीं। अगर parent आपके लिए कोई DS प्रकाशित नहीं करता, तो आप signed नहीं हैं, चाहे आपने और कुछ भी configure किया हो, और एक validating resolver आपके डोमेन के बारे में हर जवाब को unverifiable मानेगा।\nपूरी जाँच वही एक record है।\nयह क्या नहीं करता साफ़-साफ़ कहने लायक़ है, क्योंकि इसे बढ़ा-चढ़ाकर बेचना ही आधी वजह है कि लोग इस पर भरोसा नहीं करते।\nयह नहीं करता क्योंकि कुछ भी encrypt आप जो भी नाम lookup करते हैं, वह अब भी खुले में है। उसके लिए DNS over TLS है, और दोनों एक-दूसरे की जगह नहीं ले सकते compromised zone को सुरक्षित जिस हमलावर के हाथ आपका DNS management है, वह आपकी key से अपनी जालसाज़ियों पर बड़े आराम से sign करता है आख़िरी hop की रक्षा validating resolver और application के बीच, जब तक वह hop भी भरोसेमंद न हो आपसे नाम छिनने से रोकना registrar या अदालत अब भी ऐसा कर सकती है, और पूरे समय signature पूरी तरह valid रहेगा content के बारे में कुछ कहना signed जवाब असली होता है, ईमानदार नहीं। malware भी अपना zone sign कर सकता है, और करता है लोग उस आख़िरी पंक्ति पर ठोकर खाते हैं। DNSSEC साबित करता है कि जवाब उससे आया जो zone को control करता है। उनके भले होने पर इसकी कोई राय नहीं।\nयह ठीक एक काम करता है। जवाब को जाली बनाना सिर्फ़ असंभाव्य नहीं, गणितीय रूप से असंभव बना देता है।\nकिसी भी zone को कैसे जाँचें, किसी और का भी यही हिस्सा बाक़ी लेख को मुमकिन बनाता है, और इसमें एक command लगता है।\nकोई zone chain of trust में है अगर उसका parent उसके लिए एक DS प्रकाशित करता है। पूरी जाँच इतनी ही है, और आप इसे किसी के भी ख़िलाफ़, बिना इजाज़त, किसी भी मशीन से चला सकते हैं:\ndig +short damiendye.uk DS कुछ लौटा तो signed। कुछ नहीं लौटा तो signed नहीं, चाहे zone में और कुछ भी configure हो।\nअगर आपको हाँ या ना से ज़्यादा चाहिए, तो तीन और जानने लायक़ हैं:\nCommand आपको बताता है dig +short \u0026lt;zone\u0026gt; DS क्या parent इस zone की गवाही देता भी है delv @1.1.1.1 \u0026lt;zone\u0026gt; A क्या chain शुरू से अंत तक validate होती है, और अगर नहीं, तो कहाँ टूटती है resolvectl query \u0026lt;zone\u0026gt; एक validating resolver किस नतीजे पर पहुँचता है, फ़ैसला शब्दों में लिखा हुआ dig +dnssec \u0026lt;zone\u0026gt; SOA RRSIG और उसकी expiry तारीख़, जिस पर नज़र रखनी है अपने नतीजों पर भरोसा करने से पहले दो जाल जान लीजिए, क्योंकि इस लेख के लिए नापते समय दोनों में मैं फँसा।\ndig +short … DS एक CNAME chain छाप देगा अगर नाम alias है, और अंकों वाला hostname इतना DS record जैसा दिखता है कि एक भोला script धोखा खा जाए। असली DS में चार fields होते हैं: key tag, algorithm, digest type, hex digest। उसी आकार से मिलान कीजिए, वरना आप unsigned zones को signed गिन लेंगे।\nunsigned parent के नीचे DS का कोई मतलब नहीं। chain को root तक पहुँचना होता है। update.microsoft.com के पास DS है, और microsoft.com के पास नहीं, इसलिए वह शाखा फिर भी unverifiable है। हमेशा पूरा रास्ता जाँचिए, एक स्तर नहीं।\nइस लेख में आगे जो कुछ भी गिना गया, वह इसी तरह नापा गया। कोई scanner नहीं, कोई third-party dashboard नहीं, किसी vendor की league table नहीं। parent से पूछिए कि क्या वह child की गवाही देता है, और ज़ोर दीजिए कि जवाब DS के रूप में parse हो।\nRoot Zone का काम पूरा हो चुका है यहीं पर प्रचलित समझ सीधे-सीधे पुरानी पड़ चुकी है। लोग अब भी DNSSEC के बारे में ऐसे बात करते हैं जैसे infrastructure ही समस्या हो।\nमैंने 27 सितंबर 2026 को लाइव root zone लिया, serial 2026092701, और delegations को DS records से मिलाकर गिना।4\ndelegations signed हिस्सा gTLDs (.com, .org, .dev, सब) 1,038 1,038 100% IDN TLDs 151 136 90.1% ccTLDs 248 176 71.0% arpa 1 1 100% कुल 1,438 1,351 93.9% हर एक generic top level domain signed है। सभी 1,038, बिना किसी अपवाद के, क्योंकि ICANN का Registry Agreement नए gTLD programme के तहत delegate हुई हर चीज़ से इसकी माँग करता है। जो 87 signed नहीं हैं, वे लगभग सब country code हैं, और सूची में ज़्यादातर छोटे क्षेत्र और गिनती के कुछ देश हैं:\nae ao aq ba bb bo bs cd cf cg ck cu cv cw do eg fk gb gf gh gm gp gq gt gu hm im iq jm jo kh km kn kp mh mk mo mp mq mt mv mw mz ne ni np nr om pa pf pk pn ps qa sd sl sm so st sv sy sz td tg tj tk to va vg vi ye zw gb इसमें है, जो समस्या कम और अजूबा ज़्यादा है, क्योंकि कोई इसे किसी काम के लिए इस्तेमाल ही नहीं करता। Vatican, North Korea, Cuba और Syria भी हैं। tk भी है, जो सालों तक internet पर मुफ़्त डोमेन का सबसे बड़ा स्रोत रहा, और साथ में दुरुपयोग का भी एक पक्का स्रोत।\nतो पेड़ का ऊपरी हिस्सा पूरा है। registries ने कठिन हिस्सा, महँगा हिस्सा और वह हिस्सा जिसके लिए अंतरराष्ट्रीय तालमेल चाहिए था, कर दिया, और पूरा कर दिया। इसलिए इस बिंदु से नीचे की किसी भी चीज़ का दोष infrastructure पर नहीं डाला जा सकता।\nऊपर चौरानवे प्रतिशत, नीचे डेढ़ CHAIN बन चुकी है root 2010 से signed 1,438 में से 1,351 TLD हर gTLD, बिना अपवाद जो नाम लोग सचमुच टाइप करते हैं और यहाँ यह रुक जाती है SIGNED हिस्सा, 27 सितंबर 2026 को गिना गया root में TLDs 93.9% Linux और BSD distros 20% UK के बैंक 13% Package registries 18% Microsoft के zones 15% Certificate authorities 11% हर gov.uk डोमेन 1.63% आधिकारिक रजिस्टर के उन 2,390 में से 39 signed, जो अब भी resolve होते हैं गिना हुआ, अनुमान नहीं। Chain TLD तक पूरी बनी है और फिर कोई उसका इस्तेमाल नहीं करता और फिर यह एकदम रुक जाता है TLD के नीचे तस्वीर पूरी तरह उलट जाती है।\nनीचे के हर समूह को मैंने उसी तरह नापा: parent से DS माँगो, और सिर्फ़ वही record मानो जो सचमुच DS के रूप में parse हो। यहाँ सब कुछ 27 सितंबर 2026 को गिना गया।\nक्या Signed हिस्सा root zone में TLDs 1,351 / 1,438 93.9% Linux और BSD distributions 19 / 96 20% UK के बैंक और building societies 13 / 98 13% Package registries और supply chain 4 / 22 18% Microsoft के zones 4 / 26 15% Certificate authorities 1 / 9 11% हर gov.uk डोमेन जो अब भी resolve होता है 39 / 2,390 1.63% ऊपर चौरानवे प्रतिशत। नीचे डेढ़ प्रतिशत। chain of trust एक ऐसी ज़ंजीर है जिसका एक सिरा दीवार में कसा है और दूसरा फ़र्श पर पड़ा है।\nतरीक़े पर एक टिप्पणी, क्योंकि इतनी बुरी संख्या इसकी हक़दार है। gov.uk वाली पंक्ति एक जनगणना है, नमूना नहीं: यह सरकार के अपने प्रकाशित रजिस्टर का हर second level domain है, उन 2,390 तक छाँटा हुआ जो अब भी resolve होते हैं। बाक़ी पंक्तियाँ उन संस्थाओं की चुनी हुई सूचियाँ हैं जिनकी जालसाज़ी सचमुच चोट पहुँचाएगी, जो एक निर्णय का मामला है, और उनके हर नाम को मैंने नीचे सूची में दिया है ताकि आप मेरे गणित से नहीं, मेरे चुनाव से असहमत हो सकें।\nसरकारी जनगणना: 2,390 में से 39 सरकार gov.uk डोमेन की जो आधिकारिक सूची प्रकाशित करती है, उसमें 3,004 second level नाम हैं। उनमें से 2,390 अब भी resolve होते हैं। उनतालीस signed हैं।\nविस्तार से पहले, उस रजिस्टर के बारे में एक बात। gov.uk का प्रकाशित सबसे नया संस्करण 1 अक्टूबर 2016 का है।5 एक दशक पुराना, उन डोमेन की आधिकारिक सूची के लिए जिन पर ब्रिटिश राज्य जवाब देता है। यह अपने आप में एक छोटी खोज है, और मैं इसे यहीं छोड़ता हूँ।\nअब देखिए कि वे उनतालीस कौन हैं।\nSigned Signed नहीं mi6.gov.uk, sis.gov.uk gchq.gov.uk, mi5.gov.uk nationalcrimeagency.gov.uk ncsc.gov.uk, cyberessentials.ncsc.gov.uk cheltenham.gov.uk, cotswold.gov.uk, somerset.gov.uk, waverley.gov.uk, southribble.gov.uk, sedgemoor.gov.uk, fdean.gov.uk, westoxon.gov.uk birmingham.gov.uk, manchester.gov.uk, leeds.gov.uk, glasgow.gov.uk, sheffield.gov.uk, liverpool.gov.uk, bristol.gov.uk, cardiff.gov.uk, edinburgh.gov.uk, belfast.gov.uk peakdistrict.gov.uk, snowdonia-npa.gov.uk, eryri-npa.gov.uk hmrc.gov.uk, dvla.gov.uk, dwp.gov.uk, nhs.uk, homeoffice.gov.uk, mod.uk, parliament.uk नौ parish और town council companieshouse.gov.uk, landregistry.gov.uk, police.uk, met.police.uk, tfl.gov.uk, ons.gov.uk वह पहला कॉलम फिर से पढ़िए। Secret Intelligence Service ने अपना zone sign कर लिया है। National Cyber Security Centre ने नहीं किया।\nGCHQ ने भी नहीं, जो NCSC की अपनी मूल संस्था है। Cyber Essentials scheme ने भी नहीं, जो इसीलिए है कि दूसरे लोगों की security पर्याप्त होने का प्रमाणपत्र दे। मैं यह दिखावा नहीं करने वाला कि यह असाधारण के सिवा कुछ और है।\nऔर उनतालीस में से नौ parish और town council हैं। Abinger। Aldenham। Ashmansworth। Wheathampstead। Frampton on Severn। ऐसी जगहें जहाँ एक clerk है, एक part time website है, और इतना बजट है जो Whitehall में एक दिन की consultancy भी न चुका सके। उन्होंने कर लिया। HMRC, जिसके पास देश के हर वयस्क का tax record है, नहीं कर पाया।\nक्या मैं पूछ सकता हूँ कि प्रक्रिया में ऐसा क्या है जो इसकी इजाज़त देता है। कौन नहीं: क्या। क्योंकि NCSC ऐसी guidance प्रकाशित करता है जो दूसरों से DNSSEC लगाने को कहती है, और guidance लिखने वाले विभाग ने वह काम नहीं किया जो guidance कहती है। या तो यह ज़रूरी है, तो जो संस्था ऐसा कहती है उसे सालों पहले यह कर लेना चाहिए था, या ज़रूरी नहीं है, तो guidance को यही कहना चाहिए।\nबहाना पेश होगा scale और legacy का। वह पहले कॉलम के सामने नहीं टिकता। somerset.gov.uk एक unitary authority है जो 580,000 लोगों की सेवा करती है और वह signed है। birmingham.gov.uk एक unitary authority है जो 1.1 million लोगों की सेवा करती है और वह नहीं है। वही देश, वही registry, वही registrars, उन्हीं suppliers के लिए उतना ही पैसा। एक ने कर लिया।\nवह software जिससे आप update करते हैं यह वह हिस्सा है जिसे आपको बैंकों से ज़्यादा चिंतित करना चाहिए, और यह वह हिस्सा है जिसे लगभग कोई नहीं नापता।\nआपकी चलाई हर मशीन एक तय समय पर कहीं से code लाती है, और वह जगह वह DNS से पूछकर ढूँढती है।\nनिन्यानवे distributions और BSD, जिनमें से छियानवे अब भी resolve होते हैं। उन्नीस signed हैं।\nSigned (19) debian.org, fedoraproject.org, opensuse.org, gentoo.org, almalinux.org, artixlinux.org, cachyos.org, garudalinux.org, getsol.us, linuxmint.com, q4os.org, system76.com, tails.net, whonix.org, freebsd.org, netbsd.org, hardenedbsd.org, midnightbsd.org, opnsense.org बड़े commercial वाले ubuntu.com, canonical.com, redhat.com, suse.com, oracle.com, rockylinux.org, centos.org, eurolinux.com Ubuntu flavours kubuntu.org, xubuntu.org, lubuntu.me, ubuntustudio.com, ubuntukylin.com Arch परिवार archlinux.org, arcolinux.com, endeavouros.com, manjaro.org, blackarch.org स्वतंत्र और minimal alpinelinux.org, voidlinux.org, nixos.org, devuan.org, slackware.com, antixlinux.com, mxlinux.org, puppylinux.com, tinycorelinux.net, slitaz.org, porteus.org, funtoo.org, calculate-linux.org Desktop पर केंद्रित zorin.com, elementary.io, deepin.org, uniontech.com, bodhilinux.com, peppermintos.com, sparkylinux.org, neon.kde.org, nobaraproject.org, ultramarine-linux.org, vanillaos.org, solus-project.com Security और privacy kali.org, parrotsec.org, qubes-os.org, backbox.org, pentoo.ch, trisquel.info, pureos.net, hyperbola.info, dragora.org क्षेत्रीय और सरकारी altlinux.org, astralinux.ru, rosa.ru, openkylin.top, openeuler.org, opencloudos.org, openanolis.cn, mageia.org, openmandriva.org, pclinuxos.com Embedded, immutable, appliance openwrt.org, dd-wrt.com, librecmc.org, raspberrypi.com, armbian.com, flatcar.org, talos.dev, bottlerocket.dev, truenas.com, pfsense.org BSD openbsd.org, dragonflybsd.org, ghostbsd.org और वे दो जो सबसे ज़्यादा मायने रखते हैं kernel.org, gnu.org छियानवे में उन्नीस। और उस unsigned सूची के नाम गुमनाम नहीं हैं: Ubuntu, Red Hat, SUSE, Oracle, Arch, Alpine, NixOS, Rocky, हर Ubuntu flavour, और kernel.org और gnu.org दोनों।\nsecurity और privacy वाली distributions से मुझे अलग होने की उम्मीद थी, और ज़्यादातर वे अलग नहीं हैं। Tails और Whonix ने sign किया है, जो ठीक बैठता है। Kali, Parrot, Qubes, Trisquel और PureOS ने नहीं, जो ठीक नहीं बैठता। OpenBSD ने ठीक इसी तरह की चीज़ों को सही करने पर पच्चीस साल की साख बनाई है और openbsd.org sign नहीं किया, जबकि FreeBSD, NetBSD, HardenedBSD और MidnightBSD सबने किया है।\npackage registries लगभग पूरी तरह ग़लत कॉलम में हैं: npm, crates.io, RubyGems, Packagist, Docker Hub और Quay सब unsigned हैं। pypi.org अपवाद है, और जहाँ श्रेय बनता है वहाँ देना चाहिए, क्योंकि यह सबसे ज़्यादा हमले झेलने वालों में भी है।\nMicrosoft, और update channel Microsoft के छब्बीस zones में से चार signed हैं, और चारों जायदाद के एक ही कोने के हैं:\nSigned Signed नहीं live.com, outlook.com, office.com, office365.com microsoft.com, windows.com, windowsupdate.com, update.microsoft.com azure.com, azurewebsites.net, microsoftonline.com, windows.net github.com, npmjs.com, linkedin.com, visualstudio.com, xbox.com, bing.com Outlook और Office के नाम signed हैं और बाक़ी कुछ नहीं, जो एक कंपनी का नहीं, एक team का फ़ैसला लगता है। देखिए कि दाएँ कॉलम में update service के साथ क्या है: github.com और npmjs.com, internet पर code बाँटने की दो सबसे बड़ी जगहें, दोनों Microsoft की, दोनों unsigned।\n$ dig +short @127.0.0.53 windowsupdate.com DS (nothing) $ dig +short @127.0.0.53 microsoft.com DS (nothing) $ dig +short @127.0.0.53 com DS 19718 13 2 8ACBB0CD28F41250A80A491389424... com signed है, तो तकनीकी रूप से कुछ भी रास्ते में नहीं है। Microsoft आज दोपहर ही एक DS प्रकाशित कर सकता है।\nयह क्यों मायने नहीं रखता, इसका रटा-रटाया जवाब यह है कि DNS सिर्फ़ एक परत है। update payloads code signed होते हैं, client signature जाँचता है, और ट्रैफ़िक TLS पर चलता है। DNS तोड़ दीजिए, फिर भी आप code execute नहीं करवा सकते।\nवह जवाब पूरी तरह इस पर टिका है कि signing पक्की हो। वह पक्की नहीं रही है।\nकब Microsoft के signing भरोसे के साथ क्या हुआ 2012 Flame ने Terminal Services licensing enrolment रास्ते के ख़िलाफ़ MD5 collision से Microsoft Root Authority तक जुड़ने वाला एक certificate जाली बनाया, फिर उसे एक नक़ली update server पर इस्तेमाल किया6 2021 Netfilter पहला ऐसा rootkit बना जिस पर सीधे Microsoft का जारी किया WHQL signature मिला, Windows Hardware Compatibility Program पास करके, जबकि वह एक command and control server से बात कर रहा था7 2021 FiveSys, एक और WHQL-certified driver, एक rootkit निकला जो अपना root certificate install करता था और मशीन के HTTP और HTTPS ट्रैफ़िक को proxy करता था7 2022 Microsoft-signed malicious drivers ransomware हमलों में मिले, और Microsoft ने signatures रद्द किए और developer accounts निलंबित किए7 2023 Storm-0558 ने एक engineer का account compromise करने के बाद एक crash dump से Microsoft की consumer signing key हासिल की, और ऐसे authentication tokens जाली बनाए जो सरकारी एजेंसियों समेत लगभग 25 संस्थाओं के enterprise email के लिए स्वीकार किए गए8 उस आख़िरी पंक्ति के बारे में सटीक रहिए, क्योंकि लोग इसे बढ़ा-चढ़ा देते हैं। चुराई गई key ने identity tokens पर sign किया, binaries पर नहीं। यह table में एक अलग वजह से है: Microsoft की signing सामग्री की हिफ़ाज़त नाकाम हुई, दो साल तक बिना पकड़े, एक crash dump और एक compromised engineer account के ज़रिए।\nउसके ऊपर की पंक्तियाँ code signing की नाकामियाँ हैं, और वे बदतर हैं। एक ही साल में दो बार, Microsoft के अपने hardware certification programme ने एक चालू rootkit पर Microsoft का signature लगाया और उसे भेज दिया। जाली certificate नहीं, चुराई हुई key नहीं। जायज़ प्रक्रिया, malware पर sign करती हुई, ठीक जैसे design की गई थी।\nतो जो बचाव आपको DNS को वैकल्पिक मानने देता है, वह ग्यारह सालों में जालसाज़ी से, प्रक्रिया के दुरुपयोग से और key की चोरी से, तीनों से उलटा जा चुका है। ऐसा हमलावर जिसके पास मशीन द्वारा स्वीकार किया जाने वाला signature हो, कोई काल्पनिक प्रयोग नहीं है। state-backed हमलावर के लिए यह शोध की नहीं, ख़रीदारी की समस्या है।\nउस हमलावर को एक जाली DNS जवाब दे दीजिए और तस्वीर पूरी हो जाती है: उनके क़ाबू वाला signed code, एक ऐसे server से पहुँचाया गया जिसे मशीन Microsoft का मानती है, एक ऐसे connection पर जिस पर stack में कुछ भी सवाल नहीं उठाएगा। यह Flame है, बेहतर key सामग्री के साथ।\nउस chain में DNSSEC अकेली परत है जिसे फ़र्क़ नहीं पड़ता कि हमलावर के पास किसकी signing key है। यह payload को validate नहीं करती, यह validate करती है कि मशीन को कहाँ भेजा गया, और यह खेल में मौजूद हर certificate और signature से स्वतंत्र रूप से नाकाम होती है। जो ठीक वही है जो आप एक दूसरी परत से चाहते हैं, और ठीक वही वजह है कि बंद रखी जाने वाली परत यह नहीं होनी चाहिए।\nऔर एक सस्ता हमला भी है जिसमें कोई key नहीं चाहिए। जवाब ऐसा जाली बनाइए कि update service किसी काम की जगह पर resolve ही न हो, और मशीन बस कभी patch नहीं होती। कोई error नहीं जिस पर user कुछ करे, कोई alarm नहीं, बस मशीनों का एक बेड़ा चुपचाप पिछड़ता जाता है जबकि dashboard कहता है सब ठीक है। अगर मुझे छह महीने में exploit करने लायक़ तैयार जायदाद चाहिए होती, तो मैं उस पर कुछ push नहीं करता। मैं बस यह पक्का करता कि कुछ भी न पहुँचे।\nबैंक, पूरे के पूरे इस बार नमूना नहीं। UK के अट्ठानवे बैंक और building societies, उस दिन हर एक resolve होता हुआ, high street से लेकर एक branch और Victorian नाम वाली societies तक।\nतेरह signed हैं।\nSigned (13) lloydsbank.com, halifax.co.uk, bankofscotland.co.uk, tsb.co.uk, co-operativebank.co.uk, smile.co.uk, monzo.com, aldermore.co.uk, hampshiretrustbank.co.uk, investec.com, handelsbanken.co.uk, allica.bank, weatherbys.bank High street, unsigned hsbc.co.uk, firstdirect.com, barclays.co.uk, natwest.com, rbs.co.uk, ulsterbank.co.uk, santander.co.uk, nationwide.co.uk, virginmoney.com, clydesdalebank.co.uk, metrobankonline.co.uk, bankofireland.co.uk, aibgb.co.uk, danskebank.co.uk Digital और challenger, unsigned starlingbank.com, revolut.com, chase.co.uk, marcus.co.uk, atombank.co.uk, zopa.com, tandem.co.uk, kroo.com, monese.com, cashplus.com, anna.money, mettle.co.uk Retail, unsigned tescobank.com, sainsburysbank.co.uk, marksandspencer.com, johnlewisfinance.com SME और विशेषज्ञ, unsigned shawbrook.co.uk, paragonbank.co.uk, oaknorth.co.uk, recognisebank.co.uk, redwoodbank.co.uk, ccbank.co.uk, closebrothers.com, unitedtrustbank.co.uk, gbbank.co.uk, cynergybank.co.uk, securetrustbank.com Private बैंक, unsigned coutts.com, hoaresbank.co.uk, arbuthnotlatham.co.uk, rathbones.com, brownshipley.com, butterfieldgroup.com Building societies, unsigned जाँची गई हर एक: coventrybuildingsociety.co.uk, ybs.co.uk, skipton.co.uk, leedsbuildingsociety.co.uk, principality.co.uk, westbrom.co.uk, newcastle.co.uk, thenottingham.com, cumberland.co.uk, progressivebs.co.uk, saffronbs.co.uk, newburybs.co.uk, monbs.com, furnessbs.co.uk, ipswichbuildingsociety.co.uk, leekbs.co.uk, theloughborough.co.uk, mansfieldbs.co.uk, marsdenbs.co.uk, themelton.co.uk, familybuildingsociety.co.uk, penrithbs.co.uk, scottishbs.co.uk, srbs.co.uk, swansea-bs.co.uk, teachersbs.co.uk, thetipton.co.uk, thevernon.co.uk, beverleybs.co.uk, chorleybs.co.uk, dudleybuildingsociety.co.uk, esbs.co.uk, ecology.co.uk, harpendenbs.co.uk, hrbs.co.uk, darlington.co.uk, hanley.co.uk, bathbuildingsociety.co.uk अड़तीस building societies। उनमें से एक भी signed नहीं। ये वे संस्थाएँ हैं जिनके पास बहुत सारे घरों का mortgage है।\nउस signed कॉलम में दो पैटर्न उभरते हैं। Lloyds Banking Group ने अपने तीन brands sign किए हैं, lloydsbank.com, halifax.co.uk और bankofscotland.co.uk, और Co-operative Bank ने अपने दोनों। तो फ़ैसला एक बार, संस्था के स्तर पर लिया जाता है, और फिर लागू होता है। इसमें हर डोमेन की अलग कोई बाधा नहीं।\nऔर Monzo ने sign किया है जबकि Starling ने नहीं। दो challenger बैंक, एक-दूसरे के एक साल के भीतर बने, तुलनीय आधुनिक infrastructure पर, उसी regulator और उन्हीं registrars के साथ। एक ने कर लिया।\nवह एक जगह जहाँ हर कोई यह करता है signed कॉलम के आख़िरी दो नाम देखिए: allica.bank और weatherbys.bank।\n.bank एक प्रतिबंधित top level domain है जिसे fTLD Registry Services चलाती है, और उसकी security आवश्यकताएँ DNSSEC को अनिवार्य बनाती हैं, TLS और email authentication के साथ, और हर registrant की सालाना दोबारा जाँच के साथ।9\nवही संस्थाएँ, दो व्यवस्थाएँ Signed आम डोमेन पर, जहाँ DNSSEC वैकल्पिक है 98 में से 13 .bank पर, जहाँ यह अनिवार्य है और हर साल दोबारा जाँचा जाता है दोनों दो एक छोटी संख्या है, तो इसे आँकड़ा नहीं, प्रदर्शन मानिए। फिर भी बदली सिर्फ़ एक चीज़, वह आवश्यकता।\nइस लेख में आगे आने वाले हर बहाने का यही जवाब है, और यह बहानों से पहले पहुँच जाता है। वही बैंक, वही suppliers, वही बजट और वही हुनर, वैकल्पिक होने पर 13% पालन देते हैं और जब कोई हर साल जाँचता है तो 100%। तकनीकी रूप से कुछ नहीं हिला। बस किसी ने पूछ लिया।\nपहरेदारों पर कोई पहरा नहीं दे रहा नौ में से एक certificate authority।\nSigned Signed नहीं entrust.com letsencrypt.org, digicert.com, sectigo.com, globalsign.com, identrust.com, buypass.com, zerossl.com, certum.eu ये वे संस्थाएँ हैं जिनका पूरा धंधा यह साबित करना है कि कोई चीज़ वही है जो होने का दावा करती है। ये वही संस्थाएँ भी हैं जो domain control को DNS पर validate करती हैं, आपसे एक record प्रकाशित करवाकर और फिर उसे lookup करके। वह lookup जो तय करता है कि किसी डोमेन का certificate आपको मिलेगा या नहीं, इन नौ में से आठ पर, एक ऐसा lookup है जिसे कोई verify नहीं कर सकता।\nयह कोई काल्पनिक बात नहीं। यह दर्ज किया हुआ ढाँचा है: validation lookup जाली बनाइए, certificate अपने नाम जारी करवाइए, और अब आपके पास ऐसे नाम का valid काग़ज़ है जो आपका नहीं। DNSSEC उन गिनी-चुनी चीज़ों में से है जो इसे ठोस रूप से कठिन बनाती हैं, और जिन्हें यह सबसे ज़्यादा बचाएगा, उन्होंने इसे लगाया ही नहीं।\nयह बात मैं आपको मुफ़्त में बताता हूँ। अगर आपका business model पहचान है, और आपने अपना ही zone sign नहीं किया, तो “यह कठिन है” वाली दलील आपके लिए उपलब्ध नहीं है।\nऔर असल में जाँच कौन रहा है? Signing सिर्फ़ आधा हिस्सा है। एक signed zone किसी की रक्षा नहीं करता जब तक दूसरी तरफ़ कुछ signature को verify न करे, और यहाँ तस्वीर बेहतर नहीं, बदतर होती है।\nvalidation दो जगह हो सकता है, और दोनों बराबर नहीं हैं:\nResolver पर validation एक unauthenticated hop छोड़ता है। Device पर validation नहीं छोड़ता दो जगहें जहाँ सबूत जाँचा जा सकता है, और दोनों एक चीज़ नहीं हैं Resolver पर validation आपका application bit पर भरोसा करता है एक AD bit unauthenticated resolver signatures जाँचता है chain verified signed zone RRSIG और DS आपको सबूत नहीं, फ़ैसला मिलता है, ठीक उसी hop पर जिस पर अविश्वास के लिए यह पूरी क़वायद है। Device पर validation आपका application ख़ुद जाँचता है chain शुरू से अंत तक verified, वहीं जहाँ जवाब इस्तेमाल होता है signed zone RRSIG और DS बीच में कुछ आपसे झूठ नहीं बोल सकता, क्योंकि बीच में किसी से पूछा ही नहीं जा रहा। दुनिया का लगभग सारा validation ऊपर वाला है। Windows नीचे वाला किसी भी setting पर नहीं कर सकता। इनमें से एक आपको फ़ैसला थमाता है। दूसरा आपको सबूत थमाता है दुनिया का लगभग सारा validation पहली तरह का है। Google, Cloudflare और Quad9 सब validate करते हैं, और मिलकर बहुत बड़ी संख्या में users को cover करते हैं। इसकी कुछ क़ीमत है। लेकिन इसका मतलब है कि ज़्यादातर लोगों के पास जो गुण है, वह है मेरा resolver कहता है यह ठीक था।\nहर Operating System क्या कर सकता है Device पर validate करता है Default कैसे मिलता है systemd-resolved वाला Linux हाँ, पूरी तरह off एक drop-in में एक line local unbound या knot-resolver वाला Linux हाँ, पूरी तरह n/a install कीजिए, stub को उसकी तरफ़ point कीजिए local_unbound वाला FreeBSD हाँ, पूरी तरह off service local_unbound onestart macOS Ventura और बाद के, iOS 16 और बाद के हाँ off हर app या हर request पर, code में उससे पहले के macOS और iOS सिर्फ़ API off kDNSServiceFlagsValidate, app को माँगना पड़ता है Android platform पेश नहीं करता n/a एक third-party library, आपके अपने app में Fisher-Price OS (Windows) नहीं। कर ही नहीं सकता n/a किसी भी क़ीमत पर उपलब्ध नहीं इनमें से दो एक पंक्ति से ज़्यादा के हक़दार हैं।\nApple ने चुपचाप काम कर दिया। iOS 16 और macOS Ventura ने client-side DNSSEC validation जोड़ा, WWDC 2022 में Apple के अपने शब्दों में: “iOS 16 and macOS Ventura now support client side DNSSEC validation.”10 यह अपने आप नहीं, opt-in है, और सही बारीकी पर opt-in है, तो जिस application को परवाह है वह इसे हर session या हर request पर माँग सकता है:\nlet configuration = URLSessionConfiguration.default configuration.requiresDNSSECValidation = true एक phone पर असली validating resolver, device पर ही signatures जाँचता हुआ, और लगभग किसी ने ध्यान नहीं दिया कि यह आ गया। उससे पहले, mDNSResponder ने C API इस्तेमाल करने को तैयार किसी के भी लिए kDNSServiceFlagsValidate खोल रखा था।\nAndroid यह पेश नहीं करता। DNS resolver, Android 10 से एक updatable module है और Android 9 में उसे DNS over TLS मिला, तो platform DNS के मामले में खड़ा नहीं रहा। लेकिन न AOSP resolver का documentation और न public DnsResolver API, DNSSEC validation का ज़िक्र करते हैं, और MiniDNS जैसी libraries का होना और “DNSSEC close to your application” लाने का दावा करना इसीलिए है कि platform यह नहीं लाता। मुझे ऐसा कोई प्राथमिक स्रोत नहीं मिला जो सीधे कहे कि यह असंभव है, तो मैं इसे इससे ऊपर नहीं रखूँगा: पेश नहीं किया जाता, और इसे आपको ख़ुद लिखना होगा।\nऔर जहाँ यह काम करता है, वहाँ भी फेंक दिया जाता है एक और बात, इसी मशीन से, जिसके मिलने की मुझे उम्मीद नहीं थी।\nयहाँ का upstream resolver validate करता है और यह बताता भी है। systemd-resolved, DNSSEC=no के साथ, किसी application के देखने से पहले ही उसे फेंक देता है:\n# ---- before: stock Fedora, DNSSEC=no ---------------------------------- $ dig @192.0.2.53 damiendye.uk A | grep flags # the upstream ;; flags: qr rd ra ad $ dig @127.0.0.53 damiendye.uk A | grep flags # the local stub ;; flags: qr rd ra # ---- the fix: two lines in a drop-in ---------------------------------- $ sudo mkdir -p /etc/systemd/resolved.conf.d $ printf \u0026#39;[Resolve]\\nDNSSEC=allow-downgrade\\n\u0026#39; \\ | sudo tee /etc/systemd/resolved.conf.d/10-dnssec.conf $ sudo systemctl restart systemd-resolved # ---- after: same query, same stub, nothing else changed --------------- $ resolvectl status | grep -m1 DNSSEC= DNSSEC=allow-downgrade/supported $ dig @127.0.0.53 damiendye.uk A | grep flags ;; flags: qr rd ra ad वही नाम, वही जवाब, वही सेकंड। drop-in से पहले upstream ने काम किया, AD bit set किया, और local daemon ने उसे फ़र्श पर गिरा दिया, तो default सिर्फ़ हम यहाँ validate नहीं करते नहीं है, यह है हम यहाँ validate नहीं करते, और जिसने किया उसका फ़ैसला भी आगे नहीं बढ़ाएँगे। उसके बाद bit वापस है, और इस बार वह किसी और का दावा नहीं, हमारा अपना है।\nresolvectl फ़ैसले को शब्दों में रखता है, और उन दो बातों को अलग करता है जो मायने रखती हैं:\n$ resolvectl query damiendye.uk | tail -2 -- Data is authenticated: yes; Data was acquired via local or encrypted transport: no $ resolvectl query ncsc.gov.uk | tail -2 -- Data is authenticated: no; Data was acquired via local or encrypted transport: no देखिए दूसरा क्या नहीं है। यह error नहीं है। एक unsigned zone, bogus नहीं, unauthenticated लौटता है, resolution सफल होता है, और कहीं भी कुछ शिकायत नहीं करता। यही 1.63% वाली पूरी समस्या है, एक command के रूप में दोबारा कही गई: validation चालू करने से unsigned zones नाकाम नहीं होते, वे दिखने लगते हैं, और सिर्फ़ उसे जो ढूँढने जाए।\nसबसे बड़ा client OS सबसे बुनियादी जाँच में फ़ेल होता है अब पैमाने का दूसरा सिरा, और मुक़ाबला क़रीब भी नहीं है।\nWindows DNS client, Microsoft के अपने वर्णन में, “security-aware” लेकिन “non-validating” है। यह DNSSEC validation नहीं करता। इससे करवाया भी नहीं जा सकता। इसके बजाय यह अपने configured DNS server से validate करने को कहता है, और फिर जवाब में AD bit ढूँढता है।11\nइसके बारे में तीन बातें, और कोई भी छोटी नहीं:\nयह कभी signature नहीं जाँचता। दुनिया के सबसे बड़े client operating system को उपलब्ध सबसे मज़बूत गारंटी एक अकेला bit है, जिसे जवाब देने वाली कोई भी मशीन set करती है। default रूप से यह इतना भी नहीं करता। client सिर्फ़ उन namespaces के लिए DO bit set करता है और AD माँगता है जो Name Resolution Policy Table में दर्ज हैं, एक Group Policy object जिसे किसी को जानबूझकर configure करना पड़ता है। उसमें कोई नियम न हो, तो query में DNSSEC की कोई अपेक्षा होती ही नहीं। Microsoft कहता है कि bit का कोई मतलब हो, इसके लिए IPsec चाहिए। उनका documentation साफ़ है कि क्योंकि client non-validating है और server पर टिका है, “IPsec is used to establish this trust relationship”। एक unauthenticated link पर आया AD bit उसका दावा है जो सबसे पहले वहाँ पहुँचा, जो ठीक वही हमला है जिसे रोकने के लिए यह पूरी तकनीक बनी है। तो सबसे बड़े installed base वाले desktop पर, box से निकालते ही: कोई validation नहीं, कोई AD आवश्यकता नहीं, और resolver तक कोई authenticated channel नहीं। सबसे बुनियादी जाँच सिर्फ़ बंद नहीं है। वह कभी बनाई ही नहीं गई।\nऔर आम बचाव, कि client operating systems बस इस तरह का काम नहीं करते, 2022 में मर गया। Apple ने उसी साल हर iPhone और Mac तक device-side validation पहुँचा दिया जिस साल Microsoft ने नहीं पहुँचाया। तुलना अब desktop बनाम server, या mobile बनाम fixed की नहीं रही। यह एक vendor है जिसने इसे बनाया, बनाम दूसरा जिसने नहीं बनाया।\nयह Linux पर इसी कमी से ज़्यादा मायने रखता है, इस वजह से कि असर किस पर पड़ता है। Linux server आम तौर पर कोई ऐसा व्यक्ति चलाता है जो आज दोपहर validation चालू कर सकता है और जानता है कि DS record क्या होता है। जो मशीनें किसी भी setting पर बिल्कुल validate नहीं कर सकतीं, वे उन संस्थाओं में मेज़ों पर रखी हैं जिनके zones ऊपर की tables में unsigned हैं। systemd-resolved यह क्षमता बंद करके भेजता है, जो एक ऐसा फ़ैसला है जिसे आप एक line में पलट सकते हैं।12 Fisher-Price OS (Windows) यह क्षमता ही नहीं भेजता।\nवह सेवा जो DNS के सहारे टिकी है अब तक सब कुछ public internet के नाम थे। वही छेद इमारत के अंदर भी है, और वहाँ वह पूरा बोझ उठा रहा है।\nActive Directory में किसी चीज़ का कोई तय पता नहीं होता। domain से जुड़ी मशीन नहीं जानती कि उसका domain controller कहाँ रहता है, तो वह DNS से पूछती है। locator प्रक्रिया controllers के लिए _ldap._tcp.dc._msdcs.\u0026lt;domain\u0026gt; और KDC के लिए _kerberos._tcp query करती है, और जो भी लौटता है, उसी के ख़िलाफ़ वह authenticate करने जाती है।13\ndig +short _ldap._tcp.dc._msdcs.corp.example SRV वह जवाब जाली बनाइए और मशीन अपना authentication ट्रैफ़िक आपके चुने host तक ले जाती है। सीधी बात कीजिए कि यह क्या है और क्या नहीं: Kerberos किसी ऐसे धोखेबाज़ को ticket नहीं देगा जिसके पास keys नहीं, तो यह अपने आप में domain takeover नहीं है। यह रास्ते में एक जगह है, और दिलचस्प हमले इसी से बनते हैं। NTLM पर fallback के लिए मजबूर कीजिए और उसे relay कीजिए। उस ट्रैफ़िक के बीच बैठिए जिसे controller के पास जाना था। या पूरी जायदाद को कहीं नहीं की तरफ़ मोड़ दीजिए और logons रुकते देखिए।\nजाली locator record domain नहीं सौंपता, वह हमलावर को रास्ते में बिठा देता है मेरा DOMAIN CONTROLLER कहाँ है? जवाब बस एक DNS RECORD है Unsigned `_msdcs` zone member server _ldap._tcp.dc SRV पहला जवाब जीतता है उनका चुना host अब रास्ते में NTLM fallback, relay, या कोई logon नहीं Kerberos धोखेबाज़ को tickets नहीं देगा, तो यह domain takeover नहीं है। यह एक जगह है। Signed zone, validating client member server signature जाँचता है जालसाज़ी फेंकी गई आपका controller signed जवाब किसी के authenticate करने से पहले ही ठुकराया गया। Windows Server यह zone sign कर सकता है, और 2012 से कर सकता है। इसे पढ़ने वाला client अब भी validate नहीं कर सकता। Domain takeover नहीं। रास्ते में एक जगह, जिस पर बाक़ी सब बनाया जाता है Group Policy, logon scripts, mapped drives और logon के बाद का हर भरोसा, सब इसी तरह ढूँढे जाते हैं। यह नामों का सबसे क़ीमती समूह है जो ज़्यादातर संस्थाओं के पास है, और यह unsigned पड़ा है।\nMicrosoft ने इलाज का server वाला आधा हिस्सा बनाया, और अच्छा बनाया। AD-integrated zone sign हो सकता है, dynamic zones की online signing Windows Server 2012 में आई, और क्योंकि zone directory में रहता है, private signing keys ख़ुद AD replication के ज़रिए दूसरे DNS servers तक replicate होती हैं।14 DNSSEC का सचमुच अटपटा हिस्सा, keys को उन मशीनों तक पहुँचाना जिन्हें उनकी ज़रूरत है, यहाँ चौदह साल पहले उसी चीज़ से हल हो गया जिसके ज़रिए zone पहले से replicate हो रहा था।\nफिर यह उन्हीं दो जगहों पर रुक जाता है जहाँ बाक़ी सब:\nदो हिस्से Microsoft ने क्या भेजा Box से निकालते ही आपको क्या मिलता है _msdcs zone को sign करना AD-integrated dynamic zones की online signing, keys ख़ुद AD से replicate कुछ नहीं, जब तक कोई administrator उसे sign न करे Signature जाँचना पिछले खंड वाला non-validating client एक policy-table नियम और IPsec, वरना bit का कोई मतलब नहीं तो वह अंदरूनी zone जो तय करता है कि कौन सी मशीन आपका domain controller बनेगी, ज़्यादातर जायदादों में उतना ही unsigned है जितना public वाला। फ़र्क़ यह है कि कोई बाहरी इसे गिन नहीं सकता, इसलिए इस लेख में किसी को शर्मिंदा करने वाली कोई table नहीं है। मान लेने से पहले जाकर अपना देखिए।\nOperating System को यह करना चाहिए, और यह चालू होना चाहिए जो मुझे इस हिस्से पर लाता है जिस पर मैं गिनती नहीं, बहस करना चाहता हूँ।\nDNS जवाब को validate करना operating system का काम है। यह उसी श्रेणी का काम है जैसे घड़ी सही रखना, भरोसेमंद certificates का भंडार रखना और एक TLS stack होना, और उन्हीं वजहों से: हर application को इसकी ज़रूरत है, लगभग किसी को इसे ख़ुद नहीं लिखना चाहिए, और जाँच एक बार, ऐसी जगह होनी चाहिए जहाँ वह ठीक से हो सके। certificates के लिए यह बहस हमने बहुत पहले निपटा दी। कोई भी mail client, root CAs के बारे में अपनी निजी राय के साथ नहीं भेजता।\nऊपर के चार platforms में से तीन यह पहले से कर सकते हैं। उनमें से एक भी box से निकालते ही यह नहीं करता:\n$ grep DNSSEC= /usr/lib/systemd/resolved.conf # Fedora 44, systemd 259.9 #DNSSEC=no वह compiled-in default है, comment करके लिखा हुआ ताकि administrator देख सके कि वह क्या है। systemd का अपना manual अलग राय रखता है, आम तौर पर allow-downgrade की और जहाँ upstream पर भरोसा किया जा सके वहाँ true की सिफ़ारिश करता है।15 code आता है, root trust anchor आता है, और documentation आता है जो इसे चालू करने की सिफ़ारिश करता है। default फिर भी ना कहता है।\nPlatform Signature जाँचे जाने से पहले किसे कुछ करना पड़ता है systemd-resolved एक administrator को, एक बार, एक drop-in file में macOS 13 और बाद के, iOS 16 और बाद के हर एक application के लेखक को Android हर application के लेखक को, third-party library के साथ Windows कोई नहीं कर सकता पूरी समस्या वही कॉलम है। एक आवश्यकता एक लीवर है, और ऊपर की .bank गिनती दिखाती है कि वह क्या करता है। default वही लीवर है जिसमें किसी को कुछ लागू नहीं करवाना पड़ता, क्योंकि वह हर उस व्यक्ति के लिए नतीजा तय करता है जो config file कभी नहीं खोलता, और वह लगभग हर कोई है। वैकल्पिक ने हमें सरकार में 1.63% और बैंकिंग में 13% दिया। लोग उस security को नहीं चुनते जो उन्हें दिखती नहीं, और तकनीक के बारे में सही होने से यह कभी एक बार भी नहीं बदला।\nईमानदार आपत्ति यह है कि default रूप से validate करने पर users तब टूटते हैं जब zone नहीं, upstream resolver ख़राब हो। allow-downgrade इसी के लिए है, और यह एक असली समझौता है, मुफ़्त नहीं, क्योंकि downgrade कुछ ऐसा है जिसे हमलावर जानबूझकर भड़का सकता है। फिर भी, सपाट no की जगह allow-downgrade भेजना बहुत बड़ा सुधार होगा, और यह टूटन को वहाँ रखेगा जहाँ वह होनी चाहिए, उस पर जो 2026 में भी ऐसा resolver चला रहा है जो DNSSEC नहीं सँभाल सकता।\nValidation चालू करना, और कौन सा हिस्सा Fedora का है आगे जो है उसका लगभग सब कुछ Fedora का नहीं, systemd का है, और Debian, Ubuntu या Arch पर वैसे ही चलता है। यहाँ दो चीज़ें सचमुच distribution की हैं:\nUpstream systemd Fedora 44, जैसा install हुआ Compiled default-dnssec allow-downgrade no मुख्य configuration file /usr/lib/systemd/resolved.conf, हर default संदर्भ के लिए comment किया हुआ साथ में /etc/systemd/resolved.conf भी भेजता है जिसमें Cache=yes है, जो उसकी जगह ले लेता है Upstream, meson_options.txt में allow-downgrade चुनता है, जो समझौते वाली setting है, बहादुरी वाली नहीं।16 Fedora इसे no पर compile करता है और फिर एक दूसरी मुख्य configuration file भेजता है, और क्योंकि सिर्फ़ पहली मिली file इस्तेमाल होती है, जो file defaults का दस्तावेज़ है वह अब लागू होने वाली नहीं रही।15 तो इनमें से किसी को edit मत कीजिए। vendor वाली copy package की है और एक update आपका बदलाव सीधे आपको लौटा देगा; /etc वाली copy एक ऐसी file है जिसकी बाक़ी lines चुपचाप ग़ायब हैं।\nइसके बजाय drop-in इस्तेमाल कीजिए, जो ऊपर का block करता है। यह जो भी मुख्य file जीती उसे override करता है, package updates से बच जाता है, और उसमें सिर्फ़ वही होता है जो आपने बदला। नतीजा systemd-analyze cat-config systemd/resolved.conf से जाँचिए, जो हर file को लागू होने के क्रम में छापता है और तय कर देता है कि असल में क्या जीता।\nतीन settings, और आख़िरी दो के बीच का चुनाव असली है:\nDNSSEC= यह क्या करता है आपको क्या क़ीमत चुकानी पड़ती है no कुछ validate नहीं करता, और upstream का फ़ैसला भी फेंक देता है जालसाज़ी चुपचाप पहुँचती है, जैसे आज पहुँचती है allow-downgrade validate करता है, और upstream न सँभाल पाए तो पीछे हट जाता है हमलावर जानबूझकर पीछे हटना भड़का सकता है yes validate करता है, बस, कोई वापसी नहीं जिस दिन upstream टूटे, आपके नाम उसके साथ जाते हैं allow-downgrade से शुरू कीजिए, क्योंकि तब ख़राब resolver की आपको कोई क़ीमत नहीं चुकानी पड़ती। yes पर तब जाइए जब resolvectl status पंद्रह दिन तक supported कह चुका हो और आप जानते हों कि आपका upstream असल में क्या है। Fedora के अलावा हर जगह का distribution-वार विवरण resolved वाले लेख में है।12\nतो लोगों को असल में क्या रोक रहा है ठीक है। आँकड़े आँकड़े हैं। क्यों?\nचार वजहें दी जाती हैं, और सब बकवास नहीं हैं।\nवजह इसमें कितना सच है Key management कठिन है सच था। अब ज़्यादातर DNS provider ने automate कर दिया है यह आपका डोमेन internet से हटा सकता है सच, और असली वजह यही है Registrar और provider का support अधूरा है ज़्यादातर हल हो चुका, और commit करने से पहले जाँचना आसान है कोई दिखने वाला फ़ायदा नहीं, compliance का कोई डंडा नहीं सच, और शायद निर्णायक Key management एक असली बाधा थी और ज़्यादातर अब नहीं है। sign करने का मतलब होता था अपने key ceremonies ख़ुद चलाना, signatures expire होने से पहले दोबारा sign करना याद रखना, और ऐसे schedule पर keys हाथ से बदलना जिसका हिसाब आपको ख़ुद रखना पड़ता था। ज़्यादातर managed platforms पर अब वह काम DNS provider करता है, और signing एक toggle है। यह कुछ नहीं नहीं है, पर अब यह एक project नहीं रहा।\nनाकामी का तरीक़ा ईमानदार आपत्ति है, और चारों में यही अकेली है जिससे मुझे सचमुच हमदर्दी है। DNSSEC ग़लत कीजिए और आपका डोमेन धीमा नहीं होता, ग़ायब हो जाता है। हर validating resolver आपके records ठुकरा देता है, जो उसे करना ही चाहिए, और जो लोग आप तक नहीं पहुँच पाते, उन्हें आप वजह नहीं बता सकते, क्योंकि बताने के लिए DNS चाहिए।\nतीन चीज़ें इसे आम outage से बदतर बनाती हैं:\nयह घड़ी पर नाकाम होता है, बदलाव पर नहीं। Signatures की एक expiry होती है। ऐसा zone जिसे मंगलवार से किसी ने छुआ नहीं, रविवार तक जा सकता है क्योंकि दोबारा sign करने वाला job चुपचाप चलना बंद हो गया। यह कुछ लोगों के लिए नाकाम होता है, दूसरों के लिए नहीं। सिर्फ़ validating resolvers आपको ठुकराते हैं। आपकी अपनी monitoring, अगर वह validate नहीं करती, site को पूरी तरह स्वस्थ बताएगी, जबकि internet का बढ़ता हिस्सा उस तक नहीं पहुँच पाता। यह उसी परत पर नाकाम होता है जिससे आप चीज़ें ठीक करते हैं। Remote access, आपका status page और आपका अपना email, सब शायद उसी नाम के नीचे हों जो अभी ग़ायब हुआ। वह डर तर्कसंगत है, उसने बड़े operators को हवा से उतारा है, और DNSSEC के पक्ष में किसी भी ईमानदार दलील को उसे झटककर नहीं, उसके साथ बैठकर बात करनी होगी।\nलेकिन उसका आकार देखिए: यह तकनीक का डर नहीं, एक ऐसे operational अनुशासन का डर है जो अभी आपके पास नहीं है।\nUnsigned चुपचाप आपके users पर नाकाम होता है। ग़लत configured ज़ोर से आप पर यह दो तरह से बिगड़ता है, और बात सिर्फ़ एक की होती है Unsigned जाली जवाब पर बस भरोसा कर लिया जाता है। कुछ log नहीं होता। कोई alert नहीं। हमलावर के TTL जितना चलता है। आपकी monitoring हरी रहती है। क़ीमत उस पर पड़ती है जिसने जवाब पर भरोसा किया। आप पर नहीं। Signed, और टूटा हुआ डोमेन पूरी तरह ग़ायब हो जाता है। घड़ी पर नाकाम, बदलाव पर नहीं। सिर्फ़ validating resolvers के लिए, तो आपकी अपनी जाँचें ठीक दिख सकती हैं। क़ीमत आप पर पड़ती है, ज़ोर से, incident पर आपके नाम के साथ। इसीलिए दूसरे को business case मिलता है और पहले को नहीं। जो हमला कभी पकड़ा ही नहीं गया, उसका दोष किसी पर नहीं आता। Unsigned चुपचाप नाकाम होता है, आपके users पर। ग़लत configured ज़ोर से नाकाम होता है, आप पर और देखिए कि हर कॉलम में क़ीमत कौन चुकाता है। एक unsigned zone जो जाली बना, आपके customers को चुपचाप चोट पहुँचाता है, और कोई कभी incident दर्ज नहीं करता क्योंकि किसी को कभी पता नहीं चलता। एक signed zone जो expire हुआ, आपको चोट पहुँचाता है, तुरंत, सबके सामने, postmortem पर आपके नाम के साथ। दोनों नाकामियाँ हैं। सिर्फ़ एक किसी के objectives में दिखती है।\nCertificates की भी यही समस्या थी और उन्होंने इसे दो बार हल किया: पहले नाकामी को दिखने लायक़ बनाया गया, फिर उसे automate किया गया। browser की चेतावनी ने expired certificate को हर किसी की समस्या बना दिया, monitoring पीछे आई, और फिर Let\u0026rsquo;s Encrypt ने renewal को ऐसी चीज़ बना दिया जो रात के तीन बजे एक cron job कर देता है। इनमें से किसी ने सिद्धांत में certificates को आसान नहीं बनाया। इसने उन्हें भूलना कठिन बना दिया।\nProvider support मान लेने के बजाय दस मिनट जाँचने लायक़ है। कुछ registrars अब भी DS प्रकाशित करने को एक support ticket बनाते हैं। बहुत सारे नहीं बनाते।\nऔर आख़िरी वजह असली जवाब है, जो .bank registry इस लेख में ऊपर पहले ही साबित कर चुकी है। DNSSEC के लिए browser का कोई ताला नहीं है। किसी customer ने कभी किसी बैंक को इसलिए नहीं चुना कि उसका zone signed था, कोई auditor आपको इसके लिए फ़ेल नहीं करता, और UK में कोई आम नियम इसकी माँग नहीं करता। जब यह काम करता है तो फ़ायदा पूरी तरह अदृश्य है, ग़लत होने की क़ीमत आपके नाम वाला एक outage है, और वह outage ढोने वाला व्यक्ति वह नहीं जिसे श्रेय मिलता।\nउन्हीं संस्थाओं के सामने एक आवश्यकता और एक सालाना जाँच रख दीजिए और पालन 13% से हर एक तक पहुँच जाता है। उन दो संख्याओं के बीच तकनीक के बारे में कुछ नहीं बदला। बजट, suppliers या हुनर के बारे में भी कुछ नहीं बदला। अकेला चर यह था कि कोई देखने वाला था या नहीं।\nइन प्रोत्साहनों के रहते चौंकाने वाली बात यह नहीं कि सरकारी डोमेन का 1.63% signed है। चौंकाने वाली बात यह है कि उनमें से उनतालीस signed हैं।\nख़ुद को हवा से उतारे बिना इसे चालू करना पूरा जोखिम एक जगह बैठा है, तो मेहनत वहीं लगाइए। Signature expiry वह नाकामी है जो बिना किसी के कुछ छुए आ जाती है, तो उस पर alarm लगाइए:\ndig +dnssec damiendye.uk SOA | awk \u0026#39;/RRSIG/ {print \u0026#34;sig expires\u0026#34;, $9}\u0026#39; इसे certificate की तरह बरतिए। तारीख़ पर नज़र रखिए, उससे काफ़ी पहले alarm लगाइए, और renewal को automatic बनाइए ताकि alarm एक workflow नहीं, एक आख़िरी सहारा हो।\nफिर इसे किसी शांत समय पर, किसी ऐसी चीज़ पर चालू कीजिए जो आपका मुख्य डोमेन न हो, और जो मायने रखता है उसे करने से पहले पंद्रह दिन छोड़ दीजिए। अगर आपका DNS किसी managed platform पर है, तो signing ख़ुद शायद एक toggle है, और अकेला सचमुच हाथ वाला क़दम अपने registrar के पास DS दर्ज करवाना है।\nक्या यह IPv6 वाली ही नाकामी है? यह स्वाभाविक तुलना है, तो मैंने दोनों standards को उन्हीं आबादियों में, उसी दिन नापा। वही संस्थाएँ, वही लोग, दो फ़ैसले।\nn DNSSEC signed IPv6 पहुँच योग्य UK के बैंक और building societies 98 13.3% 36.7% Linux और BSD distributions 96 19.8% 67.7% हर लाइव gov.uk डोमेन 2,380 1.6% 31.2% कठिन migration आसान से आगे है, तीन से एक और उन्नीस से एक वही संस्थाएँ, दोनों STANDARDS, वही दिन DNSSEC signed IPv6 पर पहुँच योग्य UK के बैंक 98 जाँचे 13.3% 36.7% Linux और BSD 96 जाँचे 19.8% 67.7% हर लाइव gov.uk 2,380 डोमेन 1.6% 31.2% IPv6 हर router और host को छूता है। DNSSEC आपके registrar के यहाँ एक record है। वही संस्थाएँ, दोनों standards, उसी दिन नापे गए सरकार में, उन्हीं डोमेन पर, उन्नीस गुना आगे।\nअब इस पर ठहरिए कि कौन क्या है। IPv6 हर router, हर host और हर application को छूता है, और सालों तक साथ-साथ dual stack चलाना चाहता है। DNSSEC signing एक toggle है और आपके registrar के यहाँ चिपकाया गया एक record।\nमैंने जहाँ भी देखा, बहुत कठिन काम आसान काम से आगे निकल रहा है। जो उस आरामदेह व्याख्या को ख़ारिज कर देता है कि infrastructure standards बस ऐसे ही चलते हैं, धीरे-धीरे और बेमन से। DNSSEC धीरे नहीं चल रहा। यह चल ही नहीं रहा।\nएक फ़र्क़ सिर्फ़ DNSSEC का है। IPv6 लगाइए और आपको कुछ वापस मिलता है: पहुँच, ख़रीदने को कोई carrier-grade NAT नहीं। अपना zone sign कीजिए और आपको निजी तौर पर कुछ नहीं मिलता। सुरक्षा आपके users पर उतरती है, और सिर्फ़ उन पर जो किसी validating resolver के पीछे हैं। आप ऐसे लोगों की ख़ातिर एक स्थायी outage जोखिम उठाते हैं जिनसे आप कभी नहीं मिलेंगे, और board के सामने इसे रखना इस लेख की किसी भी तकनीकी बाधा से कठिन है।\nइस दलील का IPv6 वाला आधा हिस्सा मैं कहीं और लिख चुका हूँ और यहाँ उसे नहीं दोहराऊँगा।17\nक्या बात यह है कि हम अब भी DNS को नहीं समझते? Mockapetris के नवंबर 1983 में इसे लिखने के बाद बयालीस साल।18 root sign होने के बाद सोलह।\nमुझे लगता है समझ की समस्या असली है, और मुझे लगता है यह इससे ज़्यादा ख़ास है कि लोग नहीं जानते DNS कैसे काम करता है। बहुत से क़ाबिल engineers recursion, delegation और caching का बिल्कुल ठीक वर्णन कर सकते हैं। जो ग़ायब है, वह एक क़दम आगे है, और वही क़दम मायने रखता है।\nलगभग किसी ने यह आत्मसात नहीं किया कि DNS एक authorisation system है।\nइसे plumbing की तरह बरता जाता है। एक lookup table। कुछ ऐसा जो नामों को नंबरों में बदलता है और नेटवर्क चलाने वाले का है, दिमाग़ में DHCP के बग़ल में रखा हुआ। और यह ढाँचा इस तरह ग़लत है जो चुपचाप बहुत कुछ तय कर देता है, क्योंकि व्यवहार में DNS जवाब ही तय करता है कि आपका ट्रैफ़िक किस मशीन पर जाएगा, आपके updates किस server से आएँगे, और certificate authority किस host को आपका मानती है। जिसके हाथ में जवाब है, उसके हाथ में तीनों हैं।\nइस ग़लतफ़हमी को आप इस पैटर्न में देख सकते हैं कि किसने sign किया है। बजट नहीं, हुनर भी नहीं, और एक बार इसे पंक्ति में रख दें तो इसे इसके सिवा कुछ पढ़ना कठिन है कि यह इस बात का पैटर्न है कि उनमें से हर एक DNS को क्या समझता है:\nकिसने sign किया है उनके लिए DNS क्या है Registries और TLD operators, 100% gTLDs ख़ुद उत्पाद एक ख़ुफ़िया सेवा एक attack surface, क्योंकि उनके threat model में जालसाज़ी है नौ parish council उनके host का पेश किया एक toggle, जिसे किसी ने दबा दिया एक DNS provider के अपने customers विरासत में मिला एक default किसने नहीं किया बैंक, विभाग, vendors, CAs plumbing, और दिलचस्प समस्याओं से एक स्तर नीचे जो लोग DNS को अपने आप में एक चीज़ के रूप में सबसे क़रीब से देखते हैं, उन सबने sign किया है। जो इसे एक utility की तरह इस्तेमाल करते हैं, उन्होंने लगभग बिना अपवाद नहीं किया, चाहे उनके पास कितने भी संसाधन हों और वे ख़ुद को कितना भी security के प्रति सजग मानते हों। GCHQ ने sign नहीं किया। नौ में से आठ certificate authorities ने sign नहीं किया। ये ऐसी संस्थाएँ नहीं हैं जिनके पास होशियार लोगों या threat models की कमी हो।\nयही वजह है कि Kaminsky पर 2008 का जवाब अंदाज़े को कठिन बनाना था, न कि उस चीज़ को लगाना पूरा करना जो अंदाज़े को बेमानी बना देती है। अंदाज़े को कठिन बनाना plumbing वाला इलाज है, और industry ने DNS को plumbing में ही दर्ज कर रखा था।\nएक पूरी पीढ़ी ने DNS को एक directory के रूप में सीखा, और उस प्रविष्टि को कभी नहीं बदला जब वह चुपचाप वह चीज़ बन गई जो तय करती है कि आप किससे बात कर रहे हैं।\nहमने इसे बनाया, और फिर इसे छोड़ दिया Registries, operators और standards वाले लोगों ने कठिन हिस्सा किया। उन्होंने इसे लिखा, एक दशक तक IETF में बहस करके इसे पार लगाया, गवाहों के साथ एक समारोह में root sign किया, और generic top level domains का 100% sign करवाया। यह सामूहिक engineering का एक असली नमूना है और यह पूरा हो चुका है।\nऔर फिर हम बाक़ी लोगों ने अपना हिस्सा नहीं किया, क्योंकि हमारा हिस्सा उबाऊ है, अदृश्य है, सारा निजी नुक़सान ढोता है और कोई श्रेय नहीं, और कोई जाँच नहीं रहा।\nयही हर उस standard का आकार है जिसे कोई लागू नहीं करवाता: क़ीमत अकेले चुकाई जाती है, और फ़ायदा तभी दिखता है जब काफ़ी दूसरों ने भी चुका दी हो। तो registries ने चुकाई, और जो लोग इसे चुकाने के बारे में guidance प्रकाशित करते हैं, उन्होंने नहीं चुकाई।\nबस यहाँ का काम उनमें से लगभग किसी से भी छोटा था। chain पहले से बनी थी, और किसी और ने उसकी क़ीमत चुकाई थी। बचा था तो सिर्फ़ एक record।\nऔर अगर यह वह हिस्सा है जो हमें दिखता है एक आख़िरी विचार, और मैं साफ़ कहना चाहता हूँ कि यह नाप नहीं, एक अनुमान है, क्योंकि इस लेख में बाक़ी सब गिना हुआ है और यह नहीं।\nDNSSEC आँकने के लिए शायद सबसे आसान security control है। इसकी कोई क़ीमत नहीं, काम एक दोपहर का है, standard बीस साल से पूरा है, और कोई भी इसे बाहर से, एक command में, बिना इजाज़त माँगे जाँच सकता है। कोई audit नहीं, कोई प्रश्नावली नहीं, कोई NDA नहीं। एक dig।\nतो 1.6% आपको उन controls के बारे में क्या बताता है जिन्हें आप यहाँ बाहर से नहीं देख सकते?\nControl क्या कोई बाहरी जाँच सकता है पैसा लगता है काम करते समय दिखता है आपके registrar के यहाँ एक DS record हाँ, एक command नहीं नहीं ज़रूरी accounts पर MFA नहीं हाँ नहीं इस साल restore किए गए backups, सिर्फ़ लिए गए नहीं नहीं हाँ नहीं Network segmentation नहीं हाँ नहीं पहली पंक्ति के नीचे की हर पंक्ति zone sign करने से कठिन है, असली पैसा लगता है, किसी को उसका ज़िम्मा लेना पड़ता है, और उसमें ठीक वही गुण है जिसने DNSSEC को डुबोया: काम करते समय अदृश्य, और बाहर से कोई जाँच नहीं रहा। ऊपर की पंक्ति को बाक़ियों से अलग करने वाली अकेली चीज़ यह है कि आप इसे जाँच सकते हैं, मुफ़्त में, किसी के भी बारे में, अभी।\nअगर किसी संस्था ने वह मुफ़्त काम नहीं किया जिसमें एक दोपहर लगती है और जिसे कोई अजनबी एक command में verify कर सकता है, तो मैं यह मानने को तैयार नहीं कि उसने वे महँगे काम किए हैं जिनमें एक पूरा programme लगता है और जिन्हें सिर्फ़ वही verify कर सकता है जिसे वे अंदर आने दें।\nअब, स्वाभाविक क़दम यह है कि इसे breach के रिकॉर्ड के ख़िलाफ़ परखा जाए, और मैंने कोशिश की। बड़े दर्ज incidents वाली 23 UK संस्थाओं में से 22 unsigned हैं।\nवह संख्या कुछ साबित नहीं करती और मैं इसका उल्टा दिखावा नहीं करने वाला। 1.6% की आधार दर पर, 23 की सूची में एक signed संस्था ठीक वही है जो संयोग से अपेक्षित है। उससे बुरा, signed समूह में नौ parish council और तीन national parks हैं, जबकि unsigned समूह में हर बड़ा विभाग और हर बड़ा शहर, तो आकार ही दोनों बातें तय करता है, कि किस पर हमला होता है और कौन ख़बरों में आता है। दोनों समूहों के बीच breach दरों की कोई भी तुलना यह नापेगी कि संस्था कितनी बड़ी है, यह नहीं कि उसने sign किया या नहीं।\nतो नहीं, मैं आपको यह नहीं दिखा सकता कि signed संस्थाओं में breach कम होते हैं। कोई नहीं दिखा सकता, ऐसे data से नहीं जो किसी को मिल सके, और जो आपको कुछ और बता रहा है वह मज़ाक़ कर रहा है।\nजिन संस्थाओं पर हमला हुआ, उन्होंने लिखा कि क्या नाकाम हुआ आपको मेरे अनुमान की ज़रूरत नहीं, क्योंकि उन्होंने ख़ुद इसे प्रकाशित किया, और जो नाकाम हुआ वह ऊपर की सूची है।\nBritish Library उनमें सबसे अच्छी है, क्योंकि 2023 के ransomware हमले के बाद उन्होंने इसे अपनी मर्ज़ी से और विस्तार से लिखा। उनकी अपनी समीक्षा कारणों के नाम लेती है: प्रवेश सबसे संभवतः एक Terminal Services server पर एक third-party account के ज़रिए बिना multi-factor authentication के, फिर पुराने infrastructure और सीमित network segmentation ने हमलावरों को पूरी जायदाद में घूमने दिया, और third-party access की बढ़ती जटिलता को 2022 में अंदरूनी तौर पर जोखिम के रूप में दर्ज किया गया था और एक साल बाद भी वह वहीं थी।19 ICO इन्हीं निष्कर्षों पर पहुँचा।20\nतो ऊपर की table की तीन पंक्तियाँ, मेरे द्वारा बाहर से अनुमान नहीं, ख़ुद संस्था द्वारा अंदर से पुष्ट।\nऔर इससे पहले कि कोई इसे डंडे की तरह इस्तेमाल करे, British Library इसके उल्टे की हक़दार है, और मैं ज़ोर देकर बताऊँगा कि क्यों।\nवे खुले थे। लगभग कोई और नहीं होता। उन पर इसका एक शब्द भी लिखने की कोई बाध्यता नहीं थी। किसी incident के बाद का आम तरीक़ा है जितना क़ानून इजाज़त दे उतना कम कहना, उसे एक communications team से गुज़ारना, कुछ भी ख़ास पुष्ट करने से इनकार करना, और ख़बरों के आगे बढ़ने का इंतज़ार करना। ऊपर के unsigned कॉलमों की ज़्यादातर संस्थाओं ने अपनी बारी आने पर यही किया है, और इसीलिए यह खंड लिखना ही एक संस्था के अलग बर्ताव करने के फ़ैसले पर टिका है।\nइसके बजाय उन्होंने अठारह पन्नों की एक समीक्षा प्रकाशित की जो सबके सामने उनकी अपनी नाकामियों के नाम लेती है, ताकि दूसरी संस्थाएँ उनसे सीख सकें। यही वह बर्ताव है जो आप इस लेख की हर संस्था से चाहेंगे और लगभग किसी से नहीं पाते। मैं आपको यह दिखा पा रहा हूँ कि breach झेलने वाली संस्था के अंदर असल में क्या नाकाम होता है, इसकी वजह यह है कि British Library ने आपको बताने का फ़ैसला किया।\nऔर बाक़ियों के चुप रहने की एक दूसरी वजह है, जो communications की रणनीति से बदतर है। उनमें से कुछ अब हैं ही नहीं।\nKNP Logistics, Knights of Old के नाम से 1865 से माल ढो रही थी। जून 2023 में Akira group अंदर घुसा, कंपनी को encrypt किया और लगभग पचास लाख pound माँगे। सितंबर तक KNP group दिवालिया हो चुका था और 730 लोग बेरोज़गार थे।21 एक सौ अट्ठावन साल, चौदह हफ़्तों में ख़त्म, और वहाँ कोई आपके लिए सबक़ नहीं लिख रहा।\nतो जब ऊपर के unsigned कॉलम शांत दिखते हैं, वह शांति तीन अलग चीज़ों से बनी है: वे संस्थाएँ जिन पर अभी हमला नहीं हुआ, वे जिन पर हमला हुआ और जिन्होंने उतना कम कहा जितना क़ानून इजाज़त देता है, और वे जिन पर हमला हुआ और जो चली गईं। सिर्फ़ पहले समूह के पास कुछ करने का समय बचा है।\nजो अगले हिस्से को सस्ता वार नहीं, मेरी अपनी दलील की ईमानदार परीक्षा बनाता है। मैंने उनका zone जाँचा:\n$ dig +short bl.uk DS (nothing) $ dig +short bl.uk DNSKEY (nothing) bl.uk unsigned है। britishlibrary.co.uk भी। एक ऐसे ransomware हमले के दो साल बाद जिसने संस्था को महीनों तक बंद रखा, एक सार्वजनिक समीक्षा के बाद, एक ICO निष्कर्ष के बाद, और security पर ध्यान के उस सबसे गहन दौर के बाद जो किसी संस्था को कभी मिलता है, वह मुफ़्त control जिसमें एक दोपहर लगती है और जिसे कोई अजनबी एक command में verify कर सकता है, अब भी नहीं हुआ।\nमैं इसे लापरवाही नहीं पढ़ता, और मुझे नहीं लगता कि यह उन्हें उन unsigned संस्थाओं से बुरा बनाता है जिन्होंने कुछ भी प्रकाशित नहीं किया। मैं इसे इस लेख में उस बात का सबसे मज़बूत सबूत पढ़ता हूँ जिसके बारे में यह पूरी चीज़ रही है। अगर DNSSEC यहाँ नहीं होता, एक ऐसी संस्था में जो आग से गुज़री है, सबक़ लिख चुकी है और जिसकी regulator जाँच कर चुका है, तो यह इसलिए नहीं छूट रहा कि लोग लापरवाह हैं। यह इसलिए छूटता है कि कोई चीज़ और कोई व्यक्ति इसे कभी सूची में डालता ही नहीं।\nयही दलील का ईमानदार रूप है। unsigned zones breach का कारण बनते हैं नहीं, जो साबित नहीं हो सकता और शायद ग़लत है। बल्कि: वे controls जिन्हें बाहर से कोई नहीं देख सकता, उन संस्थाओं के प्रकाशित सबूतों के अनुसार जो इससे गुज़री हैं, उतने ही उपेक्षित हैं जितना वह एक control जिसे बाहर से हर कोई देख सकता है। DNSSEC कारण नहीं है। यह वह नमूना है जो आपको लेने की इजाज़त है।\nइसीलिए यह नाप लेने लायक़ है। इसलिए नहीं कि एक unsigned zone अपने आप में दुनिया का अंत है, बल्कि इसलिए कि यह उन बहुत कम security गुणों में से है जिन्हें एक बाहरी ईमानदारी से, मुफ़्त में, किसी के भी बारे में, अंदर आने दिए बिना जाँच सकता है। इसे फ़ैसला नहीं, smoke alarm मानिए, और फिर जो भी इसे बजाए, उससे कठिन सवाल पूछने जाइए।\nवह अकेला हिस्सा जो आपके हाथ में है जो हम में से किसी के भी हाथ के अकेले हिस्से को छोड़ता है। आपका अपना zone। NCSC का नहीं, Microsoft का नहीं, आपके बैंक का नहीं।\nजाइए और अपने parent से पूछिए कि क्या वह आपकी गवाही देता है:\ndig +short yourdomain.uk DS अगर वह ख़ाली लौटे, तो आप signed नहीं हैं, और 2026 में ज़्यादातर managed DNS पर इलाज एक toggle और आपके registrar के यहाँ एक DS record है। इसे चालू कीजिए, फिर expiry पर उसी तरह नज़र रखिए जैसे आप पहले से अपने certificates पर रखते हैं, क्योंकि पूरी चीज़ को असल में वही अनुशासन चाहिए।\nपूरा काम बस इतना है। एक record, और आपकी monitoring में एक तारीख़।\nतो कृपया, कम से कम यह एक कर दीजिए। इसलिए नहीं कि कोई regulator आ रहा है, क्योंकि आप में से ज़्यादातर के लिए कोई नहीं आ रहा, और इसलिए नहीं कि कोई आपको धन्यवाद देगा, क्योंकि कोई नहीं देगा। इसलिए कीजिए कि कोई नहीं आ रहा, और जो standard आप तब निभाते हैं जब कोई जाँच नहीं रहा, वही अकेली तरह का है जिसकी कभी कोई क़ीमत रही।\nउनतालीस parish clerks और एक जासूस ने कर लिया। उठिए और कर डालिए।\nRFC 4033 — “DNS Security Introduction and Requirements”, Arends et al., मार्च 2005। RFC 4034 और RFC 4035 के साथ मौजूदा DNSSEC specification।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIANA root trust anchors — IANA का प्रकाशित XML। पहले key digest पर validFrom=\u0026quot;2010-07-15\u0026quot; है, वह तारीख़ जब root sign हुआ; मौजूदा KSK, key tag 20326, पर validFrom=\u0026quot;2017-02-02\u0026quot; है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCERT VU#800113 — “Multiple DNS implementations vulnerable to cache poisoning”, Kaminsky तकनीक पर 2008 की advisory, और समन्वित source-port randomisation जवाब का स्रोत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe root zone file — 27 सितंबर 2026 को लिया गया, SOA serial 2026092701। इस लेख की गिनतियाँ सीधे उसी file के NS delegations और DS records को parse करके निकली हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nList of gov.uk domain names — सरकार का अपना रजिस्टर। प्रकाशित सबसे नई file 1 अक्टूबर 2016 की है और उसमें 3,004 second-level domains हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Security Response Center — Flame malware collision attack explained — “An attacker took advantage of the Terminal Services licensing system\u0026rsquo;s enrollment process for certificates that chained up to the Microsoft Root Authority which did not require internal access to Microsoft PKI”; जाली certificate “could be used to sign code that chained up to the Microsoft Root Authority and worked on all versions of Windows”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSentinelOne — Driving Through Defenses: targeted attacks leverage signed malicious Microsoft drivers, और Bitdefender\u0026rsquo;s FiveSys analysis — Windows Hardware Compatibility Program के ज़रिए सीधे Microsoft के जारी किए signatures वाले malicious kernel drivers, जिनमें वे drivers भी हैं जो बाद में ransomware हमलों में इस्तेमाल हुए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Security Response Center — Results of major technical investigations for Storm-0558 key acquisition — एक race condition के ज़रिए एक consumer signing key crash dump में लीक हुई, एक engineer का corporate account compromise होने के बाद ले ली गई, और ऐसे tokens जाली बनाने में इस्तेमाल हुई जिन्हें mail system ने ग़लती से enterprise accounts के लिए स्वीकार कर लिया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfTLD Registry Services security requirements — .bank और .insurance registry। “.BANK domain names must be signed with DNSSEC with strong cryptographic algorithms”, अनिवार्य TLS और email authentication के साथ, और हर registrant की सालाना दोबारा जाँच के साथ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nApple, WWDC 2022 session 10079, “Improve DNS security for apps and servers” — “iOS 16 and macOS Ventura now support client side DNSSEC validation”, जिसे URLSessionConfiguration, URLRequest या NWParameters पर requiresDNSSECValidation से हर session या हर request पर चुना जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Understanding DNSSEC in Windows — Windows DNS client “is non-validating, which means it does not perform DNSSEC validation and relies on its local DNS servers”; AD bit की अपेक्षा Name Resolution Policy Table से तय होती है, और DNS server के साथ “IPsec is used to establish this trust relationship”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nResolved: The Resolver You Are Already Running — systemd-resolved की नापी हुई स्थिति, जिसमें यह भी है कि हर मुख्यधारा distribution compile time पर DNSSEC=no क्यों भेजती है और इसे कैसे बदलें।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMS-ADTS: DNS-Based Discovery — domain controller ढूँढने के लिए Active Directory protocol specification, जिसमें वह _ldap._tcp.dc._msdcs SRV query भी है जो client किसी naming context के controllers ढूँढने के लिए भेजता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft Learn — Sign DNS zones with DNSSEC on Windows Server और What is DNSSEC on DNS Server in Windows Server? — zone signing, Windows Server 2008 R2 में आई पर dynamic updates पर रोक थी, और Windows Server 2012 ने dynamic zones की online signing जोड़ी। Active Directory integrated zone के लिए private signing keys, Active Directory replication के ज़रिए दूसरे primary DNS servers तक replicate होती हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5), Fedora 44 में आया systemd 259.9 — manual allow-downgrade की सिफ़ारिश करता है, और उन systems पर true की जहाँ upstream resolver पर भरोसा किया जा सके, जबकि /usr/lib/systemd/resolved.conf में packaged default DNSSEC=no है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd meson_options.txt — option('default-dnssec', type : 'combo', choices : ['yes', 'allow-downgrade', 'no'], value : 'allow-downgrade')। Upstream का चुना default allow-downgrade है; Fedora की vendor file में #DNSSEC=no वह है जो उस build ने इसकी जगह set किया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWe Never Ran Out Of Addresses — इस दलील का IPv6 संस्करण, जिसमें IPv6 allocations रखने वाली वे 463 UK संस्थाएँ शामिल हैं जो कोई IPv6 announce ही नहीं करतीं, और यह बात कि CGNAT के लिए purchase order होता है जबकि ठीक से करने के लिए कोई नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 882 — “Domain Names: Concepts and Facilities”, P. Mockapetris, नवंबर 1983। मूल specification, जिसकी जगह 1987 में RFC 1034 और RFC 1035 ने ली।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBritish Library, “Learning Lessons from the Cyber-Attack”, 8 मार्च 2024 — अक्टूबर 2023 के ransomware हमले की Library की अपनी समीक्षा, जो प्रवेश के लिए इस्तेमाल हुए account पर multi-factor authentication की कमी, पुराने infrastructure, सीमित network segmentation, और 2022 में जोखिम के रूप में दर्ज third-party access की जटिलता के नाम लेती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nICO statement on the British Library\u0026rsquo;s 2023 ransomware attack, अप्रैल 2025।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Record — UK logistics firm blames ransomware attack for insolvency, 730 redundancies — KNP Logistics Group, 158 साल पुरानी Knights of Old की मूल कंपनी, जिस पर जून 2023 में Akira ने हमला किया, जब बिना multi-factor authentication के एक कर्मचारी का password brute-force किया गया, और सितंबर तक दिवालिया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/dns/dnssec-the-root-is-signed-you-are-not/","summary":"DNSSEC का कठिन हिस्सा सालों पहले पूरा हो चुका है। 27 सितंबर 2026 को लाइव root zone से गिनने पर 1,438 में से 1,351 top level domain के पास DS record है, और 1,038 के 1,038 gTLD signed हैं। फिर यह एकदम रुक जाता है। आधिकारिक रजिस्टर के हर gov.uk डोमेन की गिनती में, जो अब भी resolve होते हैं उन 2,390 में से 39 signed निकले, जिनमें से नौ parish council हैं, जबकि HMRC, NHS, GCHQ और National Cyber Security Centre उनमें नहीं हैं। नौ में से एक certificate authority ने sign किया है। पाँच में से एक Linux या BSD distribution ने भी। windowsupdate.com पर कोई DS है ही नहीं। यह लेख बताता है कि एक जाली जवाब की असली क़ीमत क्या है, signing उसके बारे में क्या करती है, आम बहाने आँकड़ों के सामने क्यों नहीं टिकते, और क्या Mockapetris के बयालीस साल बाद असली समस्या यह है कि लगभग कोई नहीं समझता कि DNS असल में क्या वादा करता है।","title":"DNSSEC: आपके ट्रैफ़िक को जालसाज़ी से बचाना"},{"content":"आपकी मशीन पर इस समय एक DNS रिज़ॉल्वर चल रहा है। आपने उसे इंस्टॉल नहीं किया, शायद कभी कॉन्फ़िगर भी नहीं किया, और मशीन जो भी नाम lookup करती है उसका जवाब वही दे रहा है। Fedora, Ubuntu और ज़्यादातर डेस्कटॉप Linux पर यह systemd-resolved है, और सिस्टम इंस्टॉल होने के दिन से चुपचाप वहीं बैठा है।\nयह तीन काम कर सकता है जो रखने लायक हैं। यह कैश करता है, ताकि एक ही lookup दो बार नेटवर्क पार न करे। यह DNSSEC validate करता है, ताकि जाली जवाब पर भरोसा करने की जगह उसे ठुकरा दिया जाए। और यह DNS over TLS बोलता है, ताकि लोकल नेटवर्क आपका पूछा हर नाम न पढ़ सके।\nडिफ़ॉल्ट में यह इनमें से ठीक एक करता है। बाकी दो बंद हैं, और कुछ distribution पर वे compile time पर बंद किए जाते हैं, यानी जो सेटिंग आप बदलेंगे वह वह सेटिंग है ही नहीं जिसने फ़ैसला किया। जो validator कभी validate नहीं करता, वह न किसी काम का है न सजावट का।\nयह पोस्ट बताती है कि यह चीज़ असल में क्या करती है, जो systemd 259 वाले एक चालू Fedora 44 बॉक्स पर नापा गया, और बाकी दो चालू करने पर क्या बदलता है। इसमें यह भी है कि आपके distribution ने compile time पर आपके लिए क्या तय किया, और उसमें से कितना आप सीधे पलट सकते हैं।\nआपके Lookup का जवाब असल में कौन दे रहा है ईमानदार तस्वीर से शुरू करते हैं, क्योंकि “यह /etc/resolv.conf इस्तेमाल करता है” इन सिस्टम पर सालों से सच नहीं है।\nsystemd-resolved खुद को चार अलग तरीकों से उपलब्ध कराता है, और कोई प्रोग्राम कौन सा तरीका इस्तेमाल करता है उसी से तय होता है कि उसे क्या वापस मिलेगा।1 glibc वाला रास्ता nss-resolve है, जो /etc/nsswitch.conf से जुड़ता है। native रास्ते D-Bus और Varlink हैं, जो DNSSEC का फ़ैसला और interface scope साथ लाते हैं, जिन्हें getaddrinfo किसी तरह व्यक्त नहीं कर सकता। फिर stub listener, loopback पर एक असली DNS सर्वर, हर उस चीज़ के लिए जो raw DNS बोलती है और ऊपर वाले किसी तरीके के बारे में कुछ नहीं जानती।\nचार दरवाज़े, एक daemon।\nइस मशीन पर वह जोड़ ऐसा दिखता है:\n$ ls -l /etc/resolv.conf lrwxrwxrwx. 1 root root 39 May 30 13:56 /etc/resolv.conf -\u0026gt; ../run/systemd/resolve/stub-resolv.conf $ cat /etc/resolv.conf nameserver 127.0.0.53 options edns0 trust-ad search damiendye.uk $ grep ^hosts: /etc/nsswitch.conf hosts: files myhostname mdns4_minimal [NOTFOUND=return] resolve [!UNAVAIL=return] dns उस लाइन में resolve ही nss-resolve है। उसके बाद वाला dns पारंपरिक nss-dns है, जो fallback के तौर पर बैठा है और तभी चलता है जब resolved बिल्कुल चल ही न रहा हो।\nअंदर आने के चार रास्ते, एक daemon, और बाहर जाने से पहले routing का एक फ़ैसला प्रोग्राम कैसे पूछता है DAEMON क्या करता है कहाँ जाता है nss-resolve glibc, कोई फ़ैसला नहीं D-Bus, Varlink native, पूरा फ़ैसला 127.0.0.53 पूरा stub 127.0.0.54 proxy stub systemd-resolved 1. hosts और synthetic 2. कैश 3. DNSSEC validator 4. routing 5. transport proxy stub 2 और 3 छोड़ देता है 5355 पर LLMNR upstream DNS अंदर आने के चार रास्ते, एक daemon, और कुछ भी बॉक्स से बाहर जाने से पहले routing का एक फ़ैसला Stub Listener दो हैं, एक नहीं 127.0.0.53 के बारे में सब जानते हैं। कम लोग जानते हैं कि एक दूसरा भी है।\n$ ss -lntup | grep \u0026#39;:53 \u0026#39; udp UNCONN 0 0 127.0.0.54:53 0.0.0.0:* udp UNCONN 0 0 127.0.0.53%lo:53 0.0.0.0:* tcp LISTEN 0 4096 127.0.0.54:53 0.0.0.0:* tcp LISTEN 0 4096 127.0.0.53%lo:53 0.0.0.0:* ये एक ही चीज़ के दो पते नहीं हैं। दूसरा जानबूझकर कम काम करता है:2\n127.0.0.53 127.0.0.54 भूमिका पूरा लोकल रिज़ॉल्वर सिर्फ़ proxy मोड कैश हाँ नहीं DNSSEC validation हाँ, चालू होने पर कभी नहीं LLMNR और Multicast DNS हाँ नहीं synthetic नाम (localhost, _gateway) हाँ नहीं DNS over TLS पर upgrade हाँ हाँ इसका synthetic नाम _localdnsstub _localdnsproxy आपको क्या मिलता है जो resolved ने तय किया जो upstream ने कहा डॉक्यूमेंटेशन दूसरे कॉलम के बारे में साफ़ बोलता है। यह “pass most DNS messages relatively unmodified to the current upstream DNS servers and back, but not try to process the messages locally, and hence does not validate DNSSEC, or offer up LLMNR/MulticastDNS”।2\nइसलिए 127.0.0.54 उस प्रोग्राम के लिए सही निशाना है जो अपना validation खुद करना चाहता है, या जिसे resolved की व्याख्या की जगह upstream का कच्चा जवाब चाहिए।\nदोनों पतों के synthetic नाम हैं, _localdnsstub और _localdnsproxy, जो बिना किसी कॉन्फ़िगरेशन के resolve हो जाते हैं।\n/etc/resolv.conf के चार मोड, तीन नहीं मोड अपने आप इस बात से पहचाना जाता है कि फ़ाइल क्या है, और ऐसे चार मोड हैं।1\n/etc/resolv.conf है मतलब NSS को बायपास करने वाले क्लाइंट run/systemd/resolve/stub-resolv.conf का symlink सुझाया गया मोड। 127.0.0.53 और मौजूदा search domain लिखता है resolved से होकर जाते हैं /usr/lib/systemd/resolv.conf का symlink स्थिर, 127.0.0.53 लिखता है, कोई search domain नहीं resolved से होकर जाते हैं run/systemd/resolve/resolv.conf का symlink असली upstream सर्वर लिखता है, अपडेट रहता है resolved को पूरी तरह बायपास करते हैं किसी और की संभाली हुई असली फ़ाइल resolved इसे provider नहीं, consumer की तरह पढ़ता है resolved को पूरी तरह बायपास करते हैं तीसरी पंक्ति लोगों को फँसाती है। यह साफ़-सुथरा विकल्प लगता है, अपडेट रहता है, और चुपचाप इसका मतलब होता है कि resolv.conf सीधे पढ़ने वाला हर प्रोग्राम आपके ISP के रिज़ॉल्वर से बात कर रहा है, बिना कैश, बिना validation और बिना एन्क्रिप्शन के, चाहे आपने resolved.conf में कुछ भी कॉन्फ़िगर किया हो।\nऊपर वाली फ़ाइल का trust-ad विकल्प भी मायने रखता है। इसके बिना glibc आपके प्रोग्राम तक पहुँचने से पहले जवाब से AD bit हटा देता है, इस वाजिब आधार पर कि किसी भी रिज़ॉल्वर का यह दावा कि उसने कुछ validate किया, किसी काम का नहीं। nameserver 127.0.0.53 होने पर दावा आपकी अपनी मशीन से आ रहा है, इसलिए यहाँ trust-ad सही है और resolved इसे आपके लिए लिख देता है।\nsystemd की साज़िश वाली कहानियों पर बारीकियों से पहले, क्योंकि यह वही विषय है जहाँ यह हमेशा आ ही जाता है।\nअगर आगे की बातों पर आपकी आपत्ति Lennart Poettering के बारे में कोई निजी थ्योरी है, या Red Hat की नीयत के बारे में, या इस बारे में कि systemd आपसे कुछ छीनने की साज़िश है, तो आप अपना रास्ता नापिए, क्योंकि आपकी कहानियाँ सुनने में मेरी कोई दिलचस्पी नहीं।\nइस पोस्ट की हर बात एक चालू मशीन से आई है: source, build flag, शिप हुई binary, man page और नापा गया व्यवहार। हर दावे के साथ एक कमांड है जिसे आप खुद चलाकर जाँच सकते हैं। build flag सार्वजनिक हैं। source सार्वजनिक है। जो एक डिफ़ॉल्ट मुझे सच में गलत लगता है, उसे उन लोगों ने चुना जिन्होंने अपना तर्क वहाँ लिखा जहाँ कोई भी उसे पढ़कर उनसे बहस कर सकता है, और आगे मैं ठीक यही करता हूँ।\nयह उस ज़्यादातर सॉफ़्टवेयर से कहीं ज़्यादा पारदर्शिता है जिसे आप बिना एक शब्द शिकायत किए चलाते हैं।\nसबूत लाइए या बस कीजिए।\nकैश वह हिस्सा है जो बस चलता है यह अकेला फ़ीचर है जो हर जगह डिफ़ॉल्ट में चालू है, और यही बिना किसी कॉन्फ़िगरेशन के अपनी कीमत वसूल करता है।\nमाप, इसी बॉक्स पर, 32 डोमेन पर। कैश खाली कीजिए, सब query कीजिए, फिर दोबारा query कीजिए, और प्रोसेस का समय नापने की जगह वह query time पढ़िए जो dig बताता है:\n$ resolvectl flush-caches $ for n in $NAMES; do dig +tries=1 @127.0.0.53 \u0026#34;$n\u0026#34; A | grep \u0026#39;Query time\u0026#39;; done median mean p90 max 32 नामों का कुल ठंडा कैश 103.5 ms 106.7 ms 184 ms 238 ms 3,414 ms गर्म कैश 0.0 ms 0.5 ms 1 ms 3 ms 16 ms 3,414 मिलीसेकंड बनाम 16। लोकल कैश का पूरा तर्क यही है, और इसीलिए यह डिफ़ॉल्ट है।\nफिर भी इस बारे में ईमानदार रहना ठीक है कि यह संख्या क्या है। यह उन बत्तीस नामों के एक दौर की बचत है जिन्हें पहले कभी lookup नहीं किया गया, उसी दौर को दोहराने के मुकाबले, और कोई असली काम इन दोनों में से किसी जैसा नहीं दिखता। काम का आँकड़ा median नहीं, tail है: उस सेट का सबसे बुरा lookup ठंडे में 238 ms और गर्म में 3 ms का था। जो पेज आठ hostname खींचता है उसे आपके median से फ़र्क नहीं पड़ता, वह आपके सबसे धीमे वाले का इंतज़ार करता है।\nसेटिंग्स [Resolve] Cache=yes # yes | no-negative | no CacheFromLocalhost=no # default: do not cache answers from 127.0.0.1 StaleRetentionSec=0 # serve expired records when upstream is down सेटिंग डिफ़ॉल्ट यह क्या करती है Cache=yes चालू positive और negative जवाब कैश करती है Cache=no-negative सिर्फ़ positive जवाब, जब आप negative TTL का इंतज़ार करते-करते थक चुके हों CacheFromLocalhost=no चालू upstream 127.0.0.1 पर हो तो बिल्कुल कैश नहीं करती StaleRetentionSec=0 बंद upstream जवाब देना बंद करे तो expire हो चुके record देती है DNSCacheSize=4096 4096 हर scope में रखे गए record। सिर्फ़ systemd 261 और बाद में तीसरी पंक्ति वह है जो काटती है। अगर आपका upstream loopback पर dnsmasq या unbound है, तो resolved उसके जवाब बिल्कुल कैश नहीं करेगा, इस आधार पर कि जिससे वह बात कर रहा है वह पहले से ही एक कैश है। resolved को किसी दूसरे host पर filtering रिज़ॉल्वर की तरफ़ इशारा कीजिए तो कैशिंग की दो परतें मिलती हैं। loopback वाले की तरफ़ कीजिए तो एक।\nStaleRetentionSec= दिलचस्प वाली है, और डिफ़ॉल्ट में बंद है। इसे सेट कीजिए, तो जब upstream जवाब देना बंद करता है, resolved fail होने की जगह TTL बीत जाने के बाद भी record देता रहता है।2 यह हमेशा पहले upstream आज़माता है। यह NXDOMAIN पर लागू नहीं होता, क्योंकि किसी नाम का मौजूद न होना एक बिल्कुल सही जवाब है और उसमें बासी जैसा कुछ नहीं। जो लैपटॉप कवरेज में आता-जाता रहता है, या जिस मशीन को DNS outage में भी काम करते रहना है, उसके लिए यह रखने लायक है:\n[Resolve] StaleRetentionSec=1d systemd 261 ने इसके ऊपर हर protocol के लिए अलग कैश साइज़ जोड़ा, DNSCacheSize=, MulticastDNSCacheSize= और LLMNRCacheSize= के साथ, हर एक का डिफ़ॉल्ट 4096 record और ऊपरी सीमा 2^24।3 इस बॉक्स पर नहीं, जो 259 चलाता है, और किसी मौजूदा stable distribution release पर भी नहीं। यह जानना ठीक है कि यह आ रहा है, क्योंकि अब तक कैश का साइज़ बदला ही नहीं जा सकता था।\ndaemon memory दबाव पड़ने पर सब कुछ flush भी कर देता है, जो समझदारी है और कभी-कभी चौंकाता है जब आप यह समझने की कोशिश कर रहे हों कि कैश hit rate कमज़ोर क्यों दिख रहा है।\nSplit DNS ही इसे रखने की वजह है अगर इसमें से एक चीज़ ले जानी हो, तो यह सेक्शन ले जाइए, क्योंकि यही वह फ़ीचर है जो सच में ऐसा कुछ करता है जो पुराना stub रिज़ॉल्वर नहीं कर सकता था।\nपारंपरिक resolv.conf में पूरी मशीन के लिए nameserver की एक सूची होती है। एक सूची। VPN चालू कीजिए तो किसी चीज़ को इसे ओवरराइट करना पड़ता है, यानी या तो आपके internal नाम चलते हैं और बाकी DNS कंपनी के रिज़ॉल्वर से होकर जाता है, या इसका उल्टा। तीसरा विकल्प है ही नहीं। फ़ाइल उसे व्यक्त ही नहीं कर सकती।\nresolved हर query को, हर interface के हिसाब से route करता है।1 हर link के अपने सर्वर और अपने domain होते हैं, और lookup उस link पर भेजा जाता है जिसका domain नाम से सबसे अच्छा मेल खाता है, label की गिनती के हिसाब से।\nकॉन्फ़िगरेशन ऐसे लिखा जाता है असर Search domain damiendye.uk एक-label वाले नामों का suffix, और मेल खाती query को इस link पर route करता है सिर्फ़-route domain ~internal.example मेल खाती query को इस link पर route करता है, suffix की तरह कभी इस्तेमाल नहीं सब-पकड़ route ~. जो कहीं और मेल न खाए वह सब इस link पर भेजो डिफ़ॉल्ट route DNSDefaultRoute=yes बिना मेल वाली query लो, ~. का दावा किए बिना तो काम का VPN चालू वाले लैपटॉप को यह मिलता है:\nresolvectl domain tun0 \u0026#39;~corp.example\u0026#39; \u0026#39;~10.in-addr.arpa\u0026#39; resolvectl dns tun0 10.0.0.53 corp.example के नीचे के नाम और 10.0.0.0/8 के reverse lookup tunnel में जाते हैं। बाकी सब पहले की तरह लोकल link से बाहर जाता रहता है। किसी की resolv.conf दोबारा नहीं लिखी गई, और tunnel गिरते ही route भी उसके साथ चले जाते हैं।\nएक query, दो link, और label गिनकर किया गया routing का फ़ैसला QUERY फ़ैसला LINK db01.corp.example 14.0.10.in-addr.arpa blogs.damiendye.uk ज़्यादा label जीतते हैं हर link के अपने सर्वर और domain हैं। tun0 ~corp.example wlp4s0 DefaultRoute tilde सिर्फ़ route करता है। बिना tilde एक-label वाले नामों का suffix भी बनता है। एक query, दो link, और label गिनकर किया गया routing का फ़ैसला एक नियम साफ़ कहने लायक है, क्योंकि लोग इसी की तरफ़ हाथ बढ़ाते हैं और गलत करते हैं। किसी link पर ~. का मतलब है सब कुछ के लिए इसी link को तरजीह दो। यह चुपचाप किसी और link को डिफ़ॉल्ट route बनने से भी रोक देता है। चाहते हैं कि कोई link पूरे namespace का दावा किए बिना बचा-खुचा ले? DNSDefaultRoute=yes सेट कीजिए और ~. को छोड़ दीजिए।\nमान लेने की जगह जाँचिए कि इसने क्या तय किया:\n$ resolvectl status Link 3 (wlp4s0) Current Scopes: DNS LLMNR/IPv4 LLMNR/IPv6 Protocols: +DefaultRoute LLMNR=resolve -mDNS -DNSOverTLS DNSSEC=no/unsupported Current DNS Server: 192.0.2.53 DNS Servers: 192.0.2.53 2001:db8:1::53 DNS Domain: damiendye.uk Default Route: yes इस पोस्ट का हर पता documentation range से है, 192.0.2.0/24 और 2001:db8::/32, इसलिए इन्हें config में चिपकाकर जवाब की उम्मीद मत कीजिए।4 5 आँकड़े और व्यवहार असली हैं, एक चालू मशीन से। पते सिर्फ़ जगह भरने के लिए हैं, क्योंकि सामान्य तरीके से बना global IPv6 पता अपने निचले आधे हिस्से में interface का MAC रखता है, और उसे छापने का मतलब है साथ में hardware inventory का एक टुकड़ा बाँट देना।\nवह -DNSOverTLS और वह DNSSEC=no अगले दो सेक्शन हैं।\nयह DNSSEC Validate कर सकता है upstream इस daemon को “a caching and validating DNS/DNSSEC stub resolver” बताता है।1 validate करने वाला आधा हिस्सा असली है, किसी और चीज़ के ऊपर लपेटा हुआ नहीं, और यह चलता है। बस यह चालू नहीं है।\nहर link पर इसे चालू करने के लिए sudo नहीं चाहिए, क्योंकि resolvectl polkit से होकर जाता है और एक सक्रिय लोकल session को इसकी इजाज़त है:\n$ resolvectl dnssec wlp4s0 yes $ resolvectl status wlp4s0 | grep DNSSEC DNSSEC=yes/supported वह /supported suffix resolved बता रहा है कि upstream को probe करने पर उसे क्या मिला, आपने जो माँगा उससे अलग। yes/supported का मतलब है आपने validation माँगा और सर्वर उसे ढो सकता है। डिफ़ॉल्ट इंस्टॉल पर no/unsupported का मतलब है किसी ने माँगा नहीं, इसलिए किसी ने probe नहीं किया।\nचालू होने के बाद हर lookup एक फ़ैसले के साथ लौटता है, और वे तीन हैं।\nSecure, insecure और bogus तीन अलग जवाब हैं क्या parent DS छापता है, और क्या signature सही निकलते हैं? SECURE damiendye.uk साइन है, और chain सही है। डेटा लौटता है। INSECURE systemd.io DS नहीं। साइन नहीं, तो जाँचने को कुछ नहीं। डेटा लौटता है। BOGUS dnssec-failed.org साइन होने का दावा। सबूत fail होता है। lookup ठुकराया गया। तीन में से दो डेटा लौटाते हैं। validation चालू करने से बिना साइन वाली साइटें बंद नहीं होतीं। Secure, insecure और bogus तीन अलग जवाब हैं, और इनमें से सिर्फ़ एक विफलता है तीनों यहाँ हैं, इसी मशीन पर, असली नामों के साथ:\n$ resolvectl query damiendye.uk -- Data is authenticated: yes; Data was acquired via local or encrypted transport: no $ resolvectl query systemd.io -- Data is authenticated: no; Data was acquired via local or encrypted transport: no $ resolvectl query dnssec-failed.org dnssec-failed.org: resolve call failed: DNSSEC validation failed: missing-key (DNSKEY Missing: no SEP matching the DS found for dnssec-failed.org.) damiendye.uk साइन है, इसलिए root से chain validate होती है और डेटा प्रमाणित है। systemd.io साइन नहीं है, इसलिए जाँचने को कुछ नहीं, और resolved ढोंग करने की जगह ईमानदारी से यही कहता है। यह systemd प्रोजेक्ट का अपना domain है, इस बात पर मैं लौटूँगा। dnssec-failed.org जानबूझकर टूटे signature के साथ छपा है। वह बुरी तरह fail होता है, एक diagnostic के साथ जो ठीक-ठीक समस्या का नाम बताता है।\nयही वह फ़र्क है जो खो जाता है। Insecure विफलता नहीं है। बिना साइन वाला zone डेटा लौटाता है और बताता है कि उसे जाँचा नहीं जा सका। सिर्फ़ वही zone ठुकराया जाता है जो साइन होने का दावा करे और फिर साबित न कर पाए।\nchain खुद भी दिखती है, अगर आप देखना चाहें:\n$ dig +short @127.0.0.53 uk DS 43876 8 2 A107ED2AC1BD14D924173BC7E827A1... $ dig +short @127.0.0.53 damiendye.uk DS 2371 13 2 A5B2825C57899A5A15EE9703832C8358E0D19EF29DC72DD83C691ED77C33BD7F $ dig +short @127.0.0.53 damiendye.uk DNSKEY 256 3 13 oJMRESz5E4gYzS/q6XDrvU1qMPYIjCWz... 257 3 13 mdsswUyr3DPW132mOi8V9xESWE8jTo0d... root uk की ज़मानत देता है, uk damiendye.uk की, और 257 वाली key 256 वाली key को साइन करती है जो record साइन करती है। वहाँ algorithm 13 ECDSA P-256 है, जो नए zone पर आप चाहते हैं, उस RSA की जगह जो ऊपर uk का DS अभी भी इस्तेमाल कर रहा है।\nसादे stub से होकर, जिस प्रोग्राम ने कभी resolved का नाम नहीं सुना उसे भी वही फ़ैसला AD flag के रूप में मिलता है:\n$ dig @127.0.0.53 ietf.org A | grep flags ;; flags: qr rd ra ad; $ dig @127.0.0.53 dnssec-failed.org A | grep status ;; -\u0026gt;\u0026gt;HEADER\u0026lt;\u0026lt;- status: SERVFAIL और daemon एक चालू हिसाब रखता है, जो यह देखने का सबसे तेज़ तरीका है कि validation कुछ कर भी रहा है या नहीं:\n$ resolvectl statistics DNSSEC Verdicts Secure: 134 Insecure: 62 Bogus: 0 Indeterminate: 2 Validation की कीमत यहाँ मैं आपको निराश करने वाला हूँ, क्योंकि मैंने इसे ठीक से नापने की कोशिश की और नहीं नाप पाया।\nगर्म कैश पर यह साफ़ है और कुछ भी नहीं। वही 32 नाम भरे कैश के सामने validation के बिना 16 ms और उसके साथ 23 ms लेते हैं। इसे गोलाई की गलती मानिए।\nठंडे कैश पर कीमत दिखनी चाहिए, और एक अकेला क्लाइंट उसे अलग नहीं कर सकता। मैंने sweep दोनों तरह चलाया और विरोधी जवाब मिले: एक क्रम में validation 74% धीमा दिखा, दूसरे में तेज़, जो असंभव है और बताता है कि असल में नापा क्या जा रहा है। जो भी sweep दूसरे नंबर पर चलता है, उसे इसका फ़ायदा मिलता है कि upstream रिज़ॉल्वर पहले वाले का माँगा सब कुछ पहले ही ला चुका है। हावी चर validation नहीं है, यह है कि किसका कैश गर्म था।\nतो मैं आपको ऐसी संख्या नहीं दूँगा जिसके पीछे मैं खड़ा न हो सकूँ। जो सच है वह तरीका है, और डॉक्यूमेंटेशन उसका आकार साफ़ बताता है: validation “requires retrieval of additional DNS data, and thus results in a small DNS lookup time penalty”।2 ठंडा validated lookup जवाब देने से पहले delegation chain पर चलता है और हर स्तर पर DS और DNSKEY लाता है, इसलिए उन नामों पर अतिरिक्त round trip लगते हैं जिन्हें अभी तक किसी ने नहीं पूछा, और जिन्हें किसी ने पूछा है उन पर कुछ भी नहीं।\nइसीलिए वही पेज चेतावनी देता है कि कैश बंद करना “comes at a performance penalty, which is particularly high when DNSSEC is used”।2 दोनों फ़ीचर एक-दूसरे से स्वतंत्र नहीं हैं। validation ठीक इसलिए सस्ता पड़ता है कि कैश के कारण आप उसकी कीमत एक बार चुकाते हैं।\nअगर अपने नेटवर्क का असली आँकड़ा चाहिए, तो वहीं नापिए। एक कनेक्शन पर एक क्लाइंट आपको नहीं बता सकता।\nतो Validation बंद क्यों है क्योंकि आपके distribution ने package बनाते समय इसे बंद किया, और ऐसा एक वजह से किया जो उसने लिखकर रखी है।\nupstream systemd validation चालू करके शिप करता है। build option यही कहता है:\noption(\u0026#39;default-dnssec\u0026#39;, type : \u0026#39;combo\u0026#39;, choices : [\u0026#39;yes\u0026#39;, \u0026#39;allow-downgrade\u0026#39;, \u0026#39;no\u0026#39;], value : \u0026#39;allow-downgrade\u0026#39;) और upstream मैनुअल सहमत है: DNSSEC= “Defaults to allow-downgrade”।6\nअब देखिए Fedora उस build को क्या देता है:7\n-Ddefault-dnssec=no -Ddefault-dns-over-tls=no -Ddefault-mdns=no -Ddefault-llmnr=resolve और Debian और Ubuntu क्या देते हैं:8\n-Ddefault-dnssec=no -Ddefault-llmnr=no -Ddefault-mdns=no -Ddns-over-tls=openssl तो Fedora बॉक्स पर /usr/lib/systemd/resolved.conf फ़ाइल, जिसके ऊपर लिखा है “Entries in this file show the compile time defaults”, में #DNSSEC=no लिखा है। इसे दोबारा पढ़िए, क्योंकि यह कुछ चालाकी कर रहा है: लाइन ऐसी दिखती है जैसे सॉफ़्टवेयर आपको अपना डिफ़ॉल्ट बता रहा हो, और असल में वह आपके सामने Fedora का build flag छाप रहा है, जबकि upstream का असली डिफ़ॉल्ट पूरे पेज पर कहीं नहीं।\nसेटिंग upstream डिफ़ॉल्ट Fedora build Debian/Ubuntu build इस बॉक्स पर नतीजा DNSSEC= allow-downgrade no no DNSSEC=no DNSOverTLS= no no no (OpenSSL के साथ compile) -DNSOverTLS MulticastDNS= yes no no -mDNS LLMNR= yes resolve no LLMNR=resolve इनमें से हर एक वही है जो इस मशीन पर resolvectl status छापता है। source, build flag, चालू सिस्टम, तीनों सहमत हैं।\nFedora का तर्क change proposal में है और ताज़गी भरे ढंग से सीधा है। यह फ़ीचर “is known to cause compatibility problems with certain network access points”, और Fedora “is not prepared to handle an influx of DNSSEC-related bug reports”, इसलिए इसे बंद कर दिया गया।9\nक्या मैं पूछ सकता हूँ कि जो फ़ीचर खराब नेटवर्क पर टूटता है, उसका जवाब उसे सबके लिए बंद कर देना क्यों है, बजाय इसके कि upstream की तरह allow-downgrade शिप किया जाए और जहाँ ज़रूरी हो वहाँ वह खुद बंद हो जाए? किसने तय किया, यह नहीं। प्रक्रिया में किस चीज़ ने वहाँ पहुँचाया। क्योंकि allow-downgrade ठीक captive portal वाले मामले के लिए ही है, ठीक इसी वजह से यह upstream का डिफ़ॉल्ट है, और उसकी जगह no शिप करने का मतलब है कि बिल्कुल ठीक नेटवर्क पर बैठी मशीन को भी कोई validation नहीं मिलता।\nउनके साथ इंसाफ़ करें तो allow-downgrade की अपनी समस्या है, और वह असली है। यह मोड ऐसे रिज़ॉल्वर को पहचानता है जो DNSSEC नहीं कर सकता और चुपचाप validate करना बंद कर देता है। जो हमलावर आपके DNS जवाबों को आकार दे सकता है, वह इस पहचान को जानबूझकर चालू करवा सकता है, और डॉक्यूमेंटेशन यह साफ़ कहता है: यह “makes DNSSEC validation vulnerable to \u0026lsquo;downgrade\u0026rsquo; attacks”।2 जिस सुरक्षा फ़ीचर को कोई भी हमलावर बंद कर सके, वह जितना दिखता है उससे कम कर रहा है।\nतो कोई भी डिफ़ॉल्ट अच्छा नहीं है। no आपको कुछ नहीं देता। allow-downgrade आपको कुछ ऐसा देता है जो हमलावर छीन सकता है, और yes आपको असली चीज़ देता है, साथ में अगले सेक्शन की हर बात भी।\nवैसे भी वेब का कितना हिस्सा साइन है validation पर ज़्यादा मेहनत करने से पहले यह जानना ठीक है कि वह आपके lookup के कितने हिस्से की रक्षा कर भी सकता है। तो मैंने resolved से उन बत्तीस डोमेन के apex का फ़ैसला पूछा जो इस विषय से सीधे जुड़े हैं: जिन संस्थाओं ने standard लिखा, जो कंपनियाँ रिज़ॉल्वर शिप करती हैं, और वह infrastructure जिसे हर कोई resolve करता है, चाहे चाहे या न चाहे।\nबत्तीस में से सोलह। आधे।\nसाइन बिना साइन Standards और registry ietf.org, iana.org, icann.org, rfc-editor.org, ripe.net, isc.org, nlnetlabs.nl, nic.cz, afnic.fr, verisign.com कोई नहीं Distribution और vendor debian.org, fedoraproject.org, opensuse.org, almalinux.org redhat.com, ubuntu.com, canonical.com, suse.com, rockylinux.org, archlinux.org खुद systemd कोई नहीं systemd.io, freedesktop.org Infrastructure cloudflare.com, gov.uk github.com, kernel.org, google.com, wikipedia.org, mozilla.org, apache.org, gnu.org, quad9.net पहला कॉलम ऊपर से नीचे पढ़िए। हर एक standards संस्था और registry ने साइन किया है। दस में से दस, कोई अपवाद नहीं: वे लोग जिन्होंने DNSSEC लिखा, और वे लोग जो बाकी सबके DS record छापने वाली registry चलाते हैं। उन्होंने अपने zone पर काम किया।\nअब तीसरी पंक्ति आर-पार पढ़िए। systemd.io के पास कोई DS नहीं। जिस प्रोजेक्ट ने वह validating रिज़ॉल्वर लिखा जिस पर यह पूरी पोस्ट है, उसने अपना ही domain साइन नहीं किया, और न ही freedesktop.org ने, जहाँ उसका डॉक्यूमेंटेशन रहता है। उसके नीचे quad9.net भी बिना साइन है, जिस पर एक पल रुकना ठीक है: एक public रिज़ॉल्वर जिसकी पूरी पहचान यह है कि वह आपके लिए DNSSEC validate करता है, ऐसे zone पर जिसे कोई validate नहीं कर सकता।\nऔर vendor एक ही लकीर पर साफ़ बँट जाते हैं। community distribution ने साइन किया। debian.org, fedoraproject.org, opensuse.org, almalinux.org। कंपनियों ने नहीं। redhat.com, ubuntu.com, canonical.com, suse.com। यही चार संस्थाएँ हैं जो इस रिज़ॉल्वर को package करके Linux के ज़्यादातर हिस्से तक पहुँचाती हैं।\nयहाँ तकनीक में कोई कमी नहीं। protocol पंद्रह साल से ज़्यादा से deploy करने लायक है, tooling मुफ़्त है, और registry DS record बिना पैसे लिए लेती हैं। मैं आपको यह मुफ़्त में बता देता हूँ: जिन्होंने standard लिखा उन्होंने साइन किया है, और सॉफ़्टवेयर शिप करने वालों में से ज़्यादातर ने नहीं।\nइसी बात का एक और तीखा रूप gov.uk में है, जो साइन है, और फिर यह करता है:\n$ dig +short @127.0.0.53 www.gov.uk CNAME www-cdn.production.govuk.service.gov.uk. $ dig +short @127.0.0.53 service.gov.uk DS (nothing) uk के पास DS है। gov.uk के पास DS है। service.gov.uk के पास नहीं, इसलिए chain वहीं रुक जाती है, और www.gov.uk insecure resolve होता है, भले ही उसके ऊपर का apex ठीक से साइन हो। किसी ने gov.uk पर काम किया और फिर असली वेबसाइट को एक बिना साइन वाले delegation पर टिका दिया। आधा काम।\nइसलिए, अगर आप कोई zone साइन कर रहे हैं, तो वे नाम जाँचिए जो लोग सच में टाइप करते हैं। साइन किया हुआ apex जो बिना साइन वाले CDN zone में CNAME करता है, आपको कुछ नहीं दिलाता।\nDNS Over TLS चलता है, शर्तों के साथ DNS over TLS लागू है, हर मुख्य build में compile होता है, और चलता है। यह हर जगह डिफ़ॉल्ट में बंद है, upstream में भी, जहाँ DNSOverTLS= “Defaults to no”।6\nकॉन्फ़िगरेशन दो लाइन का है, और दूसरी वह है जो लोग छोड़ देते हैं:\n[Resolve] DNS=9.9.9.9#dns.quad9.net 149.112.112.112#dns.quad9.net DNSOverTLS=yes वह #dns.quad9.net सजावट नहीं है। यह वह नाम सेट करता है जो SNI के लिए और सर्टिफ़िकेट validate करने के लिए इस्तेमाल होता है। इसे छोड़ दीजिए तो सर्टिफ़िकेट की जगह “checked against the server\u0026rsquo;s IP” होती है।2 बड़े provider के साथ यह चल जाता है क्योंकि वे अपने सर्टिफ़िकेट के SAN में IP पते डालते हैं, लेकिन यह कमज़ोर जाँच है, जिस दिन कोई provider ऐसा करना बंद करेगा उसी दिन टूट जाएगी, और यह आपको किसी ऐसे दूसरे पते पर मोड़ दिए जाने से कोई बचाव नहीं देती जिसके पास अपने लिए एक valid सर्टिफ़िकेट हो। इस पर Fedora की अपनी magazine का लेख hostname छोड़ देता है,10 जो अफ़सोस की बात है, क्योंकि यह syntax शिप हुई config फ़ाइल की टिप्पणियों में वहीं मौजूद है।\nStrict और Opportunistic बहुत अलग सेटिंग हैं मोड DoT सपोर्ट करने वाले सर्वर पर सपोर्ट न करने वाले सर्वर पर सर्वर को प्रमाणित करता है yes एन्क्रिप्टेड सारे lookup fail हाँ opportunistic एन्क्रिप्टेड चुपचाप plaintext नहीं no plaintext plaintext लागू नहीं opportunistic समझदारी वाला बीच का रास्ता लगता है और ज़्यादातर है नहीं। डॉक्यूमेंटेशन सीधे कहता है: उस मोड में “the resolver is not capable of authenticating the server, so it is vulnerable to \u0026lsquo;man-in-the-middle\u0026rsquo; attacks”,2 और जो भी आपका port 853 traffic गिरा सकता है वह downgrade थोप सकता है। यह आपको ऐसे नेटवर्क पर निष्क्रिय निगरानी से बचाता है जहाँ कोई कोशिश नहीं कर रहा। जो कोशिश कर रहा है, उसके सामने यह कुछ नहीं करता।\nyes ईमानदार सेटिंग है। इसका यह भी मतलब है कि जब यह कनेक्ट नहीं कर पाता, तो आपको कोई DNS नहीं मिलता, जो उस मशीन पर लगाने से पहले जानना ठीक है जिस तक आप चलकर नहीं पहुँच सकते।\nमैंने इस बॉक्स से Quad9 पर strict DoT आज़माया और query अटक गई। कोई error नहीं, कोई timeout नहीं, flush और दो मिनट बाद मेरे उसे वापस पलटने के बीच journal में कुछ नहीं:\nSep 27 17:12:11 systemd-resolved[40105]: wlp4s0: Bus client set DNS server list to: 9.9.9.9#dns.quad9.net, ... Sep 27 17:12:14 systemd-resolved[40105]: wlp4s0: Bus client set DNSOverTLS setting: yes Sep 27 17:12:15 systemd-resolved[40105]: Flushed all caches. Sep 27 17:14:39 systemd-resolved[40105]: wlp4s0: Bus client set DNS server list to: 192.0.2.53, ... मैं यहाँ से नहीं बता सकता कि उस कनेक्शन पर port 853 पहुँच में है या नहीं, क्योंकि जिस shell से मैंने test चलाया वह port 443 तक भी नहीं पहुँच पा रहा था और साफ़ तौर पर खुद filter हो रहा था। log जो दिखाता है वह विफलता का तरीका है: strict DoT जो कनेक्ट नहीं कर पाता, कुछ भी काम का नहीं बताता। वह इंतज़ार करता है। अगर आप इसे चालू करें और आपका DNS चुप हो जाए, तो resolved में ढूँढने से पहले ss -tn dport = :853 जाँचिए।\nइसे ठीक से Test करना # does the transport actually come up resolvectl flush-caches resolvectl query ietf.org # expect: acquired via ... encrypted transport: yes # is anything still going out in the clear sudo tcpdump -ni any \u0026#39;port 53 and not host 127.0.0.53\u0026#39; दूसरी कमांड वह है जो सच बताती है। DoT चलने पर port 53 पर मशीन से कुछ भी बाहर नहीं जाना चाहिए, और जो जाता है वह कोई प्रोग्राम है जिसने stub के चारों ओर रास्ता ढूँढ लिया।\nDNS Over HTTPS यहाँ है ही नहीं सवाल का सीधा जवाब: systemd-resolved DNS over HTTPS सपोर्ट नहीं करता। आंशिक रूप से नहीं, किसी flag के पीछे नहीं, किसी ऐसे build option के साथ नहीं जिसे कोई चालू नहीं करता। इसमें DoH है ही नहीं।\nऔर यह डॉक्यूमेंटेशन से पढ़ा हुआ नहीं है, जो बस पुराना हो सकता है। यह वह है जो binary में है:\n$ strings /usr/lib/systemd/systemd-resolved | grep -icE \u0026#39;application/dns-message|dns-query|:443\u0026#39; 0 $ grep -oE \u0026#39;name=\u0026#34;DNSOver[A-Za-z]*\u0026#34;\u0026#39; /usr/share/dbus-1/interfaces/org.freedesktop.resolve1.Manager.xml name=\u0026#34;DNSOverTLS\u0026#34; कोई DoH wire format नहीं, कोई HTTP/2 नहीं, D-Bus interface पर एक एन्क्रिप्शन property और वह TLS है। upstream की resolved.conf directive की पूरी सूची सत्रह सेटिंग की है और उनमें से कोई HTTPS का ज़िक्र नहीं करती।6\nयह माँगा गया है। Issue #8639, “Add support for DNS-over-HTTPS to systemd-resolved”, 2 अप्रैल 2018 को खोला गया था और अब भी खुला है, दो pull request जुड़े हैं और कुछ भी merge नहीं हुआ।11 आठ साल और गिनती जारी।\nवही payload, वही एन्क्रिप्शन, अलग port दोनों एक ही DNS QUERY को एक ही TLS के अंदर ले जाते हैं DNS over TLS DNS over HTTPS tcp/853 tcp/443 systemd-resolved में हाँ, v239 से नहीं, बिल्कुल नहीं observer नाम देखता है नहीं नहीं नेटवर्क इसे रोक सकता है हाँ, इसका अपना port बिना मुश्किल नहीं आप अपना जाँच सकते हैं हाँ नहीं systemd issue 8639 में माँगा गया, अप्रैल 2018। अब भी खुला। वही payload, वही एन्क्रिप्शन। फ़र्क यह है कि यह किस port पर है, और कौन पहचान सकता है क्या यह गलत फ़ैसला है? साफ़ तौर पर नहीं, और DoT के पक्ष का तर्क ठीक-ठाक है। दोनों DNS को TLS के अंदर ले जाते हैं और दोनों एक ही निष्क्रिय observer को रोकते हैं। DoH का फ़ायदा यह है कि वह port 443 पर बाकी सबके साथ छिप जाता है, इसलिए जो नेटवर्क एन्क्रिप्टेड DNS रोकना चाहता है उसे कहीं ज़्यादा मेहनत करनी पड़ती है। अगर नेटवर्क चलाने वाला ही विरोधी है, तो यह सच में काम का है।\nयह उल्टा भी काटता है। जहाँ नेटवर्क चलाने वाले आप हैं, वहाँ वह पहचान में न आना यह मतलब रखता है कि आप अपने ही DNS की जाँच नहीं कर सकते, और अपना DoH client शिप करने वाला हर application सिस्टम रिज़ॉल्वर इस्तेमाल करना बंद कर देता है, और इसी तरह आपको ऐसा browser मिलता है जो आपके split DNS, आपके कैश और आपके internal zone को अनदेखा करता है। अपने सामान पर, जाने-पहचाने port पर दिखने वाला रिज़ॉल्वर एक फ़ीचर है।\nतो: अगर DoT आपके रिज़ॉल्वर तक पहुँचता है, तो उसे इस्तेमाल कीजिए, आप कुछ नहीं खोते। अगर port 853 ब्लॉक है, तो resolved के पास कोई जवाब नहीं और आपको उसके आगे एक DoH proxy चाहिए, loopback पर dnscrypt-proxy या cloudflared और resolved को उसकी तरफ़ इशारा करते हुए। कैशिंग और validation resolved का काम बने रहते हैं। सिर्फ़ transport हटता है।\nआपका Distribution असल में क्या शिप करता है एक ही daemon इस पर निर्भर करते हुए बहुत अलग बर्ताव करता है कि उसे किसने package किया। service चालू करना आसान आधा है। जो आधा छूट जाता है वह है इसे उन networking tool से जोड़ना जो distribution असल में इस्तेमाल करता है, और इन चार में से एक पर यह सच में तब तक जुड़ा नहीं होता जब तक आप खुद न जोड़ें।\nइंस्टॉल चालू nss-resolve जुड़ा config कहाँ से आता है सपोर्टेड Fedora (33+) हाँ हाँ हाँ, systemd-libs में NetworkManager हाँ Ubuntu हाँ हाँ हाँ netplan, फिर NM या networkd हाँ Debian (12+) अलग package नहीं नहीं, अलग package आप चुनते और जोड़ते हैं हाँ RHEL / Rocky / Alma (9, 10) हाँ नहीं हाँ NetworkManager, बताने के बाद Technology Preview Validation और भरा कैश: ख़ुद सेटिंग्स ये हर जगह वही चार लाइनें हैं, क्योंकि resolved.conf हर distribution पर resolved.conf ही है। फ़र्क सिर्फ़ इसमें है कि बाकी कॉन्फ़िगरेशन daemon तक कैसे पहुँचता है, जो अगले चार सेक्शन हैं।\n# /etc/systemd/resolved.conf.d/60-local.conf [Resolve] DNSSEC=allow-downgrade Cache=yes CacheFromLocalhost=no StaleRetentionSec=1d /etc/systemd/resolved.conf को edit करने की जगह drop-in इस्तेमाल कीजिए, क्योंकि मुख्य फ़ाइल किसी भी drop-in से कम प्राथमिकता रखती है और package अपडेट उस पर आपसे बहस कर सकता है। नंबरिंग एक लिखी हुई परंपरा है: vendor /usr/ के नीचे 10 से 40 लेते हैं, आप /etc/ के नीचे 60 से 90 लेते हैं, इसलिए आपका जीतता है।6\nsystemd 261 और बाद में एक पाँचवीं लाइन जोड़ने लायक है, क्योंकि तब तक कैश का साइज़ बदला ही नहीं जा सकता था:\nDNSCacheSize=16384 # systemd 261+; default 4096, max 2^24 इसे लागू कीजिए और पुष्टि कीजिए कि daemon फ़ाइल से सहमत है, यह मान लेने की जगह कि उसने उसे पढ़ लिया:\nsystemd-analyze cat-config systemd/resolved.conf # every fragment, in precedence order systemctl restart systemd-resolved resolvectl status | grep -E \u0026#39;DNSSEC|Protocols\u0026#39; resolvectl statistics # verdicts should start moving DNSSEC=allow-downgrade वह सेटिंग है जो मैं उस मशीन पर रखूँगा जिसकी मैं देखभाल नहीं करने वाला, ऊपर के सेक्शन में दी गई वजहों से। DNSSEC=yes ईमानदार वाली है और बंद होकर fail होती है। सोच-समझकर चुनिए।\nइसे Network Stack में जोड़ना service चालू करना एक कमांड है। अपने distribution के networking tool से उनका DNS कॉन्फ़िगरेशन इसे सौंपवाना वह हिस्सा है जो बदलता है, और यहीं “चालू” और “ठीक से काम कर रहा” अलग हो जाते हैं।\nDNS config कहाँ से आता है DNSSEC चालू करने को कैश का साइज़ तय करने को अतिरिक्त जोड़ Fedora NetworkManager, अपने आप drop-in drop-in कोई नहीं Ubuntu netplan, फिर NM या networkd drop-in, या .network में हर link पर drop-in कोई नहीं Debian जो भी stack आपने चुना drop-in, या .network में हर link पर drop-in libnss-resolve, और नीचे वाला stack RHEL परिवार NetworkManager, बताने के बाद drop-in drop-in dns=systemd-resolved Fedora चारों में सबसे पूरा integration, और अकेला जहाँ सब कुछ पहले से जुड़ा है।\nnetwork NetworkManager के पास है और वह बिना कहे DNS resolved को सौंप देता है। इस बॉक्स पर /etc/NetworkManager/ में कहीं कोई dns= लाइन नहीं है और फिर भी यह चलता है, क्योंकि NetworkManager चालू daemon को पहचानकर उसे इस्तेमाल करता है। /etc/resolv.conf stub वाला symlink है, और glibc इसलिए जुड़ा है कि libnss_resolve.so.2 systemd-libs में आता है, जो वैकल्पिक नहीं है:\n$ rpm -qf /usr/lib64/libnss_resolve.so.2 systemd-libs-259.9-1.fc44.x86_64 $ grep ^hosts: /etc/nsswitch.conf hosts: files myhostname mdns4_minimal [NOTFOUND=return] resolve [!UNAVAIL=return] dns तो Fedora पर ऊपर वाला drop-in ही पूरा काम है। जोड़ने को और कुछ नहीं।\nUbuntu डिफ़ॉल्ट में चालू, और nss-resolve भी उसी तरह जुड़ा है। फ़र्क यह है कि कॉन्फ़िगरेशन आम तौर पर netplan से आता है:\nnetwork: version: 2 ethernets: enp1s0: dhcp4: true nameservers: addresses: [9.9.9.9, 149.112.112.112] search: [example.com] netplan उसे अपने renderer को देता है, डेस्कटॉप पर NetworkManager या सर्वर पर systemd-networkd, और renderer उसे resolved को देता है। ध्यान दीजिए netplan क्या व्यक्त नहीं कर सकता। DNSSEC= के लिए कोई netplan key नहीं है, और DNSOverTLS= के लिए भी नहीं। वे ऊपर वाले drop-in में जाते हैं, जहाँ वैसे भी उनकी जगह है।\nअगर आप systemd-networkd पर हैं, तो हर link की सेटिंग .network फ़ाइल में native रूप से भी उपलब्ध हैं, और हर link की सेटिंग global वाली पर भारी पड़ती है:\n# /etc/systemd/network/10-lan.network [Network] DNS=9.9.9.9#dns.quad9.net DNSSEC=yes DNSOverTLS=yes Domains=~. Debian को हाथ से जोड़ना पड़ता है यही वह है जो सच में जुड़ा नहीं होता, और ऊपर वाले सेक्शन के होने की वजह।\nDebian 12 से systemd-resolved एक अलग package है, और release notes upgrade के बारे में साफ़ हैं: “The new systemd-resolved package will not be installed automatically on upgrades”, और “until it has been installed, DNS resolution might no longer work since the service will not be present on the system.”12 वही notes बड़ा सवाल भी तय कर देते हैं: “systemd-resolved was not, and still is not, the default DNS resolver in Debian.”\nइसे इंस्टॉल करना दो package है, एक नहीं, और दूसरा वह है जो हर कोई छोड़ देता है:\napt install systemd-resolved libnss-resolve systemctl enable --now systemd-resolved libnss-resolve सिर्फ़ Suggests: है, dependency नहीं,13 और Suggests वह अकेला रिश्ता है जिस पर apt अमल नहीं करता। इसलिए कोई इसे इंस्टॉल नहीं करता।\nकिसी के ध्यान न देने की वजह, किसी के इंस्टॉल न करने की वजह से ज़्यादा दिलचस्प है। इसे छोड़ दीजिए तब भी glibc resolved तक पहुँचता है, क्योंकि /etc/resolv.conf stub की तरफ़ इशारा करता है और सादा nss-dns उससे बात करता है। daemon का ज़्यादातर हिस्सा चलता रहता है:\nlibnss-resolve के बिना इसके साथ कैश हाँ, stub से होकर हाँ DNSSEC validation हाँ, यह daemon में होता है हाँ DNS over TLS हाँ हाँ AD bit glibc तक पहुँचता है हाँ, resolv.conf में trust-ad है हाँ secure बनाम insecure बनाम bogus नहीं, सिर्फ़ एक bit हाँ link-scoped पते नहीं हाँ daemon /etc/hosts पढ़ता है नहीं हाँ बाएँ कॉलम में कुछ भी टूटा हुआ नहीं दिखता, इसलिए कुछ ठीक नहीं होता। आप वह खोते हैं जो DNS wire format नहीं ढो सकता, और सबसे साफ़ मामला एक scope वाला पता है:\n$ getent hosts _gateway # via nss-resolve fe80::5054:ff:fe12:3456 _gateway $ dig +short @127.0.0.53 _gateway # via the stub, as nss-dns would 192.0.2.1 वही नाम, वही daemon, दो अलग जवाब। link-local IPv6 पता उस interface के बिना बेमतलब है जिस पर उसका scope है, और DNS जवाब में उसे रखने की कोई जगह नहीं, इसलिए stub सिर्फ़ IPv4 लौटा सकता है। native API के पास उसे रखने की जगह है और वह आपको वह पता देता है जो आप सच में चाहते थे।\nफ़ैसले वाली पंक्ति भी यही समस्या है। AD एक bit है, साइन या नहीं। native API secure को insecure से और bogus से अलग करता है, जो “इसे किसी ने साइन नहीं किया” और “इसे किसी ने साइन किया और किसी और ने इससे छेड़छाड़ की” के बीच का फ़र्क है। जिस application को परवाह है, वह wire पर इन्हें अलग नहीं बता सकता।\nयही service के चलने और service के जुड़े होने के बीच का अंतर है, और यह तब तक अदृश्य रहता है जब तक आप इसे ढूँढने न जाएँ।\nजाँचिए कि यह लग गया:\ngrep ^hosts: /etc/nsswitch.conf # wants \u0026#39;resolve [!UNAVAIL=return] dns\u0026#39; Debian पर अंदर आने के चार रास्ते, और वह एक जो आपके लिए इंस्टॉल नहीं होता CONFIG कहाँ से आता है कैसे अंदर आता है DAEMON ifupdown, स्थिर ifupdown, DHCP systemd-networkd NetworkManager resolvconf shim = resolvectl resolved 127.0.0.53 और वह हिस्सा जो कोई इंस्टॉल नहीं करता glibc getaddrinfo() libnss-resolve सिर्फ़ Suggests:। इसके बिना glibc चलता है, पर फ़ैसला उस तक कभी नहीं पहुँचता। Debian पर अंदर आने के चार रास्ते, और वह एक जो आपके लिए इंस्टॉल नहीं होता आपकी बाकी networking इस तक कैसे पहुँचती है, यह इस पर निर्भर है कि आप Debian के किस stack पर हैं।\npackage Provides: resolvconf और Conflicts: resolvconf, openresolv घोषित करता है,13 इसलिए यह resolvconf interface को पूरी तरह अपने हाथ में ले लेता है। /usr/sbin/resolvconf resolvectl का symlink बन जाता है, जो एक multi-call binary है: उस नाम से बुलाने पर यह resolvconf(8) protocol बोलता है और जो भी उसे दिया जाए वह सीधे resolved में डाल देता है।14 इसलिए जो भी चीज़ पहले से resolvconf -a बुलाती है वह बिना बदले चलती रहती है, और systemd-resolved अकेला सपोर्टेड backend है।\nपूरा interface नहीं बचता, और कमियाँ चुपचाप नहीं, ज़ोर से fail होती हैं:\nresolvconf विकल्प systemd-resolved के तहत -a \u0026lt;iface\u0026gt; stdin से पढ़ा गया हर link का DNS दर्ज करता है। यही मायने रखता है -d \u0026lt;iface\u0026gt; दर्ज हटाता है, resolvectl revert जैसा -x ~. routing domain में बदलता है -p link को डिफ़ॉल्ट route नहीं के रूप में चिह्नित करता है (systemd 257+) -f न मौजूद interface पर -a और -d को चुप रखता है -m स्वीकार होता है और चुपचाप अनदेखा -u, -i, -I, -l, -r, -R, -v, -V सपोर्टेड नहीं। कमांड fail होती है debug करने से पहले जानने लायक एक जाल: shim /etc/resolv.conf तभी लिखता है जब वह फ़ाइल /run/systemd/resolve/resolv.conf का symlink हो, स्थिर फ़ाइल होने पर नहीं।14\nifupdown, Debian सर्वर इंस्टॉल पर डिफ़ॉल्ट। /etc/network/interfaces में dns-nameservers stanza हमेशा पुराने resolvconf package के hook से लागू होता था, और systemd-resolved उस package से conflict करता है और अपने कोई /etc/network/if-up.d/ hook शिप नहीं करता। स्थिर interface के लिए stanza पर भरोसा मत कीजिए। link पर सर्वर साफ़ तौर पर सेट कीजिए और उन्हें resolved के पास रहने दीजिए:\n# /etc/network/interfaces auto enp1s0 iface enp1s0 inet static address 192.0.2.10/24 gateway 192.0.2.1 up /usr/sbin/resolvconf -a $IFACE \u0026lt;\u0026lt;\u0026lt; \u0026#39;nameserver 192.0.2.53\u0026#39; down /usr/sbin/resolvconf -d $IFACE ifupdown पर DHCP पहले से संभला हुआ है। isc-dhcp-client daemon के नाम वाले hook शिप करता है, /etc/dhcp/dhclient-enter-hooks.d/resolved-enter और /etc/dhcp/dhclient-exit-hooks.d/resolved,15 इसलिए lease के DNS सर्वर बिना कुछ कॉन्फ़िगर किए सही link पर पहुँच जाते हैं।\nsystemd-networkd सबसे साफ़ विकल्प है और इसे किसी shim की ज़रूरत नहीं, क्योंकि दोनों आधे एक ही प्रोजेक्ट हैं। हर link का DNS, DNSSEC और DoT .network फ़ाइल में native key हैं, ठीक ऊपर वाले Ubuntu उदाहरण की तरह।\nNetworkManager, Debian डेस्कटॉप पर, को एक बार बताना पड़ता है:\n# /etc/NetworkManager/conf.d/10-resolved.conf [main] dns=systemd-resolved एक चुनिए और जानिए कि आपने कौन सा चुना। यहाँ विफलता ऐसा daemon नहीं जो शुरू होने से मना करे, बल्कि दो stack जो दोनों मानते हैं कि /etc/resolv.conf उनका है, जो रुक-रुक कर चलने वाले DNS की तरह दिखता है और एक दोपहर बर्बाद करता है। resolvectl status बताता है कि सर्वर किस link पर पहुँचे। अगर जवाब है किसी पर नहीं, तो daemon को कुछ नहीं खिला रहा, और bug वही है।\nRHEL, Rocky और Alma और यह वह है जो दो बार पढ़ने लायक है। package मौजूद है, nss-resolve उपलब्ध है, NetworkManager इसे चला सकता है, और Red Hat का डॉक्यूमेंटेशन यह कहता है:\nsystemd-resolved is an unsupported Technology Preview.16\nयह शब्द RHEL 9 के release notes में 9.0 से हैं और 9.8 पर भी वहीं हैं। Technology Preview का मतलब है कोई production SLA नहीं, और Red Hat साफ़ तौर पर इसे production में इस्तेमाल की सलाह नहीं देता।\nन ही यह चालू है। इन सिस्टम पर resolv.conf NetworkManager के पास है, इसलिए इसे चालू करना सिर्फ़ unit चालू करना नहीं, बल्कि NetworkManager की सेटिंग है:\n# /etc/NetworkManager/conf.d/10-resolved.conf [main] dns=systemd-resolved systemctl enable --now systemd-resolved systemctl reload NetworkManager resolvectl status # confirm NM actually handed the servers over उसके बाद ऊपर वाला drop-in बिना बदलाव लागू होता है, और validation और कैश ठीक वैसे ही बर्ताव करते हैं जैसे Fedora पर।\nतो RHEL पर आपके सामने एक ऐसा फ़ैसला है जो बाकियों पर मौजूद नहीं। सपोर्टेड RHEL बॉक्स पर validate करने वाला, कैश करने वाला, split DNS वाला लोकल रिज़ॉल्वर चाहिए? तो सपोर्टेड जवाब यह नहीं है। वह unbound है, या NetworkManager के अपने dns=dnsmasq से dnsmasq, जिन दोनों के पीछे Red Hat सच में खड़ा होगा।\nयह लेबल कोड पर टिप्पणी नहीं है। यह इस पर टिप्पणी है कि Red Hat किस चीज़ के पीछे SLA रखेगा, और कैश करने वाला validating रिज़ॉल्वर ऐसी चीज़ है जिस पर ग्राहक ticket खोलते हैं। ठीक है। लेकिन अगर आप RHEL सपोर्ट के लिए खरीद रहे हैं, तो name resolution को एक बिना सपोर्ट वाले component पर चलाना ऐसा फ़ैसला है जो सोच-समझकर लिया और लिखा जाए, ऐसा नहीं जिसमें आप बस इसलिए बह जाएँ कि वह repo में था।\nअसल में कुछ भी अपंग नहीं है, और यह रहा सबूत इस धारणा को परखना ठीक है, क्योंकि “मेरे distro ने इसे बंद किया, मुझे rebuild करना होगा” पहली प्रतिक्रिया है और यहाँ वह गलत है।\nsystemd के build option दो बिल्कुल अलग तरह के होते हैं, और उनके बारे में ऐसे बात होती है जैसे वे एक हों:17\nBuild option किस्म Upstream Fedora Debian और Ubuntu runtime पर बदलने लायक resolve क्षमता चालू built true नहीं, और दोनों इसे build करते हैं nss-resolve क्षमता enabled built, systemd-libs में आता है enabled, libnss-resolve के रूप में आता है नहीं, और दोनों इसे build करते हैं dns-over-tls क्षमता auto auto, OpenSSL बनता है openssl नहीं, और दोनों इसे compile करते हैं openssl क्षमता enabled enabled enabled नहीं, और दोनों इसे चालू करते हैं default-dnssec सिर्फ़ डिफ़ॉल्ट allow-downgrade no no हाँ, drop-in में default-dns-over-tls सिर्फ़ डिफ़ॉल्ट no no upstream डिफ़ॉल्ट हाँ, drop-in में default-mdns सिर्फ़ डिफ़ॉल्ट yes no no हाँ, drop-in में default-llmnr सिर्फ़ डिफ़ॉल्ट yes resolve no हाँ, drop-in में आख़िरी कॉलम पढ़िए। इस पोस्ट ने जिस भी सेटिंग की शिकायत की है वह निचले आधे में है, और हर एक डिफ़ॉल्ट है, क्षमता नहीं। कोड दोनों पर compile होता है। किसी ने कुछ नहीं हटाया।\nसबूत इस पोस्ट में पहले ही है और उसे किसी compiler की ज़रूरत नहीं पड़ी। stock Fedora package पर, जिसमें DNSSEC=no पका हुआ है, एक कमांड ने validation चालू किया और वह पूरा चला: साइन zone प्रमाणित हुआ, बिना साइन वाले ने ईमानदारी से बताया, टूटे वाले को सटीक diagnostic के साथ ठुकराया गया। अगर इसे compile से बाहर किया गया होता, तो resolvectl status कभी yes/supported नहीं कहता।\nतो toolchain की तरफ़ हाथ बढ़ाने से पहले अपना build जाँचिए:\n# is the crypto there at all systemctl --version | tr \u0026#39; \u0026#39; \u0026#39;\\n\u0026#39; | grep -E \u0026#39;^[+-](OPENSSL|GNUTLS|GCRYPT)$\u0026#39; # ask for the feature and read back what the daemon says it can do resolvectl dnssec \u0026lt;link\u0026gt; yes resolvectl status \u0026lt;link\u0026gt; | grep DNSSEC # yes/supported means the code is there इस Fedora बॉक्स पर यह -GCRYPT +GNUTLS +OPENSSL है, जो काफ़ी है: DNSSEC को इनमें से एक चाहिए और DoT OpenSSL के साथ build है।\nDistribution असल में क्या हटाते हैं एक चीज़ है जो दोनों बाहर निकालते हैं, और वह उस सूची में नहीं है जिसकी कोई शिकायत करता है।\nupstream binary में एक fallback DNS सर्वर सूची compile करता है: Cloudflare, Google और Quad9।17 Fedora और Debian दोनों -Ddns-servers= को खाली रखकर build करते हैं, और आप इसकी पुष्टि मेरी बात मानने की जगह शिप हुई binary पर कर सकते हैं:\n$ strings /usr/lib/systemd/systemd-resolved | grep -ciE \u0026#39;quad9|one\\.one\\.one|dns\\.google\u0026#39; 0 कुछ नहीं। executable में कोई hyperscaler पका हुआ नहीं।\nयही एक जगह है जहाँ दोनों distribution ने upstream से बेहतर किया है, और यह साफ़ कहना बनता है, यह देखते हुए कि इस पोस्ट का कितना हिस्सा उन डिफ़ॉल्ट के बारे में रहा है जो मुझे गलत लगते हैं। जो मशीन अपना DNS कॉन्फ़िगरेशन खो दे, उसे ज़ोर से fail होकर आपका इंतज़ार करना चाहिए। उसे चुपचाप आपका हर lookup किसी दूसरे क्षेत्राधिकार के ऐसे रिज़ॉल्वर पर नहीं भेजना चाहिए जिसे आपने कभी नहीं चुना। fallback चाहिए? FallbackDNS= सेट कीजिए और चुनिए कि वह कौन हो।\nअगर सच में Rebuild चाहिए एक असली मामला है: एक minimal या embedded build जहाँ किसी ने -Ddns-over-tls=false दिया और transport सच में गायब है। पहले ऊपर वाली कमांड से जाँचिए, क्योंकि यह कम होता है और बिल्कुल उस हालत जैसा दिखता है जिसमें सेटिंग बस बंद हो।\nअगर आपको सच में चाहिए, तो package rebuild कीजिए, make install कभी नहीं:\n# Fedora dnf download --source systemd rpmbuild --rebuild --define \u0026#39;_with_upstream 1\u0026#39; systemd-*.src.rpm # Debian and Ubuntu apt source systemd cd systemd-*/ \u0026amp;\u0026amp; editor debian/rules # change the -Ddefault-* flags dpkg-buildpackage -us -uc -b मैंने इस मशीन पर इनमें से कोई नहीं चलाया, इसलिए इन्हें काम का आकार मानिए, test किया हुआ नुस्खा नहीं। सिद्धांत ही मायने रखता है। systemd PID 1 है, और आपके distribution की कॉपी के ऊपर हाथ से बना make install इसे package manager से बाहर कर देता है: आगे कोई security update नहीं, और अगला upgrade फ़ाइलों के लिए आपसे लड़ता है। package build करने से दोनों बचे रहते हैं। लगभग हर किसी के लिए ईमानदार जवाब यह है कि चार लाइन का drop-in वही काम बीस सेकंड में करता है, इसीलिए यह सेक्शन ज़्यादातर आपको इससे रोकने के लिए है।\nचलाने लायक तीन कॉन्फ़िगरेशन हर विकल्प का मेन्यू नहीं। तीन रुख़, जिनमें से हर एक का मैं सच में बचाव करूँगा।\nलैपटॉप, दुश्मन नेटवर्क सर्वर, आपका अपना नेटवर्क Strict आप किससे बचा रहे हैं कैफ़े और होटल का portal लोकल कुछ नहीं; upstream पहले से validate करता है ऐसा रिज़ॉल्वर रास्ता जिस पर आपको भरोसा नहीं DNSSEC= allow-downgrade no yes DNSOverTLS= opportunistic no yes StaleRetentionSec= 1d 1d सेट नहीं captive portal झेल जाता है हाँ लागू नहीं नहीं filter किया गया .arpa झेल जाता है हाँ हाँ नहीं port 853 ब्लॉक झेल जाता है हाँ लागू नहीं नहीं हमलावर इसे downgrade कर सकता है हाँ, दोनों सेटिंग लागू नहीं नहीं ऐसे नेटवर्क पर लैपटॉप जिन पर आपका नियंत्रण नहीं। transport एन्क्रिप्ट कीजिए, और captive portal के पीछे भी चीज़ के चलते रहने के बदले downgrade का जोखिम लीजिए।\n# /etc/systemd/resolved.conf.d/60-local.conf [Resolve] DNS=9.9.9.9#dns.quad9.net 149.112.112.112#dns.quad9.net DNSOverTLS=opportunistic DNSSEC=allow-downgrade Cache=yes StaleRetentionSec=1d आपके चलाए नेटवर्क पर सर्वर, upstream validate करता हुआ। यह एक hop दूर पहले ही हो चुका है। इसे दो बार मत कीजिए, और किसी public रिज़ॉल्वर पर निर्भरता मत बनाइए।\n[Resolve] DNSSEC=no DNSOverTLS=no Cache=yes CacheFromLocalhost=no StaleRetentionSec=1d ऐसी मशीन जहाँ आपको असली चीज़ चाहिए। दोनों मामलों में strict, हमलावर के downgrade करने को कुछ नहीं, और आपने जाँच लिया है कि upstream इसे ढो सकता है।\n[Resolve] DNS=9.9.9.9#dns.quad9.net 149.112.112.112#dns.quad9.net DNSOverTLS=yes DNSSEC=yes Cache=yes वह तीसरा reverse DNS तोड़ देगा अगर आपके रास्ते में कुछ भी .arpa filter करता है, port 853 ब्लॉक हो तो पूरी तरह टूट जाएगा, और यह चुपचाप नहीं, बंद होकर fail होता है। यही शर्तें हैं। deploy करने से पहले इन्हें जानिए, बाद में नहीं, क्योंकि जो बॉक्स कुछ भी resolve न कर सके वह अगर अगले कमरे में नहीं है तो लंबी ड्राइव है।\nजो भी चुनें, उसे लागू कीजिए और फिर जाँचिए कि daemon ने असल में क्या तय किया, न कि आपने क्या लिखा:\nsystemd-analyze cat-config systemd/resolved.conf # every file, in order systemctl restart systemd-resolved resolvectl status # the state it is really in यहाँ resolvectl status ही कसौटी है, वैसे ही जैसे Hugo साइट के लिए build कसौटी है। फ़ाइल में लिखी सेटिंग एक इरादा है। status जो छापता है वह हो रहा है।\nबाकी verb भी जानने लायक हैं, क्योंकि उनके बीच वे इस daemon के बारे में आपके लगभग हर सवाल का जवाब बिना log पढ़े दे देते हैं:\nकमांड यह आपको क्या बताती है resolvectl status हर link के सर्वर, domain, protocol, और मौजूदा DNSSEC और DoT हालत resolvectl query NAME जवाब, इस्तेमाल हुआ protocol, DNSSEC फ़ैसला, और क्या यह कैश से आया resolvectl statistics कैश hit बनाम miss, और secure/insecure/bogus का चालू हिसाब resolvectl show-cache इस समय कैश में सब कुछ, हर scope का resolvectl flush-caches daemon restart किए बिना कैश खाली करो resolvectl dns LINK ... runtime पर एक link पर सर्वर सेट करो, बिना config फ़ाइल resolvectl dnssec LINK yes commit करने से पहले test के लिए एक link पर validation चालू करो resolvectl domain LINK ~x एक link पर routing और search domain सेट करो resolvectl revert LINK उस link पर runtime के हर बदलाव को फेंक दो resolvectl show-server-state हर सर्वर की feature probing: हर upstream में क्या सपोर्ट पाया गया resolvectl monitor query और जवाब लाइव देखो, जो अंदाज़े से बेहतर है उस बीच वाले ब्लॉक में सब कुछ सिर्फ़ runtime है और link के दोबारा ऊपर आने पर नहीं बचता, जो इसे किसी सेटिंग को drop-in में लिखने से पहले आज़माने का सही तरीका बनाता है। इसका यह भी मतलब है कि nmcli device reapply चुपचाप आपकी testing को पलट देगा, इसलिए status बाद में जाँचिए, पहले नहीं।\nडिफ़ॉल्ट एक रुख़ हैं, कोई दुर्घटना नहीं डिब्बे में तीन फ़ीचर। एक चालू।\nइसे आलस समझना लुभाता है। यह आलस नहीं है। इनमें से हर डिफ़ॉल्ट पर उन लोगों ने बहस की जो फ़ैसले के दूसरी तरफ़ की bug कतार देख सकते थे, और कम से कम Fedora ने ईमानदारी से लिखा कि वह support का बोझ नहीं उठा सकता। यह एक असली मजबूरी है और मैं इसके उलट दिखावा नहीं करूँगा।\nलेकिन डिफ़ॉल्ट एक रुख़ होता है, और यह वाला कहता है कि जिस lookup की कोई पुष्टि न कर सके उस पर निर्माण करना स्वीकार्य है। standard हमारे पास 2005 से है। registry record मुफ़्त में छापती हैं, आपकी मशीन का रिज़ॉल्वर पूरी चीज़ लागू करता है, और यह बेकार इसलिए बैठा है कि इंटरनेट के बहुत बड़े हिस्से ने कभी कुछ साइन नहीं किया, इसलिए इसे चालू करने से आपकी मशीन वह बन जाती है जो टूटी दिखती है। हर उस standard का यही आकार होता है जिसे कोई लागू नहीं करवाता। ठीक से करना एक कीमत है जो आप अकेले उठाते हैं, और फ़ायदा तभी आता है जब काफ़ी और लोगों ने भी उसे उठाया हो।\nइसीलिए गिनती इस पोस्ट का वह हिस्सा है जिस पर मैं सच में जाकर अमल करूँगा। सेटिंग्स नहीं। सेटिंग्स बीस मिनट का काम हैं। गिनती कहती है कि जो संस्थाएँ मार्गदर्शन छापती हैं, रिज़ॉल्वर शिप करती हैं और दुनिया का source code host करती हैं, उनमें से ज़्यादातर ने अपने zone साइन नहीं किए, और यह कि gov.uk ने apex साइन किया और फिर उस एक वेबसाइट को, जिसे इस्तेमाल किए बिना कोई नहीं रह सकता, एक बिना साइन वाले delegation पर टिका दिया। किसी ने मुश्किल हिस्सा किया और फिर कभी वह नाम नहीं जाँचा जो लोग टाइप करते हैं।\nआप सिर्फ़ अपना वाला ठीक कर सकते हैं। अगर आप कोई zone चलाते हैं, तो उसे साइन कीजिए, DS दर्ज करवाइए, फिर जाकर www नाम को वैसे lookup कीजिए जैसे कोई visitor करेगा और पुष्टि कीजिए कि chain अंत तक बची रहती है। यह एक दोपहर का काम है। यह कीजिए और validation का तर्क आपके नाम को resolve करने वाले हर किसी के लिए सैद्धांतिक नहीं रहता, और इसमें यही अकेला हिस्सा है जिसे हम में से कोई भी सच में सुधार सकता है।\nsystemd-resolved.service(8) — “implements a caching and validating DNS/DNSSEC stub resolver”; चारों क्लाइंट interface, दोनों stub listener, synthetic record, routing के नियम और /etc/resolv.conf के चारों मोड।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5), जैसा Fedora 44 पर systemd 259.9 में शिप हुआ — DNSSEC=, DNSOverTLS=, Cache=, CacheFromLocalhost=, StaleRetentionSec= और 127.0.0.54 proxy stub का विवरण।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5) — DNSCacheSize=, MulticastDNSCacheSize= और LLMNRCacheSize=, “Each defaults to 4096”, systemd 261 में जोड़े गए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5737 — “IPv4 Address Blocks Reserved for Documentation”: 192.0.2.0/24, 198.51.100.0/24 और 203.0.113.0/24।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3849 — 2001:DB8::/32 documentation के लिए आरक्षित, “to reduce the likelihood of conflict and confusion when relating documented examples to deployed systems”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolved.conf(5), upstream latest — DNSSEC= “Defaults to allow-downgrade”, DNSOverTLS= “Defaults to no”, drop-in नंबरिंग की परंपरा, और directive की पूरी सूची जिसमें DNS over HTTPS का कोई विकल्प नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora systemd.spec, rawhide — meson build flag -Ddefault-dnssec=no, -Ddefault-dns-over-tls=no, -Ddefault-mdns=no, -Ddefault-llmnr=resolve।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian systemd packaging, debian/rules — -Ddefault-dnssec=no, -Ddefault-llmnr=no, -Ddefault-mdns=no, -Ddns-over-tls=openssl। Ubuntu का systemd इसी packaging से निकला है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora Change: systemd-resolved — Fedora 33 ने इसे डिफ़ॉल्ट रिज़ॉल्वर बनाया; डिफ़ॉल्ट को “from the upstream default DNSSEC=allow-downgrade to DNSSEC=no” बदला क्योंकि यह फ़ीचर “is known to cause compatibility problems with certain network access points” और Fedora “is not prepared to handle an influx of DNSSEC-related bug reports”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora Magazine — Use DNS over TLS — सुझाया गया DNSOverTLS=yes कॉन्फ़िगरेशन, सिर्फ़ IP पतों के साथ और बिना #hostname SNI रूप के।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd issue #8639 — “Add support for DNS-over-HTTPS to systemd-resolved”, 2 अप्रैल 2018 को खुला, अब भी खुला।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian 12 release notes, 5.2.3 — “The new systemd-resolved package will not be installed automatically on upgrades”; “until it has been installed, DNS resolution might no longer work”; “systemd-resolved was not, and still is not, the default DNS resolver in Debian.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian systemd packaging, debian/control — systemd-resolved stanza: Provides: resolvconf, Conflicts: resolvconf, openresolv, Replaces: resolvconf, और libnss-resolve सिर्फ़ Suggests: में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nresolvconf(1), the resolvectl compatibility mode — resolvectl “is a multi-call binary. When invoked as \u0026lsquo;resolvconf\u0026rsquo; \u0026hellip; it is run in a limited resolvconf(8) compatibility mode”; systemd-resolved “is the only supported backend”; कौन से विकल्प सपोर्टेड हैं, अनदेखे होते हैं या ठुकराए जाते हैं; और यह नियम कि /etc/resolv.conf तभी लिखी जाती है जब वह /run/systemd/resolve/resolv.conf का symlink हो।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDebian isc-dhcp-client file list — /etc/dhcp/dhclient-enter-hooks.d/resolved-enter और /etc/dhcp/dhclient-exit-hooks.d/resolved शिप करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRHEL 9.4 release notes, Technology Previews — “Note that systemd-resolved is an unsupported Technology Preview.” RHEL 9.0 से 9.8 तक बिना बदले।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nsystemd meson_options.txt — क्षमता वाले option (resolve, nss-resolve, dns-over-tls, openssl) और डिफ़ॉल्ट-मान वाले option (default-dnssec, default-dns-over-tls, default-mdns, default-llmnr) का बँटवारा, और compile की हुई dns-servers fallback सूची।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/dns/resolved-the-resolver-you-are-already-running/","summary":"systemd-resolved इस समय ज़्यादातर Linux डेस्कटॉप पर चल रहा है, हर lookup कैश कर रहा है और एक को भी validate नहीं कर रहा। यह पोस्ट nss-resolve से दोनों stub listener तक resolution का रास्ता दिखाती है, एक असली मशीन पर नापती है कि कैश की कीमत कितनी है, DNSSEC चालू करके उसके तीनों फ़ैसले दिखाती है, और बताती है कि upstream इसे चालू शिप करता है तो validation डिफ़ॉल्ट में बंद क्यों है। फिर इसकी गिनती कि वेब का कितना कम हिस्सा सच में साइन है, DNS over TLS और उसका strict बनाम opportunistic वाला जाल, और DNS over HTTPS का समर्थन जो 2018 से माँगा जा रहा है और आज भी मौजूद नहीं। आख़िर में Fedora, Ubuntu, Debian और RHEL परिवार क्या शिप करते हैं, हर एक में इसे कैसे जोड़ें, और आपके distro ने जो फ़ीचर बंद किए हैं वे गायब कोड क्यों नहीं बल्कि डिफ़ॉल्ट हैं।","title":"Resolved: वह रिज़ॉल्वर जो आप पहले से चला रहे हैं"},{"content":"आपके नेटवर्क पर कोई भी चीज़ एक नाम ढूँढ सकती है, और आपके DNS सर्वर को सवाल सुनाई तक नहीं देता। मशीन पर कोई सेटिंग नहीं बदली, कोई administrator अधिकार नहीं, लॉग में कुछ ऐसा नहीं जो आपको मिले। Lookup पोर्ट 443 पर एक साधारण HTTPS अनुरोध बनकर निकलता है, इंटरनेट पर कहीं किसी resolver तक जाता है, और ऐसा जवाब लेकर लौटता है जो आपका अपना resolver देने से मना कर देता।\nBlocklist कभी चलती ही नहीं। Threat feed तक query पहुँचती ही नहीं। जिस log line को आप ढूँढने जाते, वह कभी लिखी ही नहीं गई।\nइसे DNS over HTTPS कहते हैं, छोटे में DoH, और इसे एक अच्छी वजह से बनाया गया था। सादा DNS पोर्ट 53 पर खुले टेक्स्ट में चलता है, इसलिए कॉफ़ी शॉप, एयरपोर्ट और आपका इंटरनेट प्रोवाइडर आपके हर नाम को पढ़ सकते हैं और मन हो तो जवाब बदल भी सकते हैं। DoH lookup को बाकी वेब वाली encryption में लपेटकर भीड़ में छिपा देता है। किसी दुश्मन नेटवर्क पर बैठे व्यक्ति के लिए privacy के उपाय के तौर पर यह ठीक वही करता है जो कहता है।\nदिक्कत यह है कि यह जिस चीज़ को हराता है और आप जिस चीज़ पर टिके हैं, वे एक ही चीज़ हैं।\nआपका resolver सिर्फ़ lookup सेवा नहीं है। यह एक control point है: जहाँ जाने-पहचाने बुरे domain का जवाब कुछ नहीं होता, जहाँ command सर्वर की query लॉग में दिखती है, जहाँ Protective DNS कनेक्शन बनने से पहले malware domain को मना कर देता है। DoH lookup को आपके resolver से उठाकर ऐसे resolver को दे देता है जिसे आपने कभी नहीं चुना, और उस resolver पर टाँगा हर control साथ चला जाता है।\nसाधारण DNS आपके resolver से होकर जाता है। DoH उसके चारों ओर से। एक लैपटॉप, एक सवाल। एक जवाब आपके controls से गुज़रता है, दूसरा उनसे मिलता ही नहीं। साधारण DNS, पोर्ट 53 DNS over HTTPS, पोर्ट 443 लैपटॉप एक नाम पूछता है आपका resolver blocklist और threat feed जाँचे query क्लाइंट के नाम लॉग बुरे नाम का जवाब NXDOMAIN इंटरनेट तभी, जब पास हुआ लैपटॉप एक नाम पूछता है आपका resolver कभी पूछा नहीं गया ब्लॉक को कुछ नहीं लॉग को कुछ नहीं HTTPS एक resolver तक जो उसने चुना किसी और का resolver कुछ भी जवाब देता है Firewall को एक और encrypted वेब कनेक्शन दिखता है। उसके पास हर मिनट ऐसे हज़ारों हैं, और तार पर यह बाकी जैसा ही दिखता है। एक ही लैपटॉप, एक ही सवाल। बाईं ओर वह आपके resolver से गुज़रता है, जो नाम जाँचता है, उसे लॉग करता है और उसके बाद ही इंटरनेट से पूछता है। दाईं ओर वह HTTPS पर सीधा बाहर क्लाइंट के चुने resolver तक जाता है। आपका resolver उसे सुनता ही नहीं, इसलिए न कुछ ब्लॉक करने को है, न लॉग करने को, और border पर यह हज़ारों में एक और encrypted वेब कनेक्शन है। यह DNS को encrypt करने के खिलाफ़ दलील नहीं है। Encrypted DNS सही है, और इस पोस्ट का आखिरी हिस्सा बताता है कि उसे कैसे चलाएँ। यह दलील इस बारे में है कि resolver चुनता कौन है, क्योंकि पूरा खेल उसी चुनाव का है, और DoH को इस तरह बनाया गया कि वह चुनाव आपसे छीनकर ब्राउज़र, ऐप और, अगर आप सावधान नहीं हैं, हमलावर को दे दे।\nDoH असल में क्या है ब्रांडिंग हटा दीजिए तो DoH एक सामान्य वेब अनुरोध है जिसमें संयोग से एक DNS सवाल रखा है।\nसाधारण DNS एक छोटा binary संदेश है जो UDP या TCP पर पोर्ट 53 को भेजा जाता है। DoH वही संदेश, या उसका JSON रूप, ऐसे वेब सर्वर को भेजे गए HTTPS अनुरोध के अंदर रख देता है जो यह protocol बोलता है; जवाब एक HTTPS response होता है1। पूरा विचार बस इतना है।\nRFC 8484 ने अक्टूबर 2018 में इसे standard बनाया, और इरादा कभी छिपाया नहीं गया। इसकी अपनी भूमिका कहती है कि मकसद है “allowing web applications to access DNS information via existing browser APIs”1।\nमौजूदा ब्राउज़र APIs। एक वेब पेज। यह किसी को सालों बाद एक अटपटे side effect के रूप में नहीं मिला। यह standard के पहले पैराग्राफ़ में बैठा है, लक्ष्य के रूप में लिखा हुआ।\nयह रहा DoH तरीके से किया गया एक lookup, command line से, एक public resolver के सामने, example.com पूछते हुए:\n$ curl -s -H \u0026#39;accept: application/dns-json\u0026#39; \\ \u0026#39;https://cloudflare-dns.com/dns-query?name=example.com\u0026amp;type=A\u0026#39; {\u0026#34;Status\u0026#34;:0,\u0026#34;TC\u0026#34;:false,\u0026#34;RD\u0026#34;:true,\u0026#34;RA\u0026#34;:true,\u0026#34;AD\u0026#34;:true,\u0026#34;CD\u0026#34;:false, \u0026#34;Question\u0026#34;:[{\u0026#34;name\u0026#34;:\u0026#34;example.com\u0026#34;,\u0026#34;type\u0026#34;:1}], \u0026#34;Answer\u0026#34;:[{\u0026#34;name\u0026#34;:\u0026#34;example.com\u0026#34;,\u0026#34;type\u0026#34;:1,\u0026#34;TTL\u0026#34;:146, \u0026#34;data\u0026#34;:\u0026#34;23.192.228.80\u0026#34;}]} कोई ख़ास क्लाइंट नहीं। 443 के सिवा कोई पोर्ट नहीं। एक अकेला HTTPS अनुरोध, वेब पेज लाने जैसी ही शक्ल का, और नाम को दुनिया के दूसरे छोर पर बैठी एक मशीन ने resolve किया जिसने आपके नेटवर्क या आपके नियमों के बारे में कभी सुना तक नहीं। Google यही endpoint चलाता है, Quad9 भी, और दर्जनों दूसरे भी।\nअब देखिए आपका firewall क्या देखता है। 443 पर एक वेब सर्वर से TLS कनेक्शन, जिसके अंदर वह पढ़ नहीं सकता क्योंकि TLS का मतलब ही यही है, और जिसे वह content delivery networks, analytics और विज्ञापनों की ओर हर सेकंड खुलते सैकड़ों दूसरे कनेक्शनों से अलग नहीं कर सकता। DNS सवाल गायब है। वह वेब ट्रैफ़िक के कपड़े पहनकर इमारत से निकल गया और दरवाज़े पर खड़ा कोई उसका चेहरा नहीं देख पाया।\nतार पर DoH lookup एक वेब अनुरोध के अंदर बंद DNS सवाल है। एक ही सवाल। एक लिफ़ाफ़े पर लिखा है, दूसरा तीन परतों के अंदर बंद। सादा DNS, पोर्ट 53 DoH, पोर्ट 443 DNS query name=badsite.example type=A Firewall इसे पूरा पढ़ता है। नाम देखता है, जाँचता है, ब्लॉक या लॉग करता है। TLS record (firewall को बस इतना दिखता है) वेब सर्वर को HTTP अनुरोध DNS query (बंद) name=badsite.example type=A पोर्ट 443 पर firewall को सिर्फ़ बाहरी परत दिखती है। वेब सर्वर से TLS कनेक्शन, पेज load, विज्ञापन या analytics beacon जैसा ही। नाम कभी ऊपर नहीं आता। सादी DNS query लिफ़ाफ़े पर लिखी होती है: firewall नाम पढ़ता है और उस पर कार्रवाई करता है। DoH query वही सवाल है, एक HTTP अनुरोध के अंदर बंद, जो एक TLS record के अंदर है, और firewall को सिर्फ़ बाहरी परत दिखती है: 443 पर किसी वेब सर्वर से कनेक्शन, जो बाकी सबके जैसा दिखता है। नाम कभी ऐसी जगह ऊपर नहीं आता जहाँ कोई control उस तक पहुँच सके। एक क्लाइंट DNS lookup को तीन तरीकों से भेज सकता है, और उन्हें साथ-साथ रखकर देखना ठीक है, क्योंकि पूरी पोस्ट इसी फ़र्क़ पर है।\nTransport पोर्ट आपका resolver इसे देखता है Border पर मना किया जा सकता है Encrypted सादा DNS 53 (UDP/TCP) हाँ, अगर आप उसे अपने से होकर जाने पर मजबूर करें हाँ, बाहर जाने वाला 53 बंद करें नहीं DNS over TLS (DoT) 853 सिर्फ़ तब जब वह आपकी ओर इशारा करे हाँ, बाहर जाने वाला 853 बंद करें हाँ DNS over HTTPS (DoH) 443 सिर्फ़ तब जब वह आपकी ओर इशारा करे नहीं, आप 443 बंद नहीं कर सकते हाँ सादा DNS पढ़ा भी जा सकता है और ब्लॉक भी किया जा सकता है, और ठीक इसी वजह से उसे नियंत्रित करना आसान था और उसकी जासूसी करना भी। DoT lookup को encrypt करता है पर अपना अलग पोर्ट रखता है, इसलिए आप उसे border पर अब भी मना कर सकते हैं। DoH वह है जिसे पकड़ने का कोई हैंडल नहीं: DoT जैसा encrypted, पर उसी एक पोर्ट पर जिसे आप कभी बंद नहीं कर सकते, इसलिए बचा हुआ इकलौता लीवर है क्लाइंट ने कौन सा resolver चुना, और यह पोस्ट उसी लीवर के बारे में है।\nResolver कौन चुनता है यह इसलिए मायने रखता है कि एक आधुनिक मशीन पर पाँच अलग-अलग चीज़ें हैं जो हर एक तय कर सकती है कि DNS कहाँ जाए, और default रूप से आप उनमें से ठीक एक को नियंत्रित करते हैं।\nएक मशीन पर पाँच चीज़ें resolver चुन सकती हैं। आप उनमें से एक तय करते हैं। Lookup कहाँ जाए, यह कौन तय करता है परत Resolver कौन चुनता है Default रूप से आपका? Operating system आपका नेटवर्क, DHCP या router advertisements से हाँ ब्राउज़र Vendor का default, जब तक आपकी policy उसे न बदले सिर्फ़ अगर आप policy सेट करें Application या उसकी library Code लिखने वाला, build के समय नहीं वेब पेज की स्क्रिप्ट साइट चलाने वाला, या कोई भी स्क्रिप्ट जो वह load करे नहीं Malware Operator, hardcoded, अक्सर नाम नहीं, पते से नहीं नीचे वाली तीनों को न administrator अधिकार चाहिए, न बदली सेटिंग, न OS में दिखने वाली कोई चीज़। एक मशीन पर पाँच परतें, हर एक अपना resolver चुनने में सक्षम। Operating system वह resolver इस्तेमाल करता है जो आपका नेटवर्क देता है, और वह आपका है। ब्राउज़र अपने vendor का default इस्तेमाल करता है जब तक आपकी policy कुछ और न कहे। एक application, वेब पेज की एक स्क्रिप्ट और malware हर एक अपने लिए खुद चुनते हैं और इसके लिए उन्हें आपसे कुछ नहीं चाहिए। Operating system उस resolver से पूछता है जो आपके नेटवर्क ने DHCP या router advertisements से दिया। वह आपका है, और लगभग 2019 से पुरानी हर चीज़ इसी मॉडल को मानकर चलती थी: एक resolver, नेटवर्क द्वारा दिया हुआ, और इसीलिए नेटवर्क-स्तर के DNS controls तीस साल तक काम करते रहे।\nब्राउज़र ने इसे तोड़ दिया। Firefox और Chrome दोनों में अपना DoH करने की मशीनरी है, उनके vendor के चुने resolver तक, आपके सिर के ऊपर से, और वे तभी पीछे हटते हैं जब उन्हें managed नेटवर्क दिखता है। और एक application अपने code में अपना DoH क्लाइंट और hardcoded resolver लेकर चल सकता है, जो build के समय तय हुआ; वह आपका DHCP नहीं पढ़ता और पूछता भी नहीं। बहुत सा वैध software पहले से ऐसा करता है।\nवेब पेज की स्क्रिप्ट वह है जिस पर आपको रुक जाना चाहिए, क्योंकि उसे कुछ भी install करने की ज़रूरत नहीं। ऊपर वाला curl कमांड एक अकेला HTTPS अनुरोध है, और HTTPS अनुरोध करना तो ब्राउज़र का रोज़ का काम है। किसी भी पेज पर JavaScript की कुछ लाइनें, जिसे उपयोगकर्ता खोले, public DoH endpoint को lookups भेज सकती हैं, क्योंकि बड़े प्रोवाइडर जानबूझकर cross-origin अनुरोध स्वीकार करते हैं ताकि वेब ऐप उनका इस्तेमाल कर सकें, जो RFC 8484 में बताया गया मकसद ही है। जो पेज आप अभी पढ़ रहे हैं, वह इसी पल किसी दूसरे देश के resolver से नाम resolve कर सकता है और आपको बस एक और HTTPS कनेक्शन दिखेगा।\nऔर malware अपना resolver साफ़ वजह से चुनता है: वह नहीं चाहता कि आप देखें वह कहाँ फ़ोन कर रहा है। वह resolver को अपने code में रखता है, अक्सर उस तक IP पते से पहुँचता है ताकि पकड़ने को कोई bootstrap lookup न हो, और इसमें से किसी के लिए उसे आपकी इजाज़त नहीं चाहिए।\nवह कॉलम फिर पढ़िए। नीचे वाली तीन को न administrator अधिकार चाहिए, न कोई बदली हुई सेटिंग, और operating system में कुछ दिखता भी नहीं। जिस control को बनाने में आपने साल लगाए, एक resolver, एक blocklist, एक लॉग, वह मानकर चलता था कि सबसे ऊपर वाली पंक्ति ही इकलौती पंक्ति है। सालों से ऐसा नहीं है।\nवही चाल जिससे ब्राउज़र बनाने वाले डरते थे वेब पेज वाला मामला न सैद्धांतिक है, न नया। यह वही है जिस तरह protocol helpers का दुरुपयोग होता है: एक वेब पेज bytes भेजता है, आगे कोई चीज़ उन पर कार्रवाई करती है, और यह नहीं बता पाती कि वे किसी असली क्लाइंट से नहीं बल्कि हमलावर के पेज से आए, क्योंकि तार पर वे बिल्कुल एक जैसे हैं। DoH के साथ आगे वाली चीज़ एक public resolver है, जो जवाब देता है और उसके पास जानने का कोई तरीका नहीं कि पूछने वाला JavaScript किसी phishing पेज से आया, और आपका resolver, blocklist और लॉग वाला, कभी रास्ते में था ही नहीं कि उसकी कोई राय होती। यह आपके controls में किया गया छेद नहीं, बल्कि उनके चारों ओर बनाई गई सड़क है, जो उसी encryption से पक्की की गई है जिसे इस्तेमाल करने को आप सबसे कहते हैं।\nयह पहले से malware लेखकों का चैनल है आपको कल्पना करने की ज़रूरत नहीं कि इसका इस्तेमाल कैसे होता है। यह सालों से दर्ज है, नामी शोधकर्ताओं द्वारा, असली samples पर, और दिशा सिर्फ़ एक है: 2019 में एक आपराधिक bot से लेकर अगले साल एक राज्य की ख़ुफ़िया टूल तक, और तब से हर साल ज़्यादा व्यस्त, नए backdoors 2026 में भी आ रहे हैं।\nSample रिपोर्ट हुआ Actor DoH ने क्या ढोया Godlua 1 जुलाई 20192 आपराधिक botnet अपने command सर्वर के नाम का lookup PsiXBot 6 सितंबर 20193 आपराधिक (infostealer) Command-and-control domain resolution, Google के DoH से OilRig (APT34) Q2 20204 ईरानी राज्य-समर्थित चुराया गया डेटा, DoH पर Google और Cloudflare को बाहर भेजा गया ChamelDoH 16 जून 20235 ChamelGang (APT) अपना पूरा command चैनल, Google और Cloudflare को DoH पर DNS TXT BRICKSTORM 4 दिसंबर 20256 चीन से जुड़ा backdoor HTTPS और nested TLS के नीचे दबा C2, परतों में DoH भी Dohdoor 26 फ़रवरी 20267 अनिश्चित (UAT-10027) C2 lookups, 443 पर Cloudflare के DoH को भेजे गए Godlua, पहला बड़े पैमाने पर रिपोर्ट हुआ मामला, एक Linux और Windows backdoor था जिसकी रिपोर्ट दर्ज करती है कि यह “uses DNS over HTTPS to get the C2 name to ensure secure communication between the bots, the Web Server and the C2”2। पोर्ट 53 पर नज़र रखने वाले नेटवर्क पर अपने command सर्वर का नाम resolve करना defender के लिए तोहफ़ा है। DoH पर देखने को कुछ नहीं बचता।\nPsiXBot पर Proofpoint की लाइन उद्धृत करने लायक है, एक threat-intelligence vendor चुपचाप वाली बात ज़ोर से कह रहा है। उन्होंने लिखा कि command and control के लिए DoH का इस्तेमाल “should be a warning shot for the cybersecurity community as there are no simple solutions to help identify an infected host or the process of receiving instructions”3। कोई आसान उपाय नहीं, उन लोगों के मुँह से जिनका काम ही उपाय ढूँढना है।\nफिर OilRig ने इसे एक दर्जा ऊपर उठाया। Kaspersky का वर्णन ठीक वही बदलाव है जिसके बारे में यह पोस्ट है: “instead of plain text requests to port 53, they would use port 443 in encrypted packets”, एक ऐसे टूल के साथ जो “allows DoH queries to Google and Cloudflare services”4। एक राष्ट्रीय ख़ुफ़िया अभियान, जो DNS पर नज़र रखने वाली हर चीज़ के पार चुराया डेटा बाहर ले जाने के लिए public DoH प्रोवाइडरों को पाइप बना रहा था।\nऔर यह वहीं नहीं रुका। यह फैला। 2023 तक ChamelGang के पास एक C++ Linux backdoor था, ChamelDoH, जो अपना पूरा command चैनल DoH पर चलाता था, Google और Cloudflare के ज़रिए अपने nameservers को DNS TXT queries भेजता था; इसे खोजने वाले शोधकर्ता ने लिखा कि detection और prevention दोनों “become difficult”, क्योंकि encrypted transport को बीच में पकड़ा नहीं जा सकता और दुर्भावनापूर्ण अनुरोध को असली से अलग नहीं किया जा सकता5। दिसंबर 2025 में CISA ने BRICKSTORM को खोलकर देखा, चीन से जुड़ा एक backdoor जो HTTPS, WebSockets और nested TLS की परतें लगाता है और “also uses DNS-over-HTTPS (DoH)” ताकि अपना C2 साधारण वेब ट्रैफ़िक में दबा दे6। फ़रवरी 2026 तक यह बस आम हुनर था: Cisco Talos ने Dohdoor पकड़ा, जो अपना command सर्वर ढूँढने के लिए “securely sends encrypted DNS requests to Cloudflare\u0026rsquo;s DNS server over HTTPS port 443”, और phishing के रास्ते अमेरिकी स्कूलों और अस्पतालों में घुस रहा था7।\nयही इसकी शक्ल है। ऐसी तकनीक नहीं जिसका एक दौर आया और गया, बल्कि ऐसी जिसे हर साल और हाथ उठा लेते हैं। समस्या बेहतर नहीं, बदतर हो रही है, और अब एक नया परिवार तय समय पर आ ही जाता है।\nइनमें से हर एक में एक ही गुण ने काम किया: lookup 443 पर HTTPS बनकर निकला और defender के resolver ने उसे कभी नहीं देखा। ऐसी कमज़ोरी नहीं जो कोई किसी दिन ढूँढ लेगा। एक feature, जिसे हमलावरों ने बार-बार शिप किया, उनमें से कई राज्य।\nऔर साफ़ रहिए कि वह तालिका साल-दर-साल क्यों भरती है। उस पर हर परिवार ऐसे दरवाज़े से गुज़रता है जिसके खुले छोड़ने की चेतावनी DoH के लेखकों को standard के अपने टेक्स्ट में दी गई थी, और उन्होंने उसे फिर भी खुला छोड़ा8। यह चूक नहीं थी। यह जानबूझकर चुनी गई कम-दूरदर्शिता थी, उन लोगों की जिनमें ICANN का अपना technologist भी था। इसलिए मैं इसे वही कहूँगा जो यह है: इस मामले में ICANN साइबर अपराध को आसान बनाने वाले हैं। Standard के अपने टेक्स्ट में चेताया गया कि क्या टूटेगा, फिर भी उसके लोगों ने उस पर अपना नाम रखा, और ऊपर की तालिका वह है जो उस खाली जगह से होकर निकली। अपराध कोई अचरज नहीं। यह एक फ़ैसले का बिल है, और फ़ैसला किसका था, यह इस पोस्ट का बाकी हिस्सा है।\nऔर इस सबके बावजूद DoH वह चीज़ भी नहीं ख़रीदता जो लोग मान लेते हैं: नकली जवाब से सुरक्षा। Resolver तक के hop को encrypt करना, resolver जो लौटाता है उसे authenticate करना नहीं है, और DoH सर्वर अब भी नकली record लौटा सकता है। Standard खुद मानता है, यह कहते हुए कि बिना configure किए सर्वरों के खिलाफ़ नियम “does not guarantee protection against invalid data”9।\nDNS जवाब को authenticate करने वाला इकलौता तरीका DNSSEC है, और DoH वह नहीं है। उससे भी बुरा, लगभग हर क्लाइंट के लिए DNSSEC की जाँच recursive resolver पर होती है, डिवाइस पर नहीं: क्लाइंट बस resolver की बात पर भरोसा करता है कि जवाब जाँच में ठीक निकला। इसलिए DNSSEC ने आपकी रक्षा हमेशा उतनी ही की जितना आप जाँच करने वाले resolver पर भरोसा करते थे, और DoH की असली चाल यह है कि वह भरोसा एक दूर बैठे ऑपरेटर को सौंप देता है जिसे आप न देख सकते हैं, न audit कर सकते हैं।\nइसलिए DoH आपको नकली साइट पर पहुँचने की ज़्यादा संभावना में छोड़ सकता है, कम में नहीं: जो स्थानीय बचाव किसी अगवा किए गए जवाब को पकड़ लेते, Protective DNS feed, ऑपरेटर की अपनी filtering, ठीक वही चीज़ें हैं जिनके चारों ओर से आपने रास्ता निकाला, और बचती है बस एक दूर बैठे ऑपरेटर की बात, भरोसे पर ली हुई।\nDoH जवाब के लिए भरोसे को खिसकाता है। किसी पर भरोसे की ज़रूरत ख़त्म नहीं करता। जवाब के लिए किसी पर तो भरोसा करना होगा। DoH बस बदलता है कि किस पर, और ऐसे पर जिसे आप audit नहीं कर सकते। आपका अपना resolver एक दूर का DoH resolver आपका डिवाइस Resolver जो आपके नियंत्रण में आपकी ओर से DNSSEC जाँचता है आपकी blocklist और लॉग रखता है आप उसे देख और audit कर सकते हैं झूठ बोले तो वह आपका है, जाँच सकते हैं आपका डिवाइस encrypted पाइप Resolver जो आपके नियंत्रण में नहीं DNSSEC जाँचता है, आप उसकी बात मानते हैं आप उसे न देख सकते, न audit कर सकते आपकी स्थानीय blocklist रास्ते से बाहर नकली दे तो कोई स्थानीय चीज़ नहीं पकड़ती Encryption पाइप को सुरक्षित करती है, जवाब की सच्चाई को नहीं। DNSSEC resolver पर जाँचा जाता है, इसलिए भरोसा दोनों हालत में resolver पर है। DoH बस उसे ऐसा बना देता है जिसे आप देख नहीं सकते। DoH जवाब के लिए resolver पर भरोसे की ज़रूरत ख़त्म नहीं करता, बस उसे खिसका देता है। आपका अपना resolver DNSSEC जाँचता है, आपकी blocklist रखता है और audit किया जा सकता है; एक दूर का DoH resolver आपकी ओर से जाँचता है और आप उसकी बात मान लेते हैं, एक encrypted पाइप पर जो hop को सुरक्षित करता है और इस बारे में कुछ नहीं कहता कि जवाब सच है या नहीं। DoH को किससे बचाने वाला बताकर बेचा जाता है क्या बचाता है? Resolver तक के hop पर छिपकर सुनना हाँ, lookup encrypted है उस hop पर छेड़छाड़ हाँ Resolver का अपना नकली record नहीं, वह DNSSEC का काम है, DoH का नहीं दुर्भावनापूर्ण, दबाव में या compromise हुआ resolver नहीं, अब आप उस पर पूरा भरोसा करते हैं Malware, tracker और अदालती आदेश वाली blocking नहीं, यह उनके चारों ओर से निकल जाता है और इसमें से कुछ भी नया विचार नहीं है जिस पर DoH संयोग से ठोकर खा गया। Resolver पर दुर्भावनापूर्ण domains को filter करना ठीक वही है जो OpenDNS लगभग बीस साल से करता आया है, लाखों उपयोगकर्ताओं के लिए जवाब उन तक पहुँचने से पहले phishing और malware ब्लॉक करना, और यही वह मॉडल है जिसका मालिक बनने के लिए Cisco ने 2015 में पैसे दिए10। दो दशकों की resolver-स्तर की सुरक्षा जिसने उन लोगों की रक्षा की जिन्होंने कभी कुछ configure नहीं किया, और DoH ने पूरे मॉडल को एक झटके में कमज़ोर कर दिया: ऐप को उसके अपने resolver की ओर मोड़ दीजिए, और OpenDNS, या आपके नेटवर्क ने जो भी चुना, अब रास्ते में नहीं है।\nपुराना जवाब क्यों काम करना बंद कर गया जब तक DNS पोर्ट 53 पर रहता था, नेटवर्क का जवाब सीधा था। हर क्लाइंट को अपना resolver इस्तेमाल करने पर मजबूर कीजिए, और border पर बाकी हर जगह बाहर जाने वाला पोर्ट 53 ब्लॉक कर दीजिए। बाहरी DNS सर्वर तक पहुँचने की कोशिश करने वाली मशीन को मना कर दिया जाता, इसलिए उसे आपसे होकर आना पड़ता, इसलिए आपके controls हर चीज़ पर लागू होते। भद्दा, पर काम करता था।\nDoH 443 का इस्तेमाल करके इसे एक चाल में ख़त्म कर देता है। आप बाहर जाने वाला 443 ब्लॉक नहीं कर सकते। वह वेब है। तो DNS को अपने resolver से गुज़ारने के लिए आप जो पोर्ट बंद करते, वही है जिसे आप कभी बंद नहीं कर सकते, और जो encryption आपके ISP को झाँकने से रोकती है, वही आपको DoH lookup और पेज load में फ़र्क़ करने से भी रोकती है।\nनियंत्रण वापस पाने के लिए आप जिन दो चीज़ों का इस्तेमाल करते, पोर्ट बंद करना और ट्रैफ़िक पढ़ना, दोनों डिज़ाइन से ही ख़त्म हैं। किसी दुश्मन नेटवर्क के हाथों में ठीक इन्हीं दोनों को हराना वही है जिसके लिए DoH बनाया गया था।\nऔर ट्रैफ़िक पढ़ना उतना आसान रास्ता नहीं जितना सुनाई देता है, क्योंकि इसका एक ही तरीका है: सब कुछ तोड़कर जाँचिए। 443 कनेक्शन के अंदर का DNS देखने के लिए आपको नेटवर्क के हर HTTPS कनेक्शन के बीच में बैठना पड़ता है, हर डिवाइस पर अपना root certificate डालना पड़ता है, और सब कुछ decrypt करके फिर से encrypt करना पड़ता है। बढ़ती संख्या में admins अब यही सहारा लेते हैं, ताकि वह दृश्यता वापस छीनें जो एक अकेला firewall नियम उन्हें मुफ़्त में देता था।\nऔर यह कहीं बुरा सौदा है: आपने हर चीज़ के लिए TLS कमज़ोर कर दिया, हर login और हर बैंक session के रास्ते में एक decryption box रख दिया, और एक ऐसा निशाना बना दिया जिससे सब compromise हो जाता है, एक ऐसी स्थिति जिसके खिलाफ़ US-CERT ने साफ़ चेतावनी दी11। अनुपात वाला control टूट गया, इसलिए जो बचता है वह अनुपात से बाहर वाला है।\nयही उलझन है। जो तरीका एयरपोर्ट के WiFi पर एक पत्रकार को दुश्मन नेटवर्क से बचाता है, वही आपके नेटवर्क पर malware को आपसे बचाता है, और protocol दोनों में फ़र्क़ नहीं कर सकता। जिस resolver को किनारे किया जा रहा है, उसे नहीं पता कि वह सेंसर है या security टीम। उसे बस इतना पता है कि उसे काट दिया गया है।\nसही जवाब हमेशा DNS over TLS था यह वह हिस्सा है जो सारा खेल खोल देता है। DNS को encrypt करने के लिए इसकी कभी ज़रूरत नहीं थी। यह DoH से दो साल पहले हो चुका था, ऐसे तरीके से जिसमें नेटवर्क चलाने वाला अपना काम कर सकता था।\nDNS over TLS, RFC 7858, मई 2016 का है। इसका abstract पहली ही लाइन में बताता है कि यह किसलिए है: “provide privacy for DNS”, ऐसी encryption जो “eliminates opportunities for eavesdropping and on-path tampering with DNS queries in the network”12। Privacy का पूरा मामला यहीं पूरा: कॉफ़ी शॉप और ISP ठीक उतने ही बाहर जितने DoH में, क्योंकि lookup शुरू से अंत तक encrypted है।\nऔर इसके सह-लेखक थे Paul Hoffman, जिन्होंने फिर DoH standard भी सह-लिखा1। तो ये दो विरोधी खेमे नहीं थे। वही लोग, जो privacy पहले ही हल कर चुके थे, उसे दूसरे तरीके से फिर हल कर रहे थे।\nHoffman कौन हैं, यह मायने रखता है, क्योंकि इससे पता चलता है कि यह आया कहाँ से। वे DNS में कोई तमाशबीन नहीं: अस्सी से ज़्यादा RFCs पर उनका नाम है, उनमें DNS terminology standard भी, और वे यह काम ICANN में technologist के तौर पर करते हैं13। तो जिस standard ने DNS को 443 पर छिपाया, वह ICANN के अंदर से सह-लिखा गया, उस अमेरिकी संस्था के अंदर से जो तय करती है कि root में क्या जाता है।\nऔर ICANN वह निष्पक्ष संरक्षक नहीं है जैसा शब्द से लगता है। मैंने उसका रिकॉर्ड अलग से रखा है: कैलिफ़ोर्निया में बना, कैलिफ़ोर्निया के प्रति जवाबदेह, और namespace पर अपनी स्थिति का इस्तेमाल अपने हितों के लिए करने को तैयार। यह किनारे से उठा कोई privacy अभियान नहीं था। यह वह establishment था जो root रखता है, privacy के उस मामले को दूसरी बार पूरा करता हुआ जो 2016 में पूरा हो चुका था, ऐसे तरीके से जिसने नेटवर्क ऑपरेटर को हटा दिया।\nतो पूछिए दूसरे तरीके ने क्या जोड़ा, क्योंकि privacy तो नहीं जोड़ी।\nStandard साल पोर्ट DNS encrypt करता है ऑपरेटर अब भी देख सकता है कि यह DNS है DNS over TLS (RFC 7858) 2016 853 हाँ हाँ DNS over HTTPS (RFC 8484) 2018 443 हाँ नहीं Privacy 2016 में DoT ने हल कर दी। DoH दो साल बाद आया और सिर्फ़ bypass जोड़ा। Encrypted DNS: पहले क्या आया, बाद में क्या मई 2016 DNS over TLS (RFC 7858), पोर्ट 853 DNS encrypt करता है। ऑपरेटर अब भी देखता है कि यह DNS है। Privacy हल। अक्टूबर 2018 DNS over HTTPS (RFC 8484), पोर्ट 443 वही मुख्य लेखक। वही encryption। ऑपरेटर अब उसे नहीं देख सकता। जुलाई 2019 Godlua: DoH पर अपना C2 छिपाने वाला पहला malware जुलाई 2019 ISPA ने DoH के लिए Mozilla को “Internet Villain” कहा, फिर वापस लिया सितंबर 2019 PsiXBot अपने C2 domains Google के DoH से resolve करता है फ़रवरी 2020 Firefox अमेरिका में DoH default चालू करता है, resolver Cloudflare Q2 2020 OilRig (APT34) DoH पर डेटा बाहर ले जाता है Privacy 2016 में पूरी हो चुकी थी। दूसरे बिंदु के नीचे सब कुछ bypass है और वह जिसके लिए bypass इस्तेमाल हुआ। इसमें से किसी को नए privacy standard की ज़रूरत नहीं थी। क्रम ही दलील है। DNS over TLS ने 2016 में privacy की समस्या हल कर दी, उस पोर्ट पर जिसे नेटवर्क ऑपरेटर अब भी संभाल सकता है। DNS over HTTPS दो साल बाद उसी मुख्य लेखक से आया, privacy में पोर्ट 443 पर जाने के सिवा कुछ नहीं जोड़ा, और उस दूसरे बिंदु के नीचे सब कुछ bypass है और वह जिसके लिए bypass का इस्तेमाल हुआ। बदला सिर्फ़ आखिरी खाना। DoT अपने अलग पोर्ट, 853, पर चलता है, इसलिए ऑपरेटर देख सकता है कि यह DNS है और तय कर सकता है कि उसके साथ क्या हो: मंज़ूर resolver तक जाने दे, बाकी जगह मना करे। DoH वही encrypted lookup 443 पर रखकर वेब में मिला देता है, जहाँ ऑपरेटर उसे छाँटकर नहीं निकाल सकता।\nवही privacy, वही encryption। दोनों standards में इकलौता फ़र्क़ यह है कि नेटवर्क चलाने वाला अपना ही DNS अब भी देख सकता है या नहीं। यह privacy feature नहीं है। Privacy 2016 में शिप हो चुकी थी। यह bypass feature है, और DoH बस यही जोड़ता है।\nऔर उन्हें पता था। यह दर्ज है, अनुमान नहीं। RFC 8484 की अपनी Operational Considerations साफ़ कहती हैं: “Filtering or inspection systems that rely on unsecured transport of DNS will not function in a DNS over HTTPS environment due to the confidentiality and integrity protection provided by TLS”8।\nवे systems वही security टूल हैं जो पहले से उपयोगकर्ताओं की रक्षा कर रहे थे: malware और command-सर्वर blocking, Protective DNS feeds, बच्चों की सुरक्षा वाले filters, enterprise inspection। Standard अपने ही टेक्स्ट में उनका नाम लेता है, उन चीज़ों के रूप में जो काम करना बंद कर देंगी। पहले से लोगों की रक्षा कर रहे टूल्स को तोड़ना एक चुनाव था, खुली आँखों से लिया गया और default रूप से चालू करके शिप किया गया। असर जानते हुए उसे फिर भी चुनना ऐसा फ़ैसला है जिसका हिसाब उनसे माँगा जा सकता है।\nइसीलिए privacy वाली कहानी timeline के सामने टिकती नहीं। जब DoT मौजूद है, तो privacy DoH की वजह नहीं हो सकती, क्योंकि privacy पहले ही हो चुकी थी, उसी लेखक द्वारा, दो साल पहले। तो privacy परदा थी।\nउसे हटाइए और देखिए दूसरे standard ने असल में क्या चालू किया: हथियारों की होड़। इसने एक ऐसे control को, जो firewall की एक लाइन था, एक स्थायी पीछा बना दिया, resolvers बनाम blocklists बनाम नए resolvers, ऑपरेटर default रूप से हारता हुआ, और अंत में कुछ अमेरिकी कंपनियाँ plaintext थामे हुए।\nचाहें तो इसे privacy feature का side effect कह लीजिए। सबूत पर, जब DoT पहले से शिप हो चुका था और standard खुद मानता था कि यह filtering तोड़ेगा, तो मकसद यही है, और privacy डिब्बे पर पेंट किया गया शब्द था। और इसे उसी शब्द के तहत ज़ोर से धकेला गया, उन्हीं पक्षों द्वारा जिन्हें फ़ायदा हुआ।\nDoH को धकेला और शिप किया वे और क्या हैं Mozilla RFC 8484 सह-लिखा, फिर अमेरिकी Firefox में DoH default रूप से चालू किया14, resolver Cloudflare Google Chrome में DoH शिप करता है, एक बड़ा public DoH resolver चलाता है, और एक विज्ञापन कंपनी है Cloudflare अमेरिकी Firefox का default resolver, इसलिए वे queries उसे मिलती हैं इसे privacy के नाम पर बेचने वाले ब्राउज़र vendors थे, और फ़ायदा पाने वाले सिर्फ़ उपयोगकर्ता नहीं थे।\nक्या मैं पूछ सकता हूँ कि अगर मकसद privacy था, तो जवाब वह encrypted-DNS standard क्यों नहीं था जो पहले से मौजूद था और ऑपरेटर को शामिल रखता था, बल्कि एक दूसरा क्यों, जिसे इस तरह बनाया गया कि ऑपरेटर उसे देख न सके? मैं यह नहीं पूछ रहा कि इस पर दस्तख़त किसने किए। मैं पूछ रहा हूँ कि “privacy” के किस हिस्से के लिए नेटवर्क के प्रति जवाबदेह इकलौते व्यक्ति को काट देना ज़रूरी था।\nक्योंकि असली निशाना वही है, और वह है नेटवर्क administrator: नेटवर्क की security और सुरक्षा का ज़िम्मेदार पेशेवर, जिसे default रूप से दुश्मन माना गया। DoH वह निगरानी भी नहीं हटाता जिसकी शिकायत privacy वाली बात करती थी। जैसा PowerDNS के Bert Hubert ने समझाया, DNS “typically provided by the operator of a network” होता था, और default रूप से उसे किसी तीसरे पक्ष को सौंपना “a net-negative for privacy for everyone” है, क्योंकि वह तीसरा पक्ष “gets a complete log per device of all DNS queries, in a way that can even be tracked across IP addresses”15।\nLookups छिपे नहीं हैं। वे admin की जगह एक अमेरिकी resolver ऑपरेटर को सौंप दिए गए, और हटाया गया इकलौता पक्ष admin है। Vendors भी यह जानते हैं। अगले हिस्से वाला “managed नेटवर्क पहचानो और पीछे हटो” logic ठीक इसीलिए है कि default admin को overrule करता है, और उन्होंने default बदलने के बजाय off-switch शिप कर दिया।\nअब पूछिए कि DNS को ऑपरेटर के पार भेजने से फ़ायदा किसे है। मिसाल के तौर पर पेश किया जाता है दुश्मन एयरपोर्ट WiFi पर बैठा पत्रकार, और वह व्यक्ति असली है। उतना ही असली है विज्ञापन और tracking उद्योग, जिसके domains नेटवर्क की blocklist के पार उसी पल निकल जाते हैं जब कोई ऐप या ब्राउज़र उन्हें DoH पर resolve करता है।\nनेटवर्क-स्तर की blocking, Pi-hole, कॉर्पोरेट blocklist, filtering resolver, tracker के नाम का जवाब कुछ नहीं देकर काम करती है। DoH वह तरीका है जिससे नाम का जवाब फिर भी मिल जाता है। और public DoH resolver का सबसे बड़ा ऑपरेटर Google है16, एक विज्ञापन कंपनी जो अपने ब्राउज़र में भी DoH शिप करती है17।\nएक privacy feature, उस कंपनी द्वारा बेचा गया जो tracking बेचती है, जिसका डिज़ाइन उस टूल को हराता है जिसे लोग उसे ब्लॉक करने के लिए चलाते हैं। इसका जो मतलब निकालना हो, निकालिए। मैं अपना मन बना चुका हूँ।\nइस आपत्ति का भद्दा रूप भी सामने आया था। जुलाई 2019 में ब्रिटेन की ISP trade संस्था ने DoH के लिए Mozilla को “Internet Villain” नामांकित किया, जो “bypass UK filtering obligations and parental controls, undermining internet safety standards in the UK”18। उन्होंने भद्दा निशाना और उससे बुरा ढाँचा चुना, उन्हें चिल्लाकर चुप कराया गया, और उन्होंने इसे वापस ले लिया।\nपर राजनीति हटा दीजिए, और नीचे वाला अवलोकन सही था, और यह तब भी टिकता है जब bypass होने वाला control बच्चों की सुरक्षा वाला filter हो, कंपनी की blocklist हो, या किसी खाली कमरे में रखा Pi-hole। DoH को इसलिए बनाया गया है कि DNS नेटवर्क चलाने वाले के पार निकल जाए।\nऔर यह छोटी बात नहीं, क्योंकि DoH अब तीनों में ब्लॉक करने में सबसे कठिन है। DoT 853 पर बैठता है, जहाँ नेटवर्क उसे अब भी मना कर सकता है। DoH नहीं, इसलिए DNS के नेटवर्क से निकलने के हर तरीके में यही वह है जिसे पकड़ने का कोई हैंडल नहीं, और इसीलिए यह सबमें सबसे बड़ा अकेला जोखिम है।\nयह सिर्फ़ security तक नहीं, क़ानून तक पहुँचता है। ब्रिटेन में जिस blocking का क़ानूनी वज़न है वह ISP पर DNS से चलती है: Internet Watch Foundation की बाल यौन शोषण सामग्री की सूची, और section 97A के तहत High Court के दिए copyright injunctions, ग्राहक को दिए गए resolver पर DNS और IP filtering से लागू होते हैं19।\nDNS वाले आधे हिस्से को DoH पर उसके चारों ओर से भेज दीजिए और block उस क्लाइंट पर लागू नहीं होता। अदालत किसी साइट को ब्लॉक करने का आदेश दे सकती है, नेटवर्क को उसे लागू करने को कहा जा सकता है, और DoH पर resolve करने वाला ब्राउज़र फिर भी पता ढूँढ लेता है, ऐसे चैनल पर जिसे नेटवर्क न देख सकता है, न बंद कर सकता है। नेटवर्क स्तर पर साइबर क़ानून या अदालती आदेश लागू करना, जहाँ यह हमेशा होता आया है, लगभग असंभव हो जाता है।\nऔर यहीं बिल सब पर आता है, सिर्फ़ नेटवर्क पर नहीं। अनुपात वाला control तोड़ दीजिए, वह सटीक control जो अदालती आदेश के तहत resolver पर एक नामित domain ब्लॉक करता था, और राज्य हार नहीं मानता। वह एक भोथरा औज़ार उठाता है। ब्रिटेन का Online Safety Act वही औज़ार है: platforms पर व्यापक कर्तव्य, अनिवार्य उम्र जाँच, और उनके पीछे जुर्माने लेकर Ofcom, एक ऐसा ढाँचा जो देश के हर उपयोगकर्ता और हर सेवा को छूता है20।\nमैं इस Act का बचाव नहीं कर रहा। मैं इशारा कर रहा हूँ कि इसका दबाव कहाँ से आया। जब नेटवर्क पर क़ानून लागू करने वाला सटीक टूल काम करना बंद कर देता है, तो आपको कम enforcement नहीं मिलता, आपको ज़्यादा भद्दा, ज़्यादा व्यापक, ज़्यादा दख़ल देने वाला enforcement मिलता है जो सब पर निशाना साधता है, क्योंकि निशाने वाला रूप अब टिकता नहीं। एक बुनियादी control तोड़ने की यही क़ीमत है, और जिन्होंने इसे तोड़ा, वे इसे चुका नहीं रहे।\nऔर ICANN को इससे कोई फ़र्क़ नहीं पड़ता, क्योंकि कैलिफ़ोर्निया से देखो तो यह उनकी समस्या नहीं। जब कोई block विफल होता है या कोई platform अपने कर्तव्य तोड़ता है, तो अदालत में ICANN नहीं खड़ा होता, बल्कि ऑपरेटर, platform, कंपनी, जो Ofcom और जुर्मानों का सामना करते हैं। नतीजा उस फ़ैसले से नीचे के हर व्यक्ति पर पड़ता है जिसे लेने वाली संस्था को कभी जवाब नहीं देना पड़ता।\nसटीक control तोड़िए और राज्य हथौड़ा उठाता है। सब चुकाते हैं। अनुपात वाला control तोड़िए, और ज़्यादा भोथरा उसकी जगह लेता है सटीक control एक नामित domain ब्लॉक करें resolver पर, अदालती आदेश के तहत सटीक, अनुपात में, सिर्फ़ निशाने पर DoH इसे तोड़ता है lookup अब resolver से नहीं गुज़रता भोथरा औज़ार Online Safety Act: सब पर उम्र जाँच, हर platform पर कर्तव्य, जुर्माने लेकर Ofcom पूरे देश पर निशाना सटीक टूल तोड़िए और राज्य हार नहीं मानता। वह व्यापक वाला उठाता है, सब पर निशाना, क्योंकि सटीक रूप अब टिकता नहीं। और जिन्होंने सटीक टूल तोड़ा, वे व्यापक वाले की क़ीमत नहीं चुकाते। सटीक control अदालती आदेश के तहत resolver पर एक नामित domain ब्लॉक करता था। DoH उसे तोड़ देता है, इसलिए राज्य भोथरा औज़ार उठाता है: Online Safety Act, जो देश के हर उपयोगकर्ता और हर platform पर निशाना साधता है। सटीक टूल तोड़िए और आपको कम enforcement नहीं मिलता, आपको ऐसा व्यापक enforcement मिलता है जिसे कोई निशाने पर नहीं ला सकता। नतीजों को एक कतार में रखिए और सबकी शक्ल एक है: ऐसी चीज़ जो नेटवर्क पहले resolver पर लागू करता था, और अब नहीं कर सकता।\nनेटवर्क क्या लागू करता था कैसे किया जाता था DoH के तहत Malware और command-सर्वर blocking resolver blocklist और threat feed bypass; Godlua, PsiXBot और OilRig ने ठीक यही किया Ad और tracker blocking Pi-hole या filtering resolver bypass; tracker का नाम फिर भी resolve होता है अदालती आदेश और IWF सूची ISP DNS filtering DNS-आधारित block उस क्लाइंट पर लागू नहीं होता DoT ईमानदार जवाब था। यह आपका DNS encrypt करता है और ऑपरेटर को अपना काम करने देता है। DoH ने encryption रखी और ऊपर एक चीज़ जोड़ी: ऑपरेटर अब उसे देख नहीं सकता। इसके बारे में बाकी सब उसी एक चुनाव का नतीजा है।\nअमेरिका में बना, बाकी हर जगह इस पर लड़ाई इसमें से कुछ भी इंग्लिश चैनल पर नहीं रुकता, और इसे ब्रिटिश समस्या मानकर पढ़ना इसे इसके असली आकार के एक टुकड़े तक छोटा कर देता है। यही शक्ल पूरे यूरोप में और ऑस्ट्रेलिया तक चलती है। एक सिरे पर क़ानूनी औज़ार, दूसरे सिरे पर नेटवर्क पर DNS block।\nऑस्ट्रेलिया में Copyright Act के section 115A के तहत Federal Court ISPs को विदेशी उल्लंघन करने वाली साइटों तक पहुँच बंद करने का आदेश देता है21। पुर्तगाल अदालत को पूरी तरह छोड़ देता है: एक प्रशासनिक memorandum, जिसके तहत अधिकार-धारक MAPINET नाम की संस्था को सूचित करते हैं, और ISPs पंद्रह कार्य-दिवसों के अंदर DNS से ब्लॉक करते हैं22। अलग-अलग क़ानून, एक ही बोझ उठाने वाली मान्यता, और यही वह मान्यता है जिसे DoH इन सबके नीचे से खींच लेता है। कि क्लाइंट उसी resolver से resolve करता है जो उसे दिया गया।\nतो देखिए जब वह मान्यता विफल होती है तो राज्य क्या करता है। वह ISP पर ज़ोर डालना बंद करता है और public resolvers को ही ग़लत जवाब लौटाने का आदेश देने लगता है। यह भविष्यवाणी नहीं। यह फ़ैसलों का ढेर है, और ऊँचा होता जा रहा है।\nदेश Blocking आदेश Public resolver क्या हुआ इटली AGCOM का Piracy Shield, नाम 30 मिनट के अंदर ब्लॉक filter करने का आदेश, 1.1.1.1 समेत Cloudflare ने मना किया, उस पर €14,247,698 का जुर्माना लगा, और वह अपील कर रहा है23 फ़्रांस Canal+ खेल-streaming injunction Google, Cloudflare और OpenDNS तीनों नामित Cloudflare HTTP 451 देता है, Google चुपचाप query विफल करता है, OpenDNS ने देश के लिए खुद को बंद कर दिया24 बेल्जियम 100 से ज़्यादा खेल-piracy domains वही तीन resolvers Cloudflare 451 के साथ पालन करता है, Google चुप रहता है, OpenDNS ने बेल्जियम भी छोड़ दिया24 जर्मनी Universal Music बनाम Cloudflare पहली अदालत में आदेश, 1.1.1.1 समेत अपील में पलटा, Cologne ने resolver को “passive, automatic and neutral” माना25 नीदरलैंड BREIN का dynamic blockade ISP स्तर, resolver अभी नहीं Ziggo, KPN और बाकी DNS और IP से ब्लॉक करते हैं, अनुरोध पर अपडेट26 इसे पाँच नहीं, एक चीज़ के रूप में पढ़िए। कुछ अमेरिकी कंपनियों ने अपने अधिकार से पूरी पृथ्वी के लिए DNS दोबारा लिख दिया, इन सभी देशों के बनाए अनुपात वाले control तोड़ दिए, और मलबे का क्या करना है, यह अदालतों पर छोड़ दिया। हर कुछ महीनों में अलग-अलग अदालत के सामने खींची जाने वाली उन कंपनियों के जवाब ठीक बताते हैं कि बाकी दुनिया उनके लिए कितना वज़न रखती है। एक अपील करता है और सेंसरशिप का रोना रोता है। एक lookup विफल करता है और उपयोगकर्ता को कुछ नहीं बताता। और OpenDNS, वह resolver जिसने बीस साल चुपचाप malware filter किया और जिसे यह पोस्ट पहले ही नकल करने लायक मॉडल बता चुकी है, बहस ही नहीं करता। वह उन शर्तों पर सेवा देने के बजाय फ़्रांस और पुर्तगाल के लिए खुद को बंद कर देता है27।\nउस आखिरी पर थोड़ा ठहरिए। यह इस पूरे लेख का अच्छा उदाहरण है जो कमरे से बाहर जा रहा है। जिस सेवा ने उन लोगों की रक्षा की जिन्होंने कभी कुछ configure नहीं किया, उसे अब पूरे देश को सेवा देने से छोड़ देना आसान लगता है, और इसकी वजह सीधे कैलिफ़ोर्निया में उन लोगों के लिए डिज़ाइन फ़ैसले तक जाती है जिन्हें कभी किसी फ़्रांसीसी या पुर्तगाली अदालत के बारे में सोचना नहीं पड़ा।\nयही पैटर्न है, और मैं इसका नाम लूँगा। अमेरिकी platform engineering उस हर जगह के साथ यही करती है जो संयुक्त राज्य नहीं है। यह अपने बाज़ार के लिए बनाती है, नतीजे को default बनाकर दुनिया को शिप करती है, और हर दूसरे देश के क़ानून, हर regulator, बदलाव के नीचे छूटे हर समुदाय को किसी और की गंदगी मानती है जिसे साफ़ करना है।\nऔर घरेलू सरकार कंपनियों का पूरा साथ देती है। फ़रवरी 2025 में White House ने एक memorandum पर अपना नाम रखा जो दूसरे देशों के डिजिटल क़ानूनों को अमेरिकी कंपनियों से “overseas extortion” बताता है, ब्रिटेन और EU का नाम लेता है और जवाब के तौर पर trade representative को tariffs की ओर इशारा करता है28। छह महीने बाद, एक अमेरिकी regulator ने एक दर्जन अमेरिकी tech कंपनियों को चिट्ठी लिखकर चेताया कि ब्रिटेन के Online Safety Act या EU के Digital Services Act का पालन करना खुद अमेरिकी क़ानून तोड़ सकता है29। इसे दो बार पढ़िए। जिस देश की कंपनियों ने controls तोड़े, वही अब उन कंपनियों से कहता है कि टूटन पर किसी दूसरे लोकतंत्र के जवाब का पालन करना ही अपराध है।\nइसमें सब कुछ कह दिया गया है। Westminster या Brussels की चुनी हुई संसद का पारित क़ानून Washington से अमेरिका पर हमला बनाकर पेश किया जाता है, और कंपनियों से उसे नज़रअंदाज़ करने को कहा जाता है। ऐसा नहीं कि उन्होंने बाकी दुनिया को तौला और उसके खिलाफ़ चुना। बाकी दुनिया कभी तराज़ू पर थी ही नहीं।\nउपाय encryption पर पाबंदी नहीं है तो आलसी निष्कर्ष है \u0026ldquo;DoH ब्लॉक करो\u0026rdquo;, और यह ग़लत है, उसी तरह जैसे firewall पर \u0026ldquo;ICMP ब्लॉक करो\u0026rdquo; ग़लत है। आपको बिना encryption वाला DNS वापस नहीं चाहिए। पोर्ट 53 पर खुले टेक्स्ट वाले lookups एक असली जोखिम हैं, और दृश्यता वापस पाने के लिए उन पर लौटना एक छेद के बदले दूसरा लेना है।\nआपने असल में जो खोया वह encryption नहीं था। वह resolver का चुनाव था। तो वह वापस लीजिए और encryption को ठीक वहीं छोड़ दीजिए जहाँ वह है।\nEncryption रखिए। Resolver का चुनाव वापस लीजिए। पूरे रास्ते encrypted। दुनिया से DNS बोलने की इजाज़त एक ही मशीन को। क्लाइंट 53, DoT या DoH, सिर्फ़ आपके resolver तक DDR उन्हें बताता है कहाँ आपका resolver खुद DoH और DoT देता है blocklist, threat feed, लॉग canary का जवाब NXDOMAIN Border सिर्फ़ यही Upstream या roots क्लाइंट सीधे 53, 853 या public DoH resolver तक: मना यहाँ कुछ भी encryption बंद नहीं करता। क्लाइंट से छीनी गई इकलौती चीज़ किसी और का resolver चुनने का अधिकार है। सुधरा हुआ ढाँचा। क्लाइंट सादा DNS, DNS over TLS या DNS over HTTPS इस्तेमाल कर सकते हैं, पर सिर्फ़ आपके अपने resolver तक, जो अब तीनों देता है। वह resolver blocklist और लॉग रखता है और इकलौती मशीन है जिसे किसी भी तरह का DNS border के पार भेजने की इजाज़त है। पोर्ट 53, पोर्ट 853 और जाने-माने public DoH resolvers बाकी सबके लिए मना हैं। यहाँ कुछ भी encryption बंद नहीं करता। क्लाइंट से छीनी गई इकलौती चीज़ किसी और का resolver चुनने का अधिकार है। शक्ल वही है जो Active Directory domain में DNS ठीक करती है: दलील कभी \u0026ldquo;feature बंद करो\u0026rdquo; नहीं होती, वह होती है \u0026ldquo;तय करो कि उसे चलाने की इजाज़त किसे है\u0026rdquo;। हिस्सों में इसका मतलब यह है।\nEncrypted DNS खुद चलाइए। ऐसा resolver खड़ा कीजिए जो सिर्फ़ पोर्ट 53 नहीं, DoH और DoT भी देता हो, ताकि encryption चाहने वाले क्लाइंट को वह आपसे मिले। आप क्लाइंट्स से “DoH नहीं” कहकर उसका मतलब तब तक नहीं निभा सकते जब तक उन्हें अपना कोई encrypted resolver न दें। उन्हें एक दीजिए, और blocklist, threat feed और logging पहले की तरह उसी पर रखिए।\nउसका प्रचार कीजिए, ताकि क्लाइंट उसे सोच-समझकर ढूँढें। Discovery of Designated Resolvers (RFC 9462) क्लाइंट को एक ख़ास नाम query करने, अपने नेटवर्क का encrypted resolver जानने, और अपने-आप उसके साथ DoH या DoT पर upgrade होने देता है30। DDR समझने वाला क्लाइंट फिर अपना DNS encrypt करता है और आपका इस्तेमाल करता है: उपयोगकर्ता जो privacy चाहता था और आपको जो control चाहिए था, एक ही चाल में।\nब्राउज़र के अपने off-switch का जवाब दीजिए। Firefox default रूप से DoH चालू करने से पहले एक canary domain, use-application-dns.net, जाँचता है: उसका जवाब NXDOMAIN या SERVFAIL दीजिए और Firefox system resolver पर लौट आता है31। दो ईमानदार सीमाएँ, दोनों Mozilla के शब्दों में। Canary “only applies to users who have DoH enabled as the default option. It does not apply for users who have made the choice to turn on DoH by themselves”31। तो यह default बंद करने का संकेत है, ताला नहीं, और यह ऐप और malware पर कुछ नहीं करता, जिन्होंने ब्राउज़र से कभी कुछ पूछा ही नहीं।\nजहाँ मशीन आप संभालते हैं, वहाँ ब्राउज़र policy सेट कीजिए। जो डिवाइस आपका है, उस पर canary पर निर्भर मत रहिए। Chrome का DnsOverHttpsMode off, automatic और secure लेता है, और Google के docs कहते हैं कि जहाँ यह सेट नहीं है, “for managed devices DNS-over-HTTPS queries will not be sent”32; Chrome किसी enterprise policy को देखते ही अपना auto-DoH बंद कर देता है17। इसे अपने resolver की ओर मोड़िए, या off पर सेट करके encryption DDR को सौंप दीजिए। Firefox में इसके जोड़ीदार Enabled, ProviderURL और Locked knobs हैं33। Managed मशीन, managed फ़ैसला, और वह पंक्ति जिसे आप सच में बंद कर सकते हैं।\nBorder पर विकल्पों को मना कीजिए। नियम छोटे हैं, और सब एक ही बात कहते हैं: किसी भी तरह का DNS, बाहर की ओर, सिर्फ़ आपके resolver से।\nनियम कहाँ से असर बाहर जाने वाला पोर्ट 53 ब्लॉक करें आपके resolver के सिवा सब बाहर की ओर कोई सादा DNS नहीं बाहर जाने वाला पोर्ट 853 ब्लॉक करें आपके resolver के सिवा सब किसी बाहरी resolver तक कोई DoT नहीं Public DoH resolver पतों तक HTTPS ब्लॉक करें आपके resolver के सिवा सब जाने-माने DoH प्रोवाइडर कट जाते हैं अपने resolver का upstream Protective DNS की ओर मोड़ें आपका resolver Malware domains कनेक्शन से पहले मना आप हर DoH endpoint को पते से नहीं पकड़ पाएँगे, और पकड़ भी नहीं सकते, क्योंकि नया endpoint बस एक वेब सर्वर है और वेब सर्वरों का कोई अंत नहीं। तो सोचिए कि वह block अब क्या क़ीमत लेता है। DoH के लिए वह करने को जो block 53 outbound मुफ़्त में करता था, आप DoH सर्वर पतों की एक सूची खींचते हैं जिसे कोई और आपके लिए scan करता रहता है: maintained blocklists इसलिए मौजूद हैं कि बचा हुआ यही इकलौता तरीका है, और उनमें से एक हर जाने-माने public DoH domain को हर घंटे, scheduled job से, उसके मौजूदा IPs पर फिर से resolve करती है और बदलाव शिप करती है34। Bypass ने यही सौदा थोपा।\nबाहरी DNS ब्लॉक करना तब, पोर्ट 53 पर अब, 443 पर DoH नियम एक लाइन: block 53 outbound DoH-सर्वर IP blocklist की subscription पूर्णता save करते ही पूरा कभी पूरा नहीं; नए endpoints आते रहते हैं रखरखाव कुछ नहीं हर घंटे फिर से scan, खींचा और फिर से लागू क्या लगता है firewall firewall और किसी और की maintained feed जो control एक स्थिर लाइन था, वह अब एक चलते निशाने की subscription है, ऐसे वेब सर्वरों का पीछा जिन्हें कोई भी उससे तेज़ खड़ा कर सकता है जितनी तेज़ी से सूची उनका नाम ले। Protective DNS दूसरा सिरा बंद करता है: अपने resolver का upstream NCSC के PDNS जैसी filtering सेवा की ओर मोड़िए, जो “was built to hamper the use of DNS for malware distribution and operation”35, और बुरे domains कनेक्शन बनने से पहले मना हो जाते हैं, आपके resolver से आने वाले हर क्लाइंट के लिए, और ये नियम लागू होने के बाद वे सभी क्लाइंट हैं।\nइन्हें पहले वाली पाँच पंक्तियों के सामने रखिए, और हर एक के लिए एक control है जो उसे बंद करता है। उपाय की परीक्षा यही है: “क्या हमने DoH ब्लॉक किया” नहीं, बल्कि “resolver चुन सकने वाली हर चीज़ के लिए, उसे ग़लत चुनने से क्या रोकता है”।\nResolver कौन चुनता है उसे क्या बंद करता है Operating system DDR उसे आपके resolver की ओर मोड़ता है; उसे ऐसे ही रखिए ब्राउज़र Managed मशीनों पर policy; बाकी पर canary Application / library 53, 853 और public DoH resolvers पर border block वेब पेज की स्क्रिप्ट वही border block; आपके upstream पर Protective DNS Malware वही border block, साथ में domain मना करता Protective DNS इसमें से कुछ भी encryption का एक भी bit बंद नहीं करता। क्लाइंट्स को DoH अब भी मिलता है, बस आपसे, और जो कहीं और से लेने की कोशिश करते हैं वे दीवार से टकराते हैं। Privacy बरकरार है और control वापस है। इसलिए किसी ने इकलौती चीज़ खोई है तो वह उस resolver को चुनने की आज़ादी जिसे आपने कभी मंज़ूर नहीं किया, और जिस नेटवर्क के आप ज़िम्मेदार हैं, उस पर वह कभी उनकी थी ही नहीं।\nक्या मैं पूछ सकता हूँ कि वह resolver किसने चुना यह सवाल उस हर व्यक्ति से पूछिए जो कहता है कि नेटवर्क जैसा है ठीक है।\nजब आपके नेटवर्क पर कोई मशीन एक नाम resolve करती है, तो किसने तय किया कि जवाब कौन सा resolver देगा? अगर ईमानदार जवाब है “OS को जो दिया गया”, तो अच्छा, पर सिर्फ़ तब जब आपने उस तालिका की बाकी चार पंक्तियाँ बंद कर दी हों, वरना जवाब है “OS को जो दिया गया, जब तक ब्राउज़र, कोई ऐप, कोई वेब पेज या कोई उससे बुरी चीज़ कुछ और न चुन ले, और उस हालत में मुझे कोई अंदाज़ा नहीं और कोई रिकॉर्ड नहीं”। यह DNS setup नहीं है। यह उम्मीद है, और उम्मीद कुछ नहीं पकड़ती।\nमैं यह नहीं पूछ रहा कि resolver कौन चलाता है। मैं पूछ रहा हूँ कि हर मशीन पर उसे चुनने का हक़ किसे है, और क्या आप उस resolver का नाम बता सकते हैं जिस तक कल हर lookup गया। जिस नेटवर्क पर DoH unmanaged है, वहाँ आप नहीं बता सकते, और वह खाली जगह है हर वह ऐप जो अपना resolver साथ लाता है, हर वह पेज जो उपयोगकर्ता खोलता है, और malware का हर वह टुकड़ा जिसने वही शोध पढ़ा जिसका लिंक मैंने अभी दिया। तीन नामी threat actors ने अपने चैनल ठीक इसी खाली जगह पर बनाए, और उनमें से एक किसी सरकार को जवाब देता है।\nजो protocol resolver का चुनाव नेटवर्क से छीन लेता है, वह हमेशा उसके लिए तोहफ़ा बनने वाला था जिस पर नेटवर्क नज़र रखने की कोशिश कर रहा था, और इसलिए उल्टा दिखावा करना कि marketing ने “privacy” कहा था, यही वह तरीका है जिससे मायने रखने वाला control default रूप से बंद हो जाता है और कोई उस दिन को लॉग तक नहीं करता।\nअपना DNS encrypt कीजिए। Resolver खुद चलाइए। उसका प्रचार कीजिए, canary का जवाब दीजिए, policy सेट कीजिए, border बंद कीजिए। Encryption रखिए और चुनाव भी रखिए। आप दोनों रख सकते हैं, और अगर नेटवर्क चलाना आपकी रोज़ी है, तो दोनों रखना ही काम है।\nPrivacy डिब्बे पर लिखा शब्द था तो जिसका श्रेय है उसे दीजिए। ICANN को धन्यवाद, वह अमेरिकी संस्था जो root रखती है और जिसने इसे अंदर से सह-लिखा, अमेरिकी tech की वही पुरानी चाल एक बार और चलाने के लिए: एक ऐसी समस्या लीजिए जो पहले ही हल हो चुकी थी, उपाय को एक नेक शब्द में लपेटिए, और नतीजे को मुट्ठी भर अमेरिकी कंपनियों पर केंद्रित कर दीजिए जिनके हाथ अंत में plaintext आता है।\nऔर हमेशा अमेरिका ही है। Root रखने वाली संस्था, वह resolver जिस पर दो ब्राउज़र अब default रूप से जाते हैं, सबसे बड़ा public resolver चलाने वाली विज्ञापन कंपनी, वह देश जहाँ plaintext पहुँचता है: हर बार अमेरिकी। यह पैटर्न है, बदक़िस्मती का सिलसिला नहीं।\nPrivacy परदा थी। DNS 2016 में पोर्ट 853 पर encrypted, निजी और फिर भी संभालने लायक था, और मायने रखने वाला हर व्यक्ति यह जानता था। Establishment ने उसके ऊपर जो शिप किया, वह था नेटवर्क के प्रति जवाबदेह इकलौते व्यक्ति को अंधा करने के लिए बना protocol, घंटे-घंटे फिर से scan होती blocklists की स्थायी होड़, और अदालती आदेश जो ब्राउज़र पर जाकर ठप हो जाते हैं।\nयह नालायकी थी या लालच, यह मैं आप पर छोड़ता हूँ, हालाँकि जिस रिकॉर्ड का मैंने लिंक दिया वह एक ओर इशारा करता है। दोनों हालत में इसने सामान्य समझ को हरा दिया।\nऔर ऐसे ही फ़ैसलों की वजह से root को ICANN से हटाने की माँगें बार-बार लौटती हैं, और असर करती हैं: ताकि अंतरराष्ट्रीय समुदाय को भी बोलने का हक़ मिले, बजाय इसके कि एक देश की संस्था बाकी सबके लिए DNS तय करे और उसे संरक्षण कहे।\nहम यह सब एक लाइन से किया करते थे।\nRFC 8484 — DNS Queries over HTTPS (DoH), अक्टूबर 2018। भूमिका लक्ष्य बताती है: “allowing web applications to access DNS information via existing browser APIs in a safe way consistent with Cross Origin Resource Sharing (CORS)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n360 Netlab — An Analysis of Godlua Backdoor, 1 जुलाई 2019। दर्ज करता है कि sample “uses DNS over HTTPS to get the C2 name to ensure secure communication between the bots, the Web Server and the C2”; DoH का दुरुपयोग करने वाला पहला बड़े पैमाने पर रिपोर्ट हुआ malware।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nProofpoint — PsiXBot Now Using Google DNS over HTTPS, 6 सितंबर 2019। रिपोर्ट करता है कि malware hardcoded C2 domains Google की DoH सेवा से resolve करता है, और चेताता है कि यह “should be a warning shot for the cybersecurity community as there are no simple solutions to help identify an infected host or the process of receiving instructions”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKaspersky Securelist — APT trends report Q2 2020। OilRig (APT34) पर: DNSExfiltrator टूल “allows the threat actor to use the DNS over HTTPS (DoH) protocol [\u0026hellip;] instead of plain text requests to port 53, they would use port 443 in encrypted packets [\u0026hellip;] which allows DoH queries to Google and Cloudflare services”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Hacker News — ChamelDoH: New Linux Backdoor Utilizing DNS-over-HTTPS Tunneling for Covert CnC, 16 जून 2023, Stairwell की खोज (Daniel Mayer) पर रिपोर्ट। ChamelGang का C++ Linux implant “a tool for communicating via DNS-over-HTTPS (DoH) tunneling” है, जो वैध DoH प्रोवाइडरों के ज़रिए rogue nameservers को DNS TXT अनुरोध भेजता है, ताकि “both detection and prevention become difficult”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Malware Analysis Report: BRICKSTORM Backdoor, AR25-338a, 4 दिसंबर 2025। “For C2, BRICKSTORM uses multiple layers of encryption (HTTPS, WebSockets, nested Transport Layer Security [TLS]) to hide its communications with the cyber actors\u0026rsquo; C2 server. It also uses DNS-over-HTTPS (DoH)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco Talos — New Dohdoor malware campaign, 26 फ़रवरी 2026। Actor UAT-10027 से जोड़ा गया यह backdoor अपना command सर्वर resolve करने के लिए “securely sends encrypted DNS requests to Cloudflare\u0026rsquo;s DNS server over HTTPS port 443”, और phishing से अमेरिकी शिक्षा और स्वास्थ्य क्षेत्र को निशाना बनाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8484, Section 10, Operational Considerations: “Filtering or inspection systems that rely on unsecured transport of DNS will not function in a DNS over HTTPS environment due to the confidentiality and integrity protection provided by TLS.” नेटवर्क filtering पर असर standard में ही लिखा है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8484, Section 9, Security Considerations: एक DoH सर्वर “can give a client invalid data in response to a DNS query”, और भले ही standard बिना configure किए सर्वरों के responses को मना करता है, “this prohibition does not guarantee protection against invalid data, but it does reduce the risk.” DoH transport को सुरक्षित करता है, record की प्रामाणिकता को नहीं; वह DNSSEC का काम है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenDNS — David Ulevitch द्वारा 2005/2006 में स्थापित एक recursive DNS resolver, जो घरेलू और enterprise उपयोगकर्ताओं के लिए resolver पर security filtering (phishing और malware blocking) और content filtering देता है; 2015 में Cisco ने ख़रीदा और अब Cisco Umbrella का हिस्सा है। Resolver-स्तर की DNS security DoH से बहुत पुरानी है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS-CERT / CISA — HTTPS Interception Weakens TLS Security, alert TA17-075A, 16 मार्च 2017। चेताता है कि स्थानीय रूप से भरोसेमंद certificate दिखाकर और ट्रैफ़िक decrypt करके HTTPS को बीच में पकड़ना security को कमज़ोर करता है, क्योंकि कई interception उत्पाद certificates ठीक से जाँचते नहीं और कनेक्शन की सुरक्षा को नीचे गिरा देते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7858 — Specification for DNS over Transport Layer Security (TLS), मई 2016। Abstract: “This document describes the use of Transport Layer Security (TLS) to provide privacy for DNS. Encryption provided by TLS eliminates opportunities for eavesdropping and on-path tampering with DNS queries in the network.” P. Hoffman (ICANN) सह-लेखक, जिन्होंने RFC 8484 भी सह-लिखा। DoT समर्पित पोर्ट 853 इस्तेमाल करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPaul Hoffman (engineer) — “the author or co-author of over 80 Requests for Comments (RFCs)” और “currently a technologist at ICANN”; उनकी IETF datatracker profile पूरा रिकॉर्ड दिखाती है, जिसमें RFC 7858 (DoT), RFC 8484 (DoH) और RFC 8499 (DNS terminology) शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe Register — Firefox now defaults to DNS-over-HTTPS for US netizens, 25 फ़रवरी 2020। “Mozilla has started rolling out encrypted DNS-over-HTTPS (DoH) by default for US users”, साथ में “the DNS resolver in Firefox to Cloudflare by default”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBert Hubert (PowerDNS) — Centralised DoH is bad for Privacy, in 2019 and beyond, RIPE Labs। DNS “typically provided by the operator of a network” होता है; “by default” केंद्रीकृत DoH “a net-negative for privacy for everyone” है, क्योंकि तीसरा पक्ष “gets a complete log per device of all DNS queries, in a way that can even be tracked across IP addresses”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — DNS-over-HTTPS (DoH) — JSON API। Google Public DNS, सबसे बड़े public resolvers में से एक, Chrome के अपने DoH समर्थन के साथ एक DoH endpoint (dns.google) चलाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChromium Blog — A safer and more private browsing experience with Secure DNS, मई 2020। “If you are an IT administrator, Chrome will disable Secure DNS if it detects a managed environment via the presence of one or more enterprise policies.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTechCrunch — Internet group brands Mozilla \u0026lsquo;internet villain\u0026rsquo; for supporting DNS privacy feature, 5 जुलाई 2019 (Wayback snapshot)। ISPA के नामांकन में कहा गया कि DoH “bypass UK filtering obligations and parental controls, undermining internet safety standards in the UK” करेगा; विरोध के बाद नामांकन और Internet Villain श्रेणी दोनों वापस ले लिए गए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWeb blocking in the United Kingdom — Internet Watch Foundation की बाल-शोषण-छवि सूची और Copyright, Designs and Patents Act 1988 के section 97A के तहत copyright injunctions ISPs लागू करते हैं; “The technical measures used to block sites include DNS hijacking, DNS blocking, IP address blocking, and Deep packet inspection.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK Government — Online Safety Act: explainer। “The Online Safety Act 2023 [\u0026hellip;] puts a range of new duties on social media companies and search services”, जिसमें “strongest protections [\u0026hellip;] designed for children” हैं, बच्चों को हानिकारक और उम्र के लिए अनुचित सामग्री तक पहुँचने से रोकने की शर्तों समेत; Ofcom लागू करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCopyright Act 1968 (ऑस्ट्रेलिया), section 115A, “Injunctions relating to online locations outside Australia” — Federal Court किसी carriage service provider को “take reasonable steps to disable access to the online location” का आदेश दे सकता है; DNS और IP से ISP-स्तर की site blocking का ऑस्ट्रेलियाई रूप।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEDRi — Portugal: “Voluntary” agreement against copyright infringements। 2015 के एक memorandum of understanding के तहत अधिकार-धारक MAPINET को सूचित करते हैं, जो regulator IGAC को आगे भेजता है, और “IGAC then contacts Internet Service Providers (ISPs) to restrict access to the websites through \u0026lsquo;Domain Name System (DNS) blocking\u0026rsquo;” 15 कार्य-दिवसों के अंदर, बिना अदालती आदेश के।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — Italy Fines Cloudflare €14 Million for Refusing to Filter Pirate Sites on Public 1.1.1.1 DNS। इटली के Piracy Shield के तहत AGCOM (आदेश 49/25/CONS) ने Cloudflare के public resolver समेत DNS प्रोवाइडरों को ब्लॉक करने का आदेश दिया; Cloudflare ने इसे “unreasonable and disproportionate” कहकर मना किया और उस पर €14,247,698 का जुर्माना लगा, जिसके खिलाफ़ वह अपील कर रहा है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — DNS Piracy Blocking Orders: Google, Cloudflare, and OpenDNS Respond Differently, 11 मई 2025। फ़्रांस और बेल्जियम में Canal+ खेल-streaming injunctions के तहत public resolvers को ब्लॉक करने का आदेश मिला: Cloudflare HTTP 451 लौटाता है, Google चुपचाप query मना करता है, और OpenDNS ने पालन करने के बजाय दोनों देशों के लिए “pulled the plug”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — Cloudflare Applauds Court for Rejecting DNS Piracy Blocking Order। Universal Music बनाम Cloudflare (DDL-Music मामला) में निचली अदालत ने Cloudflare को अपने 1.1.1.1 resolver पर ब्लॉक करने का आदेश दिया था; Cologne के Higher Regional Court ने यह कर्तव्य resolver तक बढ़ाने से मना किया, जो “contributes to the connection of internet domains in a purely passive, automatic and neutral manner”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTorrentFreak — Dutch ISPs Must Block Pirate Bay Proxies and Mirrors Again, Court Rules, 15 अक्टूबर 2020। BREIN के पास Ziggo, KPN और दूसरों के खिलाफ़ एक “dynamic” blocking आदेश है; अदालत DNS blocking को एक “clear and verifiable” उपाय मानती है, और अनुरोध पर नए domains और proxies ISP blocklist में जोड़े जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nComplete Music Update — OpenDNS pulls plug on France and Portugal after web-blocking injunctions। Cisco का OpenDNS: “Due to a court order in France issued under the French Sport code and a court order in Portugal issued under the Portuguese Copyright Code, the OpenDNS service is not currently available to users in France [\u0026hellip;] and in Portugal.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nThe American Presidency Project — White House Fact Sheet: Directive to Prevent the Unfair Exploitation of American Innovation, 21 फ़रवरी 2025। Memorandum अमेरिकी Trade Representative को दूसरे देशों के डिजिटल-सेवा करों और नियमों के जवाब में tariffs पर विचार करने का निर्देश देता है, EU और ब्रिटेन के समेत, इसे विदेशी सरकारों द्वारा “America\u0026rsquo;s tax base” हड़पने के रूप में पेश करते हुए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nA\u0026amp;O Shearman — FTC chairman warns major tech companies of censorship in EU DSA and UK Online Safety Act, 21 अगस्त 2025 की चिट्ठियों पर: “Compliance with the requirements of non-US laws, such as the requirements in the EU Digital Services Act (DSA) and UK Online Safety Act, may result in companies censoring content”, जिसके बारे में regulator चेताता है कि यह अमेरिकी क़ानून से टकरा सकता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9462 — Discovery of Designated Resolvers (DDR), नवंबर 2023। परिभाषित करता है कि क्लाइंट “a resolver\u0026rsquo;s encrypted DNS configuration” कैसे खोजता है और उस पर upgrade होता है, नेटवर्क के Designated Resolver के लिए _dns.resolver.arpa query करते हुए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMozilla — Canary domain — use-application-dns.net। “The canary domain only applies to users who have DoH enabled as the default option. It does not apply for users who have made the choice to turn on DoH by themselves.” A/AAAA record वाले NOERROR के सिवा कोई भी जवाब, जैसे NXDOMAIN या SERVFAIL, Firefox को application DoH बंद करने का संकेत देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGoogle — DnsOverHttpsMode policy। मान off, automatic और secure; “If this policy is unset, for managed devices DNS-over-HTTPS queries will not be sent.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMozilla — Policy templates: DNSOverHTTPS। Enabled DoH चालू या बंद करता है, ProviderURL resolver सेट करता है, Locked “prevents the user from changing DNS over HTTPS preferences”, ExcludedDomains और Fallback बाकी को ट्यून करते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndibdot/DoH-IP-blocklists — firewall blocking के लिए public DoH सर्वरों के domain नामों और resolve किए गए IPv4/IPv6 पतों की maintained सूची; lookup स्क्रिप्ट “runs automatically every hour via GitHub actions” और बदलने पर पतों की सूचियाँ अपडेट करती है। jameshas/Public-DoH-Lists एक दूसरा, अपने-आप बनने वाला समकक्ष है। इनका मौजूद होना, और लगातार फिर से scan होना, यही बात है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC — Protective Domain Name Service (PDNS)। “PDNS was built to hamper the use of DNS for malware distribution and operation [\u0026hellip;] a recursive resolver which prevents access to domains known to be malicious.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/dns/dns-over-https-walks-past-your-controls/","summary":"DNS over HTTPS आपके lookups को encrypt करता है, जो अच्छा है, और उन्हें पोर्ट 443 पर क्लाइंट के चुने resolver को भेजता है, जो समस्या है। आपका अपना resolver query देखता ही नहीं, इसलिए जो blocklist चलती, जो threat feed पकड़ता और जो log line लिखी जाती, सब गायब हो जाते हैं। यह पोस्ट तरीका समझाती है: हज़ारों में से एक encrypted वेब कनेक्शन border पर क्यों दिखता नहीं, एक मशीन पर कौन-कौन ऐसा resolver चुन सकता है जो आपने कभी नहीं चुना (OS, ब्राउज़र, कोई भी ऐप, किसी भी वेब पेज की कोई भी स्क्रिप्ट, और malware), और दर्ज मामले: पेज का अपना JavaScript cross-origin अनुरोध स्वीकार करने वाले public DoH endpoint से पूछता है, Godlua और PsiXBot अपना command channel DoH में छिपाते हैं, OilRig APT इसी पर डेटा बाहर ले जाता है। फिर यह दलील कि privacy की कहानी एक परदा है: DNS over TLS ने 2016 में ही DNS encrypt कर दिया था, उस पोर्ट पर जिसे नेटवर्क चलाने वाला अब भी संभाल सकता है, इसलिए DoH उसके ऊपर बस इतना जोड़ता है कि admin हार जाए, और इसीलिए फ़ायदा उन्हीं को हुआ जिन्होंने इसे लिखा और शिप किया: ब्राउज़र बनाने वाले और सबसे बड़ा public DoH resolver चलाने वाली विज्ञापन कंपनी। फिर उपाय, जो encryption पर पाबंदी नहीं है। अपना DoH और DoT resolver चलाइए, Discovery of Designated Resolvers से उसका प्रचार कीजिए, border पर पोर्ट 53, पोर्ट 853 और जाने-माने public DoH resolvers को मना कीजिए, और Firefox canary का जवाब दीजिए ताकि ब्राउज़र पीछे हट जाए। Encryption रखिए। Resolver कौन चुनेगा, यह वापस ले लीजिए। अंत में नतीजे: यही DNS-आधारित enforcement पूरे यूरोप और ऑस्ट्रेलिया में चलता है, और इटली, फ़्रांस, बेल्जियम और जर्मनी की अदालतें अब public resolvers को ही ब्लॉक करने का आदेश दे रही हैं: Cloudflare पर जुर्माना और अपील, Google चुपचाप मना करता है, और OpenDNS पूरे-पूरे देशों के लिए खुद को बंद कर देता है। इसके नीचे का पैटर्न है एक अमेरिकी डिज़ाइन जो दुनिया पर थोपा गया, और एक अमेरिकी सरकार जो दूसरे देशों के क़ानूनों को अमेरिकी कंपनियों से वसूली बताती है और उन्हें पालन न करने की चेतावनी देती है।","title":"DNS over HTTPS आपके कंट्रोल के बगल से सीधा निकल जाता है"},{"content":"आप किसी स्थानीय अख़बार के लिंक पर क्लिक करते हैं और हेडलाइन लोड होती है, फिर तस्वीर, फिर पहले तीन पैराग्राफ़, और कुछ और होने से पहले आप पढ़ना शुरू कर चुके होते हैं। फिर पेज ख़ाली हो जाता है। या वह बिना स्टाइल वाले लिंक्स का ढेर बन जाता है, और लोगो स्क्रीन की पूरी चौड़ाई में खिंच जाता है। या नीचे से एक बॉक्स आता है जो कहता है या तो tracking स्वीकार कीजिए या £2.99 महीना दीजिए, कोई तीसरा बटन नहीं।\nलेख आपकी मशीन पर था। प्रकाशक का सर्वर उसे पूरा भेज चुका था, text और stylesheets दोनों, और आपका browser उसे दिखा चुका था। उसे छीनने वाला वह कोड था जिसे प्रकाशक ने बाद में आपके कंप्यूटर पर चलाना चुना, एक कमर्शियल vendor से ख़रीदा हुआ, जिसका प्रोडक्ट ही अभी-अभी पहुँचाई गई चीज़ को वापस लेना है।\nमैं घर पर एक Pi-hole1 चलाता हूँ, जो नेटवर्क के हर डिवाइस के लिए विज्ञापन और tracking hosts को ब्लॉक करता है। UK की न्यूज़ साइटों की बढ़ती सूची पर बस इतना ही पेज को नष्ट करवाने के लिए काफ़ी था। तो 22 सितंबर 2026 को मैंने इसे रोकने के लिए एक Chrome extension बनाया, जिसका नाम Keep The Page है। कोड GitHub पर damo2929/browserplugin पर है, MIT लाइसेंस के तहत, और यह पोस्ट बताती है कि यह क्या करता है, उसे बनाते हुए मुझे उन पेजों के अंदर क्या मिला, और वे सुधार जिनसे सही सुधार मिलने से पहले हालत और बिगड़ी।\nयह paywall तोड़ने का औज़ार नहीं है। अगर सर्वर ने लेख भेजा ही नहीं, तो यहाँ कुछ भी उसे पैदा नहीं करेगा। The Times बंद ही रहा और यह सही है। यह वही रखता है जो आपको पहले से भेजा जा चुका था।\nलेख आता है, फिर चला जाता है बाहर से ये सब एक ही तरह काम करते हैं। HTML पूरा आता है, और फिर एक script, जो आमतौर पर अख़बार के नहीं बल्कि किसी vendor के host से लोड होती है, तय करती है कि आप इसे देखने लायक नहीं हैं, और उसे हटा देती है।\nवह क्या हटाती है, और कैसे, यह इस पर निर्भर है कि प्रकाशक ने कौन सा vendor ख़रीदा। ये वे चार हैं जिनसे मेरा सामना हुआ, हर एक बनाते समय किसी लाइव पेज से पढ़ा गया:\nप्रकाशक क्या आता है फिर पेज अपने साथ क्या करता है Newsquest (269 अख़बार)2 पूरा लेख एक wall बनाता है, एक eval payload चलाता है, एक confirm() dialog उठाता है notebookcheck.net पूरा लेख लगभग 7 सेकंड में \u0026lt;body\u0026gt; मिटाता है, फिर dialogs, फिर reload loop National World (The Scotsman, Yorkshire Post)3 लेख और साथ में उसकी अपनी लगभग 68KB CSS हर 100ms पर हर \u0026lt;link\u0026gt; और \u0026lt;style\u0026gt; मिटाता है, हमेशा Reach plc (Mirror, Daily Record, Manchester Evening News, Liverpool Echo और दूसरे)4 पूरा लेख उसे “tracking स्वीकार करें या £2.99/महीना दें” से ढक देता है 269 का आँकड़ा किसी प्रेस रिलीज़ से नहीं है, जो “more than 200 brands” कहती है। यह Newsquest के अपने TLS certificates पर दर्ज domains की गिनती है, वही सूची जो extension को यह जानने के लिए चाहिए थी कि कहाँ चलना है।\nNational World वाला मामला वह है जिससे प्रकाशकों को सबसे ज़्यादा चिंता होनी चाहिए, क्योंकि यह पेज को ऐसी वजहों से तोड़ता है जिनका विज्ञापन से कोई लेना-देना नहीं। stylesheet मिटाने वाले का एक साथी है जो CSS को vendor के host से वापस लाता है। मेरा Pi-hole उस host को ब्लॉक करता है। तो मिटाना चला और वापस लाना कभी नहीं आया, और अख़बार का अपना layout हमेशा के लिए इस पर निर्भर रह गया कि एक विज्ञापन vendor तक पहुँचा जा सके। यह कोई wall नहीं है। यह एक प्रकाशक है जिसने अपनी वेबसाइट का रूप-रंग किसी तीसरे पक्ष को सौंप दिया और ध्यान भी नहीं दिया।\nक्या मैं पूछ सकता हूँ कि किसी अख़बार की stylesheet को पेज पर टिके रहने की इजाज़त से पहले एक विज्ञापन कंपनी के सर्वर का इंतज़ार क्यों करना पड़ता है? पाठक के लिए इसकी कोई वजह नहीं है। कोई भी नहीं।\nमैं इसे malware क्यों कहता हूँ मैं यह शब्द जानबूझकर इस्तेमाल करता हूँ, कोड क्या करता है इसके वर्णन के रूप में, किसी के बारे में कानूनी निष्कर्ष के रूप में नहीं। anti-adblock payloads चार बातों पर इसके आम अर्थ पर खरे उतरते हैं, और हर एक सीधे देखी गई:\nकसौटी मैंने क्या देखा बिना सहमति, आपके हित के ख़िलाफ़ चलता है किसी ने इसे माँगा नहीं, और इसका काम वह सामग्री छीनना है जो आपके पास पहले से है आपको पहुँचाया जा चुका डेटा नष्ट करता है लेख और उसकी CSS पूरे आते हैं, फिर पेज के अंदर का कोड उन्हें मिटा देता है पढ़े जाने से बचने के लिए छिपाया गया o[293 * (r + 450) % e] जैसी उलट-पुलट string tables, eval से चलाई गईं ब्लॉकिंग से बचता है और दख़ल की सज़ा देता है DNS blocklists से बचने के लिए CNAME cloaking, anti-tamper जाँचें जो dialog या reload loop तक बढ़ जाती हैं यह छिपाना minification नहीं है। minified कोड छोटा होता है। यह ऐसे सजाया गया कोड है कि आप grep करके न जान सकें कि यह क्या करता है, और फिर payload eval से चलाया जाता है ताकि disk पर कुछ भी उससे मेल न खाए जो असल में चलता है।\ncloaking एक जानी-मानी तकनीक है जिस पर अपना रिसर्च साहित्य है5। loader अख़बार के एक subdomain जैसे दिखने वाले नाम से लाया जाता है, और वह नाम vendor पर resolve होता है:\na02342.\u0026lt;publisher-domain\u0026gt; -\u0026gt; cdn-52-x.privacy-mgmt.com (Sourcepoint) fb.html-load.com -\u0026gt; adshield-fallback-dev-wskxz.b-cdn.net subdomain हर अख़बार के लिए random होता है। इसलिए hosts के नाम वाली blocklist साथ नहीं चल सकती, और ऐसा करने का मक़सद यही है।\nऔर कोड दख़ल दिए जाने को ही दोष का सबूत मानता है। जिस payload को filter-list maintainers Ad-Shield6 का बताते हैं, उसकी decode की गई error strings सचमुच Vital API blocked और Vital API blocked (eval) हैं। Sourcepoint का loader एक attribute लिखता है, उसे तुरंत वापस पढ़ता है, और अगर value बदल गई हो तो error फेंकता है:\nz.call(O,\u0026#39;src\u0026#39;,G), O[x](\u0026#39;src\u0026#39;) !== G \u0026amp;\u0026amp; throw E … catch (W) { try { await l(W) } catch (x) { o(W) } } // o() raises the dialog Sourcepoint ने इसे खुलकर बेचा है। उनके अपने documentation में लिखा था “on average about 30% of messaged users will turn off their adblockers”7। तो मैं किसी ऐसी शरारती script की बात नहीं कर रहा जिसे किसी ने चुपके से डाल दिया हो। यह एक प्रोडक्ट है, जिसे प्रकाशक ने जानबूझकर ख़रीदा और लगाया।\nconsent-या-पैसा वाली दीवारें अलग श्रेणी हैं और मैं उन्हें malware नहीं कहता। वे पहुँचाई गई चीज़ को नष्ट नहीं करतीं और blocklists से छिपती नहीं। वे दूसरे तरीक़े से ज़बरदस्ती करती हैं, जो अगला हिस्सा है।\n1,467 पार्टनर स्वीकार करें या £2.99 दें Reach के अख़बारों पर दीवार Quantcast Choice है, जिसे अब InMobi8 चलाता है और cmp.inmobi.com से दिया जाता है। यह दो विकल्प देती है। स्वीकार कीजिए, या £2.99 महीना दीजिए। कोई मुफ़्त “ना” नहीं है।\nस्वीकार करने से आपका डेटा 1,467 सूचीबद्ध partners के साथ साझा होता है और एक euconsent-v2 cookie लिखी जाती है जो 13 महीने चलती है। 1,467 कंपनियों की सूची कोई नहीं पढ़ता, अगर पढ़े भी तो कोई नहीं तौल सकता कि उनमें से हर एक डेटा के साथ क्या करेगी, और अकेली यह संख्या बता देती है कि किस तरह की सहमति माँगी जा रही है।\nUK GDPR कहता है कि सहमति स्वतंत्र रूप से दी गई होनी चाहिए, और यह परखते समय कि ऐसा था या नहीं, देखा जाता है कि क्या सेवा को ऐसी processing की सहमति पर टिका दिया गया जिसकी उसे ज़रूरत नहीं9। ICO ने guidance छापी है कि consent or pay वैध हो सकता है10, और अब वह कहता है कि यह guidance समीक्षा में है, और European Data Protection Board ने कहा है कि सिर्फ़ ये दो विकल्प देने वाले बड़े प्लैटफ़ॉर्म के लिए ज़्यादातर मामलों में यह वैध नहीं होगा11। मैं यह नहीं दिखाऊँगा कि नियामक ने इस पर रोक लगा दी है। उसने नहीं लगाई।\nतो मैं साफ़ बताता हूँ कि मैं कहाँ खड़ा हूँ। मैंने दीवार हटाना और सहमति ठुकराना चुना। इसका मतलब है कि मैं लेख मुफ़्त वाले रास्ते से पढ़ता हूँ, बिना पैसा दिए और बिना अपना डेटा 1,467 कंपनियों को सौंपे। यह एक फ़ैसला है। extension अपने settings पेज में यही कहता है, और मैं इसे किसी तटस्थ चीज़ का जामा नहीं पहना रहा। जिस सहमति को आप ठुकरा न सकें वह एक क़ीमत है, और सवाल का जामा पहनी क़ीमत मैं नहीं चुकाऊँगा।\nबॉक्स हटाना इसका आसान एक-तिहाई हिस्सा है। बाक़ी दो-तिहाई सहमति के सवाल का ठीक से जवाब देना में हैं, क्योंकि जिस banner को आप बिना जवाब दिए मिटाते हैं, वह हर बार लौट आता है।\nएक दिन, आठ commits पूरी चीज़ एक दिन में बनी। कुछ भी commit होने से पहले कुछ घंटे पेजों को टटोलने में गए, फिर 20:32 और 22:50 के बीच आठ commits हुए। मैंने इसे Claude Code के साथ बनाया, और उलझाई गई inline script को लाइन-दर-लाइन पढ़ने की बहुत सी मेहनत agent ने की, जबकि मैं देखता रहा कि पेज स्क्रीन पर क्या करते हैं। यह बँटवारा अच्छा चला, और जहाँ यह गड़बड़ाया वह नीचे है, क्योंकि यह ऐसे गड़बड़ाया जो जानने लायक है।\nसमय Commit 20:32 पहला commit: Newsquest, notebookcheck, National World, Reach, Page Six 20:46 हर तंत्र के पीछे का vendor, README में लिखा गया 20:56 Google News के पहले पेज से 50 लिंक, बिना चुने नमूने के रूप में 21:02 consent API को हर purpose मना करके जवाब देना 21:11 social लिंक बेअसर किए गए 22:50 चालू-बंद होने वाली सुरक्षाएँ, MSN और Bing, क्लिक से consent ठुकराना, 77 tests यह एक Manifest V3 extension है जिसमें दो permissions हैं, declarativeNetRequest और storage, और इसके पास कोई host permission नहीं और अपना कोई network access नहीं, तो यह कुछ fetch नहीं कर सकता, किसी response को दोबारा लिख नहीं सकता या आपकी ओर से किसी सर्वर से बात नहीं कर सकता। इस बंधन ने डिज़ाइन को किसी भी और चीज़ से ज़्यादा आकार दिया, क्योंकि दिलचस्प काम पेज के अंदर ही होना होता है।\nदो दुनियाएँ, नीचे एक attribute और ऊपर एक event पेज का कोड और extension की settings अलग दुनियाओं में रहते हैं Extension storage chrome.storage.local सुरक्षाएँ tracing channels social settings आख़िरी 50 errors पढ़ता-लिखता है options पेज अलग दुनिया (isolated) bridge.js social.js portal.js chrome.storage पढ़ सकती है पेज के अपने functions को छू नहीं सकती पेज की दुनिया (MAIN) walls.js guard.js portal-early.js लपेटती है setTimeout, cookie, __tcfapi, window.adLight chrome.* बिल्कुल नहीं नीचे: html element पर एक attribute, सिर्फ़ जो बंद है \u0026lt;html data-ktp-off=\"cookies,dom\"\u0026gt; डिफ़ॉल्ट install: कुछ नहीं लिखा जाता ऊपर: एक ktp-report event detail: एक JSON string object भरोसे से पार नहीं होता Chrome extension scripts को दो दुनियाओं में चलाता है। पेज की दुनिया पेज की अपनी JavaScript तक पहुँच सकती है पर उसके पास extension APIs नहीं हैं। अलग दुनिया settings पढ़ सकती है पर पेज के functions को छू नहीं सकती। उनके बीच सब कुछ नीचे जाते attribute और ऊपर आते event के रूप में जाता है। Chrome की MAIN दुनिया पेज के अपने JavaScript माहौल को साझा करती है12। वहाँ की script setTimeout बदल सकती है, document.cookie को लपेट सकती है या पेज से पहले window.adLight तय कर सकती है, और इन दीवारों से लड़ने के लिए ठीक यही चाहिए। व्यवहार में वह chrome.storage को नहीं बुला सकती। अलग दुनिया बुला सकती है, पर पेज के functions नहीं देख सकती। तो एक छोटा पुल settings पढ़ता है और उन्हें \u0026lt;html\u0026gt; पर लिखता है, और errors एक CustomEvent के रूप में ऊपर आती हैं जिसका detail एक JSON string है, क्योंकि कोई object उस सीमा को भरोसे से पार नहीं करता।\nनीचे जाने वाला attribute सिर्फ़ वह बताता है जो आपने बंद किया है। डिफ़ॉल्ट install पेज पर कुछ भी नहीं लिखता। यह इसलिए मायने रखता है क्योंकि \u0026lt;html\u0026gt; पर एक स्थायी निशान ठीक वही चीज़ है जिसे ये SDK ढूँढते हैं, और इसका मतलब है कि storage की नाकामी पेज को बचाने की तरफ़ गिरती है, उससे दूर नहीं।\nफाटक ढूँढिए, दीवार से मत लड़िए Newsquest का सुधार तर्क की दो लाइनें है और बाक़ी सब इसी से मापा गया।\nउनकी पूरी दीवार पेज में एक flag के पीछे बैठी है:\nvar adLight = false; // line 1647 if (adLight !== true) { …} // line 2020: loader, eval payload, confirm() adLight सब्सक्राइबर वाला “light ads” flag है। अगर यह true है, तो दीवार कभी नहीं बनती। तो extension document_start पर, पेज की अपनी script चलने से पहले, window.adLight को true तय कर देता है, एक ऐसे setter के साथ जो उसमें लिखी गई हर चीज़ को अनदेखा करता है:\nObject.defineProperty(window, \u0026#39;adLight\u0026#39;, { configurable: false, enumerable: true, get() { return true; }, set() { /* ignore the page\u0026#39;s \u0026#34;false\u0026#34; */ } }); script के ऊपर लिखा var उस property को दोबारा तय नहीं करता जो global object के पास पहले से है। वह बस उसमें मान डालता है13। तो पेज का अपना var adLight = false चलता है, setter पर पहुँचता है, और कुछ नहीं करता। दीवार का loader कभी शुरू नहीं होता, eval payload कभी नहीं आता और कोई anti-tamper जाँच भड़कती नहीं, क्योंकि किसी चीज़ से छेड़छाड़ हुई ही नहीं। flag ने बस हाँ कहा।\nपूरे extension में यही एक property है जो non-configurable है। declaration से बचने के लिए इसे ऐसा होना ही था। बाक़ी सब configurable: true है, ताकि किसी भी पेज का कोई API हमेशा के लिए क़ब्ज़े में न रहे।\nयह 269 अख़बारों पर लागू होता है और इसे settings में बंद नहीं किया जा सकता, और settings इसकी वजह बताती हैं: यह chrome.storage के जवाब देने से पहले चलता है, और एक बार तय होने पर इसे पलटा नहीं जा सकता। एक checkbox सिर्फ़ सजावट होता।\nहर वह सुधार जिससे हालत बिगड़ी यह काम का हिस्सा है, क्योंकि यहाँ की हर गलती वही है जो सबसे पहले आज़माने का मन करता है।\nमैंने क्या आज़माया क्या हुआ loader का host ब्लॉक करना host हर अख़बार के लिए एक random first-party CNAME है; और नाकाम fetch अपने आप में पकड़ने का संकेत है inject की गई scripts पर setAttribute की रखवाली Sourcepoint की वापस-पढ़ने वाली जाँच भड़क गई, जिसने वही dialog उठा दिया जिसे रोकना था confirm() का जवाब Cancel से देना इस SDK में Cancel का मतलब reload है, तो एक अंतहीन reload loop बन गया बाद में लौटाने के लिए DOMContentLoaded पर \u0026lt;body\u0026gt; का snapshot दीवार parsing के दौरान ख़ाली करती है, तो snapshot एक ख़ाली body का था remove() और removeChild() की रखवाली दीवार एक innerHTML = '' से पेज साफ़ करती है, node-दर-node नहीं notebookcheck पर एक साथ सब की रखवाली दीवार dialog तक, फिर reload loop तक बढ़ी; कुछ न करने से साफ़ तौर पर बदतर vendor host को एक local stub पर redirect करना सिर्फ़ declarativeNetRequest वाले redirect rule ने पूरे ruleset को अमान्य कर दिया, और 269 साइटों पर Newsquest rule चुपचाप मर गया page guards हर साइट पर चलाना हर देखे गए पेज पर global prototypes बदल दिए, मेरे बैंक समेत redirect वाली बात पर दोबारा नज़र डालना ठीक है। Chrome एक block rule को अपने आप access देता है और उससे ज़्यादा के लिए host permission चाहता है14। उसका documentation कहता है कि अमान्य static rules अनदेखे कर दिए जाते हैं15। मैंने जो देखा वह उससे बुरा था: पूरी file चली गई, पेज पर कोई error नहीं, और rule 1 का 269 साइटों पर अस्तित्व ही ख़त्म हो गया। इसी वजह से MSN के दो rules अब अपने अलग ruleset में रहते हैं, ताकि एक में गलत बदलाव दूसरे को न गिरा सके।\nreload loop ने दूसरा कड़ा नियम सिखाया। location.reload को रोका नहीं जा सकता। HTML standard में Location object unforgeable है16, तो उसके methods non-writable और non-configurable हैं, और कोशिश करने पर यह मिलता है:\nObject.defineProperty(location,\u0026#39;reload\u0026#39;,...) -\u0026gt; TypeError: Cannot redefine property: reload जिस दीवार का नाकामी वाला रास्ता “पेज reload करो” है, उसे उस रास्ते पर आ जाने के बाद रोका नहीं जा सकता। कुछ भी नहीं रोक सकता। अकेला सुधार यह पक्का करना है कि वह वहाँ कभी पहुँचे ही नहीं। यही adLight वाला सबक है, दर्दनाक तरीक़े से सीखा गया: पहले से चल रही दीवार से लड़ने की हर कोशिश ने हालत बिगाड़ी, और काम करने वाले हर सुधार ने दीवार को शुरू होने से रोका।\nएक timer ने सारा नुक़सान किया notebookcheck में कोई adLight नहीं है। दीवार हमेशा चलती है। tracing चालू करने पर extension ने दिखाया कि उसने क्या तय किया:\ndropped setTimeout(7005ms) scheduled from eval \u0026lt;- the body.remove() dropped setTimeout(1251ms) / 105ms / 0ms x8 dropped setInterval(15000ms) उनमें से एक timer सारा नुक़सान करता है: 7 सेकंड वाला, जो \u0026lt;body\u0026gt; हटाता है। उसके बाद का सब प्रतिक्रिया है, क्योंकि ख़ाली पेज error फेंकता है, error dialog उठाता है, dialog पेज reload करता है और पूरी चीज़ timers के नए सेट के साथ शुरू से फिर चलती है।\nतो सुधार एक नियम है। timer को हटाइए अगर वह eval वाले कोड से तय हुआ हो, पेज पर इस SDK की पहचान हो और handler एक function हो। stack बताता है कि call कहाँ से आई, और eval उसमें अपना निशान छोड़ता है।\nbefore: 4 page loads, 3 confirms, reload loop after: 1 page load, 0 confirms, alive 40,378ms, content intact एक timer, और उसके बाद का सब कुछ notebookcheck: एक timer नुक़सान करता है, बाक़ी प्रतिक्रिया है जैसा भेजा गया लेख और CSS आते हैं, दिखते हैं loader आता है html-load.com eval payload timers तय करता है 7.0s: timer चलता है body.remove() ख़ाली पेज पर error, confirm() उठता है पेज reload होता है और फिर शुरू होता है 4 page loads, 3 dialogs, reload loop extension के साथ लेख और CSS आते हैं, दिखते हैं loader आता है html-load.com eval payload timers तय करता है eval का हर timer तुरंत हटाया गया 1 load, 0 dialogs, 40 सेकंड पर ज़िंदा extension के बिना और उसके साथ notebookcheck। 7 सेकंड वाले timer के बाद की किसी चीज़ को ठीक करने की ज़रूरत नहीं, क्योंकि वह timer हटते ही उसमें से कुछ होता ही नहीं। उस समय build में दो और तंत्र थे, loader को एक stub पर redirect करना और दीवार के लिखे को सोखने के लिए एक नक़ली element। दोनों काम करते थे, और दोनों उसी एक timer के लक्षणों का इलाज कर रहे थे, जो तभी साफ़ हुआ जब timer वाले नियम को अकेले परखा गया और वह अपने आप में काफ़ी निकला। तो दोनों हटा दिए गए, और उन्हें हटाने से एक permission और हर host permission भी साथ में चली गई। आसपास का ढाँचा रखने से पहले हमेशा परखिए कि क्या आख़िरी बदलाव अकेले काम कर देता है।\nपहचान loader tag पर data-sdk attribute है, और यह किसी version से नहीं बल्कि एक आकार, l/\u0026lt;n\u0026gt;.\u0026lt;n\u0026gt;, से मेल खाती है। एक दिन में तीन versions सामने आए। यह एक बार पकड़कर टिक जाती है और कभी “नहीं” को याद नहीं रखती, क्योंकि जब पहले timers तय होते हैं तब तक loader tag parse न हुआ हो, और याद रखा गया “नहीं” उसे उस पेज पर हमेशा के लिए बेअसर कर देगा जिस पर दीवार सच में है।\nProbe ने कहा ठीक है। स्क्रीन ने नहीं। The Scotsman और Yorkshire Post को एक ऐसे probe के आधार पर ठीक बताया गया जो text मापता था। पेज पर उसके 8,808 अक्षर थे, \u0026lt;body\u0026gt; के नीचे 22 elements, 2, 8 और 16 सेकंड पर स्थिर। उस पैमाने पर वह पूरा था।\nवह पूरा नहीं था। मैं उसे देख रहा था, और हर stylesheet ग़ायब थी, लिंक्स एक कच्ची सूची थे, SVG लोगो स्क्रीन भर रहा था और एक horizontal scrollbar था। सारे शब्द मौजूद थे, और वह probe बस इतना ही देख सकता था। मुझे स्क्रीन की तरफ़ इशारा करके यह कहना पड़ा।\nprobe ने क्या मापा, और स्क्रीन पर क्या था Yorkshire Post, सुधार से पहले: वही पेज, दो तरह से मापा गया probe ने क्या मापा innerText.length8,808 body के children22 at 2s, 8s, 16sनहीं बदला फ़ैसला: पूरा स्क्रीन पर क्या था document.styleSheets.length0 लिंक्स कच्ची सूची, लोगो पूरी चौड़ाई में, एक horizontal scrollbar फ़ैसला: टूटा हुआ मिटाने वाले को तय होते ही हटाने के बाद: 2 stylesheets, 532 rules, पेज ठीक दिखता है वही पेज, दो तरह से मापा गया। text की लंबाई ने कहा पेज ठीक है। stylesheets की गिनती ने कहा टूटा है, और stylesheets की गिनती सही थी। वजह पहली तालिका वाला stylesheet मिटाने वाला था, और वह timer नियम से मेल नहीं खाता था, क्योंकि वह एक सादी inline script है, eval नहीं। तो उसका अपना source ही पहचान है: एक दोहराया जाने वाला काम जिसका body querySelectorAll('link,style') और फिर remove() बुलाता है। कोई भी जायज़ चीज़ ऐसा नहीं करती। इसे तय होते समय ही हटा दिया जाता है, कुछ भी कभी नहीं मिटता और कुछ भी लौटाने की ज़रूरत नहीं पड़ती। Yorkshire Post 0 stylesheets से 2 पर आया, 532 rules के साथ, और ठीक दिखा।\nइसे ढूँढने के लिए अंदाज़ा नहीं, stack trace चाहिए था। Element.prototype.remove को patch कीजिए ताकि जब भी वह कोई STYLE या LINK हटाए तो stack दर्ज करे, और उसने पहली ही बार में inline script और forEach का नाम बता दिया।\nउसके बाद document.styleSheets.length हर जाँच में डाला गया। जिस पेज पर एक भी नहीं, वह टूटा है चाहे उसमें कितना भी text हो। मापना जितना आप सोचें उससे मुश्किल होता है, और ये वे जाल हैं जिनमें उस दिन build फँसा:\nजाल उसने क्या कहा सच क्या था render जाँच के रूप में text की लंबाई “पूरा” बिना स्टाइल का markup load के बाद एक नमूना आठ अख़बारों पर Reach दीवारें “मौजूद नहीं” दीवार लगभग 600ms जीती है और पहले ही साफ़ हो चुकी थी navigate करने के बाद ख़ाली console “guard नहीं चल रहा” load के समय के संदेश navigation के बाद नहीं बचते 1s और 4s पर नमूना notebookcheck ठीक यह 5 से 8 सेकंड पर ख़ाली होता है अलग-अलग origins में गिने cssRules ESPN पर 5 rules cross-origin sheets error फेंकती हैं, तो गिनती कम आती है 600ms वाले का सुधार है कि पेज लोड होते ही हर 100ms पर जाँचा जाए। Wales Online पर दीवार 425ms पर आई और 1,129ms तक जा चुकी थी।\nफिर जाँचें सचमुच चलाई गईं। 26 domains पर 52 लेख, हर साइट के दो, हर तंत्र को ढकने के लिए चुने गए: 52 में से 52 पर stylesheets, स्क्रीन पर कोई दीवार नहीं बची, कोई reload loop नहीं। फिर Google News UK के पहले पेज से सीधे 50 लिंक, जो मैंने नहीं चुने: 45 सामान्य दिखे, 2 ऐसे hosts थे जिन्हें मेरा Pi-hole जानबूझकर ब्लॉक करता है, 1 The Times का असली paywall था, और 2 एक ही लेख दो बार थे क्योंकि Google हर load पर लिंक्स का क्रम दोबारा बनाता है। किसी पर भी शून्य stylesheets नहीं। उस दौर में National World के तीन ऐसे अख़बार सामने आए जिन्हें मैंने कभी परखा नहीं था, वही SDK लिए हुए, और तीनों ठीक दिखे, और साइटों की सूची की जगह आकार से मिलान करने का मक़सद यही है।\n77 unit tests हैं, बाक़ी सब के साथ repository में। इस मशीन पर Node नहीं है, तो वे gjs पर चलते हैं, और वे असली walls.js को एक नक़ली DOM पर लोड करते हैं, ताकि परखे जाने वाले वही patterns हों जो production में चलते हैं। हर एक को उस चीज़ को तोड़कर परखा गया जिसकी वह रखवाली करता है, और देखा गया कि वह लाल हो जाता है। वे सिर्फ़ फ़ैसले परखते हैं। उनके पास होने का मतलब यह नहीं कि पेज ठीक दिखता है, और Scotsman ही वजह है कि वह वाक्य README में है।\nसहमति के सवाल का ठीक से जवाब देना consent banner मिटा देने से सवाल बिना जवाब के रह जाता है। इसके दो नतीजे हैं, और पहला यह कि banner हर page load पर दोबारा बनता है। और जो प्रकाशक consent API के जवाब तक अपनी सामग्री रोके रखता है वह बस अटका रहेगा, जबकि जिस vendor को कोई जवाब नहीं मिलता वह सवाल को कभी पूछा ही नहीं मान सकता। चुप्पी इनकार नहीं है।\nतो extension इसका जवाब देता है, इस क्रम में:\nइनकार करें, ना कहें, कुछ store न करें, फिर ही हटाएँ consent banner का जवाब दिया जाता है, सिर्फ़ मिटाया नहीं स्क्रीन पर consent vendor का अपना container है #qc-cmp2-container #onetrust-consent-sdk sp_message_container 1. उनका इनकार बटन दबाएँ Reject all, Decline, Only essential, Continue without accepting सिर्फ़ पूरा label, अधिकतम 40 अक्षर Accept से मेल: build फ़ेल 2. API को जवाब: ना __tcfapi हर purpose, feature और vendor मना tcString \"\" tcloaded 3. रिकॉर्ड कभी store न करें euconsent-v2 addtl_consent OptanonConsent didomi_token cookie और localStorage में लिखना रोका गया अगले tick पर भी स्क्रीन पर? हाँ: हटाएँ, scrolling खोलें नहीं: इनकार कायम तीन जवाब और एक आख़िरी उपाय। अगर इनकार का बटन है तो वह दबाया जाता है, consent API को हर चीज़ पर ना कहा जाता है, रिकॉर्ड कभी store नहीं होता, और सिर्फ़ अगले tick पर भी खड़ा banner हटाया जाता है। यह पहले उनका इनकार वाला बटन दबाता है। सिर्फ़ वे बटन जिनका पूरा label एक इनकार है: “Reject all”, “Decline”, “Only essential”, “Continue without accepting” और कुछ और, हर एक anchored, 40 अक्षरों से लंबा कुछ भी अनदेखा। एक unit test इसे “I Accept”, “Accept All”, “Agree and close”, “Allow all”, “Got it”, “Subscribe” और “Pay £2.99/mo” देता है और अगर इनमें से कोई मेल खाए तो build फ़ेल कर देता है। गलत बटन दबाने का मतलब आपकी ओर से सहमति देना होगा, और यही एक चीज़ है जो इस प्रोजेक्ट को कभी नहीं करनी। msn.com पर “Reject All” दबाने से Microsoft का banner हट गया और reload पर वापस नहीं आया, क्योंकि Microsoft इनकार को अपने सर्वरों पर रखता है।\nयह consent API को ना में जवाब देता है। IAB का framework सहमति माँगने वाले हर पेज को __tcfapi नाम का एक function देता है, यह पूछने के लिए कि आपने किस पर सहमति दी17। जहाँ यह मौजूद हो, extension इसे हर purpose, हर special feature और हर vendor मना करके, एक ख़ाली consent string और eventStatus: 'tcloaded' के साथ जवाब देता है, जिसका मतलब है कि जवाब अंतिम है। यह सिर्फ़ वहाँ आता है जहाँ पेज पर पहले से कोई consent framework हो, तो जिस साइट ने कभी पूछा ही नहीं उसे यह नहीं दिखता।\nयह रिकॉर्ड कभी store नहीं करता। document.cookie और localStorage चुपचाप euconsent-v2, addtl_consent, OptanonConsent, didomi_token और बाक़ी को गिरा देते हैं, तो जो सहमति आपने कभी दी ही नहीं वह कभी लिखी नहीं जाती और अगले पेज पर 1,467 partners को दोबारा नहीं भेजी जाती। UK कानून पहले से माँगता है कि इसके लिए आपके डिवाइस पर कुछ भी store करने से पहले सहमति ली जाए18। extension उस ना को लागू करता है।\nउस सूची का हर नाम दोनों सिरों पर anchored है, और इसके पीछे एक क़िस्सा है। Sourcepoint की cookies _sp_ से शुरू होती हैं। sp_ का आलसी pattern Spotify की sp_dc और sp_t से भी मेल खाता है, जो login session हैं, और मुझे हर पेज पर Spotify से logout कर देता। एक test इसे भी पक्का करता है।\nहटाना आख़िरी उपाय है। सिर्फ़ उस banner के लिए जो क्लिक के बाद भी स्क्रीन पर है, और सिर्फ़ उस banner के लिए जो सच में दिख रहा है। कई vendors पेज में एक स्थायी wrapper छोड़ते हैं, banner हो या न हो। euronews एक Didomi host को शून्य ऊँचाई पर रखता है, और उसे उखाड़ने से बिना किसी फ़ायदे के पेज टूट जाता है। Reach वाला \u0026lt;body\u0026gt; से तीन स्तर नीचे दो ऐसे wrappers के अंदर बैठा था जो ख़ुद fixed नहीं हैं, तो जाँच को उस बॉक्स तक नीचे जाना पड़ता है जो fixed है।\nShare बटन, और एक पोर्टल जो अपनी ही settings नहीं मानता इन पेजों पर दो और चीज़ें हैं जो पाठक की नहीं, किसी और की सेवा के लिए हैं, और उन्हें दीवारों से अलग तरह से संभालना पड़ा।\nShare और follow बटन। Facebook, Instagram, X, TikTok या LinkedIn का हर लिंक http://localhost/removeme में बदल दिया जाता है, और मूल लिंक एक attribute में रख दिया जाता है ताकि कुछ खोए नहीं। फिर दूसरा दौर वह मिटाता है जो साफ़ तौर पर सजावट है (बिना text का icon, “Share on X”, ऐसे container में कुछ भी जो ख़ुद को share या social कहता है) और बाक़ी को छिपा देता है। निशान इसलिए है ताकि एक selector सब कुछ दिखा दे जो हटने वाला है, और सिर्फ़-निशान वाला mode पहले दौर के बाद रुक जाता है ताकि किसी साइट पर भरोसा करने से पहले आप देख सकें।\nसीधा-सादा version पेजों को तीन तरह से तोड़ता है, और हर एक अब एक test है:\nसीधा-सादा version यह क्या तोड़ता है इसकी जगह क्या किया जाता है a[href*=\u0026quot;x.com\u0026quot;] netflix.com, linux.com, phoenix.com से भी मेल खाता है host को parse करके पूरे labels की तुलना हर social लिंक हटाना “Continue with Facebook” चला जाता है और लोग बाहर रह जाते हैं login, OAuth, कानूनी और developer लिंक छोड़ दिए जाते हैं वाक्य के अंदर का लिंक हटाना शब्द भी साथ चले जाते हैं डिफ़ॉल्ट में छिपाना; एक option उसे खोलकर शब्द रखता है वह आख़िरी वाला एक सौदा है जो मैंने जानते-बूझते किया। इसे चालू करने पर BBC की एक आख़िरी लाइन “follow BBC Manchester on , , and .” पढ़ी जाती है। मैंने उसे देखा और फिर भी छिपाना चुना। शब्द रखने का option उनके लिए है जो असहमत हैं।\nMSN और Bing। दोनों को एक ही web components चलाते हैं, पहले पेज पर लगभग 160 shadow roots। document पर सादी query से 1 लिंक मिला। shadow roots में चलकर 73 मिले, Facebook और X की tiles समेत। जो चीज़ उनमें नहीं चलती, उसे इसका लगभग कुछ नहीं दिखता।\nMSN की अपनी content settings हैं। वे Microsoft के सर्वरों पर एक गुमनाम ID के साथ रखी जाती हैं, cookie में नहीं, तो cookie साफ़ करने के बाद, नए profile में और incognito में वे चली जाती हैं। वे Bing तक बिल्कुल नहीं पहुँचतीं। और उनमें से हर एक बंद करके और 11,700 pixels scroll करके, feed में यह अब भी था:\nMSN का अपना switch, बंद पेज पर अब भी Casual Games Games tile Shopping Booking, Temu और eBay की विज्ञापन tiles Comments 501 comment लिंक Weather, Finance, Sports चले गए, अगली बार cookie साफ़ होने तक Comments नाम का switch जो पेज पर 501 comment लिंक छोड़ दे, यूज़र से किया गया एक दावा है, और झूठा। तो extension उन्हें ख़ुद हटाता है, MSN के class names की जगह उसके स्थिर component names को निशाना बनाकर, क्योंकि class names हर build में बदलते हैं।\nवहाँ मैंने एक बात सीखी जो MSN से बहुत आगे लागू होती है: पेज से एक image हटाने से उसका लोड होना नहीं रुकता। src तय होते ही Chrome fetch शुरू कर देता है, उस image के लिए भी जो कभी पेज में डाली ही नहीं गई19। जब तक content script किसी card को देखती है, उसका thumbnail पहले ही रास्ते में होता है। तो feed का डेटा उसे देने वाले दो endpoints पर ब्लॉक किया जाता है, image hosts पर कभी नहीं, क्योंकि th.bing.com Bing image search भी चलाता है।\nऔर MSN feed जाने से पहले अब भी एक पल के लिए स्क्रीन पर चमकता है। इसे पहले छिपाने की चार कोशिशें मापने पर काम करती दिखीं और उनमें से किसी ने चमक नहीं रोकी, जिसका मतलब है कि जो paint होता है वह वह नहीं जो extension छिपाता है। settings पेज यह साफ़ कहता है। मैं चाहूँगा कि वह यह कहे, बजाय इसके कि वह एक साफ़ load का इशारा करे जो वह देता नहीं।\nयह क्या नहीं करेगा यह नहीं करेगा क्योंकि असली paywall खोलना अगर सर्वर लेख रोकता है, तो वह रुका रहता है किसी साइट के बारे में अंदाज़ा लगाना कोई domain तभी जुड़ता है जब उसकी दीवार वहाँ देखी जाए; Page Six से मेल खाने वाली मानी गई दो News Corp साइटें मेल नहीं खाईं, और फिर हटाई गईं बिना पहचान वाली साइट को छूना BBC पर हर hook लगाया जाता है और कुछ दर्ज नहीं होता, कोई timer नहीं हटता, कोई node नहीं छुआ जाता घर फ़ोन करना कोई host permission नहीं, कोई network access नहीं, कोई telemetry नहीं; error log आपके browser में ही रहता है दिखावा करना MSN की चमक अनसुलझी है, और एक Ad-Shield रूप, wp-ls/…, अभी मेल नहीं खाता; उसका पेज ठीक दिखा, तो उसे अंदाज़े पर ठीक करने की जगह लिख लिया गया है जो पेज आपको भेजा गया, वह आपका है एक बार सर्वर ने आपके browser को पेज भेज दिया, तो वह कॉपी आपकी मशीन पर है। उसे छीनने के लिए बाद में उस पर कोड चलाना कोई कारोबारी मॉडल नहीं जिसे मैं पहचानता हूँ। यह पुरानी चाल है: आपको कुछ बेचो और फिर उस पर हाथ रखे रहो।\nअख़बार कभी ऐसी चीज़ थे जिसे आप ख़रीदते थे और फिर वह आपका होता था: नुक्कड़ पर किसी के पास एक ढेर होता, आप पैसे देते, और वह आपके साथ घर जाता और आपका होता, पढ़ने, मोड़ने, उधार देने या आग जलाने के लिए। कोई एक घंटे बाद घर आकर दूसरा पन्ना नहीं काटता था क्योंकि आपने विज्ञापन छोड़ दिए थे। वेब वाले रूप ने अख़बार मुफ़्त में दे दिया और फिर पाठक को बेच दिया। पहले विज्ञापनदाताओं को, फिर 1,467 partners को, और अब एक vendor को जिसका पूरा प्रोडक्ट यह तय करना है कि आपने इतना अच्छा बर्ताव किया या नहीं कि जो आपको दिया गया वह आपके पास रहे।\nजिस बात से मैं आगे नहीं निकल पाता वह stylesheet है। जो अख़बार किसी विज्ञापन कंपनी के सर्वर को यह तय करने देता है कि उसका अपना layout बचेगा या नहीं, उसने अपना पहला पन्ना दे दिया है। उसे पता भी नहीं होगा कि दे दिया, क्योंकि अंदर कोई उस host को ब्लॉक नहीं कर रहा था, तो पता लगाने वाला पहला इंसान Pi-hole वाला एक पाठक था, जो कच्चे लिंक्स से भरे पेज को देख रहा था और एक dialog box उसे बता रहा था कि ग़लती उसकी है। ग़लती उसकी नहीं थी।\nपत्रकारिता की एक क़ीमत है और उसे चुकाने में मुझे कोई दिक़्क़त नहीं। जो मैं नहीं करूँगा, वह है किसी script को यह तय करने देना कि मेरे पास पहले से क्या है। यह लकीर मेरे browser में खिंचती है, उनके में नहीं।\nPi-hole documentation — “The Pi-hole® is a DNS sinkhole that protects your devices from unwanted content, without installing any client-side software.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNewsquest — About us — “We are the leading local news publisher in the UK with a portfolio of more than 200 brands.” Brands और domains एक चीज़ नहीं हैं, इसलिए certificates से गिनती ज़्यादा आती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDaily Business, 18 दिसंबर 2024 — “National World, owner of The Scotsman and Yorkshire Post, has reached agreement on a £65.1 million takeover by Irish publisher Media Concierge.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nReach plc — About us, 5 सितंबर 2026 को archive किया गया — “120+ brands, from household names like the Mirror, Express, Daily Record and Daily Star, to local titles like MyLondon, BelfastLive and the Manchester Evening News”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDimova et al., \u0026ldquo;The CNAME of the Game: Large-scale Analysis of DNS-based Tracking Evasion\u0026rdquo;, PETS 2021 — CNAME cloaking “effectively bypasses antitracking measures that rely on fixed hostname-based block lists.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nuBlockOrigin/uAssets issue #30988, maintainers के “Ad-Shield” label के तहत दर्ज, error-report.com से दिए गए संदेश के साथ: “Failed to load website properly since html-load.com is blocked.” यह भी देखें Jacob Desforges, \u0026ldquo;Ad-Shield ad reinsertion\u0026rdquo;, 12 अप्रैल 2026। यह पहचान filter-list समुदाय की है; vendor कुछ नहीं बताता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSourcepoint — Anti-adblock FAQs, 25 मई 2022 को archive किया गया — “Historical experience shows on average about 30% of messaged users will turn off their adblockers.” वही पेज पूछता है कि क्या “a CNAME applied to a 1st-party subdomain” पकड़ने वाली script को ब्लॉक होने से रोकेगा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nAdExchanger, 16 अगस्त 2023 — “InMobi acquired Quantcast’s consent management platform, called Quantcast Choice”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUK GDPR, Article 7 — “utmost account shall be taken of whether, inter alia, the performance of a contract, including the provision of a service, is conditional on consent”। Recital 42: सहमति स्वतंत्र रूप से दी गई नहीं है “if the data subject has no genuine or free choice”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nICO — Consent or pay, 23 जनवरी 2025 को प्रकाशित — “‘Consent or pay’ models can be compliant with data protection law if you can demonstrate that people can freely give their consent”। पेज अब कहता है कि Data (Use and Access) Act के बाद यह guidance समीक्षा में है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEDPB Opinion 08/2024, 17 अप्रैल 2024 को अपनाया गया — “In most cases, it will not be possible for large online platforms to comply with the requirements for valid consent if they confront users only with a binary choice”। यह बड़े online platforms के बारे में है, क्षेत्रीय अख़बारों के बारे में नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChrome for Developers — content_scripts manifest key — “Choosing the ‘MAIN’ world means the script will share the execution environment with the host page\u0026rsquo;s JavaScript.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nECMAScript — CreateGlobalVarBinding — “If a binding already exists, it is reused and assumed to be initialized.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChrome for Developers — declarativeNetRequest — “provides implicit access to allow , allowAllRequests and block rules”, और नहीं तो “you must request host permissions before you can perform any action on a host.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChrome for Developers — declarativeNetRequest — “Errors and warnings about invalid static rules are only displayed for unpacked extensions. Invalid static rules in packed extensions are ignored.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHTML Standard — the Location interface अपने members को [LegacyUnforgeable] बताता है, जिसका Web IDL में मतलब है “the property will be non-configurable and will exist as an own property on the object itself”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIAB Tech Lab — TCF v2 CMP API — “Every consent manager MUST provide the following API function: __tcfapi(command, version, callback, parameter)”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPECR, regulation 6 — “a person must not store information, or gain access to information stored, in the terminal equipment of a subscriber or user”, शर्त के रूप में सहमति Schedule A1 में, Data (Use and Access) Act 2025 के संशोधन के अनुसार।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHTML Standard — update the image data — चलता है “whenever that element is created or has experienced relevant mutations”, जिसमें उसका src तय होना शामिल है; document में होना शर्त नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/random/the-news-site-sent-me-the-article-then-deleted-it/","summary":"Newsquest, National World, Reach और दूसरे प्रकाशक आपके browser को stylesheets समेत पूरा लेख भेजते हैं, फिर कमर्शियल anti-adblock और consent कोड चलाते हैं जो पेज को ख़ाली कर देता है, हर 100ms पर हर stylesheet मिटाता है, या उसे 1,467 tracking partners और £2.99 महीने के बीच एक चुनाव से ढक देता है। यह बताता है कि वह कोड क्या करता है, मैं उसे malware कहने की चार वजहें, और वह Chrome extension जो मैंने एक दिन में पेज बचाने के लिए बनाया: wall बनने से पहले Newsquest का adLight flag पक्का करना, eval से तय किए गए timers हटाना, stylesheet मिटाने वाले को तय होते ही ख़त्म करना, और consent को ठीक से ठुकराना: TCF API को ना कहना, vendor का अपना reject बटन दबाना और रिकॉर्ड कभी store न करना। फिर वे सुधार जिनसे हालत बिगड़ी, वह probe जिसने टूटे पेज को ठीक बताया, share बटन और MSN feed, और वह सब जो extension नहीं करेगा।","title":"न्यूज़ साइट ने मुझे लेख भेजा, फिर उसे मिटा दिया"},{"content":"चौदह साल में कोयला शून्य पर Kate Morley का National Grid डैशबोर्ड आपको समय की खिड़की चुनने देता है और आँकड़ों को बदलते देखने देता है।1 डेटा 2012 से शुरू होता है, जो संयोग से कोयले का चरम साल था, इसलिए “सारा समय” वाला कॉलम पूरी सफ़ाई को एक आँकड़े में दिखा देता है।\nसारा समय (2012–) पिछला साल पिछला हफ़्ता पिछला दिन कार्बन तीव्रता 251 g/kWh 124 g/kWh 98 g/kWh 67 g/kWh कोयला 12.4% 0.0% 0.0% 0.0% गैस 33.5% 27.0% 21.2% 15.9% हवा 19.5% 34.8% 46.0% 64.1% सौर 3.7% 7.4% 8.3% 11.1% परमाणु 18.3% 12.0% 12.0% 12.9% कुल जीवाश्म 45.8% 27.0% 21.2% 15.9% कुल नवीकरणीय 24.4% 43.6% 55.8% 76.6% माँग 32.6 GW 30.9 GW 28.4 GW 25.8 GW कीमत £70.13/MWh £92.77/MWh £125.01/MWh £27.18/MWh हवा अब ग्रेट ब्रिटेन में बिजली का सबसे बड़ा अकेला स्रोत है। पूरे साल में 34.8%, जबकि गैस 27% पर और परमाणु 12% पर। किसी अच्छे दिन की बात नहीं। बारह महीने।\nकोयला शून्य है। कम नहीं। शून्य, पूरे एक साल। आख़िरी स्टेशन 30 सितंबर 2024 को बंद हुआ, लंदन में जनवरी 1882 में दुनिया का पहला कोयला स्टेशन खुलने के एक सौ बयालीस साल बाद। यानी इसी देश ने कोयले की बिजली का आविष्कार किया और फिर उसे बंद करने में डेढ़ सदी का बड़ा हिस्सा लगा दिया।1 कार्बन तीव्रता चौदह साल के औसत के मुकाबले आधी हो गई है, 251 से 124। चौदह साल में आधी।\nवह माँग जो ग़ायब हो गई माँग वाली पंक्ति फिर से देखिए। लंबे औसत पर 32.6 GW, पिछले साल में 30.9। यह बीस साल से गिर रही है, 2005 से हर साल लगभग 5 TWh।\n2005 2023 घरेलू माँग 126 TWh 93 TWh औद्योगिक माँग 117 TWh 86 TWh औसत घर 4,662 kWh (2007) 3,449 kWh उस दौर में घरों की खपत 33 TWh घटी, जबकि देश ने डेढ़ मिलियन इलेक्ट्रिक कारें और ढाई लाख हीट पंप जोड़े।2 इसका बड़ा काम EU के Ecodesign नियमों ने किया; अकेले लाइटिंग के नियमों ने 2020 में पूरे EU में 81 TWh बचाए।3 दक्षता ने इलेक्ट्रिक कारों को सिर्फ़ सँभाला नहीं, उन्हें पीछे छोड़ दिया।\nदो सावधानियाँ, क्योंकि इस बात को अक्सर बढ़ा-चढ़ाकर कहा जाता है। औद्योगिक माँग भी गिरी, 117 TWh से 86, और इसका ज़्यादातर कारण फ़ैक्ट्रियों का बंद होना है, फ़ैक्ट्रियों का होशियार होना नहीं। और यह गिरावट ख़त्म हो चुकी है। 2024 लगभग दो दशकों में पहला साल था जब माँग फिर बढ़ी।2\nवे कारें जिन्हें ग्रिड तोड़ देना था यह रहा वह बेड़ा जिसे ग्रिड ने सँभाला, सीधे DVLA की लाइसेंसिंग तालिकाओं से। हर साल के अंत में ग्रेट ब्रिटेन में लाइसेंसशुदा बैटरी इलेक्ट्रिक गाड़ियाँ।4\nसाल कारें वैन बसें HGV मोटरसाइकिलें कुल 2015 20,472 4,786 194 314 917 26,756 2017 41,222 6,401 303 283 1,046 49,334 2019 89,581 10,479 504 269 2,790 103,724 2021 374,597 28,245 1,295 331 9,118 413,908 2023 916,576 64,988 3,188 732 14,142 1,000,092 2024 1,266,421 84,959 4,821 983 14,039 1,371,779 2025 1,708,499 111,837 7,450 1,472 13,460 1,843,395 दस साल में कारें तिरासी गुना बढ़ीं, पूरा बेड़ा उनहत्तर गुना। दस लाखवीं इलेक्ट्रिक गाड़ी 2023 के अंत में 1,000,092 पर आई, जो किसी आँकड़े के लिए जितना हो सकता है उतना सटीक निशाना है। किसी ने इसकी योजना नहीं बनाई थी।\nउस तालिका में तीन बातें हैं जो किसी सुर्ख़ी में नहीं दिखतीं।\nलॉरियाँ अभी मुश्किल से शुरू हुई हैं। पूरे ग्रेट ब्रिटेन में 1,472 इलेक्ट्रिक HGV, और यह संख्या 2015 से 2020 के बीच असल में घटी, 253 तक। कारें हमेशा आसान हिस्सा थीं। यह कठिन हिस्सा है और यह सच में अभी शुरू नहीं हुआ है।\nइलेक्ट्रिक मोटरसाइकिलें पीछे जा रही हैं। 2023 में 14,142, फिर 14,039, अब 13,460। दो साल की गिरावट, अकेली श्रेणी जो सिकुड़ रही है जबकि बाक़ी सब चक्रवृद्धि से बढ़ रहा है।\nप्रतिशत धीमे हो रहे हैं, गाड़ियाँ नहीं। कारों की बढ़त 2020 में 114% थी और 2025 में 35%। लेकिन 2025 ने सड़क पर 442,000 कारें डालीं, जबकि 2024 ने 350,000। बड़ी संख्या का घटता प्रतिशत अब भी छोटी संख्या के बड़े प्रतिशत से भारी पड़ता है।\nयह कहाँ जाएगा, इसके लिए NESO के 2025 Future Energy Scenarios ग्रेट ब्रिटेन को 2050 तक Holistic Transition में 31 मिलियन, Electric Engagement में 33.4 मिलियन और Hydrogen Evolution में 36.1 मिलियन इलेक्ट्रिक गाड़ियों पर रखते हैं।5 आज के 1.84 मिलियन वहाँ तक के रास्ते का लगभग छह प्रतिशत हैं।\nउन परिदृश्यों से एक बात ध्यान देने लायक: स्मार्ट चार्जिंग से मिलने वाला लचीलापन इस साल घटा, 16 GW से 10 GW। बड़ी बैटरियों का मतलब है कम पर लंबी चार्जिंग, और इधर-उधर खिसकाने को कम।5\nवह माँग जो कभी दिखी ही नहीं माँग को नीचे धकेलने वाली एक दूसरी चीज़ भी है, और वह दक्षता नहीं है।\nख़ुद की खपत सौर, बिना बैटरी 30–40% सौर और बैटरी 80–90%6 UK में अब बीस लाख सौर इंस्टॉलेशन हैं, कुल 22.3 GW, और नए सिस्टमों में से 30% से ज़्यादा बैटरी के साथ लगते हैं, जबकि पाँच साल पहले यह 10% था।6 पैनलों के पीछे स्टोरेज लगा दीजिए और छत जो बनाती है उसका ज़्यादातर हिस्सा कभी मीटर पार ही नहीं करता।\nवह ऊर्जा बची नहीं है। बस उसकी गिनती बंद हो गई है। बदला सिर्फ़ मीटर है।\nसाल जोड़ी गई सौर क्षमता 2021 ~0.4 GW 2022 ~0.5 GW 2023 1.9 GW 2024 2.3 GW 2025 2.6 GW पाँच साल में छह गुना, और आकार ही बता देता है क्यों। 2021 और 2022 सपाट थे। फिर बिल आए, लोगों ने हिसाब लगाया, और सौर ऊर्जा पर्यावरण का चुनाव न रहकर पैसों का चुनाव बन गई।\nहमारा घर उस तालिका में कहीं है। छत पर नौ किलोवाट, नीचे तीस किलोवाट-घंटे की बैटरी, दो कारें और दिन की बिजली पीता एयरकॉन। National Grid की नज़र से यह पता सालों से चुपचाप सिकुड़ रहा है। भौतिकी की नज़र से नहीं। ऊर्जा बस किसी के चार्ट पर दिखना बंद हो गई।\nउस चीज़ पर युद्ध जो काम कर रही थी ऊपर का कुछ भी संयोग से नहीं हुआ, और बाक़ी को रोकने की एक ज़िंदा कोशिश चल रही है।\nReform ने मई 2025 में इंग्लैंड की दस काउंसिलें जीतीं और कहा कि वे नई हवा, सौर और बैटरी परियोजनाओं को रोकने के लिए “every lever” इस्तेमाल करेंगे। Carbon Brief ने ख़तरे में पड़ी क्षमता लगभग 6 GW आँकी: उन दस इलाक़ों में 5,076 MW बैटरी योजनाएँ, 786 MW सौर और 56 MW हवा।7 पार्टी के ऊर्जा प्रवक्ता ने Lincolnshire के डेवलपरों को लिखा कि “this is war”, और SSE Renewables, Octopus Energy, Centrica और Equinor के मुख्य कार्यकारियों को औपचारिक नोटिस भेजा कि Reform सरकार उनके सौदे फाड़ देगी।7\nखेती की ज़मीन वाले दावे की जाँच बताई गई वजह खेती की ज़मीन और खाद्य सुरक्षा है। यह दावा जाँचा जा सकता है, तो आइए जाँचें।\nज़मीन का इस्तेमाल क्षेत्रफल UK का हिस्सा ज़मीन पर लगा सौर, सितंबर 2024 21,200 ha ~0.1%8 वही, सैटेलाइट से मापा गया अध्ययन 15,580–17,364 ha 0.06–0.07%9 गोल्फ़ कोर्स 125,000 ha ~0.5%10 2035 तक 70 GW सौर लागू नहीं खेती की ज़मीन के 1% से कम10 सौर इस देश के लगभग एक प्रतिशत के दसवें हिस्से को ढकता है। गोल्फ़ उसका लगभग पाँच गुना ढकता है, और जितने साल कोई ब्रिटिश खाद्य सुरक्षा पर ज़ोर-ज़ोर से चिंता कर रहा है, किसी ने एक बार भी किसी गोल्फ़ क्लब को चिट्ठी लिखकर उस पर युद्ध का ऐलान नहीं किया। एक भी चिट्ठी नहीं।\nइस शोर के नीचे एक असली तर्क दबा है, और उसे साफ़-साफ़ कहा जाना चाहिए। CPRE ने पाया कि इंग्लैंड के सबसे बड़े सौर फ़ार्मों में से 59% उपजाऊ खेती की ज़मीन पर हैं, और उस क्षेत्र का 31% best and most versatile श्रेणी में है।11 ज़मीन की गुणवत्ता एक जायज़ बात है। ज़मीन की मात्रा नहीं है, और तर्क मात्रा का ही दिया जा रहा है।\nऔर फिर देखिए कि उस 6 GW में असल में क्या है। सौर उसमें 786 MW है। बैटरियाँ 5,076 MW हैं, जिस क्षमता पर लड़ाई हो रही है उसके चार-पाँचवें हिस्से से ज़्यादा।7 खेती की ज़मीन वाला तर्क छोटी संख्या पर निशाना साधता है। असली निशाना स्टोरेज है, और स्टोरेज कुछ नहीं उगाता।\nआग वाले दावे की जाँच बैटरी योजनाएँ आग के ख़तरे पर ख़ारिज होती हैं। निष्पक्ष रहें तो, हर जगह Reform नहीं चलाता। यह किसी एक पार्टी का अभियान नहीं, बल्कि व्यापक स्थानीय विरोध है, और यह काम कर रहा है। Leeds में Allerton Bywater के पास एक योजना पर 900 से ज़्यादा आपत्तियाँ। Eaglesham के पास एक ग्रीनबेल्ट साइट 250 आपत्तियों के बाद लिथियम आग के डर पर ख़ारिज। Devon में एक 49.9 MW परियोजना प्लानिंग अधिकारी की अपनी सिफ़ारिश के ख़िलाफ़ ख़ारिज।12\nतो आग को आपत्तियों के बगल में रखिए।\nगिनती UK में ग्रिड बैटरी की आग, अब तक 3 ज्ञात13 दक्षिण कोरिया, 2017–2019 का समूह 2814 EPRI का वैश्विक घटना डेटाबेस, 2011 से ~95 प्रविष्टियाँ14 Leeds की एक योजना पर आपत्तियाँ 900+12 Leeds के एक प्लानिंग आवेदन पर उतनी आपत्तियाँ आईं जितनी 2011 से पूरी धरती पर दर्ज ग्रिड बैटरी आग भी नहीं हुई हैं। इस देश में कुल तीन, अब तक। उनमें से एक साइट अभी बन ही रही थी।13\nऔर 2018 और 2019 में दुनिया भर की 30 घटनाओं में से 27 दक्षिण कोरिया में थीं। एक राष्ट्रीय समूह, इतना बुरा कि उनका स्टोरेज बाज़ार रुक गया, और यही वजह है कि यह डेटाबेस बना ही।14 उन्हें हटा दीजिए तो वैश्विक रिकॉर्ड और भी पतला है।\nइस बीच दर गिर कर बैठ गई है। हर साल की विफलताएँ लगभग सपाट रहीं जबकि तैनाती 2018 में 11 GWh से 2024 में 300 GWh से ज़्यादा हो गई। यह प्रति इकाई स्थापित क्षमता पर विफलता दर में 99% की गिरावट है, क्योंकि मानक पकड़ में आ गए।14 2024 में 0.3% परियोजनाओं में ऐसी विफलता हुई जिससे सुरक्षा की चिंता वाली आग लगी।14 यह सब, और वह Moss Landing आग जिसका हर कोई हवाला देता है, मैंने बर्बाद ऊर्जा वाले लेख में देखा था।\nफिर यह सवाल है कि वे विफल क्यों होती हैं, और यही वह हिस्सा है जिससे बहस ख़त्म हो जानी चाहिए।\nमूल कारण विफलताओं में हिस्सा इंटीग्रेशन, असेंबली और निर्माण 36%15 संचालन 29% डिज़ाइन 21% निर्माण दोष 4% 89% घटनाएँ बैटरी से शुरू ही नहीं होतीं।15 पूरे डेटाबेस में सिर्फ़ तीन घटनाएँ सेल या मॉड्यूल के दोष तक जाती हैं। असल में जो गड़बड़ होता है वह बाक़ी सिस्टम है: DC और AC वायरिंग, HVAC, आग बुझाने का सामान ख़ुद। और 72% विफलताएँ निर्माण, कमीशनिंग, या पहले दो साल के भीतर होती हैं।15\nतो बात केमिस्ट्री की नहीं है। फ़िटिंग की है। घटिया असेंबली, इंस्टॉलेशन में काटे गए कोने, मॉनिटरिंग चालू होने से पहले की गई कमीशनिंग, ताकि कोई रिसाव या इंसुलेशन की गड़बड़ बढ़ते-बढ़ते फ़ायर इंजन बुलाने लायक बन जाए, उससे पहले कि कहीं कोई अलार्म बजे जिसे कोई इंसान सुन सके। दूसरे शब्दों में, ख़राब कारीगरी।\nयह इसलिए मायने रखता है क्योंकि इससे जवाब बदल जाता है। अगर लिथियम स्वभाव से भड़कने वाला होता, तो उसे गाँव से दूर रखना ठीक होता। वह नहीं है। यह कारीगरी की गुणवत्ता और जाँच की समस्या है, जिसे ठीक करना हमें पहले से आता है। बिजली के किसी भी दूसरे इंस्टॉलेशन की तरह: सही मानक, सही मंज़ूरी, कोई सक्षम व्यक्ति जो काम जाँचे।\nजो बात हमें फिर प्लानिंग के नियमों पर ले आती है, जहाँ ठीक करने लायक एक असली कमी है। काउंसिलों पर किसी BESS आवेदन पर फ़ायर सर्विस से सलाह लेने की कोई क़ानूनी बाध्यता नहीं है, इसलिए कुछ पूरा फ़ायर मैनेजमेंट प्लान माँगती हैं और कुछ सुरक्षा को प्लानिंग के दायरे से बाहर ही मान लेती हैं।12\nआपत्ति है “ये चीज़ें आग पकड़ती हैं”। डेटा कहता है कि बुरी तरह लगाई गई चीज़ें आग पकड़ती हैं। इनमें से एक मंज़ूरी ठुकराने का तर्क है। दूसरा निर्माण की जाँच करने का तर्क है। कमी भर दीजिए और तर्क ख़त्म। उसे टूटा छोड़ दीजिए और वह तर्क की तरह काम करता रहेगा।\nकहना होगा कि अब तक इसमें से कुछ भी ख़ास कारगर नहीं रहा। एक साल बाद, उन काउंसिलों ने पाया है कि बड़े सौर को रोकना प्रेस रिलीज़ में कहना आसान है, प्लानिंग कमेटी में करना नहीं, और कई योजनाएँ फिर भी पास हो गईं।7\nपैसे का पीछा कीजिए रही बात कि यह पटकथा आती कहाँ से है, तो फ़ंडिंग रिकॉर्ड पर दर्ज है।\nसमूह आया पैसा कहाँ से Heartland Institute $676,000+ (1998–2007) ExxonMobil16 Heartland Institute और अघोषित रक़में Koch से जुड़ी फ़ाउंडेशन16 GWPF / Net Zero Watch $500,000+ Koch से जुड़ा एक फ़ंड17 GWPF / Net Zero Watch $210,525 Sarah Scaife Foundation, उसकी अमेरिकी शाखा के ज़रिए17 Heartland एक अमेरिकी जलवायु-इनकार संगठन है जिसने UK में शाखा खोली, और उसके लॉन्च पर Nigel Farage सम्मानित अतिथि थे।16 Global Warming Policy Foundation यहाँ Net Zero Watch के नाम से अभियान चलाती है, एक पंजीकृत चैरिटी जो अपने अभियान एक निजी कंपनी के ज़रिए चलाती है।17\nअमेरिकी जीवाश्म पैसा, अमेरिकी बातें, और एक ब्रिटिश पार्टी उन्हें उस तकनीक के ख़िलाफ़ दोहराती हुई जिसमें यह देश साबित तौर पर अच्छा है। बिंदु आप ख़ुद जोड़ लीजिए।\nये बातें साथ में एक राष्ट्रपति लेकर आती हैं।\nदावा सबूत क्या कहते हैं टरबाइन का शोर कैंसर करता है पूरी तरह बेबुनियाद। कोई सबूत नहीं कि आवाज़ सेहत को कोई नुक़सान करती है।18 समुद्री हवा व्हेल मारती है NOAA और National Marine Fisheries Service को कोई वैज्ञानिक सबूत नहीं मिला। तट पर फँसने की वजह जहाज़ों की टक्कर, मछली पकड़ने का सामान और गर्म होता पानी है।18 उन्हें बनाने से “tremendous fumes” निकलता है एक टरबाइन अपने निर्माण में लगी ऊर्जा 5 से 8 महीने में लौटा देता है। हवा गैस से 37× कम CO₂ और कोयले से 77× कम छोड़ती है।19 वह आख़िरी दावा ठहरकर देखने लायक है, क्योंकि वह साफ़ उलट जाता है। US Department of Energy जितनी भी बिजली बनाने की तकनीकें मापता है, उनमें हवा का कार्बन फ़ुटप्रिंट सबसे छोटा है।19 IPCC के माध्य ज़मीनी हवा को 11 g/kWh पर रखते हैं और कोयले को 820 पर। मैंने ये बर्बाद ऊर्जा वाले लेख में रखे थे। जिस चीज़ पर प्रदूषण पैदा करने का आरोप है, वही सबसे कम प्रदूषण पैदा करती है।\nपक्षियों वाला दावा कम से कम किसी सच से शुरू होता है, तो उसे पक्षियों को मारने वाली दूसरी चीज़ों के सामने रखिए।\nअमेरिका में पक्षियों की मौत का कारण प्रति वर्ष विंड टरबाइन 140,000–330,00018 इमारतें ~600 मिलियन18 बिल्लियाँ 2 बिलियन+18 टरबाइन लगभग छह हज़ार में से एक पक्षी के ज़िम्मेदार हैं। बिल्लियों पर कभी कोई टीवी पर नहीं आया। बिल्लियाँ ठीक हैं, लगता है।\nऔर जानवरों की भलाई वाली बात किसी पक्षी-प्रेमी से नहीं आई। उसे एक रूढ़िवादी थिंक टैंक ने संगठित किया, जिसे ExxonMobil, Chevron और Marathon Oil समर्थित एक उद्योग समूह पैसा देता है।18 ऊपर की तालिका वाला ही पैसा, पहुँचाने का अलग तरीक़ा।\nयही तीसरा रास्ता है। थिंक टैंक लिखते हैं, अख़बार छापते हैं, और ऑनलाइन वह भारी मात्रा में फैलाया जाता है। Brown University के एक अध्ययन में पाया गया कि जलवायु विज्ञान को नक़ली कहने वाले ट्वीट्स में से लगभग 40% बॉट अकाउंट से थे।20 मैं यह दावा नहीं करूँगा कि उन्हें कौन चलाता है, और वह अध्ययन आम तौर पर जलवायु-इनकार के बारे में है, ब्रिटिश सौर के बारे में नहीं। लेकिन आप किसी भी सिरे से पकड़िए, पैटर्न वही है: दावे ग़लत हैं, पुराने हैं, और उनके लिए पैसा दिया गया था।\nएक ही भाषा यह वह हिस्सा है जो मुझे लगता है छूट जाता है। पूछिए कि Heartland ने शाखा लंदन में क्यों खोली, Lyon या Leipzig में क्यों नहीं।\nक्योंकि यहाँ वह जैसा लिखा है वैसा ही काम करता है। न अनुवाद, न स्थानीयकरण, न उस देश के हिसाब से तर्क को ढालना जो चीज़ें मीट्रिक में मापता है और अपने घर डिस्ट्रिक्ट नेटवर्क से गरम करता है। प्रेस रिलीज़ अंग्रेज़ी में आती है और उसी दिन छप जाती है।\nइसके पीछे सिर्फ़ साझा शब्दावली नहीं, एक नक़्शे पर दर्ज ढाँचा है।\nपुल Atlas Network, Washington DC 90+ देशों में 450+ संगठनों को सहारा देता है21 पैसा किसके ज़रिए Donors Trust और Charles Koch Foundation21 55 Tufton Street, Westminster GWPF, IEA, TaxPayers\u0026rsquo; Alliance, Centre for Policy Studies, Adam Smith Institute, Civitas21 DeSmog द्वारा मैप किए गए US–UK संबंध ~2,00021 सितंबर 2025 में Reform के सम्मेलन में जलवायु-इनकार करने वाले बड़ी संख्या में पहुँचे।21 इसमें से किसी के लिए एक शब्द का भी अनुवाद नहीं करना पड़ा।\nऔर यह आवाजाही दोनों तरफ़ चलती है। UK के धुर-दक्षिणपंथी Telegram चैनलों को अमेरिकी चुनाव की ईमानदारी के बारे में दुष्प्रचार बढ़ाते हुए दर्ज किया गया है। वही पाइप, उल्टी दिशा में।22 शोधकर्ता बताते हैं कि अंग्रेज़ी के प्रकाशन कहानियाँ तय करते हैं जिन्हें फिर दूसरी भाषाओं का मीडिया उठाकर दोहराता है, जिससे हम क़तार में आख़िर में नहीं, सबसे आगे होते हैं।22\nकिसी फ़्रांसीसी या जर्मन पाठक तक यह देर से और अनुवादक के ज़रिए पहुँचता है, और अनुवाद एक छलनी है। किसी को तय करना पड़ता है कि दावा आगे ले जाने लायक है, और उसे इतना जाँचना पड़ता है कि अपना नाम उस पर लगा सके। हमें यह कच्चा मिलता है, रीट्वीट की रफ़्तार से, एक ऐसे मीडिया बाज़ार से जो हमसे चालीस गुना बड़ा है और जिसे हम मनोरंजन के लिए पहले से देखते हैं।\nयही असली कमज़ोरी है। यह नहीं कि अमेरिकी अपने ग्रिड पर बहस कर रहे हैं। वे उसके साथ जो चाहें करें। बल्कि यह कि हम उसका हर शब्द सुनते हैं, अपनी भाषा में, अपने ग्रिड के बारे में, उन लोगों से जिन्होंने उसे कभी देखा तक नहीं।\nसस्ता कार्बन, महँगी बिजली एक चीज़ नहीं सुधरी। पिछले साल बिजली का औसत £92.77/MWh रहा, जबकि पूरे डेटासेट में £70.13। लगभग एक तिहाई महँगी, जबकि कार्बन आधा हो गया।1\nआपने पढ़ा होगा कि इसकी वजह नवीकरणीय ऊर्जा है। बहुत बार पढ़ा होगा।\nUK का राष्ट्रीय प्रेस, 2025 नवीकरणीय ऊर्जा की आलोचना करते संपादकीय 4223 वह पहला साल जब नवीकरणीय-विरोधी संपादकीय समर्थक संपादकीयों से ज़्यादा हुए, उसके बाद से 201423 दक्षिणपंथी झुकाव वाले जलवायु संपादकीय जो जलवायु कार्रवाई ठुकराते हैं 81%23 आलोचक संपादकीय जो लागत पर ज़ोर देते हैं 86%23 तो लागत ही तर्क है। पक्षी नहीं, नज़ारा नहीं, रुक-रुक कर बिजली नहीं। लागत, आठ में से सात बार।\nडैशबोर्ड यह सवाल सुलझा देता है, क्योंकि वह हर आधे घंटे कीमत और मिश्रण साथ-साथ प्रकाशित करता है। यह रहा 20 सितंबर 2026, शाम चाय के समय से आगे।1\nसमय कीमत गैस गैस का हिस्सा कार्बन सौर हवा 16:00 −£19.03 2.85 GW 11.3% 71 g/kWh 6.33 11.30 16:30 £38.19 3.74 GW 15.1% 88 g/kWh 5.19 10.84 17:00 £103.70 4.46 GW 18.3% 109 g/kWh 4.06 10.21 17:30 £134.16 6.23 GW 25.6% 133 g/kWh 2.64 9.68 18:00 £175.57 7.96 GW 32.2% 150 g/kWh 1.53 8.96 19:30 £195.65 8.87 GW 39.9% 162 g/kWh 0.02 6.99 सूरज ढल गया। गैस तिगुनी हो गई, 2.85 GW से 8.87। और कीमत साढ़े तीन घंटे में माइनस उन्नीस पाउंड से लगभग दो सौ तक पहुँच गई। साढ़े चार बजे तक के आधे घंटे में £57 ऊपर, पाँच बजे तक £65 और, छह बजे तक £41 और। इस दौरान कार्बन तीव्रता दोगुनी से ज़्यादा हो गई।\nदिलचस्प टुकड़े के बजाय पूरा दिन लीजिए, और यह रिश्ता सभी अड़तालीस सेटलमेंट अवधियों में टिका रहता है।\n20 सितंबर 2026, सभी 48 आधे घंटे गैस के हिस्से का दायरा 7.4% से 39.9% कीमत का दायरा −£19.03 से £195.65 कुल उतार-चढ़ाव £214.68/MWh सहसंबंध, गैस का हिस्सा बनाम कीमत r = 0.933 नकारात्मक कीमत वाले आधे घंटे 18, 01:00 से 16:00 तक शून्य दशमलव नौ तीन, एक दिन में, गैस के अनुबंध तय रहते हुए। और उसके नौ घंटे ग्रेट ब्रिटेन लोगों को पैसे दे रहा था कि वे उसकी बिजली ले जाएँ। गैस 7.4% पर, सौर लगभग 10 GW, कीमत शून्य से नीचे।\nफिर सूरज डूबा और कीमत £195.65 हो गई। वही तार। वही विंड फ़ार्म। वही देश।\nतंत्र है मार्जिनल प्राइसिंग। थोक कीमत उस आधे घंटे में ज़रूरी सबसे महँगे प्लांट की चलाने की लागत से तय होती है, और वह लगभग हमेशा गैस होती है। संकट के दौरान गैस ने 98% समय कीमत तय की, जबकि वह लगभग 40% बिजली दे रही थी; 2021 में, 37% उत्पादन पर 97% समय।24 यूरोप के किसी भी देश में सबसे ऊँचा अनुपात।\nउत्पादन में हिस्सा कीमत तय करने में हिस्सा गैस 27.0% पिछला साल1 97–98% अवधियाँ24 हवा, सौर, परमाणु, जल, बायोमास 73.0% बाक़ी उस डेटा में एक बात पर ईमानदार रहिए, क्योंकि कोई न कोई उसे पकड़ेगा। सारे समय का औसत £70.13/MWh है, आज से ज़्यादा गंदे मिश्रण पर, और पिछले साल के £92.77 से सस्ता। यह हवा का कीमतें बढ़ाना नहीं है। यह 2012 से 2020 का सस्ती गैस वाले साल होना है। अलग-अलग दौरों में गैस की कीमत हावी रहती है; एक ही दिन के भीतर मौसम। दोनों एक ही दोषी की ओर इशारा करते हैं।\nतो मिश्रण का एक चौथाई हिस्सा पूरे की कीमत तय करता है। हवा उत्पादन के बिंदु पर मुफ़्त हो सकती है, और उसका बड़ा हिस्सा व्यवहार में है भी, फिर भी आपके बिल का आँकड़ा नहीं हिलेगा, क्योंकि स्टैक पर आख़िरी गैस प्लांट ही दर तय करता है।\nयह नवीकरणीय ऊर्जा का बिजली महँगी करना नहीं है। यह 1990 के दशक का एक बाज़ार डिज़ाइन है जो ऐसे ग्रिड से टकरा रहा है जो अब 1990 के दशक जैसा नहीं दिखता।\nउल्टी स्थिति इसे पक्का कर देती है। गैस की कीमत में एक उछाल लीजिए, उस तरह का जिसे हम पहले ही झेल चुके हैं, और उसे दो अलग ग्रिडों पर मॉडल कीजिए।24\nवही गैस उछाल ऐसे ग्रिड पर पड़ता है… घरेलू बिल बढ़ते हैं 2030 के नवीकरणीय लक्ष्य पूरे 8% CfD-समर्थित नवीकरणीय बिल्कुल नहीं 45% वही उछाल। वही गैस। फ़र्क़ सिर्फ़ इतना है कि कितनी हवा और सौर वहाँ बैठी है जिसे गैस की कीमत से कोई मतलब नहीं। ज़्यादा नवीकरणीय, छोटा झटका। साढ़े पाँच गुना का फ़र्क़।\nतो विंड फ़ार्म वह वजह हैं जिससे पिछला संकट झेला जा सका, वह वजह नहीं जिससे वह हुआ। तीन अलग जाँचें, एक जवाब: एक दिन के भीतर कीमत हवा के उलट चलती है, दौरों के पार वह गैस की कीमत के साथ चलती है, और मॉडलिंग में नवीकरणीय ऊर्जा ही उछाल को कुंद करती है। कारण गैस है। यह क़रीबी मुक़ाबला नहीं है, और इस पर सच में बहस की गुंजाइश नहीं है।\nवह चीज़ जो उस शाम को ठीक कर देती अब इसे उसी दिन पहले के उन अठारह आधे घंटों के बगल में रखिए जब कीमत शून्य से नीचे थी। ठीक इसी आकार की समस्या बैटरी हल करती है। उसे तब चार्ज कीजिए जब ग्रिड लोगों को बिजली ले जाने के पैसे दे रहा हो, उसे शाम की चोटी में वापस डालिए, और स्टैक पर आख़िरी गैस प्लांट को कभी बुलाया ही नहीं जाता। 20 सितंबर को अंतर था £214.68 प्रति मेगावाट-घंटा। बैटरियाँ ऐसे ही अंतर खाने के लिए होती हैं।\nजो हमें फिर दस काउंसिलों में बैठी उन 5,076 MW बैटरी योजनाओं पर ले आता है, और उस पार्टी पर जिसने उनके ख़िलाफ़ हर लीवर का वादा किया। स्टोरेज रोकना सिर्फ़ कुछ कार्बन कटौती टालना नहीं है। यह गैस के मुनाफ़े को बचाता है, आधे घंटे दर आधे घंटे, ठीक उन्हीं शामों को जब गैस सबसे क़ीमती होती है।\nयह इरादा है या नहीं, पैसे का पीछा कीजिए। असर तो किसी भी हाल में यही है, और ऊपर की तालिका के मुताबिक़ इस तर्क के पीछे की फ़ंडिंग उसी उद्योग की है जो यह अंतर वसूलता है।\nलेवी, और आँकड़े किसने जाँचे और लेवी, क्योंकि उन्हें सबसे बड़े सबूत की तरह पेश किया जाता है:\nबिल का हिस्सा, 2025 रक़म हिस्सा बिजली पर नीति लागतें £148.45 बिजली बिल का 17%25 गैस पर नीति लागतें £50.86 गैस बिल का 6%25 सत्रह प्रतिशत, और अप्रैल 2026 से सरकार ने Renewables Obligation का 75% बिलों से हटाकर आम कराधान पर डाल दिया, £150 की औसत कटौती में से लगभग £92 सालाना।25 असली पैसा, बहस के लायक, और मुख्य मुद्दे के आसपास भी नहीं। मुख्य मुद्दा उत्पादन का वह 27% है जो बाक़ी 73% की कीमत तय करता है।\nमैं आपको नहीं बताऊँगा कि उन 42 संपादकीयों में से कितने झूठ थे, क्योंकि इरादा साबित करना ऐसा काम नहीं जो मैं डेस्क से कर सकूँ। जो दिखाया जा सकता है वह ग़लतियों की दर है, और वह ख़राब है। Daily Mail के एक लेख के ख़िलाफ़ शिकायत में पंद्रह तथ्यात्मक ग़लतियाँ गिनाई गईं; नियामक ने एक सुधार माँगा।26 Mail on Sunday और The Times दोनों ने छापा कि NESO ने पाया है कि नेट ज़ीरो की लागत 2050 तक £4.5 ट्रिलियन होगी। NESO ने ऐसा कुछ नहीं पाया था, और यह तीसरी बार था जब अख़बारों ने उसी संस्था की बात को ग़लत पेश किया।26\nइससे पहले कि कोई मुझे बरक़रार रखी गई शिकायतों की कम संख्या गिनाए: IPSO की शिकायत समिति में कोई पेशेवर वैज्ञानिक नहीं है, वह तकनीकी विषयों पर विशेषज्ञों से सलाह नहीं लेती, और ग़लत आँकड़े को अक्सर राय मान लेती है।26 पंद्रह ग़लतियों पर एक बरक़रार शिकायत नियामक को मापती है, लेख को नहीं।\nअपना निष्कर्ष ख़ुद निकालिए। मेरा यह है कि ब्रिटिश प्रेस में नवीकरणीय ऊर्जा के ख़िलाफ़ सबसे ज़्यादा दोहराया जाने वाला तर्क वही है जो ग्रिड के अपने मीटर के बगल में रखते ही सबसे जल्दी ढह जाता है।\nऔर गैस की कीमत हम तय नहीं करते यूरोपीय TTF बेंचमार्क पर गैस के साथ असल में यह हुआ।27\nTTF गैस कीमत 2021 से पहले का औसत ~€20/MWh दिसंबर 2021 €180 मार्च 2022 €220 अगस्त 2022 का शिखर ~€340 2026 की शुरुआत €35–45 सितंबर 2026 के मध्य €83.40 शिखर पर सामान्य दर का सत्रह गुना। और वह आख़िरी पंक्ति देखिए। आपूर्ति और भंडारण की चिंता पर इस महीने गैस €83 पर गई, और ठीक इसी वजह से GB ग्रिड पर एक शांत रविवार की शाम £179.70/MWh पर बिकी। कड़ी छोटी है: यूरोपीय गैस बाज़ार हिलता है, गैस ब्रिटिश कीमत तय करती है, आपका बिल पीछे-पीछे आता है।\nयह भी ध्यान दीजिए कि “सामान्य पर लौटना” असल में सामान्य नहीं है। आज का €35–45 का तल अब भी संकट से पहले का दोगुना है, और एक अफ़वाह पर उछल जाता है।\nइनमें से कोई फ़ैसला यहाँ नहीं होता, और हमारा जोखिम बढ़ रहा है।28\nUK की गैस आपूर्ति माँग में North Sea का हिस्सा, 2025 लगभग आधा आयातित गैस, 2025 464 TWh जिसमें से नॉर्वे की पाइपलाइन आयात का 69% जिसमें से LNG आयात का 31% कुल आपूर्ति में अभी LNG का हिस्सा 14% 2030 तक LNG का हिस्सा 25% से ज़्यादा 2035 तक LNG का हिस्सा लगभग 50% North Sea का उत्पादन हर साल 12–13% गिर रहा है और 2035 तक 2025 के मुकाबले 78% नीचे जाने का अनुमान है।28 यह कमी Qatar और अमेरिका से आने वाले टैंकर भरते हैं, जो एक वैश्विक स्पॉट बाज़ार में एशिया के उन ख़रीदारों के मुक़ाबले ख़रीदे जाते हैं जो किसी भी ठंडी सुबह हमसे ज़्यादा बोली लगा सकते हैं।\nतो यह तर्क कि बिलों की ख़ातिर ग्रिड को गैस पर रखना चाहिए, उल्टा है। गैस वह हिस्सा है जिस पर हमारा नियंत्रण नहीं, जिसकी कीमत उन घटनाओं से तय होती है जिन पर हमारा असर नहीं, उन फ़ील्डों से जो ख़त्म हो रहे हैं। हवा और धूप वह हिस्सा हैं जो एक बार सामान लग जाने के बाद यहीं, मुफ़्त में होता है।\nकिसी चीज़ की लागत और उसकी कीमत किसी चीज़ की लागत और उसके लिए आपसे वसूली जाने वाली कीमत में फ़र्क़ होता है, और यह पूरा कारोबार उसी फ़ासले में बैठा है।\nइस ग्रिड को चलाने की लागत गिरी है। आधा कार्बन, कोयला नहीं, उत्पादन का एक तिहाई अब ऐसे मौसम से आता है जो मुफ़्त आता है और कोई बिल नहीं भेजता। यह लागत है। कीमत दूसरी दिशा में गई, क्योंकि हमने 1990 के दशक का एक नियम रखा जो सिस्टम के सबसे महँगे प्लांट को बाक़ी सब की दर तय करने देता है, और फिर उस प्लांट का ईंधन ऐसे बाज़ार से आयात किया जहाँ एशिया की एक ठंडी लहर तय करती है कि Barnsley का एक पेंशनभोगी गर्म रहने के लिए कितना चुकाएगा।\nकोई इसे छिपा नहीं रहा। यह लिखा हुआ है, आधे-आधे घंटे के सेटलमेंट डेटा में, मुफ़्त, एक ऐसी वेबसाइट पर जिसे एक महिला चलाती है।\nमैं बार-बार इसी सवाल पर लौटता हूँ कि इस भ्रम से फ़ायदा किसे है। क्योंकि जो लोग आपको बता रहे हैं कि यह विंड फ़ार्मों ने किया, जब आप पैसे का पीछा करते हैं, उन्हें उसी चीज़ से पैसा मिलता है जिसने असल में यह किया। यह संयोग नहीं है और यह नाकाबिलियत नहीं है। यह सबसे पुरानी चाल है: लोगों को सिस्टम के सबसे सस्ते हिस्से पर भड़काओ ताकि कोई सबसे महँगे की ओर न देखे।\nऔर जिस हिस्से पर हमला हो रहा है वही अकेला हिस्सा है जो पूरी तरह हमारा है। एक गैस टरबाइन को Qatar से टैंकर और Rotterdam में तय कीमत चाहिए। Humber के पास समुद्र में खड़े विंड फ़ार्म को रखरखाव चाहिए। इनमें से एक संप्रभुता है और दूसरा एक स्थायी भुगतान आदेश, और लगता है हम दूसरे को बचाने के लिए पहले से बहस करके हाथ धोने वाले हैं।\nहमने यह चीज़ बनाई। यह काम करती है। किसी को लोगों को बताना चाहिए।\nस्रोत Kate Morley — National Grid: Live — ग्रेट ब्रिटेन का उत्पादन मिश्रण, कार्बन तीव्रता, माँग और कीमत, पिछले दिन, हफ़्ते, साल और 2012 से पूरे डेटासेट पर चुनने लायक; साथ ही 30 सितंबर 2024 को आख़िरी कोयला स्टेशन का बंद होना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDrax — 2024, the year GB electricity demand turned a corner — दो दशक की घटती माँग, इलेक्ट्रिक गाड़ियों और हीट पंपों से जुड़ा लोड, और 2024 का पलटाव।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEuropean Commission — Light sources, energy label and ecodesign — लाइटिंग के ecodesign नियम और 2020 में पूरे EU में उनसे बची 81 TWh बिजली।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDepartment for Transport — Vehicle licensing statistics data tables, VEH0141 — हर तिमाही के अंत में बॉडी टाइप और ईंधन के हिसाब से लाइसेंसशुदा प्लग-इन गाड़ियाँ। ऊपर के आँकड़े हर साल की Q4 पर ग्रेट ब्रिटेन का बैटरी इलेक्ट्रिक कॉलम हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNational Energy System Operator — Future Energy Scenarios — अलग-अलग रास्तों पर 2050 तक इलेक्ट्रिक गाड़ियों का अपनाव, vehicle-to-grid क्षमता, और स्मार्ट चार्जिंग लचीलेपन का संशोधन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMCS — UK homes installing a small-scale renewable every 90 seconds — प्रमाणित इंस्टॉलेशन के कुल आँकड़े, बीस लाख का पड़ाव और स्थापित क्षमता, और बैटरी स्टोरेज के साथ लगे नए सौर सिस्टमों का हिस्सा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCarbon Brief — Reform-led councils threaten 6GW of solar and battery schemes across England — मई 2025 में जीती गई दस काउंसिलों में बैठी क्षमता, “every lever” का वादा, डेवलपरों और ऊर्जा कंपनियों के मुख्य कार्यकारियों को भेजे गए पत्र, और तब से योजनाओं के साथ असल में क्या हुआ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — Planning for solar farms — सितंबर 2024 के अंत में ज़मीन पर लगे सौर ने अनुमानित 21,200 हेक्टेयर ढका, UK के कुल भू-क्षेत्र का लगभग 0.1%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLancaster University — Researchers use satellite imagery to shed light on UK solar farm land use — सैटेलाइट माप जो सौर फ़ार्मों की ज़मीन 15,580 से 17,364 हेक्टेयर रखता है, UK के भू-क्षेत्र का 0.06% से 0.07%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFriends of the Earth — Fact check: British farming and renewables — गोल्फ़ कोर्स के नीचे की ज़मीन बनाम सौर, और 2035 तक 70 GW के लक्ष्य से निकलने वाला खेती की ज़मीन का हिस्सा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCPRE — Two-thirds of mega solar farms built on productive farmland — इंग्लैंड के सबसे बड़े चालू सौर फ़ार्मों में से 59% उपजाऊ खेती की ज़मीन पर, उस क्षेत्र का 31% best and most versatile श्रेणी में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — Battery energy storage systems — Allerton Bywater, Eaglesham और Devon की योजनाओं समेत प्लानिंग आपत्तियाँ और अस्वीकृतियाँ, आग के तंत्र के रूप में thermal runaway, और BESS आवेदन पर फ़ायर एंड रेस्क्यू सर्विस से सलाह लेने की काउंसिलों पर कोई क़ानूनी बाध्यता न होना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — Battery energy storage systems — UK में ग्रिड-स्तर BESS की दर्ज आग, जिनमें सितंबर 2020 में Liverpool और फ़रवरी 2025 में निर्माणाधीन एक Essex साइट शामिल हैं, और यह टिप्पणी कि घटनाओं की गिनती का कोई भरोसेमंद सार्वजनिक रिकॉर्ड मौजूद नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEPRI — BESS Failure Incident Database — 2011 से ग्रिड-स्तर विफलताओं का वैश्विक रिकॉर्ड, 2017–2019 का दक्षिण कोरियाई समूह, तैनाती की बढ़त के मुकाबले प्रति इकाई विफलता दर में गिरावट, और यह चेतावनी कि डेटाबेस सिर्फ़ सार्वजनिक रूप से रिपोर्ट हुई घटनाएँ पकड़ता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUtility Dive — Cells and modules not responsible for most battery energy storage system failures — EPRI का मूल कारण विश्लेषण: विफलताओं में इंटीग्रेशन, असेंबली और निर्माण 36%, संचालन 29%, डिज़ाइन 21%, निर्माण दोष 4%; 89% घटनाएँ बैटरी से शुरू नहीं होतीं; और विफलताओं का निर्माण, कमीशनिंग और संचालन के पहले दो साल में केंद्रित होना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLeft Foot Forward — What is the Heartland Institute? — UK शाखा का लॉन्च, उपस्थिति, और ExxonMobil तथा Koch से जुड़ी फ़ाउंडेशनों से Heartland की फ़ंडिंग।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nopenDemocracy — Net Zero Watch: how dark oil money is funding influential UK climate sceptics — American Friends of the GWPF के रास्ते GWPF और Net Zero Watch की फ़ंडिंग, Sarah Scaife Foundation के भुगतानों समेत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nClimate Power — Fact check: Trump\u0026rsquo;s wind turbine claims — कैंसर और व्हेल वाले दावे बनाम NOAA और National Marine Fisheries Service की स्थिति, टरबाइनों से पक्षियों की टक्कर पर US Fish and Wildlife Service के अनुमान बनाम इमारतें और बिल्लियाँ, और जीवाश्म-पोषित थिंक टैंक के काम में जानवरों की भलाई वाले तर्क की उत्पत्ति।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCNN — Fact check: five things Trump got wrong about wind turbines — “tremendous fumes” और कार्बन फ़ुटप्रिंट का दावा बनाम Department of Energy की स्थिति, औसत टरबाइन का पाँच से आठ महीने का ऊर्जा भुगतान-काल, और गैस तथा कोयले के मुकाबले हवा का उत्सर्जन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInstitute at Brown for Environment and Society — Shadowy Twitter bots spread climate disinformation — जलवायु विज्ञान को नक़ली बताने वाले ट्वीट्स का वह हिस्सा जो बॉट अकाउंट तक पहुँचा। ध्यान दें कि यह आम तौर पर जलवायु-इनकार का 2021 का अध्ययन है, ख़ास तौर पर UK की नवीकरणीय ऊर्जा का नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDeSmog — 55 Tufton Street और Mapped: how a US-UK network pushes climate science denial — Westminster का यह समूह और उसके सदस्य, Atlas Network की पहुँच और Donors Trust तथा Charles Koch Foundation के ज़रिए उसकी फ़ंडिंग, मैप किए गए लगभग दो हज़ार अटलांटिक-पार संबंध, और 2025 के Reform सम्मेलन में जलवायु-इनकार समूहों की उपस्थिति।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDFRLab — UK-based far-right Telegram channels amplified disinformation targeting US election integrity — दोनों दिशाओं में दर्ज अटलांटिक-पार प्रसार, और कहानियाँ तय करने में अंग्रेज़ी प्रकाशनों की भूमिका जिन्हें बाद में दूसरी भाषाओं का मीडिया दोहराता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPress Gazette — Record opposition to climate action in UK national newspapers in 2025 — नवीकरणीय ऊर्जा की आलोचना करते संपादकीयों की गिनती, 2014 के बाद पहला साल जब वे समर्थक संपादकीयों से ज़्यादा हुए, जलवायु कार्रवाई ठुकराने वाले दक्षिणपंथी झुकाव के जलवायु संपादकीयों का हिस्सा, और हमले की मुख्य लाइन के रूप में लागत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCarbon Brief — Q\u0026amp;A: Why does gas set the price of electricity, and is there an alternative? — ग्रेट ब्रिटेन में मार्जिनल प्राइसिंग, उत्पादन में हिस्से के मुकाबले उन सेटलमेंट अवधियों का हिस्सा जिनमें गैस कीमत तय करती है, और सिस्टम पर CfD-समर्थित नवीकरणीय ऊर्जा के साथ और बिना गैस कीमत के उछाल का मॉडल किया गया असर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHouse of Commons Library — What costs make up an electricity bill? — बिजली और गैस बिलों पर नीति लागतें नक़द और हिस्से के रूप में, सबसे बड़ी अकेली नीति लागत के रूप में Renewables Obligation, और अप्रैल 2026 से उसकी लागत के 75% का आम कराधान पर जाना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCarbon Commentary — Climate misinformation and press regulation — Daily Mail के एक लेख में गिनाई गई पंद्रह ग़लतियाँ बनाम एक ज़रूरी सुधार, नेट ज़ीरो की लागत पर NESO के निष्कर्षों की बार-बार ग़लत रिपोर्टिंग, और तकनीकी विषयों पर IPSO की शिकायत समिति की बनावट और तरीक़ा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTrading Economics — EU natural gas (TTF) price history — 2021 से पहले के आधार से 2021–22 के उछाल और अगस्त 2022 के शिखर से मौजूदा स्तर तक डच TTF बेंचमार्क, आपूर्ति और भंडारण की चिंताओं पर सितंबर 2026 की चाल समेत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nICIS — Ebbing North Sea gas production to raise UK gas prices and exposure to LNG imports — 2025 में North Sea उत्पादन से माँग का लगभग आधा पूरा होना, आयात की मात्रा और बँटवारा, UKCS की गिरावट की दर, और 2030 तथा 2035 तक LNG पर अनुमानित निर्भरता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/energy/the-grid-we-did-fix/","summary":"ग्रेट ब्रिटेन ने चौदह साल में अपनी बिजली की कार्बन तीव्रता आधी कर दी, कोयले के बिना पूरा एक साल चलाया और हवा को अपना सबसे बड़ा अकेला स्रोत बना दिया। इसी बीच बिजली की माँग दो दशक तक घटती रही, जबकि देश ने 1.8 मिलियन इलेक्ट्रिक गाड़ियाँ जोड़ लीं। आँकड़े यही दिखाते हैं, उन हिस्सों समेत जो कहानी बिगाड़ते हैं।","title":"वह ग्रिड जिसे हमने सचमुच ठीक किया"},{"content":"वह संख्या जिसे सब दोहराते हैं और कोई पढ़ता नहीं Lawrence Livermore ने कुछ दिन पहले अपना 2024 का energy flow चार्ट जारी किया। उसके मुताबिक अमेरिका ने 94.61 quad ऊर्जा ख़र्च की और उसमें से 62.27 फेंक दी।1\nठीक है। एक quad एक quadrillion British thermal units होता है। कोई quid नहीं, कोई पाउंड नहीं। इस लेख में कहीं भी पैसे की बात नहीं है, और अगर आपकी आँख इसे बार-बार ब्रिटिश पाउंड पढ़ती है तो मेरी भी पढ़ती थी। अमेरिकी अपना राष्ट्रीय ऊर्जा हिसाब quad में रखते हैं और हम बाक़ी लोग watt hour में काम करते हैं, तो यह रहा वह रूपांतरण जो इसे कुछ मतलब देता है: एक quad लगभग 293 TWh है, पूरे UK ग्रिड की एक साल की डिलीवरी से थोड़ा ज़्यादा।\nउन 62.27 का शिष्ट नाम rejected energy है। वह हिस्सा जिसने कोई उपयोगी काम नहीं किया। चिमनी से ऊपर जाती गर्मी, रेडिएटर से निकलती गर्मी, exhaust से निकलती गर्मी। इसका लगभग सारा हिस्सा कुछ न कुछ जलाने से निकली बेकार गर्मी है।\nअब इकाइयों पर ध्यान दीजिए, क्योंकि पहले मैंने यह गलत समझा था और इंटरनेट का ज़्यादातर हिस्सा भी गलत समझता है। 62.27 quad है, प्रतिशत नहीं। इसे उन 32.34 quad के सामने रखिए जिन्होंने कुछ उपयोगी किया, तो हिस्सा 65.8% बनता है। जो कुछ भी खोदा, निकाला, पाइप से भेजा और जहाज़ से ढोया गया, उसका दो तिहाई गर्म हवा बनकर चला गया।\n2024 ब्रिटिश ग्रिड में अंदर आई ऊर्जा 94.61 quad 27,726 TWh उसके 102 साल Rejected 62.27 quad 18,249 TWh उसके 67 साल ऊर्जा सेवाएँ 32.34 quad 9,477 TWh उसके 35 साल आख़िरी कॉलम वही है जो मुझे लगा। ग्रेट ब्रिटेन का ग्रिड साल में लगभग 271 TWh देता है।2 तो अकेले 2024 में अमेरिका की rejected energy पूरे ब्रिटिश ग्रिड के सड़सठ साल के बराबर है, जो बारह महीनों में गर्मी बनकर फेंक दी गई।\nदूसरे शब्दों में: इस देश की बिजली अभी से 2093 तक चलाइए, तब भी आप उतना नहीं बना पाएँगे जितना अमेरिका ने पिछले साल बर्बाद किया।\nवह संख्या हर जगह दोहराई जाती है। चार्ट गिनता कैसे है, यह लगभग कहीं नहीं दोहराया जाता। दिलचस्प हिस्सा वही है।\nएक छोटी सी बात, क्योंकि यह अमेरिका के बारे में एक यॉर्कशायर वाले का लिखा लेख है। ब्रिटेन में जिसे petrol कहते हैं, अमेरिका में वह gasoline है। forecourt वहाँ gas station है। aircon वहाँ AC है। हिंदी में दोनों पेट्रोल ही हैं, तो इस लेख में पेट्रोल का मतलब वही ईंधन है।\nहवा और सौर ऊर्जा 100% पर गिनी जाती हैं यहीं लोग अटक जाते हैं। Livermore, Energy Information Administration की परिपाटी इस्तेमाल करती है, और उसके तहत चार स्रोत बिना किसी रूपांतरण नुकसान के दर्ज होते हैं।3\nस्रोत चार्ट में कैसे आता है नुकसान कहाँ जाता है कोयला, गैस, तेल अंदर आई ईंधन ऊर्जा ~60–70% rejected में परमाणु अंदर आई thermal ऊर्जा ~67% rejected में ज़मीन पर पवन बाहर निकली बिजली कुछ भी rejected नहीं यूटिलिटी और छत पर सौर बाहर निकली बिजली कुछ भी rejected नहीं जलविद्युत बाहर निकली बिजली कुछ भी rejected नहीं गैस प्लांट को गैस में मौजूद ऊर्जा पर गिना जाता है, तो जो दो तिहाई वह गर्मी बनाकर फेंकता है, वह rejected वाले हिस्से में जाता है। टरबाइन को उस बिजली पर गिना जाता है जो वह देता है। हवा में ऊर्जा की कोई लाइन है ही नहीं जिसके सामने नुकसान गिना जाए।\nतो इस चार्ट पर, thermal प्लांट से पवन फ़ार्म पर जाने वाला हर terawatt hour एक साथ दो काम करता है। उपयोगी में जुड़ता है, rejected से घटता है। दो बार गिना जाता है।\nमतलब यह तर्क कि हवा और सौर ऊर्जा बंद करने से बर्बादी घटेगी, ठीक उसी डायग्राम पर उल्टा चलता है जिसके बारे में यह दिया जाता है। यह तर्क मुझे पूरी गंभीरता से ऐसे लोगों ने दिया है जिन्हें बेहतर पता होना चाहिए। यह करीबी मामला नहीं है। इसमें चिह्न ही उल्टा है।\nबर्बादी असल में कहाँ है चार्ट को क्षेत्र के हिसाब से बाँटिए तो यह अमूर्त नहीं रहता।1\nक्षेत्र अंदर आई ऊर्जा Rejected उपयोगी दक्षता आवासीय 11.23 3.93 7.30 65% वाणिज्यिक 9.49 3.32 6.17 65% औद्योगिक 26.39 13.46 12.93 49% ट्रांसपोर्ट 28.29 22.35 5.94 21% इन चारों तक पहुँचने से पहले ही बिजलीघर cooling towers से 19.21 quad और गँवा देते हैं।\nट्रांसपोर्ट सबसे बुरा है, बहुत अंतर से। यह ऊर्जा का सबसे बड़ा हिस्सा लेता है और उसका 21% गति में बदलता है। वे 22.35 बर्बाद quad अमेरिका जो कुछ फेंकता है उसका 36% हैं। राष्ट्रीय बर्बादी का एक तिहाई से ज़्यादा, एक ही क्षेत्र में।\nपेट्रोल इंजन ईंधन का शायद 16–25% हिस्सा गति में बदलता है। बाक़ी गर्मी और शोर है।4\nपहियों पर उपयोगी गर्मी में गया पेट्रोल (gasoline) इंजन 16–25% 75–84% EV drivetrain (बैटरी से पहियों तक) 87–91% 9–13% यह मामूली फ़ायदा नहीं है। यह एक ऐसी मशीन जो ज़्यादातर आसमान गर्म करती है और एक ऐसी जो ज़्यादातर कार चलाती है, उनके बीच का फ़र्क़ है। वही सफ़र, अलग भौतिकी।\nऔर यह पूरी कड़ी में चलता है, सिर्फ़ गाड़ी में नहीं। तरल ईंधन को पेट्रोल पंप तक पहुँचाने में, एक बूँद जलने से पहले ही, ऊर्जा लगती है।\nकदम वहाँ तक पहुँचाने में गई ऊर्जा कच्चे तेल की refining इनपुट का 7–15%5 टैंकर, पाइपलाइन, सड़क टैंकर उसके ऊपर से ग्रिड transmission और distribution ~5%6 दुनिया की shipping में तेल टैंकरों का हिस्सा deadweight tonnage के हिसाब से ~28%7 हर साल समुद्र से ढोया गया कच्चा तेल और उत्पाद ~4.4 अरब टन7 सड़क ट्रांसपोर्ट दुनिया की तेल माँग का लगभग आधा है। उसे बिजली पर ले आइए तो टैंकर बेड़े के अच्छे-ख़ासे हिस्से के पास ढोने को कुछ बचेगा ही नहीं।\nयहाँ सीधी बात कहना ज़रूरी है, क्योंकि बढ़ा-चढ़ाकर दावा करना ही वह तरीका है जिससे आप जीतती हुई बहस हार जाते हैं। ग्रिड के नुकसान असली हैं और वे resistive गर्मी हैं। EV को सर्दियों में केबिन की गर्मी की कीमत चुकानी पड़ती है जो इंजन को मुफ़्त मिलती है। लेकिन वह मुफ़्त गर्मी सिर्फ़ इसलिए मुफ़्त है क्योंकि इंजन पहले ही तीन चौथाई ईंधन फेंक चुका। वह उसी तरह मुफ़्त है जैसे जलते घर की गर्मी मुफ़्त है।\nअमेरिका जो सबसे बड़ा अकेला काम कर सकता है हल्की गाड़ियाँ ट्रांसपोर्ट ऊर्जा का 58.5% हैं, वह हिस्सा जो किसी नई तकनीक का इंतज़ार किए बिना बिजली पर आ सकता है।8 drivetrain बदलकर और बाक़ी सब वैसा ही छोड़कर हिसाब लगाइए।\nहल्का सड़क ट्रांसपोर्ट Quad आज अंदर आई ऊर्जा 16.55 असल में दिया गया उपयोगी काम 3.47 वही काम EV drivetrain से 4.09 बिजली …गैस से बनी, CCGT दक्षता पर 9.08 primary …हवा, सौर या पानी से बनी 4.09 primary बची ऊर्जा 7.5 से 12.5 quad इनमें से हर एक को gas turbines से चार्ज करें, तब भी आप लगभग साढ़े सात quad बचाते हैं। हवा और सौर से यह साढ़े बारह है। अमेरिका जो कुछ जलाता है उसका आठ से तेरह प्रतिशत, एक बदलाव से।\nयह पूरे चार्ट पर कहीं भी मिलने वाला सबसे बड़ा दक्षता फ़ायदा है, और इसके लिए न कोई आविष्कार चाहिए, न कोई breakthrough, न कोई pilot scheme और न कोई नई भौतिकी, क्योंकि इसके लिए ज़रूरी हर एक गाड़ी आज पहले से बड़ी संख्या में बन और बिक रही है। कारें मौजूद हैं। पूरी तरकीब यही है।\nसिवाय इसके कि बेहतर इंजन बसावट का नक्शा ठीक नहीं करता EV को फिर भी दूरी तय करनी है, और समस्या का दूसरा आधा यहीं बैठा है।\nअमेरिका यूरोप प्रति व्यक्ति प्रति साल कार के मील ~12,400 ~6,2009 रोज़ की यात्राओं में कार का हिस्सा 85% 50–65%9 एक मील से छोटी यात्राएँ कार से ~70% ~30%9 प्रति कार पार्किंग जगहें ~8 गिनी नहीं गईं9 तीसरी पंक्ति देखिए, क्योंकि वह भूगोल का बहाना छीन लेती है। अटलांटिक के दोनों तरफ़ रोज़ की लगभग 30% यात्राएँ एक मील से छोटी होती हैं। वही काम, वही दूरियाँ। अमेरिकी उनमें से दस में सात कार से करते हैं। यूरोपीय दस में सात पैदल, साइकिल से या किसी सवारी से करते हैं।\nयह भूगोल ने नहीं किया। मौसम ने भी नहीं। ज़ोनिंग ने किया, घर यहाँ और दुकानें तीन मील दूर वहाँ रखकर, और पार्किंग की न्यूनतम शर्तों के सहारे, जिनसे देश में हर कार के लिए लगभग आठ जगहें बन गईं।9 1920 और 1960 के दशकों के बीच अमेरिकी शहर मोटर कार के इर्द-गिर्द दोबारा बनाए गए और पश्चिमी यूरोप के बड़े हिस्से ने उनकी नकल की। 1960 के दशक के आख़िर से यूरोप रुक गया, और उसे पलटना शुरू किया।9\nतो साढ़े बारह quad अकेले बिजलीकरण की छत है। मील भी आधे कर दीजिए तो जो बचा है वह भी आधा हो जाता है। एक इंजीनियरिंग का काम है और दूसरा योजना का, और योजना वाला काम वह है जिससे कोई एक ख़रीद करके बाहर नहीं निकल सकता।\nऔर सबसे सस्ता passenger-mile साझा होता है एक तीसरा लीवर है, और अमेरिका ने उसे खींचना लगभग बंद कर दिया है।\nसाधन प्रति passenger-kilometre ऊर्जा पेट्रोल (gasoline) कार 1.9 से 3.5 MJ10 शहरी electric rail, भरी हुई 0.3 से 0.6 MJ10 चार से छह गुना बेहतर, किसी के drivetrain बदलने से पहले ही। एक सवारी वाली कार प्रति passenger-mile भरे हुए coach से 7.7 गुना CO₂ निकालती है।10\nअब हालात।\nअमेरिका यूरोप सार्वजनिक परिवहन पर passenger-miles का हिस्सा 0.40%11 उसके कई गुना कार से की गई यात्राएँ 95%11 50 से 65% बिजली वाली रेल पटरी 1.7% (अमेरिकी महाद्वीप)11 EU में ~57%11 शून्य दशमलव चार प्रतिशत। यह ऐसी परिवहन व्यवस्था नहीं जिसमें सार्वजनिक परिवहन का एक हिस्सा हो। यह एक ऐसा देश है जो गाड़ी चलाता है, और जिसमें कुछ बसें हैं।\nऔर 1.7% बिजलीकरण का मतलब है कि अमेरिकी रेल आज भी भारी बहुमत से डीज़ल है। तो माल और यात्रियों को रेल पर ले जाने का हर तर्क एक ऐसे नेटवर्क के बारे में दिया जा रहा है जो अब भी तेल पर चलता है। पटरी पर बिजली लाइए तो साधन का बदलाव और ईंधन का बदलाव, दोनों एक ही काम से मिलते हैं।\nयहाँ ईमानदार हिस्सा है, क्योंकि यह दूसरी तरफ़ भी काटता है और कोई इसे उठाएगा ही। सार्वजनिक परिवहन तभी कुशल है जब वह भरा हो। अमेरिका में बसों की सवारियाँ दशकों से घट रही हैं, और 1970 से बसों में प्रति passenger-mile ऊर्जा 63% बढ़ गई है।10 किसी कॉलोनी के चारों ओर पचास मिनट का चक्कर लगाती लगभग ख़ाली बस उस कार से बदतर है जिसकी जगह उसे लेनी थी। यह असली संख्या है और बड़ी है।\nलेकिन देखिए कि बस को ख़ाली कौन बनाता है। स्टॉप से पैदल दूरी पर कोई नहीं, दूसरे छोर पर पैदल जाने लायक कुछ नहीं, और ऐसा नक्शा जो हर दरवाज़े के पास आठ पार्किंग जगहें रख देता है। ख़ाली बसें बसों के बारे में कोई तथ्य नहीं हैं। वे इस बारे में तथ्य हैं कि स्टॉप के आसपास क्या बनाया गया।\nजो हमें उस चीज़ तक लाता है जो सच में लोगों को कारों से बाहर निकालती है, और वहाँ का अंतर mode-share वाली संख्या से भी चौड़ा है।\nअमेरिका यूरोप मेट्रो वाले शहर 13 6012 ट्राम नेटवर्क वाले शहर 30 कहीं ज़्यादा12 2000 से मेट्रो रूट की लंबाई में बढ़त आधार तीन गुना तेज़12 तेरह। चौंतीस करोड़ लोगों के देश में। यूरोप के पास साठ हैं, और सदी की शुरुआत से वह तीन गुना तेज़ी से नई पटरी बिछा रहा है, तो अंतर घटने के बजाय बढ़ रहा है।\nसाधन भी मायने रखता है। यूरोपीय शहरों पर हुए काम में पाया गया कि मेट्रो लोगों को कारों से इस तरह बाहर निकालती है जैसे ट्राम नेटवर्क आम तौर पर नहीं निकालते, और यह वैसा ही है जैसी उम्मीद थी: rush hour में मेट्रो गाड़ी चलाने से तेज़ है और ट्राम आम तौर पर नहीं।12 रफ़्तार ही पूरा उत्पाद है। कार से धीमी चीज़ बनाइए तो आपने उन लोगों के लिए सब्सिडी बनाई है जिनके पास कोई चारा नहीं, उन लोगों के लिए विकल्प नहीं जिनके पास है।\nसूची में यही एक सचमुच महँगी चीज़ है। ज़ोनिंग सुधार की कीमत राजनीतिक इच्छाशक्ति और एक नया मसौदा है। सुरंगों की कीमत अरबों है। लेकिन यह वह ख़रीदती है जो बाक़ी दो नहीं ख़रीद सकते। आप घने शहर में लोगों को बिजली पर ले जाते हैं, 0.3 से 0.6 MJ प्रति passenger-kilometre पर, और उससे तेज़ जितना वे गाड़ी से जा सकते थे। उस मोड़ पर कार घर छोड़ना त्याग नहीं रहता, सबसे साफ़ कदम बन जाता है। तभी लोग सच में ऐसा करते हैं।\nमतलब इलाज एक ही इलाज है जो अलग-अलग टोपियाँ पहने है। बिजलीकरण drivetrain से 7.5 से 12.5 quad हटाता है। ज़ोनिंग मील घटाती है। घनत्व ही सार्वजनिक परिवहन को चलाने लायक बनाता है, और सार्वजनिक परिवहन ही घनत्व को रहने लायक बनाता है। एक लीवर खींचिए तो एक लीवर जितना मिलता है। तीनों खींचिए तो वे गुणा हो जाते हैं।\nअमेरिका फ़िलहाल पहले वाले पर बहस कर रहा है।\nफिर भी इसमें से कुछ भी शुरू नहीं होता, बिना सबसे सस्ते कदम के, जो सबसे कठिन भी दिखता है। किसी को ज़ोर से कहना होगा कि समस्या है।\nनिदान ग़ायब नहीं है। एक संघीय प्रयोगशाला उसे हर साल मुफ़्त में, एक सार्वजनिक वेबसाइट पर, एक मिनट में पढ़ा जा सकने वाले सीधे डायग्राम में प्रकाशित करती है। पैंसठ दशमलव आठ प्रतिशत बर्बाद। ट्रांसपोर्ट उसका एक तिहाई। पन्ने के सबसे बड़े हिस्से पर इक्कीस प्रतिशत दक्षता। किसी को अध्ययन करवाने या विज्ञान का इंतज़ार करने की ज़रूरत नहीं। विज्ञान अगस्त में आ गया। लोगों ने हेडलाइन वाली संख्या पढ़ी, उसे गलत समझा, और आगे बढ़ गए।\nचुभना इसी हिस्से को चाहिए। कोई भी देश किसी ऐसी चीज़ को ठीक करने के लिए अपने शहरों के नीचे अरबों ख़र्च करके सुरंगें नहीं खोदता जिसे वह ठीक मानता है, और अमेरिका ने हर साल के 22.35 बर्बाद quad को चुपचाप “ठीक है” वाली फ़ाइल में रख दिया है। बहस करके ख़ारिज नहीं किया। बस कभी मेज़ पर रखा ही नहीं।\nबची हुई गर्मी कहीं तो जानी चाहिए गर्मी तभी बर्बादी है जब उसे रखने की कोई जगह न हो। यह योजना का फ़ैसला है, तकनीक की कमी नहीं, और यह ज़्यादातर दशकों पहले लिया गया था।\nगर्मी की माँग में district heating का हिस्सा डेनमार्क ~66%13 स्वीडन, फ़िनलैंड, पोलैंड, बाल्टिक देश 50% से ऊपर EU औसत ~13% यूनाइटेड किंगडम ~3%14 अमेरिका सिर्फ़ campus, अस्पताल और शहर के बीच वाली योजनाएँ 2025 तक यूरोप लगभग 111,650 वाणिज्यिक और औद्योगिक जगहों को transcritical CO₂ पर चलाता है, खाद्य खुदरा का लगभग एक तिहाई।15 Meta का Odense data centre 2019 से हर साल लगभग 100,000 MWh स्थानीय नेटवर्क में भेज रहा है। यह वह गर्मी है जो वरना एक dry cooler से ऊपर चली जाती। इसके बजाय यह 12,000 घरों को गर्म करती है।13\nUK में हमारे पास लगभग 14,000 heat networks हैं और वे फिर भी गर्मी की माँग का सिर्फ़ 3% पूरा करते हैं।14 चौदह हज़ार नेटवर्क और दिखाने को लगभग कुछ नहीं, क्योंकि वे छोटे हैं, बिखरे हैं और ज़्यादातर सामाजिक आवास पर जोड़ दिए गए हैं। Ofgem ने जनवरी में नियमन संभाला और ज़ोनिंग इसी साल शुरू होती है। लक्ष्य 2035 तक 7%, 2050 तक इमारतों की गर्मी का लगभग पाँचवाँ हिस्सा।16\nडेनमार्क कोई ऐसी चालाकी नहीं कर रहा जो हम नहीं कर सकते। डेनमार्क ने सड़कों के नीचे पाइप डाले। हमने नहीं। बस। फ़र्क़ यही है।\nHeat pumps, और वह refrigerant जिसकी किसी को उम्मीद नहीं छोटे स्तर पर भी वही तर्क। एक resistive heater 1.0 के coefficient of performance (COP) को पार नहीं कर सकता। उस चीज़ की परिभाषा ही यही है। heat pump गर्मी बनाने के बजाय उसे एक जगह से दूसरी जगह ले जाता है, इसलिए वह बेहतर करता है।\nसिस्टम COP परिस्थितियाँ Resistive (PTC) element अधिकतम 1.0 कोई भी गाड़ी का heat pump 2.0–3.2 0 से 15 °C Hyundai/Kia R290 propane यूनिट दावा 3.8 −15 °C VW R-744 (CO₂) यूनिट 3.1 −20 °C17 ADAC ने −7 °C पर 28 EVs की सर्दियों वाली जाँच की। heat pump वाले मॉडलों में सिर्फ़ resistive वालों से औसतन 22% कम range घटी।18\nR-744 वाली पंक्ति दोबारा देखने लायक है। यह ख़ुद carbon dioxide है, refrigerant का काम करती हुई, VW ID.3 और ID.4 में। ज़्यादा suction vapour density ठंड बढ़ने पर भी क्षमता बनाए रखती है, जो ठीक वही समय है जब आपको उसकी ज़रूरत होती है।17\nऔर refrigerant ग्रेड CO₂ ammonia, ethanol और खाद बनाने का उप-उत्पाद है, जिसे हवा में छोड़ने के बजाय पकड़ा और साफ़ किया जाता है।19 एक बर्बाद होने वाली धारा गर्म और ठंडा करने का काम कर रही है, R-134a के 1,430 के सामने 1 की global warming potential पर। जब यह लीक होती है, तो कुछ नहीं होता।\nयह carbon capture नहीं है और मैं ऐसा दिखावा नहीं करूँगा; charge एक किलो से कम है। बात संकरी है और बेहतर है। working fluid वह चीज़ है जो हमारे पास पहले से ज़रूरत से ज़्यादा थी।\nमैं असल में क्या चलाता हूँ सामान विवरण क्यों सोलर array 9 kW छत सही दिशा में है, तो इस्तेमाल कीजिए बैटरी 30 kWh दिन की बिजली शाम में खिसकाती है EVs MG4, Xpeng G6 array से चार्ज, पेट्रोल पंप से नहीं Aircon ख़ुद की बिजली से पैनल जो बनाते हैं उसी पर चलता है नियंत्रण Home Assistant बड़े लोड सस्ते समय में डाल देता है इस सूची में कुछ भी अनोखा नहीं और कुछ भी नया नहीं। वही सिद्धांत जो storage media को IO pattern से मिलाने में है। ऊर्जा को वहाँ लगाइए जहाँ वह अपना ख़र्च निकाले, नापिए कि असल में क्या मिलता है, और डिब्बे पर लिखे लेबल पर भरोसा करना छोड़ दीजिए।\nजिस बात ने मुझे चौंकाया, वह यह थी कि बचत का कितना हिस्सा ईंधन को इधर-उधर न ढोने से आया। न टैंकर, न पेट्रोल पंप, न रास्ते में अपना हिस्सा काटती refinery। पैनल कार से तीस फ़ुट दूर हैं।\nचार्ट एक आईना है Livermore सालों से ये प्रकाशित करती आई है और ये अच्छे हैं। ईमानदारी से बने, सचमुच उपयोगी, मुफ़्त। किसी का भी एक घंटा देने लायक।1\nलेकिन Sankey डायग्राम की कोई राय नहीं होती। यह आपको दिखाता है कि किसी देश ने अपनी ऊर्जा के साथ क्या करने का फ़ैसला किया, पैमाने के हिसाब से बना हुआ। 65.8% भौतिकी का कोई नियम नहीं है। यह इंजनों, पाइपों और योजना के बारे में लिए गए फ़ैसलों की तस्वीर है, जो लगभग सत्तर साल में एक-एक करके लिए गए, और अगर फ़ैसले अलग होते तो यह अलग दिखती।\nडेनमार्क का चार्ट अलग दिखता है क्योंकि डेनमार्क ने खुदाई की।\nस्रोत Lawrence Livermore National Laboratory — Energy Flow Charts — अमेरिकी ऊर्जा के सालाना Sankey डायग्राम, 2024 के चार्ट और उसके 94.6 quadrillion BTU कुल समेत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nKate Morley — National Grid: Live — ग्रेट ब्रिटेन की बिजली माँग, पिछले साल भर में औसत 30.9 GW, जो सालाना लगभग 271 TWh बनती है। वह डैशबोर्ड क्या दिखाता है, इस पर मैंने The Grid We Did Fix में लिखा है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHawai\u0026rsquo;i State Energy Office — Statewide Energy Flowchart — Livermore द्वारा इस्तेमाल की जाने वाली EIA पद्धति बताता है, जिसके तहत distributed सौर, जलविद्युत, ज़मीन पर पवन और यूटिलिटी सौर को 100% उत्पादन दक्षता मानकर दर्ज किया जाता है और कोई thermal नुकसान नहीं दिखाया जाता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEVreporter — Understanding the complete efficiency picture of electric vehicles — combustion और electric drivetrains के लिए tank-to-wheel और battery-to-wheel दक्षता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nConcawe — EU refinery energy systems and efficiency — कच्चे तेल के इनपुट के हिस्से के रूप में refinery की अपनी ऊर्जा खपत, साधारण distillation के लिए 3–4% से लेकर पूरे conversion वाले प्लांटों के लिए 7–10% और ऊपर तक।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Energy Information Administration — How much electricity is lost in transmission and distribution? — 2018 से 2022 तक अमेरिका में सालाना transmission और distribution नुकसान भेजी गई बिजली का औसतन लगभग 5%।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUNCTAD — World seaborne trade — deadweight tonnage के हिसाब से दुनिया की shipping में टैंकरों का हिस्सा, और समुद्र से ढोए गए कच्चे तेल व refined उत्पादों की मात्रा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUS Energy Information Administration — Light-duty vehicles\u0026rsquo; share of transportation energy use — अमेरिकी ट्रांसपोर्ट ऊर्जा में हल्की गाड़ियाँ 58.5%, मध्यम और भारी ट्रक व बसें 23.9%, और 5% से ऊपर अकेला दूसरा साधन हवाई।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCar dependency — Wikipedia और CNN — This little-known rule shapes parking in America — अमेरिका बनाम यूरोप में प्रति व्यक्ति कार किलोमीटर, अटलांटिक के दोनों तरफ़ कार से की गई रोज़ की और एक मील से छोटी यात्राओं का हिस्सा, पार्किंग की न्यूनतम शर्तों से बनी प्रति कार लगभग आठ जगहें, और 1960 के दशक के आख़िर से शहरी नीति का अलग होना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBureau of Transportation Statistics — Energy intensity of passenger modes और Public transport versus private cars: a passenger-kilometre energy comparison — पेट्रोल कारों बनाम भरी शहरी electric rail में प्रति passenger-kilometre ऊर्जा, एक सवारी वाली कार और भरे coach के बीच उत्सर्जन का अनुपात, और सवारियाँ घटने के साथ बसों में प्रति passenger-mile ऊर्जा का बढ़ना।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nTransportation in the United States — Wikipedia और Statista — Share of the rail network which is electrified in Europe — सार्वजनिक परिवहन और निजी वाहनों पर अमेरिकी passenger-miles का हिस्सा, और EU बनाम अमेरिकी महाद्वीप में नेटवर्क के हिस्से के रूप में बिजली वाली पटरी।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nStreetsblog USA — Other countries are building transit while the US falls behind और Metros reduce car use in European cities but trams do not — मेट्रो और ट्राम नेटवर्क वाले अमेरिकी और यूरोपीय शहरों की गिनती, 2000 से दोनों तरफ़ मेट्रो रूट की लंबाई बढ़ने की दर, और यह निष्कर्ष कि मेट्रो कार यात्राओं की जगह लेती है जबकि ट्राम नेटवर्क आम तौर पर नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nState of Green — Utilising excess heat to warm up Danish homes — घरेलू गर्मी की माँग में डेनमार्क की district heating का हिस्सा, और Odense के निर्यात आँकड़ों समेत data centre की अतिरिक्त गर्मी की वसूली।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nGreater London Authority — Heat networks data report, February 2026 — UK के बिखरे heat network और गर्मी की माँग में उनका मौजूदा हिस्सा।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nATMOsphere — European transcritical CO₂ installations — 2025 में transcritical CO₂ चलाती 111,650 यूरोपीय वाणिज्यिक और औद्योगिक जगहें, जो खाद्य खुदरा दुकानों का लगभग एक तिहाई हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDepartment for Energy Security and Net Zero — Heat Network Zoning: government response — ज़ोनिंग ढाँचा, जनवरी 2026 से Ofgem का नियमन, और 2035 व 2050 के लक्ष्य।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNaturalRefrigerants.com — CO₂ heat pumps found to offer high efficiency at low ambient temperature in electric vehicles — कम बाहरी तापमान पर गाड़ियों के R-744 heat pump का प्रदर्शन, और VW ID.3 व ID.4 में उसका इस्तेमाल।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nInsideEVs — For maximum winter EV driving range, you want a car with this feature — 28 electric गाड़ियों पर ADAC की सर्दियों वाली जाँच और −7 °C पर range घटने का अंतर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNaturalRefrigerants.com — FAQs — ammonia, alcohol और खाद उत्पादन के वसूले गए उप-उत्पाद के रूप में refrigerant ग्रेड CO₂, और उसकी global warming potential 1।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/energy/rejected-energy-what-the-livermore-chart-shows/","summary":"Lawrence Livermore हर साल एक Sankey डायग्राम प्रकाशित करती है जो दिखाता है कि अमेरिका की ऊर्जा कहाँ जाती है। 2024 में 94.61 quad में से 62.27 quad ने कोई उपयोगी काम नहीं किया। rejected energy का क्या मतलब है और quad क्या होता है, चार्ट का अपना तरीका renewables को बर्बादी में जोड़ने के बजाय उसे घटाता क्यों दिखाता है, अकेला ट्रांसपोर्ट राष्ट्रीय कुल के एक तिहाई से ज़्यादा क्यों है, और वे तीन चीज़ें जो इसे सच में ठीक करेंगी।","title":"Rejected Energy: Livermore का चार्ट असल में क्या दिखाता है"},{"content":"Webex विंडो के ऊपर एक पीला बैनर लगा देता है। Offline - No internet connection. फ़ोन सर्विस disconnected दिखती हैं, कुछ sync नहीं होता, और आप उस मीटिंग में नहीं जुड़ पाते जो नब्बे सेकंड पहले शुरू हो चुकी है।\nजब यह चीज़ आपका काम का फ़ोन हो, तो यह मामूली असुविधा नहीं है। मेरी कॉल Webex पर आती हैं, और मेरी VoIP लाइन इसी से चलती है, इसलिए जो क्लाइंट authenticate नहीं करेगा वह एक ऐसा डेस्क फ़ोन है जो बजेगा नहीं, एक मीटिंग जिसमें मैं नहीं हूँ, और एक सहकर्मी जिसे voicemail मिलता है। इसने मेरा काम रोक दिया। धीमा नहीं, कमज़ोर नहीं। रुक गया।\nऔर इसमें से कुछ भी मेरे करने या रोकने का नहीं था। एक पूरा कामकाजी दिन बिगड़ गया क्योंकि quality control लागू नहीं किया गया, एक ऐसे सप्लायर पर जिसे पैसे मिलते हैं, एक ऐसे प्रोडक्ट पर जो support contract के साथ बिकता है, एक ऐसे प्लेटफ़ॉर्म पर जिसे उनका अपना requirements पेज supported कहता है। मैंने कुछ भी गलत configure नहीं किया। मैंने vendor का पैकेज, vendor की repository से, vendor के बताए प्लेटफ़ॉर्म पर install किया, और वह एक TLS connection नहीं खोल सका। फिर मैंने अपनी एक शाम यह पता लगाने में लगाई कि क्यों, जो वह समय है जो पैकेज पर signature करने वालों ने नहीं लगाया।\nमशीन offline नहीं है। बगल में browser पेज लोड कर रहा है। आपकी मेल आ रही है, आपका terminal एक remote से pull कर रहा है, और अगर आप operating system से पूछें कि क्या वह इंटरनेट तक पहुँच सकता है, तो वह हाँ कहता है। Webex खुद भी अपने log में यही मानता है, आपको उल्टा बताने से ग्यारह सेकंड पहले।\nअसल में हुआ यह है कि Webex के अंदर Cisco का भेजा OpenSSL एक भी certificate authority नहीं ढूँढ पाता, क्योंकि उसे उन्हें /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl में ढूँढने के लिए compile किया गया था। यह Cisco के एक बिल्ड कंटेनर की डायरेक्टरी है। यह आपके कंप्यूटर पर कभी मौजूद नहीं रही और कभी होगी भी नहीं। ऐप्लिकेशन का हर TLS connection certificate verification पर फ़ेल होता है, login token refresh नहीं हो पाता, पंद्रह सेकंड का एक timer खत्म हो जाता है, और interface उस इकलौते कारण की ओर हाथ बढ़ाता है जिसके लिए उसके पास कोई string है।\nतो बैनर एक खास और बेकार तरीके से गलत है। वह आपके नेटवर्क का नाम लेता है। गलती उनके बिल्ड के अंदर एक पाथ में है।\nयह version 46.8.0.35631 है, Fedora 44 पर, kernel 7.2.4। यह एक supported प्लेटफ़ॉर्म है। Cisco Linux के लिए system requirements प्रकाशित करते हैं और एक signed .rpm भेजते हैं, webex-46.8.0.35631-1.x86_641। आगे बताया गया है कि इसे लगभग दस मिनट में कैसे साबित करें, कोई भी सीधा-सादा fix काम क्यों नहीं करता, कौन सा करता है, और फिर वह हिस्सा जो इन सबसे ज़्यादा मायने रखता है: यह कोई बारीक bug नहीं है। यह एक ऐसा बिल्ड है जिसे किसी ने कभी ऐसी मशीन पर नहीं चलाया जिसने उसे बनाया न हो।\nबैनर असल में आपको क्या बता रहा है Webex अपना connectivity display एक composite state machine से चलाता है, सात sub-machine, हर एक के अपने timer। शुरू होते समय वे ऐसे initialise होती हैं:\nConnectivityStateMachine::ConnectivityBanner - Initializing with state: Connected ConnectivityStateMachine::Network - Initializing with state: NoNetwork ConnectivityStateMachine::Services - Initializing with state: Connected ConnectivityStateMachine::Mercury - Initializing with state: Disconnected ConnectivityStateMachine::Authentication - Initializing with state: UserNotAuthenticated ConnectivityStateMachine::Syncing - Initializing with state: Synced ConnectivityStateMachine::Survivability - Initializing with state: SurvivabilityHide चालीस मिलीसेकंड बाद operating system जवाब देता है, और ऐप्लिकेशन उसे लिख लेता है:\nNetworkManagerPowerNetworkWatcher.cpp:93 onConnectivityCheckSuccess:: The host is connected to a network, that appears to be able to reach the full Internet. यह लाइन उसी फ़ाइल में है, उसी session में, जिसमें बैनर दावा कर रहा है कि कोई इंटरनेट connection नहीं है। ऐप्लिकेशन को पता था। जवाब 08:25:12.131 पर उसके हाथ में था और उसने 08:25:27.132 पर उल्टा दिखाया।\nउन दो पलों के बीच यह हुआ:\nसमय क्या हुआ 08:25:12.131 Operating system पूरी इंटरनेट पहुँच की पुष्टि करता है 08:25:12.218 Proxy detection: कोई configure नहीं, सीधा connection 08:25:12.241 पहली HTTPS request फ़ेल, errorCode: 167772294 Error in SSL handshake 08:25:12.569 CloudApps access token refresh फ़ेल, वही code 08:25:12.571 Kms access token refresh फ़ेल, वही code 08:25:15.684 दोबारा कोशिश, दोनों फ़ेल 08:25:21.745 दोबारा कोशिश, दोनों फ़ेल 08:25:27.132 पंद्रह सेकंड का timer खत्म, बैनर NoInternet पर 08:26:12.091 साठ सेकंड के timer खत्म, सर्विस DisconnectedShortTerm पर गिरती हैं Authentication sub-machine कभी UserNotAuthenticated से बाहर नहीं निकलती, इसलिए Services खुद को disconnected मान लेती है, इसलिए बैनर चल जाता है। दिए गए input के हिसाब से इसका हर चरण सही व्यवहार है। Input गलत है, और input एक संख्या है: 167772294, हर फ़ेल हुई request पर, पहली से आखिरी तक।\nपूरी पोस्ट यही संख्या है। इसे याद रखिए।\nतीन पाथ, जिनमें से कोई मौजूद नहीं Webex सिस्टम का OpenSSL इस्तेमाल नहीं करता। वह अपना साथ लाता है, अपने libcurl के साथ, और वह libcurl आपके वाले के बजाय bundled वाले से link होता है:\n$ ldd /opt/Webex/bin/libcurl.so | grep -E \u0026#39;ssl|crypto\u0026#39; libssl.so.3 =\u0026gt; /opt/Webex/bin/../lib/libssl.so.3 libcrypto.so.3 =\u0026gt; /opt/Webex/bin/../lib/libcrypto.so.3 यहाँ तक ठीक है। TLS library bundle करना एक बचाव-योग्य फ़ैसला है और बहुत से vendor ऐसा करते हैं। मायने यह रखता है कि उसमें क्या पका दिया गया, और पूछें तो OpenSSL बता देगा:\n$ strings /opt/Webex/lib/libcrypto.so.3 | grep -E \u0026#39;OPENSSLDIR|ENGINESDIR|MODULESDIR\u0026#39; OPENSSLDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl\u0026#34; ENGINESDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/lib/engines-3\u0026#34; MODULESDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/lib/ossl-modules\u0026#34; तीन। एक फिसली हुई setting नहीं। पूरा install prefix, उस मशीन से साथ चला आया जिसने इसे compile किया, एक ऐसी library में जो ग्राहक तक एक supported प्लेटफ़ॉर्म पर signed पैकेज के रूप में पहुँचती है।\nOPENSSLDIR एक बार, configure के समय, --openssldir से सेट होता है, और OpenSSL का अपना बिल्ड documentation साफ़ कहता है कि यह किसलिए है: “Directory for OpenSSL configuration files, and also the default certificate and key store.”2 Trust से जुड़ी हर चीज़ इसी पर टिकी है। Default CA फ़ाइल इसके अंदर cert.pem है और default CA डायरेक्टरी इसके अंदर certs3। /workspace एक Conan बिल्ड cache है। Conan वह C++ package manager है जिससे Cisco बिल्ड करते हैं, और वह हर पैकेज को उसके बिल्ड inputs के hash के नीचे रखता है4। Hash cisco8ee8b59cf93de एक ऐसे कंटेनर के बारे में तथ्य है जो शायद बिल्ड खत्म होने के कुछ मिनट बाद ही मिटा दिया गया।\nLibrary से पूछिए कि वह क्या है, और वह stock OpenSSL भी नहीं है:\nVERSION CiscoSSL 3.5.5.8.5.4 27 Jan 2026 BUILT_ON built on: Wed Feb 25 06:29:18 2026 UTC PLATFORM platform: conan-Release-Linux-x86_64-gcc-13 DIR OPENSSLDIR: \u0026#34;/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl\u0026#34; एक maintained in-house fork, अपनी अलग version scheme के साथ, फ़रवरी में बिल्ड हुआ, अगस्त में भेजा गया, और अब भी उस working directory को साथ लिए हुए जिसमें वह बना था।\nमशीन पर OpenSSL की हर copy अपने trust anchors कहाँ ढूँढती है एक मशीन, OpenSSL की दो copy, और सिर्फ़ एक को पता है कि सर्टिफ़िकेट कहाँ हैं Runtime पर किसी copy को नहीं बताया जाता। हर एक में जवाब एक compile की हुई string है, जिसे बिल्ड चलाने वाला तय करता है। System copy: OpenSSL 3.5.8, Fedora 44 compile किया हुआ OPENSSLDIR /etc/pki/tls डायरेक्टरी मौजूद है cert.pem \u0026#8594; tls-ca-bundle.pem certs/ \u0026#8594; hash वाले anchors chain असली anchors से जाँची जाती है Handshake पूरा। मशीन का हर दूसरा प्रोग्राम चलता है। इसीलिए यूज़र को पक्का यकीन है कि नेटवर्क ठीक है। Webex वाली copy: CiscoSSL 3.5.5.8.5.4 compile किया हुआ OPENSSLDIR /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl किसी ग्राहक की मशीन पर ऐसी डायरेक्टरी नहीं cert.pem \u0026#8594; गायब certs/ \u0026#8594; गायब store शून्य trust anchors लोड करता है Handshake फ़ेल: error 0x0A000086, दशमलव में 167772294। यूज़र को दिखाया गया बैनर कहता है कि नेटवर्क बंद है। एक मशीन पर OpenSSL की दो copy। किसी को भी runtime पर नहीं बताया जाता कि trust कहाँ रहता है। हर एक में एक string compile की हुई है, और उनमें से एक string ऐसी डायरेक्टरी का नाम लेती है जो सिर्फ़ किसी और के बिल्ड होस्ट पर कभी मौजूद थी। strings को जवाब मत मानिए। Library से पूछिए strings फ़ाइल में text ढूँढता है। यह साबित नहीं करता कि library उसे इस्तेमाल करती है। तो भेजी गई library को लोड कीजिए और उससे सीधे पूछिए, जिसमें Python की लगभग बारह लाइनें लगती हैं और root की ज़रूरत नहीं:\nimport ctypes c = ctypes.CDLL(\u0026#34;/opt/Webex/lib/libcrypto.so.3\u0026#34;) for f in (\u0026#34;X509_get_default_cert_file\u0026#34;, \u0026#34;X509_get_default_cert_dir\u0026#34;, \u0026#34;X509_get_default_cert_file_env\u0026#34;, \u0026#34;X509_get_default_cert_dir_env\u0026#34;): getattr(c, f).restype = ctypes.c_char_p print(f\u0026#34;{f:34} {getattr(c, f)().decode()}\u0026#34;) X509_get_default_cert_file /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl/cert.pem X509_get_default_cert_dir /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl/certs X509_get_default_cert_file_env SSL_CERT_FILE X509_get_default_cert_dir_env SSL_CERT_DIR यह रहा, library के अपने मुँह से। जब Webex में कोई भी चीज़ OpenSSL की इस copy से default trust store माँगती है, तो उसे एक फ़ाइल और एक डायरेक्टरी थमा दी जाती है जो मौजूद नहीं हैं। SSL_CTX_set_default_verify_paths यही करता है, और लगभग हर क्लाइंट यही करता है जब तक उसे कुछ और न बताया जाए।\nआखिरी दो लाइनें ध्यान देने लायक हैं, क्योंकि वे बचने का रास्ता हैं: library SSL_CERT_FILE और SSL_CERT_DIR को दोनों पर override करने देगी5। इसे भी याद रखिए। यह ज़रूरी बनेगा, और उस तरह नहीं जैसा आप सोचेंगे।\nठीक वही error code दोबारा पैदा करना देखकर साबित करना सबूत नहीं है। भेजी गई libssl.so.3 और libcrypto.so.3 लीजिए, एक असली होस्ट से एक असली handshake कीजिए, सिर्फ़ library के अपने defaults के साथ, और देखिए क्या लौटता है।\nदिलचस्प run वह है जिसमें defaults किसी चीज़ की ओर इशारा नहीं करते। SSL_CERT_FILE और SSL_CERT_DIR ठीक उन्हीं दो values को override करते हैं जिन्हें गायब OPENSSLDIR लटका छोड़ देता है, इसलिए उन्हें एक न-मौजूद पाथ पर डालना भेजी गई हालत को बिल्कुल वैसा ही दोहरा देता है:\n$ SSL_CERT_FILE=/nonexistent/cert.pem SSL_CERT_DIR=/nonexistent/certs python3 tls.py set_default_verify_paths -\u0026gt; 1 set_fd -\u0026gt; 1 SNI -\u0026gt; 1 SSL_connect -\u0026gt; -1 SSL_get_error -\u0026gt; 1 verify result 20: unable to get local issuer certificate err: 0xa000086 error:0A000086:SSL routines::certificate verify failed 0x0A000086 दशमलव में 167772294 है।\nयही संख्या Webex log की हर फ़ेल हुई लाइन में है, और यह Webex से नहीं आई। यह Cisco की अपनी TLS library से आई, उनके ऐप्लिकेशन के बाहर चलते हुए, ठीक एक कारण से फ़ेल होते हुए: उसके पास chain को जाँचने के लिए कोई trust anchor नहीं था। वही library, वही error, बीच में कोई ऐप्लिकेशन नहीं।\nउन्हीं दो variables को असली Fedora bundle पर डालिए और वही code path पूरा हो जाता है:\n$ SSL_CERT_FILE=/etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem python3 tls.py SSL_connect -\u0026gt; 1 SSL_get_error -\u0026gt; 0 verify result 0: ok उन दो runs के बीच नेटवर्क में कुछ नहीं बदला। एक फ़ाइल पाथ बदला।\nनेटवर्क का हर चरण सफल। फ़ेल होने वाला चरण एक लोकल फ़ाइल lookup है। चार चरण नेटवर्क पार करते हैं और सफल होते हैं। पाँचवाँ एक फ़ाइल पढ़ता है और नहीं होता। भेजी गई libssl.so.3 और libcrypto.so.3 पर, Webex के बाहर, सिर्फ़ library के अपने defaults के साथ चलाया गया। TCP connect :443 ok ClientHello, SNI ok ServerHello, chain ok, chain मिली chain को trust से जाँचना कोई anchor लोड नहीं library क्या लौटाती है SSL_connect -\u0026#62; -1 verify result 20: unable to get local issuer certificate err: 0xa000086 error:0A000086:SSL routines::certificate verify failed 0x0A000086 दशमलव में 167772294 है, Webex log की हर फ़ेल लाइन वाली संख्या। ऐप्लिकेशन ने शब्द “certificate” कहीं नहीं लिखा। उसने “Error in SSL handshake” और एक दशमलव integer log किया, और interface ने उसे “Offline - No internet connection” बना दिया, जो वह इकलौती चीज़ है जो मशीन साबित तौर पर नहीं थी। यहाँ कुछ भी नेटवर्क की गलती नहीं। गायब सिर्फ़ एक डायरेक्टरी थी। चार चरण नेटवर्क पार करते हैं और सफल होते हैं, सर्वर की पूरी certificate chain पाना भी। जो चरण फ़ेल होता है वह एक लोकल फ़ाइल खोलता है। यूज़र को उसके इंटरनेट connection के बारे में संदेश दिखाया जाता है। किसी ने आपको चेतावनी क्यों नहीं दी दो चीज़ें मिलकर इसे खामोश बनाती हैं, और उनमें से सिर्फ़ एक Cisco की गलती है।\nक्या कभी एक शब्द नहीं बोलता किसका डिज़ाइन वह चुप क्यों रहता है ऐसा trust store लोड करना जो है ही नहीं OpenSSL का, जानबूझकर SSL_CTX_set_default_verify_paths 1 लौटाता है चाहे पाथ असली हों या नहीं। “A missing default location is still treated as a success”3 पीछे हटने के लिए कुछ न होना Cisco का, और सही सर्टिफ़िकेट validate होते हैं, self-signed अस्वीकार, SSL retry बंद, इसलिए गलती छिपाने वाला कोई degraded mode मौजूद नहीं पहला उचित है। जो प्रोग्राम अपने anchor अलग से भेजता है उसे परवाह करने पर मजबूर नहीं होना चाहिए, इसलिए call सफल होती है, store खाली रहता है, और stack में कहीं भी कुछ नहीं कहता मैंने शून्य certificate authority लोड किए हैं। सबसे पहले जो चीज़ ध्यान देती है वह आधे सेकंड बाद एक verification failure है। मैंने यह call भेजी गई library पर /nonexistent की ओर इशारा करते पाथ के साथ चलाई और उसने 1 लौटाया। यह ऊपर के output में है।\nदूसरा एक policy है जो सर्विस से नीचे आती है, और log इसे दर्ज करता है:\nWdm.cpp:1162 parseDeviceJson: Adding policy \u0026lt;\u0026lt; allowSelfSignedCertificate with value: false NetworkManager.cpp:1738 onConfigReady: ...httpRequestSSLRetryEnabled: 0 HttpRequestManager.cpp:1883 rawHttpRequest: {\u0026#34;validateCertificates\u0026#34;:\u0026#34;true\u0026#34;,\u0026#34;useClientCertificate\u0026#34;:\u0026#34;false\u0026#34;} ये तीन flag ही इकलौता कारण हैं कि यह गलती कहीं बदतर चीज़ के बजाय एक outage है, और इस बात पर जल्दी से आगे बढ़ने के बजाय रुककर सोचना चाहिए।\nइसे पूरा सोचिए। Bundled library शून्य trust anchor लोड करती है, और policy layer के नीचे कुछ भी इसे कभी नोटिस करने वाला नहीं था, क्योंकि failure पूरे रास्ते डिज़ाइन से ही खामोश है। जिसने इसे एक बैनर में बदला वह तीन flag थे। उनमें से किसी एक को उस तरह पलट दीजिए जैसे बहुत से क्लाइंट उसे भेजते हैं, और वही बिल्ड बिल्कुल फ़ेल नहीं होता। वह connect हो जाता है, किसी भी चीज़ से जिसके पास कोई भी सर्टिफ़िकेट हो, क्योंकि उसके पास जाँचने के लिए कुछ नहीं है।\nवही टूटा trust store, एक बिल्कुल अलग गलती से सिर्फ़ एक policy flag दूर दोनों कॉलम में trust path बराबर टूटा है। सिर्फ़ policy तय करती है कि आपको कैसे पता चलेगा। दोनों में एक जैसा: compile किया OPENSSLDIR मौजूद नहीं, इसलिए store शून्य certificate authorities लोड करता है जैसा Webex भेजता है validateCertificates: true allowSelfSignedCertificate: false httpRequestSSLRetryEnabled: 0 जाँचने को कुछ नहीं, इसलिए मना करता है। Handshake फ़ेल। बैनर। आपका एक दिन गया। ज़ोरदार, और हानिरहित। इनमें से कोई एक उल्टा सेट validateCertificates: false या self-signed की इजाज़त या बिना verification के retry जाँचने को कुछ नहीं, इसलिए आगे बढ़ता है। Handshake पूरा। किसी के भी साथ। खामोश, और हानिरहित नहीं। दोनों नतीजों को अलग करने वाली एक policy value थी, जिसे दूसरी टीम ने, defect के बाद, असंबंधित कारणों से सेट किया। Trust path कभी किसी की रक्षा नहीं कर रहा था। वह पूरे समय टूटा था, सवाल सिर्फ़ यह था कि वह किस तरफ़ फ़ेल होगा। “Webex आज offline है” और “Webex ने जो भी जवाब दिया उस पर भरोसा कर लिया” के बीच का फ़र्क एक policy value है, जिसे एक दूसरी टीम ने, defect से नीचे की ओर, ऐसे कारणों से सेट किया जिनका उससे कोई लेना-देना नहीं। यह किस रूप में सामने आता है, समस्या वही है। यूज़र को मिलता है “Offline - No internet connection”। Log को मिलता है “Error in SSL handshake” और एक दशमलव integer। शब्द certificate कहीं नहीं आता जहाँ यूज़र या पहली लाइन का support engineer कभी देखेगा, और इकलौता diagnostic सुराग एक संख्या है जिसे कुछ मतलब निकलने से पहले hex में बदलना पड़ता है।\nवो fix जो काम नहीं आए दोनों सीधे-सादे fix फ़ेल होते हैं, और कारण अलग-अलग हैं और दोनों जानने लायक हैं।\nभेजी गई openssl.cnf को edit करना Webex /opt/Webex/lib/openssl.cnf पर एक configuration फ़ाइल भेजता है, और जैसी भेजी गई है उसमें वह एक provider activate करती है:\n[provider_sect] fips = fips_sect सिर्फ़ FIPS। default provider नहीं, जिसमें साधारण TLS algorithm रहते हैं6। उसे वापस जोड़ना एक लाइन का edit है और इससे कुछ भी नहीं बदलता, क्योंकि bundled OpenSSL वह फ़ाइल कभी पढ़ता ही नहीं। वह openssl.cnf को OPENSSLDIR के अंदर ढूँढता है7, और OPENSSLDIR वही पाथ है जो मौजूद नहीं है। फ़ाइल installation डायरेक्टरी में आधिकारिक दिखती हुई पड़ी रहती है। उसे कोई नहीं पढ़ता।\nयह पहले defect के पीछे छिपा दूसरा defect है। अगर पाथ की समस्या कल OPENSSLDIR को /opt/Webex/lib पर डालकर ठीक कर भी दी जाए, तो यह configuration तब लोड होगी और सिर्फ़ FIPS को activate करेगी। और FIPS module खुद MODULESDIR से लोड होता है, उसी tree का तीसरा मरा हुआ पाथ, इसलिए /opt/Webex/lib में भेजा गया fips.so भी नहीं मिल सकता। तीन पाथ, एक गलत prefix, और हर एक इस तरह टूटा कि अगले को छिपा दे।\nEnvironment variables सेट करना Library SSL_CERT_FILE और SSL_CERT_DIR को मानती है। मैंने ऊपर यह साबित किया। सफल run वहीं है। तो सीधा कदम उन्हें desktop entry में सेट करना है, और यही आज़माया गया:\nExec=env OPENSSL_CONF=/opt/Webex/lib/openssl.cnf \\ SSL_CERT_FILE=/etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem \\ SSL_CERT_DIR=/etc/pki/tls/certs/ /opt/Webex/bin/CiscoCollabHost %U कोई बदलाव नहीं। और कारण यह नहीं है कि Webex variables को अनदेखा करता है। कारण यह है कि process को वे कभी मिले ही नहीं:\n$ tr \u0026#39;\\0\u0026#39; \u0026#39;\\n\u0026#39; \u0026lt; /proc/20293/environ | grep -E \u0026#39;SSL|OPENSSL|CURL\u0026#39; $ tr \u0026#39;\\0\u0026#39; \u0026#39;\\n\u0026#39; \u0026lt; /proc/20293/environ | wc -l 99 चलते हुए Webex process में निन्यानवे variables, और उनमें एक भी वो तीन नहीं जो सेट किए गए थे। क्योंकि इस मशीन पर एक ही नाम की दो desktop entries हैं:\nफ़ाइल उसकी Exec लाइन क्या चलाती है किसने लिखी /usr/share/applications/webex.desktop ऊपर वाली तीन-variable env लाइन, पूरी .rpm ने, फिर हाथ से edit ~/.local/share/applications/webex.desktop /opt/Webex/bin/CiscoCollabHost %U, और कोई environment नहीं Webex के अपने launcher ने और specification इस बारे में अस्पष्ट नहीं है कि कौन जीतता है: “The base directory defined by $XDG_DATA_HOME is considered more important than any of the base directories defined by $XDG_DATA_DIRS.”8 $XDG_DATA_HOME है ~/.local/share। यूज़र वाली copy पैकेज वाली को ढक देती है, हर बार, हर उस desktop पर जो spec मानता है9।\nतो Webex अपने ही launcher की एक दूसरी copy आपकी home डायरेक्टरी में install करता है, और आपका desktop वही copy चलाता है। पैकेज वाली फ़ाइल जितना चाहें बदलिए। आप एक ऐसा दस्तावेज़ edit कर रहे हैं जिसे कोई नहीं पढ़ता।\nएक ही नाम की दो desktop entries, और जीतती वह है जो Webex खुद के लिए लिखता है Environment उस फ़ाइल में सेट हुआ जिसे desktop कभी नहीं पढ़ता दो entries, एक नाम। खोज का क्रम लिखा हुआ है, और वह पैकेज वाली copy के पक्ष में नहीं। हाथ से edit, और पीछे छूटी /usr/share/applications/webex.desktop Exec=env OPENSSL_CONF=... SSL_CERT_FILE=... दूसरी फ़ाइल के रहते कभी नहीं पढ़ी जाती Webex की लिखी, और यही जीतती है ~/.local/share/applications/webex.desktop Exec=/opt/Webex/bin/CiscoCollabHost %U कोई environment सेट नहीं छोड़ी गई चलाई गई XDG base directory specification: $XDG_DATA_HOME से तय base directory को $XDG_DATA_DIRS से तय किसी भी base directory से ज़्यादा महत्वपूर्ण माना जाता है। सबूत, तर्क से नहीं बल्कि चलते process से: tr '\\0' '\\n' \u0026#60; /proc/20293/environ | grep -E 'SSL|OPENSSL' \u0026#8594; कोई output नहीं, 99 variables, इनमें से कोई नहीं तो fix असली था, फ़ाइल असली थी, और जिस process के लिए था वह कहीं और से शुरू हुआ। Environment उस फ़ाइल में सेट किया गया जिसे desktop कभी नहीं पढ़ता। Webex अपनी entry यूज़र की data डायरेक्टरी में लिखता है, specification कहती है कि वह पैकेज वाली से ऊपर है, और सबूत चलता हुआ process है: निन्यानवे environment variables और उन तीन में से कोई नहीं। वो fix जो काम करता है अगर library एक पाथ पर अड़ी है, तो उसे वह पाथ दे दीजिए। वह डायरेक्टरी बनाइए जिसे चाहने के लिए उसे compile किया गया था, और उसे असली चीज़ के symlinks से भर दीजिए:\n#!/bin/bash # Point the bundled CiscoSSL at the system trust store by building the # directory it was compiled to look for. Tested: Fedora 44, Webex 46.8.0.35631. set -euo pipefail OPENSSLDIR=$(strings /opt/Webex/lib/libcrypto.so.3 \\ | grep -oP \u0026#39;(?\u0026lt;=OPENSSLDIR: \u0026#34;)[^\u0026#34;]+\u0026#39;) [ -n \u0026#34;$OPENSSLDIR\u0026#34; ] || { echo \u0026#34;no OPENSSLDIR found in the shipped library\u0026#34;; exit 1; } for p in /etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem \\ /etc/ssl/certs/ca-certificates.crt \\ /etc/pki/tls/certs/ca-bundle.crt \\ /etc/ssl/cert.pem; do [ -f \u0026#34;$p\u0026#34; ] \u0026amp;\u0026amp; { CA_BUNDLE=\u0026#34;$p\u0026#34;; break; } done [ -n \u0026#34;${CA_BUNDLE:-}\u0026#34; ] || { echo \u0026#34;no system CA bundle found\u0026#34;; exit 1; } echo \u0026#34;OPENSSLDIR: $OPENSSLDIR\u0026#34; echo \u0026#34;CA bundle: $CA_BUNDLE\u0026#34; sudo mkdir -p \u0026#34;$OPENSSLDIR\u0026#34; sudo ln -sf \u0026#34;$CA_BUNDLE\u0026#34; \u0026#34;$OPENSSLDIR/cert.pem\u0026#34; sudo ln -sf \u0026#34;$(dirname \u0026#34;$CA_BUNDLE\u0026#34;)\u0026#34; \u0026#34;$OPENSSLDIR/certs\u0026#34; sudo tee \u0026#34;$OPENSSLDIR/openssl.cnf\u0026#34; \u0026gt; /dev/null \u0026lt;\u0026lt;\u0026#39;CONF\u0026#39; openssl_conf = openssl_init [openssl_init] providers = provider_sect [provider_sect] default = default_sect fips = fips_sect [default_sect] activate = 1 CONF echo \u0026#34;done. now restart Webex\u0026#34; इसे restart कीजिए, और वही startup क्रम उल्टा नतीजा देता है। वही binary। वही log लाइनें। Token refresh, जो पहले साठ मिलीसेकंड में फ़ेल होता था, अब तीन सौ तीस में पूरा होता है:\nAuthTokenRequester.cpp:579 Managed to fetch a new Kms access token. AuthTokenRequester.cpp:579 Managed to fetch a new CloudApps access token. AuthTokenSupervisor.cpp:310 Auth tokens refreshed. Expires in [64799 secs]. AuthenticationManager.cpp:1860 onUserAuthenticated: User authenticated. ConnectivityStateMachine::Authentication - UserNotAuthenticated -\u0026gt; UserAuthenticated लगभग 750 ms में authenticate, इसलिए पंद्रह सेकंड का timer कभी नहीं चलता और बैनर कभी नहीं दिखता। फ़ोन सर्विस Disconnected से Connecting पर जाती हैं, एक ऐसी हालत जहाँ टूटा हुआ session एक मिनट की कोशिश में कभी नहीं पहुँचा।\nपहले बाद में नेटवर्क check पास पास पहली HTTPS request 167772294 Error in SSL handshake HTTP 200 CloudApps token फ़ेल मिल गया Kms token फ़ेल मिल गया Authentication UserNotAuthenticated पर अटका UserAuthenticated 15 s पर बैनर “Offline - No internet connection” कोई नहीं फ़ोन सर्विस कभी कोशिश नहीं connect हो रही Authenticate होने का समय कभी नहीं ~750 ms ध्यान दीजिए कि यह fix आपके filesystem के साथ क्या करता है, क्योंकि इससे आपको परेशानी होनी चाहिए। यह आपकी मशीन पर /workspace नाम की एक top-level डायरेक्टरी बनाता है, एक ऐसा नाम जिसके लिए Filesystem Hierarchy Standard में कोई जगह नहीं10, जिसमें एक Conan cache पाथ और एक बिल्ड hash है जो उस कंपनी का है जिससे आपने software खरीदा। Cisco ने आपके लिए जो इलाज छोड़ा है उसकी शक्ल यही है: किसी और का बिल्ड environment अपने root पर mount कर लीजिए।\nयह टूटेगा भी। तीन तरह से:\nकब टूटता है क्यों आप क्या करते हैं Webex update cisco8ee8b59cf93de बिल्ड inputs से बनता है, इसलिए दोबारा बिल्ड हुई dependency का मतलब नई डायरेक्टरी Script फिर चलाइए; वह पुराना मानने के बजाय नई binary से पाथ पढ़ती है Distribution में बदलाव Symlink का target distribution का फ़ैसला है, standard नहीं11 उसे फिर से point कीजिए; script चार जानी हुई जगहें जाँचती है दोबारा install /workspace का न backup होता है, न वह package होता है, न किसी का होता है फिर चलाइए, हर बार, हमेशा इसमें से कुछ भी maintenance नहीं है। यह आप हैं, किसी और की बिल्ड pipeline के एक चरण की जगह खड़े, अनिश्चित समय तक, बिना पैसे के। हर उस मशीन पर runtime पर एक defect को patch करना जो आपकी है, क्योंकि vendor ने उसे बिल्ड के समय एक बार patch नहीं किया।\nनियम उन्हें पता था और उन्होंने आधे बिल्ड पर लगाया यहीं से यह bug report एक तर्क बन जाता है।\nभेजी गई binaries का dynamic section पढ़िए:\n$ readelf -d /opt/Webex/bin/libcurl.so | grep RUNPATH 0x1d (RUNPATH) Library runpath: [$ORIGIN:$ORIGIN/../lib] $ readelf -d /opt/Webex/bin/CiscoCollabHost | grep RUNPATH 0x1d (RUNPATH) Library runpath: [$ORIGIN/../lib] $ORIGIN लोड होते समय उस डायरेक्टरी में बदल जाता है जिसमें object खुद है12। Relocatable bundle के लिए यही सही औज़ार है और उन्होंने इसे ठीक से इस्तेमाल किया। उन्हें करना ही था: Webex एक ही tree दो बार भेजता है, एक बार /opt/Webex में और एक बार ~/.local/share/WebexLauncher/46.8.0.35631_9e6196c9-…/ में, और एक launcher startup पर उनमें से चुनता है। दो prefix, एक बिल्ड, और linker दोनों में अपनी libraries ढूँढ लेता है।\nतो जिन लोगों ने यह पैकेज बनाया वे समस्या को बिल्कुल ठीक समझते थे। Absolute पाथ भेजे जाने के बाद नहीं बचते। उन्होंने इसे कोड के लिए हल किया।\nफिर उन्होंने डेटा पाथ को absolute strings के रूप में छोड़ दिया, जो उस कंटेनर का नाम लेते हैं जिसने उन्हें compile किया। वही बिल्ड। वही दोपहर।\nBundle का एक पाथ खुद को relocate करता है। दूसरा कहीं किसी data centre की मशीन का नाम लेता है। उन्हें पता था कि bundle को हिलना है। उन्होंने यह सिर्फ़ कोड पर लागू किया। दोनों values बिल्ड के समय, उन्हीं लोगों ने, उसी दिन सेट कीं। एक लोड के समय फैलती है, दूसरी कभी नहीं। कोड कहाँ से आता है: सापेक्ष expression के रूप में दर्ज libcurl.so में RUNPATH $ORIGIN:$ORIGIN/../lib /opt/Webex/lib मिल गया ~/.local/share/WebexLauncher/46.8.0.35631_.../lib यह भी मिल गया सही, और जानबूझकर। वही tree दो अलग prefix में दो बार भेजा जाता है और linker दोनों में ढूँढ लेता है। Trust कहाँ से आता है: किसी की working directory के रूप में दर्ज libcrypto.so.3 में OPENSSLDIR /workspace/.conan2/p/b/cisco8ee.../p/ssl ऐसा पाथ नहीं नहीं मिला ENGINESDIR और MODULESDIR: वही tree, वही नतीजा बिल्ड कंटेनर के अंदर के तीन absolute पाथ, हर ग्राहक को भेजे गए, support contract के साथ बिकने वाले प्रोडक्ट पर। इस तस्वीर के दो आधों के बीच की दूरी है एक व्यक्ति, जो packaged artefact को ऐसी मशीन पर चलाए जिसने उसे बनाया नहीं। पूरा defect यही है। मुश्किल bug नहीं। बिना test वाला। वही बिल्ड, वही दिन, वही engineer। Library search path एक ऐसे expression के रूप में दर्ज है जो tree जहाँ भी पहुँचे वहाँ resolve हो जाता है। Trust path किसी की working directory के रूप में दर्ज है। तो इसे उन्हें पता नहीं था के खाने में नहीं डाला जा सकता। $ORIGIN ऐसी चीज़ नहीं जिस पर आप ठोकर खाकर पहुँचें। आप उसकी ओर इसलिए हाथ बढ़ाते हैं क्योंकि आप समझ चुके हैं कि भेजे गए artefact में पका हुआ absolute पाथ एक defect है, और इतना अच्छी तरह समझ चुके हैं कि जाकर उसे linker में ठीक करें। फिर वही बिल्ड उन्हीं libraries में तीन absolute पाथ लिख देता है, और उन्हें भेज देता है।\nनियम जानना और उसे आधे बिल्ड पर लगाना, न जानने से बदतर है। न जानना training की समस्या है और training का इलाज है। यह एक ऐसा पैकेज है जिसमें सही विचार मौजूद था, लिखित रूप में, ELF header में जहाँ कोई भी पढ़ सकता था, और फिर भी वह टूटा हुआ दरवाज़े से बाहर गया। जिससे पता चलता है कि compiler के बाद कुछ भी नतीजे को नहीं देख रहा था। कुछ भी नहीं।\nकंटेनर पहले से वहीं था /workspace कहाँ से आया, यह कोई रहस्य नहीं, और आपको अंदाज़ा नहीं लगाना पड़ता। यह पैकेज header में है:\n$ rpm -qi webex | grep -E \u0026#39;Build Host|Build Date|Vendor\u0026#39; Build Date : Sat 08 Aug 2026 20:47:43 BST Build Host : c964ea9239ae Vendor : Cisco c964ea9239ae ऐसा hostname नहीं जो किसी ने type किया हो। यह बारह hexadecimal अक्षर हैं, जो एक कंटेनर अपने hostname के रूप में बताता है जब कोई सेट न करे। तो पैकेज एक कंटेनर के अंदर बिल्ड हुआ, एक ऐसी कंपनी ने जिसके पास साफ़ तौर पर ऐसा करने के लिए images, registry और orchestration हैं, और इस मशीन पर तीन अलग artefact यह स्वतंत्र रूप से कहते हैं:\nInstall किए पैकेज से पढ़ा गया सबूत Value यह क्या साबित करता है RPM header में Build Host c964ea9239ae एक कंटेनर ID, बिल्ड मशीन नहीं libcrypto.so.3 में OPENSSLDIR /workspace/.conan2/… एक पाथ जो सिर्फ़ उस कंटेनर के अंदर है उसी library में PLATFORM conan-Release-Linux-x86_64-gcc-13 एक कंटेनर में चलता Conan toolchain RPM में Requires glibc \u0026gt;= 2.28 जानबूझकर चुना गया, बहुत पुराना ABI floor फिर उन्होंने इस पर signature किया। बिल्ड 20:47:43 पर खत्म हुआ और signature उसी शाम 21:02:07 का है, key ID 9995e5bbb5ccde3c। पंद्रह मिनट। तो एक release gate है, कोई या कुछ उसे चलाता है, और वह जिस बात की गवाही देता है वह है पैकेज किसने बनाया, यह नहीं कि पैकेज काम करता है या नहीं। Signature मूल स्रोत के बारे में बयान है। यह कभी उपयुक्तता के बारे में बयान नहीं रहा, और जिस process में एक है और दूसरा नहीं, उसकी प्राथमिकताएँ उल्टे क्रम में हैं।\nक्योंकि छूटा हुआ चरण सस्ता वाला है। कंटेनर pipeline में पहले से है। अभी-अभी उससे निकला artefact लीजिए, हर उस distribution की एक साफ़ image शुरू कीजिए जिसे supported बताते हैं, उसे install कीजिए, चलाइए, और log की पहली सौ लाइनें पढ़िए:\ndocker run --rm fedora:44 sh -c \u0026#39; dnf -y install ./webex-46.8.0.35631-1.x86_64.rpm \u0026amp;\u0026amp; timeout 25 /opt/Webex/bin/CiscoCollabHost \u0026amp; sleep 20 grep -c \u0026#34;Error in SSL handshake\u0026#34; ~/.local/share/Webex/current_log.txt\u0026#39; इस बिल्ड पर हर बार शून्य से ज़्यादा। Install 1.1 GB का है, तो गर्म cache पर हर target के लिए एक मिनट मान लीजिए। छह distributions यानी पहले से चल रही एक मशीन के छह मिनट, उस hardware पर जो Cisco के पास पहले से है, उस pipeline में जो पहले से मौजूद है। यह नहीं चलाया गया। एक बार भी नहीं।\nऔर Linux के बारे में लोग जो अब भी कहते हैं कि कई distributions को support करना मुश्किल है, उसका जवाब यही है। यह उस दिन मुश्किल नहीं रहा जिस दिन यह tooling आई, और यह tooling वही है जिससे वे compile करते हैं। हर target के लिए एक base image। हर एक में वही artefact। Matrix एक loop है।\nजो pipeline कंटेनर में बिल्ड करती है और नतीजा कभी उसमें नहीं चलाती, वह pipeline नहीं है। वह एक compiler है जिसके आगे एक cron job है और पीछे एक signing key, और वह जो भी बनाता है वह एक अंदाज़ा है।\nवे कंटेनर में बिल्ड करते हैं और नतीजा कभी उसमें नहीं चलाते कंटेनर pipeline में पहले से है। वह सिर्फ़ उस आधे के लिए इस्तेमाल होता है जो vendor को सूट करता है। नीचे की हर value मशीन पर पड़े पैकेज से पढ़ी गई है, अंदाज़ा नहीं। बिल्ड, कंटेनर के अंदर Build Host: c964ea9239ae /workspace/.conan2/p/b/... conan-Release-Linux-x86_64-gcc-13 कंटेनर के तीन अलग सबूत Sign और प्रकाशन बिल्ड 20:47:43 sign 21:02:07 पंद्रह मिनट, और एक release gate जो बताता है कौन, कभी यह नहीं कि चलता है ग्राहक dnf install webex इसे खोलता है “Offline - No internet” वह चरण जो pipeline में कहीं नहीं है docker run --rm fedora:44 sh -c 'dnf -y install ./webex.rpm \u0026amp;\u0026amp; CiscoCollabHost \u0026amp; sleep 20; grep -c \"Error in SSL handshake\" ~/.local/share/Webex/current_log.txt' वही infrastructure। हर target distribution के लिए एक image। हर एक में एक मिनट से कम, और इस बिल्ड पर ज़ोर से फ़ेल। कई distributions के लिए बिल्ड करना उसी दिन मुश्किल नहीं रहा जब यह tooling आई, और यह वही tooling है जिससे वे compile करते हैं। जो pipeline कंटेनर में बिल्ड करे और नतीजा कभी उसमें न चलाए, वह आगे cron job और पीछे signing key वाला एक compiler है। भेजे गए पैकेज में तीन स्वतंत्र सबूत कि बिल्ड एक कंटेनर में चला, बिल्ड के पंद्रह मिनट बाद लगाया गया signature, और वह इकलौता चरण जो कहीं नहीं दिखता: तैयार पैकेज को हर उस प्लेटफ़ॉर्म की साफ़ image में चलाना जिसके लिए उसे supported बताकर बेचा जाता है। 2026 की release 2018 की libc पर क्यों बनी है? पैकेज बताता है कि उसे क्या चाहिए, और दिलचस्प लाइन पहली है:\n$ rpm -q --requires webex | grep glibc glibc \u0026gt;= 2.28 glibc 2.28 1 अगस्त 2018 को रिलीज़ हुआ था13। यह Red Hat Enterprise Linux 8 का version है14, एक ऐसी release जिसका full support 2024 में खत्म हो गया। यह 2026 का प्रोडक्ट है, 2026 में compile हुआ, और 2018 की C library को target करता है। फिर यूज़र की home डायरेक्टरी में libstdc++.so.6 की अपनी 2.5 MB copy भेजता है, क्योंकि इतने पुराने base के साथ आने वाला C++ runtime इस कोड को नहीं संभाल सकता।\nआज भी कोई ऐसा क्यों करेगा? क्योंकि वे static linking नहीं करेंगे।\nबस इतनी सी बात है। जिस पल आप होस्ट की C library से dynamically link करते हैं, सबसे पुराना distribution जिसे आप support करने को तैयार हैं, उस मशीन पर एक बंधन बन जाता है जिस पर आप compile करते हैं। आप ऐसा कोई symbol इस्तेमाल नहीं कर सकते जिसके बारे में सबसे पुराने target ने कभी सुना न हो, इसलिए आप बिल्ड को एक प्राचीन base image पर बाँध देते हैं और वहीं रहते हैं। हर साल फ़ासला बढ़ता है। हर नई भाषा या library feature इस बहस के साथ आता है कि क्या floor हिल सकता है। सबसे बुरे हिस्से को ढकने के लिए अपना libstdc++ भेजिए, और अब आप एक private runtime भी maintain कर रहे हैं।\nयह सौदा तब समझ में आता था जब बिल्ड होस्ट एक rack में रखी physical मशीन होती थी जिसे किसी को दोबारा install करना पड़ता था। एक दशक से इसका कोई मतलब नहीं रहा। अगर आपको होस्ट की libc से link करना ही है, तो हर target के लिए एक कंटेनर आपको हर प्लेटफ़ॉर्म के असली version पर असली बिल्ड देता है, और कोई दूसरे को बाँधता नहीं।\nलेकिन देखिए पुराने target वाले अनुशासन ने यहाँ असल में क्या खरीदा। काफ़ी कीमत पर ABI की सावधानी: आठ साल पुराना floor, एक bundled C++ runtime, उसके चारों ओर जमा हुआ support matrix। और क्लाइंट फिर भी शुरू नहीं होता। क्योंकि जो टूटा वह एक फ़ाइल पाथ था, और symbol versions की कितनी भी परवाह फ़ाइल पाथ को नहीं बचाती। उन्होंने compatibility का टैक्स और bundling का टैक्स भरा, और वह एक check छोड़ दिया जिसकी कोई कीमत नहीं। दोनों बिल। कोई प्रोडक्ट नहीं।\nउन्होंने self-contained bundle की कीमत चुकाई और वह मिला नहीं Linux पर commercial software भेजने का पुराना तरीका है होस्ट पर जितना हो सके उतना कम निर्भर रहना। जहाँ हो सके static, जहाँ न हो सके एक self-contained tree, और नीचे के distribution के बारे में कोई मान्यता नहीं। यह सुंदर नहीं है और कोई ऐसा दिखावा नहीं करता। यह विकल्प की वजह से मौजूद है। जिस binary को किसी खास जगह पर किसी खास library का खास version चाहिए, वह हर ग्राहक की मशीन को एक support case बना देती है।\nCisco ने दूसरा रास्ता चुना और bundle किया। बिल यह रहा:\nBundle में क्या है आकार या गिनती /opt/Webex/lib में shared objects 150 उनका अपना libcurl, CiscoSSL, zlib-ng, ICU, Kerberos, CUPS client, hunspell और inference engine सब के सब /opt/Webex के नीचे install 1.1 GB ~/.local/share/WebexLauncher के नीचे दूसरी copy, हर यूज़र के लिए 1.1 GB एक chat और calling क्लाइंट के लिए disk पर 2.2 GB दो gigabyte dependencies। Bundling की पूरी कीमत यही है: download, disk, दोहराव, किसी भी चीज़ को patch कर सकने वाला इकलौता पक्ष होने का security बोझ, सब कुछ। यह चुकाइए और आप एक ऐसा प्रोग्राम खरीदते हैं जिसे परवाह नहीं कि होस्ट पर क्या install है, जो Fedora और Debian और Arch और जिस पर भी ग्राहक ने इस साल standardise किया हो, सब पर एक जैसा चलता है, और जिसे कोई ऐसा distribution upgrade नहीं तोड़ सकता जिसके बारे में उसने कभी सुना न हो।\nसिवाय इसके कि उसे परवाह है। उसे एक डायरेक्टरी की बहुत परवाह है, और वह डायरेक्टरी एक बिल्ड सर्वर पर है।\nउन्होंने अपना Kerberos और अपना ICU और अपना spell checker भेजा, और सर्टिफ़िकेट तक का एक काम करता पाथ नहीं भेज सके। Bundle का पूरा मकसद self-contained होना है, और वह उसी एक मामले में self-contained नहीं है जो उसे काम करने से रोकता है। उन 1.1 GB में से हर चीज़ $ORIGIN के ज़रिए सही ढंग से मिल जाती है। सबसे ज़्यादा मायने रखने वाले चालीस-कुछ bytes नहीं मिलते।\nऔर यही हिस्सा मुझे खलता है। Bundling महँगा विकल्प है। उन्होंने खर्च उठाया, मुश्किल engineering की, दो install prefix में डेढ़ सौ libraries के लिए relocation सही किया। फिर उस एक हिस्से को, जो तय करता है कि इसमें से कुछ भी काम करेगा या नहीं, एक ऐसी मशीन की ओर मोड़ दिया जो किसी ग्राहक के पास कभी नहीं रही।\nकिसी ने इसे document भी नहीं किया पहली विफलता के बगल में एक दूसरी विफलता बैठी है, और यही वह है जो पहली को पकड़ लेती।\nपैकेज से पूछिए कि वह कौन सा documentation भेजता है:\n$ rpm -qd webex | wc -l 0 $ rpm -qc webex | wc -l 0 कोई documentation फ़ाइल नहीं। और कोई configuration फ़ाइल नहीं। एक ऐसे पैकेज में %config के रूप में चिह्नित शून्य entries जो एक openssl.cnf भेजता है। यह सजावटी बात नहीं है। RPM किसी फ़ाइल को %config इसलिए चिह्नित करता है ताकि package manager वह सुरक्षित रखे जो administrator ने बदला, उसे कुचलने के बजाय एक .rpmsave बचाकर1516। /opt/Webex/lib/openssl.cnf एक साधारण फ़ाइल के रूप में भेजी गई है, इसलिए अगला update आपके किए किसी भी edit को overwrite कर देता है और आपको कुछ नहीं बताता। जिस एक फ़ाइल को ग्राहक को जायज़ तौर पर बदलना पड़ सकता है, packaging उसी को फेंकने लायक मानती है।\nकहीं भी प्रकाशित नहीं है कि क्लाइंट कौन सा trust store इस्तेमाल करता है, कौन से environment variables मानता है, या अपनी TLS configuration कहाँ से पढ़ता है। जाँचने के लिए कोई पेज नहीं। कोई लिखा ही नहीं गया। इसमें से कुछ भी स्थापित करने का मेरे पास इकलौता तरीका था भेजी गई binaries पर strings, readelf, ldd और ctypes। एक supported प्रोडक्ट को reverse-engineer करना, एक ऐसे सवाल का जवाब पाने के लिए जो उसका documentation एक वाक्य में दे देता।\nऔर यह जितना लगता है उससे ज़्यादा क्यों मायने रखता है, वह यह है। वह documentation लिखना अपने आप में एक test है। Vendor के किसी भी व्यक्ति को एक खाली पेज के सामने बिठाइए जिसका शीर्षक हो Linux के लिए Webex अपने CA सर्टिफ़िकेट कहाँ से पढ़ता है, और सबसे पहले उन्हें जाकर देखना पड़ेगा। जिस पल वे देखेंगे, उन्हें /workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl मिलेगा, और उनके मुँह से अगली चीज़ एक सवाल होगा। Documented configuration पाथ ग्राहक के फ़ायदे के लिए कागज़ी काम नहीं हैं। वे सबसे सस्ता audit हैं जो कोई vendor अपने बिल्ड पर चला सकता है, और उन्हें छोड़ देना ही वह तरीका है जिससे ऐसा पाथ release तक बचा रह जाता है।\nइसमें से कुछ भी बड़ी माँग नहीं है। बताइए कि आपकी configuration कहाँ रहती है। बताइए कि आप कौन से environment variables मानते हैं। अपनी configuration फ़ाइलों को configuration के रूप में चिह्नित कीजिए ताकि update उन्हें खा न जाए। तब जिस ग्राहक को गड़बड़ मिले उसके पास देखने की कोई जगह होगी जो hex editor न हो।\nकिसी ने इसे चलाया नहीं छूटे हुए चरण का नाम ऊपर काफ़ी बार लिया जा चुका है। पूछने लायक यह है कि यह इस प्लेटफ़ॉर्म पर क्यों छूटा और दूसरों पर क्यों नहीं।\nकम से कम Fedora पर तो नहीं। macOS और Fisher-Price OS (Windows) पर इस तरह की गलती इस रूप में सामने नहीं आ सकती, क्योंकि उन प्लेटफ़ॉर्म पर एक system TLS stack है जिसका trust store operating system संभालता है। Linux पर ऐसी कोई चीज़ नहीं है। OpenSSL ही trust store है, और इसलिए जो भी उसे भेजता है वह तय करता है कि वह कहाँ देखे। तो वह इकलौता प्लेटफ़ॉर्म जहाँ bundled library पूरा वज़न उठाती है, वही प्लेटफ़ॉर्म है जो बिना test के भेजा गया, और यह इस बारे में फ़ैसला है कि कौन से ग्राहक एक smoke test के लायक हैं।\nपूरी जाँच में एक शाम लगी: log पढ़ना, यह देखना कि नेटवर्क detection बैनर के उल्टा दावा करने से पहले पास हो चुका था, binary से compile हुआ पाथ निकालना, भेजी गई library पर ठीक वही error code दोबारा पैदा करना। यह सब एक AI agent के साथ हुआ जो log correlation और ctypes harness कर रहा था, जबकि मैं तय कर रहा था कि उससे क्या पूछूँ। मैं यह एक कारण से बता रहा हूँ: जो diagnosis एक vendor ने इस पैकेज पर signature करने और उसे अपनी repository में रखने से पहले कभी नहीं किया, वह अब धैर्य से देखने वाले किसी भी ग्राहक की एक शाम की पहुँच में है। Cisco के engineers के पास भी Claude उतना ही उपलब्ध है जितना किसी और के पास, और वह इसे ठीक से बनाता। आप उससे /workspace/.conan2 को एक भेजे जाने वाले artefact में पकाने को नहीं कह सकते, बिना यह सुने कि artefact के workspace छोड़ते ही क्या होगा। इसे पकड़ने का tooling अब दुर्लभ नहीं है, और न ही इसका ज्ञान। जो गायब है वह vendor पर कोई ऐसा व्यक्ति है जिसका काम देखना था।\nइस बीच इस समस्या से जूझ रहे व्यक्ति के लिए support का रास्ता एक बैनर है जो कहता है कि उनका इंटरनेट बंद है। वे router restart करेंगे। वे अपने provider को फ़ोन करेंगे। वे एक ticket उठाएँगे जो कहीं नहीं जाएगा, क्योंकि Cisco ने जो लक्षण दिखाना चुना वह Cisco से दूर इशारा करता है।\nजो गलत हुआ उसकी पूरी सूची यही है। यह बताना ज़रूरी है कि सही कैसा दिखता, क्योंकि इसकी हर चीज़ का एक तय जवाब है जो इस प्रोडक्ट से पुराना है।\nइसे कैसे बनाया जाना चाहिए था क्या गलत हुआ, बहुत हो गया। Standard यह है, और इसमें कुछ भी नया नहीं। किसी और के कंप्यूटर पर binary भेजना बीस साल से आपसे यही माँगता रहा है।\nउस फ़ैसले से शुरू कीजिए जो Cisco ने सिद्धांत में सही और अमल में गलत किया: आप होस्ट पर कितना निर्भर होने को तैयार हैं। Static linking सबसे मज़बूत जवाब है, और इसके बारे में ठोस होना ज़रूरी है, क्योंकि “बस static link कर दो” उन लोगों द्वारा उछाला जाता है जिन्होंने कभी करना नहीं पड़ा और उन लोगों द्वारा खारिज किया जाता है जिन्होंने कभी कोशिश नहीं की।\nयह क्या हटाता है इसकी कीमत क्या है RUNPATH, और उसे गलत करने का हर तरीका, क्योंकि लोड के समय कोई खोज नहीं होती glibc साफ़ static link नहीं होता: नाम और यूज़र lookup dlopen से होकर जाते हैं, इसलिए binary अब भी होस्ट के NSS modules की ओर हाथ बढ़ाती है17 glibc floor, ताकि सबसे पुराना distribution यह तय करना बंद कर दे कि आप किस पर compile करें LGPL हिस्सों पर relinking की बाध्यता है, इसलिए वे dynamic रहते हैं या आप relink के लिए ज़रूरी चीज़ें भेजते हैं किसी distribution upgrade, library के नाम बदलने या पुराने ldconfig cache से टूटना हर patch आपका है: distribution का कोई security update आपके ग्राहकों तक नहीं पहुँचता ऐसी डायरेक्टरी से versioned .so का dlopen जो शायद हो ही नहीं बड़ा download, और processes के बीच pages की कोई साझेदारी नहीं और बाएँ कॉलम में एक लाइन है जिसका बाकी सब सिर्फ़ साथ दे रहे हैं: आपकी pipeline ने जो artefact बनाया, ग्राहक वही artefact चलाता है, byte दर byte। उसे test कीजिए और आपने वही चीज़ test की जो आपने भेजी। पूरी पोस्ट इसी गुण के न होने के बारे में है।\nदाएँ कॉलम के बारे में ईमानदार होना ज़रूरी है। असली कीमतें, और यही कारण है कि लोग musl की ओर जाते हैं या एक hybrid स्वीकार करते हैं। लेकिन तीसरी पंक्ति देखिए। हर patch का मालिक होना बिल्कुल वैसे ही उस पर लागू होता है जो Cisco ने पहले ही किया: 150 libraries का bundled tree वही प्रतिबद्धता है, लोड के समय की किसी गारंटी के बिना। उन्होंने दोनों तरह हर patch का मालिक बनना स्वीकार किया और बदले में कुछ नहीं पाया।\nतो नियम सीधा है, और यही नियम उन्होंने तोड़ा: जो कुछ आप link करके अंदर नहीं ला सकते, उसे binary के सापेक्ष पाथ से ढूँढना होगा। कोड के लिए $ORIGIN, और वही अनुशासन, सोच-समझकर, हर उस डेटा पाथ के लिए जिसे library ढूँढने जाएगी। इस मामले में ऐसे चार हैं और हर एक पर एक documented handle है:\nLibrary क्या ढूँढने जाती है क्या भेजा गया क्या होना चाहिए था Trust anchors OPENSSLDIR/cert.pem, बिल्ड के समय तय tree में भेजा गया, या startup पर SSL_CERT_FILE सेट5 Configuration OPENSSLDIR/openssl.cnf, वही पाथ, कभी नहीं मिला OPENSSL_CONF, पैकेज वाली copy की ओर5 Providers, FIPS सहित MODULESDIR, absolute, इसलिए fips.so तक पहुँच नहीं OPENSSL_MODULES, “the directory from which cryptographic providers are loaded”5 Engines ENGINESDIR, absolute OPENSSL_ENGINES, या कुछ नहीं, क्योंकि OpenSSL 4.0 ने engine support पूरी तरह हटा दिया5 चार पाथ, चार environment variables, सब एक ही manual page में जो उनकी अपनी library के साथ आता है। अगर आपके artefact में कोई string / से शुरू होती है और बिल्ड के समय तय हुई थी, तो वह एक defect है जो किसी ग्राहक के ढूँढने का इंतज़ार कर रहा है। कोई तीसरा विकल्प नहीं है जिसमें absolute बिल्ड पाथ ठीक हो।\nइस वाले के fix, और वो check जो इसे पकड़ता है सिद्धांत से नीचे इस खास defect पर। छह बदलाव, उनमें से एक भी research नहीं:\nFix मेहनत यह सही क्यों है --openssldir=/opt/Webex/lib/ssl सेट कीजिए और tree भेजिए एक configure flag तब पाथ पैकेज में मौजूद होता है, और flag इसी लिए है2 Startup पर CiscoSSLUtils में SSL_CERT_FILE/SSL_CERT_DIR सेट कीजिए, जानी हुई distribution जगहें जाँचते हुए दर्जन भर लाइनें Standard, documented, उनकी अपनी library पहले से support करती है5 CA bundle खुद पैकेज के अंदर भेजिए सिर्फ़ packaging Trust पर पूरा नियंत्रण, उसे ताज़ा रखने की ज़िम्मेदारी की कीमत पर openssl.cnf ठीक कीजिए ताकि default provider activate हो एक लाइन चाहे जो हो ज़रूरी, और अभी पाथ वाली गलती के पीछे छिपा है6 openssl.cnf को %config चिह्नित कीजिए एक spec लाइन Update को चुपचाप administrator का बदलाव खाने से रोकता है15 पाथ और माने जाने वाले variables प्रकाशित कीजिए एक पेज सबसे सस्ता audit, और लिखते समय ही यह गलती पकड़ लेता है पहला वाला एक-flag fix है और इससे प्रोडक्ट काम करता हुआ भेजा जाता। यह बिल्ड script में एक value है, एक बार सेट की हुई, जिसे उन्होंने गलत किया क्योंकि आगे कुछ भी उसे कभी नहीं जाँचता था।\nCheck fix से भी छोटा है:\n# in CI, on the packaged artefact, in a clean container test -d \u0026#34;$(strings lib/libcrypto.so.3 | grep -oP \u0026#39;(?\u0026lt;=OPENSSLDIR: \u0026#34;)[^\u0026#34;]+\u0026#39;)\u0026#34; \\ || { echo \u0026#34;shipping a trust store path that does not exist\u0026#34;; exit 1; } एक लाइन। यह इस release को ज़ोर से फ़ेल कर देती, फ़रवरी में, उसी मशीन पर जिसने इसे बनाया, उसी कंटेनर में जिसने इसे बनाया, पैकेज पर signature होने से पहले। यह वहाँ इसलिए नहीं है कि यह मुश्किल या महँगा है। इसलिए नहीं है क्योंकि किसी से इसे लिखने को कहा नहीं गया, और इसलिए यह किसी का काम नहीं था कि packaged artefact software की तरह व्यवहार करता है या नहीं।\nएक लापरवाह बिल्ड प्रोसेस बाकी सबको क्या कीमत चुकवाता है ऊपर का सब कुछ एक प्रोडक्ट का बिल्ड प्रोसेस है, अंदर से देखा हुआ, और मैं आपको वापस उसमें से नहीं घुमाऊँगा। पूछने लायक सवाल यह है कि क्या परवाह का यह स्तर एक टीम पर रुकने की संभावना है।\nतो बाहर का रिकॉर्ड इसके बगल में रखिए। CISA उन कमज़ोरियों का एक कैटलॉग रखता है जो खुले में exploit होती पाई गई हैं। सैद्धांतिक नहीं, score की हुई नहीं। लोगों के खिलाफ़ इस्तेमाल होते देखी गईं। 14 सितंबर 2026 तक इसमें 1,710 entries हैं18:\nVendor KEV कैटलॉग में entries Microsoft 388 Cisco 98 Apple 94 Adobe 81 Google 74 Oracle 46 Fortinet 30 VMware 26 दूसरे नंबर पर, एक operating system monopoly के पीछे और बाकी सबसे आगे। सबसे हाल की Cisco entry 14 सितंबर 2026 को जुड़ी, इसके लिखे जाने से एक दिन पहले।\nमैंने तीन हफ़्ते पहले /hi/random/is-your-msp-lying-to-you-part2/ के लिए यही फ़ाइल गिनी थी: version 2026.08.27, 1,685 entries, Cisco 96 पर। तब से दो और, इक्कीस दिनों में।\nईमानदार रहिए कि यह तालिका अकेले क्या साबित करती है और क्या नहीं। ऊँचे मूल्य वाली जगहों पर बड़ा installed base ध्यान खींचता है, और ध्यान bugs ढूँढ लेता है, इसलिए उस पैमाने का कोई भी vendor एक लंबी सूची रखेगा। यह संख्या एक पूर्वधारणा है, फ़ैसला नहीं।\nकुल से ज़्यादा उसकी बनावट को टालना मुश्किल है। Cisco की अट्ठानवे में से पच्चीस security वाली product lines पर हैं: firewalls, appliances, VPN concentrators, mail और web gateways, identity services। और उनके खिलाफ़ जुड़ी चार सबसे हाल की entries, एक के बाद एक, हैं Secure Firewall Management Center दो बार, Secure Firewall ASA, और Secure Email Gateway, उनमें आखिरी 14 सितंबर 2026 को18। Switches नहीं। Collaboration kit नहीं। वे प्रोडक्ट जो खास तौर पर इसलिए बेचे जाते हैं कि वे बाकी सबको सुरक्षित रखें।\nयही वह वाक्य है जिसकी ओर यह पूरी पोस्ट चलती आई है, तो यह रहा साफ़-साफ़। यह एक ऐसी कंपनी है जिसका धंधा security appliances बेचना है, और वह एक desktop क्लाइंट से एक सर्टिफ़िकेट नहीं जँचवा सकती। कोई मुश्किल मामला नहीं। कोई नया हमला नहीं। Computing का सबसे रोज़मर्रा का security काम, जो हर browser हर पेज लोड पर करता है, एक ऐसी library में जिसका fork उन्होंने खुद किया, और उन्होंने उसे एक ऐसी डायरेक्टरी की ओर इशारा करते भेज दिया जो किसी ग्राहक की मशीन पर कभी मौजूद नहीं रही। फिर उस पर signature किया।\nयह पोस्ट जो जोड़ती है वह उसके पीछे के process का एक नमूना है। कोई vulnerability नहीं। एक सीधा packaging defect, गलतियों की सबसे कम बारीक श्रेणी, एक supported प्लेटफ़ॉर्म पर, किसी भी ऐसे smoke test से पकड़ा जाने वाला जिसे कोई चलाने की परवाह करता, और फिर भी भेजा गया। अगर एक बिल्ड pipeline वह एक पैसे देने वाले ग्राहक के सामने रख देगी, तो साफ़ नहीं कि वह किस चीज़ को रोकेगी। किसी चीज़ ने नहीं रोका।\nक्या मैं पूछ सकता हूँ कि इस पर signature क्यों हुआ? क्या मैं पूछ सकता हूँ कि जो पैकेज एक TLS handshake पूरा नहीं कर सकता, उस पर signature करके उसे उस प्लेटफ़ॉर्म के लिए क्यों प्रकाशित किया गया जिसे आपका अपना requirements पेज supported बताता है? यह नहीं कि signature किसने किया। मुझे किसी नाम में कोई दिलचस्पी नहीं और बात किसी नाम की है भी नहीं। किस चीज़ ने इसकी इजाज़त दी, क्योंकि किसी चीज़ ने दी, बिल्ड खत्म होने के पंद्रह मिनट बाद, और वह जो भी है आज भी चल रही है।\nअब सीधी बात। यह कोई project नहीं जिसे मैंने किसी forge से उठाया और किस्मत आज़माई। इसके पैसे दिए जाते हैं। इसके पीछे एक contract है, एक support line, Linux के बारे में दावा करता एक requirements पेज, और एक signing key जो कहती है कि पैकेज Cisco से आया है और install करने लायक है। इनमें से हर एक ग्राहक से किया गया बयान है, और इस release पर हर एक की कीमत शून्य थी, क्योंकि नतीजा कभी खोला ही नहीं गया।\nऔर यहाँ जो standard छूट रहा है वह मेरा नहीं है। उनका है। जो चार variables उन पाथ को ले जाते, वे एक manual page में documented हैं जो आप bundle के अंदर भेजते हैं। उनके अपने packaging format में एक %config marker है जिसे उन्होंने इस्तेमाल नहीं किया और एक documentation section जिसे उन्होंने खाली छोड़ दिया। उनका अपना बिल्ड एक कंटेनर में चला जिसे उन्होंने output चलाने के लिए कभी इस्तेमाल नहीं किया। मैं एक networking और collaboration कंपनी से कुछ नया ईजाद करने को नहीं कह रहा। मैं पूछ रहा हूँ कि उसने अपने ही manuals क्यों नहीं पढ़े।\nइसलिए जो बहाना मैं स्वीकार नहीं करूँगा वह यह है कि यह मुश्किल है। यह किसी के लिए मुश्किल नहीं है, और उस कंपनी के लिए तो बिल्कुल नहीं जो यह रोज़ करती है, इस पैमाने पर, इतने पैसों के लिए। जो professionals यह हर दिन करते हैं उनके पास कोई बहाना नहीं, और बड़ा होना कोई बहाना नहीं है।\nऔर क्या मैं एक और पूछ सकता हूँ, क्योंकि असल में यही मायने रखता है। आप firewalls बेचते हैं। आप एक email gateway, एक VPN concentrator, एक identity service, इन सबके लिए एक management centre बेचते हैं, और इन सब पर आपकी बात यही है कि आप इसे अपने ग्राहक से बेहतर समझते हैं। तो जो कंपनी खुद को network security पर एक authority के रूप में पेश करती है, वह ऐसा क्लाइंट कैसे भेजती है जो एक सर्टिफ़िकेट validate नहीं कर सकता? चालाकी से validate करने में फ़ेल नहीं। एक ढूँढ ही नहीं सकता, क्योंकि डायरेक्टरी कभी थी ही नहीं।\nउस जवाब का कोई ऐसा रूप नहीं जो मैं सुनना चाहूँ जो इस बात से शुरू हो कि desktop टीम appliance टीम से अलग है। वे एक ही signature हैं, एक ही pipeline, एक supported प्लेटफ़ॉर्म के बारे में एक ही प्रकाशित दावा, और अंत में एक ही छूटा हुआ चरण, जो है डिब्बा खोलना। अगर उस प्रोडक्ट में भेजने से पहले certificate validation नहीं जाँचा जाता जहाँ टूटना ज़ोरदार और हानिरहित है, तो मेरे पास यह मानने का कोई कारण नहीं कि उस प्रोडक्ट में जाँचा जाता है जहाँ टूटना चुपचाप और महँगा है।\nऔर ईमानदार हिस्सा, साफ़ कहा हुआ। इसमें से किसी चीज़ ने मुझे हैरान नहीं किया। मैं इस vendor से यही स्तर उम्मीद करने लगा हूँ, यही कारण है कि जहाँ चुनाव मेरा है, मैं उनका kit नहीं खरीदता और उस पर कुछ नहीं बनाता। यह बैज के बारे में पसंद नहीं है। यह वही फ़ैसला है जो मैं किसी भी सप्लायर के बारे में करूँगा: मैंने उनका काम मापा है, एक से ज़्यादा बार, और वह बार-बार वैसा ही लौटता है। ऊपर का कैटलॉग एक माप है। इस पोस्ट का पहला आधा लिखने में जो लगा वह दूसरा।\nमैं Webex पर था ही इसलिए क्योंकि चुनाव मेरा नहीं था, और इसका नाम लेना ज़रूरी है, क्योंकि यही वह स्थिति है जिसमें इसे पढ़ने वाले ज़्यादातर लोग हैं। आपको शायद ही कभी उस vendor से बचने का मौका मिलता है जिसकी गुणवत्ता आप पहले से माप चुके हैं। Contract कोई और sign करता है, kit आ जाता है, और बिल्ड में क्या छोड़ा गया यह पता लगाने वाले पहले व्यक्ति आप होते हैं, अपनी डेस्क पर, एक मीटिंग शुरू होते हुए।\nकुछ ऐसा भेजना जिसे आपने कभी चलाया नहीं कोई अंदरूनी सफ़ाई ज़रूर होगी। एक व्यस्त sprint, एक pipeline जिसके हाथ बदल गए, एक प्लेटफ़ॉर्म जिसका कोई मालिक नहीं। इसमें से कुछ भी सुनने लायक नहीं, क्योंकि हर एक एक ही बात बताता है: काम नहीं किया गया और process में किसी चीज़ ने उसे करना ज़रूरी नहीं बनाया।\nकारीगरी के काम में एक पुराना standard है जो software तक कभी नहीं पहुँचा: जब तक आपने चीज़ चलाकर न देख ली हो, आप काम नहीं छोड़ते। आप system भरते हैं और हर जोड़ जाँचते हैं। आप board में बिजली डालते हैं और हर circuit test करते हैं। इसलिए नहीं कि आपको अपने काम पर शक है। इसलिए कि ग्राहक उसे इस्तेमाल करने वाला है, और उनके सामने पता चलना professional नतीजा नहीं है। कोई आपको ऐसा करते नहीं देखता। आप फिर भी करते हैं। इस शब्द का पूरा मतलब यही है।\nSoftware ने तीस साल यह तर्क देने में बिताए हैं कि वह अलग है, कि बिल्ड ही deliverable है और install किसी और की समस्या, कि हरी pipeline और काम करता प्रोडक्ट एक ही चीज़ हैं, और ऐसा नहीं है। जो बिल्ड उसे बनाने वाले कंटेनर के बाहर कभी चलाया नहीं गया, वह पूरा नहीं हुआ, उसे उस बिंदु पर छोड़ दिया गया जहाँ पूरा करना उबाऊ हो जाता है। उसके आगे सब कुछ उस काम के बारे में दावा है जो किया नहीं गया।\nFix एक configure flag है। Check shell की एक लाइन है। दिलचस्प इनमें से किसी की कीमत नहीं; दिलचस्प संख्या यह है कि कितने लोगों ने Webex विंडो में अपने credentials type किए, उसे यह कहते देखा कि उनका इंटरनेट बंद है, और उस पर भरोसा कर लिया, क्योंकि Cisco ने उन्हें ऐसा बताया और Cisco एक networking कंपनी है। छूटे हुए test ने असल में यही खरीदा: एक bug नहीं, एक झूठ जो प्रोडक्ट पूरे विश्वास से बोलता है, हर launch पर, उन लोगों से जिनके पास बेहतर जानने का कोई तरीका नहीं।\nऔर tab बंद करने से पहले यही रेखा खींचने लायक है, क्योंकि इस पोस्ट के दो आधे दो विषय नहीं हैं। बिल्ड कंटेनर की ओर इशारा करता trust path और edge appliance पर authentication bypass अलग-अलग दाँव पर एक ही विफलता हैं। दोनों एक ऐसी value हैं जिसे किसी ने नहीं जाँचा, एक ऐसे artefact में जिसे किसी ने नहीं चलाया, एक ऐसे process से sign किया हुआ जो मूल स्रोत की गवाही देता है, उपयुक्तता की नहीं। मेरे सामने वाला हानिरहित किस्म का था। वह ज़ोर से टूटा, मेरी अपनी डेस्क पर, और सबसे पहले मुझे पता चला। दूसरी किस्म आपके लिए ऐसा नहीं करती।\nवही छूटा check, दो अलग दाँव पर, और सिर्फ़ एक आपको बताता है एक छूटा check, दो दाँव। सिर्फ़ एक बताता है कि वह मौजूद है। एक ही बुनियादी विफलता: बिना जाँची value, बिना चलाए artefact में, मूल स्रोत की गवाही देने वाले process से sign जो ज़ोर से टूटती है क्या था एक trust store पाथ जो है ही नहीं किसने ढूँढा ग्राहक, पहले launch पर कीमत क्या थी एक शाम, एक डेस्क किसे पता चला मुझे, तुरंत आखिर में सार्वजनिक रूप से लिखा गया। जो कुछ नहीं तोड़ती क्या था एक length जिसकी सीमा किसी ने नहीं जाँची किसने ढूँढा जो भी ढूँढने गया कीमत क्या थी एक incident किसे पता चला ग्राहक, report से कैटलॉग में Cisco की 98 में से 1 बनती है। जो process बायाँ कॉलम नहीं पकड़ेगा, वह दायाँ कभी नहीं पकड़ने वाला था। फ़र्क किस्मत का है, मेहनत का नहीं। इस पोस्ट का defect और उस कैटलॉग की entries अलग कपड़ों में एक ही विफलता हैं। एक ने पहले ही launch पर मेरी डेस्क पर खुद को ज़ाहिर कर दिया। दूसरी किस्म पहले किसी और के सामने खुद को ज़ाहिर करती है। Cisco में किसी ने एक exploitable firewall भेजने का फ़ैसला नहीं किया, ठीक वैसे ही जैसे किसी ने ऐसा क्लाइंट भेजने का फ़ैसला नहीं किया जो इंटरनेट तक नहीं पहुँच सकता। यह बचाव नहीं है। यही आरोप है। दोनों में से किसी को फ़ैसले की ज़रूरत नहीं, और ठीक यही समस्या है: दोनों वह हैं जो दूसरे सिरे से निकलता है जब एक pipeline compile, sign और publish करती है, बिना किसी को नतीजा खोलने का ज़िम्मेदार बनाए। जो process एक न-मौजूद डायरेक्टरी नहीं पकड़ेगा, वह एक न-जाँची length कभी नहीं पकड़ने वाला था, और जो vendor आपको आपकी परिधि की रखवाली करने वाला appliance बेचता है, वह उस process का हकदार नहीं।\nतो जब किसी vendor का नाम उस सूची में बार-बार आए, तो उस आरामदायक सफ़ाई से बचिए कि वे बस बड़े हैं और उन पर ज़्यादा निशाना है। पैमाना मात्रा समझाता है। वह किस्म नहीं समझाता। इसके बजाय देखिए कि उनका बिल्ड प्रोसेस उबाऊ चीज़ों के साथ क्या करता है, क्योंकि उबाऊ चीज़ें बाहर से मापी जा सकती हैं, आपके द्वारा, आज, उस kit पर जो आपके पास पहले से है।\nअपने खुद के bundles जाँचिए। strings और readelf और बीस मिनट आपको बता देंगे कि आपके कौन से vendor किसी ऐसी मशीन का पाथ भेजते हैं जिसे आप कभी नहीं देखेंगे। आप असल में जो माप रहे हैं वह पाथ नहीं है। वह यह है कि क्या वहाँ कोई देख रहा था, और अगर इतनी सस्ती पकड़ वाली चीज़ पर जवाब नहीं है, तो आप पहले से जानते हैं कि उन चीज़ों पर क्या है जो सस्ती नहीं हैं।\nCisco — Webex App system requirements — supported प्लेटफ़ॉर्म की सूची, Linux सहित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — INSTALL.md, --openssldir — “Directory for OpenSSL configuration files, and also the default certificate and key store.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — SSL_CTX_load_verify_locations(3) — default CA फ़ाइल cert.pem है और default CA डायरेक्टरी certs, दोनों default OpenSSL डायरेक्टरी के अंदर; और return values पर, “A missing default location is still treated as a success.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nConan 2 — conan cache — package binaries लोकल cache में एक hashed पाथ के नीचे रहती हैं, /workspace/.conan2/p/b/\u0026lt;hash\u0026gt;/p यहीं से आता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — openssl-env(7) — SSL_CERT_DIR और SSL_CERT_FILE “specify the default directory or file containing CA certificates”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — provider(7) — default provider, और जो configuration उसे छोड़ देती है वह क्या अनुपलब्ध छोड़ती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenSSL — config(5) — वह configuration फ़ाइल जो OpenSSL initialisation पर लोड करता है, और उसे कहाँ ढूँढा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfreedesktop.org — XDG Base Directory Specification — “The base directory defined by $XDG_DATA_HOME is considered more important than any of the base directories defined by $XDG_DATA_DIRS.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfreedesktop.org — Desktop Entry Specification — .desktop फ़ाइलें कहाँ खोजी जाती हैं और एक ही नाम की एक फ़ाइल दूसरी को कैसे ढकती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFilesystem Hierarchy Standard 3.0 — root filesystem में अपेक्षित डायरेक्टरियाँ, जिनमें /workspace नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nupdate-ca-trust(8) — Fedora और उसके रिश्तेदारों पर /etc/pki/ca-trust/extracted के नीचे consolidated bundle कैसे बनता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nld.so(8) — $ORIGIN उस डायरेक्टरी में बदल जाता है जिसमें प्रोग्राम या shared object है, और यही bundled tree को relocatable बनाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nglibc timeline — “2018-08-01 GLIBC 2.28 — The GNU C Library version 2.28 is now available”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nglibc — Release wiki — version से distribution की तालिका; Red Hat Enterprise Linux 8 में glibc 2.28 है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRPM — spec file reference — %config, और configuration के रूप में चिह्नित फ़ाइल के साथ package manager क्या करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFedora packaging guidelines — configuration files — कब भेजी गई फ़ाइल को %config चिह्नित करना ज़रूरी है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nglibc FAQ — static link हुई glibc binary को runtime पर अब भी होस्ट के NSS modules क्यों चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCISA — Known Exploited Vulnerabilities Catalog — प्रकाशित JSON feed से गिना गया, कैटलॉग version 2026.09.14, 1,710 entries।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/certificates/webex-certificates-on-a-build-server/","summary":"Fedora 44 पर Webex 46.8.0.35631 एक पीले बैनर के पीछे बैठा रहता है जिस पर लिखा है “Offline - No internet connection”, जबकि मशीन का हर दूसरा प्रोग्राम बिना शिकायत इंटरनेट तक पहुँच रहा है। इसने VoIP लाइन पूरी तरह रोक दी। नेटवर्क कभी समस्या था ही नहीं: Cisco OpenSSL का अपना fork साथ में भेजते हैं और उसे OPENSSLDIR=/workspace/.conan2/p/b/cisco8ee8b59cf93de/p/ssl के साथ बिल्ड किया, एक ऐसी डायरेक्टरी जो सिर्फ़ एक बिल्ड कंटेनर में मौजूद है, इसलिए यह कोई trust anchor लोड नहीं करता और हर handshake फ़ेल हो जाता है। पोस्ट इस क्रम में चलती है: टूटी हुई हालत असल में क्या है, भेजी गई library से पूछना कि उसके हिसाब से सर्टिफ़िकेट कहाँ रहते हैं, Webex के बाहर वही error code दोबारा पैदा करना, आपको कोई चेतावनी क्यों नहीं मिलती, वो दो fix जो काम नहीं करते और क्यों, और वो एक जो करता है। फिर बिल्ड प्रोसेस: कोड के लिए उन्होंने $ORIGIN इस्तेमाल किया और तीन डेटा पाथ absolute छोड़ दिए, RPM header में एक कंटेनर ID है यानी कंटेनर pipeline में पहले से था और नतीजा चलाने के लिए कभी इस्तेमाल नहीं हुआ, पैकेज 2018 का glibc माँगता है क्योंकि वे static linking नहीं करेंगे, 2.2 GB दो बार भेजा जाता है, और इसमें न कोई documentation है न configuration के रूप में चिह्नित कोई फ़ाइल। फिर इसे कैसे बनाया जाना चाहिए था, छह fix और एक लाइन का check जो इसे पकड़ लेता। और आखिर में cross-check: CISA के known-exploited कैटलॉग में Cisco की 98 entries हैं, सिर्फ़ Microsoft से पीछे, और एक trust path जिसे किसी ने नहीं जाँचा और एक bypass जिसे किसी ने नहीं जाँचा, अलग-अलग दाँव पर एक ही विफलता हैं।","title":"Webex आपके सर्टिफ़िकेट Cisco के एक बिल्ड सर्वर पर ढूँढ रहा है"},{"content":"VPN कोई प्रोडक्ट नहीं है। यह दो काम हैं जो एक साथ जोड़ दिए गए हैं, और आपकी मशीन के पास दोनों के लिए पहले से एक-एक प्रोग्राम है।\nपहला काम है एक वर्चुअल लिंक बनाना: एक इंटरफ़ेस जो नेटवर्क कार्ड जैसा दिखे, IP पैकेट ले और उन्हें कहीं और पहुँचा दे। दूसरा काम है उस लिंक के बाइट्स को एक सिरे से दूसरे सिरे तक ढोना। VPN अप्लायंस खरीदिए तो आप दोनों काम खरीदते हैं, ऊपर से लाइसेंस चिपका हुआ; खुद कीजिए तो हर काम एक प्रोग्राम है जो पहले से इंस्टॉल है। Linux पर पहला काम करने के दो तरीके हैं, और यह पोस्ट दोनों बनाती है: pppd, जो पूरा लिंक प्रोटोकॉल साथ लाता है (नेगोशिएट किए गए एड्रेस, लाइवनेस चेक, फ़्रेमिंग), और एक tap डिवाइस, जो कुछ भी साथ नहीं लाता और kernel में एक छेद है जिसमें आप फ़्रेम धकेलते हैं। अलग-अलग सौदे हैं, प्रतियोगी नहीं, और पोस्ट का दूसरा हिस्सा दोनों को आमने-सामने रखता है।\nवह प्रोटोकॉल PPP है, और यह क्यों काम करता है यह उसके पहले पैराग्राफ़ में लिखा है: PPP पॉइंट-टू-पॉइंट लिंक के लिए एक लिंक प्रोटोकॉल है1, और वह यह तय नहीं करता कि लिंक किस चीज़ से बना है। मॉडेम और फ़ोन लाइन मूल जवाब थे। वे कभी अकेले जवाब नहीं थे। PPTP ने PPP को GRE के अंदर रखा2। L2TP ने उसे UDP के अंदर रखा3। PPPoE ने उसे Ethernet फ़्रेम के अंदर रखा। इनमें से हर एक वही प्रोटोकॉल है, बस कूरियर अलग है, और किसी के लिए भी PPP को बदलना नहीं पड़ा।\nतो सवाल यह नहीं है कि PPP को TCP या UDP सॉकेट पर चला सकते हैं या नहीं, बल्कि किस पर, और उसकी कीमत क्या है। छोटा जवाब, काम दिखाकर: UDP इस्तेमाल कीजिए। एक स्ट्रीम प्रोटोकॉल को एक भरोसेमंद स्ट्रीम के अंदर चलाना यहाँ वह अकेली गलती है जो आपकी डेस्क पर ठीक दिखती है और असली लिंक पर बिखर जाती है।\nVPN दो काम है। दोनों आपके पास पहले से हैं। किसी भी टनल से मार्केटिंग हटा दीजिए तो तीन चीज़ें होती हैं: कुछ एक वर्चुअल इंटरफ़ेस पेश करता है और पैकेट को बाइट स्ट्रीम में बदलता है, कुछ उस स्ट्रीम को ऐसे नेटवर्क के पार ले जाता है जो पहले से काम कर रहा है, और कुछ उसे एन्क्रिप्ट करता है, या कुछ भी नहीं करता।\nहर टनल एक लिंक हिस्सा, एक कैरियर और कुछ crypto है हर बार वही तीन हिस्से। सिर्फ़ कैरियर और crypto बदलते हैं। टनल लिंक हिस्सा कैरियर CRYPTO डायल-अप PPP, 1994 PPP मॉडेम और फ़ोन लाइन कुछ नहीं PPPoE PPP Ethernet फ़्रेम कुछ नहीं PPTP PPP GRE MPPE: टूटा हुआ, मत लीजिए IPsec पर L2TP PPP UDP IPsec यह पोस्ट, बिल्ड एक pty पर PPP UDP सॉकेट, netcat के ज़रिए DTLS यह पोस्ट, बिल्ड दो tun या tap डिवाइस UDP सॉकेट, socat के ज़रिए DTLS WireGuard kernel इंटरफ़ेस UDP Noise, नेगोशिएट करने को कुछ नहीं इस सूची का हर टनल एक ही आकार का है। फ़र्क बस इतना है कि बाइट्स किस कैरियर में जाते हैं, और कोई उन्हें एन्क्रिप्ट करता है या नहीं। PPP 1994 से लिंक वाला आधा काम कर रहा है, इसीलिए वह इनमें से तीन के नीचे मिलता है और किसी के लिए उसे दोबारा डिज़ाइन नहीं करना पड़ा। एक tun या tap डिवाइस वही आधा काम बिना किसी प्रोटोकॉल के करता है, और वही इस पोस्ट का दूसरा बिल्ड है। PPP लिंक वाला आधा काम ठीक से करता है: एड्रेस नेगोशिएशन, लाइवनेस चेक, हेडर कम्प्रेशन, एक लिंक पर कई नेटवर्क-लेयर प्रोटोकॉल, और चाहें तो ऑथेंटिकेशन का एक कदम। ढेर सारा तैयार काम /usr/sbin में बेकार पड़ा है। वह कैरियर की परवाह नहीं करता: उसे एक file descriptor दीजिए जो दोनों तरफ़ बाइट्स ले जाए और वह उस पर चल पड़ता है। Netcat एक ऐसा प्रोग्राम है जिसका पूरा मकसद वही file descriptor बनना है।\nएन्क्रिप्शन वह हिस्सा है जो कोई आपको थमाता नहीं, और इस पोस्ट का ज़्यादातर हिस्सा उसी को कमाने में जाता है, क्योंकि netcat के पास इसका कोई जवाब नहीं है और यह दिखावा करना कि है, वही तरीका है जिससे लोग ऐसी चीज़ें बना बैठते हैं जो उन्हें नहीं बनानी चाहिए।\nचरण, और वे इसी क्रम में क्यों हैं नीचे सब कुछ चरणों में बनाया गया है, हर चरण पिछले में एक चीज़ जोड़ता है। यह पढ़ाने की कोई तरकीब नहीं है। इसे बनाना ही ऐसे चाहिए, क्योंकि जब चरण छह टूटे तो आपको पता होना चाहिए कि चरण दो अब भी चलता है या नहीं, और यह आपको तभी पता चलेगा जब चरण दो कभी अपने आप में चलाई गई चीज़ रहा हो।\nछह चरण, हर एक ऐसी एक चीज़ जोड़ता है जिसे अलग से टेस्ट कर सकें इसी क्रम में बनाइए, और आप हमेशा नीचे वापस उतर सकते हैं 1 Raw, TCP पर pty के साथ pppd, या एक tap डिवाइस, और एक सादा netcat listener। बेंच पर चलता है। असली पाथ पर पिघलता है: दो retransmission टाइमर लड़ते हैं। 2 Raw, UDP पर वही लिंक, datagram कैरियर। खोया datagram एक खोया पैकेट है, और कुछ नहीं। यही नींव है। इसके ऊपर सब वैकल्पिक है; यह नहीं। 3 TLS, TCP पर ncat, stunnel या openssl कैरियर को लपेटते हैं। सर्टिफ़िकेट दोनों सिरों पर वेरिफ़ाई कीजिए, वरना पहचान के बिना एन्क्रिप्शन है और कोई एक्सेस कंट्रोल नहीं। 4 DTLS, UDP पर socat या openssl, और लक्ष्य वाला आकार: एन्क्रिप्टेड, ऑथेंटिकेटेड, फिर भी datagram। खोया पैकेट खोया ही रहता है, उस पर दो स्टैक बहस नहीं करते। 5 कम्प्रेस्ड इंटरफ़ेस और कैरियर के बीच zstd। जहाँ कैरियर क्रम से पहुँचाता है वहाँ window फ़्रेमों के पार रखिए; जहाँ नहीं, वहाँ हर datagram में एक पूरा फ़्रेम, साथ में एक dictionary। 6 दोनों, इसी क्रम में पहले कम्प्रेस, फिर एन्क्रिप्ट। उल्टा कभी नहीं: ciphertext कम्प्रेस नहीं होता। और सौदा जानिए: एन्क्रिप्ट से पहले कम्प्रेस करना plaintext की लंबाई लीक करता है। अपने ट्रैफ़िक पर ठीक है। छह चरण, हर एक अपने नीचे वाले में एक चीज़ जोड़ता है। TCP पर raw वह जगह है जहाँ से हर कोई शुरू करता है, और यही अकेली सीढ़ी है जो आगे कहीं नहीं जाती: बेंच पर चलती है और असली पाथ पर पिघल जाती है। UDP पर raw वह नींव है जिस पर बाकी सब टिका है। फिर एन्क्रिप्शन, फिर कम्प्रेशन, फिर दोनों एक साथ। हर चरण एक लिंक है जिसे आप चालू कर सकते हैं, उसके पार ping कर सकते हैं और चलता छोड़ सकते हैं, ताकि जब सीढ़ी का ऊपरी हिस्सा गड़बड़ करे तो आप एक-एक सीढ़ी नीचे उतर सकें। लिंक खुद भी इसी तरह बनता है, और नीचे वाले एक सेकंड के रैंप के पीछे यही तर्क है: टनल पहले raw चालू होता है, साबित करता है कि वह एक फ़्रेम ढो सकता है, और उसके बाद ही होशियारी दिखाता है। जो बिल्ड सब कुछ एक साथ चालू करता है वह एक गट्ठर की तरह फ़ेल होता है, और आपकी पूरी शाम यह अंदाज़ा लगाने में जाती है कि किस लेयर ने किया।\npppd को असल में एक file descriptor चाहिए pppd सीरियल पोर्ट के लिए लिखा गया था, तो सीधी-सादी समझ यह है कि उसे सीरियल पोर्ट चाहिए। ऐसा नहीं है। उसे एक टर्मिनल डिवाइस चाहिए, और वह खुद एक बना लेगा:\npty script — Specifies that the command script is to be used to communicate rather than a specific terminal device. Pppd will allocate itself a pseudo-tty master/slave pair and use the slave as its terminal device. The script will be run in a child process with the pseudo-tty master as its standard input and output.4\nइसे दोबारा पढ़िए, पूरा बिल्ड इसी में है। pppd एक pseudo-terminal बनाता है, slave अपने पास रखता है, और master एक कमांड को stdin और stdout के रूप में दे देता है। वह कमांड बाइट्स के साथ क्या करती है, यह pppd का मामला नहीं। वहाँ nc चलाइए और बाइट्स एक सॉकेट में चले जाते हैं।\npppd, एक pseudo-terminal, netcat और एक सॉकेट एक पैकेट, ppp0 से ppp0 तक, और हर हाथ जिससे वह गुज़रता है होस्ट A होस्ट B ppp0 kernel इंटरफ़ेस pppd HDLC फ़्रेमिंग pty जोड़ी slave, pppd को master, child को ncat stdin और stdout pty जोड़ी master, child को slave, pppd को ncat stdin और stdout pppd HDLC फ़्रेमिंग ppp0 kernel इंटरफ़ेस सॉकेट: TCP या UDP बीच के दो बॉक्स ही वह हिस्सा हैं जो आप चुनते हैं। दोनों तरफ़ का सब कुछ वैसा ही रहता है, कैरियर चाहे फ़ोन लाइन हो, सीरियल कंसोल, TCP स्ट्रीम, UDP datagram फ़्लो या TLS सेशन; इसीलिए बाद में कैरियर बदलना एक शब्द की कीमत है। pseudo-terminal में carrier-detect पिन नहीं, तो pppd ऐसे कैरियर का इंतज़ार करता है जो कभी नहीं आता। `local` ऑप्शन इसे रोकता है। pppd अपने ही बनाए pseudo-terminal की slave साइड में async HDLC बोलता है। pty में दी गई कमांड को master साइड stdin और stdout के रूप में मिलती है। Netcat stdin को सॉकेट में और सॉकेट को stdout में कॉपी करता है, तो दोनों pppd इंस्टेंस pty जोड़ी और नेटवर्क के ज़रिए आपस में बात कर रहे होते हैं, और किसी को पता भी नहीं होता कि कोई सॉकेट है। एक दूसरा रास्ता भी है, notty, जो pppd के अपने stdin और stdout इस्तेमाल करता है। लेकिन वह एक character-shunt प्रोसेस शुरू करता है जिसमें से हर बाइट गुज़रता है, तो वह “increases the latency and CPU overhead”4। जब तक कोई वजह न हो, pty इस्तेमाल कीजिए।\nपहली कमांड से पहले तीन व्यावहारिक बातें, सब उसी बॉक्स पर जाँची गईं जिस पर यह लिखा गया, Fedora 44, ppp-2.5.1-7.fc44:\n$ pppd --version pppd version 2.5.1 $ ls -l /usr/bin/pppd /dev/ppp -rwxr-xr-x. 1 root root 393784 Jan 17 2026 /usr/bin/pppd crw-------. 1 root root 108, 0 Sep 14 08:34 /dev/ppp $ pppd noauth nodetach pty \u0026#39;true\u0026#39; pppd: using the noauth option requires root privilege इसे root चाहिए। इससे बचने का कोई रास्ता नहीं। Fedora पर बाइनरी setuid नहीं है, /dev/ppp mode 0600 और root की है, और जो ऑप्शन आपको चाहिए वे वैसे भी privileged हैं। यह ऐसी चीज़ है जो आप root के रूप में या किसी unit फ़ाइल के तहत चलाते हैं, कोई यूज़र इसे यूँ ही नहीं करता। यह बात आगे मायने रखेगी, जब हम देखेंगे कि आपकी egress पॉलिसी के लिए इसका क्या मतलब है।\nKernel वाला हिस्सा मॉड्यूलर है। ppp_generic इंटरफ़ेस संभालता है, ppp_async वह byte-stuffed फ़्रेमिंग जो pty को चाहिए, और ppp_deflate/bsd_comp/ppp_mppe कम्प्रेशन और एन्क्रिप्शन; ये ज़रूरत पड़ने पर लोड होते हैं। अगर किसी छाँटी हुई कंटेनर इमेज में ppp_async नहीं है तो लिंक चालू हो जाता है और कुछ नहीं ढोता। अगर आपको पता न हो कि कहाँ देखना है तो आधा घंटा बहुत बुरा बीतता है।\npty पर मॉडेम कंट्रोल लाइनें होती ही नहीं। carrier-detect पिन के बिना pppd ऐसे कैरियर का इंतज़ार करता है जो कभी नहीं आता। इलाज एक शब्द है, local, जो उसे मॉडेम कंट्रोल लाइनों को अनदेखा करने को कहता है4। इसे छोड़ दीजिए तो कुछ नहीं होता, और कोई ऐसी एरर भी नहीं आती जो पढ़ने लायक हो।\nNetcat एक प्रोग्राम नहीं है बिल्ड से पहले, वह जाल जो सबसे ज़्यादा समय खाता है: “netcat” कम से कम चार प्रोग्राम हैं जिनके फ़्लैग आपस में मेल नहीं खाते, और आपको कौन सा मिलेगा यह आपके डिस्ट्रीब्यूशन पर निर्भर है। इस मशीन पर /usr/bin/nc एक symlink है /usr/bin/ncat का, जो Nmap का दोबारा लिखा हुआ वर्ज़न है। तो पंद्रह साल पुराने किसी विकी पेज से कॉपी की गई कमांड ऐसी वजहों से फ़ेल होती है जिनका PPP से कोई लेना-देना नहीं।\nइम्प्लीमेंटेशन किसी पोर्ट पर listen UDP पीयर के डिसकनेक्ट होने के बाद भी चालू रहे Ncat (Nmap) ncat -l 443 -u -k / --keep-open OpenBSD netcat nc -l 443 -u -k Traditional netcat nc -l -p 443 -u नहीं GNU netcat nc -l -p 443 -u नहीं इसलिए pppd को दोष देने से पहले देख लीजिए कि आपके पास कौन सा है:\nreadlink -f \u0026#34;$(command -v nc)\u0026#34; nc --version 2\u0026gt;\u0026amp;1 | head -1 || nc -h 2\u0026gt;\u0026amp;1 | head -1 नीचे मैं साफ़-साफ़ ncat इस्तेमाल करूँगा। इसमें TLS अंदर ही है, जो आगे काम आएगा, और साफ़ लिखने का मतलब है कि कमांड आपके बॉक्स पर चुपचाप कुछ और मतलब नहीं निकालेंगी।\nचरण एक: TCP बिल्ड, क्योंकि हर कोई पहले यही आज़माता है एक सिरा listen करता है, दूसरा कनेक्ट करता है। यहाँ के एड्रेस डॉक्यूमेंटेशन रेंज से हैं, तो इन्हें सीधे किसी लैब में पेस्ट कीजिए और किसी routable चीज़ का नुकसान नहीं होगा। पोर्ट पूरे समय 443 है, और यह जानबूझकर है: लगभग हर नेटवर्क पर आउटबाउंड 443 डिफ़ॉल्ट रूप से खुला है। कुछ चरण बाद कैरियर को TLS में लपेट दीजिए और उस पर का ट्रैफ़िक किसी भी HTTPS सेशन से अलग पहचाना नहीं जा सकता। वहाँ listener बाँधने के लिए root चाहिए, जो दूर वाले सिरे के पास है, चाहे वह अटैकर का अपना बॉक्स हो या कोई relay। एक पोर्ट नंबर में पूरा egress वाला तर्क यही है, और मैं इस पर वापस आऊँगा।\nlisten करने वाले सिरे पर:\npppd nodetach noauth local passive \\ nodefaultroute noipdefault \\ 192.0.2.1:192.0.2.2 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat --listen --keep-open 443\u0026#39; कनेक्ट करने वाले सिरे पर:\npppd nodetach noauth local \\ nodefaultroute noipdefault \\ 192.0.2.2:192.0.2.1 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat 198.51.100.10 443\u0026#39; वहाँ हर शब्द कोई काम कर रहा है, और उनमें से एक, noauth, चुपचाप नुकसान कर रहा है। टनल पर कोई एक्सेस कंट्रोल नहीं है, इसका आगे अपना अलग सेक्शन है।\npppd लाइन का हर शब्द, और वह क्या करता है UDP बिल्ड की कमांड लाइन, शब्द-दर-शब्द nodetach foreground, ताकि आउटपुट दिखे और इसे supervisor के तहत रख सकें noauth पीयर ऑथेंटिकेशन नहीं: यही छेद है; टनल पर कोई एक्सेस कंट्रोल नहीं local मॉडेम कंट्रोल लाइनें अनदेखी करो जो pty में नहीं होतीं। इसके बिना कुछ चालू नहीं होता passive बाहर निकलने की बजाय वैध LCP पैकेट का इंतज़ार: server-socket जैसा बर्ताव nodefaultroute IPCP खत्म होने पर डिफ़ॉल्ट रूट मत हथियाओ। जो रूट चाहिए, खुद जोड़िए noipdefault मशीन का अपना एड्रेस लोकल सिरे के रूप में मत दो 192.0.2.1:192.0.2.2 local:remote, तय: IPCP के दौरान pppd कोई और जवाब ठुकरा देता है lcp-echo-interval / -failure लाइवनेस चेक: नीचे इसका अपना सेक्शन है mtu / mru 1400 कैरियर हर फ़्रेम के चारों ओर जो लपेटे, उसके लिए जगह छोड़िए pty '...' वह कमांड जिसका stdin और stdout लिंक बनता है: यहाँ, एक netcat सॉकेट कनेक्ट करने वाला सिरा वही लाइन है, `passive` के बिना: वह इंतज़ार की बजाय शुरुआत करता है। लाइन का हर ऑप्शन, और वह क्या करता है। जिस पर नज़र रखनी है वह noauth है: यह पीयर ऑथेंटिकेशन हटा देता है, तो listener जो भी आए उसे स्वीकार कर लेता है। nodefaultroute और noipdefault लिंक को आपकी रूटिंग चुपचाप बदलने से रोकते हैं, local की वजह से वह pty पर चालू ही हो पाता है, और तय की गई local:remote जोड़ी pppd को IPCP के दौरान कोई अलग जवाब लेने से रोकती है। कनेक्ट करने वाला सिरा वही लाइन है, बस passive के बिना। दोनों सिरे चालू कीजिए और हर तरफ़ एक ppp0 मिलता है, दूर वाले एड्रेस तक एक पॉइंट-टू-पॉइंट रूट, और एक इंटरफ़ेस जिसे आप ping कर सकते हैं, जिससे रूट कर सकते हैं और जिस पर tcpdump चला सकते हैं। यह एक VPN है: कोई पैकेज इंस्टॉल नहीं, कोई डेमन कॉन्फ़िगर नहीं, कोई की एक्सचेंज नहीं, और यही समस्या है, जिस पर मैं वापस आऊँगा।\nइसने क्या नेगोशिएट किया, और इसे कैसे देखें debug जोड़िए और pppd कंट्रोल प्रोटोकॉल की पूरी बातचीत लॉग करता है, जिसे एक बार पढ़ना फ़ायदेमंद है, चाहे दोबारा कभी न पढ़ें। लिंक चरणों में चालू होता है, और हर चरण अपने आप फ़ेल हो सकता है।\nLCP, फिर ऑथेंटिकेशन, फिर हर एड्रेस फ़ैमिली के लिए एक कंट्रोल प्रोटोकॉल तीन चरण, और हर एक अपनी वजह से फ़ेल होता है 1 LCP: लिंक खुद Maximum receive unit, control character map, लूप-बैक लाइन पकड़ने के लिए magic number, और क्या कोई सिरा दूसरे से ऑथेंटिकेशन चाहता है। यहाँ फ़ेल हुआ तो कैरियर दोनों दिशाओं में बाइट्स साफ़ नहीं पहुँचा रहा। सॉकेट जाँचिए, PPP ऑप्शन नहीं। 2 ऑथेंटिकेशन: वैकल्पिक PAP पासवर्ड खुले में भेजता है। CHAP एक challenge और MD5 response करता है। यहाँ छोड़ा गया। दोनों साबित करते हैं कि पीयर कौन है। कोई भी आगे का एक भी बाइट एन्क्रिप्ट नहीं करता। 3a IPCP हर सिरे का IPv4 एड्रेस। 3b IPV6CP 64-bit इंटरफ़ेस आइडेंटिफ़ायर। ये दोनों स्वतंत्र हैं। IPv6 चालू हो सकता है जबकि IPv4 अभी बहस कर रहा हो, और एक के फ़ेल होने से दूसरा नहीं गिरता। जिस पल किसी फ़ैमिली का कंट्रोल प्रोटोकॉल खत्म होता है, इंटरफ़ेस उस फ़ैमिली का ट्रैफ़िक ढोना शुरू कर देता है। LCP लिंक को ही तय करता है: फ़्रेम कितना बड़ा हो सकता है, किन कंट्रोल कैरेक्टर को एस्केप करना है, और एक magic number जो लूप-बैक हुई लाइन को पकड़ता है। ऑथेंटिकेशन वैकल्पिक है और यहाँ छोड़ दिया गया है। फिर हर नेटवर्क लेयर के लिए एक कंट्रोल प्रोटोकॉल: IPv4 के लिए IPCP, IPv6 के लिए IPV6CP। ये एक-दूसरे से स्वतंत्र हैं, तो लिंक IPv6 ढो सकता है जबकि IPv4 अभी भी बहस कर रहा हो, और एक के फ़ेल होने से दूसरा नहीं गिरता। दो काम के डीबगिंग टूल पहले से इंस्टॉल हैं और कोई उन्हें इस्तेमाल नहीं करता:\n# log every frame in both directions to a file pppd ... debug record /tmp/ppp-trace # then read it back in a human-readable form pppdump -h /tmp/ppp-trace | less record हर बाइट का टाइमस्टैम्प के साथ कैप्चर लिखता है, pppdump उसे पढ़ने लायक बनाता है4, और tcpdump -ni ppp0 से आप दोनों तरफ़ देखते हैं: नीचे की फ़्रेमिंग और ऊपर के पैकेट।\nतार पर फ़्रेम, और 0x7E हर जगह क्यों है सीरियल लाइन पर PPP (और pppd के लिए pty भी सीरियल लाइन ही है) async HDLC फ़्रेमिंग इस्तेमाल करता है, और इसे समझना ही ट्यूनिंग और अंदाज़े के बीच का फ़र्क है। हर फ़्रेम एक ही बाइट से शुरू और खत्म होता है: “Each frame begins and ends with a Flag Sequence, which is the binary sequence 01111110 (hexadecimal 0x7e)”5। अगर 0x7e एक सीमा का निशान है तो वह फ़्रेम के अंदर नहीं आ सकता, इसलिए उसे एस्केप किया जाता है। एस्केप बाइट 0x7d को भी, और उसे भी जो कोई भी सिरा माँगे।\nफ़्रेम, flag बाइट, और एस्केपिंग की कीमत एक फ़्रेम, और वे दो बाइट जो उसके अंदर कभी नहीं आ सकते 0x7E flag 0xFF address 0x03 control protocol 1 या 2 बाइट payload: आपका IP पैकेट तय किए गए maximum receive unit तक FCS 16-bit CRC 0x7E flag एस्केपिंग, इकलौता नियम जिस बाइट को सीमा समझा जा सके उसकी जगह 0x7D आता है, और उसके बाद मूल बाइट, 0x20 से exclusive-or किया हुआ। payload 0x7E भेजा जाता है 0x7D 0x5E payload 0x7D भेजा जाता है 0x7D 0x5D ये दो अनिवार्य हैं। बाकी सब async control character map तय करता है: 32 bit, हर कंट्रोल कैरेक्टर के लिए एक। Map शून्य पर: pppd का डिफ़ॉल्ट, और सॉकेट पर सही 256 में से दो बाइट एस्केप। ऐसा ओवरहेड जो आप कभी माप नहीं पाएँगे। सॉकेट साफ़ 8-bit पाथ है, और कुछ नहीं चाहिए। सभी 32 फ़्लैग: सतर्क मॉडेम सेटिंग कम्प्रेस्ड या एन्क्रिप्टेड payload पर लगभग आठ में से एक बाइट 0x20 से नीचे है, तो दोगुना होता है। लिंक का करीब 12%, बेकार। फ़्रेम है: flag, address, control, protocol, payload, frame check sequence, flag। इसके अंदर कोई भी बाइट जिसे सीमा समझा जा सकता है, उसकी जगह 0x7D आता है और उसके बाद मूल बाइट XOR 0x20। ACCM तय करता है कि और कितने बाइट्स के साथ यही सलूक होगा: साफ़ 8-bit पाथ पर शून्य, और बत्तीस अगर कोई भी सिरा वह सतर्क डिफ़ॉल्ट माँगे जो मानता है कि बीच में कोई मॉडेम कंट्रोल कैरेक्टर खा रहा है। एस्केप का नियम एकदम सटीक है: “Each Flag Sequence, Control Escape octet, and any octet which is flagged in the sending Async-Control-Character-Map (ACCM), is replaced by a two octet sequence consisting of the Control Escape octet followed by the original octet exclusive-or\u0026rsquo;d with hexadecimal 0x20”5।\nवह आखिरी हिस्सा ही ट्यूनिंग नॉब है। ACCM 32 bit का है, हर कंट्रोल कैरेक्टर के लिए एक, और 1 का मतलब है “इसे एस्केप करो”। सब माँग लीजिए तो एन्क्रिप्टेड payload पर, जहाँ बाइट्स असल में रैंडम होते हैं, लगभग आठ में से एक बाइट 0x20 से नीचे होता है: बिना किसी फ़ायदे के करीब 12% ओवरहेड।\nआधुनिक pppd यहाँ पहले से सही काम करता है। सुनी-सुनाई बातों की जगह man page पढ़िए:\nIf no asyncmap option is given, the default is zero, so pppd will ask the peer not to escape any control characters.4\nतो asyncmap 0 डिफ़ॉल्ट है, कोई तरकीब नहीं, और सॉकेट एक साफ़ 8-bit पाथ है जिसे दो अनिवार्य बाइट्स के अलावा किसी एस्केपिंग की ज़रूरत नहीं। इसे छेड़िए मत; bit तभी सेट कीजिए जब बीच में कोई चीज़ सच में कंट्रोल कैरेक्टर खाती हो: कोई टर्मिनल सर्वर, कोई सीरियल कॉन्सेंट्रेटर, कोई खराब कंसोल प्रॉक्सी। आखिर में frame check sequence एक 16-bit CRC है, और यही वह चीज़ है जिससे UDP बिल्ड काम करता है, जो अगला है।\nTCP के ऊपर TCP गलत कैरियर है ऊपर वाला बिल्ड काम करता है। लैब की बेंच पर, loopback या शांत LAN पर, यह शानदार चलता है, और ठीक इसीलिए लोग इसे शिप कर देते हैं।\nफिर इसका सामना असली लॉस वाले असली पाथ से होता है। यह ऐसे गिरता है कि लगता है कुछ भी हुआ हो, सिवाय उसके जो असल में हुआ।\nसमस्या है दो स्वतंत्र retransmission टाइमर जो एक के ऊपर एक रखे हैं, और बाहर वाला अंदर वाले से लॉस छिपा लेता है। Olaf Titz ने इसकी निर्णायक व्याख्या लिखी, और वह ठीक इसी बिल्ड से शुरू होती है:\nA frequently occurring idea for IP tunneling applications is to run a protocol like PPP, which encapsulates IP packets in a format suited for a stream transport (like a modem line), over a TCP-based connection. […] Unfortunately, it doesn\u0026rsquo;t work well. Long delays and frequent connection aborts are to be expected.6\nएक खोया पैकेट, दो कैरियर, दो बिल्कुल अलग नतीजे एक पैकेट गायब होता है। हर कैरियर आगे क्या करता है। TCP कैरियर: टनल लॉस छिपा लेता है 1 कैरियर एक सेगमेंट खोता है। 2 कैरियर उसे दोबारा भेजता है। बाइट्स देर से पहुँचते हैं, गायब नहीं होते: पूरी समस्या यही है। 3 टनल किया TCP कैरियर को नहीं देख सकता। वह देरी को भीड़ समझता है, अपना टाइमर दोगुना करता है और नीचे पहले से चल रहा डेटा दोबारा भेजता है। 4 अब कैरियर पर मूल और एक डुप्लिकेट का कर्ज़ है, ऐसे लिंक पर जिसने अभी साबित किया कि वह पैकेट खो रहा है। कतार उससे तेज़ बढ़ती है जितनी कोई लेयर खाली करे। throughput लिंक से काफ़ी पहले ढह जाता है। UDP कैरियर: लॉस उस लेयर तक पहुँचता है जिसका वह है 1 कैरियर पैकेट गिराता है और कुछ नहीं कहता। 2 अंदर का PPP फ़्रेम अपने checksum में फ़ेल होता है और फेंक दिया जाता है। अगला flag बाइट फिर से सिंक करता है। 3 टनल किया TCP असली लॉस देखता है, क्योंकि इस बार उसे पाथ के बारे में सच बताया गया है। 4 वह अपनी window आधी करता है और एक बार दोबारा भेजता है। congestion control ठीक वही काम करता है जिसके लिए वह बना था। एक खोया पैकेट, एक पैकेट की कीमत। कैरियर TCP डिलीवरी की गारंटी देता है, तो खोया हुआ सेगमेंट दोबारा भेजा जाता है और बाइट्स न पहुँचने की बजाय देर से पहुँचते हैं। अंदर वाला टनल किया हुआ TCP सिर्फ़ देरी देखता है, मान लेता है कि नेटवर्क में भीड़ है, धीमा पड़ता है और वही डेटा दोबारा भेजता है, जिसे अब कैरियर को भी डिलीवर करना है। हर लेयर का टाइमर एक ऐसी समस्या ठीक करने की कोशिश कर रहा है जो दूसरी लेयर पहले से संभाल रही है, और कतार उससे तेज़ बढ़ती है जितनी तेज़ी से कोई उसे खाली कर सके। UDP कैरियर पैकेट गिरा देता है, अंदर वाला TCP असली लॉस देखता है, और उसका congestion control वही काम करता है जिसके लिए वह बना था। आकार यह है। दोनों TCP अपने round-trip time से एक retransmission टाइमर सेट करते हैं। जब कैरियर एक सेगमेंट खोता है तो वह उसे दोबारा भेजता है, तो अंदर वाले कनेक्शन का डेटा देर से पहुँचता है। और अंदर वाला TCP, जो कैरियर को देख नहीं सकता, देरी को भीड़ समझता है और वह भी दोबारा भेजता है। अब कैरियर के पास मूल डेटा और एक डुप्लिकेट है डिलीवर करने को, ऐसे लिंक पर जो पहले से पैकेट खो रहा है। अंदर वाला टाइमर दोगुना होता है, बाहर वाली कतार बढ़ती है, और throughput लिंक के गिरने से बहुत पहले ढह जाता है। लॉग में कुछ नहीं बताता कि क्यों।\nयह कोई बारीक efficiency वाली बात नहीं है। यह फ़र्क है एक ऐसे टनल के बीच जो धीरे-धीरे शालीनता से कमज़ोर पड़ता है, और एक ऐसे के बीच जो शायद 2% लॉस पर ट्रैफ़िक पास करना बंद कर देता है जबकि उसी पाथ पर ping अब भी ठीक दिखता है। यही वजह है UDP इस्तेमाल करने की, और TCP को सिर्फ़ उस पाथ के लिए बचाकर रखने की जो और कुछ पास ही न करे।\nतो UDP इस्तेमाल कीजिए, डिफ़ॉल्ट के रूप में, पसंद के रूप में नहीं।\nचरण दो: UDP बिल्ड, जो नींव है वही pppd, अलग कैरियर। बदलाव सिर्फ़ pty कमांड में है।\nlisten करने वाला सिरा:\npppd nodetach noauth local passive \\ nodefaultroute noipdefault \\ 192.0.2.1:192.0.2.2 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat --udp --listen 198.51.100.10 443\u0026#39; कनेक्ट करने वाला सिरा:\npppd nodetach noauth local \\ nodefaultroute noipdefault \\ 192.0.2.2:192.0.2.1 \\ lcp-echo-interval 10 lcp-echo-failure 3 \\ mtu 1400 mru 1400 \\ pty \u0026#39;ncat --udp 198.51.100.10 443\u0026#39; UDP listener के बारे में दो बातें जो आपको फँसाएँगी, और दोनों में से कोई भी PPP की समस्या नहीं है।\nlistener तब तक जवाब नहीं दे सकता जब तक उससे बात न की जाए। UDP सॉकेट के पास स्वीकार करने को कोई कनेक्शन नहीं होता, तो netcat को तब तक नहीं पता कि जवाब कहाँ भेजे जब तक कोई datagram न आए। वह जिस पहले source एड्रेस और पोर्ट से सुनता है उसी पर टिक जाता है और उसी से बात करता है। इसका मतलब है कि कनेक्ट करने वाले सिरे को पहले भेजना होगा, जो pppd अपने आप करता है, क्योंकि non-passive सिरा तुरंत LCP configure-request दागना शुरू कर देता है। इसका यह भी मतलब है कि अगर क्लाइंट का source पोर्ट बदल जाए तो कैरियर चुपचाप गलत जगह से बात कर रहा होता है। छोटे UDP टाइमआउट वाले NAT के पीछे, यह ऐसा टनल है जो हर कुछ मिनट में बिना किसी दिखने वाली वजह के मर जाता है।\nUDP पर --keep-open वह नहीं करता जो आप चाहते हैं। Ncat का -k पीयर के चले जाने के बाद भी TCP listener को स्वीकार करते रहने देता है। UDP पर स्वीकार करने को कुछ है ही नहीं, तो रिकवरी का मतलब है कैरियर को रीस्टार्ट करना, और persist और holdoff इसी के लिए हैं, आगे।\nदोनों बातें socat के पक्ष में तर्क हैं, जो UDP पीयर को ज़्यादा सावधानी से संभालता है, और इस पर भरोसा करने की बजाय कि वह चालू रहेगा, एक supervisor के पक्ष में।\nएक खोए datagram के बाद भी PPP क्यों बचा रहता है UDP कैरियर पर सबसे सीधी आपत्ति यह है कि PPP बाइट स्ट्रीम की उम्मीद करता है और UDP वह नहीं है: datagram पूरे पहुँचते हैं या बिल्कुल नहीं, और गलत क्रम में भी पहुँच सकते हैं। फिर भी यह काम करता है, उन दो बाइट्स की वजह से जो फ़्रेमिंग शुरू से ढो रही है।\nखोया datagram एक फ़्रेम की कीमत है, और अगला flag बाइट लिंक को सँभाल लेता है सीमाएँ मेल नहीं खातीं, और इससे फ़र्क नहीं पड़ता PPP फ़्रेम, जैसे pppd ने लिखे 7E फ़्रेम A + FCS 7E फ़्रेम B + FCS 7E फ़्रेम C + FCS 7E फ़्रेम D + FCS कैरियर ने असल में क्या भेजा: netcat बफ़र पढ़ता है, फ़्रेम नहीं datagram 1 datagram 2: खोया datagram 3 datagram 4 फ़्रेम B का बीच खो जाता है, तो checksum फ़ेल होता है और वह फेंक दिया जाता है। फ़्रेम C के शुरू के बाइट्स खोते हैं, उसका भी यही हाल। दो खोए फ़्रेम यानी दो खोए IP पैकेट। ऊपर वाली लेयर उन्हें दोबारा भेजती है, और यह जानते हुए भेजती है कि पाथ ने कुछ खोया: ठीक यही वह सिग्नल है जिसे TCP कैरियर उन्हें देर से पहुँचाकर छिपा लेता। Netcat बफ़र में जो कुछ है उसे पढ़कर एक datagram में लिख देता है, तो फ़्रेम की सीमाओं और datagram की सीमाओं का आपस में कोई लेना-देना नहीं। एक datagram खो जाए तो रिसीवर को एक ऐसा फ़्रेम दिखता है जिसके बाइट्स गायब हैं: frame check sequence फ़ेल होता है और फ़्रेम फेंक दिया जाता है, ठीक वैसे जैसे शोर वाली सीरियल लाइन पर होता। अगला 0x7E स्ट्रीम को फिर से सिंक कर देता है। एक गिरा फ़्रेम एक पैकेट की कीमत है, और ऊपर वाली लेयर उसे दोबारा भेजती है। यही वह लॉस सिग्नल है जिसकी अंदर वाले TCP को ज़रूरत थी और जो उसे TCP कैरियर पर कभी नहीं मिला। async HDLC पर PPP ऐसी लाइन के लिए डिज़ाइन किया गया था जो बाइट्स बिगाड़ देती है। हर फ़्रेम एक 16-bit frame check sequence ढोता है; जो फ़्रेम इसमें फ़ेल होता है वह फेंक दिया जाता है, और अगला flag बाइट रिसीवर को फिर से सिंक कर देता है। क्रम बिगड़ना लॉस से कम होता है और उसका नतीजा वही होता है: खराब FCS, फेंका गया फ़्रेम, फिर से सिंक।\nतो एक खोया datagram एक PPP फ़्रेम की कीमत है: एक IP पैकेट, जो आज तक बने हर नेटवर्क की सामान्य हालत है। पैकेट का मालिक उसे दोबारा भेजता है, और congestion control असली लॉस देखता है और सही जवाब देता है। UDP के पक्ष में पूरा तर्क यही है: यह टनल के अंदर के ट्रैफ़िक को पाथ की सच्चाई जानने देता है।\nफिर भी, फ़्रेम को इतना बड़ा मत होने दीजिए कि कैरियर को उसे fragment करना पड़े। तब एक खोया fragment पूरे datagram को मार देता है और आपकी असल लॉस दर कई गुना हो जाती है। PPP MTU को पाथ MTU से काफ़ी नीचे रखिए।\nएड्रेस, रूट, और IPv6 ठीक से करना ppp0 एक पॉइंट-टू-पॉइंट इंटरफ़ेस है (न सबनेट, न ARP), तो local:remote ही पूरी एड्रेसिंग है और उसके पार रूटिंग आपको साफ़-साफ़ करनी पड़ती है। एक अकेले होस्ट के लिए जो दूर वाले सिरे के पीछे के एक नेटवर्क तक पहुँचना चाहता है:\n# on the client, after the link is up ip route add 203.0.113.0/24 via 192.0.2.1 dev ppp0 दूर वाला सिरा क्लाइंट की तरफ़ से फ़ॉरवर्ड करे, इसके लिए वही सामान्य दो कदम:\nsysctl -w net.ipv4.ip_forward=1 nft add rule inet nat postrouting oifname \u0026#34;eth0\u0026#34; ip saddr 192.0.2.2/32 masquerade proxyarp सर्वर को उसके अपने सेगमेंट पर क्लाइंट के लिए ARP का जवाब देने देगा4, जो तब तक बढ़िया है जब तक कोई दूसरा क्लाइंट यही न चाहे। फिर वह हिस्सा कीजिए जिसे ज़्यादातर लोग छोड़ देते हैं। इस पर IPv6 चलाइए। बिना NAT, बिना broadcast domain और बिना एड्रेस की कमी वाला पॉइंट-टू-पॉइंट लिंक आपके नेटवर्क में IPv6 ठीक से करने की सबसे आसान जगह है:\npppd nodetach noauth local \\ +ipv6 ipv6 ::1,::2 \\ nodefaultroute noipdefault \\ 192.0.2.2:192.0.2.1 \\ pty \u0026#39;ncat --udp 198.51.100.10 443\u0026#39; +ipv6 IPV6CP चालू करता है; ipv6 \u0026lt;local\u0026gt;,\u0026lt;remote\u0026gt; दो 64-bit इंटरफ़ेस आइडेंटिफ़ायर सेट करता है4, लिंक link-local पर चालू होता है, और आप ऊपर से एक ग्लोबल /64 जोड़ते हैं7। IPV6CP, IPCP8 से स्वतंत्र है, तो noip के साथ सिर्फ़ IPv6 ढोया जाता है। 2026 में बनाने लायक एक समझदार चीज़, एक शब्द में।\nजब कैरियर चुपचाप मर जाए तब भी लिंक चालू रखना यह वह फ़ेलियर है जो पूरी दोपहर बर्बाद करता है, इसलिए इसे अपना सेक्शन मिला है।\nएक TCP कैरियर जो बुरी तरह मरता है (दूर वाला सिरा बंद हो गया, NAT टेबल की एंट्री एक्सपायर हो गई, किसी middlebox ने फ़ॉरवर्ड करना बंद कर दिया) वह बंद नहीं होता। न FIN, न RST, कुछ नहीं। Netcat एक ऐसा सॉकेट पकड़े बैठा रहता है जो कभी कोई और बाइट नहीं देगा, pppd एक ऐसा pty पकड़े बैठा रहता है जिसे कभी कोई और फ़्रेम नहीं दिखेगा, और ip link खुशी-खुशी ppp0 को UP बताता है। UDP कैरियर के पास तो कोई कनेक्शन स्टेट ही नहीं होता, तो उसे कभी कुछ पता नहीं चलता।\nPPP में इसका जवाब अंदर ही है, और वह डिफ़ॉल्ट रूप से बंद है:\nlcp-echo-interval 10 lcp-echo-failure 3 यह हर दस सेकंड में एक LCP echo भेजता है और तीन का जवाब न आने पर लिंक गिरा देता है4: मरे हुए कैरियर को पकड़ने में तीस सेकंड, ठीक उसी केस पर जिसका man page नाम लेता है, “no hardware modem control lines”4, जो आज तक बना हर pty है। फिर तय कीजिए कि उसके बाद क्या हो:\npersist maxfail 0 holdoff 5 मरे कैरियर को तीस सेकंड में पकड़ना, और दोबारा बनाना कैरियर बंद हुए बिना मर सकता है। PPP ऐसे पकड़ता है, और सँभलता है। कैरियर चुपचाप मरता है दूर का सिरा बंद · NAT एंट्री गई · middlebox फ़ॉरवर्ड करना बंद कोई कुछ नहीं बताता न FIN, न RST · ip link अब भी ppp0 UP कहता है · UDP में स्टेट नहीं डिटेक्टर lcp-echo-interval 10 lcp-echo-failure 3 हर 10s echo, 3 छूटे तो डाउन: 30s दोबारा बनाना persist maxfail 0 holdoff 5 रीस्टार्ट, हार नहीं, कोशिशों के बीच 5s रुको एक supervisor systemd unit, Restart=always, pppd pty कमांड दोबारा चलाता है: साथ में नया netcat और सॉकेट echo दोनों सिरों पर सेट कीजिए। echo सिर्फ़ उस पाथ को साबित करता है जिस पर जवाब लौटा। `ip route` को /etc/ppp/ip-up.d/ में और IPv6 रूट को /etc/ppp/ipv6-up.d/ में रखिए, ताकि लिंक लौटने पर हर बार रूटिंग फिर से लगे, न कि एक बार हाथ से सेट हो और पहले reconnect पर खो जाए। lcp-echo-interval 10 lcp-echo-failure 3 डिटेक्टर है: हर दस सेकंड में echo, तीन छूटें तो लिंक डाउन। persist maxfail 0 holdoff 5 दोबारा बनाने वाला हिस्सा है: रीस्टार्ट, कभी हार मत मानो, पाँच सेकंड रुको ताकि बार-बार गिरता पाथ fork bomb न बन जाए। और pppd pty कमांड दोबारा चलाता है, तो एक नया netcat और नया सॉकेट साथ आते हैं। echo दोनों सिरों पर सेट कीजिए; एक supervisor, Restart=always वाली systemd unit, आपस में बहस करते दो प्रोसेस से बेहतर है। ip route को /etc/ppp/ip-up.d/ में रखिए ताकि लिंक के साथ रूटिंग भी लौट आए। इसमें न एन्क्रिप्शन है, न ऑथेंटिकेशन ऊपर का सब कुछ एक चलता हुआ टनल है। सुरक्षित टनल नहीं है, और यह कमी कोई छोटी बात नहीं।\nकोई एन्क्रिप्शन नहीं है। कमज़ोर एन्क्रिप्शन नहीं। बिल्कुल नहीं। आप इसमें से जो भी पैकेट भेजते हैं वह तार पर खुला है, एक HDLC फ़्रेम में लिपटा जिसे कोई भी कैप्चर टूल देखते ही डिकोड कर देता है। tcpdump आपको किसी और के टनल की सामग्री उतनी ही आसानी से दिखाएगा जितनी आपके अपने की।\nपीयर का कोई ऑथेंटिकेशन नहीं है। noauth यही कहता है। netcat listener पोर्ट पर जो भी आए उसे स्वीकार कर लेता है: कहीं से भी आया पहला कनेक्शन या datagram। जो पहले पहुँचता है उसे आपके नेटवर्क में एक रूट किया हुआ लिंक मिल जाता है। PPP में ऑथेंटिकेशन है (PAP खुले में, CHAP challenge-response के रूप में9), और दोनों साबित करते हैं कि पीयर कौन है, पर उसके बाद आने वाले एक भी बाइट को एन्क्रिप्ट नहीं करते: यहाँ CHAP से आपको ऐसा टनल मिलता है जो जानता है कि वह किससे बात कर रहा है और फिर भी पाथ पर मौजूद हर किसी के लिए सामग्री छाप देता है।\nPPP परिवार में एक एन्क्रिप्शन ऑप्शन है, MPPE10, वह मॉड्यूल जो ppp_mppe.ko में बैठा है। उसकी तरफ़ हाथ मत बढ़ाइए: यह MS-CHAPv2 एक्सचेंज से key किया गया RC4 है, दस साल से ज़्यादा समय से सबके सामने टूटा हुआ, और PPTP के मरने की वजह यही है। 2026 में इस पर नया टनल बनाना एक ऐसे चलते हुए cipher को छोड़कर, जिसकी कोई कीमत नहीं, एक जाने-माने टूटे cipher को चुनना है।\nतो अब तक का ईमानदार सार: एक रूट किया हुआ लिंक जिसमें न गोपनीयता है, न एक्सेस कंट्रोल। लैब के लिए ठीक, किसी ऐसे लिंक के अंदर ठीक जो पहले से एन्क्रिप्टेड है, और कहीं के लिए ठीक नहीं। इलाज है कैरियर को एन्क्रिप्ट करना: अगले दो सेक्शन, और यही वजह है कि आपके डिस्ट्रीब्यूशन ने जो भी netcat दिया हो, उसकी जगह ncat इस्तेमाल किया जाए।\nचरण तीन: कैरियर को TLS में लपेटना साफ़ जवाब pppd को बिल्कुल वैसा ही छोड़ता है और कैरियर को एक ऐसे से बदल देता है जो TLS करता है। pppd को कभी पता नहीं चलता कि कुछ बदला।\nपहले सर्टिफ़िकेट। एक self-signed काफ़ी है, बशर्ते क्लाइंट उसे वेरिफ़ाई करे। बिना वेरिफ़ाई किया TLS सेशन किसी ऐसे के साथ एन्क्रिप्टेड बातचीत है जिसकी आपने पहचान नहीं की, और वह किसी को नहीं रोकता:\nopenssl req -x509 -newkey rsa:4096 -days 825 -nodes \\ -keyout tunnel.key -out tunnel.crt \\ -subj \u0026#34;/CN=tunnel.example.net\u0026#34; \\ -addext \u0026#34;subjectAltName=DNS:tunnel.example.net\u0026#34; Ncat Ncat में TLS अंदर ही है। यह एक प्रॉक्सी के ज़रिए चेन भी कर सकता है, --proxy host:port --proxy-type http|socks4|socks511, तो कैरियर टनल के दूर वाले सिरे की जगह किसी relay पर खत्म हो सकता है। egress वाला सेक्शन इसी बात पर टिका है। listen करने वाला सिरा:\npppd nodetach noauth local passive \\ nodefaultroute noipdefault 192.0.2.1:192.0.2.2 \\ lcp-echo-interval 10 lcp-echo-failure 3 mtu 1400 mru 1400 \\ pty \u0026#39;ncat --listen --keep-open --ssl --ssl-cert tunnel.crt --ssl-key tunnel.key 443\u0026#39; कनेक्ट करने वाला सिरा:\npppd nodetach noauth local \\ nodefaultroute noipdefault 192.0.2.2:192.0.2.1 \\ lcp-echo-interval 10 lcp-echo-failure 3 mtu 1400 mru 1400 \\ pty \u0026#39;ncat --ssl --ssl-verify --ssl-trustfile tunnel.crt tunnel.example.net 443\u0026#39; --ssl-verify वह शब्द है जो मायने रखता है। इसके बिना --ssl आपको passive सुनने वाले के खिलाफ़ एन्क्रिप्शन देता है और जो भी पहले पोर्ट का जवाब दे उसके खिलाफ़ कुछ नहीं; इसके साथ, Ncat trust file के खिलाफ़ भरोसा और domain name वेरिफ़ाई करता है12। हालाँकि Ncat में सर्वर साइड पर client-cert की कोई जाँच नहीं है, तो सर्वर क्लाइंट की पहचान नहीं कर सकता। इसे CHAP के साथ जोड़िए, या अगले दो में से कोई इस्तेमाल कीजिए।\nStunnel पारंपरिक रैपर, और वह जो mutual authentication ठीक से करता है:\n[ppp] accept = 443 connect = 127.0.0.1:6001 cert = /etc/stunnel/tunnel.crt key = /etc/stunnel/tunnel.key CAfile = /etc/stunnel/clients.crt verify = 2 verify = 2 एक ऐसा client सर्टिफ़िकेट माँगता है जो CAfile के किसी CA से साइन हो: वह एक्सेस कंट्रोल जो netcat बिल्ड में कभी था ही नहीं। क्लाइंट stunnel को client mode में चलाता है, और pppd की pty कमांड लोकल plaintext साइड से कनेक्ट करती है।\nSocat socat पूरा काम हर सिरे पर एक प्रोसेस में करता है, और वेरिफ़िकेशन डिफ़ॉल्ट रूप से चालू रहता है:\n# listening end pppd ... pty \u0026#39;socat - OPENSSL-LISTEN:443,reuseaddr,cert=tunnel.pem,cafile=clients.crt,verify=1\u0026#39; # connecting end pppd ... pty \u0026#39;socat - OPENSSL:tunnel.example.net:443,cafile=tunnel.crt,verify=1\u0026#39; जिस मशीन पर यह लिखा गया उस पर socat इंस्टॉल नहीं है, तो यह उसके डॉक्यूमेंटेशन से है; अपने फ़्लैग खुद जाँचिए। मैं इसी की तरफ़ हाथ बढ़ाऊँगा, क्योंकि चारों में से यही अकेला है जो DTLS भी बोलता है।\nOpenssl, जब और कुछ न हो openssl हर उस बॉक्स पर है जिसमें TLS है ही, और s_server/s_client एक पाइप ढो लेंगे:\n# listening end pppd ... pty \u0026#39;openssl s_server -quiet -accept 443 -cert tunnel.crt -key tunnel.key\u0026#39; # connecting end pppd ... pty \u0026#39;openssl s_client -quiet -verify_return_error -CAfile tunnel.crt -connect tunnel.example.net:443\u0026#39; -quiet उस बैनर को दबा देता है जो वरना आपकी PPP स्ट्रीम में जा गिरता, और -verify_return_error वेरिफ़िकेशन फ़ेल होने पर चेतावनी देकर आगे बढ़ने की बजाय कनेक्शन बंद करवाता है। ये डीबगिंग टूल हैं और वैसा ही बर्ताव करते हैं, पर जिस बॉक्स पर आप कुछ इंस्टॉल नहीं कर सकते, वहाँ ये एक लिंक चालू कर देते हैं।\nसादा, TCP पर TLS, या UDP पर DTLS दोनों सिरों पर वही लिंक हिस्सा। सिर्फ़ बीच बदलता है। pppd या tap0 सादा netcat, UDP ncat --udp --listen 6000 pppd या tap0 तार पर खुला, और listener उसे लेता है जो पहले पोर्ट तक पहुँचे। न गोपनीयता, न एक्सेस कंट्रोल। pppd या tap0 TCP पर TLS: ncat, stunnel या openssl ncat --ssl --ssl-verify --ssl-trustfile tunnel.crt host 6000 pppd या tap0 सुरक्षित, और सर्टिफ़िकेट बताता है कि दूर वाला सिरा कौन है। पर कैरियर फिर TCP है, और यही अकेला आकार है जो स्ट्रीम-कम्प्रेस कर सकता है। pppd या tap0 UDP पर DTLS: socat या openssl socat - OPENSSL-DTLS-CLIENT:host:6000,cafile=tunnel.crt,verify=1 pppd या tap0 एन्क्रिप्टेड, ऑथेंटिकेटेड, और फिर भी datagram। खोया पैकेट खोया ही रहता है, उस पर दो स्टैक बहस नहीं करते। लक्ष्य यही। पूरे समय दोनों सिरों पर वही pppd, सिर्फ़ pty कमांड बदलती है। सादा netcat आपको ऐसा लिंक देता है जिसकी कोई सुरक्षा नहीं। TCP पर TLS बाइट्स की सुरक्षा करता है और कैरियर-TCP वाली समस्या वापस ले आता है। UDP पर DTLS वह आकार है जिसका लक्ष्य रखना चाहिए: एन्क्रिप्टेड, ऑथेंटिकेटेड, और फिर भी datagram कैरियर, तो खोया पैकेट खोया पैकेट ही रहता है, दो स्टैक के बीच retransmission की लड़ाई नहीं बनता। चरण चार: DTLS, क्योंकि कैरियर अब भी UDP होना चाहिए यहाँ अटपटा हिस्सा है, और यही वजह है कि यह सेक्शन अलग है। ऊपर का हर TLS ऑप्शन TCP पर चलता है, तो कैरियर को TLS में लपेटना UDP वाले तर्क को पलट देता है और meltdown आपको वापस थमा देता है। एन्क्रिप्शन और सही ट्रांसपोर्ट के बीच सौदा नहीं होना चाहिए। DTLS datagram पर TLS है, और आपको यही चाहिए: यह record-layer सुरक्षा रखता है, क्रम और retransmission की गारंटी छोड़ देता है, और खोए पैकेट को खोया ही रहने देता है, ठीक वही जिसे सोखने के लिए PPP का frame check sequence बना है।\nNcat यह नहीं कर सकता। socat और openssl कर सकते हैं:\n# listening end pppd ... pty \u0026#39;socat - OPENSSL-DTLS-LISTEN:443,cert=tunnel.pem,cafile=clients.crt,verify=1\u0026#39; # connecting end pppd ... pty \u0026#39;socat - OPENSSL-DTLS-CLIENT:tunnel.example.net:443,cafile=tunnel.crt,verify=1\u0026#39; और सिर्फ़ openssl से, जहाँ -dtls कोई भी DTLS वर्ज़न चुनता है:\n# listening end pppd ... pty \u0026#39;openssl s_server -quiet -dtls -accept 443 -cert tunnel.crt -key tunnel.key\u0026#39; # connecting end pppd ... pty \u0026#39;openssl s_client -quiet -dtls -verify_return_error -CAfile tunnel.crt -connect tunnel.example.net:443\u0026#39; फ़्रेम के साइज़ पर नज़र रखिए। एक DTLS record उस तरह fragment नहीं हो सकता जैसे एक TLS record TCP स्ट्रीम में फैल जाता है, तो सब कुछ एक बार में पाथ MTU में फ़िट होना चाहिए।\nओवरहेड का ढेर, और बचा हुआ अंदरूनी MTU पाथ MTU से नीचे गिनिए, और जो बचे वह इस्तेमाल कीजिए IP हेडर20 (v4) / 40 (v6) UDP हेडर8 DTLS record + tag≈ 30 PPP / Ethernet फ़्रेमिंगकुछ अंदरूनी MTU, जो टनल ढो सकता है: लक्ष्य 1400, न्यूनतम 1280 DTLS record वैसे fragment नहीं हो सकता जैसे TLS record TCP स्ट्रीम में फैलता है, तो यह सब एक बार में पाथ MTU में फ़िट होना चाहिए। 2001 से OpenVPN वाला ही आकार: datagram कैरियर, DTLS, ऊपर वर्चुअल इंटरफ़ेस। कोई सनक नहीं; बस अलग-अलग पुर्ज़े। 1500 से नीचे की तरफ़ गिनिए: IPv4 हेडर के 20 बाइट या IPv6 के 40, UDP के 8, DTLS record और उसके tag के लगभग 30, फ़्रेमिंग के कुछ, और बाकी अंदर का MTU है जो टनल ढो सकता है। सामान्य पाथ पर 1400 का लक्ष्य रखिए; अगर बीच में कुछ खुद एक टनल है तो 1280 सुरक्षित न्यूनतम है। यह आकार (datagram कैरियर, DTLS, ऊपर एक वर्चुअल इंटरफ़ेस) लगभग वही है जो OpenVPN 2001 से करता आया है। कोई सनक नहीं; बस अलग-अलग पुर्ज़ों में। PPP बिल्ड की ट्यूनिंग: MTU, कम्प्रेशन, और असल में क्या मदद करता है चार नॉब, सब pppd ऑप्शन। अगले सेक्शन वाले tap बिल्ड में इनमें से कोई नहीं है, क्योंकि उसमें वह मशीनरी ही नहीं जिसे ये कॉन्फ़िगर करते हैं।\npppd के चार नॉब: एक सेट करने को, एक छोड़ने को, दो बंद करने को एक सेट करने को, एक छोड़ने को, दो बंद करने को सेट कीजिए MTU और MRU दोनों सिरे, गुंजाइश के साथ: सादे में 1400, टनल के नीचे 1280। fragment हुआ फ़्रेम पूरा पैकेट खोता है। छोड़िए ACCM डिफ़ॉल्ट रूप से पहले से शून्य, जो साफ़ सॉकेट पर सही है। तभी छुइए जब कुछ कंट्रोल कैरेक्टर खाए। बंद कीजिए novj Van Jacobson हेडर कम्प्रेशन तेज़ लिंक पर गोलाई की गलती जितना बचाता है, हर पैकेट पर CPU खाता है, लॉस में टूटता है। मॉडेम स्पीड से ऊपर बंद। बंद कीजिए nodeflate nobsdcomp payload पहले से TLS/DTLS है: ciphertext कम्प्रेस करना बस मेहनत है, और सिक्योरिटी बाउंड्री के पार, एक अटैक। इनमें से कोई टनल को तेज़ नहीं बनाता। PPP बॉटलनेक नहीं है: PPPoE उसी डेमन पर 2 Gbit करता है, क्योंकि उसका डेटा पाथ kernel में रहता है। यहाँ कीमत pty है: हर बाइट userspace में जाता है और वापस। वह pseudo-terminal का है, PPP का नहीं। MTU और MRU वही है जो मायने रखता है: दोनों को दोनों सिरों पर गुंजाइश के साथ सेट कीजिए, क्योंकि जिस फ़्रेम को कैरियर को fragment करना पड़े वह किसी भी ड्रॉप पर पूरा पैकेट खो देता है। ACCM साफ़ सॉकेट पर पहले से शून्य और सही है। मॉडेम की स्पीड से ऊपर Van Jacobson हेडर कम्प्रेशन को novj से बंद कीजिए। वह बस गोलाई की गलती जितना बचाता है, हर पैकेट पर CPU खाता है और लॉस में टूट जाता है। deflate/bsdcomp बंद कीजिए: payload पहले से एन्क्रिप्टेड है, और सिक्योरिटी बाउंड्री के पार कम्प्रेस करना एक अटैक है, फ़ीचर नहीं। इनमें से कुछ भी टनल को तेज़ नहीं बनाता, और इसकी वजह मायने रखती है क्योंकि इसका दोष PPP पर डाला जाता है और नहीं डाला जाना चाहिए। PPP बॉटलनेक नहीं है। PPPoE उसी डेमन पर 2 Gbit ढोता है, क्योंकि उसका डेटा पाथ कभी kernel से बाहर नहीं जाता: ppp_generic और pppoe फ़्रेमिंग और फ़ॉरवर्डिंग करते हैं, और pppd सिर्फ़ control plane संभालता है। यहाँ आपकी कीमत pty है: हर बाइट userspace में जाता है, netcat से होकर, एक सॉकेट में और वापस, एक ऐसा चक्कर जो PPPoE कभी नहीं लगाता। वह pseudo-terminal का है, PPP का नहीं।\nइसी मौके पर इसे करने के दूसरे तरीके को देखना ठीक रहेगा, जिसमें pty है ही नहीं।\nदूसरा तरीका: एक tap डिवाइस, और PPP बिल्कुल नहीं अब तक सब कुछ लिंक वाले आधे हिस्से के लिए PPP इस्तेमाल करता रहा है। वर्चुअल इंटरफ़ेस बनाने का एक दूसरा तरीका भी है, और उसे किसी प्रोटोकॉल की ज़रूरत नहीं।\nKernel का TUN/TAP ड्राइवर आपको एक इंटरफ़ेस और एक file descriptor आपस में बँधे हुए देता है: descriptor में एक पैकेट लिखिए और वह इंटरफ़ेस पर ऐसे दिखता है जैसे तार से आया हो; पढ़िए तो आपको वह पैकेट मिलता है जिसे kernel भेजना चाहता था। पूरा इंटरफ़ेस बस इतना है13, और यह 1999 से Linux में है।\nip tuntap add dev tap0 mode tap user damien group damien ip link set tap0 mtu 1400 up ip addr add 192.0.2.1/30 dev tap0 tap डिवाइस एक सिरे पर इंटरफ़ेस है और दूसरे पर file descriptor न डेमन, न प्रोटोकॉल, न pseudo-terminal। एक file descriptor। KERNEL tap0 एक सामान्य इंटरफ़ेस, एड्रेस और रूट के साथ /dev/net/tun TUNSETIFF उस डिवाइस का नाम देता है जो मिलता है आपका प्रोसेस socat, या fd पकड़े हुए Python की पचास लाइनें UDP सॉकेट हर datagram में एक फ़्रेम नेटवर्क और दूर वाला सिरा एक read = एक फ़्रेम PPP बिल्ड के मुकाबले क्या नहीं है: न नेगोशिएट किया फ़्रेम साइज़, न लाइवनेस चेक, न एड्रेस का आदान-प्रदान, न ऑथेंटिकेशन। दोनों सिरे आप हाथ से कॉन्फ़िगर करते हैं और वे इस पर कभी बात नहीं करते। लिंक पर कोई नज़र नहीं रखता, तो कोई नहीं बताएगा कि वह मर गया। न कोई डेमन, न कोई प्रोटोकॉल। Kernel tap0 को एक सामान्य इंटरफ़ेस की तरह पेश करता है और उसकी दूसरी तरफ़ उस प्रोसेस को दे देता है जिसने /dev/net/tun खोला। एक read ठीक एक Ethernet फ़्रेम लौटाता है; एक write ठीक एक डालता है। जो कुछ pppd नेगोशिएट कर रहा था (एड्रेस, फ़्रेम साइज़, लाइवनेस) अब आप दोनों सिरों पर हाथ से कॉन्फ़िगर करते हैं, और दोनों सिरे इसमें से किसी पर कभी बात नहीं करते। उस पहली कमांड में दो बारीकियाँ दिखने से ज़्यादा कीमती हैं।\nuser damien डिवाइस को persistent और unprivileged बनाता है। इस तरह बना डिवाइस उसे इस्तेमाल करने वाले प्रोसेस के बाद भी बचा रहता है, और एक नामित यूज़र उसे root हुए बिना खोल सकता है। Root डिवाइस एक बार बनाता है; जो चीज़ फ़्रेम ढोती है उसे root की ज़रूरत ही नहीं। यह बात egress वाले सेक्शन तक याद रखिए।\nmode tun उसी ड्राइवर का दूसरा आधा हिस्सा है, और ज़्यादातर लोगों को असल में यही चाहिए। Tun IP पैकेट ढोता है। Tap Ethernet फ़्रेम ढोता है। यह फ़र्क इतना मायने रखता है कि नीचे इसका अपना सेक्शन है।\nPPP के मुकाबले आप वह सब छोड़ते हैं जो PPP नेगोशिएट करता है: LCP नहीं, तो न तय किया हुआ फ़्रेम साइज़ और न लाइवनेस चेक; IPCP/IPV6CP नहीं, तो दोनों सिरे हाथ से कॉन्फ़िगर; कोई ऑथेंटिकेशन नहीं, कोई हेडर कम्प्रेशन नहीं। tap डिवाइस kernel में एक छेद है, और उसमें से जाने वाला प्रोटोकॉल वही है जो आप वहाँ रखें। बदले में आपको मिलता है: फ़्रेमिंग का बिल्कुल कोई ओवरहेड नहीं, कोई एस्केपिंग नहीं, कोई कंट्रोल चैनल नहीं, और एक ऐसा इंटरफ़ेस जिसे ब्रिज किया जा सकता है।\nUDP पर tap, जहाँ एक datagram एक फ़्रेम है यह पूरी पोस्ट की सबसे साफ़ मैपिंग है, और यह डिज़ाइन से ही निकलती है। tap डिवाइस एक datagram डिवाइस है (एक read() ठीक एक फ़्रेम लौटाता है) और UDP सॉकेट एक datagram सॉकेट है, हर datagram के लिए एक sendto()। तो एक फ़्रेम एक datagram में जाता है, फ़्रेम के रूप में पहुँचता है, और न कुछ अलग करना है, न बफ़र करना, न फिर से सिंक करना। एक datagram खोइए तो आपने एक फ़्रेम खोया, और गिरा हुआ पैकेट वैसे भी ऐसा ही दिखता है।\nsocat के साथ, दोनों सिरे एक-एक कमांड हैं:\n# listening end socat TUN:192.0.2.1/30,tun-type=tap,tun-name=tap0,iff-up UDP-LISTEN:443 # connecting end socat TUN:192.0.2.2/30,tun-type=tap,tun-name=tap0,iff-up UDP:198.51.100.10:443 जिस मशीन पर यह लिखा गया उस पर socat इंस्टॉल नहीं है, तो ये दोनों यहाँ चलाने की बजाय उसके डॉक्यूमेंटेशन से हैं; इन पर भरोसा करने से पहले अपने बिल्ड के address नाम जाँच लीजिए। यह रखने लायक है: इस पोस्ट में यही अकेला टूल है जो tun, tap, TLS और DTLS एक प्रोसेस में करता है।\nजहाँ आप कुछ इंस्टॉल नहीं कर सकते, वहाँ पूरा काम लगभग पचास लाइनें है, standard library के अलावा कोई dependency नहीं। इसका दिल यह है, जहाँ IFF_NO_PI वह चार-बाइट हेडर बंद करता है जो ड्राइवर वरना आगे जोड़ देता:\nTUNSETIFF, IFF_TAP, IFF_NO_PI = 0x400454CA, 0x0002, 0x1000 # IFF_TUN is 0x0001 def open_tap(name): fd = os.open(\u0026#34;/dev/net/tun\u0026#34;, os.O_RDWR) fcntl.ioctl(fd, TUNSETIFF, struct.pack(\u0026#34;16sH\u0026#34;, name.encode(), IFF_TAP | IFF_NO_PI)) return fd # ... learn the peer from the first datagram (UDP has no accept), then shovel: while True: ready, _, _ = select.select([tap, sock], [], []) if tap in ready and peer: sock.sendto(os.read(tap, MTU), peer) # one read = one frame = one datagram if sock in ready: frame, src = sock.recvfrom(MTU) peer = src # last speaker wins — see the note below if frame: os.write(tap, frame) पूरी फ़ाइल (आर्ग्युमेंट पार्सिंग, getaddrinfo से IPv6, वह zero-length datagram जो UDP listener को बताता है कि जवाब कहाँ देना है, और वह कम्प्रेशन जो अगला सेक्शन जोड़ता है) बंडल में है:\n\u0026#8615; tapcat.py: पूरी चीज़, लगभग सौ लाइनें tapcat.py · 6 kB हर datagram पर peer = src वह हिस्सा है जिसे दो बार पढ़ना चाहिए। जिसने आखिरी फ़्रेम भेजा, वही पीयर बन जाता है। ऐसे NAT के पीछे सुविधाजनक जिसका source पोर्ट बदलता रहता है, और अविश्वसनीय नेटवर्क पर एक खुला दरवाज़ा, जहाँ कोई भी जो पोर्ट पर एक datagram भेज सके, टनल पर कब्ज़ा कर लेता है। DTLS सेशन के अंदर ठीक है, और बात वहीं जा रही है; अपने आप में ठीक नहीं। स्क्रिप्ट का सॉकेट वाला आधा हिस्सा यहाँ IPv6 loopback पर चलाकर देखा गया: शुरुआती datagram पहुँचता है, listener पीयर सीख लेता है, एक फ़्रेम पार जाता है और जवाब वापस आता है; tap वाले आधे हिस्से को root चाहिए, वही एक हिस्सा जो मैं नहीं चला सका।\nTCP पर फ़्रेमिंग आपको खुद बनानी पड़ती है अब कैरियर को TCP से बदलिए और देखिए कि एक पूरी समस्या सामने आती है जिसे PPP ने 1994 में चुपचाप हल कर दिया था।\nTCP एक बाइट स्ट्रीम है जिसमें न record की सीमाएँ हैं, न कोई वादा कि पहुँचने पर बाइट्स कैसे समूह में होंगे: लगातार लिखे गए दो फ़्रेम एक read में आ सकते हैं, और एक फ़्रेम तीन में। रिसीवर के पास बाइट्स का ढेर होता है और कोई अंदाज़ा नहीं कि एक फ़्रेम कहाँ खत्म होता है, और tap डिवाइस सिर्फ़ पूरे फ़्रेम स्वीकार करता है।\nहर फ़्रेम पर एक datagram, या एक length prefix जो आपको खुद बनाना है tap डिवाइस से एक read एक फ़्रेम है। उसे वैसा बनाए रखना कैरियर का काम है। UDP पर: सीमा मुफ़्त है datagram = फ़्रेम A datagram = फ़्रेम B datagram = फ़्रेम C datagram = फ़्रेम D एक read, एक datagram, दूर वाले सिरे पर एक write। न कुछ अलग करना, न बफ़र करना, न लॉस के बाद फिर से सिंक करना। TCP पर: सीमाएँ गायब हैं और आपको उन्हें वापस लगाना है एक बाइट स्ट्रीम: दो फ़्रेम एक read में आ सकते हैं, एक फ़्रेम तीन में len फ़्रेम A len फ़्रेम B len फ़्रेम C len फ़्रेम D हर फ़्रेम के आगे दो बाइट की big-endian length, और एक रिसीवर जो length पढ़ता है और फिर ठीक उतने बाइट। यह काम करता है, और उबर नहीं सकता। HDLC अगले 0x7E पर फिर सिंक होता है क्योंकि flag में भ्रम नहीं; जो length-prefixed स्ट्रीम जगह खो दे वह आगे की हर length किसी फ़्रेम के बीच से पढ़ती है। इसे ठीक करने को marker और checksum जोड़िए, और आपने HDLC दोबारा बना लिया। UDP पर एक फ़्रेम एक datagram है और सीमा मुफ़्त में मिलती है। TCP पर सीमाएँ गायब हैं, तो भेजने वाले को हर फ़्रेम के आगे एक length prefix जोड़ना पड़ता है और रिसीवर को उससे फिर से जोड़ना पड़ता है। PPP को यह समस्या नहीं है क्योंकि वह अपनी फ़्रेमिंग खुद लाता है (हर सिरे पर एक flag बाइट और एक checksum), और इसी से वह नुकसान के बाद फिर से सिंक हो पाता है। length-prefixed स्ट्रीम ऐसा नहीं कर सकती: एक बाइट भी ताल से बाहर हुआ तो उसके बाद का हर फ़्रेम गलत है। तो TCP पर आप अपनी फ़्रेमिंग खुद लिखते हैं। हर फ़्रेम के आगे दो बाइट की big-endian length सामान्य जवाब है:\n# sending sock.sendall(struct.pack(\u0026#34;!H\u0026#34;, len(frame)) + frame) # receiving def recv_exactly(sock, n): buf = b\u0026#34;\u0026#34; while len(buf) \u0026lt; n: chunk = sock.recv(n - len(buf)) if not chunk: raise ConnectionError(\u0026#34;carrier closed\u0026#34;) buf += chunk return buf length = struct.unpack(\u0026#34;!H\u0026#34;, recv_exactly(sock, 2))[0] frame = recv_exactly(sock, length) यह काम करता है, और UDP वर्ज़न से साफ़ तौर पर बदतर है। यह फिर से TCP-over-TCP वाली समस्या है; यह हर फ़्रेम पर दो बाइट और एक reassembly लूप जोड़ता है; और एरर से लौटने का इसके पास कोई रास्ता नहीं, क्योंकि जो length-prefixed स्ट्रीम अपनी जगह खो देती है वह आगे की हर length किसी फ़्रेम के बीच से पढ़ती है। HDLC अगले 0x7E पर फिर से सिंक हो जाता है; यह नहीं हो सकता, जब तक HDLC को और खराब तरीके से दोबारा न बनाया जाए। UDP के पक्ष में तीसरा तर्क, और सबसे मज़बूत: datagram कैरियर पर फ़्रेमिंग की कोई समस्या नहीं, क्योंकि कैरियर के पास पहले से वह अकेला फ़ीचर है जिसकी आपको ज़रूरत थी।\nTun या tap: लेयर 3, जब तक सच में लेयर 2 की ज़रूरत न हो एक ही ड्राइवर आपको दो डिवाइस देता है, और लोग लगातार गलत वाला चुनते हैं क्योंकि किसी ट्यूटोरियल ने tap कहा था।\ntun tap क्या पार जाता है IP पैकेट Ethernet फ़्रेम हर पैकेट का ओवरहेड कुछ नहीं 14-बाइट Ethernet हेडर ARP, DHCP, broadcast नहीं हाँ, सब कुछ, टनल के पार Non-IP प्रोटोकॉल नहीं हाँ ब्रिज में जुड़ सकता है नहीं हाँ किसके बराबर पॉइंट-टू-पॉइंट लिंक, ppp0 जैसा एक नेटवर्क केबल Tun एक रूट किया हुआ लिंक है, पहले हिस्से के PPP इंटरफ़ेस जैसा: दो एड्रेस, एक रूट, पैकेट अंदर और बाहर। Tap एक वर्चुअल Ethernet केबल है, तो सेगमेंट का हर broadcast, ARP query और multicast का हर शोर अब आपके टनल को पार करता है और बैंडविड्थ जलाता है।\nबदलने के लिए स्क्रिप्ट में एक लाइन बदलिए:\nIFF_TUN = 0x0001 # instead of IFF_TAP tap तब इस्तेमाल कीजिए जब सच में लेयर 2 की ज़रूरत हो। असली वजहें होती हैं: कोई प्रोटोकॉल जो IP नहीं है, कोई cluster heartbeat जो broadcast देखने की उम्मीद करता है, कोई DHCP सर्वर जिसे टनल के पार क्लाइंट तक पहुँचना है, या दो सेगमेंट को ब्रिज करके एक बनाना।\nवह आखिरी वाला आम केस है और उसी के साथ सावधान रहना है:\nip link add br0 type bridge ip link set tap0 master br0 ip link set eth1 master br0 ip link set br0 up अब दूर का सेगमेंट आपके लोकल सेगमेंट का हिस्सा है: उसके broadcast, उसका spanning tree, उसका MAC churn और, अगर किसी ने लापरवाही की, तो उसका DHCP सर्वर भी। दो ऐसी साइट को ब्रिज करना जो दोनों 192.168.1.0/24 चलाती हैं, एक खराब दोपहर है; ऐसा ब्रिज जो उसी सेगमेंट पर लूप हो जाए, एक खराब हफ़्ता। डिफ़ॉल्ट tun रखिए, tap तब उठाइए जब आप उस लेयर 2 चीज़ का नाम ले सकें जिसकी आपको ज़रूरत है, और ब्रिज तभी कीजिए जब दोनों तरफ़ देख लें कि कौन broadcast कर रहा है।\nवही रैपर, हर सिरे पर एक प्रोसेस tap बिल्ड में वही छेद है जो PPP वाले में: कैरियर खुला है और listener उसे स्वीकार कर लेता है जो पहले पहुँचे। इलाज भी वही है, और socat के साथ यह हर सिरे पर एक कमांड में सिमट जाता है, क्योंकि वह डिवाइस बनाता है और DTLS सेशन एक ही प्रोसेस में खत्म करता है:\n# listening end socat TUN:192.0.2.1/30,tun-type=tap,tun-name=tap0,iff-up \\ OPENSSL-DTLS-LISTEN:443,cert=tunnel.pem,cafile=clients.crt,verify=1 # connecting end socat TUN:192.0.2.2/30,tun-type=tap,tun-name=tap0,iff-up \\ OPENSSL-DTLS-CLIENT:tunnel.example.net:443,cafile=tunnel.crt,verify=1 इस पोस्ट का यह सबसे छोटा सही बिल्ड है। एक वर्चुअल इंटरफ़ेस, एक datagram कैरियर, mutual certificate authentication और एन्क्रिप्शन। दो कमांड। न कोई डेमन, न प्रोटोकॉल नेगोशिएशन।\nverify=1 वैकल्पिक नहीं है: वही बात जो --ssl-verify के साथ थी, और ऊपर वाले peer = src बर्ताव के साथ, कोई अनजान पार्टी आपके टनल की मालिक बनने से बस एक datagram दूर है। अगर आप Python स्क्रिप्ट के साथ फँसे हैं, तो उसमें TLS मत ठूँसिए: उसे एक loopback पोर्ट की तरफ़ कीजिए और आगे रैपर रखिए, या socat इस्तेमाल कीजिए। हाथ से बने टनल के चारों ओर हाथ से बना TLS रैपर, दिलचस्प हिस्से को गलत करने के दो मौके हैं।\nचरण पाँच: zstd से स्ट्रीम को कम्प्रेस करना बैकएंड में डालने लायक एक और चीज़ है, और pppd के कम्प्रेशन ऑप्शन के उलट इसका सच में फ़ायदा हो सकता है: फ़्रेम को कैरियर में डालने से पहले zstd से कम्प्रेस कीजिए।\nवहाँ अहम शब्द है फ़्रेम, बहुवचन। स्ट्रीम को कम्प्रेस कीजिए, हर पैकेट को अलग-अलग नहीं। इस पोस्ट में मापा गया यही सबसे बड़ा असर है।\nनेटवर्क ट्रैफ़िक ऐसे दोहराव वाला होता है जो सिर्फ़ पैकेटों के पार दिखता है: वही हेडर, होस्टनेम और JSON keys, बार-बार। जो कम्प्रेसर हर 1,400-बाइट फ़्रेम पर नए सिरे से शुरू करता है उसे इसमें से कुछ नहीं दिखता; जो अपनी window फ़्रेमों के पार रखता है उसे सब दिखता है।\nएन्क्रिप्ट से पहले कम्प्रेस, और कैरियर इजाज़त दे तो window रखिए क्रम तय है। मोड ही फ़ैसला है। tap0एक read, एक फ़्रेम कम्प्रेसzstd, level 1 एन्क्रिप्टDTLS, या TLS कैरियरUDP, या TCP उल्टा कभी नहीं। FLUSH_BLOCK: window रखिए अब तक का सब निकालता है, हिस्ट्री रखता है। हर फ़्रेम पहले के हर फ़्रेम के आधार पर एनकोड होता है। कोई latency नहीं: एक फ़्रेम अंदर, एक फ़्रेम बाहर। 5.0% दोहराव वाले ट्रैफ़िक पर · लॉग लाइनों पर 7.5% हर फ़्रेम का पहुँचना ज़रूरी, क्रम से। यानी: TCP, या TCP पर TLS। UDP नहीं, DTLS नहीं। FLUSH_FRAME: हर पैकेट पर फेंक दीजिए हर datagram एक पूरा zstd फ़्रेम है और अपने आप डिकोड होता है, तो 1 से N-1 खोने के बाद भी datagram N चलता है। datagram कैरियर यही अकेला मोड इस्तेमाल कर सकता है। 14.8% उसी ट्रैफ़िक पर · लॉग लाइनों पर 24.2% trained dictionary इसका ज़्यादातर वापस दिलाती है: 5.3% और 15.1%, और लॉस झेलने लायक रहती है। कम्प्रेशन tap डिवाइस और कैरियर के बीच जाता है, और एन्क्रिप्शन से पहले, क्योंकि ciphertext कम्प्रेस नहीं होता। FLUSH_BLOCK वह मोड है जो मायने रखता है: यह अब तक का सब कुछ बाहर निकाल देता है, तो एक फ़्रेम अंदर तो एक फ़्रेम बाहर, बिना कोई latency जोड़े, और अगले फ़्रेम के लिए कम्प्रेशन हिस्ट्री बनी रहती है। FLUSH_FRAME हर पैकेट पर वह हिस्ट्री फेंक देता है, इसी से यह लॉस वाले कैरियर पर सुरक्षित है और इसी से तार पर तीन गुना बदतर। मौजूदा Fedora पर इसके लिए कुछ इंस्टॉल नहीं करना पड़ता: Python 3.14 zstd को standard library में ले आया14; इस बॉक्स पर zstd 1.5.7 के साथ 3.14.7 है:\nfrom compression.zstd import ZstdCompressor, ZstdDecompressor # Python 3.14+ _c, _d = ZstdCompressor(level=1), ZstdDecompressor() # FLUSH_BLOCK: emit everything so far, keep the window for the next frame. out = _c.compress(frame, mode=ZstdCompressor.FLUSH_BLOCK) frame = _d.decompress(out) हर दिशा के लिए एक कम्प्रेसर, लिंक की पूरी उम्र तक ज़िंदा। हर फ़्रेम पर एक FLUSH_BLOCK, तो फ़्रेम आते ही बाहर चला जाता है, कुछ बफ़र नहीं होता, और दूर वाला सिरा हर block पर एक फ़्रेम लौटाता है।\nwindow की कीमत, मापकर इसी मशीन के आँकड़े। वही 1,400-बाइट फ़्रेम, वही level 1, फ़र्क सिर्फ़ इतना कि कम्प्रेसर अपनी हिस्ट्री रखता है या नहीं:\nटनल में ट्रैफ़िक स्ट्रीम, FLUSH_BLOCK हर पैकेट, FLUSH_FRAME हर पैकेट, trained dictionary के साथ दोहराव वाले API कॉल और टेलीमेट्री 5.0% 14.8% 5.3% लॉग लाइनें 7.5% 24.2% 15.1% सादा टेक्स्ट और कॉन्फ़िग फ़ाइलें 37.8% 51.3% 45.3% रैंडम बाइट्स, TLS की जगह 100%+ 100.7% — level 1 पर throughput टेक्स्ट पर 205 MB/s और दोहराव वाले ट्रैफ़िक पर 1 GB/s से ऊपर रहा: जितना ज़्यादा कम्प्रेस होने लायक, उतना तेज़, क्योंकि एनकोड करने को कम है।\nलॉग ट्रैफ़िक अपने मूल साइज़ के 7.5% पर आ जाता है, हर पैकेट वाले 24.2% के मुकाबले: तीन गुना, वही डेटा, वही level, एक फ़्लैग से। और level 1 ही सही level है: level 3 से लगभग एक प्रतिशत मिला, level 9 से एक और, जबकि throughput 211 MB/s से 61 पर गिर गया।\nपेंच, और यह वही पेंच है जो यहाँ बाकी हर चीज़ में है साझा window का मतलब है कि हर फ़्रेम अपने से पहले वालों पर निर्भर है: एक खोइए तो decompressor की हिस्ट्री मेल नहीं खाती, और उसके बाद कुछ भी डिकोड नहीं होता। तो स्ट्रीम कम्प्रेशन को ऐसा कैरियर चाहिए जो सब कुछ क्रम से पहुँचाए: TCP, या TCP पर TLS, UDP या DTLS नहीं। इस पूरी पोस्ट में TCP कैरियर के पक्ष में यही एक ईमानदार तर्क है। अगर आपके टनल से जो गुज़रता है वह सच में कम्प्रेस होने लायक है (syslog, खुले में database replication, टेलीमेट्री, बातूनी API), तो स्ट्रीम-कम्प्रेस्ड TLS सेशन datagram कैरियर के मुकाबले एक तिहाई बाइट्स ले जाता है, जो ठीक-ठाक पाथ पर retransmission की सज़ा से भारी पड़ सकता है। अपने ट्रैफ़िक पर मापिए।\nUDP पर, जहाँ dictionary window का काम करती है जहाँ कैरियर UDP या DTLS है, और डिफ़ॉल्ट रूप से होना चाहिए, वहाँ आप window नहीं रख सकते: हर datagram अपने आप में अकेला है, यानी FLUSH_FRAME और ऊपर वाला कमज़ोर कॉलम। एक trained dictionary कम्प्रेसर को पैकेटों के पार वह संदर्भ देती है जो window देती, datagram के बीच कोई निर्भरता बनाए बिना15:\n# capture a few thousand real frames off the link first, one per file zstd --train frames/* -o tunnel.dict --maxdict=110000 from compression.zstd import ZstdCompressor, ZstdDecompressor, ZstdDict d = ZstdDict(open(\u0026#34;tunnel.dict\u0026#34;, \u0026#34;rb\u0026#34;).read()) _c = ZstdCompressor(level=1, zstd_dict=d) # load it ONCE, not per frame out = _c.compress(frame, mode=ZstdCompressor.FLUSH_FRAME) दोहराव वाले ट्रैफ़िक पर इसने हर पैकेट वाले कम्प्रेशन को 14.8% से 5.3% पर ला दिया, पूरे स्ट्रीम कम्प्रेशन तक के फ़ासले का 96% वापस पाते हुए और लॉस झेलने लायक रहते हुए; लॉग लाइनों पर फ़ासले का 55%, सामान्य टेक्स्ट पर 44%।\nइसके साथ तीन नियम आते हैं। दोनों सिरों को वही dictionary लोड करनी होगी वरना कुछ डिकोड नहीं होता; यहाँ जाँचा गया, dictionary से कम्प्रेस हुआ फ़्रेम उसके बिना ZstdError देता है। असली ट्रैफ़िक के कैप्चर पर ट्रेन कीजिए, क्योंकि dictionary एक पूर्वधारणा है और गलत वाली आपको महँगी पड़ती है: टेक्स्ट वाली dictionary ने अलग टेक्स्ट को थोड़ा बदतर कर दिया। और उसे एक लंबे चलने वाले कम्प्रेसर में एक बार लोड कीजिए; हर कॉल पर देने से 5 MB/s मापा गया, और यह टाइपो नहीं है।\nहेडर बाइट, और एक सेकंड का रैंप दो छोटी बातें जो इसे नाज़ुक होने से रोकती हैं।\nहर datagram एक बाइट का हेडर ढोता है, और वह सिर्फ़ “कम्प्रेस्ड” कहने की बजाय मोड का नाम बताता है: 0x00 फ़्रेम जैसा है वैसा, 0x01 एक अपने आप में पूरा zstd फ़्रेम, 0x02 चलती स्ट्रीम का एक block। तब रिसीवर दूर वाले सिरे ने जो भी चुना उसे डिकोड कर सकता है, उससे मेल खाने के लिए कॉन्फ़िगर किए बिना, और अकेले इसी के लिए वह बाइट वाजिब है।\nफ़्रेम मोड में भेजने वाला कम्प्रेस्ड रूप तभी भेजता है जब वह सच में छोटा हो, क्योंकि कम्प्रेशन हमेशा फ़ायदा नहीं है: रैंडम बाइट्स 100.7% पर निकले, और 64-बाइट का TCP ACK 73 पर कम्प्रेस होता है, यानी ऐसे पैकेट पर दस बाइट का zstd हेडर जिसमें निचोड़ने को कुछ नहीं। असली लिंक पर पैकेटों की गिनती में छोटे पैकेट हावी होते हैं, तो इस जाँच के बिना आप अपने ज़्यादातर ट्रैफ़िक को फुलाते ताकि थोड़े से को सिकोड़ सकें। स्ट्रीम मोड में यह हमेशा कम्प्रेस्ड रूप भेजता है, क्योंकि एक भी छोड़ना दोनों window को ताल से बाहर कर देगा।\nऔर लिंक raw शुरू होता है: पहले एक सेकंड तक हर फ़्रेम बिना कम्प्रेस हुए जाता है, सेटिंग्स कुछ भी कहें, और हर दिशा अपने आप रैंप करती है:\nRAMP = 1.0 # seconds of raw frames before compression starts def pack(self, frame): if self.c is None or time.monotonic() - self.started \u0026lt; RAMP: return RAW + frame out = self.c.compress(frame, mode=ZstdCompressor.FLUSH_BLOCK) return ZSTD + out if len(out) \u0026lt; len(frame) else RAW + frame यह पोस्ट की शुरुआत वाला चरणों का विचार है, एक अकेले लिंक पर लागू। टनल अपने सबसे सरल रास्ते पर चालू होता है, साबित करता है कि वह एक फ़्रेम ढो सकता है, और उसके बाद ही कोई होशियारी शुरू करता है। जब यह टूटता है, तो आपको पता होता है कि किस सेकंड में टूटा।\nचरण छह: कम्प्रेस्ड और एन्क्रिप्टेड, और क्रम की कीमत क्रम मायने रखता है, और सिर्फ़ एक काम करता है: पहले कम्प्रेस, फिर एन्क्रिप्ट। Ciphertext कम्प्रेस नहीं होता, जैसा 100.7% वाली पंक्ति दिखाती है, और इसीलिए TLS 1.3 ने अपना कम्प्रेशन हटा दिया, जिससे आपकी लेयर ही इसे करने की अकेली जगह बची। इस क्रम की एक जानी-मानी समस्या है, वही जो मैंने deflate के खिलाफ़ उठाई थी: एन्क्रिप्ट करने से पहले कम्प्रेस करना ciphertext की लंबाई के ज़रिए plaintext लीक करता है, और जहाँ अटैकर किसी secret के साथ अपना चुना हुआ डेटा डाल सके और साइज़ देख सके, वहाँ यह लीक एक से ज़्यादा बार चलता हुआ अटैक बना है: TLS के खिलाफ़ CRIME और BREACH16, और ठीक इसी आकार के खिलाफ़ VORACLE17।\nयह कभी कम्प्रेस न करने की वजह नहीं है। यह जानने की वजह है कि आप किस केस में हैं:\nऐसा लिंक जो आपके अपने दो बॉक्स के बीच आपका अपना ट्रैफ़िक ढोता है (replication, backup, लॉग, टेलीमेट्री) उसमें secret के साथ अटैकर का चुना हुआ plaintext सफ़र नहीं करता। इसे कम्प्रेस कीजिए, और स्ट्रीम को कम्प्रेस कीजिए। ऐसा लिंक जो यूज़र की मनमानी ब्राउज़िंग ढोता है, जहाँ किसी और का वेब कंटेंट और आपके क्रेडेंशियल साथ जाते हैं, वही केस है जिसके बारे में VORACLE लिखा गया था। इसे बंद रखिए। मैं इसे tap बिल्ड में रखने में सहज हूँ और PPP वाले में नहीं, तो इसकी वजह कोई सिद्धांत नहीं है: यहाँ आप जानबूझकर एक आधुनिक एल्गोरिदम चुनते हैं, उस ट्रैफ़िक के लिए जिसे आपने देखा है, जबकि pppd का deflate डिफ़ॉल्ट रूप से सब कुछ 1996 वाले एल्गोरिदम से कम्प्रेस करता है, केस उसके लायक हो या न हो।\ntap बिल्ड क्या पाता है, और क्या छोड़ता है दोनों हिस्सों को आमने-सामने रखिए, क्योंकि वे प्रतियोगी नहीं हैं। वे अलग-अलग सौदे हैं।\nसॉकेट पर pppd सॉकेट पर tap या tun फ़्रेमिंग अंदर ही (HDLC, नुकसान के बाद फिर से सिंक) UDP पर कोई नहीं क्योंकि ज़रूरत नहीं; TCP पर खुद बनाइए एड्रेस सेटअप IPCP और IPV6CP से नेगोशिएट दोनों सिरों पर हाथ से कॉन्फ़िगर लाइवनेस LCP echo, अंदर ही कोई नहीं; आप जोड़िए वरना लिंक चुपचाप मरता है ऑथेंटिकेशन PAP या CHAP उपलब्ध, दोनों कमज़ोर बिल्कुल नहीं लेयर सिर्फ़ 3 tun के साथ 3, tap के साथ 2 ब्रिजिंग नहीं हाँ, tap के साथ ओवरहेड हर फ़्रेम पर flag, हेडर और FCS, साथ में एस्केपिंग कुछ नहीं, या tap के साथ 14 बाइट कम्प्रेशन deflate और BSD, डिफ़ॉल्ट रूप से चालू, 1996 के कोई नहीं, या हर फ़्रेम पर zstd जिसे आप जोड़ते और नियंत्रित करते हैं Root चाहिए हाँ, पूरे समय डिवाइस बनाने के लिए; इस्तेमाल के लिए नहीं चलते पुर्ज़े एक डेमन, तीस साल पुराना एक file descriptor PPP आपको नेगोशिएट किया हुआ, खुद की निगरानी करने वाला लिंक देता है और उसके बदले एक प्रोटोकॉल वसूलता है। tap डिवाइस आपको मुफ़्त में एक कच्चा छेद देता है, और गायब पुर्ज़े आप खुद लगाते हैं या उनके बिना काम चलाते हैं। चलते छोड़े गए टनल के लिए गायब लाइवनेस चेक ही काटता है: pppd तीस सेकंड में मरे कैरियर को पकड़ लेता है और उसे दोबारा बनाता है, tap बिल्ड कुछ नहीं पकड़ता क्योंकि उसमें कुछ भी नज़र नहीं रख रहा। एक keepalive जोड़िए, इसे किसी ऐसी चीज़ के तहत चलाइए जो इसे रीस्टार्ट करे, या वह बिल्ड इस्तेमाल कीजिए जिसमें पहले से है।\nकब यह सही टूल है, और कब नहीं यह कभी सच में सही टूल नहीं है, और मैं इसका उल्टा दिखावा नहीं करने वाला। ऊपर का सब कुछ काम करता है, और इसमें से कुछ भी वह नहीं है जो आपको प्रोडक्शन में चलाना चाहिए। किसी how-to के ईमानदार वर्ज़न में वह हिस्सा भी होता है जहाँ आप टूल नीचे रख देते हैं, और यह वही हिस्सा है।\nयह जिस चीज़ के लिए सच में अच्छा है वह है आपको दिखाना कि कोई चीज़ कैसे काम करती है। एक VPN जिसे खोलकर उसके पुर्ज़े अलग कर दिए गए, और, अगले सेक्शन में, जब कोई root के साथ आपके नेटवर्क के अंदर हो तो egress असल में कैसे बर्ताव करता है। इसे पढ़ने की वजहें यही हैं। नीचे के संकरे केस असली हैं, पर पोस्ट उनकी वजह से नहीं है।\nPPP बिल्ड तब उठाइए जब:\nकैरियर IP है ही नहीं: एक सीरियल कंसोल, एक USB gadget, एक रेडियो लिंक, एक named pipe, एक SSH चैनल। pppd को फ़र्क नहीं पड़ता कि बाइट्स किस पर सफ़र करते हैं, और tap डिवाइस यहाँ आपकी मदद नहीं कर सकता। आप कुछ बचा रहे हैं: एक मशीन जिसमें सीरियल कंसोल है, नेटवर्क नहीं, और एक काम जो आज रात खत्म करना है। उस कंसोल पर PPP एक रूट किया हुआ लिंक है, दोनों सिरों पर पहले से इंस्टॉल, कुछ भी कॉपी करने की ज़रूरत नहीं। आप चाहते हैं कि लिंक अपना ख्याल खुद रखे। LCP echo, एड्रेस नेगोशिएशन और रीस्टार्ट मुफ़्त हैं; इन्हें खुद लिखना ही वह तरीका है जिससे tap बिल्ड एक छोटा, अविश्वसनीय प्रोडक्ट बन जाता है। tap बिल्ड तब उठाइए जब:\nआपको लेयर 2 चाहिए: कोई non-IP प्रोटोकॉल, कोई cluster heartbeat जो broadcast चाहता है, टनल के पार DHCP, या दो सेगमेंट जिन्हें एक होना ही है। आप सबसे कम चलते पुर्ज़े चाहते हैं: UDP पर DTLS के साथ यह दो कमांड है, न डेमन, न नेगोशिएशन, एस्केप करने को कुछ नहीं। Root मुश्किल से मिलता है। user के साथ डिवाइस एक बार बनाइए, और फ़्रेम ढोने वाले प्रोसेस को फिर कभी privilege की ज़रूरत नहीं। सीखते समय दोनों सही टूल हैं। हर लेयर दिखती है और अलग से बदली जा सकती है, और कोई VPN प्रोडक्ट क्या करता है यह समझने का इससे बेहतर तरीका नहीं कि उसे पुर्ज़ों से बनाइए और हर एक को चालू होते देखिए।\nजब आपको VPN चाहिए तब इनमें से कोई सही टूल नहीं। उसके लिए WireGuard इस्तेमाल कीजिए। यह kernel में है, कोड का एक छोटा सा हिस्सा, यह crypto ठीक से करता है, नेगोशिएट करने को कुछ नहीं और गलत करने को कुछ नहीं, और डिज़ाइन से ही datagram प्रोटोकॉल है। ssh -w एक कमांड में मौजूदा SSH सेशन पर आपको tun डिवाइस देता है, और OpenVPN ऊपर वाले DTLS-over-tap आकार का परिपक्व, ऑडिट किया हुआ वर्ज़न है। तीनों इस काम में यहाँ बनाई गई किसी भी चीज़ से बेहतर हैं।\nइन्हें इसलिए बनाइए क्योंकि आप जानना चाहते हैं कि आप जो चीज़ खरीदते हैं उसके अंदर क्या है। इसलिए नहीं कि यह होशियारी थी।\nयह असल में क्या दिखाता है: अटैकर की तरफ़ से egress यही वजह है एक ऐसी बिल्ड पोस्ट पढ़ने की जिसे इस्तेमाल न करने को अभी आपसे कहा गया। इसे पलटिए और अपने ही नेटवर्क के अंदर से देखिए, उस इंसान की तरह जो अभी-अभी root के साथ वहाँ उतरा है। हर असली breach आखिर में वहीं पहुँचता है: चुराई गई की से, कंटेनर escape से, बिना पैच की सर्विस से, किसी अंदर वाले से। उसके बाद जो सवाल तय करता है कि दिन कितना बुरा जाएगा वह “वे क्या चला सकते हैं” नहीं है, क्योंकि वे कुछ भी चला सकते हैं। सवाल है “क्या बाहर जा सकता है, और क्या आपने यह उनके आने से पहले तय किया था।”\nअगर आउटबाउंड डिफ़ॉल्ट रूप से खुला है, तो जवाब है सब कुछ, और अब आप ज़्यादा कुछ नहीं कर सकते। यहाँ कुछ भी अनोखा नहीं था। pppd, ncat, socat और ip साइन किए हुए डिस्ट्रीब्यूशन पैकेज हैं जो पहले से बॉक्स पर हैं; tap shim standard library की पचास लाइनें है। एक इजाज़त वाला आउटबाउंड पोर्ट (और वह 443 है, जिसे हर नेटवर्क डिफ़ॉल्ट रूप से खोलता है) और आपके नेटवर्क से किसी और के नेटवर्क तक एक रूट किया हुआ लिंक बन जाता है: एन्क्रिप्टेड, ऑथेंटिकेटेड, रीस्टार्ट झेलने वाला, IPv4 और IPv6 ढोने वाला, और आपके बॉर्डर पर उस किसी भी HTTPS सेशन से अलग न पहचाना जा सकने वाला जो आपके यूज़र दिन में दस हज़ार बार बनाते हैं। इसे tap बनाइए और ब्रिज कर दीजिए, तो जो इमारत से बाहर गया वह एक रूट नहीं है। वह पूरा सेगमेंट है।\nकिसी स्कैनर के पकड़ने को कुछ नहीं है: कोई malware signature नहीं क्योंकि कोई malware नहीं, कोई अजीब प्रोटोकॉल नहीं क्योंकि यह 443 पर एक सामान्य TLS handshake है, कोई असामान्य बाइनरी नहीं क्योंकि हर एक आपके अपने package manager ने इंस्टॉल की। प्रॉक्सी एक कनेक्शन और एक बाइट काउंट लॉग करता है, और दोनों काम जैसे दिखते हैं।\nऔर गंतव्य तय भी नहीं है। सॉकेट को वहाँ खत्म होना ज़रूरी नहीं जहाँ पैकेट आखिर में पहुँचते हैं, क्योंकि कैरियर को एक प्रॉक्सी के ज़रिए भेजा जा सकता है: एक relay जो दो कनेक्शन और एक पाइप से ज़्यादा कुछ नहीं, जिसे अगला सेक्शन shell की एक लाइन में बनाता है। ncat --proxy के साथ --proxy-type http, socks4 या socks5 लेता है, तो आपके बॉर्डर को दिखने वाला TLS सेशन वहाँ खत्म होता है जिसके ज़रिए कनेक्ट करने को अटैकर ने कहा: कोई अंदरूनी jump host, कोई इजाज़त वाला SaaS एंडपॉइंट जो संयोग से CONNECT फ़ॉरवर्ड करता है, कोई क्लाउड relay। और टनल वहाँ से आगे किसी ऐसी जगह तक जाता है जिसे आप कभी नहीं देखते। HTTP CONNECT और SOCKS दोनों डिज़ाइन से यही करते हैं, क्योंकि प्रॉक्सी होता ही इसके लिए है। तो जिस गंतव्य पर आप भरोसा करते हैं उसकी allow-list एंट्री हमेशा उस गंतव्य पर और हर उस चीज़ पर भरोसा है जिस तक वह फ़ॉरवर्ड करेगा, जिसे न आप नियंत्रित करते हैं, न गिन सकते हैं। आपके फ़ायरवॉल लॉग में एंडपॉइंट प्रॉक्सी है। वह कभी दूर वाला सिरा नहीं था।\nतो असहज सच यह है: जब कोई root के साथ अंदर हो और आउटबाउंड ढीला हो, तो टनल वह चीज़ नहीं है जिसे आप रोक पाएँ। पुर्ज़े इंस्टॉल हैं, बाहर का रास्ता खुला है, और वह वहाँ तक भी नहीं जाता जहाँ जाता दिखता है। इसे मुश्किल बनाने का आपका एक मौका अटैकर के आने से पहले था, बॉर्डर पर, यह तय करके कि क्या बाहर जा सकता है।\nवही default-deny egress है, और पूरा सबक यही है। आउटबाउंड डिफ़ॉल्ट रूप से ब्लॉक; एक छोटी, नामों वाली allow-list जिसमें हर गंतव्य और पोर्ट को किसी इंसान ने जायज़ ठहराया हो; बाकी सब मना, लॉग, और अलर्ट। इसलिए नहीं कि यह किसी पक्के इरादे वाले अटैकर को वहीं रोक देता है (इजाज़त वाला गंतव्य इजाज़त वाला टनल है), बल्कि इसलिए कि इसका विकल्प है लागू करने को कोई फ़ैसला ही न होना। इजाज़त वाले पोर्टों की सूची के रूप में लिखी गई egress पॉलिसी पोर्ट नंबरों की पॉलिसी है। वह कभी इस बारे में पॉलिसी नहीं थी कि क्या बाहर जाता है, और जब किसी के पास root हो, तो वह सिर्फ़ पोर्ट नंबरों की रक्षा करती है।\nयह वही नतीजा है जो ping वाली पोस्ट में है, जो ICMP echo से टनल बनाती है, और protocol helpers वाली पोस्ट में, जहाँ आपका फ़ायरवॉल खुद छेद खोलता है। अंदर आने के तीन रास्ते, एक निष्कर्ष: जो कंट्रोल आपको लगा कि आपके पास है वह प्रोटोकॉल पर था, और इनमें से एक भी प्रोटोकॉल वह नहीं है जो वह कहता है। पहले से तय किया गया, default-deny वाला बॉर्डर ही वह अकेला कंट्रोल है जो कभी असली था।\nप्रॉक्सी दो कनेक्शन और एक पाइप है यह देखना फ़ायदेमंद है कि relay कितनी छोटी चीज़ है, क्योंकि इससे समझ आता है कि आप पास वाले सिरे से दूर वाले सिरे के बारे में क्यों नहीं सोच सकते। प्रॉक्सी कोई खास सॉफ़्टवेयर नहीं है। यह एक कनेक्शन है जो एक पाइप से दूसरे से जुड़ा है। सबसे पुराना रूप वापसी की दिशा ढोने के लिए एक named pipe, यानी FIFO, इस्तेमाल करता है: एक ncat listen करता है, दूसरा आगे कनेक्ट करता है, और FIFO उनके बीच जवाब का रास्ता जोड़ता है।\nmkfifo backpipe ncat -l 7000 0\u0026lt;backpipe | ncat farend.example.net 7100 1\u0026gt;backpipe इसे पाइपलाइन की तरह पढ़िए: listener का आउटपुट दूसरे ncat में जाता है और आगे दूर वाले सिरे तक, और जवाब FIFO से होकर क्लाइंट के पास लौटते हैं। दो सॉकेट, एक पाइप, दोनों दिशाएँ, और क्लाइंट का कनेक्शन यहीं, relay पर खत्म होता है, जबकि पैकेट farend तक और वापस जाते रहते हैं। मैंने loopback पर ठीक यही चलाया, दूर वाले सिरे पर एक तीसरा ncat echo कर रहा था, और भेजी गई एक लाइन पूरा चक्कर लगाकर वापस आई।\nrelay एक पाइप से जुड़े दो सॉकेट है, तो एंडपॉइंट खिसक जाता है एक कनेक्शन अंदर, दूसरा बाहर, बीच में पाइप। यही प्रॉक्सी है। क्लाइंट TLS सेशन खोलता है RELAY: वह गंतव्य जो आपका बॉर्डर लॉग करता है ncat -l 7000 क्लाइंट को खत्म करता है ncat farend नया hop शुरू करता है दूर वाला सिरा असली दूसरी तरफ़ stdout backpipe (FIFO) जवाब वापस ले जाता है क्लाइंट → relay relay → दूर वाला सिरा क्लाइंट का कनेक्शन relay पर खत्म होता है। पैकेट नहीं। आपके फ़ायरवॉल ने इस बॉक्स तक एक कनेक्शन लॉग किया। यह आगे कहाँ भेजता है यह बॉक्स के अंदर तय होता है, और ऐसे तीन जोड़ने से असली दूर वाला सिरा तीन पाइप दूर हो जाता है: हर hop का लॉग अगले तक बस एक साफ़ लोकल कनेक्शन दिखाता है, उसके आगे कुछ नहीं। relay दो सॉकेट और एक पाइप है। listener क्लाइंट का कनेक्शन खत्म करता है। दूसरा netcat आगे एक नया कनेक्शन शुरू करता है, और FIFO उनके बीच वापसी की दिशा ढोता है। क्लाइंट का TLS सेशन यहीं, relay पर खत्म होता है, और एक नया hop शुरू होता है; तो आपके बॉर्डर ने जो गंतव्य लॉग किया वह यही बॉक्स है, और पैकेट वहाँ तक जाते हैं जहाँ यह फ़ॉरवर्ड करे। तीन जोड़ दीजिए और दूर वाला सिरा तीन पाइप दूर है, और हर hop का फ़ायरवॉल अगले तक बस एक साफ़-सुथरा लोकल कनेक्शन देखता है। Ncat यही काम एक प्रोसेस में करेगा, हर आने वाले क्लाइंट के लिए आगे का कनेक्शन exec करके:\nncat -l 7000 --keep-open --sh-exec \u0026#39;ncat farend.example.net 7100\u0026#39; वही आकार, कम पुर्ज़े: listener का सॉकेट exec किए गए ncat के सॉकेट से उस पाइप से जुड़ता है जो shell उनके बीच लगाता है। तीन जोड़ दीजिए और टनल तीन नेटवर्क पार करता है, हर एक पर खत्म होकर फिर से शुरू होता है, और हर hop का फ़ायरवॉल अगले तक एक साफ़-सुथरा लोकल कनेक्शन लॉग करता है और उसके आगे कुछ नहीं।\nपूरी तरकीब यही है, और इसीलिए बॉर्डर लॉग किसी गंतव्य का सबूत नहीं है। हर relay उससे पहले वाले बॉक्स के लिए, जहाँ तक वह बता सकता है, दूर वाला सिरा है, और असली दूसरा सिरा उतने पाइप दूर है जितनों पर कोई नज़र नहीं रख रहा था।\nअब उन relay को ऐसी मशीनों पर रखिए जो अटैकर की नहीं हैं।\ncompromised होस्ट के पार जुड़े relay एंडपॉइंट को धो देते हैं हर hop किसी और की मशीन है, और हर मालिक बस बीच देखता है अटैकर अकेला बॉक्स जो उसका अपना है relay 1 किसी और फ़र्म का नेटवर्क relay 2 हाईजैक किया VPS relay 3 एक होम राउटर गंतव्य जहाँ जाना था देखता है: 1←→2 देखता है: 2←→3 देखता है: 3←→गंतव्य कोई hop अपने दो पड़ोसियों से आगे नहीं देख सकता। न शुरुआत, न मंज़िल, बस बीच। ट्रैफ़िक दूसरों के सिस्टम की कतार से धुलकर निकलता है, हर एक अटैकर के नियंत्रण में वही दो-सॉकेट-और-एक-पाइप वाला relay चला रहा है। इसीलिए compromised होस्ट का आउटबाउंड अक्सर अटैकर तक नहीं, किसी और शिकार तक ले जाता है: बीस साल का C2। हर hop एक compromised होस्ट है (किसी और फ़र्म का बॉक्स, हाईजैक किया VPS, किसी का होम राउटर) जो अटैकर के command and control के तहत वही दो-सॉकेट-और-एक-पाइप वाला relay चला रहा है। कोई hop अपने दो पड़ोसियों से आगे नहीं देख सकता: relay 2 का मालिक relay 1 से एक कनेक्शन और relay 3 तक एक कनेक्शन देखता है, और कुछ नहीं। ट्रैफ़िक दूसरों के सिस्टम की एक कतार से धुलकर निकलता है, इसीलिए compromised होस्ट का आउटबाउंड अक्सर अटैकर तक नहीं, किसी और शिकार तक ले जाता है। उस चेन पर हर मालिक बस पिछले hop से अगले hop तक एक कनेक्शन देखता है: न शुरुआत, न मंज़िल, बस बीच। यह कोई नया विचार नहीं जो मैं किसी को थमा रहा हूँ। pivot chain और C2 नेटवर्क बीस साल से ऐसे ही काम करते आए हैं, और इसीलिए compromised होस्ट का आउटबाउंड ट्रैफ़िक अक्सर अटैकर तक नहीं, किसी और शिकार तक ले जाता है। आपके लॉग दिखाते हैं कि आपने किसी डेटा सेंटर में कहीं एक बॉक्स से बात की। किसका, और वह आगे किसे फ़ॉरवर्ड करता है, यह उनमें कभी था ही नहीं।\nबचाव की तरफ़ से इसका वज़न एक लाइन है: जिस गंतव्य को आपने पहले से सीमित नहीं किया, उसका न आप पता लगा सकते हैं, न उस पर भरोसा कर सकते हैं। जब तक ट्रैफ़िक बाहर जा रहा होता है, जिस एड्रेस पर वह जाता है वह आपको लगभग कुछ नहीं बताता, क्योंकि वह किसी और की मशीन पर एक relay है और असली एंडपॉइंट उसके पीछे धुलकर छिपा है।\nलिंक कभी प्रोडक्ट था ही नहीं इसे खोलकर अलग करने के बाद जो बात मुझे खटकती है वह यह कि इसमें कितना कम नया है और कितना ज़्यादा बेचा जाता है।\nRFC 1661 1994 का है। pppd तीस साल से हर Linux डिस्ट्रीब्यूशन में है, kernel मॉड्यूल एक डायरेक्टरी में आठ फ़ाइलें हैं, और VPN को VPN बनाने वाली पूरी चीज़ (एक वर्चुअल इंटरफ़ेस, एक नेगोशिएट किया लिंक, एक एन्क्रिप्टेड कैरियर, एक रूट) चार प्रोग्राम और एक सर्टिफ़िकेट है। इसमें से कुछ भी मुश्किल या गुप्त नहीं। उन्होंने हर बाइट डॉक्यूमेंट किया और मुफ़्त दे दिया, और आपके और उसके बीच एक पूरी इंडस्ट्री खड़ी हो गई जो वही चार पुर्ज़े एक डिब्बे में बेचती है, हर सीट के लाइसेंस और एक्सपायर होने वाले सपोर्ट कॉन्ट्रैक्ट के साथ। पुर्ज़े बेहतर नहीं हुए। बस लपेट दिए गए।\nयह इसे प्रोडक्शन में चलाने का तर्क नहीं है। मैंने अभी आपसे कहा कि मत चलाइए। यह इस बात का तर्क है कि आप जो डिब्बा खरीदते हैं उसमें क्या है यह जानिए, क्योंकि जिस दिन वेंडर लाइसेंसिंग बदलता है, खरीद लिया जाता है, या आपका मॉडल बंद कर देता है, उस दिन एक खराब तिमाही और एक खराब साल के बीच का फ़र्क यही होता है कि आपके यहाँ किसी को पता है या नहीं कि वह चीज़ किससे बनी थी।\nएक शाम निकालिए और पुर्ज़ों से टनल बनाइए। LCP को नेगोशिएट करते देखिए, लिंक तोड़िए और उसे वापस आते देखिए, सर्टिफ़िकेट हटाइए और देखिए क्या रुकता है। फिर अपने VPN वेंडर की datasheet दोबारा पढ़िए, और देखिए कि उसमें से कितना आप पहचानते हैं।\nवही शाम दूसरा आधा हिस्सा भी खरीद देती है। अगर आपके नेटवर्क से बाहर एक रूट किया हुआ लिंक चार इंस्टॉल किए प्रोग्राम और एक सर्टिफ़िकेट है, तो जिस इंसान को अभी आपके किसी बॉक्स पर root मिला है उसे इस बात से नहीं रोका जा सकता कि टनल बनाना कितना मुश्किल है। यह मुश्किल नहीं है। उसे सिर्फ़ इससे रोका जा सकता है कि उसके आने से पहले आपने क्या बाहर जाने की इजाज़त तय की थी। इसे एक बार बनाइए और आप egress को ऐसी चीज़ समझना बंद कर देंगे जिसे कोई प्रोडक्ट लागू करता है, और उसे एक ऐसे फ़ैसले की तरह सोचने लगेंगे जो आपने या तो लिया या नहीं लिया।\nइसमें जादू ज़्यादा नहीं है। ज़्यादातर यह 1994 है, ऊपर से रंग-रोगन, और 1994 में कोई बुराई नहीं। वह चलता था, डॉक्यूमेंटेड था, और आज भी चलता है।\nRFC 1661 — The Point-to-Point Protocol (PPP), 1994। लिंक, LCP, और उसके ऊपर बैठने वाले नेटवर्क कंट्रोल प्रोटोकॉल के परिवार को परिभाषित करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2637 — Point-to-Point Tunneling Protocol (PPTP), जो PPP को GRE के अंदर ढोता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3931 — Layer Two Tunneling Protocol version 3, उस प्रोटोकॉल का standards-track वंशज जो PPP को UDP के अंदर ढोता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\npppd(8) — PPP डेमन का manual page। pty, notty, local, passive, noipdefault, proxyarp, record, receive-all, LCP echo ऑप्शन, और asyncmap डिफ़ॉल्ट का स्रोत: “If no asyncmap option is given, the default is zero, so pppd will ask the peer not to escape any control characters.” यहाँ के उद्धरण ppp 2.5.1 पर man pppd से पढ़े गए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1662 — PPP in HDLC-like Framing। flag sequence, octet-stuffing का नियम और Async-Control-Character-Map: “Each frame begins and ends with a Flag Sequence, which is the binary sequence 01111110 (hexadecimal 0x7e).”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOlaf Titz, Why TCP Over TCP Is A Bad Idea — retransmission के एक के ऊपर एक चढ़ने की मानक व्याख्या, जो ठीक इसी बिल्ड से शुरू होती है। मूल URL अब यह लेख नहीं देता; यह Internet Archive का कैप्चर है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 5072 — IP Version 6 over PPP। IPV6CP और 64-bit इंटरफ़ेस आइडेंटिफ़ायर, IPCP से स्वतंत्र।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1332 — The PPP Internet Protocol Control Protocol (IPCP), जो लिंक के हर सिरे पर IPv4 एड्रेस नेगोशिएट करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1994 — PPP Challenge Handshake Authentication Protocol (CHAP)। पीयर की पहचान साबित करता है; कुछ भी एन्क्रिप्ट नहीं करता।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3079 — Deriving Keys for use with Microsoft Point-to-Point Encryption (MPPE)। MS-CHAP एक्सचेंज से key किया गया RC4 ढाँचा, और वजह कि PPTP अब कोई जीवित विकल्प नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNcat Users\u0026rsquo; Guide — connecting through a proxy — HTTP CONNECT और SOCKS 4/5 के लिए --proxy और --proxy-type, ताकि TLS कैरियर प्रॉक्सी पर खत्म हो, टनल के दूर वाले सिरे पर नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNcat Users\u0026rsquo; Guide — --ssl, --ssl-verify और --ssl-trustfile ऑप्शन, और listen व UDP मोड। यहाँ टेस्ट किया गया वर्ज़न: Ncat 7.92।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nUniversal TUN/TAP device driver — /dev/net/tun, TUNSETIFF, और tun व tap के फ़र्क पर kernel का अपना डॉक्यूमेंटेशन।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPEP 784 — Adding Zstandard to the standard library, इसीलिए Python 3.14 पर compression.zstd के लिए कोई पैकेज नहीं चाहिए। यहाँ Python 3.14.7 और zstd 1.5.7 पर मापा गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nzstd(1) — --train मोड और --maxdict, वह dictionary बनाने के लिए जो दोनों सिरों को लोड करनी होती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7457 — Summarizing Known Attacks on TLS and DTLS, जो CRIME और compression-before-encryption वाले length leak के सामान्य आकार को कवर करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenVPN — the VORACLE attack — वही लीक, उस VPN के खिलाफ़ जो एन्क्रिप्ट करने से पहले कम्प्रेस करता है, और वजह कि OpenVPN अब कम्प्रेशन के खिलाफ़ सलाह देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/networking/a-vpn-out-of-parts-and-what-egress-really-is/","summary":"VPN दो काम है: एक जो वर्चुअल लिंक बनाता है, और एक जो बाइट्स ढोता है। PPP 1994 से पहला काम कर रहा है और उसे फ़र्क नहीं पड़ता कि दूसरा क्या है, इसीलिए PPTP, L2TP और आपकी हर डायल-अप लाइन अलग-अलग कैरियर पर एक ही प्रोटोकॉल है। Netcat एक कैरियर है। यह पोस्ट इसे दोनों तरीकों से बनाती है। पहले pppd: pty ऑप्शन और वह pseudo-terminal के साथ क्या करता है, TCP वाला वर्ज़न जो हर कोई पहले आज़माता है, स्ट्रीम प्रोटोकॉल को TCP के अंदर चलाना लॉस में क्यों पिघल जाता है, UDP वाला वर्ज़न जो इस्तेमाल करना चाहिए, async HDLC फ़्रेमिंग और ACCM जो तय करता है कि कितनी बैंडविड्थ कंट्रोल कैरेक्टर एस्केप करने में जाती है, एड्रेसिंग, रूटिंग और IPV6CP, और कैरियर बिना बताए मर जाए तो लिंक को ज़िंदा रखना। फिर बिना PPP के वही टनल: एक tap डिवाइस, UDP पर हर फ़्रेम का एक datagram, TCP पर वह length prefix जो आपको खुद बनाना पड़ता है, tun बनाम tap, और ब्रिजिंग। फिर वह हिस्सा जिसका netcat के पास कोई जवाब नहीं: ncat, stunnel और openssl से कैरियर को TLS में लपेटना, और socat से DTLS में, जो असल में चाहिए वाला रूप है। यह कभी सच में सही टूल नहीं है, और यही बात है: यह दिखाता है कि जब अटैकर के पास आपके नेटवर्क के अंदर root हो और आउटबाउंड एक्सेस डिफ़ॉल्ट रूप से ब्लॉक न हो तो egress कैसे बर्ताव करता है, और बॉर्डर पर default-deny ही वह अकेला कंट्रोल क्यों है जो कभी असली था।","title":"पुर्ज़ों से बना VPN: PPP, Tap डिवाइस और Netcat"},{"content":"आपके फ़ायरवॉल पर एक फ़ीचर है जो आपके पैकेट के अंदर पढ़ता है, टेक्स्ट में लिखा एक IP पता और पोर्ट नंबर ढूँढता है, और उनके लिए एक इनबाउंड छेद खोल देता है। कोई नियम नहीं। कोई change request नहीं। कोई ऐसी log entry नहीं जिसे आप कभी देखेंगे। जिस किट में यह होता है, उनमें ज़्यादातर पर यह डिफ़ॉल्ट रूप से चालू है, और लगभग पच्चीस साल से है। इस बीच जिस उद्योग ने इसे वहाँ रखा, उसने पिछले बीस साल चुपचाप यह नतीजा निकालने में बिताए कि इसे बंद होना चाहिए: standards दस्तावेज़ों में, kernel defaults में, और ब्राउज़र के चार अलग-अलग आपातकालीन patches में।\nइसे प्रोटोकॉल हेल्पर कहते हैं, या Application Level Gateway, ALG, session helper, fixup, inspection engine, conntrack helper। चीज़ एक ही है। यह इसलिए है क्योंकि NAT ने उन कुछ प्रोटोकॉल को तोड़ दिया जो अपने ही payload में पते लिखते हैं, और किसी ने तय किया कि सबसे कम बुरा इलाज यह है कि translator को रास्ते में वह payload पढ़ना और फिर से लिखना सिखा दिया जाए।\nयह वह हिस्सा है जिस पर आपको रुकना चाहिए।\nहेल्पर यह नहीं बता सकता कि टेक्स्ट किसने लिखा। वह एक कनेक्शन से bytes पढ़ता है और उन पर तुरंत अमल करता है, किसी से कुछ पूछे बिना। उसके पास यह जानने का कोई तरीका नहीं कि string PORT 192,168,1,29,4,0 किसी असली FTP क्लाइंट ने असली transfer करते हुए बनाई, या किसी वेब पेज के छिपे फ़ॉर्म ने जिसे आपके यूज़र ने गलती से खोल दिया। wire पर दोनों एक जैसे दिखते हैं, क्योंकि wire पर वे हैं ही एक जैसे। तो इंटरनेट पर कोई अजनबी, जो आपके नेटवर्क पर किसी भी चीज़ से सही bytes निकलवा सके, चाहे ब्राउज़र हो, चैट क्लाइंट हो, या कुछ भी जो कहा हुआ भेज दे, वह यह चुन लेता है कि आपका फ़ायरवॉल कौन-सा इनबाउंड पोर्ट खोले, और किसके लिए।\nयह किसी एक vendor के parser का bug नहीं है। फ़ीचर यही करता है: एक सुरक्षा डिवाइस अविश्वसनीय डेटा से configuration के निर्देश लेता है और उन्हें तुरंत लागू कर देता है। bug reports और CVEs उसी ढाँचे के ऊपर की बारीकियाँ हैं।\nSamy Kamkar ने जनवरी 2010 में ब्राउज़र वाला रूप दिखाया1, अक्टूबर 2020 में उससे कहीं बेहतर रूप2, और तीन महीने बाद Armis ने उसे इतना बढ़ाया कि खुलने वाला पोर्ट उस मशीन पर होना भी ज़रूरी नहीं जिसने क्लिक किया: वह आपके प्रिंटर पर, आपके कैमरे पर, या दो VLAN दूर किसी logic controller पर हो सकता है3। बीच में IETF ने लिख दिया कि इन्हें डिफ़ॉल्ट रूप से बंद रहना चाहिए4, Linux ने इन्हें kernel में बंद कर दिया5, और ब्राउज़र vendors ने blocked ports की एक सूची भेजी जो लगभग लाइन-दर-लाइन Linux conntrack modules की directory listing जैसी पढ़ती है6। इनमें से हर एक इलाज कहीं और लगाया गया, क्योंकि जिस चीज़ को सच में ठीक करना था वह एक ऐसे बॉक्स में बैठी है जिसे कोई patch नहीं करने वाला।\nमैं इस नतीजे पर पहुँचा हूँ कि प्रोटोकॉल हेल्पर हर जगह डिफ़ॉल्ट रूप से बंद होने चाहिए, और जिस भी नेटवर्क की ज़िम्मेदारी आपकी है उस पर असल में बंद होने चाहिए। tune किए हुए नहीं। पहले कदम के तौर पर भरोसेमंद subnets तक सीमित नहीं। बंद, और जो दो-तीन सच्चे अपवाद हैं वे लिखकर और तारीख डालकर दर्ज हों, ठीक वैसे जैसे आप किसी भी दूसरे इनबाउंड नियम को दर्ज करते, क्योंकि वे वही हैं।\nआगे तंत्र है, हमले उसी क्रम में जिसमें वे खोजे गए, compliance की स्थिति (UK में यह एक ऐसे नियंत्रण में सीधी विफलता है जो शायद आपके पास पहले से है), और इसे ठीक करने के कमांड।\nएक अजनबी को इससे क्या मिलता है नतीजे से शुरू कीजिए, क्योंकि बिल देख लेने के बाद तंत्र की परवाह करना आसान हो जाता है। कोई एक लिंक खोलता है। उसका योगदान बस इतना है। पेज JavaScript चलाता है जो हमलावर के सर्वर से बात करता है, और वह सर्वर बातचीत को आकार देता है, उसमें padding डालता है, उसे नापता है, उसके कुछ हिस्सों को acknowledge करता है और कुछ को नहीं, जब तक कि एक segment आपके फ़ायरवॉल पर ठीक किसी VoIP कॉल के पहले मैसेज जैसा न पहुँचे। आपका फ़ायरवॉल उस पर भरोसा कर लेता है, क्योंकि भरोसा करना ही फ़ीचर है। वह एक इनबाउंड mapping बनाता है, और हमलावर सीधे अंदर कनेक्ट कर लेता है।\n2020 वाले रूप में पोर्ट उसी मशीन पर खुलता है जिसने क्लिक किया, तो उस होस्ट पर bound हर सेवा इंटरनेट से तब तक पहुँच में रहती है जब तक mapping ज़िंदा है2। फ़ाइल शेयरिंग। वह remote desktop जिसे कोई सुनता हुआ छोड़ना नहीं चाहता था। Fisher-Price OS (Windows) पर Armis ने सीधी बात कही: फ़ाइल-शेयरिंग पोर्ट तक पहुँच जाइए और आप उस रास्ते से एक unpatched होस्ट दूर हैं जो WannaCry ने लिया था3।\n2021 वाला रूप उससे बुरा है, और यही वह हिस्सा है जिससे आपका फ़ैसला हो जाना चाहिए। क्योंकि H.323 हेल्पर call forwarding संभालता है, एक मैसेज कनेक्शन के किसी भी सिरे की जगह एक तीसरा पता बता सकता है। तब हमलावर क्लिक करने वाली मशीन तक सीमित नहीं रहता और आपकी अंदरूनी range में घूम सकता है, हर पते पर एक पोर्ट खोलकर जो जवाब दे उसे पढ़ सकता है। Armis ने ठीक यही दिखाया: एक range में पोर्ट 80, banners इकट्ठे किए, एक निशाना चुना, फिर प्रिंटर का raw print पोर्ट खोला और उस पर एक job भेज दिया। उनके दूसरे प्रदर्शन में एक logic controller तक उसके बिना-authentication वाले management पोर्ट पर पहुँचा गया और उसका प्रोग्राम फिर से लिख दिया गया3।\nइनमें से किसी भी डिवाइस पर कोई vulnerability exploit नहीं की गई। सब ठीक वैसे काम कर रहे थे जैसे करना चाहिए, और जो एकमात्र चीज़ फ़ेल हुई वह boundary थी, जो ठीक वही करके फ़ेल हुई जिसके लिए उसे configure किया गया था। यह भी सोचिए कि उस boundary के अंदर कौन है। सिर्फ़ आपका स्टाफ़ नहीं: guest network पर कोई मेहमान, किसी contractor का लैपटॉप, ब्राउज़र वाला कोई भी। हमले को न credentials चाहिए, न कोई पैर जमाने की जगह, न malware, क्योंकि ब्राउज़र ही पहुँचाने का ज़रिया है और वह पहले से installed है और पहले से भरोसेमंद है।\nफ़ायरवॉल इसलिए होता है कि बाहर की कोई चीज़ अंदर की किसी चीज़ से बातचीत शुरू न करे, जब तक आपने न कहा हो। हेल्पर वह अपवाद है जो एक पैकेट में लिखी string के भरोसे दिया जाता है।\nप्रोटोकॉल हेल्पर असल में क्या है एक सादा NAT एक सीधी-सादी, ईमानदार चीज़ है। पैकेट आता है, वह header में source पता और पोर्ट बदल देता है, एक पंक्ति लिख लेता है ताकि जवाब को वापस मोड़ा जा सके, और उसे आगे भेज देता है। वह transport header के नीचे कभी नहीं देखता, और उसे न पता है न परवाह कि अंदर के bytes कोई वेब request हैं, कोई database query, या कुत्ते की फ़ोटो।\nयह तब तक चलता है जब तक कोई प्रोटोकॉल अपने ही payload में पता नहीं लिखता। FTP ऐसा करता है, command stream में सादे टेक्स्ट में: इस पते पर, इस पोर्ट पर मुझसे वापस कनेक्ट करो। SIP इसे Via, Contact और SDP fields में करता है, H.323 करता है, और IRC direct transfers के लिए करता है। ये सब तब डिज़ाइन हुए जब होस्ट का पता ही उसका पता था और हर मशीन हर दूसरी तक पहुँच सकती थी, और उस मान्यता में यह समझदारी की बात है। रास्ते में एक translator रख दीजिए और payload में लिखा पता झूठ बन जाता है।\nसादा translator header पढ़ता है। हेल्पर payload पढ़ता है और जो मिले उस पर छेद खोलता है। रास्ते में एक ही जगह। उनमें से एक लिफ़ाफ़े के साथ चिट्ठी भी पढ़ता है। सादा translator प्रोटोकॉल हेल्पर आता हुआ पैकेट [IP hdr 192.168.1.29:51000] [ payload ] आता हुआ पैकेट [IP hdr 192.168.1.29:51000] [ PORT 192,168,1,29,4,0 ] यह क्या करता है Header में source पता और पोर्ट बदलता है Checksums ठीक करता है एक पंक्ति लिखता है ताकि जवाब वापस मोड़ा जा सके आगे भेजता है यह क्या करता है यह सब, और फिर payload पढ़ता है और उसमें पता और पोर्ट पाता है उन्हें भी बदलता है, और sequence numbers खिसकाता है दूसरी पंक्ति लिखता है: यह इनबाउंड कनेक्शन आने दो इसकी टेबलें सिर्फ़ translation टेबल। एक पंक्ति, एक flow, उलटने लायक। Payload की कोई चीज़ पंक्ति नहीं जोड़ सकती। इसकी टेबलें Translation टेबल, और एक expectation टेबल। दूसरी की हर पंक्ति एक इनबाउंड फ़ायरवॉल नियम है। दूसरी टेबल ही पूरा विषय है। वह कहती है: जब इस pattern से मेल खाता कनेक्शन बाहर से आए, उसे जाने दो। किसी ने लिखी नहीं, किसी ने मंज़ूर नहीं की। रास्ते में एक ही जगह दो डिवाइस। सादा translator header बदलता है और payload कभी नहीं पढ़ता। हेल्पर payload पढ़ता है, वहाँ मिला पता बदलता है, और एक दूसरी टेबल में एक पंक्ति जोड़ता है जो बाद में एक इनबाउंड कनेक्शन की अनुमति देती है। यह दूसरी टेबल ही इस पोस्ट का विषय है। तो हेल्पर बनाया गया। वह payload पढ़ता है, पता ढूँढता है, उसे public पते में बदलता है, और फिर वह काम करता है जिसे सब नज़रअंदाज़ कर देते हैं: वह उस इनबाउंड कनेक्शन की अनुमति देने वाला नियम बनाता है जिसका payload ने अभी वर्णन किया। Netfilter उस नियम को expectation कहता है। Cisco उसे pinhole, या NAT door कहता है7। Palo Alto उसे dynamic NAT pinhole कहता है8। Juniper उसे gate कहता है। शब्द अलग, चीज़ एक: boundary में किया गया एक छेद, एक पैकेट से पढ़ी गई किसी चीज़ के भरोसे।\nIETF ने इस पैटर्न का नाम इनमें से ज़्यादातर products के आने से पहले रख दिया था। RFC 2663 कहता है कि ALG एक “application specific translation agent” है जो “may interact with NAT to set up state [\u0026hellip;] modify application specific payload and perform whatever else is necessary to get the application running across disparate address realms”9। इसे किसी विरोधी को ध्यान में रखकर पढ़िए: whatever else is necessary, जिसे चलाता है application specific payload। और फ़रवरी 2002 तक IETF की middlebox taxonomy इस तंत्र को वही कह रही थी जो यह है, यह नोट करते हुए कि कुछ ALGs fragmentation की समस्याएँ पैदा करते हैं “although in this case the problem is arguably the result of a deliberate layer violation (e.g., mucking with the application data stream of an FTP control connection by twiddling TCP segments on the fly)”10।\nजानबूझकर किया गया layer violation। चलते-चलते TCP segments से छेड़छाड़। यही तंत्र है, जिसका नाम उन लोगों ने रखा जिन्होंने चौबीस साल पहले इसे सूचीबद्ध किया, और यहाँ का हर हमला सीधे इसी से होकर गुज़रता है।\nExpectation ही पूरी समस्या है Expectation एक पहले से मंज़ूर कनेक्शन है: source पता, source पोर्ट, destination पता, destination पोर्ट और प्रोटोकॉल का एक tuple, जिसके कुछ fields भरे हैं और कुछ wildcard छोड़े गए हैं, साथ में एक timer। जब मेल खाता पैकेट आता है, फ़ायरवॉल उसे नए इनबाउंड कनेक्शन की तरह नहीं बल्कि किसी पहले से अनुमत flow से जुड़ा मानता है, उसे जाने देता है, और expectation को खर्च कर देता है। एक स्वस्थ सिस्टम पर इनकी सूची खाली रहती है, और बात यही है: expectations दुर्लभ, थोड़ी देर की, और किसी ऐसी चीज़ से चलने वाली होनी चाहिए जो अंदर के होस्ट ने सच में माँगी हो।\nExpectation खाली जगहों वाला एक इनबाउंड नियम है, और खाली जगहें ही सुरक्षा मॉडल हैं एक object, पाँच fields, और एक timer। कौन-से fields खाली हैं, यही पूरा सुरक्षा मॉडल है। expect proto=tcp src=\u0026lt;कौन कनेक्ट करे\u0026gt; sport=\u0026lt;कोई भी\u0026gt; dst=\u0026lt;कहाँ पहुँचे\u0026gt; dport=\u0026lt;कौन-सा पोर्ट\u0026gt; timeout=300 हेल्पर कौन कनेक्ट कर सकता है कहाँ पहुँचता है कौन-सा पोर्ट सबसे बुरी स्थिति FTP सर्वर, बँधा हुआ क्लाइंट, बँधा हुआ payload से एक होस्ट का कोई भी पोर्ट IRC कोई भी पता क्लाइंट, बँधा हुआ payload से कोई भी पोर्ट, किसी से भी H.323 कोई भी पता payload से payload से किसी भी होस्ट का कोई भी पोर्ट नीला: फ़ायरवॉल दिखते कनेक्शन से तय करता है।\u0026#160;\u0026#160;सुनहरा: payload देता है।\u0026#160;\u0026#160;गुलाबी: डिज़ाइन से खुला छोड़ा गया। 1. कौन-से fields wildcard हैं? Wildcard source का मतलब है कि छेद उस बातचीत के दूसरे सिरे के लिए आरक्षित नहीं जिसने उसे बनाया। जो भी आपके बाहरी interface तक पहले पहुँचे, वह ले सकता है। IRC हेल्पर को यह करना पड़ता है, क्योंकि प्रोटोकॉल सच में नहीं जान सकता कि कौन कनेक्ट करेगा, जो ऐसे प्रोटोकॉल का सही वर्णन है जिसकी मदद होनी ही नहीं चाहिए। 2. मान किसने दिए? फ़ायरवॉल ने नहीं। Payload ने, और payload बातचीत के उस सिरे ने लिखा जिसे हेल्पर उस समय पढ़ रहा था। उस वाक्य में कहीं भी authentication नहीं है। 3. छेद किसकी ओर हो सकता है? ज़्यादातर हेल्परों पर, उसे बनाने वाला होस्ट। H.323 पर, payload जो कहे, क्योंकि forwarding तीसरे पक्ष का नाम लेती है। Expectation एक फ़ायरवॉल नियम है जिसके कुछ fields खाली छोड़े गए हैं और जिस पर एक timer लगा है। तीन सवाल तय करते हैं कि वह सुरक्षित है या नहीं, और किसी भी प्लेटफ़ॉर्म पर किसी भी हेल्पर से पूछने के लिए यही तीन सही सवाल हैं। इनमें से दो जवाब लोगों की उम्मीद से बुरे हैं। मान फ़ायरवॉल से नहीं, payload से आते हैं, तो वे बातचीत के उस सिरे से आते हैं जिसे हेल्पर उस समय पढ़ रहा था। और IRC हेल्पर पर source पता डिज़ाइन से ही wildcard है, क्योंकि प्रोटोकॉल यह नहीं जान सकता कि कौन कनेक्ट करेगा: वह “creates expectations whose destination address is the client address and source address is any address”11।\nयह वाक्य आगे साथ ले चलिए। Expectation एक इनबाउंड फ़ायरवॉल नियम है, जिसे line rate पर, एक अविश्वसनीय पक्ष बनाता है, और इसका कोई रिकॉर्ड नहीं होता कि किसने माँगा या क्यों। इसे Cyber Essentials वाले हिस्से तक याद रखिए, क्योंकि वहाँ का पूरा तर्क यही है।\nजैसा डिज़ाइन हुआ: FTP कहता है PORT, और फ़ायरवॉल मान लेता है सबसे सरल हेल्पर लीजिए और उसे सही तरह काम करते देखिए, क्योंकि हमला वही क्रम है जिसमें बस एक भागीदार बदल दिया गया है। Active FTP दो कनेक्शन इस्तेमाल करता है। क्लाइंट पोर्ट 21 पर सर्वर से एक control कनेक्शन खोलता है और उसे सादे ASCII में कमांड देता है, और जब transfer चाहिए तो वह एक listening socket खोलता है और एक PORT कमांड भेजता है जिसमें वापस कनेक्ट करने का पता और पोर्ट लिखा होता है, और तब सर्वर इनबाउंड कनेक्ट करता है। यही specification वाला प्रोटोकॉल है, और 1985 से ऐसे ही चलता आया है। wire पर यह छह संख्याएँ हैं, चार पते के लिए और दो पोर्ट के लिए, बड़ा byte पहले:\nPORT 192,168,1,29,4,0 यह 192.168.1.29 है, पोर्ट 1024, क्योंकि 4 × 256 + 0 = 1024।\nहेल्पर से होकर Active FTP: चार कदम, सब सही, और सिर्फ़ दो चीज़ें जाँची गईं Active FTP, ठीक specification के मुताबिक़, और छेद खुलने से पहले क्या जाँचा गया FTP क्लाइंट 192.168.1.29 फ़ायरवॉल + हेल्पर 203.0.113.10 FTP सर्वर 198.51.100.7 1\u0026#160;\u0026#160;पोर्ट 21 की ओर बाहर जाता control कनेक्शन: अनुमत, अंदर से शुरू हुआ 2\u0026#160;\u0026#160;क्लाइंट सुनता है, फिर stream में अपना पता लिखता है PORT 192,168,1,29,4,0 3\u0026#160;\u0026#160;हेल्पर अमल करता है पता बदलता है, expectation बनाता है PORT 203,0,113,10,4,0 expect src=198.51.100.7 dst=192.168.1.29 dport=1024 4\u0026#160;\u0026#160;सर्वर अंदर कनेक्ट करता है, expectation मेल खाती है, डेटा बहता है देखिए कदम चार संभव होने से पहले फ़ायरवॉल ने क्या जाँचा। कि bytes पोर्ट 21 के कनेक्शन पर थे। कि वे चार अक्षरों PORT से शुरू होते थे। बस इतना ही, क्योंकि जाँचने को बस इतना है। FTP में न signature है, न session key, न test करने को कुछ और। हेल्पर से होकर Active FTP, हर कदम पर सही। देखिए छेद खोलने से पहले फ़ायरवॉल ने क्या जाँचा: कि bytes पोर्ट 21 पर थे और PORT से शुरू होते थे। और कुछ नहीं, क्योंकि जाँचने को और कुछ है ही नहीं। हेल्पर उस stream को देखता है, PORT पहचानता है, पते को private से public में बदलता है और sequence numbers ठीक करता है क्योंकि string की लंबाई बदल गई, और एक expectation बनाता है जो बताए गए पोर्ट पर सर्वर के इनबाउंड कनेक्शन की अनुमति देती है। सच में उपयोगी, 1994 की मजबूरियों को देखते हुए पूरी तरह उचित, और हर कदम पर सही।\nऔर कुछ नहीं जाँचा गया, क्योंकि जाँचने को और कुछ है ही नहीं। FTP के पास देने को कोई signature नहीं, कोई session key नहीं, किसी तरह का authentication नहीं, और हेल्पर एक ऐसी stream पढ़ रहा है जिसका वह पक्ष ही नहीं है।\nउस code में एक और चीज़ है, और वह लेखकों की अपने लिए लिखी चेतावनी है। अगर PORT कमांड में लिखा पता क्लाइंट का अपना नहीं है, यानी क्लाइंट सर्वर से कहीं और कनेक्ट करने को कहे, तो Linux हेल्पर डिफ़ॉल्ट रूप से मना कर देता है, और source में टिप्पणी बताती है क्यों: “DMZ machines opening holes to internal networks, or the packet filter itself”12। loose module parameter सेट कीजिए और वह इनकार चला जाता है। जिन लोगों ने हेल्पर लिखा उन्हें ठीक पता था कि उससे क्या करवाया जा सकता है। उन्होंने सुरक्षित डिफ़ॉल्ट और एक switch भेजा, और पच्चीस साल बाद वह switch अब भी वहीं है।\nजैसा डिज़ाइन नहीं हुआ: वही bytes, एक वेब पेज से हेल्पर एक byte stream पढ़ता है और एक pattern मिलाता है। वह यह जाँचता नहीं, और ढाँचे से ही नहीं जाँच सकता, कि दूसरे सिरे पर वही क्लाइंट है जिसका वह होने का दिखावा कर रहा है। Samy Kamkar ने जनवरी 2010 में इसका नतीजा छापा और उसे NAT Pinning कहा1। तरीका शर्मनाक हद तक छोटा है: एक वेब पेज पर एक फ़ॉर्म रखिए, उसे पोर्ट 6667 पर हमलावर के सर्वर की ओर कीजिए, और body ऐसे रखिए कि उसमें एक direct-chat request हो।\nPRIVMSG samy :^ADCC CHAT samy 3325256705 22^A ब्राउज़र उसे submit कर देता है, यह मानते हुए कि वह एक HTTP POST कर रहा है। राउटर का IRC हेल्पर, पोर्ट 6667 पर एक कनेक्शन देखते हुए, एक पते और पोर्ट के साथ DCC CHAT गुज़रते देखता है और वही करता है जिसके लिए बना है। वहाँ पता 198.51.100.1 है, जिसे एक ही decimal संख्या के रूप में लिखा गया है, क्योंकि प्रोटोकॉल उसे ऐसे ही encode करता है, और पोर्ट 22 है; उस string में कुछ भी पीड़ित ने नहीं चुना। FTP वाला रूप वही विचार है, पोर्ट 21 की ओर, बस passive-mode वाली response line के साथ1।\nकोई cross-site scripting नहीं। सामान्य अर्थ में कोई request forgery नहीं। ब्राउज़र में कोई vulnerability नहीं। ब्राउज़र ने वही किया जो ब्राउज़र करते हैं, फ़ायरवॉल ने वही किया जिसके लिए उसे configure किया गया था, और नतीजा हमलावर के लिए एक port forward है।\nदो कॉलम जिन्हें हेल्पर अलग नहीं कर सकता, क्योंकि wire पर अलग करने को कुछ है ही नहीं डिज़ाइन वाला प्रोटोकॉल, और एक वेब पेज। हेल्पर को एक ही तस्वीर दिखती है। एक असली क्लाइंट पेज पर एक छिपा फ़ॉर्म शुरुआत कैसे होती है कोई FTP या IRC क्लाइंट खोलकर कनेक्ट करता है क्लाइंट socket खोलता है और stream में उसे बताता है PORT 192,168,1,29,4,0 शुरुआत कैसे होती है कोई एक पेज खोलता है। उसका योगदान बस इतना है। फ़ॉर्म उसी पोर्ट पर हमलावर के सर्वर को post करता है PORT 192,168,1,29,4,0 हेल्पर क्या जाँचता है destination पोर्ट मेल खाता है\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ keyword data की शुरुआत में\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ syntax parse होता है\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ पता और पोर्ट दिए गए हैं\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ हेल्पर क्या जाँचता है destination पोर्ट मेल खाता है\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ keyword data की शुरुआत में\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ syntax parse होता है\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ पता और पोर्ट दिए गए हैं\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;\u0026#160;हाँ दोनों कॉलम में एक जैसा, एक इनबाउंड पोर्ट खुलता है फ़र्क़ वे तीन चीज़ें हैं जो हेल्पर देख नहीं सकता। क्या कोई क्लाइंट शामिल था। क्या यूज़र का इरादा था। पता और पोर्ट किसने चुना। इनमें से कोई भी wire पर निशान नहीं छोड़ता, तो parser में कितनी भी सावधानी उन्हें वापस नहीं लाती। दोनों कॉलम पूरी तरह ठीक बने हैं। वही हेल्पर, वही pattern match, वही expectation, और तस्वीर में कहीं भी कोई FTP या IRC क्लाइंट नहीं। हेल्पर की हर जाँच दोनों कॉलम में एक जैसी पूरी होती है, क्योंकि wire पर ढूँढने को कोई फ़र्क़ है ही नहीं। वह 2010 था। सोलह साल पहले। ब्राउज़र vendors ने IRC पोर्ट अपनी blocked सूची में डाल दिए, जिससे वह ख़ास दरवाज़ा बंद हो गया और जिस कमरे में वह खुलता था वह ठीक वैसा ही रहा।\nइस बात पर सीधे रहिए, क्योंकि यह vendor नामों और CVE नंबरों के नीचे खो जाती है। हमले हेल्परों की किसी खामी का फ़ायदा नहीं उठाते। वे हेल्परों का सही इस्तेमाल करते हैं। हर पैकेट ठीक बना हुआ है और हर जाँच ईमानदारी से पास होती है। फ़ीचर अपना काम कर रहा है, और उसका काम ही समस्या है।\nBytes को वहाँ बिठाना जहाँ हेल्पर उन्हें पढ़ेगा NAT Pinning और कहीं ज़्यादा बुरी चीज़ के बीच एक असली रुकावट थी, और उसके पार जाने का तरीका यहाँ की सबसे चतुर चीज़ है। ज़्यादातर हेल्पर stream में कहीं भी pattern नहीं मिलाते: वे जाँचते हैं कि keyword पैकेट के data हिस्से की शुरुआत में बैठा हो, जैसा असली प्रोटोकॉल मैसेज दिखता है और HTTP body कभी नहीं दिखती, क्योंकि body ढेर सारे headers के बाद आती है जिन पर हमलावर का नियंत्रण नहीं। Samy kernel का अपना व्यवहार उद्धृत करते हैं: handler तब तक हट जाता है जब तक method data की शुरुआत में न हो2।\nतो हमलावर को चाहिए कि ब्राउज़र एक ऐसा segment निकाले जिसका पहला ही byte keyword हो। वे headers नहीं लिख सकते, लेकिन body लिख सकते हैं और उसे जितना चाहें उतना लंबा कर सकते हैं, जिससे समस्या गणित बन जाती है।\nSegment की सीमा तब तक खिसकाना जब तक keyword वहाँ न आ जाए जहाँ हेल्पर पढ़ता है हेल्पर segment का पहला byte पढ़ता है। तो हमलावर बदल देता है कि segments कहाँ टूटें। जैसे ब्राउज़र भेजता segment 1 POST / HTTP/1.1 Host: ... segment 2 ...headers... PORT 192,168,... segment 3 ...1,29,4,0 padding padding Keyword segment दो के बीच में है, तो हेल्पर उसे पार पढ़ जाता है और कुछ नहीं करता। जब हमलावर segment size तय कर दे, या stream का बस हिस्सा acknowledge करे segment 1 POST / HTTP/1.1 Host: ... segment 2 ...headers and padding... segment 3 PORT 192,168,1,29,4,0 Keyword अब segment का पहला byte है। हेल्पर उसे पढ़ता है और पोर्ट खोल देता है। दो लीवर, और कोई भी TCP पर हमला नहीं। हमलावर का सर्वर कनेक्शन का एक सिरा है, तो वह बताता है कि पीड़ित का stack कौन-सा maximum segment size इस्तेमाल करे, और तय करता है कि stream का कितना acknowledge करना है। हिस्सा acknowledge कीजिए और पीड़ित हमलावर के चुने offset से retransmit करता है। दोनों साधारण, standards के मुताबिक़ TCP हैं, जानबूझकर इस्तेमाल किए गए। Padding क्यों मायने रखती है। हेल्पर प्रोटोकॉल keyword तभी पढ़ता है जब वह segment का पहला byte हो, तो जिस हमलावर के पास सिर्फ़ body है उसे segment की सीमा तब तक खिसकानी पड़ती है जब तक वह वहाँ न आ जाए। दोनों लीवर साधारण TCP हैं, जानबूझकर इस्तेमाल किए गए। ब्राउज़र एक बड़ी request भेजता है जिसकी body में एक पहचानने लायक delimiter दबा होता है; हमलावर का सर्वर उसे sniff करता है, नापता है कि पहले कितने bytes headers के आए, और अब offset जानता है। फिर वह या तो एक segment size advertise करता है जो चाहे गए byte को सीमा पर रख दे, या एक आंशिक acknowledgement भेजता है ताकि पीड़ित ठीक वहीं से retransmit करे। Armis जोड़ते हैं कि उन acknowledgements में TCP window भी गढ़ी जा सकती है, “in order to fully control how the TCP stream is to be segmented”3। पूरी चाल यही है, और इसमें बस उस कनेक्शन का दूसरा सिरा इस्तेमाल होता है जो पीड़ित के अपने ब्राउज़र ने खोला।\nयह हाथ लग जाए तो ब्राउज़र आपके फ़ायरवॉल के अंदर की ओर तना हुआ एक packet generator है। उसे बस सही तीस bytes किसी segment की शुरुआत में रखने हैं।\n2021 के काम ने ज़्यादातर गणित छोड़ दिया। TCP पर एक ब्राउज़र relay कनेक्शन हमलावर के नियंत्रण वाला एक username field ले जाता है, जो जल्दी भेजा जाता है, और जिसमें newlines और null bytes चल जाते हैं। Armis ने एक capture दिखाया जिसमें वह field \\r\\nPORT 192,168,1,29,4,0\\r\\n है3। और बुरा यह कि उस रास्ते ने ब्राउज़र की blocked-port सूची देखी ही नहीं, तो जो एकमात्र बचाव उद्योग ने दो बार भेजा था उसे सीधे बायपास कर दिया गया।\nNAT Slipstreaming, शुरू से अंत तक टुकड़े जोड़िए और यह पूरा हमला है, क्रम से।\nक्लिक से इनबाउंड कनेक्शन तक छह कदम, जिनमें से कोई vulnerability नहीं छह कदम। चार साधारण वेब और TCP हैं। एक आपका फ़ायरवॉल है। एक हमलावर है। 1 पीड़ित एक पेज खोलता है एक विज्ञापन, किसी मैसेज का लिंक, कुछ भी। यूज़र की भागीदारी बस इतनी है। साधारण वेब 2 पेज अंदर का पता जान लेता है ब्राउज़र का media interface दे देता है, या आम gateway पतों की timing से पता चल जाता है। साधारण वेब 3 हमलावर रास्ता नापता है Marker वाली एक बहुत बड़ी request, और दूसरे सिरे पर packet capture, यह देखने को कि टूट कहाँ पड़ती है। साधारण TCP 4 पेज असली payload भेजता है Padding के साथ, ताकि प्रोटोकॉल keyword segment की सीमा पर पड़े, ठीक जैसा पिछला डायग्राम दिखाता है। साधारण TCP 5 आपका फ़ायरवॉल पोर्ट खोलता है हेल्पर मैसेज पहचानता है, उसमें का पता बदलता है, और expectation लिखता है। आपका फ़ायरवॉल 6 हमलावर अंदर कनेक्ट करता है आपके public पते पर, mapped पोर्ट पर। Expectation मेल खाती है और फ़ायरवॉल उसे अंदर भेज देता है। आपका फ़ायरवॉल पीड़ित की मशीन पर exploit हुई vulnerabilities गिनिए। एक भी नहीं। ब्राउज़र patched था। Operating system patched था। कुछ install नहीं हुआ और कोई credential इस्तेमाल नहीं हुआ। कुछ सेकंड, एक क्लिक, और जो एकमात्र हिस्सा मना कर सकता था वह वही था जो मना करने के लिए बना था। क्लिक से इनबाउंड कनेक्शन तक पूरी कड़ी। कदम एक से चार साधारण वेब और TCP व्यवहार हैं। कदम पाँच फ़ायरवॉल फ़ीचर है जो ठीक दस्तावेज़ के मुताबिक़ काम कर रहा है, और वही एकमात्र हिस्सा है जो मना कर सकता था। कुल समय: कुछ सेकंड। यूज़र की भागीदारी: एक क्लिक। पीड़ित की मशीन पर exploit की गई vulnerabilities: कोई नहीं।\nखुलासे की समय-रेखा अपने आप में सबूत है। Samy ने 31 अक्टूबर 2020 को छापा, और 6 जनवरी से 26 फ़रवरी 2021 के बीच Chrome, Edge, Safari और Firefox सबने बचाव भेज दिए3, जिन्हें CVE-2020-16043, CVE-2021-23961 और CVE-2021-1799 के रूप में दर्ज किया गया।\nचार ब्राउज़र vendors ने एक फ़ायरवॉल फ़ीचर के लिए आपातकालीन patches भेजे। Armis अपने शब्दों में बताते हैं क्यों: “While the underlying issue of this attack is the way NATs are implemented (in various ways in routers and firewalls, throughout numerous vendors and applications), the easiest and fastest way to mitigate was through a patch to browsers”3।\nयह इलाज नहीं है। यह चार दूसरे उद्योग हैं जो किसी और के दरवाज़े के चारों ओर रेत की बोरियाँ रख रहे हैं, क्योंकि दरवाज़ा ख़ुद कभी बदला नहीं जाने वाला था।\nH.323 call forwarding आपके नेटवर्क की किसी भी चीज़ की ओर इशारा करता है ज़्यादातर हेल्पर बिना इरादे के नुकसान को सीमित कर देते हैं। FTP हेल्पर expectation का destination उसी क्लाइंट से बाँध देता है जिसने उसे बनाया, तो हमलावर को ज़्यादा से ज़्यादा उस मशीन का एक पोर्ट मिलता है जिसने क्लिक किया। बुरा, पर झेला जा सकता है।\nH.323 तबाही है, और वजह एक टेलीफ़ोनी फ़ीचर है।\nफ़ोन सिस्टम को call forwarding देनी होती है, और forward की गई कॉल परिभाषा से ही ऐसे व्यक्ति को कॉल है जो लाइन पर नहीं है। तो signalling को एक तीसरा endpoint बताना पड़ता है, और हेल्पर को उस तक रास्ता खोलना पड़ता है, वरना NAT से होकर forwarding चलती ही नहीं। हर गंभीर implementation इसे support करता है, और netfilter हेल्पर इस व्यवहार को साफ़-साफ़, एक डायग्राम के साथ दर्ज करता है13। Armis ने code पढ़ा और नतीजा एक वाक्य में कहा: “a single H.323 packet sent over TCP port 1720 that initiates call forwarding can open a pinhole (named an expectation in the conntrack subsystem) to any TCP port of any internal IP on the network”3।\nएक होस्ट से बँधा, या नेटवर्क की किसी भी चीज़ पर निशाना ज़्यादातर हेल्पर बस क्लिक करने वाली मशीन तक पहुँचते हैं। उनमें से एक की कोई सीमा ही नहीं। FTP, SIP, IRC H.323, call forwarding के साथ Expectation कहती है dst = वह होस्ट जिसके कनेक्शन ने इसे बनाया Expectation कहती है dst = payload ने जो भी पता बताया क्लिक करने वाली मशीन 192.168.1.29 प्रिंटर पोर्ट 9100 कैमरा डिफ़ॉल्ट password controller कोई authentication नहीं नुकसान का दायरा एक मशीन। नियम रहने तक उसका हर पोर्ट, जो काफ़ी बुरा है पर झेला जा सकता है। डिवाइस managed, patched है और कुछ log करता है। नुकसान का दायरा नेटवर्क का हर पता, हर एक के लिए एक मैसेज। Range में घूमिए, banners पढ़िए, निशाना चुनिए। उनमें से किसी डिवाइस ने न request की, न ब्राउज़र चलाया। पूरा फ़र्क़ call forwarding है, और वह एक फ़ीचर है, खामी नहीं। Forward की गई कॉल किसी ऐसे को कॉल है जो लाइन पर नहीं, तो signalling तीसरे पक्ष का नाम लेती है और हेल्पर मान लेता है। एक हेल्पर बाक़ियों से अलग श्रेणी में क्यों है। Expectation को उसे बनाने वाले होस्ट से बाँध दीजिए तो हमलावर एक मशीन तक पहुँचता है। Call forwarding को तीसरा पक्ष बताने दीजिए, जैसा प्रोटोकॉल माँगता है, तो वह आपकी पूरी address range में घूमता है। कोई भी TCP पोर्ट। कोई भी अंदरूनी पता। एक पैकेट से, जो हमलावर ने एक ब्राउज़र से भिजवाया।\nतो हमला पीड़ित की मशीन के बारे में नहीं रहता और आपके अंदरूनी नेटवर्क का port scan बन जाता है, इंटरनेट से चलाया गया, और नतीजे उन कनेक्शनों पर वापस पढ़े जाते हैं जिन्हें आपका अपना फ़ायरवॉल मंज़ूरी दे रहा है। जो डिवाइस मिलते हैं वही असली बात हैं, क्योंकि वे patched नहीं हैं, अक्सर patch किए ही नहीं जा सकते, और उनमें से ज़्यादातर का पूरा सुरक्षा मॉडल यह है कि वह अंदर है। Armis ने इस पर एक संख्या रखी: प्रकाशन के एक साल बाद, critical खामियों के एक समूह से प्रभावित industrial controllers में से 97% अब भी unpatched थे3। “अंदर है” असल में इसी को थामे हुए है।\nतो H.323 वह है जिससे हर प्लेटफ़ॉर्म पर सबसे पहले निपटना है, क्योंकि वह पीड़ित से आगे पहुँचता है, और वही वह है जिसे लगभग कोई इस्तेमाल नहीं करता, जो इसे यहाँ का सबसे सस्ता सुरक्षा सुधार बनाता है। इसे बंद कीजिए। कोई आपको फ़ोन नहीं करेगा।\nहेल्पर ऐसे मैसेज से चल सकता है जो आपने भेजा ही नहीं एक रूप अपना अलग हिस्सा माँगता है, क्योंकि यह उस मान्यता को तोड़ता है जिसका सहारा लोग कुछ न करने के बहाने के लिए लेते हैं: ठीक है, पर ट्रिगर अंदर से आना चाहिए, तो ब्राउज़रों पर नियंत्रण रखिए और समस्या पर नियंत्रण हो गया।\nनहीं।\nजुलाई 2022 में David Leadbeater ने Linux IRC हेल्पर में दो खामियाँ पाईं14। module string \\1DCC को stream में कहीं भी ढूँढता है, यह जाँचे बिना कि वह सही जगह पर ठीक से बना मैसेज है, और उसकी पते की जाँच translator के पीछे वाले होस्ट से नहीं बल्कि chat सर्वर के पते से तुलना करती है, तो किसी public सर्वर का सबको पता हुआ पता उसे संतुष्ट कर देता है। दोनों को जोड़िए और हमलावर पीड़ित के क्लाइंट को एक client-to-client ping भेजता है, जो किसी भी दूसरे यूज़र से मिलने वाली बिल्कुल साधारण चीज़ है, और उसके अंदर एक direct-transfer request होती है:\nPRIVMSG ExampleUser :^APING ^ADCC CHAT x 3325256705 22^A प्रोटोकॉल के नियमों के मुताबिक़, क्लाइंट ping का जवाब payload को वापस गूँजाकर देता है, तो पीड़ित का क्लाइंट वह string आज्ञाकारी ढंग से बाहर भेज देता है, और हेल्पर, बाहर जाती stream को देखते हुए, उसमें DCC पाता है और पोर्ट खोल देता है।\nएक पोर्ट जो उस मैसेज से खुला जिसे पीड़ित ने कभी लिखा ही नहीं अंदर किसी ने कुछ क्लिक नहीं किया। पीड़ित के अपने क्लाइंट ने माँगने पर ट्रिगर भेजा। पीड़ित का क्लाइंट 192.168.1.29 फ़ायरवॉल + IRC हेल्पर stream पढ़ता हुआ एक अजनबी कोई भी दूसरा यूज़र, कोई भी नेटवर्क 1\u0026#160;\u0026#160;एक साधारण ping, payload में छिपी direct chat request के साथ PRIVMSG ExampleUser :^APING ^ADCC CHAT x 3325256705 22^A 2\u0026#160;\u0026#160;प्रोटोकॉल कहता है ping का जवाब payload गूँजाकर दो, तो वह देता है 3\u0026#160;\u0026#160;हेल्पर की दोनों जाँचें पास होती हैं, और किसी को नहीं होना चाहिए था वह keyword stream में कहीं भी ढूँढता है, ठीक बने मैसेज की शुरुआत में नहीं वह पता chat सर्वर से मिलाता है, translator के पीछे वाले होस्ट से नहीं 4\u0026#160;\u0026#160;expectation बन गई, और पीड़ित तक पोर्ट 22 इनबाउंड खुला है उस क्रम में हर चीज़ ने अपनी specification मानी। अजनबी ने एक वैध मैसेज भेजा। क्लाइंट ने वैसे जवाब दिया जैसा प्रोटोकॉल माँगता है। हेल्पर ने वही pattern मिलाया जिसके लिए वह लिखा गया था। किसी यूज़र ने कुछ तय नहीं किया, और किसी log में कुछ भी ज़रा अजीब नहीं दिखेगा। ट्रिगर का किसी भरोसेमंद से आना ज़रूरी नहीं, न ब्राउज़र से, न किसी ऐसी चीज़ से जो यूज़र ने जानबूझकर की। यहाँ हर सॉफ़्टवेयर ने अपनी specification मानी, और नतीजा एक खुला पोर्ट है और किसी log में कुछ अजीब नहीं। अंदर किसी ने कुछ गलत नहीं किया और किसी ने क्लिक नहीं किया। क्लाइंट ने specification मानी, और specification और हेल्पर ने मिलकर नेटवर्क के अंदर एक मशीन पर पोर्ट 22 तक इनबाउंड छेद बना दिया। यह CVE-2022-2663 बना, और national vulnerability database का विवरण सराहनीय रूप से सीधा है: “A firewall may be able to be bypassed when users are using unencrypted IRC with nf_conntrack_irc configured”15।\nशब्द unencrypted पर ध्यान दीजिए। उसे भी याद रखिए।\nलेखक की अपनी सिफ़ारिश वही है जिस तक यह पोस्ट एक अलग दिशा से पहुँचती है: “Potentially entirely deprecate and remove nf_conntrack_irc, it\u0026rsquo;s unclear it has much use anymore”14।\nParsers इसका दूसरा आधा हिस्सा हैं अब तक सब कुछ सही काम करते हेल्परों के बारे में था। एक दूसरी, अलग समस्या भी है: वे C में लिखे protocol parsers हैं, एक सुरक्षा डिवाइस के fast path में, अजनबियों के दिए डेटा पर, और bug की उतनी ही दर के साथ जितनी आप उम्मीद करेंगे। यह न Linux की समस्या है न सस्ते राउटर की: यह हर vendor में दिखती है, उस code में जिसके लिए वे सबसे ज़्यादा पैसे लेते हैं।\nCVE हिस्सा बनाया गया पैकेट क्या करता है CVE-2018-0051 Junos SIP ALG SRX और MX पर flow daemon क्रैश करता है; यह भी दर्ज है कि high-end models को छोड़कर SIP ALG डिफ़ॉल्ट रूप से चालू है CVE-2018-15454 Cisco ASA / FTD SIP inspection डिवाइस reload करता है या CPU जाम कर देता है CVE-2022-2663 Linux nf_conntrack_irc फ़ायरवॉल से होकर पोर्ट खोलता है, जैसा ऊपर CVE-2023-22412 Junos SIP ALG “Specific SIP messages” flow daemon को बार-बार क्रैश करते हैं CVE-2023-22415 Junos H.323 ALG “specific H.323 packets” से out-of-bounds write CVE-2024-21616 Junos SIP ALG एक SIP पैकेट NAT pool ख़त्म कर देता है, तो असली ट्रैफ़िक का translation रुक जाता है CVE-2024-26851 Linux nf_conntrack_h323 H.323 bitmap decode करते समय सीमा से बाहर bit shift CVE-2024-39551 Junos H.323 ALG “specific packets” से memory ख़त्म, जब तक ट्रैफ़िक रुक न जाए हर एक नेटवर्क से बिना authentication के पहुँच में है, किसी के भी द्वारा जो बाहरी interface तक पैकेट पहुँचा सके, यानी हर कोई। और शब्दों को पढ़िए: specific SIP messages, specific H.323 packets, a specific SIP packet। यह लोड में फ़ेल होता प्रोटोकॉल नहीं है। यह कोई है जो जानबूझकर पैकेट बना रहा है।\nCisco वाले मामले पर ठहरिए। CVE-2018-15454 31 अक्टूबर 2018 को 8.6 severity पर प्रकाशित हुआ, उसका असल में exploit हो रहा था, और advisory ने कहा कि software update अभी उपलब्ध नहीं है16। Cisco का बचाव, उनकी अपनी advisory में, no inspect sip है। तो फ़ीचर की सक्रिय रूप से exploit हो रही खामी पर vendor का जवाब था फ़ीचर बंद कर देना, और इससे वह सवाल उठता है जिस पर इस पोस्ट का बाक़ी हिस्सा टिका है। अगर incident के दौरान इसे बंद करना स्वीकार्य जवाब है, तो बाक़ी समय यह किस आधार पर चालू है?\nहेल्पर तभी काम करता है जब आप encrypt न करें यह हिस्सा अकेले ही बहस ख़त्म कर देना चाहिए, और इस पर सबसे कम ध्यान जाता है। प्रोटोकॉल हेल्पर आपका payload पढ़ता है और encrypted payload नहीं पढ़ सकता। तो हेल्पर सिर्फ़ उसी ट्रैफ़िक पर कुछ करता है जिसे आपने साफ़ टेक्स्ट में छोड़ना चुना है, और हेल्पर को चालू रखने का मतलब है उस ट्रैफ़िक को साफ़ टेक्स्ट में रखना।\nसूची के हर प्रोटोकॉल के पास दस साल से कहीं ज़्यादा से एक encrypted mode है। FTP के पास 2005 से TLS है17; उसे चालू कीजिए और PORT और PASV का आदान-प्रदान अदृश्य हो जाता है और हेल्पर कुछ नहीं करता। SIP के पास base specification से TLS है, साथ में encrypted media। H.323 का अपना security annexe है। Chat के पास बहुत लंबे समय से TLS है, और CVE-2022-2663 की आधिकारिक सलाह, लगभग इन्हीं शब्दों में, यही थी कि उसे इस्तेमाल करें ताकि हेल्पर आपकी transfer requests न देख सके15।\nहेल्पर को साफ़ टेक्स्ट चाहिए, तो हेल्पर रखने का मतलब है साफ़ टेक्स्ट रखना आपको encryption मिल सकता है या हेल्पर। तीसरा कॉलम नहीं है। Control channel encrypted है हेल्पर चालू हेल्पर क्या देखता है 17 03 03 01 a4 9c 2f e1 8b 44 d0 ... ciphertext न keyword, न पता, न पोर्ट। मिलाने को कुछ नहीं। हेल्पर क्या देखता है REGISTER sip:example ... Contact: 192.168.1.29:5060 और आपके और उनके बीच का हर दूसरा डिवाइस भी। इसकी आपको क्या क़ीमत पड़ती है हेल्पर कुछ भी नहीं करता, तो endpoints को अपनी translation की समस्या ख़ुद हल करनी होती है, जो इन सभी प्रोटोकॉल दस साल से कर सकते हैं। इसकी आपको क्या क़ीमत पड़ती है Registration credentials, किसने किसे कॉल किया, और हर अंदरूनी पता, साफ़ टेक्स्ट में, दोनों सिरों के बीच हर नेटवर्क पर। जिनमें से किसी पर आपका नियंत्रण नहीं। Encrypted mode इतने समय से मौजूद है FTP over TLS 2005 से\u0026#160;\u0026#160;\u0026#183;\u0026#160;\u0026#160;SIP over TLS, encrypted media के साथ, base standard से\u0026#160;\u0026#160;\u0026#183;\u0026#160;\u0026#160;chat over TLS दशकों से\u0026#160;\u0026#160;\u0026#183;\u0026#160;\u0026#160;H.323 का अपना security annexe तो “हमें SIP हेल्पर चाहिए” का ईमानदार रूप एक ऐसा वाक्य है जिसे कोई ज़ोर से नहीं कहता। वह है: हमारी call signalling सादे टेक्स्ट में अविश्वसनीय नेटवर्क पार करे, ताकि जो बॉक्स हमारा नहीं वह उसे फिर से लिख सके। वह सौदा जिसे कोई नहीं लिखता। हेल्पर सिर्फ़ उसी payload पर काम करता है जिसे वह पढ़ सके, तो दोनों कॉलम एक-दूसरे को काटते हैं। दाईं ओर वाला वह है जिस पर एक चालू SIP ALG आपसे सहमति माँगता है। तो “हमें SIP ALG चाहिए” का ईमानदार रूप है: हमें अपनी call signalling अविश्वसनीय नेटवर्कों पर सादे टेक्स्ट में भेजनी है, ताकि एक middlebox जिस पर हमारा नियंत्रण नहीं वह उसे फिर से लिख सके। किसी design review में इसे ऐसे कहिए और देखिए कितनी दूर जाता है।\nइसका एक तीखा रूप भी है, और इसीलिए यह क़रीबी फ़ैसला नहीं है। हेल्पर चालू छोड़ना encryption के ख़िलाफ़ एक स्थायी प्रलोभन है: जिस दिन कोई SIP over TLS चालू करता है, कॉल टूट जाती हैं और हेल्पर वजह है, तो बदलाव वापस ले लिया जाता है और साफ़ टेक्स्ट एक साल और रह जाता है। किसी से भी पूछिए जिसने consumer-grade फ़ायरवॉल के पीछे यह कोशिश की हो कि कैसा रहा।\nइंटरनेट का हर दूसरा प्रोटोकॉल उल्टी दिशा में गया है: वेब ट्रैफ़िक डिफ़ॉल्ट रूप से encrypted, DNS encrypted, mail transport encrypted, QUIC transport header तक encrypt करता है ताकि middleboxes उसे पढ़ न सकें। खुले इंटरनेट पर middlebox का दौर सालों पहले ख़त्म हो गया, और payload पढ़ने वाले रास्ते के डिवाइस पर टिकी आख़िरी जगहें वे हैं जहाँ किसी ने हेल्पर चालू छोड़ दिया।\nIPsec वह है जहाँ हेल्पर कुछ भी नहीं पढ़ सकता इससे उस प्रोटोकॉल के बारे में साफ़ सवाल उठता है जो encryption के सिवा कुछ नहीं है। जवाब आपके अंदाज़े से बुरा है।\nESP के पास पोर्ट नंबर नहीं हैं, क्योंकि वह अपने आप में एक IP प्रोटोकॉल है, और translator लौटते ट्रैफ़िक को पोर्ट से अलग करता है। तो अगर एक पते के पीछे दो क्लाइंट एक ही gateway की ओर जा रहे हों, तो उनके इनबाउंड पैकेट अलग करने को कुछ नहीं है। RFC 3715 ने मार्च 2004 में यह लिख दिया: NAT जाँच से mapping नहीं सीख सकता, और “it is possible that the NAT will deliver the incoming IPsec packets to the wrong destination”18।\nतो vendors ने एक हेल्पर बनाया। वह UDP 500 पर IKE exchange देखता है, जिसके शुरुआती पैकेट साफ़ टेक्स्ट में होते हैं, cookies और security parameter index बटोरता है, और एक gate खोलता है ताकि उस मान वाला इनबाउंड ESP अंदर सही होस्ट तक पहुँचे। Juniper इसे सीधे बताता है: “When ESP traffic hits the IKE ALG gates, sessions are created to capture subsequent ESP traffic”19। Cisco का inspect ipsec-pass-thru ESP और AH के लिए यही करता है “associated with an IKE UDP port 500 connection”, एक डिफ़ॉल्ट map के साथ जो प्रति क्लाइंट ESP कनेक्शनों पर कोई सीमा ही नहीं रखता20।\nवही चीज़, वही अधिकार, बस हेल्पर कोई keyword भी नहीं मिला रहा। वह ESP parse नहीं कर सकता, क्योंकि ESP ही encrypted हिस्सा है; वह एक 32-bit संख्या के भरोसे पैकेट मोड़ रहा है जिसे उसने साफ़ टेक्स्ट में गुज़रते देखा। RFC 3715 का जो हिस्सा इसे कवर करता है उसका शीर्षक, बिना किसी व्यंग्य के, “Helper Incompatibilities” है, और दर्ज करता है कि cookie demultiplexing “results in problems with re-keying” और ISAKMP payloads parse करने वाले डिवाइस “may not handle all payload ordering combinations”18। नियम की जगह खड़ा एक अंदाज़ा, और packet path में हाथ से लिखा parser, बाईस साल पहले लिखकर दर्ज।\nइलाज दस महीने बाद प्रोटोकॉल में आया: RFC 3947 में दोनों सिरे key exchange के दौरान translator को पहचानते हैं, और RFC 3948 ESP को UDP 4500 में लपेटता है ताकि फिर से पोर्ट हों21। फिर Juniper धीमी बात ज़ोर से कह देता है: “IKE NAT-T traffic on floating port 4500 is not processed in an IKE ALG”19। इसे ठीक से कीजिए और हेल्पर पूरी तरह बायपास हो जाता है, जो passive FTP और ICE वाला ही वाक्य है।\nMainline Linux ने इसे कभी नहीं लिया। conntrack प्रोटोकॉल में कोई ESP module नहीं है, और 2021 का एक patch जो SPI-आधारित tracking जोड़ता था, netfilter list पर review से गुज़रा और कभी merge नहीं हुआ22। जो vendors इसे भेजते हैं वे इसे tree के बाहर भेजते हैं, उन बॉक्सों पर जिनके update होने की संभावना सबसे कम है।\nयह Cyber Essentials में फ़ेल होता है, पंक्ति-दर-पंक्ति यहाँ तक यह सुरक्षा का तर्क रहा है। United Kingdom में certification करने वाले किसी के लिए यह compliance का भी है, और इसमें कोई चतुर व्याख्या नहीं: यह तीन bullet points के सामने तीन bullet points हैं। Cyber Essentials, IASME के ज़रिए दी जाने वाली UK सरकार-समर्थित योजना है, उसका पहला तकनीकी नियंत्रण फ़ायरवॉल है, और मौजूदा requirements दस्तावेज़ version 3.3, अप्रैल 2026 है। यह वह है जो वह आपसे करवाता है, शब्दशः23:\nblock unauthenticated inbound connections by default ensure inbound firewall rules are approved and documented by an authorised person, and include the business need in the documentation remove or disable unnecessary firewall rules, when they are no longer needed तीन फ़ायरवॉल आवश्यकताएँ, और हेल्पर हर एक के बारे में क्या करता है Cyber Essentials, पहला नियंत्रण, फ़ायरवॉल। तीन दायित्व, और हर एक का हेल्पर वाला जवाब। Requirements दस्तावेज़ क्या कहता है प्रोटोकॉल हेल्पर क्या करता है नतीजा \"block unauthenticated inbound connections by default\" पहला दायित्व, और नियंत्रण के होने की वजह। एक पैकेट में लिखी string के भरोसे एक कनेक्शन की अनुमति देता है। string देने वाले ने किसी चीज़ से authenticate नहीं किया। फ़ेल \"ensure inbound firewall rules are approved and documented by an authorised person, and include the business need\" Line rate पर एक kernel module ने लिखा। किसी व्यक्ति ने मंज़ूर नहीं किया, किसी ने देखा नहीं, कोई दस्तावेज़ नहीं, कोई business need दर्ज नहीं। फ़ेल \"remove or disable unnecessary firewall rules, when they are no longer needed\" जो मानकर चलता है कि किसी ने तय किया था कि वे ज़रूरी हैं। एक timer हटाता है। Timer कोई review नहीं है, और किसी ने कभी नहीं आँका कि नियम शुरू में ज़रूरी भी था या नहीं। फ़ेल यह पाँच तकनीकी नियंत्रणों में पहला है, पाँचवें का कोई किनारे का मामला नहीं। योजना के अपने शब्दों में यह boundary firewalls, desktop computers, laptops, routers और servers पर लागू होता है। Cyber Essentials के तकनीकी नियंत्रणों की तीन फ़ायरवॉल आवश्यकताएँ, और हर एक के बारे में प्रोटोकॉल हेल्पर क्या करता है। तीन आवश्यकताएँ, तीन विफलताएँ, पाँच में से पहले नियंत्रण पर। Expectation ठीक इसीलिए होती है कि एक ऐसे इनबाउंड कनेक्शन की अनुमति दे जो वरना block होता, और जिस पक्ष के डेटा से वह बनी उसने किसी चीज़ से authenticate नहीं किया, तो पहला bullet सीधे फ़ेल होता है। नियम line rate पर एक kernel module ने लिखा, तो कोई दस्तावेज़ नहीं, कोई दर्ज business need नहीं और कड़ी में कहीं कोई अधिकृत व्यक्ति नहीं। उस नियम का approval रिकॉर्ड माँगिए जिसने आपके प्रिंटर के पोर्ट 9100 तक कनेक्शन पहुँचने दिया, और आपके पास कुछ नहीं, न बना सकते हैं, क्योंकि वह अठारह महीने पहले नब्बे सेकंड के लिए मौजूद था। और हेल्पर के नियम एक timer हटाता है, जो review नहीं है।\nतीन आवश्यकताएँ, तीन विफलताएँ, पाँच में से पहले नियंत्रण पर, जो योजना के अपने शब्दों में “boundary firewalls, desktop computers, laptops, routers, servers”23 पर लागू होता है, यानी आपकी हर चीज़ पर।\nयह मतलब निकालने में निष्पक्ष रहिए, क्योंकि मैं certification body नहीं हूँ। Assessor सवालों के सेट और आपके दिए सबूत से काम करता है, और वह सेट पूछता है कि क्या आप डिफ़ॉल्ट रूप से बिना-authentication वाले इनबाउंड कनेक्शन block करते हैं और क्या आपके इनबाउंड नियम दर्ज और मंज़ूर हैं। हेल्पर चालू रखकर हाँ कहिए और जवाब सच नहीं है। आप फिर भी पास हो सकते हैं। पास होना और पालन करना एक बात नहीं है, और यह फ़ासला किसी incident के बाद सामने आता है।\nयह बस असामान्य रूप से साफ़ शब्दों में है: card-industry का standard, किसी ग्राहक की प्रश्नावली और आपके बीमाकर्ता का proposal form, सब दूसरे शब्दों में यही पूछते हैं। तो यह वह हिस्सा है जिसे certificate पर दस्तख़त करने वाले के पास ले जाना है। न हमले, न CVEs। तीन bullets, और हर एक का ईमानदार जवाब।\nउद्योग ने यह फ़ैसला बीस साल पहले ही कर लिया था इसमें कुछ भी नया या विवादित नहीं है। उल्लेखनीय यह है कि फ़ैसला कितने समय से हो चुका है जबकि defaults फिर भी वैसे ही चलते रहे।\nपच्चीस साल का एक ही नतीजा, और वह एक पंक्ति जो कभी नहीं दिखती नतीजा 2007 में निकल गया था। Defaults नहीं हिले। कब क्या हुआ कौन कुछ कर सकता था जन॰ 2001 RFC 3027 NAT से टूटने वाले हर प्रोटोकॉल की सूची बनाता है, और हर एक पर ALG को क्या करना है standards body फ़र॰ 2002 RFC 3234 तंत्र को “a deliberate layer violation” कहता है और हमले के अतिरिक्त बिंदुओं की चेतावनी देता है standards body जन॰ 2007 RFC 4787, एक Best Current Practice: UDP प्रोटोकॉल के NAT ALGs को बंद होना चाहिए (SHOULD) standards body जन॰ 2010 NAT Pinning: वेब पेज का एक छिपा फ़ॉर्म visitor की मशीन पर इनबाउंड पोर्ट खोलता है एक शोधकर्ता 2012 netfilter को स्पष्ट रूप से जोड़ने का तंत्र और स्वचालित assignment रोकने का switch मिलता है kernel अप्रैल 2016 Linux डिफ़ॉल्ट बदलता है: स्पष्ट नियम के बिना हेल्पर कुछ नहीं करते। 4.7 में आया kernel अक्टू॰ 2020 NAT Slipstreaming, फिर जनवरी 2021 का रूप जो नेटवर्क के हर डिवाइस तक पहुँचता है शोधकर्ता नवं॰ 2020 चार ब्राउज़र vendors बचाव भेजते हैं; वेब प्लेटफ़ॉर्म standard को वर्जित पोर्ट सूची मिलती है ब्राउज़र अग॰ 2022 IRC हेल्पर उस मैसेज पर चल पड़ता है जो पीड़ित ने कभी लिखा ही नहीं एक शोधकर्ता 2023\u0026#8211;24 एक vendor की flagship फ़ायरवॉल श्रृंखला में चार और ALG vulnerabilities शोधकर्ता अब “कौन कुछ कर सकता था” कॉलम पढ़िए, और देखिए कि उसमें कौन कभी नहीं है। पच्चीस सालों में इसकी एक भी पंक्ति किसी फ़ायरवॉल vendor का ऐसा update नहीं जो पहले से लगे किट पर फ़ीचर बंद करे। standards body ने कहा, kernel upstream बदला, और दोनों में से कोई बॉक्सों तक नहीं पहुँचा। पच्चीस साल का एक ही नतीजा, उन लोगों का निकाला हुआ जो उस चीज़ को ठीक नहीं कर सकते थे जिसे ठीक करना था। जो पंक्ति कभी नहीं दिखती वह है किसी फ़ायरवॉल vendor का पहले से लगे किट पर यह फ़ीचर बंद करना। RFC 3027 ने जनवरी 2001 में हर उस प्रोटोकॉल की सूची बनाई जिसे NAT तोड़ता है24। RFC 3234 ने एक साल बाद ALGs को middlebox taxonomy में रखा और रास्ते में बॉक्स जोड़ने की क़ीमत पर सीधा रहा: यह “creates extra points of attack, reduces or eliminates the ability to perform end to end encryption, and complicates trust models”10। फिर जनवरी 2007 में RFC 4787, जो सुझाव नहीं बल्कि एक Best Current Practice है, ने तय किया कि NAT को कैसे व्यवहार करना ज़रूरी है, और आवश्यकता दस ने यह कहा:\nREQ-10: To eliminate interference with UNSAF NAT traversal mechanisms and allow integrity protection of UDP communications, NAT ALGs for UDP-based protocols SHOULD be turned off.4\nबंद। उन्नीस साल पहले, वजह के साथ: हेल्पर उन तंत्रों के रास्ते में आते हैं जो सच में काम करते हैं, और वे आपको अपना ट्रैफ़िक सुरक्षित करने से रोकते हैं। वही हिस्सा थकान के साथ नोट करता है कि कुछ products में ALGs “turned on permanently” हैं4।\nतीन साल बाद NAT Pinning ने एक वेब पेज को पोर्ट खोलते दिखाया1। Netfilter ने 2012 में CT target के साथ जवाब दिया, जो एक स्पष्ट नियम से किसी नामित flow पर हेल्पर लगाता है, और स्वचालित assignment पूरी तरह रोकने का एक switch11। फिर 25 अप्रैल 2016 को kernel ने अपना डिफ़ॉल्ट बदला, एक commit message में जो पूरा पढ़ने लायक है, यह देखने के लिए कि वह कितना थका हुआ लगता है:\nFour years ago we introduced a new sysctl knob to disable automatic helper assignment [\u0026hellip;] This knob kept this behaviour enabled by default to remain conservative. This measure was introduced to provide a secure way to configure iptables and connection tracking helpers through explicit rules. Give the time we have waited for this, let\u0026rsquo;s turn off this by default now, worse case users still have a chance to recover the former behaviour by explicitly enabling this back through sysctl.5\nयह Linux 4.7 में आया, और तब से जिस बॉक्स पर वे modules loaded हैं वह उनके साथ कुछ नहीं करता जब तक आप किसी flow पर एक हेल्पर लगाने वाला नियम न लिखें। उसके बाद का सब ऊपर के डायग्राम में है, यहाँ तक कि वेब प्लेटफ़ॉर्म standard का ख़ुद पोर्ट सूची पाना भी25।\nअब सूची में देखिए कि क्या ग़ायब है। पच्चीस सालों में इसकी एक भी पंक्ति किसी फ़ायरवॉल vendor का firmware update नहीं है जो पहले से लगे किट पर इन्हें बंद करे। standards body ने कहा। kernel ने upstream कर दिया। ब्राउज़रों ने क़ीमत चुकाई। बॉक्स वैसे ही चलते रहे।\nऔर blocked-port सूची ही पोल खोलती है। पोर्ट 69, 137, 161, 554, 1719, 1720, 1723, 5060, 5061, 6566 और 10080 सब उस पर हैं6: TFTP, NetBIOS, SNMP, RTSP, दो बार H.323, PPTP, दो बार SIP, scanner प्रोटोकॉल और Amanda backup प्रोटोकॉल। किसी Linux kernel tree में हेल्पर modules की सूची निकालिए और पाएँगे कि आपने एक ही सूची दो बार पढ़ी है। संयोग नहीं, और सुरक्षा नियंत्रण भी नहीं: यह एक उद्योग है जो पोर्टों की एक स्थायी, बढ़ती denylist सँभाल रहा है क्योंकि दूसरा एक डिफ़ॉल्ट नहीं बदलेगा।\nज़्यादातर badges के नीचे Linux है Netfilter का ब्योरा अहम हिस्सा है, Linux की ओर मुड़ा कोई भटकाव नहीं। इस धरती पर NAT करने वाले बॉक्सों का बहुत बड़ा हिस्सा vendor interface के नीचे netfilter वाला Linux है: हर OpenWrt derivative, जो consumer और छोटे-व्यापार राउटर बाज़ार का ज़्यादातर हिस्सा है, ISP के दिए ज़्यादातर घरेलू राउटर, carrier-grade NAT किट का अच्छा-ख़ासा हिस्सा, और बहुत से commercial appliances जिनका वेब interface ज़रा भी इशारा नहीं देता कि नीचे क्या है। आपका SIP parse करने वाला हेल्पर अक्सर वही nf_conntrack_sip.c है जो mainline kernel में आता है, किसी और का compile किया हुआ और एक menu से चलाया हुआ।\nसबूत शोध में ही है। जब Samy ने एक Netgear राउटर में SIP ALG ढूँढा तो उन्होंने firmware निकाला और एक kernel module पाया जिसमें ftp_decode और sip_decode थे2। Armis की जाँची गई सूची में OpenWrt और VyOS थे, साथ में एक श्रेणी जिसे उन्होंने बस “various consumer grade Linux routers” कहा, और H.323 का जो विश्लेषण किसी-भी-अंदरूनी-होस्ट वाले नतीजे तक पहुँचा वह netfilter source पढ़कर आया, फिर तीन vendors के commercial फ़ायरवॉल पर पुष्टि हुई3।\nKernel का डिफ़ॉल्ट आप तक नहीं पहुँचता। Linux 4.7 ने 2016 में स्वचालित हेल्पर assignment बंद किया, लेकिन तभी जब kernel काफ़ी नया हो और किसी ने उसे वापस चालू न किया हो। Armis ने पाया कि VyOS nf_conntrack_helper को स्पष्ट रूप से फिर 1 पर सेट करता है, और नोट किया कि बहुत से Linux-आधारित products इसे फिर चालू करते हैं “as it is still useful for many users”3। 2026 के product में 2014 का kernel 2014 का व्यवहार पाता है, और switch पलटा हुआ मौजूदा kernel भी वही पाता है। दोनों में से कोई datasheet पर नहीं दिखता।\nNetfilter मॉडल जानना बताता है कि हर दूसरे बॉक्स से क्या पूछना है। Expectation वाले हिस्से के तीन सवाल Linux के सवाल नहीं हैं। वे ही सवाल हैं। हर vendor के पास अलग नाम से वही चीज़ है, दस्तावेज़ लगभग कभी जवाब नहीं देते, और reference implementation क्या करता है यह जानना ही वह तरीका है जिससे आप तय करते हैं कि क्या test करना है।\nLinux का काम ठीक से कीजिए, फिर हर दूसरे vendor को उसके सामने पढ़िए।\nLinux हेल्पर, ठीक से पहले देखिए कि असल में क्या loaded है:\nlsmod | grep -E \u0026#39;nf_conntrack|nf_nat\u0026#39; हेल्पर modules वे हैं जिनके नाम प्रोटोकॉल पर हैं: nf_conntrack_ftp, _sip, _h323, _irc, _tftp, _pptp, _snmp, _amanda, _sane, _netbios_ns और _talk, हर एक के साथ एक मेल खाता nf_nat_* जहाँ पते बदले जाते हैं। फिर स्वचालित assignment जाँचिए, वह switch जो तय करता है कि loaded module अपने आप कुछ करता है या नहीं:\nsysctl net.netfilter.nf_conntrack_helper शून्य वही है जो आप चाहते हैं, और Linux 4.7 से आगे का डिफ़ॉल्ट5। एक का मतलब है कि हर loaded हेल्पर अपने पोर्ट से मेल खाते हर flow पर, किसी भी पते से, चालू है: 2015 वाला व्यवहार, और वही जिसे इस पोस्ट के हमले मानकर चलते हैं।\nफिर किसी चालू फ़ायरवॉल पर conntrack -L expect देखिए। हेल्पर बंद हों तो यह खाली रहता है; चालू हों तो बगल में एक capture लगाइए और देखिए कि लोगों के नेटवर्क इस्तेमाल करते ही पंक्तियाँ कैसे आती हैं। एक बार करने लायक है: एक इनबाउंड अनुमति जो आपने नहीं लिखी, उसे अपनी आँखों के सामने आते-जाते देखने से तेज़ बात कुछ नहीं समझाता।\nअगर स्वचालित assignment बंद है और फिर भी आपको किसी ख़ास flow पर हेल्पर चाहिए, तो मान्य तरीका एक स्पष्ट नियम है, जो उसे एक destination और एक पोर्ट तक बाँध देता है:\niptables -t raw -A PREROUTING -p tcp --dport 21 -d 192.0.2.10 -j CT --helper ftp nftables में इसका समकक्ष एक ct helper object घोषित करता है और उसे prerouting chain में ct helper set से लगाता है, जो बेहतर syntax के साथ वही अनुशासन है।\nदेखिए वह नियम क्या है: एक दर्ज, मंज़ूर, business-justified इनबाउंड अपवाद, जिसे किसी व्यक्ति ने लिखा, जहाँ auditor उसे पढ़ सके। जो स्वचालित वाला कभी नहीं हो सकता था।\nअगर आप उन्हें सोया हुआ नहीं बल्कि ग़ायब चाहते हैं, और फ़ायरवॉल पर चाहना चाहिए, तो modules को load होने से ही रोकिए:\nfor m in ftp sip h323 irc tftp pptp snmp amanda sane netbios_ns talk; do echo \u0026#34;install nf_conntrack_$m /bin/false\u0026#34; done \u0026gt; /etc/modprobe.d/no-conntrack-helpers.conf blacklist की जगह install ... /bin/false जानबूझकर है: blacklist सिर्फ़ alias से load होना रोकता है, और जो भी module को नाम से माँगे उसे वह फिर भी मिल जाता है। और अगर किसी distribution की फ़ायरवॉल परत उन्हें आपके लिए load करती है (firewalld करता है जब किसी zone में FTP या TFTP सेवा चालू हो), तो ठीक करने की परत वही है, क्योंकि वह मदद के नाम पर उन्हें वापस रख देगी।\nहर दूसरा badge, और उसे बंद कैसे करें इंटरनेट पर किसी भी चीज़ पर भरोसा करने के बजाय अपना version जाँचिए, मेरा भी; ये defaults releases और models के बीच बदलते रहते हैं।\npfSense और OPNsense इस बात का सबूत हैं कि बहस ख़त्म है। बंद करने को कोई SIP ALG नहीं, क्योंकि चालू करने को कभी था ही नहीं। ये सबसे ज़्यादा लगाए जाने वाले फ़ायरवॉल distributions में से हैं, ये बहुत सारे संगठनों की टेलीफ़ोनी चलाते हैं, और अगर आधुनिक VoIP के लिए हेल्पर सच में ज़रूरी होता तो यह संभव न होता। FTP proxy भी उसी रास्ते गया: Netgate ने उसे जनवरी 2015 में base system से निकाल दिया।\nOpenBSD का डिज़ाइन वह है जिसकी बाक़ी सबको नक़ल करनी चाहिए थी। pf forwarding path में payloads बिल्कुल नहीं बदलता। अगर आपको FTP के लिए मदद चाहिए तो आप ftp-proxy चलाते हैं, एक अलग user-space daemon, और control कनेक्शन उस तक भेजने वाला एक स्पष्ट divert-to नियम लिखते हैं26। इससे एक साथ तीन गुण निकलते हैं: यह बंद है जब तक आप जानबूझकर चालू न करें, यह सिर्फ़ वही ट्रैफ़िक देखता है जिसे आपने नियम में नामित किया, और इसमें bug हो तो packet path नहीं बल्कि एक userland process क्रैश होता है। opt-in ऐसा दिखता है जब कोई उसे ऊपर से जोड़ने के बजाय डिज़ाइन करता है।\nOpenWrt ALG modules नहीं भेजता, और अगर आप उन्हें install करें तो भी स्वचालित assignment बंद रहता है।\nCisco ASA और FTD डिफ़ॉल्ट global policy में inspection engines रखते हैं, और incident के दौरान no inspect sip Cisco की अपनी सलाह है:\npolicy-map global_policy class inspection_default no inspect sip no inspect h323 h225 no inspect h323 ras no inspect skinny FTD पर यह डिवाइस CLI से configure inspection sip disable है16। IPsec pass-through वह है जो Cisco ने सही किया: inspect ipsec-pass-thru डिफ़ॉल्ट policy में है ही नहीं, तो जब तक किसी ने जानबूझकर जोड़ा न हो, हटाने को कुछ नहीं20।\nCisco IOS और IOS XE में भी यह डिफ़ॉल्ट रूप से चालू है, Cisco के अपने शब्दों में “NAT support for SIP is enabled by default on port 5060”7, और H.323 के लिए भी वही:\nno ip nat service sip tcp port 5060 no ip nat service sip udp port 5060 no ip nat service h225 Juniper SRX branch models पर SIP और H.323 चालू रखता है और high-end वालों पर नहीं, जो अपने आप में बताता है कि Juniper के इंजीनियर इनके बारे में क्या सोचते हैं। show security alg status से जानिए कि आप कहाँ खड़े हैं, फिर:\nset security alg h323 disable set security alg sip disable set security alg ftp disable set security alg ike-esp-nat disable FortiGate VoIP profile के ज़रिए डिफ़ॉल्ट रूप से VoIP inspect करता है, नीचे एक kernel session helper के साथ। Fortinet का दर्ज क्रम पहले हेल्पर हटाता है27:\nconfig system session-helper show delete \u0026lt;the sip entry\u0026gt; end config system settings set default-voip-alg-mode kernel-helper-based end entry नंबर किसी का copy करने के बजाय अपने show output से पढ़िए; यह models और releases के बीच बदलता है, और Fortinet चेतावनी देता है कि अक्सर reboot चाहिए होता है।\nCheck Point audit करने में अटपटा है, क्योंकि कोई एक switch नहीं है। हेल्पर नियम में service object का गुण है, तो पहले से बना SIP service आपको protocol handler और उसका सब किया-धरा दे देता है। इससे बचने का मतलब है पोर्ट 5060 पर अपना सादा UDP या TCP service जिसका protocol type none हो, जो अभी भी built-ins इस्तेमाल करने वाली किसी भी चीज़ के ऊपर रखा जाए। तो “क्या ALG चालू है?” ऐसा सवाल नहीं जिसका जवाब कोई settings पेज दे सके। इसलिए, किसी की बात पर कि यह बंद है, भरोसा करने में सावधान रहिए।\nPalo Alto प्रति-application toggle देता है, और उनका अपना दस्तावेज़ कहता है कि SIP ALG “creates dynamic NAT pinholes”8। Objects, Applications, sip ढूँढिए, Disable ALG पर टिक कीजिए, commit।\nMikroTik /ip firewall service-port के नीचे दस हेल्पर भेजता है, SIP, H.323, FTP, IRC, TFTP, PPTP, RTSP और भी, हर एक एक-एक लाइन में दर्ज, पेज पर कोई सुरक्षा चेतावनी नहीं। पहले सूची देखिए, फिर जो मिले उसे बंद कीजिए:\n/ip firewall service-port print /ip firewall service-port set [find name=sip] disabled=yes /ip firewall service-port set [find name=h323] disabled=yes /ip firewall service-port set [find name=ftp] disabled=yes Consumer और ISP के दिए राउटर। “SIP ALG”, “SIP helper”, “VoIP passthrough”, “IPsec passthrough” या “application layer gateway” ढूँढिए, आमतौर पर advanced NAT के नीचे। ISP के दिए बहुत से राउटरों पर कोई setting है ही नहीं, जो आपको बताता है कि वह बॉक्स उस नेटवर्क पर होना चाहिए या नहीं जिसकी ज़िम्मेदारी आपकी है।\nप्लेटफ़ॉर्म कोई भी हो, अंत एक ही तरह कीजिए: साबित कीजिए। बाहरी interface पर एक capture लगाइए, बाहर से संबंधित पोर्ट पर एक बनाई हुई PORT या REGISTER लाइन भेजिए, और पुष्टि कीजिए कि कुछ नहीं खुलता। जिस setting को आपने test नहीं किया वह एक मान्यता है।\nजो टूटता है उसमें से ज़्यादातर पहले ही मर चुका है क़ीमत के बारे में ईमानदार रहिए, क्योंकि किसी से यह करवाने का आधार वही है। ख़राब configure किए गए फ़ोनों वाले नेटवर्क पर SIP हेल्पर बंद करने से कॉल टूट सकती हैं, आमतौर पर एक-तरफ़ा audio या registrations जो गिर जाते हैं। FTP हेल्पर बंद करने से बाहर जाने वाला active-mode FTP टूटता है। H.323 हेल्पर बंद करने से H.323 टूटता है, अगर आपके पास अब भी कुछ हो। अगर आप सालों से किसी के न देखे नेटवर्क पर यह एक ही बदलाव में करते हैं, तो इनमें से कम से कम एक की उम्मीद रखिए।\nअब सूची वापस पढ़िए, और ग़ौर कीजिए कि हेल्पर जिन प्रोटोकॉल की सेवा करता है उनमें से लगभग हर एक को बाक़ी उद्योग पहले ही दफ़ना चुका है। H.323 बीस साल पहले SIP से हार गया। PPTP 1998 से बचाव के लायक नहीं रहा, जिस पर मैंने IPsec Was a Good Idea में विस्तार से लिखा है। IRC direct transfers उस दशक के हैं जिसकी किसी को याद नहीं सताती। NetBIOS name service, SNMP के community-string वाले versions, scanner discovery प्रोटोकॉल और पुराना backup प्रोटोकॉल स्थानीय नेटवर्क के अवशेष हैं जिन्हें कभी boundary पार नहीं करनी थी। सादा FTP ब्राउज़रों से पूरी तरह जा चुका है: Firefox ने उसे जुलाई 2021 में और Chrome ने उसी अक्टूबर में हटाया, दोनों ने यह आधार दिया कि इस्तेमाल नगण्य था और सुरक्षा maintenance के लायक नहीं थी28।\nतो “हम हेल्पर बंद नहीं कर सकते, कुछ टूट जाएगा” आमतौर पर एक मरे हुए प्रोटोकॉल को life support पर रखने का तर्क होता है, ताकि एक ऐसे फ़ीचर को सही ठहराया जा सके जो अजनबियों के लिए पोर्ट खोलता है। इसे बंद करने से आपका नेटवर्क नहीं टूटता। यह उस पर की वह एक चीज़ सामने ला देता है जिसे सालों पहले रिटायर हो जाना चाहिए था, जो जानकारी आप वैसे भी चाहते थे।\nSIP सच्चा अपवाद है और अकेला अपवाद है। उस सूची में बाक़ी सब ऐसा तर्क है जिसे हारकर आपको ख़ुश होना चाहिए, और उसमें से कुछ भी ठीक न होने लायक नहीं, क्योंकि शामिल हर प्रोटोकॉल ने अपनी translation की समस्या सालों पहले हल कर ली, प्रोटोकॉल में, जहाँ उसकी जगह है।\nइसके बजाय क्या करें Middlebox वाला जवाब और endpoint वाला जवाब, अगल-बगल एक ही समस्या, दो बार हल। एक जवाब ने फ़ैसला बीच में रख दिया। रास्ते का एक बॉक्स तय करता है दोनों सिरे तय करते हैं यह कैसे काम करता है एक डिवाइस गुज़रते payload को पढ़ता है वहाँ लिखा मिला पता बदल देता है बताए गए कनेक्शन के लिए इनबाउंड छेद खोलता है किसी भी सिरे पर किसी को पता नहीं कि यह हुआ यह कैसे काम करता है हर सिरा एक सर्वर से पूछता है कि बाहर से वह कैसा दिखता है हर सिरा अपना हर रास्ता पेश करता है: local, translated, relayed दोनों सिरे रास्तों को एक-दूसरे के सामने test करते हैं जो चले उसे अपने ट्रैफ़िक से खुला रखते हैं इसे आपसे क्या चाहिए पढ़ने लायक payload, तो control channel पर कोई encryption नहीं। उसी रास्ते में वही डिवाइस। सिर्फ़ एक translator, तो आगे का कोई carrier-grade translator इसे तोड़ देता है। और टेक्स्ट लिखने वाले पर भरोसा, जिसके बारे में 2010 तक किसी ने सोचा ही नहीं। इसे आपसे क्या चाहिए बाहर जाने की पहुँच, और कुछ भी नहीं। यह उन translators से होकर चलता है जो आपके नहीं और दिखते नहीं, दो एक के ऊपर एक से होकर, mobile नेटवर्क से होकर, और control channel शुरू से अंत तक encrypted रहते, क्योंकि बीच में कोई इसे देखता भी नहीं। फ़ाइल transfer के लिए और भी सरल: passive mode, जहाँ क्लाइंट दोनों कनेक्शन बाहर की ओर खोलता है और हेल्पर के करने को कुछ नहीं बचता। दायाँ कॉलम कोई प्रस्ताव नहीं। यह वह है जो आपका ब्राउज़र पहले से करता है। ब्राउज़र में हर video call ऐसे ही तय होती है, हर तरह के translator से होकर, रास्ते में बिना किसी ALG के। एक ही समस्या, दो बार हल की गई। एक जवाब ने फ़ैसला बीच के एक बॉक्स में रख दिया। दूसरे ने दोनों सिरों को आपस में तय करने दिया, जो हर ब्राउज़र हर video call के लिए पहले से करता है। FTP। Passive mode, 1985 से specification में और बीस साल से हर क्लाइंट का डिफ़ॉल्ट: दोनों कनेक्शन बाहर की ओर खुलते हैं और हेल्पर के करने को कुछ नहीं बचता। और अगर आप 2026 में संगठनों के बीच फ़ाइलें भेज रहे हैं, तो FTP उसके लिए प्रोटोकॉल नहीं है: SFTP और FTPS encrypted हैं, और कोई हेल्पर दोनों में से किसी को नहीं छूता।\nSIP और बाक़ी सब real-time। Endpoint इंटरनेट पर एक सर्वर से पूछता है कि बाहर से उसका public पता और पोर्ट कैसा दिखता है, अपने पास का हर संभावित रास्ता पेश करता है, और दोनों सिरे उन्हें एक-दूसरे के सामने test करके एक काम करने वाला रख लेते हैं, जहाँ सीधा रास्ता न हो वहाँ एक relay के साथ। यही STUN, TURN और ICE है, और यही धरती का हर ब्राउज़र हर video call के लिए करता है, हर तरह के translator से होकर, रास्ते में बिना किसी ALG के। अगर 2026 में आपका फ़ोन सिस्टम यह नहीं कर सकता, तो समस्या आपका फ़ोन सिस्टम है।\nIPsec। NAT traversal, यानी RFC 3947 और RFC 3948: दोनों सिरे key exchange के दौरान translator को पहचानते हैं और session के बाक़ी समय ESP को UDP 4500 में लपेटते हैं21, बीच के किसी बॉक्स पर बिना किसी gate के।\nH.323। इसे रिटायर कीजिए। SIP ने यह बहस 2005 के आसपास जीत ली, तो planning करने को कोई migration नहीं, बस एक deletion। Direct transfers, TFTP, SNMP, NetBIOS, scanner discovery और backup प्रोटोकॉल भी उसी रास्ते जाते हैं: इनमें से किसी का boundary पार करने से कोई लेना-देना नहीं।\nIPv6। वहाँ इसमें से कुछ भी मौजूद नहीं, क्योंकि कोई translation नहीं और इसलिए हेल्पर के बदलने को कुछ नहीं। होस्ट का अपना पता है, payload में लिखा पता सच है, और एक stateful फ़ायरवॉल वही अनुमति देता है जो आपने उसे कहा और कुछ नहीं। इस पोस्ट की हर समस्या address translation से निकलती है, और वह IPv6 न लगाने से निकलता है, एक तर्क जो मैंने कहीं और दिया है और दोहराऊँगा नहीं।\nअब वह हिस्सा जिसमें मैं कूटनीतिक नहीं होने वाला।\nअगर कोई आपसे इन्हें चालू करने को कहता है, कोई supplier, कोई टेलीफ़ोनी installer, कोई managed service, किसी framework पर कोई integrator, तो वह network engineer नहीं है और सुरक्षा विशेषज्ञ नहीं है। जो काम वे सच में करते हैं उसमें वे बहुत अच्छे हो सकते हैं, और यह वह काम नहीं होगा। जिस फ़ोन सिस्टम को अपनी signalling फिर से लिखवाने के लिए फ़ायरवॉल चाहिए, उसका सही जवाब फ़ोन सिस्टम ठीक करना है, और जो भी आपसे इसके बजाय अपनी boundary एक string-matching parser के लिए खोलने को कहता है वह या तो जानता नहीं कि expectation क्या है या उसे परवाह नहीं। हम नौसिखियों का अड्डा नहीं हैं। 2007 से standards track दस्तावेज़ों में इसे करने का एक सही तरीका है, और “बस SIP हेल्पर चालू कर दीजिए” उस व्यक्ति की आवाज़ है जो आज ticket बंद करने वाली किसी भी चीज़ की ओर हाथ बढ़ा रहा है।\nउनसे, कमरे में, पूछिए कि expectation का source address wildcard किस पर सेट है। अगर सवाल हैरानी की तरह पहुँचे, तो आपको जवाब मिल गया, और वह कभी प्रोटोकॉल के बारे में था ही नहीं।\nअगर आप अब भी इन्हें चला रहे हैं, तो क्या आप ख़ुद को professional कह सकते हैं? यह एक सच्चा सवाल है और सच्चा जवाब माँगता है, तो यहाँ तीन हैं, क्योंकि तीन मामले हैं। यह इस पर टिका है कि आप जानते हैं या नहीं, और जानना ऐसी चीज़ नहीं जो आपके साथ हो जाती है। यह पक्का करना कि आप जानते हैं, यही काम है।\nअगर जिस boundary की ज़िम्मेदारी आपकी है उस पर कोई SIP या H.323 या FTP हेल्पर चालू है, और आप बिना देखे नहीं बता सकते कि expectation क्या है, उसके कौन-से fields wildcard हैं, मान कौन देता है, और आपका certification submission इनबाउंड नियमों के बारे में क्या दावा करता है, तो नहीं। इस मामले में नहीं। आपने कोई configuration नहीं चुनी, आपको एक डिफ़ॉल्ट विरासत में मिला और आपने उसे कभी पढ़ा नहीं। विफलता फ़ासला नहीं है; फ़ासले सबके होते हैं और मेरा यह रहा है। विफलता है एक ऐसे फ़ासले के पार boundary बनाना जिसे आपने कभी बंद नहीं किया, फिर यह कहते हुए दस्तख़त करना कि boundary मज़बूत है।\nअगर आप ठीक-ठीक जानते हैं कि यह क्या करता है, और यह इसलिए चालू है कि कोई regulator प्रोटोकॉल का नाम लेता है, या किसी partner का किट और कुछ terminate नहीं करता, या फ़ोन सिस्टम मार्च में बदला जा रहा है और तब तक इसे टिकना है, तो हाँ, ज़ाहिर है, और आप काम ठीक से कर रहे हैं। ये असली मजबूरियाँ हैं और मैंने इससे बदतर के आसपास काम किया है। जो इसे लापरवाह के बजाय professional बनाता है वह यह है कि आपने लिखा कौन-सा हेल्पर, किस interface पर, किस flow के लिए, क्यों, और किस तारीख को हटेगा। जो वही काग़ज़ी काम है जो फ़ायरवॉल नियंत्रण वैसे भी माँग रहा था।\nबचाव के लायक नहीं वह बीच वाला मामला है। इतना जानना कि बेचैनी हो, और उसे इसलिए छोड़ देना कि किसी ने आपसे सफ़ाई नहीं माँगी। यह engineering नहीं है। यह change number लगी आदत है, और इसी तरह एक फ़ीचर जिसे एक Best Current Practice ने जनवरी 2007 में बंद करने को कहा था, 2026 में अब भी चालू है।\nयह सबसे ज़्यादा तब मायने रखता है जब आप किसी को उसकी समझ के लिए पैसे दे रहे हैं, क्योंकि समझ को delivery पर जाँचा नहीं जा सकता। तो दस्तख़त से पहले जाँचिए। पूछिए कि उनका standard build प्रोटोकॉल हेल्परों के साथ क्या करता है और क्यों, पूछिए कि guest network पर कोई लिंक खोले तो क्या होता है, और पूछिए कि H.323 हेल्पर चालू छोड़ने पर कौन-से अंदरूनी डिवाइस पहुँच में होंगे, फिर देखिए कि क्या वे कहते हैं “सिर्फ़ वह मशीन जिसने क्लिक किया”, क्योंकि यही वह गलत जवाब है जो एक क़ाबिल-सा लगने वाला व्यक्ति देता है। दो मिनट में आपको पता चल जाएगा कि आपको कुछ बताया जा रहा है या पढ़कर सुनाया जा रहा है, और दो मिनट incident से कहीं सस्ता test है।\nअगर जवाब कंधे उचकाने जैसा आए और आप फिर भी दस्तख़त कर दें, तो वह भी एक फ़ैसला है। बस वह उनका नहीं रहा, आपका हो गया।\nकिसी से कभी इसकी सफ़ाई नहीं माँगी गई मैं उन लोगों के साथ निष्पक्ष रहना चाहता हूँ जिन्होंने ये चीज़ें बनाईं, क्योंकि वे इसके हक़दार हैं। 1994 में हेल्पर एक असली समस्या का उचित जवाब था। पते कम पड़ रहे थे, NAT व्यावहारिक इलाज था, कुछ अहम प्रोटोकॉल उसे झेल नहीं पाए, और विकल्प थे या तो धरती का हर FTP क्लाइंट बदलना या बॉक्स को पढ़ना सिखाना। उन्होंने बॉक्स को पढ़ना सिखाया, जितने सुरक्षित defaults सोच सके उतने भेजे, और source में चेतावनियाँ लिखीं कि उससे क्या करवाया जा सकता है। वे चेतावनियाँ अब भी वहीं हैं। मैंने एक उद्धृत की।\nबाद में जो गलत हुआ वह तकनीकी विफलता नहीं है। वह यह है कि इस उद्योग में किसी चीज़ ने कभी किसी से उसे दोबारा देखने की माँग नहीं की। IETF ने कहा इन्हें बंद करो और उसके पास किसी से करवाने की ताक़त नहीं थी। Kernel ने अपना डिफ़ॉल्ट बदला और पहले से भेजे गए डिवाइसों तक नहीं पहुँच सका। शोधकर्ताओं ने सोलह सालों में इसे चार बार साबित किया, और हर बार इलाज फ़ायरवॉल के अलावा कहीं और उतरा। इस बीच डिफ़ॉल्ट चालू रहा, इसलिए नहीं कि किसी ने उसका बचाव किया, बल्कि इसलिए कि जिस डिफ़ॉल्ट पर कोई बहस नहीं करता वह हमेशा टिका रहता है, और कहीं भी किसी विभाग का काम चीज़ों को ख़त्म करना नहीं है।\nयही पैटर्न है, और यह एक फ़ायरवॉल फ़ीचर से बड़ा है। यह धंधा सँभालने में उत्कृष्ट है और रोकने में नाकारा। Maintenance का बजट है, स्टाफ़ है, बिल बनता है और सुरक्षित है; retirement के लिए एक व्यक्ति को एक ऐसे बदलाव पर अपना नाम लिखना पड़ता है जिसमें ठीक चलने पर कोई फ़ायदा नहीं और न चलने पर हर जगह उसी का नाम। तो चीज़ बनी रहती है, और एक दिन कोई पाता है कि वह आपके प्रिंटर के लिए पोर्ट खोलती है।\nमेरे लिए पोल Cisco के अपने दस्तावेज़ का वह शब्द खोलता है: ALG एक NAT door बनाता है। filter नहीं। नियंत्रण नहीं। एक दरवाज़ा, उस दीवार में जिसके लिए आपने पैसे दिए, जिसे वह खोलता है जो उस तक आगे सही शब्दों वाला पैकेट पहुँचा दे, और तय जवाब यह रहा है कि पास से गुज़रने वालों से कहा जाए कि हैंडल न आज़माएँ।\nआप अपना आज दोपहर बंद कर सकते हैं, और ख़त्म करने लायक हिस्सा यही है। हमले नहीं; हमले तो बस वह हैं जो तब होता है जब कोई कुछ नहीं करता। जाइए और देखिए कि आपकी boundary इनबाउंड में ऐसा क्या अनुमति देती है जो आपने कभी नहीं लिखा, तय कीजिए कि क्या आपका वही इरादा था, और जो नहीं था उन्हें निकाल दीजिए, जो रखा उसके आगे एक तारीख लिखते हुए।\nBoundary हमेशा बस इतनी ही रही है: उन चीज़ों की सूची जिन्हें किसी ने अनुमति देना चुना, और बता सकता था क्यों। उस पर जो कुछ भी किसी ने नहीं चुना वह सुरक्षा नहीं है। वह फ़र्नीचर है।\nSamy Kamkar — NAT Pinning, 5 जनवरी 2010। मूल browser-से-ALG हमला, जिसमें एक छिपे फ़ॉर्म से ब्राउज़र से IRC DCC CHAT या FTP 227 response line निकलवाई जाती है ताकि राउटर का हेल्पर एक इनबाउंड पोर्ट खोल दे। “No XSS or CSRF required.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSamy Kamkar — NAT Slipstreaming, 31 अक्टूबर 2020, जनवरी 2021 में अपडेट। लेखक के सारांश में यह “an attacker to remotely access any TCP/UDP service bound to a victim machine, bypassing the victim\u0026rsquo;s NAT/firewall (arbitrary firewall pinhole control), just by the victim visiting a website” देता है। इसमें segment-boundary तकनीक है, यह नोट कि SIP handler “will bail unless the method (eg, REGISTER) occurs at the start of the data portion of the packet”, और Netgear firmware का विश्लेषण।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nBen Seri और Gregory Vishnepolsky, Armis — NAT Slipstreaming v2.0, 26 जनवरी 2021। H.323 call-forwarding primitive, ब्राउज़रों की restricted-port सूची का relay bypass, जाँचे गए products की सूची (OpenWrt, VyOS, consumer Linux राउटर, FortiGate, Cisco ASAv और csr1000v, HPE vsr1000, SonicWall TZ300), खुलासे की समय-रेखा, और यह निष्कर्ष कि “resolving the issue will require a fundamental change of their implementations by various router/firewall vendors”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4787 — Network Address Translation (NAT) Behavioral Requirements for Unicast UDP, जनवरी 2007, BCP 127। Section 7 में REQ-10 है, और यह टिप्पणी कि “Certain NATs have these ALGs turned on permanently, others have them turned on by default but allow them to be turned off”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPablo Neira Ayuso — netfilter: nf_ct_helper: disable automatic helper assignment, commit 3bb398d9, 25 अप्रैल 2016, Linux 4.7 में आया। nf_conntrack_helper का डिफ़ॉल्ट चालू से बंद करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nChromium source — net/base/port_util.cc। इसके kRestrictedPorts array में 69, 137, 139, 161, 554, 1719, 1720, 1723, 5060, 5061, 6566 और 10080 शामिल हैं। SIP पोर्टों की Adam Rice की घोषणा, 5 नवंबर 2020: “a carefully-crafted HTTP request to port 5060 on an attacker\u0026rsquo;s server can fool some NAT devices into treating it as a SIP packet and setting up port forwarding.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — SIP ALG Hardening for NAT and Firewall, IP Addressing Configuration Guide, Cisco IOS XE 17.x। “SIP ALG creates a firewall pinhole or a Network Address Translation (NAT) door based on the first value in the Via header field.” SIP के लिए NAT support “enabled by default on port 5060” है। साथ में देखें Using Application-Level Gateways with NAT, जो कहता है कि SIP और H.323 डिफ़ॉल्ट रूप से चालू हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPalo Alto Networks — Disable the SIP Application-level Gateway (ALG)। “SIP ALG creates dynamic NAT pinholes but may interfere with VoIP applications that have NAT traversal capabilities, causing communication failures.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2663 — IP Network Address Translator (NAT) Terminology and Considerations, अगस्त 1999। Section 2.9 में Application Level Gateway की परिभाषा है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3234 — Middleboxes: Taxonomy and Issues, फ़रवरी 2002। layer-violation वाली लाइन section 2.11 में है; रास्ते में अतिरिक्त बॉक्सों की क़ीमत section 5 में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nEric Leblond, Pablo Neira Ayuso, Patrick McHardy, Jan Engelhardt और Mr Dash Four — Secure use of iptables and connection tracking helpers। “This system relies on parsing of data coming either from the user or the server. It is therefore vulnerable to attack.” IRC wildcard वाले उद्धरण का स्रोत; nf_conntrack_helper sysctl और CT --helper target को दर्ज करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel source — net/netfilter/nf_conntrack_ftp.c। loose module parameter का डिफ़ॉल्ट false है, जो उस मामले की रक्षा करता है जहाँ PORT पता क्लाइंट का अपना नहीं; टिप्पणी जोखिम को “DMZ machines opening holes to internal networks, or the packet filter itself” कहती है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nnetfilter — H.323 conntrack/NAT helper, module के लेखक द्वारा। इसमें वह call-forwarding परिदृश्य है जिससे एक session किसी तीसरे पक्ष के पते का हवाला दे सकता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDavid Leadbeater — NAT-Again: IRC NAT helper flaws, अगस्त 2022। ping-echo ट्रिगर दिखाता है, नोट करता है कि इससे scan भी हो सकता है, cloaked यूज़र बेनक़ाब हो सकते हैं और पोर्ट 0 बताकर उन्हें disconnect किया जा सकता है, और सिफ़ारिश करता है: “Potentially entirely deprecate and remove nf_conntrack_irc, it\u0026rsquo;s unclear it has much use anymore.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCVE-2022-2663 — “An issue was found in the Linux kernel in nf_conntrack_irc where the message handling can be confused and incorrectly matches the message. A firewall may be able to be bypassed when users are using unencrypted IRC with nf_conntrack_irc configured.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — advisory for CVE-2018-15454, 31 अक्टूबर 2018। दिया गया बचाव ASA पर no inspect sip और FTD पर configure inspection sip disable है; NVD दर्ज करता है कि प्रकाशन के समय “Software updates that address this vulnerability are not yet available.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4217 — Securing FTP with TLS, अक्टूबर 2005।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3715 — IPsec-Network Address Translation (NAT) Compatibility Requirements, मार्च 2004। Section 2.1 का item (f) NAT के सामने SPI चुनने को कवर करता है; section 2.3 का शीर्षक Helper Incompatibilities है और उसमें IKE cookie de-multiplexing और ISAKMP payload parsing पर उद्धृत पंक्तियाँ हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — IKE and ESP ALG, Application Layer Gateways User Guide। gate के विवरण का स्रोत, यह नोट कि पोर्ट 4500 पर NAT-T ट्रैफ़िक ALG process नहीं करता, और यह चेतावनी कि जहाँ दो क्लाइंट एक translated पता साझा करते हैं वहाँ डिवाइस “will be unable to distinguish and route return traffic properly”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — IPsec Pass Through Inspection, ASA Firewall CLI Configuration Guide 9.20। “IPsec Pass Through application inspection provides convenient traversal of ESP (IP protocol 50) and AH (IP protocol 51) traffic associated with an IKE UDP port 500 connection.” डिफ़ॉल्ट policy में नहीं; दिया गया _default_ipsec_passthru_map “sets no maximum limit on ESP connections per client”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3947 — Negotiation of NAT-Traversal in the IKE, और RFC 3948 — UDP Encapsulation of IPsec ESP Packets, दोनों जनवरी 2005।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCole Dishington — netfilter: nf_conntrack: Add conntrack helper for ESP/IPsec, मई 2021, तीसरा संशोधन। netfilter-devel पर review हुआ और merge नहीं हुआ; mainline में net/netfilter में अब भी कोई nf_conntrack_proto_esp.c नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNCSC और IASME — Cyber Essentials: Requirements for IT Infrastructure v3.3, अप्रैल 2026। Control 1, Firewalls, “boundary firewalls, desktop computers, laptops, routers, servers, IaaS, PaaS, SaaS” पर लागू होता है; उद्धृत तीनों आवश्यकताएँ उसके अपने शब्द हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3027 — Protocol Complications with the IP Network Address Translator, जनवरी 2001। “The purpose of this document is to identify the protocols and applications that break with NAT enroute.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWHATWG Fetch — pull request 1109, वह standards बदलाव जिसने सभी ब्राउज़रों में bad-port entries जोड़ीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nOpenBSD — ftp-proxy(8)। Control कनेक्शन उस तक तभी पहुँचते हैं जब आपने उन्हें भेजा: “FTP control connections should be redirected into the proxy using the pf(4) divert-to command, after which the proxy connects to the server on behalf of the client.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nFortinet — Technical Tip: Disabling VoIP Inspection। config system session-helper से SIP entry हटाना, set default-voip-alg-mode kernel-helper-based दर्ज करता है, और नोट करता है कि फिर से चालू करने के लिए restart चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMozilla — Stopping FTP support in Firefox 90, 20 जुलाई 2021, और Google — Deprecations and removals in Chrome 95, अक्टूबर 2021: “Use of FTP in the browser is sufficiently low that it is no longer viable to invest in improving the existing FTP client.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/networking/protocol-helpers-turn-them-off/","summary":"प्रोटोकॉल हेल्पर, यानी SIP ALG, FTP हेल्पर, H.323 ALG, conntrack हेल्पर, आपका vendor उसे जो भी कहे, किसी कनेक्शन का payload पढ़ता है, टेक्स्ट में लिखा एक पता और पोर्ट ढूँढता है, और उनके लिए एक इनबाउंड पिनहोल खोल देता है। वह यह नहीं बता सकता कि वह टेक्स्ट किसी असली FTP क्लाइंट से आया या किसी वेब पेज के छिपे फ़ॉर्म से, क्योंकि उसमें बताने लायक कुछ है ही नहीं। Samy Kamkar ने 2010 में ब्राउज़र वाला मामला साबित किया। NAT Slipstreaming ने 2020 में फिर साबित किया, और Armis ने 2021 में उसे आपके नेटवर्क के किसी भी डिवाइस तक बढ़ा दिया, सिर्फ़ उस मशीन तक नहीं जिसने क्लिक किया। IETF ने 2007 में इन्हें डिफ़ॉल्ट रूप से बंद रखने को कहा, Linux ने 2016 में बंद किया, और ब्राउज़र vendors को blocked-port सूची भेजनी पड़ी जो conntrack modules की directory जैसी पढ़ती है। यह पोस्ट हर डायग्राम के साथ तंत्र समझाती है: expectation टेबल, segment-alignment की चाल, H.323 call forwarding, वह IRC हेल्पर जो किसी और के मैसेज पर चल पड़ता है। फिर IPsec पास-थ्रू हेल्पर, जो ESP पढ़ ही नहीं सकता और साफ़ टेक्स्ट में गुज़रते देखे गए SPI के भरोसे इनबाउंड पैकेट मोड़ता है। सब कुछ Cyber Essentials के फ़ायरवॉल नियंत्रण के सामने रखा गया है, जिसमें यह साफ़ फ़ेल होता है, और Linux, Cisco, Juniper, FortiGate और MikroTik पर सब बंद करने के कमांड दिए गए हैं।","title":"आपका फ़ायरवॉल अजनबियों से निर्देश लेता है। प्रोटोकॉल हेल्पर बंद कीजिए।"},{"content":"IPsec एक अच्छा आइडिया था। एन्क्रिप्शन को नेटवर्क लेयर पर रखिए, हर चीज़ के नीचे, और IP पर चलने वाले हर प्रोटोकॉल को बिना बताए confidentiality और integrity मिल जाती है। कोई लाइब्रेरी लिंक नहीं करनी। हर ऐप्लिकेशन का अलग सर्टिफ़िकेट नहीं। जो चीज़ आप पहले ही शिप कर चुके हैं उसे दोबारा नहीं लिखना। पैकेट सुरक्षित निकलता है और सुरक्षित पहुँचता है, और बीच के राउटर उसे बिना जाने और बिना परवाह किए ले जाते हैं कि अंदर क्या है।\nयह डिज़ाइन एक धारणा पर टिका है, और यह धारणा स्टैंडर्ड में साफ़ लिखी है, सिर्फ़ इशारे में नहीं: पैकेट का एड्रेस उस मशीन की पहचान है जिससे वह आया। सिक्योरिटी एसोसिएशन को डेस्टिनेशन एड्रेस, प्रोटोकॉल नंबर और SPI से ढूँढा जाता है1। Authentication Header इससे भी आगे जाता है और खुद IP हेडर को साइन करता है, सोर्स और डेस्टिनेशन समेत2। IPsec के लिए एड्रेस राउटिंग का मेटाडेटा नहीं है। वह पहचान का हिस्सा है और integrity जाँच का हिस्सा है।\nफिर इस इंडस्ट्री ने तीस साल लगाकर वह एड्रेस छीन लिया।\nपहले NAT, ताकि एक ऑफ़िस एक लाइन के पीछे फ़िट हो जाए। फिर कैरियर-ग्रेड NAT, ताकि कई सौ घर एक एड्रेस के पीछे फ़िट हो जाएँ, क्योंकि IPv6 चालू करना मेहनत का काम था और एक बॉक्स खरीदना बस procurement था। यही पूरा विषय We Never Ran Out of Addresses. We Ran Out of Effort. का है, और मैं यहाँ उसे दोबारा नहीं दोहराऊँगा। इस पोस्ट के लिए जो मायने रखता है वह नतीजा है। जिस एक चीज़ पर IPsec बना था, वही एक चीज़ आज का एक्सेस नेटवर्क अब नहीं देता।\nतो IPsec पर पैच लगाए गए। एन्क्रिप्टेड पैकेट को UDP में लपेटो ताकि ट्रांसलेटर के पास बदलने को एक पोर्ट हो। चेकसम को ज़ीरो कर दो ताकि कोई उसे दोबारा वैलिडेट न करे। हर बीस सेकंड में एक बाइट का पैकेट भेजो, हमेशा के लिए, ताकि किसी और के उपकरण में बैठी एक टेबल यह न भूल जाए कि आप मौजूद हैं। पहचान को एड्रेस से हटाकर एक नाम पर ले जाओ। Authentication Header को छोड़ दो, क्योंकि बनावट से ही वह बदले हुए हेडर के बाद ज़िंदा नहीं रह सकता। जब कोई होटल UDP ब्लॉक करे, तो पूरी चीज़ को TCP में भी लपेट दो3।\nइनमें से हर एक असली, स्टैंडर्ड, वेंडर-सपोर्टेड इलाज है। सब मिलकर ये एक ऐसा प्रोटोकॉल हैं जो अपने ही मचान के सहारे खड़ा है। और मचान ही तर्क है: जो चीज़ बुनियादी तौर पर मज़बूत हो, उसे आप चौथाई सदी तक सहारा देकर नहीं खड़ा रखते।\nमैं इस नतीजे पर पहुँचा हूँ कि IPsec को पूरी तरह रिटायर कर देना चाहिए। ट्यून नहीं करना, बेहतर ciphers के साथ दोबारा पेश नहीं करना, site-to-site के लिए इसलिए नहीं रखना कि वह हिस्सा अब भी चलता है। रिटायर करना, तारीखों के साथ, वैसे ही जैसे PPTP को किसी के हाथ लगाने से दस साल पहले रिटायर हो जाना चाहिए था। आगे सबूत हैं, डायग्राम हैं, वह वेंडर डॉक्यूमेंटेशन है जो यह सब वेंडरों के अपने शब्दों में कहता है, और, क्योंकि इसे पढ़ने वाले ज़्यादातर लोगों को सोमवार को भी ये चीज़ें चलानी हैं, इस बीच IPsec की खराबियाँ डायग्नोज़ करने का एक काम करने वाला तरीका।\nटिकटों में असल में इसकी कीमत क्या है स्टैंडर्ड से पहले, यह रहा बिल, उसी क्रम में जिसमें यह आपके सामने आएगा।\nटनल घड़ी के हिसाब से गिरता है। हर घंटे, या हर आठ घंटे, या बीस मिनट बिना ट्रैफ़िक के बाद। कोई फ़ाइल खोलता है तो यह वापस आ जाता है, इसलिए आधे यूज़र कभी रिपोर्ट नहीं करते और बाकी आधे इसे “VPN धीमा है” कहकर रिपोर्ट करते हैं। किसी ने कुछ नहीं बदला।\nएक ही घर के दो लोग एक साथ कनेक्ट नहीं कर सकते। दूसरा जुड़ता है, पहला गिर जाता है। दोनों सर्विस डेस्क को अलग-अलग फ़ोन करते हैं, इसलिए टिकट कभी आपस में मिलते नहीं और पंद्रह दिन तक किसी को पैटर्न नहीं दिखता।\nछोटी चीज़ें चलती हैं और बड़ी अटक जाती हैं। लॉगिन चलता है। Teams चलता है। Ping चलता है। फ़ाइल कॉपी करना हर बार उसी जगह रुक जाता है, और किसी अंदरूनी ऐप्लिकेशन का बड़ा पेज खोलना तब तक लटका रहता है जब तक टाइमआउट न हो जाए।\nटनल ऊपर है और कोई ट्रैफ़िक नहीं जाता। दोनों छोर कहते हैं established। दोनों छोर अपने आप से खुश हैं। कुछ नहीं हिलता।\nअंदर कोई नहीं पहुँच सकता। उस ब्रांच का site-to-site, जो किसी fibre altnet पर चली गई, अब उस दिशा में नहीं बनता जिसमें पहले बनता था, और कोई नहीं बता पाता क्यों, बस इतना कि “उनका IP बदल गया”।\nQoS चालू करने से एन्क्रिप्शन टूट गया। किसी ने voice को प्राथमिकता दी, और अब दूसरा छोर पैकेटों को replay मानकर फेंक रहा है।\nइनमें से एक भी आम मतलब में misconfiguration नहीं है। हर एक IPsec का आज के नेटवर्क से टकराना है। बाकी पोस्ट बताती है कि ऐसा क्यों है, क्रम से, और यह कैसे साबित करें कि आपके पास कौन-सा है।\nIPsec को नेटवर्क नहीं ढोता। IPsec ही नेटवर्क है। शुरुआत वहाँ से कीजिए जो यह था, क्योंकि डिज़ाइन सच में अच्छा है और खराबियाँ उसी के सामने रखकर समझ आती हैं।\nESP कोई प्रोटोकॉल नहीं है जो TCP या UDP पर चलता हो। यह खुद एक ट्रांसपोर्ट प्रोटोकॉल है, IP प्रोटोकॉल नंबर 50, सीधे IP पर उसी जगह बैठा जहाँ TCP और UDP बैठते हैं। AH प्रोटोकॉल 51 है। किसी के पास पोर्ट फ़ील्ड नहीं है, क्योंकि किसी को उसकी ज़रूरत नहीं: जिस इंटरनेट के लिए IPsec डिज़ाइन हुआ था, वहाँ डेस्टिनेशन एड्रेस पहले से ही ठीक एक मशीन का नाम है, और ESP हेडर का SPI बताता है कि उस मशीन पर कौन-सा सिक्योरिटी एसोसिएशन। एड्रेस, प्रोटोकॉल और SPI। यही तिकड़ी lookup है1।\nजैसा स्पेसिफ़ाई किया गया वैसा डिज़ाइन: एड्रेस मशीन का नाम है, तो पोर्ट की ज़रूरत नहीं और कोई भी छोर शुरू कर सकता है स्पेसिफ़िकेशन वाला IPsec: एड्रेस ही पहचान है होस्ट A 203.0.113.10 राउटर सिर्फ़ फ़ॉरवर्ड होस्ट B 198.51.100.7 कोई भी छोर शुरू कर सकता है मशीन से क्या निकलता है बाहरी IP हेडर src 203.0.113.10 से 198.51.100.7 प्रोटोकॉल 50 = ESP SPI 4 B sequence 4 B एन्क्रिप्टेड पेलोड आपका पैकेट, रास्ते में अपठनीय ICV 16 B एसोसिएशन lookup = डेस्टिनेशन एड्रेस + प्रोटोकॉल + SPI। कहीं कोई पोर्ट फ़ील्ड नहीं, क्योंकि उसकी ज़रूरत ही नहीं। यह डिज़ाइन तीन बातें मानता है, और 1995 में तीनों सच थीं: पैकेट पर लिखा एड्रेस ही मशीन है। रास्ते में कोई हेडर नहीं बदलता। किसी भी छोर को डायल किया जा सकता है। Authentication Header इससे भी आगे जाकर खुद बाहरी हेडर को साइन करता है, सोर्स और डेस्टिनेशन समेत, ताकि रिसीवर साबित कर सके कि रास्ते में एड्रेस को किसी ने छुआ नहीं। पैमाने पर नहीं। ESP ओवरहेड cipher के साथ बदलता है; यहाँ के आँकड़े IPv4 पर tunnel mode में AES-GCM के हैं। जैसा स्पेसिफ़ाई किया गया, वैसा डिज़ाइन। ESP बिना पोर्ट के सीधे IP पर प्रोटोकॉल 50 के रूप में बैठता है, क्योंकि उसे पोर्ट की ज़रूरत नहीं: डेस्टिनेशन एड्रेस होस्ट का नाम है और SPI उस पर एसोसिएशन का। AH खुद IP हेडर को साइन करता है। दोनों छोरों के पास असली, पहुँचने लायक एड्रेस है, कोई भी छोर बातचीत शुरू कर सकता है, और बीच में किसी को पेलोड समझने की ज़रूरत नहीं। देखिए इससे क्या मिलता है। खोलने को कोई handshake पोर्ट नहीं, गलत करने को कोई session layer नहीं, कोई ऐप्लिकेशन नहीं जिसे opt in करना पड़े। कोई भी छोर शुरू कर सकता है। नेटवर्क का बीच का हिस्सा बेवकूफ़ है, और नेटवर्क का बीच का हिस्सा ठीक ऐसा ही होना चाहिए। राउटर प्रोटोकॉल 50 को उसी तरह फ़ॉरवर्ड करता है जैसे प्रोटोकॉल 6 को, और यह कि वह पेलोड नहीं पढ़ सकता, यही असली बात है, कोई कमी नहीं।\nयह एक साफ़ डिज़ाइन है। और 2026 में यह एक ऐसे इंटरनेट का वर्णन भी है जिसे इसे पढ़ने वाले ज़्यादातर लोग खरीद ही नहीं सकते।\nफिर किसी ने हर रास्ते में एक ट्रांसलेटर बिठा दिया NAT सोर्स एड्रेस को, और अक्सर सोर्स पोर्ट को भी, बदल देता है ताकि कई मशीनें एक एड्रेस शेयर कर सकें। बस इतना ही करता है। IPsec के सामने यह लगभग पूरी तबाही है, और IETF इस बारे में इतना ईमानदार था कि उसने टुकड़ों की सूची वाला एक पूरा डॉक्यूमेंट छाप दिया: RFC 3715, IPsec-Network Address Translation (NAT) Compatibility Requirements4। सोलह अलग-अलग incompatibilities। ये रहीं वे जो मायने रखती हैं।\nAH बनावट से ही खत्म है। RFC 3715 के अपने शब्दों में: “Since the AH header incorporates the IP source and destination addresses in the keyed message integrity check, NAT or reverse NAT devices making changes to address fields will invalidate the message integrity check.”4 इसका कोई इलाज नहीं है और कभी होना भी नहीं था। जो प्रोटोकॉल हेडर को साइन करता है, वह ऐसे बॉक्स को पार नहीं कर सकता जिसका पूरा काम ही हेडर बदलना है। AH के लिए कोई रास्ता नहीं निकाला गया। उसे छोड़ दिया गया।\nट्रांसलेट करने को पोर्ट ही नहीं हैं। पोर्ट ट्रांसलेशन करने वाले NAT को पोर्ट चाहिए। ESP के पास है ही नहीं। Cisco ने Catalyst कॉन्फ़िगरेशन गाइड में यह सीधे कहा: “If PAT found a legislative IP address and port, it would drop the Encapsulating Security Payload (ESP) packet.”5 पैकेट पॉलिसी की वजह से रिजेक्ट नहीं होता। वह इसलिए गिराया जाता है क्योंकि बॉक्स के पास वह चीज़ लिखने की कोई जगह नहीं जो उसे लिखनी है।\nपहचान पैकेट से मेल खाना बंद कर देती है। फिर RFC 3715 से: “Where IP addresses are used as identifiers in Internet Key Exchange Protocol (IKE) Phase 1 or Phase 2, modification of the IP source or destination addresses by NATs or reverse NATs will result in a mismatch between the identifiers and the addresses in the IP header.”4 जो पहचान की व्यवस्था मशीनों को एड्रेस से पहचानती है, वह उस डिवाइस के आगे नहीं टिक सकती जिसका धंधा ही मशीनों का नाम बदलना है।\nदो मशीनें एक ही SPI चुन सकती हैं। SPI रिसीवर चुनता है और उसे सिर्फ़ अपने लिए यूनिक होना होता है। दो होस्ट को एक एड्रेस के पीछे रखिए और ट्रांसलेटर के पास दो एसोसिएशन होंगे जिन्हें अलग पहचानने का कोई तरीका नहीं।\nबाहर से कोई पहले नहीं आ सकता। NAT अपनी टेबल बाहर जाते पैकेटों से बनाता है। जब तक कोई शुरू न करे, कोई बाहर जाता पैकेट नहीं होता, और NAT वाले लिंक पर सिर्फ़ अंदर वाला ही शुरू कर सकता है। प्रोटोकॉल की आधी समरूपता चली गई।\nरास्ते में एक ट्रांसलेटर पाँच चीज़ें एक साथ तोड़ता है, और हर इलाज की कोई कीमत है रास्ते में एक ट्रांसलेटर, और पाँच चीज़ें एक साथ टूटती हैं होस्ट 192.0.2.20 ट्रांसलेटर सोर्स को 203.0.113.5 कर देता है गेटवे 198.51.100.7 इस तरफ़ से कुछ शुरू नहीं हो सकता बदलाव क्या नष्ट करता है 1 साइन किया हेडर मेल नहीं खाता। AH सोर्स और डेस्टिनेशन एड्रेस कवर करता है, इसलिए integrity जाँच बनावट से ही फ़ेल होती है। कोई इलाज नहीं। ट्रांसलेटर के पार AH बस इस्तेमाल नहीं हो सकता। 2 बदलने को पोर्ट नहीं। ESP IP प्रोटोकॉल 50 है और कोई पोर्ट फ़ील्ड नहीं ढोता, तो पोर्ट ट्रांसलेशन करने वाले ट्रांसलेटर के पास करने को कुछ नहीं और वह पैकेट गिरा देता है। 3 पहचान पैकेट से मेल नहीं खाती। Key exchange ने peer को उसके एड्रेस से पहचाना। हेडर में अब किसी और का एड्रेस है। 4 दो होस्ट एक ही SPI चुन सकते हैं। इसे रिसीवर चुनता है और सिर्फ़ यह पक्का करता है कि यह उसके लिए यूनिक है, तो ट्रांसलेटर के पास दो एसोसिएशन हैं जिन्हें वह अलग नहीं पहचान सकता। 5 आधी समरूपता चली गई। टेबल बाहर जाते पैकेटों से बनती है, तो सिर्फ़ अंदर वाला शुरू कर सकता है। समझौता, और उसके हर हिस्से की कीमत पूरे ESP पैकेट को पोर्ट 4500 पर UDP में लपेटो, ताकि ट्रांसलेटर के पास कुछ ऐसा हो जो वह समझे। Authentication Header पूरी तरह छोड़ दो, क्योंकि उसे कुछ नहीं बचा सकता। UDP चेकसम ज़ीरो करो, क्योंकि बदले हुए एड्रेस पर चेकसम फ़ेल ही होगा। पहचान को एड्रेस से हटाकर एक ऐसे नाम पर ले जाओ जिसका दावा peer खुद करे। हर बीस सेकंड में एक बाइट भेजो, हमेशा के लिए, ताकि किसी और के उपकरण की टेबल आपको न भूले। यह चलता है। इस पर कोई विवाद नहीं। तर्क यह है कि जो चीज़ मज़बूत हो उसे एक बॉक्स पार करने के लिए पाँच रियायतें नहीं चाहिए। वही टनल, रास्ते में एक ट्रांसलेटर के साथ। पाँच चीज़ें एक साथ टूटती हैं: साइन किया हुआ हेडर अब मेल नहीं खाता, ट्रांसलेटर के पास बदलने को पोर्ट नहीं, पहचान अब सोर्स एड्रेस से मेल नहीं खाती, दो होस्ट एक ही SPI चुन सकते हैं, और बाहर से कोई बातचीत शुरू नहीं कर सकता। नीचे की पंक्ति वह है जो इंडस्ट्री ने इसके बारे में किया, और हर इलाज में कुछ न कुछ छोड़ना पड़ा। इलाज असली था, और उसके हर हिस्से की कीमत थी NAT traversal काम करता है। इस पर कोई विवाद नहीं और मैं इसके उलट दिखावा नहीं करूँगा। मैंने बहुत सारे NAT से होकर बहुत सारे टनल चलाए हैं। जो मैं रिकॉर्ड पर चाहता हूँ वह बिल है, क्योंकि यह हर दिन हर कोई भरता है और लगभग कोई इसका हिसाब नहीं लगाता।\nतरीका RFC 3948 है: key exchange के दौरान ट्रांसलेटर का पता लगाओ, फिर पूरे ESP पैकेट को पोर्ट 4500 पर एक UDP datagram के अंदर रख दो ताकि ट्रांसलेटर के पास कुछ ऐसा हो जो वह समझता है6। वायर फ़ॉर्मैट का Cisco का वर्णन सटीक है: एन्क्रिप्शन के बाद, “a UDP header and a non-IKE marker (which is 8 bytes in length) are inserted between the original IP header and ESP header”5। Juniper का छोटा है और वही बात कहता है: “NAT-T encapsulates both IKE and ESP traffic within UDP with port 4500 used as both the source and destination port.”7\nअब मद-दर-मद बिल।\nAuthentication Header चला गया। शिष्टता से deprecate नहीं हुआ। इस्तेमाल के लायक ही नहीं रहा। RFC 8221 अब साफ़ कहता है कि ESP और AH को एक साथ इस्तेमाल करना NOT RECOMMENDED है8, और ईमानदार वजह यह है कि जो एक काम AH करता था और ESP नहीं करता, वही एक चीज़ NAT नष्ट कर देता है।\nUDP चेकसम जान-बूझकर ज़ीरो किया जाता है। RFC 3948 इसकी माँग करता है: एड्रेस बदल दिए जाने के बाद उन पर गिना गया चेकसम फ़ेल हो जाएगा, तो स्टैंडर्ड का जवाब है कि उसे गिनना ही बंद कर दो। “If the protocol header after the ESP header is a UDP header, set the checksum field to zero in the UDP header.”6 एड्रेस बदलने की एक लेयर को चालू रखने के लिए error detection की एक लेयर हटा दी गई।\nअब आप एक टेबल को गरम रखने के लिए पैकेट भेजते हैं। RFC 3948 keepalive को एक बाइट, 0xFF, के रूप में परिभाषित करता है, जो तब भेजा जाता है जब एक कॉन्फ़िगर करने लायक अंतराल तक कुछ और न गया हो, और उस अंतराल का डिफ़ॉल्ट बीस सेकंड है6। Juniper बिना सजावट के वजह बताता है: “Because NAT devices age out stale UDP translations, keepalive messages are required between the peers.”7 तो ट्रेन में बैठा एक लैपटॉप, बिल्कुल कुछ न करते हुए, हर बीस सेकंड में ट्रांसमिट करता है, हमेशा के लिए, क्योंकि ऐसे बॉक्स में बैठी एक टेबल, जिसका मालिक कोई भी छोर नहीं है, वरना भूल जाएगी कि वह मौजूद है। इसे पूरे फ़्लीट से गुणा कीजिए। यह रेडियो का जागना है, बैटरी का गिरना है, और मोबाइल नेटवर्क का ऐसा ट्रैफ़िक ढोना है जिसका पूरा मकसद भूलने से रोकना है।\nअब आप एक प्रोटोकॉल की जगह दो पोर्ट फ़ायरवॉल करते हैं, और Cisco की अपनी पाबंदियों की सूची माँगती है कि इसमें से कुछ भी काम करे, उससे पहले 500 और 4500 दोनों के लिए static translation नियम लगे हों5।\nऔर उस पाबंदियों की सूची का बाकी हिस्सा पढ़िए, क्योंकि यह वेंडर आपको इस चीज़ की शक्ल बता रहा है। Dynamic NAT पॉलिसी: सपोर्ट नहीं। IPv6 ट्रैफ़िक: इस फ़ीचर से असंगत। एक ही डिवाइस पर IPsec और NAT: दोनों एक साथ नहीं चल सकते5। यह कॉन्फ़िगरेशन गाइड नहीं है। यह उन जगहों की सूची है जहाँ मचान नहीं पहुँचता।\nइसमें कुछ भी सुंदर नहीं है, और इसमें से कुछ भी किसी एक का कसूर नहीं है। यह वही होता है जब आप एक layer-3 प्रोटोकॉल को ऐसे नेटवर्क पर ज़िंदा रखते हैं जिसने layer 3 का सम्मान करना छोड़ दिया।\nकैरियर-ग्रेड NAT ने जो बचा था वह भी हटा दिया साधारण NAT ने एड्रेस मशीन से लेकर साइट को दे दिया। ट्रांसलेटर अब भी आपका था, तो आप पोर्ट फ़ॉरवर्ड कर सकते थे, मैपिंग पिन कर सकते थे, टाइमर लंबा कर सकते थे, या concentrator को उसके आगे रख सकते थे।\nकैरियर-ग्रेड NAT एड्रेस साइट से लेकर कई सौ अजनबियों को दे देता है, और ट्रांसलेटर आपके ISP का होता है। इसके बारे में जो कुछ आप पहले कर सकते थे, अब नहीं कर सकते।\nऔर साफ़ समझ लीजिए कि रास्ते में असल में क्या है, क्योंकि लोग यहीं गलती करते हैं। घर का राउटर अब भी NAT कर रहा है। उसे बंद नहीं किया गया। वह अब भी 192.168.1.20 पर बैठे आपके लैपटॉप को उस एड्रेस में ट्रांसलेट करता है जो लाइन के पास है, बस अब लाइन के पास 100.64.12.7 है, जो शेयर्ड स्पेस है, पब्लिक एड्रेस नहीं। फिर कैरियर उसे दोबारा ट्रांसलेट करता है। तो इंटरनेट तक पहुँचने से पहले पैकेट दो ट्रांसलेटर पार करता है, और यह आम मामला है, कोई असामान्य नहीं।\nकैरियर-ग्रेड NAT का मतलब है दो ट्रांसलेशन, दो टाइमर, और किसी पर भी पहुँचने लायक एड्रेस नहीं कैरियर-ग्रेड NAT दो ट्रांसलेशन है, एक नहीं लैपटॉप 192.168.1.20 घर का राउटर पहला ट्रांसलेशन लाइन 100.64.12.7 कैरियर ट्रांसलेटर दूसरा ट्रांसलेशन, 203.0.113.9 पर आपका, और अकेली टेबल जो आप देख सकते हैं उनका, कई सौ घरों में शेयर्ड, आपको अदृश्य इंटरनेट से इन दोनों में से किसी एड्रेस तक कुछ नहीं पहुँच सकता दो टेबल, दो टाइमर, और छोटा वाला जीतता है। आपके keepalive को दोनों में से उससे जीतना है जो पहले expire हो, और आप सिर्फ़ एक पढ़ सकते हैं। जो मायने रखता है वह वही है जो आप देख नहीं सकते। पोर्ट फ़ॉरवर्डिंग चलता है और कुछ नहीं करता। राउटर खुशी-खुशी ऐसे एड्रेस से पोर्ट फ़ॉरवर्ड करता है जिस तक इंटरनेट नहीं पहुँच सकता। UPnP और PCP सफलता बताते हैं और बंद गलियारे में दरवाज़ा खोलते हैं। इसीलिए “मैंने 500 और 4500 फ़ॉरवर्ड कर दिए फिर भी ऊपर नहीं आता” इतना आम और इतना भटकाने वाला टिकट है। responder की भूमिका गई। consumer fibre पर दो ब्रांचें एक-दूसरे को डायल ही नहीं कर सकतीं। बीच में किसी को उनका परिचय कराना पड़ता है, और अब आप एक ऐसी कंपनी पर निर्भर हैं जिसे आपने कभी चुना नहीं। पहचान एड्रेस नहीं हो सकती। कई सब्सक्राइबर दूसरे छोर पर एक एड्रेस बनकर पहुँचते हैं, तो उन्हें जो भी अलग करे, वह वह फ़ील्ड नहीं जिसके लिए IPsec डिज़ाइन हुआ था। और एक छपी हुई छत है: बड़े SRX प्लेटफ़ॉर्म पर Juniper कहता है कि किसी एक ट्रांसलेटेड एड्रेस से 1,000 से ज़्यादा टनल नहीं। सबसे तेज़ पुष्टि मुफ़्त है: राउटर में WAN एड्रेस पढ़िए। अगर वह 100.64 से शुरू होता है, तो वह RFC 6598 में अलग रखा शेयर्ड स्पेस है, आप कैरियर-ग्रेड NAT के पीछे हैं, और आधा सेटिंग्स पेज सजावट है। असली static एड्रेस वाली बिज़नेस लाइन में एक ट्रांसलेशन और पहुँचने लायक endpoint होता है। अतिरिक्त मासिक शुल्क असल में आपको यही बेच रहा है: वह चीज़ जो पहले हर मशीन को मुफ़्त मिलती थी। पैकेट दो बार ट्रांसलेट होता है: एक बार घर के राउटर से, एक बार कैरियर से। उसके पास जो भी एड्रेस है, उनमें से कोई बाहर से पहुँचने लायक नहीं। इसका मतलब है दो मैपिंग टेबल, दो अलग टाइमर, जिनमें से आपको सिर्फ़ एक दिखता है, ऐसा पोर्ट फ़ॉरवर्डिंग जो सफल होता है और कुछ हासिल नहीं करता, responder की भूमिका बिल्कुल नहीं, और ऐसी peer पहचान जो अब एड्रेस नहीं हो सकती। आप डबल-NAT में हैं, और टेबलों में से सिर्फ़ एक आपकी है। दो ट्रांसलेशन का मतलब दो मैपिंग टेबल, दो ageing टाइमर, और मैपिंग गायब होने के दो मौके। आपके keepalive को उससे जीतना है जो पहले expire हो, और आप उनमें से ठीक एक को पढ़ सकते हैं। इससे बुरा, दोनों आपस में असर डालते हैं: घर का राउटर IPsec के बारे में अपनी अलग राय रख सकता है और किसी application gateway से मदद करने की कोशिश कर सकता है, तो जो सोर्स पोर्ट आपका क्लाइंट सोचता है कि वह इस्तेमाल कर रहा है, वह घर से निकलने वाला पोर्ट नहीं है, और कैरियर से निकलने वाला भी नहीं।\nपोर्ट फ़ॉरवर्डिंग अब भी चलता है, और कुछ भी नहीं करता। यह वह टिकट है जो सबसे ज़्यादा समय खाता है। कोई होम राउटर पर UDP 500 और 4500 फ़ॉरवर्ड करता है, राउटर उसे मान लेता है, सेटिंग्स पेज कहता है कि नियम active है, और कुछ भी उसे इस्तेमाल नहीं कर पाता, क्योंकि वह ऐसे एड्रेस से फ़ॉरवर्ड करता है जिस तक इंटरनेट पहुँच ही नहीं सकता। UPnP और PCP भी ऐसे ही बर्ताव करते हैं: क्लाइंट मैपिंग माँगता है, राउटर दे देता है, और पोर्ट एक बंद गलियारे में खुलता है। हर चीज़ सफलता रिपोर्ट करती है और कुछ भी काम नहीं करता। बॉक्स आपको वह सब बताएगा जो आप सुनना चाहते हैं।\nइसे तय करने का सबसे तेज़ तरीका मुफ़्त है। राउटर में WAN एड्रेस पढ़िए। अगर वह 100.64 से शुरू होता है, तो वह RFC 6598 में अलग रखा गया शेयर्ड स्पेस है, आप कैरियर-ग्रेड NAT के पीछे हैं, और उस सेटिंग्स पेज का आधा हिस्सा सिर्फ़ सजावट है।\nresponder की भूमिका अब मौजूद ही नहीं। CGNAT के पीछे का डिवाइस वह छोर नहीं हो सकता जिसे कोई डायल करे। consumer fibre पर दो ब्रांचों के बीच site-to-site, जो आम है, सस्ता है, और ठीक वही है जो एक छोटा बिज़नेस चाहता है, उसके लिए कम से कम एक छोर के पास असली एड्रेस चाहिए, या बीच में कोई तीसरी पार्टी जो दोनों का परिचय कराए। वह तीसरी पार्टी एक कंपनी है जिस पर अब आप निर्भर हैं, क्योंकि आपके ISP ने आपको एड्रेस नहीं दिया।\nटाइमर किसी और का है। RFC 4787 NAT ऑपरेटरों से कहता है कि UDP मैपिंग “MUST NOT expire in less than two minutes” और पाँच या ज़्यादा की सलाह देता है9। यह न्यूनतम सीमा और सलाह है, कोई वादा नहीं, और आप जाँच नहीं सकते कि आपका कैरियर असल में क्या करता है। इसलिए keepalive अब ट्यूनिंग का विकल्प नहीं रहता। वह बोझ उठाने वाला खंभा है, ऐसे टाइमर पर जिसका आप अंदाज़ा लगा रहे हैं।\nआपके peer की पहचान उसका एड्रेस नहीं हो सकती। कई सब्सक्राइबर दूसरे छोर तक एक ही एड्रेस के रूप में पहुँचते हैं। concentrator उन्हें अलग पहचानने के लिए जो भी इस्तेमाल करे, वह IP हेडर नहीं है, और IPsec को इस्तेमाल करने के लिए डिज़ाइन उसी चीज़ को किया गया था।\nएक पक्की छत है, और वेंडर उसे छापते हैं। Juniper डॉक्यूमेंट करता है कि SRX5400, SRX5600 और SRX5800 पर “the total number of tunnels from a given public translated IP cannot exceed 1000 tunnels”7। इसे स्पेक की लाइन की तरह नहीं, एक ऑपरेटर की तरह पढ़िए। आपके VPN concentrator की हर शेयर्ड एड्रेस पर एक सीमा है, शेयरिंग एक ऐसा कैरियर करता है जिससे आपका कोई कॉन्ट्रैक्ट नहीं, और आप उस सीमा के कितने करीब हैं यह इस पर निर्भर है कि आपके कितने यूज़र संयोग से एक ही एड्रेस के पीछे बैठे हैं। कोई काउंटर नहीं जिसे आप देख सकें। बस वह दिन है जब यह कुछ लोगों के लिए फ़ेल होने लगता है और बाकियों के लिए नहीं।\nइस सेक्शन की हर बात उस एक फ़ैसले का नतीजा है जो इस देश ने लिया और लेता रहा। वह मामला मैंने कहीं और पूरा लिख दिया है और यहाँ दोहरा नहीं रहा। यहाँ बात छोटी है: IPsec की मूल धारणा को एक्सेस नेटवर्क ने मिटा दिया, और तब से IPsec जुगाड़ों पर ज़िंदा है।\nऔर IPv6-only नेटवर्क भी इसे नहीं बचाता यहाँ मुझे अपने ही तर्क के खिलाफ़ ईमानदार होना पड़ेगा, क्योंकि ऊपर की हर बात का सीधा जवाब है: ठीक है, तो हर मशीन को एक असली IPv6 एड्रेस दे दो और IPsec फिर से स्पेसिफ़िकेशन के हिसाब से चलेगा।\nचलता है, उन दो छोरों के बीच जिनके पास दोनों के पास एक हो। ज़्यादातर लोग उस नेटवर्क पर नहीं हैं।\nजो IPv6-only एक्सेस नेटवर्क असल में मौजूद हैं, खासकर मोबाइल, वे IPv4 इंटरनेट तक NAT64 से पहुँचते हैं, जो आम मतलब में NAT है ही नहीं। यह एक प्रोटोकॉल ट्रांसलेटर है, जो IPv6 पैकेट को IPv4 पैकेट में दोबारा लिखता है। और RFC 6146 बिना किसी अस्पष्टता के बताता है कि यह क्या ले जाएगा, और क्या नहीं:\n\u0026ldquo;The current specification only defines how stateful NAT64 translates unicast packets carrying TCP, UDP, and ICMP traffic. Multicast packets and other protocols, including the Stream Control Transmission Protocol (SCTP), the Datagram Congestion Control Protocol (DCCP), and IPsec, are out of the scope of this specification.\u0026rdquo;10\nIPsec, नाम लेकर, out of scope। और उस सूची से बाहर की कोई भी चीज़ ले जाने वाले पैकेट “SHOULD be discarded”10।\nतो किसी IPv6-only फ़ोन या लैपटॉप पर, जो किसी IPv4 concentrator तक पहुँचने की कोशिश कर रहा है, और ज़्यादातर concentrator ऐसे ही हैं, native ESP को न कोई फ़ायरवॉल गिराता है न कोई ट्रांसलेटर बिगाड़ता है। उसे शुरू से ही ले जाया नहीं जाता। ट्रांसलेटर ठीक वही कर रहा है जो उसका स्टैंडर्ड उससे कहता है।\nइंडस्ट्री का जवाब, ज़ाहिर है, एक और लेयर है: 464XLAT, जो डिवाइस को एक लोकल IPv4 स्टैक देता है और दो बार ट्रांसलेट करता है, IPv4 से बाहर और फिर वापस, ताकि जो चीज़ें NAT64 नहीं ले जा सकता वे फिर भी चलें11। यह IPv6 वाली पोस्ट में जोड़-तोड़ की सूची में पहले से है और मैं इस पर दोबारा बहस नहीं करूँगा। यहाँ कहने लायक बात इसकी शक्ल है: जो प्रोटोकॉल 2004 में NAT पर टूटा, वह 2011 में IPv6 ट्रांज़िशन के लिए बने ट्रांसलेशन पर भी टूटता है, और दोनों का जवाब यही है कि उसे किसी और चीज़ में लपेट दो।\n2026 में जगह पाने के लिए किसी प्रोटोकॉल को यही परीक्षा पास करनी है। क्या यह उस नेटवर्क पर चलता है जो लोगों के पास असल में है: किसी कैरियर के शेयर्ड एड्रेस के पीछे, IPv6-only मोबाइल नेटवर्क पर, ऐसे होटल से होकर जो सिर्फ़ TCP 443 जाने देता है? UDP पोर्ट पर बनी कोई भी चीज़ बिना बताए तीनों पास कर लेती है। IPsec को हर एक के लिए अलग जुगाड़ चाहिए, और तीसरे के लिए TCP encapsulation भी3।\nपोर्ट नहीं, तो दूसरा लिंक भी नहीं यह एक ऐसी खराबी है जिसका NAT से कोई लेना-देना नहीं, जो पूरी तरह आज की है, और जिसकी लगभग कोई चर्चा नहीं होती।\nराउटर और स्विच ट्रैफ़िक को समानांतर रास्तों पर बाँटते हैं। Link aggregation, equal-cost multipath: दोनों एक ही तरह काम करते हैं, five-tuple को hash करके। सोर्स एड्रेस, डेस्टिनेशन एड्रेस, प्रोटोकॉल, सोर्स पोर्ट, डेस्टिनेशन पोर्ट। ESP के पास पोर्ट नहीं हैं। तो एक ही दो एड्रेस के बीच के टनल का हर पैकेट एक जैसा hash होता है, और पूरा टनल एक मेंबर लिंक पर जा बैठता है, चाहे आपने कितने भी खरीदे हों।\nदो 10G लिंक और एक IPsec टनल आपको 10G देते हैं। चार भी 10G देते हैं। उपकरण ठीक वैसे ही काम कर रहा है जैसा डिज़ाइन हुआ।\nजुगाड़ की शक्ल वही पुरानी है। कुछ silicon इसके बदले SPI पर hash कर सकता है, क्योंकि हर SPI एक एसोसिएशन का नाम है और इसलिए एक flow का, पर यह ऐसा फ़ीचर है जो आपने खरीदा हो, ऐसी चीज़ नहीं जिसे आप उस रास्ते के बारे में मान लें जिसके मालिक आप नहीं। एक सक्रिय IETF draft है जिसका पूरा मकसद ESP को एक और UDP हेडर में लपेटना है ताकि आम राउटर उसे hash कर सकें, और वह एक वाक्य में वजह बताता है: “Although the ESP SPI field within the IPsec packets can be used as the load-balancing key, but it cannot be used by legacy switches and routers.”12 उसका problem statement भी उतना ही सीधा है कि लोग इसके बदले क्या करते हैं: “Many cloud service providers allow customers to establish multiple IPsec VPN tunnels in parallel to enable ECMP and increase aggregate bandwidth. However, this approach is not ideal, as each tunnel typically requires its own public IP address, leading to higher public IP consumption and increased operational overhead.”12\nएक पल इस पर ठहरिए। एन्क्रिप्टेड लिंक को तेज़ करने का सुझाया गया तरीका है कि उसके कई बना लो, हर एक एक पब्लिक IPv4 एड्रेस खाता हुआ, वह भी एड्रेस की किल्लत के दौरान, क्योंकि प्रोटोकॉल के पास hash करने को पोर्ट नंबर नहीं है। वहीं UDP पर बना टनल multipath मुफ़्त में पाता है, पंद्रह साल पहले शिप हुए हार्डवेयर से, क्योंकि उसके पास आज के इंटरनेट की हर दूसरी चीज़ की तरह पोर्ट है।\nयह कोई पुरानी समस्या नहीं जो समय के साथ खत्म हो जाएगी। यह आज के नए बिल्ड पर एक जीती-जागती सीमा है, ठीक उन स्पीड पर जो लोग अब खरीद रहे हैं।\nMTU टैक्स, और उसे कौन भरता है हर टनल बाइट्स खाता है। IPsec ज़्यादातर से ज़्यादा खाता है, और जगह खत्म होने पर यह जिस तरह फ़ेल होता है, वह सबसे बुरी किस्म की खराबी है: कभी-कभी होने वाली, साइज़ पर निर्भर, और हर उस टेस्ट से अदृश्य जो कोई भी सबसे पहले चलाता है।\nआपका डेटा अंदर जाने से पहले हर टनल हर पैकेट पर क्या खर्च करता है आपका डेटा शुरू होने से पहले गए बाइट्स, पैमाने पर हेडर, हर पैकेट कुल Native ESP tunnel, AES-GCM IP 20 ESP 8 IV 8 trailer + tag 18 54 B UDP में ESP पोर्ट 4500, NAT हेतु IP 20 UDP 8 ESP 8 IV 8 trailer + tag 18 62 B L2TP/IPsec AES-CBC, NAT-T IP 20 UDP 8 ESP 8 IV 16 UDP 8 L2TP 6 PPP 4 trailer + tag 18 88 B PPTP GRE, प्रोटोकॉल 47 IP 20 GRE 16 PPP 4 कोई integrity tag नहीं 40 B WireGuard एक UDP पोर्ट IP 20 UDP 8 हेडर 16 tag 16 60 B छायांकित ब्लॉक किसी और के ट्रांसलेटर की कीमत हैं। L2TP वाली पंक्ति में इनमें से तीन एन्क्रिप्शन के अंदर हैं: एक दूसरा UDP हेडर, एक session layer, और डायल-अप मॉडेम की फ़्रेमिंग। PPTP सबसे सस्ता है क्योंकि कुछ नहीं बचाता। 40 बाइट से कोई integrity जाँच नहीं मिलती, और MS-CHAPv2 2012 में एक अकेले DES ऑपरेशन तक सिमट गया। सस्ता होना पैमाना नहीं। बाइट्स से क्या मिलता है, वही पैमाना है। हर एक का एक हल किया कॉन्फ़िगरेशन, IPv4 पर। सटीक आँकड़े cipher, mode और address family के साथ बदलते हैं। आपका कोई भी डेटा अंदर जाने से पहले हर पैकेट पर खर्च होने वाले बाइट्स, हर एक के लिए एक हल किया हुआ कॉन्फ़िगरेशन। Native ESP हल्का है। NAT के लिए लपेटने पर आठ और लगते हैं। L2TP/IPsec एन्क्रिप्शन के अंदर एक UDP हेडर, एक L2TP हेडर और एक PPP हेडर ढोता है: डायल-अप फ़्रेमिंग, एन्क्रिप्टेड, 2026 में। PPTP सस्ता दिखता है क्योंकि वह authentication tag ढोता ही नहीं, और यही उसकी पूरी समस्या है। हवा में हाथ हिलाने के बजाय एक कॉन्फ़िगरेशन का हिसाब लगाइए। IPv4 पर tunnel mode में ESP, AES-GCM के साथ: 20 बाइट बाहरी IP हेडर, 8 ESP हेडर, 8 nonce, कम से कम 2 trailer, 16 integrity tag। आपके पैकेट का कुछ भी अंदर जाने से पहले 54 बाइट। NAT traversal के लिए लपेटिए और UDP हेडर इसे 62 कर देता है। 1500 बाइट के रास्ते पर इससे 1438 बचते हैं, और जिस पल ऊपर कहीं भी 1492 पर PPPoE चल रहा हो, आप फिर नीचे आ जाते हैं।\nफिर वह हिस्सा जो इसे गणित की समस्या के बजाय खराबी बनाता है। भेजने वाले को पता चलता है कि पैकेट बहुत बड़ा था, सिर्फ़ तब जब उसे ICMP error वापस मिले: IPv4 पर Fragmentation Needed, IPv6 पर Packet Too Big। अगर रास्ते में कोई भी चीज़ उन errors को गिरा दे, तो भेजने वाला कभी नहीं सीखता, और ऐसे पैकेट भेजता रहता है जो मरते रहते हैं। यही क्लासिक black hole है: handshake पूरा हो जाता है क्योंकि handshake छोटे होते हैं, और ट्रांसफ़र अटक जाता है क्योंकि ट्रांसफ़र छोटे नहीं होते।\nCisco GRE और IPsec के ज़माने से इस पर एक पूरा डॉक्यूमेंट बनाए हुए है, और यह आज भी किसी की भी लाइब्रेरी में इस आपसी असर की बेहतर व्याख्याओं में से एक है13। इसे बनाए रखने की ज़रूरत इसलिए है कि लोग पूरे ICMP को एक झटके में ब्लॉक करते रहते हैं और फिर सोचते हैं कि टनल अजीब बर्ताव क्यों करते हैं।\nउस तर्क के दोनों हिस्से मैं पहले ही लिख चुका हूँ और वे यहाँ बिना दोहराए लागू होते हैं: कौन-से ICMP संदेश बोझ उठाते हैं और कौन-सा नहीं, Ping: The Diagnostic Tool That Opens a Whole Lot More में, और आपका ट्रैफ़िक खाने वाला ठीक-ठीक hop कैसे ढूँढें, The Firewall Is Eleven Hops Away में। इस पोस्ट के लिए छोटा रूप: errors ही तंत्र हैं, echo नहीं, और जो border पॉलिसी पूरा ICMP गिरा देती है उसने आपका VPN इस तरह तोड़ा है कि दोष VPN पर ही आएगा।\nऔर आपकी अपनी Quality Of Service भी इसे तोड़ सकती है एक और, क्योंकि यह अच्छे इंजीनियरों को सही काम करते हुए पकड़ लेता है।\nESP एक sequence number ढोता है और Cisco प्लेटफ़ॉर्म पर रिसीवर डिफ़ॉल्ट रूप से 64 पैकेट की replay window रखता है14। अब भेजने वाले राउटर पर voice को प्राथमिकता दीजिए। Low-latency queueing वही करता है जो आपने कहा, और पैकेटों को उस क्रम के मुकाबले आगे-पीछे कर देता है जिसमें वे एन्क्रिप्ट हुए थे। अगर कोई पैकेट पहुँचने तक window से बाहर गिर जाए, तो दूसरा छोर उसे replay मानकर फेंक देता है, और जो काउंटर बढ़ता है वह सिक्योरिटी काउंटर है।\nCisco के अपने शब्द: “Certain QoS features, such as Low Latency Queueing (LLQ), could cause IPsec packet delivery to become out-of-order and dropped by the receiving endpoint due to a replay check failure.”14 उनका जवाब है कि जहाँ प्लेटफ़ॉर्म सपोर्ट करे वहाँ window को 1024 तक चौड़ा करो, या एक multiple-sequence-number-space एक्सटेंशन अपनाओ जो QoS classes को एक ही एसोसिएशन के अंदर अलग sequence spaces से जोड़ता है14।\nतो: अपने ही नेटवर्क का एक स्टैंडर्ड फ़ीचर चालू करने से आपका अपना टनल टूटता है, और इलाज एक और प्रोटोकॉल एक्सटेंशन है। यह ऊपर की हर चीज़ जैसी ही शक्ल है।\nL2TP: डायल-अप फ़्रेमिंग, एन्क्रिप्टेड, 2026 में L2TP कोई सिक्योरिटी प्रोटोकॉल नहीं है और उसने कभी ऐसा दावा भी नहीं किया। RFC 2661 PPP सेशन ढोने का एक टनलिंग प्रोटोकॉल है, 1999 में छपा, जिसकी अपनी कोई confidentiality नहीं है; उसका अपना सिक्योरिटी सेक्शन पैकेट-लेवल सुरक्षा के लिए आपको IPsec की तरफ़ भेजता है15। वह जोड़ी RFC 3193 है, और नतीजा ऊपर के डायग्राम वाला स्टैक है: एक बाहरी IP हेडर, NAT traversal के लिए एक UDP हेडर, ESP, फिर एन्क्रिप्शन के अंदर पोर्ट 1701 पर एक और UDP हेडर, एक L2TP हेडर, और एक PPP हेडर।\nPPP। डायल-अप मॉडेम की फ़्रेमिंग, एक एन्क्रिप्टेड टनल के अंदर, इंटरनेट पर, 2026 में, क्योंकि L2TP लिखा ही इसे ढोने के लिए गया था।\nएक हल किए उदाहरण पर इसकी कीमत गिनिए: बाहरी IP 20, UDP 8, ESP हेडर और IV 24, अंदर का UDP 8, L2TP 6, PPP 4, trailer और tag 18। आप हर पैकेट पर लगभग 88 बाइट खर्च कर रहे हैं, वह डेटा ले जाने के लिए जिसे native ESP 54 में ले जाता है। चौंतीस बाइट, हर पैकेट, एक ऐसी session layer के लिए जो कुछ भी नहीं जोड़ती जो आप चाहते थे, और एक ऐसी link layer के लिए जो टेलीफ़ोन लाइन के लिए डिज़ाइन हुई थी।\nओवरहेड इसका सबसे छोटा हिस्सा है।\nयह NAT की समस्या को घटाता नहीं, गुणा करता है। L2TP/IPsec आम तौर पर ESP को transport mode में इस्तेमाल करता है, जो वह mode है जिसे NAT सबसे ज़्यादा चोट पहुँचाता है, और जाना-माना नतीजा यह है कि कई implementations एक एड्रेस के पीछे दो क्लाइंट सपोर्ट ही नहीं कर पाते। एक घर में दो लोग, या एक ऑफ़िस में चालीस, या किसी कैरियर के शेयर्ड एड्रेस के पीछे कई सौ। दूसरे छोर को एक एड्रेस दिखता है और वह सेशनों को अलग नहीं पहचान पाता, तो दूसरा कनेक्शन पहले की जगह ले लेता है। यह इस पोस्ट की शुरुआत वाला टिकट है, और यह किसी के प्रोडक्ट का बग नहीं है: यह पहचान-एड्रेस-से वाली समस्या है, उस जगह पहुँचती हुई जहाँ सबसे ज़्यादा लोग उससे मिलते हैं।\nऔर फ़ील्ड में इसे आम तौर पर सबके लिए एक ही shared secret के साथ लगाया जाता है। क्योंकि secret क्लाइंट प्रोफ़ाइल पर कॉन्फ़िगर होता है और सेटअप निर्देशों के साथ बाँटा जाता है, pre-shared key onboarding डॉक्यूमेंट में है, wiki पेज पर है, नए लोगों को भेजे ईमेल में है, और हर उस लैपटॉप पर है जो कभी बाहर गया। यह दूसरा factor नहीं है। यह एक पासवर्ड है जो गेटवे को किसी खास व्यक्ति के सामने authenticate नहीं करता और कभी एक बार भी rotate नहीं हुआ।\nL2TP ऐसा प्रोटोकॉल नहीं है जो बुरी तरह बूढ़ा हुआ। यह ऐसा प्रोटोकॉल है जो पहले दिन से गलत चीज़ ढो रहा था, और जो काम यह बिल्कुल नहीं कर सकता था उसकी भरपाई के लिए इसे IPsec से जोड़ दिया गया।\nPPTP कभी सुरक्षित नहीं था, और अब भी बिक रहा है PPTP दो पैराग्राफ़ का हकदार है, पूरे सेक्शन का नहीं, और उसे ये इसलिए मिल रहे हैं क्योंकि लोग अब भी इसे शिप करते हैं।\nयह कभी स्टैंडर्ड नहीं था। RFC 2637 Informational है। एक वेंडर प्रोटोकॉल जिसे लिख दिया गया, ऐसी चीज़ नहीं जिसकी IETF ने कभी सिफ़ारिश की। यह PPP को GRE के अंदर ढोता है, IP प्रोटोकॉल 47, जिसके पास ESP की तरह पोर्ट नहीं हैं, तो रास्ते के हर NAT में इसे अपना खास इंतज़ाम चाहिए: “PPTP passthrough” वाला चेकबॉक्स, जो बहुत सारे होम राउटरों पर एक समय में ठीक एक सेशन सपोर्ट करता है।\nसुरक्षा सार्वजनिक रूप से 2012 में खत्म हो गई। Marlinspike और Hulton ने दिखाया कि MS-CHAPv2 की सुरक्षा पासवर्ड की लंबाई चाहे जो हो, एक अकेले DES ऑपरेशन तक सिमट जाती है, handshake निकालने के लिए chapcrack बनाया, और उसे एक cracking सर्विस से जोड़ा जो बीस डॉलर में एक दिन के अंदर key लौटा देती थी: 100% सफलता दर, कोई संभावना नहीं16। उनका निष्कर्ष था कि PPTP ट्रैफ़िक को unencrypted माना जाना चाहिए। Apple ने अमल से सहमति जताई और 2016 में macOS Sierra और iOS 10 के built-in क्लाइंट से PPTP हटा दिया, और आज भी वह चेतावनी छापता है17।\nउसके दस साल बाद भी PPTP इस साल बिक रहे राउटरों के मेन्यू में एक आइटम है, अब भी वेंडर के how-to पेजों में है, अब भी वह चीज़ है जिसे कोई इसलिए चालू करता है कि वह पहली बार में चल जाती है। वह पहली बार में इसलिए चलती है क्योंकि वह काम कर ही नहीं रही।\nवह सब कुछ जो खुद को IPsec VPN कहता है “IPsec VPN” कोई प्रोटोकॉल नहीं है। यह एक परिवार है, और नीचे की सूची की लंबाई ही तर्क है, क्योंकि कोई भी दो प्रोडक्ट इसका एक जैसा हिस्सा implement नहीं करते, और उन हिस्सों के बीच के फ़ासले वहीं हैं जहाँ हर वह interop काम असल में रहता है जिससे आपको कभी नफ़रत हुई।\nहिस्सा क्या जोड़ता है कहाँ खड़ा है ESP, IP प्रोटोकॉल 50 खुद एन्क्रिप्शन और integrity RFC 4303: मौजूदा18 AH, IP प्रोटोकॉल 51 IP हेडर पर भी integrity RFC 4302: NAT से होकर बेकार2 IKEv1 मूल key exchange Deprecated, RFC को Historic में भेजा गया19 IKEv2 मौजूदा key exchange RFC 729620 IPComp, IP प्रोटोकॉल 108 एन्क्रिप्ट करने से पहले compress करता है, अपने अलग एसोसिएशन के साथ RFC 317321 PF_KEY v2 एक kernel API ताकि daemon keys लोड कर सके RFC 236722 NAT traversal ESP को UDP 4500 में लपेटता है ताकि ट्रांसलेटर संभाल सके RFC 3947 / 39486 TCP encapsulation उन नेटवर्कों के लिए जो UDP भी ब्लॉक करते हैं RFC 9329, RFC 8229 की जगह3 IKEv2 fragmentation क्योंकि key exchange खुद MTU से बड़ा हो गया RFC 738323 MOBIKE ताकि एड्रेस बदलने पर भी टनल बचा रहे RFC 455524 Dead peer detection एक heartbeat, क्योंकि और कुछ आपको नहीं बताता RFC 370625 XAUTH यूज़र authentication: पासवर्ड, token, RADIUS कभी RFC नहीं बना। Expired draft, 200126 Mode-Config क्लाइंट को एड्रेस, DNS और routes देता है यह भी कभी RFC नहीं बना26 L2TP/IPsec टनल के अंदर PPP ढोता है RFC 2661 + RFC 319327 IPsec पर GRE या VTI प्रोटोकॉल चलाने के लिए एक routable इंटरफ़ेस देता है ESP के ऊपर वेंडर आर्किटेक्चर DMVPN mGRE, NHRP और IPsec, ताकि spokes एक-दूसरे को ढूँढ लें वेंडर आर्किटेक्चर, NHRP RFC 233228 GETVPN Group keys, बिना किसी pairwise टनल के GDOI, RFC 640729 PPTP वह चीज़ जिसकी जगह IPsec को लेनी थी RFC 2637: Informational, कभी स्टैंडर्ड नहीं30 अब bold वाली दो पंक्तियों को देखिए, क्योंकि यही हैं जिन्हें आपको रोक देना चाहिए।\nलगभग दो दशक तक किसी यूज़र को कॉर्पोरेट IPsec VPN में लॉगिन कराने का स्टैंडर्ड तरीका XAUTH था: आपका यूज़रनेम और पासवर्ड, आपका token, आपका RADIUS सर्वर, और Mode-Config क्लाइंट को उसका एड्रेस, DNS सर्वर और routes देता था। दोनों मिलकर पूरा remote-access अनुभव हैं। हर “Cisco IPsec” क्लाइंट, ट्रे में हर VPN आइकन, जुड़ने के निर्देशों का हर सेट।\nइनमें से कोई भी स्टैंडर्ड नहीं है। XAUTH एक व्यक्तिगत internet draft था जो 2001 में expire हो गया और कभी RFC बने बिना archive कर दिया गया26। बताई गई वजह पढ़ने लायक है, क्योंकि यह एक कमेटी है जो समझा रही है कि वह अपना काम क्यों नहीं करेगी: draft दर्ज करता है कि IPSRA working group ISAKMP या IKE को बढ़ाने वाला कोई प्रोटोकॉल स्वीकार नहीं करेगा, और IPsec working group ने remote access से जुड़ी किसी भी चीज़ से इनकार कर दिया26। तो सबसे ज़्यादा लगाए गए VPN प्रोटोकॉल का सबसे ज़्यादा लगाया गया हिस्सा बेघर छोड़ दिया गया, फिर भी हर वेंडर ने एक expired draft को अपने-अपने ढंग से पढ़कर उसे implement किया, और लाखों यूज़र्स तक शिप कर दिया।\nआखिरकार IKEv2 ने दोनों को ठीक किया, और यह कहना ज़रूरी है: authentication EAP पर चला गया और क्लाइंट कॉन्फ़िगरेशन payloads मुख्य स्पेसिफ़िकेशन में आ गए20। पर तारीखें पढ़िए। सबसे ज़्यादा इस्तेमाल होने वाले VPN प्रोटोकॉल का सबसे ज़्यादा इस्तेमाल होने वाला फ़ीचर लगभग एक दशक तक एक expired draft पर चला, उससे पहले कि उसका कोई स्टैंडर्ड बना भी, और लगा हुआ बेस उसके बाद भी सालों तक draft वाला वर्ज़न चलाता रहा। किसी प्रोटोकॉल परिवार को इसका श्रेय नहीं मिलता कि उसने आखिरकार उस हिस्से को स्टैंडर्ड बना दिया जिसे हर कोई पहले से इस्तेमाल कर रहा था।\nयही वह परिवार है जिसे आप चला रहे हैं। इसका कुछ हिस्सा standards-track पर है और मौजूदा है। कुछ Historic है। कुछ कभी कुछ बनने तक पहुँचा ही नहीं। और जिस प्रोडक्ट की datasheet पर “IPsec VPN” लिखा है, उसने आपको लगभग कुछ नहीं बताया कि इन अठारह चीज़ों में से वह कौन-सी करता है, और इसीलिए उनमें से दो को आपस में जोड़ना पंद्रह दिन, proposals की एक spreadsheet, और किसी ऐसे व्यक्ति को एक फ़ोन कॉल है जिसने यह पहले किया हो।\nFisher-Price OS (Windows) ने कभी सच में इंटरऑपरेट नहीं किया यह वह हिस्सा है जहाँ कोई कहता है कि असली समस्या Linux है, तो चलिए इसे सबूतों के साथ करते हैं।\nडिफ़ॉल्ट रूप से Windows क्लाइंट NAT के पीछे बैठे किसी IPsec सर्वर से कनेक्ट ही नहीं होगा। “मुश्किल से होगा” नहीं। मना कर देगा। इलाज HKEY_LOCAL_MACHINE\\SYSTEM\\CurrentControlSet\\Services\\PolicyAgent के नीचे AssumeUDPEncapsulationContextOnSendRule नाम की एक registry value है, जो 1 पर सेट हो अगर सर्वर किसी ट्रांसलेटर के पीछे है या 2 पर अगर दोनों छोर हैं, हर क्लाइंट पर और सर्वर पर, उसके बाद reboot31। Microsoft के अपने शब्द: “By default, Windows Vista and Windows Server 2008 don\u0026rsquo;t support Internet Protocol security (IPsec) network address translation (NAT) Traversal (NAT-T) security associations to servers that are located behind a NAT device.”31\nइस बारे में दो बातें। पहली यह कि Microsoft उस NAT traversal स्टैंडर्ड का सह-लेखक है जिसे इस्तेमाल करने से वह मना कर रहा है। RFC 3947 और RFC 3948 पर उनका नाम है6। दूसरी यह कि आपको registry एडिट करने को कहने वाला पेज आखिरी बार फ़रवरी 2026 में संशोधित हुआ31। बीस साल बाद भी हर endpoint पर registry hack ही जवाब है, और इसे जवाब के रूप में अब भी बनाए रखा जा रहा है।\nऔर वह वाक्य पढ़िए जो Microsoft ठीक उसके ऊपर रखता है: “If you must use IPsec for communication, use public IP addresses for all servers that you can connect to from the Internet.”31\nयही पूरी पोस्ट है, वेंडर के अपने डॉक्यूमेंटेशन में। IPsec को NAT के पीछे मत रखो। हर मशीन को असली एड्रेस दो। उन्होंने यह लिख दिया, और फिर इंडस्ट्री ने दो दशक इसका उलटा करने में और उस अंतर का बिल बनाने में बिता दिए।\nयह NAT पर नहीं रुकता। जाकर पढ़िए कि किसी open-source गेटवे को Windows क्लाइंट स्वीकार करने के लिए क्या-क्या डॉक्यूमेंट करना पड़ता है।\nगेटवे सर्टिफ़िकेट को एक ऐसा extended key usage चाहिए जो सिर्फ़ इसी के लिए है और किसी चीज़ के लिए नहीं। serverAuth, OID 1.3.6.1.5.5.7.3.1, साथ में IP Security IKE Intermediate, OID 1.3.6.1.5.5.8.2.232। आपके CA को एक ऐसा OID डालने को कहना पड़ता है जिसके बारे में ज़्यादातर टूलिंग ने कभी सुना नहीं, वरना कनेक्शन एक पॉलिसी error और बिना किसी काम के संदेश के साथ फ़ेल होता है। क्लाइंट ढंग की cryptography पेश करे, उससे पहले एक दूसरी registry value चाहिए। strongSwan डॉक्यूमेंट करता है कि AES-256-CBC और 2048-bit group पाने के लिए Rasman\\Parameters के नीचे NegotiateDH2048_AES256 जोड़ना पड़ता है33। इसे उलटा पढ़िए, जो असल में मायने रखता है: registry एडिट के बिना डिफ़ॉल्ट proposal इससे कमज़ोर है। NAT के पीछे के क्लाइंट सर्वर की तरफ़ से शुरू किया गया rekeying रिजेक्ट कर देते हैं, और डॉक्यूमेंट किया गया जुगाड़ है कि गेटवे पर rekeying बंद कर दो और क्लाइंट को शुरू करने दो33। स्टैंडर्ड IKEv2 एक्सटेंशन बस गायब हैं: न IKE redirection, न authentication के कई राउंड33। इनमें से कोई भी Linux का बग नहीं है। हर एक एक open-source प्रोजेक्ट है जो लिख रहा है कि उसे एक वेंडर की उस स्टैंडर्ड की व्याख्या को समायोजित करने के लिए क्या करना पड़ता है जिसे लिखने में उसी वेंडर ने मदद की थी।\nयही पैटर्न है, और यह तीस साल पुराना है। PPTP Microsoft का प्रोटोकॉल था, Informational के रूप में लिखा गया और कभी स्टैंडर्ड नहीं बना30। MS-CHAPv2 और MPPE Microsoft के authentication और एन्क्रिप्शन थे, और दोनों सबके सामने तोड़े गए16। SSTP Microsoft का एक टनल है जिसे और कोई terminate नहीं करता। DirectAccess IPsec था, और डिज़ाइन से ही दोनों छोरों पर Windows था, और अब वह deprecated है और हटाया जा रहा है, ग्राहकों को उसकी जगह Always On VPN पर धकेला जा रहा है34। इनमें से एक भी कभी ऐसा प्रोटोकॉल नहीं था जिस पर हम बाकी लोग बीच में मिल सकें। ये ऐसे प्रोटोकॉल थे जिनमें आप शामिल होते थे, और अगर आप दोनों छोरों पर सही ऑपरेटिंग सिस्टम नहीं चलाते थे तो आपको registry hack, अजीब OID और जुगाड़ वाला पेज मिलता था।\nतो मैं साफ़ कह दूँ, क्योंकि यह मेरा ब्लॉग है। Fisher-Price OS (Windows) किसी ओपन प्रोटोकॉल स्टैक में कभी असली बराबरी वाला साथी नहीं रहा, क्योंकि बराबरी का साथी होना कभी उसका मकसद ही नहीं था। वह डिज़ाइन के लक्ष्य के तौर पर मशीन को उसे इस्तेमाल करने वाले से छिपाता है, और जो स्टैक आप देख नहीं सकते, उसे आप इंटरऑपरेट नहीं करा सकते। अगर यही एकमात्र ऑपरेटिंग सिस्टम है जिसे आपने कभी एडमिनिस्टर किया है, तो kernel काउंटर पढ़ने और वायर देखने वाले ऊपर के सेक्शन आपको किसी दूसरी भाषा जैसे लगे होंगे, और यही फ़ासला है: कोई पसंद नहीं, एक फ़ासला।\nइसमें से किसी की भी कीमत पढ़ने वाले को नहीं चुकानी पड़ती। इस पोस्ट का हर डायग्नोस्टिक नेटवर्क पर किसी भी Unix से चलता है, जो भी टूटा है उसकी तरफ़ इशारा करके, और उसे ज़रा भी परवाह नहीं कि दूसरा छोर क्या चला रहा है। और अगर वह ऑपरेटिंग सिस्टम ही आपके पास अकेला है, तो नीचे का डायग्नोस्टिक सेक्शन उसके लिए भी अपने टूल रखता है: capture, दो cmdlets, और error codes, साथ में यह कि हर एक असल में क्या बता रहा है। टूटा हुआ टनल सोमवार को भी ठीक करना ही है। फिर जिस विकल्प के पक्ष में मैं आखिर में तर्क देता हूँ, उसका एक ही क्लाइंट है, जो हर प्लेटफ़ॉर्म पर एक जैसा बर्ताव करता है, उसमें वह प्लेटफ़ॉर्म भी शामिल है, और तीस साल में पहली बार किसी VPN के बारे में यह सच है।\nDeprecation का रिकॉर्ड किसी श्रद्धांजलि जैसा पढ़ता है जुगाड़ों को एक तरफ़ रखिए और बस यह पढ़िए कि स्टैंडर्ड बनाने वाली संस्थाओं ने सालों में इस परिवार के साथ क्या किया। राय नहीं। छपे हुए RFCs में requirement levels।\nक्या अब कहाँ खड़ा है स्रोत IKEv1 Deprecated; RFC 2407, 2408 और 2409 को Historic में भेजा गया RFC 9395, 202319 ESP में DES MUST NOT RFC 82218 ESP में 3DES SHOULD NOT RFC 82218 HMAC-MD5-96 MUST NOT RFC 82218 ESP और AH एक साथ NOT RECOMMENDED RFC 82218 सिर्फ़ एन्क्रिप्शन वाला ESP असुरक्षित साबित, और 2007 में व्यवहार में तोड़ा गया Degabriele and Paterson35 IPv6 नोड पर IPsec MUST से घटाकर SHOULD RFC 6434, 201136 PPTP कभी स्टैंडर्ड नहीं; सिर्फ़ Informational RFC 263730 आखिरी से पहले वाली पंक्ति वह है जिसे मैं हर उस व्यक्ति के सामने रखूँगा जो मुझसे कहता है कि IPsec ठीक है और समस्या नेटवर्क है। IPv6 ने मूल रूप से IPsec को अनिवार्य किया था: वही सिक्योरिटी की कहानी थी, नोड की requirements में लिखी हुई। 2011 में IETF ने अपना मन बदल लिया: “Previously, IPv6 mandated implementation of IPsec and recommended the key management approach of IKE. This document updates that recommendation by making support of the IPsec Architecture a SHOULD for all IPv6 nodes.”36\nवह एड्रेस परिवार भी, जो IPsec को वह सब लौटा देता जो NAT ने छीना, पंद्रह साल पहले उसे अनिवार्य मानना छोड़ चुका है। यह नेटवर्क का IPsec को फ़ेल करना नहीं है। यह नेटवर्क डिज़ाइन करने वालों का यह तय करना है कि IPsec ने वह अनिवार्यता कमाई नहीं थी।\nजटिलता की चेतावनी 1999 में लिखकर दी गई थी इसमें से कुछ भी बाद की समझदारी नहीं है, और यही इसे लिखने लायक बनाता है।\n1999 में Niels Ferguson और Bruce Schneier को IPsec का मूल्यांकन करने का काम दिया गया। उनकी रिपोर्ट छोटी है, सीधी है, और पूरी पढ़ने लायक है। वह इससे शुरू होती है: “IPsec was a great disappointment to us. Given the quality of the people that worked on it and the time that was spent on it, we expected a much better result.”37 वह वजह का नाम लेती है: “Our main criticism of IPsec is its complexity. IPsec contains too many options and too much flexibility; there are often several ways of doing the same or similar things. This is a typical committee effect.”37\nऔर उसने तीन सिफ़ारिशें कीं जो आज उन चीज़ों की सूची जैसी पढ़ती हैं जो वैसे भी हुईं, बीस साल देर से और मुश्किल तरीके से:\nTransport mode खत्म करो। “We therefore recommend that transport mode be eliminated.”37 Transport mode वही mode है जो L2TP/IPsec इस्तेमाल करता है, और वही mode है जिसे NAT सबसे बुरी चोट पहुँचाता है। AH खत्म करो। “We conclude that eliminating transport mode allows the elimination of the AH protocol as well, without loss of functionality.”37 इसके बजाय NAT ने उसे खत्म किया, एक बदतर वजह से। Authentication के बिना एन्क्रिप्शन की कभी इजाज़त मत दो। उन्होंने चेताया कि एडमिनिस्ट्रेटर “will be quite likely to configure ESP for only encryption, believing that it provides security.”37 आठ साल बाद वह आखिरी वाली चेतावनी नहीं रही। Degabriele और Paterson ने ऐसे हमले छापे जो “break any RFC-compliant implementation of IPsec making use of encryption-only ESP”, सिर्फ़ ciphertext से, जिसके लिए ट्रैफ़िक देखने और पैकेट डालने की क्षमता से ज़्यादा कुछ नहीं चाहिए35। भविष्यवाणी आठ साल तक सार्वजनिक रिकॉर्ड में थी और स्टैंडर्ड फिर भी उस कॉन्फ़िगरेशन की इजाज़त देता रहा।\n1999 की उस रिपोर्ट का फ़ैसला वह वाक्य है जिस पर मैं बार-बार लौटता हूँ: “We have found serious security weaknesses in all major components of IPsec. As always in security, there is no prize for getting 90% right; you have to get everything right.”37\nदो और आँकड़े, और फिर मैं इसे छोड़ दूँगा।\nLogjam, 2015। इसके पीछे की टीम ने IKE के लिए IPv4 के 1% सैंपल को स्कैन किया और पाया कि 86.1% IKEv1 और 91.0% IKEv2 सर्वर 1024-bit Oakley Group 2 सपोर्ट करते थे, और प्रोफ़ाइल किए गए 66.1% IKEv1 सर्वर उसे पसंद करते थे। उनका निष्कर्ष: एक दूसरे 1024-bit group के खिलाफ़ precomputation “would allow decryption of traffic to 66% of IPsec VPNs”, और VPN exploitation पर छपे intelligence डॉक्यूमेंट “consistent with having achieved such a break” हैं38। Cryptographic agility, वह चीज़ जो IPsec के पास सबसे ज़्यादा है, उसी ने लगभग सबको पंद्रह साल तक एक ही कमज़ोर group पर बैठे रहने दिया।\nCVE-2016-1287। Cisco ASA पर IKEv1 और IKEv2 कोड में एक buffer overflow, खास तरह से बनाए UDP पैकेट भेजकर पहुँचा जा सकने वाला, जो authentication से पहले remote code execution देता था39। सोचिए वह बॉक्स कहाँ बैठता है। यह वह डिवाइस है जिसे आपने जान-बूझकर पूरे इंटरनेट के सामने खोला है, जो पूरे सिस्टम का सबसे ज़्यादा विकल्पों से लदा प्रोटोकॉल चला रहा है, parser के आगे एक fragment reassembler के साथ, और अंदर की हर चीज़ की चाबियाँ रखे हुए। Ferguson और Schneier ने जिस जटिलता की चेतावनी दी थी, वह कोई अमूर्त बात नहीं है। वह attack surface है, उस एक मशीन पर जिसे आप किसी चीज़ के पीछे नहीं रख सकते।\nजब तक आप इसे चला रहे हैं, तब तक इसे डायग्नोज़ करना आप यह सब आज दोपहर बंद नहीं कर सकते, तो इस पर काम ऐसे कीजिए। यह तरीका है, उस क्रम में जिसकी कीमत सबसे कम है, साथ में यह कि हर नतीजे का असल मतलब क्या है।\nहार मानने के छह तरीके, रास्ते पर वहीं रखे जहाँ हर एक होता है हर खराबी असल में कहाँ रहती है क्लाइंट पॉलिसी और routes होम राउटर पहला ट्रांसलेशन कैरियर दूसरा ट्रांसलेशन इंटरनेट फ़िल्टर और MTU गेटवे selectors और पहचान 1 2 3 4 5 6 1 वायर पर कुछ भी नहीं। ट्रैफ़िक IPsec तक पहुँचा ही नहीं। crypto देखना बंद कीजिए। ip xfrm policy और route, और होस्ट फ़ायरवॉल जो भी कर रहा हो। 2 500 दोनों तरफ़, 4500 कभी नहीं दिखता। NAT traversal negotiate नहीं हुआ। tcpdump -ni eth0 'udp port 500 or udp port 4500 or ip proto 50' बिना लपेटा ESP नहीं बचेगा। 3 idle के बाद मरता, इस्तेमाल पर जीता। दो में से एक ट्रांसलेटर पर मैपिंग expire हो गई। आपका keepalive एक ऐसे टाइमर से हार रहा है जिसे आप पढ़ नहीं सकते। उसे छोटा कीजिए, और डिफ़ॉल्ट पर भरोसा छोड़िए। 4 Outbound बढ़ता, inbound सपाट। ESP रास्ते में एक दिशा में मर रहा है। ip -s xfrm state दोनों छोरों पर, फिर वह hop ढूँढिए जो इसे खा रहा है। 5 लॉगिन ठीक, बड़े ट्रांसफ़र अटकते हैं। Path MTU, और ICMP errors वापस नहीं आ रहे। ping -M do -s 1400 घटाते हुए, फिर segment size clamp कीजिए और ICMP नियम ठीक कीजिए। 6 दोनों कहते हैं ऊपर, कुछ नहीं जाता। Traffic selectors, पॉलिसी या राउटिंग; keys नहीं। और अगर दूसरे यूज़र ने पहले को टनल से हटा दिया, तो यह peer पहचान है, क्षमता नहीं। border पर तीस सेकंड का एक capture पहले तीन का जवाब देता है। कोई भी कंसोल खोलने से पहले यही कीजिए। छह खराबियाँ, उस क्रम में जिसमें इन्हें टेस्ट करना है, लक्षण, जाँच और जवाब के मतलब के साथ। हर पंक्ति स्टैक की एक अलग लेयर का हार मानना है, और पहली तीन का जवाब तीस सेकंड वायर देखने से मिल जाता है, इसीलिए वह पहला काम है, आखिरी नहीं। पहले वायर देखिए, कंसोल नहीं दोनों कंसोल आपको वह बताएँगे जो वे मानते हैं। वायर बताता है कि हुआ क्या। border पर एक capture, तीस सेकंड, पहले तीन सवालों का जवाब एक साथ देता है:\ntcpdump -ni eth0 \u0026#39;udp port 500 or udp port 4500 or ip proto 50 or ip6 proto 50\u0026#39; बाहर कुछ भी नहीं जाता: समस्या IPsec से पहले है: राउटिंग, पॉलिसी, या होस्ट फ़ायरवॉल। crypto देखना बंद कीजिए। सिर्फ़ बाहर जाता है, वापस कुछ नहीं: आपके पैकेट निकल रहे हैं और उनके जवाब नहीं पहुँच रहे। रास्ते में filtering, मरा हुआ peer, या दूसरा छोर चुपचाप रिजेक्ट कर रहा है। UDP 500 दोनों तरफ़, पर 4500 कभी नहीं दिखता: NAT traversal negotiate नहीं हुआ। या तो एक छोर पर यह बंद है या detection फ़ेल हुआ। एक छोर NAT के पीछे है और वायर पर प्रोटोकॉल 50 है: negotiation ने तय किया कि कोई ट्रांसलेटर नहीं है जबकि एक है। यह कभी वापस नहीं आएगा। Key exchange की विफलता पढ़ना IKEv2 बताता है कि उसने क्यों मना किया, और notify के नाम इतने सटीक हैं कि सिर्फ़ उन्हीं से डायग्नोज़ हो सकता है। पहले पूरे exchange की शक्ल सामने रखना मदद करता है, क्योंकि नीचे का हर notify उसकी किसी खास सीढ़ी का है।\nIKEv2 exchange कदम दर कदम, और किस कदम पर कौन-सी खराबी रहती है exchange का हर कदम, और उस पर रहने वाली खराबी क्लाइंट ट्रांसलेटर के पीछे गेटवे असली एड्रेस यहाँ क्या फ़ेल होता है IKE_SA_INIT request: UDP 500 वापस कुछ नहीं: 809 ERROR_VPN_TIMEOUT IKE_SA_INIT response: UDP 500 NO_PROPOSAL_CHOSEN, INVALID_KE_PAYLOAD NAT मिला, दोनों छोर 4500 पर float float नहीं: proto 50 ट्रांसलेटर पर मरता है IKE_AUTH: UDP 4500, एन्क्रिप्टेड बहुत बड़ा, fragment खोया, retransmit, टाइमआउट IKE_AUTH response: CHILD_SA बना AUTHENTICATION_FAILED: 13801, 13806 UDP 4500 में ESP: आपका ट्रैफ़िक TS_UNACCEPTABLE: ऊपर है, कुछ नहीं हिलता keepalive: हर 20 s में 1 बाइट, हमेशा keepalive नहीं: idle पर मैपिंग expire float ही धुरी है। इसके ऊपर सब UDP 500 है। नीचे सब UDP 4500। अगर float कभी नहीं होता तो आप प्रोटोकॉल 50 को ऐसे ट्रांसलेटर में डाल रहे हैं जिसके पास बदलने को कुछ नहीं, और वह कभी वापस नहीं आएगा। साइज़ की खराबी एक ही सीढ़ी पर रहती है। IKE_AUTH सर्टिफ़िकेट chain ढोता है, इसलिए इस सीढ़ी पर अकेला बड़ा संदेश यही है। जो pre-shared key वहाँ कनेक्ट हो जाए जहाँ सर्टिफ़िकेट नहीं होता, वह गिरा हुआ fragment है, खराब सर्टिफ़िकेट नहीं। बनना और चलना एक बात नहीं। child एसोसिएशन मौजूद होकर भी कुछ नहीं ढो सकता, अगर दोनों छोर असहमत हों कि वह कौन-सा ट्रैफ़िक कवर करता है। दाएँ कॉलम की हर खराबी क्लाइंट पर टाइमआउट के रूप में रिपोर्ट होती है, असल में वह जो भी हो। पहले पैकेट से स्थिर अवस्था तक exchange, हर कदम पर रहने वाली खराबी के साथ। 500 से 4500 पर float ही धुरी है: उसके ऊपर सब कुछ एक पोर्ट है, उसके नीचे सब कुछ दूसरा, और अगर float कभी नहीं होता तो आप प्रोटोकॉल 50 को ऐसे ट्रांसलेटर में डाल रहे हैं जो उसे ढो नहीं सकता। IKE_AUTH यहाँ अकेला बड़ा संदेश है, इसीलिए pre-shared key वहाँ कनेक्ट हो सकती है जहाँ सर्टिफ़िकेट नहीं होता: वह गिरा हुआ fragment है, खराब सर्टिफ़िकेट नहीं। Notify असल में क्या मतलब है कहाँ देखें NO_PROPOSAL_CHOSEN पेश किए गए cipher/integrity/DH/PRF combinations में से एक भी दूसरे छोर को मंज़ूर नहीं दोनों proposal सूचियाँ; एक तरफ़ कोई deprecated algorithm होने की उम्मीद रखिए INVALID_KE_PAYLOAD Diffie-Hellman group का मेल नहीं: आपने एक group पेश किया, उसे दूसरा चाहिए DH group, proposal में सबसे पहली चीज़ AUTHENTICATION_FAILED Key या सर्टिफ़िकेट या पहचान गलत: pre-shared key का मेल नहीं, expired सर्टिफ़िकेट, या ऐसा ID जिसकी peer उम्मीद नहीं करता पहचान, सिर्फ़ secret नहीं TS_UNACCEPTABLE Traffic selectors ओवरलैप नहीं करते: आपने ऐसे subnets सुरक्षित करने को कहा जिन्हें peer सुरक्षित नहीं करेगा दोनों छोरों का selector कॉन्फ़िगरेशन INVALID_SPI ऐसे एसोसिएशन के लिए पैकेट आया जो अब मौजूद नहीं, आम तौर पर एक-तरफ़ा restart के बाद क्या एक छोर ने rekey या reboot किया है Juniper की Phase 2 गाइडेंस इनमें से सबसे आम के बारे में यही बात कहती है: “no proposal chosen” का मतलब है “the device did not accept any of the IKE Phase 2 proposals that the peer sent”, और इलाज दोनों को मंज़ूर एक proposal है, बार-बार restart नहीं40।\nstrongSwan पर, एक कमांड में हर चीज़ की स्थिति:\nswanctl --list-sas # what is established, and what it negotiated swanctl --log # the negotiation as it happens Cisco पर show crypto ikev2 sa और show crypto ipsec sa, और जब ऊपर न आए तो debug crypto ikev241। Junos पर show security ike security-associations और show security ipsec security-associations, और negotiation show log kmd-logs में42।\nक्या NAT traversal सच में negotiate हुआ? यह वह जाँच है जिसे लोग छोड़ देते हैं, और “ऑफ़िस से चलता है, घर से नहीं” का एक बड़ा हिस्सा इसी से समझ आता है।\nहर छोर उन एड्रेस और पोर्ट के hash भेजता है जिन्हें वह मानता है कि इस्तेमाल में हैं। अगर दूसरा छोर अपने मिले पैकेट से जो hash गिनता है वह आपके भेजे hash से मेल नहीं खाता, तो आपके बीच एक ट्रांसलेटर है, और दोनों छोर UDP 4500 पर चले जाते हैं। अगर detection फ़ेल हो जाए, यानी एक तरफ़ traversal बंद है, या बीच में कुछ exchange को बिगाड़ रहा है, तो दोनों छोर बिना लपेटे ESP के साथ चलते रहते हैं, जो ट्रांसलेटर को पार नहीं कर पाएगा।\nतो: capture में पोर्ट 4500 देखिए, दोनों दिशाओं से, वरना कोई traversal नहीं हो रहा। कंसोल की बात पर भरोसा मत कीजिए।\nफिर जाँचिए कि keepalive सच में चल रहा है और उसका अंतराल उससे कम है जिस पर आपका कैरियर मैपिंग पुरानी करता है। डिफ़ॉल्ट बीस सेकंड है6; NAT ऑपरेटरों के लिए स्टैंडर्ड की न्यूनतम सीमा दो मिनट है9; आपका खास कैरियर क्या करता है, यह आप नहीं देख सकते। अगर टनल idle के बाद मर जाता है और ट्रैफ़िक आने पर ज़िंदा हो जाता है, तो हर बार यही दोषी है।\nKernel के वे काउंटर जिन्हें लगभग कोई नहीं पढ़ता Linux पर transform layer errors का पूरा ब्रेकडाउन रखती है, और “यह काम नहीं करता” को एक खास वजह में बदलने का यह सबसे तेज़ तरीका है। काउंटर खुद kernel ने डॉक्यूमेंट किए हैं43।\ncat /proc/net/xfrm_stat # error counters, by cause ip -s xfrm state # per-SA packet and byte counters ip xfrm policy # what should be protected, and in which direction यह सूची से ज़्यादा एक रास्ते के रूप में अच्छी तरह पढ़ा जाता है। पैकेट पाँच चरणों से गुज़रता है, और हर एक का अपना काउंटर है:\nपाँच चरण, और वह काउंटर जो बताता है कि आपका पैकेट किस पर मरा एक पैकेट के पीछे चलिए, और काउंटर को बताने दीजिए कि वह किस चरण पर मरा आपकी पॉलिसी क्या यह ट्रैफ़िक सुरक्षित होगा? XfrmOutPolBlock आप खुद इसे गिरा रहे हैं, जान-बूझकर, पॉलिसी में आपका एसोसिएशन एन्क्रिप्ट करो, सील करो, नंबर दो XfrmOutNoStates पॉलिसी मेल खाई और ढोने को कोई एसोसिएशन नहीं रास्ता ट्रांसलेटर, MTU, फ़िल्टर किसी भी छोर पर कुछ नहीं बढ़ता NAT, MTU और filtering यहीं रहते हैं, और कोई काउंटर इसमें से कुछ नहीं देख सकता उनका एसोसिएशन dest + प्रोटोकॉल + SPI XfrmInNoStates \u0026#183; XfrmInStateProtoError \u0026#183; XfrmInStateSeqError पहुँचा और crypto नहीं बैठा: गलत SPI, गलत key, window से बाहर उनकी पॉलिसी क्या इसे सुरक्षित होना था? XfrmInTmplMismatch \u0026#183; XfrmInNoPols crypto ठीक था और पॉलिसी असहमत थी कि इसे सुरक्षित होना था या नहीं तीसरे चरण का कोई काउंटर नहीं। चौथाई सदी के ट्रांसलेशन ने इस प्रोटोकॉल के साथ जो कुछ किया, वह वहीं होता है, और किसी भी छोर की transform layer उसका एक भी पैकेट नहीं देख सकती। capture के कंसोल से पहले आने की पूरी वजह यही है। चरण चार और पाँच उलटी खराबियाँ हैं। चार का मतलब crypto नहीं बैठा। पाँच का मतलब बैठ गया, और किसी चीज़ की असहमति थी कि उसे बैठना चाहिए था या नहीं। ये लगभग हर बार गलत क्रम में देखे जाते हैं, क्योंकि पाँच crypto की खराबी लगती है और है नहीं। काउंटर के नाम Linux के हैं। Junos पर यही चरण show security ipsec statistics से पढ़े जाते हैं; Fisher-Price OS (Windows) पर Get-NetIPsecQuickModeSA और Windows Firewall with Advanced Security लॉग से। पाँच चरण, और वह काउंटर जो बताता है कि आपका पैकेट किस पर मरा। तीसरा चरण अकेला है जिसका कोई काउंटर ही नहीं: ट्रांसलेटर, MTU और बीच का हर filter वहीं रहते हैं, और किसी भी छोर की transform layer उसका एक भी पैकेट नहीं देख सकती। कंसोल से पहले capture उठाने का पूरा तर्क यही है। चरण चार और पाँच उलटी खराबियाँ हैं और लगभग हर बार गलत क्रम में देखे जाते हैं। खराबी होते समय देखिए कि कौन-सा हिलता है:\nकाउंटर Kernel का विवरण उस दिन इसका मतलब XfrmInNoStates “No state is found i.e. Either inbound SPI, address, or IPsec protocol at SA is wrong” उनके पैकेट ऐसे एसोसिएशन के लिए आ रहे हैं जो आपके पास नहीं, आम तौर पर एक-तरफ़ा rekey या restart XfrmInStateSeqError “Sequence error i.e. Sequence number is out of window” आगे-पीछे होना या replay-window की परेशानी; ऊपर QoS वाला असर देखिए XfrmInStateProtoError “Transformation protocol specific error e.g. SA key is wrong” Keys असहमत हैं: एसोसिएशन सिर्फ़ एक तरफ़ rekey के बाद बचा XfrmInTmplMismatch “No matching template for states e.g. Inbound SAs are correct but SP rule is wrong” एसोसिएशन सही है और पॉलिसी गलत XfrmInNoPols “No policy is found for states e.g. Inbound SAs are correct but no SP is found” सुरक्षित ट्रैफ़िक आ रहा है जिसे सुरक्षित करने को किसी ने कहा नहीं XfrmOutPolBlock “Policy discards” आप खुद इसे गिरा रहे हैं, जान-बूझकर, पॉलिसी में XfrmOutNoStates “No state is found” ट्रैफ़िक एक पॉलिसी से मेल खाया जिसे ढोने के लिए कोई एसोसिएशन नहीं: टनल कभी ऊपर आया ही नहीं XfrmInTmplMismatch और XfrmInNoPols वे दो हैं जिन्हें देखते ही पहचानना चाहिए, क्योंकि दोनों का मतलब है कि crypto ठीक है और पॉलिसी नहीं, जो ठीक उलटी जगह है जहाँ हर कोई पहले देखता है।\nकहता है ऊपर है, और कुछ नहीं हिलता दोनों छोर established, कोई ट्रैफ़िक नहीं। दोनों दिशाओं में हर एसोसिएशन के काउंटर पढ़िए:\nip -s xfrm state बाहर जाने वाले बाइट्स बढ़ रहे, अंदर आने वाले सपाट: आप एन्क्रिप्ट करके भेज रहे हैं, और वापस कुछ नहीं आ रहा। या तो आपका ESP उन तक नहीं पहुँच रहा या उनका आप तक नहीं। दूसरे छोर से उनका outbound काउंटर पूछिए; अगर वह भी बढ़ रहा है, तो पैकेट रास्ते में मर रहे हैं और अगला सवाल है कहाँ, जो crypto का नहीं, TTL का सवाल है। दोनों सपाट: टनल को कुछ पेश ही नहीं किया जा रहा। राउटिंग या पॉलिसी, IPsec नहीं। route-based सेटअप पर जाँचिए कि route सच में टनल इंटरफ़ेस की तरफ़ है; policy-based पर selectors जाँचिए। दोनों बढ़ रहे, ऐप्लिकेशन फिर भी टूटे: यह टनल नहीं है। जाकर देखिए कि दूसरी तरफ़ क्या है। इस मामले के लिए Juniper की गाइडेंस उनकी अपनी भाषा में वही सहज समझ है: अगर सेशन पर सिर्फ़ outbound पैकेट काउंटर बढ़ रहा है, तो peer से पुष्टि कीजिए कि ट्रैफ़िक मिल भी रहा है या नहीं44।\nछोटी चीज़ें चलती हैं, बड़ी अटक जाती हैं MTU। हमेशा MTU ही होता है। टेस्ट में दस सेकंड लगते हैं:\nping -M do -s 1400 10.0.0.1 # inside the tunnel, do-not-fragment set ping -M do -s 1300 10.0.0.1 # step down until it succeeds जहाँ से यह सफल होने लगे, वह असली इस्तेमाल लायक साइज़ बताता है। फिर TCP को खुद पता लगाने दीजिए, advertised segment size को रास्ते के हिसाब से clamp करके, बजाय यह उम्मीद करने के कि हर ICMP error सफ़र में बच जाएगा:\nnft add rule inet filter forward tcp flags syn tcp option maxseg size set rt mtu और असली वजह भी ठीक कीजिए, जो लगभग हमेशा कहीं किसी border पर बहुत ज़्यादा चौड़ा ICMP नियम होता है। चाहें तो echo गिरा दीजिए। मैंने कहीं और तर्क दिया है कि उसे गिराना ही चाहिए। पर Fragmentation Needed और Packet Too Big रखिए। वे तंत्र हैं, कोई शिष्टाचार नहीं।\nघड़ी के हिसाब से गिरता है खराबियों का समय नापिए। अंतराल अपने आप वजह बता देता है।\nएक तय अवधि जो कॉन्फ़िगर की गई lifetime से मेल खाती है: rekey। एसोसिएशन expire होता है और उसकी जगह वाला negotiation फ़ेल हो रहा है या होड़ में है। दोनों छोरों की lifetimes जाँचिए; अलग-अलग values आम हैं और ठीक हैं, पर एक छोर पर hard lifetime अगर दूसरे की soft lifetime से छोटी हो, तो ठीक यही होता है। कुछ देर बिना ट्रैफ़िक के बाद, पहले इस्तेमाल पर वापस: NAT मैपिंग expire हो गई। keepalive का अंतराल, या उसका न होना। लिंक ठीक है फिर भी dead-peer detection इसे गिरा देता है: probes खो रहे हैं, peer मरा नहीं है, अक्सर इसलिए कि probes ही अकेला ट्रैफ़िक हैं और मैपिंग पहले ही जा चुकी है। दूसरा यूज़र पहले को मार देता है दो peers एक ही एड्रेस से concentrator तक पहुँचते हैं, एक ही पहचान से authenticate करते हुए। गेटवे के पास विकल्प है: पुराना एसोसिएशन रखे या उसे बदल दे, और एक आम डिफ़ॉल्ट बदलना है। तो दूसरा कनेक्शन जीतता है और पहला चुपचाप मर जाता है।\nहर peer को एड्रेस या शेयर्ड नाम के बजाय सच में अनोखी पहचान दीजिए, और गेटवे को सेट कीजिए कि वह हर peer पर एक मानने के बजाय एक एड्रेस से कई एसोसिएशन रखे। फिर इसे उस एकमात्र तरीके से टेस्ट कीजिए जो मायने रखता है: दो क्लाइंट, एक एड्रेस, एक ही समय पर। अगर आपके acceptance टेस्ट में कभी एक NAT के पीछे दो यूज़र नहीं रहे, तो आपने वह मामला टेस्ट ही नहीं किया जिसमें आपके ज़्यादातर यूज़र हैं।\nवही खराबियाँ, Fisher-Price OS (Windows) पर ऊपर की हर जाँच एक Unix बॉक्स से चलती है, और अगर उस नेटवर्क पर आपके पास एक है तो उसी को इस्तेमाल कीजिए, क्योंकि वह आपको सच ज़्यादा तेज़ी से बताएगा और उसे परवाह नहीं कि दूसरा छोर क्या चलाता है। पर बहुत से पढ़ने वालों के पास एक ऐसा क्लाइंट है जो कनेक्ट नहीं होगा, एक ऐसा ऑपरेटिंग सिस्टम जो जान-बूझकर मशीन को उनसे छिपाता है, और देखने को और कुछ नहीं। तो यह रहा वही तरीका फिर से, उसी क्रम में, उन टूल्स के साथ जो वह ऑपरेटिंग सिस्टम असल में शिप करता है।\nवायर देखिए। tcpdump नहीं है, पर एक capture है। इसे elevated चलाइए, खराबी दोहराइए, रोकिए:\nnetsh wfp capture start cab=on file=ipsec netsh wfp capture stop इससे एक .cab बनती है। उसके अंदर इस बात का trace है कि खराबी के दौरान filtering platform और key exchange ने असल में क्या किया, जो किसी भी कंसोल के मानने से ज़्यादा है। archive के बजाय live देखने के लिए वही कमांड सेट file=- के साथ कंसोल पर छापता है: netsh wfp show state “Displays the current state of WFP and IPsec”, और netsh wfp show ikeevents “Displays recent Internet Key Exchange (IKE) epoch events matching the specified parameters”, एक peer तक फ़िल्टर किया हुआ45।\nnetsh wfp show state file=- netsh wfp show ikeevents remoteaddr=203.0.113.5 file=- show ikeevents यहाँ उस exchange लॉग के सबसे करीब की चीज़ है जो हर दूसरा स्टैक बिना कहे लिखता है। यह जानना फ़ायदेमंद है कि यह मौजूद है। वरना इंटरफ़ेस आपको तीन अंकों का एक नंबर देता है और कुछ नहीं, और आप अंदाज़े से key exchange डायग्नोज़ कर रहे होते हैं।\nएसोसिएशन पढ़िए, और दोनों पढ़िए। ip -s xfrm state और swanctl --list-sas के बराबर दो cmdlets हैं, और उनके बीच का बँटवारा ही पूरा डायग्नोसिस है:\nGet-NetIPsecMainModeSA Get-NetIPsecQuickModeSA Main mode key exchange है। Quick mode पैकेट ढोता है। Microsoft यह रिश्ता सीधे बताता है: “There is only one main mode SA between a pair of computers, but there can be many quick mode SAs”46। तो main mode मौजूद और quick mode खाली होना वही खराबी है जो IKE_SA ऊपर हो और उसके नीचे कोई CHILD_SA न हो, और उसका मतलब भी वही है: दोनों छोर इस पर सहमत हो गए कि बात कैसे करें और फिर इस पर सहमत नहीं हो पाए कि सुरक्षित क्या करें। Traffic selectors देखिए, ciphers नहीं।\nलॉग पढ़िए, उन दो जगहों पर जहाँ वे छिपे हैं। कनेक्शन-लेवल की विफलताएँ Application लॉग में RasClient सोर्स के नाम पर आती हैं, और उन्हें पढ़ने पर Microsoft का अपना नोट ही काम का हिस्सा है: “All error messages return the error code at the end of the message”47। वह नंबर ही डायग्नोसिस है, और अगला सेक्शन बताता है कि नंबरों का मतलब क्या है। पॉलिसी और filtering के फ़ैसले बिल्कुल दूसरी जगह आते हैं, Applications and Services Logs के नीचे, Windows Firewall with Advanced Security चैनलों में। दो लॉग, दो टीमें, एक खराबी।\nजब escalate करना पड़े तो इसे ढंग से इकट्ठा कीजिए। सपोर्टेड बंडल TSS है: क्लाइंट पर TSS.ps1 -Scenario NET_VPN, सर्वर पर TSS.ps1 -Scenario NET_RAS, खराबी दोहराने से पहले शुरू और बाद में बंद48। कोई आपसे माँगे, उससे पहले इसे सीख लीजिए।\nजब यह Connecting पर अटका रहे, और फिर टाइमआउट हो यह वह खराबी है जो टिकटों से भर देती है, और error में लिखा शब्द झूठ है। कोड का नाम लेकर शुरू कीजिए। संदेश बेकार हो तब भी कोड सटीक होता है।\nconnect timeout तीन में से एक चीज़ है, और उनमें से कोई घड़ी नहीं क्लाइंट जिसे टाइमआउट कहता है, और वह असल में क्या था क्लाइंट कहता है: टाइमआउट 809, 718, 828, 930, 638: पाँच कोड, एक शब्द, और उनमें से एक भी घड़ी नहीं यह तीन में से एक चीज़ है, और एक टेस्ट बताता है कौन-सी कुछ नहीं पहुँचा चुप्पी वाला मामला टेस्ट: क्लाइंट पर capture, क्या UDP 500 निकलता है और कुछ वापस नहीं आता? रास्ते में filtering, या NAT traversal कभी negotiate नहीं हुआ, तो 4500 भेजा ही नहीं गया। पहुँचा, बहुत बड़ा fragment वाला मामला टेस्ट: क्या pre-shared key वहाँ कनेक्ट होती है जहाँ सर्टिफ़िकेट नहीं? IKE_AUTH chain ढोता है, तो वह fragment होता है, और fragment रास्ते में गिर जाता है। टनल था ही नहीं गलत लेयर वाला मामला टेस्ट: क्या गेटवे उसी सेकंड authentication विफलता लॉग करता है? 930 RADIUS है। 812 authentication तरीका है। 13801 और 13806 सर्टिफ़िकेट हैं। तीनों में से कोई टाइमर नहीं। टाइमआउट लंबा करना ही वह अकेली चीज़ है जिसके लिए इंटरफ़ेस बुलाता है, और वही अकेली चीज़ है जिसने इनमें से किसी को कभी ठीक नहीं किया। शब्द इसलिए है क्योंकि विफलता बताने वाली लेयर इतना दूर नहीं देख सकती कि और कुछ कहे। इसी क्रम में टेस्ट कीजिए। पहले में तीस सेकंड का capture लगता है, दूसरे में एक कनेक्शन की कोशिश, तीसरे में एक लॉग। पाँच error codes में timeout शब्द है और उनमें से एक भी घड़ी नहीं है। यह तीन में से एक चीज़ है और एक ही टेस्ट उन्हें अलग करता है: capture बताता है कि कुछ वापस आया भी या नहीं, pre-shared key के साथ एक कनेक्शन की कोशिश बताती है कि क्या सर्टिफ़िकेट exchange बस पहुँचने के लिए बहुत बड़ा था, और गेटवे का अपना लॉग बताता है कि टनल कभी समस्या था भी या नहीं। उन्हें इसी क्रम में टेस्ट कीजिए, क्योंकि उनकी कीमत का क्रम भी यही है। कोड raserror.h में नाम असल में क्या हुआ 809 ERROR_VPN_TIMEOUT वापस कुछ भी नहीं आया। Microsoft की बताई वजह: “the UDP 500 or 4500 ports on the VPN server or firewall are blocked”47, पर blocked तीन अलग चीज़ों को ढकता है और उनमें से सिर्फ़ एक deny नियम है। आम तौर पर 4500 कभी भेजा ही नहीं गया, क्योंकि NAT traversal कभी negotiate नहीं हुआ, या जो helper उसे ढोता था वह बंद कर दिया गया है। फ़ायरवॉल बदलाव माँगने से पहले आगे पढ़िए 789 ERROR_OAKLEY_GENERAL_PROCESSING “The L2TP connection attempt failed because the security layer encountered a processing error during initial negotiations”: credentials या सर्टिफ़िकेट, नेटवर्क नहीं 718 ERROR_PPP_TIMEOUT IPsec वाला हिस्सा चल गया। L2TP टनल के अंदर PPP को कोई जवाब नहीं मिला 828 ERROR_IDLE_TIMEOUT “The connection was terminated because of idle timeout”: सर्वर की तरफ़ की सेटिंग, जान-बूझकर 930 ERROR_AUTH_SERVER_TIMEOUT RADIUS ने समय पर जवाब नहीं दिया। IPsec से बिल्कुल कोई लेना-देना नहीं 638 ERROR_REQUEST_TIMEOUT सामान्य वाला। इसे कोई जानकारी नहीं मानिए और वायर पर जाइए इनमें से हर एक Microsoft की अपनी error सूची से लिया गया है49। अब 809 को फिर से पढ़िए। इसका नाम ERROR_VPN_TIMEOUT है, और डॉक्यूमेंट की गई वजह एक ब्लॉक किया गया पोर्ट है। क्लाइंट इसलिए टाइमआउट नहीं हो रहा कि दूसरा छोर धीमा है। वह इसलिए टाइमआउट हो रहा है कि दूसरा छोर चुप है, और चुप्पी ही विफलता का अकेला रूप है जिसे बिना पोर्ट और बिना handshake दृश्यता वाला प्रोटोकॉल रिपोर्ट कर सकता है।\nपर blocked शब्द से सावधान रहिए, क्योंकि यह जितना उठा सकता है उससे ज़्यादा ढो रहा है। तीन अलग चीज़ें इसे पहनती हैं, और उनमें से सिर्फ़ एक deny नियम है।\n4500 पहले कभी किसी ने भेजा ही नहीं। NAT traversal negotiate नहीं हुआ, तो क्लाइंट ESP बोलता रहा, और ESP ट्रांसलेटर को बदलने के लिए कुछ नहीं देता। उस प्लेटफ़ॉर्म का डिफ़ॉल्ट अपने आप में काफ़ी वजह है: registry value के बिना वह ट्रांसलेटर के पीछे बैठे सर्वर से NAT-T एसोसिएशन बनाएगा ही नहीं31। तो 4500 ब्लॉक नहीं है। उसे कभी आज़माया ही नहीं गया।\nजो helper इसे ढक देता था, वह बंद कर दिया गया है। फ़ायरवॉल और होम राउटर हर प्रोटोकॉल के लिए helpers रखते हैं, consumer उपकरणों पर IPsec passthrough, और उसके पीछे application-layer gateway का पूरा परिवार, जो ऐसा प्रोटोकॉल पढ़ते हैं जिसे NAT संभाल नहीं सकता और उसके लिए वापसी का रास्ता खोलते हैं। Linux पर इसका automatic रूप kernel 4.7 पर “for security reasons” डिफ़ॉल्ट रूप से बंद कर दिया गया, और तब से सलाह यह है कि helper को एक नियम से जान-बूझकर लगाइए या बिल्कुल नहीं; जिन helpers पर यह लागू होता है उनमें PPTP वाला भी है50।\nऔर उन्हें बंद करना सही फ़ैसला था। Helper आपके फ़ायरवॉल का एक हिस्सा है जो एक payload को parse करता है और फिर जो पढ़ा उसके आधार पर एक छेद कर देता है। NAT Slipstreaming इसका बिल है: एक ब्राउज़र किसी पेज पर जाता है, ट्रैफ़िक ऐसे बनाया जाता है कि राउटर का SIP या H.323 helper उसे कॉल समझ ले, और NAT से होकर एक pinhole खुल जाता है, 2021 वाले वर्ज़न में किसी भी अंदरूनी एड्रेस तक, सिर्फ़ उस मशीन तक नहीं जिसने पेज लोड किया51। Helpers बंद करने से यह बंद होता है। इससे आपका IPsec भी चलना बंद हो जाता है। दोनों एक साथ सच हैं, और दूसरा, पहले को पलटने का तर्क नहीं है।\nजो फिर से छोटे रूप में यही पोस्ट है। प्रोटोकॉल सिर्फ़ इसलिए चलता था कि बीच के बॉक्स ऐसा ट्रैफ़िक पढ़ रहे थे जो उनका नहीं था और उसकी तरफ़ से छेद खोल रहे थे, और इंडस्ट्री ने पिछला दशक सही तरीके से यह तय करने में बिताया है कि यह करना बंद करो।\nतो वजहों पर इस क्रम में काम कीजिए, सबसे सस्ती पहले।\nएक: वापस कुछ नहीं आ रहा। क्लाइंट पर capture कीजिए, या गेटवे से पूछिए। अगर UDP 500 निकलता है और कुछ नहीं लौटता, तो यह filtering या reachability है और कोई टाइमर इसे ठीक नहीं करेगा। अगर 500 दोनों तरफ़ पूरा होता है और 4500 कभी नहीं दिखता, तो NAT traversal negotiate नहीं हुआ। और अगर कोई भी छोर ट्रांसलेटर के पीछे है, तो आप इस पोस्ट में पहले वाली registry value पर वापस हैं: AssumeUDPEncapsulationContextOnSendRule, 1 या 2, दोनों मशीनों पर, फिर reboot31। उसके बिना क्लाइंट डिज़ाइन से ही मना करता है और उसे टाइमआउट बताता है।\nदो: जवाब पहुँचने के लिए बहुत बड़ा है। यह पूरी दोपहर बर्बाद करता है। सर्टिफ़िकेट authentication दूसरे exchange को बड़ा बना देता है, क्योंकि वह एक chain ढोता है, और बड़ा exchange fragment होता है। Fragments को वही middleboxes गिराते हैं जो इस पोस्ट की बाकी हर चीज़ को, क्लाइंट उसी छेद में दोबारा भेजता है, और फिर हार मानकर कहता है टाइमआउट। पहचान अपने आप में डायग्नोस्टिक है: pre-shared key कनेक्ट होती है और सर्टिफ़िकेट नहीं। यह सर्टिफ़िकेट की खराबी नहीं है। यह साइज़ की खराबी है, क्योंकि pre-shared key वाला exchange इतना छोटा है कि फ़िट हो जाता है। ठीक इसी के लिए स्टैंडर्ड IKEv2 fragmentation मौजूद है23, और strongSwan दर्ज करता है कि इस प्लेटफ़ॉर्म को यह कब मिला: “IKEv2 fragmentation is supported since the v1803 release of Windows 10 and Windows Server”33। इससे पुराना कुछ भी, या fragmentation बंद किया हुआ गेटवे, और आप ऐसे रास्ते पर निर्भर हैं जो fragment हुआ UDP datagram ढो दे। बहुत से नहीं ढोते।\nतीन: कनेक्ट होता है, फिर घड़ी के हिसाब से गिरता है। समय नापिए। अगर यह एक तय idle अवधि के बाद मरता है, तो वह 828 है और कॉन्फ़िगरेशन है, खराबी नहीं: सर्वर पर -IdleDisconnectSeconds, और -SALifeTimeSeconds, -MMSALifeTimeSeconds और -SADataSizeForRenegotiationKilobytes वे तीन और घड़ियाँ हैं जो सेशन खत्म कर सकती हैं52। आखिरी वाली इसे समय के बजाय मात्रा पर खत्म करती है, इसीलिए एक सेशन किसी बड़ी फ़ाइल कॉपी के दौरान भरोसे से मर सकता है और पूरे दिन के ईमेल में कभी नहीं। और अगर क्लाइंट NAT के पीछे हो और यह rekey पर मरता है, तो यह पहले वाली डॉक्यूमेंट की गई interop खराबी है: क्लाइंट सर्वर की तरफ़ से शुरू किए rekey को Microsoft error 13863 के साथ रिजेक्ट करता है, और गेटवे की तरफ़ का जवाब है कि शुरू करना बंद करो और क्लाइंट को करने दो33।\nचार: यह टनल है ही नहीं। 930 RADIUS है। 812 एक ऐसा authentication तरीका है जिसे सर्वर ने स्वीकार नहीं किया47। 13801 और 13806 सर्टिफ़िकेट हैं: गलत extended key usage, expired, root गायब, या ऐसा सर्वर नाम जो सर्टिफ़िकेट के subject से मेल नहीं खाता47। चारों मामलों में टनल negotiation ठीक था, और अगर आप दोपहर ciphers पर बिताएँगे तो इनमें से कोई नहीं मिलेगा।\nउस टेबल से ले जाने लायक बात यह है। छह error codes, उनमें से पाँच के नाम में timeout शब्द, और असल में उनमें से एक भी टाइमआउट नहीं है। वे एक ब्लॉक किया पोर्ट, एक खोया fragment, एक पॉलिसी फ़ैसला और एक RADIUS सर्वर हैं, सब एक ही शब्द पहने हुए, क्योंकि विफलता रिपोर्ट करने वाली लेयर इतना नहीं देख पाती कि कुछ और काम की बात कह सके। टाइमर लंबा करने से इनमें से कोई ठीक नहीं होता, और टाइमर लंबा करना ही वह चीज़ है जिसके लिए इंटरफ़ेस आपको बुलाता है।\nइसके बदले क्या चलाएँ मैं यह दिखावा नहीं करूँगा कि विकल्प कोई अनोखी चीज़ है। यह kernel में है और सालों से है।\nWireGuard एक UDP पोर्ट है, हर peer की एक key, कोई cipher negotiation नहीं और बिल्कुल कोई protocol agility नहीं। इस पर लेखक की राय जान-बूझकर है और साफ़ लिखी है: “It intentionally lacks cipher and protocol agility. If holes are found in the underlying primitives, all endpoints will be required to update. As shown by the continuing torrent of SSL/TLS vulnerabilities, cipher agility increases complexity monumentally.”53 यह एक फ़ैसला एक झटके में NO_PROPOSAL_CHOSEN, INVALID_KE_PAYLOAD, downgrade हमले और Logjam वाली खोज को मिटा देता है, क्योंकि negotiate करने को कुछ नहीं और downgrade करने को कुछ नहीं।\nयह सौदे के बारे में भी ईमानदार है, और मैं भी हूँ: agility न होने का मतलब है कि जब कोई primitive सच में गिरता है, तो आप एक कॉन्फ़िग लाइन बदलने के बजाय पूरा फ़्लीट अपडेट करते हैं। यह असली ऑपरेशनल कीमत है और यही चुकाने लायक सही कीमत है।\nबाकी सब ऊपर की सूची के सामने लगभग मद-दर-मद बैठता है। UDP पोर्ट होने का मतलब है कि NAT और CGNAT इसे किसी भी दूसरे flow की तरह मानते हैं, और ECMP और LAG इसे किसी भी दूसरे flow की तरह hash करते हैं। Roaming बाद में जोड़ा नहीं गया, अंदर बना है: नए एड्रेस से आया एक authenticated पैकेट peer का endpoint खिसका देता है, तो WiFi से मोबाइल पर जाता फ़ोन कुछ भी दोबारा negotiate नहीं करता। यह unauthenticated पैकेट का कोई जवाब नहीं देता, तो जहाँ IPsec के मामले में स्कैनर को बात करने के लिए एक concentrator मिलता, वहाँ उसे एक बंद पोर्ट मिलता है। और यह 4,000 से कम लाइन का कोड है53, एक ऐसे स्टैक के मुकाबले जिसे एक middlebox के साथ अपनी सोलह incompatibilities की सूची वाला डॉक्यूमेंट चाहिए।\nपरफ़ॉर्मेंस पर यह बस उन दोनों IPsec कॉन्फ़िगरेशनों से तेज़ नपा जिनके सामने इसका benchmark हुआ, 881 और 825 के मुकाबले 1,011 Mbit/s पर, कम latency के साथ53। मैं किसी benchmark की वजह से प्रोटोकॉल रिटायर नहीं करूँगा। मैं इसका ज़िक्र इसलिए करता हूँ कि IPsec के पक्ष में खड़ा आखिरी तर्क आम तौर पर परफ़ॉर्मेंस होता है, और वह भी सच नहीं है।\nकिसी व्यक्ति को किसी ऐप्लिकेशन तक पहुँचाने के लिए, नेटवर्क को नेटवर्क तक नहीं, जवाब टनल है ही नहीं। सामने के दरवाज़े पर पहचान, ऐप्लिकेशन उसी से होकर प्रकाशित, कुछ भी routed नहीं। मैंने इसे Proxmox और Cloudflare Access के साथ Zero Trust VDI Without the Cloud Bill में बनाया है, और इस पोस्ट के लिए काम की बात यह है कि जिस यूज़र को तीन अंदरूनी ऐप्लिकेशन चाहिए, उसे आपके पूरे सिस्टम तक route नहीं चाहिए।\nऔर हार्डवेयर के बारे में दबी हुई बात भी कह दीजिए। हाँ, ESP offload वाले NICs और ASICs हैं, और खास उपकरणों पर खास स्पीड के लिए यह IPsec के पक्ष में असली तर्क है। यह तर्क उस silicon के बारे में है जो किसी ने आपको पहले ही बेच दिया, इस बारे में नहीं कि प्रोटोकॉल सही है। इसलिए यह पुराना पड़ता है, और तेज़ी से पड़ता है। PPTP ठीक इसी तरह बचा रहा, ठीक तब तक जब तक वह चेकबॉक्स मौजूद था।\nइसे ढंग से रिटायर करना रिटायरमेंट तारीखों वाली योजना है, कोई भावना नहीं। यह रही वह योजना जिस पर मैं अपना नाम लगाऊँगा।\nनए IPsec डिप्लॉयमेंट अभी रोकिए। “विकल्पों को प्राथमिकता दीजिए” नहीं। रोकिए। हर नया टनल एक ऐसा टनल है जिसे किसी को बाद में माइग्रेट करना होगा, और आज बन रहे टनल 2035 में भी चल रहे होंगे, जब तक कोई इसी हफ़्ते मना न करे।\nपहले remote access कीजिए, क्योंकि इस पोस्ट की हर विफलता सबसे भारी वहीं पड़ती है: CGNAT, शेयर्ड एड्रेस, keepalives, एक ही घर में दूसरा यूज़र, किसी भी होटल नेटवर्क पर MTU का black hole। इसे हटाना भी सबसे आसान है, क्योंकि endpoints managed हैं और बदलाव एक क्लाइंट है।\nफिर पब्लिक इंटरनेट पर site-to-site, जो वही समस्याएँ हैं, कम endpoints और एक maintenance window के साथ।\nआखिर के लिए वे टनल छोड़िए जिनके दोनों छोर आपके नहीं: कोई पार्टनर, कोई रेगुलेटर, किसी कैरियर की managed सर्विस। वे तब हटते हैं जब कॉन्ट्रैक्ट हटता है, और उन्हें हटवाने का तरीका अगला बिंदु है।\nऐसे उपकरण खरीदना बंद कीजिए जिनका अकेला टनल IPsec है। इसे tender में डालिए। एक आधुनिक, पोर्ट-आधारित, roaming कर सकने वाले टनल की माँग करने वाली लाइन ऐसी लाइन है जिसका वेंडर या तो जवाब देता है या नहीं देता, और इसी तरह installed-base वाला तर्क आखिरकार हारता है। वही अकेला तर्क है जो इसमें से कुछ भी ज़िंदा रखे हुए है, और वह सिर्फ़ खरीदारी से ही हराया जाता है।\nलिखिए कि कौन-से टनल बचे हैं और क्यों, और हर एक पर तारीख लगाइए। जिस प्रोटोकॉल का दस साल से कोई मालिक नहीं, PPTP ऐसे ही 2026 तक पहुँचा। तारीखों वाली सूची ही किसी चीज़ को रिटायर करने और उसे सिर्फ़ नापसंद करने के बीच का फ़र्क है।\nअगर आप अब भी इसे डिप्लॉय कर रहे हैं, तो क्या आप खुद को प्रोफ़ेशनल कह सकते हैं? यह असली सवाल है और मैं इसका ईमानदारी से जवाब दूँगा, क्योंकि बाकी पोस्ट इसी की तरफ़ चलती आई है।\nयह इस पर निर्भर है कि आप जानते हैं या नहीं। और जानना कोई ऐसी चीज़ नहीं जो आपके साथ हो जाती है। यह पक्का करना कि आप जानते हैं, यही काम है।\nअगर आप इस साल एक नई IPsec remote-access सर्विस खड़ी कर रहे हैं और बिना कुछ देखे नहीं बता सकते कि ESP के पास पोर्ट क्यों नहीं हैं, कैरियर-ग्रेड NAT के नीचे की घरेलू लाइन उसके साथ क्या करती है, NAT64 नेटवर्क उसे बिल्कुल क्यों नहीं ढोएगा, या हर बीस सेकंड वाला वह एक-बाइट पैकेट असल में किसलिए है, तो नहीं। इस पर नहीं, अभी नहीं। आप प्रोटोकॉल नहीं चुन रहे। आप एक शक्ल दोहरा रहे हैं, क्योंकि पिछला ऐसा दिखता था और कमरे में किसी ने नहीं पूछा क्यों, आपने भी नहीं। विफलता फ़ासला नहीं है। फ़ासले सबके होते हैं। विफलता है एक ऐसे फ़ासले के ऊपर से बनाना जिसे आप कभी जाकर भरने नहीं गए। इसलिए जो व्यक्ति 2035 में इसे विरासत में पाएगा, उसे एक दशक के ऐसे टिकट मिलेंगे जो उस दिन टाले जा सकते थे जिस दिन आपने इसे बनाया।\nमैं इसे सही नाम दे दूँ, क्योंकि विनम्र वाला रूप बीस साल से चल रहा है और उससे कुछ नहीं बदला। जो व्यक्ति ऐसा प्रोटोकॉल डिप्लॉय करता है जिसे वह समझा नहीं सकता, वह इंजीनियर नहीं है। वह पीछे चलने वाला है। वह cue cards पढ़ता है, वेंडर का reference architecture, पिछला change request, 2014 में किसी का बनाया एक डायग्राम जिसे तब से किसी ने नहीं खोला, और उन्हें पूरे यकीन के साथ पढ़कर सुनाता है, और उस प्रदर्शन के पीछे कहीं कोई समझ नहीं होती। बाहर से यह बिल्कुल काबिलियत जैसा दिखता है। यह बिल्कुल काबिलियत जैसा ही दिखता रहता है उस पहली विफलता तक जिसे cards कवर नहीं करते, और उस पल से यही कमरे की अकेली चीज़ है जो मायने रखती है।\nयही cue cards इस बात की भी वजह हैं कि यह प्रोटोकॉल अब तक यहाँ है। 2026 में किसी ने whiteboard पर खड़े होकर गुणों के आधार पर IPsec के पक्ष में तर्क नहीं दिया। यह फिर से डिप्लॉय हुआ क्योंकि यह card पर था, और card एक ऐसे वेंडर ने लिखा था जिसका फ़ायदा इसमें है कि आप उसे terminate करने वाला बॉक्स खरीदते रहें। कोई चीज़ अपनी श्रद्धांजलि के बाद बीस साल ऐसे ही जीती है: बचाव से नहीं, बल्कि इससे कि उसे कभी एक बार भी ऐसे कमरे में खुद को सही साबित नहीं करना पड़ा जहाँ कोई फ़र्क पहचान सकता था।\nऔर इसे टोका जाता है। ज़ोर से, कमरे में, उसी समय, बाद में गलियारे में बुदबुदाकर नहीं। अगर कोई अपने नाम के आगे प्रोफ़ेशनल शब्द लगाता है, तो वह शब्द पूछे जाने के न्योते के साथ आता है, और पूछना बदतमीज़ी नहीं है। पूछा जाना और जवाब होना ही उस शब्द और एक बिज़नेस कार्ड के बीच का पूरा फ़र्क है।\nयह सबसे ज़्यादा तब मायने रखता है जब आप इसके पैसे दे रहे हैं। कोई consultancy, कोई MSP, किसी वेंडर की professional services शाखा, framework पर बैठा integrator: आप जो खरीद रहे हैं वह विवेक है, और विवेक ही वह अकेली चीज़ है जिसे आप डिलीवरी पर जाँच नहीं सकते। तो उसे पहले जाँचिए। पूछिए कि यह प्रोटोकॉल क्यों, कोई दूसरा क्यों नहीं। पूछिए कि कैरियर-ग्रेड NAT लाइन पर, IPv6-only मोबाइल नेटवर्क पर, चुपचाप fragments गिराने वाले रास्ते पर इसका क्या होता है। पूछिए कि इनमें से किससे वे खुद टकराए हैं और उन्होंने इसके बारे में क्या किया। दो मिनट के अंदर आपको पता चल जाएगा कि आपको कुछ बताया जा रहा है या पढ़कर सुनाया जा रहा है, और दो मिनट चार साल के टिकटों से कहीं सस्ता टेस्ट है। और अगर जवाब cue cards है और आप फिर भी साइन कर देते हैं, तो वह भी एक फ़ैसला है: बस अब वह उनका नहीं, आपका हो गया।\nअगर आप यह सब बता सकते हैं, और फिर भी इसे डिप्लॉय कर रहे हैं क्योंकि कोई रेगुलेटर प्रोटोकॉल का नाम लेकर इसे माँगता है, क्योंकि पार्टनर का उपकरण और कुछ terminate नहीं करता, या क्योंकि विकल्प अगले साल के बजट में है और इसे मार्च में चलना ही है, तो हाँ, ज़ाहिर है, और आप काम ढंग से कर रहे हैं। पाबंदियाँ असली होती हैं और मैंने इससे बदतर के आसपास बनाया है। दोनों को अलग करने वाली चीज़ डायग्राम पर लिखा प्रोटोकॉल नहीं है। वह यह है कि आपने क्यों लिखा या नहीं, और उसके आगे तारीख है या नहीं।\nजिस स्थिति का बचाव नहीं हो सकता वह बीच वाली है। इतना जानना कि बेचैनी हो, और फिर भी बना देना क्योंकि किसी ने आपसे इसे सही साबित करने को नहीं कहा। यह इंजीनियरिंग नहीं है। यह आदत है, एक change नंबर के साथ, और ठीक इसी तरह L2TP इस साल छपी एक datasheet पर पहुँच गया।\nतो यह सवाल tender बंद होने से पहले खुद से पूछिए, बाद में नहीं। प्रोफ़ेशनल इस बारे में शब्द नहीं है कि आप कौन-से प्रोटोकॉल जानते हैं। यह इस बारे में शब्द है कि आप जो चुनते हैं उसका बचाव, ज़ोर से, किसी ऐसे व्यक्ति के सामने कर सकते हैं या नहीं जो विफलता के तरीके जानता है। अगर कर सकते हैं, तो पाबंदियाँ जो माँगें वह डिप्लॉय कीजिए और चैन से सोइए। अगर नहीं कर सकते, तो आपको अभी-अभी पता चल गया कि आज रात जाकर क्या पढ़ना है, और यह कोई अपमान नहीं है। हर कोई कभी न कभी पीछे चलने वाला था, बिना किसी अपवाद के, मैं भी। जिस हिस्से का बचाव नहीं हो सकता वह है जान-बूझकर वैसे ही बने रहना और उसे करियर कहना।\nएक अच्छे आइडिया को भी खत्म होने की इजाज़त है मैं IPsec के साथ न्याय करना चाहता हूँ, क्योंकि वह इसका हकदार है।\nसहज समझ सही थी। सुरक्षा स्टैक में नीचे होनी चाहिए, जहाँ हर चीज़ उसे विरासत में पाए और किसी ऐप्लिकेशन पर भरोसा न करना पड़े कि वह इसे सही करेगा। 1995 में एसोसिएशन को एड्रेस से बाँधना गलती नहीं थी: एड्रेस ही मशीन था, और उस पर बनाना सही था। इसे लिखने वाले गंभीर लोग थे जो एक असली समस्या हल कर रहे थे, और सब डॉक्यूमेंटों में से WireGuard पेपर ही इसे सबसे अच्छी तरह कहता है: IPsec की layering सही और मज़बूत है, हर चीज़ सही जगह पर है, अकादमिक पूर्णता तक53।\nऔर फिर ज़मीन खिसक गई। इसलिए नहीं कि IPsec ने कुछ गलत किया, बल्कि इसलिए कि इस इंडस्ट्री ने तय किया कि एड्रेस ऐसी लागत है जिसे मैनेज करना है, ऐसी चीज़ नहीं जो हर मशीन को मिले, और विकल्प से बचने के लिए पच्चीस साल का ट्रांसलेशन बना डाला। IPsec की नींव चुपचाप वापस ले ली गई, और यह मानने के बजाय हमने उसके नीचे पच्चड़ लगा दिए। UDP encapsulation। फिर keepalives। फिर UDP ब्लॉक करने वाले नेटवर्कों के लिए TCP encapsulation। फिर एक और UDP हेडर ताकि राउटर को hash करने के लिए कुछ मिल जाए। हर इलाज अपने आप में वाजिब; उनका ढेर एक ऐसा प्रोटोकॉल है जिसे वे लोग सीधा खड़ा रखे हुए हैं जिन्हें उसे सीधा खड़ा रखने के पैसे मिलते हैं।\nयही वह हिस्सा है जिस पर गुस्सा होना बनता है, और यह असल में IPsec के बारे में है ही नहीं। हमारी इंडस्ट्री चीज़ों को बनाए रखने में बहुत अच्छी है और उन्हें खत्म करने में बहुत बुरी। रखरखाव का बिल बनता है, बजट होता है, स्टाफ़ होता है, और यह सुरक्षित है। रिटायरमेंट एक फ़ैसला है जिस पर किसी को साइन करना पड़ता है, अपने नाम के साथ, और बिना किसी तुरंत इनाम के। तो PPTP यह साबित होने के चौदह साल बाद भी जिया कि वह बेकार है, L2TP आज भी इस साल बिके बॉक्सों पर शिप होता है, और IKEv1 Historic होने के बाद एक दशक तक टनल negotiate करता रहा। इसलिए नहीं कि किसी ने उनका बचाव किया। इसलिए कि किसी से कभी उन्हें मारने की माँग ही नहीं की गई।\n90% सही करने का कोई इनाम नहीं है। Ferguson और Schneier ने 1999 में IPsec के बारे में यह लिखा था, और तब से जो हुआ है वह इंडस्ट्री के तीस साल हैं, जिनमें वह आखिरी 10% हर बार एक नए तरीके से गलत करती रही और पैच को समाधान कहती रही।\nएक अच्छे आइडिया को भी खत्म होने की इजाज़त है। यह जानना कि किसी चीज़ का रखरखाव कब बंद करना है, एक हुनर है, और यही वह हुनर है जिसमें यह पेशा सबसे कमज़ोर है। किसी को तो वह बनना पड़ेगा जो कहे कि एक प्रोटोकॉल अपनी उम्र जी चुका, तारीख लिख दे, और यह कहने वाला होने के नतीजे भुगते। वरना हम 2040 में भी हर बीस सेकंड में एक बाइट का पैकेट भेज रहे होंगे, ऐसे बॉक्स में एक टेबल गरम रखने के लिए जिसके मालिक हम नहीं, ऐसे नेटवर्क पर जिसने हमारे एड्रेस हमसे छीन लिए और इस सौभाग्य के लिए हमसे पैसे लिए।\nRFC 4301 — Security Architecture for the Internet Protocol, दिसंबर 2005। सिक्योरिटी एसोसिएशन और वह तिकड़ी परिभाषित करता है जिससे उसे ढूँढा जाता है: डेस्टिनेशन एड्रेस, सिक्योरिटी प्रोटोकॉल और SPI।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4302 — IP Authentication Header, दिसंबर 2005। AH की integrity जाँच IP हेडर के न बदलने वाले फ़ील्ड कवर करती है, सोर्स और डेस्टिनेशन एड्रेस समेत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9329 — TCP Encapsulation of Internet Key Exchange Protocol (IKE) and IPsec Packets, नवंबर 2022, RFC 8229 की जगह। इसलिए मौजूद है क्योंकि पब्लिक नेटवर्कों पर middleboxes UDP ब्लॉक करते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3715 — IPsec-Network Address Translation (NAT) Compatibility Requirements, मार्च 2004। सोलह गिनाई गई incompatibilities, जिनमें: “Since the AH header incorporates the IP source and destination addresses in the keyed message integrity check, NAT or reverse NAT devices making changes to address fields will invalidate the message integrity check,” और “Where IP addresses are used as identifiers in Internet Key Exchange Protocol (IKE) Phase 1 or Phase 2, modification of the IP source or destination addresses by NATs or reverse NATs will result in a mismatch between the identifiers and the addresses in the IP header.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Configuring IPsec NAT-Traversal, Security Configuration Guide, Cisco IOS XE 17.15.x (Catalyst 9300 Switches)। “If PAT found a legislative IP address and port, it would drop the Encapsulating Security Payload (ESP) packet”; UDP हेडर और एक 8-बाइट non-IKE marker बाहरी IP हेडर और ESP हेडर के बीच डाले जाते हैं; पाबंदियों की सूची में पोर्ट 500 और 4500 दोनों के लिए static नियम, dynamic NAT पॉलिसी का सपोर्ट नहीं, IPv6 नहीं, और यह कि एक ही डिवाइस पर IPsec और NAT दोनों नहीं चल सकते, शामिल हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3948 — UDP Encapsulation of IPsec ESP Packets, जनवरी 2005, negotiation RFC 3947 में। keepalive को “a one-octet-long payload with the value 0xFF” के रूप में परिभाषित करता है, जो “if no other packet to the peer has been sent in M seconds. M is a locally configurable parameter with a default value of 20 seconds,” भेजा जाता है, और UDP चेकसम ज़ीरो करने की माँग करता है: “If the protocol header after the ESP header is a UDP header, set the checksum field to zero in the UDP header.” Microsoft, Cisco, F-Secure, Nortel और SafeNet सभी RFC 3947 और RFC 3948 की लेखक सूचियों में हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — Route-Based and Policy-Based VPNs with NAT-T, Junos OS IPsec VPN User Guide। “NAT-T encapsulates both IKE and ESP traffic within UDP with port 4500 used as both the source and destination port”; “Because NAT devices age out stale UDP translations, keepalive messages are required between the peers”; और SRX5400, SRX5600 और SRX5800 पर, “the total number of tunnels from a given public translated IP cannot exceed 1000 tunnels.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8221 — Cryptographic Algorithm Implementation Requirements and Usage Guidance for ESP and AH, अक्टूबर 2017। ENCR_DES MUST NOT, ENCR_3DES SHOULD NOT, AUTH_HMAC_MD5_96 MUST NOT; AH के साथ मिला ESP NOT RECOMMENDED।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4787 — Network Address Translation (NAT) Behavioral Requirements for Unicast UDP, जनवरी 2007। REQ-5: “A NAT UDP mapping timer MUST NOT expire in less than two minutes,” साथ में “a default value of five minutes or more for the NAT UDP mapping timer is RECOMMENDED”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6146 — Stateful NAT64: Network Address and Protocol Translation from IPv6 Clients to IPv4 Servers, अप्रैल 2011। “The current specification only defines how stateful NAT64 translates unicast packets carrying TCP, UDP, and ICMP traffic. Multicast packets and other protocols, including the Stream Control Transmission Protocol (SCTP), the Datagram Congestion Control Protocol (DCCP), and IPsec, are out of the scope of this specification.” कुछ और ढोने वाले पैकेट “SHOULD be discarded”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6877 — 464XLAT: Combination of Stateful and Stateless Translation, अप्रैल 2013। IPv6-only डिवाइस को एक लोकल IPv4 स्टैक देता है ताकि जो ट्रैफ़िक NAT64 नहीं ढो सकता वह फिर भी चले।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIETF — draft-xu-ipsecme-esp-in-udp-lb, Encapsulating IPsec ESP in UDP for Load-balancing। “Although the ESP SPI field within the IPsec packets can be used as the load-balancing key, but it cannot be used by legacy switches and routers”; “Many cloud service providers allow customers to establish multiple IPsec VPN tunnels in parallel to enable ECMP and increase aggregate bandwidth. However, this approach is not ideal, as each tunnel typically requires its own public IP address, leading to higher public IP consumption and increased operational overhead.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Resolve IPv4 Fragmentation, MTU, MSS, and PMTUD Issues with GRE and IPsec। टनल ओवरहेड, path MTU discovery और ICMP errors वापस न आने पर क्या टूटता है, इस पर लंबे समय से चला आ रहा संदर्भ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Troubleshoot IPsec Anti-Replay Check Failures। “Certain QoS features, such as Low Latency Queueing (LLQ), could cause IPsec packet delivery to become out-of-order and dropped by the receiving endpoint due to a replay check failure.” डिफ़ॉल्ट window 64 पैकेट; बाद के प्लेटफ़ॉर्म पर 1024; दूसरा इलाज हर एसोसिएशन में कई sequence number spaces है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2661 — Layer Two Tunneling Protocol “L2TP”, अगस्त 1999। PPP के लिए एक टनलिंग प्रोटोकॉल, जिसकी अपनी कोई पैकेट-लेवल confidentiality नहीं; उसका सिक्योरिटी सेक्शन IPsec की तरफ़ इशारा करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMoxie Marlinspike और David Hulton — Divide and Conquer: Cracking MS-CHAPv2 with a 100% Success Rate, 2012; टूल github.com/moxie0/chapcrack पर। MS-CHAPv2 की सुरक्षा पासवर्ड की लंबाई चाहे जो हो, एक अकेले DES ऑपरेशन तक सिमट जाती है; उस समय का लेख The Register पर। उनका निष्कर्ष था कि PPTP ट्रैफ़िक को unencrypted माना जाना चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nApple — If you see a “VPN Using PPTP May Not Be Secure” alert। 2016 में macOS Sierra और iOS 10 के built-in क्लाइंट से PPTP हटा दिया गया।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4303 — IP Encapsulating Security Payload (ESP), दिसंबर 2005। IP प्रोटोकॉल 50; ESP हेडर SPI और sequence number ढोता है और उसमें कोई पोर्ट फ़ील्ड नहीं है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 9395 — Deprecation of the Internet Key Exchange Version 1 (IKEv1) Protocol and Obsoleted Algorithms, अप्रैल 2023। “Internet Key Exchange Version 1 (IKEv1) has been deprecated, and RFCs 2407, 2408, and 2409 have been moved to Historic status.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7296 — Internet Key Exchange Protocol Version 2 (IKEv2), अक्टूबर 2014। मौजूदा key exchange, और डायग्नोस्टिक टेबल के notify नामों का स्रोत।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3173 — IP Payload Compression Protocol (IPComp), सितंबर 2001। अपना अलग IP प्रोटोकॉल नंबर और अपने अलग एसोसिएशन, ESP के साथ negotiate किए जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2367 — PF_KEY Key Management API, Version 2, जुलाई 1998। वह kernel इंटरफ़ेस जिससे key daemon एसोसिएशन इंस्टॉल करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 7383 — IKEv2 Message Fragmentation, नवंबर 2014। “This document describes a way to avoid IP fragmentation of large Internet Key Exchange Protocol version 2 (IKEv2) messages.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4555 — IKEv2 Mobility and Multihoming Protocol (MOBIKE), जून 2006। बने हुए टनल को एड्रेस बदलने पर भी बचे रहने देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3706 — A Traffic-Based Method of Detecting Dead Internet Key Exchange (IKE) Peers, फ़रवरी 2004।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\ndraft-beaulieu-ike-xauth — Extended Authentication within IKE (XAUTH)। आखिरी संशोधन 02, अक्टूबर 2001, स्थिति Expired, “Expired \u0026amp; archived”, कभी RFC के रूप में नहीं छपा। draft दर्ज करता है कि इसे Informational के रूप में पेश किया गया क्योंकि “the IPSRA working group will not accept any protocol which extends ISAKMP or IKE, and the IPsec working group refuses to accept any protocols that deal with remote access.” Mode-Config का भी यही हाल हुआ।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 3193 — Securing L2TP using IPsec, नवंबर 2001। Microsoft में सह-लिखित।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2332 — NBMA Next Hop Resolution Protocol (NHRP), अप्रैल 1998। वह हिस्सा जिससे DMVPN spokes एक-दूसरे को ढूँढते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6407 — The Group Domain of Interpretation, अक्टूबर 2011। Group keying, जैसा GETVPN इस्तेमाल करता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 2637 — Point-to-Point Tunneling Protocol (PPTP), जुलाई 1999। श्रेणी: Informational। लिख दिया गया एक वेंडर प्रोटोकॉल, कभी स्टैंडर्ड नहीं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Configure L2TP/IPsec server behind NAT-T device, KB 926179, आखिरी संशोधन 12 फ़रवरी 2026। “By default, Windows Vista and Windows Server 2008 don\u0026rsquo;t support Internet Protocol security (IPsec) network address translation (NAT) Traversal (NAT-T) security associations to servers that are located behind a NAT device”; HKEY_LOCAL_MACHINE\\SYSTEM\\CurrentControlSet\\Services\\PolicyAgent के नीचे AssumeUDPEncapsulationContextOnSendRule DWORD 0 (डिफ़ॉल्ट, नहीं कर सकता), 1 (सर्वर NAT के पीछे) या 2 (दोनों छोर NAT के पीछे) लेता है, और मशीन को restart करना ज़रूरी है। साथ में: “If you must use IPsec for communication, use public IP addresses for all servers that you can connect to from the Internet.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nstrongSwan — Windows Certificate Requirements। गेटवे सर्टिफ़िकेट को serverAuth EKU, OID 1.3.6.1.5.5.7.3.1, और IP Security IKE Intermediate EKU, OID 1.3.6.1.5.5.8.2.2, चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nstrongSwan — Windows Clients। AES-256-CBC और MODP-2048 पाने के लिए Rasman\\Parameters के नीचे NegotiateDH2048_AES256 DWORD जोड़ना डॉक्यूमेंट करता है; NAT के पीछे के क्लाइंट्स के लिए rekeying वाला जुगाड़ (गेटवे पर rekey_time = 0, क्लाइंट को शुरू करने देना); और यह कि Windows क्लाइंट “does not currently support IKE redirection (RFC 5685) and multiple authentication rounds (RFC 4739).” साथ में: “IKEv2 fragmentation is supported since the v1803 release of Windows 10 and Windows Server”, और NAT के पीछे के क्लाइंट सर्वर की तरफ़ से शुरू किए CHILD_SA rekey को Microsoft error 13863 के साथ ठुकराते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — DirectAccess और Remote Access Always On VPN migration overview। DirectAccess deprecated है और Windows Server के किसी भावी रिलीज़ में हटा दिया जाएगा; ग्राहकों को Always On VPN की तरफ़ भेजा जाता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJean Paul Degabriele और Kenneth G. Paterson — Attacking the IPsec Standards in Encryption-only Configurations, IEEE Symposium on Security and Privacy, 2007। ऐसे हमले जो “break any RFC-compliant implementation of IPsec making use of encryption-only ESP”, सिर्फ़ ciphertext से, जिनके लिए सिर्फ़ छिपकर सुनने और ट्रैफ़िक डालने की क्षमता चाहिए।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 6434 — IPv6 Node Requirements, दिसंबर 2011। “Previously, IPv6 mandated implementation of IPsec and recommended the key management approach of IKE. This document updates that recommendation by making support of the IPsec Architecture [RFC4301] a SHOULD for all IPv6 nodes.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nNiels Ferguson और Bruce Schneier — A Cryptographic Evaluation of IPsec, Counterpane Internet Security, 1999। “IPsec was a great disappointment to us”; “Our main criticism of IPsec is its complexity”; “We therefore recommend that transport mode be eliminated”; “We conclude that eliminating transport mode allows the elimination of the AH protocol as well, without loss of functionality”; और “We have found serious security weaknesses in all major components of IPsec. As always in security, there is no prize for getting 90% right; you have to get everything right.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nDavid Adrian et al. — Imperfect Forward Secrecy: How Diffie-Hellman Fails in Practice, ACM CCS 2015। एक दूसरे 1024-bit group के लिए precomputation “would allow decryption of traffic to 66% of IPsec VPNs”; स्कैन किए गए 86.1% IKEv1 और 91.0% IKEv2 सर्वर Oakley Group 2 सपोर्ट करते थे, और प्रोफ़ाइल किए गए 66.1% IKEv1 सर्वर उसे पसंद करते थे।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCVE-2016-1287 और Cisco की advisory, Cisco ASA Software IKEv1 and IKEv2 Buffer Overflow Vulnerability। authentication से पहले remote code execution, IKE सर्विस को खास तरह से बनाए UDP पैकेट भेजकर।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — How to Analyze IKE Phase 2 VPN Status Messages। “No proposal chosen” का मतलब है कि डिवाइस “did not accept any of the IKE Phase 2 proposals that the peer sent”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCisco — Understand and Use Debug Commands to Troubleshoot IPsec, और Troubleshoot Common L2L and Remote Access IPsec VPN Issues।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — Troubleshoot a VPN Tunnel That is Down।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — XFRM proc counters। टेबल के विवरण kernel डॉक्यूमेंटेशन के अपने हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJuniper — Troubleshoot a VPN That Is Up But Not Passing Traffic। “If only the pkts counter in the out direction of the session is incrementing, then validate with the VPN peer that the traffic is being received.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — netsh wfp, Windows Commands। netsh wfp capture start “Starts a capture session for network events processed by WFP” और डिफ़ॉल्ट रूप से wfpdiag.cab लिखता है; netsh wfp show state “Displays the current state of WFP and IPsec”; netsh wfp show ikeevents “Displays recent Internet Key Exchange (IKE) epoch events matching the specified parameters” और एक remoteaddr= फ़िल्टर लेता है। किसी भी show पर file=- सेट करने से XML लिखने के बजाय कंसोल पर छपता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Get-NetIPsecQuickModeSA, NetSecurity मॉड्यूल। “There is only one main mode SA between a pair of computers, but there can be many quick mode SAs,” और उनकी निगरानी “can provide information about which peers are currently connected to this computer, and which protection suite is protecting the data exchanged between them.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Troubleshoot Always On VPN, आखिरी संशोधन 12 फ़रवरी 2026। क्लाइंट लॉग पढ़ने पर: “look for events labeled RasClient. All error messages return the error code at the end of the message.” Error 809 की वजह: “You can encounter this issue when the UDP 500 or 4500 ports on the VPN server or firewall are blocked.” Error 812 सर्वर की पॉलिसी और क्लाइंट की प्रोफ़ाइल के बीच authentication तरीके का मेल न होना है। Error 13801 की चार बताई वजहें हैं: Enhanced Key Usage में Server Authentication के बिना machine सर्टिफ़िकेट, expired RAS machine सर्टिफ़िकेट, root सर्टिफ़िकेट के बिना क्लाइंट, और ऐसा क्लाइंट जिसका “VPN server name doesn\u0026rsquo;t match the subjectName value on the server certificate”; 13806 है “IKE can\u0026rsquo;t find a valid machine certificate”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Guidance for troubleshooting Remote Access (VPN and AOVPN)। सपोर्टेड संग्रह TSS है, elevated चलाया हुआ: क्लाइंट पर TSS.ps1 -Scenario NET_VPN और सर्वर पर TSS.ps1 -Scenario NET_RAS, start और stop के बीच खराबी दोहराते हुए, traces C:\\MS_DATA में लिखे जाते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Routing and Remote Access Error Codes, raserror.h में परिभाषित कोड। 638 ERROR_REQUEST_TIMEOUT; 718 ERROR_PPP_TIMEOUT; 789 ERROR_OAKLEY_GENERAL_PROCESSING, “The L2TP connection attempt failed because the security layer encountered a processing error during initial negotiations with the remote computer”; 809 ERROR_VPN_TIMEOUT, “The network connection between your computer and the VPN server could not be established because the remote server is not responding”; 828 ERROR_IDLE_TIMEOUT, “The connection was terminated because of idle timeout”; 930 ERROR_AUTH_SERVER_TIMEOUT, “The authentication server did not respond to authentication requests in a timely fashion”।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nfirewalld — Automatic Helper Assignment। “With kernel 4.7 and up the automatic helper assignment in kernel has been turned off by default”, जिसे /proc/sys/net/netfilter/nf_conntrack_helper पर sysctl नियंत्रित करता है, और “for the secure use of iptables and connection tracking helpers it is recommended to turn AutomaticHelpers off”। बदलाव पर kernel का अपना संदेश वजह और विकल्प दोनों बताता है: डिफ़ॉल्ट automatic helper assignment “has been turned off for security reasons”, इसके बजाय helpers लगाने के लिए CT target इस्तेमाल कीजिए। जिन helpers पर यह लागू होता है उनमें ftp, irc, sip, h323, tftp, snmp और pptp हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nSamy Kamkar — NAT Slipstreaming, v1 31 अक्टूबर 2020, v2 26 जनवरी 2021, Armis के Ben Seri और Gregory Vishnipolsky के साथ। यह हमला “the Application Level Gateway (ALG) connection tracking mechanism built into NATs, routers, and firewalls” का दुरुपयोग करता है ताकि “bypass victim NAT and connect directly back to any port on any machine on the network, exposing previously protected/hidden services and systems”। v1 ने पोर्ट 5060 पर SIP gateway इस्तेमाल किया; v2 ने 1720 पर H.323, जिससे pinhole सिर्फ़ पेज लोड करने वाली मशीन के बजाय किसी भी अंदरूनी होस्ट की तरफ़ किया जा सका।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — Set-VpnServerConfiguration, RemoteAccess मॉड्यूल। -IdleDisconnectSeconds “Specifies the time, in seconds, after which an idle connection is terminated”; -SALifeTimeSeconds और -MMSALifeTimeSeconds quick mode और main mode की lifetimes सेट करते हैं; -SADataSizeForRenegotiationKilobytes “Specifies the number of kilobytes that are allowed to transfer using a security association (SA), after which the SA will be renegotiated.”\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nJason A. Donenfeld — WireGuard: Next Generation Kernel Network Tunnel, NDSS 2017। “It intentionally lacks cipher and protocol agility. If holes are found in the underlying primitives, all endpoints will be required to update. As shown by the continuing torrent of SSL/TLS vulnerabilities, cipher agility increases complexity monumentally”; “implemented for Linux in less than 4,000 lines of code”; “it is important to stress, however, that the layering of IPsec is correct and sound; everything is in the right place with IPsec, to academic perfection.” Benchmarks: दो IPsec cipher suites के 881 और 825 के मुकाबले 1,011 Mbit/s, और 0.501 और 0.508 के मुकाबले 0.403 ms ping।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/networking/ipsec-was-a-good-idea-turn-it-off/","summary":"IPsec 1995 में सही था: एन्क्रिप्शन ऐप्लिकेशन के नीचे रखिए, सिक्योरिटी एसोसिएशन को IP एड्रेस से बाँधिए, और हर प्रोटोकॉल को वह विरासत में मिल जाए। फिर NAT आया, कैरियर-ग्रेड NAT ने काम पूरा कर दिया, और इलाज यह निकला कि पूरी चीज़ को UDP में लपेटो और एक टाइमर चलाते रहो ताकि कोई ट्रांसलेशन टेबल आपको भूल न जाए। यह पोस्ट डायग्राम दर डायग्राम दिखाती है कि यह कैसे गिरता है: वह सिक्योरिटी एसोसिएशन जो बदले हुए हेडर के बाद ज़िंदा नहीं रह सकता, वे दो ट्रांसलेटर जो अब हर CGNAT लाइन पर हैं, वह NAT64 स्टैंडर्ड जो IPsec को out of scope बताता है, वह टनल जो दूसरा लिंक इस्तेमाल नहीं कर सकता क्योंकि ESP के पास पोर्ट नहीं हैं, वह MTU जिसका कोई मालिक नहीं, और L2TP व PPTP, वे दो प्रोटोकॉल जो यहाँ होने लायक कभी थे ही नहीं। इसमें Cisco, Juniper और Microsoft का वह डॉक्यूमेंटेशन है जो इनमें से हर बात मानता है, वे अठारह चीज़ें जो खुद को IPsec VPN कहती हैं, जिनमें दो ऐसी हैं जो कभी स्टैंडर्ड थीं ही नहीं, यह कि Fisher-Price OS (Windows) किसी ओपन स्टैक के साथ सच में कभी इंटरऑपरेट क्यों नहीं कर पाया, जब तक आप IPsec चला रहे हैं तब तक उसे डायग्नोज़ करने का एक काम करने वाला तरीका, और पूरी चीज़ को तारीखों के साथ रिटायर करने का तर्क।","title":"IPsec एक अच्छा आइडिया था। अब इसे बंद करने का समय है।"},{"content":"Azure Virtual Desktop की असली कीमत Azure Virtual Desktop ब्राउज़र में एक Windows desktop देता है। यह सचमुच यही करता है, और यह चलता है। सवाल यह है कि इसे चलाए रखने की कीमत क्या है।\nSticker पर लिखी कीमत असली कीमत नहीं है। AVD के लिए Microsoft का licensing stack मोटे तौर पर ऐसा है1:\nएक Microsoft 365 licence जिसमें Windows Enterprise का अधिकार शामिल हो: E3 या E5, या उसके बराबर Business Premium Desktop के नीचे Azure compute: घंटे के हिसाब से बिल होने वाली VM, या महीने के हिसाब से बिल होने वाला reserved instance OS disk और user profile के लिए Azure storage Desktop और बाकी हर जगह के बीच ट्रैफ़िक के लिए Azure networking वैकल्पिक रूप से, conditional access policies के लिए Microsoft Entra ID P1 या P2 Windows 365 Cloud PC बिलिंग को प्रति-user-प्रति-महीना एक तय संख्या में समेट देता है, पर वह संख्या छोटी नहीं। 2 vCPU / 8 GB / 128 GB configuration, जो एक साधारण ऑफ़िस desktop है, प्रति user प्रति महीना £35.60 है2। GPU जोड़िए तो GPU Standard tier के लिए यह £269.40 पर पहुँच जाता है। लोगों की गिनती से गुणा कीजिए और यह हर महीने, हमेशा के लिए, एक असली line item है।\nयही वह product है जिसकी जगह यह पोस्ट लेती है।\nब्राउज़र कोई भी डिवाइस RDP client नहीं VPN नहीं HTTPS Cloudflare Access\u0026#160;+\u0026#160;IdP user को authenticate ब्राउज़र में RDP ≤\u0026#160;50 users मुफ़्त कोई port खुला नहीं VPN ज़रूरी नहीं zero trust policy tunnel LXC cloudflared अपना VLAN firewall से सीमित सिर्फ़ RDP targets RDP Windows\u0026#160;VM GPU VF\u0026#160;0\u0026#160;·\u0026#160;RDP Windows\u0026#160;VM GPU VF\u0026#160;1\u0026#160;·\u0026#160;RDP Windows\u0026#160;VM GPU VF\u0026#160;2\u0026#160;·\u0026#160;RDP Proxmox host\u0026#160;·\u0026#160;Intel Arc Pro SR-IOV Arc Pro B-series PF → host VF 0 → VM VF 1 → VM VF 2 → VM एक ब्राउज़र, एक identity provider और एक tunnel: कोई VPN नहीं, कोई खुला port नहीं, कोई per-seat cloud बिल नहीं पूरा रास्ता: एक ब्राउज़र, पहचान के लिए Cloudflare Access, firewall वाले LXC में एक tunnel, और Intel Arc Pro virtual functions वाली Windows VMs तक RDP। कोई VPN नहीं, कोई खुले ports नहीं, कोई per-seat cloud बिल नहीं। बदले में आने वाला stack कैसा दिखता है तीन परतें, हर एक स्वतंत्र, किसी का बिल per seat नहीं:\nGPU परत पिछली पोस्ट का Intel Arc Pro SR-IOV build है। एक अकेला Arc Pro card सामान्य PCIe SR-IOV के ज़रिए hardware virtual functions में बँट जाता है: कोई vGPU licence नहीं, कोई NVIDIA subscription नहीं। हर Windows VM को अपना VF और अपना GPU-accelerated desktop मिलता है। Seats की गिनती card तय करता है, कोई licence server नहीं।\nAccess परत ब्राउज़र में render होने वाले RDP के साथ Cloudflare Access है। User किसी भी ब्राउज़र में एक URL खोलता है, आपके identity provider पर authenticate करता है, और Cloudflare RDP session को सीधे ब्राउज़र tab में render करता है। कोई RDP client install नहीं। कोई VPN नहीं। इंटरनेट पर कोई port खुला नहीं। Access किसी भी OAuth या OIDC provider से federate करता है, और इसमें Keycloak या Authentik जैसे on-prem providers भी हैं जो आपकी मौजूदा Active Directory के ऊपर बैठते हैं, चाहे वह Samba 4 AD हो या Windows domain controller। Directory वही करती रहती है जो वह पहले से करती है: user accounts, group policy, domain-joined VMs। Keycloak या Authentik उससे federate करता है और वह OAuth/OIDC और MFA परत जोड़ता है जो Cloudflare Access को चाहिए। Identity plane आपके अपने hardware पर रहता है। कोई Entra ID subscription नहीं चाहिए। उसके बाद क्या होता है यह Cloudflare Access संभालता है: authenticated user आपके नेटवर्क पर किस तक पहुँच सकता है, कौन से applications, कौन से protocols, कौन से hosts। Desktop एक Cloudflare tunnel के पीछे है और Access policy के सिवा कहीं से भी पहुँच में नहीं, और policy पहचान और दायरा दोनों तय करती है।\nTunnel परत Proxmox पर एक LXC container में चलता cloudflared process है, अपने VLAN पर: IPv4 के लिए एक /30 और अपना समर्पित IPv6 prefix, broadcast domain में और कुछ नहीं। Proxmox firewall तय करता है कि LXC किस तक पहुँच सकता है, और जवाब छोटा है: desktop VMs तक TCP 3389 और कुछ नहीं। अगर tunnel endpoint compromise हो जाए, तो blast radius एक container है जो एक वैसे खाली VLAN पर है, और वह सिर्फ़ उसी से बात कर सकता है जिसकी firewall पहले से इजाज़त देता है। यह उस VPN concentrator से कहीं छोटी सतह है जो एक routed subnet बाँट देता है।\nCloudflare Zero Trust 50 users तक मुफ़्त है3। भुगतान user 51 से शुरू होता है। Azure Virtual Desktop पहली seat से पैसा लेता है।\nArchitecture User कोई भी डिवाइस कोई भी ब्राउज़र HTTPS Cloudflare Access OAuth IdP करता है पहचान\u0026#160;+\u0026#160;MFA Access तय करता है नेटवर्क\u0026#160;दायरा RDP render करता है tunnel आपका परिसर LXC cloudflared अपना\u0026#160;VLAN /30\u0026#160;IPv4 Firewall Proxmox सिर्फ़\u0026#160;TCP\u0026#160;3389 RDP Windows VMs GPU virtual functions Arc\u0026#160;Pro\u0026#160;SR-IOV Session का रास्ता: user Cloudflare के edge पर authenticate करता है, tunnel अपने VLAN पर firewall वाले LXC में उतरता है, और firewall desktop VMs तक सिर्फ़ RDP की इजाज़त देता है। एक desktop session यह रास्ता लेता है:\nUser किसी भी डिवाइस पर, किसी भी ब्राउज़र में https://vdi.example.com खोलता है Cloudflare Access request रोकता है और आपके identity provider पर redirect करता है: Keycloak या Authentik, आपकी Active Directory से federated OAuth provider AD के ख़िलाफ़ user की पहचान जाँचता है और MFA संभालता है Access policy का मूल्यांकन करता है: provider ने पक्का किया कि वे कौन हैं, Access तय करता है कि वे आपके नेटवर्क पर किस तक पहुँच सकते हैं Cloudflare tunnel के ज़रिए target VM तक एक RDP session बनाता है RDP session ब्राउज़र में render होता है: कोई client नहीं, कोई plugin नहीं, कोई download नहीं Tunnel Proxmox host पर एक LXC container में ख़त्म होता है, एक बंद किए गए VLAN पर LXC RDP को Windows VM तक आगे भेजता है, जिसके पास Arc Pro card से एक GPU virtual function है किसी भी बिंदु पर Windows VM के पास public IP नहीं होता। किसी भी बिंदु पर port 3389 इंटरनेट के लिए खुला नहीं होता। Public इंटरनेट पर सुनने वाली अकेली चीज़ Cloudflare है, और Cloudflare के पार सिर्फ़ वह user जाता है जिसने Access policy पास की।\nTunnel endpoint: अपने VLAN पर एक LXC cloudflared process को कहीं चलना है, और आप इसे कहाँ रखते हैं यह एक security फ़ैसला है।\nइसे सीधे Proxmox host पर चलाना सबसे आसान विकल्प है और सबसे बुरा। जो tunnel endpoint host का network namespace साझा करता है वह हर उस चीज़ तक पहुँच सकता है जिस तक host पहुँचता है, और hypervisor पर इसका मतलब है सब कुछ। Compromise हुआ tunnel management plane में घुसने का रास्ता बन जाता है।\nइसे पूरी VM में चलाना साफ़ है पर भारी। Tunnel relay एक अकेला Go binary है जो लगभग कोई CPU नहीं लेता और कुछ सौ megabytes RAM लेता है। उसे पूरा kernel और virtual disk देना ज़रूरत से ज़्यादा है।\nLXC container सही आकार है। इसे अपना network namespace मिलता है, अपना VLAN, एक /30 IPv4 और समर्पित IPv6 prefix के साथ, broadcast domain में और कोई साझेदार नहीं, और Proxmox firewall में इसके अपने firewall rules। यह host का kernel साझा करता है पर उसका network stack नहीं। Firewall desktop VMs तक TCP 3389, उन्हें resolve करने के लिए DNS, और Cloudflare के edge तक outbound HTTPS की इजाज़त देता है। इसलिए compromise हुआ tunnel endpoint भी सिर्फ़ उन्हीं चीज़ों से बात कर सकता है जिनसे उसे पहले से बात करनी थी, और जिस VLAN पर वह बैठा है उस पर पहुँचने को कोई और निवासी नहीं।\nLXC configuration, VLAN के लिए Proxmox firewall rules, और cloudflared tunnel setup, सब अगली पोस्ट में हैं।\nCloudflare Access कैसे जुड़ता है इसके दो हिस्से हैं। OAuth provider, यानी Keycloak या Authentik, आपकी Active Directory (Samba 4 या Windows) से federated, पहचान की जाँच और MFA संभालता है। यह साबित करता है कि user वही है जो वह होने का दावा करता है, उसी directory का इस्तेमाल करके जिससे VMs domain-joined हैं। उसके बाद का सब कुछ Cloudflare Access संभालता है: authenticated user को किस तक पहुँचने की इजाज़त है, किस protocol से, और session कैसे render होता है।\nCloudflare Access RDP session को सीधे ब्राउज़र में render करता है। यह download या plugin नहीं है: Cloudflare का edge एक headless RDP client चलाता है और नतीजे को ब्राउज़र tab में canvas के रूप में stream करता है। User एक Windows desktop देखता है। ब्राउज़र Cloudflare तक HTTPS देखता है। Windows VM cloudflared tunnel से आया RDP कनेक्शन देखती है।\nAccess application एक self-hosted app है जो tunnel के RDP ingress की ओर इशारा करता है। Access policy वह जगह है जहाँ दोनों हिस्से मिलते हैं। OAuth provider पहचान पक्की कर चुका है और MFA challenge पास हो चुका है। Access वह token लेता है और तय करता है कि उसके साथ क्या करना है: user किस application तक पहुँच सकता है, उसके डिवाइस का posture पास होता है या नहीं, उसकी location की इजाज़त है या नहीं। Provider बताता है कौन। Access बताता है क्या।\nTunnel बनाना, ingress rules, LXC configuration, Proxmox firewall rules और खुद Access policy, सब अगली पोस्ट में हैं। यह पोस्ट बताती है कि stack क्या है और क्यों है। अगली इसे बनाती है।\nUser क्या देखता है Cloudflare Access में एक App Launcher शामिल है: एक resource portal जो हर वह application दिखाता है जिस तक authenticated user पहुँच सकता है। OAuth provider से लॉगिन के बाद portal उन्हें उनके उपलब्ध desktops, अंदरूनी web apps और बाकी tunnel वाले resources, सब एक जगह दिखाता है। एक URL, एक लॉगिन, और हर उस चीज़ के लिए एक tile जिस तक उनकी पहुँच है। यह सिर्फ़ RDP का नहीं, पूरे stack का landing page है।\nUser एक desktop tile पर क्लिक करता है, और उसे ब्राउज़र tab में एक Windows desktop मिलता है। कोई client नहीं, कोई plugin नहीं, कोई download नहीं। यह उनके पास पहले से मौजूद किसी भी डिवाइस पर चलता है: कंपनी का लैपटॉप, निजी मशीन, Chromebook, टैबलेट। यही मकसद है। यह system उन businesses के लिए बना है जो लोगों को अपना सामान इस्तेमाल करने देते हैं।\nब्राउज़र में render होने वाले session में clipboard, audio और multi-monitor supported नहीं हैं। यह design से है, गलती से नहीं। इनमें से हर channel डेटा बाहर निकालने का रास्ता है। सीमा पार करता clipboard फ़ाइलें बाहर ले जाता है। Audio capture बातचीत बाहर ले जाता है। Remote के बगल में लोकल desktop वाला multi-monitor drag-and-drop को मामूली बना देता है। इन channels को काटने का मतलब है कि user desktop के अंदर काम कर सकता है पर किसी side channel से काम बाहर नहीं खींच सकता। Access policy तय करती है कि अंदर कौन आता है। ब्राउज़र rendering तय करती है कि बाहर क्या जाता है।\nअगर business को किसी ख़ास workflow के लिए clipboard या audio चाहिए, तो Cloudflare Access tunnel के ज़रिए एक native RDP client को भी support करता है: वही tunnel, वही policy, वही पहचान जाँच। Native रास्ता जिन users को ज़रूरत है उन्हें पूरी RDP features देता है और बाकी सबके लिए ब्राउज़र वाला रास्ता बंद रखता है। दो access तरीके, एक policy engine, एक tunnel।\nलागत की तुलना एक ठोस उदाहरण। एक server, 42 GPU-accelerated desktops:\nHyperthreading वाला 64-core CPU आपको 128 threads देता है। हर VM को 8 vCPUs मिलते हैं, एक ठीक-ठाक desktop allocation, thin client नहीं। 42 × 8 = 336 vCPUs, जो कागज़ पर 128 threads से काफ़ी आगे है। पर यह VDI है। ऑफ़िस desktops ज़्यादातर समय idle रहते हैं। कोई document पढ़ता या email टाइप करता user 8 cores पर लोड नहीं डाल रहा। यहाँ oversubscription जोखिम नहीं, design है। Proxmox आपको physical threads से ज़्यादा vCPUs allocate करने देता है क्योंकि scheduler जानता है कि उनमें से ज़्यादातर सो रहे हैं। CPU peak के लिए नापा गया है, और peak गिनती के कुछ users का एक साथ compile या render करना है, सभी 42 का नहीं। यह shortcut नहीं है: cloud hyperscalers भी इसी तरह oversubscribe करते हैं। आप जो भी Azure VM किराए पर लेते हैं वह उसी host पर दूसरे tenants के साथ physical cores साझा करती है। Performance model एक जैसा है। फ़र्क यह है कि host किसका है। हर VM के लिए 12 GB RAM एक ठोस ऑफ़िस desktop है। 42 × 12 GB = 504 GB, और Proxmox के लिए 4 GB = कागज़ पर 508 GB। व्यवहार में KSM उन 42 Windows images के एक जैसे pages को समेट देता है, तो ज़रूरी physical RAM काफ़ी कम है, पर 512 GB DIMMs का बजट रखिए और headroom KSM को देने दीजिए। Supermicro H13SSL-NT जैसे board में तीन dual Intel Arc Pro B60 cards। हर physical card OS को दो GPUs दिखाता है, तो तीन cards से 6 GPUs मिलते हैं। हर GPU 7 SR-IOV virtual functions support करता है4। यानी तीन PCIe slots से 42 GPU-accelerated desktops। B60 की list कीमत प्रति card लगभग $599–799 है। B70 बड़ा विकल्प है, 32 GB के लिए $949 launch कीमत और प्रति GPU 4 virtual functions5: कम seats पर प्रति seat ज़्यादा VRAM। 42 users के लिए Windows 365 Cloud PC2:\nGPU के बिना भी संख्याएँ छोटी नहीं हैं। Basic tier, यानी 2 vCPU, 4 GB, 128 GB, £26.90/user/महीना है। Standard tier, यानी 2 vCPU, 8 GB, 128 GB, जो एक साधारण ऑफ़िस desktop है, £35.60/user/महीना है। Standard पर 42 users के लिए यह £1,495.20/महीना, £17,942.40/साल है, नीचे के अतिरिक्त खर्चों से पहले।\nGPU के साथ यह और बुरा होता है। GPU Standard tier £269.40/user/महीना है। 42 users के लिए यह £11,314.80/महीना, £135,777.60/साल है।\nफिर दोनों tiers में जुड़ता है:\nMicrosoft 365 licensing, अगर वह पहले से आपके पास नहीं Azure networking: ingress और egress अलग से बिल होते हैं, और ब्राउज़र तक stream करने वाला desktop egress पर हल्का नहीं होता Azure Backup या कोई third-party backup solution: VM snapshots और profile storage मुफ़्त में backup नहीं होते Public IPv4 पते: Azure किसी resource से जुड़े हर public IP का पैसा लेता है, और कीमत सिर्फ़ बढ़ी ही है Azure की बुनियादी कीमत USD में है, तो GBP लागत exchange rate के साथ हिलती है: कमज़ोर pound हर line item को महँगा कर देता है और उसके किसी भी पक्ष पर आपका कोई नियंत्रण नहीं बिल कभी नहीं रुकता। पाँचवें साल की कीमत पहले साल जितनी ही है। 42 users के लिए यह stack, build की लागत:\nSupermicro H13SSL-NT motherboard: ~£700 AMD EPYC 64-core CPU: ~£1,500 512 GB DDR5 ECC RDIMM (8 × 64 GB): ~£5,200 तीन dual B60 cards: ~£1,800 Chassis, PSU, boot SSDs: ~£800 कुल hardware: लगभग £10,000 पाँच साल की उम्र पर बाँटें तो यह £2,000/साल capital लागत है। इसमें जोड़िए:\nCloudflare Zero Trust: 50 users तक मुफ़्त Windows 11 Enterprise VDI अधिकार: Pro पर Software Assurance Enterprise में upgrade होता है जिसमें प्रति user चार VMs तक VDI access शामिल है, या Microsoft 365 E3/E5 के ज़रिए licence6 बिजली, और इस पर एक संख्या रखना ज़रूरी है Peak draw पर power बजट: 360W TDP पर 64-core EPYC, 400W प्रति card पर तीन dual B60 cards (1,200W), लगभग 80W पर 512 GB RAM, और storage, fans और PSU losses लगभग 150W। पूरे लोड पर दीवार पर लगभग 1,800W। VDI desktops पूरे लोड पर नहीं होते: ऑफ़िस का इस्तेमाल ज़्यादातर idle CPU और हल्का GPU है, तो असली औसत 1,000–1,200W के करीब है। इसे 1,100W मानिए।\n35p प्रति kWh पर, 24/7 चलता 1.1 kW है:\n1.1 × 24 × 365 = 9,636 kWh/साल 9,636 × £0.35 = £3,373/साल बिजली तो इस stack की कुल सालाना लागत लगभग £5,400/साल है: £2,000 बाँटा हुआ hardware और £3,400 बिजली, Windows licensing और इंटरनेट से पहले। इसे Azure बिल के बगल में रखिए: GPU tier के £135,778 के मुक़ाबले £5,400, या बिना GPU के basic desktops के £17,942 के मुक़ाबले। सबसे सस्ते Azure tier पर भी यह stack एक तिहाई से कम का है। GPU tier पर यह Azure बिल का 4% है।\nVDI Proxmox पर क्यों ठीक बैठता है VDI उन workloads में से है जिनमें Proxmox चुपचाप बहुत अच्छा है, दो कारणों से जिनका hypervisor से कोई लेना-देना नहीं।\nKSM। Proxmox KSMd, यानी kernel same-page merging daemon, शुरू से ही चालू रखता है। एक ही image से बनी बीस Windows VMs बहुत सारे एक जैसे memory pages साझा करती हैं: OS, बुनियादी libraries, user profile के न बदले हिस्से। KSMd उन duplicates को ढूँढता है और उन्हें एक physical page में समेट देता है, copy-on-write। नतीजा यह कि बीस desktops उतनी memory में आ जाते हैं जितनी वैसे आठ या दस के लिए चाहिए होती। ऐसे VDI host पर जहाँ हर VM एक ही image चलाती है, KSM मामूली optimisation नहीं है। Density को किफ़ायती यही बनाता है।\nbcache। अगर आपका storage Optane bcache वाला HDD-backed Ceph है, तो VDI उसके लिए सबसे अच्छा workload है। Boot storms और login storms read-heavy और दोहराव वाले होते हैं, ठीक वह pattern जिसे cache सोख लेता है। Working set गर्म होने के बाद desktops Optane से NVMe latency पर पढ़ते हैं और spindles मुश्किल से हिलते हैं। Writes user profile के बदलाव और temp files हैं, जो इतने छोटे और sequential हैं कि bcache का writeback उन्हें HDD को कभी bottleneck किए बिना संभाल लेता है।\nProfiles: दो विकल्प, दोनों Ceph पर। User profiles VDI storage का दूसरा आधा हिस्सा हैं, और cluster छोड़े बिना इन्हें संभालने के दो साफ़ तरीके हैं।\nFSLogix profile containers Windows desktop profile को roam कराने का मानक तरीका हैं, और ये S3-compatible object storage पर चलते हैं। Proxmox Ceph RADOS Gateway के ज़रिए एक S3 gateway देता है, तो profile store उसी cluster पर रहता है जिस पर VM disks हैं। कोई अलग file server नहीं, कोई Azure Files बिल नहीं, कोई बाहरी निर्भरता नहीं।\nदूसरा विकल्प है FSLogix को पूरी तरह छोड़ देना और CephFS पर clustered Samba से serve होने वाले SMB shares पर Windows folder redirection इस्तेमाल करना। Desktops Documents, Desktop, AppData और बाकी को CephFS पर टिके एक Samba share पर redirect करते हैं, और Samba cluster failover संभालता है। कोई profile container ही नहीं: फ़ाइलें filesystem पर सादी फ़ाइलों के रूप में रहती हैं, और replication CephFS संभालता है। इसे manage करना आसान है, backup करना आसान है, और यह FSLogix licensing से पूरी तरह बच निकलता है, जो काम का है अगर licence की कीमत मुद्दा हो या आपको बस कम चलते-फिरते हिस्से चाहिए। किसी भी तरह, profiles आपके अपने storage पर बैठते हैं, उसी Ceph pool पर टिके, और कीमत वह disk है जो आप पहले ही ख़रीद चुके हैं।\nKSM memory वापस दिलाता है, bcache storage latency वापस दिलाता है और profiles Ceph पर उतरते हैं, चाहे S3 पर FSLogix से या CephFS पर folder redirection से, इन तीनों के बीच HDDs और थोड़ी सी RAM वाला एक अकेला Proxmox host spec sheet के सुझाव से ज़्यादा desktops serve करता है। Azure इन तीनों के हर gigabyte का पैसा लेता है। यहाँ यह काम infrastructure मुफ़्त में करता है।\nBackup, resilience और compliance सब कुछ VDI के अंदर रखना सिर्फ़ लागत का फ़ैसला नहीं है। यह compliance और resilience का फ़ैसला है।\nजब desktop server पर रहता है, तो डेटा server पर रहता है। User के डिवाइस पर कुछ नहीं उतरता। चोरी हुआ लैपटॉप एक खोई हुई स्क्रीन है, खोया हुआ dataset नहीं। Encrypt करने को कोई लोकल disk नहीं, बाहर निकालने को कोई लोकल copy नहीं, breach के बाद forensic image करने को कोई endpoint नहीं। डेटा उस infrastructure से कभी बाहर नहीं गया जिसे आप नियंत्रित करते हैं।\nइससे backup सीधा हो जाता है। VM disks और profile stores Ceph पर हैं, और Ceph snapshots atomic और तुरंत होते हैं। एक snapshot policy हर desktop और हर profile को कवर करती है। Desktop को कल की हालत में लौटाना snapshot rollback है, rebuild नहीं। Profile लौटाना दूसरे pool पर वही operation है। Backup target cluster है, बीस बिखरे endpoints नहीं।\nयह compliance को भी आसान बनाता है। Data residency साबित करना आसान है जब डेटा आपके अपने hardware पर हो, ऐसे rack में जिसकी ओर आप उँगली उठा सकें, ऐसे क्षेत्राधिकार में जो आपने चुना। Audit trails आपके अपने logs पर हैं। Access आपकी लिखी Cloudflare policies से नियंत्रित होता है, आपके चलाए IdP से authenticated, और आपके नियंत्रण वाले systems में दर्ज। आपके और auditor की माँगी गई evidence के बीच कोई third-party cloud provider नहीं।\nResilience भी इसी रेखा पर चलती है। मरी हुई desktop VM golden image से बनी एक नई VM है जिसमें profile दोबारा जोड़ दिया गया। User फिर से लॉगिन करता है और desktop वापस आ जाता है। Rebuild करने को कोई endpoint नहीं, reimage करने को कोई OS नहीं, भेजने को कोई hardware नहीं। Recovery की इकाई VM है, और एक चालू करने में मिनट लगते हैं।\nआप क्या छोड़ते हैं यह हर अर्थ में मुफ़्त नहीं है। Azure Virtual Desktop जो चीज़ें संभालता है और यह stack नहीं:\nPatching और updates Microsoft संभालता है। यहाँ आप संभालते हैं। Intune और Endpoint Manager AVD के साथ native रूप से जुड़ते हैं। यहाँ आप Windows VMs खुद manage करते हैं, या जो भी tooling आप चुनें उससे। Azure का नेटवर्क Azure की समस्या है। यहाँ आपका इंटरनेट कनेक्शन desktop तक का रास्ता है। अगर वह बंद हो, तो desktops उसके लौटने तक पहुँच से बाहर हैं। Azure पर scaling बस एक credit card दूर है। यहाँ scaling का मतलब है एक और card या एक और host ख़रीदना। AVD user को default में पूरा RDP feature set देता है। यहाँ ब्राउज़र वाला रास्ता clipboard, audio और multi-monitor जानबूझकर हटा देता है। जिन users को ये features चाहिए उन्हें उसी tunnel और उसी policy से native RDP client मिलता है, पर default बंद किया गया ब्राउज़र है, और BYOD workforce के लिए यही सही default है। इनमें से कुछ भी मामूली नहीं। यह मायने रखता है या नहीं यह इस पर निर्भर है कि आपके पास क्या है: अगर आप पहले से Proxmox चलाते हैं, पहले से Windows manage करते हैं, और आपके पास पहले से कोई है जो hypervisor की देखभाल कर सके, तो ये सब वे काम हैं जो आप पहले से कर रहे हैं। अगर नहीं, तो Azure आपको वह staff बेच रहा है जो आपके पास नहीं, और उसकी सचमुच कुछ कीमत है।\nसवाल यह है कि क्या यह 42 basic desktops के लिए £18,000 साल के लायक है, या GPU वालों के लिए £136,000, हर साल, ऊपर से networking, backup, IPv4 और licensing, कीमत कोई और तय करता है, hardware किसी और का है, और बिल ऐसी मुद्रा में है जिस पर आपका नियंत्रण नहीं। या आप hardware और बिजली पर साल का £5,400 खर्च करते हैं और बाकी अपने पास रखते हैं।\nयह पोस्ट यही सामने रखती है। अगली इसे बनाती है: cloudflared tunnel, LXC, Proxmox firewall rules, Cloudflare Access policy, और ब्राउज़र tab में चलता desktop।\nसंदर्भ Azure Virtual Desktop pricing — compute, storage और networking Microsoft 365 अधिकार के ऊपर अलग से बिल होते हैं।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWindows 365 plans and pricing — तय प्रति-user-प्रति-महीना, GPU configurations Enterprise tier में।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nCloudflare Zero Trust pricing — 50 users तक मुफ़्त, user 51 से pay-as-you-go।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIntel Arc Pro B60 specifications — 24 GB GDDR6, 20 Xe2-cores, PCIe 5.0 x8, 7 virtual functions तक SR-IOV।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nIntel Arc Pro B70 specifications — 32 GB GDDR6, 32 Xe2-cores, PCIe 5.0 x16, 4 virtual functions तक SR-IOV।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nWindows 11 Licensing for Virtual Desktops — किसी योग्य OS (जैसे Pro) पर Software Assurance Enterprise में upgrade होता है, और आपके अपने on-premises server पर प्रति user चार VMs तक VDI अधिकार देता है।\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/networking/zero-trust-vdi-cloudflare-access/","summary":"पहला भाग: Azure Virtual Desktop की जगह Proxmox, Intel Arc Pro SR-IOV और Cloudflare Access लगाने का architecture और लागत का तर्क। पहचान के लिए on-prem OAuth, ब्राउज़र में render होता RDP, अपने VLAN पर firewall वाला LXC tunnel, memory density के लिए KSM, और Ceph पर profiles। अगली पोस्ट इसे बनाती है।","title":"Cloud बिल के बिना Zero Trust VDI: Proxmox, Intel Arc Pro और Cloudflare Access"},{"content":"Ping कोई डायग्नॉस्टिक नहीं है। यह एक tunnel है। ICMP echo (वह request जो एक मशीन भेजती है और जो reply उसे वापस मिलता है) आपके डाले हुए किसी भी bytes को दोनों दिशाओं में ले जाएगा, एक ऐसे प्रोटोकॉल के ऊपर जिसे अधिकांश firewall बिना जाँचे गुज़रने देते हैं और अधिकांश logging पढ़ने के बजाय गिनती करती है। जो नेटवर्क “सिर्फ़ ping की अनुमति देता है” उसके पास पहले से एक पूरी, encrypt की जा सकने वाली VPN बाहर जाने का रास्ता है, और जो कोई उस नेटवर्क तक पहुँच सकता है वह उसे चला सकता है।\nयह पुरानी बात है, और दर्ज है। Loki1 ने 1996 में Phrack 49 में यह तकनीक प्रकाशित की थी। Ptunnel2 बीस साल से ping के भीतर पूरे-पूरे TCP session ढो रहा है और किसी भी Linux बॉक्स पर एक पैकेज की दूरी पर है। कोई zero-day नहीं। प्रोटोकॉल बिल्कुल वैसा ही बर्ताव करता हुआ जैसा तय किया गया है।\nयही वजह है: मानक, किसी के product में कोई बग नहीं। धरती के हर host पर यह दायित्व है कि echo request में आया डेटा ले और उसे ज्यों-का-त्यों सीधे वापस सौंप दे। मनमाना डेटा अंदर, वही डेटा बाहर: एक tunnel को जितनी ज़रूरत है वह बस इतनी ही है, और यह 1981 से अनिवार्य है।\nठीक करने का तरीक़ा एक संकरा-सा बदलाव है। ICMP echo, request और reply दोनों, IPv4 और IPv6 पर, सीमा पर गिरा दो, और बाक़ी हर ICMP संदेश रखो। errors, Time Exceeded, Packet Too Big, Destination Unreachable, भार-वाहक हैं; उन्हें रोको और आप बेवजह path MTU discovery और traceroute तोड़ देते हैं। तो यह “ICMP रोको” नहीं है। यह उस एक संदेश को गिराना है जो जोखिम है, और उन्हें रखना है जो सच ढोते हैं।\nआपकी Egress पॉलिसी ने असल में किसकी इजाज़त दी अगर आप एक ऐसा नेटवर्क चलाते हैं जहाँ outbound फ़िल्टर होता है (और अगर नहीं करते, तो वह अपने आप में एक अलग बातचीत है), तो यह उसकी एक पंक्ति का बिल है। वह पॉलिसी जो कहती है “सब outbound रोको, ICMP की इजाज़त दो क्योंकि हमें चीज़ों को ping करना पड़ता है” कोई egress पॉलिसी नहीं है। यह एक पूरा tunnel है जिसकी कागज़ी कार्रवाई डायग्नॉस्टिक्स के तहत दाख़िल है। अंदर की कोई भी चीज़ जो echo request भेज सके और reply पढ़ सके, वह डेटा को बाहर कहीं भी भेज सकती है जहाँ कोई जवाब देता हो, जितनी रफ़्तार link सह ले, और आपके ख़रीदे हुए हर content control को पार करके। logs में यह कोई इंसान है जो देख रहा है कि internet चालू है या नहीं, और owt और नहीं। Malware सालों से इसी ठीक वजह से यह शिप करता रहा है। चुपचाप, मानक, और आमतौर पर पहले से अनुमत।\nइसीलिए यह उस किसी के लिए पहली पसंद का चैनल है जो पहले से अंदर है और जिसे नहीं होना चाहिए। यह किरायेदारी है, झपट्टा-मारकर-भागना नहीं। जिसे अंदर-बाहर का कोई टिकाऊ रास्ता चाहिए वह उस port से बचता है जो alert छेड़ दे। वे echo पर एक tunnel खड़ा करते हैं और उसे महीनों चलने देते हैं। जो host बहुत ping करता है वह host जिसे कोई नहीं देखता। estate में दो-तरफ़ा networking: command अंदर, डेटा बाहर, उस एक प्रोटोकॉल पर जिसे कोई rate-limit नहीं करता, जिस पर कोई alert नहीं करता, जिसे कोई नहीं पढ़ता। और यह encrypt है, जैसे कोई भी असली टूल करता है, तो तार पर payload वही बेतरतीब-से दिखने वाले bytes हैं जो एक ping वैसे भी ढोता है और content inspection के पास पढ़ने को कुछ नहीं। आकार और timing अब भी किसी सचमुच देख रहे व्यक्ति को इसका पता दे सकते हैं। packet के भीतर झाँकना नहीं दे सकता।\nऔर इसे चलाने वाली मशीन का किसी वहाँ काम करने वाले की होना ज़रूरी नहीं। बस इतना चाहिए कि कोई ऐसी चीज़ हो जो आपके नेटवर्क तक पहुँच सके और internet पर एक ping रख सके, और आपके नेटवर्क तक पहुँचना जितना कोई मानना चाहे उससे आसान है। WiFi दीवारों के पार जाता है, गलियारे में, कार पार्क में, ऊपर के फ़्लैट में। meeting-room की दीवार का, या reception का, या खिड़की के पास की ख़ाली मेज़ का ethernet port अक्सर चालू होता है और जो भी आप लगाएँ उससे बात करेगा, बिना किसी 802.1X के यह पूछे कि आप कौन हैं। रेंज में एक सिग्नल, या एक socket जिसे किसी ने बंद नहीं किया। यही दाख़िले की फ़ीस है। कोई badge नहीं, कोई account नहीं, कोई न्योता नहीं।\nउस मेहमान की कल्पना कीजिए जिसे आपने बुलाया था। वे meeting में हैं, सुहावने, नोट ले रहे, योगदान दे रहे। उनका laptop नहीं है। जिस क्षण वह आपके नेटवर्क तक पहुँचा, हवा के ज़रिये या मेज़ के नीचे के port से, वह दीवार के अंदर था, और अगर वह नेटवर्क echo request छोड़ सकता है, तो उसके पास बाहर का रास्ता है। आपके estate पर कुछ नहीं गिराया गया। कोई account नहीं, आपकी किसी चीज़ पर कोई privilege नहीं, आपके endpoint agents के पकड़ने लायक़ कुछ नहीं, क्योंकि आपके agents उनकी मशीन पर हैं ही नहीं। वह व्यक्ति मेज़ के उस पार है। ट्रैफ़िक आपके सामने के दरवाज़े से निकल रहा है, encrypt, एक ऐसे laptop से अलग न पहचाना जा सकने वाला जो ज़रूरत से ज़्यादा ping करता है।\nरेंज में सिग्नल पा रहा या खुले port पर आया मेहमान, सिर्फ़ pings देखने वाले firewall से बाहर का tunnel पा जाता है रेंज में या खुले port पर आया मेहमान, बाहर का रास्ता पा जाता है दीवार के अंदर: आपका नेटवर्क WiFi पहुँचता है गलियारा, कार पार्क, ऊपर का फ़्लैट मेहमान का laptop कोई badge नहीं, कोई account नहीं एक चालू दीवार-port कोई 802.1X यह नहीं पूछता आप कौन हैं सीमा firewall सिर्फ़ pings देखता है server internet पर echo request\u0026#160;\u0026#8594; \u0026#8592;\u0026#160;echo reply कोई भी IP traffic, encrypt, pings के भीतर सवार दाख़िले की फ़ीस नेटवर्क तक पहुँच है, रेंज में एक WiFi सिग्नल, या बिना 802.1X वाला एक चालू दीवार-port, और निकास सीमा के पार echo है। firewall को यह एक ऐसा host दिखता है जो ping करता है; उन pings के भीतर कोई भी IP ट्रैफ़िक है, encrypt, internet के किसी server के लिए रवाना। जिन दो चीज़ों की ओर आप हाथ बढ़ाएँगे वे मदद नहीं करतीं। NAT एक अनुवाद-तालिका है, फ़िल्टर नहीं: अंदर के host से आई echo request ICMP id पर आधारित एक mapping खोलती है, जिसे NAT बिल्कुल वैसे ही बरतता है जैसे वह एक port को बरतता है, और reply उसी से वापस आता है जैसे कोई और flow। मैंने अपने ही घर के NAT के पीछे एक client चलाया और उसने कभी भाँपा ही नहीं कि NAT वहाँ है। एक अलग guest VLAN इससे बेहतर नहीं। अलगाव मेहमान को आपके servers से दूर रखता है, पर उन्हें internet से दूर रखने के लिए यह कुछ नहीं करता, और internet, जहाँ ping से पहुँचा जाए, पूरी की पूरी ज़रूरत है। एक ही control इसे छूता है: क्या वह नेटवर्क echo को बाहर जाने देता है?\nआप इसे inspection से नहीं हटाते, और आप इसे अलगाव से नहीं हटाते। आप दरवाज़ा बंद करते हैं। इसके आगे सब कुछ यह है कि मानक इसे खुला क्यों छोड़ता है, tunnel बनाने के तीन तरीक़े ताकि दावा मेरी कही बात से ज़्यादा पर टिके, और वह एक बदलाव जो इसे बंद करता है।\nICMP का वह हिस्सा जो आपका कुछ काम का नहीं शुरुआत उससे कीजिए जो मानक असल में कहता है, क्योंकि पूरी दलील एक वाक्य पर टिकी है और लोग उसे बिना पढ़े टाल देते हैं।\nएक echo request एक data field ढोता है। IPv4 में, RFC 7923 साफ़ कहता है कि “the data received in the echo message must be returned in the echo reply message”। IPv6 ने शब्दों को ढीला करने के बजाय कस दिया: RFC 44434 इस field को “zero or more octets of arbitrary data” के रूप में परिभाषित करता है और फिर यह अपेक्षा रखता है कि यह “MUST be returned entirely and unmodified in the ICMPv6 Echo Reply message”।\nइसे एक operator के रूप में पढ़िए और यह एक keepalive है। इसे डेटा हिलाने वाले के रूप में पढ़िए और यह एक तोहफ़ा है। मानक हर पहुँच-योग्य host को बाध्य करता है कि वह आपके चुने हुए bytes का एक block स्वीकार करे और माँगने पर उन्हें ज्यों-का-त्यों सीधे आपको वापस भेज दे। मनमानी लंबाई। मनमानी सामग्री। कोई handshake नहीं, कोई port नहीं, दूसरे छोर पर कोई application नहीं जिसे किसी बात पर राज़ी होना पड़े। kernel यह करता है, इससे पहले कि कोई भी userland process झाँक सके।\nऔर यह दोनों families है। IPv6 पर जाना इसे समेट नहीं देता। यह इसे और चौड़ा खोल देता है। RFC 792 ने कहा था डेटा “must be returned”; RFC 4443 कहता है यह “MUST be returned entirely and unmodified”, जो वही दरवाज़ा है जिसे एक मज़बूत ताला खुला थामे हुए है। इसलिए यह चैनल ICMP echo पर और ICMPv6 echo पर एक-सा मौजूद है, और वह नियम जो इसे एक family पर बंद करे और दूसरी पर नहीं, उसने कुछ बंद नहीं किया। tunnel बस उस family पर चला जाता है जिसे आपने खुला छोड़ा। इस बारे में आप जो भी करें, उसे ip और ip6 दोनों पर एक साथ करें।\nप्रोटोकॉल में और कुछ यह नहीं करता। एक Time Exceeded उस packet का header ढोता है जो मरा और बस इतना। एक Destination Unreachable किसी ऐसी बात की रिपोर्ट है जो पहले ही हो चुकी। वे संदेश आपको नेटवर्क के बारे में तथ्य बताते हैं। Echo जो भी आप डालें वह दोनों दिशाओं में ढोता है, और उसे डायग्नॉस्टिक कहता है।\nErrors भार-वाहक हैं। Echo नहीं। यह वह फ़र्क़ है जो “बस ICMP रोको” वाली जमात कभी नहीं करती, और यही पूरी बात है, तो मैं इसे एक बार और ढंग से करूँगा।\nICMP errors को रोकना नेटवर्क को चुपचाप तोड़ देता है। Packet Too Big फ़िल्टर कीजिए और आप path MTU discovery मार देते हैं: handshake पूरा होता है, छोटे transfer चलते हैं, और पूरे-आकार का packet ढोने वाली कोई भी चीज़ हमेशा के लिए अटक जाती है, logs में कुछ नहीं। IPv6 पर यह तो पसंद का मसला भी नहीं। Routers फ़्रैगमेंट नहीं करते, तो RFC 48905 Packet Too Big को उन संदेशों में गिनाता है जिन्हें firewall “must not drop”, और चेताता है कि इसके बिना “parts of the Internet will become inaccessible”। Time Exceeded फ़िल्टर कीजिए और आप traceroute तोड़ देते हैं, जिसे RFC 18126 इस संदेश के अनिवार्य होने की वजह के रूप में नाम देता है। ये वैकल्पिक नहीं हैं। ये वह feedback हैं जो नेटवर्क को ख़ुद-सुधारने वाला बनाते हैं, और इन्हें खोने की क़ीमत मैंने पिछली बार विस्तार से बताई थी।\nअब echo गिराइए और ढूँढने निकलिए कि क्या टूटा। सीमा के पार ping चलना बंद हो जाता है। यही सूची है। पूरी सूची।\nPath MTU discovery को परवाह नहीं, क्योंकि यह Packet Too Big पर चलता है, जो एक error है। Traceroute को परवाह नहीं, क्योंकि traceroute -T और -U TCP और UDP पर चलते हैं और वापस आने वाले errors पढ़ते हैं। उनमें से कोई echo नहीं भेजता। IPv6 पर neighbour discovery को परवाह नहीं, क्योंकि वह types 133 से 137 है, और उन्हें आप रखते हैं वरना segment मर जाता है। पिछली पोस्ट की reverse-TTL तरकीब किसी भी reply पर चलती है, और एक TCP handshake आपको एक देता है। पिछली पोस्ट की डायग्नॉस्टिक्स को जो चलाता था वह सब चलता रहता है, क्योंकि उसमें एक भी माप ने echo request नहीं भेजी।\nतो प्रोटोकॉल के दो आधे इससे ज़्यादा अलग नहीं हो सकते। एक आधा नेटवर्क है जो आपको अपने बारे में सच बताता है, और आप उसे अपने जोखिम पर तोड़ते हैं। दूसरा आधा एक अनिवार्य payload-लौटाने की सेवा है जिसे संयोग से डायग्नॉस्टिक कहते हैं, और इसे खुला रखने के पक्ष में सबसे ज़ोरदार बात बस इतनी है कि ping काम आता है। यह काम आता है। यह ICMP का वह अकेला हिस्सा भी है जिसे कोई हमलावर चला सकता है, और मैं आपको ठीक-ठीक दिखा सकता हूँ कि वे इसे किससे चलाते हैं।\nICMP errors रखो, rate-limited; सिर्फ़ echo गिराओ, दोनों दिशाएँ और दोनों families एक प्रोटोकॉल के दो आधे, और उनमें से सिर्फ़ एक जोखिम है रखो rate-limit करो, कभी block नहीं Destination Unreachable बताता है एक packet क्यों न पहुँचा Packet Too Big path MTU discovery इस पर निर्भर है Time Exceeded traceroute इस पर निर्भर है Parameter Problem एक ख़राब header की रिपोर्ट देता है Neighbour Discovery 133\u0026#8211;137 IPv6: स्थानीय segment इस पर निर्भर है इन्हें तोड़ो और नेटवर्क चुपचाप टूट जाता है। गिराओ दोनों दिशाएँ, दोनों families Echo request type 8 (IPv4) · type 128 (IPv6) Echo reply type 0 (IPv4) · type 129 (IPv6) इनकी ज़रूरत किसी को नहीं सिवाय ping command के। हमलावर जो कुछ चलाता है ICMP के ज़रिये वह इन्हीं से चलता है। एक family पर खुला छोड़ा tunnel बंद नहीं है। ICMP errors भार-वाहक हैं: path MTU discovery, traceroute और IPv6 neighbour discovery सब इन पर निर्भर हैं, और इन्हें रोकना नेटवर्क को चुपचाप तोड़ देता है। Echo अकेला हिस्सा है जिस पर ping के सिवा कुछ निर्भर नहीं, और अकेला हिस्सा जिसे हमलावर चला सकता है। उसे गिराओ, बाक़ी रखो, दोनों families पर। इसे साबित करना: Ping से बनी एक VPN टूल है Hans7, जिसे Friedrich Schöller ने लिखा। इसका अपना विवरण एक पंक्ति है: यह “makes it possible to tunnel IPv4 through ICMP echo packets, so you could call it a ping tunnel”। यह हर छोर पर एक tun interface खड़ा करता है, उन्हें पते देता है, और उनके बीच का हर packet ICMP echo के भीतर ले जाता है। बीच के नेटवर्क को यह कोई इंसान दिखता है जो एक server को ping कर रहा है और server जवाब दे रहा है। मुझे यह एक route है।\nएक पूरा IP packet एक अकेले ping के data field के भीतर सफ़र करता है एक पूरा packet एक ping के भीतर सवार होता है जो packet आपका SSH session भेजता है IP header src / dst TCP header port 22 application डेटा आपके keystrokes, आपकी file Hans पूरे packet को echo data field में कॉपी करता है जो packet तार पर निकलता है IP header आप से server तक ICMP echo request type 8 · id · seq echo data field ऊपर का पूरा packet, अपरिवर्तित सीमा firewall को यह एक echo request है, और log एक ping दर्ज करता है। data field के भीतर एक packet है, जहाँ भी दूसरा छोर पहुँच सके वहाँ के लिए रवाना। मानक दूसरे छोर से उस डेटा को सीधे वापस भेजवाता है, तो reply भी एक packet है। tunnel जो भी packet ढोता है वह एक ICMP echo request के data field में कॉपी हो जाता है। मानक दूसरे छोर को बाध्य करता है कि वह उस डेटा को ज्यों-का-त्यों लौटाए, तो reply भी एक packet ढोता है। firewall एक ping गिनता है; payload वहाँ कहीं भी जाता है जहाँ दूसरा छोर route कर सके। मैंने इसे अपनी ही line पर चलाया, एक सार्वजनिक पते पर server और मेरे घर के NAT के पीछे एक client, और इसके ज़रिये असली ट्रैफ़िक भेजा। flag लगी बनावटी pings नहीं। एक SSH login और एक file pull, echo के भीतर सवार।\nजहाँ मैंने server चलाया वहाँ यह एक पैकेज की दूरी पर है, और कहीं और यह Schöller के source से बन जाता है। server को Linux होना है और root चाहिए, क्योंकि एक tun device खोलना और एक raw ICMP socket खोलना दोनों के लिए चाहिए। syntax जानबूझकर छोटा है:\n# on the server (public IP), pick the tunnel network and a password hans -s 10.8.0.0 -p \u0026#39;\u0026lt;password\u0026gt;\u0026#39; # server takes 10.8.0.1; clients are handed 10.8.0.2 and up # on the client, point it at the server\u0026#39;s public address hans -c \u0026lt;server-public-ip\u0026gt; -p \u0026#39;\u0026lt;password\u0026gt;\u0026#39; एक बार दोनों छोर ऊपर हो जाएँ तो हर तरफ़ tunnel नेटवर्क पर एक पते वाला एक नया interface होता है, और यह किसी भी दूसरी point-to-point link जैसा बर्ताव करता है:\nउस session को यह कुछ नहीं पता कि वह ping के भीतर है। SSH 10.8.0.1 तक एक TCP connection खोलता है, kernel उसे tun0 से बाहर route करता है, Hans हर packet को एक echo request के payload के रूप में लपेटता है, और दूसरा छोर उसे खोलकर अपने ही tun0 को सौंप देता है। reply एक echo reply के payload के रूप में वापस आता है। जहाँ तक SSH का सवाल है, वह एक सामान्य link पर बात कर रहा है। जहाँ तक firewall का सवाल है, किसी ने कुछ नहीं खोला। एक host को ping किया जा रहा है।\nतार पर यह कैसा दिखता है यही वह हिस्सा है जो दलील ख़त्म करता है, तो मेरी नहीं, firewall की नज़र से देखिए।\nअसल में क्या हो रहा है, और firewall क्या log करता है, वे एक ही तस्वीर नहीं हैं एक tunnel, दो तस्वीरें असल में क्या हो रहा है आपका host tun0 · 10.8.0.2 server tun0 · 10.8.0.1 कहीं भी जहाँ वह पहुँच सके SSH, file pulls बाहर route हुआ कोई भी IP traffic, tunnel के ज़रिये सामान्य packets के रूप में सीमा firewall क्या देखता और log करता है आपका host 198.51.100.9 server 192.0.2.7 echo request echo reply icmp echo request 198.51.100.9 \u0026gt; 192.0.2.7 icmp echo reply 192.0.2.7 \u0026gt; 198.51.100.9 icmp echo request 198.51.100.9 \u0026gt; 192.0.2.7 ... pings के रूप में गिने, सामग्री बिन पढ़ी वही तार। firewall भीतर के packets कभी नहीं देखता। tunnel असली ट्रैफ़िक दो hosts के बीच ले जाता है और फिर बाहर वहाँ तक जहाँ server पहुँच सके। सीमा पर यह सिर्फ़ echo request और echo reply है, firewall pings log करता है और उनके भीतर ढोए गए packets को कभी नहीं देखता। बाहरी interface पर tcpdump के साथ बैठिए और SSH session चलते हुए सिर्फ़ ICMP capture कीजिए। port 22 पर कोई TCP सीमा पार नहीं करता। जो पार करता है वह echo request और echo reply है, आगे-पीछे, हर एक असली ping से मोटा क्योंकि वह अपने payload में एक TCP segment का टुकड़ा ढो रहा है:\n# on the boundary, watch only ICMP echo while traffic runs over the tunnel tcpdump -ni \u0026lt;wan-iface\u0026gt; \u0026#39;icmp[icmptype] = icmp-echo or icmp[icmptype] = icmp-echoreply\u0026#39; उस capture में जो दो चीज़ें मायने रखती हैं उन्हें पढ़िए। पहली, payload की लंबाइयाँ: एक सामान्य ping 56 bytes भेजता है और हर पंक्ति एक ही आकार की होती है, जबकि ये बदलती हैं और बड़ी चलती हैं, क्योंकि जो चीज़ आप हिला रहे हैं उसका आकार ping के आकार में रिस जाता है। दूसरी, रफ़्तार: एक डायग्नॉस्टिक ping सेकंड में एक होता है, और यह एक बाढ़ है, क्योंकि यह एक file हिला रहा है। कोई भी छिपा नहीं है। दोनों एक ऐसे प्रोटोकॉल पर साफ़ नज़र के सामने बैठे हैं जिसे कोई नहीं देख रहा।\nऔर यही पूरी बात है। यह नहीं कि यह चतुराई है, या देखने पर पकड़ना मुश्किल है। लगभग कोई देखता ही नहीं, क्योंकि बॉक्स ICMP की इजाज़त देने को configure है, logs उसे pings गिनते हैं, और alerting उन ports के लिए tune की गई थी जिनकी फ़िक्र करना किसी को याद रहा। ट्रैफ़िक एक health check जैसा दिखता हुआ निकलता है और health check वहाँ तक का एक route है जहाँ server पहुँच सके।\nहाथ से बनी एक पूरी-tunnel VPN Hans साबित करता है कि चैनल वहाँ है, पर वह interface और addressing आपके लिए कर देता है और एक route थमा देता है, तो वह आपको ठीक-ठीक नहीं दिखाता कि आपने क्या बनाया है। यह देखने के लिए कि यह पूरे अर्थ में एक VPN है, पूरी मशीन का ट्रैफ़िक ping से निकलता हुआ, दो नामित hosts के बीच की एक link नहीं, इसे हाथ से जोड़िए। icmptunnel8, Dhaval Kapil का, इसके लिए वाला है, और इसका अपना विवरण एक अकेली पंक्ति है: “Transparently tunnel your IP traffic through ICMP echo and reply packets”। वही विचार, tun device और echo payloads, पर plumbing आप ख़ुद बिछाते हैं और किसी binary के भीतर कुछ नहीं छिपता।\nserver पर आप tunnel शुरू करते हैं, interface ऊपर लाते हैं, और फिर वह काम करते हैं जो पूरा खेल खोल देता है: kernel से कहते हैं कि वह ख़ुद pings का जवाब देना बंद करे, ताकि उसके अपने echo replies उन replies से न भिड़ें जो tunnel भेज रहा है।\nsudo ./icmptunnel -s 10.0.1.1 # server mode; creates tun0, then blocks # from a second shell, bring the interface up (iproute2, not the net-tools the repo ships) sudo ip addr add 10.0.1.1/24 dev tun0 sudo ip addr add 2001:db8:1::1/64 dev tun0 sudo ip link set tun0 mtu 1472 up # 1500 − 20 (IP) − 8 (ICMP); see below # stop the kernel replying to pings — echo now belongs to the tunnel sudo sysctl -w net.ipv4.icmp_echo_ignore_all=1 sudo sysctl -w net.ipv6.icmp.echo_ignore_all=1 # let the server route the client\u0026#39;s packets onward sudo sysctl -w net.ipv4.ip_forward=1 icmp_echo_ignore_all वाली पंक्ति दोबारा पढ़िए, क्योंकि यह दिखने से ज़्यादा कहती है। वह knob kernel का अपना है, और यह एक बचाव के रूप में शिप होता है: इसे set कीजिए और, kernel के शब्दों में, यह “will ignore all ICMP ECHO requests sent to it”9, तो एक operator किसी host को ping की नज़र से पूरी तरह हटा सकता है। यह अब दोनों families पर है। net.ipv4.icmp_echo_ignore_all सालों से, और उससे मिलान के लिए बाद में जोड़ा गया net.ipv6.icmp.echo_ignore_all।10 tunnel उस बचावकारी switch को उलटे कारण से चालू करता है: kernel के ख़ुद echo का जवाब न देने के साथ, उसके दोनों छोर echo को शुद्ध transport के रूप में इस्तेमाल करने को आज़ाद हैं। और यही बताने वाली बात है। जिन लोगों ने stack लिखी वे पहले से echo को ऐसी चीज़ मानते हैं जिसे एक host वाजिब तौर पर मना कर सकता है, इस पोस्ट का नियम वही फ़ैसला एक बार लेता है, सीमा पर, उसके पीछे के हर host के लिए।\nclient पर आप interface ऊपर लाते हैं और फिर default route को उसके नीचे भेज देते हैं। tunnel से पहुँचा एक host नहीं। सब कुछ।\nsudo ./icmptunnel -c \u0026lt;server-public-ip\u0026gt; # client mode; creates tun0 sudo ip addr add 10.0.1.2/24 dev tun0 sudo ip addr add 2001:db8:1::2/64 dev tun0 sudo ip link set tun0 mtu 1472 up # keep the route to the server itself OUT of the tunnel... sudo ip route add \u0026lt;server-public-ip\u0026gt; via \u0026lt;gateway\u0026gt; dev \u0026lt;iface\u0026gt; # ...then send everything else down it sudo ip route replace default dev tun0 project की अपनी client.sh और server.sh अब भी net-tools के ifconfig और route की ओर हाथ बढ़ाती हैं। ऊपर के ip commands iproute2 के समतुल्य हैं और वही काम करते हैं। server तक का वह route वह पंक्ति है जिसे लोग भूल जाते हैं: उसे tunnel से बाहर रखिए, वरना tunnel को ढोने वाले echo packets ख़ुद tunnel के नीचे चलने की कोशिश करते हैं, और कुछ बाहर नहीं निकलता। बाक़ी सब अब tun0 से होकर जाता है, echo में लिपटा, और server तक पहुँचता है। वह आगे जाता है या नहीं, यह एक routing का चुनाव है। server पर एक अकेला masquerade नियम उसे server के अपने पते के तहत सार्वजनिक internet पर रख देता, और वह जानबूझकर यहाँ नहीं है, क्योंकि tunnel ही दिखाई जा रही चीज़ है और उसे उसकी ज़रूरत नहीं।\nयह एक पूरी-tunnel VPN है, मुट्ठी भर commands में ping से बनी। client जो भी packet भेजता है, web, DNS, SSH, सब कुछ, tun0 में पकड़ लिया जाता है और server के लिए एक echo request के रूप में निकलता है, और जवाब echo replies के रूप में वापस आते हैं। एक ऐसे नेटवर्क पर मशीन जो “सिर्फ़ ICMP की अनुमति देता है” अभी-अभी अपना पूरा outbound ट्रैफ़िक बाहर के एक बॉक्स को सौंप चुकी है, और सीमा ने एक ऐसा host log किया जिसे ping करना पसंद है।\nPython में अपना ख़ुद का बनाना यहाँ वह हिस्सा है जिसे किसी ऐसे को परेशान करना चाहिए जो एक टूल पहचानकर इसके ख़िलाफ़ बचाव की उम्मीद रखता है। न Hans न icmptunnel कुछ ऐसा कर रहा है जो आप एक दोपहर में ख़ुद न लिख सकें। एक tun device खोलिए, हर packet को एक echo request के payload के रूप में लपेटिए, जो वापस आएँ उन्हें खोलिए। यही पूरा तंत्र है, और नंगा tunnel बिना कुछ install किए standard-library Python की लगभग साठ पंक्तियाँ है। नीचे का संस्करण ऊपर एक चीज़ जोड़ता है: यह payload encrypt करता है, और यही अकेला हिस्सा है जो एक dependency खींचता है।\n#!/usr/bin/env python3 # pingvpn.py — a VPN tunnel over ICMP echo, in one short file. # # Not a product. It exists to show the channel is trivial to rebuild, so a # defence that hunts for a known tool is chasing the wrong thing entirely. # Linux, needs root (a tun device and a raw ICMP socket both do), and the # `cryptography` package for the AES (pip install cryptography). # # server: sudo python3 pingvpn.py --server # client: sudo python3 pingvpn.py --client \u0026lt;server-public-ip\u0026gt; # # The payload is encrypted with AES-128-GCM under a pre-shared key before it # goes on the wire, so what a firewall sees in the echo data is random bytes — # the same as a real ping\u0026#39;s padding, and nothing for content inspection to read. import argparse import fcntl import hashlib import os import select import socket import struct import sys from cryptography.hazmat.primitives.ciphers.aead import AESGCM TUNSETIFF = 0x400454CA IFF_TUN = 0x0001 IFF_NO_PI = 0x1000 MAGIC = 0x4954 # \u0026#39;IT\u0026#39; in the id field, so we ignore real pings ECHO_REQUEST = 8 ECHO_REPLY = 0 PSK = b\u0026#34;change-me-to-a-shared-secret\u0026#34; # pre-shared secret, both ends KEY = hashlib.sha256(PSK).digest()[:16] # 128-bit key -\u0026gt; AES-128-GCM AEAD = AESGCM(KEY) def open_tun(name=b\u0026#34;tun0\u0026#34;): fd = os.open(\u0026#34;/dev/net/tun\u0026#34;, os.O_RDWR) fcntl.ioctl(fd, TUNSETIFF, struct.pack(\u0026#34;16sH\u0026#34;, name, IFF_TUN | IFF_NO_PI)) return fd def encrypt(data): # -\u0026gt; nonce || ciphertext+tag nonce = os.urandom(12) return nonce + AEAD.encrypt(nonce, data, None) def decrypt(blob): # raises on a packet that is not ours return AEAD.decrypt(blob[:12], blob[12:], None) def checksum(data): if len(data) % 2: data += b\u0026#34;\\x00\u0026#34; total = sum(struct.unpack(\u0026#34;!%dH\u0026#34; % (len(data) // 2), data)) total = (total \u0026gt;\u0026gt; 16) + (total \u0026amp; 0xFFFF) total += total \u0026gt;\u0026gt; 16 return ~total \u0026amp; 0xFFFF def build_echo(icmp_type, payload): head = struct.pack(\u0026#34;!BBHHH\u0026#34;, icmp_type, 0, 0, MAGIC, 0) csum = checksum(head + payload) return struct.pack(\u0026#34;!BBHHH\u0026#34;, icmp_type, 0, csum, MAGIC, 0) + payload def main(): ap = argparse.ArgumentParser(description=\u0026#34;a VPN tunnel over ICMP echo\u0026#34;) group = ap.add_mutually_exclusive_group(required=True) group.add_argument(\u0026#34;--server\u0026#34;, action=\u0026#34;store_true\u0026#34;) group.add_argument(\u0026#34;--client\u0026#34;, metavar=\u0026#34;SERVER_IP\u0026#34;) args = ap.parse_args() out_type = ECHO_REQUEST if args.client else ECHO_REPLY in_type = ECHO_REPLY if args.client else ECHO_REQUEST peer = args.client # None on the server until a client is seen tun = open_tun() sock = socket.socket(socket.AF_INET, socket.SOCK_RAW, socket.IPPROTO_ICMP) print(\u0026#34;tun0 created. bring it up with an address and route, then send traffic.\u0026#34;, file=sys.stderr) while True: readable, _, _ = select.select([tun, sock], [], []) if tun in readable: # a packet wants to leave this host packet = os.read(tun, 65535) if peer: sock.sendto(build_echo(out_type, encrypt(packet)), (peer, 0)) if sock in readable: # something arrived over ICMP data, _ = sock.recvfrom(65535) ihl = (data[0] \u0026amp; 0x0F) * 4 # skip the IP header the kernel adds icmp = data[ihl:] if len(icmp) \u0026lt; 8 or icmp[0] != in_type or icmp[4:6] != struct.pack(\u0026#34;!H\u0026#34;, MAGIC): continue try: packet = decrypt(icmp[8:]) # wrong key or a real ping -\u0026gt; skip except Exception: continue if args.server: peer = socket.inet_ntoa(data[12:16]) # reply to whoever sent os.write(tun, packet) # hand the carried packet to the stack if __name__ == \u0026#34;__main__\u0026#34;: main() यही पूरा tunnel है। यह tun0 और एक raw ICMP socket खोलता है और उनके बीच packets की आवाजाही करता है: जो host से निकलता है वह एक echo request के रूप में लपेटा जाता है, या server पर एक echo reply के रूप में, और दूसरे छोर को भेजा जाता है; जो ICMP पर आता है उसे खोलकर stack को वापस सौंपा जाता है। id field को एक मान पर पिन किया गया है ताकि यह असली pings के ऊपर से गुज़र जाए, और server पहले देखे गए packet के source से सीखता है कि कहाँ जवाब दे।\nencryption वह बिंदु है जिस पर ठहरने लायक़ है, क्योंकि असली टूल यही करते हैं और इसीलिए आप इसे packet के भीतर देखकर नहीं पकड़ेंगे। payload को लपेटे जाने से पहले एक pre-shared key के तहत AES-128-GCM से सील किया जाता है, तो echo data के bytes एक असली ping के ढोए बेतरतीब padding से अलग नहीं पहचाने जा सकते। दोनों crypto पंक्तियाँ निकाल दीजिए और tunnel अब भी सिर्फ़ standard library पर चलता है, इसे pip install cryptography की एकमात्र ज़रूरत AES है, और AES ठीक वही हिस्सा है जो एक पढ़े जा सकने वाले tunnel को एक न पढ़े जा सकने वाले में बदल देता है। इसे पहले की तरह ऊपर लाइए, masquerade के बिना। बात साबित करने के लिए आपको उसकी ज़रूरत नहीं:\n# server: start it (creates tun0, then blocks), then configure from the same shell sudo python3 pingvpn.py --server \u0026amp; sudo ip addr add 10.9.0.1/24 dev tun0 sudo ip addr add 2001:db8:9::1/64 dev tun0 sudo ip link set tun0 mtu 1400 up sudo sysctl -w net.ipv4.icmp_echo_ignore_all=1 sudo sysctl -w net.ipv6.icmp.echo_ignore_all=1 # client sudo python3 pingvpn.py --client \u0026lt;server-public-ip\u0026gt; \u0026amp; sudo ip addr add 10.9.0.2/24 dev tun0 sudo ip addr add 2001:db8:9::2/64 dev tun0 sudo ip link set tun0 mtu 1400 up sudo sysctl -w net.ipv4.icmp_echo_ignore_all=1 sudo sysctl -w net.ipv6.icmp.echo_ignore_all=1 sudo ip route add \u0026lt;server-public-ip\u0026gt; via \u0026lt;gateway\u0026gt; dev \u0026lt;iface\u0026gt; sudo ip route replace default dev tun0 इसे लिखकर दिखाने की वजह टूल नहीं है। वजह यह है कि टूल फेंकने लायक़ है। एक छोटी file, encryption जोड़ने तक कोई dependency नहीं, और हर कॉपी जो कोई टाइप करे तार पर थोड़ी अलग दिखती है। तो एक signature जो इसे पकड़े वह अगले हफ़्ते कुछ नहीं पकड़ती। आप software का नाम लेकर अपना रास्ता बंद नहीं कर सकते, क्योंकि नाम लेने को कोई software है ही नहीं।\nइसे shell की भी ज़रूरत नहीं। logic bytes अंदर, bytes बाहर है, तो यह किसी भी ऐसी चीज़ पर port हो जाता है जो एक socket खोल सके। WebAssembly भी: browser sandbox आमतौर पर किसी page को raw socket सिरे से मना करता है, पर जहाँ वह रुकावट हटा दी जाए (एक browser जिसे उपयोक्ता ने अनुमति दी हो, एक ऐसी मशीन पर जहाँ उपयोक्ता के पास raw socket खोलने लायक़ privilege हो) वहाँ वही छोटा program एक tab के भीतर चलता है। और यही इसका असुविधाजनक आधा है। आप यहाँ अपने उपयोक्ताओं पर भरोसा नहीं कर सकते। tunnel चलाने वाला host अंदर है, किसी ऐसे के पास जिसे आपने सुरक्षित मान लिया क्योंकि वे firewall के पीछे बैठते हैं, और firewall वही चीज़ है जिसके आर-पार tunnel बनाया जा रहा है। Perimeter भरोसा मानता है कि ख़तरा दीवार के बाहर है। यह हर बार उसके अंदर से शुरू होता है।\nMTU का ध्यान रखिए, और IPv6 की 1280 की फ़र्श tunnel तार पर मुफ़्त नहीं है। आप जो भी packet ढोते हैं उसे निकलने से पहले एक बाहरी IP header और एक ICMP header मिल जाता है, तो भीतरी interface को उससे नीचे बैठना है जितना path ढो सके। IPv4 पर यह हमलावर को लगभग कुछ नहीं पड़ता। भीतरी MTU नीचा set कीजिए (icmptunnel का 1472 है 1500 में से 20 बाहरी IP header के और 8 ICMP header के, और ऊपर का Python ढील के लिए 1400 तक गिरता है), और जहाँ संख्या अब भी ग़लत हो, IPv4 बड़े-आकार के packet को फ़्रैगमेंट करता है और गिराने के बजाय दूसरे छोर पर फिर जोड़ देता है। जो नीची फ़र्श आप चुन सकते हैं और बाक़ी पर पर्दा डालती fragmentation, इन दोनों के बीच tunnel लगभग किसी भी path पर चलता है। वही लचीलापन ठीक वह चीज़ है जो IPv4 को यह करने की आरामदेह जगह बनाता है।\nIPv4 की fragmentation और MTU की ढील tunnel को कहीं भी चलने देती हैं; IPv6 के पास दोनों नहीं, तो यह बंद होकर फ़ेल होता है यह IPv4 पर कहीं भी क्यों चलता है और IPv6 पर बंद होकर फ़ेल होता है IPv4 IP hdr 20 B ICMP 8 B भीतरी packet tun MTU 1472 B बहुत बड़ा? IPv4 फ़्रैगमेंट कर फिर जोड़ देता है: tunnel लगभग किसी भी path पर चलता है। IPv6 IPv6 hdr 40 B ICMPv6 8 B भीतरी packet 1280 B से नीचे नहीं जा सकता 1280 B सख़्त फ़र्श (RFC 8200) बहुत बड़ा? IPv6 routers इसे गिरा देते हैं, कोई fragmentation नहीं: tunnel बंद होकर फ़ेल होता है। IPv4 के सहारे, एक फ़र्श जो आप चुन सकें और बाक़ी के लिए fragmentation, ही tunnel को भरोसेमंद बनाते हैं। IPv6 के पास दोनों नहीं, तो जो हमला IPv4 पर लगभग कहीं भी चलता है वह IPv6 पर नाज़ुक है। यहाँ सुरक्षित family। Packet Too Big, एक error जिसे आप रखते हैं, echo नहीं, ही एक भेजने वाले को फ़िट बैठने वाला आकार ढूँढने देता है। पैमाने के अनुसार नहीं। tunnel हर packet पर से एक बाहरी IP और ICMP header खोता है। IPv4 आपको भीतरी MTU छीलने देता है और जो अब भी बहुत बड़ा हो उसे फ़्रैगमेंट करता है, तो यह लगभग कहीं भी चलता है; IPv6 एक सख़्त 1280-byte फ़र्श रखता है और उसके routers फ़्रैगमेंट नहीं करते, तो बड़े-आकार का packet गिरा दिया जाता है और tunnel बंद होकर फ़ेल होता है, जो IPv6 को यहाँ सुरक्षित family बनाता है। IPv6 कम उदार है, और इस बार वह आपके पक्ष में है। फ़र्श सख़्त है: RFC 820011 §5 अपेक्षा रखता है कि “every link in the Internet have an MTU of 1280 octets or greater”, और IPv6 routers रास्ते में फ़्रैगमेंट नहीं करते। यह IPv4 के दोनों सहारे एक साथ हटा देता है, और यह tunnel को दोनों दिशाओं में काटता है। इसे ICMPv6 के ऊपर चलाइए और path की हर link को 1280 ढोना है, तो जो path उससे नीचे गिरे वह transport को गिरा देता है, और फ़र्श के नीचे छीलने का वह तरीक़ा नहीं जो IPv4 पर है। IPv6 को tunnel के भीतर ढोइए और आप उसी दीवार से दूसरी तरफ़ से टकराते हैं: भीतरी interface भी 1280 से नीचे नहीं जा सकता, जबकि बाहरी ICMPv6 आवरण, 40 bytes header और 8 ICMPv6, पहले से बजट ख़र्च कर रहा है, तो path को 1280 और ऊपर से overhead बचाना है। किसी भी जगह चूकिए और packet गिरा दिया जाता है, काटकर फ़िट नहीं किया जाता: tunnel ऊपर आता है, छोटी चीज़ें चलती हैं, पूरे-आकार की कोई भी चीज़ अटकती है। तो IPv6 यहाँ सुरक्षित family है, जोखिम भरी नहीं। जो हमला IPv4 पर लगभग किसी भी चीज़ पर चलता है वह IPv6 पर नाज़ुक है, और बंद होकर फ़ेल होता है। सुरक्षित का मतलब सुरक्षित नहीं है, ध्यान रहे: echo चैनल IPv6 पर भी खुला है, तो नियम इसे अब भी दोनों families पर गिराता है, हमलावर बस IPv6 पर वैसे टेक नहीं लगा सकता जैसे वह IPv4 पर लगाता है।\nउससे उबरना वह ICMP error है जिसे आपने सावधानी से रखा। Packet Too Big वह है जो एक भेजने वाले को चलने लायक़ आकार ढूँढने देता है, और यह एक error है, echo नहीं, तो जिस नियम की यह पोस्ट पैरवी करती है वह इसे छोड़ देता है। tunnel गिराइए और डायग्नॉस्टिक्स रखिए, यही पूरी बनावट है, और MTU एक और जगह है जहाँ यह अपना मोल चुकाती है।\nनियम, Echo तक संकरा किया पिछली पोस्ट ने पूरा transit ruleset दिया: errors को एक rate limit के तहत अनुमति दो, echo गिराओ। मैं उसे दोबारा नहीं छापूँगा। यह पोस्ट जिस बदलाव की पैरवी करती है वह पंक्तियों का एक जोड़ा है, और यही वह जोड़ा है जो काम करता है:\n# permit the ICMP errors — these are load-bearing, keep them ip protocol icmp icmp type { destination-unreachable, time-exceeded, parameter-problem } \\ limit rate 100/second accept ip6 nexthdr ipv6-icmp icmpv6 type { destination-unreachable, packet-too-big, \\ time-exceeded, parameter-problem } limit rate 100/second accept # drop the tunnel — echo, both directions, both families ip protocol icmp icmp type { echo-request, echo-reply } drop ip6 nexthdr ipv6-icmp icmpv6 type { echo-request, echo-reply } drop नियम Linux का नहीं है, हालाँकि। यह किसी भी नाम लायक़ firewall पर वही मंशा है: errors को अनुमति दो, उनकी rate पर टोपी लगाओ, echo दोनों तरफ़ दोनों families पर गिराओ। तो यहाँ यह उन बोलियों में है जिन्हें आपके थामे होने की संभावना ज़्यादा है।\nBSD pf (pfSense, OPNsense, OpenBSD, FreeBSD):\n# permit the errors; block echo both directions, both families pass in proto icmp icmp-type { unreach, timex, paramprob } pass in proto icmp6 icmp6-type { unreach, toobig, timex, paramprob, \\ routersol, routeradv, neighbrsol, neighbradv } block in proto icmp icmp-type { echoreq, echorep } block in proto icmp6 icmp6-type { echoreq, echorep } icmp6 पंक्ति पर neighbour-discovery types रखिए; वही हैं जो खोने पर segment को गिरा देते हैं।\nCisco IOS (extended ACLs, सीमा पर लागू):\nip access-list extended ICMP-EDGE permit icmp any any unreachable permit icmp any any time-exceeded permit icmp any any parameter-problem deny icmp any any echo deny icmp any any echo-reply ! ipv6 access-list ICMP6-EDGE permit icmp any any packet-too-big permit icmp any any unreachable permit icmp any any time-exceeded permit icmp any any parameter-problem permit icmp any any nd-ns permit icmp any any nd-na deny icmp any any echo-request deny icmp any any echo-reply IPv4 पर echo type echo है; IPv6 पर यह echo-request है। Rate-limiting CoPP में रहती है, ACL में नहीं।\nJuniper Junos (firewall filter; inet6 filter इसका दर्पण है और neighbour discovery रखता है):\nfirewall family inet filter icmp-edge { term errors { from { protocol icmp; icmp-type [ unreachable time-exceeded parameter-problem ]; } then { policer icmp-cap; accept; } } term drop-echo { from { protocol icmp; icmp-type [ echo-request echo-reply ]; } then discard; } } MikroTik RouterOS, दोनों echo types गिराओ, फिर बाक़ी ICMP स्वीकार करो, जो errors और, v6 पर, neighbour discovery रखता है:\n/ip firewall filter add chain=forward protocol=icmp icmp-options=8:0 action=drop comment=\u0026#34;echo request\u0026#34; add chain=forward protocol=icmp icmp-options=0:0 action=drop comment=\u0026#34;echo reply\u0026#34; add chain=forward protocol=icmp action=accept comment=\u0026#34;keep the errors (add limit= to cap)\u0026#34; /ipv6 firewall filter add chain=forward protocol=icmpv6 icmp-options=128:0 action=drop comment=\u0026#34;echo request\u0026#34; add chain=forward protocol=icmpv6 icmp-options=129:0 action=drop comment=\u0026#34;echo reply\u0026#34; add chain=forward protocol=icmpv6 action=accept comment=\u0026#34;keep errors and ND\u0026#34; अलग syntax, एक नियम। उन संदेशों को अनुमति दो जो सच ढोते हैं, उसे गिराओ जो आपके bytes ढोता है।\nदो चेतावनियाँ, जिनमें से दोनों आपको काटेंगी अगर आप सरसरी निगाह डालें।\nEcho को सीमा पर गिराओ, host और उसके अपने router के बीच तार पर नहीं। IPv6 पर, neighbour discovery ICMP है, types 133 से 137, nd-router-solicit से nd-redirect, और यही वह है जिससे segment वह काम करता है जो IPv4 में ARP करता है। उन्हें रखे बिना एक echo-drop को किसी link-local या host chain पर ले जाइए और segment मिनटों में काम करना बंद कर देता है, और यह firewall की ख़राबी जैसा नहीं दिखेगा। echo को वहाँ फ़िल्टर कीजिए जहाँ ट्रैफ़िक आपके नेटवर्क से निकलता है, और भीतरी chains को छोड़ दीजिए।\nइसे दोनों दिशाओं में गिराओ वरना यह किसी भी तरफ़ काम का नहीं रहता। सिर्फ़ request रोकना आपके hosts को ping होने से रोकता है पर एक reply को अब भी बाहर जाने देता है, और थोड़ी और मेहनत से अकेले replies पर एक tunnel बनाया जा सकता है। request और reply, IPv4 और IPv6 पर गिराइए, और चैनल दोनों तरफ़ बंद है।\nPing गिराना असल में आपको क्या पड़ता है नुक़सान के बारे में ईमानदार रहिए, क्योंकि जिस control को आपने बढ़ा-चढ़ाकर बेचा है उसे पहली बार असुविधाजनक होने पर कोई चुपचाप पलट देता है।\nआप सीमा के पार ping खोते हैं। यही क़ीमत है, पूरी बताई गई। यह एक असली क़ीमत है। ping सहज-प्रतिक्रिया है, यह सबकी उँगलियों में है, और इसे शिप करने के अगले दिन कोई कहेगा कि internet down है क्योंकि gateway को उनका ping time out हो रहा है। यह down नहीं है। आपने gateway से कहा कि वह एक ऐसी request का जवाब देना बंद करे जो हमेशा से सिर्फ़ एक सुविधा थी।\nपहुँच जाँचने को echo की ज़रूरत नहीं। एक ऐसे port तक TCP connection जिसे आप खुला जानते हैं, आपको बताता है कि host ऊपर है और path चलता है, और यह एक ping से ज़्यादा बताता है क्योंकि यह साबित करता है कि एक service ने जवाब दिया, सिर्फ़ एक kernel ने नहीं:\n# \u0026#34;is it up and reachable?\u0026#34; without sending a single echo nc -zv \u0026lt;host\u0026gt; 443 # did the TCP handshake complete? traceroute -T -p 443 \u0026lt;host\u0026gt; # walk the path on TCP, read the errors back उन दोनों में से हर एक उन ICMP errors पर सवार है जिन्हें आपने रखा और उस TCP पर जो एक असली service पहले से बोलती है। कोई echo नहीं भेजता। तो ईमानदार सौदा यह है: आप डिब्बे का सबसे कम जानकारी देने वाला टूल छोड़ देते हैं, वह जो “क्या एक kernel जवाब देने को तैयार है” का जवाब देता है और बस इतना, और बदले में आप ICMP का वह अकेला हिस्सा बंद कर देते हैं जिसे एक हमलावर आपके नेटवर्क से बाहर का route बना सकता है। जिन डायग्नॉस्टिक्स की ओर आप एक बुरे दिन पर असल में हाथ बढ़ाते हैं वे सब रेखा की दूसरी तरफ़ हैं, अछूते।\nFisher-Price OS (Windows) इससे बाहर का रास्ता नहीं अगर आप एक Fisher-Price OS (Windows) की दुकान चलाते हैं तो आप इसे किसी और की समस्या समझकर पढ़ रहे होंगे। यह नहीं है। जोखिम प्रोटोकॉल में है, operating system में नहीं। मानक हर उस host को बाध्य करता है जो एक ping का जवाब दे कि वह आपके bytes वापस सौंपे, और यह पहले यह पूछने को नहीं रुकता कि host क्या चला रहा है।\nउस OS पर एक बॉक्स बिल्कुल बढ़िया tunnel endpoint बनाता है। Hans एक Windows client शिप करता है, तो अंदर की एक मशीन client का छोर हो सकती है और किसी भी दूसरे की तरह अपना ट्रैफ़िक echo के भीतर बाहर भेज सकती है। जो यह आसानी से नहीं हो सकती वह है server का छोर, क्योंकि उसके लिए एक tun device और एक राw ICMP socket खुला थामा चाहिए, और इस OS पर सिर्फ़ Administrators group के सदस्य ही SOCK_RAW प्रकार के sockets बना सकते हैं12, Microsoft के अपने शब्द। तो server एक असली operating system पर बैठता है, जैसे मेरा बैठा था, और firewall के पीछे चुपचाप अपना रास्ता ping करता बॉक्स वही है जिसके बारे में आपको बताया गया था कि वह सुरक्षित है क्योंकि वह अंदर था।\nइसका बचाव करने वाले किसी के लिए यही बात है। सीमा का नियम इसकी परवाह नहीं करता कि अंदर क्या चलता है। echo वहाँ गिराइए जहाँ ट्रैफ़िक नेटवर्क से निकलता है और उसके पीछे का हर host ढका है, वे जिनका आप प्रशासन करते हैं, और वह जिसके बारे में आपको भरोसा दिलाया गया था कि वह NAT के पीछे छिपा है। मैं यह चीज़ नहीं चलाता, और मैं यह दिखावा नहीं करूँगा कि tunnel इसका लिहाज़ करता है। उपाय वही नियम है, उसी जगह, endpoint जो भी booted हो।\nअगर बॉक्स ख़ुद वह है जिसे आप सख़्त कर रहे हैं (बॉक्स, नेटवर्क नहीं), तो PowerShell कम से कम इसे अपने बूते एक ping का जवाब देने या छोड़ने से रोक देगा:\nforeach ($t in 8,0) { New-NetFirewallRule -DisplayName \u0026#34;Drop ICMPv4 Echo $t\u0026#34; -Protocol ICMPv4 -IcmpType $t -Direction Inbound -Action Block } foreach ($t in 128,129) { New-NetFirewallRule -DisplayName \u0026#34;Drop ICMPv6 Echo $t\u0026#34; -Protocol ICMPv6 -IcmpType $t -Direction Inbound -Action Block } इसे एक tunnel client की तरह बाहर पहुँचने से रोकने के लिए, बजाय इसके कि यह target बनकर बैठा रहे, -Direction Outbound जुड़वाँ जोड़िए, और ICMPv6 error और neighbour-discovery types को छोड़ दीजिए, उसी वजह से जिस वजह से उन्हें इस पेज पर हर जगह छोड़ा जाता है। पर इसे control मत समझिए। एक host firewall कोई transit firewall नहीं है। यह बॉक्स को सख़्त करता है और सीमा के बारे में कुछ नहीं बदलता, और सीमा वह जगह है जहाँ यह असल में बंद होता है।\nआज ही इसे उठाइए जो आपकी सीमा चलाता है उसके साथ आप शायद यहाँ तक एक ऐसे नेटवर्क के बारे में सोचते हुए पढ़े हैं जो आपके बदलने का नहीं है। अधिकांश लोग हैं। तो काम की चीज़ firewall की ओर हाथ बढ़ाना नहीं है, यह सवाल उसके सामने रखना है जो इसे थामे है, आपकी अपनी नेटवर्क टीम, आपका MSP, या वह vendor जिसका बॉक्स सीमा पर बैठता है, और इसे आज रखना, क्योंकि यह 1996 से एक खुला दरवाज़ा है और इसका एक और हफ़्ता एक चुनाव है।\nसाफ़ पूछिए, और खाली निगाह की उम्मीद करते हुए पूछिए, क्योंकि मैं पूरी UK GDP की शर्त लगाऊँगा कि वहाँ किसी ने echo के बारे में दूसरी बार नहीं सोचा। यह वह एक packet है जिसकी सब इजाज़त देते हैं और जिसका कोई मालिक नहीं, और बिन-मालिक नियम ठीक वही है जो सालों से ग़लत बैठा रहा है, पकड़ने वाला कोई नहीं।\nउनसे चार चीज़ें पूछिए, इन्हीं शब्दों में, ताकि सिर हिलाकर कुछ न बदलने की गुंजाइश न रहे:\nक्या हम सीमा पर ICMP echo request और echo reply गिराते हैं, IPv4 और IPv6 दोनों पर? “क्या हम ICMP की इजाज़त देते हैं” नहीं, विशिष्ट संदेश, दोनों दिशाएँ, दोनों families। अगर जवाब सिर्फ़ एक family है, तो वह कोई जवाब नहीं, क्योंकि tunnel बस दूसरी पर चला जाता है। क्या हम अब भी ICMP errors को अनुमति देते हैं? Destination Unreachable, Time Exceeded, Parameter Problem, और IPv6 पर Packet Too Big, एक block के बजाय एक rate limit के तहत। अगर वे न कह सकें, तो बराबर की संभावना है कि उन्होंने या तो सब खुला छोड़ा है या सब रोक दिया है, और दोनों ग़लत हैं। क्या हमने IPv6 neighbour discovery भीतरी chains पर रखी है? Types 133 से 137. यही वह है जो “हमने ICMP सख़्त किया” को एक हफ़्ते बाद चुपचाप मरते segment में बदल देती है, और यही वह ग़लती है जो एक हड़बड़ी में किया बदलाव करता है। मुझे नियम दिखाइए। कोई पॉलिसी का बयान नहीं, असली बॉक्स पर असली पंक्ति, और वह तारीख़ जब वह लगी। जिस control की ओर कोई इशारा न कर सके वह एक ऐसा control है जो वहाँ है ही नहीं। क्या बॉक्स vendor से यह पहले से बंद होकर आया होगा? नहीं आया होगा। लगभग हर जगह डिफ़ॉल्ट है echo को गुज़रने देना और उसे एक packet गिनती के रूप में दर्ज करना, जो पूरी वजह है कि tunnel काम करता ही है। यह किसी बग का दोहन नहीं कर रहा, यह उस configuration का इस्तेमाल कर रहा है जो मानक के रूप में शिप होती है। कोई वह दरवाज़ा बंद नहीं करता जिसके खुले होने की बात उसे कभी बताई ही नहीं गई।\nशब्दों पर अड़ने की वजह यह है कि इस पोस्ट का आलसी उपाय है “ठीक है, हम ICMP रोक देंगे”, और वह उपाय छेद से बदतर है। यह path MTU discovery और traceroute तोड़ता है, यह आपसे logs में कुछ न होते हुए अटके transfers का पीछा कराएगा, और IPv6 पर यह internet के हिस्सों को पूरी तरह मेज़ से हटा देता है। अगर जिससे आप पूछें वह उसकी ओर हाथ बढ़ाए, तो उसे रोकिए। निर्देश जानबूझकर संकरा है: echo गिराओ, errors रखो, neighbour discovery रखो। इसलिए, जो कोई रोज़ी के लिए firewalls चलाता है उसे वह बदलाव एक दोपहर में कर देना चाहिए और आपको बता देना चाहिए कि हो गया।\nऔर अगर वे एक MSP हैं जिसे आप इसे चलाने के लिए पैसे देते हैं: एक supplier जो आपको आपका अपना echo-और-error रुख़ ज़बानी न बता सके, या जो “हम ICMP रोकते हैं” ऐसे जवाब दे जैसे वह सुरक्षित विकल्प हो, उसने आपको बाक़ी estate के बारे में अभी-अभी कुछ बता दिया है। अगली बार जब कोई ख़राबी दो नेटवर्कों के बीच बैठे और दोनों कहें कि वे साफ़ हैं, याद रखिए उनमें से कौन यह न बता सका कि उनका अपना firewall एक ping के साथ क्या करता है।\nवह डायग्नॉस्टिक जो कभी डायग्नॉस्टिक था ही नहीं Ping का दौर अच्छा रहा। Mike Muuss ने इसे 1983 में यह जाँचने के लिए लिखा कि कोई host जवाब दे रहा है या नहीं, इसका नाम sonar पर रखा, और इसने वह एक काम इतनी अच्छी तरह किया कि यह पहली चीज़ बन गई जिसकी ओर सब हाथ बढ़ाते हैं और आख़िरी चीज़ जिस पर कोई सवाल करता है। चालीस साल बाद यह muscle memory है, और muscle memory ठीक वह तरीक़ा है जिससे एक जोखिम ज़िंदा रहता है। जो काम आप हमेशा से करते आए हैं उसकी कोई दोबारा जाँच नहीं करता।\nपर देखिए यह असल में क्या है, आदत से अलग करके। एक संदेश जो नेटवर्क के बारे में कोई तथ्य नहीं ढोता, जिसका जवाब हर host आपके ही bytes वापस सौंपकर देने को बाध्य है, जो एक ऐसे प्रोटोकॉल पर चलता है जिसे controls जाँचते नहीं और logs पढ़ते नहीं। जो सब कुछ इसे हानिरहित महसूस कराता है, यह सिर्फ़ एक डायग्नॉस्टिक है, यह सिर्फ़ एक keepalive है, सब इसकी इजाज़त देते हैं, वही चीज़ है जो इसे किसी भी फ़िल्टर किए नेटवर्क से बाहर का सबसे साफ़ रास्ता बनाती है जो मौजूद है। उद्योग ICMP errors रोकता है, जो सच ढोते हैं और जिनके जाने पर नेटवर्क टूटता है, और echo को लहराकर गुज़ार देता है, जो आप जो भी उसमें लादें वह ढोता है। इसने प्रोटोकॉल को ठीक उल्टा पकड़ रखा है।\nउपाय चतुराई का नहीं है। वे संदेश रखो जो आपको सच बताते हैं, और उसे गिराओ जो बस आपके bytes वापस सौंपता है। यह आपको एक command पड़ता है जिस पर किसी निदान के लिए भरोसा करने का आपका कोई हक़ वैसे भी नहीं था, और यह एक ऐसा दरवाज़ा बंद करता है जो 1996 से खुला खड़ा है, एक hacker zine में दर्ज, दो दशकों से पैकेज किया हुआ, और चौड़ा छोड़ा गया क्योंकि इसे बंद करने का मतलब होता कोई ping न कर पाता। जानिए एक चीज़ क्या पड़ती है, न कि उसका दाम क्या लगा है। Ping का दाम nowt लगा है। यह आपको वह एक चैनल पड़ता है जिसे आप देख नहीं सकते।\nLoki, Phrack 49 — a command channel carried inside ICMP echo payloads, 1996.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nPtunnel — carries a TCP session inside ICMP echo.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 792 — ICMP: “the data received in the echo message must be returned in the echo reply message”.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4443 — ICMPv6: echo data “MUST be returned entirely and unmodified in the ICMPv6 Echo Reply message”.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 4890 — the ICMPv6 messages a firewall must not drop.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 1812 — router requirements: Time Exceeded is a MUST, named for traceroute.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nHans — IP over ICMP echo tunnel, by Friedrich Schöller.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nicmptunnel — tunnels IP traffic through ICMP echo and reply packets, by Dhaval Kapil.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux kernel — IP sysctl — icmp_echo_ignore_all: “the kernel will ignore all ICMP ECHO requests sent to it”.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nLinux commit e6f86b0f — “ipv6: Add icmp_echo_ignore_all support for ICMPv6” — the IPv6 equivalent, by Virgile Jarry.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nRFC 8200 §5 — IPv6 requires every link to have an MTU of at least 1280 octets.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\nMicrosoft — TCP/IP raw sockets — “only members of the Administrators group can create sockets of type SOCK_RAW”.\u0026#160;\u0026#x21a9;\u0026#xfe0e;\n","permalink":"https://blogs.damiendye.uk/hi/networking/ping-the-diagnostic-tool-that-opens-a-whole-lot-more/","summary":"Ping, बाक़ी ICMP नहीं, असली जोखिम है: echo एक ऐसा चैनल है जिसका जवाब हर host आपके ही bytes के साथ देने को बाध्य है, तो जो नेटवर्क \u0026lsquo;सिर्फ़ ping की अनुमति देता है\u0026rsquo; उसके पास पहले से बाहर जाने वाली पूरी VPN है। यह पहले ख़तरे को देखता है, यह आपके egress को क्या महँगा पड़ता है, और आपके WiFi पर आया कोई मेहमान या खुला ethernet port इसे कैसे खोल सकता है, फिर अकेले ping पर बने तीन चालू tunnel (Hans, icmptunnel, और AES-128 वाला एक छोटा Python), MTU और IPv6 की अड़चनें, और वह नियम जो इसे बंद करता है: echo गिराओ, errors रखो, nftables, pf, Cisco, Junos, MikroTik और Fisher-Price OS (Windows) में।","title":"Ping: वह डायग्नॉस्टिक टूल जो इससे कहीं ज़्यादा खोल देता है"},{"content":" Is Your MSP Lying To You — 3 parts\nक्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है?you are here आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता है जब कुछ टूटता है, तब असल में बोझ कौन उठाता है? छोटा जवाब: उनमें से कुछ बोल रहे हैं।\nलंबा जवाब इससे बुरा है, और आपके समय के लायक वही है। ज़्यादातर को कभी झूठ बोलना ही नहीं पड़ता, क्योंकि यह काम व्यवस्था उनके लिए कर देती है। जिन vendors के प्रोडक्ट वे सुझाते हैं, वही उन्हें पैसा देते हैं, ऐसी दरों पर जो इस बात से बदलती हैं कि आप कौन सा प्रोडक्ट लेते हैं और उसका कितना इस्तेमाल होता है, और इसका एक शब्द भी बताने की किसी पर कोई बाध्यता नहीं है। किसी बिज़नेस को तीस साल इस स्थिति में रखिए, बेईमानी की ज़रूरत ही ख़त्म हो जाती है। shortlist अपने आप लिख जाती है।\nजहाँ आप बैठे हैं, invoice पाने वाली तरफ़, वहाँ से झूठ और धाँधली वाली प्रक्रिया की क़ीमत बिल्कुल एक जैसी है।\nयह भाग बिक्री के बारे में है: आपको सलाह देने वाले को पैसा कौन देता है, क्या कभी shortlist तक नहीं पहुँचता, बेहतर जवाब वही क्यों है जो वे पेश नहीं करेंगे, और आप चुपचाप क्या किराये पर ले रहे हैं। भाग दो बताता है कि काग़ज़ों पर दस्तख़त होने के बाद क्या बनाया जाता है और उस तक और कौन पहुँच सकता है। भाग तीन बताता है कि जब चीज़ गिर जाती है तो बोझ कौन उठाता है, और छोड़कर जाने की क़ीमत क्या है। इसमें से कुछ मैंने अपनी आँखों से होते देखा है। बाक़ी सार्वजनिक रिकॉर्ड पर है, किसी regulator के नाम के साथ, और यहाँ के हर दावे के साथ एक link है।\nइसके लिए आपका technical होना ज़रूरी नहीं। आपको बस पूछना है।\nआसान fix ही असली संकेत है एक आम मामला लीजिए। घर से काम करने वाले एक व्यक्ति का laptop ऑफ़िस तक VPN tunnel टिकाए नहीं रख पाता। provider जाँच करता है और customer के लिए कुछ ऐसा लेकर लौटता है जो घर वाले छोर पर बदलना है। अपने छोर पर नहीं। घर वाले छोर पर।\ntunnel एक Cisco Meraki MX पर L2TP over IPsec है, और असल में गड़बड़ NAT traversal में है। client UDP 4500 पर जाने के बजाय अब भी UDP 500 पर negotiate कर रहा है, क्योंकि ऑफ़िस वाले छोर पर NAT-T कभी configure ही नहीं हुआ। RFC 3947 इस पर बिल्कुल साफ़ है: NAT मिलते ही initiator “MUST set both UDP source and destination ports to 4500”। ऐसा कभी होता ही नहीं। tunnel NAT में दम तोड़ देता है। हर बार।\nजवाब उनके अपने firewall पर बैठा है, बंद पड़ा। वही MX AnyConnect चलाता है, जो “will attempt to connect using both TLS, and DTLS (Datagram TLS) over TCP and UDP 443 respectively”। एक साधारण port पर साधारण TLS। NAT इसे पूरी तरह समझता है: traverse करने को कुछ नहीं, configure करने को कुछ नहीं। जिस दोपहर कोई इसे enable करता, उसी दोपहर यह चल जाता।\nकोई packet capture नहीं लेता। कोई यह नहीं देखता कि client असल में किस port पर बात कर रहा है। सबसे पहले यही दो काम किए जाते हैं, और इनसे मामला एक मिनट में ख़त्म हो जाता।\nअब उसी provider का दूसरा मामला, और इसमें कहीं कोई network है ही नहीं। एक label printer, और एक shipping label जिसे सही format में निकलना है। पूरी माँग बस इतनी है। और label printer बस यही एक काम करता है।\nजवाब आया कि यह संभव नहीं है।\nयह print driver में एक option था। एक settings dialogue में एक box, ऐसे software पर जिसे वे ख़ुद administer करते हैं, और पूरा काम बस उस box पर tick करके एक test print चलाना था। किसी को कुछ ख़रीदना नहीं था। किसी को कुछ design नहीं करना था। उन्होंने tick नहीं किया।\nध्यान दीजिए कि “संभव नहीं” ऐसा जवाब है जिसमें कहीं कोई measurement नहीं है, और यही वह इकलौता जवाब है जो किसी के कुछ भी किए बिना ticket बंद कर देता है। और यह जितनी देर टिका रहता है, उसे वापस लेना उतना ही मुश्किल होता जाता है, क्योंकि अब जाकर देखना यह मान लेना होगा कि देखने को कुछ था।\nयही वह आकार है जिस पर नज़र रखनी है, और यह दोनों बार एक ही आकार है। गड़बड़ी को ठीक करना मुफ़्त है, fix उस kit के अंदर बैठा है जो provider के पास पहले से है और जिसे चलाने के पैसे उसे पहले से मिल रहे हैं, और बदले में या तो customer के छोर पर कुछ बदलने का निर्देश आता है या सीधा बयान कि यह हो ही नहीं सकता। जब सस्ते जवाब को बिना measurement के किनारे कर दिया जाए, तो आपको diagnosis नहीं दिया जा रहा। आपको manage किया जा रहा है।\nजिस engineer ने गड़बड़ी ढूँढ ली है, वह आपको बताता है कि गड़बड़ी क्या है। जिसने नहीं ढूँढी, वह कहता है कि यह हो नहीं सकता, या बताता है कि क्या ख़रीदना है।\nआपके सलाहकार को पैसा कौन देता है पैसे से शुरू कीजिए, क्योंकि बाक़ी सब उसी के पीछे चलता है।\nजब आपका MSP किसी hyperscaler की सिफ़ारिश करता है, तो वह तटस्थ नहीं होता। Microsoft का अपना billing documentation partner earned credit का वर्णन करता है: आपके Azure इस्तेमाल के charges पर लगने वाला एक credit, जो उस partner को मिलता है जिसके पास उसे manage करने के admin अधिकार हैं। आपका बिल बढ़ता है, उन्हें एक हिस्सा मिलता है। उसके साथ ही reseller margins, volume tiers, certification rebates, market development funds और तिमाही targets बैठे हैं, stack के हर vendor में, सिर्फ़ उसी एक में नहीं।\nइसमें से कुछ भी गुप्त नहीं है, और कुछ भी किसी नियम के ख़िलाफ़ नहीं है। यह प्रकाशित है, सामान्य है, और तीस साल से channel इसी तरह चलता आया है।\nआपके सलाहकार को दो लोग पैसा देते हैं, और उनमें से सिर्फ़ एक आप हैं आप पूछते हैं कि कौन सा प्रोडक्ट ख़रीदें आपका provider वह shortlist लिखता है जिसमें से आप चुनेंगे vendor तय करता है कि एक सिफ़ारिश कितना कमाती है एक fee एक विकल्प rebate rebate, margin, deal registration, sales target इसमें से कुछ भी आपको बताना ज़रूरी नहीं financial adviser को सिर्फ़ client ही पैसा दे सकता है (FCA Handbook, COBS 6.1A)। IT adviser को दोनों पैसा दे सकते हैं, और यह बताने की कोई बाध्यता नहीं कि ज़्यादा कौन देता है। एक ही सिफ़ारिश के लिए दो पक्ष पैसा देते हैं। मीटिंग में उनमें से सिर्फ़ एक बैठा है, और सिर्फ़ एक भुगतान का ज़िक्र करना ज़रूरी है। अब वह हिस्सा जो आपको परेशान करना चाहिए। इसमें से किसी के बारे में भी आपको बताना किसी के लिए ज़रूरी नहीं है: न दर, न targets, न credit। प्रोडक्ट की सिफ़ारिश करने वाले व्यक्ति को वही कंपनी पैसा देती है जो प्रोडक्ट बनाती है, ऐसी दर पर जो इस पर निर्भर है कि वे आपको कौन सा प्रोडक्ट लेने के लिए मनाते हैं और फिर आप उसका कितना इस्तेमाल करते हैं, और कहीं कोई बाध्यता नहीं है कि जो proposal आप पढ़ रहे हैं उसमें इसका एक शब्द भी लिखा जाए।\nएक दूसरे उद्योग ने ठीक इसी व्यवस्था को देखा और इस पर रोक लगा दी। FCA के नियमों के तहत एक financial adviser को “only be remunerated for the personal recommendation \u0026hellip; by adviser charges” होना चाहिए और उसे “not solicit or accept \u0026hellip; any other commissions, remuneration or benefit” करना चाहिए। अपने adviser को आप पैसा देते हैं। प्रोडक्ट बनाने वाला नहीं। यह नियम इसलिए है कि regulator ने एक सीधी बात समझ ली थी। जब बेचने वाले को निर्माता से पैसा मिलता हो, तो सलाह और बिक्री में फ़र्क़ नहीं किया जा सकता।\nIT में यह हिसाब-किताब कभी हुआ ही नहीं। CMA ने cloud बाज़ार की पड़ताल की है और committed spend, egress और switching को ग़ौर से देखा है, लेकिन बीच वाली परत को अभी तक किसी ने नहीं देखा। वह संस्था जो आपके और vendor के बीच बैठी है, जिस पर आपके प्रति एक कर्तव्य भी है और उनकी तरफ़ से एक target भी।\nइस चीज़ को उसके नाम से पुकारना भी ज़रूरी है।\nincentive एक पक्ष का ऐसा भुगतान है जो उस फ़ैसले को मोड़ने के लिए दिया जाता है जिस पर कोई दूसरा पक्ष भरोसा कर रहा है। यही उसकी कार्यप्रणाली है, vendor की website पर programme का नाम चाहे जो हो। vendor पैसा देता है, customer भरोसा करता है, और सिफ़ारिश खिसक जाती है।\nMSP वाले छोर पर भी यह दबाव डालने वाला है, और यही वह आधा हिस्सा है जिसे कोई नहीं देखता। tier चूक गए तो आप सिर्फ़ एक bonus नहीं गँवाते। अगले बारह महीने आप जो कुछ भी बेचते हैं, उस सब पर आपकी ख़रीद की क़ीमत बढ़ जाती है। तो दबाव “इसे बेचो और इनाम लो” वाला नहीं है। यह है “इसे बेचो, वरना तुम्हारा पूरा बिज़नेस महँगा हो जाएगा”। उस स्थिति में कोई भी आज़ादी से नहीं चुन रहा, और इसे कभी चुनाव जैसा महसूस होने के लिए बनाया ही नहीं गया था।\nअंग्रेज़ी क़ानून इस आकार को पहले से पहचानता है। Bribery Act 2010 के लिए किसी सरकारी अधिकारी का आसपास होना ज़रूरी नहीं: section 3 “any activity connected with a business” को कवर करता है, और यह वहाँ लागू होता है जहाँ उस गतिविधि को करने वाले से अपेक्षा हो कि वह उसे “in good faith”, या “impartially” करे, या वह “in a position of trust” हो। ये तीनों शर्तें पढ़िए। फिर अपनी मेज़ पर रखा proposal पढ़िए।\nमैं किसी के account manager पर किसी अपराध का आरोप नहीं लगा रहा। जो हो रहा है वह उससे नीरस है और उसे ठीक करना ज़्यादा मुश्किल है। व्यवस्था रेखा के सही तरफ़ बाल भर दूरी पर बैठी है, और उसे वहाँ टिकाए रखने वाली इकलौती चीज़ यह है कि किसी ने कभी यह स्थापित ही नहीं किया कि MSP पर आपके प्रति निष्पक्षता का दायित्व है। financial advice में यह स्थापित हुआ, और commission बंद हो गया। यहाँ किसी ने स्थापित नहीं किया, इसलिए नहीं हुआ।\nincentive को भ्रष्टाचार का हल्का रूप कहिए तो लोग भड़क उठते हैं। भुगतान, target और shortlist को एक ही पन्ने पर रखिए, फिर पूछिए कि इसे और क्या कहें।\nछोटे supplier का नाम कभी नहीं आता आपको जो suppliers की सूची दिखाई गई, वह मौजूद suppliers की सूची नहीं है। वह उन suppliers की सूची है जिनके साथ आपके MSP का पहले से account है।\nउस सूची में आने के लिए vendor को एक partner programme चाहिए। tiers, accreditation, rebates, deal registration, और एक distributor जो वह line रखने को तैयार हो। यह एक मशीन है। इसे चलाने में पैसा लगता है जिसका प्रोडक्ट की गुणवत्ता से कोई लेना-देना नहीं। इस देश में बहुत सी छोटी कंपनियाँ हैं जो आपके proposal पर लगे badge से बेहतर kit और बेहतर software बना रही हैं, और वे उस पर कभी नहीं आएँगी, क्योंकि उनके पास बारह कर्मचारी हैं और कोई channel team नहीं।\nदेखिए कि यह मशीन सिफ़ारिश के साथ क्या करती है।\ndeal registration आपके MSP को requirements पर किसी के आपसे बात करने से पहले ही एक vendor से बाँध देता है। वे opportunity दर्ज करते हैं, उन्हें बेहतर ख़रीद क़ीमत मिलती है और यह सुरक्षा भी कि कोई दूसरा partner आपको वही चीज़ quote न करे, और उसी पल से design को उस vendor की तरफ़ मोड़ने का एक कारण बन जाता है जिसका आपके बिज़नेस से कोई लेना-देना नहीं।\nबाक़ी काम tiers करते हैं। gold, platinum, इस साल जो भी नाम हो, यह दर्जा सालाना volume पर चलता है, और यही पूरे साल उनकी हर बिक्री पर उनका discount तय करता है। आपका project वह चीज़ हो सकता है जो उन्हें रेखा के पार पहुँचा दे। यह आपको नहीं बताया जाएगा।\nफिर distributor तय करता है कि क्या बचा है। MSP एक distie के ज़रिए ख़रीदता है, distie वही lines रखता है जिन पर उसके agreements हैं, और जो vendor price list पर नहीं है, उसका होना न होना बराबर है।\nइसकी जो क़ीमत आप चुकाते हैं, वह अमूर्त नहीं है। एक छोटा supplier आम तौर पर आपकी बात first-line script के बजाय उन लोगों से कराएगा जिन्होंने software लिखा है, आपके कहने पर कुछ बदल देगा, और अगले साल भी आपके प्रति जवाबदेह रहेगा क्योंकि आप उसकी कमाई का असली हिस्सा हैं, कोई rounding error नहीं। इनमें से कुछ भी comparison matrix में नहीं समाता, और इनमें से कुछ भी किसी को rebate नहीं देता।\nतो पूछिए कि उन छोटी कंपनियों में से किसी एक को shortlist पर लाने के लिए क्या करना होगा। जवाब आपको बता देगा कि shortlist किसके लिए बनाई गई थी।\nऔर आदेश एक ही देश से आता है proposal पर लगे badges देखिए। hypervisor, cloud, network kit, firewall, office suite, CRM, backup target, monitoring। लगभग सब अमेरिकी।\nइनमें से कुछ भी गुणवत्ता पर फ़ैसला नहीं है। यह तब होता है जब बाज़ार तक पहुँचने का रास्ता एक channel programme हो, क्योंकि जो कंपनियाँ इतनी बड़ी हैं कि वैश्विक स्तर पर ऐसा programme चला सकें, वे एक ही देश में बैठी हैं। तो आपका MSP जो targets ढो रहा है, जो rebates आपकी shortlist को आकार देते हैं और जो tier उनका margin तय करता है, वे सब United States में लिखे जाते हैं।\nइसलिए यह जानना फ़ायदेमंद है कि वह देश इस समय विदेश में बिज़नेस जीतने के नियमों के साथ कैसा बर्ताव कर रहा है।\n10 फ़रवरी 2025 को राष्ट्रपति ने एक executive order पर दस्तख़त किए जिसका शीर्षक था “Pausing Foreign Corrupt Practices Act Enforcement to Further American Economic and National Security”। इसने Attorney General को 180 दिनों के लिए “cease initiation of any new FCPA investigations or enforcement actions” का निर्देश दिया, इस घोषित तर्क पर कि अमेरिकी कंपनियों पर “for routine business practices in other nations” कार्रवाई अमेरिकी प्रतिस्पर्धा को नुक़सान पहुँचाती है।\nFCPA विदेशी अधिकारियों को रिश्वत देने पर मुक़दमा चलाता है। यही वह प्रथा है जिसका वर्णन किया जा रहा है।\nउसके बाद जो हुआ, वह रिकॉर्ड पर है। 9 जून 2025 को Department of Justice के नए दिशानिर्देशों ने कार्रवाई को उन मामलों तक सीमित कर दिया जो cartels, अमेरिकी कंपनियों को सीधे नुक़सान या राष्ट्रीय सुरक्षा से जुड़े हों। 2025 भर में Securities and Exchange Commission ने एक भी civil FCPA कार्रवाई नहीं की और अपनी FCPA unit भंग कर दी, जबकि Department of Justice ने अपनी चालू जाँचों में से लगभग आधी बंद कर दीं। वह मार्च 2025 में OECD Working Group on Bribery की बैठक में भी नहीं पहुँचा।\nवही क़ानून, अलग दिशा। 2014 में इसने एक फ़्रांसीसी engineering कंपनी से $772 million लिए, और इसी वजह से फ़्रांसीसी सरकार ने इस पर एक रिपोर्ट बनवाई कि क्या अमेरिकी extraterritorial क़ानून एक व्यापारिक हथियार की तरह काम करता है। मैंने इस पर एक देश का क़ानून कहाँ तक पहुँचता है में विस्तार से लिखा है। तो वही क़ानून विदेशी कंपनियों के लिए सीमाएँ पार करता है और घरेलू कंपनियों के लिए रोक दिया जाता है, उस देश की सरकार द्वारा जहाँ से आपकी पूरी product list आती है।\nयह उम्मीद भी मत कीजिए कि UK इस कमी को भर देगा। यहाँ क़ानून कमज़ोर कड़ी नहीं है: Bribery Act 2010 कुछ जगहों पर अमेरिकी क़ानून से आगे जाता है, और section 7 किसी commercial organisation के लिए यह अपराध बनाता है कि वह अपनी ओर से काम करने वाले किसी के भी द्वारा रिश्वत रोकने में नाकाम रहे। सख़्त, व्यापक, और पंद्रह साल से क़ानून की किताब में।\nकमज़ोर कड़ी यह है कि इस आकार की कार्रवाई केवल एक संयुक्त अभियान के रूप में ही काम करती है। Airbus वह सबसे बड़ा रिश्वत settlement है जिसका यह देश हिस्सा रहा है, और Airbus की अपनी घोषणा इसका आकार बताती है: 31 जनवरी 2020 को EUR 3,598 million का जुर्माना, जिसमें EUR 2,083 million फ़्रांसीसी Parquet National Financier को, EUR 984 million Serious Fraud Office को, EUR 526 million Department of Justice को और EUR 9 million State Department को गए, और SFO और PNF ने इसे एक संयुक्त जाँच टीम के रूप में चलाया। पैसा कई देशों से होकर गुज़रता है और सबूत भी, और कोई अकेली एजेंसी अपने दम पर सब कुछ हासिल नहीं कर सकती। इसके लिए सबका आना ज़रूरी है।\nउस तारीख़ पर ध्यान दीजिए। जनवरी 2020 पहले Trump प्रशासन के भीतर आता है, और उस समय का Department of Justice अपना EUR 526 million का हिस्सा लेकर काफ़ी ख़ुश था। रोक पाँच साल बाद आई, उसी राष्ट्रपति से उनके दूसरे कार्यकाल में। यह प्रशासनों के बीच का फ़र्क़ नहीं है। यह 2025 में लिया गया एक फ़ैसला है।\nउनमें से एक ने आना बंद कर दिया है, और बात एक ख़ाली कुर्सी से गहरी है। जो prosecutor मामले नहीं खोल रहा, उसके पास साझा करने को कुछ बन ही नहीं रहा। न subpoenas, न दस्तावेज़ों की पेशी, न सहयोग करने वाले प्रतिवादी, न दबाव में लाए गए गवाह। जिन सबूतों से Airbus संभव हुआ, वे इसलिए मौजूद थे कि किसी ने जाकर उन्हें हासिल किया था। आधी docket बंद कर दीजिए और कोई नई कार्रवाई मत कीजिए, तो बर्तन में किसी और के निकालने के लिए कुछ नहीं बचता। यह कोई देश नहीं जो चीज़ें सौंपने से मना कर रहा है। यह एक देश है जिसके पास अब सौंपने को कुछ है ही नहीं।\nयह दूसरा दरवाज़ा भी बंद कर देता है। Airbus की अपनी घोषणा नतीजे का श्रेय कंपनी में “reporting, cooperation and new compliance standards” को देती है। कंपनियाँ इसलिए आगे आती हैं कि न आने पर उनके साथ क्या होगा। वह हटा दीजिए जो उनके साथ होगा, और जो self-reports इनमें से ज़्यादातर मामलों की शुरुआत करती हैं, वे आनी बंद हो जाती हैं। Washington जितना ही London में भी।\nजब ऐसा होता है तो Bribery Act ज़रा भी कमज़ोर नहीं होता। बस वह सबूतों की वह आपूर्ति खो देता है जिसने उसे ठीक उन्हीं मामलों पर इस्तेमाल लायक बनाया था जिनके लिए वह लिखा गया था।\nऐसे अठारह महीने, और इसने इस उद्योग की एक भी shortlist नहीं हिलाई। किसी के risk register में यह नहीं है, कोई procurement form इसे नहीं पूछता, और आपको पाँच साल का subscription बेचने वाले किसी ने इसका ज़िक्र नहीं किया।\nसबसे पहले training का बजट गया प्रोडक्ट के बार-बार जीतने का एक दूसरा कारण भी है, और यह पहले वाले से कम कड़वा है। आपको बेचने वाले बहुत से लोग दूसरा काम कर ही नहीं सकते।\nइस देश में employer training पर निवेश बीस साल से गिर रहा है। Learning and Work Institute का 2024 Employer Skills Survey का विश्लेषण इसे 2005 की तुलना में वास्तविक रूप से प्रति कर्मचारी 36% कम बताता है: GBP 2,634 के मुक़ाबले GBP 1,700। सिर्फ़ 2022 के survey के बाद से यह 13% और गिरा है। apprenticeship levy 2017 में ठीक इसी को पलटने के लिए आई थी, और levy समेत प्रति कर्मचारी ख़र्च तब से 23% गिरा है।\nफिर देखिए कि 2022 और 2024 के बीच किन क्षेत्रों ने सबसे ज़्यादा कटौती की। public administration 50%, financial services 47%, और information and communications 30%। वह आख़िरी वाला हमारा है। दो साल में लगभग एक तिहाई चला गया, उस उद्योग से जो सबसे तेज़ी से बदलता है।\nइस बीच जिस चीज़ की रक्षा करनी है, वह बढ़ गई। मैंने एक दशक के दोनों छोरों पर प्रकाशित vulnerabilities सीधे National Vulnerability Database से गिनीं: 2015 में 6,595 CVEs प्रकाशित हुए, और 2025 में 49,972। दस साल में साढ़े सात गुना, उस training बजट के मुक़ाबले जो एक तिहाई घट गया। ये दोनों रेखाएँ उलटी दिशाओं में जा रही हैं, और सालों से जा रही हैं।\nजो controls इस फ़र्क़ को उजागर करते, वे भी लागू नहीं हैं। सरकार का अपना Cyber Security Breaches Survey 2025/2026 two-factor authentication को 47% बिज़नेस पर बताता है: वही control जिसे five-eyes एजेंसियों ने 2022 में MSP accounts के लिए नामित किया था, और वही जिस पर ICO ने मार्च 2025 में Advanced Computer Software Group पर £3.07 million का जुर्माना लगाया। उसी survey में औपचारिक cyber security नीतियाँ एक साल में 59% से गिरकर 52% पर हैं, और cyber security को कवर करने वाली business continuity योजनाएँ 53% से गिरकर 44% पर। स्थिर नहीं। गिरती हुई।\nऔर फिर इस सबके नीचे एक cloud tenancy रख दीजिए। एक छोटा बिज़नेस अपनी tenancy ख़ुद administer नहीं करता। global admin MSP के पास होता है, identity model वही बनाता है, conditional access वही सेट करता है, तय करता है कि कौन सा storage public है और कौन सा नहीं, और console का मालिक वही है। उसे ठीक इसी काम के लिए रखा गया था। तो जब कोई tenancy ग़लत configure हो जाती है, तो उस पर हाथ contractor के थे। कोई customer ग़लत box पर click नहीं कर रहा था।\nअसर का दायरा भी बदल गया। 2005 में ग़लत configure हुआ server लगभग उतनी ही दूर तक पहुँचता था जितना वह wire जिसमें वह लगा था। आज ग़लत configure हुई tenancy save होते ही internet पर होती है, उस बिज़नेस के हर system के लिए वही tenancy होती है, और उसे administer करने वाला credential किसी ऐसे के पास होता है जिससे वे कभी मिले नहीं, ऐसी कंपनी में जिसका audit करने की उन्हें इजाज़त नहीं।\nपाँच देशों की सुरक्षा एजेंसियों ने 2022 में इस पर एक advisory लिखी, और उनकी सूची का सबसे पहला काम उन accounts से जुड़ा है जिनसे provider आपके systems में घुसता है। उन्होंने इसे पहले इसलिए रखा क्योंकि अंदर जाने का रास्ता यही है।\nफिर वह है जिसे यह उद्योग training कहता है। vendor certification प्रोडक्ट की training है। यह सिखाती है कि एक कंपनी के console में buttons कहाँ हैं और उस कंपनी ने अपनी features को क्या नाम देना तय किया है, इसे वही कंपनी लिखती और उसकी क़ीमत तय करती है जिसके प्रोडक्ट यह कवर करती है, और इनमें से पर्याप्त होना उस partner tier की शर्त है जो margin तय करता है। यह एक sales channel है जिसने graduation की टोपी पहन रखी है।\nconsole जानना यह जानना नहीं है कि चीज़ काम कैसे करती है। पाँच certifications वाले engineer ने शायद कभी कोई RFC नहीं पढ़ा, कभी packet capture नहीं लिया, और कभी एक बार भी बुनियादी सिद्धांतों से यह पता नहीं लगाया कि कुछ क्यों fail हुआ। उस व्यक्ति को ऐसे tunnel के सामने बिठाइए जो उठ नहीं रहा, और ईमानदार जवाब उसके पास होता ही नहीं। IPv6 का दोष customer के घर के network पर डालना होता है।\nतो दोनों आधे मिल जाते हैं। उन्हें एक प्रोडक्ट बेचने के पैसे मिलते हैं, और धीरे-धीरे वह प्रोडक्ट ही उनके पास इकलौता जवाब रह जाता है। विशेषज्ञता के लिए पैसा दे रहे customer को दोनों में से कुछ नहीं मिलता।\nआपको क्या चाहिए था, यह किसी ने लिखा ही नहीं अपनी requirements देखने को माँगिए। proposal नहीं, quote नहीं, आपके logo वाला architecture diagram नहीं। requirements।\nएक ठीक-ठाक capture उबाऊ होता है और छोटा नहीं होता। service को क्या करना है, और किसके लिए। कितने लोग, कहाँ से, किस पर। सबसे व्यस्त घंटा कौन सा है और तीन साल में बढ़त कितनी है। इसके असली पैसे का नुक़सान करने से पहले यह कितनी देर बंद रह सकता है, और आप कितना data गँवा सकते हैं। क्या कभी देश से बाहर नहीं जाना चाहिए, और किसके क़ानून के तहत। एक इमारत में आग लगने पर क्या बचना चाहिए। अपने ही customers के प्रति आप contract में किस बात के लिए ज़िम्मेदार हैं। बजट क्या है, capital और revenue अलग-अलग। आपके पास पहले से क्या है जिसमें अभी जान बाक़ी है। बाद में इसे कौन चलाएगा, और वे पहले से क्या चलाना जानते हैं।\nसही लोगों के साथ कमरे में यह सुबह भर का काम है, और इसका अंत एक ऐसे दस्तावेज़ में होना चाहिए जिस पर आप किसी के एक भी box बनाने से पहले sign off करें।\nअगर इनमें से ज़्यादातर किसी ने आपसे पूछा ही नहीं, तो आपको design नहीं दिया गया। आपको वही चीज़ दी गई है जो वे पहले से बेचते हैं, cover पर आपकी कंपनी के नाम के साथ।\nदूसरी दिशा वाले संकेत पर भी नज़र रखिए। अगर sizing पहली ही मीटिंग में हो गई, किसी के यह देखे बिना कि आपका load असल में क्या है, तो आँकड़े आपके estate से नहीं, किसी template से आए हैं, और असली sizing के लिए data चाहिए। कोई जो देखे कि आपकी kit अभी असल में क्या कर रही है, इतनी देर तक कि एक month-end और एक quarter close दिख जाए।\nएक विकल्प कोई चुनाव नहीं है design तर्क के साथ लिए गए चुनावों का एक समूह है। यानी विकल्प, और उन सब पर लागत, सिर्फ़ उस एक पर नहीं जो वे चाहते हैं कि आप लें।\nआपको कुछ न करने का विकल्प मिलना चाहिए, क़ीमत के साथ, जिसमें यह भी शामिल हो कि टूटने पर आपको क्या ख़र्च पड़ता है। आपको सबसे सस्ती चीज़ मिलनी चाहिए जो requirements पूरी करे। आपको सिफ़ारिश मिलनी चाहिए, और वह भी जो आपके लिए ज़रूरत से ज़्यादा specified है, ताकि आप देख सकें कि रेखा कहाँ है। हर एक के साथ यह कि ख़रीदने में कितना लगता है, पाँच साल चलाने में कितना लगता है, वह क्या नहीं करता, और अगर आप उससे बड़े हो गए तो आगे क्या करना होगा।\nऔर सबसे ज़रूरी, आपको उन चीज़ों की सूची मिलनी चाहिए जिन्हें बाहर किया गया और क्यों। यही वह हिस्सा है जो दिखाता है कि किसी ने असल में सोचा।\nअगर आपको ठीक एक जवाब मिला, और वह जवाब संयोग से वही vendor है जिसमें वे certified हैं और वही licensing model है जो हर महीने पैसा देता है, तो आपको design नहीं मिला। आपको design के कपड़े पहने एक quote मिला। इससे ज़्यादा कुछ नहीं।\nआपके देखने से पहले ही shortlist क्या छान देती है एक ही requirement के चार जवाब support contract के साथ open source margin provider की अपनी मेहनत है एक छोटा British supplier कोई partner programme ही नहीं जो पहले से आपके पास है, configure किया renewal पर invoice करने को कुछ नहीं partner programme वाला vendor rebate, deal registration, target पैसा देता है? क्या यह programme पर है? आपकी मेज़ तक क्या पहुँचता है एक विकल्प, quote के साथ न तुलना, न लागत वाला विकल्प बाक़ी तीन की कभी क़ीमत नहीं लगी, तो आपको कभी पता नहीं चला कि वे कितने के थे और उनका न होना ऐसा लगता है मानो कहने को कुछ था ही नहीं छलनी आपके कुछ भी देखने से पहले चलती है। एक ही requirement के तीन जवाबों की कभी क़ीमत नहीं लगाई जाती, इसलिए उनकी ग़ैरमौजूदगी ऐसे पढ़ी जाती है मानो तुलना करने को कुछ था ही नहीं। एक सीधा सवाल है जो इसे बाहर निकाल देता है, और मैं इसे कमरे में ही पूछूँगा। आपने और क्या-क्या सोचा, और उसकी क़ीमत क्या थी? जिसने काम किया है, उसके पास आँकड़े तैयार होते हैं और उसे यह पूछा जाना अच्छा लगता है। जिसने नहीं किया, वह कहेगा कि विकल्प supported नहीं हैं, enterprise-grade नहीं हैं, या ऐसी चीज़ नहीं जिस पर वे अपना नाम लगाएँ। इनमें से कोई भी एक आँकड़ा नहीं है।\nOpen source कभी सूची में नहीं आता ऐसा नहीं कि उन्हें इससे नफ़रत है। इस पर कोई margin नहीं, इसके बदले कोई rebate नहीं, बेचने को कोई certification नहीं और कोई तिमाही target नहीं जिसे यह हिलाता हो।\nआपत्ति हमेशा एक ही होती है, और इस post में यही इकलौता दावा है जो सीधे-सीधे झूठ है: “यह supported नहीं है”। यह सब supported है, व्यावसायिक रूप से, contract और SLA और फ़ोन करने के लिए किसी के साथ: Proxmox प्रति socket subscriptions बेचता है, और Red Hat, SUSE और Canonical stack के लिए support बेचते हैं। आप यह चुन रहे हैं कि support कौन करे, यह नहीं कि support हो या न हो। आप जिस चीज़ के पैसे देना बंद करते हैं, वह उस software को इस्तेमाल करने का अधिकार है जो आपके पास पहले से है।\nफिर वह kit है जो पहले से फ़र्श पर रखी है। उसे पूरी तरह नज़रअंदाज़ कर दिया जाता है। अपने पिछले employer के यहाँ मैंने decommission हो चुके HPC nodes से एक private cloud बनाया: Proxmox, Ceph और ऊपर Ansible की पूरी श्रृंखला, और नतीजा था 7 servers, 480 cores, 15 TiB RAM और 1.8 PiB storage, बिना किसी बजट के और तीन लोगों के साथ। वही requirement quote करने वाला MSP नए hardware और एक subscription की लागत लगाता: जिस kit को आप पहले ही ख़रीद चुके और जिसका भुगतान कर चुके, उसमें उनके लिए कुछ नहीं है।\nइसका दूसरा आधा हिस्सा वह kit है जो पहले से आपके फ़र्श पर बैठी है, और यही वह आधा है जिसकी कभी लागत लगाई ही नहीं जाती। जिस दिन support contract ख़त्म होता है, उस दिन server काम करना बंद नहीं कर देता। “End of support” एक तारीख़ है जो vendor ने चुनी, hardware का किसी का लिया हुआ measurement नहीं, और जिस box में पाँच अच्छे साल बाक़ी हैं, वह आपके लिए उसकी जगह कुछ बेचने वाले से ज़्यादा क़ीमती है। Open source ही आपको उसे इस्तेमाल करते रहने देता है, क्योंकि licence को इसकी परवाह नहीं कि CPU कितना पुराना है या सामने लगा badge अब भी warranty में है या नहीं।\nयही वह हिस्सा है जो किसी को पैसा नहीं देता। आपके पास पहले से जो hardware है उस पर कोई rebate नहीं, जहाँ है वहीं रहने वाली machine के लिए कोई tier credit नहीं, और उस licence का कोई renewal नहीं जिसे किसी को ख़रीदना ही नहीं पड़ा। इसलिए इसका प्रस्ताव नहीं रखा जाता, और उसकी जगह जो शब्द इस्तेमाल होता है वह है “end of life”, जो engineering जैसा सुनाई देता है और असल में बिक्री की एक तारीख़ है।\nमाँगिए कि open source विकल्प की लागत ठीक से लगाई जाए, support समेत, बाक़ियों के साथ, और वह version भी माँगिए जो आपके पास पहले से मौजूद चीज़ों को दोबारा इस्तेमाल करता है, उस version के मुक़ाबले क़ीमत के साथ जो ऐसा नहीं करता। commercial वाले से मना करवाए जाने के लिए नहीं। अंतर देखने के लिए, ताकि फ़ैसला आपका हो।\nविकल्प असल में कैसा दिखता है proposal पर लगभग हर चीज़ का एक supported open source जवाब है, और शुरुआत उस हिस्से से करनी चाहिए जिस पर आपका सबसे ज़्यादा ख़र्च होता है, क्योंकि वह कभी servers नहीं होता।\nप्रति-seat software। बार-बार आने वाला पैसा यहीं है, और यहीं कभी किसी विकल्प का ज़िक्र नहीं होता। office suite: LibreOffice, ONLYOFFICE, या Collabora Online, जो supported deployments बेचता है और आपको वह browser-based editing देता है जिसके बारे में लोग सोचते हैं कि वह सिर्फ़ एक ही जगह से आती है। mail, calendars और साझा contacts: grommunio MAPI बोलता है, इसलिए Outlook उससे वैसे ही जुड़ता है जैसे Exchange से जुड़ता, और यह support के साथ बिकता है; SOGo और mailcow वही ज़मीन अलग तरीक़े से कवर करते हैं। files, sharing और वे चीज़ें जिनके लिए लोग असल में cloud drive इस्तेमाल करते हैं: Nextcloud, जिसके पीछे एक enterprise contract है। chat और meetings, यानी Teams वाला आधा: Mattermost और Rocket.Chat सबसे क़रीबी बराबरी वाले हैं, दोनों self-host किए जा सकते हैं और दोनों के लिए support ख़रीदा जा सकता है, और Zulip Apache-licensed है और threads ठीक से चलाता है। Matrix के साथ Element, Nextcloud Talk और Jitsi बाक़ी कवर करते हैं। और SharePoint वाला आधा, यानी intranet, document libraries, team sites, उसके लिए XWiki, BookStack, OpenProject, Seafile और Nextcloud मिलकर हैं।\nबिज़नेस applications। ERP: Odoo Community, ERPNext, Dolibarr। CRM: SuiteCRM, जिसके लिए उसके पीछे की कंपनी support बेचती है, या EspoCRM। accounting: GnuCash, या Dolibarr और ERPNext में बना ledger। document management: Paperless-ngx। reporting: Metabase। service desk और asset tracking, जिसके लिए आपका MSP आपसे एक प्रोडक्ट के रूप में पैसे ले रहा है: GLPI और Zammad।\nidentity और secrets, जिन पर बाक़ी सब टिका है। Keycloak, FreeIPA, या domain controller के रूप में Samba। passwords के लिए Bitwarden self-host किया जा सकता है, Vaultwarden एक हल्का AGPL server है जो उन्हीं clients से बात करता है, और Passbolt और KeePassXC वही काम अलग तरीक़े से करते हैं। ज़्यादातर proposals पर यह प्रति-user मासिक लाइन होती है।\ndevice management, जो आपके बिल पर Intune वाली लाइन है। Fleet उन सभी platforms पर inventory, policy और enrolment करता है जो किसी estate में असल में होते हैं, osquery पर बना। MicroMDM Apple enrolment संभालता है, Headwind Android संभालता है, और इनमें से किसी के भी नीचे configuration का काम Ansible, Puppet या Salt करते हैं। remote-access वाले आधे के लिए, यानी वह चीज़ जिस पर भाग दो का एक पूरा section है, MeshCentral Apache-licensed है और RustDesk AGPL है, और दोनों उस server पर चलते हैं जिसके मालिक आप हैं। यानी “मेरी machines पर कौन सा remote tool है, और console में कौन log in कर सकता है” का जवाब ऐसा हो सकता है जिसे आप ख़ुद host और patch करते हैं, न कि ऐसा जिसके बारे में आपको बाद में पता चलता है।\nऔर updating अपने आप में अब वह रहस्यमय कला नहीं रही जैसी इसे बेचा जाता है। Fisher-Price OS (Windows) पर भी application updates अब winget से चलते हैं, जो MIT-licensed है, उसी licence के तहत एक community manifest repository के ख़िलाफ़; Chocolatey और Scoop यही काम और लंबे समय से कर रहे हैं, और हर Unix में यह नब्बे के दशक से है। तो जब patch management किसी proposal पर premium managed लाइन के रूप में आए, तो देखिए कि असल में क्या बेचा जा रहा है। कार्यप्रणाली मुफ़्त है और platform vendor ख़ुद उसे देता है, और उसे set up करना एक दोपहर का काम है। उसके बाद यह एक scheduled task है। एक cron entry, या console उसे जो भी कहे, ऐसी machine पर चलती हुई जो पहले से वहाँ थी। आप एक ऐसे काम के लिए मासिक fee दे रहे हैं जो अपने आप चलता है।\nइसका जवाब यह माना जाता है कि आप किसी को नतीजे पर नज़र रखने और fail होने पर कार्रवाई करने के लिए पैसा दे रहे हैं, और वह पैसे के लायक होता। तो नज़र रखने के सबूत देखिए। Capita में, जिसकी भाग दो पूरी चीर-फाड़ करता है, alert दस मिनट में उठा और लगभग तीन दिन बाद उस पर कार्रवाई हुई, एक घंटे के target के मुक़ाबले, एक ऐसी टीम द्वारा जिसे regulator ने कम स्टाफ़ वाली पाया। internet पर ऐसे firewalls अब भी हैं जिनमें वे vulnerabilities हैं जो fix आने के सालों बाद exploited catalogue में गईं। नज़र रखना ही वह हिस्सा है जो invoice को सही ठहराता, और यही वह हिस्सा है जिसके होने का सबसे कम सबूत है।\nphone system, जो प्रति-extension मासिक लाइनों में सबसे पुरानी में से एक है। Asterisk पच्चीस साल से यह कर रहा है, FreePBX उसके ऊपर एक web interface लगाता है, FreeSWITCH दूसरा engine है, और Kamailio और OpenSIPS carrier स्तर पर SIP routing संभालते हैं। अगर आप इसे जोड़ने के बजाय पैक किया हुआ चाहते हैं, तो Wazo, FusionPBX और Issabel सब इसे बना-बनाया देते हैं।\nयह भी याद रखने लायक है कि ज़्यादातर providers जिस proprietary वाले का प्रस्ताव रखते हैं, उसके साथ क्या हुआ। मार्च 2023 में CISA ने एक alert प्रकाशित किया जिसमें कहा गया “3CXDesktopApp — a voice and video conferencing app — was trojanized, potentially leading to multi-staged attacks against users employing the vulnerable app”। किसी को कोई vulnerability ढूँढकर exploit नहीं करनी पड़ी। यह vendor के अपने signed application के रूप में vendor के अपने update channel से पहुँचा, हर उस मेज़ पर जहाँ किसी partner ने इसे rollout किया था।\nAdobe, जो बाक़ी सब की तरह प्रति-seat subscription है। ज़्यादातर बिज़नेस creative suite के पैसे दे ही नहीं रहे। वे Acrobat और signatures के पैसे दे रहे हैं। Stirling PDF एक self-hosted toolkit है जो merging, splitting, redaction, OCR और form filling करता है, जिनके लिए Acrobat Pro ख़रीदा जाता है, और Okular या LibreOffice Draw बाक़ी कवर करते हैं। signing के लिए Documenso और DocuSeal दोनों AGPL हैं और दोनों self-host किए जा सकते हैं, और किसी document पर sign करने के लिए प्रति-envelope charge इस post में किसी ऐसी चीज़ को meter करने का सबसे साफ़ उदाहरण है जो आपका अपना server मुफ़्त में कर देता। जहाँ सच में design टीम है: images के लिए GIMP और Krita, vector के लिए Inkscape, layout के लिए Scribus, photography के लिए darktable और RawTherapee, video के लिए Kdenlive, 3D और compositing के लिए Blender, audio के लिए Audacity और Ardour।\nvideo, जो अपने एक paragraph का हक़दार है। cameras एक managed प्रोडक्ट के रूप में बिकते हैं, प्रति channel licence और एक ऐसे recorder के साथ जिसके अंदर जाने की आपको इजाज़त नहीं। Frigate MIT-licensed है और आपके अपने hardware पर स्थानीय रूप से object detection करता है; ZoneMinder बीस साल से GPL है। conferencing के लिए Jitsi और BigBlueButton। और याद रखिए कि वह कौन सा प्रोडक्ट था जिसके settlement के लिए Cisco ने $8.6 million और फिर $6 million दिए, जिसमें भाग दो जाता है। video surveillance software, सरकारी संस्थाओं को बेचा गया। premium camera stack के साथ सुरक्षा मुफ़्त नहीं आती।\nstorage और filesystems, और ध्यान दीजिए कि यहाँ कोई आपको कभी चुनाव देता ही नहीं। checksummed storage के लिए snapshots और send/receive के साथ OpenZFS, Btrfs, XFS, CephFS। आपके data के नीचे का filesystem एक engineering फ़ैसला है जिसके असली नतीजे होते हैं कि बुरे दिन के बाद आपको उसका कितना हिस्सा वापस मिलता है, और यह आम तौर पर वही आता है जो appliance के साथ आया था।\ninfrastructure, सबसे आख़िर में, क्योंकि यह बिल का सबसे सस्ता हिस्सा है। hypervisor और cluster: Proxmox VE। storage: Ceph, जो नए array के बजाय उन disks पर ख़ुशी से चलता है जो आपके पास पहले से हैं। firewall और routing: nftables, OPNsense। VPN: WireGuard या strongSwan। जो mesh overlay आजकल हर कोई बेचता है, उसकी तस्वीर ठीक रखना ज़रूरी है। Tailscale के clients open source हैं और उसका अपना hosted coordination server नहीं है: कंपनी कहती है कि यह “remains proprietary as part of our managed service”। लेकिन एक खुला coordination server है, और गंभीर है: Headscale BSD-licensed है, “an open source, self-hosted implementation of the Tailscale control server”, और Tailscale उसके मुख्य maintainer को नौकरी पर रखता है जबकि कहता है कि वह “does not set Headscale\u0026rsquo;s product direction”। तो पूरी चीज़ आपकी अपनी kit पर चलाई जा सकती है। NetBird और Nebula दूसरे रास्ते हैं। load balancing: HAProxy और keepalived। monitoring: Prometheus, Grafana, Zabbix। backup: Proxmox Backup Server, Bareos, restic। config management: Ansible। और integration के उस काम के लिए जो या तो bespoke development या प्रति-run cloud automation subscription के रूप में quote होता है, Node-RED Apache-licensed है, आपके अपने box पर चलता है, और हर execution का बिल नहीं भेजता।\nतीन जगहें जहाँ मैं यह दिखावा नहीं करूँगा कि बदलाव साफ़-सुथरा है। पहली, Teams और SharePoint। मंज़िल समस्या नहीं है, आपसे चाहे जो कहा जाए: ऊपर के प्रोडक्ट परिपक्व हैं और बिज़नेस उन पर चलते हैं। migration समस्या है: सालों में जमा हुईं sites, permission inheritance जिसे किसी ने कभी document नहीं किया, Power Automate flows जो किसी ने बनाए और फिर छोड़ गया, और co-authoring का वह व्यवहार जिसकी staff को आदत है पर जिसका नाम वे नहीं बता सकते। यह असली काम है, और इसकी लागत असली काम की तरह लगाई जानी चाहिए, किसी भी दिशा में टाल नहीं दी जानी चाहिए। फिर भी देखिए कि आप क्या ढोना बंद करते हैं। वे flows और वे sites किसी और के datacentre में चल रही बिज़नेस प्रक्रियाएँ हैं, ऐसे platform पर जिसे आप restart नहीं कर सकते। जब वे रुकती हैं, आप उन्हें ठीक नहीं करते। आप इंतज़ार करते हैं, और अपने customers को बताते हैं कि आप इंतज़ार कर रहे हैं। और UK accounting का एक कठोर किनारा है: VAT ऐसे software से file करना होता है जिसे HMRC मान्यता देता है, और HMRC उसकी सूची प्रकाशित करता है। Making Tax Digital तक open source रास्ते मौजूद हैं: GnuCash के पास एक community bridge है, ERPNext के पास एक UK VAT module है, लेकिन ये community द्वारा maintained हैं, किसी support contract वाले प्रोडक्ट नहीं। यह एक असली सीमा है और तुलना में इसकी जगह है। तीसरी, एक चालू design agency file interchange पर जीती या मरती है, और जो clients आपको .psd भेजते हैं और बदले में एक वापस चाहते हैं, वे सिद्धांत का मामला नहीं, एक असली समस्या हैं। बाक़ी सबके लिए, जिन्हें एक PDF भरकर उस पर sign करवाना है, कोई बदलाव करना ही नहीं है। बस पैसे देना बंद करना है।\nबेहतर बिज़नेस कभी क्यों नहीं बेचा जाता तो इसमें से कुछ भी पेश क्यों नहीं किया जाता? क्योंकि यह उनके लिए बेहतर बिज़नेस होता, बदतर नहीं, जो इनकार को कम नहीं बल्कि ज़्यादा दिलचस्प बनाता है।\nकिसी customer से पैसा कमाने के दो तरीक़े हैं। एक licence resell कीजिए, तो margin कोई और तय करता है, वही उसकी सीमा लगाता है, renewal पर वही दोबारा क़ीमत तय करता है, और यह मिलता है चाहे आपने उस महीने कोई काम किया हो या नहीं। एक खुला stack deploy करके चलाइए, तो margin आपकी अपनी मेहनत है आपकी अपनी दर पर, बीच में कोई cut लेने वाला नहीं और कोई vendor नहीं जो अगले अप्रैल यह आँकड़ा बदल सके। दूसरा वाला प्रति customer ज़्यादा क़ीमती है, और यह कुछ बनाता है। जो engineer Ceph चला सकता है, या ऐसा mail server खड़ा कर सकता है जिससे Outlook बात करे, वह अगले साल इस साल से ज़्यादा क़ीमती है। जिसने कभी सिर्फ़ एक console चलाया है, वह अगले साल भी ठीक उतना ही क़ीमती है, और सिर्फ़ तब तक जब तक वह console मौजूद है।\nयह ज़्यादा मुश्किल भी है, और पूरी बात बस यही है। इसे हर महीने दोबारा कमाना पड़ता है। इसके लिए administrators नहीं, engineers चाहिए, और engineers महँगे होते हैं, उन्हें तैयार होने में साल लगते हैं, और वे उठकर अपना काम शुरू कर सकते हैं। licence कभी नहीं छोड़कर जाता।\nयह एक प्रतिबद्धता है, और प्रतिबद्धता ही वह चीज़ है जिससे बचा जा रहा है। reselling किसी से कुछ नहीं माँगती। इस साल एक vendor चुनिए, अगले साल दूसरा, और जब वह गिरे तो वह शुरू से ही आपका design नहीं था। stack ख़ुद चलाने का मतलब है उसे चुनना, उसे ठीक से सीखना, और रात दो बजे customer के सामने उसके पीछे खड़े रहना। उनमें से एक के लिए आपको कुछ जानना पड़ता है। दूसरे के लिए एक portal login चाहिए।\nयह उस गणित को भी तोड़ देता है जिस पर यह model चलता है। managed service की क़ीमत leverage पर तय होती है: प्रति engineer जितने हो सकें उतने customers, runbooks पर नीचे की ओर काम करता junior staff, escalation तभी जब runbook ख़त्म हो जाए। यह इसलिए चलता है क्योंकि काम को steps में बदल दिया गया है। ऐसा stack लगाइए जिसे किसी को सच में समझना पड़े, तो अनुपात ढह जाता है, वेतन का बिल चढ़ जाता है, और बिज़नेस ख़ुद को ऐसे लोगों पर निर्भर पाता है जो जा सकते हैं और customers को साथ ले जा सकते हैं।\nतो shortlist के नीचे का सवाल कभी यह नहीं था कि कौन सा प्रोडक्ट बेहतर है। सवाल यह है कि क्या कोई कंपनी ऐसी बनने को तैयार है जो कुछ जानने वाले लोगों को नौकरी देती है।\nयहीं पर पहले वाला training का आँकड़ा लौटकर आता है। जिस क्षेत्र ने दो साल में skills पर अपना ख़र्च 30% घटा दिया, वह skill नहीं बेच सकता, इसलिए licences बेचता है। licences बेचने का मतलब है उसे कभी skill हासिल नहीं करनी पड़ती, इसलिए training कटी ही रहती है, और अगले साल उसके पास पेश करने को और भी कम होता है। यह एक चक्र है, और यह सिर्फ़ एक ही दिशा में घूमता है।\nबाक़ी incentive है, और उससे हम पहले ही गुज़र चुके हैं। vendor licence पर rebate देता है और मेहनत पर कुछ भी नहीं। salesperson को प्रोडक्ट पर मुआवज़ा मिलता है। और जब किसी hyperscaler में outage होता है तो दोष hyperscaler का होता है, जबकि जो cluster आपने ख़ुद बनाया वह आपका है, इसलिए reselling किसी को दोष डालने की जगह ख़रीद देती है। जो बिज़नेस जवाबदेह न होना पसंद करता है, उसके लिए इसकी असली क़ीमत है।\nइसमें से कुछ भी इसे आपके लिए सही जवाब नहीं बनाता। यह बस समझाता है कि तुलना कभी लिखी क्यों नहीं जाती।\nIPv4 टैक्स यह पूरी post का सबसे साफ़ उदाहरण है, क्योंकि आप दोनों तरफ़ क़ीमत लगा सकते हैं।\nवे आपके लिए एक IPv4-only service बनाएँगे। फिर उस तक पहुँचने के लिए ज़रूरी public addresses आपको बेचेंगे, प्रति address, प्रति महीना, हमेशा के लिए। एक और माँगिए तो एक form है, एक औचित्य है और renewal पर एक लाइन।\nइस बीच IPv6 का कोई अतिरिक्त ख़र्च नहीं। allocation उस registry membership के साथ आता है जिसके पैसे आप पहले से दे रहे हैं, और RIPE की 2026 charging scheme प्रति LIR account एक सपाट EUR 1,800 है, आपके पास चाहे जितना हो। RIPE-690 कहता है कि एक end site को /48 या /56 मिलता है। v6 वाली तरफ़ कोई प्रति-address meter नहीं है। meter करने को कुछ है ही नहीं।\nदूसरी तरफ़ के आँकड़े भी सार्वजनिक हैं। AWS हर public IPv4 address के लिए $0.005 प्रति घंटा लेता है, जुड़ा हो या नहीं, जो हर एक के लिए लगभग $43.80 सालाना है। transfer बाज़ार में 2026 की पहली छमाही में औसत क़ीमत $20.04 प्रति address थी, और चालू lease दर लगभग $0.59 प्रति address प्रति महीना। तो एक address सीधे ख़रीदने में लगभग बीस dollar का है, और थोक में लगभग सात dollar सालाना पर किराये पर मिलता है, और आपको एक दुर्लभ संसाधन के रूप में दोबारा बेचा जा रहा है। आपके बिल पर एक मासिक लाइन और एक और चाहने पर भरने को एक form।\nकमी असली है। आप अब भी इसके पैसे क्यों दे रहे हैं, इसका कारण असली नहीं है। किसी service को dual-stack करना एक दोपहर का काम है, और यह एक बार-बार आने वाले charge को एक बार के change request में बदल देता है, ठीक इसीलिए इसका कभी प्रस्ताव नहीं रखा जाता।\nअगर आप पूरी तस्वीर चाहते हैं कि इस देश में किसने सच में कोशिश की है, तो मैंने सबको गिना है: We Never Ran Out of Addresses. We Ran Out of Effort.\nडिफ़ॉल्ट रूप से cloud, जबकि आपका सब कुछ site पर है सोचिए कि काम असल में कहाँ होता है। एक manufacturing site। एक car mechanic। एक catering बिज़नेस।\nहर user इमारत में है। data का हर टुकड़ा इमारत में बनता है: machines, tills, job cards, stock, CAD, CNC programs, counter पर आते orders। उस data का इस्तेमाल करने वाली हर चीज़ भी इमारत में है। कोई दूसरी site नहीं, कोई field force नहीं, web front end पर आते customers नहीं, और कोई महीना नहीं जिसमें load दोगुना हो जाए।\napplication को किसी और के datacentre में रख दीजिए, और अब उनमें से हर byte परिसर छोड़कर जाता है और सीधा वापस आता है। वही users। वही data। वही processing। साथ में बीच में एक WAN, एक मासिक बिल, और एक ऐसी line पर निर्भरता जिसके मालिक आप नहीं।\ncloud जिस चीज़ में सच में अच्छा है, उसमें से कुछ भी यहाँ लागू नहीं होता। elastic scale उस load के लिए है जो बदलता है, और दो shifts में चलता shop floor नहीं बदलता। global पहुँच उन users के लिए है जो कहीं और हैं, और आपके users machine के पास खड़े हैं। disaster recovery के लिए किसी और की इमारत एक असली जवाब है, लेकिन disaster recovery एक backup target है, वह जगह नहीं जहाँ से आप production line चलाते हैं।\nइससे आपको जो मिलता है, वह है रुकने का एक नया तरीक़ा। on prem पर broadband line का बंद होना एक असुविधा है, और काम तब तक चलता रहता है जब तक कोई उसे ठीक न कर दे। cloud में यह एक ठहराव है: line जाती है, garage कोई job नहीं खोल पाता, kitchen कोई order नहीं ले पाता, production खड़ा रह जाता है, और आप किसी और के engineer का इंतज़ार कर रहे होते हैं, ऐसे SLA के तहत जिस पर आपने कभी बातचीत ही नहीं की।\napplication के इमारत छोड़ते ही काम असल में कहाँ जाता है site पर आपकी इमारत लोग machine के पास खड़े data सारा यहीं बनता है application यह भी यहीं परिसर से कुछ बाहर नहीं जाता। broadband line बंद होना एक असुविधा है, और कोई ठीक करे तब तक काम चलता रहता है। डिफ़ॉल्ट cloud, और वह रास्ता जो यह असल में लेता है आपकी इमारत वही लोग, वही data वह exchange जहाँ आपकी line पहुँचती है आपके ISP का core और वे जिनसे वह transit ख़रीदता है एक peering point या provider का edge network datacentre application अब यहाँ रहता है तीन इमारतें जो आपकी नहीं, जिन्हें फ़ोन नहीं कर सकते, जिन्हें कभी चुना नहीं और हर byte वापसी का सफ़र भी करता है, हर save और हर lookup के लिए बंद line अब ठहराव है। garage कोई job नहीं खोल पाता, kitchen कोई order नहीं ले पाता, production खड़ा रहता है, और आप किसी और के engineer का इंतज़ार करते हैं, ऐसे SLA पर जिस पर कभी बात ही नहीं हुई। वही users, वही data, वही processing। फ़र्क़ बस इतना है कि बीच में चार दूसरे लोगों के networks हैं, और जब वे रुकते हैं तो उनमें से किसी को आप फ़ोन नहीं कर सकते। और आपका broadband तो बस आधा हिस्सा है। दूसरा आधा उनका है, और वह भी बंद होता है। अक्टूबर 2025 के लिए AWS का अपना post-event summary उसके मुख्य Northern Virginia region में एक रुकावट का वर्णन करता है जो 19 अक्टूबर को रात 11:48 बजे से 20 अक्टूबर को दोपहर 2:20 बजे तक चली, लगभग पंद्रह घंटे, जिसमें customers और दूसरी AWS services “were unable to establish new connections”। कारण, उनके अपने शब्दों में, था “a latent defect within the service\u0026rsquo;s automated DNS management system”। नौ दिन बाद Azure Front Door ने लगभग पूरे कामकाजी दिन के लिए Microsoft 365, Outlook और Azure portal को अपने साथ गिरा दिया। Microsoft इनका एक चालू इतिहास रखता है, और वह छोटा दस्तावेज़ नहीं है।\ndowntime भी पूरी बात नहीं है। proposal के मुखपृष्ठ पर बेची गई दूसरी चीज़ थी माँग पर क्षमता, और उसकी अपनी एक documented विफलता है। Microsoft एक पन्ना प्रकाशित करता है जिसका शीर्षक है “Troubleshooting Azure VM allocation failures”। AWS प्रकाशित करता है “How do I troubleshoot InsufficientInstanceCapacity errors when I start or launch an EC2 instance?”। वे शीर्षक दोबारा पढ़िए। दोनों vendors उस स्थिति के लिए स्थायी documentation रखते हैं जब आप एक machine माँगते हैं और वह होती ही नहीं: कोई गड़बड़ी नहीं, कोई outage नहीं, बस आज उस region में कुछ ख़ाली नहीं। उसके ऊपर quotas बैठे हैं, प्रति subscription तय, जो मना किए जाने का दूसरा तरीक़ा है।\nतो proposal पर लिखे elastic scale के साथ एक शर्त है जो proposal में नहीं लिखी। उस region में, जिस दिन आप माँगें, जो ख़ाली हो उसी के भीतर elastic। और providers फिर भी customers को सीमित regions में sign कराते रहते हैं, क्योंकि दस्तख़त इस तिमाही गिना जाता है और capacity check नहीं। आपको deployment के समय पता चलता है, जो सबसे बुरा संभव पल है: migration तय होने के बाद, on-premises kit जाने के बाद, और move के पैसे जुटाने के लिए fallback तोड़ दिए जाने के बाद।\nपढ़िए कि garage और kitchen के लिए इस सबका क्या मतलब है। अपनी kit पर outage कोई ऐसा है जिसे आप फ़ोन कर सकते हैं, या एक machine जिस तक कोई चलकर जा सकता है और restart कर सकता है। किसी और के cloud में कोई लीवर ही नहीं है। आप इसे escalate नहीं कर सकते, अपनी recovery को प्राथमिकता नहीं दे सकते, और न ही वह provider कर सकता है जिसे आप पैसे दे रहे हैं। वे भी बाक़ी सबकी तरह वही status page refresh कर रहे हैं। जो आपने resilience समझकर ख़रीदा, वह कई million दूसरे customers के साथ साझा एक निर्भरता निकलती है, और जिस दिन यह fail होती है, आपकी स्थिति ठीक उन्हीं जैसी होती है।\nतो यह हमेशा सिफ़ारिश क्यों होती है? क्योंकि एक capital ख़रीद आपके MSP को एक बार पैसा देती है। एक subscription उन्हें हर महीने पैसा देता है, एक प्रतिशत पर, ऊपर से vendor का credit। आपको migrate करने से hardware भी उनकी थाली से हट जाता है, जो service का वह हिस्सा है जिसके लिए स्टाफ़ जुटाना उन्हें सबसे मुश्किल लगता है। तीन कारण, सब एक ही दिशा में, उनमें से कोई भी आपका नहीं।\nफिर यह बात है कि आपका data कहाँ पहुँचता है। CLOUD Act द्वारा जोड़े गए 18 U.S.C. § 2713 के तहत, किसी US provider को ठीक से notice मिलने पर अपने “possession, custody, or control” में मौजूद data पेश करना होगा, “regardless of whether such communication, record, or other information is located within or outside of the United States”। तो “यह UK region में है” उस सवाल का सच्चा जवाब है जो आपने पूछा ही नहीं। region आपको बताता है कि disk कहाँ है। क़ानून इस बात के पीछे चलता है कि कंपनी का मालिक कौन है।\nयह आपके सामने किसी ने फ़ैसले के रूप में रखा ही नहीं। यह एक मान्यता के रूप में आया, एक proposal के भीतर, उसके द्वारा लिखा गया जिसे आपके हाँ कहने पर ज़्यादा पैसा मिलता है।\nउस निर्भरता के बारे में मैंने अपनी technology किराये पर लेने की क़ीमत में विस्तार से लिखा है।\nयह सब कुछ बनने से पहले हुआ ध्यान दीजिए कि यह सब कब होता है, पूरा का पूरा। किसी machine के rack होने से पहले, किसी के किसी चीज़ में log in करने से पहले, मीटिंगों में और spreadsheets पर जिनमें आप ज़्यादातर थे ही नहीं। rebate, वे requirements जिन्हें किसी ने capture नहीं किया, इकलौता विकल्प, open source की ग़ायब लाइन, वे addresses जिन्हें आप अब contract की पूरी उम्र किराये पर लेंगे, वह datacentre जिसकी इमारत में किसी को ज़रूरत नहीं थी: इसमें से कुछ भी technical नहीं है, और यह सब पहले पखवाड़े में तय हो जाता है।\nइसीलिए यह आपके ध्यान के लायक है, चाहे आपने कभी कोई switch न खोला हो। इसीलिए बाद में इसे सुलझाना इतना मुश्किल भी है। आगे की हर चीज़ उसी पखवाड़े की विरासत पाती है। estate वैसे ही बनता है जैसा shortlist ने कहा था। tooling वही आती है जो provider के पास पहले से है और जिसे वह पहले से जानता है। चाबियाँ वहीं पहुँचती हैं जहाँ उनकी प्रक्रिया उन्हें रखती है। और उसके अंत में sign हुआ contract सालों पहले ही तय कर देता है कि जिस सुबह कुछ रुकेगा, उस दिन नुक़सान कौन उठाएगा।\nतो भाग दो यह है कि असल में क्या बनाया गया: वह box जिससे उन्हें मना नहीं किया जा सकता, exploited सूची पर सबसे बुरे रिकॉर्ड वाली perimeter kit, वे बुनियादी चीज़ें जिन्हें आपने असल में ख़रीदा था, और वह tooling जो आपकी हर machine तक एक ऐसे console से पहुँचती है जिसे आपने कभी देखा ही नहीं। उसकी दो विफलताओं के साथ एक regulator का निष्कर्ष जुड़ा है। उनमें से कोई भी किसी customer के साथ नहीं हुई। वे एक provider के साथ हुईं, और customers उसके नीचे थे।\nIs Your MSP Lying To You — 3 parts\nक्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है?you are here आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता है जब कुछ टूटता है, तब असल में बोझ कौन उठाता है? स्रोत 28 अगस्त 2026 को लिया गया।\nपैसा कैसे काम करता है।\nMicrosoft Partner Center billing documentation — customer के Azure इस्तेमाल के charges पर लगने वाला partner earned credit। FCA Handbook, COBS 6.1A — adviser charging: यह नियम कि किसी firm को सिफ़ारिश के लिए सिर्फ़ client से पैसा मिलना चाहिए, और उसे प्रोडक्ट provider से commission नहीं लेना चाहिए। CMA cloud services market investigation — cloud बाज़ार पर UK के प्रतिस्पर्धा regulator का काम। Addresses।\nRIPE NCC charging scheme 2026 — प्रति LIR account EUR 1,800, सपाट। RIPE-690 — end site को /48 या /56, अक्टूबर 2017। AWS public IPv4 charge — फ़रवरी 2024 से $0.005 प्रति address प्रति घंटा। IPv4 transfer market, first half of 2026 — औसत $20.04 प्रति address, lease दर लगभग $0.59 प्रति address प्रति महीना, सार्वजनिक क़ीमत वाले लेन-देन के CircleID विश्लेषण का सार। VPN।\nCisco Meraki\u0026rsquo;s AnyConnect troubleshooting guide — 443 पर TLS और DTLS, सुलझाने को कोई NAT समस्या नहीं। RFC 3947 और RFC 3948 — IPsec के लिए NAT traversal, और UDP 4500 पर जाना। support जो आप सच में ख़रीद सकते हैं।\nProxmox VE subscriptions — open source infrastructure के लिए commercial support का एक उदाहरण। training और skills।\nLearning and Work Institute, 24 December 2025 — 2024 Employer Skills Survey पर, 2005 के बाद से employer training निवेश प्रति कर्मचारी वास्तविक रूप से 36% नीचे, और 2022 और 2024 के बीच information and communications में 30% नीचे। National Vulnerability Database — साल के हिसाब से CVE प्रकाशन की गिनती, प्रति तिमाही जोड़कर: 2015 में 6,595 के मुक़ाबले 2025 में 49,972। Cyber Security Breaches Survey 2025/2026 — 47% बिज़नेस में two-factor authentication, औपचारिक नीतियाँ घटकर 52%, cyber को कवर करने वाली continuity योजनाएँ घटकर 44%। CISA alert, 30 March 2023 — trojanise किया गया 3CX desktop application। क़ानून और नीति।\nExecutive order, 10 February 2025 — Foreign Corrupt Practices Act की कार्रवाई पर रोक, प्रशासन के अपने शब्दों में। Just Security, on the year that followed — जून 2025 के कार्रवाई दिशानिर्देश, SEC की भंग की गई FCPA unit, और बंद की गई जाँचें। Bribery Act 2010 और section 7 — UK का क़ानून, और corporate failure-to-prevent अपराध। Airbus, 31 January 2020 — त्रिपक्षीय settlement का कंपनी का अपना विवरण और जुर्माना PNF, SFO, DoJ और DoS के बीच कैसे बँटा। अधिकार क्षेत्र।\n18 U.S.C. § 2713 — CLOUD Act का प्रावधान: data कहीं भी stored हो, खुलासा करना होगा। जब platform रुकता है।\nAWS post-event summary, October 2025 — us-east-1 में DynamoDB और DNS रुकावट, Amazon के अपने शब्दों में। Azure status history — अपनी घटनाओं का Microsoft का अपना चालू रिकॉर्ड। ","permalink":"https://blogs.damiendye.uk/hi/random/is-your-msp-lying-to-you-part1/","summary":"3 भागों में से भाग 1. कुछ झूठ बोल रहे हैं। ज़्यादातर को ज़रूरत ही नहीं पड़ती, क्योंकि जिस vendor का प्रोडक्ट वे सुझा रहे हैं वही उन्हें पैसा देता है, और आपको बताने की कोई बाध्यता नहीं। वे संकेत जो बताते हैं कि आपके लिए engineering नहीं हो रही, आपको बेचा जा रहा है, और वह सब जो कभी shortlist तक पहुँचता ही नहीं।","title":"क्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है?"},{"content":" Is Your MSP Lying To You — 3 parts\nक्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है? आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता हैyou are here जब कुछ टूटता है, तब असल में बोझ कौन उठाता है? भाग एक बिक्री के बारे में था। यह भाग उस सामान के बारे में है जो लगा।\nकाग़ज़ों पर दस्तख़त हो चुके हैं, बिल हर महीने आता है, और सामान लग चुका है। कुछ आपका, कुछ उनका, और ज़्यादातर इससे पहले चुना गया कि किसी ने पूछा हो कि यह कारोबार सुबह आठ से शाम छह के बीच असल में करता क्या है। आगे वही सामान है: क्या चुना जाता है, उसके अंदर क्या चालू छोड़ दिया गया, और जिन मशीनों के पैसे आपने दिए, उन तक किसी ऐसे console से और कौन पहुँच सकता है जिसमें आपने कभी login नहीं किया।\nयहाँ की दो नाकामियों पर एक नियामक का फ़ैसला है, साथ में एक आँकड़ा। इनमें से कोई भी किसी ग्राहक के साथ नहीं हुई। ये एक provider के साथ हुईं, और ग्राहक उसके नीचे बैठे थे। हर दावे पर एक link है।\nवह डिब्बा जिससे उन्हें कोई हटा नहीं सकता अब वाला असहज हिस्सा। मैं इसे दावे से नहीं, सबूत से करना चाहता हूँ, क्योंकि यही वह हिस्सा है जहाँ लोग “साज़िश” शब्द उठा लेते हैं, और वह शब्द उठाते ही विषय छोड़ दिया जाता है, बिना किसी के उसे देखे।\nइस उद्योग के ज़्यादातर हिस्से में Cisco ही default सिफ़ारिश है। तो देखिए कि vendor ने ख़ुद अपने सामान में बिना दस्तावेज़ वाली पहुँच के बारे में क्या छापा है।\nमार्च 2018 में उन्होंने CVE-2018-0141 के लिए advisory छापी: Prime Collaboration Provisioning में SSH से login किया जा सकता था, क्योंकि उसमें “a hard-coded account password on the system” था। आठ महीने बाद Small Business switches पर CVE-2018-15439, जहाँ “the affected software enables a privileged user account without notifying administrators of the system”, और छपते समय कोई ठीक किया हुआ software उपलब्ध नहीं था, बदले में एक workaround दिया गया। अक्टूबर 2023 में CVE-2023-20101: Emergency Responder एक ऐसे root account के साथ आता था जिसमें “default, static credentials that cannot be changed or deleted” थे, ऐसे credentials जो “typically reserved for use during development” होते हैं।\nएक account जिसके बारे में किसी को बताया नहीं गया, जिसे आप हटा नहीं सकते, आपके ढाँचे की एक मशीन पर root के साथ। आप इसे जो चाहे कहिए। vendor की अपनी advisory इसी का वर्णन करती है।\nफिर Snowden वाली सामग्री है, जो अब दस साल से ज़्यादा पुरानी है और कभी वापस नहीं ली गई। दिसंबर 2013 में Der Spiegel ने ANT catalogue छापा, और बताया कि NSA का एक विभाग “has burrowed its way into nearly all the security architecture made by the major players in the industry \u0026ndash; including American global market leader Cisco and its Chinese competitor Huawei”। उसी रिपोर्टिंग ने बताया कि सामान वहाँ कैसे पहुँचता है: shipments गुप्त कार्यशालाओं की ओर मोड़ दिए जाते हैं, एक प्रक्रिया में जिसे NSA interdiction कहता है, जहाँ “at these so-called \u0026rsquo;load stations,\u0026rsquo; agents carefully open the package in order to load malware onto the electronics, or even install hardware components that can provide backdoor access”। 2010 का NSA का एक अंदरूनी newsletter, 2014 में तस्वीरों के साथ छपा, इस प्रक्रिया को एजेंसी के अपने शब्दों में बताता है: उपकरण “being delivered to our targets throughout the world are intercepted”, फिर “re-packaged and placed back into transit to the original destination”।\nरिपोर्टिंग जो नहीं दिखाती, वह है मिलीभगत। Der Spiegel ने साफ़ कहा कि दस्तावेज़ों में ऐसा कुछ नहीं था जिससे लगे कि निर्माताओं को पता था या उन्होंने मदद की, Cisco ने उस समय किसी भी भूमिका से इनकार किया, और मई 2014 में उसके general counsel ने इसे रिकॉर्ड पर रखा: “as a matter of policy and practice, Cisco does not work with any government, including the United States Government, to weaken our products”। उन्होंने इसकी शिकायत राष्ट्रपति से की। ऊपर से देखें तो वे भी यहाँ पीड़ित थे।\nइसे जैसा है वैसा मान लीजिए। इससे आपके rack में लगे डिब्बे के बारे में कुछ नहीं बदलता, क्योंकि interdiction को कभी vendor की मदद की ज़रूरत नहीं थी। और यह जानना ज़रूरी है कि इस इनकार का वज़न कितना है, क्योंकि Cisco की बात अदालत में परखी जा चुकी है। 2019 में उन्होंने False Claims Act की कार्यवाही federal स्तर पर $8.6 million में निपटाई, और साथ में कई राज्यों के एक समूह के साथ $6 million, सरकारी संस्थाओं को बेचे गए video surveillance software को लेकर, जिसमें “flaws that would permit unauthorized access to the system, with the potential to control and otherwise manipulate security cameras and the recorded footage” थीं। New York Attorney General के मुताबिक़ Cisco को इन खामियों का पता 2009 में था और उसने उन्हें 2013 तक ठीक नहीं किया, जब जाँच शुरू हो चुकी थी। समझौते दायित्व की स्वीकृति नहीं होते और मैं इसका उल्टा दिखावा नहीं करूँगा। फिर भी यह चार साल तक पुलिस बलों और सरकारी संस्थाओं को एक ऐसा product बेचना है जिसमें अंदर आने का एक जाना-पहचाना रास्ता था, और यह बात न बताना।\nतो रिकॉर्ड यह है: उनकी अपनी स्वीकृति से बिना दस्तावेज़ वाले root accounts, उनका नाम लेने वाला दस साल पुराना catalogue, एक shipping chain जिसमें सेंध लगाई जा सकती है यह दिखाया जा चुका है, और एक दौर जब उन्हें एक छेद का पता था और वे बेचते रहे। इनमें से किसी एक को आप कंधे उचकाकर टाल सकते हैं। सब मिलकर ये एक pattern हैं। एक इच्छुक पक्ष का बयान किसी pattern को निपटा नहीं देता।\nइसका जवाब नियंत्रण है, प्रतिबंध नहीं। जोखिम बाक़ी सब चीज़ों के साथ design document में जाता है, और विकल्पों की क़ीमत लगाई जाती है, उन्हें खारिज नहीं किया जाता। पूछिए कि कौन-सा प्रतिस्पर्धी सामान परखा गया और उसकी क़ीमत क्या थी। पूछिए कि firmware जाँचने और update करने की policy क्या है, और उसे कौन जाँचता है। पूछिए कि सामान कैसे लिया जाता है और उसकी जाँच कौन करता है। पूछिए कि अगर कोई serial number purchase order से मेल न खाए तो क्या होता है।\nऔर ग़ौर कीजिए कि आपके क्षेत्र में किन vendors की ऐसी जाँच होती है और किनकी नहीं। वही उद्योग जिसने Huawei को एक ऐसी क्षमता के लिए risk register में डाला जिसे किसी ने सार्वजनिक रूप से पेश नहीं किया, Cisco को एक partner badge के बल पर, बिना एक पंक्ति के औचित्य के, low-level design में लिख देगा। जब आप एक ही पैमाना बराबरी से लागू करते हैं तब उस तर्क का क्या होता है, इस पर मैंने लिखा है। partner badge एक व्यावसायिक रिश्ता है जिसके साथ targets जुड़े हैं। इसलिए यह कोई security finding नहीं है।\nफ़ायरवॉल ही अंदर आने का रास्ता है इसे एक vendor से बढ़ाकर पूरी श्रेणी पर ले चलिए, क्योंकि फ़ायरवॉल वह product है जिसे MSP सबसे ज़ोर से बेचता है। यही वह line item है जो contract के security वाले हिस्से को सही ठहराता है।\nCISA उन कमज़ोरियों का एक catalogue रखता है जो असल दुनिया में इस्तेमाल होती पाई गई हैं: सैद्धांतिक रूप से ख़तरनाक नहीं, बल्कि सच में किसी के ख़िलाफ़ इस्तेमाल हुई। मैंने catalogue निकाला और उसे vendor के हिसाब से गिना। Version 2026.08.27 में 1,685 entries हैं। इनमें से 96 Cisco की हैं, सिर्फ़ Microsoft के 386 के बाद दूसरे नंबर पर, और उनमें से 42 firewall और edge lines पर हैं। Fortinet की 29 हैं। Palo Alto Networks की 15। तुलना के लिए, Ivanti की 35 और SonicWall की 17।\nदेखिए कि ये entries असल में क्या हैं, क्योंकि pattern कभी नहीं बदलता। यह management interface होता है या VPN, यानी वह हिस्सा जिसे जानबूझकर internet के सामने खोला गया है।\nइस समय-रेखा का अकेला हिस्सा जिसे बंद करना आपका काम है एक कमज़ोरी, छपने से आपके डिब्बे पर patch होने तक छपी CVE नंबर बन गया patch उपलब्ध vendor का काम पूरा इस्तेमाल पक्का CISA catalogue में जुड़ी आपका डिब्बा patch जिसे आप पैसे देते हैं आपका जोखिम किसी के ख़िलाफ़ इस्तेमाल हो चुकी, फिर भी आपकी perimeter पर बैठी Cisco की 96 entries, Fortinet की 29, Palo Alto की 15। ये vendors के आँकड़े हैं, और सार्वजनिक हैं। उस रंगे हिस्से की लंबाई आपकी है, और कोई उसे माँग नहीं रहा। यह आँकड़ा हर provider के पास है। यह वही नाप है जो ICO ने Capita में लिया। vendor का कुल आँकड़ा सार्वजनिक है, और वह वह आँकड़ा नहीं जो तय करता है कि आपको चोट लगेगी या नहीं। रंगा हुआ हिस्सा तय करता है, और वह उसका है जिसे आप पैसे देते हैं। Palo Alto का CVE-2024-3400 PAN-OS के GlobalProtect feature में एक command injection था, स्कोर 10.0, और zero-day के रूप में इस्तेमाल हुआ। उसी साल बाद में CVE-2024-0012 ने “an unauthenticated attacker with network access to the management web interface” को सीधे authentication के पार जाने दिया, स्कोर 9.8, और इसे उसी interface के एक command injection के साथ जोड़कर इस्तेमाल किया गया।\nFortinet का CVE-2022-40684 9.8 पर एक “authentication bypass using an alternate path or channel” था। उसका CVE-2018-13379, एक SSL VPN path traversal, नवंबर 2021 में catalogue में गया। patch मौजूद होने के बरसों बाद, क्योंकि डिब्बे अब भी बिना patch के internet पर बैठे थे और लोग उनमें बस चलकर घुस रहे थे।\nCisco के IOS XE web UI वाले CVE-2023-20198 का स्कोर 10.0 था। उसके Secure Firewall ASA और FTD software के VPN web server में CVE-2025-20333 का स्कोर पिछले सितंबर 9.9 था।\nऔर फिर CVE-2026-20316 है, जो 29 जुलाई 2026 को catalogue में जोड़ा गया। Cisco Secure Firewall Management Center, “use of hard-coded password”, जो “an unauthenticated, remote attacker to log in to an affected device” देता है। एक static credential, उस डिब्बे में जो firewalls को manage करता है, इस्तेमाल होता हुआ पक्का, इस post से एक महीना पहले। ऊपर वाले हिस्से की 2018 और 2023 वाली वही नाकामी, उस मशीन पर जो आपकी perimeter को चलाती है।\nअब काम का हिस्सा, क्योंकि “कुछ vendors दूसरों से बदतर हैं” असल सबक़ नहीं है। इनमें से हर एक का सार्वजनिक रिकॉर्ड है और उसमें से कुछ भी किसी proposal में नहीं दिखता। इससे भी अहम बात, vendor का कुल आँकड़ा वह आँकड़ा नहीं है जो तय करता है कि आपको चोट लगेगी या नहीं। आपका जोखिम वह अंतर है जो किसी कमज़ोरी के उस catalogue में जाने और आपके डिब्बे के patch होने के बीच है। वह अंतर बंद करना vendor का काम नहीं है। वह उसका है जिसे आप वह चीज़ चलाने के पैसे देते हैं।\nयह वही नाप है जो ICO ने Capita में लिया था, अगले सेक्शन में। दस मिनट में alert, अट्ठावन घंटे में कार्रवाई, लक्ष्य एक घंटा। firewall patching पर यह आँकड़ा कोई अपने provider से नहीं माँग रहा, और यह आँकड़ा हर provider के पास है।\nजब बुनियादी काम ही वह चीज़ हो जो आपने ख़रीदी थी यह बिक्री के बाद आया, दो मामलों में जहाँ जाँच एक नियामक ने की और जो मिला उसे छापा।\nमार्च 2025 में Information Commissioner ने अगस्त 2022 की एक ransomware घटना को लेकर Advanced Computer Software Group पर £3.07 million का जुर्माना लगाया। Advanced “provides IT and software services to organisations, including the NHS and other healthcare providers”। हमलावर “via a customer account that did not have multi-factor authentication” अंदर आए। NHS 111 बाधित हुई, स्वास्थ्यकर्मी मरीज़ों के रिकॉर्ड तक नहीं पहुँच सके, और 79,404 लोगों की निजी जानकारी ले ली गई। कारण पर ICO का निष्कर्ष धीरे-धीरे पढ़ने लायक है: “while Advanced had installed multi-factor authentication across many of its systems, the lack of complete coverage meant hackers could gain access”। यह पहला जुर्माना भी था जो ICO ने उस संगठन पर नहीं जिसका डेटा था, बल्कि एक data processor पर लगाया।\nअक्टूबर 2025 में उसी नियामक ने 2023 के उस हमले को लेकर Capita पर £14 million का जुर्माना लगाया जिसमें 6.6 million लोगों की निजी जानकारी ले ली गई। 22 मार्च 2023 को एक कर्मचारी के device पर एक दुर्भावनापूर्ण file पहुँची। दस मिनट के अंदर एक high priority alert बजा। device को 58 घंटे तक quarantine नहीं किया गया, जबकि लक्ष्य एक घंटे का था, और ICO ने पाया कि Security Operations Centre “was understaffed, and in at least six months before the incident fell well below the target response times for responding to security alerts”, साथ में अपर्याप्त penetration testing और risk assessment।\nपढ़िए कि इन दोनों निष्कर्षों में साझा क्या है। कोई चालाक दुश्मन नहीं। कोई zero-day नहीं। ऐसा कुछ भी नहीं जिसे कोई देख न सकता। multi-factor authentication जो ख़रीदा गया पर पूरा नहीं किया गया, और एक alert queue जिसके लिए किसी ने स्टाफ़ नहीं रखा। दोनों line items हैं जिन पर किसी ने मंज़ूरी दी और जिन्हें हरा दिखाया।\nऔर यह सब उद्योग पर चुपके से नहीं आया। 11 मई 2022 को, Advanced वाली घटना से तीन महीने पहले, UK, Australia, Canada, New Zealand और United States की cyber security एजेंसियों ने managed service providers और उनके ग्राहकों पर ख़तरों के बारे में एक संयुक्त advisory निकाली, क्योंकि वे “aware of recent reports that observe an increase in malicious cyber activity targeting managed service providers” थीं। सूची में पहला व्यावहारिक कदम है उन MSP accounts पर multi-factor authentication लागू करना जो ग्राहक के माहौल तक पहुँचते हैं।\nपाँच देशों की security एजेंसियों ने इसे सार्वजनिक रूप से लिखा, और नियंत्रण का नाम लिया। तीन साल बाद भी एक नियामक लोगों पर इसे पूरा न करने के लिए जुर्माना लगा रहा है।\nइनमें से कोई भी छोटे कारोबार की कहानी नहीं है। यह एक है। शुक्रवार 24 नवंबर 2023 को legal sector का IT provider CTS एक cyber घटना में ठप हो गया। Law Society के अपने अख़बार ने बताया कि लगभग 80 firms सौदे पूरे नहीं कर पाईं, systems बंद थे और contracts अटके हुए थे। ये conveyancing practices हैं, ज़्यादातर छोटी firms, और इनके ग्राहक वे लोग थे जो घर बदलने के बीच में थे। उनमें से एक ने साफ़ कहा: “This leaves us with so much uncertainty — with movers needing to be booked, days needing to be taken off work at potentially short notice and lives put on hold.” CTS सिर्फ़ इतना कह सका कि वह “unable to give a precise timeline for full restoration” था।\nउस शृंखला में किसी ने CTS को नहीं चुना था। firm ने चुना, और firm के नीचे के हर ग्राहक को वह फ़ैसला विरासत में मिला, बिना कभी पूछे।\nmanaged service ख़रीदते समय आप यही ख़रीद रहे होते हैं।\nऔर आपको पता कैसे चलता? ऊपर वाले हिस्से की हर घटना के बारे में एक बात पर ध्यान दीजिए। उनमें से कोई भी ग्राहक के साथ नहीं हुई। वे provider के साथ हुईं, और ग्राहक किसी और के बुरे हफ़्ते के नीचे बैठे थे।\nतो सवाल सीधे पूछिए। अगर आपमें सेंध लगती है, तो क्या हमें आपसे पता चलेगा? और कितनी जल्दी?\nएक क़ानूनी न्यूनतम सीमा है, और वह लोगों की सोच से नीची है। जहाँ वे आपकी ओर से personal data process करते हैं, Article 33 कहता है “the processor shall notify the controller without undue delay after becoming aware of a personal data breach”। घंटों की कोई तय संख्या नहीं। इस बीच आपके पास, controller के रूप में, पता चलने के बाद Information Commissioner को बताने के लिए 72 घंटे हैं। इन दोनों को साथ पढ़िए। जो भी घंटा वे यह तय करने में लगाते हैं कि आपको बताएँ या नहीं, वह उस घड़ी से कटता है जो आपके ख़िलाफ़ चलती है, उनके नहीं।\nऔर वह न्यूनतम सीमा सिर्फ़ personal data को ढकती है। उनके management console में घुसपैठ, जब तक इसका कोई सबूत नहीं कि आपका कुछ हिला है, शायद आपको बताने का कोई दायित्व पैदा ही न करे, जबकि आपकी हर मशीन तक पहुँचने वाले credentials किसी और के हाथ में होते हैं। यही वह अंतर है। यह छोटा नहीं है।\nसोचिए कि आपसे पहले किसे बताया जाता है। उनके वकीलों को, privilege की वजह से। उनके बीमाकर्ता को, क्योंकि policy ऐसा कहती है। उनके नियामक को, क़ानूनी घड़ी पर। आप उस सूची में जितना चाहेंगे उससे नीचे हैं, और हर क़दम पर प्रोत्साहन यही है कि ज़्यादा पता चलने तक कम कहा जाए।\nबाक़ी बचते हैं विकल्प, और सब बदतर हैं। आपको तब पता चलता है जब आपके systems रुक जाते हैं, जैसे conveyancing firms को पता चला। आपको तब पता चलता है जब कोई पत्रकार फ़ोन करता है। या आपको तब पता चलता है जब कोई किसी ransomware गिरोह की leak site पर provider का नाम देख लेता है, जो कोई सूचना प्रक्रिया नहीं है, वह किसी और की marketing का एक संयोग है।\nतो इसका contract कीजिए, और साफ़-साफ़ कीजिए, क्योंकि गोलमोल clauses अपने आप क़ानूनी न्यूनतम पर आ जाते हैं। उनके network पर किसी भी अहम घटना की सूचना, तय घंटों के अंदर, लिखित में, चाहे आपका data शामिल होना पक्का हो या नहीं। सूचना, अगर आपके systems तक पहुँच वाला कोई credential उजागर हुआ हो सकता है। सूचना, अगर वे किसी leak site पर दिखें। आपकी तरफ़ एक नामित संपर्क, कोई सामान्य mailbox नहीं।\nफिर वह सवाल पूछिए जो आपको सबसे ज़्यादा बताता है, और तब पूछिए जब वे अभी आपको बेच रहे हों। क्या आपके यहाँ कोई घटना हुई है? क्या हुआ, ग्राहकों को कब पता चला, और कैसे पता चला? जो provider एक घटना से गुज़रा है और उसने उसे ठीक से संभाला, वह आपको उसके बारे में बताएगा। यह उसके पास सबसे अच्छा सबूत है। जो कहता है कि ऐसा कभी हुआ ही नहीं, वह या तो बहुत क़िस्मत वाला है, या बहुत छोटा है, या कुछ भी गिन नहीं रहा।\nवह टूल जो एक साथ हर ग्राहक तक पहुँचता है कोई MSP मशीनों को एक-एक करके छूकर पैसा नहीं कमाता। अर्थशास्त्र को एक ऐसे console की ज़रूरत है जो हर चीज़ तक पहुँचे, और remote monitoring and management software इसी के लिए है। RMM contract के तहत हर मशीन पर बैठा होता है, system के रूप में चलता है, और provider एक ही login से सब चलाता है।\nएक console हर ग्राहक की हर मशीन तक पहुँचता है टूल का vendor agent भेजता है, और उसका हर update signed update पहुँचते ही भरोसेमंद आपके provider का console एक login, उनका हर ग्राहक दूसरा ग्राहक हर मशीन पर agent आपकी इमारत हर मशीन पर agent, system के रूप में चलता दूसरा ग्राहक हर मशीन पर agent मशीन console पर भरोसा करती है। console vendor पर। आपके firewall से कहा गया कि यह सब आने दे। पहुँच ही product है। एक console, हर ग्राहक, हर मशीन, और इसीलिए console पर क़ब्ज़ा करने वाले हमलावर को सब कुछ एक साथ मिल जाता है। इसे पलटकर अपनी तरफ़ से देखिए। आपकी मशीनों पर ऐसा software है जिसे आपने नहीं चुना, जिसका नाम आप शायद बता भी नहीं सकते, और जिसका patching रिकॉर्ड आपने कभी नहीं देखा। इसलिए वह कुछ भी कर सकता है, उनमें से किसी के साथ भी, किसी भी समय।\nउन टूल्स का रिकॉर्ड तसल्ली देने वाला नहीं है। 2021 से शुरू कीजिए।\nKaseya, जुलाई 2021। CISA और FBI ने ransomware से निपटने का वर्णन किया जो “leveraging a vulnerability in the software of Kaseya VSA on-premises products — against managed service providers (MSPs) and their downstream customers” था। लगभग पचास providers पर हमला हुआ, और उनके नीचे 1,500 तक कारोबार थे, जिनमें से ज़्यादातर ने Kaseya का नाम भी नहीं सुना था और उसके वहाँ होने में उनकी कोई राय नहीं थी।\nजनवरी 2023 में CISA, NSA और MS-ISAC ने एक संयुक्त advisory निकाली, ताकि “warn network defenders about malicious use of legitimate remote monitoring and management (RMM) software”, पिछले अक्टूबर की एक मुहिम के बाद जिसमें हमलावरों ने phishing से लोगों से ScreenConnect और AnyDesk install करवाए, फिर उनसे पीड़ितों के bank accounts के ख़िलाफ़ refund scam चलाया। इसके लिए किसी को MSP में सेंध नहीं लगानी पड़ी। टूल उनके लिए उतना ही अच्छा काम करता है जितना provider के लिए।\nफ़रवरी 2024 में पता चला कि ConnectWise ScreenConnect में CVE-2024-1709 है, जो “may allow an attacker direct access to confidential information or critical systems”। स्कोर 10.0 था। इस पर कमज़ोरी की श्रेणी देखिए: authentication bypass using an alternate path or channel, शब्दशः ऊपर वाले FortiOS bypass जैसी ही श्रेणी। अलग vendor, अलग product, वही ग़लती। पूरे नंबर, उस software में जो provider के हर ग्राहक तक पहुँचता है।\nफिर SimpleHelp। जून 2025 की CISA advisory ransomware गिरोहों का वर्णन करती है जो “leveraging unpatched instances of a vulnerability in SimpleHelp Remote Monitoring and Management (RMM) to compromise customers of a utility billing software provider”, और double extortion के लिए “downstream customers” तक पहुँचते हैं। इसके नीचे वाली खामी, CVE-2024-57727, एक unauthenticated हमलावर को host से सीधे “server configuration files containing various secrets and hashed user passwords” निकालने देती है।\nध्यान दीजिए कि नुक़सान हर बार कहाँ गिरता है। vendor पर नहीं। असल में provider पर भी नहीं। नीचे बैठे ग्राहकों पर, जिन्होंने टूल कभी नहीं ख़रीदा, जिन्हें कभी नहीं बताया गया कि वह कौन-सा है, और जिनकी इसमें कोई राय नहीं थी कि उसे कब patch किया जाए।\nउन स्रोतों पर एक चेतावनी, क्योंकि यह मायने रखती है। ये अमेरिकी advisories हैं, और इसकी वजह यह है कि CISA घटनाओं का ब्योरा छापता है जबकि NCSC आम तौर पर नाम नहीं लेता। यह खुलासे का अंतर है, आचरण का नहीं। टूल वही टूल हैं, उसी catalogue से, और इस देश की एक छोटी IT support firm आज दोपहर आपकी मशीनों पर ScreenConnect या SimpleHelp या उनका कोई प्रतिस्पर्धी चला रही है।\nतो पूछिए कि वह कौन-सा है। पूछिए कि कौन-सा version, आख़िरी बार कब patch हुआ, console में कौन login कर सकता है, क्या उसके हर account पर multi-factor authentication है, और अगली बार जब इनमें से कोई दस वाला स्कोर लेकर आए तो योजना क्या है।\nफिर एक और पूछिए, क्योंकि इसका जवाब वह बताता है जो बाक़ी नहीं बताते। क्या यह IPv6 पर काम करता है?\n2026 में यह जायज़ सवाल है और यह दिखने से ज़्यादा भारी पड़ता है। अगर management टूल सिर्फ़ IPv4 बोलता है, तो आपके network को IPv4 रखना पड़ता है, इसलिए नहीं कि आपके कारोबार को इसकी ज़रूरत है, बल्कि इसलिए कि उनके टूल को है। यानी addressing plan आपकी ज़रूरतों से नहीं, एक supplier के software से तय हो रहा है, और जो addresses इसे संभव बनाते हैं उनके लिए आप हर महीने पैसे दे रहे हैं। mobile connection पर काम करने वाला कोई remote कर्मचारी शायद पहले से IPv6-only network पर है, और उस हालत में पूरी व्यवस्था किसी और के चलाए translation पर टिकी है।\nऔर अगर जवाब यह है कि उन्होंने कभी जाँचा ही नहीं, तो आपने वह बात सीख ली जिसके बारे में आप असल में पूछ रहे थे।\nपहले एक सीधा सवाल, जो security की सारी बातों में भूल जाता है। agent मशीन पर कितना बोझ डालता है, और इसका सबूत कहाँ है?\nजवाब मिलेगा “नगण्य”। यह एक विशेषण है। आपको एक संख्या चाहिए, आपके जैसे hardware पर नापी हुई, किसी datasheet से उठाई हुई नहीं: औसत और अधिकतम CPU, resident memory, inventory sweep या patch scan के दौरान disk गतिविधि, और रोज़ का network। सबसे नई नहीं, ढाँचे की सबसे पुरानी मशीन पर लिया हुआ।\nऔर पूरा stack नापिए, अकेला एक agent नहीं। remote management, antivirus, endpoint detection, backup client, monitoring, asset tracking। हर vendor कहता है एक प्रतिशत से कम, वे छह हैं, और जिस व्यक्ति को सच में उस laptop पर काम करना है, वही जानता है कि छह मिलकर कितने होते हैं। लगभग शून्य सही लक्ष्य है। सबूत ही उसे साबित करने का अकेला तरीक़ा है।\nrollout से पहले आँकड़े माँगिए, और बाद में अपनी चुनी हुई किसी मशीन पर ख़ुद आँकड़े लेने की माँग कीजिए। जिस provider को अपने टूल पर भरोसा है, वह बिना धक्का दिए दोनों पेश करता है।\nटूल पर एक और, और यह वह है जो लोगों को तब तक सबसे अजीब लगता है जब तक वे इस पर सोचते नहीं। जब आपकी मशीनों पर agent update होता है, क्या आपको बताया जाता है?\nagent आपके ढाँचे का सबसे ऊँचे अधिकार वाला software है। यह system के रूप में चलता है, हर चीज़ पर, और जब भी provider या vendor तय करे, इसका version बदल जाता है। आपकी पूरी कंपनी में एक तीसरा पक्ष चुपचाप software install कर रहा है, और ज़्यादातर contracts पर कोई आपको नहीं बताता कि ऐसा हुआ।\nअब इसे उसके बगल में रखिए जो Kaseya में असल में ग़लत हुआ। एक भरोसेमंद management channel से हर मशीन पर एक साथ धकेला गया एक दुर्भावनापूर्ण update। जहाँ आप बैठे हैं वहाँ से, उस दिन, यह एक सामान्य agent update से अलग पहचाना नहीं जा सकता: वही channel, वही अधिकार, वही चुप्पी। फ़र्क़ सिर्फ़ इरादे का है। इरादा ऐसी चीज़ नहीं जिसे आप देख सकें।\nतो version बदलने की सूचनाएँ माँगिए, पूछिए कि agent update को कौन मंज़ूरी देता है और आप तक पहुँचने से पहले क्या उसे कहीं परखा जाता है, और वह पूछिए जो सबसे अहम है: आपको क्या बताएगा कि कोई ऐसा push हुआ है जो नहीं होना चाहिए था? अगर ईमानदार जवाब “कुछ नहीं” है, तो आप जिस नियंत्रण पर भरोसा कर रहे हैं वह provider की अपनी चौकसी है, और यह पूरा हिस्सा उसी के बारे में है।\nऔर उसे खोलने वाली चाबियाँ फिर वह है जो console को खोलता है। उस पर console से भी कम ध्यान जाता है।\nएक MSP अपने हर ग्राहक के administrative credentials रखता है। यही काम है, यही पूरा product है। तो उसके अपने credentials पर लागू पैमाना आपके लिए तय किए पैमाने से ऊँचा होना चाहिए, और व्यवहार में वह अक्सर नीचा होता है। साझा accounts, क्योंकि दो सौ tenants में बारह engineers के लिए अलग-अलग logins एक झंझट है। एक vault में passwords जिसे पूरा service desk पढ़ सकता है। बिना passphrase के SSH keys, उन laptops पर जो train में घर जाते हैं। break-glass accounts जिन्हें तब से किसी ने नहीं छुआ जब से उन्हें बनाने वाला कंपनी छोड़ गया।\n“हम MFA इस्तेमाल करते हैं” पर यह बातचीत आम तौर पर रुक जाती है, और रुकनी नहीं चाहिए, क्योंकि इसके रूप बराबर नहीं हैं। CISA इन्हें सबसे मज़बूत से सबसे कमज़ोर क्रम में रखता है: सबसे ऊपर FIDO/WebAuthn और PKI-based, जिसे वह “the gold standard” कहता है; उसके नीचे app-based one-time passwords और push notifications, “vulnerable to push bombing attacks as well as user error”; और सबसे नीचे SMS, जो “should only be used as a last resort MFA option”। सिर्फ़ सबसे ऊपर वाली पंक्ति phishing-resistant है। उसके नीचे सब कुछ relay किया जा सकता है, थकाया जा सकता है या बीच में पकड़ा जा सकता है, जबकि मंज़ूरी देने वाले व्यक्ति को लगता है कि वह सामान्य रूप से login कर रहा है।\nहमलावरों ने भी वह दस्तावेज़ पढ़ा है। Scattered Spider पर CISA की advisory कहती है कि यह समूह “targets large companies and their contracted information technology (IT) help desks”। ग्राहक को नहीं। उस help desk को जो ग्राहक के credentials reset कर सकता है। यह कहीं ज़्यादा आसान है, और इससे आपको सब एक साथ मिल जाते हैं।\nतो सवाल इससे संकरा है कि क्या वे MFA इस्तेमाल करते हैं। क्या आपके systems तक पहुँचने वाला हर account hardware token पर है, token पर, app पर नहीं, और क्या होता है जब रात ग्यारह बजे कोई service desk को फ़ोन करके कहता है कि वह एक engineer है जो ख़ुद को बाहर बंद कर बैठा है?\nयहाँ का इलाज असामान्य रूप से सरल है, और यही इसकी ग़ैरमौजूदगी को माफ़ करना मुश्किल बनाता है। Google ने 2018 में KrebsOnSecurity को बताया कि उसके “has not had any of its 85,000+ employees successfully phished on their work-related accounts since early 2017”, जब उसने passwords और one-time codes की जगह physical security keys अनिवार्य कीं। कम घटनाएँ नहीं। एक भी नहीं। उसी लेख में लिखा है कि बुनियादी key बीस डॉलर में बिकती थी।\nअब इसे एक managed service provider पर लागू कीजिए। उन्हें आपके स्टाफ़ को keys देने की ज़रूरत नहीं है। उन्हें अपने engineers को देनी हैं, और शायद ऐसे एक दर्जन होंगे जिनके पास वे credentials हैं जो हर ग्राहक तक पहुँचते हैं। एक दर्जन keys, एक बार ख़रीदी हुई, उस नुक़सान के दायरे के मुक़ाबले जो उनके छुए हर कारोबार तक फैला है। एक-एक बीस पाउंड की। जब कोई आपसे कहे कि hardware tokens अव्यावहारिक हैं, तो पूछिए कि असल में कितने लोगों को एक की ज़रूरत होगी।\nऔर आपके अपने ढाँचे के बारे में एक जुड़ा हुआ सवाल है, क्योंकि ज़्यादातर ग्राहकों ने इसके बारे में कभी सोचा ही नहीं। आपके systems का break-glass account किसके पास है? बहुत सारे contracts पर ईमानदार जवाब यह है कि provider के पास है, और आपके पास उसका कोई सेट है ही नहीं। उन्हें फ़ोन किए बिना आप अपने ही ढाँचे में नहीं जा सकते। यह security नियंत्रण नहीं, निर्भरता है। यह आम दिनों पर नहीं, सबसे बुरे दिनों पर काटती है। जिस दिन आप notice देते हैं। जिस दिन उन्हें कोई ऐसा ख़रीद लेता है जिसे आपने नहीं चुना। जिस दिन सेंध उन्हीं में लगी है और आपको उनके बिना काम करना है।\nआपके पास अपने break-glass credentials होने चाहिए, सीलबंद, contract में लिखे हुए, और किसी ऐसी तारीख़ पर परखे हुए जिस पर कोई उँगली रख सके। अगर आपका provider हिचकिचाता है, तो वह हिचक ख़ुद आपको कुछ बता चुकी है।\nयही सवाल नीचे desk तक जाता है, और यह वह है जो पूरी तरह भूल जाता है। उन्होंने आपके लिए जो भी laptop और desktop बनाया, उस पर एक BIOS administrator password है, जिसे build के दौरान उनकी तरफ़ के किसी व्यक्ति ने लगाया। मशीन आपकी है। उसकी चाबी उनके पास है।\nसोचिए कि वह password असल में किस पर राज करता है। boot order। secure boot। मशीन USB stick से चालू होगी भी या नहीं। यानी आप अपनी ही मशीन को दोबारा install कर सकते हैं या नहीं, जो boot नहीं होती उसे ठीक कर सकते हैं या नहीं, एक खेप किसी और को सौंप सकते हैं या नहीं, या दरवाज़े से बाहर जाने से पहले उन्हें ठीक से मिटा सकते हैं या नहीं। laptop पर यही चोर और disk के बीच खड़ा हो सकता है। इसमें कुछ भी अनोखा नहीं है। यह computers रखने का आम काम है, और बहुत सारे ढाँचों पर मालिक supplier को फ़ोन किए बिना इसमें से कुछ भी नहीं कर सकता।\nसब माँगिए। हर laptop, हर desktop, हर server: BIOS या firmware password, जिस पर BMC है उसका BMC login, और जहाँ GRUB या उस जैसा कुछ बंद किया गया है वहाँ का bootloader password, जो एक परत ऊपर वही ताला है और जो आपके और न चालू होने वाले server पर rescue boot के बीच खड़ा है। अगर इन सब पर एक ही password है, तो यह भी जानने लायक है। और अगर जवाब “नहीं” है, तो पूछिए क्यों नहीं, क्योंकि जो कारण दिए जाते हैं वे पतले हैं: ईमानदार कारण यह है कि इससे उनका build आसान होता है, और बाक़ी सब security का लिबास पहने है। जो password आपको रखने की इजाज़त नहीं, वह आपको किसी से नहीं बचा रहा। वह उन्हें आपके छोड़कर जाने से बचा रहा है।\nफिर वह account है जिससे आप सच में किसी मशीन को ठीक करने के लिए login करते हैं। हर Windows मशीन पर local administrator, हर Linux पर root, और इमारत के हर switch, firewall और hypervisor पर उसके बराबर कुछ। दो सवाल सब ढक लेते हैं, और ऊपर वाले firmware और bootloader passwords भी। क्या वे हर मशीन पर अलग हैं, और उन्हें किसका password management system रखता है: आपका, या उनका?\nअलग होना लोगों की सोच से ज़्यादा मायने रखता है। दो सौ मशीनों पर एक local administrator password दो सौ passwords नहीं, एक है, और वह finance server के साथ-साथ कंपनी के सबसे कम सुरक्षित laptop पर भी बैठा है। यह सैद्धांतिक कमज़ोरी नहीं, यह मानक चाल है: किसी भी चीज़ पर पहुँचो, password पढ़ो, हर चीज़ तक चल दो। Microsoft इसका जवाब डिब्बे में ही देता है। Windows LAPS हर मशीन पर अलग password लगाता है, उसे एक schedule पर घुमाता है, और उसका backup Active Directory या आपकी अपनी Entra tenancy में रखता है। Microsoft का अपना पेज पहले फ़ायदे के रूप में “protection against pass-the-hash and lateral-traversal attacks” बताता है, और यह feature Windows के हर समर्थित version पर मुफ़्त है, passwords को अपनी directory में रखने के लिए अलग से कुछ नहीं देना पड़ता। तो अगर जवाब “हर जगह एक password” है, तो यह licensing की समस्या नहीं है और tooling की समस्या भी नहीं। किसी ने इसे कभी चालू ही नहीं किया।\nआपकी मशीन का password किसके system में है आम व्यवस्था उनका vault, या उनके टूल से जुड़ा vault आपकी कंपनी का हर administrator password ऐसी कंपनी के पास जिसमें आपका account नहीं आपकी मशीनें Servers, laptops, switches, firewalls, hypervisors किसने पढ़ा, इसका log उनका है जिसमें login नहीं, उसका audit नहीं वापस लेना यानी सबसे बुरे वक़्त पर विनती जो व्यवस्था आपको चाहिए आपकी directory, या आपका vault हर मशीन पर अलग password, घुमाया हुआ, वहाँ रखा जहाँ आपका access control पहुँचता है वही मशीनें provider को पहुँच मिलती है, क़ब्ज़ा नहीं किसने क्या पढ़ा, रिकॉर्ड आपके पास आप आज देख सकते हैं, किसी से पूछे बिना आप इसे किसी मंगलवार दोपहर वापस ले सकते हैं दो सौ मशीनों पर एक local administrator password दो सौ passwords नहीं है। वह एक है, और finance server के साथ कंपनी के सबसे कम सुरक्षित laptop पर भी बैठा है। Microsoft इसका जवाब मुफ़्त देता है, और password उनकी नहीं, आपकी directory में रखता है। वही मशीनें, वही passwords, और इस पर दो अलग जवाब कि उन्हें कौन रखता है और कौन देख सकता है कि कोई password कब पढ़ा गया। किसका system, यही दबाने वाला सवाल है, और ध्यान दीजिए कि LAPS default रूप से password कहाँ रखता है: आपकी directory में, आपके access control के तहत, और इसका रिकॉर्ड आपके पास कि किसने उसे पढ़ा। हर चीज़ पर आपको यही ढाँचा चाहिए। आपकी मशीन का credential किसी ऐसी चीज़ में रहता है जो आपकी है, और आपके provider को उस तक पहुँच दी जाती है, ऐसी पहुँच जिसे आप देख सकते हैं, और किसी मंगलवार दोपहर बिना इजाज़त माँगे वापस ले सकते हैं।\nदूसरा ढाँचा आम है। passwords उनके password manager में होते हैं, या उनके remote management टूल से जुड़े privileged access vault में, और उसमें आपका कोई login नहीं होता। तब आपकी कंपनी का हर administrative password एक ऐसी कंपनी के पास है जिसमें आपका कोई account नहीं, किसने कौन-सा पढ़ा इसका log उनका है, और जिस दिन रिश्ता बिगड़ता है, आप अपनी ही मशीनों की चाबियाँ विनम्रता से माँग रहे होते हैं।\nतो अगला सवाल पूछिए, और विदाई वाली बैठक में नहीं, अभी पूछिए। ये हमारे system में कैसे आएँगे? तीन ईमानदार जवाब हैं। escrow को हमारी directory या हमारे vault में ले जाइए, और उस तक delegated पहुँच लीजिए। या हमें आज अपने वाले तक पढ़ने की पहुँच दीजिए, एक export के साथ जिसे हम ख़ुद चला सकें, ऐसे format में जिसे हमारा अपना vault ले सके। या हमें एक schedule पर सीलबंद, तारीख़ वाली प्रति दीजिए, जिसे हम खोलें और परखें। “सब कुछ हमारे system में है और जाते समय आपको मिल जाएगा” इस सूची में नहीं है, क्योंकि जिस दिन आप जाते हैं, उसी दिन उनके पास किसी भी काम में जल्दी करने की सबसे कम वजह होती है।\nऔर पूछिए कि उसके बाद उन passwords का क्या होता है। जो credential उनके engineers चार साल से जानते हैं, वह एक email से सुरक्षित नहीं हो जाता जिसमें लिखा हो कि वह चला गया। जाते समय हर एक को बदलना होगा, आपको, उन मशीनों पर जिनका firmware password अब आपके पास है।\nऔर फिर इस सबका live रूप। जब आपके किसी system का password पढ़ा जाता है, क्या आपको बताया जाता है?\nकोई log नहीं जो वे रखते हैं और माँगने पर दिखा सकते हैं। एक संदेश जो आपकी तरफ़ पहुँचता है: कौन-सा credential, कौन-सा engineer, कौन-सा ticket, और कब। क्षमता पर कहीं कोई शक नहीं: नाम के लायक हर vault checkout दर्ज करता है, और Microsoft का अपना escrow यह आपकी अपनी tenancy में करता है, जहाँ password recover करना Entra audit log में “Recover device local administrator password” के रूप में, करने वाले account के नाम के साथ, लिखा जाता है। तो असल सवाल बस यह है कि वह रिकॉर्ड किसी ऐसी जगह इशारा करता है या नहीं जिसे आप देख सकें।\nपूछिए, और अगर जवाब “नहीं” है, तो पूछिए क्यों नहीं। यहाँ कहीं एक ईमानदार “नहीं” है: एक व्यस्त ढाँचे में हर checkout पर alert दिन में चालीस बार बजेगा और बुधवार तक आप उसे पढ़ना बंद कर देंगे। इसका एक जवाब है, यह बातचीत का अंत नहीं। उन पर alert कीजिए जो दुर्लभ होने चाहिए: domain administrator account, break-glass credentials, firmware और bootloader passwords, recovery keys। और हर उस read पर alert कीजिए जिसके साथ कोई ticket number नहीं, क्योंकि वह या तो लापरवाह रिकॉर्ड रखना है या ठीक वही चीज़ जिसके बारे में आप सुनना चाहते हैं, और इनमें से किसी का भी भला तिमाही समीक्षा में पता चलने से नहीं होता।\nअंदर आने के बाद वे क्या कर सकते हैं एक और, और यही वह है जिस पर सबसे अक्सर ख़ाली नज़र मिलती है। जब उनका कोई engineer आपके systems में जाता है, क्या आपको बताया जाता है?\nकोई log नहीं जो वे रखते हैं। एक सूचना जो आपको मिलती है: कौन अंदर गया, कब, कितनी देर के लिए, और किस ticket के तहत। इसे माँगिए, और अगर जवाब “नहीं” है, तो पूछिए क्यों नहीं।\nएक मिसाल है, और वह उन्हीं products के अंदर बैठी है जो वे आपको दोबारा बेचते हैं। Microsoft का Customer Lockbox Microsoft के engineer से support case में आपकी सामग्री तक पहुँचने से पहले आपकी साफ़ मंज़ूरी माँगवाता है। Google अपने स्टाफ़ के आपके data को छूने के Access Transparency logs छापता है, और Access Approval उन्हें पहले पूछने पर मजबूर करता है। तो धरती के सबसे बड़े suppliers ने, आपके provider से कहीं संकरी पहुँच के बावजूद, अपने कर्मचारियों के लिए मंज़ूरी के workflows और access logs बनाए हैं, और रिकॉर्ड आपको सौंपते हैं।\nआपके MSP के पास domain administrator है। पूछिए कि वे आपको क्या सौंपते हैं।\nऔर जवाबदेही से भी कड़ी एक वजह है। आपकी तरफ़ पहुँचने वाली सूचना ही वह अकेला स्वतंत्र संकेत है जो आपको कभी मिलेगा कि उनके credentials कोई ऐसा इस्तेमाल कर रहा है जो वे नहीं हैं। अगर कोई हमलावर service desk से अंदर आता है, तो उसे दिखाने वाला हर log उसी संगठन के अंदर बैठा है जिसमें अभी-अभी सेंध लगी है। जो आपके inbox में आता है, वह उसके बाहर बैठा है।\nउससे भी एक स्तर नीचे, ख़ुद मशीन पर। क्या remote टूल किसी के desktop से उस व्यक्ति की सहमति के बिना जुड़ सकता है?\nसुबह तीन बजे किसी server के लिए, बिना किसी के मौजूद हुए पहुँच ही पूरा मक़सद है और कोई समझदार व्यक्ति इस पर आपत्ति नहीं करता। जिस मशीन पर कोई बैठा है, उसका mail खुला है और उसका काम screen पर है, उसके लिए यह एक अलग काम है। हर गंभीर remote management product को इस तरह सेट किया जा सकता है कि जुड़ने से पहले पूछे, session चलते समय एक दिखने वाला संकेत दिखाए, और व्यक्ति को मना करने दे। आपका इनमें से कुछ करता है या नहीं, यह एक configuration setting है, और वह setting उन लोगों ने चुनी जिन्हें वह सुविधाजनक लगती है।\nतो तीन बातें पूछिए, और उन्हें अलग रखिए। क्या आपके engineers बिना किसी prompt के किसी कर्मचारी के desktop तक पहुँच सकते हैं? जब कोई जुड़ा हुआ है, क्या उस पर बैठा व्यक्ति कुछ भी देखता है? क्या वह मना कर सकता है?\nअगर पहले का जवाब हाँ है और बाक़ी दो का नहीं, तो यह कोई तकनीकी मजबूरी नहीं है। यह एक default है जिस पर किसी ने दोबारा ग़ौर नहीं किया, उस product पर जिसे उसी पक्ष ने ख़रीदा जिसे यह फ़ायदा देता है। यह आपके संगठन में data protection संभालने वाले व्यक्ति के सामने रखने लायक भी है, क्योंकि किसी कर्मचारी की screen उसकी जानकारी के बिना देखना एक ऐसा फ़ैसला है जिसके साथ किसी का नाम होना चाहिए।\nफिर वह सवाल जो तय करता है कि इसमें से कुछ भी बाद में साबित किया जा सकता है या नहीं। जब उनके engineers आपके systems पर काम कर रहे होते हैं, क्या उनकी recording होती है?\nsession recording कोई अनोखी चीज़ नहीं है और बड़ी माँग भी नहीं। यह बाज़ार के हर privileged access product की मुख्य feature है, यानी आपका provider शायद पहले से इसके पैसे दे रहा है और उसने इसे कभी चालू नहीं किया। एक recorded session आपको एक video देता है, या एक keystroke और command log, या दोनों, एक नामित engineer और ticket number से जुड़े हुए। जवाबदेही जब असली होती है, वादा नहीं, तब ऐसी दिखती है: यह आश्वासन नहीं कि engineers ठीक बर्ताव करते हैं, बल्कि एक रिकॉर्ड जो दिखा दे अगर किसी ने नहीं किया।\nतो पूछिए कि क्या यह चालू है, और फिर पूछिए कि आप उन तक कैसे पहुँचते हैं, क्योंकि जो recording आप हासिल नहीं कर सकते वह सबूत नहीं, अफ़वाह है। तीन जवाब रखने लायक हैं, घटते क्रम में। recordings बनते समय ही आपकी अपनी storage में लिखी जाती हैं। या आपके पास आज उनके system तक पढ़ने की पहुँच है, एक export के साथ जिसे आप ख़ुद चला सकें। या एक अनुरोध का रास्ता है जिसकी समय-सीमा तय है, घंटों में, लिखित में, contract में, और जिसे आपने कम से कम एक बार किसी सामान्य session पर परखा है, किसी बहस के दौरान पहली बार नहीं।\nआपको जो नहीं चाहिए वह आम व्यवस्था है: recordings सिर्फ़ provider के पास, retention provider तय करे, मिटाना provider के हाथ में। यह एक ऐसा नियंत्रण है जो उस दिन तक पूरी तरह काम करता है जब इसकी ज़रूरत provider के ख़िलाफ़ पड़ती है। तो पूछिए कि retention कौन घटा सकता है, कौन किसी recording को मिटा सकता है, और क्या recording देखना भी ख़ुद log होता है। और पूछिए कि जिस दिन आप जाते हैं, उस सबका क्या होता है।\nदूसरे पक्ष के साथ भी न्याय कीजिए, क्योंकि एक है। किसी engineer के laptop ठीक करने की recording उस सबकी भी recording है जो आपके स्टाफ़ की screen पर था, और कभी-कभार खुले में टाइप किए गए किसी credential की भी। recordings अपने आप में संवेदनशील हैं और उन्हें vault जैसा ही बर्ताव चाहिए: encrypted, access controlled, देखे जाने पर log, एक तय अवधि तक रखी हुई और उससे ज़्यादा नहीं। जो provider यह बात आपके उठाने से पहले आपसे उठाता है, उसने समस्या पर सोचा है। जिसने इस पर कभी विचार नहीं किया, उसने भी आपको कुछ बता दिया है।\nवही टूल लगभग पक्का files भी दोनों दिशाओं में ले जाता है। पूछिए कि क्या ऐसा है, और फिर पूछिए कि इसके चारों ओर क्या लगाया गया है।\nबाहर जाने वाली दिशा वह है जिसकी क़ीमत कोई नहीं लगाता। management channel से होने वाला transfer encrypted है, भरोसेमंद है, और उन सभी नियंत्रणों के बाहर बैठा है जिनके पैसे आप पहले ही दे चुके हैं: data loss prevention, egress monitoring, USB sticks वाली policy। console तक पहुँच वाला कोई भी व्यक्ति किसी भी मशीन से किसी भी चीज़ की प्रति ले सकता है, और ज़्यादातर deployments पर इसका कोई ऐसा रिकॉर्ड नहीं जो आपको कभी दिखाया जाएगा।\nअंदर आने वाली दिशा वह है जिससे इस post में पहले की घटनाएँ असल में हुईं। एक साथ हर endpoint पर file धकेलना इन products की खामी नहीं, यह मुख्य feature है। ransomware ने बस इसे उसी तरह इस्तेमाल किया जैसे इसे बनाया गया था।\nतो पूछिए कि क्या file transfer चालू है भी, क्या इसे उन मशीनों पर बंद किया जा सकता है जिन्हें इसकी कभी ज़रूरत नहीं, क्या हर transfer file, दिशा, मशीन और engineer के साथ log होता है, और क्या वह log आप तक आता है, या बाक़ियों के साथ उनके inbox में जुड़ जाता है।\nऔर इस पर आख़िरी, क्योंकि यह वह है जिसे पूछने की बात किसी को सूझती ही नहीं। agent असल में क्या इकट्ठा कर रहा है, और उसका क्या होता है?\nये टूल patch level से कहीं ज़्यादा इकट्ठा करते हैं। hardware और software inventory, event logs, performance telemetry, अक्सर session recordings और screenshots, और कभी-कभी इससे भी काफ़ी ज़्यादा, इस पर निर्भर कि क्या चालू है। यह इस बात की एक विस्तृत तस्वीर है कि आपका कारोबार कैसे चलता है और आपका स्टाफ़ दिन भर क्या करता है। यह लगातार आपके परिसर से बाहर जा रही है।\nतो पूछिए कि क्या इकट्ठा होता है, कहाँ रखा जाता है और किसके अधिकार क्षेत्र में, कितनी देर रखा जाता है, और कौन इसे देख सकता है, क्योंकि जवाब आम तौर पर provider और टूल का vendor होता है, यानी एक दूसरी कंपनी जिसे आपने कभी नहीं चुना और जिससे आपका कोई contract नहीं। पूछिए कि क्या इसमें से कुछ आपको support करने के अलावा किसी और काम में आता है: product analytics, benchmarking, model training। पूछिए कि contract ख़त्म होने के दिन इस सबका क्या होता है, और इसे बातचीत में नहीं, लिखित में लीजिए।\nऔर ध्यान दीजिए कि यह data किसका है। आपके स्टाफ़ और आपके systems के रिकॉर्ड, आपकी ओर से processing करने वाले किसी के पास रखे हुए, यह एक ऐसा वाक्यांश है जिसके साथ दायित्व जुड़े हैं, और वे उनके नहीं, आपके हैं।\nवह चिप जो मशीन बंद होने पर भी जवाब देती है इस सबके नीचे एक और परत है, और नाम लेकर इसके बारे में पूछना ज़रूरी है। क्या वे Intel vPro इस्तेमाल कर रहे हैं, या उसके नीचे की Active Management Technology?\nअगर आपका इससे सामना नहीं हुआ, तो छोटा रूप यह है कि management firmware chipset के अंदर एक अलग controller पर चलता है, जिसका अपना network stack है। मशीन बंद होने पर भी यह जवाब देता है, बशर्ते बिजली और cable हो। यह मशीन चालू कर सकता है, BIOS settings बदल सकता है, एक remote image mount करके दोबारा install कर सकता है, और सही configuration पर hardware स्तर पर screen और keyboard ले सकता है, operating system के load होने से पहले, और चाहे वह कभी load हो या न हो।\nइसे चाहने की असली वजहें हैं। एक मशीन जो boot नहीं होती, तीन सौ मील दूर किसी device पर एक BIOS setting, किसी को भेजे बिना reimage। बड़े, फैले हुए ढाँचे में यह काम का है और मैं इसका उल्टा दिखावा नहीं करूँगा।\nपर देखिए कि यह कहाँ बैठा है। operating system के नीचे, यानी आपके ख़रीदे हर नियंत्रण के नीचे। आपकी endpoint protection इसे नहीं देख सकती, क्योंकि यह operating system में नहीं चल रहा। आपका host firewall इसे filter नहीं करता, क्योंकि traffic कभी operating system के network stack तक पहुँचता ही नहीं: इसे इसके अपने ports पर, किसी और के देखने से पहले, संभाल लिया जाता है। आपकी logging इसे नहीं ढकती। आपका install किया कुछ भी आपको नहीं बता सकता कि कोई session हुआ।\nआपके नियंत्रण कहाँ रुकते हैं, और उनके नीचे क्या चलता रहता है एक मशीन, ऊपर से नीचे आपके applications और आपका data जिसे कारोबार असल में इस्तेमाल करता है आपके नियंत्रण इसे देख सकते हैं Endpoint protection, logging, host firewall यही वह हिस्सा है जिसके आप पैसे देते हैं आपके नियंत्रण यही हैं operating system ऊपर का सब इसी के अंदर चलता है आपके नियंत्रण यहीं चलते हैं इस रेखा के नीचे, आपका install किया कुछ भी नहीं देख रहा Firmware और BIOS निर्माता update करता है, अपनी समय-सारणी पर आपकी patching में नहीं Management engine, vPro या BMC अपना processor, अपना network stack, अपने ports मशीन बंद होने पर भी जवाब देता है management traffic यहाँ आता है आपने जो कुछ ख़रीदा वह operating system में चलता है। उसके नीचे की दो परतें नहीं चलतीं, और रेखा के ऊपर install किया कुछ भी आपको नहीं बता सकता कि कोई session हुआ। security रिकॉर्ड भी तसल्ली देने वाला नहीं है। CVE-2017-5689 का स्कोर 9.8 था, और उसका विवरण धीरे-धीरे पढ़ने लायक है: “an unprivileged network attacker could gain system privileges to provisioned Intel manageability SKUs”। CISA ने एक alert निकाला और CERT/CC ने एक vulnerability note। “provisioned” शब्द पर ध्यान दीजिए: सोया पड़ा हो तो यह अंदर आने का रास्ता नहीं, चालू हो तो है। और इसे ढोने वाला firmware उस सामान्य patching से update नहीं होता जिसके आप पैसे दे रहे हैं। यह मशीन के निर्माता से आता है, उनकी समय-सारणी पर।\nफिर वह हिस्सा जो servers की नहीं, स्टाफ़ की ज़िम्मेदारी संभालने वाले किसी भी व्यक्ति को चिंतित करना चाहिए। hardware स्तर पर screen नियंत्रण का मतलब है कि कोई एक display देख सकता है जबकि operating system को कुछ पता नहीं। पूछिए कि क्या user consent prompt लागू है और क्या दिखने वाला session संकेत चालू है, क्योंकि दोनों configuration हैं और जिसने भी इसे provision किया, वह दोनों बंद कर सकता है।\nतो सवाल छोटे हैं। क्या यह हमारी मशीनों पर provisioned है, और यह किसने किया, और कब: क्या यह किसी ऐसे build का हिस्सा था जिसका ज़िक्र किसी ने नहीं किया? किन ख़ास कामों के लिए इसकी ज़रूरत है, और कितनी मशीनों को सच में उन कामों की ज़रूरत है? कौन-सा network management ports तक पहुँच सकता है, और क्या वह बाक़ी सब से अलग किया गया है? क्या consent लागू है, क्या संकेत चालू है, और audit trail कहाँ है? और क्या इसे हर उस मशीन पर unprovision किया जा सकता है जिसे इसकी ज़रूरत नहीं?\nअगर पहले का जवाब “हमें नहीं पता” है, तो यह अपने आप में जानने लायक है, क्योंकि इसका मतलब है कि क्षमता वहाँ बैठी है, किसी ने configure की, और कोई देख नहीं रहा।\nजोखिम मुफ़्त में आ गया इस पूरे भाग को उलटकर देखिए तो यह एक ही बात कहता है। इसकी हर क्षमता एक सुविधा के रूप में आई और उसकी क़ीमत भी सुविधा के रूप में लगी। जो agent एक हज़ार मशीनों को patch करता है, वही एक हज़ार मशीनों पर एक file रख सकता है। जो चिप दो सौ मील की यात्रा बचाती है, वह मशीन बंद होने पर जवाब देती है और आपकी logging को कुछ नहीं बताती। सुविधा का भाव लगाया गया, उसे मद-वार लिखा गया और उस पर मंज़ूरी दी गई। क्षमता उसी डिब्बे में आई, बिना क़ीमत के। यह किसी ऐसे दस्तावेज़ पर नहीं दिखती जो आपको कभी दिखाया गया हो।\nइसमें से कोई भी इनमें से किसी के बिना रहने का तर्क नहीं है। ढाँचों को patching चाहिए, और किसी को एक मरी हुई मशीन तक पहुँच पाना चाहिए। यह इस बात का तर्क है कि आपको पता हो कि इमारत में क्या है, उस तक कौन पहुँच सकता है, कहाँ से, और उस पहुँच को रखने वाला व्यक्ति, अभी उसे रखने वाली firm के बजाय कोई और बन जाए, इसके लिए क्या चाहिए। बिल आपको कभी नहीं बताएगा, क्योंकि बिल उस चीज़ की सूची है जिसके आप पैसे दे रहे हैं। वह उस चीज़ की सूची नहीं है जिसके सामने आप खुले हैं। इस व्यवस्था में किसी से कभी दूसरी वाली बनाने को कहा ही नहीं गया।\nभाग तीन इस बारे में है कि जब इनमें से कोई फट पड़ता है तब क्या होता है। contract असल में क्या वादा करता है, नुक़सान आख़िर में कौन उठाता है, बहाने कैसे सुनाई देते हैं, और जब आख़िरकार आपका सब्र टूट जाए तो छोड़ने की क्या क़ीमत है।\nIs Your MSP Lying To You — 3 parts\nक्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है? आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता हैyou are here जब कुछ टूटता है, तब असल में बोझ कौन उठाता है? स्रोत 28 अगस्त 2026 को देखे गए।\nसामान।\nCVE-2018-0141 — hard-coded account password, Cisco Prime Collaboration Provisioning, मार्च 2018। CVE-2018-15439 — Small Business Switches, administrators को बताए बिना चालू किया गया एक privileged account, नवंबर 2018। CVE-2023-20101 — Cisco Emergency Responder, static root credentials जिन्हें बदला या मिटाया नहीं जा सकता, अक्टूबर 2023। Der Spiegel, 29 दिसंबर 2013 — ANT catalogue, जिसमें दूसरों के साथ Cisco और Huawei का नाम है, Snowden दस्तावेज़ों से। Der Spiegel, 29 दिसंबर 2013 — TAO के अंदर: interdiction, load stations, और मोड़े गए shipment का क्या होता है। Ars Technica, 14 मई 2014 — 2010 का NSA का अंदरूनी newsletter और एक Cisco router में implant लगाए जाने की तस्वीरें, Glenn Greenwald की No Place to Hide में छपी। Cisco, 13 मई 2014 — कंपनी का जवाब, उसके अपने शब्दों में। New York Attorney General, 2019 — सरकारी संस्थाओं को बेचे गए video surveillance software पर कई राज्यों का समझौता, और 2009 से 2013 की समय-रेखा। perimeter का सामान।\nCISA Known Exploited Vulnerabilities catalogue — version 2026.08.27, 1,685 entries; इस post में vendor-वार गिनती उस file की मेरी अपनी गिनती है। CVE-2024-3400, CVE-2024-0012 — PAN-OS, GlobalProtect और management web interface। CVE-2022-40684, CVE-2018-13379 — FortiOS authentication bypass और SSL VPN path traversal। CVE-2023-20198, CVE-2025-20333, CVE-2026-20316 — Cisco IOS XE web UI, ASA VPN web server, और Secure Firewall Management Center में एक hard-coded password। CISA, Implementing Phishing-Resistant MFA — MFA के रूपों का क्रम, सबसे मज़बूत से सबसे कमज़ोर। KrebsOnSecurity, जुलाई 2018 — Google: physical security keys अनिवार्य करने के बाद 85,000+ कर्मचारियों में एक भी सफल phishing नहीं। Joint advisory AA23-320A — Scattered Spider, और contracted IT help desks को उसका निशाना बनाना। Windows LAPS overview — हर मशीन पर अलग local administrator password, घुमाया हुआ और आपकी अपनी Active Directory या Entra tenancy में backup किया हुआ; Windows के हर समर्थित version पर मुफ़्त। जब कुछ ग़लत होता है।\nICO, मार्च 2025 — Advanced Computer Software Group पर GBP 3.07 million का जुर्माना, किसी data processor पर नियामक का पहला जुर्माना। enforcement पेज पर ब्योरा है। ICO, अक्टूबर 2025 — 2023 की सेंध पर Capita पर GBP 14 million का जुर्माना: दस मिनट का alert, एक घंटे के लक्ष्य के मुक़ाबले 58 घंटे की कार्रवाई, और कम स्टाफ़ वाला Security Operations Centre। Law Society Gazette, 28 नवंबर 2023 — लगभग 80 conveyancing firms अपने IT provider के ठप होने के बाद सौदे पूरे नहीं कर पाईं। Kaseya VSA हमले पर CISA और FBI, जुलाई 2021 — managed service providers और उनके downstream ग्राहकों के ख़िलाफ़ ransomware। Joint advisory AA23-025A, 25 जनवरी 2023 — वैध RMM software के दुर्भावनापूर्ण इस्तेमाल पर CISA, NSA और MS-ISAC। CVE-2024-1709 — ConnectWise ScreenConnect authentication bypass, CVSS 10.0, फ़रवरी 2024। CISA advisory AA25-163A, जून 2025 और CVE-2024-57727 — बिना patch वाले SimpleHelp RMM के ज़रिए downstream ग्राहकों तक पहुँचते ransomware गिरोह। Joint advisory AA22-131A, 11 मई 2022 — managed service providers और उनके ग्राहकों पर ख़तरों पर UK, Australia, Canada, New Zealand और US की एजेंसियाँ। ","permalink":"https://blogs.damiendye.uk/hi/random/is-your-msp-lying-to-you-part2/","summary":"3 भागों में से भाग 2। काग़ज़ों पर दस्तख़त के बाद असल में क्या बनता है: वह डिब्बा जिससे उन्हें कोई हटा नहीं सकता, वह फ़ायरवॉल जो अंदर आने का रास्ता है, वे बुनियादी काम जो असल में आपने ख़रीदे थे, और हर मशीन पर वह agent जो किसी और के console को जवाब देता है।","title":"आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता है"},{"content":" Is Your MSP Lying To You — 3 parts\nक्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है? आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता है जब कुछ टूटता है, तब असल में बोझ कौन उठाता है?you are here भाग एक इस बारे में था कि शॉर्टलिस्ट कैसे लिखी जाती है। भाग दो इस बारे में था कि उसके भरोसे क्या बनाया गया। यह भाग उस सुबह के बारे में है जब वह चलना बंद कर देता है, और उसके बाद जो कुछ होता है उसके बारे में।\nकॉन्ट्रैक्ट के हिसाब से ज़िम्मेदारी किसकी है, और कितने तक। जब जवाब “किसी की नहीं” हो, तब कमरे में क्या कहा जाता है। रखने लायक़ प्रोवाइडर इसकी जगह क्या करता है। और जो रखने लायक़ नहीं, उसे छोड़ने में क्या लगता है, जो वह हिस्सा निकलता है जिसकी योजना कोई तब तक नहीं बनाता जब तक उसी हफ़्ते उसकी ज़रूरत न पड़ जाए।\nप्रीमियम ने असल में क्या ख़रीदा सबूत भाग दो में है और मैं आपको उसमें दोबारा नहीं ले जाऊँगा। मान लीजिए कि महँगे विकल्प ने न क़ाबिलियत ख़रीदी, न बुनियादी काम पूरे करवाए, न आपको ऐसा कोई डिब्बा दिलाया जिसमें सेंध लगाना ज़रा भी मुश्किल हो।\nतो पैसा किस चीज़ से जुड़ा है?\nसिलिकॉन से नहीं, वह हर साल सस्ता होता है। एड्रेस से नहीं। इंजीनियरिंग के घंटों से भी नहीं, ऐसे सेक्टर में जिसने दो साल में ट्रेनिंग का ख़र्च लगभग एक तिहाई घटा दिया। प्रीमियम चैनल से जुड़ा है: इतना बड़ा वेंडर कि टियर, रिबेट, डील रजिस्ट्रेशन और डिस्ट्रीब्यूटर नेटवर्क चला सके, यानी लोगों की एक कतार जिन्हें कुछ भी बनने से पहले पैसा मिलता है, और हर एक आपके इनवॉइस पर।\nयह बेचने वाले का आधा हिस्सा है, और अकेले यह ज़्यादा कुछ नहीं समझाता। बहुत-से ख़रीदार पूरी तरह क़ाबिल हैं और फिर भी साइन कर देते हैं। तो दूसरा आधा हिस्सा यह है, और वह ज़्यादा असहज करने वाला है।\nप्रीमियम सुरक्षा ख़रीदता है। कंपनी के लिए नहीं। उस इंसान के लिए जो साइन करता है।\nजाना-माना ब्रांड लगाना ऐसे बचाव लायक़ है जैसे खुला विकल्प चुनना कभी नहीं होता। अगर बाज़ार का सबसे बड़ा फ़ायरवॉल तोड़ा गया, तो बाक़ी सबका भी टूटा, और आपकी क़िस्मत ख़राब थी। अगर जो चीज़ आपने ख़ुद जोड़ी वह टूटी, तो आपने उसे चुना था, और आपसे पूछा जाएगा क्यों। बिज़नेस के लिए नतीजा एक ही है। इंसान के लिए अंजाम एक नहीं है, और एक ख़ास दर्जे से ऊपर का हर ख़रीदार यह बिना किसी के ज़ोर से कहे समझता है।\nइसलिए घेरा पूरा हो जाता है। बेचने वाले को महँगे विकल्प की सिफ़ारिश करने पर ज़्यादा पैसा मिलता है। ख़रीदार उसे मान लेने में निजी तौर पर ज़्यादा सुरक्षित है। दोनों में से कोई भी किसी भी मोड़ पर अपने हितों के ख़िलाफ़ काम नहीं कर रहा, और उस इंतज़ाम की क़ीमत चुकाने वाला अकेला पक्ष वह बिज़नेस है जिसके लिए दोनों काम करते हैं।\nयही उस सवाल का जवाब है जिससे यह सीरीज़ शुरू हुई थी, और यह झूठ बोलने से भी बुरा है। झूठे को पता होता है कि सच क्या है। इस इंतज़ाम में किसी को कुछ पता होने की ज़रूरत ही नहीं। बस शॉर्टलिस्ट हर बार एक ही तरह निकलती रहनी चाहिए, और वह निकलती है।\nवे रिपोर्टें जो आपको कभी नहीं मिलतीं मैनेज्ड सर्विस इनवॉइस की हर बार-बार आने वाली लाइन से एक डॉक्यूमेंट निकलना चाहिए। ज़्यादातर से कुछ नहीं निकलता, और लगभग कोई पूछता भी नहीं।\nइन्फ्रास्ट्रक्चर पैचिंग लीजिए, वह लाइन जो डेस्कटॉप वाली के ऊपर बैठती है। एक फ़्लीट को अपडेट करने का ईमानदार तरीका एक प्लेबुक है, Ansible या कुछ और, ऐसी जगह रखी गई जहाँ आप उसे देख सकें, तय शेड्यूल पर चलाई गई, पीछे आउटपुट छोड़ती हुई। तो प्लेबुक देखने को माँगिए, और रन लॉग देखने को माँगिए। बहुत सारे कॉन्ट्रैक्ट में दोनों में से कुछ भी मौजूद नहीं। अपडेट जब होते हैं तो हाथ से होते हैं, तब होते हैं जब किसी को याद आता है, और लाइन हर महीने बिल होती है चाहे जो हो। जो आपको ऑटोमेशन बताकर बेचा गया वह कैलेंडर में लिखा एक नोट है।\nइनवॉइस की हर लाइन से क्या निकलना चाहिए इनवॉइस पर इसे साबित करने वाला डॉक्यूमेंट आमतौर पर क्या आता है पैचिंग प्लेबुक, और उसका रन लॉग जहाँ आप पढ़ सकें, शेड्यूल पर चलती एक कंप्लायंस प्रतिशत बैकअप एक रिस्टोर टेस्ट, तारीख़ के साथ क्या लौटा, किस पर, कितना समय, किसने जाँचा हरे टिक से भरी रिपोर्ट मॉनिटरिंग अलर्ट, आपको भी भेजे गए सीधे सिस्टम से, शेड्यूल पर, बिना बदले हर महीने सजाया गया डैशबोर्ड डॉक्यूमेंटेशन आपके अपने सिस्टम में रिकॉर्ड आपका IPAM, एसेट डेटाबेस, विकी एक एक्सपोर्ट, उनकी समय-सारणी पर जिस बैकअप को किसी ने रिस्टोर नहीं किया वह बैकअप नहीं। वह बैकअप के बारे में एक अनुमान है। सबसे हाल का रिस्टोर टेस्ट माँगिए। जवाब, या उससे पहले की चुप्पी, पूरा रिव्यू है। हर बार-बार आने वाली लाइन को पीछे एक डॉक्यूमेंट छोड़ना चाहिए। ज़्यादातर पीछे एक प्रतिशत, एक हरा टिक, या कुछ भी नहीं छोड़तीं। फिर बैकअप। यह इन सबमें सबसे बुरा है, क्योंकि यही वह लाइन है जिस पर लोग सबसे ज़्यादा भरोसा करते हैं।\nआपको एक बैकअप रिपोर्ट मिलेगी। हरे टिक, पूरे हुए जॉब, लिखे गए बाइट, हर हफ़्ते आती हुई और कोई नहीं पढ़ता। वह रिपोर्ट वह नहीं है जो मायने रखती है। जिस बैकअप को किसी ने रिस्टोर नहीं किया, वह बैकअप नहीं है। वह एक बैकअप के बारे में एक अनुमान है।\nजो डॉक्यूमेंट आपको चाहिए वह रिस्टोर टेस्ट है। क्या रिस्टोर हुआ, किस हार्डवेयर पर, शुरू से आख़िर तक कितना समय लगा, और बाद में किसने डेटा खोलकर पक्का किया कि यह वही डेटा है। सबसे हाल वाला माँगिए।\nफिर यही बात ऑफ़लाइन कॉपी के बारे में दोबारा पूछिए, क्योंकि वह एक अलग दावा है और उसे अलग सबूत चाहिए। हर कोई कहता है कि उसके पास एक है। उनसे कहिए कि वह आपको दिखाएँ: मीडिया, वह कहाँ रहता है, आख़िरी बार कब लिखा गया, क्रेडेंशियल किसके पास हैं। और पूछिए कि आख़िरी बार उस कॉपी से रिस्टोर कब किया गया, लाइव बैकअप सिस्टम से नहीं। वे अलग फ़ॉर्मेट में अलग मीडिया हैं, और एक को टेस्ट करना दूसरे के बारे में कुछ भी साबित नहीं करता। ऑफ़लाइन कॉपी वह है जो एक बुरे हफ़्ते में बचती है, और वही वह है जिसे शायद ही कभी वापस पढ़ा गया हो। पूछिए कि ये कितनी बार होते हैं, किन सिस्टम पर, और क्या आपकी तरफ़ से किसी ने कभी नतीजा देखा है। बहुत सारे कॉन्ट्रैक्ट में यह कभी हुआ ही नहीं, क्योंकि इसमें किसी का एक दिन लगता है और इसके लिए कोई बिल नहीं करता।\nइन सबसे पहले एक सवाल है, और वही तय करता है कि बाक़ी किसी चीज़ का कोई मतलब है या नहीं। ये रिपोर्टें आपके पास आती हैं, या सिर्फ़ उनके पास?\nज़्यादातर बार टूलिंग उन्हें बनाती है, वे प्रोवाइडर के इनबॉक्स में पहुँचती हैं, समय हो तो कोई पढ़ लेता है, और कोई समस्या हो तो आपको बता दिया जाता है। यह जवाबदेही नहीं है। यह इनवॉइस जुड़ा हुआ ख़ुद का मूल्यांकन है, और यह आपसे ठीक उसी चीज़ पर उनकी बात मानने को कहता है जिसके लिए आप उन्हें पैसा दे रहे हैं।\nतो कहिए कि रिपोर्टें आपके पास भी आएँ। सीधे सिस्टम से, तय शेड्यूल पर, जिस भी रूप में टूलिंग उन्हें निकालती है। जिसे मापा जा रहा है उसके बनाए स्लाइड नहीं, और मासिक मीटिंग के लिए सजाया गया हरा डैशबोर्ड नहीं। बैकअप की सफलताएँ, और उससे भी ज़रूरी, नाकामियाँ। पैच रन और उसने क्या छोड़ा। अलर्ट की संख्या और लक्ष्य के मुक़ाबले रिस्पॉन्स टाइम। रिस्टोर टेस्ट जब हो, और अपवादों की सूची जैसी वह अभी है।\nआपको हर एक पढ़ने की ज़रूरत नहीं। आपको पढ़ पाने की स्थिति में होना है, और उन्हें पता होना चाहिए कि आप पढ़ सकते हैं। पूरा तंत्र यही है, और यही किसी पर भरोसा करने और जाँच कर पाने की स्थिति में होने के बीच का फ़र्क़ है।\nऔर अगर यह मुश्किल निकले, तो पूछिए क्यों। उस सूची की हर रिपोर्ट पहले से मौजूद है और पहले से कहीं भेजी जा रही है। एक दूसरा प्राप्तकर्ता जोड़ना डिस्ट्रीब्यूशन लिस्ट की एक लाइन है, कोई प्रोजेक्ट नहीं। यहाँ हिचकिचाहट कोई तकनीकी समस्या नहीं है, और वह जवाब से ज़्यादा क़ीमती है।\nइसी सवाल का एक बड़ा रूप भी है, और वही तय करता है कि आप कभी किसी चीज़ की ख़ुद जाँच कर पाएँगे या नहीं। डॉक्यूमेंटेशन कहाँ रहता है?\nपूछिए कि क्या वे आपकी एस्टेट को आपके सिस्टम में दर्ज करेंगे, आपके IPAM, आपके एसेट डेटाबेस, आपकी विकी में, या अपने में। ज़्यादातर कहेंगे अपने में, और इसे कुशलता की तरह पेश किया जाएगा। उनकी टूलिंग, उनके टेम्पलेट, उनकी प्रक्रिया, आपको कुछ चलाना नहीं।\nदेखिए वह इंतज़ाम क्या करता है। एड्रेसिंग प्लान, नेटवर्क डायग्राम, एसेट रजिस्टर, रनबुक और लाइसेंस की, ये सब आपके बिज़नेस के रिकॉर्ड हैं, आपके पैसे से बने, आपकी अपनी चीज़ों के बारे में। ऐसी जगह रखे गए जहाँ आप उन्हें देख नहीं सकते। जो आप पढ़ नहीं सकते उसका ऑडिट नहीं कर सकते, तो आपके पास यह जानने का कोई तरीका नहीं कि डॉक्यूमेंटेशन एस्टेट से मेल खाता है या नहीं। डॉक्यूमेंटेशन हक़ीक़त से लगातार भटकता रहता है, जो सामान्य और माफ़ करने लायक़ है, पर अनदेखा भटकाव ही वह तरीका है जिससे आपको पता रिव्यू में नहीं, इंसिडेंट के दौरान चलता है।\nफिर आख़िर में क्या होता है, जिस पर छोड़ने वाला हिस्सा लौटकर आता है। आपके अपने सिस्टम में रखा डॉक्यूमेंटेशन पहले से आपका है, पहले से ताज़ा है, पहले से उस फ़ॉर्मेट में है जो आप इस्तेमाल करते हैं। उनके सिस्टम में रखा डॉक्यूमेंटेशन एक एक्सपोर्ट है, उनकी समय-सारणी पर, उनके टूल की दी हुई किसी भी शक्ल में, आमतौर पर किसी ऐसी चीज़ का PDF जो पहले एक डेटाबेस थी।\nतो सवाल सीधे पूछिए, और रीड एक्सेस आज माँगिए, सिद्धांत में नहीं। आपके सिस्टम में काम करने वाले प्रोवाइडर ने ऐसा फ़ैसला किया है जिसकी उन्हें थोड़ी क़ीमत चुकानी पड़ती है और आपको बहुत कुछ मिलता है, और वे आपको यह बताएँगे। जो तस्वीर अपनी टूलिंग में रखने पर अड़ा है उसने उल्टा फ़ैसला किया है, और यह पूछना बनता है कि उन्हें उसका कौन-सा हिस्सा आकर्षक लगा।\nयह फ़ासला किताबी नहीं है। भाग दो का हर इंसिडेंट इसी पर आकर गिरता है। Kaseya के ग्राहक, अस्सी कन्वेयंसिंग फ़र्म, Capita के पीछे की पेंशन स्कीमें: उनमें से हर एक के लिए उस दिन सिर्फ़ एक सवाल मायने रखता था, कि रिस्टोर चला या नहीं। तभी वह रिपोर्ट जिसे किसी ने नहीं माँगा था, इमारत में रखने लायक़ अकेला डॉक्यूमेंट बन जाती है।\nअगर आपका प्रोवाइडर रिस्टोर टेस्ट नहीं दिखा सकता, तो आप बैकअप नहीं ख़रीद रहे। आप कॉपी करना ख़रीद रहे हैं, और कौन-सा है यह आपको साल की सबसे बुरी सुबह पता चलेगा।\nज़िम्मेदार कोई नहीं दोष डालने के लिए एक जगह ख़रीदना भाग एक में मिले एक वाक्य से ज़्यादा का हक़दार है, क्योंकि जवाबदेही ही वह चीज़ है जिससे बचकर निकलने के लिए यह पूरा इंतज़ाम बना है। नैतिक रूप से नहीं। कॉन्ट्रैक्ट के रूप में।\nसर्विस लेवल एग्रीमेंट से शुरू कीजिए, और पढ़िए कि वह असल में क्या वादा करता है। लगभग हमेशा यह एक रिस्पॉन्स टाइम होता है। मानने के लिए चार घंटे, पहुँचने के लिए आठ, कुछ इस तरह। जवाब देना पूरी तरह उनके हाथ में है, तो उसका वादा सुरक्षित रूप से किया जा सकता है। ठीक करना नहीं है, तो उसका नहीं होता। ऐसी लाइन ढूँढिए जो उन्हें किसी नतीजे से बाँधे, सर्विस चलती है, डेटा वापस आता है, साइट कारोबार करती है, और ज़्यादातर कॉन्ट्रैक्ट में ऐसी एक भी लाइन कहीं नहीं होती।\nफिर लायबिलिटी कैप ढूँढिए। वह वहाँ होगी, और आमतौर पर पिछले बारह महीनों में आपकी चुकाई फ़ीस के बराबर, कभी-कभी उससे कम। तो उनके साथ सबसे बुरा यह हो सकता है कि जो आपने पहले ही दिया वह लौटाना पड़े। आपके साथ सबसे बुरा यह हो सकता है कि बिज़नेस ही चला जाए। ये दोनों संख्याएँ एक ही दुनिया की नहीं हैं, और उनके बीच का फ़ासला ही आपकी असली जोखिम वाली स्थिति है।\nएग्रीमेंट क्या वादा करता है, और हर पक्ष क्या खो सकता है एग्रीमेंट उन्हें असल में किससे बाँधता है चार घंटे में ख़राबी मानना वादा है आठ घंटे में पहुँचना वादा है सर्विस फिर चले, डेटा लौटे, साइट कारोबार करे वादा नहीं और सबसे बुरे दिन हर पक्ष क्या खोता है वे आपकी चुकाई लगभग बारह महीने की फ़ीस तक सीमित आप ऑर्डर, पेरोल, ग्राहक, पूरा बिज़नेस जवाब देना उनके हाथ में है, इसलिए उसका वादा होता है। ठीक करना नहीं है, इसलिए उसका नहीं होता। दोनों बार एक ही कॉन्ट्रैक्ट हैं, दोनों सिरों से देखे गए। रीसेल बाक़ी सब ऊपर की ओर खिसका देता है। अगर हाइपरस्केलर बंद है तो ग़लती हाइपरस्केलर की। अगर फ़ायरवॉल में दस वाली ख़ामी आती है तो ग़लती वेंडर की। अगर एक ट्रोजन वाला इंस्टॉलर साइन होकर एक आम अपडेट की तरह आता है, तो वह भी वेंडर। इनमें से हर बात सच है, और कोई भी आपके किसी काम की नहीं, क्योंकि उनमें से किसी कंपनी से आपका कभी कोई रिश्ता था ही नहीं। आपका रिश्ता उस फ़र्म से था जिसने आपकी तरफ़ से उन्हें चुना और इसके लिए रिबेट लिया।\nऔर इन सबके नीचे सबसे चुपचाप चलने वाला तंत्र है। जो ज़रूरत कभी लिखी ही नहीं गई, उसे पूरा न करने में आप नाकाम नहीं हो सकते। भाग एक का वह रिक्वायरमेंट डॉक्यूमेंट जो किसी ने नहीं लिखा, सिर्फ़ लापरवाही नहीं है, वह सुरक्षा है। कोई दर्ज ज़रूरत नहीं, तो कोई मापने लायक़ वादा नहीं। कोई मापने लायक़ वादा नहीं, तो कोई उल्लंघन नहीं। जिस डिज़ाइन पर किसी ने साइन नहीं किया, उससे हटा भी नहीं जा सकता।\nदेखिए जब आख़िरकार कहीं जवाबदेही आई तो क्या हुआ। Capita पर £14 मिलियन का जुर्माना लगा, और वह डेटा प्रोटेक्शन क़ानून के तहत इन्फ़ॉर्मेशन कमिश्नर की तरफ़ से आया, एक ऐसे अलर्ट पर जिस पर अट्ठावन घंटे तक किसी ने कार्रवाई नहीं की। किसी ग्राहक की तरफ़ से नहीं, और किसी सर्विस कॉन्ट्रैक्ट के तहत नहीं। पैसा सरकार के पास गया। वे 6.6 मिलियन लोग जिनका डेटा दरवाज़े से बाहर चला गया, और नतीजे झेल रही 325 पेंशन स्कीमें, न उसे लाने वाले थे और न उन्हें पैसा मिला।\nतो इंतज़ाम, शुरू से आख़िर तक। वेंडर एक ऐसे लाइसेंस के तहत प्रोडक्ट बेचता है जो किसी भी ख़ास काम के लिए उपयुक्तता से इनकार करता है। प्रोवाइडर कैप की हुई लायबिलिटी और रिस्पॉन्स टाइम के वादे पर घंटे बेचता है। इंश्योरर जो बचा उसकी क़ीमत लगाता है। और नुक़सान उस बिज़नेस पर आकर टिकता है जो हिल नहीं सकता, जो इस पूरी कड़ी में अकेला पक्ष है जिसे कभी किसी चीज़ से इनकार करने का मौक़ा नहीं मिला।\nकड़ी में हर कोई अपने हिस्से से इनकार करता है, और सब एक जगह आकर गिरता है हर परत अंजाम नीचे सरकाती है और अपना मार्जिन रखती है वेंडर लाइसेंस किसी भी काम की उपयुक्तता से इनकार करता है डिस्ट्रीब्यूटर प्रोडक्ट आगे बढ़ाता है, हिस्सा लेता है प्रोवाइडर कैप की हुई लायबिलिटी पर घंटे बेचता है इंश्योरर जो बचा उसकी क़ीमत लगाता है वह बिज़नेस जिसे सोमवार को दरवाज़े खोलने हैं कुछ बनाता है, लोगों को रोज़गार देता है, जल्दी हिल नहीं सकता और कड़ी में अकेला पक्ष है जो किसी चीज़ से इनकार नहीं कर सकता ऊपर की हर परत क़ानूनी रूप से बरी है। नुक़सान को फिर भी कहीं टिकना है। हर परत क़ानूनी रूप से बरी है, और हर एक को कुछ भी बनने से पहले पैसा मिलता है। अंजाम तब तक आगे बढ़ता रहता है जब तक किसी ऐसे तक न पहुँचे जो उसे आगे नहीं सरका सकता। इन सबमें एक आसान टेस्ट है, और उसके लिए किसी वकील की ज़रूरत नहीं।\nअगर कोई फ़र्म अपनी सिफ़ारिश पर भरोसा करती है, तो उसे उसके पीछे खड़े होने को तैयार होना चाहिए। सिफ़ारिश का मतलब यही है। आपने डिब्बा नहीं ख़रीदा, वेबसाइट वाला कोई भी आपको डिब्बा बेच सकता है। आपने किसी का यह फ़ैसला ख़रीदा कि यह आपके लिए सही डिब्बा है, और उन्हें उस फ़ैसले के पैसे मिले, और फिर उस वेंडर से भी मिले जिसका वह डिब्बा निकला।\nतो जब वह नाकाम हो और जवाब आए कि वेंडर ने सबको निराश किया, तो देखिए अभी क्या हुआ। जो हिस्सा आपने असल में ख़रीदा था, उससे इनकार कर दिया गया। फ़ैसला ठीक उसी पल भाप बनकर उड़ जाता है जब उसकी परीक्षा होती है, और बचती है एक फ़र्म जिसने एक प्रोडक्ट आगे बढ़ाया और रास्ते में अपना मार्जिन ले लिया।\nकोई MSP से Microsoft की गारंटी लेने को नहीं कह रहा। पर किसी हाइपरस्केलर की गारंटी लेने और अपनी ही सलाह के पीछे खड़े होने के बीच बहुत चौड़ा फ़ासला है, और हर दूसरा पेशा उसमें कहीं न कहीं रहता है। कंज़्यूमर यूनिट लगाने वाला इलेक्ट्रीशियन उसे चुनने के लिए निर्माता को दोष नहीं दे सकता। बीम तय करने वाला स्ट्रक्चरल इंजीनियर उस स्पेसिफ़िकेशन का मालिक है। वे अपना फ़ैसला उठाते हैं, क्योंकि फ़ैसला ही सर्विस था।\nतो पूछिए कि आपका प्रोवाइडर क्या उठाने को तैयार है। वेंडर का प्रोडक्ट नहीं, अपनी ख़ुद की सिफ़ारिश। जवाब, या उससे पहले की चुप्पी की लंबाई, आपको बताती है कि वे निजी तौर पर उसके बारे में क्या सोचते हैं।\nऔर फिर यह आपकी ग़लती है कॉन्ट्रैक्ट इसका चुपचाप वाला आधा हिस्सा है। ज़ोर वाला आधा उस दिन आता है जब सच में कुछ टूटता है, और वह फ़िक्स से पहले पहुँचता है।\nदेखिए ज़िम्मेदारी किस दिशा में जाती है। बाहर की ओर, हर उपलब्ध दिशा में, और मोटे तौर पर इसी क्रम में। वेंडर ने ख़राब पैच भेजा। सर्किट कैरियर का था। यह एक जानी-पहचानी समस्या है और सबके साथ हो रही है। कोई इसका अंदाज़ा नहीं लगा सकता था, यह उस ख़ामी के बारे में कहा गया जो एक्सप्लॉइट वाली सूची में इतने समय से थी कि उसकी दाढ़ी उग आई होती। पिछला प्रोवाइडर इसे ऐसे ही छोड़ गया था, जो छह महीने तक जायज़ जवाब है और तीसरे साल में भी दिया जा रहा है। फिर बाहर की दिशाएँ ख़त्म हो जाती हैं, और एक बचती है। आपने अपग्रेड को कभी मंज़ूरी नहीं दी। वह स्कोप से बाहर था, आपके स्टाफ़ ने लिंक पर क्लिक किया, और आपने कभी टिकट नहीं खोला।\nअसहज करने वाली बात यह है। इनमें से कुछ सच हैं। जिस ग्राहक ने लगातार तीन साल एक ही रिप्लेसमेंट को ठुकराया, वह उस फ़ैसले का मालिक है, और जो प्रोवाइडर ऐसा कहता है वह आपसे सीधी बात कर रहा है। तो सवाल यह नहीं है कि बहाना सही है या नहीं। सवाल यह है कि वह पहली बार कब कहा गया। आउटेज से पहले लिखित में आपके सामने रखा गया जोखिम, उसे ठीक करने और न करने की लागत के साथ, एक प्रोवाइडर का आपकी एस्टेट संभालना है। वही वाक्य आउटेज के एक हफ़्ते बाद भेजा जाए तो वह बचाव तैयार किया जा रहा है। वही शब्द, अलग तारीख़, उल्टा मतलब।\n“आपने कभी टिकट नहीं खोला” पर रुकना बनता है, क्योंकि यह बहाना है ही नहीं। यह ज़ोर से कहा गया ऑपरेटिंग मॉडल है। जब तक आप ध्यान न दें तब तक कुछ भी किसी का काम नहीं, यानी मॉनिटरिंग आप हैं, और आप एक ऐसी फ़र्म को हर महीने फ़ीस दे रहे हैं जिसकी डिटेक्शन लेयर एक ग्राहक का फ़ोन करना है। एक बार यह जवाब सुन लिया, तो आपको पता है कि सर्विस क्या है।\nइसका एक ज़्यादा सक्रिय रूप भी है, और यह जितना चलना चाहिए उससे कहीं बेहतर चलता है। आप एक रिव्यू बुलाते हैं यह पूछने के लिए कि पिछले छह महीने ऐसे क्यों गए, और जो एजेंडा लौटकर आता है वह किसी बिल्कुल और चीज़ के बारे में है: एक ज़रूरी सुरक्षा मामला, एक लाइसेंसिंग डेडलाइन जिसका किसी ने ज़िक्र नहीं किया था, एक ऐसे डिब्बे का एंड-ऑफ़-लाइफ़ नोटिस जो दो साल से एंड-ऑफ़-लाइफ़ है और अचानक इसी पखवाड़े ज़रूरी हो गया है। इसे सच्ची चिंता के साथ और एक कोटेशन लगाकर पेश किया जाता है, और यह घंटा खा जाता है। आप पैसा ख़र्च करने पर सहमत होकर निकलते हैं, और जिस बात के लिए आपने मीटिंग बुलाई थी वह कभी ज़ोर से कही ही नहीं गई।\nध्यान दीजिए कि गढ़े हुए संकट में हमेशा क्या समान होता है। उसे एक ख़रीद चाहिए, इसी तिमाही में चाहिए, और कमरे में किसी को कुछ भी मानने की ज़रूरत नहीं। असली जल्दबाज़ी अलग दिखती है, क्योंकि वह एक पहचान संख्या के साथ आती है, एक तारीख़ जब वह प्रकाशित हुई, आपकी एस्टेट की वे ख़ास मशीनें जिनमें वह है, और आपको बताने का इंतज़ार करते हुए उन्होंने पहले ही उसके बारे में क्या किया। गढ़ी हुई जल्दबाज़ी एक वेंडर डेडलाइन और एक गोल-मोल रक़म की शक्ल में आती है। पूछिए कि यह पहली बार उनके रडार पर कब आई। अगर जवाब वही हफ़्ता है जब आपने असहज सवाल पूछने शुरू किए, तो यह संयोग नहीं है और कभी होना भी नहीं था।\nतो अपनी ख़ुद की फ़ाइल रखिए, और ज़रूरत पड़ने से पहले शुरू कीजिए। हर बार जब आपसे कहा जाए कि कोई चीज़ ठीक है, उसे ईमेल में माँगिए। हर बार जब आप कुछ मना करें, लिख लीजिए कि आपको क्या दिखाया गया और उसका क्या कोटेशन था। इसमें एक मिनट लगता है और इसका मतलब है कि जिस दिन सब आपकी ग़लती बन जाए, आप तारीख़ माँग सकते हैं, और जवाब या तो मौजूद होता है या नहीं। जो फ़र्म यह काम ठीक से करती है वह वैसे भी पहले पहुँच जाती है। वे शुरुआत ऐसे करते हैं: हमसे यह छूट गया, हम यह बदल रहे हैं, और यह आपके पूछना ख़त्म करने से पहले कह देते हैं। इसकी क़ीमत उन्हें एक वाक्य है, और ठीक इसी वजह से इतने कम लोग उसे ख़र्च करते हैं।\nऔर जब आपको गढ़ा हुआ संकट मिले, या दोष किसी ऐसी चीज़ के लिए आप पर आए जो कभी आपके सामने रखी ही नहीं गई, तो उसे कमरे में कहिए। बाद में शिकायत की तरह नहीं और फ़ाइल के लिए नोट की तरह नहीं। उनसे पूछिए कि क्या वे इसे प्रोफ़ेशनल मानते हैं, क्या यह वह जवाब है जो वे ख़ुद को दिए जाने पर मान लेते, और इसमें ईमानदारी कहाँ है। कोई असहज होगा, और पूछने का पूरा मक़सद यही है। जिस फ़र्म में ज़रा भी आत्मसम्मान बचा है वह इसे स्वीकारती है, कहती है ठीक बात है, और अगले महीने बदलकर आती है। एक मिनट के अंदर आपको पता चल जाएगा कि सामने किस तरह के लोग बैठे हैं।\nफिर भी देखना शुरू कर दीजिए। उसी हफ़्ते। एक बुरी मीटिंग से फ़ैसला नहीं होता, पर टालमटोल कभी बुरा दिन नहीं था। वह आपके बारे में एक फ़ैसला था: कि आप कैसा महसूस करते हैं उसे संभालना, जो आपने ख़रीदा उसे ठीक करने से सस्ता है, और आप इसे सह लेंगे। फ़र्में यह हिसाब इसलिए नहीं पलटतीं कि किसी ग्राहक ने मुँह बनाया। किसी प्रोवाइडर को ठीक से बदलने में महीने लगते हैं जो आपने अभी ख़र्च करने शुरू नहीं किए, और यह करने का समय तब है जब आप अभी इतने शांत हैं कि अच्छा चुन सकें, न कि उस आउटेज के बाद के पखवाड़े में जो आख़िरकार आपका मन बना देता है।\nअगली मीटिंग में ये पूछिए इनमें से किसी में आपका कुछ भी ख़र्च नहीं होता, और इनमें से कुछ भी पूछने के लिए आपको इंजीनियर होने की ज़रूरत नहीं।\nमैंने सवाल पेज पर नीचे लिखने की जगह एक स्प्रेडशीट में रखे हैं: पंद्रह क्षेत्रों में 120 सवाल, हर एक के साथ यह कि एक क़ाबिल जवाब कैसा सुनाई देता है और एक टालमटोल कैसा, और एक कॉलम यह दर्ज करने के लिए कि आपको कौन-सा मिला।\n\u0026#8615; सप्लायर से सवाल, लंबा संस्करण msp-supplier-questions.xlsx · 26 kB इसे याद दिलाने वाली शीट मानिए, स्क्रिप्ट नहीं। इसे ऊपर से नीचे पढ़िए, वे दर्जन भर चिह्नित कीजिए जो सच में आपके कॉन्ट्रैक्ट से जुड़े हैं, और वही पूछिए। कोई एक घंटे में सौ सवाल नहीं झेलता, और अगर उन्होंने कोशिश की तो आप कम सीखेंगे। इसे मीटिंग में निकालने की जगह मीटिंग से पहले भेज दीजिए। जो प्रोवाइडर काम ठीक से करता है वह इस सूचना से ख़ुश होगा, और वे इस सूचना को कैसे लेते हैं, यह अपने आप में एक जवाब है।\nउसमें एक सवाल पूछता है कि उनकी कौन-सी सिफ़ारिशें उन्हें वेंडर से रिबेट, क्रेडिट, मार्जिन या टारगेट दिलाती हैं। यही वह सवाल है जो कमरे का तापमान बदल देता है, और ऐसा नहीं होना चाहिए। जिस प्रोवाइडर के पास छिपाने को कुछ नहीं, वह सीधा जवाब देता है, क्योंकि वह वैसे भी वही सिफ़ारिश करने वाला था और चाहेगा कि आपको पता हो। पूछते समय देखिए क्या होता है। जवाब प्रतिक्रिया से कम मायने रखता है।\nजो प्रोवाइडर काम ठीक से करता है उसके पास यह सब हाथ में होता है। पहले से, आज ही, बिना तैयारी के। ज़रूरतें लिखी हुई, विकल्पों की लागत निकाली हुई, तुलना में ओपन सोर्स वाली लाइन, एड्रेस प्लान डुअल-स्टैक, रिमोट मैनेजमेंट टूल पैच किया हुआ और जोखिम रजिस्टर में जहाँ उन्हें होना चाहिए। पूछिए, और एक ही मीटिंग में आपको पता चल जाएगा कि आप किस तरह के लिए पैसा दे रहे हैं।\nऔर अगर पूछना ही उन्हें परेशान करता है, तो आपको जो कुछ जानना था वह सब पता चल गया।\nहर अकाउंट चुप पड़ जाता है यह सब मानकर चलता है कि ज़रूरत पड़ने पर आप छोड़ सकते हैं। ज़रूरत पड़ने से पहले इसे परखना बनता है, क्योंकि छोड़ना वह जगह है जहाँ मैनेज्ड सर्विस कॉन्ट्रैक्ट टेक्नोलॉजी के बारे में रहना बंद कर देता है।\nमान लीजिए कि कभी न कभी आपको इसकी ज़रूरत पड़ेगी। ये सारे इंतज़ाम एक ही तरफ़ बहते हैं, चाहे आप किसी के साथ भी साइन करें। काम जीतते समय जो ध्यान आपको मिला वह डायरेक्ट डेबिट चलने के बाद पतला हो जाता है, और आप उनकी किताबों में एक ऐसी एस्टेट की जगह जिसके बारे में कोई सोच रहा हो, एक मासिक रक़म बनकर बैठ जाते हैं। कोई बैठकर परवाह करना बंद करने का फ़ैसला नहीं करता। सबसे अच्छा इंजीनियर वहाँ जाता है जहाँ शोर है, रिव्यू चुपचाप होने बंद हो जाते हैं, और आपकी मशीनें उसी पर बैठी रहती हैं जो साइन करने वाले साल का सही जवाब था, जबकि बाक़ी पेशा आपके बिना आगे बढ़ जाता है।\nसमझिए कि चुप अकाउंट असल में क्या है, क्योंकि यह शब्द तारीफ़ जैसा लगता है और है नहीं। चुप अकाउंट वह है जिसकी किसी ने जाँच नहीं की। बैकअप हर रात हरे चलते हैं और किसी ने एक को भी किसी फ़ालतू मशीन पर रिस्टोर करके चालू होते नहीं देखा। फ़ेलओवर जोड़ी का कभी फ़ेलओवर नहीं हुआ, क्योंकि इसके लिए आउटेज बुक करना पड़ता है और किसी को वहाँ होना पड़ता। फ़र्मवेयर वही है जो आया था, सर्टिफ़िकेट उसने रिन्यू किया जिसे याद आया, और डॉक्यूमेंटेशन एक ऐसे नेटवर्क का वर्णन करता है जो दो बार जगह बदलने से पहले हटा दिया गया था। लाइसेंस की गिनती उस साल के बाद से नहीं देखी गई जब आपके पास ग्यारह कर्मचारी ज़्यादा थे। इसमें से कुछ भी टिकट नहीं बनाता, तो इसमें से कुछ भी किसी की स्क्रीन तक नहीं पहुँचता, और अकाउंट हर अंदरूनी रिव्यू से आराम से निकल जाता है क्योंकि सिर्फ़ यह मापा जा रहा है कि आपने फ़ोन किया या नहीं।\nफिर आपको पता चलता है। किसी रिव्यू में नहीं, क्योंकि कोई हुआ ही नहीं। आपको उस सुबह पता चलता है जब रिस्टोर की ज़रूरत पड़ती है, या जब ऑडिटर डायग्राम माँगता है, या जब छह साल से बिना छुए चल रही कोई चीज़ रुक जाती है और इमारत में बचा कोई नहीं जानता कि वह क्या कर रही थी। चुप अकाउंट उतना ही भुगतान करता है जितना व्यस्त, और उसे संभालने में कहीं कम लगता है। पूरा प्रोत्साहन यही है, और यह इस बात से दूर इशारा करता है कि कोई कभी ढक्कन खोले।\nवह सलाह जिससे उनका पैसा घटता है परीक्षा को उल्टा रखिए, और पूछिए कि आपको असल में क्या ख़रीदना चाहिए था। परेशानी का न होना नहीं। कोई भी ग़ायब रह सकता है। आप जिसके लिए पैसा दे रहे हैं वह कोई ऐसा है जो बिज़नेस को इतना जानता हो कि वे चीज़ें लेकर आए जो आपने माँगी नहीं: महीने के आख़िर का काम करने का ऐसा तरीका जो गिरना बंद कर दे, एक लाइसेंस जिसका आप पैसा दे रहे हैं और जिसे पिछले से पिछले साल से किसी ने खोला नहीं, डेटा रखने का सस्ता तरीका, उस डिब्बे की योजना जिसे सबने चुपचाप रीबूट न करने पर सहमति बना ली है। इसमें से कुछ बताने में उनकी कमाई घटती है, और ठीक इसी वजह से यह ईमानदार संकेत है। ख़ुद से पूछिए कि आपके प्रोवाइडर ने आख़िरी बार कब आपके सामने ऐसी सिफ़ारिश रखी जिससे उनका अपना इनवॉइस छोटा हुआ।\nइसका सबसे आम रूप छूट नहीं है। यह किसी का बैठकर देखना है कि आप पहले से क्या चलाते हैं। ज़्यादातर कंपनियों के पास सॉफ़्टवेयर की कमी नहीं, कमी ऐसे किसी की है जो कभी उस सॉफ़्टवेयर के साथ ठीक से बैठा हो जो उनके पास है: वह लाइसेंस टियर जिसमें कोट किया जा रहा फ़ीचर पहले से शामिल है, मूल प्रोजेक्ट में पैसा दिया गया मॉड्यूल जो कभी लागू नहीं हुआ, फ़ाइनेंस सिस्टम का वह वर्कफ़्लो जो दोबारा टाइप करना ख़त्म कर देता अगर कोई उसे दो दिन देता, दूसरा सब्सक्रिप्शन जो इसलिए ख़रीदा गया कि किसी ने पहले सप्लायर से नहीं पूछा कि क्या उनका प्रोडक्ट भी यह करता है, वह रिपोर्टिंग जो कभी किसी ने नहीं बनाई इसलिए पूरी कंपनी स्प्रेडशीट में एक्सपोर्ट करके वहीं काम करती है। एक असली प्रोवाइडर इसी ढेर से शुरू करता है। आपके पास क्या है, उससे क्या करवाया जा सकता है, वह क्या कभी नहीं करेगा, और अगर जिसका आप पहले से पैसा दे रहे हैं वह उस तरह कॉन्फ़िगर हो जैसा उसे होना था तो समस्या का कितना हिस्सा चला जाता है, यह सब किसी के प्राइस लिस्ट खोलने से पहले।\nइससे पता चलता है कि वे आपसे कैसे कमाना चाहते हैं, क्योंकि वह काम असुविधाजनक क़िस्म का है। इसका मतलब है किसी और का डॉक्यूमेंटेशन पढ़ना, ऐसा सिस्टम सीखना जिसे वे बेचते नहीं और जिसे जानने का उन्हें कुछ नहीं मिलता, और उसे दिन भर इस्तेमाल करने वाले लोगों के साथ बैठकर पता करना कि शुक्रवार चार बजे असल में क्या होता है। इसमें से किसी के पीछे कोई रिबेट नहीं आता। और यही वह सब है जो आप सोचते थे कि ख़रीद रहे हैं। और कभी-कभी आख़िर में जवाब सच में एक नया सिस्टम होता है, उस हालत में नया सिस्टम ख़रीदिए। ख़र्च करना समस्या नहीं है। क्रम है: आप क्या चलाते हैं, वह अब भी क्या करेगा, वह सच में कहाँ कम पड़ता है, और उसके बाद ही क्या बाहर जाकर लाना है। जो सिफ़ारिश पहले तीन छोड़ देती है वह कभी आकलन थी ही नहीं। वह एक कैटलॉग थी जिसके ऊपर आपका नाम टाइप कर दिया गया।\nऔर जिस प्रोवाइडर ने कभी बैठकर यह नहीं सीखा कि बिज़नेस करता क्या है, वह इसमें से कुछ नहीं कर सकता। यह जानने में कि आपके पास नब्बे मेलबॉक्स हैं और यह जानने में कि किस दिन के किस घंटे ऑर्डर लेने वाला सिस्टम खोना सच में चोट पहुँचाएगा, फ़र्क़ है। एक इन्वेंटरी है, दूसरा समझ, और सिर्फ़ दूसरा पैसे के लायक़ सलाह देता है। जिस फ़र्म ने तीन साल में कुछ प्रस्तावित नहीं किया, जो नहीं बता सकती कि आप क्या बेचते हैं या आपका व्यस्त मौसम कब आता है, जो बत्तियाँ जलाए रखती है और हर महीने उसी दिन इनवॉइस भेजती है, वह पार्टनर नहीं है और उसने दिखावा करना भी छोड़ दिया है। वह फ़ोन नंबर लगा हुआ एक सब्सक्रिप्शन है। रखने लायक़ नहीं।\nउल्टी नाकामी बेहतर सूट में आती है। वह प्रोवाइडर जो कभी चुप ही नहीं रहता, जिसके पास हर तिमाही आपके लिए कुछ है, और जिसका आपके पूछे हर सवाल का जवाब एक पार्ट नंबर के साथ लौटा। यह ध्यान जैसा दिखता है। सलाह को बेचने से जो अलग करता है वह उसकी मात्रा नहीं है, और स्लाइड कितनी अच्छी हैं यह भी नहीं। बात यह है कि क्या सिफ़ारिश यह बनकर लौट सकती है कि इसे रहने दीजिए, इस साल आपको कुछ नहीं चाहिए, और वह पैसा कोने में पड़ी उस चीज़ पर बेहतर ख़र्च होगा जिसका किसी ने बजट नहीं बनाया। अगर पूरे रिश्ते में एक भी सिफ़ारिश ने उनकी एक भी बिक्री नहीं गँवाई, तो आपको सलाह नहीं दी जा रही। आपको एक सूची पर से गुज़ारा जा रहा है, और भाग एक इस बारे में है कि वे सूचियाँ कहाँ से आती हैं। एक पार्टनर कभी-कभी आपको ख़र्च करने से रोकता है। बाक़ी सबके लिए आप एक ऐसा अकाउंट हैं जो जो दिखाया जाए वह ख़रीद लेता है, यानी सर्विस डेस्क लगी हुई एक दुधारू गाय, और ठीक यही होने के लिए इसमें शामिल किसी को भी बेईमान होने की ज़रूरत नहीं।\nएक ख़राब प्रोवाइडर से छुटकारा सोचिए कि असल में क्या-क्या होना है। सब कुछ। हर सिस्टम के एडमिन क्रेडेंशियल सौंपे जाएँ। ऐसा डॉक्यूमेंटेशन जो बताए कि एस्टेट कैसे बनी है, यह मानते हुए कि वह मौजूद है। डोमेन नामों का नियंत्रण, और उस अकाउंट का जिसमें DNS रहता है। सर्टिफ़िकेट की प्राइवेट की। सब्सक्रिप्शन प्रोवाइडर के पार्टनर एग्रीमेंट से निकालकर ऐसी टेनेंसी में जो आपकी हो। हर मशीन से उनका एजेंट हटाया जाए, उन्हीं के हाथों। और मौजूदा प्रोवाइडर अपने उत्तराधिकारी के साथ, विस्तार से, हफ़्तों तक सहयोग करे, जबकि इसके लिए उसे कुछ नहीं मिल रहा और उसे अभी-अभी बताया गया है कि उसका काम ख़त्म।\nजाते समय क्या हटना है, और वह किसके पास है जिस फ़र्म को आप छोड़ रहे हैं उसके पास हर एडमिन क्रेडेंशियल डॉक्यूमेंटेशन, अगर कोई लिखा गया डोमेन, और DNS अकाउंट सर्टिफ़िकेट की प्राइवेट की उनकी पार्टनर डील वाले लाइसेंस आपकी हर मशीन पर उनका एजेंट और उनके इंजीनियरों के हफ़्ते हटना है बिना भुगतान आपके पास, या आपके नए प्रोवाइडर के पास नोटिस पीरियड ख़त्म होने से पहले और उस दिन उन्हें अभी-अभी बताया गया है कि उनका काम ख़त्म जो इंजीनियर आपकी एस्टेट जानता था वह ऐसे काम पर है जिसका पैसा मिलता है आप जो माँगते हैं उसका आधा चार्ज करने लायक़ निकलता है इसमें से कुछ भी तोड़फोड़ नहीं वे जितने बुरे रहे, उस सूची का उतना कम हिस्सा सौंपने को मौजूद है। जिस फ़र्म ने आपकी ज़रूरतें कभी नहीं लिखीं, उसने हैंडओवर पैक भी नहीं लिखा, और गड़बड़ ही खाई है। तो पैक आज माँगिए, जब तक सबके बीच अभी बनती है, और उसका एक पेज एक लाइव मशीन से मिलाइए। यह सब उस फ़र्म के पास है जिसे अभी-अभी बताया गया है कि उसका काम ख़त्म, और इसमें से कोई भी काम ऐसा नहीं जिसके लिए कोई उन्हें पैसा दे रहा हो। अब वह हिस्सा जिससे आपको सबसे ज़्यादा चिंता होनी चाहिए। प्रोवाइडर जितना बुरा होगा, यह निकलना उतना ही मुश्किल होगा, क्योंकि कमियाँ वही कमियाँ हैं। जिस फ़र्म ने कभी आपकी ज़रूरतें नहीं लिखीं, उसने हैंडओवर पैक भी नहीं लिखा। जिस फ़र्म ने क्रेडेंशियल एक साझा वॉल्ट में रखे, उसके पास उन्हें किसी और को देने का कोई साफ़ तरीका नहीं। जिस फ़र्म के पास न प्लेबुक है न रिस्टोर टेस्ट, उसके पास सौंपने को एक्सेस और शुभकामनाओं के सिवा कुछ नहीं। गड़बड़ ही खाई है। किसी ने बैठकर इसे ऐसे डिज़ाइन नहीं किया, और यह उससे बेहतर काम करता है जितना अगर करते तो करता।\nतो मान लीजिए कि डॉक्यूमेंटेशन वाली लाइन टिकेगी नहीं। डॉक्यूमेंटेशन सबसे पहले बिना लिखा रह जाता है और सबसे आख़िर में जाँचा जाता है, और जाते समय जो आएगा वह एक ऐसी एस्टेट का वर्णन करेगा जो उसके बिना आगे बढ़ चुकी है। यह अच्छी स्थिति है। बुरी स्थिति एक ऐसा पैक है जो पूरा दिखता है और ग़लत है: एक डायग्राम जिसमें एक स्विच है जो दो साल पहले कबाड़ में गया, एक ऐसे सर्वर की रनबुक जो तब से दोबारा बनाया जा चुका, ऐसे अकाउंट से भरी क्रेडेंशियल शीट जिनसे कोई लॉग इन नहीं कर सकता। ग़लत डॉक्यूमेंटेशन कुछ न होने से बुरा है, क्योंकि आप उस पर काम करते हैं। कुछ न होना कम से कम आपको जाकर देखने भेजता है।\nनिकलने की क़ीमत ऐसे लगाइए जैसे उसमें कुछ भी नहीं बचेगा। कोई रैक में घूमता है, लाइव मशीनों से कॉन्फ़िगरेशन पढ़ता है, फ़ायरवॉल नियम, DHCP स्कोप और ज़ोन फ़ाइलें एक्सपोर्ट करता है, और लिखता है कि असल में क्या चल रहा है। यह हफ़्तों का काम है, और निकलते समय ये हफ़्ते आप नोटिस पर रहते हुए ख़र्च कर रहे होते हैं, जबकि जिन अकेले लोगों को जवाब पता हैं उन्हें पहले ही बताया जा चुका है कि उनका काम ख़त्म। इसकी जगह यह अभी कीजिए। पैक आज माँगिए, फिर उसका एक पेज लेकर एक लाइव मशीन से मिलाइए। अगर वह सही निकले, तो आपने कुछ जानने लायक़ सीखा। अगर वह उसे रखने में लगे बिट्स के लायक़ भी न निकले, तो आपने वह भी सीखा, और आपने यह पखवाड़े की जगह ठीक करने के लिए एक साल रहते सीखा।\nसहयोग वाली लाइन वह है जो सच में चोट पहुँचाएगी, और वही वह है जिसकी कोई क़ीमत नहीं लगाता। इसे एक अनुरोध की तरह पढ़िए: जिस फ़र्म ने अभी-अभी अकाउंट खोया है, उससे कहा जा रहा है कि वह हफ़्तों तक उन्हीं लोगों को इसे समझाए जो इसे उससे छीनकर ले गए। किसी को मना करने की ज़रूरत नहीं। अकाउंट छोड़कर जाने वालों के ढेर में चला जाता है, जो इंजीनियर आपकी एस्टेट जानता था वह ऐसे काम पर चला जाता है जिसका अब भी पैसा मिलता है, और आपके सवाल उसके पास पहुँचते हैं जो बचा है। जवाब घंटों की जगह दिनों में आते हैं। हैंडओवर कॉल तीन हफ़्ते आगे बुक होती है। आप जो माँगते हैं उसका आधा चार्ज करने लायक़ निकलता है, और वह अकेला इंसान जिसने इसे बनाया था, मार्च में चला गया। इसमें से कुछ भी तोड़फोड़ नहीं है। इसमें से हर चीज़ की क़ीमत आपको ठीक उतनी पड़ती है जितनी तोड़फोड़ की पड़ती।\nआपका नया प्रोवाइडर इसे उठाता है, और फिर आप इसे दोबारा उठाते हैं। उनका पहला महीना यह समझने में जाता है कि उन्हें विरासत में क्या मिला। यह ऐसी खोजबीन है जिसका उनके पास आपको दिखाने को कुछ नहीं, तो या तो वे इसकी ईमानदार क़ीमत लगाते हैं और मौजूदा प्रोवाइडर के रिन्यूअल के मुक़ाबले महँगे दिखते हैं, या इसे निगल लेते हैं और काम पहले से पीछे रहकर शुरू करते हैं। आप दोनों तरह पैसा देते हैं। तो सहयोग ज़रूरत पड़ने से पहले ख़रीद लीजिए। इसे आते समय कॉन्ट्रैक्ट में डालिए, जाते समय नहीं: एक तय हैंडओवर अवधि, उसे करने वाला एक नामित व्यक्ति, एक डे रेट जो तब तय हुआ जब उन्हें अभी आपके साइन की ज़रूरत थी, और एक्सेस जो तब तक चालू रहे जब तक आने वाली फ़र्म न कहे कि अब जा सकता है। ओवरलैप के लिए पैसा दीजिए और उसे सस्ता गिनिए। और स्विचओवर पर कभी ऐसे न पहुँचिए कि आपकी अपनी किसी चीज़ की अकेली चाबी जाने वाले प्रोवाइडर के पास हो।\nकाग़ज़ी कार्रवाई भी अपना हिस्सा करती है। हफ़्तों की जगह महीनों में मापे गए नोटिस पीरियड, ऑटो-रिन्यूअल की तारीख़ें जो तब निकल जाती हैं जब आप अभी फ़ैसला कर ही रहे हैं, और एक हैंडओवर जिसकी क़ीमत प्रोफ़ेशनल सर्विस के रूप में उस डे रेट पर लगती है जो कोई आपके नोटिस देने के बाद तय करता है। इसमें से कुछ भी असामान्य नहीं, और इसमें से कुछ भी कोई नियम नहीं तोड़ता।\nतो निकलने को तब परखिए जब रिश्ता ठीक है और कोई नाराज़ नहीं। हैंडओवर पैक अभी माँगिए, लिखित में, एक वादे की तरह नहीं बल्कि एक डिलीवरेबल की तरह। पूछिए कि आपके डोमेन का रजिस्ट्रेंट असल में कौन है। पूछिए कि आपके लाइसेंस आपकी अपनी टेनेंसी में हैं या उनके पार्टनर एग्रीमेंट के तहत, और उन्हें हटाने में क्या लगता है। जो प्रोवाइडर काम ठीक से करता है वह तीनों का जवाब बिना सोचे देगा, क्योंकि जिस फ़र्म को अपने काम पर भरोसा है उसके पास छोड़ना मुश्किल बनाने की कोई वजह नहीं।\nऔर अगर जवाब धुँधले हों, तो याद रखिए कि अगला हिस्सा इस बारे में क्या कहता है कि आप शिकायत किससे करें।\nबेचने के लिए कोई नियामक नहीं है अब तक कुछ खटक रहा होना चाहिए था। इस सीरीज़ की हर वह नाकामी जिसके साथ कोई औपचारिक फ़ैसला जुड़ा है, एक सुरक्षा नाकामी है। Advanced पर ICO। Capita पर ICO। टूलिंग पर CISA। बेचने पर, शॉर्टलिस्ट, रिबेट, अकेला विकल्प, रिन्यूअल, कुछ भी नहीं। किसी ब्रिटिश MSP के ख़िलाफ़ एक भी एनफ़ोर्समेंट कार्रवाई नहीं।\nऐसा इसलिए नहीं कि बेचना साफ़-सुथरा है। ऐसा इसलिए है कि इसे देखना किसी का काम नहीं।\nउपभोक्ता क़ानून आपके दरवाज़े पर रुक जाता है। Consumer Rights Act 2015 उपभोक्ताओं की रक्षा करता है, और मैनेज्ड सर्विस ख़रीदने वाली लिमिटेड कंपनी उपभोक्ता नहीं है। Digital Markets, Competition and Consumers Act 2024 ने अप्रैल 2025 में CMA को सीधे एनफ़ोर्समेंट के अधिकार दिए, जो सीधे आक्रामक बिक्री तरीकों, भ्रामक जानकारी और साफ़ तौर पर एकतरफ़ा कॉन्ट्रैक्ट शर्तों पर निशाना साधते हैं। वे उपभोक्ता अधिकार हैं। पहले साल का CMA का अपना ब्योरा संख्याओं जितना ही अपनी भाषा के लिए पढ़ने लायक़ है: चौदह जाँचें, दो सेटलमेंट, £760,000 “refunded to consumers”, £4.7 मिलियन के जुर्माने, 157 सलाह और चेतावनी वाले पत्र। हर बार उपभोक्ता। वह तीस लोगों वाला मैन्युफ़ैक्चरर नहीं जिसने पिछले वसंत पाँच साल की मैनेज्ड सर्विस पर साइन किया।\nटेलीकॉम वह अकेला कोना है जिसके पास कोई ब्रिटिश नियामक कभी पहुँचा है। यह दिखाता है कि जब किसी के पास यह ज़िम्मेदारी हो तो एनफ़ोर्समेंट कैसा दिखता है। जुलाई 2015 में Ofcom ने एक छोटे बिज़नेस टेलीकॉम प्रोवाइडर पर £200,000 का जुर्माना लगाया, “around 100,000 small businesses” के ग्राहक आधार को लैंडलाइन सर्विस ग़लत तरीके से बेचने के लिए, और उसे प्रभावित ग्राहकों को मुआवज़ा देने और अपनी बिक्री सामग्री दोबारा लिखने को कहा। सही व्यवहार, सही आकार के ग्राहक, ग़लत उद्योग, और ग्यारह साल पहले।\nIT सर्विसों के लिए ऐसा कुछ नहीं है। जहाँ आप बैठे हैं वहाँ से जोड़िए। कोई कूलिंग-ऑफ़ पीरियड नहीं। आगे ले जाने के लिए कोई ओम्बड्समैन नहीं। अधिकार क्षेत्र वाला कोई नियामक नहीं। किसी पर यह बताने की कोई ज़िम्मेदारी नहीं कि वेंडर उन्हें क्या देता है। सीखने के लिए कोई प्रकाशित फ़ैसले नहीं, क्योंकि किसी फ़ैसले के आने की कोई जगह ही नहीं। कॉन्ट्रैक्ट सप्लायर ने बनाया, और उसमें अकेला उपाय मुक़दमा करना है, यानी ख़र्च, साल, और एक क़ानूनी बजट जो छोटे बिज़नेस के पास नहीं, जैसा सप्लायर अच्छी तरह जानता है।\nफ़ाइनेंशियल सलाह की ठीक यही समस्या थी और उसने इससे निपटा। Retail Distribution Review, यानी RDR, 2012 के अंत में लागू हुआ और उसने वह कमीशन ख़त्म कर दिया जो प्रोडक्ट प्रोवाइडर सलाहकारों को देते थे। हल पेचीदा नहीं था: बताइए कि सलाहकार को कौन पैसा देता है, और प्रोडक्ट प्रोवाइडर को जवाब बनने से रोकिए।\nIT के लिए कोई RDR नहीं आएगा। कोई आपके MSP से यह घोषित करवाने नहीं आ रहा कि वेंडर उन्हें क्या देता है, और Cyber Security and Resilience Bill, जो अभी संसद से गुज़र रहा है और जो मैनेज्ड सर्विस प्रोवाइडरों को NIS Regulations के दायरे में लाएगा, पहचान और रिपोर्टिंग के बारे में है, इस बारे में नहीं कि सलाह के पैसे कौन दे रहा है।\nतो जब कोई आपसे कहे कि इस देश में टेक्नोलॉजी बेचे जाने के तरीके में किसी समस्या का कोई सबूत नहीं, तो वह सही है। इसका कोई मतलब नहीं। कोई सबूत इसलिए नहीं क्योंकि कोई इंस्पेक्टर नहीं, कोई ऐसा शिकायत का रास्ता नहीं जो किसी सार्वजनिक डॉक्यूमेंट पर ख़त्म हो, और कोई रजिस्टर नहीं कि वही कॉन्ट्रैक्ट साइन करने वाले बाक़ी लोगों के साथ क्या हुआ। जिस बाज़ार की कोई निगरानी नहीं करता, वहाँ सबूत का न होना बस देखने वाले का न होना है।\nयह इस पेशे के बारे में क्या कहता है इनवॉइस हटा दीजिए और देखिए कि इस इंतज़ाम में असल में कौन खड़ा है।\nएक सिरे पर, वे बिज़नेस जो चीज़ें बनाते और करते हैं। पुर्ज़े मशीन करने वाली एक फ़र्म। एक गैराज। लोगों को खाना खिलाने वाली एक रसोई। शुक्रवार को किसी को नए घर में पहुँचाने वाले सॉलिसिटर। इनमें से हर एक कुछ ऐसा बनाता है जिसकी ओर आप उँगली उठा सकते हैं, और इनमें से हर एक इस पोस्ट वाला जोखिम उठा रहा है, क्योंकि कड़ी में वही अकेले हैं जो किसी चीज़ से इनकार नहीं कर सकते।\nदूसरे सिरे पर, कई परतें जो कुछ भी नहीं बनातीं। एक वेंडर जिसका लाइसेंस किसी भी ख़ास काम के लिए उपयुक्तता से इनकार करता है। एक डिस्ट्रीब्यूटर जो एक डिब्बे को गोदामों के बीच घुमाता है और हिस्सा लेता है। एक पार्टनर प्रोग्राम जो किसी को एक ब्रांड को दूसरे पर तरजीह देने के पैसे देता है। एक प्रोवाइडर जो कैप की हुई लायबिलिटी पर घंटे बेचता है। हर एक अपना मार्जिन लेता है और अंजाम नीचे सरका देता है, और अंजाम तब तक आगे बढ़ता रहता है जब तक उस अकेले इंसान तक न पहुँचे जिसे सोमवार को दरवाज़े खोलने हैं।\nएक पेशा ऐसे लोगों का समूह है जो कुछ करना जानते हैं, जिन्हें यह जानने के पैसे मिलते हैं, और जो अपनी कही बात के पीछे खड़े रहते हैं क्योंकि उस पर उनका नाम है। उसके सामने रखें तो यह उद्योग ज़्यादातर सर्टिफ़िकेशन वाला एक डिस्ट्रीब्यूशन चैनल है।\nदेखिए यहाँ तक पहुँचने के लिए क्या छोड़ दिया गया। पहले हुनर, क्योंकि आप ट्रेनिंग पर ख़र्च का एक तिहाई काटकर सीधे चेहरे से विशेषज्ञता नहीं बेच सकते। फिर फ़ैसला, जो काम की शुरुआत में बेचा जाता है और जिस पल उसकी परीक्षा होती है उसी पल उससे इनकार कर दिया जाता है। और आख़िर में यह कहने की सीधी-सी इच्छा कि “यह आपके लिए सही जवाब नहीं है” जब सही जवाब कम पैसा देता हो, जो सलाह को बेचने से अलग करने वाली अकेली चीज़ है, और जिसकी क़ीमत हिम्मत के सिवा कुछ नहीं।\nइससे निकलने का रास्ता चमक-दमक वाला नहीं है और पूरी तरह उपलब्ध है। जो मशीनें अपनी रख सकते हैं, रखिए। अपनी चाबियाँ ख़ुद रखिए। डॉक्यूमेंटेशन ऐसी जगह रखिए जहाँ आप किसी को फ़ोन किए बिना पहुँच सकें। अपने सिस्टम के बारे में इतना सीखिए कि पहचान सकें कब आपको कोई बेतुकी बात बताई जा रही है। उन्हें ख़ुद चलाने के लिए नहीं, बस यह पहचानने के लिए कि जहाँ संख्या माँगी गई वहाँ एक विशेषण आ रहा है। यह हर किसी के अलमारी में सर्वर होने का पुराना ज़माना याद करना नहीं है। यही अकेला दबाव है जो उपलब्ध है, और यह सस्ता है।\nइस पेशे में ऐसे लोग हैं जिन्होंने कभी काम ठीक से करना नहीं छोड़ा, और एक बार पता हो कि क्या देखना है तो उन्हें पहचानना मुश्किल नहीं। वे उबाऊ विकल्प कोट करते हैं। वे आपको बताते हैं कि किसी चीज़ की लागत क्या है, न कि उसकी क़ीमत क्या लगाई गई है। वे आपके पूछने से पहले जोखिम लिखित में रखते हैं, और जब आख़िरकार कोई जाँच करता है तो उन्हें राहत मिलती है।\nबाक़ियों ने चीज़ें ऐसे जमा दी हैं कि कोई कभी जाँच न करे। आपको यह पूछने का हक़ है कि इसकी लागत क्या है, कौन किसे पैसा दे रहा है, और जब यह टूटता है तो क्या होता है। इस इंतज़ाम में कोई ख़ुद से यह नहीं बताएगा, और इसका मतलब यह नहीं कि यह आपका हक़ नहीं है।\nIs Your MSP Lying To You — 3 parts\nक्या आपका MSP प्रीमियम प्रोडक्ट बेचने के लिए आपसे झूठ बोल रहा है? आपके MSP ने आपके लिए क्या बनाया, और उस तक और कौन पहुँच सकता है जब कुछ टूटता है, तब असल में बोझ कौन उठाता है?you are here स्रोत 28 अगस्त 2026 को देखे गए।\nक़ानून और नीति।\nCyber Security and Resilience (Network and Information Systems) Bill 2024-26 — मैनेज्ड सर्विस प्रोवाइडरों को NIS Regulations में लाने पर House of Commons Library की ब्रीफ़िंग। शिकायत करने का हक़ किसे है।\nConsumer Rights Act 2015 और Digital Markets, Competition and Consumers Act 2024 — सुरक्षा, और वह किसके लिए है। CMA, direct consumer enforcement one year on — अप्रैल 2025 से अप्रैल 2026: 14 जाँचें, GBP 760,000 उपभोक्ताओं को लौटाए गए, GBP 4.7 मिलियन के जुर्माने। FCA, Post-implementation review of the RDR, phase 1 — RDR ने “realigned adviser and platform incentives with those of consumers\u0026rsquo; by removing the commission they received from providers”, 2012 के अंत से लागू। Ofcom fines Unicom, 31 July 2015 — छोटे बिज़नेस को ग़लत बिक्री के लिए GBP 200,000, एनफ़ोर्समेंट की मिसाल के सबसे क़रीब की चीज़, IT में नहीं बल्कि टेलीकॉम में। ","permalink":"https://blogs.damiendye.uk/hi/random/is-your-msp-lying-to-you-part3/","summary":"3 भागों में से भाग 3। नतीजों की जगह रिस्पॉन्स टाइम, आपकी पहले से चुकाई फ़ीस पर तय लायबिलिटी कैप, और एक प्रोवाइडर जिसके बहाने आख़िर में आप पर आकर रुकते हैं। वे सवाल जो इसे सामने ले आते हैं, एक असली प्रोवाइडर इसकी जगह क्या करता है, और एक ख़राब प्रोवाइडर से छुटकारा पाने में क्या लगता है।","title":"जब कुछ टूटता है, तब असल में बोझ कौन उठाता है?"},{"content":"टाइम आउट होने वाला कनेक्शन आपको लगभग कुछ नहीं बताता। हो सकता है दूसरी तरफ़ कुछ सुन ही न रहा हो, हो सकता है तीन हॉप दूर कोई फ़ायरवॉल चुपचाप आपका SYN गिरा रहा हो और एक लॉग लाइन तक न बना रहा हो, या हो सकता है रूट ही मौजूद न हो। आप जहाँ बैठे हैं, वहाँ से ये सब एक जैसे दिखते हैं। आप इंतज़ार करते हैं। कुछ नहीं होता।\nतो टिकट लिखा जाता है “पोर्ट 445 कहीं ब्लॉक है”, और यही “कहीं” उसे उछालता रहता है। आपका प्रोवाइडर अपना एज जाँचता है, साफ़ पाता है, और वापस भेज देता है। आप अपने होस्ट का फ़ायरवॉल जाँचते हैं, साफ़ पाते हैं, और वापस भेज देते हैं। एक हफ़्ता निकल जाता है। कुछ ठीक नहीं होता।\nनुक़सान करने वाला शब्द “कहीं” है। उसका वहाँ होना ज़रूरी नहीं। आपके और मंज़िल के बीच हर राउटर पर यह बताने की ज़िम्मेदारी है कि गड़बड़ वही है, और यह ज़िम्मेदारी 1995 से स्टैंडर्ड में लिखी हुई है। बस सही तरीक़े से पूछना आना चाहिए।\nयह सब लिखकर समझाने की ज़रूरत क्यों है क्योंकि इस इंडस्ट्री में बहुत सारे लोग बुनियादी काम नहीं कर पाते, और इसकी क़ीमत उनके एम्प्लॉयर हर हफ़्ते असली पैसे में चुकाते हैं।\nमेरा मतलब जूनियर से नहीं है। मेरा मतलब उन लोगों से है जिनके पीछे सालों का अनुभव है, दीवार पर सर्टिफ़िकेशन टँगे हैं और जॉब टाइटल में सीनियर लिखा है, और जिनका टाइम आउट हुए पोर्ट का डायग्नोसिस “ब्लॉक है” पर रुक जाता है और आगे नहीं जाता। वे ping चलाते हैं। वह फ़ेल होता है, या चल जाता है, और दोनों ही सूरत में उन्होंने उस पोर्ट के बारे में कुछ नहीं सीखा जिसके बारे में पूछा गया था। फिर टिकट प्रोवाइडर के पास जाता है, प्रोवाइडर उसे लौटा देता है, और किसी की दो हफ़्ते की तनख़्वाह एक ऐसे थ्रेड में चली जाती है जो एक कमांड हो सकता था।\nइसमें कुछ भी मुश्किल नहीं है। ड्रॉप और रिजेक्ट में फ़र्क़ करना, जवाब पर TTL पढ़ना, यह जानना कि traceroute में एक स्टार अपने आप में कुछ नहीं बताता: यह एक दोपहर में सीखा जाता है और पूरे करियर काम आता है। लोग इसे इसलिए नहीं जानते क्योंकि वे मंदबुद्धि हैं, ऐसा नहीं है। वजह यह है कि कोई इसे सिखाता ही नहीं। वेंडर ट्रेनिंग आपको वेंडर का कंसोल सिखाती है। सर्टिफ़िकेशन आपको परीक्षा सिखाते हैं। नीचे की बुनियाद को पहले दिन से मान लिया जाता है और असल में कभी पढ़ाया नहीं जाता, तो लोग बिना कभी दिखाए गए सीनियर रोल तक पहुँच जाते हैं, और तब तक पूछने में शर्म आती है।\nतो शिकायत करने के बजाय, यह रहा लिखा हुआ। यह बुनियादी बातें हैं, खोलकर समझाई गईं, कमांड के साथ और एक स्क्रिप्ट के साथ जिसे आप आज ही चला सकते हैं।\nऔर यह भी कि मैंने यह मेहनत क्यों की: इसे लिखते हुए मैंने इसे अपनी लाइन पर चलाया और तीन ऐसी ख़राबियाँ मिलीं जिनका मुझे पता नहीं था। ग्यारह हॉप दूर एक SMB ड्रॉप। एक हॉप दूर नक़ली SMTP रीसेट। एक फ़ायरवॉल नियम जो IPv4 पर है और IPv6 पर नहीं। एक दोपहर, बिना root के, एक ऐसी लाइन पर जिसकी देखभाल मैं ख़ुद करता हूँ और जिस पर ध्यान देता हूँ। ज़रा सोचिए कि उन नेटवर्क पर क्या-क्या बिना देखे पड़ा है जिन्हें चलाने के लिए किसी को पैसे मिलते हैं।\nFisher-Price OS (Windows) इसमें क्यों नहीं है इसके यहाँ न होने के दो कारण हैं। एक तकनीकी है और एक नहीं, और मैं यह दिखावा करने के बजाय कि सब इंजीनियरिंग है, आपको दोनों बताना पसंद करूँगा।\nतकनीकी कारण यह है कि वह यह कर ही नहीं सकता। tracert ICMP echo request भेजता है और कुछ नहीं। Microsoft का अपना रेफ़रेंस इसे बताता है “sending Internet Control Message Protocol (ICMP) echo Request or ICMPv6 messages to the destination with incrementally increasing time to live (TTL) field values”, और इसके सिंटैक्स में कहीं भी पोर्ट का पैरामीटर नहीं है। pathping वही टूल है जिस पर आँकड़े जोड़ दिए गए हैं। Test-NetConnection आपको बता देगा कि कोई TCP पोर्ट खुला है या बंद, और इस बारे में बिल्कुल कुछ नहीं कि जवाब कितनी दूर से आया। इनमें से कोई भी उस पोर्ट को किसी चुनी हुई दूरी पर प्रोब नहीं कर सकता जिसकी आपको सच में परवाह है, और इस पोस्ट का पूरा तरीक़ा यही है।\nस्क्रिप्ट लिखकर भी आप इससे बच नहीं सकते। .NET में सॉकेट पर TTL सेट करना काफ़ी आसान है, लेकिन ICMP एरर को वापस पढ़ना मुश्किल वाला हिस्सा है, और उस ट्रिक का कोई बराबर नहीं है जिस पर यह पोस्ट टिकी है: ऐसा कोई तरीक़ा नहीं कि कर्नेल वही एरर उसी आम सॉकेट पर बताए जिसने उसे पैदा किया। बचता है raw सॉकेट, और Microsoft का अपना डॉक्यूमेंटेशन कहता है “only members of the Administrators group can create sockets of type SOCK_RAW”। तो बिना विशेषाधिकार वाला रास्ता मौजूद ही नहीं है, और विशेषाधिकार वाले को लोकल एडमिन टोकन चाहिए। शुरू करने से पहले ही आप थर्ड-पार्टी डाउनलोड में पहुँच चुके हैं।\nदूसरा कारण यह है कि मुझे परवाह नहीं है, और मैं इसे सजाने के बजाय सीधे कहना पसंद करूँगा। यह नाम भी कोई सस्ता तंज़ नहीं है, यह एक वर्णन है। यह वह OS है जो आपको तब थमाया जाता है जब आपके पास कभी कोई दूसरा नहीं रहा, यह मशीन को आपसे छिपाता है और यह एक डिज़ाइन का लक्ष्य है, कोई दुर्घटना नहीं, और जिस पल आप नेटवर्क से कोई सटीक सवाल पूछना चाहते हैं, पता चलता है कि वह टूल कभी बना ही नहीं, क्योंकि जिन लोगों के लिए इसे बनाया गया है उनसे कभी पूछने की उम्मीद ही नहीं की गई। तीस साल बाद भी tracert किसी पैकेट को किसी पोर्ट पर निशाना नहीं बना सकता।\nयह असली IT लोगों के लिए एक ढंग का ऑपरेटिंग सिस्टम नहीं है, और अगर आपने कभी सिर्फ़ यही इस्तेमाल किया है तो आप यह काम उस स्तर पर नहीं कर रहे जिसके लिए यह पोस्ट लिखी गई है। मुझे पता है कि यह बुरा लगता है। मैं पसंद किए जाने के लिए नहीं लिख रहा, मैं वह लिख रहा हूँ जो मैं मापता हूँ, उन लोगों के लिए जो चीज़ें मापते हैं, और मुझे ख़ास परवाह नहीं कि जिसने कभी सिर्फ़ यही चलाया है वह चाहता है कि मैं इसे किसी और तरह कहूँ।\nतर्क टूलों की सूची है, राय नहीं। नीचे टेबल का हर Unix आपको हॉप लिमिट सेट करने और प्रोटोकॉल चुनने देगा, उनमें से चार एक ही कमांड से, और Linux पूरा माप sudo के बिना भी कर लेगा। ऐसा इसलिए नहीं कि उन्हें इस्तेमाल करना ज़्यादा मुश्किल है। ऐसा इसलिए है कि उन्हें ऐसे लोगों ने बनाया जिन्हें उम्मीद थी कि कीबोर्ड पर बैठा इंसान चीज़ें जानना चाहेगा। जिस ऑपरेटिंग सिस्टम का डायग्नोस्टिक ping पर ख़त्म हो जाता है, उसने साफ़ बता दिया है कि वह इस्तेमाल करने वाले के बारे में क्या सोचता है, और तीस साल तक लोगों का इसे मान लेना ही वह वजह है कि हम एक ऐसी इंडस्ट्री पर पहुँचे हैं जो एक गिरा हुआ पैकेट नहीं ढूँढ सकती।\nतो मैं इसे नहीं चलाता, सालों से गंभीर काम के लिए नहीं चलाया, और एक असली कमी के बारे में निष्पक्ष दिखने के लिए मैं इसका अलग सेक्शन नहीं लिखने वाला। जिस पर भी मैं बनाता हूँ और जहाँ से भी मापने लायक़ कुछ है, वह Unix है, और यह पोस्ट वहीं रहती है।\nअगर ख़राब बॉक्स संयोग से Fisher-Price OS (Windows) चला रहा है, तो इससे तरीक़े में कुछ नहीं बदलता। किसी और चीज़ पर शेल लीजिए, कोई Linux VM, कोई Mac, उसी स्विच पर कोई Raspberry Pi, और हॉप लिमिट को उसकी तरफ़ बढ़ाइए। माप को ज़रा भी परवाह नहीं कि दूसरी तरफ़ क्या चल रहा है। उसे सिर्फ़ इसकी परवाह है कि बीच में क्या है।\nTTL एक हॉप बजट है, और हर राउटर आपको रसीद देने का कर्ज़दार है IPv4 हेडर में 8-बिट का Time to Live फ़ील्ड होता है। यह नाम एक बचा हुआ अवशेष है: इसे सेकंड में तय किया गया था, और दशकों से कोई इसे सेकंड नहीं मानता। RFC 1812 ने 1995 में यह बहस ख़त्म कर दी और हॉप-काउंट वाले अर्थ को अनिवार्य बना दिया:\nEach router (or other module) that handles a packet MUST decrement the TTL by at least one, even if the elapsed time was much less than a second. Since this is very often the case, the TTL is effectively a hop count limit on how far a datagram can propagate through the Internet.\nफिर वह हिस्सा जो यहाँ मायने रखता है, उसी सेक्शन से:\nIf the TTL is reduced to zero (or less), the packet MUST be discarded, and if the destination is not a multicast address the router MUST send an ICMP Time Exceeded message, Code 0 (TTL Exceeded in Transit) message to the source.\nयह MUST है। कोई शिष्टाचार नहीं, कोई सुझाव नहीं। 1981 में RFC 792 ने सिर्फ़ इतना कहा था कि गेटवे “may also notify the source host”; तेरह साल बाद यह शर्त सख़्त की गई, और RFC 1812 साफ़ शब्दों में बताता है क्यों:\nICMP Time Exceeded messages are required because the traceroute diagnostic tool depends on them.\nIPv6 ने यह दिखावा छोड़ दिया और फ़ील्ड का नाम बदल दिया। RFC 8200 इसे Hop Limit कहता है, “8-bit unsigned integer. Decremented by 1 by each node that forwards the packet”, और ख़त्म होने का मैसेज ICMPv6 टाइप 3, कोड 0 बन गया, “hop limit exceeded in transit”।\nइसे नियम की बजाय एक औज़ार की तरह पढ़िए तो यह कुछ काम की बात कहता है। रास्ते का हर राउटर एक बीकन है जिसे आप दूरी से पुकार सकते हैं। हॉप लिमिट 4 रखिए और चौथा राउटर अपनी पहचान बता देगा। आपको टोपोलॉजी जानने की ज़रूरत नहीं, किसी चीज़ तक एक्सेस की ज़रूरत नहीं, और ऑपरेटर के सहयोग की ज़रूरत नहीं। आपको हर हॉप पर एक पैकेट चाहिए।\nTraceroute 1980 के दशक के आख़िर से ठीक यही करता आया है। जो चीज़ उसका ठीक से न कर पाना है, वही असल में आपकी परवाह की चीज़ है, क्योंकि डिफ़ॉल्ट रूप से वह 33434 रेंज के ऊपर के UDP पोर्ट प्रोब करता है, जिसे न कोई फ़िल्टर करता है और न कोई सर्व करता है, तो वह आपको एक ऐसे रास्ते के बारे में बताता है जिसे कोई असली चीज़ कभी इस्तेमाल नहीं करती। किसी ऐसे होस्ट तक साफ़ traceroute, जिस तक आप TCP/445 पर नहीं पहुँच सकते, सिर्फ़ यह साबित करता है कि UDP/33434 वहाँ पहुँचता है। सवाल यह कभी था ही नहीं।\nतो उस पोर्ट को प्रोब कीजिए जिसकी आपको परवाह है।\nजो वापस आया उसे पढ़िए, न कि यह कि कुछ वापस आया या नहीं हॉप गिनने से पहले देखिए कि जब आप सामान्य हॉप लिमिट के साथ दूसरी तरफ़ पहुँचते हैं तो वह क्या करता है। पाँच अलग-अलग जवाब होते हैं और लोग अक्सर उन्हें एक में मिला देते हैं।\nक्या वापस आता है इसका मतलब किसने भेजा SYN-ACK, कनेक्शन खुल जाता है पोर्ट खुला है होस्ट, या उसकी तरफ़ से जवाब देने वाला कोई TCP RST सक्रिय रूप से मना किया वह होस्ट जिस पर कुछ नहीं सुन रहा, या रिजेक्ट के लिए कॉन्फ़िगर किया गया कोई डिवाइस ICMP 3/13, communication administratively prohibited कोई डिवाइस पॉलिसी के आधार पर मना कर रहा है और बता भी रहा है वही डिवाइस: उसका सोर्स एड्रेस ही आपका जवाब है ICMP 3/1, 3/2, 3/3 host, protocol या port unreachable आख़िरी राउटर, या होस्ट कुछ भी नहीं कोई चुपचाप ड्रॉप कर रहा है पता नहीं, तो जाकर मापिए तीसरी पंक्ति वह है जिसके लिए अपनी आदतें बदलना फ़ायदेमंद है। जब कोई फ़ायरवॉल ड्रॉप के बजाय रिजेक्ट के लिए कॉन्फ़िगर होता है, तो वह ICMP के सोर्स फ़ील्ड में अपना एड्रेस डालता है और दोषी आपको मुफ़्त में थमा देता है। Linux पर nft ... reject with icmpx admin-prohibited यही बनाता है, और iptables -j REJECT --reject-with icmp-admin-prohibited हमेशा से यही बनाता आया है। ज़्यादातर टूल इसे फेंक देते हैं और “filtered” छाप देते हैं। nmap --reason इसे दिखाएगा। नीचे वाली स्क्रिप्ट भी।\nपंक्ति दो और पाँच दिलचस्प विफलताएँ हैं। चुपचाप ड्रॉप करना आपको कुछ न बताने का एक पॉलिसी फ़ैसला है, और चूँकि लगभग हर कमर्शियल फ़ायरवॉल पर यही डिफ़ॉल्ट है, इसलिए असल में आपका सामना इसी से होगा। ख़ामोशी की उम्मीद रखिए।\nपंक्ति दो पर भी शक होना चाहिए। रीसेट इस बात का सबूत नहीं कि उसे होस्ट ने भेजा, और मैं एक असली उदाहरण के साथ इस पर लौटूँगा, क्योंकि यह लिखते हुए मुझे अपनी ही लाइन पर ऐसा एक मिला।\nजिस पोर्ट की परवाह है उसे दो बार चलकर देखिए तरीक़ा है दो रन और एक diff। बस इतना ही।\nहॉप लिमिट को 1 से 20 तक बढ़ाइए, ठीक उसी प्रोटोकॉल और पोर्ट से जो फ़ेल हो रहा है, और लिखिए कि हर हॉप पर कौन सा राउटर जवाब देता है। यही काम किसी ऐसी चीज़ से कीजिए जो चलती है, बेहतर हो कि वही होस्ट और एक ऐसा पोर्ट जो खुलता है। जिस हॉप पर पहले रन में जवाब रुक जाते हैं, और दूसरे रन में चलते रहते हैं, वही डिवाइस आपको ड्रॉप कर रहा है। दूसरा रन आपको उसका एड्रेस देता है। जवाब बदलने के बजाय रुकते क्यों हैं: राउटर पैकेट के साथ कुछ और करने से पहले अपनी इनबाउंड एक्सेस लिस्ट लगाता है, तो अगर पॉलिसी ड्रॉप कहती है तो फ़ॉरवर्डिंग पाथ के हॉप लिमिट देखने से पहले ही पैकेट ग़ायब हो जाता है, कोई Time Exceeded नहीं बनता, और डिवाइस अपने किए पर कभी अपना नाम नहीं लिखता। इसलिए ख़ामोशी गड़बड़ वाले हॉप पर शुरू होती है, उसके बाद नहीं।\nइस चलने के लिए मैंने एक छोटा टूल लिखा, क्योंकि कोई भी नेटिव टूल इसे हर प्लेटफ़ॉर्म पर नहीं करता। यह एक आम सॉकेट पर IP_TTL (या IPV6_UNICAST_HOPS) सेट करता है, कनेक्ट करता है, और ICMP एरर वापस पढ़ता है। Linux पर IP_RECVERR वह एरर उसी सॉकेट पर बताता है जिसने उसे पैदा किया, जिसका मतलब है पूरी चीज़ बिना विशेषाधिकार के चलती है: न root, न raw सॉकेट, न capabilities। macOS, BSD और Solaris पर कर्नेल आपको ICMP इस तरह नहीं देता, तो यह raw सॉकेट पर वापस जाता है और इसे root चाहिए।\n\u0026#8615; hopfind.py: TTL वॉकर hopfind.py · 11 kB यह सिर्फ़ स्टैंडर्ड लाइब्रेरी की 279 लाइनें हैं, और कुछ नहीं, और अगर आप डाउनलोड करने के बजाय पढ़ना चाहें तो पूरी इस पोस्ट के आख़िर में छपी है।\npython3 hopfind.py example.net 445 # the port under suspicion python3 hopfind.py example.net 443 # the reference run python3 hopfind.py example.net 53 --proto udp python3 hopfind.py 2001:db8::1 443 -6 दोनों रन के लिए एक ही प्रोटोकॉल इस्तेमाल कीजिए। TCP ट्रेल की तुलना ICMP ट्रेल से करना दो रास्तों की तुलना करना है, क्योंकि लोड बैलेंसिंग five-tuple पर हैश करती है और ICMP में हैश करने के लिए पोर्ट होते ही नहीं। वही होस्ट, वही प्रोटोकॉल, अलग पोर्ट: यही ईमानदार तुलना है।\nनीचे सब कुछ 28 अगस्त 2026 को मेरी अपनी लाइन का असली आउटपुट है, Fedora पर बिना विशेषाधिकार वाले यूज़र के रूप में चलाया गया। इसमें हर एड्रेस को डॉक्यूमेंटेशन रेंज में बदल दिया गया है: IPv4 के लिए RFC 5737, IPv6 के लिए RFC 3849, और एक इंटरफ़ेस आइडेंटिफ़ायर भी बदला गया है। तो 198.51.100.x मेरा अपना राउटर और मेरा ISP है, 203.0.113.x ट्रांज़िट और पीयरिंग है, 192.0.2.x दूर वाला नेटवर्क है, और 2001:db8::/32 पूरा IPv6 रास्ता है। ढाँचा हर जगह वैसा ही रखा गया है: वही प्रीफ़िक्स सीमाएँ, होस्ट-पार्ट का वही आकार, अलग-अलग नेटवर्क की वही गिनती। हॉप नंबर, टाइमिंग, ICMP टाइप और कौन सा हॉप चुप हुआ, ये सब बिल्कुल वैसे ही हैं जैसे मापे गए।\nएक होस्ट, तीन पोर्ट, तीन अलग ख़राबियाँ पूरे समय वही मंज़िल: पब्लिक इंटरनेट पर एक होस्ट, चौदह हॉप दूर, जिस पर 443 खुला है। पहले रेफ़रेंस रन।\n$ python3 hopfind.py 192.0.2.4 443 --max 15 walking to 192.0.2.4 TCP/443 hop limit 1-15 1 198.51.100.254 0.3 ms ICMP 11/0 time exceeded in-transit 2 198.51.100.133 28.8 ms ICMP 11/0 time exceeded in-transit 3 * 4 198.51.100.153 6.3 ms ICMP 11/0 time exceeded in-transit 5 * 6 203.0.113.240 16.5 ms ICMP 11/0 time exceeded in-transit 7 203.0.113.188 16.5 ms ICMP 11/0 time exceeded in-transit 8 203.0.113.185 16.5 ms ICMP 11/0 time exceeded in-transit 9 203.0.113.15 15.6 ms ICMP 11/0 time exceeded in-transit 10 203.0.113.125 16.1 ms ICMP 11/0 time exceeded in-transit 11 192.0.2.31 26.6 ms ICMP 11/0 time exceeded in-transit 12 * 13 * 14 192.0.2.4 19.5 ms connected Verdict: TCP/443 is open. It answered at hop 14. हॉप 3, 5, 12 और 13 पर ध्यान दीजिए। एक ऐसे रास्ते पर जो साफ़ तौर पर चलता है, चार राउटर कुछ नहीं बोले, क्योंकि बहुत सी किट अपने लिए ICMP न बनाने के लिए कॉन्फ़िगर होती है, या उसे सख़्ती से रेट-लिमिट करती है। स्टार फ़ायरवॉल का सबूत नहीं है। और कुछ न भी याद रहे तो यह याद रखिए। संकेत कभी भी एक रन में स्टार का होना नहीं है; संकेत वह जगह है जहाँ दो रन असहमत होने लगते हैं।\nअब उसी होस्ट पर 445, जो यहाँ से टाइम आउट होता है।\n$ python3 hopfind.py 192.0.2.4 445 --max 15 walking to 192.0.2.4 TCP/445 hop limit 1-15 1 198.51.100.254 0.3 ms ICMP 11/0 time exceeded in-transit 2 198.51.100.133 8.0 ms ICMP 11/0 time exceeded in-transit 3 * 4 198.51.100.153 6.4 ms ICMP 11/0 time exceeded in-transit 5 203.0.113.76 5.6 ms ICMP 11/0 time exceeded in-transit 6 203.0.113.240 15.9 ms ICMP 11/0 time exceeded in-transit 7 203.0.113.188 15.8 ms ICMP 11/0 time exceeded in-transit 8 203.0.113.185 16.6 ms ICMP 11/0 time exceeded in-transit 9 203.0.113.15 15.9 ms ICMP 11/0 time exceeded in-transit 10 203.0.113.125 15.0 ms ICMP 11/0 time exceeded in-transit 11 * 12 * 13 * 14 * 15 * Verdict: answers stop after hop 10 (203.0.113.125). Whatever swallows TCP/445 is hop 11. Walk a port that works and read off the address at hop 11. हॉप 11 ने 443 वाले रन को 26.6 ms में जवाब दिया और 445 वाले रन को बिल्कुल कुछ नहीं कहा। वही बॉक्स, वही रास्ता, उसके आगे वही दस राउटर। जो रन चलता है उससे मिलाइए और हॉप 11 का एक नाम है: 192.0.2.31। यही डिवाइस SMB ड्रॉप कर रहा है, मंज़िल से तीन हॉप पहले और मेरे प्रोवाइडर के एज से आठ हॉप आगे। न मेरा, न मेरे ISP का।\nहॉप 5 स्टार वाली बात को दूसरी तरफ़ से साबित करता है। 443 वाले रन पर वह स्टार था और 445 वाले रन पर उसने जवाब दिया: ख़राबी से बिल्कुल उल्टा। यह ICMP रेट लिमिटिंग हो सकती है, या यह भी कि दोनों रन किसी लोड बैलेंसर से अलग-अलग रास्तों से गए। मुझे नहीं पता कौन सा, और आपको भी नहीं पता चलेगा। किसी पर भी भरोसा करने से पहले दोनों रन दोहराइए।\nएक ही होस्ट तक हॉप लिमिट के दो वॉक, और वह हॉप जहाँ वे असहमत होने लगते हैं एक ही होस्ट तक दो वॉक, और वह हॉप जहाँ वे असहमत होने लगते हैं हर हॉप लिमिट पर एक प्रोब। रंगा हुआ ख़ाना मतलब उस राउटर ने ICMP Time Exceeded लौटाया और अपना नाम बताया। राउटर ने जवाब दिया कुछ नहीं लौटा यहाँ से आगे चुप 1 2 3 4 5 6 7 8 9 10 11 12 13 14 प्रोब पर सेट हॉप लिमिट TCP/443 रेफ़रेंस, खुलता है \u0026#8226; \u0026#8226; * \u0026#8226; * \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; * * \u0026#10003; खुलता है TCP/445 जाँच में, टाइम आउट \u0026#8226; \u0026#8226; * \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; \u0026#8226; * * * * हॉप 11 ने एक वॉक को जवाब दिया, दूसरे को नहीं हॉप 3, 5, 12 और 13 एक साफ़ चलते रास्ते पर कुछ नहीं बोले, तो अकेला स्टार कुछ नहीं बताता। हॉप 11 ने रेफ़रेंस वॉक को 26.6\u0026#160;ms में जवाब दिया और टेस्ट वॉक को कभी नहीं। यही सीमा है, और रेफ़रेंस वॉक इसे एक एड्रेस देता है:\u0026#160;192.0.2.31। वही दो रन, आमने-सामने। सिर्फ़ हॉप 11 वाला ख़ाना मायने रखता है, और उसके बारे में मायने रखने वाली बात असहमति है: उसने एक रन को जवाब दिया और दूसरे को नहीं। फिर पोर्ट 25। इसने मुझे रोक दिया।\n$ python3 hopfind.py 192.0.2.4 25 --max 15 walking to 192.0.2.4 TCP/25 hop limit 1-15 1 192.0.2.4 0.4 ms TCP reset Verdict: a reset came back to a probe with a hop limit of 1. Nothing more than one hop away can have sent it, so check the reply TTL before you believe the host did. हॉप लिमिट 1 का मतलब है कि पैकेट मेरे अपने राउटर पर मर गया। वह एक हॉप गया। वह चौदह नहीं जा सकता था। फिर भी 0.4 ms में एक TCP रीसेट वापस आया जिस पर मंज़िल का एड्रेस था, और मेरे कर्नेल ने आज्ञाकारी ढंग से connection refused बता दिया। हॉप लिमिट सेट किए बिना मैं इसे “दूसरी तरफ़ कोई मेल सर्वर नहीं है” पढ़ता और टिकट बंद कर देता।\nएक हॉप दूर कोई चीज़ आउटबाउंड SMTP के लिए रीसेट नक़ली बना रही है और उन पर मंज़िल का एड्रेस लगा रही है। आउटबाउंड 25 को ब्लॉक करना किसी कंज़्यूमर राउटर या ISP के लिए बिल्कुल आम बात है, और इसे ड्रॉप के बजाय रीसेट से करना शायद ज़्यादा शालीन तरीक़ा है, लेकिन रीसेट पर किसी और का एड्रेस है और मुझे पता ही नहीं था कि मेरा राउटर ऐसा करता है। इसे हॉप लिमिट ने पकड़ा, और जवाब में और कुछ भी इसे नहीं पकड़ता।\nएक का फ़र्क़: पाइपलाइन में एक्सेस लिस्ट कहाँ बैठती है ऊपर का फ़ैसला कहता है कि ड्रॉप करने वाला हॉप 11 है क्योंकि जवाब हॉप 10 के बाद रुक गए। इस हिसाब से सावधान रहिए, क्योंकि यह इस पर निर्भर है कि गड़बड़ वाला डिवाइस दो काम किस क्रम में करता है।\nज़्यादातर किट पहले इनबाउंड पॉलिसी लगाती है और हॉप लिमिट की जाँच बाद में। Deny लगता है, पैकेट फेंक दिया जाता है, और कोई Time Exceeded कभी नहीं बनता, तो डिवाइस कभी दिखता नहीं और ख़ामोशी उसके अपने हॉप नंबर पर शुरू होती है। ऊपर यही मामला है। यही आम मामला भी है।\nकुछ प्लेटफ़ॉर्म पॉलिसी जाँचने से पहले फ़ास्ट पाथ में हॉप लिमिट का ख़त्म होना संभालते हैं। वहाँ डिवाइस अपने लिए भेजे गए प्रोब का जवाब देता है और सिर्फ़ अपने आगे जाने वाले प्रोब ड्रॉप करता है, तो वह सामान्य रूप से दिखता है और ख़ामोशी एक हॉप बाद शुरू होती है।\nगड़बड़ वाला हॉप आमतौर पर क्यों नहीं दिखता: पॉलिसी हॉप लिमिट की जाँच से पहले जाँची जाती है आपको ड्रॉप करने वाले हॉप के अंदर, दो जाँचों का क्रम तय करता है कि आप क्या देखेंगे आपका प्रोब बजट में एक हॉप बाक़ी रहते पहुँचता है, और deny वाले नियम से मेल खाता है। पहले पॉलिसी: लगभग सभी फ़ायरवॉल, और इस पोस्ट में मापा गया हर मामला हॉप N पर राउटर प्रोब आया इनबाउंड पॉलिसी हॉप लिमिट जाँच फ़ॉरवर्ड हॉप लिमिट देखे जाने से पहले ही फेंका गया कोई ICMP नहीं बनता, तो यह राउटर ड्रॉप पर कभी अपना नाम नहीं लिखता। आपका वॉक\u0026#160;हॉप N पर\u0026#160;चुप हो जाता है। पहले expiry: कुछ प्लेटफ़ॉर्म इसे फ़ास्ट पाथ में संभालते हैं हॉप N पर राउटर प्रोब आया हॉप लिमिट जाँच इनबाउंड पॉलिसी फ़ॉरवर्ड ख़त्म हुआ, तो ICMP 11/0 इस राउटर के एड्रेस के साथ लौटता है यह अपने लिए जवाब देता है और सिर्फ़ आगे जाने वाले प्रोब निगलता है। आपका वॉक हॉप\u0026#160;N+1 से चुप हो जाता है। ड्रॉप करने वाला हॉप आमतौर पर अदृश्य क्यों रहता है। लगभग सभी फ़ायरवॉल पर deny पहले जाँचा जाता है, तो फ़ॉरवर्डिंग पाथ के यह देखने से पहले कि हॉप लिमिट ख़त्म हो गई, प्रोब जा चुका होता है और कोई ICMP कभी नहीं बनता। जो किट फ़ास्ट पाथ में ख़त्म होना संभालती है, वहाँ वही डिवाइस अपने लिए भेजे प्रोब का जवाब देता है और सिर्फ़ आगे भेजे गए प्रोब निगलता है। तो “जवाब हॉप N के बाद रुकते हैं” का ईमानदार अर्थ है: ड्रॉप करने वाला हॉप N+1 है अगर उसने बजट ख़त्म होने पर ध्यान देने से पहले आपका प्रोब फेंक दिया, या ख़ुद हॉप N है अगर उसने अपने लिए भेजे प्रोब का जवाब दिया और आगे भेजा गया सब कुछ निगल लिया। दो पड़ोसी डिवाइस, और जो रन चलता है वह दोनों के नाम बताता है। एड्रेस बताइए, हॉप काउंट नहीं: आपका टिकट पढ़ने वाले के लिए हॉप काउंट का कोई मतलब नहीं, क्योंकि वह कहीं और से गिन रहा है।\nजवाब का TTL बताता है कि असल में किसने जवाब दिया ऊपर का SMTP रीसेट बाहर जाते हॉप लिमिट से पकड़ा गया। वापस आने वाले हर जवाब में एक दूसरी, स्वतंत्र जाँच भी मौजूद है, और इसकी कोई क़ीमत नहीं।\nशुरुआती TTL मान स्टैंडर्ड नहीं हैं, लेकिन व्यवहार में तीन होते हैं:\nशुरुआत आमतौर पर भेजने वाला 64 Linux, macOS, BSD, illumos, ज़्यादातर होस्ट 255 Cisco IOS, Junos, Solaris, ज़्यादातर नेटवर्क किट का अपना ट्रैफ़िक 128 Fisher-Price OS (Windows), जो किसी एक से आए जवाब को पढ़ने के लिए आपको अब भी जानना होगा मिले हुए TTL को अगले ऊपरी मान से घटाइए और आपको हॉप काउंट वापस मिल जाता है। TTL 50 के साथ आया जवाब 64 से शुरू हुआ और 14 हॉप चला। TTL 250 वाला 255 से शुरू हुआ और 5 हॉप चला। ping इसे बिना पूछे छाप देता है:\nping -c1 192.0.2.4 # ttl=50 → 14 hops away tcpdump -n -v \u0026#39;icmp\u0026#39; # -v prints the ttl of every packet it shows इससे दो बातें निकलती हैं। दोनों मुफ़्त।\nजिस जवाब का उल्टा हॉप काउंट होस्ट के बाक़ी जवाबों से मेल नहीं खाता, उसे होस्ट ने नहीं भेजा। अगर किसी सर्वर से echo reply 14 हॉप दूर से आता है और पोर्ट 25 पर RST 1 हॉप दूर से, तो RST किसी middlebox ने लिखा है। ऊपर वाले सेक्शन वाली ही ट्रिक, दूसरे सिरे से, और यह तब भी काम करती है जब आप आउटबाउंड TTL सेट नहीं कर सकते।\nजो जवाब 255 से शुरू हुआ वह नेटवर्क किट से आया, सर्वर से नहीं। तब काम का है जब आप यह समझने की कोशिश कर रहे हों कि आपको मना करने वाली चीज़ होस्ट है या उसके आगे का राउटर।\nICMP के बजाय TCP पर यह फ़ील्ड देखने के लिए आपको कैप्चर चाहिए, और फ़िल्टर याद रखने लायक़ है:\n# every hop-limit expiry coming back to you, IPv4 and IPv6 tcpdump -n -v \u0026#39;icmp[icmptype] == 11 or icmp6[icmp6type] == 3\u0026#39; # who is resetting you, and from how far tcpdump -n -v \u0026#39;tcp[tcpflags] \u0026amp; tcp-rst != 0\u0026#39; tcpdump इस ख़त्म होने को ICMP time exceeded in-transit छापता है: वही वाक्यांश जो स्टैंडर्ड इस्तेमाल करते हैं, और वही घटना जो उन प्लेटफ़ॉर्म पर “TTL expired in transit” दिखती है जो इसे ऐसे लिखते हैं।\nनेटिव टूलों से यही ट्रिक, पाँच Unix पर अगर आप स्क्रिप्ट नहीं चलाना चाहते, तो नेटिव टूल इसका ज़्यादातर हिस्सा कर देंगे। बस वे आपकी उम्मीद से ज़्यादा आपस में असहमत हैं। ख़ासकर -P के तीन अलग मतलब हैं, इस पर निर्भर करते हुए कि आपके हाथ में किसका traceroute है, और उनमें से एक चुपचाप आपका टेस्ट बर्बाद कर देगा।\nLinux (traceroute 2.1.x) macOS / FreeBSD OpenBSD NetBSD Solaris 11 TCP प्रोब -T -P tcp काम का नहीं नहीं नहीं ICMP प्रोब -I -I -I -I -I तय पोर्ट पर UDP -U -p N -e -p N नहीं नहीं नहीं डेस्टिनेशन पोर्ट -p N (TCP के लिए स्थिर) -p N (-e के बिना बढ़ता है) -p N (बढ़ता है) -p N (बढ़ता है) -p N (बढ़ता है) -P का मतलब इस्तेमाल नहीं प्रोब प्रोटोकॉल संख्या वाला प्रोटोकॉल, “will not work reliably for most protocols” DF सेट करना और पाथ MTU प्रोब करना प्रोब के बीच ठहराव, सेकंड में विशेषाधिकार चाहिए हाँ, -T और -I के लिए हाँ हाँ हाँ हाँ इनमें से हर एक को raw सॉकेट चाहिए, तो हर एक को विशेषाधिकार चाहिए, हालाँकि macOS और BSD आमतौर पर traceroute को setuid root के साथ भेजते हैं, तो शायद आपको आगे sudo न लिखना पड़े। Linux ऐसा नहीं करता, और Fedora भी नहीं, और ऊपर वाली स्क्रिप्ट के होने की आधी वजह यही है।\nउस टेबल में तीन जाल हैं, और मैंने तीनों को एक दोपहर बर्बाद करते देखा है।\nBSD और macOS पर, -p एक बेस पोर्ट है जो हर प्रोब के साथ बढ़ता है। तो traceroute -P tcp -p 445 host पहले 445 टेस्ट करता है, फिर 446, फिर 447, और हॉप 10 तक आप एक ऐसे पोर्ट के बारे में पूछ रहे हैं जिसका किसी ने नाम भी नहीं सुना। आपको साथ में -e भी चाहिए, जिसे man पेज firewall evasion mode कहता है और जिसका असल मतलब बस “पोर्ट को स्थिर रखो” है:\nsudo traceroute -P tcp -e -p 445 example.net # macOS, FreeBSD Linux पर, डिफ़ॉल्ट UDP तरीक़े के लिए सादा -p भी यही करता है और स्थिर UDP पोर्ट के लिए आपको -U -p चाहिए। TCP के लिए -T -p पहले से स्थिर है: man पेज साफ़ कहता है कि “for TCP and others specifies just the (constant) destination port to connect”।\nsudo traceroute -T -p 445 example.net # Linux sudo traceroute -U -p 53 example.net # Linux, UDP/53 specifically Solaris और NetBSD पर पोर्ट को पिन करने का कोई तरीक़ा ही नहीं है, और Solaris पर -P सेकंड में ठहराव है, तो Linux से कॉपी की गई कमांड लाइन बिना एरर के चलेगी और ऐसा कुछ नहीं मापेगी जो आपने पूछा था। Solaris में TCP प्रोब मोड भी नहीं है। यही वह मामला है जहाँ आपको स्क्रिप्ट चाहिए।\nRedox अलग है और एक वाक्य के लायक़ है क्योंकि मुझे यह सवाल आने की उम्मीद है। उसका पूरा नेटवर्क टूलकिट netutils है: dns, ifconfig, nc, ping, telnetd, wget। न traceroute, न tcpdump, कैप्चर करने के लिए कुछ भी नहीं। अगर Redox बॉक्स समस्या का एक सिरा है, तो दूसरे सिरे से मापिए और वॉक को उसकी तरफ़ मोड़िए।\nmtr का भी ज़िक्र बनता है, क्योंकि यह दोहराने और औसत निकालने वाला वह हिस्सा करता है जो ऊपर की टेबल आपसे हाथ से करवाती हैं:\nsudo mtr -T -P 445 --report --report-cycles 20 example.net इसे फ़ेल होने वाले पोर्ट पर चलाइए और फिर एक चलने वाले पर, आमने-सामने। वही तरीक़ा, सुंदर आउटपुट।\nअगर कोई ICMP ब्लॉक करता है तो इसमें से कुछ नहीं चलता इस पोस्ट का हर माप मुझ तक वापस आने वाले ICMP एरर से बना है। उन्हें ब्लॉक कीजिए और पूरा डायग्नोस्टिक अँधेरे में चला जाता है, और साथ में बहुत कुछ और भी।\nICMP को पूरी तरह ब्लॉक करना कुछ जगहों पर अब भी एक सुरक्षा रुख़ माना जाता है। 1990 के दशक के बाद से इसका बचाव नहीं किया जा सकता। जिन हमलों को रोकने की कल्पना की जाती है वे ping of death और smurf थे, दोनों स्टैक में ठीक किए गए थे, बॉर्डर पर नहीं, और दोनों उससे पहले ठीक हो गए थे जब यह सलाह दोहराने वाले कुछ इंजीनियर पैदा भी नहीं हुए थे। आज पूरी तरह ब्लॉक करने से जो रुकता है वह डायग्नोसिस है। और कुछ नहीं।\nRFC 1812 इस बात पर व्याख्या की कोई गुंजाइश नहीं छोड़ता: Time Exceeded एक MUST है, और स्टैंडर्ड कहता है कि इसकी वजह यह है कि traceroute इस पर निर्भर है। इसे ड्रॉप कीजिए और आपने वह टूल तोड़ दिया जिसे इंटरनेट का अपना राउटर रिक्वायरमेंट डॉक्यूमेंट इस मैसेज के होने का कारण बताता है।\nPath MTU discovery महँगा वाला है। इसे सेंडर तक ICMP 3/4, fragmentation needed, वापस आना चाहिए। उसे फ़िल्टर कीजिए और आपको वह ख़राबी मिलती है जिसके पीछे हर नेटवर्क इंजीनियर कम से कम एक बार भागा है, जिसमें हैंडशेक पूरा होता है और छोटे ट्रांसफ़र चलते हैं और पूरे साइज़ का पैकेट ले जाने वाली हर चीज़ हमेशा के लिए अटक जाती है। SSH कनेक्ट होता है और scp रुक जाता है। पेज लोड होता है और इमेज कभी नहीं आती। लॉग में कुछ नहीं। grep करने को कुछ नहीं।\nIPv6 पर यह पसंद का मामला नहीं रहता। RFC 4890 §4.3.1 उन मैसेज की सूची देता है जिन्हें फ़ायरवॉल को ड्रॉप नहीं करना चाहिए:\nDestination Unreachable (Type 1) - All codes Packet Too Big (Type 2) Time Exceeded (Type 3) - Code 0 only Parameter Problem (Type 4) - Codes 1 and 2 only और Packet Too Big पर वह नतीजे के बारे में साफ़ बोलता है: “Effectively, parts of the Internet will become inaccessible.” IPv6 राउटर फ़्रैगमेंट नहीं करते। अगर Packet Too Big सेंडर तक नहीं पहुँच सकता, तो उबरने का कोई रास्ता नहीं।\nनियंत्रण रेट लिमिट है, ड्रॉप नहीं। इनबाउंड टाइप 3 और टाइप 11 की इजाज़त दीजिए, उन्हें गिनिए, क़रीब सौ प्रति सेकंड पर सीमा लगाइए, सीमा से ऊपर जो जाए उसे लॉग कीजिए, और आपने डायग्नोस्टिक बचा लिए, path MTU discovery चालू रखा, और वह सारी सुरक्षा भी रख ली जो पूरी तरह ब्लॉक करने वाला नियम देने की कल्पना करता था। आप किसी चीज़ को कितना स्वीकार करते हैं इसे सीमित करना एक नियंत्रण है। उसे पूरा ठुकराना और उसे हार्डनिंग कहना बस मापे जाने से इनकार करना है।\nMSP चलाने वाले किसी के लिए भी: अगर आपके ग्राहक की लाइन ICMP एरर ड्रॉप करती है, तो आपने उनसे, और ख़ुद से भी, यह साबित करने की क्षमता छीन ली है कि ख़राबी किस नेटवर्क में है। अगली बार जब कोई ख़राबी दो प्रोवाइडर के बीच बैठी होगी और दोनों कहेंगे कि उनकी तरफ़ साफ़ है, तो वही इस पॉलिसी का बिल है।\nEcho को छोड़कर। उसे ड्रॉप कीजिए। ऊपर सब कुछ ICMP एरर के बारे में है। Echo एक अलग जानवर है, और यह प्रोटोकॉल का वह एक हिस्सा है जिसे मैं बॉर्डर पर वायर से हटा दूँगा।\nदेखिए स्टैंडर्ड इससे क्या माँगता है। IPv4 में, RFC 792 echo request के बारे में कहता है कि “the data received in the echo message must be returned in the echo reply message”। IPv6 और भी साफ़ है: RFC 4443 फ़ील्ड को “zero or more octets of arbitrary data” के रूप में परिभाषित करता है और फिर माँगता है कि उसे “MUST be returned entirely and unmodified in the ICMPv6 Echo Reply message”।\nइसे ऑपरेटर की बजाय हमलावर की तरह पढ़िए। स्टैंडर्ड धरती के हर होस्ट को बाध्य करता है कि वह आपके चुने हुए बाइट्स का एक ब्लॉक स्वीकार करे और सीधे आपको वापस थमा दे। यह कोई साइड इफ़ेक्ट नहीं है। यह एक अनिवार्य, दोतरफ़ा, मनचाहे पेलोड वाला चैनल है, एक ऐसे प्रोटोकॉल पर जिसे ज़्यादातर फ़ायरवॉल बिना जाँचे जाने देते हैं और ज़्यादातर लॉगिंग कंटेंट की बजाय पैकेट गिनती के रूप में दर्ज करती है।\nलोग तीस साल से इस पर टनल बना रहे हैं। Loki ने 1996 में Phrack 49 में यह किया। Ptunnel ping के अंदर पूरा TCP सेशन ले जाएगा और दो दशक से बस एक पैकेज की दूरी पर है। अगर आपकी egress पॉलिसी है “सब ब्लॉक करो, ICMP की इजाज़त दो क्योंकि नेटवर्क टीम को चाहिए”, तो आपके पास egress पॉलिसी नहीं है। आपके पास कुछ अतिरिक्त क़दमों वाला एक VPN है, और ट्रैफ़िक ऐसे निकलता है जैसे कोई जाँच रहा हो कि इंटरनेट चालू है या नहीं।\nRFC 4890 मुझसे असहमत है, और सिर्फ़ अपने काम का आधा हिस्सा उद्धृत करने के बजाय इसे साफ़ कहना ठीक है। §4.3.1 Echo Request और Echo Response को एरर के साथ उसी must-not-drop सूची में रखता है। फिर वह जो कारण देता है उसे पढ़िए:\nFor Teredo tunneling [RFC4380] to IPv6 nodes on the site to be possible, it is essential that the connectivity checking messages are allowed through the firewall.\necho को खुला रखने का बताया गया कारण यह है कि किसी को इससे आपके फ़ायरवॉल के आर-पार एक टनल बनानी है। यही मेरा तर्क है, उल्टा पक्ष रखने वालों के हाथों लिखा हुआ।\nतो पॉलिसी संकरी है, पूरी तरह नहीं:\n# transit rules. permit the errors, drop the ping ip protocol icmp icmp type { destination-unreachable, time-exceeded, parameter-problem } \\ limit rate 100/second accept ip protocol icmp icmp type { echo-request, echo-reply } drop ip6 nexthdr ipv6-icmp icmpv6 type { destination-unreachable, packet-too-big, \\ time-exceeded, parameter-problem } limit rate 100/second accept ip6 nexthdr ipv6-icmp icmpv6 type { echo-request, echo-reply } drop IPv6 पर, इस पैटर्न को neighbour discovery रखे बिना किसी link-local या होस्ट चेन पर मत ले जाइए। टाइप 133 से 137, nd-router-solicit से nd-redirect तक, वह तरीक़ा हैं जिससे IPv6 वह काम करता है जो IPv4 में ARP करता है। उन्हें ड्रॉप कीजिए और सेगमेंट कुछ ही मिनटों में काम करना बंद कर देगा, और यह फ़ायरवॉल की ख़राबी जैसा नहीं दिखेगा। Echo को बॉर्डर पर फ़िल्टर कीजिए, होस्ट और उसके अपने राउटर के बीच के वायर पर नहीं।\nइसकी आपको क्या क़ीमत चुकानी पड़ती है? सीमा के पार ping, और कुछ नहीं। इस पोस्ट में सब कुछ काम करता रहता है, क्योंकि यहाँ का एक भी माप echo request नहीं भेजता। hopfind.py TCP और UDP पर चलता है और वापस आने वाले एरर पढ़ता है; traceroute -T और -U भी यही करते हैं। Path MTU discovery को Packet Too Big चाहिए, जो एक एरर है। उल्टे TTL वाली ट्रिक किसी भी जवाब पर काम करती है, और एक TCP हैंडशेक आपको एक दे देगा। आप सिर्फ़ डिब्बे का सबसे कम जानकारी देने वाला टूल खोते हैं, और यह पूरी पोस्ट इसी बारे में एक तर्क है कि ping पर रुक जाना ही असल समस्या है।\nमेरी अपनी लाइन पहले से ठीक यही करती है, हालाँकि मुझे शक है कि यह जानबूझकर था। मेरे डिफ़ॉल्ट गेटवे पर ping को 100% loss मिलता है, और उसी गेटवे से ICMP Time Exceeded 0.3 ms में वापस आता है, जैसा इस पोस्ट का हर ट्रेस दिखाता है। Echo बंद, एरर खुले। जिसने भी वह फ़र्मवेयर भेजा उसने सही जवाब दिया, और मुझे इसका पता सिर्फ़ ढूँढने जाने पर चला।\nवही नियम, सिर्फ़ एक बार लिखा हुआ यह रही वह ख़राबी जो मुझे अपने ही घर में मिलने की उम्मीद नहीं थी। एक पब्लिक DNS रिज़ॉल्वर, दोनों फ़ैमिली पर TCP/443 पर चलकर देखा गया, कुछ ही मिनटों के अंतर पर।\n$ python3 hopfind.py 192.0.2.53 443 --max 10 walking to 192.0.2.53 TCP/443 hop limit 1-10 1 * 2 * 3 * 4 * 5 * 6 * 7 * 8 * 9 * 10 * Verdict: nothing answered at all, not even the first hop. बिल्कुल कुछ नहीं। एक भी हॉप नहीं। मेरे अपने राउटर ने वह expiry भी नहीं बताया जो उसने ज़रूर बनाया होगा, वही expiry जो उसने इस पोस्ट के हर दूसरे वॉक के लिए 0.3 ms में बताया, तो ड्रॉप हॉप 1 पर होता है, हॉप लिमिट की जाँच चलने से पहले, और हॉप 1 मेरा है।\nरास्ता ठीक है, जिसे वही मंज़िल UDP पर साबित करती है:\n$ python3 hopfind.py 192.0.2.53 53 --proto udp --max 10 1 198.51.100.254 0.3 ms ICMP 11/0 time exceeded in-transit 2 198.51.100.133 5.4 ms ICMP 11/0 time exceeded in-transit 3 * 4 198.51.100.167 14.5 ms ICMP 11/0 time exceeded in-transit 5 203.0.113.50 6.3 ms ICMP 11/0 time exceeded in-transit 6 203.0.113.174 5.7 ms ICMP 11/0 time exceeded in-transit 7 203.0.113.201 6.4 ms ICMP 11/0 time exceeded in-transit 8 * उसी एड्रेस तक सात हॉप के साफ़ जवाब। तो यह न रूटिंग है और न मंज़िल: मेरी लाइन पर कोई चीज़ उस होस्ट तक TCP को ड्रॉप करती है और UDP को जाने देती है।\nफिर वही रिज़ॉल्वर, वही पोर्ट, IPv6 पर:\n$ python3 hopfind.py 2001:db8:53::53 443 -6 --max 10 walking to 2001:db8:53::53 TCP/443 hop limit 1-10 1 2001:db8:1:ee:beef:abcd:fec0:2a30 0.5 ms ICMP 3/0 hop limit exceeded in-transit 2 2001:db8:1::15c 24.6 ms ICMP 3/0 hop limit exceeded in-transit 3 * 4 2001:db8:2:200::50 5.5 ms ICMP 3/0 hop limit exceeded in-transit 5 2001:db8:2:2::4 5.7 ms ICMP 3/0 hop limit exceeded in-transit 6 2001:db8:2:991:: 16.6 ms ICMP 3/0 hop limit exceeded in-transit 7 2001:db8:53::53 5.7 ms connected Verdict: TCP/443 is open. It answered at hop 7. सीधा पार। सात हॉप, कोई ड्रामा नहीं। वही सर्विस, वही पोर्ट, वही इरादा, और नियम सिर्फ़ एक एड्रेस फ़ैमिली पर मौजूद है।\nजिसने भी वह नियम लिखा, उसने उसे IPv4 के लिए लिखा और उसका जोड़ीदार कभी नहीं लिखा। मुझे नहीं पता इसका मक़सद क्या था, मेरा अंदाज़ा है कि DNS को लोकल रखने से जुड़ा कुछ, लेकिन जो भी था, वह जब से इस लाइन पर IPv6 है तब से आधे ट्रैफ़िक पर ही हासिल हो रहा है। अगर यह किसी वजह से था, तो काम नहीं करता। अगर नहीं था, तो इसे वहाँ नहीं होना चाहिए।\nयह dual-stack समस्या का रोज़मर्रा वाला रूप है, और यह इस बहस से कहीं ज़्यादा आम है कि IPv6 लगाना भी चाहिए या नहीं। दो नियम-पुस्तिकाएँ। एक की देखरेख होती है।\nपूरी स्क्रिप्ट कोई डिपेंडेंसी नहीं, कोई इंस्टॉल नहीं, स्टैंडर्ड लाइब्रेरी के सिवा कुछ नहीं। Python 3.6 या उसके बाद का, और Linux पर कोई विशेषाधिकार नहीं।\nपोर्टेबिलिटी की पूरी कहानी ये दो क्लास हैं। ErrorQueue Linux वाला रास्ता है: सॉकेट पर IP_RECVERR चालू कीजिए, और प्रोब फ़ेल होने के बाद MSG_ERRQUEUE पढ़िए और राउटर का एड्रेस उस sock_extended_err स्ट्रक्चर से निकालिए जिसके साथ कर्नेल उसे जोड़ता है। RawIcmp बाक़ी हर जगह के लिए है: एक raw ICMP सॉकेट खोलिए, जो आए उसे पढ़िए, पैकेट से सोर्स एड्रेस लीजिए। पहले को कुछ नहीं चाहिए, दूसरे को root चाहिए, और बाक़ी प्रोग्राम को परवाह नहीं कि उसे कौन सा मिला।\nएक बारीकी बताने लायक़ है क्योंकि यही सही जवाब और विश्वसनीय-से-लगने वाले जवाब का फ़र्क़ है। probe() में एरर क्यू को SO_ERROR देखने से पहले ख़ाली किया जाता है। ICMP एरर TCP सॉकेट तक एक सादे errno के रूप में पहुँचता है, ICMP 3/3 port unreachable ECONNREFUSED बनकर आता है, बिल्कुल एक असली रीसेट की तरह, तो पहले SO_ERROR जाँचने से इस पोस्ट में ऊपर वाला नक़ली SMTP रीसेट दूसरी तरफ़ से आया एक ईमानदार इनकार बताया जाता। पहले क्यू पढ़िए और ee_origin आपको बताता है कि किसी राउटर ने बात की।\n#!/usr/bin/env python3 \u0026#34;\u0026#34;\u0026#34;hopfind - work out how many hops away the thing blocking your port is. Walks the IPv4 TTL, or the IPv6 hop limit, up from 1 and records which router answers at each step - using the protocol and port you actually care about instead of traceroute\u0026#39;s default UDP high ports. Run it twice. Once against something that works, once against the port that does not. The hop where the answers stop is the device dropping you, and the run that works gives you its address. python3 hopfind.py example.net 445 # the port under suspicion python3 hopfind.py example.net 443 # the reference run python3 hopfind.py example.net 53 --proto udp python3 hopfind.py 2001:db8::1 443 -6 On Linux this needs no privileges at all: IP_RECVERR and IPV6_RECVERR hand the ICMP errors back on the ordinary socket that caused them. On macOS, the BSDs and Solaris the errors have to be read off a raw ICMP socket, which means root. Written for https://blogs.damiendye.uk/networking/how-far-away-is-the-firewall/ Public domain. Do what you like with it. \u0026#34;\u0026#34;\u0026#34; import argparse import errno import os import select import socket import struct import sys import time # Linux socket options. Absent from the socket module on some builds, so they # are spelled out rather than looked up. IP_RECVERR = 11 IPV6_RECVERR = 25 # ee_origin values from linux/errqueue.h. Anything else means the errno came # from the local stack rather than from a router. SO_EE_ORIGIN_ICMP = 2 SO_EE_ORIGIN_ICMP6 = 3 ICMP_V4 = { (11, 0): \u0026#34;time exceeded in-transit\u0026#34;, (11, 1): \u0026#34;fragment reassembly time exceeded\u0026#34;, (3, 0): \u0026#34;net unreachable\u0026#34;, (3, 1): \u0026#34;host unreachable\u0026#34;, (3, 2): \u0026#34;protocol unreachable\u0026#34;, (3, 3): \u0026#34;port unreachable\u0026#34;, (3, 4): \u0026#34;fragmentation needed\u0026#34;, (3, 9): \u0026#34;net administratively prohibited\u0026#34;, (3, 10): \u0026#34;host administratively prohibited\u0026#34;, (3, 13): \u0026#34;communication administratively prohibited\u0026#34;, (5, 0): \u0026#34;redirect\u0026#34;, } ICMP_V6 = { (3, 0): \u0026#34;hop limit exceeded in-transit\u0026#34;, (3, 1): \u0026#34;fragment reassembly time exceeded\u0026#34;, (1, 0): \u0026#34;no route to destination\u0026#34;, (1, 1): \u0026#34;communication administratively prohibited\u0026#34;, (1, 3): \u0026#34;address unreachable\u0026#34;, (1, 4): \u0026#34;port unreachable\u0026#34;, (2, 0): \u0026#34;packet too big\u0026#34;, } def describe(family, icmp_type, icmp_code): table = ICMP_V4 if family == socket.AF_INET else ICMP_V6 return table.get((icmp_type, icmp_code), \u0026#34;unrecognised\u0026#34;) def is_expiry(family, icmp_type): \u0026#34;\u0026#34;\u0026#34;Was this the router saying \u0026#39;your hop budget ran out here\u0026#39;?\u0026#34;\u0026#34;\u0026#34; return icmp_type == (11 if family == socket.AF_INET else 3) class ErrorQueue: \u0026#34;\u0026#34;\u0026#34;Linux. The kernel reports the ICMP error on the socket that provoked it.\u0026#34;\u0026#34;\u0026#34; def arm(self, sock, family): if family == socket.AF_INET: sock.setsockopt(socket.IPPROTO_IP, IP_RECVERR, 1) else: sock.setsockopt(socket.IPPROTO_IPV6, IPV6_RECVERR, 1) def extra_readers(self): return [] def collect(self, sock, family): try: _, ancillary, _, _ = sock.recvmsg(0, 1024, socket.MSG_ERRQUEUE) except OSError: return None wanted = (socket.IPPROTO_IP, IP_RECVERR) if family == socket.AF_INET \\ else (socket.IPPROTO_IPV6, IPV6_RECVERR) for level, kind, data in ancillary: if (level, kind) != wanted or len(data) \u0026lt; 16: continue # struct sock_extended_err, then the sockaddr of the router that # sent the error - SO_EE_OFFENDER in the kernel headers. _, origin, icmp_type, icmp_code = struct.unpack_from(\u0026#34;=IBBB\u0026#34;, data, 0) if origin not in (SO_EE_ORIGIN_ICMP, SO_EE_ORIGIN_ICMP6): return None addr = None if len(data) \u0026gt;= 24: offender_family, = struct.unpack_from(\u0026#34;=H\u0026#34;, data, 16) if offender_family == socket.AF_INET: addr = socket.inet_ntoa(data[20:24]) elif offender_family == socket.AF_INET6 and len(data) \u0026gt;= 40: addr = socket.inet_ntop(socket.AF_INET6, data[24:40]) return addr, icmp_type, icmp_code return None class RawIcmp: \u0026#34;\u0026#34;\u0026#34;macOS, the BSDs, illumos, Solaris. Read the ICMP off a raw socket, as root.\u0026#34;\u0026#34;\u0026#34; def __init__(self, family): proto = socket.IPPROTO_ICMP if family == socket.AF_INET else socket.IPPROTO_ICMPV6 self.sock = socket.socket(family, socket.SOCK_RAW, proto) self.sock.setblocking(False) def arm(self, sock, family): pass def extra_readers(self): return [self.sock] def collect(self, sock, family): try: packet, peer = self.sock.recvfrom(1500) except OSError: return None if family == socket.AF_INET: # BSD raw sockets hand back the IP header too. header_len = (packet[0] \u0026amp; 0x0F) * 4 packet = packet[header_len:] if len(packet) \u0026lt; 2: return None return peer[0], packet[0], packet[1] def probe(dest, port, proto, family, hop_limit, timeout, listener): \u0026#34;\u0026#34;\u0026#34;One probe at one hop limit. Returns (icmp, socket_state, note).\u0026#34;\u0026#34;\u0026#34; kind = socket.SOCK_STREAM if proto == \u0026#34;tcp\u0026#34; else socket.SOCK_DGRAM sock = socket.socket(family, kind) if family == socket.AF_INET: sock.setsockopt(socket.IPPROTO_IP, socket.IP_TTL, hop_limit) else: sock.setsockopt(socket.IPPROTO_IPV6, socket.IPV6_UNICAST_HOPS, hop_limit) listener.arm(sock, family) sock.setblocking(False) try: if kind == socket.SOCK_DGRAM: sock.connect((dest, port)) sock.send(b\u0026#34;\\x00\u0026#34; * 32) else: try: sock.connect((dest, port)) except BlockingIOError: pass except OSError as exc: sock.close() return None, None, \u0026#34;local error: %s\u0026#34; % exc.strerror readers = [sock] + listener.extra_readers() writers = [] if kind == socket.SOCK_DGRAM else [sock] deadline = time.time() + timeout icmp = state = None while time.time() \u0026lt; deadline: ready_r, ready_w, ready_x = select.select( readers, writers, [sock], max(0.01, deadline - time.time())) if not (ready_r or ready_w or ready_x): continue # Drain the error queue first, always. An ICMP error reaches a TCP # socket as a plain errno, so SO_ERROR on its own cannot tell you # whether a router spoke or the far end did. icmp = listener.collect(sock, family) if icmp: break if ready_w: err = sock.getsockopt(socket.SOL_SOCKET, socket.SO_ERROR) if err == 0: state = \u0026#34;connected\u0026#34; elif err == errno.ECONNREFUSED: state = \u0026#34;TCP reset\u0026#34; else: state = os.strerror(err) break sock.close() if icmp or state: return icmp, state, None return None, None, \u0026#34;no reply\u0026#34; def walk(dest, port, proto, family, first, last, timeout, listener): print(\u0026#34;walking to %s %s/%d hop limit %d-%d\u0026#34; % (dest, proto.upper(), port, first, last)) answered = [] for hop in range(first, last + 1): started = time.time() icmp, state, _ = probe(dest, port, proto, family, hop, timeout, listener) rtt = (time.time() - started) * 1000 if icmp: addr, icmp_type, icmp_code = icmp print(\u0026#34; %2d %-39s %7.1f ms ICMP %d/%d %s\u0026#34; % (hop, addr or \u0026#34;?\u0026#34;, rtt, icmp_type, icmp_code, describe(family, icmp_type, icmp_code))) if is_expiry(family, icmp_type): answered.append((hop, addr)) else: return answered, hop, \u0026#34;icmp-reject\u0026#34;, addr elif state: print(\u0026#34; %2d %-39s %7.1f ms %s\u0026#34; % (hop, dest, rtt, state)) return answered, hop, state, dest else: print(\u0026#34; %2d *\u0026#34; % hop) return answered, None, \u0026#34;silent\u0026#34;, None def main(): parser = argparse.ArgumentParser(description=__doc__.splitlines()[0]) parser.add_argument(\u0026#34;host\u0026#34;) parser.add_argument(\u0026#34;port\u0026#34;, nargs=\u0026#34;?\u0026#34;, type=int, default=443) parser.add_argument(\u0026#34;--proto\u0026#34;, choices=(\u0026#34;tcp\u0026#34;, \u0026#34;udp\u0026#34;), default=\u0026#34;tcp\u0026#34;) parser.add_argument(\u0026#34;--first\u0026#34;, type=int, default=1, help=\u0026#34;hop limit to start at\u0026#34;) parser.add_argument(\u0026#34;--max\u0026#34;, type=int, default=20, help=\u0026#34;hop limit to stop at\u0026#34;) parser.add_argument(\u0026#34;--wait\u0026#34;, type=float, default=2.0, help=\u0026#34;seconds to wait per hop\u0026#34;) parser.add_argument(\u0026#34;-6\u0026#34;, dest=\u0026#34;v6\u0026#34;, action=\u0026#34;store_true\u0026#34;, help=\u0026#34;force IPv6\u0026#34;) parser.add_argument(\u0026#34;-4\u0026#34;, dest=\u0026#34;v4\u0026#34;, action=\u0026#34;store_true\u0026#34;, help=\u0026#34;force IPv4\u0026#34;) args = parser.parse_args() family = socket.AF_INET6 if args.v6 else socket.AF_INET kind = socket.SOCK_STREAM if args.proto == \u0026#34;tcp\u0026#34; else socket.SOCK_DGRAM dest = socket.getaddrinfo(args.host, args.port, family, kind)[0][4][0] if sys.platform.startswith(\u0026#34;linux\u0026#34;): listener = ErrorQueue() else: try: listener = RawIcmp(family) except PermissionError: sys.exit(\u0026#34;%s cannot report ICMP errors on a normal socket, so this \u0026#34; \u0026#34;needs a raw one. Run it as root.\u0026#34; % sys.platform) answered, stop, why, who = walk(dest, args.port, args.proto, family, args.first, args.max, args.wait, listener) what = \u0026#34;%s/%d\u0026#34; % (args.proto.upper(), args.port) print() if why == \u0026#34;connected\u0026#34;: print(\u0026#34;Verdict: %s is open. It answered at hop %d.\u0026#34; % (what, stop)) elif why == \u0026#34;icmp-reject\u0026#34;: print(\u0026#34;Verdict: %s at hop %d is refusing %s on policy, and is honest \u0026#34; \u0026#34;enough to say so.\u0026#34; % (who, stop, what)) elif why == \u0026#34;TCP reset\u0026#34;: print(\u0026#34;Verdict: a reset came back to a probe with a hop limit of %d.\u0026#34; % stop) print(\u0026#34; Nothing more than %s away can have sent it, so check the reply\u0026#34; % (\u0026#34;one hop\u0026#34; if stop == 1 else \u0026#34;%d hops\u0026#34; % stop)) print(\u0026#34; TTL before you believe the host did.\u0026#34;) elif answered: last_hop, last_addr = answered[-1] print(\u0026#34;Verdict: answers stop after hop %d (%s).\u0026#34; % (last_hop, last_addr)) print(\u0026#34; Whatever swallows %s is hop %d.\u0026#34; % (what, last_hop + 1)) print(\u0026#34; Walk a port that works and read off the address at hop %d.\u0026#34; % (last_hop + 1)) else: print(\u0026#34;Verdict: nothing answered at all, not even the first hop. Either the\u0026#34;) print(\u0026#34; first hop is the one dropping you, or the ICMP errors are being\u0026#34;) print(\u0026#34; filtered on the way back. Walk a port that works to tell those\u0026#34;) print(\u0026#34; two apart.\u0026#34;) if __name__ == \u0026#34;__main__\u0026#34;: main() यह आपको क्या नहीं बता सकता तरीक़ा सस्ता है और ज़्यादातर चीज़ों के बारे में ईमानदार है, लेकिन यह टोपोलॉजी स्कैनर नहीं है। टिकट में साफ़ बताइए कि आपने असल में क्या मापा।\nअलग five-tuple अलग रास्ते ले सकते हैं। ECMP सोर्स और डेस्टिनेशन पोर्ट को अगले हॉप के चुनाव में हैश करता है, तो दो अलग पोर्ट पर दो रन के एक ही राउटर से गुज़रने की कोई गारंटी नहीं है, और यही उन दो बातों में से एक है जो समझा सकती है कि ऊपर हॉप 5 ने एक रन को जवाब क्यों दिया और दूसरे पर चुप क्यों रहा। दोनों रन दोहराइए। जो सीमा खिसकती है वह साबित नहीं है।\nMPLS हॉप छिपाता है। एक label-switched कोर एक हॉप जैसा दिख सकता है, या बिल्कुल नहीं। किसी और के बैकबोन के आर-पार कोई भी गिनती एक निचली सीमा है।\nICMP बनाना लगभग हर जगह रेट लिमिटेड है। राउटर के जवाब देने से तेज़ प्रोब कीजिए और आप अपने ही स्टार बना लेते हैं। hopfind.py हर हॉप पर एक प्रोब भेजता है और इंतज़ार करता है; यह जानबूझकर है।\nवापसी का रास्ता बाहर जाने वाले रास्ते जैसा होना ज़रूरी नहीं। बाहर का हॉप काउंट वापसी का हॉप काउंट नहीं है, और उल्टे TTL वाला हिसाब सिर्फ़ वापसी वाला हिस्सा मापता है।\nAnycast का मतलब है कि हॉप N पर होस्ट दो बार एक ही बॉक्स न हो। ख़ासकर पब्लिक रिज़ॉल्वर और CDN।\nपूरा हुआ हैंडशेक इसका मतलब नहीं कि सेशन बचा रहेगा। एक stateful फ़ायरवॉल SYN को जाने दे सकता है और जाँच के बाद आगे का ड्रॉप कर सकता है। अगर कनेक्शन खुलता है और फिर मर जाता है, तो यह ग़लत औज़ार है: जाकर कैप्चर कीजिए।\nआपने पहला ड्रॉप करने वाला डिवाइस ढूँढा है, वह नहीं जिसे कोई मानेगा। CGN या कैरियर नेटवर्क में हॉप N+1 का एड्रेस एक ही एड्रेस के पीछे कई बॉक्स में से एक हो सकता है। फिर भी उसी का हवाला देना सही है, क्योंकि यह रास्ते के बारे में एक तथ्य है।\nयह असल में किस काम का है उछाल-कूद ख़त्म करना। इस पूरी मेहनत का यही हासिल है।\n“पोर्ट 445 कहीं ब्लॉक है” टिकट वापस करने का न्योता है। यह नहीं है:\n192.0.2.4 तक TCP/445 हॉप 11 पर, एड्रेस 192.0.2.31 पर, चुपचाप ड्रॉप होता है। उसी रास्ते पर हॉप 11 TCP/443 को 26 ms में ICMP Time Exceeded से जवाब देता है और 445 पर बिल्कुल कुछ नहीं, तो यह ड्रॉप उस डिवाइस पर एक पॉलिसी फ़ैसला है, रूटिंग की ख़राबी नहीं। उसके आगे के दस हॉप साफ़ हैं। बीस मिनट में चार बार दोहराया गया, बिना विशेषाधिकार वाले शेल से, स्क्रिप्ट संलग्न है।\nइसे कोई वापस नहीं करता। यह एक डिवाइस का नाम बताता है, बताता है कि उसने क्या किया, बताता है कि उसने क्या नहीं किया, और काम करके दिखाता है। वे इसे बदलें या नहीं, यह अब भी उनका फ़ैसला है। लेकिन हफ़्ते भर की पिंग-पोंग ख़त्म, और इसमें चार कमांड लगीं।\nइसमें सब कुछ एक 8-बिट फ़ील्ड से निकला जिसे 1981 में टाइमर के रूप में तय किया गया था, जिसे कभी एक बार भी टाइमर की तरह इस्तेमाल नहीं किया गया, और जो चुपचाप “कहीं” को एक एड्रेस में बदल देता है।\nपढ़ना सीखने लायक़ है।\n","permalink":"https://blogs.damiendye.uk/hi/networking/how-far-away-is-the-firewall/","summary":"“पोर्ट 445 कहीं ब्लॉक है” कोई डायग्नोसिस नहीं है, और इसी वजह से फ़ायरवॉल टिकट एक हफ़्ते तक आपके और आपके प्रोवाइडर के बीच उछलते रहते हैं। जब आपका हॉप बजट ख़त्म होता है, तो रास्ते का हर राउटर आपको एक ICMP Time Exceeded देने का कर्ज़दार है, और यही एक टाइमआउट को दूरी में बदल देता है। मैंने अपनी लाइन पर TTL एक-एक करके बढ़ाया और तीन ऐसी ख़राबियाँ पाईं जिनका मुझे पता नहीं था: ग्यारह हॉप दूर SMB ड्रॉप, एक हॉप दूर नक़ली SMTP रीसेट, और एक IPv4 नियम जिसका कोई IPv6 जोड़ीदार नहीं।","title":"फ़ायरवॉल ग्यारह हॉप दूर है"},{"content":"UK की इंडस्ट्री IPv6 के बारे में एक कहानी सुनाती है, और वह कुछ ऐसी है। माइग्रेशन मुश्किल है। हार्डवेयर पुराना है। ग्राहक इसे माँगते नहीं। इसमें पैसा नहीं है। किसी दिन, जब बिज़नेस केस बदलेगा, तब हम इस पर काम करेंगे।\nइसका हर हिस्सा एक झूठ है जो इंडस्ट्री खुद को सुनाती है ताकि उसे कोई काम न करना पड़े।\nIPv6 दिसंबर 1995 में स्पेसिफ़ाई हुआ था। मैं इस पर 6bone के ज़रिए पहुँचा, वह प्रायोगिक टेस्टबेड जो असली इंटरनेट से पहले इसे ढोता था, और मैंने Linux स्टैक और Windows XP पर Microsoft Research का स्टैक दोनों चलाकर देखा कि वे कैसे अलग हैं। मेरा एक्सेस Hurricane Electric से आता था।\n6bone 6 जून 2006 को बंद कर दिया गया, तो मैं 6to4 ऑटोमैटिक टनलिंग पर चला गया, और बाद में एक Hurricane Electric टनल पर — जो आज भी मुफ़्त है, और माँगने भर से वे आपको एक /48 रूट कर देंगे। नेटिव IPv6 मेरे घर 2017 में आया, जब मैंने ISP बदलकर Zen लिया।\nयानी लगभग बीस साल तक मेरा IPv6 एक अमेरिकी ट्रांज़िट कंपनी से आया जो इसे मुफ़्त बाँट रही थी, न कि उन ब्रिटिश ISPs में से किसी से जिन्हें मैं पैसे दे रहा था। Hurricane Electric जिसे चाहिए उसे रूटेड /48 दे देता था। मेरा अपना प्रोवाइडर मुझे पाँच पाउंड महीने में एक स्टैटिक IPv4 बेचता।\nबाकी कहानी तारीखें बताती हैं। IETF ने 2006 में 6bone बंद किया और मई 2015 में 6to4 के anycast रिले deprecate कर दिए, इस मैकेनिज़्म को “unsuitable for widespread deployment and use in the Internet” कहते हुए। एक ब्रिटिश ISP के मुझे एक पता देने के इंतज़ार में मैंने दो आधिकारिक ट्रांज़िशन मैकेनिज़्म को मरते देख लिया। जिस दिन 6bone बंद हुआ, नीचे के चार्ट वाले चालीस UK प्रोवाइडरों में से सैंतीस ने तब तक रजिस्ट्री से एलोकेशन माँगा तक नहीं था। उनमें से बाईस ने — आधे से ज़्यादा ने — 2015 या उसके बाद तक नहीं माँगा, उसी साल जब IETF ने 6to4 से भी हाथ खींच लिया।\n2007 में Windows Vista के बाद से यह हर उस ऑपरेटिंग सिस्टम में डिफ़ॉल्ट रूप से चालू है जो कोई भी चलाता है। रजिस्ट्री से इसका कोई अतिरिक्त खर्च नहीं है। इस देश में जिस सबसे बड़े ISP ने इसे आज़माया, उसने एक मीटिंग रूम में समा जाने वाली टीम के साथ तीन साल में काम पूरा कर दिया, और इसके लिए अवॉर्ड भी जीता।\nस्पेसिफ़िकेशन को तीस साल। जिस दिन इंटरनेट ने इसे हमेशा के लिए चालू किया उसे चौदह साल। और इस देश में जवाब था जानबूझकर इंटरनेट तोड़ देना, टूटे हिस्से को और मशीनरी में लपेट देना, और असुविधा का बिल ग्राहक को थमा देना।\nयह खर्च की समस्या नहीं है। यह “कौन झंझट करे” की समस्या है, और यह बीस साल से चल रही है।\nमैंने क्या मापा, और कैसे नीचे की हर चीज़ या तो किसी और का काम है, लिंक के साथ, या ऐसा आँकड़ा जो मैंने खुद निकाला। जहाँ वह मेरा है, उसे गिनने वाली स्क्रिप्ट नीचे के डाउनलोड में है, जैसी प्रकाशित है वैसी ही चलाई गई। अकेला अपवाद एड्रेस के कुल योग हैं, और उन्हें कैसे निकाला गया यह मैं चेतावनियों में समझाता हूँ। चार सार्वजनिक स्रोत, सभी मुफ़्त: रजिस्ट्री की डेलिगेशन फ़ाइलें, RIPE रूटिंग टेबल डंप, RIPE डेटाबेस, और DNS। जहाँ मैंने पूरा मापने के बजाय एक सैंपल चुना, वहाँ मैं यह बताता हूँ।\nरूटिंग के आँकड़े सार्वजनिक फ़ाइलों के दो सेट से आते हैं।\nपहला है डेलिगेशन फ़ाइलें, हर क्षेत्रीय रजिस्ट्री की एक, जो उस रजिस्ट्री के दिए हर एड्रेस ब्लॉक और AS नंबर की सूची देती हैं, वह किस देश में रजिस्टर्ड है, और उसे रखने वाले संगठन का एक अपारदर्शी पहचानकर्ता। RIPE की फ़ाइल यूरोप और मध्य पूर्व को कवर करती है, और UK के लिए वही मायने रखती है — लेकिन कुछ दर्जन UK-रजिस्टर्ड AS नंबर ARIN और APNIC की फ़ाइलों में हैं, और आगे की तुलना को सब चाहिए। मेरी फ़ाइलें 26 और 27 अगस्त 2026 को बनी थीं।\nदूसरा है RIPE Routing Information Service का ग्लोबल रूटिंग टेबल का डंप, जो BGP में हर प्रीफ़िक्स और उसे announce करने वाला AS नंबर बताता है। IPv4 और IPv6 अलग-अलग फ़ाइलों में आते हैं। मेरा डंप 27 अगस्त 2026 को 18:06 UTC पर बना था।\nदोनों को साथ रखिए और आप वह सवाल हल कर सकते हैं जिसे UK इंडस्ट्री में कोई ज़ोर से पूछा जाना नहीं चाहता: इस देश ने जो नेटवर्क रजिस्टर किए, उनमें से कितनों ने असल में IPv6 चालू किया है?\n\u0026#8615; स्क्रिप्ट, चलाने के लिए तैयार ipv6-uk-2026-scripts.zip · 10 kB डेलिगेशन फ़ाइलों से GB पर रजिस्टर्ड AS नंबर निकालिए, RIS डंप से हर वह AS नंबर निकालिए जो कोई प्रीफ़िक्स originate करता है, और हर एड्रेस फ़ैमिली के लिए दोनों सूचियों को comm से मिलाइए। इससे नीचे की पहली टेबल बनती है। एक जाल जिसका नाम लेना ज़रूरी है: lexical क्रम में sort कीजिए, sort -n से नहीं। comm स्ट्रिंग की तुलना करता है, और संख्या के हिसाब से sort किया इनपुट चुपचाप गलत जवाब देता है, कोई ऐसा एरर नहीं जो आपकी नज़र में आए।\nGB की जगह कोई और देश कोड रखिए और आपको आगे की तुलना वाली टेबल में उस देश की पंक्ति मिल जाती है। 05-country-row.sh ठीक यही करता है।\nसंगठन-स्तर के आँकड़े आठवाँ फ़ील्ड इस्तेमाल करते हैं, जो हर रिसोर्स रखने वाले अकाउंट का रजिस्ट्री का अपारदर्शी हैंडल है। ये सिर्फ़ RIPE फ़ाइल पर रहते हैं — हैंडल हर रजिस्ट्री के अपने होते हैं, इसलिए पाँचों को जोड़ने से एक ही कंपनी दो बार गिनी जाएगी, मिलेगी नहीं। UK के संगठन RIPE के सदस्य हैं, इसलिए वे RIPE में ही हैं। इतने संगठनों के पास AS नंबर है और IPv6 बिल्कुल नहीं:\n03-org-no-ipv6.sh उन्हें गिनता है। और 04-silent-holders.py सबसे ज़्यादा मायने रखने वाली स्क्रिप्ट है। वे संगठन जिनके पास IPv6 है, जो BGP में लाइव हैं, और उसमें से कुछ भी announce नहीं करते।\nआँकड़ों से पहले चार चेतावनियाँ, क्योंकि वे मायने रखती हैं और मैं उन्हें खुद कह देना बेहतर समझता हूँ बजाय इसके कि कोई उन्हें मेरे मुँह पर मारे।\nसंगठन हैंडल हर रजिस्ट्री अकाउंट के हिसाब से हैं, इसलिए कई अकाउंट चलाने वाली कंपनी एक से ज़्यादा बार गिनी जाती है।\nBGP में IPv6 प्रीफ़िक्स announce करना ग्राहक को IPv6 देने जैसा नहीं है। यह फ़र्श है, छत नहीं। जो नेटवर्क कुछ भी announce नहीं करता, उसने इसे पक्के तौर पर deploy नहीं किया। जो नेटवर्क कुछ announce करता है, वह शायद अब भी इस पर बैठा हो।\nएड्रेस के योग overlapping प्रीफ़िक्स को समेट देते हैं। जो नेटवर्क एक /16 के साथ उसी में से चार /17 announce करता है, वह 65,536 पते announce कर रहा है, 196,608 नहीं, और प्रीफ़िक्स को भोलेपन से गिनने पर बड़े धारकों के आँकड़े दो या तीन गुना फूल जाते हैं। मैं योग करने से पहले Python का ipaddress.collapse_addresses इस्तेमाल करता हूँ।\nआगे की पचास वेबसाइटों की सूची एक सैंपल है जो मैंने हाथ से चुना, पूरे देश का माप नहीं। कोई और पचास अलग अनुपात देंगी। यह एक पैटर्न दिखाती है, कोई अनुपात साबित नहीं करती, और जिनकी मैं बात कर रहा हूँ उनका नाम मैं साथ-साथ लेता हूँ।\nइनमें से पहली दो चेतावनियाँ रूटिंग के आँकड़ों को सच्चाई से ज़्यादा इंडस्ट्री के पक्ष में बनाती हैं।\nगिनती UK के AS नंबर, और कितने IPv6 चलाते हैं ग्लोबल रूटिंग टेबल में UK नेटवर्क, 27 अगस्त 2026 स्रोत: RIPE NCC डेलिगेशन फ़ाइल और RIPE RIS रूटिंग टेबल डंप UK संगठनों पर रजिस्टर्ड 3,106 रूटिंग टेबल में दिखते हैं 2,248 IPv4 announce करते हैं 2,078 IPv6 announce करते हैं 1,048 IPv4 है, IPv6 बिल्कुल नहीं 1,200 लाइव UK नेटवर्कों का 57.7% उन 1,200 में से कुल\u0026#160;463 के पास रजिस्ट्री से पहले ही मिला IPv6 स्पेस है और उन्होंने उसका एक भी प्रीफ़िक्स कभी announce नहीं किया। AS नंबर रखने वाले और 1,113 UK संगठनों ने कभी IPv6 माँगा ही नहीं, जबकि पहले से दी जा रही सदस्यता फ़ीस के ऊपर इसकी कोई कीमत नहीं। UK के किसी संगठन पर रजिस्टर्ड हर AS नंबर, 27 अगस्त 2026 की ग्लोबल रूटिंग टेबल से मिलाया गया। दाईं तरफ़ का फ़ासला ही पूरी दलील है: 1,200 UK नेटवर्क इंटरनेट पर लाइव हैं और उनमें IPv6 बिल्कुल नहीं है, और उनमें से 463 के पास रजिस्ट्री से मिला IPv6 स्पेस है जो उन्होंने कभी announce नहीं किया। UK संगठनों पर रजिस्टर्ड AS नंबर 3,106 ग्लोबल रूटिंग टेबल में दिखते हैं 2,248 IPv4 announce करते हैं 2,078 IPv6 announce करते हैं 1,048 IPv4 announce करते हैं और IPv6 नहीं 1,200 — 57.7% लाइव UK नेटवर्कों में से लगभग दस में से छह IPv6 बिल्कुल नहीं चलाते। आंशिक रूप से नहीं। किसी फ़्लैग के पीछे नहीं। किसी लैब में नहीं। एक भी प्रीफ़िक्स नहीं।\nअब वह हिस्सा जो खर्च वाली दलील को हमेशा के लिए खत्म कर देता है।\nAS नंबर रखने वाले 2,363 UK संगठनों में से 1,113 — 47.1% — के पास किसी भी तरह का IPv6 एलोकेशन नहीं है। उन्होंने रजिस्ट्री से इसे कभी माँगा ही नहीं।\nRIPE NCC की सदस्यता 2026 के लिए EUR 1,800 सालाना है, फ़्लैट, और उस फ़ीस में आपके एलोकेशन शामिल हैं। एक IPv6 /29 आपको 524,288 सबनेट देता है, हर एक पूरे IPv4 इंटरनेट जितना बड़ा। यह उस सदस्यता के साथ मुफ़्त है जिसका पैसा ये संगठन पहले से दे रहे हैं, और यह दो-एक दिन में आ जाता है।\nउनमें से आधों ने कभी फ़ॉर्म भरा ही नहीं।\nऔर जिन्होंने भरा, उनमें से 463 UK संगठनों के पास IPv6 स्पेस है, वे हर दिन दुनिया को IPv4 announce करते हैं, और IPv6 बिल्कुल announce नहीं करते। यह BGP में लाइव UK IPv6 धारकों का 44.7% है।\nइसे फिर से पढ़िए, क्योंकि पूरी पोस्ट इसी एक वाक्य में है। उन्होंने पते माँगे। उन्हें पते दिए गए। उन्होंने उन्हें एक स्प्रेडशीट में डाल दिया। फिर किसी से इतना नहीं हुआ कि उन्हें एक राउटर में टाइप कर दे।\nइसे आप पैसे से नहीं समझा सकते। किसी ने कुछ खर्च नहीं किया। न कोई इनवॉइस, न कोई procurement, न कोई बिज़नेस केस, न कोई कैपिटल रिक्वेस्ट। एक मुफ़्त चीज़ रजिस्ट्री अकाउंट में पड़ी है, और एक इंजीनियरिंग विभाग है जिसने चौदह साल में वह टिकट खोला तक नहीं।\nउस सूची में कौन है ये UK के सबसे बड़े नेटवर्क हैं जो IPv4 announce करते हैं और IPv6 नहीं, 27 अगस्त 2026 को उनके असल में announce किए एड्रेस स्पेस के हिसाब से। नाम RIPE डेटाबेस से आते हैं, जो आपको इनमें से किसी का भी धारक बता देगा:\ncurl -s https://rest.db.ripe.net/ripe/aut-num/AS15914.json \\ | python3 -c \u0026#39;import sys,json; a=json.load(sys.stdin)[\u0026#34;objects\u0026#34;][\u0026#34;object\u0026#34;][0][\u0026#34;attributes\u0026#34;][\u0026#34;attribute\u0026#34;]; print(next(x[\u0026#34;value\u0026#34;] for x in a if x[\u0026#34;name\u0026#34;]==\u0026#34;org\u0026#34;))\u0026#39; बिना IPv6 वाले सबसे बड़े UK नेटवर्क IPv4 announce करने वाले और IPv6 न करने वाले सबसे बड़े UK नेटवर्क, 27 अगस्त 2026 BGP में announce किए IPv4 पते, overlapping प्रीफ़िक्स समेटे गए। नाम RIPE डेटाबेस से। 0k 50k 100k 150k 200k Vodafone Limited AS25310 229,376 Nationwide Building Society AS8698 131,072 British Airways plc AS15914 131,072 Convergence Group (Metronet) AS42973 94,976 Rackspace Ltd AS24867 86,016 Lloyds Banking Group AS49758 81,920 QinetiQ Limited AS24775 69,632 Barclays Bank plc AS12701 68,608 MUFG Securities EMEA AS8651 65,792 University of Warwick AS201773 65,792 NatWest Markets plc AS21054 65,536 PricewaterhouseCoopers Services AS21296 65,536 London Borough of Hackney AS39400 65,536 Wireless Logic Limited AS51320 39,424 IPv6 announce न करने वाले UK नेटवर्क कुल मिलाकर\u0026#160;4,232,232 IPv4 पतों\u0026#160;पर बैठे हैं। Barclays के पास 141.228.0.0/16 अगस्त 1990 से है। 27 अगस्त 2026 को IPv4 announce करने वाले और IPv6 न करने वाले चौदह सबसे बड़े UK नेटवर्क, उनके असल में announce किए एड्रेस स्पेस के हिसाब से। योग से पहले overlapping प्रीफ़िक्स समेटे गए। उस सूची को देखिए और बिना हँसे “cost barrier” बोलकर दिखाइए।\nचार बड़े क्लियरिंग बैंक। एक ग्लोबल अकाउंटेंसी फ़र्म जिसका पूरा प्रोडक्ट दूसरों को यह बताना है कि अपना कामकाज कैसे चलाएँ। एक डिफ़ेंस टेक्नोलॉजी कंपनी। एक होस्टिंग प्रोवाइडर जिसे उसके ग्राहक यही जानने के पैसे देते हैं। एक internet-of-things कनेक्टिविटी बिज़नेस, SIM कार्ड बेचता हुआ, बिना IPv6 के।\nकुल मिलाकर, IPv6 announce न करने वाले UK नेटवर्क 4,232,232 IPv4 पतों पर बैठे हैं। 2026 की पहली छमाही में ट्रांसफ़र मार्केट का औसत $20.04 प्रति पता था, यानी यह अस्सी मिलियन डॉलर से ऊपर की संपत्ति है। और यही असली वजह है कि इनमें से कोई नहीं हिला: उनके पास पते भरपूर हैं, तो कमी किसी और की समस्या है, और इंटरनेट की लंबी अवधि की प्लंबिंग किसी खास की ज़िम्मेदारी नहीं।\nयह कोई रणनीति नहीं है। यह आराम से पसरे रहना है।\nडेलिगेशन फ़ाइल में हर ब्लॉक दिए जाने की तारीख होती है, तो आप ठीक-ठीक देख सकते हैं कि आराम कितना है:\ngrep -E \u0026#39;\\|ipv4\\|(141\\.228|155\\.131|155\\.136|161\\.2)\\.0\\.0\\|\u0026#39; \\ delegated-ripencc-extended-latest | cut -d\u0026#39;|\u0026#39; -f4,5,6 Barclays के पास 141.228.0.0/16 6 अगस्त 1990 से है। Nationwide और NatWest ने अपने नवंबर 1991 में लिए, चार दिन के अंतर पर। British Airways को 161.2.0.0/16 अप्रैल 1992 में मिला। ये वेब के अस्तित्व से पहले के class B ब्लॉक हैं, तब बाँटे गए जब पते मुफ़्त थे और कोई गिनता नहीं था।\nउनके बाद आने वाला हर कोई इसकी कीमत चुकाता है। AWS ने 1 फ़रवरी 2024 से हर पब्लिक IPv4 पते के लिए $0.005 प्रति घंटा लेना शुरू किया — हर एक के $43.80 सालाना — और साफ़ बताया क्यों: एक पता हासिल करने की लागत “has risen more than 300% over the past 5 years.” कमी असली है और उसकी एक कीमत है। बस वह कीमत वे लोग नहीं चुका रहे जो 1991 में मुफ़्त मिले चालीस लाख पते लेकर बैठे हैं।\nहमारे जैसे देशों के मुकाबले हम कहाँ हैं हर देश के दो आँकड़े। पहला है उसके लोगों का वह हिस्सा जो नेटिव IPv6 पर Google तक पहुँचता है, यानी 25 अगस्त 2026 का Google का माप। दूसरा है उसके लाइव नेटवर्कों का वह हिस्सा जो एक IPv6 प्रीफ़िक्स announce करता है, जो मेरा है, ऊपर वाली फ़ाइलों से ही। मैंने इसे विकसित अर्थव्यवस्थाओं तक रखा है। उन देशों से अपनी तुलना करना जिन्हें इंटरनेट देर से मिला, हमारे बारे में कुछ नहीं बताता। क्रम लोगों के हिसाब से है।\nदेश IPv6 पर यूज़र IPv6 वाले नेटवर्क लाइव नेटवर्क फ़्रांस 85.6% 48.5% 1,368 जर्मनी 76.6% 63.9% 2,291 बेल्जियम 72.8% 45.8% 273 अमेरिका 56.6% 25.9% 18,453 जापान 56.1% 56.4% 721 यूनाइटेड किंगडम 53.7% 42.3% 2,078 नॉर्वे 52.6% 66.9% 278 नीदरलैंड्स 51.9% 61.8% 1,023 कनाडा 43.6% 33.1% 1,578 आयरलैंड 38.1% 41.5% 195 ऑस्ट्रेलिया 37.2% 26.3% 1,652 स्वीडन 36.1% 53.6% 642 दक्षिण कोरिया 18.1% 5.3% 916 इटली 17.6% 35.8% 1,078 स्पेन 13.3% 26.7% 934 पंद्रह में छठा। फ़्रांस में हमसे लगभग दो-तिहाई ज़्यादा लोग IPv6 पर हैं, उसी यूरोपीय सप्लाई चेन से, उन्हीं इक्विपमेंट वेंडरों के साथ, उन्हीं ग्राहकों के साथ जो उनसे कहते हैं कि कोई इसे माँग नहीं रहा। जर्मनी यूज़र्स में हमसे तेईस पॉइंट आगे है और नेटवर्कों में बाईस पॉइंट।\nप्रतिशत वाले दोनों कॉलम आपस में मेल नहीं खाते, और यही बेमेल असली कहानी है।\nIPv6 पर यूज़र बनाम IPv6 चलाने वाले नेटवर्क, पंद्रह विकसित अर्थव्यवस्थाएँ IPv6 पर लोग, बनाम IPv6 चलाने वाले नेटवर्क Google का यूज़र माप, 25 अगस्त 2026, बनाम IPv6 प्रीफ़िक्स announce करने वाले लाइव नेटवर्कों की मेरी गिनती, 27 अगस्त 2026। लोगों का हिस्सा नेटवर्कों का हिस्सा फ़्रांस 85.6% 48.5% जर्मनी 76.6% 63.9% बेल्जियम 72.8% 45.8% अमेरिका 56.6% 25.9% जापान 56.1% 56.4% यूनाइटेड किंगडम 53.7% 42.3% नॉर्वे 52.6% 66.9% नीदरलैंड्स 51.9% 61.8% कनाडा 43.6% 33.1% आयरलैंड 38.1% 41.5% ऑस्ट्रेलिया 37.2% 26.3% स्वीडन 36.1% 53.6% दक्षिण कोरिया 18.1% 5.3% इटली 17.6% 35.8% स्पेन 13.3% 26.7% 0% 20% 40% 60% 80% 100% छोटी गुलाबी बार के ऊपर लंबी नीली बार का मतलब है कि तीन-चार कैरियर ने काम किया और बाकी देश ने नहीं। फ़्रांस, बेल्जियम, अमेरिका और यूनाइटेड किंगडम, सबकी यही शक्ल है। नॉर्वे, स्वीडन और जापान की नहीं। वही पंद्रह देश दोनों मापों पर, IPv6 इस्तेमाल करने वाले लोगों के हिस्से के क्रम में। जहाँ नेटवर्क वाली बार यूज़र वाली बार से बहुत छोटी है, वहाँ कुछ बड़े कैरियर पूरे देश को ढो रहे हैं और बाकी किसी ने ज़हमत नहीं उठाई। यही शक्ल अमेरिका, बेल्जियम, फ़्रांस — और यूनाइटेड किंगडम की है। किसी देश का यूज़र प्रतिशत तीन-चार कंपनियाँ तय करती हैं। नेटवर्क प्रतिशत बाकी सब तय करते हैं। जब पहला ऊँचा और दूसरा नीचा हो, तो इसका मतलब है कि बड़े एक्सेस नेटवर्कों ने काम किया और बाकी देश उनके भरोसे मुफ़्त की सवारी करता रहा।\nअमेरिका सबसे साफ़ मामला है: उसके 56.6% लोग IPv6 पर हैं और उसके सिर्फ़ 25.9% नेटवर्क। केबल और मोबाइल कैरियर लगभग सबको ढोते हैं। बाकी अठारह हज़ार अमेरिकी नेटवर्कों ने कुछ नहीं किया।\nहमारा भी वही खेल है, छोटे आँकड़ों के साथ — 53.7% यूज़र बनाम 42.3% नेटवर्क। वह 53.7% कोई राष्ट्रीय उपलब्धि नहीं है। वह Sky और BT है, और बाकी सबका नाममात्र योगदान।\nनॉर्वे और स्वीडन ईमानदार उलटी शक्ल हैं: हमसे कम यूज़र IPv6 पर, ज़्यादा नेटवर्क उसे चलाते हुए। उनकी इंडस्ट्री के ज़्यादा हिस्से ने असल में काम किया है, और पीछे कंज़्यूमर ISPs हैं, ट्रेड नहीं।\nऔर एक पंक्ति करीब से देखने लायक है, क्योंकि लोग इसी की तरफ़ हाथ बढ़ाते हैं जब उन्हें हमारे बारे में बेहतर महसूस करना होता है।\nदक्षिण कोरिया इस सूची का सबसे खराब देश है, काफ़ी अंतर से। 916 लाइव कोरियाई नेटवर्कों में से 61 IPv6 announce करते हैं। इकसठ।\nदुनिया के कुछ सबसे तेज़ घरेलू ब्रॉडबैंड, एक चिप इंडस्ट्री जो नोट छापती है, और उसके 94.7% नेटवर्कों ने इसे कभी चालू नहीं किया। तीनों बड़े कैरियर — KT, SK Broadband और LG U+ — इसे announce करते हैं, इसीलिए 18.1% कोरियाई यूज़र्स के पास यह है। बाकी साढ़े आठ सौ नेटवर्कों ने कुछ भी नहीं किया।\nवहाँ बहाना जो भी हो, वह पैसा नहीं है, क्षमता नहीं है, और फ़ाइबर की हालत भी नहीं।\nबीस साल का जुगाड़ पते टाइप करने के बजाय इंडस्ट्री ने यह बनाया।\nजब पते कम पड़ने लगे, तो जवाब था carrier-grade NAT: सैकड़ों ग्राहकों को एक पब्लिक IPv4 पते के पीछे डाल दो और उनके बीच ट्रांसलेट करो। नीचे की हर चीज़ इसलिए है कि यह झेलने लायक बने, और इनमें से हर डॉक्यूमेंट इंजीनियरिंग का वह काम है जो किसी ने IPv6 deploy करने के बजाय करना चुना।\nजुगाड़ किस काम के लिए RFC 6598 (2012) एक पूरा /10 — चालीस लाख पते — “shared address space” के रूप में फूँक देता है, ताकि कमी के जुगाड़ को अपने पते मिल सकें RFC 6333 (2011) DS-Lite: IPv4 को उस IPv6 नेटवर्क पर टनल करो जो आपने बनाया पर ग्राहक को नहीं दिया RFC 6877 (2013) 464XLAT: एक ही सफ़र में IPv4 को IPv6 में और फिर वापस ट्रांसलेट करो RFC 6888 (2013) वे शर्तें जो carrier-grade NAT को खतरनाक न होने के लिए पूरी करनी हैं RFC 7021 (2013) उन एप्लिकेशनों का पूरा अध्ययन जिन्हें carrier-grade NAT तोड़ता है RFC 7422 (2014) Deterministic एड्रेस मैपिंग, सिर्फ़ इसलिए ईजाद की गई कि लॉगिंग का बोझ प्रोवाइडर का दिवाला न निकाल दे RFC 7597 / 7599 (2015) MAP-E और MAP-T: IPv4 को IPv6 पर ढोने के दो और तरीके, यह माने बिना कि आपके पास IPv6 है बीस साल के जुगाड़, उस एक बदलाव के सामने जिसकी जगह वे लेते हैं हमने इसके बजाय क्या बनाया, और किसके बजाय IPv6 से बचना Shared address space: पूरा /10 फूँका RFC 6598, 2012 DS-Lite: IPv6 कोर पर IPv4 की टनल RFC 6333, 2011 464XLAT: IPv4 से ट्रांसलेट और वापस RFC 6877, 2013 carrier-grade NAT को झेलने लायक बनाने के नियम RFC 6888, 2013 जिन एप्लिकेशनों को यह तोड़ता है उनका अध्ययन RFC 7021, 2013 लॉग घटाने के लिए deterministic मैपिंग RFC 7422, 2014 MAP-E और MAP-T: फिर IPv6 पर IPv4 RFC 7597/9, 2015 ऊपर से खुद NAT टियर: सेशन टेबल, पोर्ट ब्लॉक एलोकेशन, application gateway, failover, कैपेसिटी प्लानिंग, लॉगिंग पाइपलाइन, और एक रिटेंशन कानून जो उसके नष्ट किए attribution पर पर्दा डालने को बना। IPv6 करना Dual-stack एक और एड्रेस फ़ैमिली, उसी रूटिंग प्रोटोकॉल और फ़ायरवॉल पॉलिसी पर जो पहले से है। ट्रैफ़िक के रास्ते में नया टियर नहीं। नापने को कोई सेशन state नहीं। किसी कानून के लिए लॉग नहीं रखने। रजिस्ट्री से मुफ़्त। दोनों कॉलम इंजीनियरिंग का काम हैं, और बायाँ वाला बड़ा है। फ़र्क यह है कि बाईं तरफ़ का काम किसी वेंडर से खरीदा जा सकता है, और दाईं तरफ़ का काम उन लोगों को समझना पड़ता है जिनका नेटवर्क है। दो दशक का स्टैंडर्ड्स का काम, हार्डवेयर और लॉगिंग, सब कुछ दाईं तरफ़ वाली चीज़ न करने की सेवा में। Dual-stack एक एड्रेस फ़ैमिली है जो उसके साथ जुड़ती है जो आप पहले से चला रहे हैं। बाईं तरफ़ की हर चीज़ उससे बचने के लिए है। इसकी शक्ल देखिए। सूची की हर चीज़ dual-stack से ज़्यादा मुश्किल है। IPv4 को IPv6 के अंदर टनल करना IPv6 रूट करने से साफ़ तौर पर ज़्यादा काम है, क्योंकि टनल ढोने के लिए आपको IPv6 तो रूट करना ही पड़ता है। फ़ैमिलियों के बीच ट्रांसलेट करना ट्रांसलेट न करने से ज़्यादा काम है। Carrier-grade NAT आपके नेटवर्क के बीच में बैठा एक stateful बॉक्स है, जिसके साथ कैपेसिटी प्लानिंग, failover, सेशन टेबल, पोर्ट ब्लॉक एलोकेशन, उन प्रोटोकॉल के लिए application-layer गेटवे जिन्हें वह तोड़ता है, और एक कानूनी दायित्व के नाप की लॉगिंग पाइपलाइन आती है।\nDual-stack एक एड्रेस फ़ैमिली है, एक रूटिंग प्रोटोकॉल जो आप पहले से चलाते हैं, और एक फ़ायरवॉल पॉलिसी जो आप पहले से लिख चुके हैं।\nइंडस्ट्री ने इन दो विकल्पों को देखा और बीस साल लगातार महँगा वाला चुना, क्योंकि महँगा वाला खरीदा जा सकता था और सस्ते वाले को समझना पड़ता। एक बॉक्स खरीदना procurement का काम है। IPv6 चालू करने का मतलब है कि बिल्डिंग में किसी को पता होना चाहिए कि नेटवर्क कैसे काम करता है।\nइससे असल में क्या टूटता है जो सोचते हैं कि यह बस सुंदरता का मामला है, उनके लिए यह है कि एक साझा पता आपके यूज़र्स को क्या खर्च करवाता है, उस क्रम में जिसमें वे आपको इसके बारे में फ़ोन करेंगे।\nकुछ भी अंदर नहीं पहुँच सकता। पोर्ट फ़ॉरवर्डिंग नहीं, तो कुछ भी self-hosted नहीं, होस्ट बनने वाला कोई गेम कंसोल नहीं, रिले के बिना कोई site-to-site VPN नहीं, वेंडर क्लाउड के बिना कोई सिक्योरिटी कैमरा नहीं, दूसरी साइट की चीज़ तक कोई रिमोट एक्सेस नहीं। इनमें से हर एक की जगह किसी थर्ड-पार्टी rendezvous सर्विस ले लेती है, यानी एक और कंपनी आपका डेटा रखती है क्योंकि आपके प्रोवाइडर ने आपको एक पता नहीं दिया।\nआपको अजनबियों की साख विरासत में मिलती है। कुछ सौ लोगों के साथ एक पता साझा कीजिए और आप उनका व्यवहार भी साझा करते हैं। रेट लिमिट, CAPTCHA, Wikipedia ब्लॉक, स्ट्रीमिंग के geo-एरर और फ़्रॉड स्कोरिंग, सब आप पर गिरते हैं उस चीज़ के लिए जो किसी और ने की।\nपोर्ट ख़त्म हो जाते हैं। Carrier-grade NAT के पास हर पब्लिक पते पर हर प्रोटोकॉल के लिए 65,535 पोर्ट होते हैं, और एक आधुनिक ब्राउज़र सेशन दर्जनों खा जाता है। ज़रूरत से ज़्यादा ग्राहक ठूँसिए और गड़बड़ी कोई साफ़ एरर नहीं होती। वह एक धीमी, रुक-रुककर आने वाली, दोबारा पैदा न की जा सकने वाली खराबी होती है जो अपने सिवा हर चीज़ जैसी दिखती है, और हर घटना पर सपोर्ट के कई दिन जला देती है।\nहर जुगाड़ को हमेशा के लिए मेंटेन करना पड़ता है, उन लोगों द्वारा जो वह समय असली इलाज पर लगा सकते थे।\nऔर फिर वह एक है जो असुविधा न रहकर सबकी समस्या बन गया। कोई नहीं बता सकता कि किसने क्या किया।\nवह जुगाड़ जो संसद तक पहुँचा जब सैकड़ों ग्राहक एक पता साझा करते हैं, तो पता अब किसी की पहचान नहीं करता। तो पुलिस किसी IP पते को किसी व्यक्ति तक नहीं पहुँचा सकती, और इसका जवाब IPv6 नहीं था। जवाब था कानून।\nCounter-Terrorism and Security Act 2015 की धारा 21 ने डेटा रिटेंशन व्यवस्था में खास तौर पर इसलिए बदलाव किया कि Secretary of State प्रोवाइडरों को वह अतिरिक्त डेटा रखने के लिए मजबूर कर सके जो “to link the unique attributes of a public Internet Protocol (IP) address to the person (or device) using it at any given time” ज़रूरी है। Explanatory notes इसकी ज़रूरत के बारे में साफ़ हैं: प्रोवाइडर “may share IP addresses between multiple users, and the providers generally have no business purpose for keeping a log of who used each address at a specific point in time.”\nइसे वकील की तरह नहीं, इंजीनियर की तरह पढ़िए। इंडस्ट्री ने अपना कुछ काम बचाने के लिए attribution तोड़ दिया, और संसद ने एक कानून पास किया जो उसे उस टूट-फूट पर पर्दा डालने के लिए एक लॉगिंग सिस्टम बनाने को बाध्य करता है।\nदो साल बाद Europol ने साफ़ कह दिया। अक्टूबर 2017 में उसने इंडस्ट्री से carrier-grade NAT का इस्तेमाल बंद करने की अपील प्रकाशित की, आँकड़ों के साथ: 90% मोबाइल इंटरनेट एक्सेस प्रोवाइडरों और 50% फ़िक्स्ड-लाइन प्रोवाइडरों ने एक ऐसी टेक्नोलॉजी अपना ली थी जो उन्हें अपने ही सब्सक्राइबरों की पहचान करने से रोकती थी। Europol के तत्कालीन executive director ने कहा कि CGN “has created a serious online capability gap in law enforcement efforts to investigate and attribute crime”, और बताया कि यह “forces judiciary and law enforcement authorities to investigate many more individuals than would normally be necessary.”\nEuropol ने वह बात भी कह दी जो आम तौर पर दबी रहती है। Carrier-grade NAT “was supposed to be a temporary solution until the transition to IPv6 was completed”। इसके बजाय इंडस्ट्री इसका इस्तेमाल बढ़ाती रही जबकि उसका विकल्प वहीं पड़ा था, तैयार, मुफ़्त और नज़रअंदाज़।\nतो IPv6 deploy न करने की कीमत में शामिल है: प्राथमिक कानून का एक टुकड़ा, देशव्यापी रिटेंशन का दायित्व, बेगुनाह लोग जो जाँच में घसीटे गए क्योंकि उन्होंने किसी ऐसे के साथ पता साझा किया जो बेगुनाह नहीं था, और एक लगातार बना हुआ capability gap जिसे पुलिस सार्वजनिक सुरक्षा की समस्या बताती है।\nकिसी ने इसे बिज़नेस केस में नहीं डाला। यह “IPv6 has no ROI” वाली स्लाइड में कभी नहीं आता, क्योंकि इसकी कीमत वे नहीं चुकाते जिन्होंने इसे पैदा किया।\nयह सिर्फ़ अपराधियों को छिपाता नहीं। उनकी मदद करता है। Attribution वाली दलील वह है जो कानून लागू करने वाली एजेंसियाँ देती हैं, और वह घटना के बाद लोगों को पकड़ने के बारे में है। एक दूसरी दलील है जो कहीं कम दी जाती है और ज़्यादा बुरी है: पता साझा करना उन बचावों को सक्रिय रूप से कमज़ोर करता है जो हमलों को होने से ही रोकते हैं।\nयह मेरा विश्लेषण नहीं है। IETF ने इसकी सूची RFC 6269, Issues with IP Address Sharing, में जून 2011 में प्रकाशित की थी। यह उससे पहले था जब UK ने वह ज़्यादातर carrier-grade NAT deploy किया जो वह आज चलाता है। उसके सीधे शब्द: पता साझा करना “creates a vector for attack amplification in numerous ways.”\nयह है वह जिसके टूटने की उसने चेतावनी दी, और जो टूटा।\nरेट लिमिटिंग और लॉकआउट काम करना बंद कर देते हैं। पासवर्ड guessing और credential stuffing के ख़िलाफ़ स्टैंडर्ड बचाव है हर पते पर नाकामियाँ गिनना और दोषी को penalty box में डाल देना। उस पते को सैकड़ों लोगों में बाँट दीजिए और काउंटर एक भीड़ को माप रहा होता है। RFC 6269 नतीजे के बारे में दो टूक है: “In the presence of widespread large-scale address sharing, penalty box solutions to service abuse simply will not work.” एक यूज़र के फ़ेल लॉगिन बाकी सबको लॉक कर देते हैं, तो ऑपरेटर threshold बढ़ा देते हैं, और threshold बढ़ाना ही वह है जो हमलावर चाहता था।\nब्लॉकलिस्टिंग में बेकसूर पिसते हैं। स्पैमर को ब्लॉक कीजिए और आप वह पूरी सड़क ब्लॉक कर देते हैं जिस पर वह रहता है। तो समझदार ऑपरेटर ब्लॉक करना बंद कर देता है, और दुरुपयोग एक ऐसे पते से जारी रहता है जिसे छूने की कोई हिम्मत नहीं करता।\nसंक्रमित मशीनें संक्रमित रहती हैं। Abuse फ़ीड और मैलवेयर नोटिफ़िकेशन एक पते और टाइमस्टैम्प के रूप में आते हैं। पोर्ट लॉगिंग के बिना CGN के पीछे, प्रोवाइडर नहीं बता सकता कि उसका कौन-सा ग्राहक बॉट चला रहा है, तो ग्राहक को कभी बताया नहीं जाता और संक्रमण बना रहता है। इससे भी बुरा, RFC 6269 उलटी समस्या बताता है: “someone else\u0026rsquo;s worm can interfere with the ability to access the service for other subscribers sharing the same IP address.”\nपते पर आधारित एक्सेस कंट्रोल फ़ेल हो जाता है। सोर्स पते पर बनी हर allow-list अब एक ग्राहक नहीं, एक भीड़ को अंदर आने दे रही है।\nऔर एक बचाव सिर्फ़ भोथरा नहीं होता, नापने लायक कमज़ोर होता है। Blind TCP हमले five-tuple का अंदाज़ा लगाने पर निर्भर करते हैं, और इंडस्ट्री का बचाव है सोर्स पोर्ट को रैंडम करना (RFC 6056)। Carrier-grade NAT हर सब्सक्राइबर को पूरी पोर्ट रेंज के बजाय उसका एक टुकड़ा देता है। RFC 6269 के शब्दों में, “with shared IPv4 addresses, the port selection space is reduced.” पतों की कमी का जुगाड़ हमले-रोधी मैकेनिज़्म से सीधे entropy निकाल लेता है।\nफिर वह हिस्सा है जिससे किसी को भी चिंता होनी चाहिए, चाहे वह पुलिसिंग के बारे में कुछ भी सोचता हो। अगर सर्वर ने सोर्स पोर्ट लॉग नहीं किए और NAT ने डेस्टिनेशन लॉग नहीं किए, तो RFC 6269 साफ़ बताता है कि कानूनी अनुरोध आने पर प्रोवाइडर को क्या करना होगा: उसे “would need to disclose the identity of all subscribers who had active sessions on the NAT during the time period in question. This may be a large number of subscribers.”\nएक दोषी सब्सक्राइबर की पहचान करने का विकल्प है कई सौ बेगुनाहों की पहचान सौंप देना। पता साझा करने का असली प्राइवेसी नतीजा यही है, और यह उसके ठीक उलट है जो इसके समर्थक इसके पक्ष में दावा करते हैं।\nतीन चीज़ों का एक साथ सही होना ज़रूरी है, और इनमें से कोई भी देने के लिए कोई बाध्य नहीं लोग मान लेते हैं कि लॉग कहीं मौजूद हैं और बस माँगने की बात है। ज़्यादातर मौजूद नहीं होते, और इसकी वजह बदनीयती नहीं, गणित है।\nकिसी साझा पते को वापस एक घर तक पहुँचाने के लिए तीन अलग चीज़ों का सही होना ज़रूरी है:\nदूसरे छोर के सर्वर ने सोर्स पोर्ट लॉग किया। RFC 6302 ने 2011 में इंटरनेट-फ़ेसिंग सर्वरों से कहा कि पते के साथ सोर्स पोर्ट और टाइमस्टैम्प लॉग करें। यह एक सिफ़ारिश है। कोई इसे लागू नहीं करवाता, और बहुत सारे सर्वर आज भी सिर्फ़ पता लॉग करते हैं। उस हालत में सुराग ब्रिटिश छोर तक पहुँचने से पहले ही मर जाता है। प्रोवाइडर ने मैपिंग रखी। हर सेशन, महीनों तक। घड़ियाँ मेल खाती थीं। RFC 6269 चेतावनी देता है कि एक व्यस्त CGN पर “even very small amounts of clock skew between a third party\u0026rsquo;s server and the CGN operator will result in ambiguity about which customer was using a specific port at a given time.” किसी एक में चूक हुई और आपके पास कुछ नहीं। और बीच वाली चीज़ पर ही सब बिखरता है, क्योंकि स्टैंडर्ड्स के डॉक्यूमेंट में हिसाब लिखा है।\nRFC 7422 ने इस पर असली आँकड़े रखे। ऑपरेटरों ने लगभग हर घर से रोज़ 33,000 कनेक्शन बताए। हर लॉग एंट्री के करीब 150 बाइट के हिसाब से यह हर सब्सक्राइबर का रोज़ 5 MB, महीने का 150 MB है। दस लाख सब्सक्राइबर वाले प्रोवाइडर के लिए: महीने में 150 टेराबाइट लॉग, साल में 1.8 पेटाबाइट — कानून जितने छह से बारह महीने चाहता है उतने रखने हैं, और माँगने पर खोजने हैं।\nऔर यह कभी एक लॉग नहीं होता। NAT444, वह केस जिसके लिए RFC 7422 अपनी एंट्रियों का नाप तय करता है, एक ट्रांसलेशन ग्राहक के राउटर में और दूसरा कैरियर पर रखता है, और पैकेट जिस भी गेट से गुज़रे उसे लिखना पड़ता है कि उसने क्या किया। एक अकेले सेशन को दोबारा जोड़ने का मतलब है अलग-अलग पक्षों की रखी अलग-अलग टेबल्स को ऊपर वाली घड़ी की समस्या के साथ मिलाना। सबूत अलग-अलग सिस्टम से टुकड़ों में आता है, या आता ही नहीं।\nऔर पैसा तो आधी बात है। उस रफ़्तार से सेशन रिकॉर्ड पकड़ना, उन्हें कहीं भेजना, उन्हें ऐसे इंडेक्स करना कि कानूनी अनुरोध का जवाब हफ़्तों नहीं, घंटों में आए, और पूरा ढेर एक साल तक रखना, यह एक डेटा इंजीनियरिंग प्रोजेक्ट है। इसका कोई डैशबोर्ड नहीं, खरीदने को कोई बॉक्स नहीं। इसे कोई ऐसा बनाए जिसे पता हो कि वह क्या बना रहा है, और यह point and click नहीं है, जो इस इंडस्ट्री में लगभग यह कहने के बराबर है कि यह बनता ही नहीं।\nइसके पैसे भी कोई कभी नहीं देने वाला था। और IETF यह जानता था, इसीलिए RFC 6888 ऑपरेटरों से वह कहता है जो सार्वजनिक सुरक्षा की ज़रूरत के ठीक उलट है: “A CGN\u0026rsquo;s port allocation scheme SHOULD minimize log volume”, इस तर्क के साथ कि “huge log volumes can be problematic to CGN operators.” RFC 7422 का उस बिल को घटाने के सिवा कोई मकसद ही नहीं।\nतो इंडस्ट्री को डिज़ाइन की सलाह है कम लॉग करो, अर्थशास्त्र कहता है कि साल के 1.8 पेटाबाइट का खर्च उठाया नहीं जा सकता, और कानूनी अपेक्षा है एक पूरा रिकॉर्ड। ये तीनों एक साथ सच नहीं हो सकते, और जो टूटता है वह रिकॉर्ड है।\nइसीलिए Europol ने पाया कि एक्सेस प्रोवाइडरों का बहुमत कानूनी आदेश मिलने पर किसी सब्सक्राइबर की पहचान नहीं कर सकता। इसलिए नहीं कि वे अड़ंगा डालते हैं। इसलिए कि जो चीज़ माँगी जा रही है उसे रखना आर्थिक रूप से कभी मुमकिन था ही नहीं, और किसी को कभी इसके लिए मजबूर नहीं किया गया।\nइससे दो बातें निकलती हैं, और ये मेरी हैं, किसी का कोटेशन नहीं।\nपहली: ब्रिटिश इंटरनेट कनेक्शनों का एक बड़ा हिस्सा बनावट से ही attribute नहीं किया जा सकता। मोबाइल सबसे साफ़ मामला है, और स्वतंत्र माप इसे Europol से भी ऊपर, 95% पर रखता है। तो वह गुमनामी जिसके लिए पहले Tor चाहिए था, या कोई VPN जो किसी को खरीदना पड़ता, अब ब्रिटिश मोबाइल कनेक्शन की फ़ैक्टरी सेटिंग है — SIM के साथ मुफ़्त, सबको, उन गिने-चुने लोगों समेत जिन्हें ढूँढने के लिए यह पूरा तंत्र बना है।\nदूसरी, और ज़्यादा बुरी: सस्ते, निशाने वाले तरीके को तोड़ने से ही महँगे, बिना निशाने वाले तरीके की माँग पैदा होती है। जब आप एक पते पर वारंट तामील करके एक घर पा सकते हैं, तो आपको और कुछ नहीं चाहिए। जब यह काम करना बंद कर देता है, तो सरकार कंधे नहीं उचकाती। वह किसी व्यापक चीज़ की तरफ़ हाथ बढ़ाती है। 2015 का Act यही था: मुट्ठी भर लोगों के बारे में सवालों के जवाब के लिए पूरे सब्सक्राइबर बेस पर रिटेंशन का दायित्व।\nदूसरी तरफ़ इसमें से कुछ भी नहीं है। कुछ ट्रांसलेट नहीं होता, तो रखने को हर कनेक्शन का कोई रिकॉर्ड है ही नहीं। दूसरे छोर के सर्वर के लॉग में जो पता है वह पहले से सब्सक्राइबर का प्रीफ़िक्स है: एक रिकॉर्ड, एक बार लिखा गया जब लाइन provision हुई, एक सिस्टम में। रोज़ प्रीफ़िक्स बदलने वाला प्रोवाइडर भी हर ग्राहक के साल में कुछ सौ लिखता है, उन एक करोड़ बीस लाख के मुकाबले जो रोज़ के 33,000 कनेक्शन बनते हैं। बात यह नहीं कि IPv6 कम लॉग करता है। लॉग करने को कुछ है ही नहीं।\nजुगाड़ लिखने वाले यह जानते थे। एक ऐसे स्पेसिफ़िकेशन के बीच में, जो सिर्फ़ CGN को लॉग करना सस्ता बनाने के लिए लिखा गया था, वे यह दर्ज करने के लिए रुके कि “native IPv6 will offer subscribers a better experience than CGN”।\nएक इंडस्ट्री ने एक मुफ़्त प्रोटोकॉल पर हर नेटवर्क के लिए दो हफ़्ते लगाने से इनकार किया, और देश को बदले में एक डेटा रिटेंशन व्यवस्था मिली।\nक्या इसे ठीक करना Online Safety Act से बेहतर तरीके से बच्चों की रक्षा करेगा? यहाँ मैं सावधान रहना चाहता हूँ, क्योंकि यह दलील बुरे तरीके से देना आसान है और बुरे तरीके से दी गई दलील उस धुनाई की हकदार है जो उसे मिलेगी।\nशुरुआत इससे कीजिए कि बच्चों के शोषण की जाँच असल में कैसे चलती है। एक प्लैटफ़ॉर्म सामग्री पकड़ता है और रिपोर्ट करता है। रिपोर्ट में एक पता और एक टाइमस्टैम्प होता है। पुलिस एक्सेस प्रोवाइडर को नोटिस देती है ताकि उसे एक सब्सक्राइबर में बदला जाए, और सब्सक्राइबर असली दुनिया का एक पता है जिस पर एक दरवाज़ा है। पूरी कड़ी यही है, और इसके बाद का हर कदम अपने से पहले वाले पर टिका है।\nअब बीच में एक carrier-grade NAT रख दीजिए। रिपोर्ट अब भी आती है। पता अब भी resolve होता है। कई सौ घरों तक, और Europol ने पाया कि नतीजतन जाँचें “dropped or delayed” हुईं। उनके उदाहरणों में एक अभियोजक है जो ISIS का समर्थन करने वाले एक फ़ोरम के सदस्यों की पहचान नहीं कर सका, तो मुकदमा हुआ ही नहीं, और HMRC जिसने बड़े टैक्स फ़्रॉड को मोबाइल पतों तक ट्रेस किया और पाया कि सुराग “frustrated from the outset” थे।\nNCMEC की CyberTipline को 2025 में 21.3 मिलियन रिपोर्ट मिलीं और उसने 18.8 मिलियन से ज़्यादा कानून लागू करने वाली एजेंसियों को भेजीं, जिनमें 53,000 से ज़्यादा ऐसी थीं जिनमें कोई बच्चा तत्काल खतरे में था। NCMEC यह भी दर्ज करता है कि इंडस्ट्री की 10% से ज़्यादा रिपोर्टें इतनी कमज़ोर जानकारी के साथ आईं कि पता नहीं चल सका कि उन्हें किस क्षेत्राधिकार में भेजा जाए। यह आँकड़ा CGNAT की करतूत नहीं है और मैं ऐसा दावा नहीं कर रहा — लेकिन यह बताता है कि इस पाइपलाइन में केस कहाँ मरते हैं। वे metadata पर मरते हैं।\nतो तुलना का ईमानदार रूप यह है। Carrier-grade NAT Online Safety Act का अपना आखिरी मील तोड़ देता है। संसद ने पकड़ने और रिपोर्ट करने के दायित्व थोपे हैं, और एक्सेस नेटवर्क को इस हालत में छोड़ दिया है कि जो रिपोर्ट होता है उसे resolve न कर सके। आप जितने चाहें रिपोर्टिंग के दायित्व पास कर लीजिए। अगर आखिरी कदम एक भीड़ लौटाता है, तो रिपोर्ट सिर्फ़ कागज़ है।\nऔर इन दोनों चीज़ों की लागत की दूर-दूर तक तुलना नहीं। Act इस देश की आज़माई सबसे बड़ी इंटरनेट रेगुलेशन है — हज़ारों सर्विसें दायरे में, सालों से कोड लिखता एक रेगुलेटर, रोज़ लाखों चेक करती age assurance, और इतनी बड़ी circumvention की समस्या कि संसद ने Lords में VPN के इस्तेमाल पर बहस की है। IPv6 की रजिस्ट्री से कोई लागत नहीं और एक काबिल टीम को दो-एक हफ़्ते लगते हैं। इनमें से एक पूरी इंडस्ट्री से अनिवार्य किया गया है। दूसरा कभी किसी से माँगा तक नहीं गया।\nतीन बातें साफ़ कहनी ज़रूरी हैं, क्योंकि इनके बिना दलील बेकार है।\nएक। यह विकल्प नहीं है, और मैं इसे विकल्प के रूप में प्रस्तावित नहीं कर रहा। IPv6 किसी बारह साल के बच्चे को पोर्नोग्राफ़ी ढूँढने से रोकने के लिए कुछ नहीं करता। यह recommender systems, autoplay या live-streaming के बारे में कुछ नहीं करता। यह दूसरे देश में होस्ट की गई सामग्री के बारे में कुछ नहीं करता, जो ज़्यादातर वहीं है। Act इन्हीं समस्याओं के लिए लिखा गया था और कोई प्रोटोकॉल बदलाव इन्हें छूता नहीं।\nदो। IPv6 कोई identity layer नहीं है, और जो इसे ऐसे बेचता है वह बढ़ा-चढ़ाकर बेच रहा है। Privacy extensions डिज़ाइन से ही डिवाइस का पता बदलते रहते हैं, इसलिए मशीन का पता स्थिर चीज़ नहीं है। स्थिर है लाइन को delegate किया गया प्रीफ़िक्स — वह /56 जो Sky 2016 से हर सब्सक्राइबर को दे रहा है। वह एक सब्सक्राइबर तक resolve होता है, जो ठीक उतना ही है जितना कानूनी अनुरोध को चाहिए, उससे ज़्यादा नहीं। यह वही वापस लाना है जो हर लाइन का एक IPv4 पता पहले देता था, कोई नई निगरानी क्षमता नहीं।\nतीन। जो खूबी पुलिस को परेशान करती है वह आपको ट्रैक करने वाले हर किसी और को भी परेशान करती है, और कुछ लोग इसकी कद्र करते हैं। एक साझा पते के पीछे पाँच सौ में से एक होना व्यावसायिक प्रोफ़ाइलिंग के ख़िलाफ़ असली भीड़ का कवर है। मुझे नहीं लगता कि यह अपनी कीमत के लायक है — यह कवर दुरुपयोग को attribute न हो सकने वाला और रेट लिमिटिंग को बेकार बनाकर खरीदा गया है, और प्लैटफ़ॉर्म कुकीज़ और fingerprinting से ज़्यादातर इसके आर-पार देख ही लेते हैं। लेकिन यह एक असली दलील है और इसे नज़रअंदाज़ करने के बजाय कहा जाना चाहिए।\nतो नहीं, यह Online Safety Act की जगह IPv6 नहीं है। बात यह है कि ब्रिटेन ने अपने इतिहास का सबसे महँगा ऑनलाइन सुरक्षा कानून ऐसी प्लंबिंग के ऊपर लिखा जिसके टूटे होने का उसे पता था, जबकि इलाज मुफ़्त था, अच्छी तरह दस्तावेज़ित था, और उस पूरे समय उपलब्ध था जब Bill का मसौदा बन रहा था।\nअसल में क्या माँगें पाबंदी नहीं। पाबंदी गलत औज़ार है और वह उल्टी पड़ेगी।\nबाँटने के लिए कोई IPv4 बचा नहीं है — RIPE नवंबर 2019 से खाली है, और नए प्रोवाइडर को वेटिंग लिस्ट से एक अकेला /24 मिलता है। कल पता साझा करने को गैरकानूनी कर दीजिए और छोटा ऑपरेटर ग्राहकों को जोड़ ही नहीं पाएगा, जबकि 1990 के class B ब्लॉक पर बैठी कंपनियाँ बिना छुए चलती रहेंगी। यह ठीक उन्हीं लोगों की जड़ें मज़बूत कर देगा जिनके बारे में यह पोस्ट है।\nबेहतर औज़ार पहले से मौजूद है और कोई प्रयोग पहले ही कर चुका है।\n2012 में बेल्जियम की फ़ेडरल पुलिस, उसके टेलिकॉम रेगुलेटर, उसकी Council of Prosecutors-General और उसके ISP संघ ने दो पन्नों की एक स्वैच्छिक आचार संहिता पर दस्तख़त किए। एक IPv4 पते के पीछे ज़्यादा से ज़्यादा 16 सब्सक्राइबर। CGN का इस्तेमाल सीमित करो। IPv6 अपनाना शुरू करो।\n2017 तक ज़्यादातर बेल्जियन ऑपरेटर सीमा के अंदर थे, एक 8 तक उतर आया था, और बेल्जियन पुलिस हर मोबाइल पते पर औसतन चार यूज़र देख रही थी। इसकी वजह का Europol का अपना सार दो बार पढ़ने लायक है: सबसे बड़े प्रोवाइडर “are quickly moving towards IPv6 because no financial interest to invest in CGN anymore.” ओवरसब्सक्रिप्शन पर ढक्कन लगाइए और जुगाड़ का अर्थशास्त्र ढह जाता है, क्योंकि जो NAT सिर्फ़ सोलह लोगों को ठूँस सकता है वह उस प्रोटोकॉल से सस्ता नहीं जिसे किसी की ज़रूरत नहीं।\nउस साल बेल्जियम में 49% के साथ दुनिया में सबसे ज़्यादा IPv6 अपनाया गया था, जब ब्रिटेन और फ़्रांस 14% पर थे और स्पेन और इटली 1% से नीचे। बेल्जियम ऊपर की देशों वाली टेबल में आज भी तीसरे नंबर पर है, 72.8% पर।\nमाँग यही है। “आप पते साझा नहीं कर सकते” नहीं — आप ऐसा कनेक्शन नहीं बेच सकते जो attribute भी न हो सके और जिसमें IPv6 भी न हो। काम करते IPv6 के साथ साझा पते ठीक हैं। धरती का हर मोबाइल नेटवर्क ऐसे ही चलता है। बिना IPv6 के साझा पते का मतलब है एक टूटी हुई सर्विस बेचना और उसके नतीजों का बिल जनता को थमाना।\nSky ने ग्यारह साल पहले साबित कर दिया कि यह हो सकता है अगर यह सच में मुश्किल होता, तो UK में कोई इसे कर ही न पाता।\nSky ने 2013 की शुरुआत में एक अंदरूनी IPv6 प्रोजेक्ट शुरू किया और 2016 में पूरा किया, जिसमें उसके फ़िक्स्ड-लाइन बेस के लगभग 90% — करीब पचास लाख यूज़र्स — ने IPv6 पाया और इस्तेमाल किया। उनके इंजीनियर ने पूरा ब्योरा RIPE Labs पर लिखा: MPLS कोर पर 6PE, dual-stack peering और ट्रांज़िट, हर सब्सक्राइबर के लिए इसे चालू करने के RADIUS attributes, सात CPE मॉडल पर firmware का काम जिनमें पाँच पुराने थे, और RADIUS और DNS पर कैपेसिटी अपग्रेड।\nतीन साल, एक ISP, और वही Openreach का तांबा जिस पर बाकी सब बेच रहे थे। ISPreview ने पूरा होने की ख़बर दी सितंबर 2016 में, जब Sky को उस साल के आख़िर तक अपने बेस के 95% की उम्मीद थी, और Sky ने इसके लिए Jim Bound IPv6 Award जीता।\nउनकी सलाह थी: “Do not underestimate the work required to enable IPv6, and do not leave it to the last minute to begin the journey.”\nग्यारह साल बाद, ज़्यादातर इंडस्ट्री अब भी आखिरी मिनट पर है, और उसे रहने की जगह मान बैठी है।\nपते सबके पास सालों से हैं Sky बड़े ISPs में पहला था। देश में वह पहले के आसपास भी नहीं था, और इस सूची का एक भी प्रोवाइडर यह नहीं कह सकता कि वह रजिस्ट्री का इंतज़ार कर रहा था।\nRIPE एलोकेशन की तारीख ब्लॉक के नाम में ही छाप देता है, तो आप इनमें से किसी को भी खुद जाँच सकते हैं:\nwhois -h whois.ripe.net 2a01:4b00::/32 | grep -E \u0026#39;netname|^org:\u0026#39; # netname: UK-BCUBE-20110225 -\u0026gt; Hyperoptic, allocated 25 February 2011 नीचे की हर तारीख प्रोवाइडर के अपने एलोकेशन पर उसी lookup से आई, और डेलिगेशन फ़ाइल से मिलाकर जाँची गई। बड़े ISPs बोल्ड में हैं, बाकी फ़ुल-फ़ाइबर बनाने वाले हैं। ग्राहकों को असल में IPv6 मिलता है या नहीं, यह ISPreview के सर्वे से है जैसा मार्च 2025 में अपडेट हुआ, और फ़ोन नेटवर्कों के लिए मोबाइल ट्रैकर से।\nहर UK प्रोवाइडर के पास IPv6 कब से है, और क्या ग्राहकों को मिलता है हर UK प्रोवाइडर के पास IPv6 कब से है, और क्या ग्राहकों को सच में मिलता है एलोकेशन की तारीखें RIPE डेलिगेशन फ़ाइल और उसके netname ठप्पों से। ग्राहकों तक पहुँचता है या नहीं: ISPreview, मार्च 2025, और कम्युनिटी मोबाइल ट्रैकर। ग्राहकों को मिलता है आंशिक: सिर्फ़ एक नेटवर्क अब भी नहीं देते (40 में से 17) 2002 2002 2006 2006 2010 2010 2014 2014 2018 2018 2022 2022 2026 2026 TalkTalk (पहले Opal Telecom) Andrews \u0026amp; Arnold Vodafone UK EE (पहले T-Mobile) Sky Gigaclear O2 (Telefónica UK) BT Virgin Media (पहले NTL) KCOM Hyperoptic (पहले Bcube) Zen Internet B4RN Trooli (पहले Call Flow) Exascale Three UK Community Fibre Ogi (पहले NetSupport) WightFibre Truespeed Airband G.Network Wessex Internet Quickline FibreNest Wildanet Fibrus (पहले B4B Networks) Zzoomm GoFibre (पहले Borderlink) Toob Netomnia / YouFibre Pine Media BeFibre Squirrel Internet brsk Lit Fibre (पहले Broadreach) iDNET * Grain Hey! Broadband Octaplus चालीसों में से हर एक के पास कम से कम तीन साल से IPv6 स्पेस है, और ज़्यादातर के पास एक दशक से ज़्यादा से। उनमें से 17 आज भी इसे किसी ग्राहक को नहीं देते। चालीस UK प्रोवाइडर, उस तारीख के क्रम में जब रजिस्ट्री ने उन्हें IPv6 दिया। हर बार उस एलोकेशन से आज तक जाती है। नीली बारें इसे ग्राहकों तक पहुँचाती हैं; गुलाबी वालों ने कभी नहीं पहुँचाया। चालीस प्रोवाइडर। हर एक के पास कम से कम तीन साल से IPv6 एड्रेस स्पेस है, ज़्यादातर के पास एक दशक से ज़्यादा से — और उनमें से सत्रह आज भी इसे किसी ग्राहक को नहीं देते।\nHyperoptic के पास 2a01:4b00::/32 फ़रवरी 2011 से है। पंद्रह साल फ़्लैटों के ब्लॉकों में फ़ाइबर बिछाते हुए, गीगाबिट कनेक्शन बेचते हुए, और लोगों को carrier-grade NAT के पीछे डालते हुए, जबकि खातों में एक बिना इस्तेमाल का IPv6 एलोकेशन पड़ा है। Trooli के पास तेरह साल से है। Truespeed और Airband के पास दस साल से।\nAndrews \u0026amp; Arnold वह है जिसके सामने बाकियों को परखना चाहिए। Bracknell का एक छोटा ISP, जिसके ग्राहक और इंजीनियर इस सूची के किसी भी दूसरे से कुछ हिस्सा भर हैं, 2002 से हर लाइन को IPv6 दे रहा है, और 6UK के पीछे की टीमों में से एक है। TalkTalk ने अपना एलोकेशन उससे तीन महीने पहले लिया और आज भी कंज़्यूमर्स को नहीं देता।\nVirgin Media ने अपना ब्लॉक Zen से तीन हफ़्ते पहले लिया। Zen ने इसे चालू किया, और तब से मैं उनके एक /48 के छोर पर हूँ। Virgin आज भी कह रहा है “when we are ready”।\nऔर टेबल का निचला हिस्सा देखिए। Squirrel, brsk, Lit Fibre और Octaplus, सबको अपने एलोकेशन पिछले छह साल में मिले और सब IPv6 देते हैं, जबकि 2011 से स्पेस रखने वाले प्रोवाइडर नहीं देते। देर से शुरू करना रुकावट नहीं है। शुरू करना ही रुकावट है।\nउस सर्वे के दो नाम चार्ट में नहीं हैं, और दोनों की वजह एक ही है। Cuckoo एक रिटेल ब्रैंड है जो Openreach, CityFibre और दूसरों पर होलसेल एक्सेस खरीदता है, और Freedom Fibre एक होलसेल नेटवर्क है जिसके ग्राहक रिटेल पार्टनरों के ज़रिए आते हैं। दोनों में से किसी के पास अपना एड्रेस स्पेस नहीं, तो IPv6 का फ़ैसला उनके लिए कोई और करता है। iDNET पर तारांकन है क्योंकि उनका एक provider-independent assignment है, अपना एलोकेशन नहीं।\nवह एक जो बहस खत्म कर देता है अगर आप दलील को एक अकेली कंपनी तक समेटना चाहते हैं, तो वह Plusnet है।\nBT ने जनवरी 2007 में Plusnet खरीदा। Plusnet British Telecommunications के अपने RIPE अकाउंट के नीचे है, तो जून 2010 से उसके पास BT के IPv6 एलोकेशन का एक्सेस है। BT IPv6 देता है। EE, दूसरी बहन कंपनी, IPv6 देती है। ISPreview ने ध्यान दिलाया कि BT और Plusnet लगभग एक जैसे कस्टमर राउटर तक इस्तेमाल करते हैं, और इस फ़र्क को “somewhat of a peculiarity” कहा।\nPlusnet ने 2011 में IPv6 का ट्रायल किया और बाकी इंडस्ट्री से सार्वजनिक रूप से आग्रह किया कि वह काम में लग जाए। 2019 में उसने कहा कि वह 2020 के वसंत में लॉन्च करेगा। 2021 में उसे उम्मीद थी “to make good progress over the coming year”। नवंबर 2023 में उसने Chesterfield और Sheffield की दो साइटों पर तीन महीने का ट्रायल चलाया, जिसमें करीब बीस स्टाफ़ और जान-पहचान वाले ग्राहक थे।\nअप्रैल 2026 में उसका अपना कस्टमर फ़ोरम अब भी पूछ रहा था कि IPv6 कहाँ तक पहुँचा।\nएक पेरेंट कंपनी। एक एड्रेस एलोकेशन। लगभग एक जैसा हार्डवेयर। उसी ग्रुप के इंजीनियर जो गलियारे में चलकर उन लोगों तक पहुँच सकते हैं जो यह कर चुके हैं। तीन ब्रैंड, और उनमें से एक पंद्रह साल में वह नहीं कर पाया जो बाकी दो पूरा कर चुके।\nइसे जो भी रोक रहा है, वह टेक्नोलॉजी नहीं, पैसा नहीं, हार्डवेयर नहीं, एड्रेस स्पेस नहीं। वह कोई है जो तय कर रहा है कि इस तिमाही यह उसकी समस्या नहीं, लगातार पंद्रह साल से।\nVirgin Media, सोलह साल का “When We Are Ready” पैमाने का दूसरा सिरा भी नाम लिए जाने लायक है, क्योंकि उसकी टाइमलाइन सार्वजनिक रिकॉर्ड में है और हैरान करने वाली है।\nमार्च 2010: एक ग्राहक Virgin Media के अपने फ़ोरम पर पूछता है कि IPv6 कब आ रहा है। जवाब है “when we are ready”।\nनवंबर 2016: Virgin ISPreview को बताता है कि वह 2017 के मध्य तक IPv6 अपनाने की योजना बना रहा है। नहीं अपनाता।\nजून 2018: एक कंज़्यूमर ट्रायल की ख़बर आती है। दिसंबर 2018: UK IPv6 Council के सामने तीसरी प्रेज़ेंटेशन, 2019 का इशारा करती हुई।\n2021: एक बयान कि वे “continuing to plan our IPV6 deployment having tested several solutions and intend to introduce IPV6 for our customers in future.”\nफ़रवरी 2024: Virgin Media चौदह साल पुराने फ़ोरम थ्रेड को लॉक कर देता है।\nअगस्त 2026: अब भी कुछ नहीं।\nसोलह साल। उस दौरान कंपनी बिकी, O2 के साथ मर्ज हुई, अपना कोर दो बार दोबारा बनाया और अपने सारे राउटर बदल दिए। किसी भी मोड़ पर किसी ने एक एड्रेस फ़ैमिली नहीं जोड़ी। थ्रेड लॉक करना उस सूची की सबसे ईमानदार चीज़ है। यह वह पल है जब उन्होंने दिखावा बंद किया और समस्या के बजाय शिकायत को मैनेज करना शुरू किया।\nAltnets के पास तो कोई बहाना ही नहीं था फ़ुल-फ़ाइबर बनाने वालों के पास साफ़ शुरुआत का मौका था। नए नेटवर्क, नया हार्डवेयर, कोई पुराना बोझ नहीं, इसी दशक में रखे गए इंजीनियर। एलोकेशन टेबल में देखिए कि वे कहाँ हैं, और उनमें से ज़्यादातर ने एड्रेस स्पेस लिया और रुक गए।\nतो एक कंपनी जिसने संस्थागत पैसा जुटाकर बिल्कुल नया फ़ाइबर नेटवर्क बनाया, सड़कें खोदीं, एक लाख घरों तक फ़ाइबर पहुँचाया, नए राउटर खरीदे, नया provisioning स्टैक लिखा। और अपने ग्राहकों को 2026 में बिना IPv6 वाले नेटवर्क पर एक साझा पते के पीछे डाल दिया, जबकि एड्रेस स्पेस उसके अपने रजिस्ट्री अकाउंट में पहले से पड़ा था।\nऔर फिर उनमें से कई एक स्टैटिक पब्लिक IPv4 के लिए £5 महीना लेते हैं।\nउन्होंने काम करती चीज़ छीन ली, मुफ़्त विकल्प देने से इनकार किया, और उससे हुई टूट-फूट को आपके बिल की एक लाइन बना दिया। उस बिज़नेस मॉडल के लिए एक शब्द है जो खराबी बनाता है और फिर उसका इलाज बेचता है, और वह शब्द “innovation” नहीं है।\nवेबसाइटें सारा खेल खोल देती हैं रूटिंग टेबल दिखाती है कि नेटवर्क क्या करते हैं। DNS दिखाता है कि बाकी सब क्या करते हैं। तो 27 अगस्त 2026 को मैंने UK की पचास सबसे जानी-मानी साइटें एक फ़ाइल में डालीं — केंद्र सरकार, बैंक, बड़े रिटेलर, टेलिकॉम, ट्रांसपोर्ट और कुछ यूनिवर्सिटी — और हर एक से पूछा कि क्या वह IPv6 पर जवाब देती है:\nwhile read -r d; do n=$(dig +short AAAA \u0026#34;$d\u0026#34; | grep -c \u0026#39;:\u0026#39;) printf \u0026#39;%-46s %s\\n\u0026#39; \u0026#34;$d\u0026#34; \u0026#34;$([ \u0026#34;$n\u0026#34; -gt 0 ] \u0026amp;\u0026amp; echo AAAA || echo none)\u0026#34; done \u0026lt; sites.txt | sort -k2 फिर मैंने हर जवाब को एक दूसरे resolver से जाँचा, क्योंकि एक recursive सर्वर का बुरा दिन कोई नतीजा नहीं होता:\ndig @1.1.1.1 +short AAAA www.tesco.com | grep -c \u0026#39;:\u0026#39; पचास में से सत्रह के पास AAAA रिकॉर्ड था। तैंतीस के पास नहीं, और दोनों resolver हर एक पर सहमत थे।\nबिना IPv6 वालों में हैं www.bbc.co.uk, www.nhs.uk, www.hmrc.gov.uk, www.hsbc.co.uk, www.barclays.co.uk, www.lloydsbank.com, www.santander.co.uk, www.tesco.com, www.johnlewis.com, www.marksandspencer.com, www.britishairways.com, tfl.gov.uk, monzo.com — 2015 में बना एक बैंक, बिना किसी पुराने बोझ के — और, मेरा पसंदीदा, www.sky.com।\nSky। वह कंपनी जिसने पचास लाख ग्राहकों को IPv6 पर डाला और इसके लिए इनाम जीता। उसकी अपनी वेबसाइट IPv6 पर जवाब नहीं देती।\nअब वह हिस्सा जो इस थीसिस को हर बहस से परे साबित करता है।\nजिन सत्रह के पास IPv6 है, उनमें से पंद्रह को यह किसी सप्लायर से मिला, खुद से नहीं। मैंने हर एक को resolve किया और देखा कि जवाब देने वाला पता किसका है:\nwhois -h whois.radb.net -- \u0026#34;$(dig +short AAAA www.sainsburys.co.uk | grep \u0026#39;:\u0026#39; | head -1)\u0026#34; | grep -i descr www.gov.uk और www.cam.ac.uk Fastly से जवाब देती हैं। ico.org.uk, www.parliament.uk, www.ofcom.org.uk, www.asda.com, www.autotrader.co.uk, www.nationalrail.co.uk और www.jisc.ac.uk Cloudflare से जवाब देती हैं, जो सबके लिए IPv6 डिफ़ॉल्ट रूप से चालू करता है। natwest.com और nationwide.co.uk Azure Front Door से जवाब देती हैं। www.legalandgeneral.com और www.screwfix.com CloudFront से। www.sainsburys.co.uk और www.next.co.uk Akamai से।\nदो ने खुद किया: Imperial College London, अपने एड्रेस स्पेस से जवाब देता हुआ, और UK IPv6 Council की अपनी वेबसाइट। एक यूनिवर्सिटी और वे लोग जिनका पूरा मकसद ही IPv6 है। सूची इतनी ही है।\nऔर www.tesco.com, www.sky.com और www.nhs.uk भी Akamai पर हैं — वही CDN, वही प्रोडक्ट — और उनके पास IPv6 बिल्कुल नहीं।\nAkamai जून 2022 से इस बारे में साफ़ रहा है: “Akamai has enabled IPv4+IPv6 dual-stack as the default for our CDN delivery products for many years, meaning that customers have needed to opt-out for content to be IPv4-only.” उन्होंने यह भी जोड़ा कि उन्होंने इसे बदलना आसान बनाया है, API के ज़रिए भी।\nवही वेंडर। वही प्लैटफ़ॉर्म। डिफ़ॉल्ट चालू। एक संगठन ने इसे छुआ नहीं और एक ने अंदर जाकर इसे बंद कर दिया, या कोई पुराना कॉन्फ़िग रखे रहा जिसे तब से किसी ने पढ़ा नहीं। Sainsbury\u0026rsquo;s के पास IPv6 है और Tesco के पास नहीं, और दोनों के बीच का फ़र्क एक अकेला कॉन्फ़िगरेशन फ़्लैग और किसी का ध्यान है।\nइसके बाद न खर्च की कोई दलील खड़ी रहती है, न जटिलता की। बस यह बचता है कि कोई ध्यान दे रहा था या नहीं।\nपूरे सैंपल में नियम कायम रहता है: जहाँ IPv6 किसी सप्लायर के डिफ़ॉल्ट के रूप में आता है, ब्रिटेन के पास वह है। जहाँ किसी ब्रिटिश संगठन को कुछ तय करना पड़ता, वहाँ नहीं है। पचास में से दो साइटें, और उनमें से एक IPv6 Council थी।\nजो हमें Managed Service इंडस्ट्री तक लाता है CGNAT का दोष कंज़्यूमर ISPs पर आता है, और वे इसके हकदार हैं। लेकिन सबसे ज़्यादा नुकसान वह परत कर रही है जो विशेषज्ञता बेचती है: managed service providers, integrators, आउटसोर्स्ड नेटवर्क टीमें, वे कंसल्टेंसियाँ जो low-level design लिखती हैं।\nबिना IPv6 वाले सबसे बड़े UK नेटवर्कों की सूची पर वापस जाइए — बैंक, British Airways, PwC, QinetiQ। ये जुगाड़ू स्टार्टअप नहीं हैं। ये वे संस्थाएँ हैं जो अपना नेटवर्क किसी और से चलवाने के लिए बहुत पैसा देती हैं, या उसे खुद चलाने के लिए एक बड़ी टीम रखती हैं। उन हर AS नंबर के पीछे एक डिज़ाइन डॉक्यूमेंट है, एक चेंज प्रोसेस, एक architecture review board, और एक सप्लायर जिसके नाम में “network” है। उनमें से एक ने भी IPv6 प्लान नहीं बनाया।\nआप जहाँ भी देखें, पैटर्न एक ही है:\nटेम्पलेट IPv4 है। बिल्ड स्टैंडर्ड, फ़ायरवॉल रूलसेट, मॉनिटरिंग चेक, IPAM, runbook, DR प्लान, कस्टमर हैंडओवर पैक — सब IPv4, एक बार लिखा गया, एक दशक तक कॉपी होता रहा। एक एड्रेस फ़ैमिली जोड़ने का मतलब है यह सब एडिट करना, और इसे एडिट करने के पैसे किसी को नहीं मिलते।\nकिसी ने इसे माँगा नहीं। यह वह वाक्य है जिस पर इस इंडस्ट्री में हर IPv6 बातचीत खत्म होती है, और यह एक इकबालिया बयान है। TLS 1.3 भी किसी ने नहीं माँगा था। किसी ने आपसे SMBv1 बंद करने को नहीं कहा था। ग्राहक नतीजा खरीदते हैं और आपको यह जानने के पैसे देते हैं कि उस नतीजे के लिए क्या चाहिए। “ग्राहक ने नहीं माँगा” का मतलब है “मैं इसे सीखना नहीं चाहता और उन्हें फ़र्क पता नहीं चल सकता”।\nRFC 1918 अनंत लगता है। Ten-dot 16.7 मिलियन पते हैं, तो अंदरूनी नेटवर्क में कभी कमी महसूस नहीं होती, तो कभी कोई मजबूर करने वाली घटना नहीं होती। फिर मर्जर आता है, दोनों एस्टेट 10.0.0.0/8 पर हैं, और जवाब होता है overlapping-subnet NAT का एक और दशक और एक डॉक्यूमेंट जो समझाता है कि कौन-सा नकली पता किस असली पते का है — फिर से और मशीनरी, उस एड्रेस फ़ैमिली से बचने के लिए जो इसे समस्या ही न रहने देती।\nIPv6 काबिलियत की पोल खोलता है। असली वजह यही है। Dual-stack आपको छिपने नहीं देता।\nआपको पता होना चाहिए कि आपकी फ़ायरवॉल पॉलिसी असल में क्या है, क्योंकि उसे दो बार लिखना पड़ता है। आपको पता होना चाहिए कि आपका DNS कैसा दिखता है। आपको neighbour discovery, prefix delegation, और यह समझना होगा कि आपका CPE एक /56 के साथ क्या करता है।\nजो इंजीनियर NAT को गलती से सिक्योरिटी कंट्रोल मानकर काम चलाता रहा, उसे लोगों के सामने पता चलता है कि वह कभी था ही नहीं। इस इंडस्ट्री में बीस-बीस साल के करियर इसी एक भ्रम पर बने हैं।\nतो इसका प्रस्ताव ही नहीं रखा जाता। इसलिए नहीं कि इसमें पैसा लगता है — नहीं लगता — बल्कि इसलिए कि प्रस्ताव रखने का मतलब है इसकी ज़िम्मेदारी लेना, और ज़िम्मेदारी लेने का मतलब है इसे सीखना।\nपक्के निठल्लेपन से मेरा यही मतलब है। मेहनत न करने वाला आलस नहीं। यह इंडस्ट्री बहुत मेहनत करती है। वह carrier-grade NAT पर मेहनत करती है, और ग्राहक को यह समझाने पर कि उसका CCTV अब बाहर से कनेक्ट क्यों नहीं होता। वह कितना भी काम कर लेगी, बशर्ते वह काम ऐसा हो जो खरीदा जा सके, ऐसा नहीं जिसे समझना पड़े।\nऔर यह जल्द ही पसंद-नापसंद का मामला नहीं रहेगा। संसद से गुज़र रहा Cyber Security and Resilience Bill NIS Regulations में बदलाव करके दूसरों के साथ “managed service providers (organisations that provide third-party IT services to other businesses)” को भी दायरे में लाएगा। यह अभी कानून नहीं है। जब बनेगा, तो डिटेक्शन, लॉगिंग और इंसिडेंट रिपोर्टिंग इस परत के बेचे जाने वाले प्रोडक्ट नहीं रहेंगे, बल्कि ऐसे दायित्व बन जाएँगे जिन्हें उसे निभाना होगा।\nइसे ऊपर वाली कड़ी के बगल में रखिए। किसी भी abuse रिपोर्ट को resolve करना इससे शुरू होता है कि दूसरे छोर के सर्वर ने सोर्स पोर्ट लॉग किया हो, और दूसरे छोर का सर्वर अक्सर इन्हीं कंपनियों का कोई बॉक्स होता है। जिन लोगों को जल्द ही साबित करना होगा कि वे किसी इंसिडेंट को पकड़ और रिपोर्ट कर सकते हैं, वे वही लोग हैं जिनसे अभी एक एड्रेस फ़ैमिली चालू नहीं करवाई जा सकती, या टनल न उठने पर एक पैकेट कैप्चर नहीं पढ़वाया जा सकता।\nतीन बहाने हर बार आपको वही तीन सुनने को मिलेंगे, और उनमें से कोई एक मिनट नहीं टिकता।\n“Dual-stack मतलब हर चीज़ दो बार।” मैंने इसे Nominet में प्रोडक्शन में चलाया, .uk रजिस्ट्री के आगे F5 लोड बैलेंसरों पर, तो मुझे पता है कि इस आपत्ति की कीमत क्या है। तो वह NAT टियर भी है जो आपने इसके बजाय खरीदा, और वह ट्रैफ़िक के रास्ते में बैठता है, साथ में सेशन टेबल, कैपेसिटी मॉडल, failover की कहानी और लॉगिंग का दायित्व। आप कभी जटिलता और सरलता के बीच नहीं चुन रहे थे। आपने वह जटिलता चुनी जो इनवॉइस के साथ आई।\n“हार्डवेयर इसे सपोर्ट नहीं करता।” 2006 में, ठीक है। 2026 में इसका मतलब है कि आपका हार्डवेयर सपोर्ट से बाहर है, जो उस बात से भी बुरी स्वीकारोक्ति है जिसे आप कहने से बच रहे थे।\n“इसमें कोई कमाई नहीं है।” बैकअप में भी कोई कमाई नहीं है।\nलोग जो पोस्ट करते हैं ऊपर के बहाने वे हैं जो आप मीटिंग में सुनते हैं। उनके नीचे तकनीकी दावों की एक परत है जो हर बार IPv6 का ज़िक्र आते ही फ़ोरम थ्रेड, कमेंट सेक्शन और LinkedIn जवाबों में दोहराई जाती है, और उनमें से ज़्यादातर एक दशक से ज़्यादा से गलत हैं।\nइसमें से कुछ ईमानदार उलझन है और कुछ ऐसा इंसान है जिसने कुछ न सीखने का फ़ैसला किया है और वजह ढूँढ रहा है। दोनों हालत में इन्हें देखना ज़रूरी है, क्योंकि ये दावे असली काम कर रहे हैं। यही वह है जो एक इंजीनियर ऐसे मैनेजर के सामने दोहराता है जो इन्हें जाँच नहीं सकता।\n“NAT मेरा फ़ायरवॉल है। IPv6 हर डिवाइस को सीधे इंटरनेट पर डाल देता है।”\nयह सबसे बड़ा है और यह उलटा है। लोग जिस सुरक्षा का श्रेय NAT को देते हैं, वह इससे आती है कि जब तक अंदर से कोई न माँगे, कोई मैपिंग नहीं होती — जो एक stateful फ़ायरवॉल है, और काम फ़ायरवॉल कर रहा है, ट्रांसलेशन नहीं। IETF ने 2007 में RFC 4864 में यही कहा: वह भूमिका, “often marketed as a firewall, is really an arbitrary artifact”, जबकि एक असली फ़ायरवॉल आपको “explicit and more comprehensive management controls.” देता है।\nहर कंज़्यूमर IPv6 राउटर इनबाउंड पर default-deny के साथ आता है। आपको वही सुरक्षा मिलती है, किसी की लिखी पॉलिसी से, पते ख़त्म होने के साइड इफ़ेक्ट से नहीं। और फिर आप ठीक वही एक चीज़ अनुमति दे सकते हैं जो आप देना चाहते थे, पोर्ट-फ़ॉरवर्डिंग की झाड़-फूँक के बजाय।\nअगर आपका पूरा सिक्योरिटी मॉडल “हमलावर मेरे डिवाइस ढूँढ नहीं सकते” है, तो आपके पास सिक्योरिटी मॉडल था ही नहीं। आपके पास NAT था।\n“IPv6 धीमा है।”\nयह खारिज करने के बजाय ईमानदार जवाब का हकदार है, क्योंकि सच मिला-जुला है और इसे कहने वाले सीधे-सीधे गलत नहीं हैं।\nजिन कंटेंट प्रोवाइडरों ने इसके लिए ऑप्टिमाइज़ किया है वे फ़ायदा मापते हैं: Facebook ने IPv6 पर पेज लोड करीब 15% तेज़ बताए, Akamai ने मोबाइल पर करीब 5%। पूरे इंटरनेट का APNIC का व्यापक माप कम तारीफ़ वाला है और IPv6 के round-trip times को औसतन थोड़ा ज़्यादा बताता है — करीब एक मिलीसेकंड के आसपास, और समय के साथ सुधरता हुआ।\nतो: मोटे तौर पर बराबर, जहाँ किसी ने काम किया है वहाँ बेहतर, और जहाँ किसी ने नहीं किया वहाँ कभी-कभार बाल भर बुरा।\nयह जानना ज़रूरी है कि असल लागत कहाँ बैठती है, क्योंकि लोग हेडर की तस्वीर बनाते हैं और हेडर समस्या नहीं है।\nIPv4 और IPv6 हेडर, और हर एक की राउटर पर लागत दोनों हेडर, और हर एक राउटर को कितना पड़ता है फ़ील्ड 32 बिट पर नाप से बने। स्रोत: RFC 791 (IPv4) और RFC 8200 (IPv6)। हर hop पर राउटर का काम चौड़ी lookup key IPv4 20 बाइट, options के साथ 60 तक 031 Version IHL Type of Service Total Length Identification Flags Fragment Offset Time to Live Protocol Header Checksum Source Address Destination Address Options: बदलती लंबाई, 0 से 40 बाइट और IPv6 40 बाइट, तय। हमेशा। 031 Version Traffic Class Flow Label Payload Length Next Header Hop Limit Source Address (128 बिट) Destination Address (128 बिट) IPv4 राउटर से\u0026#160;हर hop पर हेडर checksum दोबारा गिनवाता है, payload की शुरुआत जानने से पहले लंबाई का फ़ील्ड पढ़वाता है, और fragmentation का रास्ता रखवाता है। IPv6 तीनों हटा देता है, पर मैच करवाता है\u0026#160;चार गुना चौड़ी key\u0026#160;पर। दोनों हेडर अगल-बगल, फ़ील्ड 32 बिट पर नाप से बने। नारंगी छाया वह काम है जो राउटर को हर hop पर करना पड़ता है; नीली छाया चौड़ी lookup key है। शुरुआत इससे कीजिए कि IPv6 ने राउटर से क्या हटा दिया। IPv4 में एक हेडर checksum होता है। Time to Live हर hop पर बदलता है, तो checksum को भी साथ बदलना पड़ता है, और RFC 6583 “verifying and updating the checksum” को खुद फ़ॉरवर्डिंग प्रोसेस का एक कदम बताता है। IPv6 में यह है ही नहीं। वह कदम बस हट जाता है।\nफिर लंबाई। IPv4 हेडर की लंबाई बदलती रहती है, IHL इसी के लिए है: राउटर एक लंबाई पढ़ता है तब जाकर उसे पता चलता है कि payload कहाँ शुरू होता है। IPv6 हेडर 40 बाइट का है। हमेशा। हर फ़ील्ड एक तय offset पर है और पहले कुछ भी हिसाब नहीं लगाना पड़ता।\nफिर fragmentation। IPv4 राउटर रास्ते में fragment कर सकते हैं, इसीलिए Identification, Flags और Fragment Offset हेडर में बैठे हैं। RFC 8200 इस पर दो टूक है: “fragmentation in IPv6 is performed only by source nodes, not by routers along a packet\u0026rsquo;s delivery path”। तो वह रास्ता भी चला जाता है।\nसिर्फ़ हेडर हैंडलिंग पर IPv6 फ़ॉरवर्ड करने में सस्ता प्रोटोकॉल है। इसे ऐसा ही बनाया गया था।\nजिस एक जगह यह महँगा पड़ता है वह है हर रूट पर, और पता चलता है कि उससे फ़र्क नहीं पड़ता। Lookup key 32 बिट से 128 हो गई, तो एक IPv6 फ़ॉरवर्डिंग एंट्री चौड़ी है और बहुत से हार्डवेयर पर दो हार्डवेयर स्लॉट लेती है जहाँ एक IPv4 रूट एक लेता है। हर कोई बहस यहीं रोक देता है। एक कदम आगे जाना ज़रूरी है, क्योंकि पूरी टेबल चार गुना छोटी है।\n28 अगस्त 2026 को 02:03 UTC पर बने RIS डंप में ग्लोबल रूटिंग टेबल में 1,229,166 IPv4 प्रीफ़िक्स और 300,470 IPv6 प्रीफ़िक्स थे। चार गुना ज़्यादा IPv4 रूट, हर एक चौथाई चौड़ाई का। तो कच्चा key स्टोरेज लगभग बराबर निकलता है: 4.92 MB बनाम 4.81 MB। अब वह दो-स्लॉट-हर-IPv6-रूट वाला नियम लगाइए जिसकी लोग फ़िक्र करते हैं। पूरी IPv6 टेबल को फिर भी पूरी IPv4 टेबल की करीब आधी हार्डवेयर एंट्रियाँ चाहिए।\nऔर IPv4 टेबल इतनी बड़ी होने की वजह खुद कमी है। उन 1.2 मिलियन रूटों में से 767,543 /24 हैं — पूरे IPv4 इंटरनेट का 62% उस सबसे लंबे प्रीफ़िक्स पर बैठा है जिसे कोई भी स्वीकार करेगा, क्योंकि ब्लॉक काटे गए, बेचे गए और जिसने खरीदे उसने टुकड़ों में announce किए। इनमें से हर एक कहीं किसी राउटर में एक एंट्री है जिसकी ज़रूरत न होती अगर स्पेस ख़त्म न हुआ होता।\nIPv4 रूटिंग टेबल IPv6 वाली से चार गुना बड़ी है IPv4 रूटिंग टेबल चार गुना बड़ी है, और उसका ज़्यादातर हिस्सा कमी की देन है ग्लोबल रूटिंग टेबल में अलग-अलग प्रीफ़िक्स, RIPE RIS डंप, 28 अगस्त 2026 को 02:03 UTC पर बना। IPv432-बिट key इनमें से 767,543 /24 हैं 1,229,166 IPv6128-बिट key 300,470 चार गुना ज़्यादा IPv4 रूट, हर एक चौथाई चौड़ाई का, तो कच्चा key स्टोरेज लगभग बराबर है: 4.92 MB बनाम 4.81 MB। एक IPv6 रूट को दो हार्डवेयर एंट्री गिनिए, जैसी लोगों को फ़िक्र है, फिर भी पूरी IPv6 टेबल को करीब आधी एंट्रियाँ चाहिए। IPv4 टेबल का 62% /24 है\u0026#160;: ब्लॉक काटे गए, बेचे गए और टुकड़ों में announce हुए क्योंकि स्पेस ख़त्म हो गया। हर एक ऐसी एंट्री है जो स्पेस ख़त्म न होता तो राउटर में न होती। 28 अगस्त 2026 को ग्लोबल रूटिंग टेबल में अलग-अलग प्रीफ़िक्स, RIPE RIS डंप से गिने गए। IPv4 बार का ठोस हिस्सा /24 हैं — वह deaggregation जो पतों की कमी ने करवाया। तो मेमोरी वाली दलील उलटी चलती है, जैसे मीटिंगों में सुनाई जाती है उसके उलट। IPv6 ढोना आपके FIB पर IPv4 ढोने से सस्ता है, और हर साल सस्ता होता जाता है जब ट्रांसफ़र मार्केट एक और /16 को सोलह /24 में काटता है।\nऔर लोगों को जो CPU spikes असल में लगते हैं, वे इनमें से कोई नहीं। एक आधुनिक राउटर दोनों फ़ैमिली को silicon में line rate पर फ़ॉरवर्ड करता है। तकलीफ़ वह देता है जो किसी पैकेट को उस रास्ते से धकेलकर control plane में भेज दे, जिसे RFC 6583 “a \u0026lsquo;slower\u0026rsquo; software process running on a general purpose processor” कहता है। वह प्रोसेसर रूटिंग प्रोटोकॉल के नाप का था। ट्रैफ़िक के लिए कभी नहीं।\nदो चीज़ें पैकेट उसकी तरफ़ धकेलती हैं। पहली है extension headers। वे एक तय ब्लॉक नहीं, एक चेन हैं, तो जिस बॉक्स को ACL या ECMP hash के लिए layer-4 पोर्ट चाहिए उसे उन्हें ढूँढने के लिए एक बदलती लंबाई की सूची से गुज़रना पड़ता है, और एक Hop-by-Hop Options हेडर “may be examined or processed by any node along a packet\u0026rsquo;s delivery path”। बहुत से हार्डवेयर पर इसका मतलब है punt।\nदूसरी है Neighbour Discovery। एक /64 खरबों ऐसे पते कवर करता है जो कभी असाइन नहीं होंगे, तो उसे स्कैन करने से राउटर ऐसे पते resolve करने लगता है जो मौजूद ही नहीं। RFC 6583 इसी के लिए है, और इसे denial of service कहता है।\nदोनों के जाने-माने जवाब हैं। Edge पर Hop-by-Hop फ़िल्टर कीजिए, ND पर रेट-लिमिट लगाइए, neighbour cache पर सीमा लगाइए। इनमें से कोई वजह नहीं कि प्रोटोकॉल धीमा है। ये वजहें हैं कि बिना कॉन्फ़िगर किया राउटर धीमा है, और यह वहीं इशारा करता है जहाँ यह बाकी पोस्ट करती है।\nअब एक मिलीसेकंड को उस विकल्प के सामने तौलिए जो आपने असल में deploy किया — हर कनेक्शन के रास्ते में एक stateful ट्रांसलेशन बॉक्स, सेशन टेबल रखता हुआ, जो उनमें से कुछ को सीधे तोड़ देता है। कोई एक मिलीसेकंड की वजह से बीस साल नहीं अटका।\n“IPv4 बहुत है, बस खरीद लीजिए।”\nखरीद सकते हैं। कमी ऐसी ही दिखती है। 1990 में मुफ़्त बाँटे गए ब्लॉक अब करीब $20 प्रति पता बिकते हैं, और AWS आपके इस्तेमाल किए हर पते के लिए साल के $43.80 का बिल भेजता है।\nकिसी चीज़ का बाज़ार यह साबित नहीं करता कि वह भरपूर है। वह साबित करता है कि किसी ने कमी के पैसे आपसे वसूलने का तरीका निकाल लिया।\nउनसे यह करवाने वाला कोई था ही नहीं UK की इस पर कोई नीति है ही नहीं, और कभी थी भी नहीं।\nएक कोशिश हुई थी। 6UK 2010 में Department for Business, Innovation and Skills से £20,000 की शुरुआती रकम के साथ बना, Vint Cerf के समर्थन से, और LINX, AAISP, Timico और Easynet उसके पीछे थे। दिसंबर 2012 में उसके स्वयंसेवी डायरेक्टरों ने AGM में इस्तीफ़ा दे दिया, बोर्ड के लिए कोई खड़ा नहीं हुआ, और उसे बंद कर दिया गया। उसका आखिरी फ़ैसला: फ़्री-मार्केट प्रोत्साहन काफ़ी नहीं हैं, “one factor appears to dominate IPv6 adoption rates, namely government support,” और “countries with hands-off governments fall behind.”\nचौदह साल बाद, ठीक यही हुआ। UK IPv6 Council अब भी चल रहा है, लेकिन एक फ़ोरम कोई लीवर नहीं है।\nअमेरिका से तुलना कीजिए, जहाँ OMB memorandum M-21-07 ने अनिवार्य किया कि वित्त वर्ष 2025 के अंत तक 80% संघीय IP-enabled assets IPv6-only हों। एजेंसियाँ चूक गईं। फिर भी उनके पास चूकने के लिए एक आँकड़ा था, चूकने की एक तारीख थी, और कोई था जिसे खड़े होकर चूक का जवाब देना पड़ता है। यहाँ चूकने को कुछ है ही नहीं, तो किसी को कभी कुछ समझाना नहीं पड़ा।\nUK सरकार अपनी खुद की खरीद में किसी मायने वाले तरीके से IPv6 की माँग नहीं करती। Ofcom इसे मापता नहीं। कोई रेगुलेटर इसके बारे में पूछता नहीं। और इसलिए, जैसा अंदाज़ा था, www.nhs.uk और www.hmrc.gov.uk के पास यह नहीं है, जबकि www.gov.uk के पास है। और www.gov.uk के पास भी सिर्फ़ इसलिए है कि वह Fastly से सर्व होती है, जिसने सालों पहले किसी और की तरफ़ से IPv6 चालू कर दिया।\nमैंने पहले लिखा है कि जब किसी इंडस्ट्री पर किसी के पास कॉन्ट्रैक्ट न हो तो क्या होता है — जो मैकेनिज़्म काम करते हैं वे वही निकलते हैं जिन्हें संसाधन वाला कोई चलाना चुनता है, और अगर कोई नहीं चलाता, तो एक दशक तक कुछ नहीं होता। UK में IPv6 फिर वही पैटर्न है, आखिर में सदस्यों के वोट के बिना भी।\nऔर ऐसा नहीं कि किसी ने ध्यान नहीं दिया अगर यह किसी की नज़र में न आया होता तो किसी अनिवार्यता का न होना बस निराशाजनक होता। नज़र में आया था।\nसरकार ने समझ लिया कि carrier-grade NAT क्या करता है और उस पर कानून बनाया। संसद ने सीधे समस्या को देखा, उसे इतना समझा कि उस पर कानून लिख सके, और वह कानून लिखा जो टूट-फूट को समायोजित करता है। “उनसे वह प्रोटोकॉल deploy करवाओ जो इसे हटा देता है” या तो कभी उठाया ही नहीं गया, या उठाया गया और छोड़ दिया गया।\nतो हम एक ऐसा देश हैं जिसकी घोषित स्थिति है कि IP attribution इतना मायने रखता है कि उस पर आतंकवाद-विरोधी कानून बने, और जो एक भी प्रोवाइडर से वह मुफ़्त काम करने को नहीं कहता जो उसे बहाल करता है। फ़्रॉड, अकाउंट टेकओवर, उत्पीड़न, जान से मारने की धमकियाँ, बाल शोषण के रेफ़रल और आतंकवाद, सब एक्सेस नेटवर्क पर एक ही सवाल लेकर पहुँचते हैं, और बहुत से ब्रिटिश कनेक्शनों के लिए ईमानदार जवाब है “इन कई सौ घरों में से एक”।\nNational Cyber Security Centre GCHQ का हिस्सा है और ढेरों चीज़ों पर गाइडेंस प्रकाशित करता है। वह किसी से IPv6 की माँग नहीं करता। ब्रिटेन में कोई नहीं करता।\nवैसे www.ncsc.gov.uk और www.gchq.gov.uk दोनों IPv6 पर जवाब देती हैं। Internet Watch Foundation भी। तीनों इसलिए कि वे Cloudflare के पीछे हैं, जिसने इसे सबके लिए डिफ़ॉल्ट रूप से चालू किया। www.police.uk के पास कुछ नहीं।\nऔर सत्रह के लिए इसका क्या मतलब है इस पोस्ट के चालीस प्रोवाइडरों में से सत्रह बिना IPv6 वाले कनेक्शन बेचते हैं, और फ़ुल-फ़ाइबर बनाने वालों में से करीब आधे ग्राहकों को carrier-grade NAT के पीछे डालते हैं।\nमैं उनमें से किसी पर अपराध का आरोप नहीं लगा रहा, और उन इमारतों में कोई किसी अपराध की उम्मीद नहीं कर रहा।\nलेकिन carrier-grade NAT के पीछे बिना IPv6 वाला कनेक्शन किसी सब्सक्राइबर तक resolve नहीं किया जा सकता। इस पर कोई विवाद नहीं। IETF ने इसे 2011 में लिखा, Europol ने 2016 और 2017 में, संसद ने 2015 में — सब कुछ इस ज़्यादातर हार्डवेयर के खरीदे जाने से पहले प्रकाशित हुआ। विकल्प मुफ़्त था, और पूरे समय उपलब्ध था।\n“हम आखिरकार IPv6 पर पहुँच जाएँगे” का, अगर आप इसकी जड़ तक जाएँ, यही मतलब है।\nइसके बारे में क्या करें, ठोस रूप से छोटा, क्योंकि इसमें से कुछ भी मुश्किल नहीं। पूरी पोस्ट का यही तो मुद्दा है।\nअगर आप कनेक्टिविटी खरीदते हैं: IPv6 को टेंडर में pass/fail शर्त के रूप में डालिए, nice-to-have नहीं। नेटिव dual-stack और एक delegated प्रीफ़िक्स लिखित में माँगिए, और पूछिए कि किस साइज़ का।\nअगर जवाब एक अकेला /64 है, तो पूछते रहिए। RFC 6177 ने 2011 में इसे खत्म कर दिया: किसी होम साइट को एक /64 देना “precludes the expectation that even home sites will grow to support multiple subnets”, और यह “strongly intended that even home sites be given multiple subnets worth of space, by default”।\nउसने जो नहीं किया वह था साइज़ का नाम लेना। उसने पुराना सबके लिए /48 वापस लिया, कहा कि चुनाव “is an issue for the operational community”, और जाते-जाते एक उदाहरण छोड़ गया: होम डिफ़ॉल्ट “of less than /48, such as a /56”।\nऑपरेटरों ने खुद इसका जवाब दिया। RIPE-690 उनका अपना प्रैक्टिस डॉक्यूमेंट है और वह दो टूक है। सरल प्लान चाहिए तो हर एक को /48। व्यावहारिक प्लान चाहिए तो बिज़नेस के लिए /48 और रेज़िडेंशियल के लिए /56। /56 से लंबा कुछ भी “strongly discouraged” है, और /64 IPv6 स्टैंडर्ड के अनुरूप नहीं है और ग्राहक के LAN तोड़ देगा।\nतो न्यूनतम /56 है, और यह IETF का अपना आँकड़ा है, किसी की पसंद नहीं। Sky 2016 से हर सब्सक्राइबर को एक दे रहा है। Zen एक /48 देता है, जो 65,536 है। किसी बिज़नेस को /48 से कम स्वीकार नहीं करना चाहिए।\nअगर कोई प्रोवाइडर कहे कि एक घर को /48 देना फ़िज़ूलखर्ची है, तो एक ब्रिटिश ISP सालों से यह कर रहा है जबकि वे अभी अपनी राय तय कर रहे थे।\nअगर आप एक AS नंबर चलाते हैं: शायद आपके पास पहले से एक /29 है जो आपने कभी announce नहीं किया। जाँचिए।\nAS=AS20712 # your AS number ORG=$(whois -h whois.ripe.net \u0026#34;$AS\u0026#34; | awk \u0026#39;/^org:/{print $2; exit}\u0026#39;) # what IPv6 the registry has already given you whois -h whois.ripe.net -- \u0026#34;-i org $ORG\u0026#34; | grep -i \u0026#39;^inet6num\u0026#39; # what you are actually announcing of it whois -h whois.ripe.net -- \u0026#34;-i origin $AS\u0026#34; | grep -i \u0026#39;^route6\u0026#39; अगर पहली कमांड एक प्रीफ़िक्स दिखाती है और दूसरी कुछ नहीं, तो आप उन 463 में से एक हैं।\nउसे announce कीजिए, अपने बॉर्डर और एक अंदरूनी VLAN को dual-stack कीजिए, और एक पब्लिक सर्विस पर एक AAAA डालिए। यह एक इंजीनियर का दो हफ़्ते का काम है और यह आपके संगठन को ऊपर की टेबल के एक आँकड़े से बदलकर ऐसा संगठन बना देता है जिसने शुरुआत कर दी है।\nअगर आप एक वेबसाइट चलाते हैं: AAAA रिकॉर्ड जाँचिए। अगर आप किसी CDN के पीछे हैं, तो शायद यह एक टॉगल है जिसे आप आज दोपहर बिना किसी खर्च के चालू कर सकते हैं। अगर यह बंद है, तो किसी ने इसे बंद किया है।\nअगर आप managed services बेचते हैं: IPv6 को बिल्ड स्टैंडर्ड और low-level design टेम्पलेट में लिख दीजिए, एक बार, और उसके बाद हर ग्राहक को यह डिफ़ॉल्ट रूप से मिलेगा। किसी को इसे माँगना नहीं पड़ेगा, क्योंकि TLS भी कोई नहीं माँगता।\nअगर आप ऐसे इंजीनियर हैं जिसने यह कभी नहीं किया: आज रात एक लैब बनाइए। मेरा अपना करीब 90% ट्रैफ़िक नेटिव IPv6 पर चलता है और यह मेरे नेटवर्क की सबसे कम हलचल वाली चीज़ है। एक टनल या /64 वाला एक VPS लीजिए, चीज़ों पर पते डालिए, इसे तोड़िए, ठीक कीजिए। इसे डरावना न लगने में एक शाम लगती है और यह इस साल अपने करियर के लिए आप जो कर सकते हैं उसमें सबसे सस्ती चीज़ है।\nवे सवाल जिनका मैं फ़ैसला नहीं कर सकता ऊपर की हर चीज़ मैं आपको दिखा सकता हूँ। यह हिस्सा वह है जिसे मैं बार-बार उलटता-पलटता हूँ, और इसमें से किसी का मेरे पास साफ़ जवाब नहीं।\nकुछ कर सकते हैं और कुछ क्यों नहीं? यही मायने रखता है, और डेटा इसे साफ़ करने के बजाय और अजीब बना देता है।\nSky और Virgin Media ने एक ही देश को, एक ही रेगुलेटर के नीचे, एक ही समय में ब्रॉडबैंड बेचा। एक ने 2016 में पूरा किया। दूसरा 2010 से कह रहा है “when we are ready”। Sainsbury\u0026rsquo;s और Tesco एक ही CDN पर हैं, ऐसे प्रोडक्ट पर जहाँ dual-stack डिफ़ॉल्ट है, और एक के पास IPv6 है और एक के पास नहीं। नॉर्वे और ब्रिटेन एक ही वेंडरों से खरीदते हैं और नॉर्वे के 66.9% नेटवर्क IPv6 चलाते हैं, हमारे 42.3% के मुकाबले।\nइन जोड़ियों में हर वह बाहरी कारण स्थिर है जिस पर आप दोष डाल सकते हैं। वही देश, वही सप्लायर, वही हार्डवेयर, वही ग्राहक, वही दशक, वही रेगुलेटर, वही पैसा। और नतीजे उलटे।\nतो वजह हालात में नहीं है। वह बिल्डिंग के अंदर है। Sky में कहीं एक इंसान था जिसने इसे अपना काम बनाया और तीन साल तक अपना काम बनाए रखा। बाकी जगहों पर ऐसा कोई नहीं था, या था और उसके ऊपर वालों को परवाह नहीं थी। पूरा चर यही है, और यह तकनीकी नहीं है।\nजो एक असहज जवाब है, क्योंकि आप इसे खरीद नहीं सकते, और इसे किसी स्ट्रैटेजी डॉक्यूमेंट में नहीं डाल सकते।\nक्या यह ट्रेनिंग की बात है? कुछ हद तक, और आप जितना सोचेंगे उससे कम।\nउन 463 संस्थाओं को फिर देखिए जिनके पास IPv6 है जो उन्होंने कभी announce नहीं किया। उनमें से हर बिल्डिंग में किसी को इतना पता था कि उन्हें इसकी ज़रूरत है, पता था कि किससे माँगना है, फ़ॉर्म भरा, और इसे जारी करवा लिया। ज्ञान वहाँ था और उसे अंजाम तक पहुँचाना नहीं था।\nट्रेनिंग एक इंजीनियर को काबिल होने तक पहुँचाती है। उसे मजबूर किए जाने तक नहीं पहुँचाती। IPv6 deploy न करने पर किसी का कभी खराब appraisal नहीं हुआ। इसकी वजह से किसी ने कभी कॉन्ट्रैक्ट नहीं खोया। जब तक इनमें से एक भी सच न हो, ट्रेनिंग उस ढेर पर चली जाती है जिस पर हर वह चीज़ है जो किसी ने कोर्स में सीखी और कभी इस्तेमाल नहीं की।\nहम सब इस पर कब तक होंगे? इस पर मैं एक आँकड़ा रख सकता हूँ, और यह मेरी उम्मीद से बुरा है।\nGoogle 2008 से माप रहा है कि उसके अपने विज़िटर्स का कितना हिस्सा IPv6 पर आता है। हर साल अगस्त के बीच का आँकड़ा लेकर, ताकि तुलना बराबर की हो:\nदुनिया में IPv6 अपनाना आधे रास्ते से पहले धीमा पड़ रहा है दुनिया में IPv6 अपनाना तेज़ नहीं, धीमा हो रहा है नेटिव IPv6 पर आने वाले Google के अपने विज़िटर्स का हिस्सा, हर साल अगस्त के बीच। स्रोत: Google IPv6 statistics। 0% 10% 20% 30% 40% 50% 2017 18.1% 2018 2019 2020 2021 2022 2023 2024 2025 2026 48.1% उस साल जुड़े पॉइंट +3.6 +5.0 +4.4 +3.3 +4.3 +3.3 +2.3 +2.6 +1.1 इस साल जुड़े\u0026#160;1.1 पॉइंट, एक दशक की सबसे छोटी बढ़त; अगस्त 2017 तक के साल में 6.6 पॉइंट थे। नेटिव IPv6 पर आने वाले अपने विज़िटर्स का Google का माप, हर साल अगस्त के बीच लिया गया ताकि तुलना बराबर की हो। लाइन स्तर है। बारें वह हैं जो हर साल जुड़ा। हम फ़िनिश लाइन की तरफ़ तेज़ नहीं हो रहे। हम आधे रास्ते से पहले धीमे पड़ रहे हैं। इस साल 1.1 पॉइंट जुड़े, एक दशक की सबसे छोटी बढ़त, अगस्त 2017 तक के साल के 6.6 पॉइंट के मुकाबले।\nपिछले तीन सालों से सीधी लाइन खींचिए और दुनिया 2049 में 100% पर पहुँचती है। सिर्फ़ इस साल से खींचिए और यह 2073 है। दोनों में से कोई पूर्वानुमान नहीं। जो कर्व सपाट हो रहा है वह बहते-बहते चोटी तक कभी नहीं पहुँचता। वह साठ के आसपास कहीं अटक जाता है और बाकी हिस्सा कभी नहीं हिलता, क्योंकि जिन नेटवर्कों ने तब तक नहीं किया वे वही हैं जिन्हें कोई चीज़ कभी हिलाने वाली नहीं थी।\nमुझे इस बारे में गलत साबित होना अच्छा लगेगा। जितने साल मैंने इसे देखा है, आँकड़ा हर साल छोटा हुआ है।\nक्या हमें कानून चाहिए? इस पर मैं सबसे ज़्यादा आगे-पीछे हुआ हूँ, और मैं इस पर पहुँचा हूँ कि “वह कानून नहीं जिसकी तरफ़ लोग हाथ बढ़ाते हैं”।\nअनिवार्यता के ख़िलाफ़: अमेरिकियों ने अब तक की सबसे मज़बूत अनिवार्यता पास की, और चूक गए। एक डेडलाइन deployment नहीं है।\nइसके पक्ष में: 2012 में 6UK का आखिरी फ़ैसला था कि फ़्री-मार्केट प्रोत्साहन काफ़ी नहीं हैं और जो देश पीछे रह जाते हैं वे वही हैं जिनकी सरकारें हाथ खींचे रहती हैं। चौदह साल का ब्रिटिश डेटा उनसे सहमत है।\nऔर यह वह हिस्सा है जो फ़ैसला कर देता है। यह देश इस समस्या पर पहले ही कानून बना चुका है — बस गलत दिशा में। हम पता साझा करने को समायोजित करने के लिए कानून बनाने को तैयार थे। हम उसे हटाने के लिए कानून बनाने को कभी तैयार नहीं रहे।\nमैं जो माँगूँगा वह न पाबंदी है न कोई लक्ष्य, बल्कि वह बेल्जियन औज़ार जो पहले बताया गया: इस पर एक सख़्त सीमा कि कितने सब्सक्राइबर एक पता साझा कर सकते हैं। इसके लिए नए पतों की ज़रूरत नहीं, यह किसी को बाज़ार से बाहर नहीं करता, और यह किसी की अच्छी नीयत पर नहीं, अर्थशास्त्र पर काम करता है।\nअकेली अनिवार्यता एक काम की चीज़ पैदा करती है, और वह deployment नहीं है। वह है एक नामित व्यक्ति जिसे चूक का जवाब देना पड़ता है। हमारे पास ऐसा कोई कभी नहीं रहा।\nतो फिर हम IPv4 पर इतनी जल्दी कैसे पहुँच गए? क्योंकि कोई पुराने को बंद कर सकता था।\nतुलना बिल्कुल सटीक है, और लगभग कोई इसे करता नहीं। ARPANET Network Control Program चलाता था, जो होस्ट्स को 8 बिट में एड्रेस करता था — 6 नोड के लिए और 2 होस्ट के लिए, यानी 4 मशीनों वाले 64 नोड, कुल 256 होस्ट। 1970 के दशक के आखिर तक यह साफ़ तौर पर काफ़ी नहीं था, और जवाब था बड़े पते वाला एक नया प्रोटोकॉल। वही समस्या जो आज हमारे पास है, चालीस-कुछ साल पहले।\nJon Postel ने नवंबर 1981 में ट्रांज़िशन प्लान प्रकाशित किया। मार्च 1982 में US Department of Defense ने TCP/IP को अपना आधिकारिक स्टैंडर्ड घोषित किया। दोनों प्रोटोकॉल साथ-साथ चले, और 1 जनवरी 1983 को NCP बंद कर दिया गया। जिन होस्ट्स ने बदलाव नहीं किया था उन्होंने नेटवर्क का एक्सेस खो दिया। Vint Cerf याद करते हैं कि जो लोग इससे पार निकले उन्होंने बाद में “I survived the TCP/IP switchover” वाले पिन लगाए।\nप्लान से flag day तक चौदह महीने।\nअब गिनिए कि इसे मुमकिन किसने बनाया। मोटे तौर पर कुछ सौ होस्ट, चार अरब नहीं। एक नेटवर्क, हर नेटवर्क नहीं। एक फ़ंडर जो उस पर हर मशीन का मालिक था और उन्हें छूने वाले हर इंसान की तनख्वाह देता था। एक अकेला संगठन जो एक तारीख तय कर सकता था, और — यही वह हिस्सा है जो मायने रखता है — उस तारीख पर पुराने प्रोटोकॉल को काम करना बंद करवा सकता था।\nइनमें से कुछ भी आज मौजूद नहीं, और पूरा जवाब यही है। IPv4 इसलिए नहीं जीता कि माइग्रेशन आसान था। वह इसलिए जीता कि कोई ऐसी स्थिति में था जो बहस खत्म कर सके।\nआज कोई उस स्थिति में नहीं है। कोई अथॉरिटी नहीं जो IPv4 बंद कर सके, और कभी होगी भी नहीं। जिसका मतलब है कि यह ट्रांज़िशन उस तरह पूरा नहीं हो सकता जैसे पिछला हुआ था — यह सिर्फ़ तब पूरा हो सकता है जब कई हज़ार संस्थाएँ, हर एक अपने आप, ज़हमत उठाने का फ़ैसला करें।\nइस साल के आँकड़ों पर, यह 2073 में पहुँचता है। Flag day के नब्बे साल बाद।\nहम कभी चीज़ें ढंग से बनाते थे स्टैंडर्ड वह चीज़ है जो आप तब निभाते हैं जब कोई जाँच नहीं रहा। बस इतनी सी बात है। इसके लिए कोई इंस्पेक्टर नहीं, कोई सर्टिफ़िकेट नहीं, कोई ऑडिटर नहीं जो आकर आपकी रूटिंग टेबल देखने को कहे, और बीस साल ने अब ठीक-ठीक दिखा दिया है कि यह देश उस दायित्व के साथ क्या करता है जिसे कोई लागू नहीं करवाता।\nहम उसे छोड़ देते हैं, और फिर फ़ासला ढकने के लिए कुछ खरीद लेते हैं।\nइसमें से कुछ भी तकनीकी नाकामी नहीं है और मैं ऐसा दिखावा नहीं करूँगा। ब्रिटेन यह काम कर सकता है। हुनर यहाँ है, हार्डवेयर यहाँ है, एड्रेस स्पेस जारी हो चुका है और उन अकाउंट्स में इंतज़ार कर रहा है जिनके पैसे हम पहले से दे रहे हैं। जो चला गया है वह है किसी काम को ढंग से करने की सहज प्रवृत्ति क्योंकि काम यही है — उसके लिए अलग से पैसे मिले बिना, और बिना किसी के सिर पर खड़े होकर करवाए।\nपूछिए कि इसे असल में क्या रोकता है और आप पैसे पर पहुँचते हैं, लेकिन उस तरह नहीं जैसा लोगों का मतलब होता है।\nएक carrier-grade NAT का एक purchase order होता है। उसका एक वेंडर होता है, एक कोटेशन, एक डिस्काउंट, एक सपोर्ट कॉन्ट्रैक्ट और एक रिन्यूअल की तारीख। वह कैपिटल प्लान में जाता है, पाँच साल में depreciate होता है, और बिज़नेस केस पर किसी का नाम होता है। उसे डिलीवर करना एक दिखने वाली चीज़ है जिस पर एक मैनेजर appraisal में उँगली रख सकता है।\nIPv6 के पास इसमें से कुछ नहीं। न इनवॉइस, न सप्लायर, न रिन्यूअल, न बजट में डालने को कुछ, न ऐसा कुछ जिसे खरीदते हुए किसी को देखा जा सके। यह बस काम है, ढंग से किया गया, उन लोगों द्वारा जो जानते हैं कि वे क्या कर रहे हैं, इस तिमाही बिना किसी रिटर्न के। इस इंडस्ट्री में किसी का कभी उस चीज़ के लिए प्रमोशन नहीं हुआ जो कभी बजट में आई ही नहीं।\nइस तरह सस्ता विकल्प हारता है, हर साल, बीस साल से। इसलिए नहीं कि किसी ने तौला और गलत चुना, बल्कि इसलिए कि यहाँ एक मैनेजमेंट कल्चर पनप गया है जो इंजीनियरिंग के सिर्फ़ वही हिस्से देख पाता है जो कीमत के ठप्पे के साथ आते हैं। सस्ता होना कभी रुकावट नहीं था। बिल न बन पाना था। जब कोई बिज़नेस स्टैंडर्ड्स की परवाह छोड़कर सिर्फ़ उसकी परवाह करने लगता है जो वह इनवॉइस पर डाल सके, तो ऐसा ही दिखता है, और यह फ़ैसला वे लोग ले रहे हैं जिन्हें इतनी अच्छी तनख्वाह मिलती है कि उन्हें बेहतर पता होना चाहिए।\nफिर वह है जो उन्होंने हमें एक पते के बदले बेचा, जिस पर लोगों को जितना गुस्सा आता है उससे ज़्यादा आना चाहिए।\nइंटरनेट इसलिए बनाया गया था कि कोई भी मशीन किसी भी दूसरी मशीन तक सीधे पहुँच सके। यह डिज़ाइन का कोई ब्योरा नहीं। यही डिज़ाइन है। इसीलिए कनेक्शन और एक आइडिया वाला कोई भी इंसान कुछ ऐसा खड़ा कर सकता था जिस तक पूरी दुनिया पहुँच सके। किसी ग्राहक को साझा पते के पीछे डालिए और वह चला गया। आप पूछ सकते हैं, लेकिन जवाब कभी नहीं दे सकते। आप हमेशा के लिए दूसरों की सर्विसों के उपभोक्ता हैं, और अपनी किसी सर्विस के प्रोवाइडर कभी नहीं।\nयह कमी का कोई दुर्भाग्यपूर्ण साइड इफ़ेक्ट नहीं है। यह एक री-आर्किटेक्चर है, और यह इसे बेचने वाले हर किसी के फ़ायदे का है। वह कैमरा जिसे अब निर्माता का क्लाउड चाहिए। वह रिमोट एक्सेस जिसे अब किसी का रिले चाहिए। वह चीज़ जो लोग पहले घर पर चलाते थे और जो अब एक मासिक सब्सक्रिप्शन है। इनमें से हर एक ऐसा इंसान है जो किसी चीज़ का मालिक था और उसे किराएदार में बदला जा रहा है, और एक कनेक्शन चुपचाप इंटरनेट पर एक जगह से घटकर किसी और की खिड़की बना दिया गया।\nहमने इंटरनेट का बीच का हिस्सा दूसरे महाद्वीप की मुट्ठी भर कंपनियों को सौंप दिया, फिर खड़े होकर हैरान हुए कि यह केंद्रीकृत हो गया। जो कनेक्शन आपको कुछ भी होस्ट न करने दे, उस पर आप आत्मनिर्भर नहीं हो सकते।\nआत्मनिर्भरता वह हिस्सा है जिस पर मैं बार-बार लौटता हूँ, क्योंकि इस देश ने खुद से इसकी उम्मीद करना छोड़ दिया है। अब सहज प्रवृत्ति इंतज़ार करने की है। किसी वेंडर का, किसी रेगुलेटर का, किसी ग्रांट का, किसी अनिवार्यता का, किसी ग्राहक का जो फ़ोन करके माँगे। इनमें से कोई नहीं आ रहा। कोई मार्केट सिग्नल रास्ते में नहीं, कोई नीति ड्राफ़्ट नहीं हो रही, कोई डेडलाइन नहीं जिसे चूकने का जवाब किसी को देना पड़ेगा।\nजो इसे वहीं छोड़ता है जहाँ यह पूरे समय रहा है। एक मुफ़्त एलोकेशन, आपकी कंपनी के नाम वाले एक रजिस्ट्री अकाउंट में पड़ा हुआ, और आपके और काम ढंग से कर चुकने के बीच दो हफ़्ते।\nआपसे यह करवाने कोई नहीं आ रहा। ठीक इसीलिए यह मायने रखता है।\nआप जाँच सकते हैं कि यह आपकी बिल्डिंग है या नहीं। स्क्रिप्ट पोस्ट के ऊपर वाले डाउनलोड में है।\nस्रोत नीचे की हर चीज़ 27 अगस्त 2026 को प्राप्त की गई।\nवह डेटा जिससे मैंने मापा। मेरा हर आँकड़ा इन्हीं से आता है। ये मुफ़्त हैं, सार्वजनिक हैं, और आप पूरी चीज़ एक दोपहर में दोहरा सकते हैं।\nरजिस्ट्री डेलिगेशन फ़ाइलें, हर क्षेत्रीय रजिस्ट्री की एक: RIPE NCC, APNIC, ARIN, LACNIC, AFRINIC। RIPE की 26 अगस्त 2026 को बनी, बाकी 27 अगस्त 2026 को। RIPE RIS routing table dumps, riswhoisdump.IPv4.gz और riswhoisdump.IPv6.gz, 27 अगस्त 2026 को 18:06 UTC पर बने। RIPE database REST interface, हर AS नंबर के पीछे के संगठन के लिए। सार्वजनिक DNS, AAAA जाँच के लिए, एक दूसरे resolver से मिलाकर। दूसरों के माप।\nGoogle IPv6 statistics — Google के अपने विज़िटर्स में देश-वार नेटिव IPv6, 25 अगस्त 2026 के आँकड़े। APNIC on IPv6 performance और on IPv6 security misconceptions — मापी गई तस्वीर, फ़ोरम वाली नहीं। IPv4 transfer market prices, first half of 2026, सार्वजनिक कीमत वाले सौदों के CircleID के विश्लेषण का सार। स्टैंडर्ड्स। जुगाड़, उसी क्रम में जिसमें वे प्रकाशित हुए।\nRFC 3056 — 6to4 ऑटोमैटिक टनलिंग, फ़रवरी 2001। RFC 3701 — 6bone को खत्म करने की योजना, जिसने उसके बंद होने की तारीख 6 जून 2006 तय की। RFC 7526 — 6to4 anycast रिले को deprecate करके Historic में डालना, मई 2015। RFC 4864 — NAT आपको क्या देता है और क्या नहीं, और लोग जिसे फ़ायरवॉल समझते हैं वह “an arbitrary artifact” क्यों है, 2007। RFC 4941, RFC 7217 और RFC 8981 — अस्थायी और अपारदर्शी पते, इसीलिए किसी डिवाइस का IPv6 पता स्थिर पहचानकर्ता नहीं है। RFC 801 — Jon Postel का NCP/TCP ट्रांज़िशन प्लान, नवंबर 1981, जिसने 1 जनवरी 1983 का flag day तय किया। RFC 1883 — मूल IPv6 स्पेसिफ़िकेशन, दिसंबर 1995। RFC 6333 — DS-Lite, 2011। RFC 6056 — सोर्स पोर्ट रैंडमाइज़ेशन, वह बचाव जिसे CGN कमज़ोर करता है, 2011। RFC 6269 — Issues with IP Address Sharing, जून 2011। CGN क्या तोड़ता है इसकी IETF की अपनी सूची, जिसमें abuse लॉगिंग, penalty box, ब्लैकलिस्टिंग, पोर्ट रैंडमाइज़ेशन और traceability शामिल हैं। RFC 791 और RFC 8200 — दोनों हेडर फ़ॉर्मैट, और IPv6 ने checksum, बदलती लंबाई और रास्ते में fragmentation क्यों छोड़ दिए। RFC 6583 — एक /64 पर Neighbour Discovery cache का भर जाना, और forwarding-plane बनाम control-plane का बँटवारा जो तय करता है कि राउटर का CPU किसमें खर्च होता है। RFC 6177 — किसी end site को कितना एड्रेस स्पेस मिलना चाहिए, 2011। RFC 3177 के सबके लिए /48 को रद्द करता है, अकेले /64 को खारिज करता है, और असली आँकड़ा operational community को सौंपता है। RIPE-690 — उस सवाल का यूरोपीय ऑपरेटरों का अपना जवाब, अक्टूबर 2017: end user को /48 या /56, /64 कभी नहीं। RFC 6302 — सोर्स पोर्ट, टाइमस्टैम्प और प्रोटोकॉल लॉग करो, 2011। RFC 6598 — shared address space, 2012। RFC 6877 — 464XLAT, 2013। RFC 6888 — carrier-grade NAT की शर्तें, 2013। RFC 7021 — एप्लिकेशनों पर carrier-grade NAT का असर, 2013। RFC 7422 — CGN लॉगिंग घटाने के लिए deterministic मैपिंग, 2014। RFC 7597 और RFC 7599 — MAP-E और MAP-T, 2015। World IPv6 Launch, 6 जून 2012। Hurricane Electric\u0026rsquo;s free tunnel broker — जहाँ से हममें से बहुतों को IPv6 मिला जबकि हमारे अपने ISPs के पास नहीं था। कानून और नीति।\nCyber Security and Resilience (Network and Information Systems) Bill 2024-26 — उस बिल पर House of Commons Library की ब्रीफ़िंग जो managed service providers को NIS Regulations के अंदर लाएगा। Counter-Terrorism and Security Act 2015, section 21 — प्रासंगिक इंटरनेट डेटा का रिटेंशन, और उसके explanatory notes। Europol, October 2017 — carrier-grade NAT खत्म करने की कानून लागू करने वाली एजेंसियों की माँग, 90% मोबाइल और 50% फ़िक्स्ड के आँकड़ों के साथ। OMB memorandum M-21-07 — अमेरिकी संघीय IPv6-only अनिवार्यता, नवंबर 2020। Online Safety Act 2023। Europol EC3, Carrier Grade NAT and crime attribution online — RIPE 74 में Gregory Mounier की प्रेज़ेंटेशन, EU की कानून लागू करने वाली एजेंसियों के अगस्त 2016 के सर्वे, केस उदाहरणों, और बेल्जियन आचार संहिता और उसके नतीजों के साथ। NCMEC CyberTipline data — 2025 की रिपोर्टों की संख्या और रेफ़रल। A Multi-perspective Analysis of Carrier-Grade NAT Deployment, ACM IMC 2016 — मोबाइल और फ़िक्स्ड प्रोवाइडरों के CGN इस्तेमाल का स्वतंत्र माप। RIPE NCC charging scheme 2026 — हर LIR अकाउंट EUR 1,800, फ़्लैट। वेंडर, उनके अपने शब्दों में।\nAkamai, June 2022 — dual-stack डिफ़ॉल्ट है और ग्राहकों को उससे opt out करना पड़ता है। AWS, 2023 — पब्लिक IPv4 का शुल्क, और क्यों। रिपोर्टिंग और रिकॉर्ड।\nSky\u0026rsquo;s own write-up on RIPE Labs — पचास लाख यूज़र्स को कैसे ले जाया गया। ISPreview, September 2016 — Sky का रोलआउट पूरा करना। CircleID, September 2016 — Jim Bound IPv6 Award। ISPreview, December 2012 — 6UK का खुद को बंद करना। ISPreview altnet IPv6 and CGNAT survey — अप्रैल 2024, मार्च 2025 तक अपडेट। ISPreview on Plusnet\u0026rsquo;s IPv6 trial, नवंबर 2023 — 2011 का ट्रायल, चूका हुआ 2020 का लॉन्च, और यह बात कि BT और Plusnet लगभग एक जैसे राउटर देते हैं। A community-maintained tracker of UK mobile networks and IPv6 — आधिकारिक नहीं, यूज़र्स की रिपोर्ट पर आधारित, और इसका स्रोत कि आज कौन-से मोबाइल नेटवर्क IPv6 देते हैं। havevirginmediaenabledipv6yet.co.uk — Virgin Media की टाइमलाइन, 2010 से अब तक। Internet Society, September 2016 — Sky अपने बेस के 90% पर, हर सब्सक्राइबर को एक /56। Internet Society, September 2016 — 1983 के NCP से TCP/IP माइग्रेशन का Ron Broersma का ब्योरा, 256-होस्ट की सीमा और डेडलाइन चूकने वालों के साथ क्या हुआ, समेत। The Register, January 2013 — flag day के तीस साल बाद, और वे पिन जो लोगों ने बाद में लगाए। UK IPv6 Council। ","permalink":"https://blogs.damiendye.uk/hi/networking/we-never-ran-out-of-addresses/","summary":"IPv6 लगभग बीस साल से पूरा, मुफ़्त और हर ऑपरेटिंग सिस्टम में डिफ़ॉल्ट रूप से चालू है। UK का जवाब था carrier-grade NAT, लॉगिंग का एक कानून, और वह पता वापस देने के लिए £5 महीना जो पहले आपके पास था ही। मैंने ग्लोबल रूटिंग टेबल में हर UK नेटवर्क गिना ताकि पता चले कि असल में किसने IPv6 चालू किया है — 1,200 ने नहीं किया, और उनमें से 463 ऐसे एड्रेस स्पेस पर बैठे हैं जो उन्होंने माँगा था और कभी इस्तेमाल नहीं किया।","title":"पते कभी ख़त्म नहीं हुए। मेहनत ख़त्म हो गई।"},{"content":"पहले ही बता दूँ: मैं croit के लिए काम करता हूँ, जो Ceph बेचती है और नीचे की तालिकाओं में आती है। मैंने कोशिश की है कि अपने बारे में भी उतना ही सख़्त रहूँ जितना बाकी सबके बारे में। हर आँकड़ा सार्वजनिक git हिस्ट्री से, Ceph के अपने इन-ट्री रिकॉर्ड से, या किसी नामित सार्वजनिक बयान से आता है। सब दोहराया जा सकता है, और सब अंत में संदर्भों में दिया है।\nCeph बहुत सारी ऐसी मशीनों को थामे हुए है जिनके बारे में कोई सोचता नहीं। Proxmox क्लस्टर, OpenStack, Kubernetes, राष्ट्रीय रिसर्च लैब, बैंक, टेलीकॉम कंपनियाँ, पार्टिकल एक्सेलरेटर। बीस साल बाद भी, जब किसी को साधारण हार्डवेयर से बने एक क्लस्टर से ब्लॉक, फ़ाइल और ऑब्जेक्ट स्टोरेज चाहिए, तो पहला जवाब यही है।\nतो इसे लिखता कौन है, सँभालता कौन है, और चलाता कौन है?\n“मेलिंग लिस्ट पर कौन है” या “Cephalocon में किसने बोला” नहीं। मैंने ceph/ceph क्लोन किया, 2026-08-27 तक के दस साल में लिखा गया हर नॉन-मर्ज कमिट लिया, और Ceph के अपने .organizationmap और सुधारों के एक दर्ज सेट की मदद से लेखकों को कंपनियों से जोड़ा। फिर Ceph की इन-ट्री गवर्नेंस फ़ाइल ली और Steering Committee के सभी 38 सदस्यों को उनके अपने प्रकाशित पते में दिख रही कंपनी तक खोजा। फिर यह ढूँढा कि कौन सार्वजनिक रूप से कहता है कि वह इसे चलाता है।\nकुल मिलाकर 478 संगठनों के 1,718 लोगों के 69,613 कमिट। तस्वीर मेरी उम्मीद से बेहतर निकली, और वह नहीं जो मैं लिखने निकला था।\nदशक रैंक संगठन कमिट हिस्सा 1 Red Hat 42,354 60.8% 2 SUSE 6,191 8.9% 3 IBM 4,308 6.2% 4 Intel 2,066 3.0% 5 ZTE 1,176 1.7% 6 QiAnXin 900 1.3% 7 Ceph Foundation 691 1.0% 8 Mirantis 566 0.8% 9 IONOS 498 0.7% 10 China Mobile 397 0.6% 11 Proxmox 254 0.4% 12 croit 242 0.3% 13 Cloudbase Solutions 239 0.3% 14 Bloomberg 231 0.3% 15 XSKY 225 0.3% - Clyso 181, Huawei 159, Inspur 155, Cafe Bazaar 130, CERN 121, SK Telecom 120, UMCloud 106, Deutsche Telekom 105, EasyStack 103, ISCAS 99, Tencent 83, और 460 संगठन और - पते में कोई कंपनी नहीं दिखती 6,295 9.0% पंक्ति 1 और 3 एक ही टीम हैं। 4 अक्टूबर 2022 को Red Hat और IBM ने घोषणा की कि Red Hat की पूरी Ceph टीम IBM में जा रही है, और IBM ने Red Hat की Foundation स्पॉन्सरशिप ले ली और अपस्ट्रीम टेस्ट लैब का खर्च उठाने में हाथ बँटाया। लोग नहीं बदले; उनके ईमेल पते चार साल बाद भी एक-एक इंजीनियर करके बदल रहे हैं।\nदोनों को जोड़िए: 46,662 कमिट। दशक का 67.0%।\nकिसी और बात से पहले इस पर ठहरिए, क्योंकि यही वह सौदा है जिसकी वजह से Ceph मौजूद है। एक कंपनी ने दर्जनों इंजीनियरों को डिस्ट्रीब्यूटेड स्टोरेज बनाने और सँभालने के पैसे दिए, जिसे वह फिर मुफ़्त दे देती है। दस साल तक, दो अधिग्रहणों और एक पैरेंट कंपनी के बदलने के बीच। किसी ने उन्हें मजबूर नहीं किया।\nपिछले तीन साल रैंक संगठन कमिट हिस्सा 1 Red Hat 7,273 45.0% 2 IBM 3,818 23.6% 3 QiAnXin 597 3.7% 4 Ceph Foundation 526 3.3% 5 IONOS 498 3.1% 6 Intel 279 1.7% 7 Proxmox 249 1.5% 8 Bloomberg 220 1.4% 9 croit 157 1.0% 10 Clyso 153 0.9% 11 Cafe Bazaar 118 0.7% 12 ISCAS (Institute of Software, Chinese Academy of Sciences) 99 0.6% - पते में कोई कंपनी नहीं दिखती 2,008 12.4% 16,160 कमिट। Red Hat और IBM मिलाकर: 11,091, यानी 68.6%।\nCeph में एक कंपनी का हिस्सा, दस साल में और तीन साल में हिस्सा नहीं हिलता। उसके अंदर जो है वह हिलता है। 2026-08-27 तक दस साल 69,613 कमिट Red Hat\u0026#160;\u0026#160;60.8% IBM 6.2% SUSE 8.9% बाकी सब\u0026#160;\u0026#160;24.1% Red Hat + IBM: 46,662 कमिट, 67.0% पिछले तीन साल 16,160 कमिट Red Hat\u0026#160;\u0026#160;45.0% IBM\u0026#160;\u0026#160;23.6% SUSE: 13 बाकी सब\u0026#160;\u0026#160;31.4% Red Hat + IBM: 11,091 कमिट, 68.6% SUSE दशक का दूसरा सबसे बड़ा योगदानकर्ता था। पिछले तीन साल में इसने 13 कमिट लिखे, और 2025 और 2026 में एक भी नहीं। एक कंपनी का हिस्सा दशक और हाल की अवधि के बीच मुश्किल से हिलता है: 67.0% बनाम 68.6%। जो बदलता है वह उसके आसपास का सब कुछ है। वह मज़बूती जिसकी कोई बात नहीं करता यह वह हिस्सा है जिसकी मुझे उम्मीद नहीं थी, और पूरी कवायद की सबसे अच्छी बात यही है।\nCeph उन दोनों घटनाओं से पहले ही बच निकला है जिनसे यह डेटा आपको डरने को कहेगा, और उसने पलक तक नहीं झपकाई।\nइसके निर्माता Sage Weil ने दशक में 7,517 कमिट लिखे, Red Hat, SUSE और IBM को छोड़कर किसी भी संगठन से ज़्यादा। अकेले 2017 में उन्होंने 2,184 कमिट लिखे, पूरे प्रोजेक्ट का 21.5% अकेले। 17 साल बाद वे अक्टूबर 2021 में पीछे हट गए; उनका आख़िरी कमिट 2022-01-20 का है।\nदशक के दूसरे सबसे बड़े योगदानकर्ता SUSE ने 6,191 कमिट लिखे और एक साल में 1,839 के शिखर पर पहुँचा। फिर उसने Rancher के Longhorn के लिए SUSE Enterprise Storage बंद कर दिया और धीरे-धीरे हट गया: 2021 में 463, 2022 में 110, 2023 में 14, 2024 में 10, उसके बाद कुछ नहीं।\nदोनों एक ही पाँच साल के अंदर। अगर इतना केंद्रित प्रोजेक्ट कमज़ोर होता, तो वह तभी टूटता।\nनहीं टूटा। इस साल कमिट की दर 14.6 प्रति दिन है, पिछले साल 14.8। सपाट। रिलीज़ आती रहीं। गवर्नेंस को एक Executive Council और 38 लोगों की Steering Committee के रूप में फिर से बनाया गया, और वह टिकी रही।\nसाल कुल कमिट Red Hat + IBM हिस्सा बाकी सब 2016 10,286 5,834 56.7% 4,452 2017 10,158 6,942 68.3% 3,216 2018 8,099 5,265 65.0% 2,834 2019 9,000 5,934 65.9% 3,066 2020 8,361 5,230 62.5% 3,131 2021 7,381 4,517 61.1% 2,864 2022 4,731 2,937 62.0% 1,794 2023 4,634 3,315 71.5% 1,319 2024 5,410 3,571 66.0% 1,839 2025 5,389 3,730 69.2% 1,659 2026 3,495 2,329 66.6% 1,166 (2026 के आँकड़े 27 अगस्त तक हैं, लगभग आठ महीने।)\nएक वेंडर से 57 से 72 प्रतिशत के बीच, दस साल तक हर साल। मात्रा 2016 के शिखर से कम है, और यही होता है जब कोई प्रोजेक्ट अपनी नींव दोबारा बनाना बंद करके उसकी देखभाल शुरू करता है। पिछले तीन साल सपाट हैं, या ज़रा ऊपर।\nसाल-दर-साल Ceph कमिट: हिस्सा टिका रहता है, कुल आधा होता है हर साल के कमिट, और उन्हें किसने लिखा Ceph main branch, non-merge कमिट, author date के हिसाब से 0 3k 6k 9k 12k 2016 57% 2017 68% 2018 65% 2019 66% 2020 63% 2021 61% 2022 62% 2023 72% 2024 66% 2025 69% 2026* 67% Red Hat + IBM: अक्टूबर 2022 से एक टीम बाकी सब SUSE का शिखर: 1,839 Sage Weil का जाना SUSE: 2022 में 110, 2023 में 14, 2026 तक 0 * 2026, 27 अगस्त तक है; 14.6 कमिट की मौजूदा रोज़ाना दर पर दिखाया गया, 2025 के 14.8 के सामने। साल-दर-साल कमिट, Red Hat/IBM टीम और बाकी सबके बीच बँटे हुए। चिह्नित: SUSE का शिखर और विदाई, और Sage Weil का जाना। Ceph ने दोनों को बिना रफ़्तार बदले झेल लिया। Ceph उसे बनाने वाली कंपनियों से ज़्यादा टिका यही दशक की असली कहानी है, और तीन साल की खिड़की में यह आपको दिखेगी ही नहीं।\nपंक्ति 2, 5, 8, 10, 13 और 15 देखिए। SUSE, ZTE, Mirantis, China Mobile, Cloudbase Solutions, XSKY, और नीचे Inspur, EasyStack, UMCloud, Kylin, UnitedStack, Xtao, Istuary और भी। इन सबके मिलाकर 10,000 से कहीं ज़्यादा कमिट। लगभग सब रुक चुका है।\nSUSE: 6,191 कमिट, 2020 में शिखर, अब शून्य। ZTE: 1,176 कमिट, अकेले 2016 में 1,071, आख़िरी कमिट 2020। Mirantis: 566 कमिट, जा चुकी। XSKY, EasyStack, Inspur, UMCloud, Kylin, UnitedStack: OpenStack दौर की स्टोरेज कंपनियों की टोली, सब समेट चुकीं। इनमें से हर एक कंपनी ने Ceph पर अपना प्रोडक्ट दाँव पर लगाया था। प्रोडक्ट बंद हो गए या दिशा बदल ली। और Ceph अब भी यहाँ है, उसी रफ़्तार से शिप कर रहा है, उनका कोड अब भी ट्री में है और कोई और उसकी देखभाल कर रहा है।\nसबसे अच्छी मिसाल डैशबोर्ड है। दशक भर में src/pybind/mgr/dashboard ऐसा दिखता है:\nsrc/pybind/mgr/dashboard, दस साल कमिट हिस्सा SUSE 1,408 36.6% Red Hat 1,177 30.6% IBM 734 19.1% कोई कंपनी नहीं दिखती 478 12.4% Ceph डैशबोर्ड ज़्यादातर SUSE का काम था। फिर SUSE ने प्रोजेक्ट पूरी तरह छोड़ दिया। पिछले तीन साल में उसी डायरेक्टरी में 57.5% IBM और 30.3% Red Hat है, और डैशबोर्ड अब भी शिप हो रहा है और उसमें फ़ीचर जुड़ते जा रहे हैं।\nयह अपस्ट्रीम-फ़र्स्ट डेवलपमेंट ठीक वही काम कर रहा है जिसके लिए वह बना है। एक वेंडर ने बहुत कुछ डाला, वेंडर चला गया, और यूज़र्स के पास सॉफ़्टवेयर रह गया। अगर SUSE ने वह डैशबोर्ड ऊपर से जोड़ी गई एक बंद परत के रूप में बनाया होता, जैसा बहुत से स्टोरेज वेंडर करते, तो वह प्रोडक्ट लाइन के साथ ही मर जाता। वह अपस्ट्रीम गया, इसलिए बच गया।\nअगला दशक कई कंपनियाँ एक साथ बना रही हैं Crimson, OSD का शुरू से दोबारा लिखा गया रूप है। OSD वह daemon है जिसके पास आपकी डिस्क होती हैं। यह Seastar framework पर बना है और उस thread-per-core मॉडल को निशाना बनाता है जो आज के NVMe माँगते हैं। Ceph के अगले दस साल पर यही सबसे बड़ा दाँव है। दशक भर में:\nsrc/crimson, दस साल कमिट हिस्सा Red Hat 3,038 52.1% Intel 1,269 21.8% QiAnXin 824 14.1% कोई कंपनी नहीं दिखती 450 7.7% और पिछले तीन साल में Red Hat और IBM मिलकर इसका अल्पमत हैं, 45.4%, जबकि QiAnXin 28.4% पर और Intel 13.4% पर है।\nCeph में इस वक़्त बन रही सबसे अहम चीज़ सच में कई कंपनियों का काम है। यह किसी एक वेंडर का roadmap नहीं जिसमें कुछ योगदानकर्ता ऊपर से जोड़ दिए गए हों। तीन संस्थाएँ एक ही subsystem पर, खुले में, सालों से भारी इंजीनियरिंग कर रही हैं।\nQiAnXin पर एक बात कहनी चाहिए, क्योंकि स्टोरेज वाले ज़्यादातर लोग यह नाम नहीं जानते। यह एक चीनी enterprise cybersecurity कंपनी है, जो 2014 में Qihoo 360 की subsidiary के तौर पर शुरू हुई और लगभग 2016 में अलग हुई। Qihoo 360 ने अप्रैल 2019 में अपनी बची 22.6% हिस्सेदारी China Electronics Corporation से जुड़ी कंपनियों को बेच दी, और 2020 के IPO दस्तावेज़ तक CEC के पास 38.3% था। कंपनी का इतिहास git log में पढ़ा जा सकता है: उनके मुख्य योगदानकर्ता Xuehan Xu के 2017 और 2018 में @360.cn के तहत कमिट हैं और 2021 से @qianxin.com के तहत। एक security कंपनी, जिसके पास बेचने को कोई स्टोरेज प्रोडक्ट नहीं, ने Ceph के भविष्य वाले OSD में 900 कमिट डाले हैं। खुला प्रोजेक्ट ठीक वैसे ही काम कर रहा है जैसा वह कहता है।\nCeph का रखरखाव कौन करता है, और उन्हें पैसा कौन देता है कोड लिखना एक बात है, चाबियाँ रखना दूसरी। Ceph अपना governance repository में ही रखता है, doc/governance.rst में, और Ceph Steering Committee वहाँ नाम और ईमेल के साथ दर्ज है। इससे maintainer और employer वाला सवाल अंदाज़े की जगह primary source से हल हो जाता है।\nअड़तीस सीटें, हर सदस्य के अपने दिए पते से employer तक:\nEmployer सीटें Red Hat 16 IBM 9 Clyso 3 निजी पता (Anthony D\u0026rsquo;Atri, Myoungwon Oh) 2 croit, Igor Fedotov 1 Bloomberg, Joseph Mundackal 1 Intel, Yingxin Cheng 1 Ceph Foundation, Zac Dover 1 XSKY, Haomai Wang 1 ZTE, Xie Xingguo 1 Ubiquiti, Yehuda Sadeh 1 11:11 Systems, David Orman 1 Red Hat और IBM के पास 38 में से 25 सीटें हैं, यानी 65.8%। सामने दशक के 67.0% कमिट और पिछले तीन साल के 68.6%। Governance body लगभग हूबहू कोड का अक्स है, और सेहतमंद तरीका यही है: जो लोग काम करते हैं उन्हीं की बात चलती है, इसलिए किसी के पास ऐसा veto नहीं जो उसने कमाया न हो।\nEmployer के हिसाब से Ceph Steering Committee की सीटें: 38 में से 25 एक कंपनी की Ceph का रखरखाव कौन करता है, पैसा कौन देता है Ceph Steering Committee की 38 सीटें, doc/governance.rst में हर सदस्य के दिए पते से Red Hat IBM Clyso निजी पता एक-एक सीट 16 9 3 2 8 croit, Bloomberg, Intel, Ceph Foundation, XSKY, ZTE, Ubiquiti, 11:11 Systems Red Hat + IBM: 38 में से 25 सीटें, 65.8% सामने दशक के 67.0% कमिट और पिछले तीन साल के 68.6%। कमेटी कोड का अक्स है। XSKY और ZTE के पास अब भी सीटें हैं। 2020 के बाद दोनों ने Ceph में एक लाइन कमिट नहीं की। 38 में से पाँच का 2021 के बाद कोई कमिट नहीं, या कभी नहीं। Steering और कोड लिखना एक काम नहीं, पर उनमें से दो सीटें उन कंपनियों की हैं जो प्रोजेक्ट पूरी तरह छोड़ चुकी हैं। Ceph Steering Committee की 38 सीटें, हर सदस्य के दिए पते के employer के हिसाब से, doc/governance.rst से। कमेटी की बनावट कमिट के बँटवारे के काफ़ी करीब चलती है। दो बातें अलग से निकालने लायक हैं, और दोनों अच्छी बात कहती हैं।\nXSKY और ZTE के पास अब भी सीटें हैं। दोनों में से किसी कंपनी ने 2020 के बाद एक लाइन कमिट नहीं की। Haomai Wang का आख़िरी कमिट 2020-03-18 का है, Xie Xingguo का 2020-07-24 का, दशक में 750 कमिट के बाद। Ceph ने उन्हें बाहर नहीं किया। जो प्रोजेक्ट BlueStore और OSD के बड़े हिस्से बनाने वालों की सीट उनके employer के चले जाने के सालों बाद भी बचाकर रखता है, वह योगदानकर्ताओं को इस्तेमाल करके फेंकने वाली चीज़ नहीं मानता।\nYehuda Sadeh कमेटी में @ui.com पते के साथ बैठे हैं। उन्होंने RADOS Gateway लिखा, यानी RADOS पर S3 और Swift का दरवाज़ा। RADOS, Reliable Autonomic Distributed Object Store, वह परत है जिस पर Ceph का बाकी सब टिका है। शुरुआत 2008 में DreamHost में हुई, फिर Inktank, Red Hat और IBM: अकेले इस दशक में 972 कमिट और उससे पहले हज़ारों। जुलाई 2025 में भी वे cephx crypto कोड लिख रहे थे। फिर जून 2026 में उन्होंने ठीक एक कमिट किया, doc: governance/csc: update email address, और अपनी एंट्री Ubiquiti कर दी। Employer बदला और सीट रखी। यहाँ आपकी साख आपके साथ चलती है, और खुले में काम करने की यह अच्छी बातों में से एक है।\nComponent leads Component leads हर subsystem को रोज़ाना सँभालते हैं:\nComponent यह क्या है Lead Employer Cephadm क्लस्टर deployment और प्रबंधन Adam King Red Hat CephFS POSIX file system Venky Shankar Red Hat Crimson अगली पीढ़ी का OSD Matan Breizman Red Hat Dashboard वेब management इंटरफ़ेस Afreen Misbah IBM RADOS object store जिस पर बाकी सब टिका है Radosław Zarzyński Red Hat RBD RADOS Block Device, वर्चुअल डिस्क Ilya Dryomov Red Hat RGW RADOS Gateway, S3 और Swift परत Adam Emerson, Eric Ivancich Red Hat NVMe-oF NVMe over Fabrics gateway Aviv Caro IBM Seastore Crimson का storage backend Yingxin Cheng Intel दस नामित leads, नौ Red Hat या IBM में, और Seastore, यानी Crimson का storage backend, Intel से चलाया जाता है। उनके ऊपर तीन लोगों की Executive Council है, जो Sage Weil के जाने पर बनी: Dan van der Ster (Clyso), Neha Ojha (Red Hat), Patrick Donnelly (IBM)। Clyso के पास दशक के 0.3% कमिट पर सबसे ऊँची governance body का एक तिहाई है। Council समझ और साख के आधार पर बनी, गिनती के आधार पर नहीं।\nMaintainers बदले, कोड रहा Ceph किसी एक कंपनी का प्रोडक्ट नहीं बल्कि सच में साझी चीज़ है, इसका सबसे मज़बूत तर्क यह है कि उसके maintainers के नौकरी बदलने पर क्या होता है। इनमें से हर एक repository के पतों से खोजा जा सकता है:\nMaintainer (मौजूदा employer) करियर, git log के अनुसार आख़िरी कमिट Igor Fedotov (croit), BlueStore Mirantis (2015–17) → SUSE (2017–24) → croit (2021–) 2026-08-24 Kefu Chai (Proxmox), core, build Red Hat (2015–22, 4,770 कमिट) → XSKY → Proxmox (2025–) 2026-08-18 Radosław Zarzyński (Red Hat), RADOS lead Mirantis (2015–17) → Red Hat (2017–) 2026-06-16 Dan van der Ster (Clyso), Executive Council CERN (2013–22) → Clyso (2023–) 2026-03-18 Zac Dover (Ceph Foundation), documentation स्वतंत्र → Clyso → Ceph Foundation 2026-07-23 Yehuda Sadeh (Ubiquiti), RGW के लेखक DreamHost → Inktank → Red Hat → IBM → Ubiquiti 2026-06-08 Mark Nelson (Clyso), performance DreamHost → Inktank → Red Hat → Clyso 2024-04-16 Xuehan Xu (QiAnXin), Crimson Qihoo 360 (2017–18) → QiAnXin (2021–) 2026 हर एक के तीन employer, कुछ के चार, और हर बदलाव में काम चलता रहा। Igor Fedotov अपने दो employers की Ceph रणनीतियों से ज़्यादा टिक चुके हैं और अब भी उस engine का रखरखाव करते हैं जो आपके bytes डिस्क पर रखता है। तो “अगर वेंडर चला जाए तो?” का ईमानदार जवाब यह है: इंजीनियर काम करते रहते हैं।\nCeph असल में कौन चलाता है योगदान आधी कहानी है। ये वे हैं जो खुलकर कहते हैं कि वे Ceph चलाते हैं, अपने ही छापे हुए आँकड़ों के साथ।\nसंस्था सार्वजनिक रूप से बताया गया deployment CERN, European Organization for Nuclear Research 19 production क्लस्टर, लगभग 73 PB raw, और एक नए datacentre में 5 और; CERN के IT cloud के नीचे का स्टोरेज आधार Bloomberg सैकड़ों TB से 8 PB से ज़्यादा तक के object stores; एक online क्लस्टर में 6 PB raw क्षमता live जोड़ी, 50% बढ़ोतरी, एक घंटे से कम में Wikimedia Foundation पाँच production Ceph क्लस्टर: Cloud VPS के लिए block, multisite RGW से S3, और Airflow, Dumps और ML-Lab के लिए CephFS DigitalOcean Ceph RBD के ज़रिए इसकी Block Storage सेवा चलाता है, हर region में “hundreds of enterprise-class SSDs” और servers व racks के पार 3× replication OVHcloud अपने On-Prem Cloud Platform में “Persistent storage for virtual machines is ensured by Ceph RADOS Block Device” Proxmox Proxmox VE में Ceph को built-in hyperconverged स्टोरेज विकल्प के रूप में देता है CERN को करीब से देखना चाहिए, क्योंकि किसी ने भी छापा हुआ यह सबसे विस्तृत सार्वजनिक ब्योरा है। Enrico Bocchi की सितंबर 2024 की CERN IT talk से:\nCERN Ceph, application के हिसाब से Raw आकार क्लस्टर Blocks: OpenStack Cinder/Glance, HDD 3× replica 25.1 PB 5 Blocks: Flash, EC 4+2 976 TB 2 File system: OpenStack Manila, K8s/OKD, HPC, HDD 3× replica 13.4 PB 5 File system: Flash, 3× replica 1.7 PB 4 Objects: S3, Swift, Backups, HDD EC 4+2 28.2 PB 2 Objects: multi-site, EC 4+2 3.6 PB 1 EC 4+2 यानी erasure coding, चार data टुकड़े और दो parity। HPC यानी high-performance computing, K8s यानी Kubernetes और OKD उसका upstream distribution। आँकड़े raw क्षमता के हैं, replication और coding के खर्च से पहले।\nउन्नीस production क्लस्टर, इस घोषित सिद्धांत पर चलाए गए: “don\u0026rsquo;t put all your eggs in the same basket”, और पाँच और नए datacentre में जा रहे हैं। सेवा का इतिहास इस सॉफ़्टवेयर का चुपचाप विज्ञापन है: 2013 में 300 TB proof of concept, उसी दिसंबर तक RBD के लिए 3 PB production में, 2016 में बिना downtime 3 PB से 6 PB तक विस्तार, 2018 में S3 और CephFS production में, 2022 में एक पूरा CephFS क्लस्टर बिना downtime के भौतिक रूप से दूसरी जगह ले जाया गया, 2023 में kernel RBD production में।\nCERN में यह क्या ढोता है, वही असली बात है: GitLab, OpenStack, OpenShift, Kubernetes, Harbor, Jenkins, Grafana, Kafka, OpenSearch, InfluxDB, HTCondor, Slurm, Jupyter, Spark, Zenodo, Indico, और NFS, AFS और CVMFS का virtualisation। वहाँ Ceph कोई किनारे का प्रयोग नहीं है। यह वह फ़र्श है जिस पर बाकी इमारत खड़ी है।\nऔर पूरे समुदाय का आँकड़ा, Linux Foundation की अपनी Squid release घोषणा से: 3,000 से ज़्यादा Ceph क्लस्टर में 1 exabyte डेटा।\nवह exabyte न्यूनतम है, कुल नहीं यहाँ रुकना चाहिए, क्योंकि यह Ceph के हर अपनाने वाले आँकड़े को पढ़ने का तरीका बदल देता है।\nCeph की telemetry opt-in है। आपकी गिनती तभी होती है जब कोई ceph telemetry on --license sharing-1-0 चलाए। जिसने कभी नहीं चलाया वह दिखता ही नहीं, और असल में ज़्यादातर लोग ऐसे ही हैं, क्योंकि यह default नहीं है और कुछ भी आपको इसकी याद नहीं दिलाता।\nअब Proxmox जोड़िए। Proxmox VE Ceph को अपने hyperconverged स्टोरेज विकल्प के रूप में देता है: तीन nodes, web UI में कुछ clicks, अंदर pveceph, और आपके पास Ceph क्लस्टर है। बहुत बड़ी संख्या में लोग production में Ceph चला रहे हैं बिना कभी खुद को Ceph यूज़र समझे। वे Proxmox यूज़र हैं। उन्होंने कभी mailing list नहीं जॉइन की, वे कभी testimonial नहीं लिखेंगे, उन्होंने telemetry चालू नहीं की, और वे ऊपर की किसी तालिका में नहीं हैं।\nउस दायरे की हर छोटी hosting कंपनी, managed service provider, यूनिवर्सिटी विभाग, चुपचाप production में चला गया homelab और तीन nodes वाला office क्लस्टर, एक असली Ceph deployment है जिसे इस पोस्ट का कोई आँकड़ा नहीं गिनता। यही बात उन पर भी लागू है जो Kubernetes पर Rook के ज़रिए Ceph पाते हैं, या किसी वेंडर appliance के अंदर जो कभी नहीं बताता कि ढक्कन के नीचे क्या है।\nतो 3,000 क्लस्टर में 1 EB उन क्लस्टर का आँकड़ा है जिन्होंने हाथ उठाया। असली installed base इससे काफ़ी बड़ा है और कोई नहीं जानता कितना। infrastructure सॉफ़्टवेयर के लिए यह अजीब हालत है, क्योंकि आम तौर पर वेंडर जानता है, आपको licence ख़रीदना पड़ा था। और यह सीधे इस बात का नतीजा है कि यह चीज़ मुफ़्त है।\n478 संस्थाओं ने कोड डाला है कमिट log इस बात की सूची भी है कि बड़े पैमाने पर Ceph कौन चलाता है, क्योंकि जो कंपनी patch भेजती है वह लगभग हमेशा इसे चला भी रही होती है। दशक भर में 478 अलग संस्थागत ईमेल domains दिखते हैं, जिनमें से 140 के पाँच या ज़्यादा कमिट हैं।\nनाम, समूहों में, सिर्फ़ git log से:\nChip, डिस्क और hardware बनाने वाले: Intel, Samsung, Seagate, SanDisk, Western Digital, Quantum, Mellanox, Lenovo, Fujitsu, Hitachi, Nokia, Arm, Linaro, HiSilicon, Synology, 45Drives Clouds और hosts: DigitalOcean, OVH, IONOS, Akamai, Linode, Hetzner, Binero, City Network, iland, 11:11 Systems, Vexxhost, StackHPC, Canonical, Deutsche Telekom, China Telecom, China Unicom, China Mobile, Chunghwa Telecom Internet और enterprise यूज़र: Bloomberg, eBay, GoDaddy, Flipkart, Wikimedia, Naver, LINE, Kakao, SK Telecom, Alibaba, Tencent, Baidu, ByteDance, Kuaishou, UnionPay, SenseTime, Sangfor, Micro Focus, MITRE, Igalia, Walmart Labs स्टोरेज वेंडर और integrators: SUSE, Mirantis, XSKY, EasyStack, Inspur, UMCloud, Kylin, UnitedStack, H3C, Xtao, Eisoo, Cloudin, Istuary, ProphetStor, SoftIron, Bigtera, Cloudbase Solutions, Digiware, Bisect, 42on, croit, Clyso, Proxmox, DreamHost शोध और शिक्षा: CERN, Chinese Academy of Sciences का Institute of Software (ISCAS), Pennsylvania State University, Boston University, University of Michigan, Carnegie Mellon University, और Foundation के Associate सदस्य: Harvard का FAS Research Computing, Greek Research and Technology Network (GRNET), Monash University, South African Radio Astronomy Observatory (SARAO), Science and Technology Facilities Council (STFC), SWITCH, Stanford का SLAC, और UC Santa Cruz का Center for Research in Open Source Software (CROSS) इनमें से सब आज के नहीं हैं, और दशक देखने का मतलब यही है। इससे पूरा दायरा दिखता है कि किसने इस सॉफ़्टवेयर पर इतना भरोसा किया कि patch वापस भेजे, और वह फैलाव कितना चौड़ा रहा है।\nजो कहते हैं कि वे Ceph के साथ हैं, और वे क्या शिप करते हैं Foundation की tiered membership वह जगह है जहाँ कंपनियाँ समर्थन घोषित करती हैं। Tiers इंजीनियरिंग को नहीं मापते, और सबसे साफ़ मिसाल उन तीन Diamond सदस्यों से मिलती है जिनके बयान Linux Foundation की अपनी Ceph Squid release घोषणा में हैं।\nDiamond सदस्य उन्होंने सार्वजनिक रूप से क्या कहा कमिट, पिछले 3 साल IBM: Vincent Hsu, IBM Fellow, CTO \u0026amp; VP of IBM Storage “reinforce our trust in Ceph and our commitment to open source” 11,091 (Red Hat सहित) Bloomberg: Matthew Leonard, Head of Storage Engineering “Our Diamond Membership is a symbol of our commitment to the future of Ceph and its growing community” 220 45Drives: Doug Milburn, Co-founder and President “our unwavering commitment to open-source excellence” 0 IBM के बयान के पीछे प्रोजेक्ट के इतिहास की सबसे बड़ी इंजीनियरिंग प्रतिबद्धता है, और उससे भी ज़्यादा। Bloomberg के पीछे 220 कमिट, एक Steering Committee सीट, और 8 PB का production इंतज़ाम जिसके बारे में वे खुलकर बात करते हैं; किसी भी पैमाने पर गंभीर योगदान। 45Drives Ceph hardware appliances बनाता और बेचता है और साझा infrastructure के लिए पैसा देता है; यह भी असली योगदान है, बस कोड नहीं।\nसभी tiers की पूरी तस्वीर:\nसदस्य Tier कमिट, पिछले 3 साल IBM Diamond 11,091 (Red Hat सहित) Bloomberg Diamond 220 CLYSO Diamond 153 45Drives Diamond 0 Western Digital Platinum 0 42on Gold 1 croit Silver 157 DigitalOcean Silver 13 Canonical Silver 9 OVHcloud, Sony, OSNexus, CloudFerro Silver हर एक 0 और दूसरी दिशा में, शीर्ष सात योगदानकर्ताओं में से चार सदस्य हैं ही नहीं:\nयोगदानकर्ता कमिट सदस्य? QiAnXin 597 नहीं IONOS 498 नहीं Intel 279 अब नहीं Proxmox 249 नहीं Foundation tier बनाम कमिट: पैसे और कोड का आपस में संबंध नहीं वे क्या देते हैं, बनाम उन्होंने क्या लिखा Ceph Foundation tier बनाम main में कमिट, 2023-08-27 से 2026-08-27 200 400 600 कमिट DIAMOND IBM, Red Hat सहित 11,091 Bloomberg 220 CLYSO 153 45Drives बिल्कुल कुछ नहीं PLATINUM Western Digital बिल्कुल कुछ नहीं GOLD 42on 1 SILVER croit 157 DigitalOcean 13 Canonical 9 छह और Silver सदस्य बिल्कुल कुछ नहीं, छहों सदस्य नहीं QiAnXin 597 IONOS 498 Proxmox 249 Cafe Bazaar 118 बिना कुछ वाले छह Silver सदस्य: OVHcloud, Sony Interactive Entertainment, OSNexus, CloudFerro, Intelligent Systems, LongVan। शीर्ष tier के चार में से दो ने कुछ नहीं लिखा। Ceph के तीसरे और पाँचवें सबसे बड़े योगदानकर्ता सदस्य ही नहीं हैं। Foundation tier के सामने पिछले तीन साल के कमिट। Sponsorship और इंजीनियरिंग अलग-अलग योगदान हैं; tiers पहले को मापते हैं, दूसरे को नहीं। मैं इसे पाखंड नहीं पढ़ता, और चाहूँगा कि कोई और भी न पढ़े। Foundation का पैसा upstream test lab, हर pull request को रोकने वाले continuous integration, Cephalocon और community स्टाफ़ का खर्च उठाता है। ये वे चीज़ें हैं जिनके बिना Ceph का काम नहीं चलता, और Ceph appliances शिप करने वाले hardware वेंडर का इनके लिए पैसा देना सही है। Western Digital, DigitalOcean और OVHcloud सब ऐसे प्रोडक्ट बेचते हैं जो Ceph पर टिके हैं, और वे उस साझे ढाँचे में पैसा डालते हैं जो इसे चलाए रखता है। यह उचित सौदा है।\nव्यावहारिक सबक सीमित है: members page को इस सूची की तरह पढ़िए कि साझा infrastructure का पैसा कौन देता है, और commit log को इस तरह कि कोड कौन लिखता है। ये अलग सवाल हैं, जवाब अलग हैं, और दोनों जवाब काम के हैं।\nसंस्थापक, आठ साल बाद Foundation 12 नवंबर 2018 को शुरू हुई। सूची दो बार रिकॉर्ड पर है, Linux Foundation की घोषणा और wire copy, और दोनों बिल्कुल मेल खाती हैं: तेरह Premier सदस्य, दस General, आठ Associate।\nआज के members page से तुलना: तेरह Premier सदस्यों में से चार अब भी अपने नाम से दर्ज हैं (Canonical, DigitalOcean, OVHcloud, Western Digital), और IBM को Red Hat की सीट गिनें तो पाँच। दस General सदस्यों में से दो बचे हैं: croit और Intelligent Systems।\nऔर सभी आठ Associate सदस्य अब भी हैं। स्थापना की घोषणा में दिए उनके पूरे नाम:\nBoston University Information Services and Technology CERN, European Organization for Nuclear Research FAS Research Computing, Harvard University The Greek Research and Technology Network (GRNET) Monash University, Melbourne The South African Radio Astronomy Observatory (SARAO) The Science and Technology Facilities Council (STFC), UK Research and Innovation (UKRI) में The Center for Research in Open Source Software (CROSS), University of California, Santa Cruz में; यहीं Ceph सबसे पहले लिखा गया था, Sage Weil के PhD काम के रूप में, Scott Brandt, Ethan Miller, Darrell Long और Carlos Maltzahn के साथ; 2006 का मूल पेपर अब भी ceph.io पर है आठ में से आठ, आठ साल में।\nपैसा देने वाले सदस्य आते-जाते रहे। यूनिवर्सिटियाँ और शोध प्रयोगशालाएँ, जो बिना किसी खर्च के जुड़ती हैं, आठ साल से टिकी हैं और एक भी नहीं गई। यही लोग विज्ञान के लिए बड़े पैमाने पर Ceph चला रहे हैं, और एक ने भी साथ नहीं छोड़ा।\nQuincy का documentation अब भी लगभग 2022 वाली सदस्य सूची रखता है, जिससे बीच का पड़ाव मिलता है: उस snapshot के चौबीस commercial सदस्यों में से बारह तब से जा चुके हैं, ठीक आधे। उस पूरे दौर में Ceph की रफ़्तार नहीं बदली।\ncroit पर, क्योंकि यह मेरा employer है और बचे हुओं में से एक है। croit GmbH पहले ही दिन संस्थापक General सदस्य के रूप में जुड़ा और आठ साल बाद भी सदस्य है, जितना Intel, SUSE, ZTE, Arm या Samsung टिक पाए उससे लंबा। यह दशक के कमिट का 0.3% भी है। टिके रहना बनाना नहीं है, और मुझे पैसा देने वाली कंपनी के लिए मैं लंबी उम्र को योगदान बताकर पेश नहीं करने वाला।\nManual एक आदमी है, और Foundation उसका पैसा देती है दशक वाली तालिका की पंक्ति 7 “Ceph Foundation” है, 691 कमिट। यह लगभग एक ही आदमी है।\nZac Dover के दशक में 1,060 कमिट हैं, लगभग सब documentation। पिछले तीन साल में वे doc/ के सारे काम का 28.4% हैं, सबसे बड़े अकेले योगदानकर्ता, Red Hat और IBM दोनों से आगे। उनके पतों का इतिहास @gmail.com, फिर @clyso.com, फिर @proton.me है, जिसे Ceph के अपने रिकॉर्ड Ceph Foundation से जोड़ते हैं।\ndoc/, पिछले तीन साल कमिट हिस्सा Ceph Foundation 499 28.4% कोई कंपनी नहीं दिखती 383 21.8% Red Hat 379 21.5% IBM 333 18.9% doc/ अकेली डायरेक्टरी है जहाँ सबसे बड़ा अकेला योगदानकर्ता न Red Hat है न IBM, और यह दिखता है। Ceph का manual इस आकार के ज़्यादातर infrastructure सॉफ़्टवेयर से बेहतर है। ऐसे technical writer को पैसा देना जो किसी वेंडर को जवाब नहीं देता, Foundation का पैसे के साथ किया सबसे समझदार काम है।\nअकेले लोग अब भी फ़र्क डाल सकते हैं दशक के शीर्ष व्यक्ति, लेखक के नाम से समूहित:\nव्यक्ति दशक के कमिट Employer Sage Weil 7,517 Red Hat; निर्माता, 2022 में गए Kefu Chai 5,538 Red Hat → Proxmox Casey Bodley 2,472 Red Hat Patrick Donnelly 2,330 Red Hat → IBM Jason Dillaman 1,629 Red Hat; 2021 में गए Radosław Zarzyński 1,607 Mirantis → Red Hat Samuel Just 1,415 DreamHost → Inktank → Red Hat John Mulligan 1,300 Red Hat Yingxin Cheng 1,202 Intel Zac Dover 1,060 Ceph Foundation Yehuda Sadeh 972 Red Hat → IBM → Ubiquiti Alfredo Deza 930 Red Hat; 2019 में गए इक्कीस लोगों ने दशक के आधे कमिट लिखे; इक्यानवे ने 80%। बड़े C++ codebase के लिए यह सामान्य है, और इसी वजह से यहाँ अकेले लोग इतने मायने रखते हैं।\nदरवाज़ा खुला है, इसका सबसे साफ़ सबूत: पिछले तीन साल में पाँचवाँ स्थान IONOS का एक इंजीनियर है। Max Kellermann के 2024 से 498 कमिट हैं, जितने Intel, Proxmox, Bloomberg, croit या Clyso ने कंपनी के रूप में नहीं किए, src/mds, src/common, src/mon, src/tools, src/librbd, src/mgr और src/rgw में। उस दौर में वे CephFS metadata के सारे काम का 19.3% हैं, सिर्फ़ Red Hat के बाद।\nकिसी ने उन्हें नियुक्त नहीं किया। वे आए और चीज़ें ठीक करने लगे, और तीन साल बाद वे एक Fortune 50 कंपनी के चलाए प्रोजेक्ट के सबसे व्यस्त योगदानकर्ताओं में हैं। आप अब भी Ceph में आकर मायने रख सकते हैं।\nProxmox उसी सिक्के का दूसरा पहलू है: पिछले तीन साल में 249 कमिट, जिनमें से 241 Kefu Chai के, 30 सितंबर 2025 से। Proxmox एक अच्छा इंजीनियर रखकर ग्यारह महीने में शून्य से शीर्ष दस Ceph योगदानकर्ताओं में पहुँच गया।\nRGW: काम असल में यहीं है अगर आप जानना चाहते हैं कि Ceph की इंजीनियरिंग कहाँ जाती है, तो जवाब object storage है, और वजह सीधी है: RGW को उस चीज़ की बराबरी तक पहुँचने के लिए सबसे लंबा रास्ता तय करना है जिससे वह मुकाबला करता है।\nsrc/rgw दशक भर में Ceph का सबसे बड़ा functional subsystem है, 6,958 कमिट, Crimson के 5,827, OSD के 4,499, dashboard के 3,848, BlueStore के 2,560 और CephFS के 2,546 से आगे। यह block परत पर लगी मेहनत का चार गुना है। पिछले तीन साल में इसने 1,705 कमिट लिए, सिर्फ़ Crimson से पीछे, और Crimson शून्य से दोबारा लिखा जा रहा है। शिप होने वाले कोड पर, RGW प्रोजेक्ट का सबसे बड़ा चालू feature कार्यक्रम है।\nAmazon का S3 चलता हुआ निशाना है, जिसकी API सतह बहुत बड़ी है, और हर साल उसमें ऐसे features जुड़ते हैं जिनकी ग्राहक फिर हर उस चीज़ से उम्मीद करते हैं जो खुद को S3-compatible कहती है। तो RGW उसका पीछा करता है। पिछले तीन साल के RGW commit subjects को feature क्षेत्र के हिसाब से गिनिए, और उस पीछा करने की शक्ल साफ़ है:\nपिछले 3 साल में RGW का काम जिन कमिट में इसका ज़िक्र है Multisite replication 94 Accounts 94 IAM, identity और access management 72 Policy 71 Bucket notifications 69 STS (अस्थायी credentials) 67 Topics 50 Roles 47 Restore 41 POSIX / filesystem gateway 40 Server-side encryption (SSE) 38 Multipart upload 32 Lifecycle 16 KMS, key management service 12 S3 Select 11 Checksums 11 Cloud transition 10 Versioning, CORS, object lock, bucket logging, tagging कुल 28 (1,705 commit subjects पर keyword गिनती, इसलिए एक कमिट एक से ज़्यादा पंक्ति में आ सकता है; बात बँटवारे की है, सटीक जोड़ की नहीं।)\nयह रखरखाव नहीं है। यह identity accounts, roles और policies, session tokens, bucket notifications और topics, SSE-KMS, object lock, lifecycle rules, S3 Select, checksums, cloud tiering और multisite replication है: AWS की feature सूची, बनती हुई। हाल के subjects पढ़िए तो SigV4 signature-verification का काम, x-amz-content-sha256 का handling, presigned URLs मिलते हैं। बारीक compatibility की चीज़ें, जो सिर्फ़ इसलिए मायने रखती हैं कि किसी की client library Amazon का हूबहू व्यवहार चाहती है और उसके बिना गिर जाएगी।\nइसी वजह से बड़े subsystems में RGW की योगदानकर्ता सूची सबसे मिली-जुली है। दशक भर में Red Hat इसका 64.3% है, पर Bloomberg (हाल के दौर में 8.6%) और Cafe Bazaar (6.2%) भी इसमें हैं: वे कंपनियाँ जो production में बड़े object stores चलाती हैं और उन चीज़ों को ठीक करती हैं जो उन्हें चुभती हैं।\nअगर आप S3 के काम के लिए Ceph को तौल रहे हैं, तो यही आँकड़ा आपको तसल्ली देना चाहिए। Amazon से दूरी ही वह वजह है कि RGW को tree में किसी भी और चीज़ से ज़्यादा ध्यान मिलता है, और प्रोजेक्ट की सबसे बड़ी अकेली इंजीनियरिंग कोशिश उसी दूरी को पाटने में लगी है।\nRBD: स्थिर कोड, गिरावट नहीं src/librbd Ceph का block device है: Proxmox यही इस्तेमाल करता है, OpenStack Cinder यही, और ज़्यादातर Kubernetes Container Storage Interface drivers यही। अगर आप Ceph चलाते हैं तो शायद RBD चलाते हैं। इसका commit graph ऐसा दिखता है:\nसाल-दर-साल RBD कमिट: रखरखाव में ठहरता component कमिट,\u0026#160;src/librbd, साल-दर-साल Ceph का block device: Proxmox, OpenStack Cinder और ज़्यादातर Kubernetes CSI drivers यही इस्तेमाल करते हैं 0 100 200 300 400 431 2015 477 2016 258 2017 276 2018 209 2019 455 2020 165 2021 85 2022 49 2023 74 2024 45 2025 19 2026 Feature का काम लगभग पूरा 2020 के 455 में से 281 कमिट Jason Dillaman के: persistent write-back cache और crypto, फिर RBD रखरखाव में ठहर गया। 2026, 27 अगस्त तक है। यह गिरावट नहीं, यह एक परिपक्व component है जिसका रखरखाव हो रहा है, दोबारा बनाया नहीं जा रहा। src/librbd में साल-दर-साल कमिट। भारी feature काम 2020 के आसपास पूरा हुआ; उस साल के 455 में से 281 कमिट Jason Dillaman के थे, persistent write-back cache और crypto पर; तब से यह component रखरखाव में ठहर गया है। पिछले तीन साल में 159 कमिट, लगभग हफ़्ते में एक, RGW के 1,705 और Crimson के 1,944 के सामने।\nस्थिर कोड ऐसा ही दिखता है, और यह एक ख़ूबी है। RADOS पर block storage एक हल हो चुकी समस्या है। RBD में सालों से snapshots, clones, layering, mirroring, encryption, live migration और persistent cache हैं, और उसके आगे S3 API जैसा कुछ भागा नहीं जा रहा, क्योंकि hypervisor एक block device से जो चाहता है वह दशक में मुश्किल से बदला है। Feature का काम हो चुका। बचा है रखरखाव: bug fixes, kernel के साथ कदम मिलाना, कभी-कभार performance में बढ़त।\nइसे जानबूझकर RGW के सामने रखिए। RGW दस गुना कमिट लेता है क्योंकि उसे दस गुना आगे जाना है। RBD को नहीं जाना, तो वह नहीं लेता। जिस component ने शक्ल बदलना बंद कर दिया हो वह मुरझा नहीं रहा। और अगर librbd अचानक साल में 400 कमिट लेने लगे तो मैं जानना चाहूँगा कि क्या गड़बड़ हुई, क्योंकि वह मेरी वर्चुअल मशीनों की डिस्क सँभाल रहा है।\nजानने लायक एक बात यह है कि इसकी विशेषज्ञता बहुत कम सिरों में है। RBD कमोबेश Ilya Dryomov हैं, जो दोनों छोर सँभालते हैं: upstream Ceph और Linux kernel का rbd driver। यह सबसे अच्छा इंतज़ाम है जो मिल सकता है, और फिर भी एक आदमी गहरा है। इससे पता चलता है कि किससे पूछना है, यह नहीं कि deploy करना है या नहीं।\nकाम कहाँ बैठा है पूरे tree का वही नक्शा, दशक और हाल का दौर साथ-साथ:\nक्षेत्र दशक में अगुवा हिस्सा पिछले 3 साल में अगुवा IBM समूह, पिछले 3 साल src/mds, CephFS metadata Red Hat 78.5% Red Hat 56.4% 73.9% src/osd, मौजूदा OSD Red Hat 69.7% Red Hat 56.9% 84.0% src/cephadm, deployment Red Hat 66.8% Red Hat 73.7% 92.0% src/rgw, S3 Red Hat 64.3% Red Hat 56.1% 66.7% src/librbd, block Red Hat 61.1% Red Hat 76.7% 83.0% src/crimson, अगला OSD Red Hat 52.1% Red Hat 42.0% 45.4% doc/, manual Red Hat 45.6% Ceph Foundation 28.4% 40.5% src/os/bluestore, engine Red Hat 36.9% IBM 46.5% 54.2% src/pybind/mgr/dashboard SUSE 36.6% IBM 57.5% 87.8% इससे दो बातें पढ़िए। मालिकाना: वेंडर जो हिस्से बेचता है उनके जितना करीब, deployment tooling, GUI, उतना ही वह एक कंपनी का है; जितना दूर, अगली पीढ़ी का OSD, storage engine, manual, उतनी भीड़, और अगर आप ऐसी जगह योगदान देना चाहते हैं जिस पर पहले से किसी का कब्ज़ा न हो तो जगह वहीं है।\nमात्रा: दशक के कुल कमिट से क्रम है RGW 6,958, Crimson 5,827, OSD 4,499, dashboard 3,848, monitors 2,896, BlueStore 2,560, CephFS 2,546, RBD 1,750, cephadm 1,685। मेहनत पूरा होने से दूरी के हिसाब से चलती है, deployment हिस्से के हिसाब से नहीं। RGW पहले है क्योंकि S3 की बराबरी बहुत दूर है; RBD नीचे के पास है क्योंकि block storage पूरा हो चुका है।\nBlueStore की अपनी एक पंक्ति बनती है। यह वह engine है जो आपके bytes डिस्क पर लिखता है, और पिछले तीन साल में IBM के बाद दूसरा सबसे बड़ा योगदानकर्ता croit है, 18.1%: Igor Fedotov, इसके मुख्य maintainer, कुछ दर्जन लोगों की कंपनी में। मेरा employer, तो मुझे उसी हिसाब से तौलिए। बात वही रहती है चाहे उनका वेतन कोई भी दे: एक छोटी कंपनी stack के सबसे safety-critical components में से एक के maintainer को रख सकती है, और प्रोजेक्ट इससे बेहतर है।\nMerge का बटन किसके पास है मैंने merges भी गिने: पिछले तीन साल में 7,893, जिसने बटन दबाया उसके नाम:\nसंस्था Merges हिस्सा Red Hat 3,892 49.3% IBM 1,597 20.2% Ceph Foundation 524 6.6% Proxmox 202 2.6% Intel 136 1.7% croit 76 1.0% 69.5% merges, सामने 68.6% कमिट। दरवाज़ा और काम एक ही शक्ल के हैं। यह ऐसा नहीं कि एक कंपनी कोड लिखे और दूसरी तय करे कि क्या अंदर जाए; corporate open source में असल में चिंता करने लायक विफलता यही है। Ceph में यह नहीं है।\nआँकड़े कहाँ से आते हैं सब दोहराया जा सकता है। Ceph योगदानकर्ता से संस्था तक का अपना mapping repository में रखता है, .organizationmap, साथ में .mailmap, .peoplemap और .githubmap, और उसे इस्तेमाल करने का command भी लिखता है।\ngit clone --filter=blob:none --no-checkout https://github.com/ceph/ceph.git cd ceph git show HEAD:.organizationmap \u0026gt; /tmp/orgmap # Ceph\u0026#39;s own documented method, over the last ten years git log --no-merges --since=2016-08-27 --until=2026-08-27 --pretty=\u0026#39;%aN \u0026lt;%aE\u0026gt;\u0026#39; \\ | git -c mailmap.file=/tmp/orgmap check-mailmap --stdin \\ | sort | uniq -c | sort -rn | head -30 # the maintainer-to-employer mapping, straight from the repo git show HEAD:doc/governance.rst | sed -n \u0026#39;/^.. _csc:/,/^\\.\\. _ctl:/p\u0026#39; \\ | grep -oE \u0026#39;\\* [^\u0026lt;]+\u0026lt;[^\u0026gt;]+\u0026gt;\u0026#39; पहला चलाइए तो आपको मेरे से छोटा IBM मिलेगा, क्योंकि आधिकारिक map पुराना है। वह aainscow@uk.ibm.com, bill_scales@uk.ibm.com, ylifshit@ibm.com, rkachach@ibm.com, leonid.usov@ibm.com या li-*.ibm.com वाले मशीन से बने hostnames नहीं जानता। प्रोजेक्ट के अपने tooling से गिनें तो एकाग्रता कम दिखती है।\nMap के ऊपर मेरे सुधार:\nibm.com पर ख़त्म होने वाला हर पता, uk.ibm.com, il.ibm.com, in.ibm.com, de.ibm.com और li-*.ibm.com रूपों समेत, IBM है। redhat.com और inktank.com Red Hat हैं, IBM से अलग दिखाए गए, पर अक्टूबर 2022 से एक ही टीम। सात निजी पते उन employers के नाम किए गए जहाँ repository खुद इसे साबित करता है: sage@newdream.net (Red Hat), idryomov@gmail.com (Ceph के अपने doc/governance.rst में idryomov@redhat.com के रूप में दर्ज), max.kellermann@gmail.com (IONOS), xxhdx1985126@gmail.com (QiAnXin), yuvalif@yahoo.com (IBM), yingxincheng@gmail.com (Intel), shraddha.agrawal000@gmail.com (IBM)। बाकी सब अपने domain के साथ रहता है। निजी पते अंदाज़ा लगाने की जगह “कोई कंपनी नहीं दिखती” रहते हैं। सीमाएँ जो मैं ठीक नहीं कर सकता। कमिट मोटी इकाई है: 900 लाइनों का सावधान refactor एक बार गिना जाता है, चालीस typo fixes चालीस बार, और यहाँ कुछ भी weighted नहीं। ईमेल domains अधूरे हैं: दशक के 9.0% में कोई employer नहीं दिखता, और उनमें से कुछ लोगों को निश्चित रूप से Ceph लिखने का पैसा मिलता है। Review git में नहीं दिखता: Ceph GitHub pull requests में review करता है, Reviewed-by: trailers में नहीं, जो मुझे तीन साल में बारह मिले; प्रोजेक्ट का सबसे अहम दरवाज़ा clone में कोई निशान नहीं छोड़ता। आँकड़े सिर्फ़ main के हैं, इसलिए stable branches के backports नहीं गिने गए, जिससे रखरखाव का काम कम दिखता है। और यहाँ अपनाने का हर आँकड़ा न्यूनतम है, ऊपर बताई telemetry वाली वजह से।\nजहाँ कोई दावा तारीख़ पर टिका है वहाँ मैंने author date ली है; जहाँ किसी के employer पर, वहाँ वह पता जो उन्होंने खुद छापा।\nमैं इससे क्या निकालता हूँ Ceph corporate पैसे से चलने वाला प्रोजेक्ट है जिसके किनारों पर असली community है, और अपनी पूरी commercial ज़िंदगी में यह ऐसा ही रहा है। यह ताना नहीं है। इस पैमाने के distributed storage की देखभाल के लिए किसी को इंजीनियरों को पैसा देना पड़ता है, और दस साल से कोई दे रहा है।\nमैं यह दिखावा नहीं करूँगा कि Ceph आम है, क्योंकि मैंने जाँचा। Linux 6.15 के लिए LWN के आँकड़े कम से कम 195 employers के 2,068 developers दर्ज करते हैं, और सबसे बड़ी अकेली कंपनी Intel के पास 12.0% changesets हैं। Ceph दशक भर में 1,718 लोग है और एक कंपनी 67.0% पर। Kernel अपनी corporate निर्भरता दर्जनों कंपनियों में बाँटता है। Ceph उसे एक में समेटता है। यह असली फ़र्क है, और “सब यही करते हैं” कहकर इसे टाल देना आलसी तरीका होगा।\nपर दस साल का डेटा इस बारे में क्या कहता है कि इससे फ़र्क पड़ता है या नहीं, और जवाब उससे बेहतर है जो मैं ढूँढने निकला था:\nCeph उस तरह मज़बूत है जो मायने रखता है। इसने उस आदमी को खोया जिसने इसे लिखा था और जो काम का पाँचवाँ हिस्सा कर रहा था। इसने SUSE को खोया, अपना दूसरा सबसे बड़ा योगदानकर्ता और dashboard का लेखक। इसने ZTE, Mirantis, XSKY, EasyStack, Inspur और Foundation के आधे संस्थापक सदस्यों को खोया। आज commit की दर पिछले साल से दो प्रतिशत के भीतर है। बीस साल की storage इंजीनियरिंग उस tree में LGPL-2.1 या LGPL-3 के तहत बैठी है, और कोई उसे बंद नहीं कर सकता, relicense नहीं कर सकता, वापस नहीं ले सकता।\nMaintainers साथ ले जाए जा सकते हैं। Fedotov ने तीन employers के दौरान BlueStore चलाए रखा। Kefu Chai Red Hat से Proxmox गए और काम जारी रखा। Sadeh ने DreamHost में RGW लिखा और इस जून अपना कमेटी पता Ubiquiti कर दिया। जब कोई कंपनी जाती है, उसके लोग अक्सर रहते हैं।\nदरवाज़ा सच में खुला है। IONOS का एक इंजीनियर तीन साल में पाँचवाँ सबसे बड़ा योगदानकर्ता बन गया। Proxmox एक भर्ती से शीर्ष दस में पहुँचा। बिना स्टोरेज प्रोडक्ट वाली एक security कंपनी अगली पीढ़ी के OSD का पाँचवाँ हिस्सा बना रही है। 478 संस्थाओं ने patch भेजे हैं। अगर आप अंदर आना चाहते हैं तो काम के सिवा आपको कुछ नहीं रोक रहा।\nयूज़र आधार उससे कहीं बड़ा है जितना कोई माप सकता है। 3,000 क्लस्टर में एक exabyte वह है जिसने opt-in telemetry से हाथ उठाया, और अकेले CERN के उन्नीस production क्लस्टर हैं। हर Proxmox hyperconverged क्लस्टर, हर Rook deployment, ढक्कन के नीचे Ceph वाला हर वेंडर appliance असली production इस्तेमाल है जिसे कोई छपा आँकड़ा नहीं गिनता। इतने बड़े पैमाने पर और इतनी चुपचाप लगा सॉफ़्टवेयर यूँ ही ग़ायब नहीं होता।\nमेहनत वहाँ जाती है जहाँ कमी है, वहाँ नहीं जहाँ यूज़र हैं। RGW प्रोजेक्ट का सबसे बड़ा कार्यक्रम है, दशक में 6,958 कमिट, क्योंकि S3 पर Amazon को पकड़ना चलते निशाने के पीछे लंबी दौड़ है। RBD नीचे के पास है क्योंकि block storage पूरा हो चुका। परिपक्व component पर कम commit गिनती पूरा हुआ काम है, चेतावनी नहीं, और ऐसे डेटा के साथ इन दो आँकड़ों को उल्टा पढ़ना सबसे आसान गलती है। पहली बार में मैंने खुद यही की थी।\nसप्लायर को कमिट पर परखिए, tiers पर नहीं। इतिहास सार्वजनिक है और shell की चार लाइनें दिखा देंगी कि जिस चीज़ पर आप निर्भर होने जा रहे हैं उसकी देखभाल असल में कौन करता है। बंद स्टोरेज आपको यह किसी भी कीमत पर नहीं देता।\nतो अगर आप Ceph को तौल रहे हैं: पाँच साल आगे की योजना बनाते समय यह एकाग्रता जानने लायक है, और यह रुकने की कोई वजह नहीं। एक परिपक्व block परत। प्रोजेक्ट की सबसे बड़ी इंजीनियरिंग कोशिश सीधे S3 की बराबरी पर। एक भविष्य का OSD जिसे तीन कंपनियाँ एक साथ बना रही हैं। ज़्यादातर से बेहतर manual। ऐसा governance जो अपने संस्थापक को खोकर भी पार निकला। खुले में किया गया दशक भर का review, tree में 478 संस्थाओं का काम, और ऐसा licence जिसका सबसे बुरा नतीजा fork है, बंद गली नहीं। 69,613 कमिट के सबूत पर, यह प्रोजेक्ट अच्छी सेहत में है।\nऔर अगर मुझ पर शक है तो खुद गिन लीजिए। Commands ऊपर हैं, डेटा सार्वजनिक है, और इस पोस्ट में कुछ भी भरोसे पर मानने की ज़रूरत नहीं, न मेरे, न किसी और के।\nसंदर्भ Ceph प्रोजेक्ट के स्रोत\n“Ceph: A Scalable, High-Performance Distributed File System” — Weil, Brandt, Miller, Long और Maltzahn, OSDI \u0026lsquo;06, नवंबर 2006। वह पेपर जिससे Ceph शुरू हुआ ceph/ceph on GitHub — वह repository जिससे हर commit आँकड़ा आता है; .organizationmap, .mailmap, .peoplemap, .githubmap, doc/governance.rst और COPYING सब tree में हैं Ceph governance — Executive Council और Ceph Steering Committee की सदस्यता, पतों के साथ Ceph component team — component leads Ceph Foundation members — tier के हिसाब से मौजूदा सदस्यता Ceph Foundation documentation — tier ढाँचा और बिना खर्च की Associate सदस्यता Ceph Foundation members, Quincy documentation — लगभग 2022 की सदस्यता Ceph telemetry module — पुष्टि करता है कि telemetry opt-in है “Red Hat\u0026rsquo;s Ceph team is moving to IBM”, 4 अक्टूबर 2022 Ceph Community Newsletter, November 2021 — Sage Weil का पीछे हटना Ceph Foundation और Linux Foundation\nIntroducing Ceph Squid — ऊपर उद्धृत Diamond सदस्यों के बयान, और 1 exabyte / 3,000+ क्लस्टर के आँकड़े The Linux Foundation Launches Ceph Foundation, 12 नवंबर 2018 — संस्थापक सदस्यों की सूची The same release via PRNewswire — सूची की स्वतंत्र पुष्टि के लिए Deployments\n“Ceph: Infrastructure Storage at CERN” — Enrico Bocchi, CERN IT Storage, 27 सितंबर 2024। ऊपर का हर CERN आँकड़ा इसी deck से है Why We Chose Ceph to Build Block Storage — DigitalOcean “We Added 6 Petabytes Of Ceph Storage and No Clients Noticed” — Matthew Leonard और Joseph Mundackal, Bloomberg, Cephalocon 2020 Ceph on Wikitech — Wikimedia Foundation के पाँच production क्लस्टर Ceph RBD block storage — OVHcloud का अपना documentation Deploy Hyper-Converged Ceph Cluster — Proxmox VE का Ceph को hyperconverged स्टोरेज के रूप में देना कंपनियाँ\n“SUSE says tschüss to Ceph-based enterprise storage product”, The Register, 25 मार्च 2021 — SUSE Enterprise Storage को Longhorn के लिए बंद किया गया Qi An Xin files for $634m IPO, Global Venturing, 13 मई 2020 — QiAnXin की Qihoo 360 वाली शुरुआत, CEC की हिस्सेदारी और shareholding तुलना\nDevelopment statistics for the 6.15 kernel, LWN.net — एकाग्रता की तुलना में इस्तेमाल किए गए kernel developer और employer आँकड़े ","permalink":"https://blogs.damiendye.uk/hi/ceph/who-actually-writes-and-uses-ceph/","summary":"मैंने पिछले दस साल में Ceph की main ब्रांच का हर कमिट गिना, 478 संगठनों के 1,718 लोगों के कुल 69,613 कमिट, Steering Committee के सभी 38 सदस्यों को उनकी कंपनी तक खोजा, और सार्वजनिक रूप से बताए गए डिप्लॉयमेंट इकट्ठा किए। नतीजा एक ऐसा प्रोजेक्ट है जिसने अपने संस्थापक और अपने दूसरे सबसे बड़े योगदानकर्ता को खोने का झटका बिना लड़खड़ाए झेल लिया, और आज भी उसी रफ़्तार से शिप कर रहा है।","title":"Ceph असल में कौन लिखता है और कौन चलाता है"},{"content":"इस बार होस्ट मौजूद है। बस गलत हाइपरवाइज़र पर है पिछली बार दिक्कत यह थी कि inventory में जिस मशीन का नाम था वह अभी मौजूद ही नहीं थी: न IP, न SSH, न Python, कनेक्ट करने को कुछ नहीं। हर task को उससे दूर delegate करना पड़ता था।\nVMware माइग्रेशन इसे उलट देता है और कुछ नहीं बदलता। मशीन मौजूद है, चल रही है, लोग उसे इस्तेमाल कर रहे हैं। फिर भी आप उससे कभी कनेक्ट नहीं करते। वह एक नाम है और variables का एक थैला, जो किसी ऐसी चीज़ का वर्णन करता है जिसे कहीं और दोबारा बनाना है। हर task अब भी control node पर चलता है, और अब दूसरी तरफ़ एक के बजाय दो API हैं।\nयह क्या है, इस पर एक बात। यह पोस्ट डिज़ाइन और playbook है, कोई युद्ध की कहानी नहीं। मैंने इसे अभी तक किसी production एस्टेट पर शुरू से आखिर तक नहीं चलाया है। नीचे मॉड्यूल के व्यवहार के बारे में जो कुछ भी मैं कहता हूँ वह शिप किए गए कोड से पढ़ा और जाँचा गया है, और जहाँ कोई दावा किसी रन से नहीं बल्कि सोर्स से आता है, वहाँ मैंने साफ़ कह दिया है। जब मैं इससे असली माइग्रेशन कर लूँगा, तो उसके आँकड़ों और हैरानियों को अपनी अलग पोस्ट मिलेगी।\nजिन वर्ज़न पर यह जाँचा गया:\n$ ansible --version | head -1 ansible [core 2.20.7] $ ansible-galaxy collection list | grep -E \u0026#39;vmware|proxmox\u0026#39; community.proxmox 1.6.0 community.vmware 6.2.1 vmware.vmware 2.9.0 नीचे के टुकड़े एक ही playbook से काटे गए हैं: migrate.yml, inventory/vmware.vms.yml में एक vSphere डायनेमिक inventory, और एक group_vars/all.yml। पढ़ने में आसानी के लिए मैंने datacenter, node और storage के नाम सामान्य कर दिए हैं।\nकाम का ढाँचा पाँच कदम, और सिर्फ़ आखिरी वाले की कोई कीमत है।\nगेस्ट चालू, कुछ जोखिम में नहीं outage discover distributed portgroup और उनके VLAN tag पढ़ें sdn एक VLAN zone, हर VLAN पर एक VNet Proxmox पर build बिना डिस्क के शेल, सही CPU, RAM, फ़र्मवेयर और MAC relocate VMDK को storage vMotion से NFS पर, चलते-चलते cutover power off, डिस्क import, boot order और गेस्ट शुरू जो कुछ पलटा जा सकता है, वह कुछ भी बंद होने से पहले हो जाता है धीमा हिस्सा relocate है, और उसमें बिल्कुल downtime नहीं लगता। window खुलने तक डिस्क Proxmox के माउंट किए स्टोरेज पर होती हैं, इसलिए cutover कॉपी नहीं, लोकल import है। बिना डिस्क का शेल मिटाना सस्ता है, इसलिए cutover से पहले की गलती की कीमत बस समय है। माइग्रेशन बीच में छोड़ने पर हर गेस्ट VMware पर बिना छुए चलता रहता है। जो कुछ पलटा जा सकता है वह पहले होता है। धीमा चरण मुफ़्त है, और महँगा चरण छोटा है, क्योंकि तब तक डिस्क पहले ही वहाँ होती हैं जहाँ उन्हें होना चाहिए। पूरा डिज़ाइन इसी क्रम में है। Discovery कुछ नहीं बदलती। नेटवर्क बनाना सिर्फ़ Proxmox को बदलता है। शेल बनाना सिर्फ़ Proxmox को बदलता है, और बिना डिस्क वाला शेल मिटाना सस्ता है। डिस्क ले जाना धीमा है, पर live है। सिर्फ़ आखिरी play किसी चीज़ को बंद करता है।\nआधे रास्ते में छोड़कर चले जाइए, और हर गेस्ट अब भी VMware पर चल रहा होगा, बिना छुए।\nदो collections, और उनमें से एक रिटायर हो रहा है आपको दोनों चाहिए, और उस वजह से नहीं जो आप अंदाज़ा लगाएँगे।\ncollections: - name: community.vmware version: \u0026#34;\u0026gt;=6.2.1\u0026#34; - name: vmware.vmware version: \u0026#34;\u0026gt;=2.5.0\u0026#34; - name: community.proxmox version: \u0026#34;\u0026gt;=1.6.0\u0026#34; community.vmware पुराना, बड़ा collection है और उसे टुकड़ों में खोला जा रहा है। उसका MANIFEST.json {\u0026quot;vmware.vmware\u0026quot;: \u0026quot;\u0026gt;=2.5.0\u0026quot;} को पक्की dependency के रूप में घोषित करता है, तो पहला install करने पर दूसरा अपने-आप आ जाता है, आपने माँगा हो या नहीं। मॉड्यूल एक-एक करके दूसरी तरफ़ जा रहे हैं, और माइग्रेशन में आप जिन तक हाथ बढ़ाते हैं वे इस सफ़र के अलग-अलग पड़ाव पर हैं:\nvmware_dvs_portgroup_info: अब भी सिर्फ़ community.vmware में है, और यही आपके VLANs पढ़ता है। vmware_vmotion: अब भी सिर्फ़ community.vmware में। vmware_guest_powerstate: deprecated, community.vmware 7.0.0 में हटा दिया जाएगा। vmware.vmware.vm_powerstate इस्तेमाल कीजिए। vmware_vm_inventory: deprecated, 7.0.0 में हटा दिया जाएगा। vmware.vmware.vms इस्तेमाल कीजिए। मॉड्यूल के deprecation के बारे में Ansible पहले ही रन पर बता देता है, जो उसकी भलमनसाहत है:\n[DEPRECATION WARNING]: community.vmware.vmware_guest_powerstate has been deprecated. Use vmware.vmware.vm_powerstate instead. This feature will be removed from collection \u0026#39;community.vmware\u0026#39; version 7.0.0. Inventory plugin के बारे में वह चेतावनी नहीं देता, क्योंकि inventory plugins उस मशीनरी के चलने से पहले parse हो जाते हैं। आपको जाकर plugin पढ़ना पड़ता है।\nइस बँटवारे में तीसरा जाल भी है। vmware.vmware.vm_portgroup_info देखने में ठीक वही लगता है जो नेटवर्क माइग्रेशन चाहता है: हर VM, हर NIC के लिए, portgroup और VLAN देता है। पर यह ModuleRestBase पर बना है और com.vmware.vapi import करता है, यानी control node पर इसे सिर्फ़ pyVmomi नहीं, vSphere Automation SDK भी चाहिए। इसका दस्तावेज़ी return भी पुराना है: RETURN block name और vlan_id का वादा करता है, जबकि कोड distributed वाले मामले के लिए असल में portgroup_name और एक vlan_info dict बनाता है। मैं नीचे दूसरा रास्ता चला, और मुझे इन दोनों में से किसी की ज़रूरत नहीं पड़ी।\nInventory ही discovery है इस playbook में “जाओ VMs ढूँढ़ो” वाला कोई play नहीं है, क्योंकि पहला task चलने तक inventory यह काम कर चुकी होती है, और वह भी हर VM पर loop के बजाय एक property-collector query में।\n# inventory/vmware.vms.yml plugin: vmware.vmware.vms hostname: \u0026#34;{{ lookup(\u0026#39;ansible.builtin.env\u0026#39;, \u0026#39;VMWARE_HOST\u0026#39;) }}\u0026#34; username: \u0026#34;{{ lookup(\u0026#39;ansible.builtin.env\u0026#39;, \u0026#39;VMWARE_USER\u0026#39;) }}\u0026#34; password: \u0026#34;{{ lookup(\u0026#39;ansible.builtin.env\u0026#39;, \u0026#39;VMWARE_PASSWORD\u0026#39;) }}\u0026#34; validate_certs: false search_paths: - /Datacenter-1 properties: - name - config.name - config.uuid - config.guestId - config.firmware - config.template - config.hardware.numCPU - config.hardware.numCoresPerSocket - config.hardware.memoryMB - config.hardware.device - summary.runtime.powerState gather_compute_objects: true hostnames: [\u0026#39;name\u0026#39;] filter_expressions: - \u0026#39;config.template\u0026#39; फ़ाइल का नाम मायने रखता है। Plugin का verify_file सिर्फ़ उन्हीं फ़ाइलों को अपनाता है जिनके नाम vms.yml, vms.yaml, vmware_vms.yml या vmware_vms.yaml पर खत्म होते हैं। इसे vcenter.yml कहिए और यह चुपचाप आपकी inventory नहीं रहती।\nsearch_paths query से पहले फ़िल्टर करता है, बाद में नहीं। बड़े एस्टेट पर यह सेकंड और मिनट का फ़र्क है, filter_expressions के उलट, जिसके बारे में docs साफ़ हैं: यह collection के बाद चलता है और “does not affect the speed of the inventory plugin”।\nजब expression true होता है तब filter_expressions होस्ट को हटा देता है। इसलिए config.template templates को हटाता है, जो पहली बार उल्टा पढ़ने में आता है।\nऔर अहम लाइन config.hardware.device है, जो किसी भी default property list में कहीं नहीं है। यह VM की पूरी hardware inventory है, और इसमें तीन चीज़ें हैं जिनके बिना यह माइग्रेशन आगे नहीं बढ़ सकता: हर NIC का MAC, हर NIC जिस dvportgroup key से जुड़ा है वह, और हर डिस्क का datastore path। इसके बिना आप वापस vmware_guest_info loop पर हैं, हर VM के लिए एक round trip।\nDevices JSON के रूप में आते हैं, उनका vSphere टाइप _vimtype में सुरक्षित रहता है। यह जानने लायक है, क्योंकि इसी से आप NIC और डिस्क में फ़र्क करते हैं। मैंने अंदाज़ा लगाने के बजाय encoder जाँचा:\n{ \u0026#34;_vimtype\u0026#34;: \u0026#34;vim.vm.device.VirtualVmxnet3\u0026#34;, \u0026#34;macAddress\u0026#34;: \u0026#34;00:50:56:87:a5:9a\u0026#34;, \u0026#34;backing\u0026#34;: { \u0026#34;_vimtype\u0026#34;: \u0026#34;...DistributedVirtualPortBackingInfo\u0026#34;, \u0026#34;port\u0026#34;: { \u0026#34;_vimtype\u0026#34;: \u0026#34;vim.dvs.PortConnection\u0026#34;, \u0026#34;portgroupKey\u0026#34;: \u0026#34;dvportgroup-1014\u0026#34; } } } तो एक compose block उलझे हुए paths को खींचकर सपाट hostvars में ला सकता है:\ncompose: vm_moid: moid vm_firmware: config.firmware vm_memory_mb: config.hardware.memoryMB vm_num_cpu: config.hardware.numCPU # A virtual NIC is any device with a MAC. Filtering on _vimtype does not # work cleanly here, because VMXNET3, E1000 and SR-IOV cards are all # different types with no shared substring. vm_nics: \u0026gt;- config.hardware.device | selectattr(\u0026#39;macAddress\u0026#39;, \u0026#39;defined\u0026#39;) | selectattr(\u0026#39;macAddress\u0026#39;, \u0026#39;ne\u0026#39;, None) | list # Disks are one exact type, so this one can match on it. vm_disks: \u0026gt;- config.hardware.device | selectattr(\u0026#39;_vimtype\u0026#39;, \u0026#39;eq\u0026#39;, \u0026#39;vim.vm.device.VirtualDisk\u0026#39;) | list यह असमानता असली है और लोगों को फँसाती है। मैच करने के लिए कोई VirtualEthernetCard टाइप नहीं है। वह abstract base class है, और vCenter असल में आपको VirtualVmxnet3, VirtualE1000, VirtualE1000e, VirtualPCNet32 या VirtualSriovEthernetCard देता है। इन सबमें कोई साझा substring नहीं है। पर MAC होना ऐसी चीज़ है जो सिर्फ़ NIC करता है।\nहर info मॉड्यूल वही फ़ील्ड छिपाता है जो आपको चाहिए पूरे काम में यही धागा चलता है, और तीन बार देख लेने के बाद आप task लिखने से पहले हर default जाँचने लगते हैं।\nvmware_dvs_portgroup_info में छह show_* options हैं। पाँच का default true है। छठा show_vlan_info है, और उसका default false है।\nshow_mac_learning=dict(type=\u0026#39;bool\u0026#39;, default=True), show_network_policy=dict(type=\u0026#39;bool\u0026#39;, default=True), show_teaming_policy=dict(type=\u0026#39;bool\u0026#39;, default=True), show_uplinks=dict(type=\u0026#39;bool\u0026#39;, default=True), show_port_policy=dict(type=\u0026#39;bool\u0026#39;, default=True), show_vlan_info=dict(type=\u0026#39;bool\u0026#39;, default=False), इसे छोड़ दीजिए और आपको एस्टेट के हर portgroup की MAC learning policy, teaming policy, uplink ordering और port policy मिलती है। VLAN tag को छोड़कर सब कुछ, जबकि नेटवर्क माइग्रेशन असल में सिर्फ़ उसी फ़ील्ड के बारे में पूछ रहा है। तो task उससे उल्टा है जो आप सहज रूप से लिखेंगे: एक चीज़ चालू कीजिए, बाकी पाँच बंद कीजिए।\n- name: Read the distributed portgroups community.vmware.vmware_dvs_portgroup_info: datacenter: \u0026#34;{{ vcenter_datacenter }}\u0026#34; show_vlan_info: true show_network_policy: false show_teaming_policy: false show_port_policy: false show_mac_learning: false show_uplinks: false register: dvs_pgs यह इकलौता मामला नहीं है। vmware.vmware.vms में gather_compute_objects है, जो cluster और esxi_host भरता है: default false। community.vmware.vmware_vm_info में show_allocated है, जो CPU और memory वाला block है: default false। तीनों मामलों में जिस फ़ील्ड को इकट्ठा करना महँगा है वही माइग्रेशन को चाहिए, और default एक read-only reporting वाले इस्तेमाल को बचाता है, जो आपका इस्तेमाल नहीं है।\nvlan_id तीन अलग टाइप का है फिर आपको VLAN tags मिलते हैं और पता चलता है कि उनकी शक्ल एक नहीं है। सीधे get_vlan_info से:\nif isinstance(vlan_obj, vim...TrunkVlanSpec): ... return dict(trunk=True, pvlan=False, vlan_id=vlan_id_list) elif isinstance(vlan_obj, vim...PvlanSpec): return dict(trunk=False, pvlan=True, vlan_id=str(vlan_obj.pvlanId)) else: return dict(trunk=False, pvlan=False, vlan_id=str(vlan_obj.vlanId)) Access portgroup आपको string \u0026quot;100\u0026quot; देता है। PVLAN आपको string देता है। Trunk आपको strings की list देता है, हर एक या तो \u0026quot;20\u0026quot; या \u0026quot;20-30\u0026quot;। और हर distributed switch पर कम से कम एक trunk होता ही है, चाहे आपने बनाया हो या नहीं, क्योंकि uplink portgroup एक trunk है जो \u0026quot;0-4094\u0026quot; ले जाता है।\nतो | int आपके हाथ में तब तक नहीं है जब तक आप बाकी दो शक्लें फेंक न दें:\naccess_pgs: \u0026gt;- {{ dvs_pgs.dvs_portgroup_info | dict2items | map(attribute=\u0026#39;value\u0026#39;) | flatten | rejectattr(\u0026#39;vlan_info.trunk\u0026#39;) | rejectattr(\u0026#39;vlan_info.pvlan\u0026#39;) | rejectattr(\u0026#39;vlan_info.vlan_id\u0026#39;, \u0026#39;in\u0026#39;, [\u0026#39;0\u0026#39;, 0]) | list }} तीन reject, इसी क्रम में। Trunks जाते हैं, PVLANs जाते हैं, और फिर untagged portgroups जाते हैं, जिससे uplink groups और VLAN 0 पर जो कुछ भी है वह भी निपट जाता है।\nमैं trunks या PVLANs को अपने-आप translate नहीं कर रहा, और जो ऐसा करे उसका मैं विरोध करूँगा। Proxmox पर उतरने वाले VMware trunk को या तो Q-in-Q zone चाहिए या VLAN-aware VNet, और कौन-सा सही है यह इस पर निर्भर है कि गेस्ट क्या देखने की उम्मीद करता है। यह एक फ़ैसला है, mapping नहीं। Playbook उन्हें print करके आगे बढ़ जाता है:\nTASK [Report what was found] ok: [localhost] =\u0026gt; { \u0026#34;msg\u0026#34;: \u0026#34;3 access portgroups -\u0026gt; [100, 200]. Not translated: [\u0026#39;dvs_001-uplink\u0026#39;] (trunks), [\u0026#39;isolated\u0026#39;] (PVLANs).\u0026#34; } VLANs को SDN में उतारना एक bridge से बँधा एक VLAN zone, फिर हर VLAN के लिए एक VNet जिस पर उसका tag हो।\n- name: Create the VLAN zone community.proxmox.proxmox_zone: zone: \u0026#34;{{ sdn_zone }}\u0026#34; type: vlan bridge: \u0026#34;{{ sdn_bridge }}\u0026#34; mtu: \u0026#34;{{ sdn_mtu }}\u0026#34; state: present - name: Create one VNet per VMware VLAN community.proxmox.proxmox_vnet: vnet: \u0026#34;{{ sdn_vnet_prefix }}{{ item.vlan_info.vlan_id | int }}\u0026#34; zone: \u0026#34;{{ sdn_zone }}\u0026#34; tag: \u0026#34;{{ item.vlan_info.vlan_id | int }}\u0026#34; alias: \u0026#34;{{ item.portgroup_name }}\u0026#34; state: present loop: \u0026#34;{{ access_pgs | unique(attribute=\u0026#39;vlan_info.vlan_id\u0026#39;) }}\u0026#34; throttle: 1 VNet के नाम छोटे और बंधे हुए होते हैं, VMware portgroup के नाम नहीं। Production-Web-Tier-VLAN100 एक बिल्कुल आम portgroup नाम है और एक नामुमकिन VNet नाम। इसलिए नाम generate होता है, tag से v100, और इंसानों के पढ़ने लायक असली नाम alias में जाता है, जहाँ वह UI में और pvesh के output में दिखता रहता है। नाम को portgroup के बजाय VLAN से निकालने का मतलब यह भी है कि छह महीने बाद mapping को देखकर ही उलटा पढ़ा जा सकता है।\nएक ही VLAN पर दो portgroups मिलकर एक VNet बन जाते हैं। यह सही है, VMware में भी वे एक ही broadcast domain थे, पर आपको यह होते हुए दिखना चाहिए, और unique(attribute='vlan_info.vlan_id') यही कर रहा है। prod-web और prod-web-b नाम के दो portgroups, दोनों VLAN 100 पर, एक v100 बनाते हैं।\nthrottle: 1 सावधानी नहीं है, यह मॉड्यूल की बनावट है। community.proxmox में हर SDN write एक global cluster lock लेता है, pending config लागू करता है और lock छोड़ देता है: get_global_sdn_lock(), फिर apply_sdn_changes_and_release_lock()। इन्हें parallel में चलाइए, वे वैसे भी lock पर कतार लगाएँगे; throttle बस आपको यह दिखावा करने से रोकता है कि ऐसा नहीं है। यह भी जानने लायक है कि failure पर rollback वर्ज़न पर निर्भर है: मॉड्यूल is_lock_and_rollback_supported जाँचता है और पुराने PVE पर rollback करने के बजाय बताता है कि वह rollback नहीं कर सका।\nएक दिखावटी बात जो आपको खुद पर शक करवाएगी। 1.6.0 पर proxmox_vnet हर एक create पर अपनी पूरी params dict को Ansible warning के रूप में निकालता है:\nself.module.warn(f\u0026#34;{vnet_params}\u0026#34;) self.proxmox_api.cluster().sdn().vnets().post(**vnet_params) यह debug लाइन है जो कोई छोड़ गया। यह शोर है, खराबी नहीं।\nशेल बनाइए, बिना डिस्क के अब VM, और यहीं यह डिज़ाइन अपनी कीमत साबित करता है। हर VM Proxmox में सही CPU संख्या, सही मेमोरी, सही फ़र्मवेयर और सही VLAN पर सही NIC के साथ बनता है। डिस्क बिल्कुल नहीं।\nबिना डिस्क वाला शेल बनाने में तेज़ है, मिटाने में मुफ़्त है, और अगर कोई गलती से उसे चालू कर दे तो PXE प्रॉम्प्ट पर बूट होता है। आप एक दोपहर में चार सौ बना सकते हैं, नतीजा देख सकते हैं, तय कर सकते हैं कि यह गलत है, सबको मिटाकर फिर से बना सकते हैं। कुछ भी कॉपी नहीं हुआ, कुछ भी बंद नहीं हुआ, और किसी को पता भी नहीं चला।\nनिकाली गई वैल्यू घोषणाएँ हैं, टास्क नहीं। Ansible उन्हें आलस्य से (lazily) उस होस्ट के हिसाब से evaluate करता है जो उस समय scope में है, इसलिए हर VM को एक भी set_fact के बिना अपनी वैल्यू मिल जाती है:\n# group_vars/all.yml pve_vmid: \u0026#34;{{ vmid_base | int + (vm_moid | regex_replace(\u0026#39;^vm-\u0026#39;, \u0026#39;\u0026#39;) | int) }}\u0026#34; pve_bios: \u0026#34;{{ \u0026#39;ovmf\u0026#39; if vm_firmware == \u0026#39;efi\u0026#39; else \u0026#39;seabios\u0026#39; }}\u0026#34; pve_cores: \u0026#34;{{ vm_cores_per_socket | int }}\u0026#34; pve_sockets: \u0026#34;{{ ((vm_num_cpu | int) / (vm_cores_per_socket | int)) | round(0, \u0026#39;ceil\u0026#39;) | int }}\u0026#34; VMID vCenter MoID से आता है। vm-42 बन जाता है 20042। यह जितना दिखता है उससे ज़्यादा मायने रखता है: कटओवर play को वही VM ढूँढना है जो build play ने बनाया था, और दोबारा चलाने पर उसी पर पहुँचना चाहिए, चुपचाप दूसरा बनाने के बजाय। अगर API को अगला खाली ID देने दिया जाए, जो vmid छोड़ देने पर होता है और जिसके बारे में मैंने पिछली बार लिखा था, तो यह नामुमकिन हो जाता है।\nमेमोरी को बदलने की ज़रूरत नहीं। VMware config.hardware.memoryMB बताता है और Proxmox को MB चाहिए। Sockets को बदलना पड़ता है: VMware आपको कुल vCPU और cores-per-socket देता है, Proxmox को sockets और cores चाहिए।\n- name: Create the VM shell delegate_to: localhost community.proxmox.proxmox_kvm: node: \u0026#34;{{ proxmox_node }}\u0026#34; vmid: \u0026#34;{{ pve_vmid }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; cores: \u0026#34;{{ pve_cores }}\u0026#34; sockets: \u0026#34;{{ pve_sockets }}\u0026#34; memory: \u0026#34;{{ vm_memory_mb }}\u0026#34; ostype: \u0026#34;{{ pve_ostype }}\u0026#34; bios: \u0026#34;{{ pve_bios }}\u0026#34; scsihw: \u0026#34;{{ default_scsihw }}\u0026#34; efidisk0: \u0026#34;{{ {\u0026#39;storage\u0026#39;: pve_target_storage, \u0026#39;efitype\u0026#39;: \u0026#39;4m\u0026#39;, \u0026#39;pre_enrolled_keys\u0026#39;: false} if pve_bios == \u0026#39;ovmf\u0026#39; else omit }}\u0026#34; agent: \u0026#34;enabled=1\u0026#34; onboot: false state: present onboot: false जानबूझकर। माइग्रेशन के बीच कुछ भी अपने आप शुरू नहीं होना चाहिए, खासकर वह मशीन जिसकी डिस्क पर अभी कोई दूसरा हाइपरवाइज़र लिख रहा है।\nफ़र्मवेयर सही करना वैकल्पिक नहीं है। SeaBIOS वाले VM पर import किया गया UEFI गेस्ट पूरी तरह import हो जाएगा और फिर बूट होने से मना कर देगा, और आप उस पर एक घंटा खपा देंगे। config.firmware या तो efi है या bios, और सीधे ovmf और seabios पर मैप होता है। UEFI गेस्ट को एक EFI vars डिस्क भी चाहिए, जिसे VM के साथ ही बनाना पड़ता है; क्यों, यह नीचे देखिए।\nproxmox_kvm NIC ठीक नहीं करेगा, और आपको बताएगा भी नहीं पिछली बार मैंने लिखा था कि proxmox_kvm अपडेट करने की बजाय converge करने से मना कर देता है। यहाँ उसका और तीखा रूप है, जो यह लिखते समय मुझे लगा और जिसके बारे में सटीक होना ज़रूरी है।\nupdate का डिफ़ॉल्ट false है, इसलिए पहले से मौजूद VM पर दोबारा चलाने से कुछ नहीं होता। ठीक है, और documented है। लेकिन update: true सेट कीजिए, फिर भी मॉड्यूल कुछ पैरामीटर छूने से मना करता है:\n# If update, don\u0026#39;t update disk (virtio, efidisk0, tpmstate0, ide, sata, scsi) # and network interface, unless update_unsafe=True if update_unsafe is False: ... if \u0026#34;efidisk0\u0026#34; in kwargs: del kwargs[\u0026#34;efidisk0\u0026#34;] यह उन्हें request से हटा देता है और आगे बढ़ जाता है। तो आप अपनी inventory mapping में एक NIC ठीक करते हैं, update: true के साथ दोबारा चलाते हैं, Ansible को changed बताते देखते हैं, और NIC ठीक उतना ही गलत है जितना पहले था। changed सच है, payload में कुछ और अपडेट हुआ, लेकिन वह चीज़ नहीं जिसे आप ठीक कर रहे थे।\nupdate_unsafe: true यह पाबंदी हटा देता है, और नाम ईमानदार है। यही guard डिस्क पर भी लागू है, इसलिए जिस VM पर डिस्क हैं, उस पर unsafe update किसी डिस्क की दूसरी कॉपी पाने का अच्छा तरीका है। माइग्रेशन के दौरान यह वह स्विच नहीं है जिसकी ओर हाथ बढ़ाया जाए।\nबाहर निकलने का रास्ता है net का इस्तेमाल ही न करना। NIC proxmox_nic से लगते हैं, जो एक ऐसा मॉड्यूल है जिसका पूरा काम एक इंटरफ़ेस है और जो ठीक से converge करता है:\n- name: Attach each NIC to its VNet delegate_to: localhost community.proxmox.proxmox_nic: vmid: \u0026#34;{{ pve_vmid }}\u0026#34; interface: \u0026#34;net{{ idx }}\u0026#34; bridge: \u0026#34;{{ sdn_vnet_prefix }}{{ pg_vlan[item.backing.port.portgroupKey] }}\u0026#34; mac: \u0026#34;{{ item.macAddress }}\u0026#34; model: \u0026#34;{{ default_net_model }}\u0026#34; state: present loop: \u0026#34;{{ vm_nics }}\u0026#34; loop_control: index_var: idx यह वही बँटवारा है जिस पर मैं पिछली बार पहुँचा था: मशीन परिभाषित करने के लिए proxmox_kvm, और बाद में बदलने वाली चीज़ों के लिए proxmox_disk और proxmox_nic। पैरामीटर mac है, mac_addr नहीं।\nefidisk0 को इसी तरह बाहर नहीं ले जाया जा सकता, क्योंकि proxmox_disk में न efitype है न pre_enrolled_keys, इसलिए इसे create के समय ही लगाना पड़ता है और पहली बार में ही सही होना चाहिए।\nMAC साथ ले जाइए। VMware 00:50:56:... से MAC बाँटता है और Proxmox उन्हें बिना शिकायत ले लेगा। उन्हें बनाए रखने का मतलब है कि DHCP reservation अब भी मेल खाते हैं, MAC से बँधे लाइसेंस अब भी validate होते हैं, और MAC पर लिखा कोई भी firewall नियम अब भी लागू होता है। उन्हें बदलने का मतलब है एक दिन भर की छोटी-छोटी पहेलियाँ। अगर आपको गेस्ट को वही NIC दिखाना है जो पहले दिखता था तो proxmox_nic model: vmxnet3 भी लेता है, लेकिन KVM पर virtio बेहतर कार्ड है, और Windows गेस्ट को किसी भी हाल में नए ड्राइवर चाहिए होंगे।\nअंदाज़ा लगाने से बेहतर है मना करना standard portgroup पर लगे NIC में backing.port होता ही नहीं। उसका backing एक NetworkBackingInfo है जिसमें deviceName होता है। वह map में नहीं होगा, और सही काम है रुक जाना:\n- name: Every NIC must sit on a distributed portgroup with a VNet ansible.builtin.assert: that: - vm_nics | rejectattr(\u0026#39;backing.port.portgroupKey\u0026#39;, \u0026#39;defined\u0026#39;) | list | length == 0 - vm_nics | map(attribute=\u0026#39;backing.port.portgroupKey\u0026#39;) | reject(\u0026#39;in\u0026#39;, pg_vlan.keys() | list) | list | length == 0 fail_msg: \u0026gt;- {{ inventory_hostname }} has NICs that do not map to a Proxmox VNet. Attaching it to the wrong network is worse than not building it. एक की बजाय दो शर्तें, क्योंकि पहली को दूसरी से पहले चलना है: बिना port वाले NIC पर map(attribute=...) undefined lookup पर फट जाएगा। पहले बेढंगे वालों को खारिज कीजिए, फिर बाकी को map से जाँचिए।\nएक export, दो बार माउंट यह वह हिस्सा है जो पूरे काम को सस्ता बनाता है।\nएक NFS export ऐसी जगह रखिए जहाँ दोनों हाइपरवाइज़र उसे माउंट कर सकें। vCenter को nfs-migration नाम का datastore दिखता है; Proxmox नोड वही export माउंट करते हैं और उन्हें /mnt/pve/nfs-migration दिखता है। अब VMDK को storage-vMotion से उस पर ले जाइए।\nStorage vMotion लाइव है। गेस्ट पूरे समय ट्रैफ़िक सर्व करता रहता है। कुछ भी cut over नहीं होता, कोई window नहीं चाहिए, और इसे बीच में छोड़ा जा सकता है, बर्बाद हुए I/O के अलावा कोई नतीजा नहीं। यह सबसे धीमा चरण है, बड़े अंतर से, और इसकी कोई कीमत नहीं।\n- name: Relocate to the NFS datastore delegate_to: localhost throttle: 2 community.vmware.vmware_vmotion: moid: \u0026#34;{{ vm_moid }}\u0026#34; destination_datastore: \u0026#34;{{ nfs_datastore_vmware }}\u0026#34; timeout: \u0026#34;{{ vmotion_timeout }}\u0026#34; timeout का डिफ़ॉल्ट 3600 है, यानी एक घंटा। 2 TB का VMDK इसमें नहीं पहुँचेगा, और विफलता का तरीका चुपचाप बुरा है: Ansible टास्क फ़ेल हो जाता है जबकि vMotion vCenter में चलता रहता है। अब आपके पास एक playbook है जो कहता है कि वह फ़ेल हुआ और एक एस्टेट जो अब भी व्यस्त है। इसे ऐसी वैल्यू पर सेट कीजिए जो आपके असली स्टोरेज को दर्शाए।\nthrottle: 2, क्योंकि bottleneck कंट्रोल नोड नहीं है। Storage vMotion array और नेटवर्क से बँधा है। एक साथ छह चलाने से छह गुना throughput नहीं मिलता; आपको छह धीमे माइग्रेशन और एक नाराज़ स्टोरेज टीम मिलती है।\nमॉड्यूल उसी तरह idempotent है जैसा आप चाहते हैं: अगर VM पहले से target datastore पर है तो यह storage_vmotion_needed = False सेट कर देता है, इसलिए बचे हुओं को उठाने के लिए दोबारा चलाना सुरक्षित है।\nजब तक यह पूरा होता है, बाइट ऐसे स्टोरेज पर बैठे हैं जिसे Proxmox पहले से माउंट करता है। इसलिए उन्हें किसी और को कॉपी करने की ज़रूरत नहीं। कभी नहीं।\nकटओवर यही एकमात्र play है जिसमें downtime लगता है, और इसके अंदर का क्रम बदला नहीं जा सकता।\nपहले, एक समस्या जो आसानी से छूट जाती है: inventory अब पुरानी हो चुकी है। इसे vMotion से पहले इकट्ठा किया गया था, इसलिए vm_disks में अब भी पुराने datastore path हैं। उनसे import कीजिए और आप Proxmox को ऐसे path की ओर इशारा कर रहे हैं जो उसे दिखता ही नहीं।\n- name: Re-read the inventory now the disks have moved ansible.builtin.meta: refresh_inventory यही वजह है कि inventory config में caching बंद है। गर्म cache refresh_inventory को ठीक वही पुराना डेटा लौटा देगा जिसे बदलने के लिए इसे बुलाया गया था। यह असली सौदा है, vCenter तेज़ नहीं है, लेकिन यहाँ गलत path का मतलब है window के अंदर फ़ेल हुआ कटओवर, और उसकी तुलना में round trip सस्ता है।\nफिर power off। ऐसा VMDK import करना जिसे कोई ESXi होस्ट अब भी खोले बैठा है, आपको ज़्यादा से ज़्यादा एक crash-consistent कॉपी देता है:\n- name: Shut the guest down in VMware delegate_to: localhost vmware.vmware.vm_powerstate: moid: \u0026#34;{{ vm_moid }}\u0026#34; state: \u0026#34;{{ \u0026#39;shutdown-guest\u0026#39; if vm_power_state == \u0026#39;poweredOn\u0026#39; else \u0026#39;powered-off\u0026#39; }}\u0026#34; timeout: 600 force: true shutdown-guest VMware Tools के ज़रिए एक साफ़-सुथरा shutdown है; force: true timeout के अंदर न रुकने वाली किसी भी चीज़ को ज़बरदस्ती रोक देता है। नए मॉड्यूल पर पैरामीटर timeout है, state_change_timeout नहीं जैसा deprecated वाले पर था।\nफिर import, जो धुरी है:\n- name: Import each VMDK onto its VM delegate_to: localhost throttle: 2 community.proxmox.proxmox_disk: vmid: \u0026#34;{{ pve_vmid }}\u0026#34; disk: \u0026#34;scsi{{ idx }}\u0026#34; storage: \u0026#34;{{ pve_target_storage }}\u0026#34; import_from: \u0026gt;- {{ item.backing.fileName | regex_replace(\u0026#39;^\\[[^\\]]+\\]\\s*\u0026#39;, \u0026#39;/mnt/pve/\u0026#39; ~ nfs_storage_pve ~ \u0026#39;/\u0026#39;) }} format: \u0026#34;{{ pve_target_format }}\u0026#34; timeout: \u0026#34;{{ import_timeout }}\u0026#34; create: regular state: present loop: \u0026#34;{{ vm_disks }}\u0026#34; loop_control: index_var: idx regex_replace दोनों दुनियाओं के बीच अनुवाद का काम कर रहा है। vCenter डिस्क को [nfs-migration] app01/app01.vmdk नाम देता है; Proxmox उसी फ़ाइल तक /mnt/pve/nfs-migration/app01/app01.vmdk पर पहुँचता है। वही export, वही बाइट, कोई दूसरी कॉपी नहीं। आप descriptor .vmdk रखते हैं और उसके बगल वाले -flat.vmdk को अनदेखा करते हैं; qemu-img descriptor पढ़ता है और उसके पीछे extent तक जाता है।\nimport_from के बारे में तीन बातें, जो सब मॉड्यूल में हैं और सब window खुलने से पहले जानने लायक हैं।\nयह सिर्फ़ create पर चलता है। update वाली शाखा में:\n# \u0026#39;import_from\u0026#39; fails on disk updates playbook_config = self.get_create_attributes() playbook_config.pop(\u0026#34;import_from\u0026#34;, None) अगर उस VM पर scsi0 पहले से मौजूद है, तो पैरामीटर हटा दिया जाता है और आपको साधारण update मिलता है। तो खराब import के बाद दोबारा चलाने से दोबारा import नहीं होता। यह चुपचाप कुछ भी नहीं करता और सफलता की रिपोर्ट देता है। अगर import गलत हो जाए, तो फिर से कोशिश करने से पहले डिस्क मिटाइए।\ntimeout का डिफ़ॉल्ट 600 सेकंड है। एक वर्चुअल मशीन की डिस्क import और convert करने के लिए दस मिनट। मॉड्यूल का अपना डॉक्यूमेंटेशन इसे बढ़ाने को कहता है; सलाह मानिए।\nऔर absolute path के लिए root चाहिए। डॉक्यूमेंटेशन इस बारे में साफ़ है:\n\u0026lt;STORAGE\u0026gt;:\u0026lt;VMID\u0026gt;/\u0026lt;FULL_NAME\u0026gt; or \u0026lt;ABSOLUTE_PATH\u0026gt;/\u0026lt;FULL_NAME\u0026gt;. \u0026lt;STORAGE\u0026gt;:import/\u0026lt;FULL_NAME\u0026gt; for PVE 9.x and later, to use storage\u0026rsquo;s import directory. Attention! Only root can use absolute paths.\nयह उस सलाह से अटपटे ढंग से टकराता है जो मैंने पिछली बार दी थी और जिस पर अब भी कायम हूँ: root नहीं, एक सीमित API token इस्तेमाल कीजिए। वह सलाह यहाँ के हर दूसरे चरण पर लागू है: discovery, SDN, शेल बनाना, boot order सेट करना, सब token के साथ ठीक काम करते हैं। यह एक टास्क नहीं करता, और role पर कितने भी अधिकार दें इसे नहीं बदलेंगे, क्योंकि पाबंदी किसी permission पर नहीं, user के root होने पर है।\nबाहर निकलने के तीन ईमानदार रास्ते हैं, और कोई चतुर चौथा नहीं:\nPVE 9.x: \u0026lt;storage\u0026gt;:import/\u0026lt;file\u0026gt; इस्तेमाल कीजिए और token पर ही रहिए। PVE 8.x: यह एक टास्क root@pam के रूप में कीजिए, और सिर्फ़ यही एक। PVE 8.x, API पर root के बिना: इसकी बजाय SSH पर qm importdisk चलाइए। Playbook पहले दो को एक flag के ज़रिए लेता है, क्योंकि कुछ और दिखावा करना समस्या को बस उस व्यक्ति तक खिसका देगा जो इसे चलाता है।\nआखिर में boot order, जो एक साधारण update है और इसलिए update_unsafe वाली पाबंदी से अछूता है:\n- name: Boot from the first imported disk delegate_to: localhost community.proxmox.proxmox_kvm: node: \u0026#34;{{ proxmox_node }}\u0026#34; vmid: \u0026#34;{{ pve_vmid }}\u0026#34; boot: \u0026#34;order=scsi0\u0026#34; update: true गेस्ट को कुछ भी शुरू नहीं करता। यह जानबूझकर है। इसे हाथ से शुरू कीजिए, इसे उठते हुए देखिए, और तभी VMware में कुछ भी मिटाने के बारे में सोचिए।\nइसे चलाना पूरा काम एक playbook है, चरण के हिसाब से tag किया हुआ, क्योंकि ये ऐसे कदम नहीं हैं जिन्हें आप एक साथ चलाना चाहें:\nansible-playbook migrate.yml --tags discover # look, change nothing ansible-playbook migrate.yml --tags sdn # build the VLANs ansible-playbook migrate.yml --tags build # build the diskless shells ansible-playbook migrate.yml --tags relocate # storage vMotion, live ansible-playbook migrate.yml --tags cutover # power off and import --limit पूरे समय आपका दोस्त है। पहले एक VM कीजिए। एक cluster कीजिए। Playbook की इस पर कोई राय नहीं कि आप कितना उठाते हैं, और inventory आपको groups मुफ़्त में देती है: power_poweredOn, cluster_\u0026lt;name\u0026gt;, और groups block से vmware_windows और vmware_linux।\nजिस पर निशाना साध रहे हैं, निशाना साधने से पहले उसे जाँचिए:\nansible-inventory --graph ansible-inventory --host some-vm मैं अब भी किन बातों पर नज़र रखूँगा जो चीज़ें मैं उम्मीद करता हूँ कि असली एस्टेट से मिलने पर सामने आएँगी, अभी लिख दी हैं ताकि बाद में यह दावा न कर सकूँ कि मुझे पहले से पता था:\nWindows गेस्ट VirtIO SCSI controller से साफ़ बूट नहीं होंगे जब तक ड्राइवर पहले से मौजूद न हो। virtio-scsi-single सही controller है और उस Windows VM को देने के लिए गलत, जिसने इसे कभी देखा नहीं। यह अपने आप में पूरी समस्या है और ऊपर की किसी चीज़ से हल नहीं होती। VMware Tools माइग्रेशन से पहले हटने चाहिए, बाद में नहीं। Snapshots। snapshot chain वाले VM में हर डिस्क पर एक से ज़्यादा .vmdk होते हैं, और base को import करने से आपको snapshot से पहले की स्थिति मिलती है। पहले consolidate कीजिए। config.hardware.device का क्रम तय करता है कि कौन सी डिस्क scsi0 बनेगी। जहाँ भी मैंने देखा, यह गेस्ट के अपने क्रम से मेल खाता रहा है, लेकिन window में भरोसा करने से पहले मैं इसे multi-disk डेटाबेस सर्वर पर जाँच लूँगा। Independent और RDM डिस्क साधारण डिस्क की तरह storage-vMotion नहीं होंगी। इनमें से कुछ भी आकार नहीं बदलता। पहले शेल बनाइए, सब कुछ चालू रहते हुए डिस्क खिसकाइए, और outage को उस एक play तक सीमित रखिए जिसे इसकी ज़रूरत है।\n","permalink":"https://blogs.damiendye.uk/hi/ansible/vmware-to-proxmox-ansible/","summary":"डायनेमिक inventory से vSphere एस्टेट पढ़ना, उसके VLANs को Proxmox SDN में उतारना, और कोई भी डिस्क हिलने से पहले हर VM को बिना डिस्क वाले शेल के रूप में दोबारा बनाना। हर VMware info मॉड्यूल वही एक फ़ील्ड क्यों छिपाता है जिसकी माइग्रेशन को ज़रूरत है, vlan_id तीन अलग-अलग टाइप का क्यों है, और दो बार माउंट किया गया एक NFS export कटओवर को लोकल रीड में क्यों बदल देता है।","title":"Ansible से VMware से Proxmox: एक भी बाइट हिलाने से पहले शेल बनाइए"},{"content":"2017 से 2019 तक मैं Nominet में, यानी .uk रजिस्ट्री में, DNS रजिस्ट्री सिस्टम एडमिन था। ICANN के बारे में आगे जो कुछ है वह सब सार्वजनिक रिकॉर्ड है और मैंने हर चीज़ का लिंक दिया है। जहाँ मैं उस नौकरी के अनुभव से बोल रहा हूँ, वहाँ यह साफ़ कह देता हूँ।\nज़्यादातर इंजीनियरों से पूछिए कि DNS कौन चलाता है, तो दो में से एक जवाब मिलता है। या तो कंधे उचका दिए जाते हैं, या तेरह रूट सर्वरों के बारे में कुछ कहा जाता है। दोनों ग़लत हैं, और दूसरा ज़्यादा दिलचस्प तरीक़े से ग़लत है, क्योंकि वह फ़ाइल की बजाय मशीनों की तरफ़ इशारा करता है।\nDNS का नियंत्रण तेरह सर्वरों में बँटा हुआ नहीं है। वह एक टेक्स्ट फ़ाइल में बैठा है, और उन गिनी-चुनी संस्थाओं में जो तय करती हैं कि उसमें क्या जाएगा, उसे संपादित करती हैं, साइन करती हैं और प्रकाशित करती हैं। सिस्टम की बाक़ी हर चीज़, हर resolver, हर registrar, आपने जो भी ज़ोन कभी चलाया हो, सब उस फ़ाइल के नीचे की धारा में है और अपना अधिकार उसी से लेता है।\nयह पोस्ट इस बारे में है कि वह फ़ाइल किसके पास है, 2016 के हस्तांतरण ने असल में क्या सौंपा, और जिनके पास वह है उन्होंने उसके साथ क्या किया। उसके नीचे की मशीनरी, यानी रजिस्ट्री असल में क्या होती है, नाम उसमें कैसे पहुँचते हैं, और किसी नाम को कौन छीन सकता है, यह अगली पोस्ट का विषय है।\nICANN से पहले, यह एक फ़ोन कॉल था आज की व्यवस्था में कुछ भी अपरिहार्य नहीं है, और इतिहास बताता है कि ICANN असल में किस चीज़ को ठीक करने के लिए बना था।\nशुरुआत में DNS था ही नहीं। 1972 से एक टेक्स्ट फ़ाइल थी, HOSTS.TXT, जिसमें ARPANET की हर मशीन का नाम और उसका पता दर्ज था। उसे Stanford Research Institute में Elizabeth Feinler और उनकी टीम रखती थी, और अगर आप अपनी मशीन उसमें चाहते थे तो दफ़्तर के समय में Network Information Center को फ़ोन करके कहते थे। बाक़ी सब लोग समय-समय पर वह फ़ाइल उठा लेते थे और उम्मीद करते थे कि वह ताज़ा हो।\nयह तरीक़ा बड़ा नहीं हो सकता, और 1980 के दशक की शुरुआत तक साफ़ था कि नहीं हो रहा। DNS उसकी जगह लेने के लिए बना: एक पेड़, जो नीचे की ओर सौंपा जाता है, ताकि किसी एक दफ़्तर को पूरी सूची न रखनी पड़े।\nपेड़ का सिरा फिर भी किसी को तो रखना था। बरसों तक वह कोई एक आदमी था। University of Southern California में Jon Postel अमेरिकी सरकार के रिसर्च पैसे पर नाम और नंबर के आवंटन चलाते थे। IANA, यानी Internet Assigned Numbers Authority, उस समय कोई संस्था नहीं थी। वह Postel और उनके कुछ साथी थे, और यह इसलिए चलता था क्योंकि नेटवर्क चलाने वाले लोग उन पर भरोसा करते थे।\nपैसा 1993 में आया, जब National Science Foundation ने रजिस्ट्रेशन संभालने के लिए InterNIC को ठेका दिया, जिसमें Network Solutions भी शामिल थी। 14 सितंबर 1995 को मुफ़्त रजिस्ट्रेशन ख़त्म हो गया। Network Solutions ने कम से कम दो साल के लिए $50 सालाना लेना शुरू किया, और उसका 30% एक सरकारी फ़ंड में जाता था जिसे बाद में एक अदालत ने ग़ैरक़ानूनी टैक्स ठहराया। एक कंपनी, एक दाम, जाने की कोई और जगह नहीं, और 1997 तक एक antitrust मुक़दमा।\nफिर जनवरी 1998 में Postel ने वह काम किया जो बताता है कि रूट का अधिकार असल में किस चीज़ से बना है।\nउन्होंने बारह में से आठ रूट सर्वर ऑपरेटरों को ईमेल किया, सिर्फ़ अपनी साख के बल पर, और कहा कि वे अपने सर्वरों को Network Solutions की मशीन की बजाय IANA की मशीन की ओर मोड़ दें। आठों ने ऐसा किया। लगभग एक हफ़्ते तक इंटरनेट का आधिकारिक रूट वहीं था जहाँ देखने के लिए Jon Postel ने लोगों से कहा था।\nउन्होंने इसे एक परीक्षण कहा। बहुत लोगों ने इसे एक प्रदर्शन के रूप में पढ़ा: कि रूट उन इंजीनियरों का है जिन्होंने उसे बनाया, किसी सरकारी ठेकेदार का नहीं। Washington ने कौन-सा अर्थ लिया, यह उसकी प्रतिक्रिया से तय हो जाता है। इस मामले पर राष्ट्रपति के सलाहकार Ira Magaziner ने Postel से कहा कि वे इंटरनेट पर फिर कभी काम नहीं करेंगे। परीक्षण पलट दिया गया।\nउसी सितंबर ICANN को California में निगमित किया गया। अगले महीने Postel की मृत्यु हो गई।\nतो जिस व्यवस्था के बारे में यह पोस्ट है, वह दो असली समस्याओं को ठीक करने के लिए बनी थी: एक namespace जिसे कोई जवाबदेही न रखने वाला एकाधिकारी बेच रहा था, और एक रूट जिसका अधिकार इस पर टिका था कि एक आदमी पर व्यापक भरोसा है। दोनों असली समस्याएँ थीं। ICANN उनका जवाब था। वह जवाब आख़िर क्या निकला, यही इस पोस्ट का बाक़ी हिस्सा है।\nदो कोड जो नियम से ज़्यादा जिए आगे बढ़ने से पहले उस दौर के दो अधूरे सिरे, क्योंकि ये दोनों मिलकर बताते हैं कि यह सिस्टम असल में कैसे चलता है, ICANN के bylaws में लिखी किसी भी बात से ज़्यादा।\nUK ने ग़लत कोड लिया और उसे रखे रहा।\nअक्टूबर 1984 में RFC 920 ने कहा कि देशों के टॉप-लेवल डोमेन ISO 3166 के दो-अक्षर वाले कोड से लिए जाएँगे। United Kingdom का ISO 3166 कोड GB है। लिखे हुए नियम के हिसाब से UK का डोमेन .gb होना चाहिए।\nऐसा नहीं है, क्योंकि UK वहाँ पहले पहुँच गया। अकादमिक नेटवर्क JANET ने ISO पर आधारित सूची बनने से कुछ महीने पहले ही uk को अपना टॉप-लेवल पहचानकर्ता तय कर लिया था, और .uk 24 जुलाई 1985 को रजिस्टर हुआ। .gb भी आवंटित किया गया, इस समझ के साथ कि .uk समय आने पर उसमें चला जाएगा।\nवह बदलाव कभी नहीं हुआ। किसी ने उसे होने नहीं दिया। फिर .gb चार दशक तक रूट में पड़ा रहा, और अपने पूरे जीवन में उसे एक ही second-level डोमेन मिला, hmg.gb, Her Majesty\u0026rsquo;s Government के लिए, जिसका भी मुश्किल से इस्तेमाल हुआ। आख़िरकार ISO ज़मीनी सच्चाई के आगे झुक गया और United Kingdom के अनुरोध पर UK को अपवाद के तौर पर आरक्षित कर दिया।\nवैसे किसी का कुछ छीना नहीं गया। UK किसी दूसरे देश का कोड नहीं था। वह ISO 3166 में अपवाद के तौर पर United Kingdom के लिए, United Kingdom के ही अनुरोध पर, आरक्षित है, और किसी दूसरे राज्य का उस पर कभी दावा नहीं था। ठीक इसी वजह से किसी ने मामला आगे नहीं बढ़ाया: शिकायत करने वाला कोई पीड़ित पक्ष था ही नहीं।\nऔर यही बात इसे सुनाने लायक़ बनाती है। जो कोई अंदर आना चाहता है उसके लिए ISO 3166 का नियम सख़्त है: सूची में नाम नहीं, तो country-code डोमेन नहीं। इसीलिए इलाक़े ISO 3166 में जोड़े जाने के लिए पैरवी करते हैं, और इसीलिए जिन जगहों को मान्यता नहीं है उनके पास कोई ccTLD नहीं है। जो पहले से रूट में बैठा था, उसके लिए वही नियम बस एक सुझाव निकला।\nयह तर्क भी ठीक-ठाक दिया जा सकता है कि UK को बेहतर नाम मिला। GB का मतलब Great Britain है, जिसमें Northern Ireland नहीं आता। UK में आता है। नियम न मानने वाला कोड राज्य का वर्णन नियम मानने वाले कोड से ज़्यादा सही करता है।\nऔर Soviet Union अब भी रूट में है। यह वाला और अजीब है।\n.su 19 सितंबर 1990 को Soviet Union को सौंपा गया। Soviet Union पंद्रह महीने बाद अस्तित्व में नहीं रहा।\nवह अब भी वहीं है। जिस राज्य का वह है उसके ख़त्म होने के पैंतीस साल बाद भी .su चालू है और रजिस्ट्रेशन ले रहा है: मई 2025 तक 111,500 से कुछ ज़्यादा नाम, जिनका प्रबंधन Moscow से होता है।\nनियम कहता है कि ccTLD ISO 3166 से आते हैं। ISO 3166 में Soviet Union नहीं है। और ऐसा भी नहीं कि नियम कभी लागू ही नहीं हुआ: East Germany का .dd और Yugoslavia का .yu, दोनों अपने राज्यों के साथ चले गए। .su वह अकेला था जो नहीं गया, और नियम के हिसाब से इस फ़र्क़ को कोई कभी समझा नहीं पाया।\nवह क्या बन गया, इसका अंदाज़ा लगाना मुश्किल नहीं। जब 2011 के अंत में .ru ने अपनी रजिस्ट्रेशन जाँच कड़ी की, तो धंधा बग़ल वाले घर में चला गया। .su में ग़लत नीयत वाली साइटें 2011 में दोगुनी हुईं और 2012 में फिर दोगुनी हुईं, जो वही कहानी है जो इस पोस्ट में आगे सस्ते नए gTLDs और मुफ़्त ccTLDs की है: दुरुपयोग एक तरल है, और वह वहीं बहता है जहाँ जाँच सबसे कमज़ोर हो।\nतो दो country code, जो उस नियम से ज़्यादा जिए जिसने उन्हें बनाया था। .uk इसलिए कि किसी ने पहले से बैठे को हटने पर मजबूर नहीं किया, .su इसलिए कि किसी ने एक delegation को उसके देश के साथ जाने पर मजबूर नहीं किया। दोनों मामलों में नियम-पुस्तिका साफ़ है और दोनों में वह लागू नहीं हुई, क्योंकि लागू करने का मतलब होता किसी ऐसे से कुछ छीनना जिसके पास वह पहले से था।\nDNS में अधिकार का पूरा स्वभाव यही है, ICANN के बनने से पहले से दिखता हुआ, और इसलिए आगे जो कुछ है उसमें से कुछ भी आपको चौंकाना नहीं चाहिए।\nहस्तांतरण तक के अठारह साल ICANN को 30 सितंबर 1998 को California में निगमित किया गया और उसने तुरंत US Department of Commerce के साथ एक Memorandum of Understanding पर दस्तख़त किए। वह स्वतंत्र शुरू होकर अमेरिकी नहीं बना। वह बनावट से ही पहले दिन से अमेरिकी था, और यह व्यवस्था किसी न किसी रूप में अठारह साल तक नवीनीकृत होती रही।\nशुरुआत उस चीज़ से कीजिए जो उसने सही की, क्योंकि ऐसी एक चीज़ है और वह मायने रखती है।\n1999 में ICANN ने रजिस्ट्रेशन का एकाधिकार तोड़ा। .com ख़रीदने की अकेली जगह Network Solutions थी; Shared Registration System ने दूसरे registrars को उसी ज़ोन में नाम बेचने दिए, और दाम नीचे आया और आता रहा। यह असली उपलब्धि है, आज एक डोमेन की जो क़ीमत है उसकी वजह यही है, और इस पोस्ट में आगे की कोई भी बात इसे रद्द नहीं करती।\nफिर वह पैटर्न शुरू होता है जो बाक़ी हर चीज़ में चलता है।\n2000. ICANN ने एक वैश्विक चुनाव कराया जिसमें इंटरनेट उपयोगकर्ताओं ने सीधे पाँच बोर्ड सदस्य चुने। वह फिर कभी नहीं दोहराया गया। उसकी जगह आया at-large ढाँचा सलाह देता है, वोट नहीं करता। पहली और आख़िरी बार जब जनता को ICANN में बाध्यकारी आवाज़ मिली, ICANN ने उसे बंद कर दिया।\n2005. Tunis में World Summit on the Information Society में दुनिया के एक बड़े हिस्से ने अमेरिका के रूट रखने पर आपत्ति की। नतीजा निकला Internet Governance Forum: एक सालाना सम्मेलन जिसके पास किसी चीज़ पर कोई अधिकार नहीं। रूट की व्यवस्था नहीं बदली।\n2005. .xxx का मामला, जो छह साल चला और इस पूरी पोस्ट में सबसे तीखा अकेला सबूत है कि क्षेत्राधिकार कोई अमूर्त चीज़ नहीं है। United States के सामाजिक रूप से रूढ़िवादी लॉबी समूहों ने Department of Commerce पर दबाव डाला। NTIA, यानी National Telecommunications and Information Administration, Commerce की वह शाखा जिसके पास ICANN के साथ समझौता था, ने ICANN को चिट्ठियों के मसौदे लिखे और, उसी के शब्दों में, ICANN पर अपने संसाधन झोंक दिए। बोर्ड, जो मंज़ूरी की ओर बढ़ रहा था, ने आवेदन ठुकरा दिया, नौ के मुक़ाबले पाँच से, फिर दोबारा आठ के मुक़ाबले चार से, और चेयरमैन और CEO दोनों ने अपना रुख़ पलट दिया। उस समय ज़िम्मेदार European commissioner Viviane Reding ने इसे अमेरिकी सरकार द्वारा ICANN में राजनीतिक दख़ल का पहला साफ़ मामला कहा। .xxx आख़िरकार 2011 में मंज़ूर हुआ, और तब Department of Commerce ने घोषणा की कि वह निराश है।\nएक अमेरिकी घरेलू लॉबिंग अभियान, एक अमेरिकी संघीय एजेंसी के ज़रिए, ने बदल दिया कि इंटरनेट पर कौन-से टॉप-लेवल डोमेन होंगे। कोई संधि नहीं, कोई अदालत नहीं, United States के बाहर कोई वोट नहीं।\n2009. Commerce के साथ Joint Project Agreement की जगह Affirmation of Commitments आया, जिसे बड़े पैमाने पर ICANN के स्वतंत्र होने के रूप में लिखा गया। IANA functions का ठेका ठीक वहीं रहा जहाँ था।\nफिर वह चीज़ जिसने इसे असल में हिलाया, और वह ICANN का किया कुछ नहीं था।\n2013. Edward Snowden। खुलासों के महीनों बाद, 7 अक्टूबर को, ICANN, Internet Engineering Task Force, Internet Architecture Board (IAB), World Wide Web Consortium, Internet Society और सभी पाँच क्षेत्रीय इंटरनेट रजिस्ट्रियों के प्रमुखों ने Montevideo Statement प्रकाशित किया, जिसमें ICANN और IANA functions के वैश्वीकरण की माँग की गई और साफ़ शब्दों में उस नुक़सान का हवाला दिया गया जो व्यापक निगरानी ने वैश्विक भरोसे को पहुँचाया था। इंटरनेट के अपने तकनीकी नेतृत्व ने, जिसमें दस्तख़त करने वालों में ICANN के मुख्य कार्यकारी भी थे, खुलकर कहा कि अमेरिकी संरक्षण एक बोझ बन गया है।\n14 मार्च 2014. NTIA ने IANA functions का अपना संरक्षण सौंपने का इरादा घोषित किया।\n1 अक्टूबर 2016. ठेके की अवधि ख़त्म हो गई।\nतो हस्तांतरण न कमाया गया था और न गुण-दोष पर दिया गया था। वह अठारह साल बाद रियायत के तौर पर दिया गया, क्योंकि एक अमेरिकी ख़ुफ़िया कांड ने मौजूदा व्यवस्था को राजनीतिक रूप से बचाव के लायक़ नहीं छोड़ा और तकनीकी समुदाय ने यह सबके सामने कहा।\nजब आप पढ़ें कि हस्तांतरण ने असल में क्या किया, तो यह बात याद रखने लायक़ है।\n2016 के हस्तांतरण ने क्या बदला, और क्या नहीं आप सुनेंगे कि 2016 में अमेरिकियों ने इंटरनेट सौंप दिया। जो भी यह तर्क देता है कि ICANN अमेरिकी नियंत्रण का औज़ार है, उसे यही बताया जाता है, और अगर उसके तथ्य ग़लत हैं तो वह वहीं बहस हार जाता है। तो उन्हें सही रखिए।\n1 अक्टूबर 2016 को NTIA और ICANN के बीच IANA functions के ठेके की अवधि ख़त्म हुई और उसका नवीनीकरण नहीं हुआ। यह असली था। अमेरिकी सरकार के पास अब ऐसा कोई ठेका नहीं है जो उसे रूट ज़ोन के बदलावों पर मंज़ूरी का अधिकार देता हो, और नए bylaws ने एक Empowered Community बनाई जिसके पास बजट ठुकराने और बोर्ड सदस्यों को हटाने की सैद्धांतिक क्षमता है।\nयह रहा जो नहीं बदला, और यह कोई चूक नहीं थी। इसे एक उद्देश्य के रूप में लिखा गया था।\nहस्तांतरण के प्रस्ताव में लिखा था कि ICANN जिस क़ानूनी क्षेत्राधिकार में है वह बदला नहीं जाएगा। नए bylaws ICANN से California में मुख्यालय बनाए रखने की माँग करते हैं। हस्तांतरण के दौरान बना जवाबदेही का पूरा ढाँचा California क़ानून पर बना है। वह इस तरह काम करता है कि ICANN एक Californian non-profit है जिसे उसके अपने articles पर टिके रहने के लिए Californian अदालतों से कहा जा सकता है।\nतो महान हस्तांतरण के बाद: ICANN एक California corporation है, अमेरिकी संघीय और Californian क़ानून के अधीन, जिसकी जवाबदेही की व्यवस्थाएँ अमेरिकी अदालतों में लागू हो सकती हैं और कहीं नहीं, और जो एक ऐसे रूट ज़ोन के लिए नीति तय करता है जिसे एक अमेरिकी कंपनी अमेरिकी Department of Commerce के साथ एक समझौते के तहत संपादित और साइन करती है।\nठेका चला गया। क्षेत्राधिकार जानबूझकर रखा गया। और क्षेत्राधिकार ही वह हिस्सा है जिसके दाँत हैं, क्योंकि उसे किसी के दख़ल की ज़रूरत नहीं। वह अपने आप, हर समय, डिफ़ॉल्ट रूप से लागू होता है।\nइसका सबसे साफ़ प्रदर्शन प्रतिबंध हैं। OFAC, यानी Office of Foreign Assets Control, जो US Treasury का हिस्सा है, अमेरिकी आर्थिक और व्यापारिक प्रतिबंध चलाता है, और तय करता है कि अमेरिकी व्यक्ति और कंपनियाँ किससे कारोबार कर सकते हैं। ICANN एक California corporation है, इसलिए OFAC उस पर बाध्यकारी है, और यह सीमित करता है कि ICANN किससे ठेका कर सकता है और किसे मान्यता दे सकता है।\nदायरे के बारे में सटीक रहिए: यह generic top-level domain (gTLD) रजिस्ट्रियों और registrars तक पहुँचता है, क्योंकि उनके पास ICANN के ठेके हैं। यह country-code (ccTLD) संचालन तक नहीं पहुँचता, जो ICANN के ठेके वाले ढाँचे से पूरी तरह बाहर हैं। लेकिन असर क़ानूनी सीमा से काफ़ी आगे रिसता है, क्योंकि United States के बाहर के registrars ने अपने ही ग्राहकों पर OFAC की पाबंदियाँ लागू की हैं, इस ग़लत धारणा में कि ICANN का ठेका होने पर यह ज़रूरी है, या बस अमेरिकी registrant agreements की नक़ल करके। अमेरिकी विदेश नीति registrar की कड़ी में नीचे उतनी ही नक़ल से फैलती है जितनी क़ानून से।\nइसका कोई ऐसा रूप नहीं है जिसमें “DNS को कौन नियंत्रित करता है” का जवाब United States से शुरू न होता हो।\nICANN के किसी फ़ैसले के बारे में फिर कौन कुछ कर सकता है, यह सवाल का दूसरा आधा हिस्सा है, और उसे तब पूछना बेहतर है जब उसे परखने के लिए एक रिकॉर्ड हो। यह पोस्ट अंत में उस पर लौटती है।\nरूट एक टेक्स्ट फ़ाइल है इतना हुआ कि कौन ज़िम्मेदार है। यह रही वह चीज़ जिसके वे ज़िम्मेदार हैं, और आप उसे बस उठा सकते हैं। ICANN रूट ज़ोन को zone transfer से प्रकाशित करता है, यानी AXFR, DNS का वह तरीक़ा जिससे एक रिकॉर्ड की बजाय पूरा ज़ोन कॉपी होता है, और यह किसी को भी जो माँगे, बिना किसी credentials के:\ndig . AXFR @xfr.dns.icann.org अभी यह 24,886 लाइनों में 1,578,790 bytes है। इसमें 1,439 delegations हैं, यानी हर टॉप-लेवल डोमेन जो मौजूद है, जिनमें से 1,350 में DS रिकॉर्ड है, यानी delegation signer, वह fingerprint जो किसी child ज़ोन की signing key को उसके parent से बाँधता है, और इसलिए वे साइन की गई कड़ी का हिस्सा हैं।\nडेढ़ मेगाबाइट। इंटरनेट का पूरा namespace, इतना छोटा कि ईमेल से भेजा जा सके।\nवह फ़ाइल ही रूट का पूरा अधिकार है। ठंडी शुरुआत करने वाला resolver अपने root hints के पतों के सिवा कुछ नहीं जानता, और जिस पल उसे जवाब मिलता है, वह उसी फ़ाइल से निकले delegations का पीछा कर रहा होता है, कहीं और से नहीं। उसमें एक delegation बदलिए और आपने बदल दिया कि एक पूरे देश का ट्रैफ़िक कहाँ जाता है। अलग राय रखने वाली कोई दूसरी कॉपी नहीं है, कोई consensus protocol नहीं, resolution के समय कोई वोट नहीं। फ़ाइल है, बस।\nतो सवाल “DNS को कौन नियंत्रित करता है” सिमटकर कहीं संकरा सवाल बन जाता है: वह फ़ाइल कौन बदल सकता है, और उसके बाद उसे कौन साइन करता है।\nतीन संगठन इसे छूते हैं जवाब तीन की एक कड़ी है, और यह साफ़ रखना ज़रूरी है कि कौन क्या करता है, क्योंकि सारी बहसें इन्हीं फ़र्क़ों में रहती हैं।\nPTI, यानी Public Technical Identifiers, ICANN की एक सहयोगी संस्था, IANA functions करती है। वह TLD ऑपरेटरों से रूट ज़ोन बदलाव के अनुरोध लेती है, उन्हें जाँचती है, और उन्हें अधिकृत करती है। यह लिपिक वाली परत है, और जानबूझकर ऐसी है: पूरी बनावट का इरादा यही है कि IANA एक सावधान क्लर्क हो जिसके पास कोई विवेकाधिकार न हो।\nVerisign Root Zone Maintainer है। वह अधिकृत बदलाव लेती है, ज़ोन फ़ाइल संपादित करती है, उसे root zone signing key से साइन करती है, और वितरण के लिए प्रकाशित करती है। Verisign एक अमेरिकी पब्लिक कंपनी है, और यह काम वह US Department of Commerce के साथ एक Cooperative Agreement के तहत करती है।\nरूट सर्वर ऑपरेटर फिर उसे परोसते हैं। वे कड़ी का सबसे कम ताक़तवर हिस्सा हैं और अकेला हिस्सा जिसके बारे में किसी ने सुना है।\nदेखिए कि विवेकाधिकार असल में कहाँ बैठा है। ऑपरेटरों के पास नहीं। सच कहें तो क्लर्क के पास भी नहीं। वह उसके पास है जो वह नीति तय करता है जिसे क्लर्क लागू करता है, यानी ICANN, और उस कंपनी के पास जिसके हाथ में क़लम और signing key है, यानी Verisign, अमेरिकी सरकार के साथ एक समझौते के तहत।\nतेरह में से दस रूट सर्वर के अक्षरों को पूरा गिनाना फ़ायदेमंद है, क्योंकि लोग तेरह की संख्या ऐसे बताते हैं जैसे उसका मतलब फैलाव हो:\nअक्षर ऑपरेटर देश A Verisign US B USC Information Sciences Institute US C Cogent Communications US D University of Maryland US E NASA Ames Research Center US F Internet Systems Consortium US G US Department of Defense (DISA) US H US Army Research Laboratory US I Netnod स्वीडन J Verisign US K RIPE NCC नीदरलैंड L ICANN US M WIDE Project जापान तेरह अक्षर, बारह संगठन, क्योंकि A और J दोनों Verisign के पास हैं। तेरह में से दस United States से चलाए जाते हैं। उनमें से दो अमेरिकी सेना हैं।\nयह कोई साज़िश नहीं है, यह जीवाश्म बन चुका इतिहास है। ये वे संस्थाएँ हैं जो 1980 के दशक में नेटवर्क पर थीं और कभी गईं नहीं। लेकिन इतिहास की वह दुर्घटना जो अमेरिकी सेना को इंटरनेट के दो रूट सर्वर चलाने देती है, फिर भी अमेरिकी सेना का इंटरनेट के दो रूट सर्वर चलाना ही है, और इसे एक वैश्विक सिस्टम कहना अजीब बात है।\nऑपरेटरों को बाँधने वाला कोई सार्थक ठेका भी नहीं है। ICANN उन्हें नौकरी पर नहीं रखता और किसी सीधे तरीक़े से उन्हें हटा नहीं सकता। वे रूट इसलिए परोसते हैं क्योंकि हमेशा से परोसते आए हैं। इस परत पर सिस्टम की स्थिरता सद्भावना पर टिकी है और उससे मज़बूत कुछ नहीं, जो ठीक उस दिन तक चलता है जिस दिन नहीं चलता।\nICANN रूट ज़ोन नहीं चलाता यह इस पोस्ट का सबसे अहम तथ्य है और इसे लगभग कभी ज़ोर से नहीं कहा जाता, इसलिए इसे अपना शीर्षक मिलता है।\nICANN रूट ज़ोन का संचालन नहीं करता।\nवह तय करता है कि उसमें क्या जाना चाहिए। वह फ़ाइल संपादित नहीं करता, फ़ाइल साइन नहीं करता, और फ़ाइल परोसता नहीं। Verisign संपादित और साइन करती है। बारह संगठन परोसते हैं। ICANN का काम यह कहना है कि जवाब क्या होना चाहिए, और फिर किसी और से उसे सच करवाना।\nवह बँटवारा ही अकेली चीज़ है जो ICANN पर अंकुश रखती है।\nबँटवारे के बिना इसकी तस्वीर बनाइए। एक ही संस्था नीति तय करती है, क़लम रखती है, signing key की मालिक है और सर्वर चलाती है। किसी चीज़ को तय करने और उस चीज़ के धरती पर हर जगह सच हो जाने के बीच कोई दूसरा पक्ष नहीं, हाथों का कोई दूसरा जोड़ा नहीं, और ना कहने की स्थिति में कोई नहीं। नीचे ICANN के रिकॉर्ड के बारे में आप जो भी सोचें, वह व्यवस्था इससे बदतर होती।\nजैसा अभी है, तीन ब्रेक हैं। उनमें से एक भी किसी bylaw में नहीं है।\nफ़ाइल सार्वजनिक है। कोई भी AXFR से रूट ज़ोन खींच सकता है, कमांड इस पोस्ट में ऊपर है, और उसकी कल वाली फ़ाइल से तुलना कर सकता है। आप चुपचाप कोई delegation नहीं बदल सकते। बदलाव किसी और को करना पड़ता है। संपादन और साइनिंग maintainer करता है। यानी एक और संगठन जिसे यह करने के लिए राज़ी होना पड़ता है, और एक और जो मना कर सकता है। ऑपरेटर सहमति से परोसते हैं। जैसा ऊपर कहा, रूट सर्वर ऑपरेटरों के साथ ICANN का कोई सार्थक ठेका नहीं है। वे ज़ोन इसलिए बाँटते हैं क्योंकि हमेशा से बाँटते आए हैं। कोई चीज़ उन्हें कुछ भी बाँटने के लिए बाध्य नहीं करती, और जैसा Postel ने 1998 में दिखाया, सहमति को कोई ऐसा व्यक्ति हिला सकता है जिस पर उन्हें भरोसा हो और जो उनसे विनम्रता से कहे। आख़िरी वाला असली सहारा है, और जीवित स्मृति में एक परत नीचे इसका इस्तेमाल हो चुका है। जब 2003 में Verisign ने .com को wildcard किया, तो Internet Systems Consortium (ISC) ने BIND में delegation-only भेज दिया और ऑपरेटरों ने बस उन जवाबों को मानना बंद कर दिया। किसी को किसी नीति मंच पर बहस जीतनी नहीं पड़ी। तकनीकी समुदाय की मना करने की क्षमता कहीं लिखी नहीं है और इसमें शामिल हर कोई जानता है कि वह मौजूद है।\nअब असहज हिस्सा, क्योंकि यह जितना लगता है उससे पतला है।\nयह अंकुश किसी ने डिज़ाइन नहीं किया। यह शक्तियों का पृथक्करण नहीं है, यह 1990 के दशक में काम के बँटने के तरीक़े की एक दुर्घटना है, और 2016 के हस्तांतरण ने न इसे मज़बूत किया न इसे लिखा। ऐसा कोई नियम नहीं जो कहे कि नीति तय करने वाली संस्था एक दिन क़लम भी नहीं रख सकती।\nऔर जाँच करने वाला पक्ष एक व्यावसायिक कंपनी है जिसके साथ ICANN कारोबार कर रहा है। Verisign के पास root zone maintainer की भूमिका है, और .com का ठेका, और, जैसा इस पोस्ट का बाक़ी हिस्सा बताता है, ICANN के साथ $20 million का एक समझौता जिस पर .com के दाम बढ़ाने वाली उसी बातचीत में दस्तख़त हुए। जो अंकुश इस पर निर्भर हो कि एक पक्ष दूसरे को मना करने को तैयार है, वह उस दिन काम करना बंद कर देता है जब दोनों साथ बैठकर चीज़ों पर दस्तख़त करने लगें।\nतो यह बँटवारा मौजूदा व्यवस्था की सबसे अच्छी चीज़ है। यह अलिखित भी है, बिना योजना का भी, और आदत के सहारे टिका है।\nNamespace को बेचना शासन की किसी भी बहस से पहले, एक सीधी चीज़ दिखाती है कि namespace का एक टुकड़ा रखने वाले लोग उसके साथ क्या करते हैं जब उन्हें कुछ नहीं रोकता। यह बार-बार हुआ है, हर परत पर, और पहली बार जब यह सबसे ऊपर हुआ तो उन्नीस दिन चला।\n15 सितंबर 2003 को Verisign ने .com और .net ज़ोन में एक wildcard A रिकॉर्ड जोड़ा:\n*.com. IN A 64.94.110.11 वह पता उलटकर sitefinder.verisign.com पर जाता है। उस पल से .com और .net का हर नाम मौजूद था। हर टाइपो, हर बिना रजिस्टर हुआ डोमेन, हर बिगड़ा हुआ string, हर expire हो चुका नाम, ये सब resolve होते थे, Verisign के एक search page पर, जिस पर Verisign के विज्ञापन थे।\nयह विज्ञापन की कहानी क्यों नहीं है उस समय की शिकायतें ज़्यादातर विज्ञापनों के बारे में थीं, और वे असली बात से चूक गईं। NXDOMAIN कोई user-experience फ़ीचर नहीं है। यह एक भार उठाने वाला protocol संकेत है, और DNS के ऊपर का बहुत बड़ा सॉफ़्टवेयर इस पर बना है कि वह पूछ सके “क्या यह नाम मौजूद है?” और सच्चा जवाब पाए।\nनकारात्मक जवाब हटा दीजिए और चीज़ें ऐसे टूटती हैं जिनका browsers से कोई लेना-देना नहीं।\nसबसे बुरा हाल मेल का हुआ, और यही वह हिस्सा है जिसे लोग आज भी ग़लत समझते हैं। Verisign ने कोई wildcard MX रिकॉर्ड प्रकाशित नहीं किया। उसे ज़रूरत ही नहीं थी। RFC 5321 §5.1 कहता है कि जब MX lookup कुछ नहीं लौटाता, तो भेजने वाला डोमेन के address रिकॉर्ड पर लौट आता है और उसे preference 0 पर एक निहित MX मानता है। Verisign ने अभी-अभी .com के हर ग़ैर-मौजूद डोमेन को एक address रिकॉर्ड दे दिया था। तो इंटरनेट का हर MTA, यानी हर mail transfer agent, हर मशीन जो मेल आगे भेजती है, मानक का सही पालन करते हुए, अब soemcompany.com के लिए एक mail exchanger रखता था, और वह Verisign का बक्सा था।\nपोर्ट 25 पर कनेक्ट कीजिए और उसने जवाब दिया:\n220 snubby2-wceast Snubby Mail Rejector Daemon v1.3 ready Verisign का घोषित इरादा काफ़ी वाजिब था: मेल को तुरंत ठुकरा दो ताकि वह दुनिया भर की queues में पड़ी न रहे। अमल वाजिब नहीं था। Snubby तभी हार मानता था जब भेजने वाला MTA संदेश का body भेज चुका होता, और ऐसा कोड लौटाता था जिसे ज़्यादातर MTAs अस्थायी विफलता पढ़ते थे, तो तुरंत bounce की बजाय, ग़लत टाइप किए पतों पर मेल मरने से पहले दिनों तक दोबारा भेजी जाती रही। ऑपरेटरों के NANOG list पर शिकायत करने के बाद Verisign ने उसे Postfix पर आधारित एक responder से बदल दिया।\nउसी समय anti-spam भी टूटा, और ज़्यादा चुपचाप। यह जाँचना कि भेजने वाले का डोमेन सच में मौजूद है या नहीं, तब भी और आज भी, फ़िल्टर करने के सबसे सस्ते और सबसे असरदार अनुमान-नियमों में से एक था। रातोंरात दो सबसे बड़े TLDs का हर डोमेन मौजूद हो गया। जाँच हर चीज़ के लिए true लौटाने लगी और भेद करना बंद कर दिया।\nऔर बाक़ी हर चीज़ जो DNS बोलती है पर HTTP नहीं, यानी mail relays, FTP clients, नेटवर्क वाले printers, monitoring systems, उन्हें “no such host” मिलना बंद हो गया और एक वेब सर्वर मिलने लगा, जो ज़्यादातर साफ़ विफलताओं की बजाय timeouts और अटकने के रूप में दिखा। एक मरा हुआ नाम अब एक टूटी हुई सेवा जैसा दिखता था।\nएक कंपनी ने एक ज़ोन फ़ाइल में एक रिकॉर्ड जोड़ा और इंटरनेट के विफल होने का अर्थ बदल दिया।\nइसे किसने रोका शासन ने नहीं। इंजीनियरिंग ने, और फिर एक धमकी ने।\nISC ने कुछ ही दिनों में BIND में delegation-only फ़ीचर भेज दिया, जिससे ऑपरेटर TLD ज़ोन से बनाए गए जवाबों को फेंक सकते थे: तकनीकी समुदाय किसी से अपील करने की बजाय रजिस्ट्री के इर्द-गिर्द से रास्ता निकाल रहा था। बहुत से ISPs ने इसे लगाया।\nICANN ने Verisign से सेवा रोकने को कहा। 21 सितंबर को Verisign ने मना कर दिया। फिर ICANN ने 3 अक्टूबर को, ठेके के नतीजे साफ़ करके, इसकी माँग की, और Verisign ने 4 अक्टूबर 2003 को रिकॉर्ड हटा लिए। IAB ने रजिस्ट्री wildcards पर अपनी architectural आपत्ति प्रकाशित की, और ICANN की अपनी Security and Stability Advisory Committee ने 9 जुलाई 2004 को रिपोर्ट दी कि यह सेवा बिना समीक्षा के कभी लगाई ही नहीं जानी चाहिए थी और रजिस्ट्रियों को wildcards धीरे-धीरे ख़त्म करने चाहिए।\nफिर Verisign ने 27 फ़रवरी 2004 को ICANN पर मुक़दमा किया, यह तर्क देकर कि उसे रोककर ICANN ने अपने अधिकार से बाहर काम किया। उस अगस्त मुक़दमा ज़्यादातर ख़ारिज हो गया, और बाक़ी का 1 मार्च 2006 को समझौता हुआ, ऐसा समझौता जिसने Verisign को .com का एक नया registry agreement दे दिया।\nउस क्रम को एक बार फिर पढ़िए। जिस namespace को चलाने का उसे ठेका मिला था, रजिस्ट्री ने उससे पैसा बनाया, रुकने से मना किया, रुकने पर मजबूर हुई, मजबूर करने वाली संस्था पर मुक़दमा किया, और समझौते से अस्तित्व के सबसे क़ीमती TLD का नवीनीकृत ठेका लेकर निकली। वह आज भी उसके पास है। यह वही कंपनी है जो आज रूट ज़ोन संपादित और साइन करती है।\nफिर बाक़ी सबने भी यही किया रजिस्ट्री को रोकने से विचार नहीं रुका, बस वह एक क़दम नीचे खिसक गया। अगर authoritative सर्वर ग़ैर-मौजूदगी के बारे में झूठ नहीं बोलेगा, तो resolver बोलेगा।\nअगस्त 2006 से Earthlink ने NXDOMAIN जवाबों को Barefruit की ओर मोड़ना शुरू किया, जो search pages और विज्ञापन परोसता था। Paxfire ने यही चीज़ बेची, और साथ में कुछ टाइप किए गए keywords को पैसे देने वाले विज्ञापनदाताओं की ओर मोड़ा। Comcast के “Domain Helper” ने यह बड़े पैमाने पर किया। UK में BT और Virgin Media दोनों ने इसे चलाया। ISP की तरफ़ से अर्थशास्त्र अटल है: ग़लत टाइप किए डोमेन मुफ़्त माल हैं जो आपके अपने ग्राहकों की उँगलियाँ पैदा करती हैं।\nविफलता के तरीक़े Verisign वाले से बदतर थे, क्योंकि resolver हर query देखता है, सिर्फ़ एक TLD नहीं। Barefruit का अमल private address space के लिए भी NXDOMAIN छीन लेता था, जिससे corporate नेटवर्कों पर split-horizon lookups और VPN का व्यवहार टूट जाता था। Dan Kaminsky ने ख़ुद redirect pages पर cross-site scripting (XSS) करके दिखाई, क्योंकि अब दुनिया का हर ग़ैर-मौजूद hostname हमलावर की पहुँच वाले HTML पर resolve होता था, जो ऐसे संदर्भ में परोसा जाता था जिसे browser किसी और के डोमेन से जोड़ता था। ग़लती वाले मामले से पैसा बनाने ने एक विफल lookup को XSS की सतह बना दिया था।\nProtocol वाला इलाज दो चीज़ों ने इसे बंद किया, और दोनों ध्यान देने लायक़ हैं क्योंकि DNS में हर असली इलाज की शक्ल यही है: झूठ को पकड़ने लायक़ बनाओ, फिर उसे ठेके में डालो।\nDNSSEC ग़ैर-मौजूदगी का प्रमाणित इनकार देता है। NSEC और NSEC3 रिकॉर्ड एक साइन किए गए ज़ोन को यह साबित करने देते हैं कि कोई नाम मौजूद नहीं है, और validate करने वाला resolver उसकी जगह बनाए गए जवाब को ठुकरा देगा। ग़ैर-मौजूदगी अब वह अकेला जवाब नहीं रही जिसे कोई जाँच न सके। यह पूरी तरह बंद नहीं है: रास्ते में signatures हटा देने वाला resolver फिर भी जवाब दोबारा लिख सकता है, और ठीक इसीलिए resolver पर भरोसा करने की बजाय client पर validate करना मायने रखता है, और यह तर्क यह साइट पहले ही विस्तार से दे चुकी है।\nऔर ICANN ने, उसकी तारीफ़ में कहें, यह वाला सबक़ सीखा। नए gTLD registry agreement का Specification 6 बिना रजिस्टर हुए नामों के लिए wildcards, बनाए गए रिकॉर्ड और redirection पर साफ़ रोक लगाता है, और authoritative सर्वरों से Name Error, RCODE 3, लौटाने की माँग करता है। 2012 के दौर के 1,200 strings में से हर एक पर ठेके से वह करने की रोक है जो Verisign ने .com के साथ किया।\nयह असली सुधार है, और यह ठीक-ठीक कहना ज़रूरी है कि इसे किसने पैदा किया: शासन की प्रक्रिया ने नहीं, बल्कि 2003 में उन्नीस दिन की दिखती हुई टूट-फूट ने, जो इतनी शर्मनाक थी कि एक दशक बाद उसे ठेके में लिखा गया।\nऔर इसमें से कुछ भी country codes तक नहीं पहुँचा Specification 6 gTLDs को बाँधता है। वह उन्हें इसलिए बाँधता है क्योंकि वे ICANN के साथ एक registry agreement पर दस्तख़त करते हैं, और वही समझौता लीवर है।\nएक ccTLD ऐसे किसी चीज़ पर दस्तख़त नहीं करता। कोई registry agreement नहीं, कोई Specification 6 नहीं, कोई compliance function नहीं, कोई फ़ीस नहीं। ICANN की नियम-पुस्तिका में कुछ भी यह तय नहीं करता कि country-code रजिस्ट्री अपना ज़ोन कैसे चलाती है, और इसीलिए नीचे की दोनों बातें संभव हुईं, और इसीलिए उन्हें रोकने की स्थिति में कोई नहीं था।\nइसका मतलब यह नहीं कि ICANN ग़ायब है, और मैं ठीक-ठीक बताना चाहता हूँ कि वह कहाँ बैठा है, क्योंकि मैंने दो साल उसके पाने वाले सिरे पर बिताए।\nICANN एक ccTLD पर जो पकड़ रखता है वह ख़ुद delegation है। .uk का हर NS रिकॉर्ड, glue का हर टुकड़ा, हर DS रिकॉर्ड और हर contact बदलाव रूट ज़ोन में रहता है, और रूट ज़ोन में जाने का अकेला रास्ता IANA change request है: रजिस्टर किए गए administrative और technical contacts से सत्यापित, और आपके नहीं बल्कि IANA के कार्यक्रम पर निपटाया गया। RFC 1591 के तहत आख़िरी उपाय के तौर पर IANA यह भी तय करता है कि delegation किसके पास रहेगा। Redelegations दुर्लभ हैं। काल्पनिक नहीं हैं।\nतो एक country-code रजिस्ट्री इस पर संप्रभु है कि वह कैसे चलती है, और रूट में दिखने वाली किसी भी चीज़ के लिए पूरी तरह एक तीसरे पक्ष पर निर्भर। जिन पलों में आपको किसी बदलाव के उतरने की सबसे ज़्यादा ज़रूरत होती है, एक nameserver का हटना, एक key rollover जिसका DS पुराने के जाने से पहले प्रकाशित होना ज़रूरी है, ठीक वही पल होते हैं जब आप किसी और की queue का इंतज़ार कर रहे होते हैं। यह शासन की कोई अमूर्त बात नहीं बल्कि एक जीवित परिचालन निर्भरता है, और यह अगली पोस्ट का विषय है।\nअब देखिए कि यह मेल क्या पैदा करता है। ccTLD पर ICANN की पकड़ ठीक वहीं कसी हुई है जहाँ वह सही बर्ताव करने वाली रजिस्ट्री को परेशान करती है, और ठीक वहीं ग़ायब है जहाँ वह ग़लत बर्ताव करने वाली को रोक सकती थी। वह आपका DS रिकॉर्ड रोक सकता है। वह Cameroon को एक पूरे टॉप-लेवल डोमेन को एक विज्ञापन पेज की ओर मोड़ने से नहीं रोक सका।\nतो यह चलन कभी रुका नहीं। बस वह ऐसी जगह चला गया जहाँ ठेका नहीं पहुँचता था।\nCameroon ने टाइपो की फ़सल काटने के लिए एक पूरे टॉप-लेवल डोमेन को wildcard कर दिया।\nअगस्त 2006 में .cm रजिस्ट्री ने ज़ोन के हर बिना रजिस्टर हुए नाम को पैसे वाले search links के एक parking page की ओर मोड़ दिया। इस चाल में कुछ भी बारीक नहीं है: .cm वही .com है जिसमें o छूट गया, तो निशाना अस्तित्व के सबसे बड़े TLD की मोटी-उँगली वाली दर थी, और ऑपरेटर एक सरकारी एजेंसी थी, ANTIC, Cameroon के Ministry of Posts and Telecommunications के तहत।\nइसने अच्छा पैसा दिया। NameJet ने पहले दिन $500,000 से ज़्यादा और पहले हफ़्ते में $2 million से ज़्यादा की .cm बिक्री बताई; 2009 में hotels.cm $81,100 में बिका। इसने ज़ोन की सुरक्षा के साथ भी ठीक वही किया जिसकी आप उम्मीद करेंगे, क्योंकि आने वाला टाइपो ट्रैफ़िक किसी दुश्मन download के लिए आदर्श पहुँचाने का रास्ता है। दिसंबर 2009 में McAfee ने .cm को दुनिया का सबसे जोखिम भरा TLD आँका, जिसकी 36.7% साइटें जोखिम वाली पाई गईं।\nVerisign को वही चाल उन्नीस दिन में वापस लेनी पड़ी। Cameroon ने उसे बरसों चलाया। फ़र्क़ यह नहीं कि एक ज़्यादा बुरा था। फ़र्क़ यह है कि एक ने ठेके पर दस्तख़त किए थे।\nTokelau नाम मुफ़्त बाँटकर धरती का सबसे बड़ा country-code डोमेन बन गया।\nTokelau दक्षिण प्रशांत में New Zealand का एक इलाक़ा है जिसकी आबादी लगभग 1,500 लोग है। उसका ccTLD, .tk, Freenom चलाती थी, जो रजिस्ट्रेशन मुफ़्त देती थी। 2016 तक वह 31,311,498 नामों के साथ दुनिया का सबसे ज़्यादा रजिस्टर हुआ country-code डोमेन था, और संयोग से यह आँकड़ा Nominet के प्रकाशित एक विश्व मानचित्र से आता है।\nमुफ़्त मुफ़्त नहीं था। Freenom की शर्तों में मुफ़्त डोमेन पर नियमित ट्रैफ़िक ज़रूरी था, और यह प्रावधान था कि अगर redirect काम करना बंद कर दे, या नाम पर रखने लायक़ visitors आने लगें, तो रजिस्ट्री उसे वापस ले सकती थी और उस पर अपने विज्ञापन परोस सकती थी। यही पूरा धंधा है, और यह Verisign वाले से ज़्यादा सुघड़ है। यह अंदाज़ा लगाने की कोशिश मत करो कि कौन-से नाम क़ीमती हैं। पूरा namespace शून्य सीमांत लागत पर बाँट दो, दुनिया को तुम्हारे लिए क़ीमती नाम ढूँढने दो, फिर उन्हें ज़ब्त करो और ट्रैफ़िक से पैसा बनाओ। Tokelau की सालाना आमदनी का लगभग छठा हिस्सा इसी से आता था।\nबाहरी नुक़सान बाक़ी सब पर पड़ा। बिना सत्यापन का मुफ़्त रजिस्ट्रेशन थोक दुरुपयोग के लिए आदर्श कच्चा माल है: सस्ते नए gTLDs वाला ही अर्थशास्त्र, पूरा शून्य तक ले जाया गया। जब तक Meta ने मुक़दमा दायर किया, Freenom के पाँच मुफ़्त ccTLDs, .tk, .ml, .ga, .cf, .gq, country-code TLDs से निकलने वाले सभी नए phishing डोमेन के आधे से ज़्यादा का स्रोत थे।\nइसे किसने रोका, यहाँ वही हिस्सा मायने रखता है।\nICANN ने नहीं, जिसके पास न ठेका था न हैसियत। Tokelau ने नहीं, जो अपनी राष्ट्रीय आय का छठा हिस्सा वसूल रहा था। New Zealand ने नहीं। Meta के वकीलों ने, Northern District of California में, मार्च 2023 में, cybersquatting और trademark के दावों पर।\nFreenom ने कुछ ही दिनों में नए रजिस्ट्रेशन रोक दिए। उन extensions से निकलने वाला phishing 60% से ज़्यादा से गिरकर 15% से कम हो गया। Freenom ने फ़रवरी 2024 में समझौता किया और डोमेन का धंधा छोड़ दिया, और उस मार्च तक लगभग 12.6 million डोमेन, उसके पोर्टफ़ोलियो का 99%, resolve होना बंद कर चुके थे।\nएक कंपनी के क़ानूनी विभाग ने, एक अमेरिकी अदालत में, इंटरनेट से साढ़े बारह million नाम हटा दिए। DNS के इतिहास में किसी शासी संस्था ने namespace पर कभी इतना अधिकार नहीं चलाया, और यह शासन के ज़रिए नहीं हुआ।\nयह इस पोस्ट में तीसरी बार है जब “यहाँ असल में कौन कुछ लागू करवाता है” का जवाब California की एक अदालत निकला, और दूसरी बार जब लागू करवाने वाला एक निजी पक्ष था जो अपने व्यावसायिक हित में काम कर रहा था, जो उस मौक़े पर संयोग से बाक़ी सबके हित से मेल खा गया।\nऔर .uk भी एक ccTLD है। ज़ोन कैसे चले, इस पर किसी ठेके की वही ग़ैरमौजूदगी, Specification 6 की वही ग़ैरमौजूदगी, उसे wildcard करने या namespace बाँट देने की वही आज़ादी। उसने इनमें से कुछ नहीं किया। उसकी जगह उसने दुरुपयोग की एक प्रक्रिया चलाई।\nऔर यहीं पर साफ़-सुथरा बँटवारा साफ़-सुथरा नहीं रहता, और इसे जानबूझकर बिगाड़ना ठीक है।\nNominet सिर्फ़ .uk नहीं चलाती। वह generic टॉप-लेवल डोमेन भी चलाती है, अपने भी, और दूसरे ऑपरेटरों की ओर से कई दर्जन और, और उनके लिए वह बाक़ी सबकी तरह ICANN registry agreement पर दस्तख़त करती है, Specification 6 और लगातार निगरानी समेत। उसके अपने प्लेटफ़ॉर्म पर बिना ठेके वाला ज़ोन लगभग तीस के मुक़ाबले एक से अल्पमत में था।\nतो ICANN की शर्तें फिर भी .uk तक पहुँचीं। अधिकार से नहीं, जो उसके पास नहीं था, बल्कि इसलिए कि कोई समझदार आदमी एक ज़ोन की छूट बचाने के लिए दो परिचालन व्यवस्थाएँ साथ-साथ नहीं चलाता। आप सख़्त वाली चीज़ एक बार बनाते हैं और सब कुछ उसी पर चलाते हैं।\nयह वही शक्ल है जो पहले OFAC वाली समस्या की थी: ICANN की औपचारिक पहुँच ठेके पर रुक जाती है, और उसकी असली पहुँच उसके आगे चलती रहती है, उन ऑपरेटरों के ज़रिए फैलती हुई जिनके लिए हर जगह पालन करना फ़र्क़ बनाए रखने से सस्ता है। जिन रजिस्ट्रियों पर असल में ICANN का शासन चलता है उनका दायरा उनसे काफ़ी बड़ा है जिन्होंने किसी चीज़ पर दस्तख़त किए हैं।\nवह जायदाद, उसे चलाना कैसा था, और उसके बाद Nominet के साथ क्या हुआ, यह अपनी अलग पोस्ट है।\nजो उस सवाल को छोड़ता है जिस पर यह पोस्ट अलग-अलग दिशाओं से पहुँचती रहती है: जब ठेके नहीं पहुँचते, तो असल में किसी रजिस्ट्री को जो चाहे करने से कौन रोकता है?\nएक अगली पोस्ट इसका जवाब Nominet के अंदर से देगी: publication pipeline, EPP (वह protocol जिससे registrars किसी रजिस्ट्री में नाम बनाते और बदलते हैं) और उसके नीचे का अर्थशास्त्र, रजिस्ट्री के पैमाने पर साइनिंग, और असल में किसी नाम को कौन छीन सकता है। यह पोस्ट उसके ऊपर वाली परत के बारे में है, और ऊपर वाली परत अच्छी हालत में नहीं निकलती।\nपैसा अगला आरोप सीधा है और उसमें कम व्याख्या की ज़रूरत है।\nवह प्रोडक्ट जो उन्होंने ईजाद किया 2012 में ICANN ने नए generic टॉप-लेवल डोमेन के लिए आवेदन खोले। कोई भी डॉट के दाईं ओर एक नया string चलाने के लिए आवेदन कर सकता था, $185,000 की evaluation फ़ीस पर, जिसका बड़ा हिस्सा वापस नहीं होता था।\nउसे 1,930 आवेदन मिले। यानी evaluation फ़ीस में $350 million से ज़्यादा, एक भी string सौंपे जाने से पहले वसूल। जो आवेदक जल्दी पीछे हटे उन्हें घटते पैमाने पर उसका कुछ हिस्सा वापस मिला; उसका ज़्यादातर हिस्सा वहीं रहा।\nICANN ने फ़ीस को लागत की वसूली बताया।\nफिर, जहाँ दो आवेदक एक ही string चाहते थे और आपस में निजी तौर पर नहीं सुलझाते थे, ICANN ने उनके बीच उसकी नीलामी की और आमदनी रख ली, जो और $240,590,128 बनी। तो इस कार्यक्रम ने आवेदन करने का पैसा लिया, और जीतने का दोबारा लिया।\nवह सवाल पूछिए जो 2008 में पूछा जाना चाहिए था: यह किस समस्या को हल कर रहा था?\nघोषित तर्क था प्रतिस्पर्धा, विकल्प और नवाचार। चौदह साल बाद नतीजे मापे जा सकते हैं। लगभग 1,200 strings सौंपे गए। अगस्त 2026 तक 1,112 नए gTLDs हैं जिनमें कुल मिलाकर लगभग 48.7 million डोमेन हैं, जबकि अकेले .com में उसके दस गुना से ज़्यादा। पुराने एकाधिकार को ज़रा भी नहीं छेड़ा गया। उसकी जगह उसे दाम बढ़ाने का मौक़ा मिला।\nविकल्प वाला तर्क अपने ही सबूत पर गिरता है। 2012 के 34% आवेदन .brand strings के लिए थे, यानी कोई कंपनी अपने ही trademark के लिए आवेदन कर रही थी, ज़्यादातर इसलिए कि वह किसी और के पास न जाए। ये किसी के लिए नए विकल्प नहीं हैं। बहुत से कभी इस्तेमाल ही नहीं हुए। McDonald\u0026rsquo;s ने .mcdonalds कभी launch नहीं किया। Intel ने जुलाई 2016 में .intel लिया और नवंबर 2020 में उसे ख़त्म कर दिया, Symantec ने दो महीने पहले .symantec छोड़ दिया, और SC Johnson ने आठ strings के लिए आवेदन किया, जिनमें .scjohnson, .raid, .glade, .off, .duck थे, फिर जनवरी 2022 में सबको ख़त्म कर दिया। आवेदन की खिड़की के छह साल बाद दस में से एक से ज़्यादा नए gTLDs अब भी launch नहीं हुए थे, 144 sunrise period तक नहीं पहुँचे थे, और L\u0026rsquo;Oréal ऐसे strings पर बैठी थी जिनके लिए उसने कभी कोई योजना घोषित नहीं की थी।\nयह बहुत सारा मरा हुआ namespace है। यह रही वजह कि इससे ICANN को कोई परेशानी नहीं।\nbase registry agreement के तहत एक gTLD ऑपरेटर ICANN को $25,000 सालाना की तय फ़ीस देता है, साथ में हर रजिस्ट्रेशन पर $0.25, लेकिन सिर्फ़ तब जब TLD एक तिमाही में 50,000 transactions पार कर ले। उस सीमा के नीचे कोई transaction फ़ीस नहीं है।\nपढ़िए इसका क्या मतलब है। जिसमें शून्य नाम हैं ऐसे टॉप-लेवल डोमेन से ICANN की आमदनी ठीक उतनी ही है जितनी चालीस हज़ार नाम वाले से: $25,000 सालाना, हर साल, एक ऐसे delegation के लिए जिसे कोई इस्तेमाल नहीं करता। ICANN के बही-खाते में मरा हुआ string विफलता नहीं है। वह बिना support के बोझ वाली एक सालाना आय है।\nICANN के पास इस बात की परवाह करने की कोई आर्थिक वजह नहीं थी कि इसमें से कुछ काम करता है या नहीं, और यह सबूत ढूँढना मुश्किल है कि उसने परवाह की।\nइसकी जगह इंटरनेट को क्या मिला कार्यक्रम ने एक मापने लायक़ असर ज़रूर पैदा किया, और वह वह नहीं है जो प्रॉस्पेक्टस में था।\nजो नए strings बिके, वे दाम पर बिके। जिन रजिस्ट्रियों के पास न ब्रांड था न स्वाभाविक माँग, उन्होंने अकेले उपलब्ध तरीक़े से मुक़ाबला किया: एक डॉलर या उससे कम में एक नाम, थोक में, न्यूनतम जाँच के साथ। वह एक प्रोडक्ट है, और उसे अपना बाज़ार मिल गया।\nInterisle के Cybercrime Supply Chain 2025 अध्ययन ने पाया कि नए gTLDs में रिपोर्ट किए गए cybercrime डोमेन का 47% था जबकि डोमेन बाज़ार में उनका हिस्सा 12% था, यानी लगभग छह गुना ज़्यादा प्रतिनिधित्व। उसी अध्ययन ने हमलों में इस्तेमाल हुए 19.5 million अलग डोमेन दर्ज किए, साल-दर-साल 126% ज़्यादा, जिनमें से 7.3 million थोक में रजिस्टर हुए थे। सबसे ज़्यादा दुरुपयोग वाले डोमेन में वह जो साझा बात पहचानता है, वह यह कि वे सस्ते हैं।\nICANN ने phishing नहीं बनाया। लेकिन उसने इसे करने की 1,200 नई जगहें गढ़ीं, प्रवेश का दाम ऐसा रखा कि उनमें से ज़्यादातर के लिए अकेली चलने लायक़ रणनीति लगभग शून्य लागत पर मात्रा थी, और नतीजा जो भी निकले, हर एक से तय फ़ीस ली।\nकार्यक्रम की अपनी दिखावटी विफलता यह बात किसी भी आँकड़े से बेहतर कहती है। .sucks को Vox Populi को सौंपा गया, जिसने sunrise के दौरान trademark मालिकों से $2,499 प्रति नाम लिए, एक ऐसा दाम जो ठीक इसलिए रखा गया कि ब्रांडों को किसी और को रोकने के लिए इसे देना ही पड़ता। ICANN की प्रतिक्रिया थी predatory pricing के लिए रजिस्ट्री की शिकायत US Federal Trade Commission से करना। FTC ने पाया कि कोई नियम नहीं टूटा था, और टिप्पणी की कि ICANN पहले ही नए gTLD कार्यक्रम के बारे में FTC की उठाई कई चिंताओं को नज़रअंदाज़ कर चुका था।\nपूरी बात एक प्रसंग में यही है। ICANN कार्यक्रम बनाता है, उसके बारे में नियामक की चेतावनियों को नज़रअंदाज़ करता है, string सौंपता है, फ़ीस लेता है, और फिर अनुमान लगाए जा सकने वाले नतीजे की शिकायत नियामक से करता है।\nअगले दौर के आवेदन 2026 में खुले। फ़ीस $227,000 है।\nवे strings जो सौंपने के लिए बहुत ख़तरनाक थे कार्यक्रम ने एक चीज़ और पैदा की, और यह हर उस आदमी के लिए है जिसने कभी कोई internal नेटवर्क बनाया है।\nसंगठन हमेशा से internal इस्तेमाल के लिए टॉप-लेवल डोमेन गढ़ते आए हैं, इस मान्यता पर कि जो नाम सार्वजनिक रूप से मौजूद नहीं है वह कभी होगा भी नहीं। .corp। .home। .mail। .local। कुछ भी चुन लो, अपनी Active Directory में डाल दो, बाहर का कोई उसे देख नहीं सकता।\n2012 के दौर ने उनमें से कुछ को सच में सौंपने का प्रस्ताव रखा, और उस पल उन निजी मान्यताओं में से हर एक एक जीवित सुरक्षा समस्या बन जाती है: internal नाम किसी और के सर्वरों पर resolve होने लगते हैं, जो queries पहले विफल होती थीं वे आपके internal ढाँचे को एक रजिस्ट्री तक लीक करने लगती हैं, और internal नामों के लिए जारी सर्टिफ़िकेट ऐसे नामों के सर्टिफ़िकेट बन जाते हैं जिन पर अब कोई अजनबी नियंत्रण रखता है।\nकिसी ने जाँच नहीं की थी। यह तभी सामने आया जब शोधकर्ताओं ने मापा कि रूट से असल में क्या पूछा जा रहा है, और पाया कि .home और .corp अस्तित्व के सबसे ज़्यादा पूछे जाने वाले strings में थे: भारी इस्तेमाल वाले नाम जो कभी किसी को सौंपे नहीं गए थे। ICANN की अपनी Security and Stability Advisory Committee ने 2013 में, आवेदन आ जाने के बाद, यह मुद्दा उठाया।\n.corp, .home और .mail कभी सौंपे नहीं गए। वे अब भी अनिश्चित काल के लिए टले हुए हैं, क्योंकि उन्हें सौंपने से बहुत कुछ टूट जाएगा। तीन strings जिनके लिए आवेदन हुआ और पैसा दिया गया, अस्तित्व में आने के लिए बहुत ख़तरनाक निकले।\nयह एक ऐसा कार्यक्रम है जिसने रूट को यह तय किए बिना फैलाया कि वह फैलाव किससे टकराएगा, और बाद में दूसरे लोगों की मापों से पता लगाया। अगर इसका व्यावहारिक सिरा चाहिए, तो यही वजह है कि एक internal TLD गढ़ लेना बुरा विचार है: आपका गढ़ा namespace तभी तक निजी है जब तक कोई उसे बेच नहीं देता।\nनीलामी का पैसा जून 2014 से जुलाई 2016 के बीच उन मुक़ाबले वाली नीलामियों ने वह $240,590,128 जुटाया, नीलामी के ख़र्च के बाद लगभग $233 million।\nयह ऐसे namespace के टुकड़े बेचकर पाया गया पैसा है जिसका ICANN मालिक नहीं है और जिसे वह अमानत के तौर पर रखता है। इसके साथ क्या होना चाहिए, इसका एक बचाव लायक़ जवाब है, और समुदाय ने उसे खोजने के लिए एक cross-community working group बनाया।\nजब वह working group अभी बैठक कर ही रहा था, ICANN के बोर्ड ने आमदनी में से $36 million लेकर ICANN के अपने reserve fund में डाल दिए, जो अपने लक्ष्य से $68 million कम चल रहा था। प्रस्तावित नहीं, मंज़ूर। और जब समुदाय ने आपत्ति की, तो उसके सामने रखा गया रुख़ यह था कि विकल्प ICANN का फ़ीस बढ़ाना था।\nworking group फिर भी चलता रहा। बोर्ड ने उसकी सिफ़ारिशें जून 2022 तक नहीं अपनाईं, यानी आख़िरी नीलामी के छह साल बाद, और उस दौरान ICANN ने दूसरों का एक चौथाई billion डॉलर रखा और उसमें से $36 million ख़ुद ले लिए जबकि यह तय करने वाले लोग कि वह किसके लिए है, अभी कमरे में ही थे।\n.org की मूल्य सीमाएँ मार्च 2019 में ICANN ने .org registry agreement को मूल्य सीमाएँ हटाकर नवीनीकृत करने का प्रस्ताव रखा। सीमाएँ ही वह चीज़ थीं जो .org के ऑपरेटर को उन charities, NGOs और non-profits से जो चाहे वसूलने से रोकती थीं, जिनसे बीस साल तक कहा गया था कि .org उनकी जगह है।\nसार्वजनिक टिप्पणी चली। 3,252 टिप्पणियों ने हटाने का विरोध किया। छह ने समर्थन किया। विरोध करने वालों में NPR, YMCA, C-SPAN, National Geographic Society, AARP और National Trust for Historic Preservation थे: डोमेन उद्योग के आम टिप्पणीकार नहीं, बल्कि ठीक वह वर्ग जिसके लिए .org है।\n1 जुलाई 2019 को ICANN ने समझौते पर दस्तख़त कर दिए। कोई सार्वजनिक घोषणा नहीं। दस्तख़त हुए पाठ की प्रस्तावित पाठ से तुलना ने दिखाया कि टिप्पणी अवधि के जवाब में कोई बदलाव नहीं किया गया। “कुछ चिंताओं का समाधान” भी नहीं, वही दस्तावेज़।\nअगर एक सार्वजनिक टिप्पणी प्रक्रिया 542 के मुक़ाबले 1 से विरोध में जा सकती है और एक शब्द भी नहीं बदलता, तो वह परामर्श नहीं है। वह एक औपचारिकता है जो काग़ज़ों का निशान पैदा करती है।\nफिर बिक्री नवंबर 2019 में, चार महीने बाद, Internet Society ने घोषणा की कि वह .org की non-profit ऑपरेटर Public Interest Registry को Ethos Capital, एक private equity फ़र्म, को $1.135 billion में बेच रही है।\nमूल्य सीमा हटाने ने ही PIR को $1.135 billion का बनाया। जो रजिस्ट्री दाम नहीं बढ़ा सकती वह एक सालाना आय है। जो बढ़ा सकती है वह बढ़ने वाली संपत्ति है। ICANN ने चार महीने पहले, एकमत विरोध के बावजूद, पहली को दूसरी में बदल दिया था, और बाज़ार ने तुरंत उसका दाम लगा दिया था।\nEthos Capital मई 2019 में बनी थी। डोमेन ethoscapital.com 8 मई 2019 को ICANN के पूर्व CEO Fadi Chehadé ने रजिस्टर किया था, उसी हफ़्ते जिसमें ICANN स्टाफ़ को मूल्य सीमाएँ हटाने पर अपनी रिपोर्ट प्रकाशित करने की आख़िरी तारीख़ थी। जब सौदे की घोषणा हुई तो Ethos Capital की वेबसाइट पर उनका नाम कहीं नहीं था। उनकी भूमिका WHOIS डेटा की वजह से सार्वजनिक हुई, यानी वह सार्वजनिक रजिस्टर कि कौन किस डोमेन का मालिक है, जिसके बारे में अगला हिस्सा है, और इसकी विडंबना ख़ुद लिख जाती है। फिर Ethos ने पुष्टि की कि उन्होंने सौदे पर सलाह दी थी, और जुलाई 2020 में वे उसके co-CEO बने।\nICANN ने आख़िरकार अप्रैल 2020 में बिक्री रोक दी। यह दर्ज करना उचित है। यह दर्ज करना भी उचित है कि उससे पहले क्या हुआ: महीनों तक ICANN का यह आग्रह कि मामला ज़्यादातर उसके दायरे से बाहर है, लगातार सार्वजनिक अभियान, अमेरिकी senators की चिट्ठियाँ, और आख़िर में California के Attorney General की एक चिट्ठी, जिसमें ICANN को सौदे से दूर रहने की चेतावनी दी गई और Ethos Capital के आसपास पारदर्शिता की कमी का हवाला दिया गया।\nयहाँ ICANN सुरक्षा कवच नहीं था। ICANN ने वे सीमाएँ हटाईं जिनसे मौक़ा बना, और उसे ख़ुद आख़िरी पल में एक राज्य के क़ानूनी अधिकारी ने रोका, जो एक और प्रदर्शन है कि इस सिस्टम में जवाबदेही की असली व्यवस्था bylaws में लिखी कोई चीज़ नहीं बल्कि Californian क्षेत्राधिकार है।\nVerisign वाली व्यवस्था यह वही दूसरा पक्ष है जो wildcard वाला था, पंद्रह साल बाद। अक्टूबर 2018 में NTIA और Verisign ने Cooperative Agreement के Amendment 35 पर दस्तख़त किए, जिसने .com के दाम पर लगी रोक हटा दी और हर छह में से चार साल 7% सालाना बढ़ोतरी की इजाज़त दी।\nवह अमेरिकी सरकार का फ़ैसला था, ICANN का नहीं। लेकिन बढ़ोतरी के लिए फिर भी .com registry agreement में संशोधन ज़रूरी था, और वह ICANN का है। मार्च 2020 में ICANN ने Amendment 3 पर सहमति दी, और उसके साथ एक बाध्यकारी Letter of Intent पर, जिसके तहत 1 जनवरी 2021 से Verisign ICANN को पाँच साल में $20 million देती है, सुरक्षा और स्थिरता के काम के लिए।\nदोनों चीज़ों पर सार्वजनिक टिप्पणी खुलने से पहले बातचीत हो चुकी थी। टिप्पणी अवधि चली, भारी तौर पर विरोधी रही, और कुछ नहीं बदला: .org वाला ही पैटर्न, उसी दौर में, उसी नतीजे के साथ।\nढाँचे को उसकी अपनी शर्तों पर लीजिए। जो संस्था तय करती है कि एक एकाधिकारी दाम बढ़ा सकता है या नहीं, उसने उसी समय और उसी दूसरे पक्ष के साथ ख़ुद को भुगतान की बातचीत की। सार्वजनिक टिप्पणी बाद में आई और सजावटी थी। पैसा चाहे जिस पर ख़र्च हो, ऐसी व्यवस्था जिसमें नियामक को नियंत्रित पक्ष दाम बढ़ोतरी वाले उसी लेन-देन में भुगतान करता है, ऐसी है जिसमें कोई सक्षम नियामक नहीं घुसेगा, और उस समय टिप्पणी करने वालों ने जो शब्द चुना, kickback, वही स्वाभाविक शब्द है।\nइसके दम पर थोक .com $7.85 से $10.26 हो गया है, एक ऐसे नाम पर जिसे दाम बढ़ाने की कोई तकनीकी ज़रूरत नहीं और जिसके पास कोई प्रतिस्पर्धी नहीं जिस पर registrant जा सके।\nएक कंपनी के ख़िलाफ़ आठ देश अगर आप एक अकेला प्रसंग चाहते हैं जो दिखाए कि ICANN असल में किसके प्रति जवाबदेह है, तो वह .amazon है, और वह सात साल चला।\nAmazon कंपनी ने 2012 के दौर में .amazon के लिए आवेदन किया। Amazon Cooperation Treaty Organization ने आपत्ति की: Bolivia, Brazil, Colombia, Ecuador, Guyana, Peru, Suriname और Venezuela, आठ संप्रभु राज्य जिनके इलाक़े का वर्णन यह नाम करता है और जिनमें लगभग 30 million लोग रहते हैं। उनका रुख़ था कि एक साझा भौगोलिक और सांस्कृतिक नाम एक कंपनी की निजी संपत्ति नहीं बनना चाहिए।\nउन्होंने वही रास्ता अपनाया जो ICANN सरकारों को देता है। Governmental Advisory Committee (GAC) ने आवेदन के ख़िलाफ़ सर्वसम्मत सलाह दी, और मई 2014 में ICANN के बोर्ड ने उसे मान लिया। राज्य जीत गए थे, ठीक इसी काम के लिए बनाई गई व्यवस्था के ज़रिए।\nAmazon ने Independent Review Process (IRP) का दावा दायर किया।\n2017 में IRP पैनल ने Amazon के पक्ष में फ़ैसला दिया। उसने पाया कि बोर्ड ने ICANN के अपने bylaws से असंगत काम किया था, यह माना कि बोर्ड GAC की सर्वसम्मत सलाह को निर्णायक नहीं मान सकता, उसे आवेदनों का गुण-दोष पर दोबारा मूल्यांकन करने का निर्देश दिया, और ICANN को Amazon के $163,045.51 के ख़र्च की भरपाई का आदेश दिया।\nमई 2019 में ICANN ने निष्कर्ष निकाला कि आवेदनों को आगे न बढ़ने देने का कोई सार्वजनिक नीति कारण नहीं था। Amazon को .amazon मिल गया।\nनतीजे की बजाय ढाँचा पढ़िए, क्योंकि नतीजे पर बहस हो सकती है और ढाँचे पर नहीं।\nसरकारों को GAC मिलता है, और GAC सलाह देता है। एक कंपनी को Independent Review Process मिलता है, और IRP एक बाध्यकारी घोषणा, बोर्ड को एक निर्देश, और ख़र्च का भुगतान देता है। जब ये दोनों रास्ते आमने-सामने टकराए, तो पैनल का निष्कर्ष साफ़ तौर पर यह था कि सरकारी वाला निर्णायक नहीं है।\nतो ICANN के पास जवाबदेही की एक काम करने वाली व्यवस्था है। उसने काम किया। धरती की सबसे बड़ी कंपनियों में से एक ने उसका सफलता से इस्तेमाल करके आठ देशों की सामूहिक आपत्ति पलट दी, और इस सुविधा के लिए ICANN ने उसके क़ानूनी ख़र्च चुकाए।\nयह वही तथ्य है जो इस पोस्ट में पहले क्षेत्राधिकार वाली समस्या थी, बस अलग कपड़ों में। व्यवस्थाएँ असली हैं, और उनकी शक्ल ऐसी है कि जो पक्ष उन्हें चलाने का ख़र्च उठा सकते हैं, नतीजे उन्हीं को मिलते हैं। आठ सरकारें सलाह वाले रास्ते को टिका नहीं सकीं। एक कंपनी ने क़ानूनी रास्ते को तीन साल में काम करवा लिया।\nGDPR की लड़ाई: जब कोई क़ानून ICANN पर लागू होता है तो वह क्या करता है किसी संस्था के बारे में सबसे मज़बूत सबूत उसका mission statement नहीं होता। वह यह होता है कि जो नियम उसने नहीं लिखा, वह पहली बार उसके ख़िलाफ़ लागू होने पर वह क्या करती है।\nICANN के लिए वह पल GDPR था, और रिकॉर्ड में कोई अस्पष्टता नहीं।\nICANN के पास चेतावनी की कमी नहीं थी। The Register की गिनती के हिसाब से उसके पास एक दशक से ज़्यादा की चिट्ठियाँ थीं जो कहती थीं कि WHOIS, यानी हर डोमेन registrant का नाम, डाक पता, ईमेल और फ़ोन नंबर किसी को भी, बिना किसी access control के प्रकाशित करना, यूरोपीय data protection क़ानून से मेल नहीं खाता। GDPR ख़ुद 2016 में अपनाया गया था, दो साल की मोहलत के साथ, ख़ास तौर पर इसलिए कि संगठन तैयारी कर सकें। ICANN मई 2018 तक बिना किसी नियम-अनुकूल मॉडल के पहुँचा।\nउसकी जगह उसने अप्रैल 2018 में यह किया कि Brussels जाकर Article 29 Working Party से लागू करने पर एक साल की रोक माँगी, और साथ में इस बीच registrant के ईमेल पते प्रकाशित करते रहने की इजाज़त।\nज़रा सोचिए कि वह अनुरोध असल में क्या है। काग़ज़ी कार्रवाई जमा करने की मोहलत नहीं। यह अनुरोध कि यूरोपीय नियामक एक मौलिक-अधिकार वाले विनियम को एक संगठन और उसके वैश्विक ठेकेदार पक्षों पर एक साल तक लागू न करने पर सहमत हों, क्योंकि उस संगठन को पालन करने की फ़ुर्सत नहीं मिली थी। GDPR में इसे देने की कोई व्यवस्था नहीं है। Charter के तहत data protection एक मौलिक अधिकार है; किसी supervisory authority के पास, और European Data Protection Board के पास भी नहीं, किसी एक data controller के लिए इसे निलंबित करने की शक्ति है। ICANN कोई ऐसी रियायत नहीं माँग रहा था जो रोकी जा रही थी। वह कुछ ऐसा माँग रहा था जो मौजूद ही नहीं, और ज़ाहिर है उसने यह पता भी नहीं किया था कि वह मौजूद है या नहीं।\nWP29 ने दोनों माँगें ठुकरा दीं। बैठक के ICANN के अपने सारांश ने माना कि registrant, administrative और technical contact के ईमेल पते गुमनाम करने ही होंगे, और जो रोक उसने माँगी थी उसका ज़िक्र ही छोड़ दिया।\nफिर उसने मुक़दमा किया।\n25 मई 2018 को, जिस दिन GDPR लागू हुआ, ICANN ने Bonn में Tucows के जर्मन registrar EPAG के ख़िलाफ़ मुक़दमा दायर किया। EPAG ने Admin-C और Tech-C संपर्क विवरण इकट्ठा करना बंद करने का फ़ैसला किया था, इस आधार पर कि जिस निजी डेटा का उसके पास कोई उपयोग नहीं, उसे इकट्ठा करना ठीक वही है जिसे GDPR मना करता है। Tucows का रुख़ था कि ज़्यादातर रजिस्ट्रेशन में registrant, admin और tech contacts वैसे भी एक ही व्यक्ति होते हैं, तो यह इकट्ठा करना सिर्फ़ ग़ैरक़ानूनी नहीं, बेमतलब था।\nICANN का क़ानूनी सिद्धांत था कि GDPR का “necessary for the performance of a contract” आधार इस संग्रह को कवर करता है, क्योंकि ICANN के registrar के साथ अपने ठेके में इसकी माँग थी। यह एक हैरतअंगेज़ तर्क है: कि कोई संगठन दूसरे लोगों के निजी डेटा को प्रोसेस करने का वैध आधार किसी तीसरे पक्ष के साथ ठेके में उसे इकट्ठा करने की शर्त लिखकर गढ़ सकता है। अगर यह चलता, तो Article 6(1)(b) एक औपचारिकता होता जिसे कोई भी मसौदा लिखकर पूरा कर लेता।\nयह नहीं चला। ICANN Bonn में हारा। उसने अपील की। फिर हारा। अगस्त 2018 में Cologne की अपीलीय अदालत ने उसे तीसरी बार ठुकरा दिया, पहले के फ़ैसलों को विश्वसनीय पाया, माना कि injunction को सही ठहराने वाली कोई तत्काल आपात स्थिति नहीं है, और, यह वह हिस्सा है जो दो बार पढ़ने लायक़ है, सवाल को Court of Justice of the European Union के पास भेजने का ICANN का अनुरोध इस आधार पर ठुकरा दिया कि ICANN की क़ानूनी व्याख्या फ़ैसले के लिए प्रासंगिक ही नहीं थी। अदालत ने तर्क को इतना क़रीब भी नहीं माना कि Luxembourg से पूछना फ़ायदेमंद हो।\nICANN ने फिर भी मामले को उस अदालत तक धकेलने की कोशिश में सदस्यों का पैसा ख़र्च किया। 2019 में उसने WHOIS को पूरी तरह छोड़ दिया।\nतकनीकी नतीजा सही था: जैसा WHOIS था, वैसा उसे होना ही नहीं चाहिए था। लेकिन देखिए वहाँ तक पहुँचा कैसे गया। दस साल की अनसुनी चेतावनियाँ। एक मौलिक अधिकार से छूट का अनुरोध। अपने ही ठेकेदार पक्ष के ख़िलाफ़ मुक़दमा, उसी दिन दायर जिस दिन क़ानून लागू हुआ, यह स्थापित करने के लिए कि क़ानून वैसे लागू नहीं होता जैसा नियामक कहते थे। तीन हारें। फिर हथियार डालना।\nयह कोई ऐसा संगठन नहीं जिसने किसी क़ानून को ग़लत पढ़ लिया। यह ऐसा संगठन है जिसने तब तक नहीं माना कि क़ानून उसे संबोधित है भी, जब तक अदालतों ने तीन बार नहीं कहा।\nबाक़ी सबको इसकी क्या क़ीमत चुकानी पड़ी इस पोस्ट का ज़्यादातर हिस्सा इस बारे में है कि ICANN और रजिस्ट्रियों ने क्या किया। यह हिस्सा इस बारे में है कि इसकी क़ीमत किसने चुकाई, क्योंकि बहुत कम बार वे ख़ुद थे।\nधरती का हर .com registrant बढ़ोतरी चुकाता है। थोक .com $7.85 से $10.26 हो गया। Verisign की अपनी रिपोर्टिंग 31 मार्च 2026 तक .com का आधार 163.6 million नाम बताती है। दोनों को गुणा कीजिए और वह बढ़ोतरी लगभग $394 million सालाना की बैठती है, दुनिया में कहीं भी हर .com registrant से ली गई, एक ऐसे नाम के लिए जिसे सही ठहराने के लिए किसी तकनीकी बदलाव की ज़रूरत नहीं थी। Lagos या Manila का कोई कारोबार वही बढ़ोतरी चुकाता है जो Palo Alto वाला, जिसका फ़ैसला एक अमेरिकी एजेंसी और एक अमेरिकी non-profit ने किया जिसने उसी बातचीत में फ़ायदा पाने वाले से $20 million लिए।\n.org का फ़ैसला दुनिया भर की charities पर पड़ता है। बीस साल तक .org को non-profit क्षेत्र को namespace के उस हिस्से के तौर पर बेचा गया जो उनका है। सीमाएँ हटाना यह फ़ैसला था कि उसे जो भी चलाए वह उनसे उतना ले सकता है जितना ट्रैफ़िक सह ले। NPR और YMCA इसे झेल सकते हैं। किसी grant पर चलने वाला छोटा NGO नहीं झेल सकता, और उससे भी नहीं पूछा गया: 3,252 विरोध में, छह पक्ष में, एक शब्द बदले बिना दस्तख़त।\nदुरुपयोग का बोझ हर उस आदमी पर है जो मेल सर्वर चलाता है। नए gTLDs बाज़ार का 12% हैं और रिपोर्ट किए गए cybercrime डोमेन का 47%। उन नामों में से हर एक किसी और के inbox में, किसी और की abuse queue में, किसी और के धोखाधड़ी वाले नुक़सान में पहुँचता है। ICANN ने एक आवेदन पर $185,000 लिए और हर string पर हर हाल में $25,000 सालाना लेता है। सस्ते strings ने फिर जो पैदा किया उसकी लागत हर मेल ऑपरेटर, हर बैंक, हर सुरक्षा टीम और phishing पेज के झाँसे में आए हर व्यक्ति पर पड़ती है। यह पाठ्यपुस्तक वाले अर्थ में एक externality है, और कार्यक्रम इस बारे में एक लाइन लिखे बिना बनाया गया कि उसे कौन उठाएगा।\nSite Finder ने पूरे ग्रह के लिए एक साथ विफलता का अर्थ तोड़ दिया। इसे सीधे कहना ज़रूरी है क्योंकि इसे एक अमेरिकी कहानी की तरह पढ़ना आसान है। रूट एक है और .com एक। जब Verisign ने बदला कि एक ग़ैर-मौजूद नाम क्या करता है, तो उसने धरती के हर नेटवर्क के लिए एक साथ बदल दिया, जिसमें हर वह नेटवर्क शामिल था जिसका Verisign से कोई रिश्ता नहीं, फ़ैसले में कोई आवाज़ नहीं, और अपने resolvers को patch करने के सिवा निकलने का कोई रास्ता नहीं, और उनमें से बहुतों ने आख़िर यही किया।\nWHOIS उन लोगों के लिए अँधेरा हो गया जो उसे दुरुपयोग के ख़िलाफ़ इस्तेमाल करते थे। यहाँ दोनों नुक़सान असली हैं और दोनों टाले जा सकते थे। हर registrant का नाम, पता, ईमेल और फ़ोन नंबर किसी को भी जो माँगे प्रकाशित करना दुनिया भर के लोगों के लिए एक असली, दशकों पुराना नुक़सान था, और GDPR इस बारे में सही था। लेकिन ICANN के पास दस साल से ज़्यादा की चेतावनी थी और कोई योजना नहीं, तो मई 2018 स्तरों वाली पहुँच की ओर कोई संभाला हुआ क़दम नहीं था। वह एक अचानक बंदी थी। Anti-abuse शोधकर्ता, सुरक्षा टीमें और क़ानून लागू करने वाले, यूरोप से काफ़ी बाहर भी, रातोंरात एक काम करने वाले औज़ार से हाथ धो बैठे, क्योंकि ICANN ने मोहलत का समय विकल्प बनाने की बजाय मुक़दमेबाज़ी में बिता दिया। पहले का खुलापन और बाद का ख़ालीपन, दोनों तैयारी न करने की उसी विफलता के हैं।\nऔर 12.6 million नाम resolve होना बंद हो गए। Freenom का ढहना phishing के आँकड़ों के लिए अच्छा नतीजा था। यह उन सबके लिए अच्छा नतीजा नहीं था जो मुफ़्त .tk या .ml इसलिए इस्तेमाल करते थे कि वे साल के $10 नहीं निकाल सकते थे, और ऐसे बहुत लोग थे, ग़ैर-अनुपातिक रूप से उन जगहों पर जहाँ $10 कोई छोटी रक़म नहीं। जब इंटरनेट का अकेला मुफ़्त namespace सबसे ज़्यादा दुरुपयोग वाला भी हो, तो उसके जाने पर जो उसे खोते हैं वे अपराधी नहीं होते। वे अगले ही हफ़्ते अगली सस्ती चीज़ पर चले गए।\nशक्ल एक जैसी है। फ़ैसले California में होते हैं, आमदनी California में वसूली जाती है, और लागत दुनिया भर में उन लोगों पर बाँटी जाती है जिनके पास न वोट है, न ठेका, न कोई अदालत जहाँ वे पहुँच सकें।\nऔर सिर्फ़ अमेरिकी अदालतों में अब जब रिकॉर्ड सामने है, तो इस पोस्ट की शुरुआत वाले क्षेत्राधिकार के बिंदु पर लौटिए, क्योंकि वह निगमन से ज़्यादा काम करता है।\nदुनिया में हर कोई उसके अधीन है जो ICANN तय करता है। जो लोग इसके बारे में कुछ कर सकते हैं, वे वही हैं जो California में मुक़दमा लड़ सकते हैं।\nसोचिए इससे कौन बाहर रहता है। Cameroon का एक ccTLD ऑपरेटर। Tehran का एक registrant जिसका डोमेन इसलिए हटा दिया गया कि एक registrar ने OFAC को ज़रूरत से ज़्यादा लागू किया जो उस पर कभी बाध्यकारी था ही नहीं। Bonn का एक registrar, और ठीक इसीलिए ICANN और EPAG की लड़ाई जर्मन क़ानून पर एक जर्मन मुक़दमे के तौर पर चलानी पड़ी, ICANN की जवाबदेही के मामले के तौर पर बिल्कुल नहीं। कोई भी छोटी रजिस्ट्री जो नौ अंकों के बजट वाले संगठन के ख़िलाफ़ Californian non-profit क़ानून के किसी बिंदु पर बहस के लिए अमेरिकी वकील का ख़र्च नहीं उठा सकती।\nफिर सोचिए यह किसे अंदर आने देता है। इस पोस्ट का हर दख़ल जिसने असल में कुछ बदला:\nSite Finder तब ख़त्म हुआ जब ICANN ने Verisign के ठेके की धमकी दी, और Verisign का जवाब था एक अमेरिकी अदालत में मुक़दमा करना, और समझौते से नवीनीकृत .com लेकर निकलना। .org की बिक्री California के Attorney General की चिट्ठी के बाद रुकी। Freenom इसलिए रुकी कि Meta ने Northern District of California में मुक़दमा किया, और उसके पीछे 12.6 million नाम अँधेरे में चले गए। .amazon Amazon को इसलिए मिला कि Amazon ने ICANN को उसकी अपनी Independent Review Process से गुज़ारा और ख़र्च पाया। चार दख़ल जिन्होंने काम किया। चार अमेरिकी कर्ता: एक राज्य का क़ानूनी अधिकारी और तीन कंपनियाँ। इनमें से एक भी रास्ता United States के बाहर किसी के लिए उपलब्ध नहीं, और चार में से तीन में जो चीज़ हिली वह एक निजी कंपनी का व्यावसायिक हित था, जो उन मौक़ों पर संयोग से बाक़ी सबकी दिशा में ही था।\nसमुदाय ने यह मुद्दा उठाया था। accountability working group के एक jurisdiction subgroup ने Work Stream 2 इसी पर बिताया और ऐसी सिफ़ारिशें दीं जिन्होंने चीज़ों को लगभग वहीं छोड़ दिया जहाँ वे थीं, जो हैरानी की बात नहीं, क्योंकि हस्तांतरण के प्रस्ताव ने किसी के बैठने से पहले ही उस एक बदलाव को दायरे से बाहर कर दिया था जो मायने रखता था।\nतो वैश्विक multi-stakeholder शासन, उस अकेली जगह पर जहाँ उसे परखा जा सकता है, इतने में सिमट जाता है: आप California में मुक़दमा कर सकते हैं, अगर ख़र्च उठा सकें।\nरिकॉर्ड असल में क्या दिखाता है इन्हें साथ रखिए, क्योंकि अलग-अलग हर एक के पास एक बहाना है और साथ में नहीं।\nएक संगठन जिसे जर्मन अदालतों को तीन बार बताना पड़ा कि यूरोपीय क़ानून उस पर लागू होता है, जबकि उसने पहले उन अदालतों के नियामकों से कहा था कि वे उसे बस लागू न करें।\nएक संगठन जिसने ऐसा प्रोडक्ट गढ़ा जो किसी ने माँगा नहीं था, उसके आवेदनों पर विचार करने के लिए $350 million से ज़्यादा फ़ीस ली, विवादित वालों की नीलामी से और $240 million, और अब ऐसे टॉप-लेवल डोमेन से $25,000 सालाना वसूलता है जिनमें कुछ नहीं, जबकि जो strings बिके वे इंटरनेट पर phishing डोमेन ख़रीदने की सबसे सस्ती जगह बन गए।\nएक संगठन जिसकी सार्वजनिक टिप्पणी प्रक्रिया 542 के मुक़ाबले 1 से विरोध में गई और जिस दस्तावेज़ पर परामर्श हो रहा था उसका एक शब्द नहीं बदला।\nएक संगठन जिसने non-profit namespace की मूल्य सीमाएँ उसके पूर्व CEO के private equity वाहन के उस पर $1.135 billion की बोली लगाने से चार महीने पहले हटाईं, और जिसे अपनी किसी व्यवस्था से नहीं बल्कि एक राज्य के Attorney General से रोकना पड़ा।\nएक संगठन जिसने एकाधिकार वाले registrar से उसी बातचीत में $20 million लिए जिसने एकाधिकार वाले registrar को दाम बढ़ाने दिए, और सार्वजनिक टिप्पणी बाद में खोली।\nएक संगठन जिसने अमानत में रखे पैसे में से $36 million ख़ुद ले लिए, जबकि वह पैसा किसके लिए है यह तय करने वाला समूह अभी बैठा ही था।\nऔर एक संगठन जिसने उस रजिस्ट्री के मुक़दमे का समझौता, जिसने इंटरनेट के दो सबसे बड़े ज़ोन को अगवा कर लिया था, उसी रजिस्ट्री को .com का नवीनीकृत ठेका सौंपकर किया।\nएक संगठन जिसकी जवाबदेही की अकेली काम करने वाली व्यवस्था का इस्तेमाल एक trillion डॉलर की कंपनी ने आठ देशों की एकमत आपत्ति पलटने के लिए किया, और ख़र्च ICANN के ख़िलाफ़ दिलवाया।\nएक संगठन जो .corp और .home को अजनबियों को सौंपने से बस एक committee रिपोर्ट की दूरी पर था, और उसे किसी और की मापों से पता चला कि इससे क्या टूटता।\nसाझा धागा अक्षमता नहीं है। अक्षमता बेतरतीब होती है। यह एक दिशा में है: इनमें से हर एक पहले से बैठे लोगों की, पैसे की, और ICANN के अपने संस्थागत हित की तरफ़ गया, और भागीदारी की व्यवस्थाओं, यानी टिप्पणी अवधियाँ, working groups, empowered communities, ने नतीजे नहीं बल्कि दस्तावेज़ पैदा किए।\nऔर यही वह संस्था है जो उस फ़ाइल के लिए नीति तय करती है। कोई standards body नहीं, कोई अदालत नहीं, ऐसी कोई चीज़ नहीं जिसे आपने चुना हो। ऐसे शासन रिकॉर्ड वाली एक California non-profit, 1.5 मेगाबाइट टेक्स्ट के ऊपर बैठी, जिसके हिसाब से धरती का हर नेटवर्क resolve करता है।\nउस रिकॉर्ड और उस फ़ाइल के बीच खड़ी अकेली चीज़ यह है कि क़लम ICANN के हाथ में नहीं है। उसे माँगना पड़ता है। ऊपर जो कुछ है वह वही है जो एक संगठन तब करता है जब उसे अभी भी माँगना पड़ता है, तो साथ ले जाने लायक़ सवाल यह नहीं कि ICANN अच्छा बर्ताव करता है या नहीं। साफ़ है कि नहीं करता। सवाल यह है कि माँगने की यह मजबूरी किस चीज़ से क़ायम रहती है, जबकि इसे किसी ने लिखा नहीं और जिससे माँगा जाता है वह पहले ही तनख़्वाह पर है।\n","permalink":"https://blogs.damiendye.uk/hi/dns/who-actually-controls-dns/","summary":"इंटरनेट का रूट 1.5 MB की एक टेक्स्ट फ़ाइल है जिसे एक अमेरिकी कंपनी संपादित और साइन करती है। DNS को असल में कौन नियंत्रित करता है, 2016 के IANA हस्तांतरण ने क्या बदला और क्या नहीं, और ICANN ने उस नियंत्रण का कैसे इस्तेमाल किया, इसका दर्ज रिकॉर्ड।","title":"DNS को असल में कौन नियंत्रित करता है"},{"content":"मैं 2017 से 2019 तक Nominet में, यानी .uk रजिस्ट्री में, DNS registry system admin था। उस इमारत के अंदर, जब वह दबाव बन रहा था जिससे 2021 की बग़ावत निकली। वोट मेरे जाने के बाद हुआ, और वह हिस्सा सार्वजनिक रिकॉर्ड है, हमेशा की तरह लिंक के साथ। जहाँ मैं बता रहा हूँ कि अंदर से कैसा दिखता था, वहाँ मैं यह कहता हूँ।\nइसकी साथी पोस्ट ICANN के बारे में है, और वह अलग-अलग दिशाओं से एक ही सवाल पर पहुँचती रहती है: जब किसी रजिस्ट्री पर किसी का कॉन्ट्रैक्ट नहीं है, तो असल में उसे ठीक से चलने पर कौन मजबूर करता है?\n.uk इसका जवाब देने के लिए अच्छी जगह है, क्योंकि उस पर किसी का कॉन्ट्रैक्ट नहीं है। उस पर कोई ICANN registry agreement नहीं, कोई Specification 6 नहीं, कोई compliance function नहीं, कोई बाहरी निगरानी नहीं, और सामान्य अर्थ में कोई रेगुलेटर नहीं। Ofcom इसे नहीं चलाता। सरकार इसे नहीं चलाती।\nइसके सदस्य चलाते हैं। और मार्च 2021 में उन्होंने इसका इस्तेमाल किया।\nNominet असल में है क्या Nominet एक company limited by guarantee है। इसके कोई शेयरहोल्डर नहीं हैं। इसके सदस्य हैं: registrar और दूसरे इच्छुक पक्ष जो सदस्यता शुल्क देते हैं और जिन्हें वोट मिलता है। और इसे .uk को मुनाफ़े के बजाय सार्वजनिक हित के लिए चलाने के लिए बनाया गया था।\nपूरी कहानी इसी ढाँचे में है। जिस कंपनी के कोई मालिक नहीं जिन्हें अमीर बनाना हो, उसके पास भी पैसा आता है, और जो रजिस्ट्री बिना किसी प्रतिस्पर्धी के एक राष्ट्रीय namespace चलाती है, उसके पास बहुत आता है। वह surplus किसलिए है, इस सवाल का जवाब संविधान धुंधले ढंग से देता है और बोर्ड व्यवहार में देता है।\nसदस्य ही एकमात्र रोक हैं। और कुछ नहीं है। जब तक जवाब मेल खाते हैं, यह ठीक है, और जब वे मेल खाना बंद कर देते हैं, तब यही पूरा खेल बन जाता है।\nअंदर से पूरा ढाँचा यह वह हिस्सा है जिसकी कल्पना रजिस्ट्री के बाहर के लोग शायद ही करते हैं, और आगे की हर बात के लिए यह मायने रखता है।\nNominet कभी सिर्फ़ .uk नहीं था। जब मैं वहाँ था, प्लैटफ़ॉर्म पर यह सब था:\n.uk, country-code डोमेन (ccTLD), किसी भी ICANN कॉन्ट्रैक्ट के बिना। .cymru और .wales, generic top-level domains (gTLDs) जो Nominet अपने नाम से रखता है, और ये ICANN registry agreements के तहत हैं। दूसरों के gTLDs। अप्रैल 2016 में Minds + Machines ने Nominet को अपने 28 तक strings का back end सौंपा, जिनमें .london, .work, .law, .fashion, .cooking शामिल थे, जिससे चलाए जाने वाले TLD की संख्या के हिसाब से Nominet registry operators की सबसे ऊपरी पंक्ति में आ गया। इसमें .bbc और .bentley जैसे dot-brands जोड़ लीजिए। ICANN की आपातकालीन भूमिका। Nominet, ICANN के Emergency Back-end Registry Operators में से एक है, यानी वे संस्थाएँ जिन्हें ICANN कोई gTLD सौंपता है जब वह उसे उसके मौजूदा ऑपरेटर से छीन लेता है। यह 2014 में जुड़ा, और दिसंबर 2017 में ICANN ने इसका इस्तेमाल किया: .wed के ऑपरेटर की registration data service फ़ेल होने के बाद Nominet उसका आपातकालीन अंतरिम ऑपरेटर बना। Resolver वाला छोर। Nominet ने National Cyber Security Centre (NCSC) के लिए Protective DNS बनाया और चलाया, यानी वह recursive resolver जिससे UK के public sector निकाय query करते हैं, और जो ख़तरनाक माने गए नामों को resolve करने से मना करता है। एक बात साफ़ करनी ज़रूरी है, क्योंकि “Nominet .uk चलाता है” जितना होना चाहिए उससे ढीला कथन है।\nNominet .uk रजिस्ट्री चलाता है और उसके नीचे का ज़्यादातर हिस्सा भी: .co.uk, .org.uk, .me.uk और second-level .uk खुद। इसने कभी पूरा नहीं चलाया। .ac.uk Jisc का है, जो उस अकादमिक नेटवर्क का उत्तराधिकारी है जिसने सबसे पहले uk नाम रखा था, और जो 1996 से उसके नीचे नाम प्रशासित और रजिस्टर करता आया है। इस पोस्ट के पूरे दौर में .gov.uk भी Jisc का ही था। Nominet ने इसे 2024 में ही संभाला, और अब भी मंज़ूरियाँ रजिस्ट्री के बजाय Central Digital and Data Office के पास हैं।\nबात इससे आगे जाती है, और ऐसी दिशा में जिसका आप अंदाज़ा नहीं लगाएँगे। Jisc .gov.scot का प्रशासन भी देता है, और .gov.wales व .llyw.cymru का भी, और ये दोनों .wales और .cymru के अंदर रहते हैं, यानी उन दो generic top-level domains के अंदर जो Nominet अपने नाम से रखता है। Nominet वे TLD चलाता है। उनमें सरकारों वाला कोना कोई और चलाता है।\nतो एक ही देश के namespace के अंदर भी अधिकार बँटा हुआ है, और वह किसी के डिज़ाइन से नहीं, इतिहास और परंपरा से बँटा है।\nइस तरह एक ही संगठन एक साथ name system से चार अलग रिश्तों में खड़ा था। .uk के लिए ICANN की पहुँच से पूरी तरह बाहर। gTLDs के लिए उसके अंदर, कॉन्ट्रैक्ट के तहत और लगातार मापा जाता हुआ। वह औज़ार जिसे ICANN तब उठाता था जब उसे किसी से कोई top-level domain छीनना होता। और वह resolver जो तय करता था कि कोई सरकारी विभाग क्या देख सकता है।\nइसमें कोई विरोधाभास नहीं है। जब आप org charts पढ़ना बंद करके कॉन्ट्रैक्ट पढ़ना शुरू करते हैं, तो ढाँचा असल में ऐसा ही दिखता है। यहाँ अधिकार कंपनियों से नहीं, अलग-अलग delegations से जुड़ा होता है।\nदो व्यवस्थाएँ, एक प्लैटफ़ॉर्म अब वह हिस्सा जो सिर्फ़ अंदर से दिखता है, और यही कारण है कि यह ढाँचा मायने रखता है, कोई फ़ालतू जानकारी नहीं है।\ngTLDs के लिए Nominet बाक़ी सबकी तरह ICANN registry agreement पर दस्तख़त करता है। Specification 6 लागू होता है: कोई wildcard नहीं, कोई बनाया हुआ जवाब नहीं। Specification 10 भी लागू होता है, और ICANN बाहर से लगातार इसके पालन को मापता है: DNS resolution, shared registration system, Whois सेवा, escrow deposits और सही ढंग से साइन किए zones, सबकी thresholds के मुक़ाबले निगरानी होती है, और किसी एक से नीचे गिरना सिर्फ़ outage नहीं, compliance event होता है।\nZones गिनिए। एक तरफ़ .uk, बिना कॉन्ट्रैक्ट के। दूसरी तरफ़ कई दर्जन gTLDs, हर एक registry agreement और monitoring probe के तहत। बिना कॉन्ट्रैक्ट वाला zone अपने ही प्लैटफ़ॉर्म पर लगभग तीस के मुक़ाबले एक से अल्पमत में था।\nएक प्लैटफ़ॉर्म पर दो कॉन्ट्रैक्ट व्यवस्थाएँ, और सख़्त वाली जीतती है एक प्लैटफ़ॉर्म, दो कॉन्ट्रैक्ट व्यवस्थाएँ Nominet: एक रजिस्ट्री प्लैटफ़ॉर्म, runbooks का एक सेट .uk 1 zone कोई registry agreement नहीं कोई Specification 6 नहीं कोई निगरानी नहीं generic top-level domains ≈30 zones .cymru\u0026#160;· .wales\u0026#160;· MMX\u0026#160;×28\u0026#160;· .bbc\u0026#160;· .bentley ICANN registry agreement Spec 6, Spec 10, बाहर से निगरानी सख़्त व्यवस्था घर का मानक बन जाती है एक zone की छूट बचाने के लिए कोई दो operating मानक नहीं रखता। .uk को ICANN के नियम फिर भी मिलते हैं\u0026#160;: बिना कॉन्ट्रैक्ट, बिना परामर्श, बिना पूछे। एक प्लैटफ़ॉर्म जिस पर दोनों व्यवस्थाएँ हैं। बिना कॉन्ट्रैक्ट वाला zone लगभग तीस के मुक़ाबले एक से अल्पमत में है, इसलिए gTLDs के लिए लिखे नियम ही सब कुछ चलाने का तरीका बन जाते हैं, उस zone समेत जिस पर किसी का कोई अधिकार नहीं। एक प्लैटफ़ॉर्म पर दो operational व्यवस्थाएँ चलाना तकलीफ़देह है, इसलिए आप ऐसा नहीं करते। दो escrow प्रक्रियाएँ, दो monitoring व्यवस्थाएँ, runbooks के दो सेट, दो on-call प्रक्रियाएँ, एक ही सवाल के दो जवाब इस पर निर्भर कि ticket किस zone का है: सुबह तीन बजे ग़लतियाँ ऐसे ही होती हैं। जब ICANN gTLDs के लिए कुछ अनिवार्य करता है, आप उसे दो बार नहीं बनाते। एक बार बनाते हैं और सब कुछ उसी पर चलाते हैं।\nइसका मतलब है कि ICANN की ज़रूरतें .uk पर भी आ गिरीं। इसलिए नहीं कि ICANN का .uk पर कोई अधिकार था, उसका कोई अधिकार नहीं था, बल्कि इसलिए कि अपने ज़्यादातर ढाँचे को बाँधने वाले नियम को पूरा करने का सबसे सस्ता सुरक्षित तरीका उसे पूरे ढाँचे पर लागू करना है, और इसलिए कि जान-बूझकर एक बँटवारा बनाए रखना, ताकि ccTLD वे काम कर सके जो gTLDs नहीं कर सकते, आपको कुछ नहीं देता सिवाय प्लैटफ़ॉर्म के टूटने के एक दूसरे तरीके के।\nइसके लिए कोई कॉन्ट्रैक्ट साइन नहीं हुआ। कोई परामर्श नहीं हुआ। UK में किसी से पूछा नहीं गया। generic top-level domains के लिए Los Angeles में लिखी गई एक ज़रूरत ने, एक build फ़ैसले के रास्ते, तय कर दिया कि देश की अपनी रजिस्ट्री कैसे चले।\nरिकॉर्ड के लिए, इससे ICANN किसी policy paper की एक लाइन नहीं, on-call rota पर एक असली मौजूदगी बन गया। ढाँचे के एक हिस्से के लिए वह कॉन्ट्रैक्ट वाला एक पक्ष था, हमारे infrastructure पर तना एक probe, और escalation का एक रास्ता।\nबाक़ी का ख़र्च चलाने के लिए .uk बेचना इस सबका व्यावसायिक तर्क ही वह चीज़ थी जिस पर आख़िरकार सदस्यों ने आपत्ति की।\n.uk एक monopoly है। .uk डोमेन ख़रीदने की बिल्कुल एक ही जगह है, माँग लगभग inelastic है, और margin से वह सब चलता है जो बोर्ड चलाने का फ़ैसला करे। 2016 से The Register खुलकर यह तर्क दे रहा था कि .uk registrants से ज़्यादा पैसा लेकर बाक़ी काम को सब्सिडी दी जा रही है।\n2015 में नियुक्त CEO Russell Haworth के तहत Nominet ने cyber security में ज़ोर से क़दम बढ़ाया, NCSC कॉन्ट्रैक्ट समेत, इस तर्क पर कि राष्ट्रीय DNS infrastructure पर बैठी एक रजिस्ट्री security सेवाएँ बेचने की अच्छी स्थिति में है।\nमेरे वहाँ के पूरे समय दिशा यही थी। बग़ावत 2021 में अचानक नहीं आई। उसकी परिस्थितियाँ सालों पहले बिछा दी गई थीं, इमारत में काम करने वाले किसी के भी सामने।\nसबसे पहले चैरिटी गई जनवरी 2018 में, जब मैं वहाँ था, Nominet अपनी ही charitable foundation से हट गया।\nNominet Trust को 2008 से रजिस्ट्री पैसा देती आ रही थी: उस अवधि में £44 million, 2016 में £4 million, 2017 में £5.4 million। यह technology-for-good परियोजनाओं को पैसा देता था। काफ़ी सीधे अर्थ में, एक public benefit कंपनी में यही public benefit था। यह स्वतंत्र हो गया और मई 2018 में Social Tech Trust बन गया।\nHaworth का बताया कारण यह था कि “the grant-giving, single funder model we set up in 2008 was not the most effective route to greatest impact.”\nइसके साथ जिसकी घोषणा हुई वह था एक Cyber Advisory Panel, जिसकी अध्यक्षता Haworth के पास थी, जो सरकार और enterprise कारोबार को निशाना बनाता था, एक marketing कार्यक्रम के साथ और, Nominet के अपने शब्दों में, शायद एक acquisition के साथ।\nइन दोनों को साथ रखिए, क्योंकि इनकी घोषणा साथ हुई थी। इमारत से एक स्वतंत्र चैरिटी की ओर जाने वाला पैसा रुक गया। मुख्य कार्यकारी की अध्यक्षता वाला एक व्यावसायिक उपक्रम शुरू हो गया। सदस्यों से इन दोनों में से किसी पर परामर्श नहीं हुआ।\nउनमें से एक, Andrew Bennett, ने उस समय स्पष्ट सवाल पूछा: भविष्य का सारा operating मुनाफ़ा कहाँ ख़र्च होगा?\nतीन साल बाद सदस्यता ने इसका जवाब दिया।\nयही कारण है कि नीचे के पैराग्राफ़ सिर्फ़ मेरी धारणा नहीं हैं। Nominet के इतिहास में public benefit के पैसे की सबसे बड़ी एकल हलचल अपने स्वतंत्र शासन वाले एक trust से उस panel की ओर गई जिसकी अध्यक्षता मुख्य कार्यकारी करते थे, एक ही घोषणा में, मालिकों से पूछे बिना। इरादे के बारे में आप जो भी सोचें, पैसे की दिशा रिकॉर्ड पर है।\n“Profit With a Purpose” यही वाक्यांश था। पूरी रणनीति की यही लाइन थी और हमने इसे बहुत सुना।\nइसमें दिक़्क़त यह नहीं थी कि यह महत्वाकांक्षी था। दिक़्क़त यह थी कि इसके दोनों हिस्से अलग हो गए थे। मुनाफ़ा असली था, बढ़ रहा था, और एक बँधे हुए बाज़ार से आ रहा था जिसके पास .uk ख़रीदने की कोई और जगह नहीं थी। मक़सद एक deck की एक slide था।\nमुनाफ़ा ऊपर, मक़सद वापस: नारे के दोनों हिस्से अलग होते हुए “Profit with a purpose”, हिसाब-किताब में मक़सद: Nominet Trust को दान £4.0m 2016 £5.4m 2017 वापस लिया, जनवरी 2018 Trust को अपने funders खुद ढूँढने छोड़ा 2018 के बाद 2008 से 2018 के बीच कुल £44m दिए गए, फिर कुछ नहीं। उन्हीं सालों में .uk डोमेन की क़ीमत 50% से ज़्यादा बढ़ी। नारे का मुनाफ़े वाला हिस्सा ठीक वैसे ही चल रहा था जैसा सोचा गया था। नारे के दोनों हिस्से, उलटी दिशाओं में जाते हुए। दान के आँकड़े Nominet Trust के funding इतिहास से; क़ीमत बढ़ने की बात 2021 में सदस्यों की अपनी शिकायत है। आप किसी कंपनी को ऐसे नारे पर जवाबदेह ठहरा सकते हैं, और आख़िरकार सदस्यों ने ऐसा किया। अंदर इससे ज़्यादातर एक ख़ास तरह की थकान पैदा हुई, जो हर all-hands में यह सुनने से आती है कि व्यावसायिक ज़ोर ही public benefit है, जबकि असली public benefit की लाइन नीचे जा रही होती है।\nपैसा कहाँ गया जब मैं वहाँ था, तीन चीज़ें चल रही थीं, और इनमें से कोई भी United Kingdom के लिए DNS नहीं है।\nएक radio spectrum रजिस्ट्री। Nominet ने एक TV White Space database बनाया, यानी इस बात का रजिस्टर कि किसी जगह पर किसी समय कौन-सी radio frequencies इस्तेमाल के लिए ख़ाली हैं, और खुद को United States में database administrator के रूप में FCC से मंज़ूर करवाया। तर्क यह था कि रजिस्ट्री तो रजिस्ट्री है, और जो कंपनी एक तरह के lookup में अच्छी है, वह दूसरी तरह का भी बेच सकती है।\nएक DNS security प्रोडक्ट। NTX, DNS ट्रैफ़िक की जाँच पर बना threat detection, सरकारों और enterprises को बेचा गया। दूसरे शब्दों में OpenDNS का प्रतिस्पर्धी, यानी Cisco का प्रतिस्पर्धी, जिसमें एक ब्रिटिश डोमेन रजिस्ट्री उतरी।\nड्राइवरलेस कारें। drones और internet of things के साथ, उन चीज़ों की अगली बड़ी लहर के रूप में पेश की गईं जिन्हें नाम देने और रजिस्टर करने की ज़रूरत होगी।\nउनका क्या हुआ, यही इस सवाल का जवाब है कि क्या वे कोई रणनीति थीं। जब Nominet ने फिर से ध्यान केंद्रित किया, spectrum कारोबार RED Technologies को बेच दिया गया। cyber काम से वह तकनीक निकली जिस पर NCSC कॉन्ट्रैक्ट चला, जिसे Nominet ने फिर 2024 में खो दिया। ड्राइवरलेस कारें कभी नहीं आईं, और न ही वे डोमेन जिनकी उन्हें ज़रूरत होने वाली थी।\nऑस्ट्रेलिया के लिए बोली एक चौथा भी था, और महत्वाकांक्षा के बारे में यह सबसे ज़्यादा बताता है। 2018 में Nominet ने ऑस्ट्रेलिया की रजिस्ट्री चलाने के लिए बोली लगाई।\n.au का प्रशासन करने वाले auDA ने रजिस्ट्री operations का tender निकाला था। नौ बोलियाँ दुनिया भर से आईं, तीन shortlist हुईं, और Afilias ने 1 जुलाई 2018 को कार्यभार संभाला, जिससे AusRegistry के सोलह साल ख़त्म हुए। auDA ने कभी प्रकाशित नहीं किया कि और किसने बोली लगाई, इसलिए यह आपको रिकॉर्ड में नहीं मिलेगा, लेकिन Nominet उसमें था, और जब हम इसके लिए गए तब मैं वहाँ था।\nइसे उसी साल की दूसरी ख़बर के सामने रखिए। जनवरी 2018 में Nominet उस charitable foundation से हट गया जिसे उसने £44 million दिए थे, इस आधार पर कि single-funder grant देना असर का सबसे प्रभावी रास्ता नहीं था। उन्हीं बारह महीनों में वह दुनिया के दूसरे छोर के एक देश की डोमेन रजिस्ट्री चलाने के लिए बोली लगा रहा था।\nयह भी देखने लायक है कि .au tender है क्या, क्योंकि ज़्यादातर लोग मान लेते हैं कि .uk ठीक ऐसा ही होगा। auDA अपनी रजिस्ट्री का प्रतिस्पर्धी tender निकाल सकता है और उसे किसी और को सौंप सकता है, और 2018 में उसने ऐसा किया। .uk के लिए ऐसा कुछ नहीं है। Nominet की स्थिति कोई कॉन्ट्रैक्ट नहीं है जो renewal के लिए आता हो, जो Afilias को ऑस्ट्रेलिया में मिली स्थिति से ज़्यादा मज़बूत है, और इसलिए यह तौलते समय याद रखने लायक है कि सदस्यों का वोट असल में कितना दबाव था। वही एकमात्र लीवर था।\nऔर Nominet जब auDA के लिए काम करने की बोली लगा रहा था, तब auDA के साथ यह हो रहा था।\ntender के साथ-साथ ऑस्ट्रेलियाई सरकार खुद auDA की समीक्षा कर रही थी। अप्रैल 2018 में उसने रिपोर्ट दी कि auDA का प्रबंधन और शासन ढाँचा “no longer fit-for-purpose” था, नई terms of endorsement के रूप में 29 ज़रूरी सुधार जारी किए, और काम पर नज़र रखने के लिए Department of Communications के एक वरिष्ठ अधिकारी को auDA के बोर्ड पर बैठा दिया। उसने साफ़ यह भी कहा कि अगर auDA नतीजे नहीं दे सका तो वह .au का delegation किसी और प्रदाता को सौंप देगी।\nयह एक राष्ट्रीय सरकार है जो लिखित में कह रही है कि अगर उसे रखने वाली संस्था खुद को ठीक नहीं करती, तो वह अपने देश का डोमेन हटा देगी। उसी समय auDA के अपने सदस्य बग़ावत कर रहे थे: उसके चार नेताओं को हटाने के लिए special general meeting की याचिका, Nominet के सदस्यों के अपने पाँच के साथ यही करने से तीन साल पहले।\nदो राष्ट्रीय रजिस्ट्रियाँ, किसी देश का namespace रखने वाले दो non-profit, दोनों पर एक-दूसरे के चार साल के अंदर शासन की विफलता का आरोप। यह Nominet की कोई अनोखी बात नहीं है। जब कोई इस ढाँचे पर पर्याप्त ध्यान से नज़र नहीं रख रहा, तो यह यही करता है।\nसदस्यों ने क्या देखा क्यों यही और दूसरे नहीं, इस पर मैं सावधान रहूँगा, क्योंकि मैं बता सकता हूँ कि यह कैसा दिखता था, यह नहीं कि किसी के दिमाग़ में क्या था। उस समय स्टाफ़ में व्यापक धारणा यह थी कि funding उन लोगों के शौक़ों के पीछे चलती थी जो उसे मंज़ूर करते थे। मैं आपको कोई ledger नहीं दिखा सकता और मैं ऐसा दिखावा नहीं करूँगा कि दिखा सकता हूँ।\nजिसकी ओर मैं इशारा कर सकता हूँ वह यह है कि तीन साल बाद सदस्यता की औपचारिक शिकायत उसी शक का ज़्यादा सबूतों वाला रूप थी: कि बिना शेयरहोल्डरों और public benefit मक़सद वाली एक संस्था एक राष्ट्रीय monopoly का surplus उन चीज़ों पर ख़र्च कर रही थी जो उसे चलाने वालों को जँचती थीं, और जिस दान से पूरी व्यवस्था का औचित्य बनना था, वह इस बीच काट दिया गया था।\n.uk का surplus कहाँ गया, और हर एक का अंत कैसे हुआ surplus कहाँ गया .uk एक ही बाज़ार, कोई प्रतिद्वंद्वी नहीं क़ीमतें 50%+ ऊपर Nominet Trust £44m दान, 2008 से 2018 बंद, जनवरी 2018 TV White Space spectrum database United States में FCC की मंज़ूरी बेच दिया NTX cyber security आख़िरी पूरे साल में £12.6m आय £2.4m घाटा ऑस्ट्रेलिया की रजिस्ट्री के लिए बोली नौ बोलीदाता, तीन shortlist Afilias से हारे ड्राइवरलेस कारें, drones, internet of things नाम माँगने वाली चीज़ों की अगली बड़ी लहर कभी नहीं आईं जो एक लाइन वह कर रही थी जिसके लिए कंपनी बनी थी, वही काटी गई। उसके नीचे की हर चीज़ का बिल .uk डोमेन ख़रीदने वालों ने भरा। एक monopoly के पैसे के पाँच ठिकाने। चार का अंत बिक्री, घाटे, हारी हुई बोली या कुछ नहीं में हुआ, और पाँचवाँ, जिसे fund करने के लिए संविधान बना था, वही रोका गया। सदस्यों की शिकायत यह नहीं थी कि diversification ग़लत है। यह गणित था। .uk की क़ीमतें 50 प्रतिशत से ज़्यादा बढ़ीं। charitable और public benefit दान घटा, जबकि संगठन एक राष्ट्रीय संपत्ति पर monopoly margin कमा रहा था। लागत में कटौती के बावजूद operating प्रदर्शन पीछे जा रहा था। इस पूरे दौर में executive वेतन और बोनस बढ़ते रहे। और सदस्यों की राय, जो संविधान द्वारा दिए गए रास्तों से दी गई, सालों तक कहीं नहीं पहुँची।\nबिना शेयरहोल्डरों वाली एक कंपनी ऐसे बर्ताव करने लगी थी जैसे उसके अधीर शेयरहोल्डर हों, और राष्ट्रीय namespace का surplus उसका बिल भर रहा था।\nसदस्यों की बग़ावत अभियान का नाम PublicBenefit.uk था, जिसे hosting कंपनी Krystal के Simon Blackler ने संगठित किया। इसका प्रस्ताव बेलाग था: नामित directors को हटाओ।\nNominet की प्रतिक्रिया दर्ज करने लायक हिस्सा है, क्योंकि यह बताती है कि संगठन क्या बन चुका था।\nउसने सदस्यों के ही पैसे से अपने सदस्यों के ख़िलाफ़ अभियान चलाया: प्रस्ताव ठुकराने की अपील करते emails, फ़ोन कॉल और डाक। उसने अभियान के मुद्दों पर बात करने से इनकार किया। जब अभियान ने अपनी बात रखने के लिए सदस्यों के संपर्क विवरण पाने का अपना अधिकार इस्तेमाल किया, Nominet ने spreadsheet नहीं भेजी। उसने एक भौतिक पैकेज भेजा, जिसमें विवरण 500 से ज़्यादा काग़ज़ों पर छपे थे, और email पते छोड़ दिए गए थे।\nउसने एक दूसरा प्रस्ताव भी रोका जो दो योग्य caretaker directors बैठाता, इस तर्क पर कि वह क़ानूनी नहीं था, और फिर अभियान की आलोचना की कि उसके पास कोई उत्तराधिकार योजना नहीं है।\n22 मार्च 2021 को वोट हुआ। मतदान 53% था। प्रस्ताव 52.7% से पास हुआ, और ग्यारह बोर्ड सदस्यों में से पाँच गए:\nMark Wood Chairman Russell Haworth Chief Executive Eleanor Bradley Managing Director, Registry Ben Hill Chief Financial Officer Jane Tozer Non-executive Director Haworth ने हारने के बजाय वोट से कुछ घंटे पहले इस्तीफ़ा दे दिया। Rob Binns कार्यवाहक chair बने।\nयहाँ मेरी राय है कि वह जोड़ी असल में क्या थी, और मैं इसे राय कहकर चिह्नित कर रहा हूँ क्योंकि यह राय ही है।\nWood और Haworth ने Nominet को वैसे चलाया जैसे कोई venture capital फ़र्म अपनी portfolio कंपनी चलाती है। ऐसी रजिस्ट्री की तरह नहीं जिससे संयोग से surplus निकलता है, बल्कि एक balance sheet की तरह जिससे एक कम इस्तेमाल हुई संपत्ति जुड़ी है: एक बँधी हुई monopoly जो नक़दी उगलती है, जिसे किसी ज़्यादा फ़ायदे वाली जगह बेहतर लगाया जा सकता है।\nऊपर दर्ज हर बात इससे मेल खाती है। भरोसेमंद आमदनी लीजिए और उसकी क़ीमत बढ़ाइए, क्योंकि ग्राहकों के पास जाने की कोई और जगह नहीं। जिस ख़र्च से कोई return नहीं आता उसे रोकिए, जो कि चैरिटी है। फ़र्क़ को एक portfolio में लगाइए: spectrum, cyber, एक विदेशी रजिस्ट्री, ड्राइवरलेस कारें, इस सिद्धांत पर कि इनमें से कोई चल निकलेगा। इसे चलाने वालों को उस दर पर भुगतान कीजिए जो इस तरह के काम की होती है। और तब तक चलते रहिए जब तक आपको रोकने का हक़ रखने वाला कोई रोक न दे।\nकिसी कंपनी को इस तरह चलाने में कुछ असामान्य नहीं है। लेकिन यह एक public benefit संस्था चलाने का तरीका नहीं है जो एक राष्ट्रीय संपत्ति को ट्रस्ट में रखती है, क्योंकि वह surplus कभी return की तलाश में पूँजी नहीं था। वह वही चीज़ था जिसे पैदा करने के लिए पूरी व्यवस्था बनी थी, और संविधान यही कहता था।\nआख़िरकार सदस्यों ने भी यही कहा, उस एकमात्र भाषा में जो उनके पास थी।\nअंतर के बारे में ईमानदार रहना ज़रूरी है। 53% मतदान पर 52.7% कोई भारी जीत नहीं है, यह बँटी हुई सदस्यता पर एक कम अंतर की जीत है, और संगठन ने अपने हर संसाधन से इसका विरोध किया। फिर भी वह हारा।\nआगे क्या हुआ Nominet व्यावसायिक cyber दिशा से पीछे हटा और रजिस्ट्री व public benefit काम की ओर मुड़ा। फिर आँकड़े आए।\nमुख्य कारोबार उसी साल शिखर पर था जिस साल मैं गया। प्रबंधन में .uk डोमेन 2019 में 13,348,378 पर शिखर पर पहुँचे। जनवरी 2023 तक यह 11,045,559 था। जनवरी 2024 तक, 10,688,932। आधार का पाँचवाँ हिस्सा, चला गया, और अब भी गिर रहा है।\nDiversification में पैसा डूबा। हिसाब-किताब से पहले के अपने आख़िरी पूरे साल में cyber business unit का turnover £12.6 million था और उसने £2.4 million का घाटा दर्ज किया। यही इस सवाल का जवाब है कि जिन परियोजनाओं के लिए surplus ने पैसा दिया वे निवेश थीं या शौक़, और यह Nominet का अपना आँकड़ा है।\nफिर कॉन्ट्रैक्ट गया। 2024 में NCSC ने Protective DNS का दोबारा tender निकाला, एक ऐसी सेवा जो साल में लगभग आधा trillion queries संभालती है, और Nominet इसे हार गया। काम सितंबर 2024 से Accenture के साथ Cloudflare के पास गया, लगभग £30 million के बताए गए सौदे पर। मुख्य कार्यकारी Paul Fletcher ने कहा कि सरकार ने एक सस्ता प्रतिस्पर्धी चुना था।\nऔर backend का कारोबार आता-जाता रहता है। अप्रैल 2021 में, EGM के कुछ हफ़्तों बाद, MMX ने अपना portfolio GoDaddy Registry को $120 million में बेच दिया, और वे 28 strings जिन्होंने Nominet को registry operators की ऊपरी पंक्ति में रखा था, ख़रीदार के साथ चले गए। .blog 2019 में ही CentralNic के पास जा चुका था।\nयह कहना ही उचित है कि यह दोनों तरफ़ चलता है। Amazon ने 2019 में अपने 54 gTLDs का ज़्यादातर हिस्सा Nominet के प्लैटफ़ॉर्म पर लाया, और Microsoft ने बाद में .skype और .office को GoDaddy से हटाकर यहाँ लाया। Nominet portfolios जीतता भी है और खोता भी है।\nलेकिन यह कारोबार के बारे में बात है, उसका बचाव नहीं। Backend registry सेवाएँ ऐसी आमदनी है जो आपके नियंत्रण में नहीं। यह किसी और के corporate लेन-देन पर आती और जाती है: MMX इसलिए नहीं गया कि Nominet ने प्लैटफ़ॉर्म बुरा चलाया, वह इसलिए गया कि MMX बिक गया। एक public benefit संस्था की वित्तीय नींव ऐसे कारोबार पर रखना जो किसी मंगलवार को इसलिए चला जाए कि उसके मालिक ने $120 million ले लिए, एक रणनीतिक चुनाव है, और यह चुनाव किया गया।\nऔर उसी साल, उसने .gov.uk जीता।\n.gov.uk सालों से Jisc चला रहा था, pro bono, एक पुराने memorandum of understanding के तहत, ऐसी व्यवस्था जिसके बारे में सरकार ने आख़िरकार निष्कर्ष निकाला कि वह अंतरराष्ट्रीय स्तर पर मान्य मानकों पर खरी नहीं उतर रही थी। Central Digital and Data Office ने Crown Commercial Service के ज़रिए ख़रीद प्रक्रिया चलाई, Nominet ने नवंबर 2023 में इसे जीता, और बदलाव 26 जून 2024 को पूरा हुआ, आम चुनाव से एक हफ़्ता पहले, ताकि मतदाता पंजीकरण किसी नुक़सान से बचा रहे। Jisc का अपना रजिस्ट्री पेज अब सपाट ढंग से तारीख़ दर्ज करता है: 26 जून 2024 से वह .gov.uk namespace का प्रबंधन नहीं करता, हालाँकि कुछ ग्राहकों के लिए वह registrar बना रहा। एक राष्ट्रीय namespace चलाने के अट्ठाईस साल, एक web page की एक लाइन पर ख़त्म।\nबताई गई ज़रूरतें थीं resilience, ICANN के DNS मानकों का पालन, और NCSC के Cyber Assessment Framework पर खरा उतरना।\nइसे इस पोस्ट में पहले दिए तर्क के सामने पढ़िए। Nominet सरकार के अपने namespace के लिए एक विश्वसनीय बोलीदाता इसलिए था कि वह पहले से ICANN के मानकों पर चलता था: ऐसे मानक जो उसने इसलिए अपनाए थे कि उसका ज़्यादातर ढाँचा कॉन्ट्रैक्ट से उनसे बँधा था, और जो .uk तक इसलिए पहुँचे कि कोई एक प्लैटफ़ॉर्म पर दो व्यवस्थाएँ नहीं चलाता। जो अनुशासन gTLD कॉन्ट्रैक्टों के रास्ते बग़ल से आया, उसी ने उसे .gov.uk चलाने के योग्य बनाया।\nतो 2024 सिर्फ़ एक बुरा साल नहीं था। उसने अपना सबसे बड़ा कॉन्ट्रैक्ट खोया और वह जीता जिस पर सरकार का नाम है।\nउस जीत की दो बातें देखने लायक हैं, क्योंकि यही namespace चलाने और उसे रखने का फ़र्क़ है।\nअधिकार सरकार ने अपने पास रखा। रजिस्ट्री Nominet चलाता है। आवेदनों का प्रबंधन और मंज़ूरी अब भी Central Digital and Data Office करता है: .gov.uk किसे मिलेगा, यह सरकार का फ़ैसला है, रजिस्ट्री का नहीं। .co.uk ऐसे काम नहीं करता, जहाँ मान्य registrar जो भी आए उसे बेचते हैं। तकनीकी operation outsource हुआ। namespace पर हक़ नहीं।\nऔर यह एक कॉन्ट्रैक्ट है। .gov.uk Crown Commercial Service के ज़रिए ख़रीदा गया, जिसका मतलब है उसकी एक अवधि और एक समाप्ति तिथि है, और सरकार ठीक एक बार दिखा चुकी है कि जब वह तय करती है कि व्यवस्था काफ़ी अच्छी नहीं है तो क्या करती है: उसने बीस-कुछ साल बाद पूरी चीज़ Jisc से हटा ली।\nतो Nominet .gov.uk को उन शर्तों पर रखता है जिन पर वह .uk को नहीं रखता। एक को कॉन्ट्रैक्ट के अंत में कोई अधिकारी renew न करने का फ़ैसला करके वापस ले सकता है। दूसरे का न कोई कॉन्ट्रैक्ट है, न अवधि, न renewal, और जिन लोगों ने कभी उसे अनुशासित करने में सफलता पाई, उन्हें इसके लिए सदस्यों का वोट संगठित करना पड़ा।\nमार्च 2024 में, PDNS जाने और .uk सिकुड़ने के साथ, Fletcher ने एक पुनर्गठन की घोषणा की जिसमें 70 तक पद ख़तरे में थे।\nऔर फिर वह लाइन जो घेरा पूरा करती है। Fletcher ने कहा कि डोमेन की क़ीमत “cannot be held at the level set in January 2020 indefinitely.”\n.uk की क़ीमतें बढ़ना उन चीज़ों में था जिन पर सदस्यों ने बग़ावत की थी। पाँच साल बाद, diversification घाटे पर समेट दिए जाने, प्रमुख कॉन्ट्रैक्ट एक सस्ते बोलीदाता से हारने और registrations गिरने के साथ, जो जवाब तैयार किया जा रहा है वह है .uk की क़ीमत फिर बढ़ाना।\nऔर अंदर का नज़ारा सुधरा नहीं है सदस्यों को अपना बोर्ड बदलाव मिल गया। उन्हें संगठन वापस मिला या नहीं, यह अलग सवाल है।\n25 अगस्त 2026 तक Nominet की Glassdoor रेटिंग 97 समीक्षाओं में 5 में से 2.9 है, 31% कहते हैं कि वे इसकी सिफ़ारिश करेंगे, 22% कारोबार के भविष्य को लेकर सकारात्मक हैं और 29% मुख्य कार्यकारी को मंज़ूर करते हैं। सबसे कम अंक वाली श्रेणी senior management है, 2.3 पर। समीक्षक अपने सहकर्मियों और काम को ऊँची रेटिंग देते हैं। जिसे वे रेटिंग नहीं देते, वह उनके ऊपर की परत है।\nयह एक औसत अंक है, निंदनीय नहीं, और इसे वैसे ही पढ़ा जाना चाहिए जैसा यह है: एक सार्वजनिक साइट पर खुद चुना गया नमूना। लेकिन शिकायत का आकार साफ़ तौर पर वही है जो सदस्यों ने 2021 में किया था: ऐसी रणनीति जिसे कोई समझा नहीं सकता, ऊपर की ओर बहता इनाम, और राष्ट्रीय रजिस्ट्री चलाने वाले लोगों से पूछा न जाना।\nअलग मुख्य कार्यकारी। वही शिकायत।\nयह ccTLD पर शासन करने वालों के बारे में क्या कहता है शुरू के सवाल पर लौटिए।\nICANN यह सब नहीं कर सकता था। उसका .uk पर कोई कॉन्ट्रैक्ट नहीं था, कोई हैसियत नहीं, और चिट्ठी लिखने के अलावा कोई तंत्र नहीं। ICANN वाली पोस्ट में Specification 6, compliance और निगरानी के बारे में जो कुछ है, वह Nominet के gTLDs पर लागू होता था, उस zone पर नहीं जो देश के लिए असल में मायने रखता है।\nUK सरकार ने भी यह नहीं किया, और यह साफ़ होना ज़रूरी है कि क्यों, क्योंकि आम धारणा ग़लत है। .uk किसी सरकारी कॉन्ट्रैक्ट पर नहीं दिया जाता। कोई tender नहीं, कोई renewal तिथि नहीं, और कोई प्रतिस्पर्धी इसकी बोली लगाने की प्रतीक्षा में नहीं। Nominet delegation IANA से रखता है, उसी तरह जैसे हर दूसरी country-code रजिस्ट्री अपना रखती है, और कोई इसे हर कुछ साल में बाँटता नहीं।\nसरकार के पास जो है वह एक आरक्षित शक्ति है, और लगभग किसी को पता नहीं कि वह है।\nDigital Economy Act 2010 की धाराएँ 19 से 21 Secretary of State को किसी योग्य internet domain रजिस्ट्री में “serious relevant failure” होने पर कार्रवाई करने देती हैं: ऐसी विफलता जो UK संचार की उपलब्धता या साख, या उपभोक्ताओं या जनता के हितों पर बुरा असर डाले। Nominet वही रजिस्ट्री है। नोटिस और अपनी बात रखने के मौक़े के बाद, Secretary of State रजिस्ट्री पर एक manager नियुक्त कर सकते हैं, या उसका संविधान बदलने के लिए अदालत में आवेदन कर सकते हैं।\nयह उससे काफ़ी ज़्यादा है जो ICANN के पास कभी किसी ccTLD पर रहा। और यहाँ वह हिस्सा है जिस पर ठहरना ज़रूरी है: वे दो धाराएँ चौदह साल निष्क्रिय पड़ी रहीं, और 6 अप्रैल 2024 को लागू की गईं, उसी साल जिसमें Nominet ने NCSC कॉन्ट्रैक्ट खोया और 70 छँटनियों की घोषणा की।\nमैं यह दावा नहीं करूँगा कि ये तथ्य जुड़े हुए हैं, क्योंकि मुझे नहीं पता कि वे जुड़े हैं। रिकॉर्ड पर यह है कि .uk रजिस्ट्री में manager बैठाने की शक्ति 2024 में सक्रिय हुई, और उससे पहले के चौदह साल नहीं थी।\nऔर यह सिर्फ़ घरेलू रास्ता है। एक दूसरा भी है, और यही कारण है कि दुनिया में कहीं भी कोई ccTLD ऑपरेटर अपना delegation अधिकार के रूप में नहीं रखता।\nएक country-code delegation हटाया जा सकता है। IANA, RFC 1591, ICP-1 और GAC Principles के तहत ccTLDs का redelegation करता है, और उसने बार-बार ऐसा किया है: .kz, .iq, .za, .gd, .gw और दूसरे। GAC Principles मानते हैं कि हर सरकार अपने क्षेत्र में राष्ट्रीय सार्वजनिक नीति की अंतिम ज़िम्मेदारी रखती है, और व्यवहार में IANA अपने देश के डोमेन के किसी भी हस्तांतरण में मान्य सरकार की राय को बड़ा विचार मानता है।\nऑस्ट्रेलिया ने, जैसा ऊपर है, 2018 में यह लिखित में रखा: सुधार करो या delegation हटेगा।\nतो जो UK सरकार तय करे कि .uk को कहीं और होना चाहिए, उसे रोका नहीं जाएगा। यह तुरंत नहीं होगा, यह घोषणा से चलाई जाने वाली शक्ति नहीं है, और स्थानीय internet समुदाय से परामर्श होगा। लेकिन तंत्र मौजूद है, मिसालें मौजूद हैं, और सरकार की राय इसमें सबसे भारी अकेला इनपुट है।\nयह .uk को ऐसी स्थिति में रखता है जिसे साफ़ कहना ज़रूरी है। संचार UK के critical national infrastructure क्षेत्रों में से एक है, और राज्य DNS के साथ उसी हिसाब से बर्ताव करता है: NCSC सालों से public sector के लिए protective DNS ख़रीदता आया है। critical national infrastructure चलाने वाली एक रजिस्ट्री, जिसकी सरकार घरेलू स्तर पर उस पर manager नियुक्त कर सकती है और जिसकी बात अंतरराष्ट्रीय स्तर पर redelegation में भारी पड़ेगी, अपना delegation संपत्ति के रूप में नहीं रखती। वह इसे रहम पर रखती है, और वह रहम इस शर्त पर है कि किसी की किरकिरी न हो।\nउसे जिसने अनुशासित किया वह था सदस्यों का वोट, कम अंतर से, समस्या के छह साल बाद, एक hosting कंपनी के चलाए अभियान के बाद, जिसे अपनी बात रखने के लिए अपने ही सदस्यों का विवरण 500 काग़ज़ों पर सौंपा गया।\nयह उस किसी भी चीज़ से बेहतर जवाबदेही तंत्र है जो ICANN के पास है। इसने एक राष्ट्रीय रजिस्ट्री के मुख्य कार्यकारी और chairman को हटाया, जो किसी ICANN प्रक्रिया ने कभी किसी के साथ नहीं किया। यह धीमा भी है, टकराव वाला भी, इस पर निर्भर कि कोई इस पर अपनी ज़िंदगी का एक साल लगाने का फ़ैसला करे, और यह विफल होने से बस कुछ प्रतिशत अंक दूर था।\nDNS शासन लगभग हर जगह यहीं है। जो तंत्र काम करते हैं वे वही हैं जिन्हें संसाधनों वाला कोई चलाने का फ़ैसला करता है। .cm ने सालों तक एक पूरे top-level domain को wildcard किया क्योंकि हैसियत वाले किसी ने आपत्ति नहीं की। Freenom तभी रुका जब Meta ने मुक़दमा किया। .uk ने रास्ता इसलिए बदला कि एक hosting कंपनी ने वोट संगठित किया।\nइनमें से कुछ भी उस अर्थ में शासन नहीं है जिसका यह शब्द संकेत देता है। यह इस पर है कि संयोग से कौन आ पहुँचा।\nअंत में एक खुला विचार ऊपर की हर बात या तो स्रोत के साथ है या मेरे अपने अनुभव के रूप में चिह्नित है। यह आख़िरी हिस्सा दोनों में से कुछ नहीं है। यह वह है जो मैं सोचता हूँ, और आप इससे असहमत होने के लिए आज़ाद हैं।\nमैंने Nominet में 2017 में शुरू किया, जो नौ साल पहले है। Russell Haworth ने 2015 में कमान संभाली, जो ग्यारह साल पहले है। किसी संगठन के कुछ सीखने के लिए यह काफ़ी लंबा समय है।\nक्या उसने सीखा?\nकाग़ज़ पर, हाँ। जिस बोर्ड को वोट से हटाया गया, वह चला गया। व्यावसायिक cyber महत्वाकांक्षाएँ समेट दी गईं। charitable शाखा स्वतंत्र हुई और अपने नाम से अब भी चल रही है। सदस्यों ने अपने पास का एकमात्र तंत्र इस्तेमाल किया और वह काम कर गया।\nफिर देखिए कि असल में आपके सामने क्या है। .uk 2019 के मुक़ाबले पाँचवाँ हिस्सा छोटा है और अब भी सिकुड़ रहा है। जो कॉन्ट्रैक्ट आख़िरकार diversification से निकला, वह एक सस्ते बोलीदाता के पास चला गया। सत्तर पद उसके साथ गए। मुख्य कार्यकारी बता रहे हैं कि .uk की क़ीमत 2020 के स्तर पर हमेशा नहीं रखी जा सकती, और यह वही लीवर है जिसने पहली बार परेशानी शुरू करने में मदद की थी। और स्टाफ़ senior management को 5 में से 2.3 देता है, मुख्य कार्यकारी को 29% की मंज़ूरी के साथ। अलग मुख्य कार्यकारी, और साफ़ तौर पर वही शिकायत।\nतो मेरा ईमानदार जवाब यह है कि लोग बदल दिए गए और मैं आश्वस्त नहीं हूँ कि संगठन बदला।\nयह देखने लायक है कि Haworth बाद में कहाँ गए, क्योंकि यह आलोचना नहीं है और ठीक इसीलिए मायने रखता है। Nominet से पहले उन्होंने Thomson Reuters में financial data में चौदह साल बिताए थे। बाद में वे NBS गए, फिर Byggfakta, फिर Acclaro: पेशेवर ग्राहकों, recurring revenue और pricing power वाले subscription कारोबार। 2023 में NBS का turnover £45m था, £23.6m EBITDA पर। ये अच्छे आँकड़े हैं, और इन्हें हासिल करना ही वह काम है जिसके लिए एक व्यावसायिक मुख्य कार्यकारी होता है।\nबात असल में यही है, और इस चित्रण के लिए आपको मेरी बात मानने की ज़रूरत नहीं। उनकी अपनी पेशेवर प्रोफ़ाइल उन्हें private equity समर्थित B2B कारोबारों के मुख्य कार्यकारी के रूप में बताती है। यही काम वे करते हैं, वे खुद यह कहते हैं, और वे साफ़ तौर पर इसमें अच्छे हैं।\nवे एक व्यावसायिक ऑपरेटर हैं और उन्होंने व्यावसायिक काम किए। ग़लती कभी उनका स्वभाव नहीं थी। ग़लती थी उस स्वभाव को एक ऐसे संगठन का प्रभारी बनाना जिसका surplus पूँजी नहीं था और कभी होना भी नहीं था, और फिर छह साल तक किसी को उस पर नज़र रखने की स्थिति में न छोड़ना।\nहालाँकि NBS पर दोबारा नज़र डालना ज़रूरी है, क्योंकि उसका आकार जाना-पहचाना है।\nNBS, Chorus बेचता है, वह specification टूल जिसमें UK की ज़्यादातर architectural प्रैक्टिसें काम करती हैं। यह Revit और ISO 19650 workflows से जुड़ा है, और इसका कोई गंभीर विकल्प नहीं है: architects इसे एक ज़रूरी टूल बताते हैं जिसके लिए उन्हें बस पैसे देते रहने पड़ते हैं। एक प्रैक्टिशनर का licence 2015 में £1,385 से बढ़कर £7,350 हो गया, जिसे Architects\u0026rsquo; Journal ने एक दशक में 400% वृद्धि बताया। छोटी प्रैक्टिस के लिए कोई दर नहीं, इसलिए अकेला प्रैक्टिशनर प्रति seat उतना ही देता है जितना 200 लोगों की फ़र्म। trade press में शब्द हैं “rip-off increases” और “well above inflation”, इस टिप्पणी के साथ कि भुगतान करने के अलावा बहुत कम विकल्प है।\nश्रेय देने में सावधान रहिए, क्योंकि तारीख़ें उस तरह मेल नहीं खातीं जैसे आप चाहेंगे। Chorus 2018 में आया। RIBA ने 2018 और 2020 के बीच NBS को लगभग £172 million में बेचा, और RIBA के एक पूर्व अध्यक्ष कह चुके हैं कि उसे कभी नियंत्रण नहीं छोड़ना चाहिए था, एक ऐसा वाक्य जिसकी अपनी एक गूँज है। Haworth ने अक्टूबर 2021 से अक्टूबर 2024 तक कारोबार चलाया। बताई गई सबसे तीखी बढ़ोतरी, और सबसे ऊँची शिकायतें, 2024 और 2025 की हैं, उनके जाने के बाद, और अब सार्वजनिक रूप से उनका बचाव करने वाले मुख्य कार्यकारी कोई और हैं।\nतो यह किसी व्यक्ति के बारे में सबूत नहीं है। यह एक आकार के बारे में सबूत है।\nएक पेशेवर संस्था वह टूल बेचती है जिसके बिना उसके सदस्य काम नहीं कर सकते। ख़रीदार को पता चलता है कि ग्राहक जा नहीं सकते। क़ीमत महँगाई से काफ़ी ऊपर बढ़ती है, साल दर साल, और शिकायतें कहीं नहीं पहुँचतीं क्योंकि उनके जाने की कोई जगह नहीं। यही .uk है, और यही .org लगभग बन गया था जब ICANN ने क़ीमत की सीमाएँ हटाईं, एक private equity वाहन के उसके लिए $1.135 billion की बोली लगाने से चार महीने पहले।\nअसली सबक यही है, और यह किसी के लिए आरामदेह नहीं जो उम्मीद कर रहा था कि यह एक executive के बारे में था। बँधे हुए पेशेवर ग्राहक, एक ज़रूरी टूल, कोई वैकल्पिक सप्लायर नहीं: यह व्यवस्था वही नतीजा देती है चाहे इसे कोई भी चलाए, जब तक बीच में कुछ खड़ा न हो। Nominet में आख़िरकार सदस्य खड़े हुए। NBS में कोई नहीं है: जो पेशेवर संस्था यह भूमिका निभा सकती थी, उसने अपनी हिस्सेदारी बेच दी और £172 million लेकर चली गई।\nमुझे नहीं लगता कि यह असल में किसी व्यक्ति के बारे में है, यह भी नहीं। किसी को भी बिना रेगुलेटर की निगरानी के एक राष्ट्रीय संपत्ति चलाने वाली सदस्य-स्वामित्व वाली monopoly का प्रभारी बना दीजिए, और उसे ऐसा surplus दीजिए जिसका कोई स्पष्ट मालिक नहीं, और खिंचाव हमेशा उसे उस चीज़ से ज़्यादा दिलचस्प किसी चीज़ पर ख़र्च करने की ओर होगा जो उसे कमाती है। .uk को अच्छे से चलाना ऐसी कहानी नहीं जो आप किसी conference में सुना सकें। ऑस्ट्रेलिया के लिए बोली लगाना है।\nसुधार, जब आता है, सदस्यों से आना पड़ता है, जिसका मतलब है किसी को अपनी ज़िंदगी का एक साल छोड़कर एक ऐसे पदाधिकारी के ख़िलाफ़ वोट संगठित करना होगा जो उसका विरोध करने में उन्हीं सदस्यों का पैसा ख़र्च कर रहा है। ऐसा एक बार हुआ, और यह 53% मतदान पर 2.7 प्रतिशत अंकों से पास हुआ। कोई भी जवाबदेही तंत्र इस तरह डिज़ाइन नहीं करेगा।\nदो असली बचाव पूरे समय बिना इस्तेमाल पड़े रहे। Digital Economy Act की शक्तियाँ 2024 में ही लागू हुईं। redelegation का किसी ने कभी गंभीरता से सुझाव नहीं दिया।\nनौ साल बाद, जो बात मैं जानना चाहूँगा, और बाहर से नहीं बता सकता, वह यह है कि क्या Nominet में आज कोई मीटिंग में ज़ोर से कह सकता है, हम एक non-profit हैं, क्या हमें सच में इस पर पैसा ख़र्च करना चाहिए?, और एक साल बाद भी वहाँ काम कर रहा हो।\nअगर जवाब हाँ है, तो उसने कुछ सीखा है। अगर नहीं है, तो 2021 में बस नाम बदले।\n","permalink":"https://blogs.damiendye.uk/hi/dns/what-happened-at-nominet/","summary":".uk रजिस्ट्री उसके सदस्यों की है, और मार्च 2021 में उन्होंने आधे बोर्ड को वोट से बाहर कर दिया। अंदर से पूरा ढाँचा असल में कैसा दिखता था, दर्जनों gTLD के साथ .uk चलाने ने उसके चलने के तरीके को कैसे गढ़ा, और बिना रेगुलेटर वाली एक रजिस्ट्री को आख़िर उन्हीं लोगों ने कैसे अनुशासित किया जो ऐसा कर सकते थे।","title":"Nominet में क्या हुआ"},{"content":"8 भागों में से भाग 1। यह सीरीज़ आसान भाषा में लिखी गई है, छोटी लाइनों और रोज़ के शब्दों में।\nयह पोस्ट किस बारे में है टेक्नोलॉजी ख़रीदने का तरीका कैसे बदला। वह क्यों बदला। सप्लायर छोड़ना मुश्किल क्यों हो गया। ओपन सोर्स ने इसे रोका क्यों नहीं। यह सब आख़िर कहाँ पहुँचा। बदलाव बीस साल पहले आप सॉफ़्टवेयर ख़रीदते थे।\nआप एक बार पैसा देते थे। वह कॉपी आपकी होती थी। जब तक वह चलती, आप उसे इस्तेमाल कर सकते थे।\nअब ज़्यादातर सॉफ़्टवेयर किराये पर मिलता है। उसे चलाते रहने के लिए आप हर साल पैसा देते हैं।\nपैसा देना बंद करो, और वह चलना बंद। आपके पास कुछ भी अपना नहीं।\nसब्सक्रिप्शन यही है। सब्सक्रिप्शन वह भुगतान है जो आप किसी सर्विस को अपने पास रखने के लिए बार-बार करते हैं।\nकंप्यूटिंग के साथ भी यही हुआ। पहले आप सर्वर ख़रीदते थे। अब बहुत-सी कंपनियाँ अपनी कंप्यूटिंग किसी क्लाउड प्रोवाइडर से किराये पर लेती हैं।\nक्लाउड प्रोवाइडर वह कंपनी है जो आपके लिए कंप्यूटर चलाती है, अपनी ही इमारतों में।\nयह क्यों बदला इस पर ईमानदार रहें, क्योंकि यह मायने रखता है। यह इसलिए बदला कि किराया अक्सर बेहतर सौदा था।\nसर्वर ख़रीदने में शुरू में बहुत पैसा लगता है। किराये पर लेने में शुरू में बहुत कम।\nक्लाउड सर्विसें भरोसेमंद थीं और जल्दी शुरू हो जाती थीं। छोटी टीमों को वे टूल मिल गए जो पहले सिर्फ़ बड़ी कंपनियाँ ख़रीद पाती थीं।\nसब्सक्रिप्शन के साथ नियमित अपडेट भी आए। हर कुछ साल में एक बड़ी उथल-पुथल की योजना बनाने की ज़रूरत ख़त्म।\nतो ज़्यादातर कंपनियाँ बदल गईं, और उनके पास अच्छी वजह थी। किसी को मजबूर नहीं किया गया।\nयह सीरीज़ जो सवाल पूछती है वह बाद में आता है। सवाल यह है कि जब कहीं और जाना मुश्किल हो जाए, तब क्या होता है।\nछोड़ना मुश्किल क्यों हुआ असली बात यहाँ है।\nइस बदलाव के हर कदम ने यह जगह खिसका दी कि छोड़ना कहाँ मुश्किल है।\nशुरू में यह फ़ाइल फ़ॉर्मेट में था। फ़ाइल फ़ॉर्मेट वह तरीका है जिससे कोई प्रोग्राम आपका काम सेव करता है। अगर आपकी फ़ाइलें सिर्फ़ एक ही प्रोग्राम खोल पाता, तो आप वही प्रोग्राम ख़रीदते रहते।\nखुले फ़ाइल फ़ॉर्मेट ने यह सुलझा दिया। आज ज़्यादातर डॉक्यूमेंट एक से ज़्यादा प्रोग्राम में खुल जाते हैं।\nतो मुश्किल वाला हिस्सा खिसक गया। वह इंटरफ़ेस पर चला गया।\nइंटरफ़ेस वह तरीका है जिससे एक सॉफ़्टवेयर दूसरे से बात करता है। अपने सारे सिस्टम एक सप्लायर के इंटरफ़ेस के इर्द-गिर्द बना लो, तो सप्लायर बदलने का मतलब है सब कुछ दोबारा लिखना।\nफिर वह फिर खिसका, आपके डेटा पर।\nथोड़ा-सा डेटा ले जाना काफ़ी आसान है। सालों का डेटा ले जाना धीमा है, और कुछ प्रोवाइडर उसे बाहर निकालने के पैसे भी लेते हैं।\nहर बार खिसकने से सॉफ़्टवेयर ख़ुद कम मायने रखने लगा। इसलिए अब असली बात यह है कि छोड़ने में आपको कितना काम करना पड़ेगा।\nसमय के साथ छोड़ने की मुश्किल कहाँ रही है तब बाद में अब आपका डेटा फ़ाइल फ़ॉर्मेट इंटरफ़ेस प्रोग्राम आपका डेटा फ़ाइल फ़ॉर्मेट इंटरफ़ेस प्रोग्राम आपका डेटा फ़ाइल फ़ॉर्मेट इंटरफ़ेस प्रोग्राम नीला डिब्बा वह हिस्सा है जिसे बदलना मुश्किल है। हर बार जब एक परत खोली गई, मुश्किल खिसक गई अगली परत पर। वही परतें, 3 बार। बदलने में मुश्किल वाला हिस्सा ऊपर चढ़ता गया है: पहले फ़ाइल फ़ॉर्मेट, फिर इंटरफ़ेस, फिर डेटा। ओपन सोर्स ने इसे रोका क्यों नहीं ओपन सोर्स सॉफ़्टवेयर वह सॉफ़्टवेयर है जिसका कोड कोई भी पढ़ सकता है, इस्तेमाल कर सकता है और बदल सकता है।\nबहुत लोगों को उम्मीद थी कि यह इस समस्या को सुलझा देगा। इसने एक असली हिस्सा सुलझाया, पर वह हिस्सा नहीं जो आप सोचेंगे।\nओपन सोर्स जीत गया। इंटरनेट का ज़्यादातर हिस्सा इसी पर चलता है। ज़्यादातर अहम हिस्सों का कोड पढ़ने के लिए मौजूद है।\nफिर भी छोड़ने की मुश्किल दूर नहीं हुई, क्योंकि वह पहले ही आगे खिसक चुकी थी।\nआप किसी डेटाबेस की हर लाइन पढ़ सकते हैं। फिर भी उसे चलाने वाली मैनेज्ड सर्विस से 5 साल का डेटा आसानी से बाहर नहीं निकाल सकते।\nमैनेज्ड सर्विस वह है जिसमें कोई प्रोवाइडर आपके लिए सॉफ़्टवेयर चलाता है, ताकि आपको न चलाना पड़े।\nकोड खुला है। सर्विस नहीं।\nयहाँ एक दूसरी बात भी है, और वह जायज़ है।\nबहुत-सा ओपन सोर्स ऐसे वॉलंटियर चलाते हैं जिन्हें पैसा नहीं मिलता। बड़ी कंपनियाँ उसी काम पर अपने प्रोडक्ट बनाती हैं।\n2024 में एक बहुत इस्तेमाल होने वाले कम्प्रेशन टूल में छिपा हुआ नुकसानदेह कोड मिला। उस टूल को 1 बिना वेतन वाला व्यक्ति संभाल रहा था। Bruce Schneier और दूसरों ने इसके बारे में विस्तार से लिखा।\nसबक यह नहीं है कि ओपन सोर्स जोखिम भरा है। सबक यह है कि जिस साझा काम पर सब टिके हैं, उसके लिए पैसा मिलना चाहिए, और अक्सर नहीं मिलता।\nयह कहाँ पहुँचा इन कदमों को जोड़ो तो आप वहाँ पहुँचते हैं जहाँ हम आज हैं।\nगिनी-चुनी कंपनियाँ वे सर्विसें देती हैं जिन पर ज़्यादातर कंपनियाँ निर्भर हैं।\nउनमें से ज़्यादातर कंपनियाँ 1 देश में हैं, संयुक्त राज्य अमेरिका में।\nEuroStack प्रोजेक्ट की इकट्ठा की गई रिसर्च के मुताबिक़ यूरोपीय क्लाउड बाज़ार का लगभग 85% हिस्सा गैर-यूरोपीय प्रोवाइडरों के पास है।\nयह किसी एक फ़ैसले से नहीं हुआ। यह 20 सालों में, एक-एक करके लिए गए बहुत सारे समझदार फ़ैसलों का नतीजा है।\nइसी वजह से यह एक घटना नहीं, एक रुझान है।\nआपके लिए इसका क्या मतलब है इसमें से कुछ भी यह नहीं कहता कि अमेरिकी सॉफ़्टवेयर ख़राब है। उसका बहुत-सा हिस्सा बहुत अच्छा है, और ठीक इसी वजह से वह हर जगह पहुँचा।\nपर इसका मतलब यह ज़रूर है कि 1 सवाल अब पहले से ज़्यादा मायने रखता है।\nकिसी दूसरे सप्लायर पर जाने में आपको कितना समय लगेगा?\nयह संख्या काफ़ी कुछ तय करती है, और भाग 2 बताता है कि क्यों।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/technology-you-rent/","summary":"बीस साल पहले आप सॉफ़्टवेयर ख़रीदते थे और वह कॉपी आपकी होती थी। अब आप उसे किराये पर लेते हैं, और शर्तें सप्लायर तय करता है। 8 भागों में से भाग 1 बताता है कि यह कैसे हुआ, और हर कदम ने कहीं और जाना क्यों मुश्किल बना दिया।","title":"टेक्नोलॉजी किराये की चीज़ कैसे बन गई"},{"content":"8 भागों में से भाग 2। भाग 1 में बताया गया था कि किराये ने ख़रीद की जगह कैसे ले ली।\nइस भाग में क्या है छोड़ना मुश्किल होने पर क़ीमत कैसे तय होती है। मुनाफ़े पर टैक्स कहाँ लगता है। आपके डेटा पर किसका कानून लागू होता है। व्यापार के फ़ैसले आपके सामान तक कैसे पहुँचते हैं। अगर कोई सेवा अचानक रुक जाए तो क्या होता है। 1. क़ीमत आपकी निकलने की लागत के पीछे चलती है उससे शुरू करते हैं जो ज़्यादातर संस्थाएँ झेल चुकी हैं।\n2023 में Broadcom ने VMware ख़रीदा। VMware वह सॉफ़्टवेयर बनाता है जिससे 1 फ़िज़िकल सर्वर पर कई वर्चुअल सर्वर चलाए जाते हैं।\nइसके बाद Broadcom ने स्थायी लाइसेंस बेचना बंद कर दिया। ग्राहकों को सब्सक्रिप्शन पर जाना पड़ा।\nउनमें से बहुतों की क़ीमतें तेज़ी से बढ़ीं। AT\u0026amp;T ने अदालती काग़ज़ों में कहा कि उसकी लागत लगभग 1,050% बढ़ने वाली थी।\nCISPE यूरोपीय क्लाउड प्रोवाइडरों की एक ट्रेड संस्था है। उसने इन बदलावों पर यूरोपीय आयोग से शिकायत की है, इसी आकार के आँकड़ों के साथ।\nमार्च 2026 में, यूरोपीय पार्टनर प्रोग्राम बंद होने के बाद, CISPE ने फिर शिकायत की। प्रोवाइडरों ने इसे कैसे देखा, यह The Register ने बताया।\nयहाँ कुछ भी गैरकानूनी साबित नहीं हुआ है। शिकायतों की अभी जाँच चल रही है।\nलेकिन पैटर्न इतना साफ़ है कि उससे सीखा जा सके।\nरिन्यूअल एक मोल-भाव है। उसमें आपकी स्थिति 1 बात पर टिकी होती है: आप कितनी आसानी से उठकर जा सकते हैं।\nअगर जाने में आपको 3 साल लगेंगे, तो आपके पास ना कहने की बहुत कम गुंजाइश है।\nऔर यह सिर्फ़ अमेरिकी सप्लायरों की बात नहीं है। उस स्थिति में कोई भी सप्लायर हो, उसके पास यही बढ़त होगी।\n2. मुनाफ़े पर टैक्स कहाँ लगता है दूसरी लागत देखना ज़्यादा मुश्किल है।\nकई बड़ी टेक्नोलॉजी कंपनियाँ ग्राहकों को 1 देश में बेचती हैं और मुनाफ़ा दूसरे देश में दिखाती हैं।\nस्थानीय कंपनी को अक्सर अपनी पैरेंट कंपनी की सर्विस प्रोवाइडर माना जाता है। ज़्यादातर मुनाफ़ा कहीं और चला जाता है।\nतो किसी देश में बिक्री बड़ी होती है और उसी देश में टैक्स का बिल छोटा।\nTaxWatch यूनाइटेड किंगडम का एक रिसर्च ग्रुप है। उसका अनुमान था कि 7 बड़े टेक्नोलॉजी ग्रुपों ने 2021 में UK के ग्राहकों से लगभग £15 बिलियन का मुनाफ़ा कमाया। उसके अनुमान में उनके इंतज़ामों ने देय UK कॉर्पोरेशन टैक्स में से लगभग £2 बिलियन कम कर दिए।\nयूरोप ने इन इंतज़ामों को चुनौती दी है। नतीजे मिले-जुले हैं, और दोनों पहलू दिखाना ही ठीक है।\nApple हार गया। सितंबर 2024 में यूरोपीय संघ के Court of Justice ने पुष्टि की कि आयरलैंड के टैक्स इंतज़ाम गैरकानूनी सरकारी मदद थे। आयरलैंड को लगभग €14 बिलियन वापस मिले। Amazon जीत गया। दिसंबर 2023 में उसी अदालत ने लक्ज़मबर्ग से जुड़े ऐसे ही एक मामले में यूरोपीय आयोग की अपील ख़ारिज कर दी। एक वैश्विक समझौता भी है, जिसे Pillar Two कहते हैं। यह 15% की न्यूनतम टैक्स दर तय करता है।\nजनवरी 2026 में Organisation for Economic Co-operation and Development ने एक side-by-side व्यवस्था छापी। इसके तहत अमेरिका में मुख्यालय वाली कंपनियाँ ज़्यादातर वैश्विक नियमों की जगह अमेरिका के नियम मानती हैं।\nकुछ देशों ने अपने डिजिटल सर्विस टैक्स लगाने की कोशिश की। कनाडा ने एक पास किया, फिर अमेरिका के उस पर व्यापार वार्ता रद्द करने के बाद जून 2025 में उसे वापस ले लिया।\nतो पैसा एक जगह कमाया जाता है। उस पर टैक्स कहाँ लगेगा, यह कहीं और तय होता है।\n3. किसका कानून लागू होता है इस बात को सबसे ज़्यादा गलत समझा जाता है, इसलिए यहाँ सटीक रहना ज़रूरी है।\nबहुत लोग मानते हैं कि डेटा यूरोप में रखने से वह सिर्फ़ यूरोपीय कानून के अधीन रहता है।\nयह पूरी तरह सही नहीं है। मायने यह रखता है कि डेटा रखने वाली कंपनी पर नियंत्रण किसका है।\nCLOUD Act 2018 का एक अमेरिकी कानून है। यह अमेरिकी प्रोवाइडर से अपने नियंत्रण वाला डेटा सौंपने को कहता है, चाहे वह डेटा कहीं भी रखा हो। Department of Justice इसका ब्योरा देता है।\nतो फ़्रैंकफ़र्ट का एक डेटा सेंटर, जिसे अमेरिकी मालिकाने वाली कंपनी चलाती है, अब भी अमेरिकी कानूनी आदेश की पहुँच में है।\n“हमारा डेटा यूरोप में रहता है” और “हमारा डेटा अमेरिकी कानून से बाहर है” 2 अलग बातें हैं। सावधान सप्लायर सिर्फ़ पहली बात कहते हैं।\nकानूनी आदेश कंपनी के नियंत्रण के पीछे चलता है, इमारत की जगह के पीछे नहीं यूरोप में डेटा सेंटर आपका डेटा यहाँ रखा है साइट पर EU कानून लागू पैरेंट कंपनी दूसरे देश में स्थित डेटा पर नियंत्रण साइट चलाती है कानूनी आदेश यहाँ आता है आदेश को इमारत तक जाने की ज़रूरत नहीं। वह डेटा पर नियंत्रण रखने वाले के पास जाता है। इमारत यूरोप में है। उसे चलाने वाली कंपनी का मालिक कहीं और है। कानूनी आदेश मालिक के पास जाता है, इमारत के पास नहीं। यहाँ के नियम भी बदल रहे हैं, दोनों तरफ़।\nSection 702 अमेरिका का एक निगरानी कानून है। कांग्रेस ने इसे आगे नहीं बढ़ाया, तो यह 2026-06-12 को ख़त्म हो गया।\nइसका मतलब यह नहीं कि डेटा जुटाना रुक गया। पहले से दी गई मंज़ूरियाँ अपनी मियाद तक चलती रहेंगी, जो लगभग मार्च 2027 तक मानी जाती है। Brennan Center इस पर नज़र रखता है।\nEU–US Data Privacy Framework भी है। यह निजी डेटा को यूरोप से अमेरिका ले जाने देता है।\nइसके ख़िलाफ़ एक कानूनी चुनौती सितंबर 2025 में ख़ारिज हुई। वह फ़ैसला अब अपील में है।\nयह फ़्रेमवर्क आज वैध कानून है। यह अपनी तरह का तीसरा भी है, क्योंकि इससे पहले के 2 रद्द कर दिए गए थे।\nअगर कोई ट्रांसफ़र व्यवस्था गिरती है, तो लागत उसे इस्तेमाल करने वाली यूरोपीय संस्था पर पड़ती है। 2023 में आयरलैंड के Data Protection Commission ने अमेरिका को ट्रांसफ़र के लिए Meta पर €1.2 बिलियन का जुर्माना लगाया।\nइस सबका एक शांत, व्यावहारिक जवाब है, और उसे जानना काम का है।\nअगर आपके डेटा की चाबियाँ आपके प्रोवाइडर के पास हैं, तो आपका प्रोवाइडर कानूनी आदेश का जवाब दे सकता है।\nचाबियाँ ख़ुद रखिए, तो आदेश को आपके पास आना होगा। इसलिए फ़ैसला आपके अपने देश के कानून के तहत होता है।\n4. व्यापार के फ़ैसले आपके सामान तक पहुँचते हैं टेक्नोलॉजी अब व्यापार नीति का हिस्सा है।\nजनवरी 2026 में अमेरिका ने उन्नत कंप्यूटर चिप्स के एक छोटे समूह और उन्हें इस्तेमाल करने वाले प्रोडक्ट्स पर 25% टैरिफ़ लगाया। दूसरे चरण का इशारा दिया गया है।\nआपका अपना सामान इसकी चपेट में आता है या नहीं, यह समय के साथ बदलता है। यह पूछने के लिए सही जगह आपका सप्लायर है।\nव्यापारिक रिश्ते जल्दी पलट भी सकते हैं। अमेरिका और कनाडा के बीच बातचीत 2026-08-22 को टूट गई, और 50% के नए टैरिफ़ लगे। कनाडा ने जवाब में कदमों का एलान किया।\nकनाडा के प्रधानमंत्री ने वजहें सार्वजनिक रूप से रखीं।\nआपके लिए बात सीमित है, और यह किसी की राजनीति पर नहीं टिकी।\nसामान की क़ीमत और मिलना, दूसरे देश में लिए गए किसी फ़ैसले से, कम नोटिस पर बदल सकता है।\n3 साल की योजना में इसकी गुंजाइश रखना ठीक है।\n5. कोई सेवा ऐसी वजहों से रुक सकती है जो आपकी नहीं हैं ज़्यादातर संस्थाओं के लिए यह आख़िरी बात कम संभावना वाली है। यह यहाँ इसलिए है क्योंकि यह बाक़ी से अलग तरह काम करती है।\nफ़रवरी 2025 में अमेरिका ने International Criminal Court के Prosecutor पर प्रतिबंध लगाए।\nइसके बाद Prosecutor अपने Microsoft ईमेल अकाउंट का इस्तेमाल नहीं कर पाए, और एक स्विस प्रोवाइडर पर चले गए।\nMicrosoft के प्रेसिडेंट ने सार्वजनिक रूप से कहा कि कंपनी ने अकाउंट बंद नहीं किया। असल में क्या हुआ, इस पर अब भी विवाद है, और यह कहना ही ठीक है।\nजिस पर विवाद नहीं है, वह है असर। जर्मन टेक्नोलॉजी पत्रिका heise ने इसे यूरोप में डिजिटल संप्रभुता का एक मोड़ बताया। इसे यूरोपीय संसद में उठाया गया।\n2025 के आख़िर तक अदालत openDesk पर चली गई, जो एक ओपन सोर्स विकल्प है।\nयहाँ मायने तंत्र रखता है।\nकोई बिल बकाया नहीं था। कोई नियम नहीं टूटा। सेवा में कोई ख़राबी नहीं थी।\nएक सरकार ने फ़ैसला लिया, और एक सप्लायर को देखना पड़ा कि वह कानूनी तौर पर क्या-क्या देना जारी रख सकता है।\nआपका समझौता आपके सप्लायर से है। आपके सप्लायर की कानूनी ज़िम्मेदारियाँ उसकी अपनी सरकार के प्रति हैं।\nआप इस पर नज़र नहीं रख सकते। किसी डैशबोर्ड पर इसकी कोई चेतावनी बत्ती नहीं होती।\nज़्यादातर पाठकों के लिए यह जोखिम छोटा है, और इसे स्वीकार करना वाजिब है। पर यह तभी वाजिब है जब आपने इसके बारे में सोचा हो।\nपाँचों में एक जैसा पैटर्न ये 5 लागतें एक-दूसरे से बहुत अलग हैं।\nपहली से आपका सामना सबसे ज़्यादा संभव है। आख़िरी से शायद कभी न हो।\nलेकिन इनमें 1 बात साझा है।\nआपके लिए छोड़ना जितना मुश्किल होता है, इनमें से हर एक उतनी ही बदतर होती जाती है।\nअगर आपके पास जाने की जगह है, तो क़ीमत बढ़ना एक परेशानी भर है। अगर नहीं है, तो यह गंभीर है।\nयही धागा सब में चलता है, और यह एक काम की दिशा दिखाता है।\nसोचने लायक सवाल यह नहीं कि आपका सप्लायर किस देश में है। सवाल यह है कि आप कितनी जल्दी अपना मन बदल सकते हैं।\nभाग 3 देखता है कि आपके इस्तेमाल के सॉफ़्टवेयर की क़ीमत और कौन चुकाता है।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/what-renting-costs/","summary":"जब सप्लायर बदलना मुश्किल हो जाता है, तो लागतें अपना रूप बदल लेती हैं। क़ीमत आपकी निकलने की लागत के पीछे चलती है। मुनाफ़ा एक देश में घोषित होता है और दूसरे में कमाया जाता है। कानून कंपनी के मालिक के हिसाब से चलता है, इमारत की जगह के हिसाब से नहीं। 8 भागों में से भाग 2, आसान भाषा में।","title":"किराये की टेक्नोलॉजी की असली क़ीमत"},{"content":"8 भागों में से भाग 3। भाग 2 में बताया गया था कि निर्भरता आपको कितनी महँगी पड़ती है।\nइस भाग में क्या है वे साल जब ओपन सोर्स से लड़ाई लड़ी गई। लड़ाई क्यों रुकी। आज सॉफ़्टवेयर को चालू कौन रखता है। जब बनाने वालों ने पैसे लेने की कोशिश की तो क्या हुआ। कंपनियों के ख़रीदे जाने के बाद उनका क्या होता है। आपके लिए इसका क्या मतलब है। वे साल जब ओपन सोर्स से लड़ाई लड़ी गई ओपन सोर्स वह सॉफ़्टवेयर है जिसका कोड कोई भी पढ़ सकता है, इस्तेमाल कर सकता है और बदल सकता है।\nआज यह आम बात है। लगभग 15 साल तक इसे ख़तरा माना गया।\nअक्टूबर 1998 में Microsoft का एक अंदरूनी मेमो लीक हुआ। Eric Raymond ने उसे टिप्पणियों के साथ छापा, और वह Halloween documents के नाम से जाना गया।\nमेमो ओपन सोर्स की क्वालिटी के बारे में ईमानदार था। उसने हज़ारों लोगों के मिलकर उस पर काम करने के तरीक़े को कमाल का बताया।\nफिर उसने बताया कि इसके बारे में क्या किया जाए। एक लाइन बहुत कुछ समझा देती है:\nBy extending these protocols and developing new protocols, we can deny OSS projects entry into the market.\nयानी: इन प्रोटोकॉल को बढ़ाकर और नए प्रोटोकॉल बनाकर हम ओपन सोर्स प्रोजेक्ट्स का बाज़ार में आना रोक सकते हैं।\nप्रोटोकॉल 2 सिस्टम के आपस में बात करने का एक तय तरीक़ा है।\nतो योजना बेहतर प्रोडक्ट बनाने की नहीं थी। योजना प्रोडक्ट्स के बीच के जोड़ बदलने की थी, ताकि किसी प्रतियोगी को उनकी जगह लगाया न जा सके।\nअगले 10 सालों में कई और कदम उठाए गए।\n2003 में SCO नाम की एक कंपनी ने दावा किया कि Linux में उसका कोड है। मामला सालों खिंचा और SCO नहीं जीती। जब तक यह चला, बहुत सी संस्थाएँ पक्का नहीं थीं कि Linux अपनाना सुरक्षित है या नहीं।\nMicrosoft ने मोबाइल फ़ोन बनाने वालों के साथ पेटेंट समझौते भी किए। कई साल तक वह Android चलाने वाले हर बिके हैंडसेट पर पैसा लेता रहा, ऐसा ऑपरेटिंग सिस्टम जो उसने लिखा ही नहीं था।\n2008 में Microsoft के डॉक्युमेंट फ़ॉर्मेट को अंतरराष्ट्रीय मानक की मंज़ूरी मिली। कई राष्ट्रीय मानक संस्थाओं ने इस पर आपत्ति जताई कि यह कैसे हुआ।\nयूरोप ने इसमें से कुछ का विरोध किया। यूरोपीय आयोग ने उस जानकारी के लिए, जो प्रतियोगियों को उसके प्रोडक्ट्स के साथ काम करने के लिए चाहिए थी, 2004 में Microsoft पर €497 मिलियन का जुर्माना लगाया।\n2013 में फिर €561 मिलियन का जुर्माना लगाया, क्योंकि एक तय हुआ उपाय लागू नहीं किया गया था।\nउस दूसरे जुर्माने पर एक पल रुकना ठीक है। समस्या नई नहीं थी। बस तय हुआ इलाज किया ही नहीं गया था।\nलड़ाई क्यों रुकी यह लगभग 2014 में रुकी, क्योंकि यह कामयाब नहीं हुई थी।\nLinux वह सॉफ़्टवेयर बन चुका था जिस पर ज़्यादातर सर्वर चलते हैं। ज़्यादातर क्लाउड सेवाएँ और ज़्यादातर मोबाइल फ़ोन भी इसी पर चलते हैं।\nजब सब कुछ किसी चीज़ के ऊपर बना हो, तो आप अदालत के ज़रिए उसे हटा नहीं सकते।\nतो तरीक़ा पूरी तरह पलट गया।\nMicrosoft, Linux Foundation में शामिल हो गया। उसने अपने कुछ टूल ओपन सोर्स के रूप में जारी किए। 2018 में उसने GitHub ख़रीदा, वह साइट जहाँ दुनिया का ज़्यादातर ओपन सोर्स लिखा जाता है।\nAmazon और Google ने ओपन सोर्स पर बहुत बड़े कारोबार खड़े किए, और ये 3 कंपनियाँ अब इसमें बहुत सारा काम वापस लगाती हैं।\nवह काम असली है, और सॉफ़्टवेयर इससे बेहतर हुआ है। इसका उल्टा दिखाना बेवकूफ़ी होगी।\nलेकिन 1 चीज़ नहीं बदली।\nजिन कंपनियों ने कभी ओपन सोर्स को धीमा करने की कोशिश की, वे अब उसके सबसे बड़े पैसा देने वालों में हैं। और वे अब भी बाज़ार की सबसे बड़ी कंपनियाँ हैं।\nओपन सोर्स ने तकनीकी बहस जीत ली। इससे यह नहीं बदला कि सबसे मज़बूत पत्ते किसके हाथ में हैं।\nआज सॉफ़्टवेयर को चालू कौन रखता है यह वह बात है जो सॉफ़्टवेयर से बाहर के लोगों को हैरान करती है।\nबहुत सारा बड़े पैमाने पर इस्तेमाल होने वाला ओपन सोर्स बहुत छोटी टीमें चालू रखती हैं। उसमें से कुछ को 1 अकेला इंसान, अपने ख़ाली समय में, बिना कुछ लिए।\nफिर वही टुकड़े बहुत बड़ी कंपनियों के बेचे जाने वाले प्रोडक्ट्स के अंदर बैठे होते हैं।\nदिसंबर 2021 में Log4j में एक ख़राबी सामने आई। यह एक छोटा टूल है जिससे Java प्रोग्राम दर्ज करते हैं कि वे क्या कर रहे हैं।\nइस ख़राबी से हमलावर प्रभावित सिस्टम पर अपना कोड चला सकते थे। इसने एक साथ बहुत बड़ी संख्या में संस्थाओं को चोट पहुँचाई। UK के National Cyber Security Centre ने इस पर गाइडेंस जारी की।\nइस टूल की देखभाल वॉलंटियरों का एक छोटा समूह करता था।\nसबक यह नहीं कि ओपन सोर्स जोखिम भरा है। इसका ज़्यादातर हिस्सा बहुत अच्छा है, और इस तरह जाँच के लिए खुला है जैसा बंद सॉफ़्टवेयर कभी नहीं होता।\nसबक चीज़ों के लिए पैसा देने के बारे में है। जिस साझा काम पर बहुत से कारोबार टिके हों, उसे पैसे की ज़रूरत होती है, और अक्सर वह मिलता नहीं।\nइसे ठीक किया जा सकता है, और कुछ संस्थाएँ ठीक करती भी हैं। किसी maintainer को पैसा देना, या किसी फ़ाउंडेशन को फ़ंड करना, आमतौर पर उस बचत के मुक़ाबले बहुत छोटी लागत है जो वह सॉफ़्टवेयर आपको देता है।\nजब बनाने वालों ने पैसे लेने की कोशिश की तो क्या हुआ कुछ कंपनियाँ ओपन सोर्स बनाती हैं और उसके इर्द-गिर्द एक पेड सेवा बेचती हैं। यह लंबे समय तक ठीक-ठाक चला।\nमुश्किल तब हुई जब क्लाउड प्रोवाइडर वही सॉफ़्टवेयर अपनी सेवा के रूप में देने लगे।\nकमाई प्रोवाइडर ले गया। सॉफ़्टवेयर लिखने वाली कंपनी को नहीं मिली।\nउनमें से कई ने जवाब में अपना लाइसेंस बदल दिया, ताकि दूसरे उनके सॉफ़्टवेयर को मुक़ाबले वाली सेवा के रूप में न दे सकें।\nMongoDB ने 2018 में अपना लाइसेंस बदला। Elastic ने 2021 में यही किया। HashiCorp ने 2023 में बदला। Redis ने 2024 में बदला। Open Source Initiative ओपन सोर्स की मानी हुई परिभाषा तय करता है। उसने फ़ैसला दिया कि इन नए लाइसेंसों में से 1 उस पर खरा नहीं उतरता।\nकई Linux distributions ने फिर प्रभावित सॉफ़्टवेयर हटा दिया।\nबड़े समुदाय ने आख़िरी खुले वर्ज़न की कॉपी ली और उन्हें अलग से आगे बढ़ाया। ऐसी कॉपी को fork कहते हैं।\nOpenSearch पुराने Elasticsearch कोड को आगे बढ़ाता है। OpenTofu पुराने Terraform कोड को आगे बढ़ाता है। Valkey पुराने Redis कोड को आगे बढ़ाता है। Elastic और Redis दोनों तब से खुले लाइसेंस पर लौट आए हैं।\nयह कैसे ख़त्म हुआ, यह देखने लायक है, क्योंकि इसमें शामिल किसी को भी वह नहीं मिला जो वह चाहता था।\nएक कंपनी ने काम का सॉफ़्टवेयर बनाया। एक बड़ी कंपनी ने उससे बनाने वाले से ज़्यादा कमाया। बनाने वाले ने टिके रहने के लिए लाइसेंस पर रोक लगाई। समुदाय ने ठीक ही आपत्ति की कि यह अब ओपन सोर्स नहीं रहा। एक fork सामने आया, अक्सर बड़ी कंपनियों के समर्थन से।\nआख़िर में सॉफ़्टवेयर अब भी मुफ़्त इस्तेमाल के लिए है। fork ज़्यादातर सबसे बड़े खिलाड़ियों के हाथ में चलते हैं। जिस कारोबार ने असली काम का पैसा दिया, वह शुरुआत से कमज़ोर है।\nकंपनियों के ख़रीदे जाने के बाद उनका क्या होता है कारोबार से मूल्य निकलने का दूसरा तरीक़ा सॉफ़्टवेयर लाइसेंस से कोई लेना-देना नहीं रखता।\nयह इस बारे में है कि कंपनी ख़रीदी कैसे जाती है।\nपैटर्न सीधे शब्दों में यह है।\nख़रीदार ख़रीद की ज़्यादातर क़ीमत उधार लेता है। फिर वह कर्ज़ ख़रीदी जा रही कंपनी को ही गिरवी रखकर लिया जाता है। तो कंपनी उसी कर्ज़ का बोझ उठाती है जिससे उसे ख़रीदा गया।\nफिर ख़रीदार कंपनी की इमारतें बेचकर उन्हें किराये पर वापस ले सकता है। जुटाया गया पैसा नए मालिकों को बाँटा जा सकता है। अब कंपनी उन जगहों का किराया देती है जो कभी उसकी अपनी थीं।\nजो लागतें इस साल नहीं दिखतीं, उनमें कटौती होती है। इसका मतलब आमतौर पर रखरखाव, कर्मचारियों की संख्या, रिसर्च और प्रोडक्ट डेवलपमेंट होता है।\nफिर कंपनी आगे बेच दी जाती है।\nBank of England ने इसके वित्तीय स्थिरता वाले पहलू को देखा है। उसकी private equity की समीक्षा बताती है कि बायआउट पर भारी उधारी उन कंपनियों के डिफ़ॉल्ट होने की संभावना बढ़ाती है, और उनके कर्ज़दाताओं को नुक़सान के जोखिम में डालती है। तब से उसने इस सेक्टर पर नज़र रखी है।\nहर बायआउट ऐसे काम नहीं करता, और बहुत से मालिक खोखला करने की जगह निवेश करते हैं। यह पहचानने लायक एक पैटर्न है, सब ख़रीदारों का वर्णन नहीं।\nलेकिन जहाँ यह होता है, वहाँ नतीजा हर बार एक जैसा होता है।\nकारोबार आमतौर पर ठीक चल रहा था। जो ठीक नहीं चला, वह था कारोबार और उसे ख़रीदने के लिए लिया गया कर्ज़।\nउधार से हुए बायआउट से पहले और बाद में वही कारोबार पहले बाद में काम वही स्टाफ़, वही ग्राहक इमारतें अपनी हैं ख़रीद का कोई कर्ज़ नहीं रखरखाव पर ख़र्च रिसर्च पर ख़र्च किराया: कोई नहीं काम वही स्टाफ़, वही ग्राहक वही इमारतें किराये पर ख़रीद वाला कर्ज़ इसी पर रखरखाव घटा रिसर्च घटी किराया: हर महीने ख़रीदा गया उधार के पैसे से कारोबार अब भी उन्हीं ग्राहकों के लिए वही काम करता है। बदला यह है कि उसके पास क्या है, और अब उसे क्या चुकाना पड़ता है। वही कारोबार, पहले और बाद में। काम और ग्राहक वहीं रहते हैं। इमारतें और उधारी हाथ बदलती हैं, और चलाने की लागत बढ़ जाती है। सॉफ़्टवेयर में भी यही पैटर्न यह कुछ साल पहले सॉफ़्टवेयर तक पहुँच गया।\nयहाँ निचोड़ी जाने वाली संपत्ति कोई इमारत नहीं है। वे ग्राहक हैं जो आसानी से छोड़ नहीं सकते।\nलंबे समय के ग्राहकों वाले एक पुराने प्रोडक्ट की क़ीमत दोबारा तय की जा सकती है। वे ग्राहक जल्दी हट नहीं सकते, इसलिए उनमें से ज़्यादातर भुगतान करते हैं।\nसाथ ही, इंजीनियरिंग पर ख़र्च घटाया जा सकता है। इसका असर दिखने में सालों लगते हैं, और तब तक बिक्री हो चुकी होती है।\nभाग 2 में बताया गया था कि VMware के ग्राहकों के लिए यह कैसा दिखा।\nइसका एक रूप कर्ज़ की जगह निवेशकों के पैसे से भी चलता है। इसके बारे में इतना लिखा गया है कि इसे एक नाम मिल गया: enshittification, एक शब्द जो कनाडा के लेखक Cory Doctorow ने 2022 से इस्तेमाल किया।\nयह 3 चरणों में चलता है।\nसेवा उसे चलाने की लागत से कम पर बेची जाती है, और यह पैसा निवेशक देते हैं। यह सस्ती और अच्छी होती है, तो लोग उस पर आ जाते हैं। जब लोग आसानी से छोड़ नहीं सकते, तो इसे पैसा देने वाले कारोबारी ग्राहकों के हिसाब से बदल दिया जाता है। जब दोनों तरफ़ के लोग बँध जाते हैं, तो मुनाफ़ा बढ़ाने के लिए शर्तें फिर बदलती हैं। इस सीरीज़ के लिए चरण 1 सबसे ज़्यादा मायने रखता है।\nसालों तक लागत से कम पर बेचने वाली कंपनी इसलिए नहीं जीत रही कि वह बेहतर है। उसे बाज़ार पर क़ब्ज़ा करने के लिए पैसा दिया जा रहा है।\nजिन छोटे कारोबारों को अपनी लागत ख़ुद निकालनी होती है, वे उस क़ीमत का मुक़ाबला नहीं कर सकते। बहुत से बंद हो जाते हैं।\nजब बाद में क़ीमतें टिकाऊ स्तर तक चढ़ती हैं, तब तक जो विकल्प पहले था, वह अक्सर ख़त्म हो चुका होता है।\nआपके लिए इसका क्या मतलब है इससे 2 व्यावहारिक बातें निकलती हैं, और दोनों करना आसान है।\nदेखिए कि आपकी निर्भरताओं को कितने लोग चालू रखते हैं।\nउन टूल्स को देखिए जिनके बिना आपके सिस्टम नहीं चल सकते। पता कीजिए कि हर एक की देखभाल कितने लोग सक्रिय रूप से करते हैं।\nअगर जवाब 1 या 2 है, तो यह जानने लायक है। आप उस काम को फ़ंड करना, सोर्स की अपनी कॉपी रखना, या यह योजना बनाना चाह सकते हैं कि अगर यह रुक जाए तो आप क्या करेंगे।\nदेखते रहिए कि आपके सप्लायरों का मालिक कौन है।\nआपकी शर्तें मालिक के पीछे चलती हैं, प्रोडक्ट के पीछे नहीं। मालिकाना बदलने से आपका रिन्यूअल सॉफ़्टवेयर के किसी भी बदलाव से ज़्यादा बदल सकता है।\nजब आप साइन करें, तो देखिए कि पैसा देना बंद करने पर आपके पास क्या रहता है। देखिए कि जो आपने पहले से इंस्टॉल किया है उसे आप चला सकते हैं या नहीं, और सुरक्षा अपडेट मिलते रहेंगे या नहीं।\nदोनों में ज़्यादा समय नहीं लगता। दोनों रिन्यूअल के दौरान से पहले कहीं ज़्यादा आसान हैं।\nभाग 4 देखता है कि अदालतें और नियामक पहले ही क्या तय कर चुके हैं।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/who-pays-for-the-software/","summary":"पहले 2 भागों ने देखा कि निर्भरता आपको कितनी महँगी पड़ती है। यह भाग देखता है कि बिल और कौन भरता है: वे वॉलंटियर जो बहुत बड़ी कंपनियों के लिए सॉफ़्टवेयर चालू रखते हैं, और वे कारोबार जो ख़रीदे जाते हैं, कर्ज़ में डाले जाते हैं और खोखले किए जाते हैं। 8 भागों में से भाग 3, आसान भाषा में।","title":"आपके इस्तेमाल के सॉफ़्टवेयर की क़ीमत कौन चुकाता है"},{"content":"8 भागों में से भाग 4। भाग 3 में देखा गया था कि आपके इस्तेमाल के सॉफ़्टवेयर की क़ीमत कौन चुकाता है।\nइस भाग में क्या है रिकॉर्ड पढ़ना क्यों काम का है। Google के बारे में क्या तय हुआ है। Apple के बारे में क्या तय हुआ है। Amazon के बारे में क्या तय हुआ है। Meta के बारे में क्या तय हुआ है। सब में एक जैसा पैटर्न। रिकॉर्ड पढ़ना क्यों काम का है सप्लायर चुनना एक भविष्यवाणी है। आप तय कर रहे हैं कि वह 3 या 5 साल में कैसा बर्ताव करेगा।\nकंपनी के मूल्यों वाले बयान इसके लिए ज़्यादा काम के नहीं। सबके पास एक होता है, और सब लगभग एक ही बात कहते हैं।\nतथ्यों के निष्कर्ष बेहतर हैं। ये वे नतीजे हैं जिन पर कोई अदालत या नियामक सबूत सुनने के बाद पहुँचा।\nयह भाग इन्हीं का इस्तेमाल करता है। जहाँ कोई यूरोपीय फ़ैसला है, वह पहले आता है।\nसूची से पहले दो बातें, क्योंकि ये इसे ईमानदार रखती हैं।\nहर मामला कंपनियों के ख़िलाफ़ नहीं गया। कुछ नियामकों के ख़िलाफ़ गए, और वे भी यहाँ हैं।\nऔर यह दावा नहीं है कि यूरोपीय कंपनियाँ बेहतर बर्ताव करती हैं। Volkswagen और Wirecard यह बात अच्छी तरह तय कर देते हैं। पैटर्न आकार और बाज़ार में स्थिति से आता है, इस बात से नहीं कि कंपनी कहाँ की है।\nGoogle यूरोपीय आयोग वहाँ पहले पहुँचा, और मामलों को ख़त्म होने में लंबा समय लगा।\n2017 में उसने Google पर €2.42 बिलियन का जुर्माना लगाया। उसने पाया कि Google ने सर्च नतीजों में अपनी शॉपिंग तुलना सेवा को ऊपर और प्रतियोगियों को नीचे धकेला था।\nGoogle ने अपील की, और यूरोपीय संघ के Court of Justice ने सितंबर 2024 में फ़ैसले को बरक़रार रखा।\nयह जुर्माने से 7 साल बाद है, और बर्ताव से उससे भी ज़्यादा।\n2018 में आयोग ने Play Store चाहने वाले फ़ोन निर्माताओं पर रखी गई शर्तों के लिए Google पर €4.34 बिलियन का जुर्माना लगाया। बाद में जुर्माना घटाकर लगभग €4.1 बिलियन किया गया, और आख़िरी अपील 2026 में ख़ारिज हुई।\n2019 में आयोग ने विज्ञापन अनुबंधों के लिए Google पर €1.49 बिलियन का जुर्माना लगाया। General Court ने 2024 में इसे रद्द कर दिया, यह पाते हुए कि मामला साबित नहीं हुआ था। यह नियामक हार गया।\nअमेरिका में एक अदालत ने 2024 में पाया कि Google ने सर्च में गैरकानूनी तरीक़े से एकाधिकार बनाए रखा था। सितंबर 2025 में उसी अदालत ने उपाय तय किए। उसने डिफ़ॉल्ट समझौतों में बदलाव और प्रतियोगियों के साथ कुछ डेटा साझा करना ज़रूरी किया। उसने Google को Chrome या Android बेचने के लिए मजबूर करने से इनकार किया।\nअप्रैल 2025 के एक अलग अमेरिकी फ़ैसले में पाया गया कि Google ने अपने 2 विज्ञापन प्रोडक्ट्स को गैरकानूनी तरीक़े से एक साथ बाँधा था। उसका उपाय अभी तय हो रहा है।\nApple 2021 में एक अमेरिकी अदालत ने Apple को आदेश दिया कि वह ऐप डेवलपरों को ग्राहकों को भुगतान के दूसरे तरीक़ों के बारे में बताने दे।\nअप्रैल 2025 में उसी अदालत ने पाया कि Apple ने इसका पालन नहीं किया था।\nउसने यह भी पाया कि Apple के एक वरिष्ठ अधिकारी ने ऐसी गवाही दी थी जो सच नहीं थी, और कंपनी के अपने अंदरूनी दस्तावेज़ कुछ और कहते थे। CNBC ने उस समय फ़ैसले की ख़बर दी।\nअदालत ने मामला अभियोजकों के पास भेजा ताकि वे आपराधिक अवमानना की कार्यवाही पर विचार करें। Apple ने कहा कि वह अपील करेगा।\nयह मामला बाक़ी से अलग वजह से मायने रखता है।\nकोई कंपनी अपनी कानूनी स्थिति पर पक्का रुख़ रख सकती है और फिर भी अदालत के साथ सीधा बर्ताव कर सकती है। यह निष्कर्ष कि गवाही सच नहीं थी, बिल्कुल दूसरी बात है।\nकिसी सप्लायर के साथ आपका रिश्ता वादों का एक सेट है। यह इस बात का सीधा सबूत है कि वादे निभाना महँगा होने पर उनके साथ कैसा बर्ताव होता है।\nAmazon सितंबर 2025 में Amazon अमेरिका के Federal Trade Commission के लाए एक मामले को निपटाने के लिए $2.5 बिलियन देने पर राज़ी हुआ। Commission ने इसका ब्योरा छापा।\nइसमें $1 बिलियन जुर्माना था और $1.5 बिलियन ग्राहकों को वापस।\nमामला Prime के साइन-अप और रद्द करने के डिज़ाइन के बारे में था। आरोप यह था कि स्क्रीनें ऐसे बनाई गई थीं कि वे उन लोगों को भी जोड़ लें जिन्होंने जुड़ना नहीं चुना था, और रद्द करना मेहनत का काम बना दें। Commission ने कहा कि लगभग 35 मिलियन लोग प्रभावित हुए।\nसमझौते के हिस्से के रूप में Amazon साइन-अप और रद्द करने की प्रक्रिया बदलने पर राज़ी हुआ।\nउस पैमाने पर इंटरफ़ेस डिज़ाइन जारी होने से पहले जाँचे और मापे जाते हैं, और यह सामान्य, समझदारी भरा तरीक़ा है। इसलिए किसी डिज़ाइन का असर आमतौर पर उसके जारी होने से पहले पता होता है।\nMeta 2019 में अमेरिका के Federal Trade Commission ने Cambridge Analytica मामले के बाद प्राइवेसी के तरीक़ों के लिए Facebook पर $5 बिलियन का जुर्माना लगाया।\nबड़ी बात कोई जुर्माना नहीं है।\n2021 में एक पूर्व कर्मचारी ने कंपनी की अंदरूनी रिसर्च पत्रकारों को सौंपी, फिर अमेरिकी सीनेट की एक कमेटी के सामने गवाही दी। BBC ने उनके मुख्य दावे की ख़बर दी, कि कंपनी ने बार-बार सुरक्षा से आगे मुनाफ़े को रखा।\nउस रिसर्च का कुछ हिस्सा किशोर यूज़र्स पर Instagram के असर को देखता था। उसके कुछ हिस्से चिंता बढ़ाने वाले निकले।\nMeta इस बात से असहमत था कि रिसर्च को कैसे पेश किया गया। उसने कहा कि नतीजे बताए गए से ज़्यादा मिले-जुले थे, और यह कि पूर्व कर्मचारी ने उन टीमों में काम नहीं किया था। इस पर बड़ा विज्ञान अभी तय नहीं है, और यह कहना ही ठीक है।\nएक बात पर विवाद नहीं है, और वही याद रखने वाली है।\nकंपनी ने अध्ययन किया कि क्या उसका प्रोडक्ट यूज़र्स के एक समूह को नुक़सान पहुँचा रहा है। उस काम का कुछ हिस्सा चिंता बढ़ाने वाला निकला। नतीजे जनता तक इसलिए पहुँचे क्योंकि कोई उन्हें इमारत से बाहर ले आया।\nजो रिसर्च सिर्फ़ इसी तरह बाहर आए, वह स्वतंत्र निगरानी जैसी बिल्कुल नहीं है।\nसब में एक जैसा पैटर्न मामलों को साथ रखिए तो 4 बातें उभरती हैं। योजना बनाने के लिए ये किसी एक मामले से ज़्यादा मायने रखती हैं।\n1. जुर्माने फ़ायदे के मुक़ाबले छोटे हैं।\nसैकड़ों बिलियन की कमाई के आगे कुछ बिलियन छोटी रक़म है। और यह पैसा कमाए जाने के सालों बाद आता है।\nजब जुर्माना फ़ायदे से कम हो, तो वह रोकने वाली चीज़ की जगह कारोबार की एक लागत की तरह काम करता है।\n2. उपाय देर से आते हैं।\nइन मामलों में बर्ताव और लागू होने लायक उपाय के बीच का फ़ासला लगभग 7 से 12 साल का है।\nप्रतियोगी शायद ही इतना टिक पाते हैं। जब तक उपाय असर करता है, जिस बाज़ार को बचाने के लिए वह था, वह आमतौर पर पहले ही बदल चुका होता है।\n3. व्यक्तियों पर शायद ही आँच आती है।\nजुर्माने कंपनी भरती है, यानी उसके शेयरधारक, जबकि फ़ैसलों को मंज़ूरी देने वाले लोग आमतौर पर अपनी तनख़्वाह और नौकरी बचाए रखते हैं।\nयह इसलिए मायने रखता है क्योंकि इससे प्रोत्साहन तय होता है। जहाँ लागत कंपनी पर पड़े और इनाम व्यक्ति को मिले, वहाँ फ़ैसला लेने वाले को फ़ैसला करने लायक दिखता है।\n4. समस्याएँ बाहर से पहले अंदर पता होती हैं।\nइनमें से कई मामलों में संस्था के पास जानकारी पहले थी। वह जनता तक किसी लीक, मुक़दमे या नियामक के ज़रिए पहुँची।\nपर इससे क्या निकालें, इसमें सावधान रहिए।\nये आमतौर पर ऐसे मामले नहीं हैं जिनमें एक इंसान नुक़सान पहुँचाने निकला हो। एक टीम ने किसी टारगेट के लिए साइन-अप स्क्रीन बेहतर की। एक रैंकिंग सिस्टम को इस्तेमाल बढ़ाने के लिए ट्यून किया गया। एक रिसर्च नतीजा छापा नहीं गया।\nफ़ैसले बहुत से लोगों में बँटे होते हैं, और हर कदम अपने आप में वाजिब लगता है। यही इस पैटर्न को इतना स्थिर बनाता है, और यही वजह है कि कंपनियों से ज़्यादा कोशिश करने को कहने से इसके बदलने की उम्मीद कम है।\nइसका क्या करें इसका इस्तेमाल उसी सवाल के लिए कीजिए जिसका यह असल में जवाब देता है।\nजहाँ सप्लायर का कारोबारी हित हो और आपके पास असली विकल्प न हो, वहाँ रिकॉर्ड कहता है कि नतीजा आमतौर पर सप्लायर के पक्ष में जाता है।\nकोई सुधार आमतौर पर सालों बाद आता है, और आमतौर पर सप्लायर को उस बर्ताव से हुई कमाई से कम पड़ता है।\nयह किसी सप्लायर से उसके देश की वजह से बचने का कारण नहीं है।\nयह किसी भी ऐसे सप्लायर पर निर्भर न होने का अच्छा कारण है जिसे आप छोड़ न सकें।\nभाग 5 देखता है कि एक देश का कानून दूसरे देश की कंपनियों तक कैसे पहुँच सकता है।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/what-the-record-shows/","summary":"सप्लायर चुनने का मतलब है अंदाज़ा लगाना कि वह आगे कैसा बर्ताव करेगा। उस अंदाज़े का सबसे ईमानदार आधार वह है जो अदालतें और नियामक पहले ही तय कर चुके हैं। 8 भागों में से भाग 4 ये निष्कर्ष सामने रखता है, नियामकों के हारे मामले भी शामिल करता है, और पैटर्न निकालता है।","title":"रिकॉर्ड क्या दिखाता है"},{"content":"8 भागों में से भाग 5। भाग 4 में देखा गया था कि अदालतों और नियामकों ने क्या फ़ैसले दिए।\nइस पोस्ट में क्या है वह क़ानून जो दूसरे देशों की कंपनियों तक पहुँचता है। फ़्रांस ने इसका क्या मतलब निकाला। व्यापारिक जानकारी को लेकर पुरानी चिंताएँ। व्यापार के ज़रिए डाला गया दबाव। वे धारणाएँ जो प्रोडक्ट के साथ चलती हैं। वह क़ानून जो दूसरे देशों की कंपनियों तक पहुँचता है भाग 2 में बताया गया था कि एक देश का क़ानून उस डेटा तक कैसे पहुँच सकता है जो उसकी नियंत्रित किसी कंपनी के पास है।\nयही सिद्धांत ख़ुद कंपनियों तक भी पहुँचता है, और इसके असर काफ़ी बड़े हो सकते हैं।\nयूरोप में इसका सबसे अच्छी तरह दर्ज उदाहरण Alstom है, जो एक फ़्रांसीसी इंजीनियरिंग कंपनी है।\n2014 में Alstom ने अमेरिका में अपराध क़बूल किया और $772 million देने पर राज़ी हुई। मामला Foreign Corrupt Practices Act के तहत था, जो अमेरिका का रिश्वत-विरोधी क़ानून है। अमेरिका के Department of Justice ने इसका ब्योरा छापा।\nरिश्वत असली थी। यह किसी बेक़सूर कंपनी की कहानी नहीं है।\nAlstom के एक अधिकारी को अमेरिका से होकर यात्रा करते समय गिरफ़्तार भी किया गया, और उन्होंने जेल में समय बिताया।\nलगभग उसी दौर में Alstom ने अपना बिजली वाला कारोबार General Electric को बेच दिया, जो एक अमेरिकी कंपनी है।\nवह अधिकारी तब से कहते आए हैं कि अनसुलझा मामला उस बिक्री के दौरान दबाव का काम कर रहा था। अमेरिकी अभियोजकों ने किसी अमेरिकी ख़रीदार की मदद के लिए काम करने से इनकार किया है।\nयह मतभेद कभी सुलझा नहीं, इसलिए यह पोस्ट भी इसे नहीं सुलझा सकती।\nफ़्रांस ने इसका क्या मतलब निकाला जो दिखाया जा सकता है, वह यह है कि बाद में फ़्रांसीसी सरकार किस नतीजे पर पहुँची।\nजून 2019 में फ़्रांस के प्रधानमंत्री को एक रिपोर्ट सौंपी गई। उसे Gauvain रिपोर्ट कहा जाता है, और उसका शीर्षक फ़्रांस और यूरोप की संप्रभुता वापस लाने और कंपनियों को सीमा-पार असर वाले क़ानूनों से बचाने के बारे में है।\nसीमा-पार असर का मतलब है ऐसा क़ानून जो उसे बनाने वाले देश की सीमाओं से बाहर भी लागू होता है।\nरिपोर्ट को 3 बातें मिलीं जो यहाँ दोहराने लायक हैं।\nफ़्रांसीसी, यूरोपीय और दूसरी ग़ैर-अमेरिकी कंपनियों पर बहुत बड़े जुर्माने लगाए गए थे, जो दसियों अरब डॉलर तक पहुँचते थे। ज़्यादातर बर्ताव का अमेरिका की ज़मीन से बहुत कम सीधा नाता था। फ़्रांसीसी कंपनियों के पास अपने बचाव के लिए कोई असरदार क़ानूनी औज़ार नहीं था। रिपोर्ट ने यह भी लिखा कि अमेरिकी कंपनियाँ शायद ही कभी निशाने पर थीं।\nइसके बाद फ़्रांस ने अपना blocking statute अपडेट किया, यानी वह क़ानून जो तय करता है कि फ़्रांसीसी कंपनियाँ विदेशी अधिकारियों को कौन सी जानकारी दे सकती हैं। एक पहले की संसदीय जाँच ने 2016 में इसी विषय को देखा था।\nउस रिपोर्ट के हर नतीजे को मानना ज़रूरी नहीं। इतना काफ़ी है कि एक देश की संसद ने यह सवाल देखा और तय किया कि यह संप्रभुता का मामला है।\nआपकी अपनी योजना के लिए बात छोटी है।\nकिसी दूसरे देश के क़ानून के दायरे में होना एक व्यापारिक जोखिम है। सिर्फ़ compliance वाला नहीं।\nव्यापारिक जानकारी को लेकर पुरानी चिंताएँ यह चिंता नई नहीं है, और यह जानने लायक है कि यह कितनी पुरानी है।\n2001 में यूरोपीय संसद ने संचार को बीच में पकड़ने वाली एक वैश्विक व्यवस्था पर रिपोर्ट छापी, जिसे तब ECHELON कहा जाता था। संसद ने बाद में उस काम पर लौटकर एक अध्ययन भी छापा है।\nरिपोर्ट का निष्कर्ष था कि ऐसी व्यवस्था मौजूद थी। उसने उन दावों की भी जाँच की कि पकड़ी गई जानकारी का इस्तेमाल व्यापारिक फ़ायदे के लिए हुआ, यूरोपीय कंपनियों के ख़िलाफ़ भी।\nउस समय उन दावों पर विवाद था और उन्हें साबित करना आज भी मुश्किल है।\nइसका ज़िक्र उन्हें सुलझाने के लिए नहीं है। ज़िक्र इसलिए है कि यूरोपीय संसद ने 25 साल पहले इस सवाल को इतनी गंभीरता से लिया कि औपचारिक जाँच चलाई, और यह सवाल तब से गया नहीं।\nव्यापार के ज़रिए डाला गया दबाव भाग 2 में सामान पर tariff और व्यापार वार्ता रद्द होने के बाद कनाडा के अपना digital services tax छोड़ देने की बात थी।\nएक और क़दम अलग से दर्ज करने लायक है, क्योंकि यह सामान पर नहीं, लोगों पर लागू होता है।\nजनवरी 2026 में अमेरिका के State Department ने 5 यूरोपीय अधिकारियों पर visa पाबंदियाँ लगाईं। उन्होंने Digital Markets Act और Digital Services Act पर काम किया था, जो बड़े ऑनलाइन प्लेटफ़ॉर्म को नियंत्रित करने वाले यूरोपीय क़ानून हैं।\nयह यूरोपीय कार्रवाई से जुड़ी tariff की धमकियों के साथ-साथ आया।\nCenter for Strategic and International Studies ने इसे digital नियमों को हतोत्साहित करने के लिए व्यापारिक उपायों का इस्तेमाल बताया है।\nइटली के एक संस्थान, Istituto Affari Internazionali, ने देखा है कि क्या इसके नतीजे में Digital Markets Act को लागू करना मोलभाव का विषय बनता जा रहा है।\nयही खुला सवाल है। अगर यूरोप के टेक्नोलॉजी नियम व्यापारिक दबाव से खिसकाए जा सकते हैं, तो वे आपको जो सुरक्षा देते हैं वह उतनी पक्की नहीं जितना लिखा हुआ पाठ बताता है।\nयह जोड़ना भी ठीक है कि व्यापारिक दबाव राजनीति का आम औज़ार है, जिसे यूरोपीय देशों समेत बहुत से देश इस्तेमाल करते हैं। यहाँ बात यह है कि इसे किस चीज़ पर इस्तेमाल किया जा रहा है।\nवे धारणाएँ जो प्रोडक्ट के साथ चलती हैं आख़िरी बात बाकी सबसे शांत है, न कोई मुक़दमा, न कोई जुर्माना, और यह आप पर हर दिन असर डालती है।\nसॉफ़्टवेयर उस बाज़ार के लिए बनता है जिसे उसके बनाने वाले सबसे अच्छी तरह जानते हैं। उस बाज़ार की धारणाएँ उसके साथ चलती हैं।\nकुछ आप तुरंत पहचान लेंगे।\nPrivacy settings अक्सर default रूप से share करने पर होती हैं, क्योंकि अमेरिका में यही आम तरीका है। यूरोपीय क़ानून अनुमति माँगने से शुरू होता है। स्टाफ़ संभालने वाले tools अक्सर मानकर चलते हैं कि नौकरी कम नोटिस पर ख़त्म हो सकती है, और यह कि सलाह लेने के लिए कोई works council नहीं है। Standard contract शर्तें अक्सर चाहती हैं कि विवाद अमेरिकी अदालत में, अमेरिकी क़ानून के तहत सुने जाएँ, यूरोपीय ग्राहक के लिए भी। Content के नियम 1 देश के अभिव्यक्ति की आज़ादी वाले नज़रिए पर चलते हैं, फिर पूरी दुनिया पर लागू कर दिए जाते हैं। छोटी भाषाओं का support सबसे आख़िर में आता है, और कभी-कभी आता ही नहीं। इसमें से कुछ भी परेशानी पैदा करने के लिए नहीं किया जाता। यह घरेलू बाज़ार के लिए बनाने और फिर नतीजे को हर जगह बेचने का साधारण परिणाम है।\nफिर भी यह बड़ी बहस के बारे में कुछ समझाता है।\nGeneral Data Protection Regulation, Digital Markets Act और Digital Services Act ज़्यादातर यूरोप का यह कहना है कि वह अपने तय नियमों वाला एक अलग क़ानूनी क्षेत्र है।\nइसके जवाब में ऊपर वाले व्यापारिक उपाय भी आए हैं।\nआपके लिए इसका मतलब इससे तीन व्यावहारिक बातें निकलती हैं।\nGoverning law वाली शर्त पढ़िए. देखिए कि विवाद किसकी अदालतें सुनेंगी। बड़े contract पर इस पर मोलभाव करना फ़ायदेमंद है।\nपूछिए कि आपके supplier की मूल कंपनी कहाँ registered है. यह जवाब data centre के पते से ज़्यादा कुछ तय करता है।\nख़रीदने से पहले जाँचिए कि प्रोडक्ट आपके क़ानूनी माहौल में फ़िट बैठता है. सहमति, नौकरी के नियम और रिकॉर्ड रखना वे आम जगहें हैं जहाँ बाहर से आई default सेटिंग लोकल क़ानून से मेल नहीं खाती।\nइनमें से किसी के लिए किसी सरकार के बारे में राय की ज़रूरत नहीं। यह supplier की साधारण जाँच-परख है, उस सवाल पर जिसे ज़्यादातर ख़रीद की checklists आज भी छोड़ देती हैं।\nभाग 6 सुरक्षा को देखता है, और उस पैमाने को जो किसी supplier को राष्ट्रीय सुरक्षा के आधार पर बाहर करते समय लगाया जाता है।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/how-far-the-law-reaches/","summary":"भाग 2 उस क़ानून के बारे में था जो आपके डेटा तक पहुँचता है। 8 भागों में से भाग 5 उस क़ानून के बारे में है जो आपकी कंपनी तक पहुँचता है: अमेरिकी क़ानून के तहत बड़े जुर्माने, फ़्रांस की संसद की एक रिपोर्ट कि क्या यह व्यापारिक हथियार की तरह काम करता है, टैक्स क़ानून और नियामकों पर डाला गया व्यापारिक दबाव, और एक बाज़ार की धारणाएँ हर जगह ले जाते प्रोडक्ट।","title":"एक देश का क़ानून कितनी दूर तक पहुँचता है"},{"content":"8 भागों में से भाग 6। भाग 5 में देखा गया था कि एक देश का क़ानून कितनी दूर तक पहुँचता है।\nइस पोस्ट में क्या है कुछ suppliers को बाहर करने की बताई गई वजह। कमज़ोर किए गए प्रोडक्ट्स के बारे में क्या साबित हो चुका है। 2024 में क्या हुआ। यह यूरोप पर भी क्यों लागू होता है। आप इसके बारे में क्या कर सकते हैं। कुछ suppliers को बाहर करने की बताई गई वजह कई सरकारों ने चीनी suppliers को टेलीफ़ोन और इंटरनेट नेटवर्क से बाहर कर दिया है, और सरकारी डिवाइसों पर कुछ चीनी apps पर रोक लगाई है।\nबताई गई वजह आम तौर पर एक ही होती है: किसी कंपनी को उसकी अपनी सरकार की मदद के लिए मजबूर किया जा सकता है। इसलिए सामान में जोखिम है, code चाहे जो करे।\nयह तर्क ठीक है। यह वही तर्क भी है जो भाग 2 में इस बारे में था कि आपके डेटा पर किसका क़ानून लागू होता है।\nआगे बढ़ने से पहले एक बात साफ़ कर दें।\nचीनी सरकार के cyber operations असली हैं। यूरोप की राष्ट्रीय सुरक्षा एजेंसियाँ भी उन्हें उतना ही दर्ज करती हैं जितना अमेरिकी एजेंसियाँ, और उनमें बड़े पैमाने पर व्यापारिक जानकारी की चोरी शामिल है। इस पोस्ट में कुछ भी उसका बचाव नहीं है।\nपर अगर सिद्धांत यह है कि किसी supplier को उसकी अपनी सरकार की मदद के लिए मजबूर किया जा सकता है, तो यह हर उस supplier पर लागू होता है जिसकी कोई सरकार है।\nइसे सब पर बराबर लगाइए और यूरोपीय और अमेरिकी पक्ष का रिकॉर्ड ख़ाली नहीं निकलता। कुछ जगहों पर यह इल्ज़ामों से भी ज़्यादा पक्का है, क्योंकि संसदों ने इसकी जाँच की है।\nकमज़ोर किए गए प्रोडक्ट्स के बारे में क्या साबित हो चुका है तीन बातें, हर एक के साथ उसका स्रोत, इस क्रम में कि वे कितनी मज़बूती से टिकती हैं।\nएक ख़ुफ़िया एजेंसी एक encryption कंपनी की मालिक थी.\nCrypto AG स्विट्ज़रलैंड की एक कंपनी थी जिसने 1950 के दशक से 120 से ज़्यादा सरकारों को cipher machines बेचीं।\nइसकी मालिक अमेरिकी CIA और जर्मनी की BND थीं। मशीनों को इस तरह बदला गया था कि वे एजेंसियाँ उन्हें ख़रीदने वाली सरकारों के संदेश पढ़ सकें।\nयह सिर्फ़ पत्रकारिता पर नहीं टिका। ख़बर आने के बाद स्विट्ज़रलैंड की संसद की अपनी ख़ुफ़िया निगरानी संस्था ने जाँच की और नवंबर 2020 में रिपोर्ट छापी।\nस्विट्ज़रलैंड के सरकारी प्रसारक SWI ने नतीजों पर रिपोर्ट किया, इसमें यह भी कि स्विस ख़ुफ़िया एजेंसी 1993 से यह जानती थी।\nग्राहकों में यूरोपीय सरकारें भी थीं। यह लगभग 50 साल चला।\nएक cryptographic standard वापस लिया गया.\nDual_EC_DRBG नाम का एक random number generator अमेरिकी standard के रूप में छापा गया था। Random numbers वह चीज़ हैं जिनसे encryption अपनी keys को अंदाज़े से बाहर रखता है।\nशोधकर्ताओं ने दिखाया कि इसकी बनावट ऐसी थी कि जिसने इसके अंदर कुछ ख़ास मान चुने, वह इसका output पहले से बता सकता था।\nStandards संस्था ने 2013 में इसे इस्तेमाल न करने की सलाह दी और 2014 में इसे हटा दिया। उस समय The Register ने इससे जुड़े व्यापारिक इंतज़ामों पर रिपोर्ट किया।\nसामान को रास्ते में पकड़ा गया.\nदिसंबर 2013 में जर्मन पत्रिका Der Spiegel ने interception tools की एक सूची छापी, जिसमें जाने-माने निर्माताओं के routers, firewalls, servers और storage firmware शामिल थे।\nरिपोर्टिंग में यह भी बताया गया कि सामान को रास्ते में मोड़ा गया, बदला गया, फिर से पैक किया गया और ग्राहक के पास भेज दिया गया।\nहार्डवेयर ख़रीदने वाले किसी भी व्यक्ति को इस आख़िरी बात पर एक पल रुकना चाहिए।\nइसका मतलब है कि भरोसे की सीमा सिर्फ़ आपका supplier नहीं है। वह आपका supplier और डिलीवरी संभालने वाली हर चीज़ है।\nएक ईमानदार supplier भी दूसरे हिस्से की गारंटी नहीं दे सकता।\n2024 में क्या हुआ यह वह घटना है जो engineering वाले सवाल का जवाब देती है, और यह इस पोस्ट की सबसे काम की बात है।\n1994 में अमेरिका ने एक क़ानून पास किया जिसके तहत टेलीफ़ोन कंपनियों को अपने नेटवर्क ऐसे बनाने थे कि क़ानूनी माँग पर बातचीत बीच में पकड़ी जा सके।\nयानी अंदर का रास्ता स्थायी था, अंदर बना हुआ था, और क़ानूनी प्रक्रिया से चलता था।\n2024 में चीनी सरकार से जुड़ा एक समूह, जिसे सार्वजनिक रूप से Salt Typhoon कहा गया, कम से कम 9 बड़ी अमेरिकी टेलीफ़ोन कंपनियों में घुसा पाया गया।\nजिन सिस्टमों तक वह पहुँचा उनमें ख़ुद interception वाले सिस्टम भी थे। The Register ने सांसदों की प्रतिक्रिया पर रिपोर्ट किया।\nजो रास्ता एक सरकार ने बनवाया था, वही रास्ता दूसरी सरकार के घुसने का रास्ता बन गया।\nयह बदक़िस्मती नहीं है। यह इसी से निकलता है कि ऐसी चीज़ काम कैसे करती है।\nअंदर बना रास्ता एक क्षमता है, नियम नहीं। उसे चलाने वाला क़ानून सिर्फ़ उन्हीं पर लागू होता है जो उस क़ानून को मानते हैं। जो सेंध लगाकर अंदर आया है, वह नहीं मानता।\nअंदर बनी क़ानूनी पहुँच के पक्ष में हर तर्क यह मानकर चलता है कि पहुँच को उसके इच्छित इस्तेमाल करने वाले तक सीमित रखा जा सकता है। यह इस बात का सबसे साफ़ सबूत है कि यह धारणा टिकती नहीं।\nयह यूरोप पर भी क्यों लागू होता है अगर यह तर्क सही है, तो यह हर जगह सही है, और इसलिए यह यूरोप के प्रस्तावों पर भी लागू होता है।\nसंदेशों को encrypt होने से पहले डिवाइस पर ही scan करने के प्रस्ताव उसी तरह का अंदर बना रास्ता बनाते हैं।\nUnited Kingdom के पास कंपनियों से तकनीकी क्षमताएँ देने की माँग करने की शक्ति है। इसका इस्तेमाल एक encryption feature में बदलाव माँगने के लिए हुआ, और supplier ने उसे बदलने के बजाय United Kingdom में वह feature ही हटा लिया।\nदोनों को लोकतंत्र चला रहे हैं, निगरानी के साथ, बच्चों की सुरक्षा जैसी गंभीर वजहों से।\nदोनों ठीक उसी तरह की क्षमता भी बनाते हैं जिसके बारे में 2024 ने दिखाया कि उसे भरोसे से उसके इच्छित इस्तेमाल करने वाले तक सीमित नहीं रखा जा सकता।\nयूरोप का बनाया रास्ता किसी और से ज़्यादा सुरक्षित नहीं, क्योंकि घुसपैठिए को इसकी परवाह नहीं कि संस्था कितनी जवाबदेह है। उसे परवाह इसकी है कि वह चीज़ मौजूद है या नहीं।\nइसीलिए इस तर्क का काम का रूप तकनीकी है, राजनीतिक नहीं।\n“देश X के suppliers पर भरोसा मत कीजिए” वाली बात हर बार राजनीति बदलने पर फिर से खोलनी पड़ती है।\n“मान लीजिए कि अंदर बना हर रास्ता आख़िर में कोई ऐसा इस्तेमाल करेगा जिसके लिए वह नहीं बना था” वाली बात हर हाल में टिकती है।\nआप इसके बारे में क्या कर सकते हैं व्यावहारिक जवाब मुख्य रूप से इस बारे में नहीं कि आप किससे ख़रीदते हैं। यह ऐसा डिज़ाइन करने के बारे में है कि यह सवाल कम मायने रखे।\nनेटवर्क को भरोसे लायक मत मानिए. Traffic को end to end encrypt कीजिए, और किसी सिस्टम को दूसरे पर सिर्फ़ इसलिए भरोसा मत करने दीजिए कि वह नेटवर्क पर कहाँ बैठा है।\nजहाँ हो सके, अपनी encryption keys ख़ुद रखिए. भाग 2 ने समझाया था कि इससे यह क्यों बदलता है कि आपके डेटा के लिए किससे पूछा जा सकता है। इससे यह भी घटता है कि घुसपैठिए को रखने लायक क्या मिलता है।\nकम भेजिए. जो डेटा आपने कभी इकट्ठा ही नहीं किया, उसे न पकड़ा जा सकता है, न माँगा जा सकता है, न खोया जा सकता है। सूची का सबसे कम फ़ैशनेबल उपाय, और अक्सर सबसे असरदार।\nभरोसा करने से पहले जाँचिए कि आपका सामान क्या चला रहा है. जहाँ आपका हार्डवेयर support करता हो, वहाँ verified boot और firmware जाँच चालू करना फ़ायदेमंद है।\nसचमुच संवेदनशील सिस्टमों पर डिलीवरी जाँचिए. छेड़छाड़ दिखाने वाली पैकिंग और दर्ज serial numbers काफ़ी आसान हैं।\nइनमें से किसी के लिए यह तय करना ज़रूरी नहीं कि किस सरकार की सबसे ज़्यादा चिंता करें।\nइसीलिए ये बेहतर जवाब हैं। जो उपाय सिर्फ़ तब काम करे जब राजनीति के बारे में आपका अंदाज़ा सही हो, वह असल में उपाय नहीं है।\nभाग 7 टेक्नोलॉजी से बाहर कदम रखता है, और देखता है कि दूसरे उद्योगों ने इसी समस्या को कैसे संभाला।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/backdoors-and-who-is-accused/","summary":"सुरक्षा के आधार पर किसी supplier को बाहर करने के लिए एक पैमाना चाहिए, जो सब पर बराबर लगे। 8 भागों में से भाग 6 बताता है कि कमज़ोर किए गए प्रोडक्ट्स और बीच में पकड़ने के बारे में क्या साबित हो चुका है, स्विट्ज़रलैंड की संसद की एक जाँच समेत, और दिखाता है कि अंदर बना रास्ता उसी का होता है जो उस तक पहुँच जाए।","title":"बैकडोर, और उनका इल्ज़ाम किस पर लगता है"},{"content":"8 भागों में से भाग 7। भाग 6 में सुरक्षा और पहले से बने अंदर आने के रास्तों की बात हुई थी।\nइस भाग में क्या है यह तुलना काम की क्यों है। बीज, और जीती-जागती चीज़ों पर लाइसेंस की शर्तें। सुपरमार्केट, और उनके लिए बने नियम। टेक्नोलॉजी के पास ऐसा कुछ क्यों नहीं है। इससे आपको क्या पता चलता है। यह तुलना काम की क्यों है एक आम सोच है कि टेक्नोलॉजी एक नई तरह की ताक़त है और उसके लिए नई तरह की सोच चाहिए।\nयह सोच तसल्ली देती है, और ज़्यादातर गलत है। इस पर भरोसा करना एक वजह है कि जवाब आने में इतनी देर लगी।\nइस सीरीज़ की समस्या पुरानी है। एक सप्लायर ज़रूरी बन जाता है। ग्राहक के विकल्प ख़त्म हो जाते हैं। शर्तें तय होना बंद हो जाती हैं और सुनाई जाने लगती हैं।\nऐसा उन उद्योगों में भी हुआ है जिनमें कोई सॉफ़्टवेयर है ही नहीं।\nयह तुलना 2 तरह से मदद करती है।\nयह दिखाती है कि आगे आमतौर पर क्या होता है, क्योंकि वे उद्योग इस रास्ते पर आगे निकल चुके हैं।\nऔर यह दिखाती है कि एक गंभीर जवाब कैसा दिखता है, क्योंकि उनमें से कुछ जवाब पहले से मौजूद हैं और काम कर रहे हैं।\nबीज, और जीती-जागती चीज़ों पर लाइसेंस की शर्तें बीज ख़रीदने वाला किसान लगभग उसी हालत में है जिसमें मुख्य सॉफ़्टवेयर ख़रीदने वाली कोई संस्था।\nचार कंपनियाँ, Bayer, Corteva, Syngenta और BASF, दुनिया के बीज बाज़ार का ज़्यादातर हिस्सा रखती हैं, और कीटनाशकों का भी लगभग उतना ही। स्विस संस्था Public Eye इसका विश्लेषण छापती है।\nकुछ फ़सलों में यह पकड़ और भी कसी है, और गिनी-चुनी कंपनियों के पास ज़्यादातर ज़रूरी पेटेंट हैं।\nअगर आपने कभी सॉफ़्टवेयर का कोई समझौता पढ़ा है, तो यह लाइसेंसिंग जानी-पहचानी लगेगी।\nपेटेंट वाला बीज सीधे-सीधे बेचा नहीं जाता। उसका लाइसेंस दिया जाता है, और उसकी शर्तें खेती की सबसे पुरानी आदत रोक सकती हैं: इस साल की फ़सल का कुछ हिस्सा अगले साल बोने के लिए रख लेना।\nतो किसान बीज का इस्तेमाल 1 मौसम के लिए ख़रीदता है। उसे दोबारा उगाने का हक़, जो बीज का पूरा मतलब है, सप्लायर के पास ही रहता है।\nयानी एक बार की ख़रीद हर बार की ख़रीद बन गई। यह सॉफ़्टवेयर से पहले खेती के साथ हुआ।\nएक और जानी-पहचानी बात है।\nबीज अक्सर किसी ख़ास कीटनाशक के साथ काम करने के लिए बनाया जाता है, और दोनों एक ही कंपनी बेचती है। एक ख़रीदने से दूसरा ख़रीदना, सप्लायर बदलने से ज़्यादा आसान हो जाता है।\nकृषि अर्थशास्त्रियों ने इसके नतीजे दर्ज किए हैं: बाज़ार में कम किस्में, खेती की लागत ज़्यादा, और सप्लायर बदलने की ताक़त कम।\nसुपरमार्केट, और उनके लिए बने नियम खाने का दूसरा हिस्सा यही समस्या ख़रीदने वाले की तरफ़ से दिखाता है। यही वह मिसाल है जिसकी नक़ल करनी चाहिए।\nयूनाइटेड किंगडम में गिने-चुने रिटेलर ही किराने की ज़्यादातर बिक्री संभालते हैं।\nतो एक सप्लायर के सामने बहुत कम संभावित ग्राहक होते हैं। एक के चले जाने से कारोबार ख़त्म हो सकता है। रिटेलर के लिए एक सप्लायर बदलना एक सुबह का काम है।\nयह असंतुलन इतनी अच्छी तरह दर्ज हुआ कि संसद ने कदम उठाया। Groceries Code Adjudicator 2013 में बनाया गया। वह देखता है कि बड़े रिटेलर Groceries Supply Code of Practice का पालन करते हैं या नहीं।\nदेखिए यह कोड किन चीज़ों पर रोक लगाता है, फिर अपने पिछले सॉफ़्टवेयर रिन्यूअल के बारे में सोचिए।\nतय हो चुकी शर्तों को बाद में, बिना सहमति के, बदलना। सप्लायर से कारोबार जारी रखने के हक़ के लिए पैसा लेना। लागत और जोखिम बिना मुआवज़े के सप्लायर पर डाल देना। झगड़े में दबाव बनाने के लिए सामान बिक्री से हटा देना। यूरोपीय संघ ने अपना रूप बनाया। अनुचित व्यापार तरीक़ों पर Directive 2019/633 खेती और खाने की सप्लाई चेन पर लागू होता है।\nयह देर से भुगतान, कम नोटिस पर ऑर्डर रद्द करना, एकतरफ़ा शर्तें बदलना और कारोबारी बदले की धमकी देना, सब पर रोक लगाता है। हर सदस्य देश में इसे लागू करने वाली एक संस्था है।\nदोनों में से कोई भी व्यवस्था पूरी तरह ठीक नहीं है। Adjudicator की ताक़तें सीमित हैं, वह क़ीमतों को ख़ुद नहीं देखता, और अपनी सबसे बड़ी ताक़तें उसने कम ही इस्तेमाल की हैं।\nलेकिन इनके अंदर का सिद्धांत वही है जो टेक्नोलॉजी में नहीं है।\nजहाँ मोल-भाव की ताक़त बहुत असमान हो, वहाँ अनुबंध की आज़ादी असल में होती ही नहीं। इसलिए कुछ तरीक़ों पर सीधे रोक लगाई जाती है, उन्हें मोल-भाव पर नहीं छोड़ा जाता।\nकिसी ने यह नहीं कहा कि सॉफ़्टवेयर सप्लायर को तय हो चुकी शर्तें बाद में बदलने से रोका जाए।\nकोई यह नहीं मानता कि अपना ही डेटा बाहर ले जाने का शुल्क कमज़ोर पक्ष पर लागत डालना है।\nखाने के कारोबार में दोनों बातें तुरंत पकड़ी जातीं। सॉफ़्टवेयर में हम इसे लाइसेंसिंग मॉडल कहते हैं।\nटेक्नोलॉजी के पास ऐसा कुछ क्यों नहीं है चार वजहें हैं, और इन्हें समझना ज़रूरी है क्योंकि ये बताती हैं कि क्या बदलना होगा।\nरफ़्तार। किराने के कारोबार को कुछ हाथों में सिमटने में लगभग 100 साल लगे। क्लाउड को लगभग 15। जब तक यह साफ़ दिखने लगा, तब तक हो चुका था।\nमुफ़्त सेवाएँ। ज़्यादातर देशों में प्रतिस्पर्धा कानून उपभोक्ताओं की चुकाई क़ीमतों के इर्द-गिर्द बना। शून्य क़ीमत वाली सेवा उस कसौटी पर बेनुक़सान दिखती है, तब भी जब ग्राहक इस्तेमाल करने वाला नहीं होता।\nनयेपन का दावा। उद्योग ने कामयाबी से यह तर्क दिया कि उसकी अर्थव्यवस्था अलग है, और यह कि उसे छोड़ना मुश्किल होना जटिल सिस्टम की एक ख़ूबी है, कोई सोचा-समझा डिज़ाइन नहीं।\nसंगठन। किसानों के पास यूनियनें, सहकारी संस्थाएँ और मिलकर मोल-भाव करने की लंबी आदत है। उन्होंने इसका इस्तेमाल ख़ास कानूनी सुरक्षाएँ जीतने में किया है।\nटेक्नोलॉजी के ख़रीदारों के पास यूज़र ग्रुप और एक कॉन्फ़्रेंस है। जब VMware के ग्राहकों पर भारी बढ़ोतरी आई, तो असली विरोध क्लाउड प्रोवाइडरों की एक ट्रेड संस्था से आया, और वह प्रतिस्पर्धा कानून के रास्ते गया। भाग 2 में बताया गया था कि इसमें कितना समय लगता है।\nइससे आपको क्या पता चलता है दो नतीजे, और दोनों काम के हैं।\nसमस्या ढाँचे की है, किसी देश की नहीं।\nBayer जर्मन है। सबसे बड़े सुपरमार्केट ब्रिटिश, फ़्रेंच और जर्मन हैं। भाग 3 वाला बायआउट मॉडल पूरे यूरोप में बड़े चाव से अपनाया जाता है।\nइस सीरीज़ के हर अमेरिकी सप्लायर को कल 4 यूरोपीय सप्लायरों से बदल दीजिए, और यही बर्ताव लौट आएगा, क्योंकि यह ढाँचे से पैदा होता है।\nइसलिए यहाँ सलाह सप्लायर बदल पाने के बारे में है, कोई देश चुनने के बारे में नहीं।\nएक काम करने वाला जवाब पहले से मौजूद है।\nहमें प्लैटफ़ॉर्म नियमन का कोई नया सिद्धांत गढ़ने की ज़रूरत नहीं है।\nएक मॉडल है जिसमें मोल-भाव की ताक़त असमान होने की वजह से कुछ तरीक़ों पर रोक है, एक adjudicator शिकायतें सुनता है, और सबूत का पूरा बोझ कमज़ोर पक्ष पर नहीं पड़ता।\nयह पत्तागोभी के लिए बना था। यह क्लाउड के अनुबंधों पर भी काम करेगा।\nभाग 8 देखता है कि यूरोप में अभी क्या बन रहा है, और आप कैसे जाँचें कि आप कहाँ खड़े हैं।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/the-same-pattern-elsewhere/","summary":"इसमें कुछ भी नया नहीं है, और यह असल में टेक्नोलॉजी की बात नहीं है। चार कंपनियाँ दुनिया के ज़्यादातर बीज बाज़ार पर काबिज़ हैं। दस रिटेलर ब्रिटेन का ज़्यादातर खाना बेचते हैं। दोनों से एक कानूनी जवाब निकला, जैसा सॉफ़्टवेयर के पास कुछ नहीं है। 8 भागों में से भाग 7 इनकी तुलना करता है, और पूछता है कि टेक्नोलॉजी इससे कैसे बच निकली।","title":"दूसरे उद्योगों में भी यही पैटर्न"},{"content":"8 भागों में से भाग 8। भाग 7 में इस पैटर्न की तुलना दूसरे उद्योगों से की गई थी।\nइस पोस्ट में क्या है यूरोप ने असल में क्या बनाया है। आज क्या मुमकिन है, और क्या नहीं। यह समझने के 3 सवाल कि आप कहाँ खड़े हैं। इस वेबसाइट के बारे में एक ईमानदार बात। रुख़ बदल चुका है बहुत सालों तक यूरोप की digital आज़ादी ज़्यादातर बातचीत ही थी।\n2025 से यह बदल गया है। अब काम करने वाले प्रोडक्ट हैं, और संस्थाएँ उन्हें हर दिन इस्तेमाल कर रही हैं।\nयह पूरी series का सबसे काम का रुख़ है, क्योंकि यही वह है जिस पर आप कुछ कर सकते हैं।\nOffice और साथ काम करने वाला सॉफ़्टवेयर openDesk रोज़ के office काम के लिए open source tools का एक सेट है। Documents, email, calendars, files, chat और video meetings।\nइसकी देखरेख ZenDiS करता है, जो digital संप्रभुता के लिए जर्मनी का केंद्र है।\nयह पहले से मौजूद tools से बना है: files के लिए Nextcloud, documents के लिए Collabora, email और calendars के लिए Open-Xchange, chat के लिए Element, video के लिए Jitsi।\nयह असल इस्तेमाल में है। जर्मन सशस्त्र सेनाओं ने कई साल का समझौता किया। Robert Koch Institute, जो जर्मनी की एक सार्वजनिक स्वास्थ्य संस्था है, इसे कई हज़ार लोगों के लिए चलाता है। International Criminal Court ने 2025 में इसे चुना।\nअब व्यापारिक विकल्प भी हैं।\noffice.eu मार्च 2026 में The Hague में लॉन्च हुआ। यह बड़े अमेरिकी office suites का यूरोप के स्वामित्व वाला hosted विकल्प है।\nEuro-Office जून 2026 में आया। यह एक साझा document editor है जिसे कई यूरोपीय कंपनियों ने मिलकर बनाया है, जिनमें IONOS, Nextcloud, XWiki, OpenProject, Open-Xchange और office.eu शामिल हैं।\nइस तरह साथ काम करना मायने रखता है। इसका मतलब है कि हर कंपनी अपने दम पर वही editor दोबारा नहीं बना रही।\nसरकारें जो सच में आगे बढ़ रही हैं कुछ सरकारें पहले ही आगे बढ़ चुकी हैं, जिससे बाकी हम सबको सीखने के लिए असली अनुभव मिलता है।\nडेनमार्क के Digitalisation मंत्रालय ने जुलाई 2025 से Microsoft 365 से LibreOffice पर जाना शुरू किया। LibreOffice एक मुफ़्त office suite है।\nजर्मनी का राज्य Schleswig-Holstein दसियों हज़ार स्टाफ़ कंप्यूटरों को open source पर ले जा रहा है।\nफ़्रांस और जर्मनी भी हर एक अपने लिए पैसे देने के बजाय मिलकर साझा tools बना रहे हैं।\nयह कहना भी ठीक है कि यह हमेशा आसान नहीं होता।\nम्यूनिख ने अपनी नगर परिषद को कई सालों में Linux पर ले जाया, फिर 2017 में वापस Windows पर आ गया। उस समय The Register ने लागत पर रिपोर्ट किया।\nम्यूनिख का मुख्य सबक तकनीकी नहीं था। सॉफ़्टवेयर ज़्यादातर काम करता था। जो टिका नहीं, वह था राजनीतिक समर्थन, एक दशक से ज़्यादा चलने वाले प्रोजेक्ट पर, प्रशासन बदलने के दौरान।\nइसलिए इन चीज़ों को कई सालों तक लगातार समर्थन चाहिए। यह एक असली ज़रूरत है, और इसकी ईमानदारी से योजना बनाना फ़ायदेमंद है।\nभुगतान भुगतान भी उसी रुख़ पर चलते हैं, और बहुत से लोगों को पता नहीं कि वे कितने एक जगह सिमटे हुए हैं।\nEuropean Central Bank के आँकड़ों का विश्लेषण बताता है कि 2025 में euro area में card payment value का लगभग 47% Visa और Mastercard ने संभाला। कई देशों में यह हिस्सा इससे काफ़ी ज़्यादा है।\nकई यूरोपीय देशों के अपने card systems हैं। दिक़्क़त यह है कि वे सीमाओं के पार काम नहीं करते, इसलिए जो हर जगह चलता है वह अमेरिकी वाला है।\nWero यूरोप का जवाब है। इसे European Payments Initiative चलाता है।\nइसकी शुरुआत बेल्जियम, फ़्रांस और जर्मनी में लोगों के बीच भुगतान से हुई। अब इसके दसियों million registered users हैं। लक्ज़मबर्ग 2026 में जुड़ा, और नीदरलैंड्स अपने मौजूदा iDEAL system को इस पर ले जा रहा है। European Payments Council प्रगति छापता है।\nदुकानों और ऑनलाइन भुगतान अगला चरण है। यही चरण तय करेगा कि Wero सच्चा विकल्प बनता है या नहीं।\nइसके पीछे digital euro है, लगभग 2029 वाली लंबी समय-सीमा पर।\nनए नियम European Commission ने 3 जून 2026 को अपना Cloud and AI Development Act प्रस्ताव छापा।\nयह cloud संप्रभुता को एक स्वैच्छिक लेबल से क़ानूनी ज़रूरत में बदलने की पहली गंभीर कोशिश है।\nयह cloud providers को स्तरों में बाँटता है: infrastructure कहाँ है, उसे कितनी आज़ादी से चलाया जा सकता है, और उसका मालिक कौन है। सरकारी ख़रीदारों को ऐसे providers चाहिए होंगे जो कम से कम सबसे निचले स्तर पर खरे उतरें।\nयह एक प्रस्ताव है। यह अभी क़ानून नहीं है, और रास्ते में बदल सकता है।\nक्या मुमकिन है, और क्या नहीं उम्मीद भरी सूची यहाँ आसानी से गड़बड़ा सकती है, इसलिए साफ़ बात करें।\nआज मुमकिन. Office documents, email, calendars, files, chat और video। काम करने वाले यूरोपीय और open source विकल्प मौजूद हैं, और संस्थाएँ उन्हें अभी production में चला रही हैं।\nपहुँच रहे हैं. भुगतान, और कुछ cloud services। हिस्से मौजूद हैं। दायरा अभी भर रहा है।\nअभी नहीं. बड़े पैमाने का cloud infrastructure। यूरोप की क्षमता माँग से बहुत पीछे है।\nआज किसे यूरोपीय या open source विकल्प से बदला जा सकता है आज हर परत कितनी बदली जा सकती है Office का काम Documents, email, calendars, files, chat, video अभी बदल सकते हैं भुगतान Wero बढ़ रहा है; दुकानें और ऑनलाइन अगला चरण आंशिक रूप से तैयार Cloud infrastructure यूरोप की क्षमता माँग से बहुत कम है अभी नहीं Computer chips यूरोप की असली ताक़तें, पर आज पूरा विकल्प नहीं इस दशक में नहीं Stack में जितना ऊपर देखेंगे, आज आपके पास उतने ज़्यादा विकल्प हैं। इस दशक में नहीं. ख़ुद chips। यूरोप की असली ताक़तें हैं, जिनमें नीदरलैंड्स का ASML और chip design में Infineon और NXP शामिल हैं। इनमें से कुछ भी आज data centre graphics processor की जगह नहीं लेता।\nजर्मनी की एक संस्था, Bertelsmann Stiftung, ने अंदाज़ा लगाया है कि पूरा यूरोपीय stack बनाने में लगभग 10 साल और करीब €300 billion लगेंगे।\nतो पूरी आज़ादी अभी विकल्प नहीं है, और जो इसे पेश कर रहा है वह अपने माल को बढ़ा-चढ़ाकर बेच रहा है।\nइसलिए पूरी आज़ादी कभी काम का लक्ष्य था ही नहीं।\nयह समझने के 3 सवाल कि आप कहाँ खड़े हैं अपने सिस्टमों को देखने का एक आसान तरीका यह है। यह किसी भी supplier पर, किसी भी देश में काम करता है।\nजिस भी service पर आप निर्भर हैं, उसके बारे में ये 3 सवाल पूछिए।\n1. यह service रुक जाए तो क्या काम करना बंद कर देगा?\nठीक-ठीक बताइए। प्रभावित सिस्टमों और लोगों के नाम लीजिए। “यह ज़रूरी है” ऐसी चीज़ नहीं जिससे योजना बन सके।\n2. इसे बदलने में कितने हफ़्तों का काम लगेगा?\nजब तक आप वह supplier रखते हैं, यह संख्या हर renewal पर आपकी स्थिति तय करती है।\nअगर आप इसका अंदाज़ा नहीं लगा सकते, तो यह जानना भी अपने आप में काम का है।\n3. क्या आपकी संस्था सच में विकल्प को चला सकती है?\nयह नहीं कि विकल्प मौजूद है या नहीं। यह कि आपकी टीम, जितनी बड़ी वह असल में है, उसे चला सकती है या नहीं।\nTraining budget वाले मंत्रालय के लिए LibreOffice सच्चा जवाब है। बिना IT स्टाफ़ वाली छोटी कंपनी के लिए यह मुश्किल जवाब है।\nइन 3 जवाबों पर अपनी services को क्रम में लगाइए। सूची आम तौर पर छोटी होती है, और अक्सर वैसी नहीं जैसी लोग उम्मीद करते हैं।\nबहुत सी संस्थाओं में email और स्टाफ़ accounts, cloud computing से ऊपर आते हैं। उन्हें बदलने की शायद ही कभी जाँच हुई होती है, और इसमें काफ़ी समय लगेगा।\nफिर यही 3 सवाल उस यूरोपीय विकल्प के बारे में पूछिए जिस पर आप विचार कर रहे हैं।\nएक अकेला यूरोपीय supplier जिसे आप छोड़ नहीं सकते, एक अकेले अमेरिकी supplier से बहुत बेहतर नहीं जिसे आप छोड़ नहीं सकते।\nOpen formats और open source का असली फ़ायदा क़ीमत नहीं है। फ़ायदा यह है कि वे सवाल 2 का जवाब देना संभव बनाते हैं, और सवाल 3 को मुमकिन।\nइस वेबसाइट के बारे में एक ईमानदार बात यह सब लिखकर इसे अपने ऊपर न लागू करना ठीक नहीं होगा।\nयह साइट Hugo से बनी है और Cloudflare से serve होती है, जो एक अमेरिकी कंपनी है। इस series की हर बात इस पर लागू होती है।\nमैंने Cloudflare इसलिए चुना क्योंकि यह अच्छा काम करता है और मेरा इसमें कुछ खर्च नहीं होता। अगर account कल बंद हो जाए तो मैं कुछ DNS settings बदलूँगा और कहीं और publish कर दूँगा।\nइसलिए जोखिम असली है और नतीजा छोटा। यह ठीक सौदा है, और मैंने इसे जानबूझकर किया।\nमेरा बाकी सामान भी मिला-जुला है। Proxmox, जिसके बारे में मैं अक्सर लिखता हूँ, ऑस्ट्रिया का है। यह अमेरिका में डिज़ाइन हुए processors पर चलता है, ऐसे firmware पर जिसे मैं जाँच नहीं सकता।\nऐसा कोई setup नहीं जो शून्य तक पहुँचे। लक्ष्य कभी वह था ही नहीं।\nछोटे में टेक्नोलॉजी ख़रीदी जाने वाली चीज़ से किराये पर ली जाने वाली चीज़ बन गई।\nकिराया अक्सर बेहतर होता है, और ठीक इसी वजह से यह हुआ।\nकिराये की हर लागत उतनी बढ़ती है जितना आपके लिए छोड़ना मुश्किल होता है।\n2025 से रोज़ के office काम के लिए असली विकल्प आ चुके हैं, और भुगतान के लिए आ रहे हैं।\nइसलिए व्यावहारिक लक्ष्य किसी ख़ास देश से बचना नहीं है। लक्ष्य उन services की गिनती घटाना है जिन्हें आप 3 महीने के अंदर नहीं छोड़ सकते।\nउनसे शुरू कीजिए जिनकी आपने कभी जाँच नहीं की। आम तौर पर हैरानी वहीं इंतज़ार कर रही होती है।\nपहली बार प्रकाशित: 25 अगस्त 2026। आख़िरी अपडेट: 25 अगस्त 2026।\n","permalink":"https://blogs.damiendye.uk/hi/random/choice-coming-back/","summary":"2025 से यूरोप का जवाब योजनाओं से बदलकर ऐसी चीज़ें बन गया है जिन्हें आप इंस्टॉल कर सकते हैं। 8 भागों में से भाग 8 बताता है कि क्या आ चुका है, ईमानदारी से क्या अभी सालों दूर है, और यह समझने के 3 सवाल देता है कि आप कहाँ खड़े हैं।","title":"आपके विकल्प कहाँ लौट रहे हैं"},{"content":"Active Directory डोमेन की हर मशीन अपना डोमेन कंट्रोलर DNS से पूछकर ढूँढती है। किसी कॉन्फ़िगर की हुई सूची से नहीं। वह एक SRV रिकॉर्ड माँगती है, और जवाब जहाँ भेजता है, वहीं चली जाती है। इसका मतलब है कि _msdcs के नीचे के मुट्ठी भर रिकॉर्ड ज़ोन की सबसे ज़्यादा सुरक्षा-अहम चीज़ हैं, और इससे दो सवाल उठते हैं जिनका ठीक से जवाब देना ज़रूरी है: इन्हें साइन कैसे करें, और इन्हें लिखने की इजाज़त किसे है। दोनों सवाल कम ही पूछे जाते हैं, और डिफ़ॉल्ट रूप से दोनों का जवाब खराब मिलता है।\nयह पोस्ट Samba4 डोमेन कंट्रोलर के लिए दोनों का जवाब देती है। डायरेक्टरी को सर्व करने वाले dlz_bind9 के साथ BIND, inline signing, एक hidden primary जिस तक कोई क्लाइंट कभी नहीं पहुँचता, एक पब्लिक ज़ोन के अंदर delegation ताकि trust chain रूट तक जाए, और क्लाइंट के dynamic updates को लोकेटर से काफ़ी दूर रखना।\nलेकिन साइन करना तभी किसी काम का है जब आपको पता हो कि वह किस चीज़ की रक्षा करता है, और इसके लिए एक स्तर नीचे से शुरू करना पड़ता है: कोई नाम resolve होता कैसे है। इसलिए इसका पहला तिहाई हिस्सा रूट से नीचे की यात्रा है। अगर यह आपको पहले से पक्का आता है, तो सीधे Samba के दो DNS बैकएंड पर जाइए।\nरिज़ॉल्वर लगभग कुछ भी जाने बिना शुरू होता है यह साफ़ समझ लेना ज़रूरी है कि रिज़ॉल्वर कितनी कम जानकारी के साथ पैदा होता है, क्योंकि इस पोस्ट की बाकी हर बात इसी से निकलती है।\nनया इंस्टॉल किया हुआ recursive रिज़ॉल्वर दो चीज़ें जानता है। उसे रूट सर्वरों के पते पता होते हैं: एक hints file, a.root-servers.net से m.root-servers.net तक तेरह नाम, जिन्हें anycast के ज़रिए तेरह से कहीं ज़्यादा इंस्टेंस सर्व करते हैं। और अगर वह validate करता है, तो उसे एक पब्लिक की पता होती है: रूट की।\nबिल्ट-इन कॉन्फ़िगरेशन बस इतना ही है। बाकी हर तथ्य जो वह कभी सर्व करेगा, जैसे uk के लिए कौन से सर्वर authoritative हैं, आपका डोमेन कहाँ रहता है, आपके मेल सर्वर का पता क्या है, वह रनटाइम पर पूछकर सीखता है, और फिर उसका TTL खत्म होने तक cache में रखता है।\nयह अच्छा डिज़ाइन है। किसी को इंटरनेट के नेम सर्वरों की सूची शिप नहीं करनी पड़ती, और आपके ज़ोन में बदलाव को किसी केंद्रीय पार्टी से मंज़ूरी नहीं लेनी पड़ती। लेकिन इसका एक नतीजा है, और बाकी पोस्ट उसी के बारे में है: रिज़ॉल्वर वही मान लेता है जो उसे बताया जाता है, उस सर्वर से जिसकी तरफ़ पिछले जवाब ने इशारा किया था। सिग्नेचर हटा दीजिए और पूरा ढाँचा दावों की एक chain है, जिसमें हर दावे का सबूत बस इतना है कि वह उस पते से आया जिसका नाम पिछले जवाब ने लिया था। एक return address पर यह बहुत ज़्यादा बोझ है।\nपेड़ में नीचे की यात्रा एक lookup एक सवाल नहीं है। यह नाम के पेड़ में नीचे की ओर referrals की एक श्रृंखला है, और हर कदम किसी अलग सर्वर से एक अलग query है।\nमान लीजिए किसी क्लाइंट को dc01.ad.example.co.uk चाहिए। खाली cache वाला रिज़ॉल्वर यह करता है:\nरूट सर्वर से पूछिए। रूट को जवाब नहीं पता, और वह जानने का दिखावा भी नहीं करता। वह एक referral लौटाता है: खाली answer section, और authority section में uk के NS रिकॉर्ड, साथ में additional section में उन नेम सर्वरों के पते glue के रूप में। किसी uk सर्वर से पूछिए। एक और referral, इस बार example.co.uk के नेम सर्वरों की तरफ़। किसी example.co.uk सर्वर से पूछिए। अगर ad.example.co.uk delegated है, और इस पोस्ट के आगे वाले डिज़ाइन में है, तो एक और referral। किसी ad.example.co.uk सर्वर से पूछिए। यह इस नाम के लिए authoritative है, इसलिए यह A रिकॉर्ड के साथ जवाब देता है और AA (authoritative answer) बिट सेट करता है। एक lookup, delegation के पेड़ में नीचे, एक बार में एक referral Recursive रिज़ॉल्वर जन्म से बस इतना जानता है: \u0026#183; रूट hints \u0026#183; रूट की पब्लिक की 1 \u0026#160; रूट सर्वर a\u0026#8211;m.root-servers.net Referral uk. के NS रिकॉर्ड, साथ में glue के रूप में उनके पते 2 \u0026#160; uk नेम सर्वर uk. के लिए authoritative Referral example.co.uk. के NS रिकॉर्ड 3 \u0026#160; example.co.uk delegation इसके पास है Referral ad.example.co.uk. delegated है: उसके सर्वरों से पूछो 4 \u0026#160; ad.example.co.uk इस नाम के लिए authoritative जवाब dc01 का A रिकॉर्ड, AA बिट सेट के साथ हर कदम TTL खत्म होने तक cache रहता है, इसलिए गर्म cache वाला रिज़ॉल्वर कदम 3 या 4 से शुरू करता है। और ठीक इसी वजह से ज़हरीली की गई एक cache एंट्री इतनी कीमती है। एक lookup, चार सर्वर। हर कदम जवाब नहीं, बल्कि पूछने की किसी बेहतर जगह का नाम लौटाता है, और रिज़ॉल्वर नीचे जाते हुए हर कदम cache करता है। उस यात्रा की तीन बातें आगे काम आती हैं।\nreferral ही delegation है। किसी ज़ोन का parent उसका कंटेंट नहीं रखता। वह NS रिकॉर्ड रखता है जो कहते हैं “वहाँ पूछो”, और जब signing आ जाती है, तो एक DS रिकॉर्ड जो कहता है “और जब पूछो, तो जिस की की उम्मीद करनी है उसका fingerprint यह है”। Delegation ही DNS का अकेला ढाँचागत तरीका है, और अंदरूनी ज़ोन को अंदरूनी रखने के लिए आप इसी का इस्तेमाल करेंगे।\nइसमें से लगभग सब कुछ cache होता है। रूट और TLD referrals के TTL लंबे होते हैं, इसलिए गर्म cache वाला रिज़ॉल्वर सीधे तीसरे या चौथे कदम पर पहुँच जाता है। इसीलिए रिज़ॉल्वर का cache हमला करने लायक है: एक एंट्री को ज़हरीला कीजिए और आपने उसके नीचे की हर चीज़ को उतनी देर के लिए मोड़ दिया जितना TTL आपने चुना।\nपूरा नाम हर सर्वर को नहीं भेजा जाता। QNAME minimisation के तहत रिज़ॉल्वर रूट से सिर्फ़ uk के बारे में पूछता है, dc01.ad.example.co.uk के बारे में नहीं। यह जानना काम का है अगर आप कभी upstream के किसी query log में अपने अंदरूनी नाम ढूँढने जाएँ। वे वहाँ नहीं होने चाहिए।\nStub, Recursive, Authoritative तीन शब्द जो एक-दूसरे की जगह इस्तेमाल हो जाते हैं, जबकि इनके काम बिल्कुल अलग हैं। इस पोस्ट के Active Directory वाले हिस्से का भार इसी फ़र्क पर टिका है, इसलिए इसे पक्का कर लेना ज़रूरी है।\nक्या करता है पेड़ में नीचे जाता है? ज़ोन डेटा रखता है? Stub resolver वह लाइब्रेरी या लोकल सर्विस जिसे आपके एप्लिकेशन बुलाते हैं। एक कॉन्फ़िगर किए हुए सर्वर से पूछता है और जवाब ले लेता है। नहीं नहीं Forwarder queries को किसी दूसरे रिज़ॉल्वर को आगे भेजता है, जवाब cache करता है। नहीं नहीं Recursive resolver ऊपर वाली यात्रा करता है, हर कदम cache करता है, चाहे तो सिग्नेचर validate करता है। हाँ नहीं Authoritative server सिर्फ़ उन्हीं ज़ोन के लिए जवाब देता है जो उसे दिए गए हैं। बाकी हर चीज़ के बारे में कहता है “मुझे नहीं पता”। नहीं हाँ अहम लाइन आखिरी वाली है। Authoritative सर्वर का recursion से कोई लेना-देना नहीं होना चाहिए, और recursive रिज़ॉल्वर का authoritative होने से कोई लेना-देना नहीं होना चाहिए। दोनों को मिलाने से ऐसी मशीन बनती है जो क्लाइंट से मनमाने सवाल भी लेती है और वह डेटा भी रखती है जिस पर वे क्लाइंट निर्भर हैं, और ठीक यही वह मशीन है जो आप नहीं चाहते कि आपका डोमेन कंट्रोलर बने।\nआधुनिक Linux डेस्कटॉप पर एक और परत है जिसके बारे में जानना ज़रूरी है। systemd-resolved loopback पते पर एक stub listener चलाता है और एक resolv.conf लिखता है जो खुद की तरफ़ इशारा करता है, options edns0 trust-ad के साथ। ध्यान देने वाली चीज़ वह trust-ad है: यह stub से कहता है कि उस सर्वर के जवाबों में AD (authenticated data) बिट पर भरोसा करे। AD बिट अपने आप में किसी चीज़ का सबूत नहीं है; यह upstream रिज़ॉल्वर का दावा है कि उसने validate किया। इस पर भरोसा करना तब ठीक है जब upstream आपका अपना हो और उस तक का hop भरोसेमंद हो, वरना बेमानी है।\nसर्विसें असल में कैसे ढूँढी जाती हैं A रिकॉर्ड एक सवाल का जवाब देता है: इस नाम का पता क्या है। वह इस बारे में कुछ नहीं कहता कि सर्विस किस पोर्ट पर है, कई सर्वरों में से किसे पसंद करना है, या पहला बंद हो तो क्या करना है।\nSRV रिकॉर्ड तीनों का जवाब देते हैं। RFC 2782 के मुताबिक इनका ढाँचा यह है:\n_service._proto.name. TTL IN SRV priority weight port target SRV रिकॉर्ड के हिस्से, और हर हिस्सा क्या तय करता है ट्रांसपोर्ट डोमेन सर्विस किस तरह का सर्वर _ldap. _tcp. dc._msdcs. ad.example.com. 600 IN SRV 0 100 389 dc01.ad.example.com. एक owner name: underscore इसे होस्ट नामों से अलग रखते हैं TTL रिकॉर्ड टाइप priority weight पोर्ट target कम priority पहले आज़माई जाती है। Weight एक ही priority वाले सर्वरों के बीच लोड बाँटता है। Target ऐसा होस्ट नेम हो जिसके A या AAAA रिकॉर्ड हों, कभी CNAME नहीं। अकेले \".\" target का मतलब है कि सर्विस यहाँ जानबूझकर नहीं दी जाती। एक SRV रिकॉर्ड की चीर-फाड़। owner name में सर्विस और ट्रांसपोर्ट लिखा होता है; रिकॉर्ड के अंदर failover का क्रम, एक क्रम के भीतर लोड का हिस्सा, पोर्ट, और एक target होता है जो असली होस्ट नेम होना चाहिए। हर फ़ील्ड अपनी जगह कमाता है:\nUnderscore वाले prefix सर्विस लेबलों को उनके अपने namespace में रखते हैं। _tcp कभी tcp नाम के किसी असली होस्ट से नहीं टकरा सकता, क्योंकि होस्ट नेम underscore से शुरू नहीं हो सकता। Priority failover का क्रम है: कम वाला पहले आज़माया जाता है। ऊँचे priority नंबर वाले सर्वर तभी इस्तेमाल होते हैं जब नीचे वाले सब पहुँच से बाहर हों। Weight एक ही priority के भीतर लोड बाँटता है। weight 100 और weight 300 वाली जोड़ी को मोटे तौर पर एक चौथाई और तीन चौथाई क्लाइंट मिलते हैं। यह अनुपात वाला ड्रॉ है, round-robin नहीं। Port सर्विस को किसी well-known नंबर से आज़ाद करता है, और इसी तरह क्लाइंट 3268 पर LDAP सर्वर ढूँढ लेता है, बिना किसी के उसे hard-code किए। Target ऐसा नाम होना चाहिए जिसके A या AAAA रिकॉर्ड हों। RFC 2782 साफ़ कहता है कि यह CNAME नहीं होना चाहिए, और यह कि . वाला अकेला target मतलब है “यह सर्विस यहाँ जानबूझकर नहीं दी जाती”, जो जानबूझकर पब्लिश करने लायक काम की चीज़ है। यही चीज़ किसी डोमेन को कॉन्फ़िगर किया हुआ नहीं, बल्कि ढूँढा जा सकने वाला बनाती है। डोमेन से जुड़ी मशीन के पास आपके डोमेन कंट्रोलरों की कोई सूची नहीं होती। उसके पास एक डोमेन नेम होता है, और वह पूछती है।\nActive Directory कौन से नाम पब्लिश करता है क्लाइंट की नज़र से AD डोमेन ज़्यादातर SRV रिकॉर्डों का एक सेट है। _msdcs के नीचे वाला पेड़ दिलचस्प हिस्सा है, क्योंकि इसी से क्लाइंट “एक LDAP सर्वर”, “इस डोमेन का एक डोमेन कंट्रोलर” और “इस forest का एक global catalogue” में फ़र्क करते हैं:\nनाम इसे कौन माँगता है _ldap._tcp.\u0026lt;domain\u0026gt; डोमेन में LDAP चाहने वाली कोई भी चीज़ _ldap._tcp.dc._msdcs.\u0026lt;domain\u0026gt; डोमेन कंट्रोलर ढूँढना: सबसे बड़ा वाला _ldap._tcp.pdc._msdcs.\u0026lt;domain\u0026gt; खास तौर पर PDC emulator _ldap._tcp.gc._msdcs.\u0026lt;forest\u0026gt; Global catalogue _kerberos._tcp.\u0026lt;domain\u0026gt;, _kerberos._udp.\u0026lt;domain\u0026gt; KDC ढूँढना, किसी भी टिकट के बनने से पहले _kpasswd._tcp.\u0026lt;domain\u0026gt;, _kpasswd._udp.\u0026lt;domain\u0026gt; पासवर्ड बदलना _ldap._tcp.\u0026lt;site\u0026gt;._sites.dc._msdcs.\u0026lt;domain\u0026gt; साइट के हिसाब से ढूँढना: ऐसा DC जो पास हो देखिए यह सूची किस काम की है। Kerberos authentication तब तक शुरू नहीं हो सकता जब तक क्लाइंट को KDC न मिल जाए, और KDC वह DNS से ढूँढता है। साइट के हिसाब से ढूँढने का मतलब है कि जवाब यह भी तय करता है कि क्लाइंट किस डेटासेंटर के सामने authenticate करेगा।\nवही विचार, नए रूप में SRV का एक उत्तराधिकारी है जिसके बारे में जानना चाहिए। SVCB और HTTPS रिकॉर्ड (RFC 9460) इस पैटर्न को सामान्य बनाते हैं: DNS में सर्विस पैरामीटर, जिनमें ALPN, पोर्ट और address hints शामिल हैं, एक ही रिकॉर्ड में। इसी तरह ब्राउज़र बिना redirect के सीधे HTTP/3 पर जाना सीखता है। HTTPS रिकॉर्ड पहले से बड़े पैमाने पर लगा हुआ है। इसकी भावना SRV जैसी ही है: क्लाइंट को DNS बताता है कि सर्विस तक कैसे पहुँचना है। मतलब अगले सेक्शन का तर्क इस पर भी उतना ही लागू होता है।\nLookup के बाद की हर चीज़ lookup पर भरोसा करती है यह मोड़ है, और यही वजह है कि एक DNS पोस्ट में सुरक्षा का सेक्शन है, उल्टा नहीं।\nडोमेन से जुड़ी मशीन बूट होती है और पूछती है कि डोमेन कंट्रोलर कहाँ है। उसे एक नाम और एक पोर्ट मिलता है। वह वहाँ कनेक्ट करती है, और उसके बाद वे सारे काम शुरू करती है जिन्हें हम आम तौर पर सुरक्षा की परत मानते हैं: Kerberos, LDAP signing, channel binding, सर्टिफ़िकेट validation।\nतो अगर जवाब झूठा हो, तो क्या होगा?\nइस बारे में निष्पक्ष रहना ज़रूरी है, क्योंकि जवाब “तुरंत तबाही” नहीं है। Kerberos को mutual authentication के साथ ठीक इसीलिए डिज़ाइन किया गया था कि क्लाइंट अपने name lookup के रहम पर न रहे: जो होस्ट क्लाइंट के माँगे नाम के लिए service ticket नहीं बना सकता, वह exchange पूरा नहीं कर सकता। SRV का जवाब किसी ऐसी मशीन की तरफ़ इशारा करे जिसकी डोमेन में कोई की नहीं है, तो सख्ती से कॉन्फ़िगर किए गए क्लाइंट के लिए यह फ़ेल हो जाता है।\nअसली नुकसान ज़्यादा बारीक है, और वह सब उसके आसपास की दरारों में है:\nDowngrade। जो क्लाइंट Kerberos न चलने पर NTLM पर लौट जाता है, उसे अभी-अभी जवाब देने वाले के हवाले कर दिया गया। Relay और coercion। हमलावर को DC होना ज़रूरी नहीं। वह नाम होना काफ़ी है जिससे क्लाइंट कनेक्ट करता है, ताकि उस authentication को कहीं ऐसी जगह relay किया जा सके जहाँ वह काम आए। Denial of service जो fault जैसा दिखता है। _ldap._tcp.dc._msdcs को किसी ऐसी चीज़ की तरफ़ मोड़िए जो जवाब नहीं देती, और डोमेन रुक-रुककर ऐसे टूटता है कि काफ़ी समय तक कोई इसे DNS की समस्या नहीं पहचानता। हर वह चीज़ जिसमें mutual authentication है ही नहीं। Time sync, syslog, monitoring, backup agents, verify=False वाली वह अंदरूनी HTTP चीज़। बहुत से estates में ये उससे ज़्यादा हैं जितना वे मानना चाहेंगे। ले जाने लायक सामान्य सिद्धांत यह है: DNS खोजने का तरीका है, अधिकार देने का नहीं। किसी सर्विस को नाम से ढूँढना पूरी तरह ठीक है। किसी नाम के दम पर कुछ भी दे देना ठीक नहीं है, और ऐसे सिस्टम जितने हैं जो चुपचाप यही करते हैं, जैसे PTR पर आधारित allowlists, host-name ACLs, “यह अंदरूनी नेटवर्क पर है तो हमारा ही होगा”, वही असली attack surface है।\nDNSSEC क्या ठीक करता है, और क्या नहीं DNSSEC एक सवाल का जवाब देने के लिए है: क्या यह जवाब सच में उसी ज़ोन से आया जो इस नाम का मालिक है, बिना बदले?\nयह (RFC 4033 और उसके बाद के दो RFC) साइन करके काम करता है, और सिग्नेचरों को एक chain में उस चीज़ से जोड़कर जिस पर आप पहले से भरोसा करते हैं:\nसाइन किए हुए ज़ोन के हर RRset का एक RRSIG होता है: उस सेट पर एक सिग्नेचर। ज़ोन की पब्लिक कीज़ DNSKEY के रूप में पब्लिश होती हैं। Parent ज़ोन एक DS रिकॉर्ड पब्लिश करता है: child की की का एक hash। वह DS खुद parent ने साइन किया होता है, जिसकी की का hash उसके parent के DS में होता है, और ऐसे ही रूट तक, और रूट की की ही वह अकेली चीज़ है जिसे जानते हुए आपका रिज़ॉल्वर पैदा हुआ था। रूट से एक अंदरूनी ज़ोन तक trust chain . : रूट वह अकेली की जो रिज़ॉल्वर के पास पहले से है हर chain यहीं से शुरू होती है। रिज़ॉल्वर के साथ आती है, कभी-कभार roll होती है, बिना सवाल भरोसा। com. के लिए साइन किया DS com. या uk., या जिसके भी नीचे आप हैं Parent अपने child की की की गारंटी देता है। DS child की की का hash है, parent द्वारा साइन किया हुआ। example.com. के लिए साइन किया DS example.com. पब्लिक, साइन किया हुआ, DS parent के पास वह ज़ोन जो आपका है और जिसे आप पहले से साइन करते हैं। इसमें अंदरूनी ज़ोन का delegation है, और वह DS जो उसे authenticate करता है। अंदर का बस इतना ही इसके पास है। ad.example.com. के लिए साइन किया DS लाइन के ऊपर: इंटरनेट पर पब्लिश नीचे: सिर्फ़ estate के अंदर सर्व ad.example.com. AD से निकला view: सिर्फ़ अंदरूनी सर्वर अंदर साइन, बाहर से भरोसा। आपके रिज़ॉल्वर इसे root \u0026#8594; com \u0026#8594; example.com \u0026#8594; यहाँ तक validate करते हैं, बिना local trust anchor के, और बाँटने को कुछ नहीं। डेटा कभी बाहर नहीं जाता। सिर्फ़ भरोसा अंदर आता है, सामान्य पब्लिक chain से नीचे। वह chain जो validate करने वाला रिज़ॉल्वर बनाता है। हर parent अपने child की की की गारंटी एक साइन किए हुए DS रिकॉर्ड से देता है, इसलिए रूट पर एक बिल्ट-इन trust anchor उसके नीचे के हर ज़ोन को authenticate करता है, उस delegated अंदरूनी ज़ोन को भी जिसका कंटेंट कभी बिल्डिंग से बाहर नहीं जाता। इनकार भी साइन होता है, जिसे नज़रअंदाज़ करना आसान है और जो सुनने में जितना लगता है उससे ज़्यादा अहम है। इसके बिना “ऐसा कोई नाम नहीं” एक बिना authentication वाला जवाब है जिसे हमलावर किसी चीज़ को गायब करने के लिए जाली बना सकता है। NSEC और NSEC3 एक authenticated “इन दो नामों के बीच कुछ नहीं है” देते हैं।\nयह एक असली समस्या का असली इलाज है। Cache poisoning सिर्फ़ सिद्धांत नहीं है: Kaminsky attack ने off-path spoofing को इतना सस्ता बना दिया कि पूरे इंटरनेट पर इमरजेंसी पैचिंग करनी पड़ी, और उसके बाद के उपाय, जैसे source port randomisation और 0x20 case mixing, सब अंदाज़ा लगाना मुश्किल करने की कोशिशें हैं, जवाबों को जाँचने लायक बनाने की नहीं। तब से side-channel रिसर्च बार-बार उन्हें कमज़ोर करती रही है। उस सूची में सिर्फ़ सिग्नेचर ही ऐसी चीज़ हैं जो खेल बदलते हैं, बस कीमत नहीं बढ़ाते।\nअब ईमानदार सीमाएँ, क्योंकि DNSSEC को दोनों दिशाओं में बढ़ा-चढ़ाकर बेचा जाता है।\nयह गोपनीयता नहीं है। साइन करना पब्लिक-की authentication है; हर query और जवाब अब भी तार पर साफ़ टेक्स्ट में जाता है। क्लाइंट वाले hop पर प्राइवेसी DoT, DoH या DoQ से मिलती है, और वह अलग समस्या हल करने वाला अलग तरीका है। ऐसे रिज़ॉल्वर तक का hop encrypt करना जो validate नहीं करता, आपको किसी ऐसी चीज़ से निजी बातचीत दिलाता है जिससे अब भी झूठ बोला जा सकता है।\nयह मतलब को validate नहीं करता, सिर्फ़ स्रोत को। DNSSEC साबित करता है कि ज़ोन के मालिक ने यह पब्लिश किया। अगर रिकॉर्ड गलत है, या दुर्भावनापूर्ण है, या किसी ऐसे ने लिखा है जिसे ज़ोन ने नासमझी में लिखने दिया, तो सिग्नेचर उस पर भी उतनी ही ईमानदारी से लगता है। ऐसे ज़ोन को साइन करना जिसे अविश्वसनीय मशीनें लिख सकती हैं, कंटेंट को भरोसेमंद नहीं बनाता; यह झूठ को authenticate करता है। यह वाक्य पकड़कर रखिए; इस पोस्ट का आखिरी तिहाई हिस्सा असल में इसी का नतीजा है।\nयह तभी मदद करता है जब कोई validate करे। अगर आपका रिज़ॉल्वर validate नहीं करता, तो जिन ज़ोन से आप पूछते हैं उन पर लगे सिग्नेचर बस सजावट हैं। और अगर validation क्लाइंट से नेटवर्क के उस पार किसी रिज़ॉल्वर पर होता है, तो क्लाइंट AD बिट और रास्ते पर भरोसा कर रहा है; ऊपर trust-ad देखिए।\nऔर इसे चलाना पड़ता है। एक्सपायर हुआ सिग्नेचर कमज़ोर जवाब नहीं, बल्कि SERVFAIL है: नाम अंधेरे में चला जाता है। Parent में ऐसा DS जो अब child की की से मेल नहीं खाता, वही करता है। यही ईमानदार कीमत है, और इसलिए अगले सेक्शनों का automation शुरुआती signing से ज़्यादा अहम है।\nबनाया हुआ अंदरूनी TLD साइन क्यों नहीं हो सकता यहीं सालों पहले लिए गए नामकरण के फ़ैसले बिल लेकर लौटते हैं, और इसे खोलकर बताना ज़रूरी है क्योंकि यही वजह है कि इस पोस्ट का डिज़ाइन अंदरूनी नामों के लिए एक असली, अपना डोमेन इस्तेमाल करता है।\nफिर देखिए chain कैसे बनती है: किसी ज़ोन की की की गारंटी उसके parent में एक DS रिकॉर्ड देता है। तो validate करने वाला रिज़ॉल्वर किसी अंदरूनी ज़ोन को तभी authenticate कर सकता है जब उस ज़ोन का कोई parent हो जो उसके लिए DS पब्लिश करने को तैयार भी हो और काबिल भी।\nad.corp.local का ऐसा कोई parent नहीं है। न .lan का, न .home का, न उस किसी भी चीज़ का जो डोमेन बनाने वाले दिन गढ़ी गई:\n.local mDNS के लिए आरक्षित है। इसे unicast DNS के लिए इस्तेमाल करना सिर्फ़ बिना साइन वाला नहीं है; यह उस तरीके से दस्तावेज़ में दर्ज टकराव है जिससे बिल्डिंग का हर ऑपरेटिंग सिस्टम बर्ताव करने का हकदार है। इसका नीचे अपना सेक्शन है, क्योंकि यह बाकी तीन से बिल्कुल अलग दर्जे की गलती है। .lan, .corp, .home बिना रजिस्ट्रेशन वाली strings हैं। DS रखने के लिए कोई parent नहीं है, और जिनके लिए आवेदन हुए थे उन्हें निजी estates में name-collision की गड़बड़ के कारण delegation से रोक दिया गया। home.arpa घरेलू नेटवर्कों के लिए ठीक से आरक्षित है, जो आदर्श लगता है, लेकिन इसका delegation जानबूझकर insecure है। इस तक कोई साइन किया हुआ रास्ता नहीं है, डिज़ाइन से ही। .internal को ICANN ने ठीक इसी इस्तेमाल के लिए अलग रखा है, और यह टकराव की समस्या हल करता है। यह वाली नहीं: delegation नहीं तो DS नहीं, और DS नहीं तो chain नहीं। बिना chain वाले अंदरूनी ज़ोन के साथ आपके विकल्प हैं: उसे बिना साइन छोड़ दीजिए, या estate के हर validate करने वाले रिज़ॉल्वर पर एक local trust anchor कॉन्फ़िगर कीजिए और अपने निजी टापू के रूट बन जाइए। यानी एक की जिसे अब आपको हर रिज़ॉल्वर पर, हमेशा के लिए, हाथ से बाँटना, मॉनिटर करना और roll करना है, और जिसके फ़ेल होने का नतीजा पूरे डोमेन पर SERVFAIL है।\nइससे कहीं आसान जवाब है, और वह मुफ़्त है: अंदरूनी ज़ोन को उस पब्लिक ज़ोन के अंदर delegation बनाइए जो आपका पहले से है और जिसे आप पहले से साइन करते हैं। ad.example.com, example.com से delegated। DS पब्लिक parent में जाता है। फिर estate का हर validate करने वाला रिज़ॉल्वर अंदरूनी नामों को उसी trust anchor से authenticate करता है जो उसके पास पहले से है, और आपको कुछ भी बाँटना नहीं पड़ता।\nकंटेंट अंदर रहता है। सिर्फ़ भरोसा बाहर से आता है। यही फ़र्क इस पोस्ट के बाकी डिज़ाइन का आधार है।\n.local स्टाइल का मामला नहीं है उन चार में से एक का अपना सेक्शन बनता है, क्योंकि लोग इसी का बचाव करते हैं, और बचाव हमेशा एक जैसा होता है: यह चलता है, हम सालों से इस्तेमाल कर रहे हैं, समस्या क्या है।\nसमस्या यह है कि .local कोई बिना रजिस्ट्रेशन वाली string नहीं है जिसे कोई किसी दिन बेच दे। यह एक namespace है जिसका पहले से मालिक है और जिसका तय बर्ताव है, और वह बर्ताव “DNS सर्वर से पूछो” नहीं है। RFC 6762 का §3 इस बारे में नरमी नहीं बरतता:\nAny DNS query for a name ending with \u0026ldquo;.local.\u0026rdquo; MUST be sent to the mDNS IPv4 link-local multicast address 224.0.0.251 (or its IPv6 equivalent FF02::FB).\nपढ़िए कि वह MUST असल में किस चीज़ को नियंत्रित करता है। यह इस बारे में दावा नहीं है कि string का मालिक कौन है। यह एक निर्देश है कि query कहाँ जाती है, और जवाब है लोकल लिंक पर एक multicast group, आपका डोमेन कंट्रोलर नहीं। वही सेक्शन कहता है कि .local के नीचे के नाम “meaningful only on the link where they originate” हैं, यानी 169.254 पते का DNS वाला रूप।\nतो जो क्लाइंट specification को सही से मानता है, वह .local नाम के लिए आपके DNS सर्वर से कभी पूछेगा ही नहीं। वह तार पर चिल्लाता है और जो भी जवाब दे, ले लेता है।\nइससे एक खास किस्म की विफलताएँ पैदा होती हैं:\nResolution क्लाइंट पर निर्भर करता है, आपके DNS पर नहीं। macOS .local को Bonjour से resolve करता है और हमेशा करता आया है; systemd-resolved डिफ़ॉल्ट रूप से local डोमेन को mDNS पर भेजता है; Windows, Windows 10 से mDNS करता है। तीन stacks, नियमों के तीन सेट, और इनमें से कोई भी आपकी ज़ोन फ़ाइल से सलाह नहीं लेता। यह पहले राउटर पर रुक जाता है। mDNS डिज़ाइन से ही link-local है। जो नाम उसी VLAN की किसी डेस्क पर resolve होता है, वह दूसरी मंज़िल, दूसरी साइट या VPN से resolve नहीं होता। यही वह “ऑफ़िस में चलता है, घर पर टूटता है” वाला टिकट है जो चार बार “network issue” कहकर बंद होता है, तब जाकर कोई spec पढ़ता है। बर्ताव आपके नीचे से बदल जाता है। कोई मशीन पहले multicast आज़माती है, पहले unicast, या दोनों साथ-साथ, यह रिज़ॉल्वर stack और उसके वर्ज़न पर निर्भर है। जो estates .local पर “सालों से ठीक” चले, वे आम तौर पर वे हैं जहाँ किसी distro अपडेट ने अभी तक क्रम नहीं बदला। सबूत वहाँ नहीं होता जहाँ आप ढूँढते हैं। DC के query log में कुछ नहीं दिखता, क्योंकि कुछ पहुँचा ही नहीं। लोग सर्वर पर दिन बिता देते हैं, और query क्लाइंट से कभी निकली ही नहीं। और इसे साइन नहीं किया जा सकता, जो इस सेक्शन का मुद्दा है। Parent नहीं, DS नहीं, chain नहीं, पब्लिश करने का कोई तरीका नहीं। अब इसे एक Active Directory डोमेन के नीचे रखिए। Realm डोमेन नेम से निकलता है। Service principals realm से निकलते हैं। _msdcs लोकेटर, यानी वे रिकॉर्ड जिनके बारे में यह पूरी पोस्ट है, एक ऐसे suffix के नीचे बैठे हैं जिसे नियम मानने वाले क्लाइंट को लोकल सेगमेंट पर चिल्लाकर resolve करना ज़रूरी है। आप Kerberos को एक ऐसे namespace पर बना रहे हैं जिसे आपका आधा estate प्रिंटर ढूँढने के लिए बने प्रोटोकॉल से resolve करता है।\nऔर बाहर निकलना महँगा है, इसीलिए मूल फ़ैसले के बारे में भावुक न होना ज़रूरी है। Samba पर जगह पर ही rename का कोई तरीका नहीं है। दस्तावेज़ में दर्ज रास्ता samba-tool domain backup rename के बाद restore है: आप डेटाबेस की rename की हुई कॉपी लेते हैं, उससे एक नया DC बनाते हैं, और बाकी हर DC को शून्य से दोबारा जोड़ते हैं, और पुराने नाम और नए नाम वाले DCs के बीच कोई overlap की इजाज़त नहीं। यह Windows का rendom नहीं है, जो कम से कम DCs को एक-एक करके बदलता है। यह बेहतर नाम वाला rebuild है।\nतो ईमानदार निचोड़। unicast डोमेन के लिए .local कोई पसंद, परंपरा या बेकसूर पुरानी चीज़ नहीं है। यह उस प्रोटोकॉल से दस्तावेज़ में दर्ज टकराव है जो बिल्डिंग के हर ऑपरेटिंग सिस्टम में चालू होकर आता है, और इसका बिल सालों बाद आता है: रुक-रुककर होने वाली, दोहराई न जा सकने वाली resolution विफलताओं के रूप में, और जब आप आखिरकार ज़ोन साइन करना चाहें, तब पूरे डोमेन के rebuild के रूप में।\nवही गलती, दूसरी टोपी पहनकर जब यहाँ हैं ही, तो: पोर्ट 5353।\nmDNS UDP 5353 पर सुनता है, और यह कोई खाली पड़ा फ़ालतू पोर्ट नहीं है। इस पर सामान्य unicast DNS सर्विस खड़ी करना, या रिज़ॉल्वरों को :5353 पर भेजना क्योंकि 53 व्यस्त था या उसे root चाहिए था, दूसरी दिशा से वही नुकसान करता है: उस सेगमेंट की हर mDNS-aware मशीन अब आपकी नेम सर्विस से बात कर रही है, और आपकी नेम सर्विस अब multicast service discovery झेल रही है जिसका जवाब देना उसका काम कभी था ही नहीं। नाम और पोर्ट एक ही namespace के दो आधे हिस्से हैं, और दोनों पहले से किसी और के हैं।\n53 पर .local, या 5353 पर unicast DNS। वही नासमझी, वही रुक-रुककर होने वाली विफलता, किसी और के वही हफ़्ते बर्बाद।\nऔर ईमानदारी से मानिए कि इससे क्या पता चलता है Microsoft ने Small Business Server के ज़माने में .local की सलाह दी थी, इसीलिए इतने estates अब भी इसे ढो रहे हैं, और उसने बहुत पहले इसकी सलाह देना बंद कर दिया। .local डोमेन विरासत में मिलना बदकिस्मती है। इसे पढ़ने वाले ज़्यादातर लोग जिनके पास ऐसा डोमेन है, उन्होंने इसे चुना नहीं था, और ऊपर वाला सेक्शन आरोप नहीं, migration का प्लान है।\nइसे deploy करना बिल्कुल अलग मामला है, और मैं इस बारे में दो टूक बोलूँगा, क्योंकि इसे नरम करने से किसी का भला नहीं हुआ।\nजो कोई Active Directory के लिए या सामान्य unicast DNS के लिए .local deploy करता है, या पोर्ट 5353 पर DNS सर्विस खड़ी करता है, वह IT professional नहीं है। उसके पास job title हो सकता है। वह काम नहीं कर रहा। RFC 6762 2013 से पब्लिश है, बीस मिनट में पढ़ा जा सकता है, और पूरे सवाल को निपटाने वाला वाक्य सेक्शन 3 में है। किसी कंपनी की नेम सर्विस को उस namespace पर बनाना जिसे specification link-local multicast के लिए आरक्षित करता है, बचाव लायक इंजीनियरिंग फ़ैसला नहीं है। यह stack के उस एक हिस्से में अंदाज़ा लगाना है जहाँ अंदाज़ा ऐसी विफलताएँ पैदा करता है जिन्हें कोई दोहरा नहीं सकता और जिनका दोष हर कोई नेटवर्क पर डालता है।\nउन्हें आपके IT डिपार्टमेंट से हटा देना चाहिए। बगल में खिसकाना नहीं, निगरानी में DNS संभालने देना नहीं। उस काम से हटाना। यह रोल इसीलिए है कि पता हो कौन सा पैकेट कहाँ जाता है और किसके अधिकार से। जिसने बिल्डिंग की हर मशीन के लिए चुने namespace को नियंत्रित करने वाला दस्तावेज़ नहीं पढ़ा, वह यह रोल नहीं निभा रहा, और उसे उसमें रखने का मतलब है कि इतने बड़े अगले फ़ैसले भी इसी तरह लिए जाएँगे।\nऔर उन्होंने जिस भी सिस्टम को छुआ, उसका audit होना चाहिए। यही हिस्सा लोग छोड़ देते हैं, और यही सबसे ज़्यादा मायने रखता है। ऐसा फ़ैसला कभी अकेला नहीं होता। जिसने डोमेन का नाम रखने से पहले RFC 6762 नहीं जाँचा, उसने और कुछ भी नहीं जाँचा, तो जाकर देखिए उसने और क्या बनाया। उम्मीद कीजिए कि यह मिलेगा:\nपूरी दुनिया के लिए खुले DNS सर्वर, हर पूछने वाले को जवाब देते forwarders, और कहीं कोई ACL नहीं। पूरी तरह खुला छोड़ा गया dynamic update, और ज़ोन containers जिनकी permissions डोमेन बनने के बाद से किसी ने नहीं देखीं। सर्टिफ़िकेट और Kerberos ऐसे नामों पर बने जो कभी लगातार resolve होने वाले थे ही नहीं, और विफलताएँ hosts files से ढकी हुईं। Hosts files। हर जगह। पूरे के पूरे estates इन्हीं के सहारे टिके हैं, ठीक इसलिए कि .local कभी ठीक से चला नहीं और किसी ने वजह की जगह जुगाड़ ढूँढ लिया। Firewall rules और service accounts जो लक्षण गायब करने के लिए बनाए गए, अब भी लगे हैं, और अब भी उससे ज़्यादा दे रहे हैं जितना किसी को याद है। यह बदले की भावना नहीं है। काबिलियत का संकेत होता ही इसी के लिए है। जब आपको एक ऐसा फ़ैसला मिले जो spec पढ़े बिना लिया गया, तो सही जवाब यह मानना है कि बाकी भी इसी तरह लिए गए, और जाकर जाँचना है, क्योंकि उसी इंसान ने आपका authentication, आपके सर्टिफ़िकेट और आपका access control कॉन्फ़िगर किया, और अब आपके पास सीधा सबूत है कि वह ऐसी समस्या को कैसे देखता है जिसे वह पूरी तरह समझता नहीं।\nयह गड़बड़ विरासत में मिलना आपको एक migration की कीमत पर पड़ता है। जो इसे अब भी बना रहा है, उसे नौकरी पर रखना इससे काफ़ी ज़्यादा महँगा पड़ता है।\nSamba के दो DNS बैकएंड Samba AD डोमेन कंट्रोलर अपना DNS डेटा खुद डायरेक्टरी में रखता है, और उसे सर्व करने के दो तरीके हैं।\nSAMBA_INTERNAL Samba का अपना DNS सर्वर है, जो AD DC में ही बना हुआ है। यह AD ज़ोन और Kerberos से authenticated dynamic updates संभालता है, और बाकी सब कुछ एक forwarder को दे देता है। Samba इसे “the basic feature required in an AD” सपोर्ट करने वाला बताते हैं और “for simple DNS setups” इसकी सलाह देते हैं, जो सही है और जिसे शब्दशः लेना चाहिए। इसका नीचे अपना सेक्शन है, क्योंकि यह जो नहीं करता, वह सूची इसकी करने वाली सूची से लंबी और ज़्यादा दिलचस्प है।\nBIND9_DLZ BIND को DNS सर्वर के रूप में चलाता है, जिसमें Samba का dlz_bind9 मॉड्यूल लोड होता है। DLZ, यानी Dynamically Loadable Zones, BIND का एक इंटरफ़ेस है जिससे ज़ोन को ज़ोन फ़ाइल के अलावा किसी और चीज़ से back किया जा सकता है। यह मॉड्यूल BIND की queries का जवाब सीधे sam.ldb से देता है, इसलिए न कोई कॉपी है, न export का कदम, और न कोई synchronisation जो गड़बड़ हो सके: BIND सर्व करते हुए डायरेक्टरी पढ़ रहा है।\nअंदरूनी DNS सर्वर recursion नहीं करता; कर ही नहीं सकता उस चीज़ से शुरू कीजिए जिसे लगभग हमेशा गलत बताया जाता है, उन लोगों द्वारा भी जो इसे चलाते हैं।\n“DC हमारा DNS सर्वर है, यह क्लाइंट के लिए recursion करता है”, यह वह नहीं है जो हो रहा है, क्योंकि अंदरूनी DNS सर्वर recursion बिल्कुल नहीं कर सकता। Samba की अपनी feature list यह साफ़ कहती है। अंदरूनी DNS इन्हें सपोर्ट नहीं करता:\ncaching रिज़ॉल्वर का काम करना recursive queries (लेकिन यह किसी दूसरे recursive DNS नेमसर्वर को forward कर सकता है) shared-key transaction signature (TSIG) stub zones zone transfers DCs के बीच Round Robin load balancing और scavenging और conditional forwarders भी लागू न किए गए के रूप में सूचीबद्ध हैं।\nपहले दो को साथ पढ़िए, क्योंकि पूरी कहानी वही है। यह resolve नहीं कर सकता, और cache नहीं कर सकता। dns forwarder असल में आपको जो देता है, वह एक relay है: क्लाइंट DC से windowsupdate.com पूछता है, DC किसी असली रिज़ॉल्वर से पूछता है, जवाब DC से होकर लौटता है, और फिर DC उसे पूरी तरह भूल जाता है। अगला क्लाइंट वही सवाल पूछता है और पूरी प्रक्रिया फिर होती है।\nइस पोस्ट की पहले वाली टेबल फिर देखिए और गौर कीजिए यह क्या है: forwarder के cache के बिना एक forwarder। इसमें उस रोल की कीमतें हैं, यानी एक अतिरिक्त hop, एक निर्भरता, एक चीज़ जो बंद हो सकती है, और उसका कोई फ़ायदा नहीं।\nतो estate को सर्व करता SAMBA_INTERNAL वाला DC उस मायने में DNS सर्वर नहीं है जिसमें लोग कहते हैं। यह किसी असली रिज़ॉल्वर के लिए बिना cache वाला proxy है, और आपने इसे उस मशीन पर रखा है जिस पर आपकी डायरेक्टरी है।\nयह सिर्फ़ अक्षमता नहीं, जोखिम क्यों है अक्षमता आसानी से दिखती है: बिल्डिंग का हर बाहरी lookup हमेशा के लिए AD DC से होकर एक round trip बन जाता है, और धार कम करने के लिए कोई cache नहीं। शांत डोमेन पर किसी का ध्यान नहीं जाता। ठीक इसीलिए यह बचा रहता है।\nसुरक्षा वाला तर्क ही असल में रखने लायक है, और उसके तीन हिस्से हैं।\nListener गलत process में है। अंदरूनी DNS खुद AD DC का एक service task है, जो डायरेक्टरी के privileges के साथ चलता है, न कि named की तरह अपने account के तहत एक अलग daemon। तो port 53 तक पहुँच सकने वाली किसी भी चीज़ से आने वाले बिना authentication वाले UDP को parse करने वाली चीज़ उसी process में चल रही है जो LDAP और Kerberos सर्व करता है और sam.ldb का मालिक है। BIND ने तीस साल का दुश्मनी भरा ध्यान झेला है, उसका अपना अलग यूज़र है, और उसे jail में चलाने की आदत है, ठीक इसलिए कि DNS listener खतरनाक मोहल्ला है। Samba का अंदरूनी सर्वर एक सुविधा वाला फ़ीचर है जो संयोग से crown jewels में रहता है।\nक्लाइंट को सर्व करने का मतलब है क्लाइंट की पहुँच में होना। Estate का DNS सर्वर बनने के लिए इसे हर वर्कस्टेशन, हर प्रिंटर, गेस्ट VLAN पर हर कॉन्ट्रैक्टर के लैपटॉप से queries लेनी पड़ती हैं, जिसे किसी ने गलती से bridge कर दिया। यह आपके सबसे कीमती होस्ट पर एक बड़ा, हमेशा खुला, बिना authentication वाला attack surface है, और आप इसे उस रिज़ॉल्वर का खर्च बचाने के लिए चला रहे हैं जिसे एक Raspberry Pi होस्ट कर सकता है।\nऔर दुनिया के लिए खुला forwarder किसी और का हथियार है। जो DC पूछने वाली हर चीज़ के लिए forward करता है, वह open forwarder है। जैसे ही यह आपके नेटवर्क के बाहर से पहुँच में आता है, यह reflection और amplification में भागीदार बन जाता है, यानी ट्रैफ़िक और abuse reports दोनों आपके डोमेन कंट्रोलर पर पहुँचते हैं। Rate limiting का कोई सहारा नहीं, क्योंकि अंदरूनी सर्वर में वह है ही नहीं।\nइसमें से किसी के बुरा विचार होने के लिए Samba की किसी vulnerability की ज़रूरत नहीं। यह सिर्फ़ अपने आकार से ही बुरा विचार है: यह एक बिना authentication वाली, गलती से इंटरनेट की तरफ़ खुली, भारी parsing वाली सर्विस को आपकी डायरेक्टरी के साथ एक ही process में रखता है, एक ऐसा काम करने के लिए जिसे ठीक से न कर पाने की बात इसके दस्तावेज़ में ही लिखी है।\nयह जल्दी गिरेगा, और ज़्यादा कुछ साथ ले जाएगा यह साफ़ होना ज़रूरी है कि यह तर्क क्या नहीं है। यह दावा नहीं है कि Samba के DNS कोड में BIND से ज़्यादा bugs हैं। BIND की CVE सूची लंबी है, ज़्यादातर इसलिए कि यह दुनिया का सबसे ज़्यादा जाँचा गया DNS implementation है, और advisories गिनना इन दोनों में से चुनने का खराब तरीका होगा।\nजो तुलना मायने रखती है वह ढाँचागत है, और वह तीन सवालों पर आती है जिनके तीन असहज जवाब हैं।\nइसे खराब पैकेट कौन भेज सकता है? SAMBA_INTERNAL estate को सर्व कर रहा हो तो: हर वर्कस्टेशन, वायरलेस पर हर फ़ोन, हर वह चीज़ जो उस बॉक्स के port 53 तक route कर सकती है। इस पोस्ट के डिज़ाइन में: signer। एक होस्ट, एक TSIG की, allow-query उसी तक सीमित। यह मात्रा का छोटा फ़र्क नहीं है। यह एक खुली सर्विस और लगभग पहुँच से बाहर सर्विस का फ़र्क है, और यह दोनों implementations के कोड की गुणवत्ता के किसी भी फ़र्क को बौना कर देता है।\nजब यह गिरता है तो क्या गिरता है? यही वह सवाल है जो गंभीरता तय करता है। named अपने account के तहत एक अलग daemon है; जब यह मरता है, DNS रुकता है और डोमेन कंट्रोलर authenticate करता रहता है। Samba का अंदरूनी DNS AD DC के अंदर एक service task है, इसलिए जो कुछ भी इसे अटकाता, थकाता या crash करता है, वह उसी process के अंदर हो रहा है जो LDAP और Kerberos सर्व करता है। DNS की समस्या डायरेक्टरी का outage बन जाती है। और systemctl restart named में एक सेकंड लगता है, जबकि DC को restart करना अलग ही किस्म की सुबह है।\nजब यह हो रहा हो तब आप क्या कर सकते हैं? BIND में response rate limiting, allow-query, allow-recursion, blackhole, per-view policy, और क्लाइंट को जवाब ही न देने का विकल्प है। अंदरूनी सर्वर के पास dns forwarder और एक log फ़ाइल है। जब कुछ इस पर हथौड़ा चलाने लगे, तो घुमाने के लिए कोई डायल नहीं।\nफिर गायब cache जोड़िए। हर क्लाइंट query एक नया बाहरी round trip है, इसलिए query की बाढ़ DC को हर पैकेट पर cache hit की जगह एक upstream lookup की कीमत देती है, और वह उसी process में चुकाई जाती है जो Kerberos टिकट जारी करने की कोशिश कर रहा है। इसके लिए आपको exploit की ज़रूरत नहीं; एक व्यस्त सुबह, कोई गड़बड़ एप्लिकेशन, या किसी का गलत VLAN पर scanner चला देना काफ़ी है। लगातार चले तो यह authentication के धीमे होने के रूप में दिखता है, और किसी को DNS देखने का ख्याल नहीं आता।\nतो हाँ, DLZ के होते हुए भी, इसके लिए BIND ज़्यादा सुरक्षित जगह है। DLZ मॉड्यूल named को Samba के डेटा तक पहुँच देता है, और यह एक असली बात है जिस पर यह पोस्ट पहले ही ज़ोर दे चुकी है। लेकिन named का crash DNS outage है, डायरेक्टरी outage नहीं, और इस डिज़ाइन में वह named पहले तो estate से queries लेता ही नहीं। Bugs हर codebase का सच हैं। Blast radius और पहुँच वे चीज़ें हैं जो आप चुनते हैं।\nऔर यह इस पोस्ट का डिज़ाइन बना ही नहीं सकता एक सरल, ज़्यादा निर्णायक वजह है कि यह यहाँ का बैकएंड नहीं है।\nकोई zone transfers नहीं। अगले सेक्शन की pipeline, यानी hidden primary, signer, standalone authoritative सर्वर, DC से एक AXFR के साथ शुरू होती है। SAMBA_INTERNAL के पास transfer करने का कोई साधन नहीं। TSIG भी नहीं, इसलिए वह authentication भी नहीं है जो transfer को चाहिए होगा। और न signing, न जो कुछ यह forward करता है उसका कोई validation।\nतो SAMBA_INTERNAL का ईमानदार निचोड़: यह वह बैकएंड है जो आपको रविवार दोपहर किसी लैब में BIND कॉन्फ़िगर किए बिना AD डोमेन खड़ा करने देता है, और इसमें यह बहुत अच्छा है। Samba “simple DNS setups” कहते हैं और उनका मतलब वही है। यह रिज़ॉल्वर नहीं है, इसे कभी estate की DNS सर्विस बनने के लिए बनाया ही नहीं गया, और जिस पल आपको signing, transfers, views, ACLs, caching या rate limiting चाहिए, जवाब इसे tune करना नहीं है। इसमें वे डायल हैं ही नहीं। जवाब BIND है।\nअगर आप आज इसे हर क्लाइंट को DC की तरफ़ करके चला रहे हैं, तो fix ज़रूरी तो तुरंत नहीं है, लेकिन वैकल्पिक भी नहीं: क्लाइंट को एक असली validate करने वाला रिज़ॉल्वर दीजिए, और DC पर dns forwarder को उसकी तरफ़ सेट कीजिए, ताकि DC सिर्फ़ अपने ज़ोन के लिए जवाब दे और किसी चीज़ के लिए नहीं।\nऔर यह वह हिस्सा है जिस पर मैं साफ़ रहना चाहता हूँ, क्योंकि “DLZ मत इस्तेमाल करो” को ऐसे दोहराया जाता है जैसे यह hardening का नियम हो: खतरा DLZ नहीं है। यह निकालने का तरीका है। मायने यह नहीं रखता कि BIND में कौन सा मॉड्यूल लोड है; मायने यह रखता है कि उस BIND से बात करने की इजाज़त किसे है, और ज़ोन का आगे क्या होता है। DLZ-backed BIND जो सिर्फ़ आपके signer की transfer request का जवाब देता है, किसी भी दिलचस्प मायने में attack surface नहीं है। चार सौ लैपटॉप से हर name lookup झेलता SAMBA_INTERNAL DC बिल्कुल है। इन दोनों में से सिर्फ़ एक hardening checklists पर आता है, और वह वाला नहीं जो मायने रखता है।\nDLZ के बारे में दो बातें सच हैं, और उनसे डरने की जगह उनके हिसाब से प्लान करना चाहिए:\nमॉड्यूल BIND के वर्ज़न से बँधा है। Samba हर BIND वर्ज़न के लिए अलग .so शिप करता है, और named.conf खास तौर पर एक का नाम लेता है। BIND के major upgrade का मतलब है कि मेल खाता मॉड्यूल अपनी जगह होना चाहिए, वरना named शुरू नहीं होता। यह पहले से टेस्ट करने वाली packaging निर्भरता है, सुरक्षा का गुण नहीं। named को Samba के डेटा तक पहुँच चाहिए, इसीलिए Samba पूरी private डायरेक्टरी देने की जगह BIND को चाहिए वाले हिस्सों के लिए एक अलग डायरेक्टरी रखता है। यह अनुमति सीमित रहनी चाहिए; अपने DCs पर जाँचिए कि अब भी है, क्योंकि यही वह एक जगह है जहाँ DLZ उस दायरे को बढ़ाता है जहाँ तक named का compromise पहुँचेगा। यहाँ DLZ सही चुनाव इसलिए है कि यह क्या संभव बनाता है: BIND का DLZ इंटरफ़ेस पूरे ज़ोन को enumerate करना सपोर्ट करता है, और इसी से DLZ-backed ज़ोन से zone transfer संभव होता है। वह transfer pipeline का पहला hop है, और उसे BIND कर रहा है, मतलब बाकी pipeline कुछ अनोखा नहीं, बल्कि सामान्य BIND कॉन्फ़िगरेशन है।\nएक बाधा है जो आगे की हर चीज़ को आकार देती है, और इसे साफ़ कहना ज़रूरी है क्योंकि उल्टा मान लेना आसान है। DLZ ज़ोन खुद साइन नहीं हो सकता। ISC BIND ARM में इस बारे में साफ़ हैं: DLZ “is unable to handle DNSSEC-signed data due to its limited API”। आप dlz स्टेटमेंट पर dnssec-policy टाँगकर काम खत्म नहीं कर सकते।\nआप जो कर सकते हैं, और ISC उसी साँस में DLZ के लिए जो सुझाते हैं, वह है इसे hidden primary के रूप में चलाना, और signing एक सामान्य BIND ज़ोन से करवाना जो डेटा transfer करके लाता है। वह अगला सेक्शन है, और उसका आकार इसी बाधा की वजह से है।\nयह जानना काम का है कि यह Samba की बाधा है, Active Directory का कोई नियम नहीं। Microsoft का DNS सर्वर Windows Server 2012 से dynamic, AD-integrated ज़ोन की online signing करता आया है। ज़ोन अपनी जगह पर साइन होता है, private keys खुद AD replication के ज़रिए Key Masters तक replicate होती हैं, और dynamic updates चलते रहते हैं। Windows पर “AD partitions को साइन करो” एक असली विकल्प है, और लगातार बदलाव वाली आपत्ति का जवाब इसमें बना हुआ है। (Server 2008 R2 पर ऐसा नहीं था: आप AD-integrated ज़ोन साइन कर सकते थे, लेकिन dynamic updates लेने वाला नहीं, और हर बदलाव का मतलब था हाथ से दोबारा साइन करना; AD ज़ोन के साइन न हो सकने की लोककथा यहीं से आती है।)\nSamba में इसके बराबर कुछ नहीं। कोई भी बैकएंड साइन नहीं करता: अंदरूनी सर्वर में DNSSEC है ही नहीं, और DLZ साइन किया हुआ डेटा ढो नहीं सकता। तो Samba पर transfer-और-sign pipeline कई डिज़ाइनों में से एक नहीं है। यही रास्ता है।\nपब्लिश करने की pipeline अब इसका आकार। चार रोल, और DC सबसे पीछे जहाँ कोई चीज़ उस तक नहीं पहुँच सकती।\nHidden-primary डोमेन कंट्रोलर से Active Directory ज़ोन पब्लिश करना डोमेन कंट्रोलर: hidden primary dlz_bind9 वाला BIND, डायरेक्टरी से authoritative recursion बंद \u0026#183; transfer सिर्फ़ signer को, TSIG के साथ डायरेक्टरी वाला होस्ट कोई सवाल नहीं लेता। Estate की सबसे कीमती मशीन उन मशीनों की पहुँच में नहीं जो उस पर निर्भर हैं। SOA refresh पर AXFR poll: DLZ notify नहीं कर सकता Signing इंस्टेंस: सामान्य secondary ज़ोन transfer करके लाता है, साइन करके सर्व करता है DC पर दूसरा named, या अपना अलग होस्ट DLZ ज़ोन खुद साइन नहीं हो सकता। इसलिए signing कॉपी रखने वाला सामान्य secondary है, और क्लाइंट ज़ोन से बाहर हों तो कोई churn नहीं। बाहर transfer साइन किया ज़ोन Authoritative सर्वर साइन किए ज़ोन के सादे secondaries कोई की नहीं, डायरेक्टरी तक कोई रास्ता नहीं Compromise से कॉपी मिलती है, जालसाज़ी नहीं। Estate के सामने वाले सर्वरों पर की नहीं, तो कोई ऐसा नया रिकॉर्ड नहीं बन सकता जो validate हो। queries सिग्नेचर के साथ जवाब Validate करने वाले रिज़ॉल्वर क्लाइंट का resolv.conf इन्हीं की तरफ़ अंदरूनी ज़ोन forward, पब्लिक पेड़ में walk Validation क्लाइंट के पास होता है। Chain रूट trust anchor तक जाती है, क्योंकि अंदरूनी ज़ोन एक पब्लिक ज़ोन में delegation है। DC पर क्लाइंट के लिए कोई DNS नहीं Publication एक ही दिशा में चलता है, डायरेक्टरी से बाहर की ओर। क्लाइंट का भेजा कुछ भी कभी इसके सिरे तक नहीं पहुँचता। DC एक hidden primary है: यह AD ज़ोन को transfer से सर्व करता है और किसी और चीज़ का जवाब नहीं देता। Signing इंस्टेंस एक सामान्य secondary ज़ोन है जिसमें transfer की हुई कॉपी है; DLZ ज़ोन खुद साइन नहीं हो सकता, इसलिए signing हमेशा एक hop आगे होती है, चाहे वह hop DC पर दूसरा named हो या कोई अलग होस्ट। Standalone authoritative सर्वर ही वह अकेली चीज़ हैं जो क्लाइंट को कभी दिखती है, और वे साइन किए हुए ज़ोन के secondaries हैं। 1. डोमेन कंट्रोलर: hidden primary। dlz_bind9 के साथ BIND, डायरेक्टरी से AD ज़ोन के लिए authoritative। Recursion बंद। क्लाइंट की तरफ़ कोई सर्विस नहीं। allow-transfer सिर्फ़ signer तक सीमित, TSIG के साथ। नेटवर्क की नज़र से DC DNS सर्व करता ही नहीं, और इसे query करने वाली अकेली चीज़ उसके बाद वाला बॉक्स है।\n2. Signing इंस्टेंस: एक सामान्य BIND ज़ोन जो डेटा transfer करके लाता है। यहीं inline-signing और dnssec-policy रहते हैं, उसी नाम के एक ज़ोन पर जिसमें transfer की हुई कॉपी है। BIND मिली हुई बिना साइन वाली कॉपी और पब्लिश की जाने वाली साइन की हुई कॉपी को अलग-अलग रखता है, और नए transfers आने पर दोबारा साइन करता है। क्योंकि यह साझा फ़ाइल नहीं, transfer है, यह इंस्टेंस खुद DC पर बैठ सकता है, अपने पते पर दूसरे named के रूप में, या किसी अलग होस्ट पर, और दोनों तरह कॉन्फ़िगरेशन लगभग एक जैसा है।\nसौदा वही है जो दिखता है: DC पर हो तो चलाने के लिए एक मशीन कम, जबकि अलग होस्ट private keys को उस बॉक्स से दूर रखता है जिस पर डायरेक्टरी है। दोनों का बचाव किया जा सकता है, और यह चुनाव pipeline में और कुछ नहीं बदलता। मायने यह रखता है कि signing एक बार होती है, एक तय जगह पर, एक key policy के तहत; यही फ़र्क है उस DNSSEC में जिसे आप चलाते हैं और उस DNSSEC में जो सुबह तीन बजे एक्सपायर हो जाता है।\n3. Authoritative सर्वर: क्लाइंट को दिखने वाली अकेली चीज़। साइन किए हुए ज़ोन के सादे secondaries। इनके पास न कोई की है, न ये signing करते हैं, न इनका डायरेक्टरी तक कोई रास्ता है। अगर कोई compromise हो जाए, तो हमलावर के पास ज़ोन की एक कॉपी है और कोई ऐसा नया रिकॉर्ड जाली बनाने की क्षमता नहीं जो validate हो।\n4. रिज़ॉल्वर। Estate के लिए validate करने वाले recursive रिज़ॉल्वर, जो अंदरूनी ज़ोन को शर्त के साथ उन authoritative सर्वरों को forward करते हैं और बाकी हर चीज़ के लिए पब्लिक पेड़ में नीचे जाते हैं। क्लाइंट का resolv.conf इन्हीं की तरफ़ इशारा करता है।\nइस व्यवस्था से दो गुण निकलते हैं जिन्हें अलग से कहना ज़रूरी है, क्योंकि पूरा मुद्दा वही हैं:\nडायरेक्टरी रखने वाली मशीन उसका इस्तेमाल करने वाली मशीनों की पहुँच में नहीं है। डोमेन कंट्रोलर estate का सबसे कीमती होस्ट है। उसे क्लाइंट की तरफ़ वाली नेटवर्क सर्विस देना, जो किसी भी वर्कस्टेशन से बिना authentication वाले UDP का जवाब दे, उस सर्विस के लिए घाटे का सौदा है जो दूसरी मशीनें कर सकती हैं। Signing एक बार होती है, एक तय जगह पर। AD ज़ोन साइन करने पर आम आपत्ति churn की है: कि कंटेंट इतनी बार बदलता है कि सिग्नेचर पीछे रह जाएँगे। वह आपत्ति असल में डिफ़ॉल्ट लेआउट पर है, signing पर नहीं। क्लाइंट registration को बाहर निकाल देने पर, जैसा अगला सेक्शन कहता है कि करना ही चाहिए, AD ज़ोन तब बदलता है जब कोई डोमेन कंट्रोलर promote या demote होता है, और बाकी लगभग कभी नहीं। सिर्फ़ DCs द्वारा लिखा गया ज़ोन स्थिर ज़ोन है, और स्थिर ज़ोन को साइन करना कोई खास बात नहीं। क्लाइंट को बाहर रखना सिर्फ़ सुरक्षा का नियंत्रण नहीं है; यही ज़ोन को इतना शांत बनाता है कि वह साफ़-सुथरे ढंग से साइन हो सके। Signing असल में कैसे जोड़ी जाती है ऊपर का आकार अहम हिस्सा है, लेकिन “एक सामान्य BIND ज़ोन जो डेटा transfer करके लाता है” को बताने की जगह दिखाना बेहतर है, क्योंकि इसकी पहली कोशिश आम तौर पर DLZ को सीधे साइन करने की कोशिश में डूब जाती है।\nDC पर DLZ वाला हिस्सा जानबूझकर नीरस रहता है। यह डायरेक्टरी सर्व करता है, ज़ोन ठीक एक peer को देता है, और कुछ नहीं करता:\nkey \u0026#34;transfer-to-signer\u0026#34; { algorithm hmac-sha256; secret \u0026#34;...\u0026#34;; }; options { recursion no; allow-query { key transfer-to-signer; localhost; }; allow-transfer { key transfer-to-signer; }; notify no; }; dlz \u0026#34;AD DNS Zone\u0026#34; { database \u0026#34;dlopen /usr/lib64/samba/bind9/dlz_bind9_18.so\u0026#34;; }; ध्यान दीजिए कि .so के नाम में BIND का major वर्ज़न है। यही पिछले सेक्शन वाला वर्ज़न का बंधन है, ठोस रूप में: BIND upgrade से पहले मेल खाता Samba मॉड्यूल अपनी जगह होना चाहिए, तभी named शुरू होगा।\nSigning वाली तरफ़ ज़ोन एक सामान्य secondary है, जिस पर signing के विकल्प लगे हैं। यही वह हिस्सा है जो DLZ पर नहीं रह सकता:\ndnssec-policy \u0026#34;ad-internal\u0026#34; { keys { ksk lifetime P365D algorithm ecdsa256; zsk lifetime P90D algorithm ecdsa256; }; }; zone \u0026#34;ad.example.com\u0026#34; { type secondary; primaries { 192.0.2.10 key transfer-to-signer; }; file \u0026#34;ad.example.com.axfr\u0026#34;; inline-signing yes; dnssec-policy \u0026#34;ad-internal\u0026#34;; allow-transfer { key transfer-to-public; }; also-notify { 192.0.2.20; 192.0.2.21; }; }; यह एक secondary पर चलता है, यही वह विवरण है जिस पर सब टिका है, और ARM इसे सीधे कहता है:\nIf yes, BIND 9 maintains a separate signed version of the zone. An unsigned zone is transferred in or loaded from disk and the signed version of the zone is served with, possibly, a different serial number.\nतो BIND दो कॉपी रखता है: मिली हुई बिना साइन वाली, जो file में लिखी जाती है, और सर्व की जाने वाली साइन की हुई, जो उसके बगल में .signed extension के साथ लिखी जाती है। Transfer आता है, साइन किया हुआ वर्ज़न फिर से बनता है, और downstream सर्वरों को notify मिलता है, क्योंकि इस बिंदु पर यह पूरी तरह सामान्य ज़ोन है। dnssec-policy लगने के बाद inline-signing yes असल में डिफ़ॉल्ट है; ऊपर इसे लिखा गया है क्योंकि जो config खुद बताए कि वह क्या करता है, वह एक लाइन के लायक है।\nKey rollover cron job से नहीं, policy के साथ आता है। ZSK rollovers को किसी input की ज़रूरत नहीं; KSK rollovers को नए DS का parent तक पहुँचना चाहिए, जो इस पोस्ट में आगे वाला CDS/CDNSKEY automation है। rndc dnssec -status ad.example.com बताता है कि हर की अपनी उम्र में कहाँ है।\nवह ब्लॉक DC पर चले या अपने होस्ट पर, यह इस बात पर निर्भर है कि primaries किस पते की तरफ़ इशारा करता है। DC पर यह दूसरे पते पर दूसरा named इंस्टेंस है, जो loopback या management इंटरफ़ेस से पहले वाले से transfer करता है। व्यवहार में “DLZ वाला BIND signer हो सकता है” का यही मतलब है: वही सॉफ़्टवेयर, चाहें तो वही बॉक्स, लेकिन signing DLZ ज़ोन पर नहीं, transfer की हुई कॉपी पर होती है।\nएक ऑपरेशनल अड़चन notify की है, और वह DLZ वाली तरफ़ है। ISC का मैनुअल इस बारे में दो टूक है: DLZ “has no built-in support for DNS notify”, इसलिए secondary सर्वरों को डेटाबेस के ज़ोन में बदलावों की अपने आप खबर नहीं मिलती। Samba डायरेक्टरी में कोई रिकॉर्ड बदल सकता है और DLZ इंस्टेंस को पता ही नहीं कि उसे किसी को बताना है।\nतो पहला hop poll है, push नहीं। Signer उस ज़ोन के SOA टाइमर पर refresh करता है जिसे वह transfer कर रहा है, जिसका मतलब है:\nDC में बदलाव से साइन किए हुए, पब्लिश हुए रिकॉर्ड तक का प्रसार उस refresh interval से बँधा है, सेकंडों से नहीं। कोई DC promote कीजिए और उसके नए _msdcs रिकॉर्ड downstream में ज़्यादा से ज़्यादा एक refresh बाद दिखते हैं। अगर देरी मायने रखती है तो घुमाने का डायल वही interval है। यह इस बात के बदले का सौदा है कि आप DLZ को कितनी बार query करवाना चाहते हैं, और इससे DLZ के बारे में ISC की दूसरी बात आती है: यह बिना caching के real-time डेटाबेस lookups करता है और “not recommended for use on high-volume servers” है। ये दोनों बातें इस topology के पक्ष में तर्क हैं, खिलाफ़ नहीं। DLZ इंस्टेंस का अकेला क्लाइंट signer है, जो हर refresh पर एक बार पूछता है। Estate का असली query लोड standalone authoritative सर्वरों पर पड़ता है, जो पूरी रफ़्तार से एक सादी साइन की हुई ज़ोन फ़ाइल सर्व कर रहे हैं। Signer के बाद की हर चीज़ पारंपरिक है: authoritative सर्वर साइन किए हुए ज़ोन के secondaries हैं, उन्हें ठीक से notify मिलता है, और वे कभी डायरेक्टरी या किसी की को नहीं छूते।\nलोकेटर वाले ज़ोन में क्लाइंट को लिखने नहीं देना चाहिए यह अहम वाला है, और यह setting नहीं, डिज़ाइन का नियम है।\nActive Directory रिकॉर्ड dynamic तरीके से रजिस्टर करता है। कोई मशीन जुड़ती है और खुद को रजिस्टर करती है; कोई DC शुरू होता है और वे SRV रिकॉर्ड रजिस्टर करता है जो उसकी सर्विसों का विज्ञापन करते हैं। “Secure” dynamic update का मतलब है कि वे updates authenticated हैं: मशीन अपने credentials से साबित करती है कि वह वही है जो कहती है, और हर रिकॉर्ड पर एक ACL है ताकि कोई मशीन आम तौर पर सिर्फ़ अपना बनाया रिकॉर्ड बदल सके।\nइसे ध्यान से पढ़िए, क्योंकि गारंटी पहली नज़र से ज़्यादा संकरी है। Secure dynamic update कौन लिख रहा है उसे authenticate करता है। वह रिकॉर्ड का मतलब क्या है उसका मूल्यांकन नहीं करता। और लिखने के हकदार accounts का सेट लोगों के अंदाज़े से कहीं बड़ा है: डिफ़ॉल्ट AD-integrated ज़ोन में Authenticated Users ग्रुप के पास डायरेक्टरी में ज़ोन container पर Create All Child Objects होता है, क्योंकि ADIDNS हर रिकॉर्ड को CN=MicrosoftDNS,DC=DomainDnsZones के नीचे एक AD object के रूप में रखता है। सिर्फ़ machine accounts नहीं, डोमेन का कोई भी authenticated account, उस इंसान का भी जिसने आज सुबह invoice वाला attachment खोला।\nइससे उस ज़ोन में दो तरह की विफलताएँ बनती हैं जिसमें क्लाइंट रिकॉर्ड और सर्विस लोकेटर दोनों हैं:\nजो नाम अभी मौजूद नहीं, वे किसी के नहीं। हर रिकॉर्ड वाली ACLs उस रिकॉर्ड की रक्षा करती हैं जिसका पहले से मालिक है। जो नाम कभी रजिस्टर नहीं हुआ, उस पर ACL लागू करने के लिए कोई object ही नहीं, इसलिए जो account उसे पहले बनाता है, उसे मिल जाता है। ADIDNS attacks के पूरे परिवार के पीछे यही तरीका है, और सबसे धारदार है wildcard: * बनाइए और ज़ोन का हर वह नाम जिस पर किसी ने साफ़ दावा नहीं किया, जैसे typos, हटाए गए होस्ट, wpad, हमलावर पर resolve होता है। मौजूदा रिकॉर्ड छुए नहीं जाते, और ठीक इसीलिए किसी का ध्यान नहीं जाता।\nनुकसान के दायरे में लोकेटर भी हैं। _msdcs के नीचे के रिकॉर्ड वह तरीका हैं जिससे डोमेन का हर क्लाइंट डोमेन कंट्रोलर और KDC ढूँढता है। ये आपके सबसे ज़्यादा सुरक्षा-अहम रिकॉर्ड हैं, और डिफ़ॉल्ट deployment में ये उसी ज़ोन में बैठे हैं जिसमें चार सौ लैपटॉप हर बार DHCP lease मिलने पर लिखते हैं।\nकौन किस ज़ोन में लिख सकता है: एक साझा ज़ोन बनाम लेखक के हिसाब से बँटवारा डिफ़ॉल्ट: एक ज़ोन ad.example.com लोकेटर और क्लाइंट रिकॉर्ड एक साथ _ldap._tcp.dc._msdcs. SRV _kerberos._udp SRV dc01 A laptop-042 A * A \u0026#8592; बिना दावे का जो नाम किसी ने रजिस्टर नहीं किया, उस पर कोई ACL नहीं हर जुड़ी मशीन सब कुछ लिख सकती है एक compromise हुआ machine account डोमेन कंट्रोलर ढूँढने वाले रिकॉर्ड बदल सकता है। लेखक के हिसाब से बँटा ad.example.com: सिर्फ़ DCs किसी क्लाइंट का इस ज़ोन में update का रास्ता नहीं _ldap._tcp.dc._msdcs. SRV _kerberos._udp SRV dc01 A NS delegation dyn.ad.example.com या अपनी ACL वाला अलग Samba ज़ोन laptop-042 A हर जुड़ी मशीन लिख सकती है लोकेटर तक रास्ता नहीं कौन क्या लिख सकता है। बाईं तरफ़ एक ज़ोन, और जुड़ी हुई हर मशीन उस ज़ोन में अधिकृत लेखक है जिसमें DC लोकेटर हैं। दाईं तरफ़ AD ज़ोन सिर्फ़ DCs लिखते हैं, और क्लाइंट registrations एक अलग सब-ज़ोन में जाते हैं जहाँ compromise हुई मशीन ज़्यादा से ज़्यादा अपने बारे में झूठ बोल सकती है। तो नियम: लोकेटर वाला ज़ोन डोमेन कंट्रोलर लिखते हैं, और कोई चीज़ नहीं। क्लाइंट का dynamic registration कहीं और जाता है।\nकहीं और का मतलब दो में से कोई एक हो सकता है, और दोनों ठीक हैं:\nकहीं और सर्व होने वाला delegated सब-ज़ोन। AD ज़ोन में, मान लीजिए, dyn.ad.example.com के लिए एक NS delegation है, और रिकॉर्ड एक अलग सर्वर पर जाते हैं जो updates लेता है। Samba के partitions कभी किसी क्लाइंट का write लेते ही नहीं। Samba में अपनी update ACL वाला अलग ज़ोन। अब भी डायरेक्टरी में, लेकिन अपना ज़ोन, ताकि क्लाइंट के write का _msdcs या किसी DC के अपने रिकॉर्डों तक कोई रास्ता न हो। पहला ज़्यादा सख्त अलगाव देता है; दूसरे को चलाना कम पड़ता है। नियम पर जो फ़ेल होता है, वह इन दोनों में से कोई नहीं। वह डिफ़ॉल्ट है, जहाँ दोनों साथ रहते हैं। और ज़्यादातर डोमेन अब भी इसी तरह चल रहे हैं, क्योंकि किसी ने इसे चुना नहीं और कोई वापस देखने नहीं गया।\nऔर एक दूसरा फ़ायदा है, जो इसे pipeline से वापस जोड़ता है। जिस ज़ोन को सिर्फ़ डोमेन कंट्रोलर लिखते हैं, वह शायद ही कभी बदलता है: एक DC promotion, एक DC demotion, और बाकी खामोशी। डिफ़ॉल्ट AD ज़ोन का सारा churn क्लाइंट registration है। उसे निकाल दीजिए और AD partitions साइन करने की आपत्ति भी साथ चली जाती है: सिग्नेचरों के पीछे भागने के लिए updates की कोई धारा नहीं, इसलिए इसे साइन करना लड़ाई नहीं, रूटीन है। लिखने का अनुशासन और signing एक ही फ़ैसला है, दो बार देखा गया।\nइन दोनों में से किसी के साथ, एक permission है जिसे जाकर देखना चाहिए, और Microsoft DC पर वही सीधा fix है। क्योंकि ADIDNS रिकॉर्ड डायरेक्टरी objects हैं, यह हक DNS प्रोटोकॉल की किसी चीज़ से नहीं, एक AD ACL से आता है: ज़ोन container पर Create All Child Objects रखने वाला Authenticated Users। इसे कसना बिना दावे वाले नाम और wildcard की समस्या का सबसे साफ़ इलाज है, और कई estates में यह जानने के बाद कि असल में किसे खुद रजिस्टर करना ज़रूरी है, यह permission पूरी तरह हटाई जा सकती है। Samba का AD DNS अपने रिकॉर्ड डायरेक्टरी में उसी तरह रखता है, इसलिए वही सवाल लागू होता है: जाकर देखिए कि आपका ज़ोन container असल में क्या अनुमति देता है।\nलेकिन रुकिए: 2026 में क्लाइंट को रजिस्टर करना भी चाहिए? ऊपर की हर बात मानकर चलती है कि क्लाइंट dynamic update आपको चाहिए और आप उसे सुरक्षित बनाने की कोशिश कर रहे हैं। इसे मानने से पहले वह सवाल पूछना ज़रूरी है जो कोई नहीं पूछता, क्योंकि यह बर्ताव जब डिज़ाइन हुआ तब से जवाब बदल चुका है।\nDynamic DNS registration डेस्कटॉप के लिए बना था। डेस्क के नीचे एक बॉक्स, एक नेटवर्क केबल, एक पता जो सालों तक उसके पास रहा। उस दुनिया में मशीन का अपना नाम रजिस्टर करना साफ़-सुथरा और मोटे तौर पर सच था।\nअब देखिए 2026 में क्लाइंट क्या है। वह घर के wifi पर जागता है। ऑफ़िस आता है और कॉर्पोरेट वायरलेस से जुड़ता है। docking station में जाता है और एक wired पता भी ले लेता है। कोई VPN शुरू करता है और एक tunnel adapter तीसरे पते के साथ आ जाता है। वे कॉफ़ी शॉप जाते हैं, फ़ोन से tether करते हैं, और VPN चौथे पते पर वापस आता है। यह एक मशीन, एक नाम, और एक कामकाजी दिन में आधा दर्जन पते हैं, और डिफ़ॉल्ट रूप से वह इनमें से काफ़ी सारे रजिस्टर करने की कोशिश करेगी।\nतो ज़ोन उन दावों से भर जाता है जो कभी सच थे।\nWindows हर adapter रजिस्टर करता है जो उसके पास है, जब तक किसी ने जाकर हर इंटरफ़ेस पर Register this connection\u0026rsquo;s addresses in DNS अनटिक न किया हो। VPN पर डॉक किया हुआ लैपटॉप तीन चालू adapters वाली मशीन है, और उन सबके बारे में उसकी अपनी राय है। एक नाम के कई A रिकॉर्ड कोई error की हालत नहीं, यह सामान्य नतीजा है। Lookup उन सबको लौटाता है, क्लाइंट उन्हें जिस क्रम में मन करे आज़माते हैं, और उस नाम से कनेक्शन उतने ही अनुपात में फ़ेल होते हैं जितने पते मरे हुए हैं। “Remote support एक मिनट मशीन देख पाता है और अगले मिनट नहीं” के पीछे यही तरीका है। VPN पते इनमें सबसे बुरे हैं, क्योंकि tunnel का पता एक घंटे के लिए वैध है और रिकॉर्ड उससे ज़्यादा जीता है। Tunnel गिरता है, pool का पता किसी और को मिल जाता है, और नाम अब किसी सहकर्मी की तरफ़ इशारा करता है। Docking stations पहचान को ही गंदला कर देते हैं। जब तक MAC address pass-through कॉन्फ़िगर न हो, lease लैपटॉप की नहीं, dock की होती है, इसलिए hot-desk वाले estate में नाम, leases और मशीनें रोज़ एक-दूसरे से दूर खिसकती हैं। और मालिकाना हक इसे स्थायी बना देता है। रिकॉर्ड सिर्फ़ वही account अपडेट कर सकता है जिसने उसे बनाया। जब कोई रिकॉर्ड DHCP ने एक credential के तहत बनाया और मशीन बाद में उसे अपने credential से अपडेट करने की कोशिश करती है, तो update चुपचाप फ़ेल हो जाता है, और पुराना पता ठीक वहीं रहता है। सफ़ाई की कहानी भी उतना बचाव नहीं जितना सुनने में लगती है। Samba में scavenging 4.9 से है, लेकिन डिफ़ॉल्ट रूप से बंद है (dns zone scavenging = yes, samba-tool dns zoneoptions --aging=1 के साथ), और Samba खुद कहते हैं कि इसे “should only be enabled on new zones or new installations”, क्योंकि पुराने वर्ज़न dynamic रिकॉर्डों को static और static को dynamic मार्क करते थे। जिन estates में कचरा भरे होने की सबसे ज़्यादा संभावना है, यानी जो सालों से चल रहे हैं, वहाँ उसे साफ़ करने का औज़ार वही है जिसे चालू न करने की सलाह दी जाती है। इसकी अपनी एक CVE भी रही है।\nतो सवाल सीधे रखिए: लैपटॉप के A रिकॉर्ड का असल में इस्तेमाल कौन करता है?\nज़्यादातर जगहों पर, बहुत कम। यूज़र सर्वरों से कनेक्ट करते हैं; सर्वर लैपटॉप से कनेक्ट नहीं करते। असली इस्तेमाल करने वाले हैं remote support tools, किसी नाम वाले वर्कस्टेशन पर RDP, और inventory या monitoring, और उस tooling में से लगभग सब अपनी inventory खुद रखता है और agent के check in करने से काम करता है, क्योंकि मोबाइल क्लाइंट के लिए वह शुरू से ही DNS पर भरोसा कर ही नहीं सकता था।\nजिससे डिफ़ॉल्ट को उलट देने का सुझाव मिलता है:\nसर्वर और infrastructure को रिकॉर्ड provisioning से मिलते हैं। NetBox और Ansible पहले से हों, तो रिकॉर्ड उसी चीज़ से बनता है जिसने मशीन बनाई, बनावट से ही सही है, और मशीन हटने पर हट जाता है। स्थिर wired estate अगर किसी चीज़ को सच में ज़रूरत हो तो DHCP से रिकॉर्ड ले सकता है, उनका मालिक एक credential हो ताकि updates फ़ेल न हों। मोबाइल क्लाइंट कुछ भी रजिस्टर नहीं करते। वे DNS के उपभोक्ता हैं, पब्लिशर नहीं। अगर किसी चीज़ को लैपटॉप तक पहुँचना है, तो उसे agent चाहिए, A रिकॉर्ड नहीं। आप उसी जगह पहुँचते हैं जहाँ सुरक्षा वाले तर्क ने पहुँचाया था, बिल्कुल अलग दिशा से। कम लेखक मतलब छोटा ADIDNS surface, ऐसा ज़ोन जो एक्सपायर हुए दावों से भरा नहीं, और, pipeline पर लौटें तो, इतना शांत ज़ोन कि उसे बिना सोचे साइन किया जा सके।\nसुरक्षा वाला पक्ष कहता है कि लोकेटर वाले ज़ोन में क्लाइंट को नहीं लिखना चाहिए। ऑपरेशनल पक्ष पूछता है कि वे DNS में लिख ही क्यों रहे हैं। 2026 में, दिन में पाँच बार पता बदलने वाले बेड़े के लिए, “वे नहीं लिखते” बिल्कुल अच्छा जवाब है, और उनकी गंदगी को सुरक्षित बनाने से काफ़ी कम मेहनत का।\nSplit views, और भरोसा कहाँ से आता है आखिरी टुकड़ा पोस्ट के दोनों हिस्सों को जोड़ता है।\nNamespace के दो views हैं। एक पब्लिक ज़ोन, इंटरनेट पर पब्लिश, जिसमें वे मुट्ठी भर नाम हैं जो दुनिया को चाहिए। और एक अंदरूनी view: AD से निकला कंटेंट, हर जुड़ा होस्ट, हर सर्विस लोकेटर, साइट topology, जिसे देखने का दुनिया का कोई काम नहीं। वह कंटेंट estate का नक्शा है, और उसे बाहर से न पहुँचा जा सके, न transfer किया जा सके।\nलेकिन अंदरूनी view का भरोसा पब्लिक तरफ़ से आता है, और यही इस डिज़ाइन को आम अंदरूनी-DNS टापू से बेहतर बनाता है:\nexample.com पब्लिक और साइन किया हुआ है, उसका DS parent में है और रूट तक chain है। ad.example.com उससे delegated है। पब्लिक parent delegation और अंदरूनी ज़ोन की की के लिए एक DS पब्लिश करता है। अंदरूनी authoritative सर्वर साइन किया हुआ ad.example.com सर्व करते हैं। अंदरूनी रिज़ॉल्वर उसे validate करते हैं, root → com → example.com → ad.example.com, सिर्फ़ उस root trust anchor से जो उनके पास पहले से था। कोई local trust anchor नहीं। कोई टापू नहीं। हाथ से बाँटी जाने वाली कोई की नहीं। डेटा कभी बिल्डिंग से बाहर नहीं जाता, और validation का रास्ता सामान्य पब्लिक वाला है। जब आप कोई रिज़ॉल्वर जोड़ते हैं, तो वह बिना किसी DNSSEC कॉन्फ़िगरेशन के अंदरूनी नामों को सही से validate करता है।\nसौदे के बारे में सीधी बात, क्योंकि एक है। पब्लिक ज़ोन में delegation और DS पब्लिश करने का मतलब है कि ad.example.com का अस्तित्व, और उसके नेम सर्वरों के नाम, पब्लिक हैं। कंटेंट नहीं, और कभी नहीं, लेकिन आपने दुनिया को बता दिया है कि ज़ोन मौजूद है। बदले में आपका हर रिज़ॉल्वर अंदरूनी नामों को असली रूट के सामने validate करता है। ज़्यादातर estates के लिए यह अच्छा सौदा है, और यह सोच-समझकर होना चाहिए, आश्चर्य के रूप में नहीं।\nइसके साथ दो चीज़ें सही करनी हैं:\nअंदरूनी view को enumerate और transfer न हो सकने वाला रखिए। अंदरूनी authoritative सर्वरों पर allow-transfer signer और आपके अपने secondaries के लिए है, और किसी के लिए नहीं। और याद रखिए कि NSEC वाला authenticated denial हर उस व्यक्ति को ज़ोन को शुरू से आखिर तक walk करने देता है जो उसे query कर सकता है; NSEC3 यह कीमत बढ़ाता है, लेकिन असली नियंत्रण यह है कि बाहरी लोग सर्वरों तक पहुँच ही न सकें। DS को automate कीजिए। Parent में DS जो child की की से मेल खाना बंद कर दे, पूरे अंदरूनी डोमेन को SERVFAIL पर ले जाता है। CDS/CDNSKEY इसीलिए हैं कि child की बदलने का संकेत दे सके और parent उसे उठा ले, बिना किसी इंसान के rollover के दौरान रिकॉर्ड एडिट किए। अगर parent ज़ोन किसी ऐसे registrar या provider के पास है जो इसे सपोर्ट करता है, तो इस्तेमाल कीजिए; अगर नहीं, तो rollover की प्रक्रिया पहले roll से पहले लिख लेनी चाहिए, उसके दौरान नहीं। Windows और Linux से सच में validate करवाना यहाँ तक सब कुछ ऐसा ज़ोन पब्लिश करने के बारे में था जिसे जाँचा जा सके। इसमें से कुछ भी तब तक कुछ नहीं करता जब तक क्लाइंट की तरफ़ कोई चीज़ उसे जाँचने पर अड़ न जाए। पूरी तरह साइन किया हुआ ज़ोन और ऐसा क्लाइंट जो कभी सिग्नेचर नहीं जाँचता, बिल्कुल बिना साइन वाले ज़ोन जैसा अनुभव देते हैं, ठीक उस दिन तक जब तक ऐसा नहीं होता।\nValidation सिर्फ़ दो जगह हो सकता है, और उनके बीच का फ़र्क सुरक्षा नियंत्रण और विनम्र सुझाव के बीच का फ़र्क है।\nरिज़ॉल्वर पर validate कीजिए, और AD बिट पर भरोसा कीजिए। क्लाइंट रिज़ॉल्वर से पूछता है, रिज़ॉल्वर cryptography करता है, और जवाब में एक बिट सेट करके नतीजा बताता है: AD, authenticated data। क्लाइंट उस बिट पर भरोसा करता है। यही मॉडल Windows इस्तेमाल करता है, और यह उतना ही मज़बूत है जितना क्लाइंट और रिज़ॉल्वर के बीच का रास्ता, क्योंकि जो कुछ भी रिज़ॉल्वर बनकर जवाब दे सकता है, वह यह बिट सेट कर सकता है।\nखुद क्लाइंट पर validate कीजिए। मशीन अपना validate करने वाला रिज़ॉल्वर चलाती है, इसलिए “रिज़ॉल्वर तक का रास्ता” मशीन के अंदर एक loopback socket है और spoof करने के लिए कुछ बचता ही नहीं। यह ज़्यादा मज़बूत है, और Linux पर पूरी तरह संभव है।\nडिफ़ॉल्ट है: कुछ नहीं कुछ भी कॉन्फ़िगर करने से पहले यह देखना ज़रूरी है कि एक आम Linux वर्कस्टेशन बॉक्स से निकलते ही क्या करता है। यह एक Fedora 44 मशीन है, systemd 259, बिना छुई:\n$ resolvectl status | head -3 Global Protocols: LLMNR=resolve -mDNS -DNSOverTLS DNSSEC=no/unsupported resolv.conf mode: stub $ grep options /etc/resolv.conf options edns0 trust-ad $ dig +dnssec cloudflare.com A | grep flags ;; flags: qr rd ra; QUERY: 1, ANSWER: 3, AUTHORITY: 0, ADDITIONAL: 1 इन तीनों को साथ पढ़िए, क्योंकि ये एक छोटी कहानी कहते हैं।\nStub trust-ad के साथ कॉन्फ़िगर है: उसे AD बिट पर भरोसा करने को कहा गया है। systemd-resolved DNSSEC=no/unsupported बताता है, यानी वह खुद कुछ भी validate नहीं कर रहा। और साइन किए हुए ज़ोन का जवाब qr rd ra flags के साथ और बिना ad के लौटता है: उस रास्ते में कहीं भी किसी ने validate करने का दावा नहीं किया।\nयह गलत कॉन्फ़िगरेशन नहीं है। यही डिफ़ॉल्ट है। क्लाइंट को ऐसे दावे पर भरोसा करने को कहा जा सकता है जो chain में कोई कर ही नहीं रहा। कोई इसकी जाँच नहीं कर रहा। कुछ और कॉन्फ़िगर करने से पहले एक मिनट इस पर ठहरना ठीक है।\nLinux तीन विकल्प, इस क्रम में कि आपको नेटवर्क पर कितना कम भरोसा करना पड़ता है।\n1. systemd-resolved, लोकल validation के साथ। शिप हुई फ़ाइल एडिट करने की जगह एक drop-in:\n# /etc/systemd/resolved.conf.d/dnssec.conf [Resolve] DNSSEC=yes DNSOverTLS=opportunistic फिर systemctl restart systemd-resolved, और resolvectl status से पक्का कीजिए कि लाइन अब DNSSEC=yes पढ़ती है।\nजिस setting से सावधान रहना है, वह बीच वाली है। DNSSEC=allow-downgrade समझदारी भरा समझौता लगता है और सुरक्षा नियंत्रण नहीं है; resolved.conf(5) खुद यह कहता है:\nNote that this mode makes DNSSEC validation vulnerable to \u0026ldquo;downgrade\u0026rdquo; attacks, where an attacker might be able to trigger a downgrade to non-DNSSEC mode by synthesizing a DNS response that suggests DNSSEC was not supported.\nजो हमलावर जवाब जाली बना सकता है, DNSSEC ठीक उसी को रोकने के लिए है, इसलिए जिस मोड को वह जाली जवाब से बंद कर सकता है, वह उसके खिलाफ़ आपको कुछ नहीं देता। या तो yes, या फिर सजावट।\n2. होस्ट पर एक असली validate करने वाला रिज़ॉल्वर। systemd-resolved का validator सुविधाजनक है, गहन नहीं। जहाँ मायने रखता हो, loopback पर Unbound या BIND चलाइए और stub को उसकी तरफ़ कीजिए:\n# unbound: validate against the root anchor, refuse to be stripped server: module-config: \u0026#34;validator iterator\u0026#34; auto-trust-anchor-file: \u0026#34;/var/lib/unbound/root.key\u0026#34; harden-dnssec-stripped: yes val-permissive-mode: no # the internal zone is reached like any other name — no local anchor needed forward-zone: name: \u0026#34;ad.example.com.\u0026#34; forward-addr: 192.0.2.53 BIND में इसके बराबर एक लाइन है, dnssec-validation auto;, जो root anchor की अपनी बिल्ट-इन कॉपी इस्तेमाल करती है और rollover आपके लिए संभालती है।\n3. पूरे estate के लिए, उन रिज़ॉल्वरों पर जो आप पहले से चलाते हैं। ये इस पोस्ट में पहले वाली pipeline का चौथा चरण हैं। Validation वहाँ होता है, क्लाइंट AD बिट पर भरोसा करते हैं, और उनके बीच का hop वह चीज़ है जिसकी आपको रक्षा करनी है: DoT से, या ऐसे नेटवर्क से जिसके बारे में आप यह मान लेने को तैयार हों।\nऔर ध्यान दीजिए कि इनमें से किसी कॉन्फ़िगरेशन में क्या नहीं है: अंदरूनी ज़ोन के लिए trust anchor। क्योंकि ad.example.com एक पब्लिक तौर पर साइन किए हुए ज़ोन के अंदर delegation है, इनमें से हर एक अंदरूनी नामों को रूट से आने वाली सामान्य chain के ज़रिए validate करता है। यही पिछले सेक्शन का डिज़ाइन है जो अपनी कीमत वसूल रहा है। विकल्प है estate के हर क्लाइंट और रिज़ॉल्वर पर एक local anchor धकेलना, और हर rollover पर फिर से धकेलना।\nWindows पहले अहम बात, क्योंकि इसे नियमित रूप से गलत समझा जाता है: Windows DNS Client DNSSEC validate नहीं करता। यह कोई cryptography नहीं करता, कोई सिग्नेचर नहीं जाँचता, और कोई trust anchor नहीं रखता। यह एक stub रिज़ॉल्वर है, और हमेशा रहा है।\nआप जो कर सकते हैं, वह है इसे उन जवाबों को ठुकराने पर मजबूर करना जिन्हें सर्वर ने इसकी तरफ़ से validate नहीं किया। वह Name Resolution Policy Table है, और यह global नहीं, हर namespace के हिसाब से है:\n# Require validated answers for the internal zone Add-DnsClientNrptRule -Namespace \u0026#34;.ad.example.com\u0026#34; ` -DnsSecEnable -DnsSecValidationRequired # What is actually in force on this machine, including from Group Policy Get-DnsClientNrptPolicy -Effective Get-DnsClientNrptRule पूरे estate के लिए यही चीज़ Group Policy में Computer Configuration → Policies → Windows Settings → Name Resolution Policy के नीचे रहती है: namespace के लिए एक rule बनाइए, DNSSEC वाला विकल्प टिक कीजिए, और वह शर्त टिक कीजिए कि क्लाइंट जाँचे कि डेटा DNS सर्वर ने validate किया था।\nइससे दो बातें निकलती हैं, और दोनों मायने रखती हैं।\nUpstream में किसी चीज़ को अब भी validate करना होगा। NRPT rule क्लाइंट से AD बिट की माँग करवाता है; वह उसे बनाता नहीं। वे क्लाइंट जिस रिज़ॉल्वर की तरफ़ हैं, वह validate करने वाला रिज़ॉल्वर होना चाहिए, वरना उस namespace का हर नाम फ़ेल होता है।\nऔर इसीलिए NRPT rule के बगल में IPsec के विकल्प हैं। Microsoft ने उन्हें उसी वजह से वहाँ रखा जो इस सेक्शन की शुरुआत में बताई गई: ऐसे बिट की माँग करना जिसे रास्ते पर बैठा कोई भी हमलावर सेट कर सकता है, कोई खास माँग नहीं है। अगर आप अविश्वसनीय नेटवर्क पर रिज़ॉल्वर-validate-करता-है वाले मॉडल पर निर्भर हैं, तो आखिरी hop की रक्षा ज़रूरी है: क्लाइंट और रिज़ॉल्वर के बीच IPsec, या जहाँ रिज़ॉल्वर सपोर्ट करे वहाँ DoT।\nयह बंद होकर फ़ेल होता है, इसलिए इसी क्रम में लागू कीजिए Validation को ज़बरदस्ती लागू करना चुपचाप होने वाले compromise की एक श्रेणी को ज़ोरदार outage की एक श्रेणी में बदल देता है। यही सही सौदा है, और फिर भी outage है: एक्सपायर हुआ RRSIG, parent में ऐसा DS जो rollover के बाद मेल नहीं खाता, या ऐसा रिज़ॉल्वर जो parent ज़ोन तक नहीं पहुँच पाता, सब SERVFAIL देते हैं, और _ldap._tcp.dc._msdcs के लिए SERVFAIL का मतलब है डोमेन कमज़ोर नहीं, बंद है।\nतो इसे इस क्रम में कीजिए:\nपहले रिज़ॉल्वरों पर validation चालू कीजिए, और क्लाइंट को छोड़ दीजिए। कुछ हफ़्ते रिज़ॉल्वर logs में SERVFAIL पर नज़र रखिए; यहीं आपको वह ज़ोन मिलता है जो एक साल से चुपचाप टूटा पड़ा है। कुछ भी ज़बरदस्ती लागू करने से पहले DS को automate कीजिए, जैसा पिछले सेक्शन में बताया। खुद पर लादे गए ज़्यादातर DNSSEC outages ऐसे rollover होते हैं जिनमें parent कभी अपडेट ही नहीं हुआ। फिर क्लाइंट पर लागू कीजिए, एक बार में एक namespace, पूरे estate की जगह अपने वर्कस्टेशन और एक टेस्ट OU से शुरू करके। आप जिस विफलता से बचने की इंजीनियरिंग कर रहे हैं, वह है क्लाइंट को जाली डोमेन कंट्रोलर थमा दिया जाना। आप जिस विफलता का जोखिम ले रहे हैं, वह है क्लाइंट को कुछ भी न मिलना। दूसरी ठीक हो सकती है और साफ़ दिखती है; पहली न ठीक होती है, न दिखती है। Outage के बारे में आपको एक मिनट के अंदर पता चलेगा। दूसरी वाली के बारे में आपको कभी पता ही नहीं चलता।\nआखिरी hop को encrypt करना: अंदरूनी रिज़ॉल्वरों पर DoT और DoH Validation वाले सेक्शन ने एक चीज़ अधूरी छोड़ी। रिज़ॉल्वर-validate-करता-है वाले मॉडल में, यानी वह जो Windows आपको देता है, क्लाइंट रिज़ॉल्वर के सेट किए एक बिट पर भरोसा कर रहा है, और उस बिट की कीमत उतनी ही है जितनी उस रास्ते की जिससे वह आया। किसी चीज़ को उस रास्ते की रक्षा करनी होगी।\nBIND दोनों encrypted transports को native तौर पर सपोर्ट करता है, इसलिए यह खरीदारी का नहीं, कॉन्फ़िगरेशन का काम है:\nDNS over TLS: listen-on से जुड़ा एक tls ब्लॉक, परंपरा से port 853 पर। DNS over HTTPS: वही tls ब्लॉक और साथ में एक http ब्लॉक, 443 पर। बाहर जाने वाला DoT, क्योंकि forwarders हर पते के लिए या पूरी सूची के लिए एक TLS transport लेता है। TLS पर zone transfers, क्योंकि type secondary ज़ोन का primaries स्टेटमेंट भी एक लेता है, जो इस पोस्ट में पहले वाली pipeline के लिए सीधे काम का है। पहले साफ़ हो जाइए कि इससे क्या मिलता है, क्योंकि DoT और DNSSEC को लगातार गड्डमड्ड किया जाता है और ये एक-दूसरे के विकल्प नहीं हैं। DNSSEC डेटा को authenticate करता है, उसे पब्लिश करने वाले ज़ोन तक। DoT रिज़ॉल्वर के साथ बातचीत की रक्षा करता है। एक दुश्मन रिज़ॉल्वर और रिज़ॉल्वरों के बीच दुश्मन नेटवर्क को झेल लेता है; दूसरा आपके wifi पर बैठी मशीन को यह पढ़ने और बदलने से रोकता है कि आपके लैपटॉप ने क्या पूछा। आपको दोनों चाहिए, और कोई भी दूसरे की जगह नहीं ले सकता। ऐसे रिज़ॉल्वर तक का hop encrypt करना जो validate नहीं करता, किसी ऐसी चीज़ से निजी बातचीत है जिससे अब भी झूठ बोला जा सकता है।\nइसे सर्व करना tls internal-resolver { key-file \u0026#34;/etc/pki/dns/resolver.key\u0026#34;; cert-file \u0026#34;/etc/pki/dns/resolver.pem\u0026#34;; protocols { TLSv1.3; }; }; http internal-doh { endpoints { \u0026#34;/dns-query\u0026#34;; }; }; options { dnssec-validation auto; listen-on port 53 { 192.0.2.53; }; listen-on port 853 tls internal-resolver { 192.0.2.53; }; listen-on port 443 tls internal-resolver http internal-doh { 192.0.2.53; }; listen-on-v6 port 853 tls internal-resolver { 2001:db8::53; }; }; असली काम सर्टिफ़िकेट है, और वही हिस्सा छोड़ दिया जाता है। जो क्लाइंट verify करता है, और पूरा मुद्दा यही है, उसे ऐसा सर्टिफ़िकेट चाहिए जो उस नाम के लिए वैध हो जिससे वह कॉन्फ़िगर हुआ है, और किसी ऐसी चीज़ ने जारी किया हो जिस पर वह पहले से भरोसा करता है। मतलब आपका अंदरूनी CA और आपका मौजूदा सर्टिफ़िकेट automation, ephemeral keyword नहीं। ephemeral एक फेंक देने वाला self-signed सर्टिफ़िकेट बनाता है; यह इसलिए है कि आप साबित कर सकें कि listener चल रहा है, और जो क्लाइंट सच में जाँचता है उसके लिए यह बेकार है।\nइस पर forward करना अगर वे रिज़ॉल्वर खुद पेड़ में नीचे जाने की जगह कहीं forward करते हैं, तो upstream वाला hop भी encrypt हो सकता है, और यहाँ एक फ़र्क है जिसे सही समझना ज़रूरी है:\ntls upstream { ca-file \u0026#34;/etc/pki/tls/certs/ca-bundle.crt\u0026#34;; remote-hostname \u0026#34;dns.example.net\u0026#34;; }; options { forwarders port 853 tls upstream { 192.0.2.1; }; }; remote-hostname के बिना आपको authentication के बिना encryption मिलता है: ट्रैफ़िक किसी passive observer के लिए पढ़ने लायक नहीं, और जो active हमलावर कनेक्शन बीच में पकड़ सकता है, वह बस अपना सर्टिफ़िकेट पेश कर देता है। remote-hostname और ca-file के साथ BIND जाँचता है कि वह किससे बात कर रहा है। पहला कुछ काम का है। सिर्फ़ दूसरे को नियंत्रण कहा जा सकता है।\nक्लाइंट वाला हिस्सा बराबर नहीं है यहीं मिले-जुले estate में अड़चन आती है, और यही वजह है कि एक चुनने की जगह दोनों transports कॉन्फ़िगर कीजिए।\nLinux DoT ठीक से करता है। systemd-resolved strict mode के लिए DNSOverTLS=yes लेता है, और सर्वर को वह नाम दिया जा सकता है जिसके सामने verify करना है:\n[Resolve] DNS=192.0.2.53#resolver.ad.example.com DNSOverTLS=yes DNSSEC=yes DNSSEC= की तरह, बीच वाली setting जाल है: DNSOverTLS=opportunistic TLS उपलब्ध न होने पर साफ़ टेक्स्ट पर लौट जाता है, और जो हमलावर कनेक्शन में दखल दे सकता है, वह इसका इंतज़ाम कर सकता है।\nWindows DoH करता है, DoT नहीं। क्लाइंट DoH सपोर्ट Windows 11 और Server 2022 में आया, जो हर सर्वर के लिए एक template से कॉन्फ़िगर होता है:\n$doh = \u0026#34;https://resolver.ad.example.com/dns-query\u0026#34; netsh dnsclient add encryption server=192.0.2.53 dohtemplate=$doh DoT, यह लिखे जाने तक, सिर्फ़ Insider builds में दिखा है। तो जारी हुए Windows पर encrypted विकल्प DoH है या कुछ नहीं, और ठीक इसीलिए पहले वाले NRPT सेक्शन ने IPsec का सहारा लिया।\nइसलिए दोनों को एक ही BIND इंस्टेंस से सर्व करना। Linux बेड़े और उसे बोलने वाली किसी भी चीज़ के लिए DoT, Windows के लिए DoH, एक रिज़ॉल्वर, एक सर्टिफ़िकेट।\nकौन सा, कहाँ अंदरूनी रिज़ॉल्वर के लिए DoT बेहतर transport है और DoH compatibility वाला जवाब है।\nDoT अपने पोर्ट पर बैठता है। आप उसे देख सकते हैं, allow कर सकते हैं, deny कर सकते हैं, और DNS करने वाली हर उस चीज़ पर alert कर सकते हैं जो इसे नहीं कर रही। DoH का फ़ायदा, यानी 443 पर सामान्य वेब ट्रैफ़िक से अलग न पहचाना जा सकना, दुश्मन नेटवर्क पर असली फ़ायदा है और आपके अपने नेटवर्क पर सिरदर्द, जहाँ यह बता पाना कि DNS क्या है, एक फ़ीचर है जिसकी आपने कीमत चुकाई। जिस estate को आप नियंत्रित करते हैं, वहाँ उस transport को तरजीह दीजिए जिसे आप देख सकते हैं, और DoH इसलिए चलाइए कि Windows आपके पास कोई विकल्प नहीं छोड़ता, इसलिए नहीं कि वह बेहतर है।\nजब वहाँ हैं ही: transfers को encrypt कीजिए इस पोस्ट में पहले वाली pipeline AD ज़ोन को AXFR से ले जाती है, और split-view सेक्शन ने यह बात रखी कि उसका कंटेंट estate का नक्शा है। TSIG उन transfers को authenticate करता है; छिपाता नहीं। क्योंकि secondary का primaries स्टेटमेंट TLS कॉन्फ़िगरेशन लेता है, transfer भी TLS पर चल सकता है; अगर आपको standard चाहिए तो RFC 9103:\nzone \u0026#34;ad.example.com\u0026#34; { type secondary; primaries { 192.0.2.10 port 853 tls xfr-tls key transfer-to-signer; }; ... }; की से authenticated, transport से encrypted। अगर उस pipeline का कोई hop किसी साइट लिंक, किसी साझा hypervisor, या किसी ऐसी चीज़ को पार करता है जिस पर आप खुशी से hub न लगाएँ, तो यह बीस मिनट के लायक है।\nयह क्या ठीक नहीं करता यह validation नहीं है। ऊपर कवर हो चुका, और दोहराने लायक है क्योंकि vendors “secure DNS” बेचते हैं जिसका मतलब सिर्फ़ encryption होता है। यह रिज़ॉल्वर से कुछ नहीं छिपाता। रिज़ॉल्वर हर query पूरी देखता है। Encryption रास्ते की रक्षा करता है, operator से lookup की प्राइवेसी की नहीं, जो तब ठीक है जब operator आप हैं। यह उस क्लाइंट के लिए कुछ नहीं करता जो सर्टिफ़िकेट verify नहीं करता, और opportunistic मोड ठीक उसी हमलावर द्वारा downgrade किए जा सकते हैं जिसकी आपको चिंता है। और यह डोमेन कंट्रोलर पर listener लगाने की वजह नहीं है। DC पर encrypted DNS गलत समस्या को खूबसूरती से हल करना होगा। DC अब भी किसी को जवाब नहीं देता। जो आपके पास है, उसे कैसे जाँचें अपने estate पर चलाने के लिए कमांड। दिलचस्प हिस्सा आउटपुट हैं, और उनमें से कुछ पहली बार पढ़ने में असहज करते हैं।\n# Walk the tree yourself, one delegation at a time dig +trace dc01.ad.example.com # Validate, and show the chain being built delv +rtrace +vtrace ad.example.com SOA # Is the resolver you are pointed at actually validating? # A deliberately broken test name must come back SERVFAIL, not an address dig @\u0026lt;resolver\u0026gt; dnssec-failed.org A # What does the estate advertise as a domain controller? dig SRV _ldap._tcp.dc._msdcs.\u0026lt;domain\u0026gt; dig SRV _kerberos._udp.\u0026lt;domain\u0026gt; # Is a DC answering for names it has no business answering? # Ask it for something it is not authoritative for. \u0026#34;recursion requested # but not available\u0026#34; is the answer you want. An actual address means it is # serving the estate — recursing if it is BIND, relaying to the forwarder # if it is SAMBA_INTERNAL. Either way it should not be doing that. dig @\u0026lt;dc\u0026gt; www.example.org A # Is the DC configured as the estate\u0026#39;s DNS relay? grep -E \u0026#39;dns forwarder|server services\u0026#39; /etc/samba/smb.conf # Will a DC hand its zone to anybody who asks? dig @\u0026lt;dc\u0026gt; AXFR ad.example.com # Which backend is this DC running, and does named have the module? grep -r dlz /etc/named.conf /var/lib/samba/bind-dns/ 2\u0026gt;/dev/null samba-tool dns query \u0026lt;dc\u0026gt; \u0026lt;domain\u0026gt; @ ALL # Is the internal zone chained to the public parent? dig DS ad.example.com @\u0026lt;public-authoritative-for-example.com\u0026gt; # What does the local stub actually do with the AD bit, and is the # hop to the resolver encrypted? resolvectl status # DNSSEC= and DNSOverTLS= per link grep options /etc/resolv.conf # trust-ad, trusting whom exactly? # Did anything in the path claim to have validated? Look for \u0026#34;ad\u0026#34; in the flags dig +dnssec ad.example.com SOA | grep flags # Validate independently of whatever the local resolver believes delv ad.example.com SOA # \u0026#34;fully validated\u0026#34; is the line you want # Is the resolver actually listening for DoT, and does its certificate # match the name clients are configured with? kdig +tls @192.0.2.53 ad.example.com SOA openssl s_client -connect 192.0.2.53:853 \\ -servername resolver.ad.example.com \u0026lt;/dev/null 2\u0026gt;/dev/null \\ | openssl x509 -noout -subject -dates और Windows क्लाइंट पर, यह देखने के लिए कि वह कुछ माँग भी रहा है या नहीं:\nGet-DnsClientNrptPolicy -Effective # the rules actually in force Resolve-DnsName ad.example.com -DnssecOk Get-DnsClientDohServerAddress # is the hop to the resolver encrypted? जो दो सबसे ज़्यादा चौंकाते हैं, वे हैं recursion वाली जाँच और AXFR की कोशिश। अगर कोई DC किसी मनमाने क्लाइंट को इनमें से किसी का भी जवाब देता है, तो इस पोस्ट वाली pipeline लगी नहीं है, wiki पर डायग्राम चाहे जो कहे।\nतीसरी है ऐसी मशीन पर resolvectl status जिसे किसी ने छुआ नहीं। resolv.conf में trust-ad के साथ DNSSEC=no/unsupported Linux डेस्कटॉप की सामान्य हालत है, और इसका मतलब है कि ऊपर बताए signing के काम को फ़िलहाल कोई नहीं जाँच रहा।\nछोटे में रिज़ॉल्वर रूट सर्वरों और एक की को जानते हुए पैदा होता है, और बाकी सब कुछ बताए जाने से सीखता है। नाम delegations में नीचे जाकर ढूँढे जाते हैं, और सर्विसें SRV रिकॉर्ड माँगकर, इसलिए जब तक कोई क्लाइंट किसी डोमेन कंट्रोलर के साथ Kerberos करना शुरू करता है, उस डोमेन कंट्रोलर की पहचान एक DNS जवाब से आ चुकी होती है। DNS से खोजना सही और ठीक है। DNS से अधिकार देना ठीक नहीं, और हैरानी की बात है कि कितना infrastructure फिर भी चुपचाप यही करता है।\nDNSSEC ही उन जवाबों को जाँचने लायक बनाता है: हर सेट पर सिग्नेचर, हर parent में एक DS, रूट पर एक trust anchor तक chain, और authenticated denial ताकि किसी नाम को गायब न किया जा सके। इससे स्रोत का authentication और integrity मिलती है; प्राइवेसी नहीं, और सही होना भी नहीं। ज़ोन जो कहता है, यह उसी को साइन करता है, इसीलिए यह उस ज़ोन को नहीं बचा सकता जिसमें अविश्वसनीय मशीनों को लिखने दिया जाता है। और इसे एक parent चाहिए: गढ़े हुए अंदरूनी TLD के पास DS रखने की कोई जगह नहीं, इसलिए .local, .lan, .internal और home.arpa सब आपको या तो बिना साइन छोड़ते हैं या हाथ से बाँटी गई कीज़ वाला निजी टापू चलाने पर।\nActive Directory डोमेन के लिए इससे settings की सूची नहीं, एक डिज़ाइन निकलता है। अपने किसी पब्लिक ज़ोन के अंदर delegation इस्तेमाल कीजिए, ताकि भरोसा रूट से सामान्य chain में नीचे आए जबकि डेटा कभी बाहर न जाए। AD partitions को BIND और dlz_bind9 से सर्व कीजिए; DLZ जोखिम नहीं है, यह ज़ोन को डायरेक्टरी से बाहर निकालने का तरीका है; और DC को hidden primary बनने दीजिए जो transfer करके बाहर भेजता है और किसी और को जवाब नहीं देता। DLZ ज़ोन खुद साइन नहीं हो सकता, इसलिए signing एक सामान्य secondary ज़ोन है जिसमें transfer की हुई कॉपी है, उस पर inline-signing और एक dnssec-policy के साथ: कम मशीनें चाहिए तो DC पर दूसरा named, private keys डायरेक्टरी से दूर चाहिए तो अलग होस्ट। दोनों तरह यह एक बार साइन होता है, एक तय जगह पर, एक key policy के तहत, और पहला hop push नहीं, poll है, क्योंकि DLZ notify नहीं भेज सकता। ऐसे standalone authoritative सर्वरों से पब्लिश कीजिए जिनके पास कोई की नहीं और डायरेक्टरी तक कोई रास्ता नहीं।\nऔर क्लाइंट को उस ज़ोन से बाहर रखिए जो मायने रखता है। Secure dynamic update लिखने वाले को authenticate करता है, मतलब को नहीं, और डिफ़ॉल्ट AD-integrated ज़ोन में लिखने वाले Authenticated Users हैं, यानी हर account, सिर्फ़ हर मशीन नहीं, इसलिए लैपटॉप रिकॉर्ड और _msdcs लोकेटर दोनों वाला ज़ोन बस एक phished यूज़र दूर है उस हालत से जहाँ क्लाइंट को, बिल्कुल वैध सिग्नेचर के साथ, बताया जाए कि डोमेन कंट्रोलर कहीं और है। क्लाइंट registrations एक सब-ज़ोन में होने चाहिए, बाहर delegated या Samba में अलग, जहाँ compromise हुआ account ज़्यादा से ज़्यादा अपने बारे में झूठ बोल सकता है।\nहालाँकि बेहतर सवाल यह है कि क्लाइंट को रजिस्टर करना भी चाहिए या नहीं। 2026 के लैपटॉप का एक पता घर के wifi पर है, दूसरा ऑफ़िस के वायरलेस पर, एक और dock से और एक और VPN पर, और वह खुशी-खुशी इनमें से ज़्यादातर पब्लिश कर देगा। लैपटॉप के A रिकॉर्ड का इस्तेमाल करने वाला लगभग कुछ नहीं है; जिन tools को वर्कस्टेशन तक पहुँचना होता है, वे अपनी inventory खुद रखते हैं, क्योंकि मोबाइल क्लाइंट के लिए DNS कभी भरोसेमंद था ही नहीं। सर्वरों के रिकॉर्ड provisioning से आने चाहिए, और बेड़े को कुछ भी रजिस्टर नहीं करना चाहिए।\nफिर किसी चीज़ से सिग्नेचर जँचवाइए, क्योंकि ऊपर का कुछ भी तब तक किसी काम का नहीं जब तक कोई क्लाइंट किसी जवाब को ठुकराता नहीं। Linux पर इसका मतलब है systemd-resolved में DNSSEC=yes, या loopback पर एक असली validate करने वाला रिज़ॉल्वर; allow-downgrade कभी नहीं, जिसे जाली जवाब बना सकने वाला हमलावर बस एक जाली जवाब बनाकर बंद कर सकता है। Windows पर इसका मतलब है यह मान लेना कि DNS client खुद कभी कुछ validate नहीं करता, और NRPT rule से उसे ऐसे जवाब की माँग करवाना जिसे रिज़ॉल्वर ने validate किया हो, आखिरी hop की रक्षा के साथ क्योंकि वह माँग एक अकेला बिट है। पहले रिज़ॉल्वरों पर चालू कीजिए और SERVFAIL पर नज़र रखिए, DS को automate कीजिए, फिर क्लाइंट पर लागू कीजिए। यह बंद होकर फ़ेल होता है, जो सही तरीका है, और फिर भी outage है।\nइसमें कुछ भी अनोखा नहीं है। यह delegation, transfer और signing है, वे तीन चीज़ें जो DNS हमेशा से करता आया है, इस तरह सजाई गईं कि आपकी डायरेक्टरी रखने वाली मशीन वह मशीन न हो जो कार पार्क से सवाल ले रही है, और कि जब कोई चीज़ सच में किसी क्लाइंट से झूठ बोले, तो क्लाइंट को पता चल जाए।\n","permalink":"https://blogs.damiendye.uk/hi/dns/samba4-securing-ad-records-with-dnssec/","summary":"डोमेन से जुड़ी हर मशीन DNS से SRV रिकॉर्ड माँगकर अपना डोमेन कंट्रोलर ढूँढती है, इसलिए _msdcs लोकेटर आपके पास के सबसे ज़्यादा सुरक्षा-अहम रिकॉर्ड हैं। Samba4 DC से इन्हें ठीक से पब्लिश और साइन करने का तरीका: डायरेक्टरी पढ़ने वाले dlz_bind9 के साथ BIND, inline signing, एक hidden primary जिस तक क्लाइंट कभी नहीं पहुँचते, और क्लाइंट के dynamic updates को लोकेटर वाले ज़ोन से बाहर रखना। फिर Windows और Linux क्लाइंट को सच में सिग्नेचर जाँचने पर मजबूर करना, क्योंकि जिस साइन किए हुए ज़ोन को कोई वैलिडेट नहीं करता, वह बिल्कुल बिना साइन वाले ज़ोन जैसा ही बर्ताव करता है।","title":"Samba4 और DNSSEC से AD रिकॉर्ड सुरक्षित करना"},{"content":"वह bay जिसमें कुछ भी लग जाए Tri-mode adapter की बात सचमुच अच्छी है, और उसे खोलकर देखने से पहले ठीक से कह देना चाहिए।\nU.3 backplane और tri-mode controller वाली chassis ख़रीदिए, और हर drive bay universal हो जाता है। Slot 0 में 24G SAS ड्राइव हो सकती है, slot 1 में सस्ता SATA boot device, slot 2 में Gen4 NVMe SSD, और जो भी लगे adapter उससे बात तय कर लेता है। Broadcom इस silicon को Tri-Mode SerDes कहता है; bay का standard SFF-TA-1001 है, जिसे U.3 कहते हैं, और यह SAS x1/x2, SATA और x1, x2 या x4 पर NVMe के लिए एक साझा connector तय करता है। Management की तरफ़ SFF-TA-1005 है, Universal Backplane Management, जिससे enclosure पता करता है कि वह असल में किससे बात कर रहा है और सही activity LED जलाता है।\nसर्वर तय करने वालों के लिए यह एक असली और खिझाने वाली समस्या हल करता है। अब आपको purchase order के समय storage protocol तय नहीं करना पड़ता, न दो chassis SKU रखने पड़ते, न बाद में पता चलता है कि NVMe वाले bay बाईं ओर के चार हैं और आपकी ड्राइव बाकी बीस में चली गईं। एक part number पूरे fleet के लिए, और SAS estate एक-एक chassis की जगह एक-एक ड्राइव करके NVMe पर जा सकता है।\nइसमें से कुछ भी marketing नहीं है। ये adapter इसी वजह से बिकते हैं, और इसे न मानना बेवकूफ़ी होगी।\nलेकिन लचीलापन मुफ़्त नहीं, और बिल पाउंड में नहीं चुकता। वह queues में चुकता है।\nड्राइव के साथ असल में क्या होता है NVMe SSD एक PCIe endpoint है। Direct-attached सर्वर में उसकी चार lanes CPU के root complex तक जाती हैं, किसी retimer या PCIe switch से होकर, लेकिन बिजली और तर्क दोनों के हिसाब से वह PCIe bus पर एक device है। Kernel उसे गिनता है, nvme driver बाँधता है, और उसके बाद driver सीधे ड्राइव के registers से बात करता है।\nवही ड्राइव tri-mode adapter के पीछे रख दीजिए और यह सच नहीं रहता।\nड्राइव की lanes अब controller पर ख़त्म होती हैं। Broadcom का documentation इस हिस्से को PCIe device bridge कहता है, और bridge शब्द बहुत भार उठा रहा है: यह कोई पारदर्शी switch नहीं जो आपके CPU के transactions उस ड्राइव तक पहुँचा दे जिसे वह अब भी देख सकता है। आपका host जिस PCIe endpoint को गिनता है वह adapter है। ड्राइव उसके दूसरी ओर लटका एक target है, और controller का firmware हर I/O को नए सिरे से शुरू करता है।\nDirect-attached NVMe, उन्हीं ड्राइव के सामने जो tri-mode adapter के पीछे हैं Direct-attached Tri-mode adapter के पीछे CPU root complex CPU root complex x4 x4 x4 x4 चार स्वतंत्र links हर एक लगभग 7 GB/s, समानांतर x8 Gen4 नीचे का सब कुछ इसे बाँटता है Tri-mode controller host जिसे गिनता है वह एकमात्र PCIe endpoint NVMe NVMe NVMe NVMe nvme0n1 nvme1n1 nvme2n1 nvme3n1 NVMe NVMe NVMe NVMe sda sdb sdc sdd nvme driver हर ड्राइव, हर CPU core के लिए एक queue pair ड्राइव जोड़ने पर bandwidth बढ़ती है mpt3sas driver: ड्राइव SCSI targets हैं हर एक की queue depth 128, सबके बीच एक tag pool bandwidth adapter पर रुक जाती है वही चार ड्राइव, दो तरह से जुड़ी हुईं। बाईं ओर हर ड्राइव के पास root complex तक अपनी चार lanes हैं। दाईं ओर lanes adapter पर रुक जाती हैं, और नीचे की हर चीज़ एक x8 uplink और एक controller बाँटती है। तो adapter आपके NVMe commands आगे नहीं भेज रहा। वह उन्हें ख़त्म कर रहा है, और आपकी ओर से ड्राइव से बात कर रहा है।\nजिससे सवाल उठता है कि वह आपसे कौन सा protocol बोलता है।\nOS को कभी NVMe ड्राइव दिखती ही नहीं वह SCSI बोलता है।\nBroadcom tri-mode HBA में NVMe SSD लगाइए और वह /dev/nvme0n1 बनकर नहीं आती। वह /dev/sdb बनकर आती है, mpt3sas से बँधी, वही driver जो दस साल से ज़्यादा से LSI SAS controller चला रहा है। nvme list कुछ नहीं लौटाता। lsblk -o NAME,TRAN transport को sas बताता है। Driver के ऊपर storage stack की हर परत के हिसाब से आपने SAS disk ख़रीदी है।\nयह कोई bug या firmware की सीमा नहीं जो ठीक होने का इंतज़ार कर रही हो। यही design है। हर चीज़ को SCSI target के रूप में पेश करना ही वह तरीक़ा है जिससे एक adapter तीन protocol सँभालता है: controller SAS, SATA और NVMe को एक device model में ढाल देता है, और host को एक driver, एक गिनती का रास्ता, एक सेट tooling मिलता है। Marketing का लचीलापन और dmesg में SCSI वाली प्रस्तुति एक ही architecture फ़ैसला है, बस दोनों सिरों से देखा गया।\n9500 और 9600 पीढ़ियाँ एक passthrough तरीक़ा जोड़ती हैं ताकि vendor tooling ड्राइव के NVMe admin commands तक पहुँच सके, और Broadcom के नए parts 9400 की तुलना में ड्राइव की सेहत दिखाने में कहीं बेहतर हैं। लेकिन वह management का एक अलग रास्ता है। Data path, यानी आपका workload जो हर read और write भेजता है, अब भी SCSI stack से नीचे जाता है।\nऔर SCSI stack का queue model flash से बीस साल पुराना है।\nवह queue model जो आपने अभी छोड़ दिया यही वह हिस्सा है जो असल में performance छीनता है, और इसमें सटीक होना ज़रूरी है, क्योंकि “NVMe, SAS से तेज़ है” इसकी वजह नहीं है।\nNVMe का मुख्य design फ़ैसला तेज़ तार नहीं था। वह यह दिखावा बंद करना था कि storage device एक अकेली, क़तार में चलने वाली चीज़ है।\nSpecification 65,535 तक I/O queue pairs की इजाज़त देती है, और यह आँकड़ा हर NVMe explainer में दोहराया जाता है। यह ग़लत संख्या है। कोई ड्राइव इसके आसपास भी कुछ लागू नहीं करती, इसलिए जिसने भी चलता हुआ सिस्टम देखा है वह इस तुलना को हाथ हिलाकर टाल सकता है, और सही होगा। असली संख्या छोटी है, सादी है, और बात बेहतर कहती है।\nतो यह रही एक असली ड्राइव। Enterprise part नहीं: 256 GB SK Hynix OEM SSD, जैसी किसी mid-range laptop में soldered होती है, 16-core मशीन में।\n$ nproc 16 $ cat /sys/class/nvme/nvme0/queue_count 17 $ ls /sys/block/nvme0n1/mq | wc -l 16 $ cat /sys/block/nvme0n1/queue/nr_requests 1023 सत्रह queues: एक admin queue, और सोलह cores के लिए सोलह I/O queues। हर एक 1023 commands गहरी। Mapping एक-से-एक है, हर hardware queue ठीक एक CPU से बँधी है:\n$ cd /sys/block/nvme0n1/mq \u0026amp;\u0026amp; grep -H . */cpu_list 0/cpu_list:1 1/cpu_list:9 2/cpu_list:3 3/cpu_list:11 ... हर queue के लिए एक CPU, आख़िर तक: hardware queue 0 core 1 की सेवा करती है और किसी की नहीं।\nव्यवहार में “NVMe में बहुत सारी queues हैं” का यही मतलब है। 65,535 नहीं, हर core के लिए एक, आपके पास जितने भी cores हों। Linux हर CPU के लिए एक queue pair बनाता है, उतनी तक जितनी controller दे, और controller एक आम सर्वर के cores से कहीं ज़्यादा देते हैं, इसलिए व्यवहार में core count ही संख्या है। यही ड्राइव 64-core box में लगाइए और आपको 64 मिलती हैं।\nPerformance इसी per-core बँटवारे से आती है:\nहर core अपनी queue में डालता है। कोई lock नहीं, क्योंकि कोई दूसरा core उसे छूता नहीं। हर queue को अपना MSI-X vector मिलता है, उसी core से जुड़ा। Completion interrupt उसी core पर लौटता है जिसने I/O भेजा था, जहाँ ज़रूरी cache lines पहले से हैं। सोलहों cores एक साथ काम में हो सकते हैं, किसी साझा ढाँचे पर कभी टकराए बिना। Parallelism आपके core count के साथ बढ़ता है, और किसी core का काम कभी दूसरे के पीछे क़तार में नहीं लगता। एक सस्ती consumer ड्राइव यह करती है। यह न्यूनतम अपेक्षा है।\nअब देखिए adapter के पीछे ड्राइव को क्या मिलता है। नीचे की संख्याएँ अनुमान नहीं हैं, ये mainline mpt3sas driver के constants हैं।\nPer-device queue depth ioc-\u0026gt;max_nvme_qd से तय होती है, जिसे driver controller firmware की बताई संख्या से लेता है और वरना drivers/scsi/mpt3sas/mpt3sas_base.h के compile-time default पर लौट आता है:\n#define MPT3SAS_SATA_QUEUE_DEPTH\t32 #define MPT3SAS_SAS_QUEUE_DEPTH\t254 #define MPT3SAS_RAID_QUEUE_DEPTH\t128 #define MPT3SAS_NVME_QUEUE_DEPTH\t128 128। हज़ारों outstanding commands सँभाल सकने वाले device को 128 की queue depth दी जाती है, और ध्यान दीजिए कि यह दो लाइन ऊपर बैठे SAS default 254 से भी उथली है। ड्राइव की अपनी क्षमता इस फ़ैसले में कभी आती ही नहीं। संख्या controller से आती है।\nHardware queue count और बुरा है, और driver इसके बारे में खुलकर बोलता है। mpt3sas_scsih.c से:\nshost-\u0026gt;nr_hw_queues = 1; if (shost-\u0026gt;host_tagset) { shost-\u0026gt;nr_hw_queues = ioc-\u0026gt;reply_queue_count - ioc-\u0026gt;high_iops_queues; ... dev_info(\u0026amp;ioc-\u0026gt;pdev-\u0026gt;dev, \u0026#34;Max SCSIIO MPT commands: %d shared with nr_hw_queues = %d\\n\u0026#34;, shost-\u0026gt;can_queue, shost-\u0026gt;nr_hw_queues); } इसे ध्यान से पढ़िए, क्योंकि तीन अलग चीज़ें हो रही हैं।\nDefault एक hardware queue है। nr_hw_queues = 1। Multi-queue सिर्फ़ gen35 controllers पर host_tagset feature चालू होने पर होता है, और तब भी वह वही है जिसे driver का अपना commit इतिहास simulated multiple hardware queues कहता है: I/O controller hardware एक अकेली submission queue है जिसके साथ कई reply queues हैं, और blk-mq को उसके ऊपर बिठाया जा रहा है।\nQueue count controller से आता है, core count से नहीं। यह reply_queue_count में से high-IOPS queues घटाकर है, यानी adapter का MSI-X vector बँटवारा। इसका आपके CPUs की संख्या से कोई लेना-देना नहीं, और ड्राइव जोड़ने पर यह नहीं बढ़ता। यह ऊपर वाली ड्राइव का ठीक उलटा है, जहाँ queues की संख्या ही core count थी।\nऔर tag pool साझा है। host_tagset का मतलब ठीक वही है जो वह कहता है: पूरे host adapter के लिए एक tag pool, और वह log line ज़ोर से “shared” कहती है। कार्ड पर हर ड्राइव command slots के उसी सेट से लेती है। चौबीस bay वाली chassis में चौबीस ड्राइव एक controller के tags के लिए होड़ करती हैं।\nदोनों को साथ रखिए। उस laptop SSD के पास 1023 की सोलह निजी queues थीं, हर core के लिए एक, सिर्फ़ अपने प्रति जवाबदेह। वही ड्राइव adapter के पीछे कार्ड की reply queues में से एक हिस्सा पाती है, 128 outstanding commands, और उसी pool से लेने वाले तेईस पड़ोसी।\nPer-core NVMe queue pairs, adapter के एक साझा tag pool के सामने Queues cores के साथ बढ़ती हैं ड्राइव एक pool बाँटती हैं core 0 core 1 core 2 core 3 SQ + CQ SQ + CQ SQ + CQ SQ + CQ 1023 गहरी 1023 गहरी 1023 गहरी 1023 गहरी NVMe SSD /dev/nvme0n1 हर core के लिए एक submission और completion pair अपना MSI-X vector, completion उसी core पर कोई lock नहीं, cores के बीच होड़ नहीं core 0 core 1 core 2 core 3 Tri-mode controller reply queues कार्ड के MSI-X vectors से आती हैं, आपके core count से नहीं हर ड्राइव के लिए एक साझा tag pool sda sdb sdc sdd qd 128 qd 128 qd 128 qd 128 और 20 bays, उसी pool से लेते हुए। हर device पर 128 outstanding, ड्राइव चाहे जितना कर सके ड्राइव जोड़ना एक तय संसाधन को बाँटता है बाईं ओर: हर core के लिए एक queue pair, निजी और 1023 गहरी, completion interrupt भेजने वाले core पर ही लौटता है, ऊपर वाली ड्राइव पर मापा गया। दाईं ओर: हर core controller की reply queues में धकेला गया, एक साझा tag pool से लेता हुआ, हर ड्राइव 128 पर सीमित। तो नुकसान यह नहीं कि SCSI धीमा है। blk-mq पर आधुनिक SCSI ठीक है। नुकसान ढाँचे का है:\nQueues adapter की हैं, ड्राइव की नहीं। ड्राइव जोड़ना एक तय संसाधन को बाँटता है, उसमें जोड़ता नहीं। Tag pool पूरे host में साझा है। भारी load वाली एक ड्राइव बाकियों को भूखा रख सकती है, ऐसे जो तब हो ही नहीं सकता जब हर ड्राइव की अपनी queues हों। Per-device depth 128 पर सीमित है, ड्राइव जितना भी सँभाल सके। Interrupt locality कमज़ोर होती है। Completions उस reply queue पर आते हैं जो controller ने इस्तेमाल की, ज़रूरी नहीं कि भेजने वाले core पर। 1 या 2 की queue depth पर, यानी कभी-कभार read करने वाला एक single-threaded process, इनमें से कुछ महसूस नहीं होता। दोनों तरह आप noise के भीतर वही latency मापेंगे। सज़ा ठीक वहीं दिखती है जहाँ के लिए आपने NVMe ख़रीदा था: बहुत से cores, बहुत से concurrent I/O भेजते हुए। Workload जितना गहरा, ड्राइव का उतना ही बड़ा हिस्सा जिसके पैसे आपने दिए और जिस तक पहुँच नहीं सकते।\nUplink एक x8 slot है Queue model बारीक समस्या है। Bandwidth की छत साफ़ दिखने वाली है, और इसे आप बिना benchmark के Broadcom के अपने product briefs से पढ़ सकते हैं।\n9500 series HBA एक x8 PCIe Gen 4.0 कार्ड है। Broadcom के प्रकाशित आँकड़े 256K sequential read पर 13,700 MB/s और 4K random read पर 3M IOPS हैं। वही brief कहता है कि यह 32 NVMe devices तक support करता है।\nइन दोनों संख्याओं को साथ रखिए और सवाल खुद जवाब दे देता है: adapter ख़त्म करने में कितनी ड्राइव लगती हैं?\nज़्यादा नहीं, और हर साल कम। Gen4 x4 SSD लगभग 7 GB/s देती है। Gen5 x4 SSD लगभग 14। दोनों 2026 में आम parts हैं: इस्तेमाल किए गए U.2 बाज़ार में Gen4 भरी पड़ी है, और नई ख़रीदें तो Gen5 मिलती है।\nछत वहाँ पहुँचने को Gen4 ड्राइव वहाँ पहुँचने को Gen5 ड्राइव HBA 9500, 13,700 MB/s sequential 2 1 HBA 9500, 3M IOPS (4K RR) 3 1–2 eHBA 9600, 6.4M IOPS (4K RR) ~6 ~3 MegaRAID 9600, 1.1M RAID 5 IOPS (4K RW) ~1 ~1 सबसे ऊपर की पंक्ति फिर पढ़िए। एक अकेली Gen5 SSD HBA 9500 की पूरी sequential छत तक पहुँच जाती है। एक ड्राइव, बत्तीस के लिए बने कार्ड में। उसके बाद सब capacity है। Performance नहीं।\nऔर सबसे नीचे की पंक्ति वह है जिसे purchase order रोक देना चाहिए: मौजूदा पीढ़ी के MegaRAID पर RAID 5 में NVMe का पूरा shelf लगभग उतना देता है जितना एक आम ड्राइव अकेले देती है।\nड्राइव x4 पर link भी नहीं करतीं साझा uplink के नीचे एक दूसरा गला-घोंटू है, जो आसानी से छूट जाता है क्योंकि वह headline में नहीं, specification table में बैठा है।\nDell की PERC 12 User\u0026rsquo;s Guide, जो H965i tri-mode controllers को कवर करती है, कहती है:\nSupports drive speeds for NVMe drives are 8 GT/s (Gen 3) and 16 GT/s (Gen 4) at maximum x2 lane width.\nहर NVMe ड्राइव को दो lanes मिलती हैं, चार नहीं। तो uplink की किसी होड़ से पहले, tag pool से पहले, SCSI translation से पहले, Gen4 ड्राइव पहले ही लगभग 3.5 GB/s पर आ जाती है, अपनी क्षमता का आधा। उस bay में Gen5 ड्राइव लगाइए और वह Gen4 x2 पर उतर आती है और अपनी rated bandwidth का लगभग चौथाई देती है।\nइसमें सटीक होना ज़रूरी है कि इससे क्या बदलता है और क्या नहीं। इसका मतलब यह नहीं कि adapter आगे तक चलता है। 9500 का uplink भरने में दो की जगह लगभग चार x2-सीमित ड्राइव लगती हैं, लेकिन सिर्फ़ इसलिए कि हर ड्राइव आधा योगदान दे रही है। रुकावट uplink से हटकर ड्राइव link पर आ गई है। आप कुल जितना निकाल सकते हैं वह बेहतर नहीं हुआ।\nDirect-attached होने पर उन्हीं बत्तीस ड्राइव में से हर एक के पास root complex तक अपना x4 रास्ता होता, उस पीढ़ी पर जो ड्राइव और CPU तय कर सकें।\nउस table की RAID 5 वाली पंक्ति अलग से देखने लायक है, क्योंकि यह Broadcom की अपनी संख्या है और बिना घुमाव के प्रकाशित है। 9600 series brief से:\n900K to 1.1M RAID 5 IOPS (4K RW)\nController firmware में parity RAID सबसे महँगा काम है जो आप tri-mode कार्ड से करवा सकते हैं, और यह मौजूदा पीढ़ी उसे करते हुए है। इसे पढ़ लेना चाहिए, इससे पहले कि कोई चौबीस NVMe ड्राइव पर RAID 5 तय करे और चौबीस ड्राइव जितनी performance की उम्मीद करे।\nदो tri-mode छतों के सामने ड्राइव की संख्या: एक x8 Gen4 कार्ड और एक x16 Gen5 कार्ड 0 15 30 45 60 75 90 कुल GB/s 1 2 3 4 5 6 NVMe ड्राइव Gen5 direct: हर एक लगभग 14 GB/s Gen4 direct: हर एक लगभग 7 GB/s दोनों कार्ड की पहुँच से बाहर PERC13, Gen5 x16: 52.5 GB/s मापा गया HBA 9500, Gen4 x8: 13.7 GB/s 2 Gen4 ड्राइव 9500 तक, 4 Gen5 ड्राइव PERC13 तक भी Vendor और review के आँकड़े, यहाँ मापे नहीं गए। 9500 32 NVMe devices के लिए rated है, PERC13 16 के लिए। दोनों कार्ड हर ड्राइव को x2 पर भी जोड़ते हैं, ये direct-attach lines नहीं। Adapter ख़त्म करने में कितनी ड्राइव लगती हैं, दो छतों के सामने। दो Gen4 ड्राइव HBA 9500 तक पहुँचती हैं; चार Gen5 ड्राइव PERC13 तक भी पहुँच जाती हैं। ये कार्ड क्रमशः बत्तीस और सोलह devices के लिए rated हैं। x16 कार्ड का क्या? ऊपर की हर बात पर साफ़ आपत्ति यह है कि 9500 एक x8 Gen4 कार्ड है, और छत एक तंग host link की देन है। Adapter को Gen5 की सोलह lanes दीजिए और समस्या चली जाती है।\nयह उचित आपत्ति है, और इसे कमज़ोर उदाहरण नहीं, सबसे मज़बूत उदाहरण मिलना चाहिए। तो Dell का PERC13 H975i लीजिए: मौजूदा पीढ़ी, और tri-mode जितना अच्छा हो सकता है उतना। उसकी user\u0026rsquo;s guide “Gen 4 and Gen 5 PCIe x16 host interfaces” बताती है, और StorageReview ने सोलह NVMe ड्राइव तक के साथ हर controller पर 52.5 GB/s और 12.5M IOPS मापे।\nये गंभीर संख्याएँ हैं, और तस्वीर को काफ़ी बदलती हैं। 9500 के 13,700 MB/s और 3M IOPS के मुक़ाबले यह लगभग चार गुना bandwidth और चार गुना IOPS है, आधी ड्राइव पर फैला हुआ। Dell ने सिर्फ़ पाइप चौड़ा नहीं किया, उन्होंने fan-out भी आधा कर दिया, और नतीजे में oversubscription अनुपात सुधर गया। ख़ासकर IOPS पर, सोलह ड्राइव पर 12.5M लगभग 780K प्रति ड्राइव है, जो एक आम ड्राइव के अकेले देने के क़रीब है। उस बिंदु पर controller सचमुच आपको रोकने वाली चीज़ नहीं है।\nतो जहाँ श्रेय बनता है, वहाँ दीजिए: आधुनिक x16 Gen5 tri-mode कार्ड x8 Gen4 वाले से कहीं बेहतर engineering है, और अगर bandwidth ही आपकी एकमात्र आपत्ति थी, तो x16 काफ़ी हद तक उसका जवाब है।\nतीन चीज़ें यह ठीक नहीं करता।\nड्राइव अब भी x2 पर link करती हैं। इसने मुझे चौंकाया। PERC13 guide, एक Gen5 x16 controller के बारे में, अब भी कहती है:\nSupports drive speeds for NVMe drives are 8 GT/s (Gen 3), 16 GT/s (Gen 4), and 32 GT/s (Gen 5) at maximum x2 lane width.\nचौड़ा host link नीचे के drive links को चौड़ा नहीं करता। Dell जो सबसे नया, सबसे तेज़ tri-mode RAID controller बेचता है, उस पर हर NVMe ड्राइव अब भी चार की जगह दो lanes से जुड़ी है, और कुछ और होने से पहले ही अपनी आधी bandwidth छोड़ देती है।\nQueue model बिल्कुल अछूता है। इस पोस्ट के queue वाले हिस्से में कुछ भी host link की चौड़ाई पर निर्भर नहीं। nr_hw_queues controller के MSI-X reply queue बँटवारे से आता है; 128 की per-device depth एक driver और firmware constant है; tag pool पूरे host में साझा है क्योंकि host_tagset ऐसा कहता है। Host link को x16, x32, जो चाहें कर दीजिए: ड्राइव अब भी कार्ड की queues बाँटने वाले SCSI targets हैं, अब भी कोई /dev/nvme0n1 नहीं, और आप अब भी किसी ड्राइव को VM को नहीं दे सकते।\nऔर x16 bandwidth बनाता नहीं, वह उन्हीं lanes को फैलाता है जो आपके पास पहले से थीं। यही तर्क असल में बात ख़त्म करता है। PERC13 में सोलह Gen5 lanes आपको सोलह bays में बँटे 52.5 GB/s देती हैं। वही सोलह lanes सीधे चार Gen5 ड्राइव से x4 पर जोड़िए और चार bays में लगभग 56 GB/s मिलते हैं: उन्हीं lanes से वही bandwidth, बस हर ड्राइव को अपना पूरा x4, हर core के लिए अपना queue pair, और एक असली nvme device node मिलता है।\nतो x16 tri-mode कार्ड का ईमानदार वर्णन “तेज़ adapter” नहीं है। वह एक lane multiplexer है: वह lanes के एक तय बजट को ज़्यादा drive bays में बदलता है, और इस बदलाव की क़ीमत queue model से वसूलता है। यह सौदा अच्छा है या नहीं, यह एक चीज़ पर निर्भर है। Bays या parallelism।\nसारे bays भरने पर क्या होता है जो हमें उस मामले पर लाता है जो असल में मायने रखता है, क्योंकि कोई 24-bay chassis चार ड्राइव लगाने के लिए नहीं ख़रीदता।\nSaturation बिंदु के बाद कुल line सपाट है। ड्राइव जोड़ने से capacity जुड़ती है, और कुछ नहीं, इसलिए हर ड्राइव की performance 1/N के हिसाब से गिरती है। असली संख्याओं पर यह हिसाब बेरहम है:\nHBA 9500 पर ड्राइव कुल प्रति ड्राइव एक Gen4 ड्राइव का हिस्सा 2 13.7 GB/s 6.9 GB/s 98% 12 13.7 GB/s 1.14 GB/s 16% 24 13.7 GB/s 0.57 GB/s 8% सबसे नीचे की पंक्ति देखिए। HBA 9500 के पीछे चौबीस NVMe ड्राइव लगभग 570 MB/s हर एक देती हैं। एक SATA SSD लगभग 550 देती है। आपने चौबीस NVMe ड्राइव ख़रीदीं, उन्हें जोड़ने के लिए tri-mode controller के पैसे दिए, और पहुँचे SATA दर्जे की प्रति-ड्राइव bandwidth पर।\nIOPS का हिसाब भी इसी शक्ल का है: चौबीस ड्राइव पर 3M यानी हर एक 125K, जबकि एक आम Gen4 ड्राइव अकेले 1M सँभालती है, यानी आपके पास जो है उसका लगभग आठवाँ हिस्सा।\nx16 कार्ड इसे काफ़ी सुधारता है लेकिन इससे बचता नहीं। अपनी पूरी सोलह ड्राइव पर PERC13 52.5 GB/s ÷ 16 = 3.3 GB/s प्रति ड्राइव है, यानी एक Gen5 ड्राइव का लगभग 23%, और यह x2 link के फिर से आधा करने से पहले है।\nज़्यादा ड्राइव पर दो असर भाग के हिसाब से भी बुरे हैं:\nTag की भूख ड्राइव-से-ड्राइव फैलती है। साझा host tag pool का मतलब है कि भारी load वाली एक ड्राइव वे slots खा सकती है जो दूसरी ड्राइव को चाहिए। चौबीस devices, हर एक को नाम के लिए 128 outstanding commands की इजाज़त, आपस में 3,072 माँगते हैं, एक controller के can_queue से। अलग-अलग ड्राइव के बीच head-of-line blocking ऐसी विफलता है जो तब होती ही नहीं जब हर ड्राइव की अपनी queues हों। Rebuild हर चीज़ पर पड़ता है। भरे shelf पर parity rebuild एक साझा uplink को भर देता है, इसलिए कार्ड पर हर दूसरी ड्राइव का foreground I/O उसी समय गिरता है। अलग lanes पर ड्राइव और software RAID के साथ rebuild CPU के लिए होड़ करता है, एक पाइप के लिए नहीं। जब इसमें से कुछ भी मायने नहीं रखता एक ज़रूरी संतुलन है, और यही वजह है कि बहुत से 24-bay tri-mode सर्वर बिल्कुल ठीक चलते हैं।\nAdapter की छत तभी चुभती है जब नीचे कोई चीज़ उसके देने से ज़्यादा ले सके। 2 × 25GbE वाले सर्वर के पास 6.2 GB/s नेटवर्क है: वह HBA 9500 तक को नहीं भर सकता। अगर वे चौबीस ड्राइव उस link पर फ़ाइलें देने वाला capacity tier हैं, तो adapter रुकावट के पास भी नहीं, और ऊपर का प्रति-ड्राइव हिसाब बेमानी है।\nयह उस पल मायने रखने लगता है जब लेने वाला कार्ड से तेज़ हो जाए: 100GbE (12.5 GB/s) अकेले ही आपको 9500 की पूरी sequential छत के बराबर ला देता है, और local workloads, यानी databases, compilation, analytics, व्यस्त guests वाले virtualisation hosts, के रास्ते में नेटवर्क होता ही नहीं।\nतो भरे shelf के बारे में पूछने का सवाल “क्या adapter धीमा है” नहीं, बल्कि “इसे कौन लेगा, और क्या वह कार्ड के देने से ज़्यादा ले सकता है?” है। अगर जवाब 25GbE link है, तो चिंता छोड़िए। अगर जवाब 100GbE, NVMe-oF या local database है, तो कार्ड आपकी रुकावट है और ड्राइव की संख्या उसे और बिगाड़ रही है।\nऔर क्या ग़ायब हो जाता है Throughput के अलावा, NVMe ड्राइव को SCSI disk के रूप में पेश करने का मतलब है कि आपके toolkit के NVMe वाले हिस्से काम करना बंद कर देते हैं:\nDirect-attached Tri-mode adapter के पीछे Device node /dev/nvme0n1 /dev/sdb Driver nvme mpt3sas / mpi3mr nvme-cli काम करता है बात करने को कुछ नहीं सेहत का डेटा NVMe SMART log pages अनुवादित SCSI log pages Namespace management हाँ नहीं Firmware update nvme fw-download controller के ज़रिए vendor tool Format / sanitize NVMe Format NVM SCSI के समकक्ष, अगर लागू हों Hardware queues हर core के लिए एक pair (ऊपर की मशीन पर 16) कार्ड की reply queues, हर ड्राइव में साझा Queue depth हर queue पर 1023 हर device पर 128 एक नतीजा इतनी बार लोगों को पकड़ता है कि अलग से कहना चाहिए: आप किसी एक ड्राइव को virtual machine को pass through नहीं कर सकते। PCIe passthrough के लिए ड्राइव को अपने IOMMU group वाला PCIe endpoint होना चाहिए, और tri-mode adapter के पीछे वह नहीं है: मौजूद एकमात्र PCIe device controller है। आप पूरा adapter, उससे जुड़ी हर ड्राइव समेत, pass through कर सकते हैं, या कुछ नहीं। अगर आपकी योजना में ख़ास NVMe ड्राइव ख़ास guests को देना था, तो backplane के फ़ैसले ने वह पहले ही आपके लिए तय कर दिया है।\n2026 में असल में यह किसे चाहिए? यहाँ इस पोस्ट की शुरुआत वाली बात को एक कठिन सवाल का सामना करना पड़ता है, क्योंकि जिस दुनिया के लिए वह बनी थी वह ज़्यादातर जा चुकी है।\nTri-mode तब सोचा गया था जब NVMe वह महँगा tier था जो आप SAS estate में जोड़ते थे। 2026 में यह उलटा है: NVMe default है, U.2 enterprise ड्राइव इस्तेमाल किए गए बाज़ार में भरपूर और सस्ती हैं, और “एक chassis में मिली-जुली SAS, SATA और NVMe” असल deployments में कम से कम दिखती है। तो असल में इसे कौन ख़रीद रहा है?\nज़्यादातर कोई नहीं, जानबूझकर। ईमानदार जवाब यह है कि ज़्यादातर tri-mode controllers चुने नहीं गए। वे आ गए, क्योंकि सर्वर vendor एक भेजता है, और vendor एक इसलिए भेजता है क्योंकि एक अकेला U.3 backplane SKU उन्हें एक ही chassis से SAS, SATA और NVMe configurations बेचने देता है। यह OEM की supply-chain जीत है। आपकी performance के लिए यह कुछ नहीं करता, और इसलिए इसे कभी ऐसा करने वाला बताकर बेचा भी नहीं गया।\nतीन पुराने औचित्य अब ठीक से टिकते नहीं:\n“मुझे मिली-जुली ड्राइव चाहिए।” एक ही chassis में शायद ही, और जब चाहिए भी, तब tri-mode अकेला रास्ता नहीं। घूमने वाली disks के लिए एक सादा SAS HBA और root complex से जुड़ा NVMe आपको दोनों देता है, किसी पर सज़ा के बिना। मिला-जुला estate का मतलब मिला-जुला controller नहीं।\n“मेरे पास काफ़ी PCIe lanes नहीं हैं।” 2019 में 24 bays वाले 40-lane platforms पर यह असली तर्क था। एक single-socket Genoa या Turin Epyc में 128 lanes हैं। x4 पर चौबीस ड्राइव 96 हैं। जो कमी ड्राइव को एक controller के पीछे इकट्ठा करने को जायज़ ठहराती थी वह लगभग चली गई है, और जहाँ नहीं गई, वहाँ PCIe switch protocol ख़त्म किए बिना यह काम कर देता है।\n“Bays universal होने चाहिए।” इसे ध्यान से अलग करना ज़रूरी है, क्योंकि यही वह तर्क है जो सबसे ज़्यादा ग़लत component को सही ठहराने में इस्तेमाल होता है। U.3 एक backplane standard है, controller की ज़रूरत नहीं। U.3 backplane को tri-mode controller की जगह सीधे CPU की PCIe lanes से cable किया जा सकता है, और vendors दोनों topologies document करते हैं। आप universal bays रख सकते हैं और tax हटा सकते हैं। अगर आपको विरासत में tri-mode सर्वर मिला है, तो सबसे क़ीमती चीज़ जो आप जाँच सकते हैं वह यह है कि backplane को सीधे re-cable किया जा सकता है या नहीं।\nअसल में जो बचता है:\nघनत्व पर hardware RAID, जहाँ policy या platform इसे माँगे: कोई audit की ज़रूरत, कोई support matrix, Windows या ESXi deployment जिसमें यह काम करने को कोई software परत नहीं। यही असली बचा हुआ बाज़ार है, यह वह एक मामला है जहाँ आप connectivity नहीं, RAID engine ख़रीद रहे हैं, और मौजूदा silicon पर यह सक्षम product है: सोलह lanes से, supercap-सुरक्षित cache के साथ hardware RAID 5 में सोलह NVMe ड्राइव ऐसी चीज़ है जो direct attachment दे ही नहीं सकता। बड़ी मात्रा में SAS HDD capacity, जहाँ £/TB अब भी साफ़ तौर पर घूमने वाली disks का है। लेकिन यह सादे SAS HBA का काम है, और सस्ता। बहुत बड़ी bay संख्या और बाहरी enclosures, जहाँ SAS expanders PCIe से आगे और चौड़ा पहुँचते हैं। ऐसे workloads जो कभी गहरे नहीं जाते। अगर आपकी queue depths इकाई अंकों में रहती हैं, तो इसमें से कुछ महसूस नहीं होता। बहुत से असली सिस्टम यहीं ख़ुशी से रहते हैं। एक सादा operational तर्क भी है: एक enclosure type, एक driver, shelf पर एक spare, और general-purpose virtualisation host के लिए इसकी असली क़ीमत है। बस इसे ईमानदारी से उस तथ्य के सामने तौलिए कि ऊपर की table के हिसाब से एक Gen5 ड्राइव पूरे कार्ड की sequential छत तक पहुँच सकती है।\nजब यह ग़लत औज़ार है यह सौदा उतना ही बुरा होता है जितना आपके workload में concurrency है।\nCeph सबसे साफ़ मामला है। एक storage node हर ड्राइव पर एक OSD चलाता है, हर एक के अपने thread pools, सब एक साथ I/O भेजते हुए, और फिर पूरे cluster के clients उन्हें एक साथ चलाते हैं। यही साझा tag pool का सबसे बुरा मामला है: एक controller के command slots के लिए होड़ करते चौबीस daemons, हर ड्राइव 128 outstanding पर सीमित, सब कुछ एक x8 uplink से धकेला हुआ। उन ड्राइव को सीधे root complex पर लगाइए और हर OSD को अपनी queues, अपने tags और अपनी lanes मिलती हैं। All-NVMe Ceph node के data path में tri-mode adapter नहीं होना चाहिए।\nयही तर्क NVMe-oF targets पर लागू होता है, जहाँ आप ड्राइव को फिर से export कर रहे हैं और serialisation की हर परत जुड़ती जाती है; गहरे asynchronous I/O वाले databases पर; और io_uring या SPDK पर बनी किसी भी चीज़ पर, जो ठीक उन्हीं per-core queues का फ़ायदा उठाने के लिए बनी हैं जो adapter ने अभी छीन लीं।\nसामान्य नियम: आपका software जितना parallelism इस्तेमाल करने के लिए लिखा गया है, tri-mode adapter उसकी उतनी ही क़ीमत वसूलता है।\nकैसे पता करें कि आपके पास क्या है अगर आपको विरासत में सर्वर मिला है और जानना है कि आप इसके किस तरफ़ हैं:\n# What is the transport? \u0026#34;nvme\u0026#34; is direct, \u0026#34;sas\u0026#34; means it went through a controller lsblk -o NAME,TRAN,MODEL,SIZE # Is there a tri-mode controller in the machine at all? lspci -nn | grep -Ei \u0026#39;sas|megaraid|serial attached\u0026#39; # Which driver claimed the disk? ls -l /sys/block/sdb/device/driver # Per-device queue depth — 128 is the mpt3sas NVMe default cat /sys/block/sdb/device/queue_depth # How many hardware queues does this device actually get? ls /sys/block/sdb/mq/ | wc -l ls /sys/block/nvme0n1/mq/ | wc -l # compare against a direct-attached drive # On a direct-attached drive, what did the controller actually grant? # One admin queue plus one I/O queue per core, so expect nproc + 1 cat /sys/class/nvme/nvme0/queue_count nproc # The driver says it out loud at load time dmesg | grep -i \u0026#39;nr_hw_queues\u0026#39; आख़िरी वाला वही Max SCSIIO MPT commands: N shared with nr_hw_queues = M लाइन छापता है जो पहले उद्धृत की गई। अगर उस मशीन पर nvme list ख़ाली है जिसके बारे में आपको बताया गया कि वह पूरी flash NVMe है, तो वजह adapter है।\nछोटे में Tri-mode adapter आपकी NVMe ड्राइव को SCSI disks में बदल देता है। यह बदलाव कोई side effect नहीं। यही वह तरीक़ा है जिससे एक कार्ड तीन protocol सँभालता है, और यही आप ख़रीद रहे हैं।\nआप जो छोड़ते हैं वह ख़ास और मापने लायक है: per-core queue pairs की जगह controller की साझा reply queues, 128 की per-device depth, कार्ड की हर ड्राइव में बँटा tag pool, x2 link जहाँ ड्राइव x4 चाहती थी, और एक साझा uplink जहाँ पहले हर ड्राइव के पास root complex तक अपना रास्ता था। Adapter connection नहीं रहता, रुकावट बन जाता है, और मौजूदा hardware पर जल्दी बन जाता है: दो Gen4 ड्राइव HBA 9500 तक पहुँचती हैं, चार Gen5 ड्राइव PERC13 तक भी।\nचौड़ा host link मदद करता है, x16 Gen5 कार्ड के पास x8 Gen4 वाले से लगभग चार गुना bandwidth और IOPS है, लेकिन यह शक्ल नहीं बदलता। यह bays ख़रीदता है, parallelism नहीं: वही सोलह lanes सीधे चार ड्राइव से जोड़ने पर queue tax के बिना वही bandwidth मिलती है। और यह भरे shelf को नहीं बचाता। 9500 के पीछे चौबीस ड्राइव हर एक लगभग 570 MB/s पाती हैं, जो एक SATA SSD देती है।\n2019 में, जब NVMe वह tier था जो आप SAS estate में जोड़ते थे और platforms के पास lanes कम थीं, यह ठीक सौदा था। 2026 में आमतौर पर नहीं। NVMe default है, इस्तेमाल की गई U.2 ड्राइव सस्ती हैं, single-socket Epyc के पास lanes बचती हैं, और जो एक फ़ायदा अब भी खड़ा है, universal drive bays, वह U.3 backplane का है, controller का नहीं। बहुत बार आप backplane को सीधे CPU से cable करके bays रख सकते हैं और tax हटा सकते हैं।\nतो tri-mode adapter तब ख़रीदिए जब आप उसका RAID engine ख़रीद रहे हों और आपको उसकी ज़रूरत हो। लचीलेपन के लिए मत ख़रीदिए, और अगर आपको NVMe से भरी chassis में एक विरासत में मिला है, तो जाकर पता कीजिए कि वह backplane कैसे cable किया गया है।\nउन ड्राइव के लिए दो बार पैसे देने का कोई मतलब नहीं जिन्हें आप फिर ठीक से इस्तेमाल भी नहीं कर सकते।\n","permalink":"https://blogs.damiendye.uk/hi/hardware/tri-mode-adapters-nvme-as-sas/","summary":"Tri-mode adapter हर bay में SAS, SATA या NVMe लगने देता है: असली लचीलापन, और U.3 backplane के होने की वजह। जो वह नहीं बताता, वह यह कि आपकी NVMe ड्राइव NVMe ड्राइव नहीं रहतीं: वे Linux में mpt3sas पर SCSI disk बनकर आती हैं, queue depth 128, एक साझा tag pool और एक x8 uplink के साथ। दो Gen4 ड्राइव कार्ड को भर देती हैं। एक अकेली Gen5 ड्राइव पहले ही उससे आगे है। 2026 में यह सौदा अब भी ठीक है या नहीं, और universal bay controller के नहीं, backplane के क्यों हैं।","title":"Tri-Mode Adapter लचीलापन ख़रीदते हैं, क़ीमत आपकी NVMe queues से चुकती है"},{"content":"वह धारणा जो Ansible आम तौर पर बना सकता है आपने जो भी Ansible मॉड्यूल इस्तेमाल किया है, लगभग हर एक ऐसे काम करता है: Ansible इन्वेंटरी में लिखे होस्ट से कनेक्ट होता है, उस पर एक छोटा Python प्रोग्राम कॉपी करता है, उसे चलाता है, और नतीजा वापस पढ़ता है। होस्ट ही वह चीज़ है जो बदली जा रही है, और वही काम भी कर रहा है।\nवर्चुअल मशीन बनाना इस बात को सबसे बुनियादी तरीक़े से तोड़ देता है। जो होस्ट आप बना रहे हैं, वह मौजूद ही नहीं है। न उसका IP है, न SSH daemon, न Python, न ऑपरेटिंग सिस्टम। कनेक्ट करने को कुछ है ही नहीं।\nइसलिए community.proxmox कॉन्फ़िगरेशन एजेंट नहीं है। यह एक API क्लाइंट है जो संयोग से Ansible collection के रूप में आता है। इस पोस्ट में सब कुछ इसी एक बात से निकलता है: टास्क कहाँ चलते हैं, क्रेडेंशियल अंदर कैसे पहुँचाते हैं, दोबारा चलाने पर वह क्यों नहीं होता जो आप सोचते हैं, और --check आपको सच क्यों नहीं बता रहा।\nयहाँ के उदाहरण एक प्लेबुक से काटकर छोटे किए गए हैं जो NetBox रिकॉर्ड से Windows और Linux VM बनाती है: proxmox-create-vms.yml। पढ़ने में आसानी के लिए मैंने नोड, स्टोरेज और ब्रिज के नाम सामान्य कर दिए हैं। असली चीज़ उसी रिपॉज़िटरी में है।\nनीचे मॉड्यूल के व्यवहार के बारे में मेरा हर दावा community.proxmox 1.6.0 पर जाँचा गया है, जो मेरे यहाँ इंस्टॉल वर्ज़न है:\n$ ansible-galaxy collection list community.proxmox # /home/damien/.ansible/collections/ansible_collections Collection Version ----------------- ------- community.proxmox 1.6.0 पहली बात: collection की जगह बदल गई है अगर आप कोई पुरानी प्लेबुक या पुराना जवाब पढ़ रहे हैं, तो मॉड्यूल का नाम community.general.proxmox_kvm था। अब वे एक अलग collection में रहते हैं, और डेवलपमेंट वहीं हो रहा है। वर्ज़न 1.6.0 में 47 मॉड्यूल हैं, जो Ceph, SDN, फ़ायरवॉल, HA नियम और क्लस्टर join तक को कवर करते हैं। community.general के दौर में इनमें से कुछ भी नहीं था।\nansible-galaxy collection install community.proxmox pip install \u0026#39;proxmoxer\u0026gt;=2.0\u0026#39; requests Python dependency वैकल्पिक नहीं है और साथ में बंडल भी नहीं है: collection requirements: [\u0026quot;proxmoxer \u0026gt;= 2.0\u0026quot;, \u0026quot;requests\u0026quot;] घोषित करता है, और इन्हें वहाँ इंस्टॉल होना चाहिए जहाँ मॉड्यूल असल में चलता है। और जैसा अगला सेक्शन बताता है, वह जगह Proxmox नोड नहीं है।\nअगर आप वर्ज़न पिन करना चाहें तो requirements.yml:\n--- collections: - name: community.proxmox version: \u0026#34;\u0026gt;=1.6.0\u0026#34; collection को ansible-core 2.17 से 2.20 तक पर टेस्ट किया गया है। अपने community.general.proxmox_* टास्क का नाम बदलकर community.proxmox.proxmox_* करना ही ज़्यादातर माइग्रेशन है।\nहर Proxmox टास्क localhost पर चलता है play के ऊपर की दो लाइनें सारा भारी काम करती हैं, और दोनों ऐसी दिखती हैं मानो कोई काम की चीज़ बंद कर रही हों:\n- name: Create Proxmox virtual machines hosts: \u0026#34;{{ target_hosts | default(\u0026#39;cluster_pve:\u0026amp;status_planned\u0026#39;) }}\u0026#34; gather_facts: false serial: 1 gather_facts: false कोई optimisation नहीं है। फ़ैक्ट इकट्ठा करने के लिए इन्वेंटरी होस्ट से कनेक्ट होना पड़ता है, और इन्वेंटरी होस्ट एक ऐसी VM है जो अभी बनी ही नहीं। इसे चालू छोड़ें तो play पहले टास्क से पहले ही फ़ेल हो जाता है।\nफिर हर Proxmox टास्क में delegate_to: localhost होता है:\n- name: Create Proxmox VM delegate_to: localhost register: created_vm community.proxmox.proxmox_kvm: api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; node: \u0026#34;{{ proxmox_api_host }}\u0026#34; ... अब इन्वेंटरी होस्ट बस एक नाम और वेरिएबल्स की एक थैली है। inventory_hostname VM का नाम बन जाता है, और उसके वेरिएबल्स उस मशीन का वर्णन करते हैं जो आप चाहते हैं। उससे कुछ भी कनेक्ट नहीं होता। टास्क कंट्रोल नोड पर चलता है, जो api_host से HTTPS सेशन खोलता है और VM की परिभाषा भेज देता है।\nआपको यही चीज़ local_action: के रूप में भी लिखी दिखेगी, जो उसी काम का पुराना सिंटैक्स है। उस रिपॉज़िटरी की teardown प्लेबुक हर जगह यही इस्तेमाल करती है। दोनों बराबर हैं। delegate_to आज की वर्तनी है।\nबच निकलने का रास्ता नोड की ओर जाता है कुछ काम सच में Proxmox होस्ट पर ही होने चाहिए, और वे टास्क बिल्कुल अलग जगह delegate होते हैं:\n- name: Fail if no ISO file exists for the OS delegate_to: \u0026#34;{{ proxmox_api_host }}\u0026#34; ansible.builtin.stat: path: \u0026#34;{{ iso | replace(\u0026#39;isos:\u0026#39;, \u0026#39;/mnt/pve/isos/template/\u0026#39;) }}\u0026#34; register: iso_file failed_when: not iso_file.stat.exists यह एक असली नोड से असली SSH कनेक्शन है, जो shared स्टोरेज पर एक असली path जाँच रहा है। वजह यह है कि API ख़ुशी-ख़ुशी ऐसा ISO reference स्वीकार कर लेगा जो किसी फ़ाइल तक नहीं पहुँचता, और यह बात बूट के समय के बजाय अभी पता चल जाए तो बेहतर है। ध्यान दें कि स्ट्रिंग की चीर-फाड़ करके PVE स्टोरेज reference (isos:iso/debian.iso) को फ़ाइलसिस्टम path में बदला जा रहा है। stat के पास स्टोरेज abstraction नहीं होता।\nतो एक ही play में टास्क तीन अलग-अलग जगहों पर चल रहे होते हैं, और इन्हें आपस में मिला देना ही इन प्लेबुक के फ़ेल होने का सबसे आम कारण है:\nProxmox build playbook का हर टास्क असल में कहाँ चलता है Ansible control node delegate_to: localhost proxmox_kvm proxmox_vm_info proxmox_disk proxmox_access_acl इनमें से हर एक HTTPS client है, agent नहीं proxmoxer \u0026#8805; 2.0 + requests यहाँ इंस्टॉल, नोड पर नहीं gather_facts: false Proxmox नोड: pve1 pvedaemon, REST API पोर्ट 8006 पर qm, /etc/pve, storage VM की परिभाषा यहाँ पहुँचती है जो VM आप बना रहे हैं न IP \u0026#183; न SSH \u0026#183; न Python कोई OS नहीं inventory में यह सिर्फ़ एक नाम और vars का थैला है API SSH qm set stat जोड़ने को कुछ नहीं बाद की play तक नहीं एक play में तीन execution context। Proxmox मॉड्यूल कभी नोड या guest को नहीं छूते, वे प्लेबुक के बगल में चल रहे HTTPS क्लाइंट हैं। qm वाला रास्ता ही अकेला हिस्सा है जिसे hypervisor तक SSH चाहिए। क्रेडेंशियल, और एक डिफ़ॉल्ट जो बदलने वाला है auth के विकल्प collection के हर मॉड्यूल में एक documentation fragment के ज़रिए साझा होते हैं, इसलिए हर जगह एक जैसे हैं: api_host, api_user, और फिर या तो api_password या फिर जोड़ी api_token_id / api_token_secret। ये सब environment variables पर fallback करते हैं: PROXMOX_HOST, PROXMOX_USER, PROXMOX_PASSWORD, PROXMOX_TOKEN_ID, PROXMOX_TOKEN_SECRET, PROXMOX_VALIDATE_CERTS। secrets को play से पूरी तरह बाहर रखने का यही सबसे साफ़ तरीक़ा है।\nAPI टोकन बेहतर डिफ़ॉल्ट है। उसका दायरा सीमित होता है, किसी इंसान का पासवर्ड बदले बिना उसे रद्द किया जा सकता है, और उसे ठीक वही अधिकार दिए जा सकते हैं जो प्लेबुक को चाहिए, न कि वे जो किसी व्यक्ति के पास संयोग से हों:\n- name: Create Proxmox VM delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; validate_certs: true ca_path: /etc/ssl/certs/pve-cluster-ca.pem validate_certs आज ही साफ़-साफ़ सेट कीजिए। collection का अपना documentation इसे सीधे कहता है:\nCurrently defaults to false and changes default to true with community.proxmox 2.0.0.\nमतलब जो प्लेबुक इसका ज़िक्र ही नहीं करती, वह अभी TLS validate नहीं कर रही, और जिस पल कोई --upgrade चलाएगा, वह validate करना शुरू कर देगी। यानी हर नए Proxmox इंस्टॉल के साथ आने वाले self-signed सर्टिफ़िकेट पर फ़ेल होना भी शुरू कर देगी। यह फ़ैसला सोच-समझकर लेना बेहतर है, बजाय इसके कि यह किसी बिल्ड के बीच में आ गिरे। अगर आप self-signed सर्टिफ़िकेट रख रहे हैं, तो validate_certs: false लिखिए और यह कमी स्वीकार कीजिए। अगर आपके पास ठीक-ठाक chain है, तो ca_path उस पर पॉइंट कीजिए। दोनों में से कुछ भी हो, बात लिखित में रहती है।\nकम से कम जितना चाहिए, उतना create प्रोडक्शन वाले टास्क को छीलकर सिर्फ़ उतना रखिए जो सच में मशीन को परिभाषित करता है, तो वह पढ़ने लायक़ हो जाता है:\n- name: Create Proxmox VM delegate_to: localhost register: created_vm community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; validate_certs: true node: pve1 name: \u0026#34;{{ inventory_hostname }}\u0026#34; cores: \u0026#34;{{ vcpus | int }}\u0026#34; memory: \u0026#34;{{ memory }}\u0026#34; machine: q35 bios: ovmf ostype: l26 scsihw: virtio-scsi-single scsi: scsi0: \u0026#34;vmdata:32,format=qcow2,discard=on,ssd=1\u0026#34; sata: sata0: \u0026#34;isos:iso/debian-13-netinst.iso,media=cdrom\u0026#34; net: net0: \u0026#34;virtio,bridge=vmbr0\u0026#34; efidisk0: storage: vmdata format: raw efitype: 4m pre_enrolled_keys: true boot: \u0026#34;order=scsi0;sata0\u0026#34; agent: \u0026#34;enabled=1,fstrim_cloned_disks=1\u0026#34; onboot: true tags: - production अपना ख़ुद का लिखने से पहले इस ढांचे की कुछ बातें जान लेना अच्छा है।\nडिवाइस वाले विकल्प YAML के अंदर PVE सिंटैक्स हैं। scsi, sata, net, virtio, ide सब dict टाइप के हैं, जिनकी keys scsi0, net0 वग़ैरह हैं, और values सीधे man qm से निकली comma से अलग की गई option strings हैं: डिस्क के लिए \u0026lt;storage\u0026gt;:\u0026lt;size\u0026gt;,option=value, NIC के लिए [model=]\u0026lt;enum\u0026gt;,option=value। मॉड्यूल इन्हें model नहीं करता, बस आगे भेज देता है। जब कुछ reject होता है, तो जवाब PVE options reference में मिलेगा, Ansible docs में नहीं।\nआपको ये YAML mapping के बजाय JSON string के रूप में भी लिखे दिखेंगे:\nnet: \u0026#39;{\u0026#34;net0\u0026#34;:\u0026#34;virtio,bridge={{ vlan_bridge }}\u0026#34;}\u0026#39; दोनों चलते हैं। dict टाइप वाले पैरामीटर के लिए Ansible string को अपने आप बदल लेता है। JSON वाला रूप इसलिए है कि पूरे ढांचे को एक Jinja expression में template करना आसान होता है। mapping वाला रूप छह महीने बाद पढ़ने में आसान होता है।\nboot के सिंटैक्स की दो पीढ़ियाँ हैं। मॉड्यूल पुराने अक्षर स्वीकार करता है, जहाँ boot: \u0026quot;cdn\u0026quot; का मतलब है “पहले डिस्क, फिर CD-ROM, फिर नेटवर्क”। आज का PVE साफ़ क्रम वाली सूची चाहता है, boot: \u0026quot;order=scsi0;sata0;net0\u0026quot;, जिसमें कौन सी डिस्क, इस पर कोई शक नहीं रहता। पुराना रूप अब भी चलता है। नए काम में आपको साफ़ वाला रूप चाहिए। मॉड्यूल docs में दबी एक असली पकड़: PVE 8.3.5 से नेटवर्क बूट के लिए rng0 सेट करना ज़रूरी है।\nnuma और numa_enabled अलग-अलग पैरामीटर हैं। numa_enabled वह boolean है जो NUMA चालू करता है। numa एक dict है जो topology बताता है (cpus, hostnodes, memory, policy)। numa: true सेट करना type error है, और इसमें आसानी से एक घंटा चला जाता है। अगर आपको जानना है कि यह सब क्यों मायने रखता है, तो Proxmox पर NUMA alignment असली समस्या को कवर करता है।\nmachine: q35 और bios: ovmf सही डिफ़ॉल्ट हैं, सजावट नहीं। पूरा तर्क यहाँ है।\nvmid छोड़ देने का मतलब है कि मॉड्यूल API से अगली ख़ाली ID माँगता है। सुविधाजनक है, और अगली समस्या की सीधी वजह भी।\nserial: 1 क्यों “अगली उपलब्ध ID लो, फिर उससे VM बनाओ” दो API कॉल हैं जिनके बीच एक फ़ासला है। दो workers एक साथ यह करें तो दोनों एक ही ख़ाली ID पढ़ सकते हैं, और हारने वाले को error मिलता है, या उससे बुरा, कोई अचंभा।\nserial: 1 create वाले चरण को एक बार में एक होस्ट तक सीमित कर देता है। यह तेज़ नहीं है, और इसे होने की ज़रूरत भी नहीं। VM बनाने का महँगा हिस्सा इस प्लेबुक के काम सौंप देने के बाद होता है। तैयार VMs को स्टार्ट करने वाला साथी play serial: 5 इस्तेमाल करता है, क्योंकि स्टार्ट करने में कोई साझा काउंटर नहीं जिस पर होड़ लगे।\nअगर आपको parallelism चाहिए, तो VMID ख़ुद अपने source of truth से अलॉट कीजिए और उसे साफ़ तौर पर पास कीजिए। फिर न कोई read-modify-write होता है, न कोई race।\nIdempotency वैसी नहीं है जैसी आप उम्मीद करते हैं यह सेक्शन दो बार पढ़ने वाला है, क्योंकि proxmox_kvm का बर्ताव ansible.builtin.package जैसा नहीं है।\nname कोई पहचान नहीं है। Proxmox क्लस्टर में VM के नाम unique नहीं होते, और मॉड्यूल ख़ुद यह कहता है। state: present के साथ और बिना vmid के, अगर उस नाम की VM पहले से है, तो मॉड्यूल changed=false और msg: \u0026quot;VM with name \u0026lt;x\u0026gt; already exists\u0026quot; के साथ बाहर निकल जाता है और कुछ नहीं करता। वह आपके पैरामीटर की असलियत से तुलना नहीं करता। converge नहीं करता। वह मना कर देता है।\nupdate का डिफ़ॉल्ट false है। तो प्लेबुक में memory: बदलकर दोबारा चलाना कुछ नहीं करता। VM उसी मेमोरी के साथ रहती है जिससे वह बनी थी, टास्क सफलता बताता है, और कहीं भी कुछ नहीं बताता कि दोनों अलग हो चुके हैं।\nupdate: true भी दिलचस्प पैरामीटर बदलने से मना करता है। मॉड्यूल documentation से:\nBecause of the operations of the API and security reasons, I have disabled the update of the following parameters net, virtio, ide, sata, scsi. Per example updating net update the MAC address and virtio create always new disk…\nupdate_unsafe: true यह रोक हटा देता है, और चेतावनी दिखावे के लिए नहीं है:\nUse this option with caution because an improper configuration might result in a permanent loss of data (for example disk recreated).\nयानी जिस डिस्क का आप साइज़ बढ़ा रहे थे, उसकी जगह एक नई ख़ाली डिस्क आ सकती है। इसकी तरफ़ हाथ मत बढ़ाइए। मना किए गए पैरामीटर के अपने मॉड्यूल हैं, और वही अगला सेक्शन है।\nऔर --check इसमें से कुछ भी कवर नहीं करता। collection हर मॉड्यूल के लिए check mode सपोर्ट अलग से घोषित करता है, और यह ठीक ग़लत दिशा में असंगत है:\nमॉड्यूल check_mode diff_mode proxmox_kvm none none proxmox_disk none none proxmox_template none none proxmox_snap full none proxmox_nic full none proxmox_pool full none बँटवारा “सिर्फ़ पढ़ने वाले मॉड्यूल कर सकते हैं, लिखने वाले नहीं” वाला नहीं है। proxmox_nic इंटरफ़ेस बनाता और हटाता है और check mode का पूरा पालन करता है। असल बात यह है कि जो तीन मॉड्यूल स्टोरेज और VM lifecycle से जुड़े हैं, वे नहीं करते। बिल्ड प्लेबुक का --check रन VM बनाने वाला टास्क चुपचाप छोड़ देता है और फिर एक ऐसी दुनिया की रिपोर्ट देता है जिसमें VM कभी बनी ही नहीं, तो उसके बाद का हर टास्क ग़लत स्थिति के बारे में सोच रहा होता है। बिल्ड प्लेबुक पर --check कोई सेफ़्टी नेट नहीं है, और उसे सेफ़्टी नेट मानना उसे न चलाने से भी बुरा है।\nproxmox_kvm का दूसरा रन असल में क्या करता है दूसरा रन: state: present, और उस नाम का VM मौजूद है मॉड्यूल आपके पैरामीटर की तुलना चलते VM से कभी नहीं करता update: false डिफ़ॉल्ट changed = false \u0026#8220;VM with name \u0026lt;x\u0026gt; already exists\u0026#8221; play में memory बदलिए, दोबारा चलाइए, और कहीं कुछ नहीं बताता update: true ज़्यादातर converge करता है cores, memory, tags, agent, onboot लागू net, virtio, ide, sata, scsi, efidisk0, tpmstate0 डिज़ाइन से मना उनके लिए proxmox_disk और proxmox_nic लीजिए update_unsafe: true सब converge करता है मना किए गए पैरामीटर भी लागू होते हैं डिस्क पैरामीटर डिस्क दोबारा बना सकता है स्थायी डेटा हानि documented जोखिम है --check कुछ नहीं बताता check_mode: none टास्क छोड़ दिया जाता है फिर हर बाद का टास्क ऐसी दुनिया मानकर चलता है जहाँ VM कभी बना ही नहीं चार में से दो ही कुछ converge करते हैं, और जो डिस्क ढकता है वही उन्हें नष्ट कर सकता है। इसलिए मौजूदगी पर गेट खुद लगाइए, और creation को एक बार की घटना मानिए। दूसरा रन असल में क्या करता है। चार में से दो रास्ते ही कुछ भी converge करते हैं, और डिस्क को कवर करने वाला अकेला रास्ता वही है जो उन्हें नष्ट कर सकता है। तो मौजूदगी को ही गेट बनाइए इन सबको देखते हुए, जो तरीक़ा चलता है वह यह है कि मॉड्यूल से idempotent होने की उम्मीद छोड़ दीजिए और ख़ुद तय कीजिए कि बनाना है या नहीं। प्रोडक्शन प्लेबुक यह ऐसे करती है:\n- name: Check if VM is present or manually built delegate_to: localhost community.proxmox.proxmox_vm_info: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; config: current register: existing_vm ignore_errors: true failed_when: (existing_vm.proxmox_vms | length) == 0 - name: Configure Proxmox VM when: existing_vm is failed block: - name: Create Proxmox VM ... config: current के साथ proxmox_vm_info VM और उसका live कॉन्फ़िगरेशन लौटाता है, या एक ख़ाली सूची। failed_when “ख़ाली सूची” को failure बना देता है, ignore_errors: true उस failure को play ख़त्म करने से रोकता है, और when: existing_vm is failed का मतलब बन जाता है “VM नहीं है, बनाओ”।\nजानबूझकर फ़ेल किए गए टास्क को boolean की तरह इस्तेमाल करना पढ़ने में बुरा लगता है, और मैं इसका दिखावा नहीं करूँगा कि ऐसा नहीं है। विकल्प है when: (existing_vm.proxmox_vms | default([]) | length) == 0, जो ईमानदारी से length check है और जिसे ignore_errors की ज़रूरत नहीं। दोनों चलते हैं। ऊपर वाला रूप प्रोडक्शन में है, और उसका एक असली फ़ायदा यह है कि registered नतीजे में मौजूदा कॉन्फ़िगरेशन रहता है जिसे बाद के टास्क पढ़ सकते हैं।\nज़रूरी चीज़ ढांचा है, वर्तनी नहीं: पहले जाँचो, फिर शाखा बनाओ, और creation को एक बार की घटना मानो। VM का चलता हुआ कॉन्फ़िगरेशन उसकी मौजूदगी से अलग समस्या है, और यह मॉड्यूल सिर्फ़ दूसरी वाली में अच्छा है।\nडिस्क और NIC के अपने मॉड्यूल हैं यह वह बात है जिसे मैंने ऊपर हल्के में छोड़ दिया था, और यह पूरी तस्वीर बदल देती है: proxmox_kvm जिन पैरामीटर को अपडेट करने से मना करता है, वे collection में कोई कमी नहीं हैं। उन्हें सौंपा गया है। community.proxmox.proxmox_disk और community.proxmox.proxmox_nic ठीक वही चीज़ें जोड़ते, बदलते और हटाते हैं जिन्हें create मॉड्यूल नहीं छूता, उन्हीं scsi0 और net0 नामों के आधार पर जो आपने VM बनाते समय इस्तेमाल किए थे।\nदोनों proxmox_kvm से बेहतर बर्ताव करते हैं, और इनमें से एक इस workflow का अकेला मॉड्यूल है जिसे dry-run किया जा सकता है।\nproxmox_nic: इंटरफ़ेस जोड़ना, दोबारा tag करना या हटाना - name: Move the VM\u0026#39;s primary NIC to a new bridge and VLAN delegate_to: localhost community.proxmox.proxmox_nic: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; interface: net0 bridge: vmbr1 tag: 120 model: virtio mtu: 1 queues: 4 firewall: true state: present auth के अलावा interface अकेला ज़रूरी विकल्प है, net[n] जहाँ n 0 से 31 तक है, और state: present या absent आपको जोड़ना और हटाना देते हैं। model का डिफ़ॉल्ट virtio है, जो सही जवाब है जब तक कोई गेस्ट इसे सँभाल न पाए।\nयह मॉड्यूल MAC address की वजह से है। याद कीजिए कि proxmox_kvm net अपडेट करने से क्यों मना करता है: “updating net update the MAC address”। proxmox_nic इसे साफ़ तौर पर ठीक करता है:\nWhen not specified this module will keep the MAC address the same when changing an existing interface.\nतो आप VLAN दोबारा tag कर सकते हैं, bridge बदल सकते हैं, MTU बदल सकते हैं या firewall चालू कर सकते हैं, गेस्ट के NIC की पहचान उसके नीचे बदले बिना। यह जितना लगता है उससे ज़्यादा मायने रखता है: नया MAC DHCP reservation को बेकार कर देता है, NIC से बँधी किसी भी लाइसेंस वाली चीज़ को तोड़ देता है, और NetBox के उस interface record को बेमेल कर देता है जिसे create playbook ने इतनी सावधानी से लिखा था। यही वह मॉड्यूल है जो day-2 नेटवर्क बदलाव को उबाऊ बना देता है।\nकुछ विकल्प जिन्हें ज़रूरत पड़ने से पहले जान लेना अच्छा है:\nrate MBps में है, यानी MegaBytes per second, bits नहीं। डॉक्यूमेंटेशन इस बारे में साफ़ है और आठ गुना वाली गलती करना बहुत आसान है। link_down: true इंटरफ़ेस को डिस्कनेक्ट कर देता है, जिसे डॉक्यूमेंट “like pulling the plug” बताते हैं। किसी संदिग्ध VM को रोके बिना या गेस्ट को छुए बिना अलग करने का साफ़ तरीका। trunks उन VLAN ID की सूची लेता है जिन्हें पास करना है, उस गेस्ट के लिए जो अपनी tagging खुद करता है। mtu: 1 टाइपो नहीं है और 1-byte MTU भी नहीं; इसका मतलब है “bridge का MTU अपनाओ”, और यह सिर्फ़ virtio पर लागू होता है। queues multiqueue सेट करता है, 0 से 16। असली ट्रैफ़िक धकेलने वाली किसी भी चीज़ पर इसे vCPU संख्या से मिलाना फ़ायदेमंद है। और यह check mode को पूरी तरह समर्थन देता है। proxmox_nic टास्क पर --check आपको सच बताता है, जो इसे इस workflow का अकेला हिस्सा बनाता है जिसका आप सुरक्षित रूप से रिहर्सल कर सकते हैं। इसके मैसेज भी ठीक से idempotent हैं। बिना बदले इंटरफ़ेस पर यह बदलाव का दावा करने की बजाय Nic net0 unchanged on VM with vmid 103 बताता है।\nproxmox_disk: डिस्क का पूरा जीवनचक्र proxmox_disk तीनों में सबसे बड़ा मॉड्यूल है, और इसका state पाँच अलग काम कर रहा है:\nstate क्या होता है पलटा जा सकता है? present डिस्क बनाओ, या मौजूदा डिस्क के विकल्प अपडेट करो लागू नहीं resized बढ़ाओ; PVE छोटा नहीं कर सकता, और डॉक्यूमेंट कहते हैं कि वह हाथ से करें नहीं detached unused[n] बन जाती है; volume और उसका डेटा बने रहते हैं हाँ moved backing storage बदलो, या डिस्क दूसरे VM को सौंप दो मूल रहती है जब तक delete_moved न हो absent backing storage से हटा दी जाती है नहीं detached और absent के बीच का फ़र्क वह सुरक्षा जाल है जो proxmox_kvm आपको कभी नहीं देता। Detach करना एक config बदलाव है; मिटाना डेटा नष्ट करता है। दो अलग शब्द, दो अलग नतीजे।\nपहले से मौजूद VM में दूसरी डिस्क जोड़ना:\n- name: Add a data disk delegate_to: localhost community.proxmox.proxmox_disk: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; disk: scsi1 storage: vmdata size: 200 format: qcow2 iothread: true aio: io_uring discard: \u0026#34;on\u0026#34; ssd: true backup: true state: present create वह knob है जो proxmox_kvm में होना चाहिए था। यह तय करता है कि state: present को क्या करने की इजाज़त है:\nregular (डिफ़ॉल्ट): डिस्क न हो तो बनाओ, वरना उसके विकल्प अपडेट करो। disabled: सिर्फ़ विकल्प अपडेट करो, और कभी मत बनाओ। जब आप किसी ऐसी डिस्क पर cache या iothread बदल रहे हों जिसका पहले से होना ज़रूरी है, तब यही चुनिए। यह किसी key की गलत वर्तनी की वजह से नया volume खड़ा करके आपको चौंका नहीं सकता। forced: हमेशा बनाओ। मौजूदा डिस्क detach होकर unused छोड़ दी जाती है, मिटाई नहीं जाती। यह आखिरी बर्ताव ही ज़रूरी बारीकी है। create: forced विनाशकारी दिखने वाला विकल्प है, और फिर भी यह कुछ नष्ट नहीं करता: पुराना volume unusedN के रूप में बचा रहता है और आप उसे दोबारा जोड़ सकते हैं। इसकी तुलना proxmox_kvm और update_unsafe से कीजिए, जिसकी documented विफलता है डिस्क का दोबारा बन जाना। लगभग वही काम, नुकसान का दायरा बहुत बेहतर।\nडिस्क बढ़ाना:\n- name: Grow the data disk by 100 GiB delegate_to: localhost community.proxmox.proxmox_disk: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; disk: scsi1 size: \u0026#34;+100G\u0026#34; state: resized इकाइयों पर ध्यान दीजिए, क्योंकि size का मतलब state के साथ बदलता है। state: present के साथ यह सादी संख्या के रूप में GiB है (size: 200)। state: resized के साथ यह suffix लेता है: मौजूदा आकार में जोड़ने के लिए +100G, या absolute लक्ष्य के रूप में 500G। एक पैरामीटर, दो परिपाटियाँ, और गलत अंदाज़ा लगाने पर विफलता चुपचाप होती है।\nडिस्क को दूसरे स्टोरेज पर ले जाना, जो एक volume के live-migration वाला मामला है:\n- name: Move the disk to NVMe storage delegate_to: localhost community.proxmox.proxmox_disk: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: ansible@pve api_token_id: automation api_token_secret: \u0026#34;{{ proxmox_token_secret }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; disk: scsi1 target_storage: nvme-pool bwlimit: 200000 delete_moved: true timeout: 3600 state: moved target_storage एक ही VM के अंदर ले जाता है; target_vmid डिस्क को दूसरे VM को सौंपता है और दोनों पर वही स्टोरेज माँगता है। दोनों एक साथ नहीं चल सकते। delete_moved का डिफ़ॉल्ट false है, इसलिए डिफ़ॉल्ट रूप से आप दो कॉपी के साथ खत्म करते हैं और मूल वहाँ unused पड़ी रहती है: सुरक्षित, और अगर आप कभी वापस न आएँ तो स्टोरेज पूल भरने का अच्छा तरीका।\nयहाँ timeout का डिफ़ॉल्ट 600 है, जबकि proxmox_kvm में 30। एक जैसा दिखने वाला पैरामीटर, बीस गुना फ़र्क, क्योंकि ये ऑपरेशन डेटा कॉपी करते हैं। बड़ी इमेज या धीमे स्टोरेज के लिए इसे बढ़ाइए; डॉक्यूमेंट moved और import_from दोनों के लिए यही कहते हैं।\nजो हमें उस विकल्प पर लाता है जो इस मॉड्यूल को V2V और cloud-image का रास्ता बनाता है:\nimport_from: \u0026#34;vmdata:9000/base-debian13.qcow2\u0026#34; import_from खाली डिस्क allocate करने की बजाय किसी मौजूदा volume से डिस्क बनाता है: \u0026lt;STORAGE\u0026gt;:\u0026lt;VMID\u0026gt;/\u0026lt;NAME\u0026gt;, या PVE 9.x और बाद में storage के import directory के साथ \u0026lt;STORAGE\u0026gt;:import/\u0026lt;NAME\u0026gt;। यह size के साथ नहीं चल सकता, और absolute filesystem path सिर्फ़ root इस्तेमाल कर सकता है।\nबाकी पैरामीटर सूची ही वजह है कि डिस्क create call के अंदर की बजाय इस मॉड्यूल से जोड़ी जाएँ: cache, aio, iothread, discard, ssd, backup, detect_zeroes, और पूरा throttling परिवार: iops, iops_rd, iops_wr, उनके _max और _max_length रूप, और bps_*_max_length burst नियंत्रण। बनने के बाद इनमें से कुछ भी proxmox_kvm से नहीं पहुँचा जा सकता।\nदो चेतावनियाँ, दोनों मॉड्यूल के अपने डॉक्यूमेंटेशन से:\nकुछ विकल्प बदलाव के लिए रीबूट चाहिए। “Some updates on options (like cache) are not being applied instantly and require VM restart.” हरे टास्क का मतलब है कि config लिख दिया गया, यह नहीं कि चलता हुआ VM अलग बर्ताव कर रहा है। यह check mode को समर्थन नहीं देता। check_mode: none, proxmox_kvm की तरह। तो collection बीच से बँट जाता है: NIC बदलावों का --check से रिहर्सल हो सकता है, डिस्क बदलावों का नहीं। काम का बँटवारा यह करने के लिए इस्तेमाल करें VM बनाना proxmox_kvm, एक बार, मौजूदगी के गेट के साथ cores, memory, tags, agent, onboot बदलना update: true के साथ proxmox_kvm NIC जोड़ना, दोबारा tag करना, डिस्कनेक्ट करना या हटाना proxmox_nic डिस्क जोड़ना, बढ़ाना, ले जाना, detach करना या हटाना proxmox_disk Snapshot proxmox_snap (यह भी पूरा check mode) जो इनमें से कोई नहीं देता SSH पर qm set proxmox_kvm से डिस्क या NIC बदलना कुछ नहीं; update_unsafe इसी के लिए है, और यही वजह है कि आपको इसे इस्तेमाल नहीं करना चाहिए VM को एक न्यूनतम proxmox_kvm call से बनाइए, फिर डिस्क और इंटरफ़ेस उनके अपने मॉड्यूल से जोड़िए। इसमें ज़्यादा टास्क हैं, और यही वह रूप है जिसमें day-2 बदलावों का ऐसा रास्ता है जिसमें कोई ऐसा विकल्प शामिल नहीं जिसका documented जोखिम डिस्क खोना है।\nमॉड्यूल कहाँ रुकता है proxmox_kvm की पैरामीटर सूची बहुत बड़ी है और फिर भी यह वह सब नहीं ढकती जो qm कर सकता है। इंतज़ार करने की बजाय, प्रोडक्शन playbook नोड पर CLI पर उतर जाती है:\n- name: Set RNG source and better SPICE quality delegate_to: \u0026#34;{{ proxmox_api_host }}\u0026#34; become: true ansible.builtin.command: cmd: \u0026gt;- /usr/sbin/qm set {{ created_vm.vmid }} --rng0 source=/dev/urandom --spice_enhancements videostreaming=all इसमें कुछ गलत नहीं है। यह किसी सार्थक अर्थ में idempotent नहीं है, qm set एक write है और हर बार changed बताएगा, लेकिन यह स्पष्ट है, पढ़ने में आसान है, और दिखावा नहीं करता। अगर बाद में मॉड्यूल को यह पैरामीटर मिल जाए, तो आप टास्क मिटा दीजिए।\nकुछ और चीज़ों के लिए update: true के साथ मॉड्यूल से दूसरा पास चाहिए, क्योंकि उन्हें उसी call में सेट नहीं किया जा सकता जो VM बनाती है:\n- name: Add SPICE-compatible USB device delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; node: \u0026#34;{{ proxmox_api_host }}\u0026#34; vmid: \u0026#34;{{ created_vm.vmid }}\u0026#34; usb: usb0: \u0026#34;spice,usb3=1\u0026#34; update: true when: spice_usb | default(false) ध्यान दीजिए कि यह vmid देता है, name नहीं। ID मिल जाने के बाद उसी को इस्तेमाल कीजिए। यह अकेला identifier है जिसे API अद्वितीय मानता है।\nऔर उन चीज़ों के लिए जो QEMU कर सकता है पर जिनके लिए PVE में कोई विकल्प नहीं, args है, जो QEMU command line को ज्यों का त्यों दिया जाता है:\nargs: \u0026gt;- -global scsi-hd.physical_block_size=4k -global scsi-hd.logical_block_size=4096 यह वाला वर्चुअल डिस्क को 512e की बजाय 4Kn के रूप में पेश करता है, जो जितना लगता है उससे ज़्यादा मायने रखता है: block sizes, 4Kn और 512e। मॉड्यूल args पर “for experts only” का लेबल लगाता है, और वजह यह है कि PVE इसे validate नहीं करता और एक गलत flag VM को ऐसी error के साथ बूट होने से रोक देता है जो Proxmox से नहीं, QEMU से आती है।\nक्लस्टर तुरंत एक जैसा नहीं होता - name: Let registration complete on cluster ansible.builtin.pause: seconds: 5 when: created_vm.changed playbook में pause आमतौर पर गड़बड़ी का संकेत है, और यह वाला बोझ उठा रहा है। create call तब लौटती है जब API ने परिभाषा स्वीकार कर ली, जो इसके बराबर नहीं कि हर नोड मान ले कि VM मौजूद है, और अगला ही टास्क /vms/\u0026lt;vmid\u0026gt; पर ACL सेट करना चाहता है। पाँच सेकंड का धीरज उस error के चारों ओर retry loop से सस्ता है जो सिर्फ़ लोड में दिखती है।\nteardown playbook का भी यही आकार है, इसी वजह से: रोको, रुको, फिर मिटाओ।\nआपने जो बनाया उसे वापस पढ़ना proxmox_kvm तीन return value document करता है: vmid, status और msg। व्यवहार में आपको चौथा चाहिए होगा, और वह डॉक्यूमेंटेशन में नहीं है।\n- name: Get MAC address of VM ansible.builtin.set_fact: primary_mac_addr: \u0026#34;{{ created_vm.mac.net0 }}\u0026#34; created_vm.mac असली है, मॉड्यूल इसे get_vminfo() में बनाता है और नतीजे में डाल देता है, लेकिन यह documented RETURN block में नहीं है, जिसका मतलब है कि कोई वादा नहीं करता कि यह काम करता रहेगा। यह ठीक-ठीक कैसे बर्ताव करता है यह जानने लायक है, क्योंकि इसमें दो जाल हैं:\nयह सिर्फ़ तब दिखता है जब मॉड्यूल ने सच में VM बनाया हो। mac सिर्फ़ create-and-deploy रास्ते पर जोड़ा जाता है। “already exists” वाली शाखा लीजिए और नतीजे में vmid और msg हैं, और कुछ नहीं। इसमें सिर्फ़ वे इंटरफ़ेस होते हैं जो आपने दिए। कोड आपके दिए पैरामीटर पर चलता है और net[0-9] से मेल खाने वाले चुनता है, फिर हर एक का stored config API से वापस पढ़ता है। कोई net पैरामीटर नहीं, तो कोई mac key नहीं। इसीलिए प्रोडक्शन playbook को दोनों हिस्से चाहिए, और दूसरा भद्दा है:\n- name: Get MAC address of VM ansible.builtin.set_fact: primary_mac_addr: \u0026gt;- {{ created_vm.mac.net0 if created_vm is defined and created_vm.changed else ((existing_vm.proxmox_vms[0].config.net0 | split(\u0026#39;,\u0026#39;))[0] | split(\u0026#39;=\u0026#39;))[1] }} जब VM पहले से मौजूद था, तो कोई mac नहीं है, इसलिए MAC को raw config string से खोदकर निकालना पड़ता है। net0 API से virtio=AE:AE:5C:A8:89:85,bridge=vmbr0 के रूप में आता है, तो: comma पर तोड़ो, पहला field लो, = पर तोड़ो, दूसरा हिस्सा लो। यह API response पर string की सर्जरी है, और यह उस मॉड्यूल की ईमानदार कीमत है जिसका return आकार इस पर निर्भर है कि उसने कौन सी शाखा ली।\nअगर आपको दोनों हालात में MAC भरोसे से चाहिए, तो उसे हर बार proxmox_vm_info से लीजिए और दो की बजाय एक आकार parse कीजिए।\nइसे source of truth से चलाना play शुरू करने वाली लाइन को फिर से देखिए:\nhosts: \u0026#34;{{ target_hosts | default(\u0026#39;cluster_pve:\u0026amp;status_planned\u0026#39;) }}\u0026#34; यही असली architecture है, और इसे सीधे कहना ठीक है: बनाए जाने वाले VM किसी vars फ़ाइल की सूची नहीं हैं। वे आपकी inventory के वे होस्ट हैं जिनका दर्ज status कहता है कि उन्हें होना चाहिए और वे अभी नहीं हैं।\nयहाँ inventory NetBox है। VM की माँग NetBox में planned status वाला record बनाकर की जाती है, जिसमें उसका CPU, memory, disk, VLAN, owner और platform होता है। Playbook planned मशीनें चुनती है, उन्हें बनाती है, IP allocate करती है, DNS लिखती है, और फिर record को staged पर सेट करती है; उस पल वह होस्ट play के host pattern से मेल नहीं खाता, और एक handler inventory को refresh करता है ताकि अगली play नई स्थिति देखे:\nhandlers: - name: Refresh inventory ansible.builtin.meta: refresh_inventory status field एक state machine है, playbook उसमें एक transition है, और पूरी चीज़ दोबारा चलाई जा सकती है क्योंकि जो होस्ट आगे बढ़ चुका है वह अब चुना नहीं जाता। यह मॉड्यूल-स्तर की किसी भी idempotency से कहीं बेहतर गुण है, और यही वजह है कि create टास्क एक बार चलने वाला होकर भी बच निकलता है।\ncommunity.proxmox अपना inventory plugin भी देता है, जो क्लस्टर से inventory बनाता है; यह तब सही विकल्प है जब Proxmox ही source of truth हो। यहाँ उल्टा है: NetBox प्रामाणिक है और Proxmox वह जगह है जहाँ उसका इरादा साकार होता है। यह अपने आप में पूरी पोस्ट है और मैं इसे अलग से लिखूँगा।\nइसे फिर से हटाना teardown के बिना creation आधा जीवनचक्र है, और हटाने के रास्ते का अपना जाल है: आप चलते हुए VM को मिटा नहीं सकते:\n- name: Force stop the VM if it is running delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; state: stopped force: true timeout: 10 - name: Allow the cluster to stop the VM before removing it ansible.builtin.pause: seconds: 10 - name: Remove the VM from the cluster delegate_to: localhost community.proxmox.proxmox_kvm: api_host: \u0026#34;{{ proxmox_api_ip }}\u0026#34; api_user: \u0026#34;{{ proxmox_user }}\u0026#34; api_password: \u0026#34;{{ proxmox_password }}\u0026#34; name: \u0026#34;{{ inventory_hostname }}\u0026#34; state: absent force: true timeout: 10 state: stopped एक साफ़-सुथरा shutdown है, और timeout के साथ इसका रिश्ता documented है और याद रखने लायक है: अगर force: true के साथ timeout पूरा हो जाए तो VM ज़बरदस्ती बंद कर दिया जाता है; force: false के साथ टास्क फ़ेल हो जाता है। दस सेकंड की साफ़ खिड़की और फिर प्लग खींचना उस मशीन के लिए ठीक नीति है जिसे हटाया जा रहा है, और किसी और के लिए बहुत बुरी।\nपूरा teardown (proxmox-remove-vms.yml) फिर record का बाकी हिस्सा खोलता है: DNS, allocate किया गया IP, NetBox interfaces, NetBox VM, और known_hosts की पुरानी entries। यह block को ignore_errors: true में लपेटता है, जो teardown में बचाव के लायक है। आप ऐसी चीज़ें हटा रहे हैं जो शायद पहले ही जा चुकी हों, और आधी मिटाई गई मशीन शोर वाले log से बदतर है।\nनए सिरे से बनाने में मैं क्या बदलूँगा सिर्फ़ डॉक्यूमेंटेशन नहीं, मॉड्यूल का source पढ़ने के बाद, ये पाँच बातें:\nAPI token इस्तेमाल कीजिए, api_user और api_password नहीं। सीमित, वापस लिया जा सकने वाला, और कभी किसी व्यक्ति का नहीं। validate_certs साफ़ तौर पर सेट कीजिए, इससे पहले कि 2.0.0 इसे आपके नीचे बदल दे। VMID खुद allocate कीजिए, source of truth से। यह read-modify-write race हटा देता है, आपको serial: 1 छोड़ने देता है, और बाद के हर टास्क को एक स्थिर identifier देता है, ऐसे नाम की बजाय जो अद्वितीय नहीं है। VM को खाली बनाइए, फिर उसकी डिस्क और NIC proxmox_disk और proxmox_nic से जोड़िए। ज़्यादा टास्क, लेकिन फिर हर डिस्क और इंटरफ़ेस के पास एक मॉड्यूल है जो उसे बाद में बदल सकता है, सिर्फ़-विकल्प बदलावों के लिए create: disabled और मिटाने की बजाय state: detached समेत, न कि ऐसा config जिसे सिर्फ़ update_unsafe से बदला जा सके। MAC proxmox_vm_info से लीजिए, एक जगह, ताकि एक documented और एक undocumented return value के बीच शर्त की बजाय parse करने को एक ही आकार हो। और build playbook पर --check की ओर हाथ मत बढ़ाइए। जो मॉड्यूल मायने रखता है वह इसे निभा नहीं सकता।\nजो dry run हमेशा हाँ कहे वह dry run न होने से भी बुरा है, क्योंकि आप उस पर भरोसा कर लेंगे।\nसंदर्भ community.proxmox collection docs: पूरे 47 मॉड्यूल community.proxmox on GitHub: जहाँ ऊपर का source रहता है; जब डॉक्यूमेंट अस्पष्ट हों तो पढ़ने वाली फ़ाइल plugins/modules/proxmox_kvm.py है proxmox_kvm module documentation: पैरामीटर सूची, और ऊपर उद्धृत update / update_unsafe चेतावनियाँ proxmox_vm_info module documentation: config: current और config: pending PVE qm options reference: हर scsi[n], net[n] और boot string का असली विवरण जो आप आगे देते हैं proxmoxer: वह Python client जिस पर collection बना है damo2929/ansible-example: वे playbooks जिनसे ये अंश लिए गए हैं, NetBox-संचालित inventory, DHCP generation और hypervisor build समेत ","permalink":"https://blogs.damiendye.uk/hi/ansible/proxmox-create-vms-community-proxmox/","summary":"community.proxmox collection एक API क्लाइंट है, कॉन्फ़िगरेशन एजेंट नहीं, और इससे उसे इस्तेमाल करने वाली हर प्लेबुक का ढांचा बदल जाता है। टास्क असल में कहाँ चलते हैं, proxmox_kvm अपडेट करने के बजाय मना क्यों कर देता है, डिस्क और NIC के बदलाव proxmox_disk और proxmox_nic में क्यों होने चाहिए, और वह undocumented रिटर्न वैल्यू जिसकी आख़िर में आपको ज़रूरत पड़ेगी।","title":"Ansible से Proxmox VM बनाना: जो होस्ट आप बना रहे हैं, वह अभी मौजूद ही नहीं है"},{"content":"हर Proxmox मूल्यांकन इसी सवाल से शुरू होता है “क्या Proxmox सच में एंटरप्राइज़ ग्रेड है?”\nयह सवाल लगभग हर migration की बातचीत में उठता है, और इसके नीचे छिपी चिंता लगभग कभी web interface को लेकर नहीं होती। कोई सचमुच नहीं डरता कि ब्राउज़र का dashboard उसका डेटा बिगाड़ देगा। लोग असल में यह पूछ रहे हैं कि virtual machine और हार्डवेयर के बीच खड़ी चीज़, यानी वह हिस्सा जिसे एक tenant को दूसरे tenant की memory से हमेशा बाहर रखना है, बिना एक भी गलती के, इंजीनियरिंग का गंभीर काम है या कोई community project जो बस लोकप्रिय हो गया।\nइसी बात पर घबराना बिल्कुल सही है। बस निशाना गलत परत पर है, क्योंकि Proxmox VE में हाइपरवाइज़र है ही नहीं।\nहाइपरवाइज़र KVM है। यह Linux का हिस्सा है, 2007 से वहाँ है, और अगर आपकी संस्था EC2, Google Cloud, Oracle Cloud, Alibaba Cloud, DigitalOcean या Nutanix इस्तेमाल करती है, तो आप इसे आज production में पहले से चला रहे हैं। बस आपको कभी इसके बारे में सोचना नहीं पड़ा, क्योंकि ऊपर की परतें किसी और के ज़िम्मे थीं।\nयह पोस्ट इस बारे में है कि उस साझा नींव का असल मतलब क्या है। दोनों हिस्से: तर्क का वह हिस्सा जो सच में टिकता है, और वह हिस्सा जिसे vendor की slides में बढ़ा-चढ़ाकर कहा जाता है।\nProxmox VE एक Management Layer है Linux पर virtualisation चार अलग परतें हैं, जिन्हें चार अलग-अलग समूह बनाते और संभालते हैं।\n1. हार्डवेयर virtualisation extensions. EPT के साथ Intel VT-x, या NPT के साथ AMD-V। यह silicon है। इसी की वजह से guest अपना kernel native speed पर अपनी page tables के साथ चला पाता है, बिना किसी के instructions को emulate किए।\n2. KVM: हाइपरवाइज़र. Kernel modules: architecture से स्वतंत्र core के लिए kvm.ko, साथ में vendor extensions के लिए kvm-intel.ko या kvm-amd.ko। isolation की सीमा इसी हिस्से के पास है। यह guest के virtual machine control structures बनाता है, VM exits संभालता है, second-level page tables चलाता है, और interrupts पहुँचाता है।\n3. VMM: user space में virtual machine monitor. Proxmox VE पर यह QEMU है। यह virtual motherboard बनाता है: chipset, PCIe topology, disks, NICs, serial ports, firmware। CPU को KVM चलाता है; guest को लगता है कि उसके पास कौन-सा हार्डवेयर है, यह QEMU तय करता है।\n4. Management layer. यह Proxmox VE है: API और interface के लिए pve-manager और pveproxy, VM config file को QEMU command line में बदलने के लिए qemu-server, LXC के लिए pve-container, replicated cluster configuration के लिए Corosync के ऊपर pmxcfs, fencing और restart के लिए pve-ha-manager, और साथ में firewall और SDN stack।\nजिस प्लेटफ़ॉर्म से आप migrate कर रहे हैं, उस पर भी यही चार परतें हैं और यही चार काम करती हैं: vCenter परत 4 है, VMkernel परत 2 है। सारे टुकड़े सामने आ जाने के बाद मैं इस तुलना पर लौटूँगा।\nProxmox VE और vSphere पर वही चार परतें Proxmox VE VMware vSphere 4 \u0026#183; management Proxmox VE pve-manager \u0026#183; pveproxy \u0026#183; qemu-server Corosync पर pmxcfs \u0026#183; pve-ha-manager \u0026#183; SDN vCenter Server एक अलग appliance जिसका आकार, licence, patch और backup आपको करना है 3 \u0026#183; device model pve-qemu, user space में virtual motherboard: chipset, PCIe, disks, NICs upstream QEMU + 78 Proxmox patches 2 \u0026#183; हाइपरवाइज़र \u0026#183; isolation की सीमा KVM: kvm.ko + kvm-intel.ko / kvm-amd.ko vCPU entry और exit \u0026#183; EPT/NPT \u0026#183; interrupts upstream Linux, Proxmox के kernel build में VMX userworld, हर VM के लिए एक device I/O, snapshots, remote console user space: kernel के अंदर नहीं VMkernel, साथ में हर vCPU का एक VMM guest instructions और memory VMkernel के लिए VMware के अपने शब्द: \u0026#8220;a POSIX-like operating system\u0026#8221; 1 \u0026#183; silicon Intel VT-x + EPT \u0026#183; AMD-V + NPT वही silicon दोनों तरफ़ वही चार परतें। Proxmox परत 4 लिखता है, परत 3 में भारी patches लगाता है, परत 2 का kernel बनाता है और KVM खुद upstream से लेता है। VMware चारों लिखता है और आपको किसी को पढ़ने नहीं देता। Proxmox असल में क्या संभालता है परत 4 पूरी तरह Proxmox VE की है। फिर भी यह कहना गलत होगा कि वह परत 2 और 3 को बस package करता है, और कंपनी क्या करती है, इसे लेकर यही सबसे आम गलतफ़हमी है।\nइस लेखन के समय pve-qemu की series file में upstream QEMU के ऊपर 78 patches हैं:\nProxmox QEMU में क्या जोड़ता है: 78 patches, अनुपात में extra/ bitmap-mirror/ pve/ 78 patches, अनुपात में 26 6 46 Backported upstream fixes। इनमें बड़ी संख्या device model के security fixes की है: qxl और virtio-gpu stride validation, guest से होने वाला intel_iommu abort, lsi53c895a और virtio-net में re-entrant DMA। drive-mirror के लिए dirty-bitmap sync modes। Proxmox का अपना काम: savevm-async, VMA format, PBS block driver, pbs-restore, alloc-track, backup fleecing। debian/patches/series से अनुपात में बनाया गया। ज़्यादातर queue Proxmox की अपनी इंजीनियरिंग है, और पूरी की पूरी परत 3 में है: इनमें से कोई patch kvm.ko को नहीं छूता। वे अपना kernel भी खुद build करते हैं, और आसपास के ज़्यादातर stack के लिए packaging या patches संभालते हैं: OVMF के लिए pve-edk2-firmware, साथ में lxc, zfsonlinux, openvswitch, libiscsi, corosync-pve, lvm और ceph।\nतो असली सीमा यह है: पूरी परत 4, परत 3 के अंदर ठोस इंजीनियरिंग, और एक kernel जिसे वे compile करते हैं। उन्होंने जो नहीं किया, वह है हाइपरवाइज़र लिखना। परत 2 का KVM code upstream Linux है।\nऔर इसमें Proxmox की कोई आलोचना नहीं है। इसलिए तो Proxmox जितने आकार की कंपनी पर इस काम के लिए भरोसा किया जा सकता है। Vienna की एक छोटी कंपनी ने बैठकर शून्य से हाइपरवाइज़र नहीं लिखा; उन्होंने उस पर निर्माण किया जिसे संभालने के लिए Intel, AMD, Red Hat, Google, Amazon और IBM पहले से इंजीनियरों को पैसा दे रहे थे, और अपनी मेहनत उसके ऊपर की परत पर और उस परत के लिए ज़रूरी integration पर लगाई। उस आकार की टीम फ़र्क वहीं डाल सकती है, और patch queue दिखाती है कि वे डाल रहे हैं।\nKVM असल में क्या है KVM का मतलब है Kernel-based Virtual Machine, और नाम बिल्कुल सटीक है: यह kernel का एक feature है, कोई program नहीं।\nModules load कीजिए और Linux को एक character device मिल जाता है, /dev/kvm, साथ में उस पर ioctl calls का एक छोटा सेट: KVM_CREATE_VM, KVM_CREATE_VCPU, KVM_SET_USER_MEMORY_REGION, KVM_RUN। यही interface पूरा हाइपरवाइज़र API है। जो भी चीज़ file descriptor खोलकर ioctl call कर सकती है, वह virtual machines बना सकती है।\nइसे Qumranet में Avi Kivity ने लिखा था और यह Linux 2.6.20 में merge हुआ, जो फ़रवरी 2007 में release हुआ: उन्नीस साल पहले। Red Hat ने 2008 में Qumranet को खरीदा, और तब से KVM हर kernel release में आया है, kernel की सामान्य नौ-दस हफ़्ते की लय पर। यह x86 से बहुत आगे port हो चुका है: arm64, POWER, IBM Z पर s390, और RISC-V।\nArchitecture की अहम बात यह है कि यह छोटा क्यों है।\nKVM के पास scheduler नहीं है, क्योंकि Linux के पास है। vCPU एक सामान्य host thread है, और completely fair scheduler उसे किसी दूसरे thread की तरह core पर रखता है। इसके पास memory manager नहीं है, क्योंकि Linux के पास है। Guest RAM एक सामान्य user-space mapping है, तो उसे page किया जा सकता है, hugepages से back किया जा सकता है, या किसी NUMA node पर रखा जा सकता है, उसी मशीनरी से जो किसी भी दूसरी process के लिए है। इसके पास driver stack, block layer, network stack या filesystem नहीं है, क्योंकि Linux के पास ये सब पहले से थे और आपका हार्डवेयर vendor इन्हीं के खिलाफ़ test करता है।\nपरिपक्वता का असली तर्क यही है, और यह किसी version number से कहीं मज़बूत है। NUMA balancing का हर सुधार, io_uring का हर बदलाव, हर network driver, CPU errata का हर नया workaround जो Linux में आता है, वह आपकी virtual machines के नीचे आ जाता है, क्योंकि कोई अलग हाइपरवाइज़र kernel है ही नहीं जिसमें किसी को उसे port करना पड़े।\nType 1 वाला तर्क रेखा गलत जगह खींचता है इसके बाद जो आपत्ति हमेशा आती है, वह यह है कि KVM “बस type 2 हाइपरवाइज़र” है। यह host OS पर चलता है, ESXi की तरह नहीं, जो bare metal पर चलता है।\nयह वर्गीकरण हार्डवेयर virtualisation से तीन दशक पुराना है, और यह जिस चीज़ के चारों ओर रेखा खींच रहा था, वह अब वहाँ नहीं है जहाँ लोग उसे मानते हैं।\nvCPU चलने पर असल में क्या होता है QEMU ioctl(vcpu_fd, KVM_RUN) call करता है। नियंत्रण kvm.ko में जाता है, जो guest की CPU state load करता है और VMLAUNCH चलाता है। उस instruction से अगले VM exit तक guest सीधे physical core पर चल रहा होता है, guest mode में, EPT के ज़रिए अपनी page tables के साथ, पूरी हार्डवेयर speed पर। उसके नीचे कुछ भी नहीं है जो कुछ interpret कर रहा हो। “host OS” रास्ते में नहीं है। वह उस core पर चल भी नहीं रहा।\nजब guest कुछ ऐसा करता है जिसे संभालना पड़े, तो CPU host की ओर exit करता है, और kvm.ko में पहुँचता है, kernel में, ठीक उसी privilege level पर जिस पर ESXi का VMkernel होता है। ज़्यादातर exits वहीं सुलझ जाते हैं और guest में दोबारा प्रवेश हो जाता है, user space को कभी शामिल किए बिना।\nvCPU का QEMU से guest mode तक का रास्ता, और उसके exits कहाँ रुकते हैं user space kernel: ring 0 host mode guest mode: VMX non-root QEMU: vCPU thread हर vCPU के लिए एक सामान्य host thread kvm.ko VM entry \u0026#183; exit handling \u0026#183; EPT \u0026#183; interrupts guest, physical core पर अपना kernel, EPT के ज़रिए अपनी page tables पूरी हार्डवेयर speed पर ioctl(KVM_RUN) VMLAUNCH VM exit यहीं सुलझा user space तक exit Guest को कोई interpret नहीं कर रहा, और उस core पर host चल ही नहीं रहा। Exit कहाँ रुकता है Kernel में सुलझता है \u0026#183; EPT/NPT violation \u0026#183; local APIC write: APICv के साथ अक्सर exit नहीं \u0026#183; inter-processor interrupt, हार्डवेयर में posted \u0026#183; virtio-net doorbell, vhost-net लेता है QEMU तक पहुँचता है \u0026#183; emulated e1000 या IDE पर register access \u0026#183; PCI configuration space write \u0026#183; जिसका जवाब सिर्फ़ QEMU जानता है सिर्फ़ दूसरी सूची user-space round trip चुकाती है, और इसी सूची को आप छोटा करते हैं, virtio devices से और ऐसे machine type से जिसमें कोई पुराना हार्डवेयर नहीं। vCPU जो रास्ता लेता है। dashed line के ऊपर सब कुछ host thread है; उसके नीचे सब कुछ खाली silicon पर चलता guest है। QEMU तक सिर्फ़ वही exits पहुँचते हैं जिनका जवाब QEMU को देना होता है। ESXi में भी यही बँटवारा है अब उस प्लेटफ़ॉर्म को देखिए जो कथित तौर पर यह फ़र्क साबित करता है।\nVMware का अपना architecture documentation VMkernel को “a POSIX-like operating system” बताता है, जो “process creation and control, signals, file system, and process threads” देता है। उसके लेखक के अपने शब्दों में यह एक operating system है। और ESXi पर चल रही VM kernel के अंदर की कोई चीज़ नहीं है: वह userworld processes का एक समूह है: हर virtual CPU के लिए एक VMM, जो guest के instructions को virtualise करता है और उसकी memory संभालता है, और हर VM के लिए एक VMX process, जो उन devices का I/O संभालता है जो performance के लिए अहम नहीं हैं, और snapshot manager और remote console से बात करता है।\nइसे QEMU को ध्यान में रखकर पढ़िए। kernel में हर vCPU का execution context, और हर VM की एक user-space process जो device emulation और management करती है। VMware ने इसे उसी वजह से बाँटा जिस वजह से बाकी सबने।\nHyper-V भी अलग नहीं है। Microsoft का documentation साफ़ कहता है कि Virtual Machine Worker Process, vmwp.exe, “a user mode component of the virtualization stack” है, जो हर VM के लिए बनती है, और सारे emulated devices इसी में बने हैं, root partition में चलते हुए, जो Windows है। Xen भी, जिस architecture पर यह वर्गीकरण सबसे अच्छा बैठता है, काम करने के लिए dom0 में एक general-purpose Linux चाहता है, और पूरी तरह virtualised guests के लिए अपना device model QEMU से लेता है।\nतो रेखा है कहाँ? कसौटी कभी “क्या यह user space इस्तेमाल करता है” नहीं थी। Goldberg का वर्गीकरण, 1970 के दशक की शुरुआत से, यह पूछता है कि क्या हाइपरवाइज़र एक application है जो पहले से मौजूद operating system पर चल रहा है, जो पहले से हार्डवेयर का मालिक है और scheduling करता है। वह type 2, hosted हाइपरवाइज़र है: VMware Workstation, VirtualBox, Parallels Desktop, बिना acceleration के सादा QEMU। आप एक general-purpose OS install करते हैं, फिर उस पर एक program install करते हैं, और वह program बाकी किसी program की तरह OS से memory और CPU time माँगता है।\nKVM वैसा नहीं है। kvm.ko Linux के ऊपर कोई program नहीं है। यह Linux का हिस्सा है, उसी privilege level पर चलता है जिस पर हार्डवेयर का मालिक code चलता है, और जब guest exit करता है तो सीधे वहीं पहुँचता है। हाइपरवाइज़र के नीचे कोई host OS नहीं है। Kernel ही हाइपरवाइज़र है। Proxmox VE उस kernel को सिस्टम के रूप में ship करता है, ठीक वैसे जैसे ESXi VMkernel को सिस्टम के रूप में ship करता है।\nऔर “इसे user space चाहिए, इसलिए यह type 2 है” वाला संस्करण बचाया नहीं जा सकता, क्योंकि लगातार लागू करें तो यह सबको पकड़ लेता है। ESXi पर कोई VM अपनी VMX process के बिना नहीं चलती, Hyper-V पर कोई vmwp.exe के बिना नहीं, Xen पर कोई HVM guest QEMU के बिना नहीं। जो test हर बिकने वाले हाइपरवाइज़र को एक ही टोकरी में डाल दे, वह कुछ भी अलग नहीं कर रहा।\nCPU और memory virtualisation का मालिक kernel हर VM का user-space device model पहले से मौजूद host OS चाहिए? VMware ESXi VMkernel हर VM के लिए VMX नहीं Microsoft Hyper-V हाइपरवाइज़र और Windows root partition vmwp.exe नहीं Xen Xen हाइपरवाइज़र और dom0 Linux QEMU, dom0 में या stub domain में नहीं KVM kvm.ko QEMU नहीं VirtualBox, VMware Workstation host का kernel, install किए driver के ज़रिए application खुद हाँ चार उत्पाद, एक ही ढाँचा, और फिर पाँचवीं पंक्ति जो सच में अलग है। “type 2” शब्द उसी आखिरी पंक्ति को बताने के लिए गढ़ा गया था, और सिर्फ़ उसी में हार्डवेयर पर पहले से कोई और काबिज़ था।\nतो वर्गीकरण अब भी एक रेखा खींचता है। बस वह उसे वहाँ के आसपास भी नहीं खींचता जहाँ तर्क मानकर चलता है: KVM और ESXi उसी तरफ़ हैं। KVM को type 2 कहना VirtualBox वाली श्रेणी का शब्द उधार लेकर उस चीज़ पर लगाना है जो architecture के हिसाब से ESXi वाली श्रेणी में है।\nइससे मूल्यांकन में यह label कोई काम का नहीं रह जाता, क्योंकि जिन दो उत्पादों में आप चुन रहे हैं, दोनों एक ही खाने में हैं। फ़र्क type number का नहीं है। फ़र्क यह है कि एक vendor ने kernel भी लिखा है और आपको उसे पढ़ने नहीं देगा: यह licensing और पारदर्शिता का फ़र्क है जिसने architecture diagram के कपड़े पहन रखे हैं। Nutanix यह बात व्यावसायिक रूप से दिखाता है: वह वही KVM code ship करता है जो Proxmox करता है और AHV को bare-metal type 1 हाइपरवाइज़र बताता है। वही code, उलटा label, अलग marketing विभाग।\nइस आरोप के अंदर एक असली चिंता छिपी है, और उसे बेहतर नाम मिलना चाहिए: general-purpose kernel हज़ार ऐसे काम कर रहा है जो एक खास मकसद से बना kernel नहीं करता, यानी isolation की सीमा के पास ज़्यादा code और ज़्यादा attack surface। यह जायज़ है और मापा जा सकता है, और मैं अंत के पास इस पर लौटता हूँ।\nकाम असल में कहाँ होता है “यह host OS पर है” वाली सहज प्रवृत्ति की एक जगह असली बात है, वह है exit handling, तो यह साफ़ होना चाहिए कि कौन-सा exit कहाँ जाता है।\nGuest यह करता है कौन संभालता है लागत EPT/NPT में अभी map न हुआ page छूता है kvm.ko, kernel में एक exit, microseconds अपने local APIC में लिखता है CPU खुद, APICv/AVIC के ज़रिए अक्सर कोई exit नहीं inter-processor interrupt भेजता है हार्डवेयर में posted interrupts अक्सर कोई exit नहीं vhost-net के साथ virtio-net queue पर भेजता है kernel thread, user-space में कोई hop नहीं एक doorbell emulated e1000 या IDE controller का register पढ़ता है पूरा रास्ता QEMU तक exit और user-space round trip सिर्फ़ आखिरी पंक्ति type 2 के कार्टून जैसी दिखती है, और यही वह पंक्ति भी है जिसे आप इंजीनियरिंग से हटा देते हैं: virtio devices इस्तेमाल करके, और ऐसा emulated पुराना हार्डवेयर न दिखाकर जिसकी आपको ज़रूरत नहीं। यही तर्क i440fx की जगह Q35 चुनने के पीछे है: कम trapped register accesses, कम पुराने devices जिनसे गुज़रना पड़े।\nHost OS एक feature है, बोझ नहीं उस हिसाब-किताब का दूसरा आधा कभी तर्क में आता ही नहीं, तो यह रहा: Proxmox node एक ऐसी मशीन है जिस पर आप सच में काम कर सकते हैं। यह Debian है, तो पूरा Debian archive एक apt install की दूरी पर है।\nवही monitoring जो आप पहले से चलाते हैं: Prometheus node exporter, smartmontools, आपका मौजूदा agent, न कि वह जो appliance दिखाना चाहे। कुछ धीमा हो तो diagnostics: fio, iperf3, nvme-cli, perf, bpftrace। किसी भी vendor के backup agents जो Linux binary देते हैं। Configuration management, ताकि हाइपरवाइज़र एक खास मामला होने के बजाय बाकी सब के साथ उसी Ansible inventory में रहे। Firmware के लिए fwupd, उस हार्डवेयर पर जिसका vendor LVFS को support करता है। इनमें से किसी के लिए plugin format, signed bundle या vendor की मंज़ूरी नहीं चाहिए। इसकी तुलना ESXi के मॉडल से कीजिए, जहाँ shell जानबूझकर सीमित है, third-party code VIB के रूप में आता है, और हाथ बढ़ाने के लिए कोई package manager है ही नहीं।\nयह storage stack तक पहुँचता है Monitoring agents इसका उबाऊ रूप हैं। Proxmox का अपना storage documentation native plugins गिनाता है: dir, NFS, CIFS, CephFS, ZFS, BTRFS, LVM, LVM-thin, iSCSI, FC/SAS, RBD, ZFS-over-iSCSI, PBS, और फिर एक वाक्य जोड़ता है जिसे शब्दशः लेना चाहिए:\nyou may use all storage technologies available for Debian Linux\nयह इस बारे में एक बयान है कि सीमा कहाँ है, और इसके पीछे का तरीका सामान्य है: हर node पर एक block device लाइए, उस पर LVM डालिए, उसे shared चालू करके LVM storage के रूप में जोड़िए। supported Fibre Channel और iSCSI रास्ते ठीक ऐसे ही काम करते हैं, तो जो भी चीज़ shared block device बना सकती है, वह इसी रास्ते का इस्तेमाल कर सकती है।\nचार transports, shared Proxmox storage तक एक रास्ता transport Linux आपको क्या देता है Proxmox को क्या दिखता है Fibre Channel / SAS native plugin iSCSI native plugin NVMe/TCP या RDMA plugin नहीं: nvme-cli ATA over Ethernet plugin नहीं: aoetools एक block device हर node पर /dev/sdX \u0026#183; /dev/nvme0n1 LVM volume group shared: 1 storage type: lvm live migration पूरे cluster में Proxmox VE को बस दाईं ओर के दो boxes पहचानने हैं। उनके बाईं ओर सब कुछ Linux block layer है, और उसे परवाह नहीं कि device कैसे आया। इनमें से दो transports के लिए Proxmox plugin है और दो के लिए कुछ भी नहीं, और दूसरे box के बाद इससे कोई फ़र्क नहीं पड़ता। LVM परत वह जगह है जहाँ shared LUN cluster storage बनता है, चाहे उसे कोई भी लाया हो। TCP या RDMA पर NVMe जानने लायक मामला है, क्योंकि यह तेज़ है, आज का है, और उस plugin list में नहीं है। nvme-tcp और nvme-rdma in-tree Linux host drivers हैं, NVMe/TCP 5.0 से mainline में है, तो compile करने को कुछ नहीं है। nvme-cli एक Debian package है (nvme discover, फिर nvme connect), और nvmetcli दूसरे सिरे पर in-kernel nvmet target को configure करता है। जुड़ा हुआ namespace /dev/nvmeXnY के रूप में दिखता है, और वहाँ से वह एक सामान्य block device है।\nATA over Ethernet यही बात दूसरे छोर से कहता है: बहुत पुराना, कम जाना-पहचाना, plugin के रूप में उतना ही unsupported। aoe driver mainline में है; aoetools आपको aoe-discover और aoe-stat देता है; vblade दूसरी मशीन पर किसी भी file या block device को target बना देता है। वही रास्ता, वही नतीजा।\nइनमें से कोई plugin API, SDK या certification programme नहीं है। यह वह है जो तब होता है जब हाइपरवाइज़र की storage परत ही Linux block layer हो।\nईमानदार चेतावनियाँ, क्योंकि रात के 3 बजे तक यह एक जादू का खेल लगता है। इनमें से कोई transport tested Proxmox storage type नहीं है, तो integration और उसके failure modes, यानी reconnect का व्यवहार, multipath, load में timeouts, आपकी ज़िम्मेदारी हैं, और कुछ भी अहम उस पर रखने से पहले उन्हें test करना भी आपकी ज़िम्मेदारी है। और AoE एक नंगा Layer 2 protocol है, route नहीं हो सकता और कोई authentication नहीं, तो उसकी जगह एक अलग storage VLAN है और कहीं नहीं। NVMe/TCP के पास कम से कम discovery model है और उसे route किया जा सकता है, और आज इसी को चुनने की बड़ी वजह यही है।\nKVM और कौन चलाता है “पहले से चला रहे हैं” वाला दावा यहीं से आता है। नीचे का हर प्लेटफ़ॉर्म वही kernel module चलाता है।\nप्लेटफ़ॉर्म आपको यह कहाँ मिलता है KVM वाला हिस्सा user-space VMM Amazon EC2 (Nitro) Public cloud KVM core module Custom: QEMU हटाया, device model Nitro cards में AWS Lambda, Fargate Serverless /dev/kvm Firecracker: Rust में लिखा छोटा microVM monitor Google Compute Engine Public cloud शुरुआत से KVM Google का अपना VMM, जानबूझकर QEMU नहीं Alibaba Cloud ECS Public cloud सरल किया गया KVM (X-Dragon) Custom, net और storage MoC card पर offload Oracle Cloud (OCI) Public cloud Oracle Linux KVM: वही stack जो Oracle on-premises ship करता है QEMU की वंशावली DigitalOcean, Linode/Akamai, Vultr, Hetzner, OVHcloud, Scaleway, UpCloud Public cloud Stock KVM QEMU Nutanix AHV On-premises HCI Stock KVM libvirt और Open vSwitch के साथ QEMU OpenStack (Nova) Private cloud Stock KVM libvirt के ज़रिए QEMU: default और सबसे ज़्यादा tested driver Apache CloudStack, OpenNebula, oVirt On-premises Stock KVM libvirt के ज़रिए QEMU OpenShift Virtualisation, SUSE Harvester Kubernetes Stock KVM KubeVirt के ज़रिए pod के अंदर QEMU Proxmox VE On-premises Stock KVM QEMU, containers के लिए साथ में LXC सब kernel वाला आधा रखते हैं और user-space वाला आधा दोबारा लिखते हैं Hyperscalers ने KVM को fork नहीं किया। उन्होंने QEMU के काम को fork किया।\nAWS ने EC2 को Xen से हटाकर Nitro हाइपरवाइज़र पर डाला, जो KVM core kernel module पर बना है और जिसमें से QEMU पूरी तरह निकाल दिया गया। device model इसके बजाय समर्पित Nitro cards में रहता है, और इसी से उन्हें bare metal से अलग न पहचानी जा सकने वाली performance मिलती है। हर current-generation EC2 instance type यही चलाता है। अलग से, Lambda और Fargate Firecracker चलाते हैं, Rust में खास मकसद से बना VMM जो उसी /dev/kvm से बात करता है।\nGoogle ने Compute Engine के launch से हर Compute Engine VM KVM पर चलाई है, और QEMU इस्तेमाल करने के बजाय अपना user-space VMM लिखा, साफ़ तौर पर QEMU के guests, devices और modes के विशाल matrix से बचने के लिए। उन्होंने दूसरी दिशा में भी काम किया और kernel module को upstream में मज़बूत किया: जिन emulated devices की किसी को ज़रूरत नहीं थी उन्हें हटाया और emulated instructions का दायरा छोटा किया। वह काम उस KVM में है जो आप चला रहे हैं।\nAlibaba ने X-Dragon के साथ इसी आकार का काम किया: एक छँटा हुआ KVM हाइपरवाइज़र, जिसका network और storage virtualisation FPGA पर आधारित MoC card पर offload है।\nNutanix AHV है KVM, साथ में libvirt, साथ में QEMU, साथ में Open vSwitch, साथ में Nutanix का orchestration। उस सूची के हर व्यावसायिक उत्पाद में से यह Proxmox VE का सबसे करीबी रिश्तेदार है। अलग परत 4, और बहुत अलग बिल।\nपाँच प्लेटफ़ॉर्म, पाँच device models, एक KVM Amazon EC2Nitro Google CloudCompute Engine Alibaba CloudECS, X-Dragon NutanixAHV Proxmox VEDebian पर management device model हाइपरवाइज़र हार्डवेयर EC2 control plane console और API प्रति instance-घंटा GCE control plane console और API प्रति instance-घंटा ECS console और API प्रति instance-घंटा Prism और AOS हर node पर प्रति node, प्रति वर्ष pve-manager pveproxy, HA, SDN हर node पर वैकल्पिक subscription custom VMM, QEMU बिल्कुल नहीं devices रहते हैं Nitro cards पर Google का अपना user-space VMM, जानबूझकर QEMU नहीं सरल VMM, network और storage offload किए गए MoC card पर QEMU, libvirt और Open vSwitch QEMU, साथ में LXC भी KVM: kvm.ko, kvm-intel.ko / kvm-amd.ko isolation की सीमा, और हर column में यही code है Intel VT-x + EPT \u0026#183; AMD-V + NPT हर column में वही kernel module। stack में ऊपर जाते हुए पहले device model बदलता है, फिर management layer, फिर licensing: और यही वह क्रम है जिसमें ये प्लेटफ़ॉर्म असल में अलग होते हैं। Proxmox VE जानबूझकर QEMU रखता है तालिका को ranking की तरह पढ़ना लुभावना है, जिसमें QEMU बदल देने के लिए AWS और Google सबसे ऊपर हों। यह गलत पढ़ना है, क्योंकि उनकी मजबूरी आपकी नहीं है।\nAWS और Google एक हार्डवेयर profile चलाते हैं, उस पैमाने पर जहाँ device emulation का एक bug पूरे fleet की घटना है, और जिन guest image सीमाओं की उन्हें परवाह है, उन सब पर उनका नियंत्रण है। उस दुनिया में QEMU का फैलाव लगभग पूरा बोझ है, तो उसे हटाना साफ़ तौर पर सही है।\nआप उस दुनिया में नहीं हैं। आपके पास 2013 की एक appliance image है जो e1000 चाहती है। आपके पास एक Windows VM है जिसका machine type पूरी ज़िंदगी pinned रहना चाहिए। आपको एक GPU pass through करना है, एक installer को संतुष्ट करने के लिए emulated SAS controller चाहिए, एक UEFI variable store बचाना है। QEMU ठीक वही है जो एक general-purpose प्लेटफ़ॉर्म को इन सबके लिए हाँ कहने देता है।\nजिसे AWS attack surface कहता है, उसे आप compatibility matrix कहते हैं। दोनों वर्णन सही हैं; फ़र्क यह है कि आप अपने workloads चुन पाते हैं या नहीं।\nइससे उस patch queue का आकार भी समझ आता है। AWS और Google ने backup और snapshots को VMM के बाहर, अपनी storage services में सुलझाया। Proxmox के पास इसे सुलझाने के लिए कोई storage service नहीं थी, तो उन्होंने इसे QEMU में डाल दिया: इसीलिए savevm-async और PBS block driver उत्पाद के रूप में नहीं, patches के रूप में मौजूद हैं।\nऔर यह एक व्यावहारिक वजह से जानने लायक है: Proxmox VE के जिन हिस्सों की आपको सबसे ज़्यादा कमी खलेगी, वे वही हिस्से हैं जो upstream में नहीं हैं। आपके VM configs सादा text हैं और आपकी disk images standard formats में हैं, तो मशीन चली जाएगी। लेकिन RAM state समेत snapshot, और Proxmox Backup Server की incremental chain, Proxmox के QEMU fork पर निर्भर हैं। यह किसी proprietary हाइपरवाइज़र से कहीं हल्की निर्भरता है, fork public है, AGPL है, और आप उसका हर patch पढ़ सकते हैं, लेकिन यह शून्य नहीं है, और “software के स्तर पर कोई lock-in नहीं” के साथ यह footnote होना चाहिए।\nतो क्या यह एंटरप्राइज़ ग्रेड है? इस तर्क का आलसी रूप काम नहीं करता, और यह साफ़ कहना चाहिए। “AWS KVM इस्तेमाल करता है, इसलिए Proxmox VE एंटरप्राइज़ ग्रेड है” एक non-sequitur है: यह एक परत के बारे में दावा लेता है और चुपचाप उसे पूरे उत्पाद पर लगा देता है।\nवह संस्करण जो टिकता है, यह है।\nजो साझा है, वह वही परत है जिसे सही करना सबसे मुश्किल और गलत करना सबसे खतरनाक है। CPU और memory virtualisation, और tenants के बीच isolation की सीमा, वह हिस्सा है जहाँ bug का मतलब outage नहीं, सेंध है। उस code की समीक्षा Amazon, Google, Red Hat, Intel, AMD, IBM और Alibaba से पैसा पाने वाले इंजीनियर करते हैं, और उसके bugs वे संस्थाएँ ढूँढती हैं जो दुनिया के सबसे बड़े fleets चलाती हैं: आम तौर पर kernel के आप तक पहुँचने से पहले। जब guest-escape vulnerability आती भी है, तो fix उसी सामान्य kernel update से आता है जो आप वैसे भी लगाने वाले थे। आप किसी एक vendor के release cycle का इंतज़ार नहीं कर रहे, ऐसे हाइपरवाइज़र के लिए जिसे सिर्फ़ वही vendor देख सकता है।\nजो साझा नहीं है, वह सीमा के ऊपर का सब कुछ है। मतलब सवाल सिकुड़कर दो कहीं ज़्यादा जवाब देने लायक सवालों में बदल जाता है:\nक्या management layer आपके काम करने के तरीके के लिए काफ़ी अच्छी है? क्या आप उसके लिए ऐसी शर्तों पर support खरीद सकते हैं जिनके साथ आप रह सकें? दोनों को proof of concept में test किया जा सकता है और contract में लिखा जा सकता है। किसी के लिए भी हाइपरवाइज़र पर आस्था नहीं चाहिए।\nयह उस स्थिति से कहीं बेहतर है जो मूल सवाल मानकर चलता है: कि आपसे एक छोटे vendor के नए हाइपरवाइज़र पर भरोसा करने को कहा जा रहा है। ऐसा नहीं है। Proxmox का अपना code एक management layer है, ज़्यादातर Perl में और बढ़ते हुए Rust में, साथ में QEMU पर वह patch queue, और ध्यान दीजिए कि patches कहाँ लगते हैं: device model और backup path में, isolation की सीमा पर नहीं।\nयह जानना भी ज़रूरी है कि Proxmox की अपनी परत के fail होने की कीमत क्या है। QEMU processes host पर सामान्य, स्वतंत्र processes हैं, तो pveproxy के गिरने से एक भी virtual machine नहीं रुकती। यह उस हिस्से को खोने से बहुत अलग blast radius है जो isolation की सीमा का मालिक है।\n“वही हाइपरवाइज़र” आपको क्या नहीं दिलाता Vendor के भरोसा दिलाने वाले documents आम तौर पर यहीं रुक जाते हैं, जिससे पता चलता है कि वे किसके लिए लिखे गए हैं। ज़्यादा काम का आधा यही है।\nयह आपको AWS की reliability नहीं दिलाता। Nitro की availability का KVM से बहुत कम लेना-देना है। वह control plane, network fabric, storage service, capacity management और उसके आसपास के operational अभ्यास से आती है। आपके cluster की reliability आपके Corosync quorum design, आपकी fencing configuration, आपके storage चुनाव और आपकी network redundancy से आएगी। KVM की इनमें से किसी पर कोई राय नहीं है। Hyperscaler के साथ हाइपरवाइज़र साझा करने से उनका operations विरासत में नहीं मिलता।\nयह आपको Nitro जैसा attack surface नहीं दिलाता, और type 2 वाले आरोप का जायज़ आधा यहीं आकर लगता है। आप general-purpose kernel पर QEMU चला रहे हैं, और इतिहास में QEMU का device model ही वह जगह रहा है जहाँ यादगार VM escapes रहे: VENOM, एक emulated floppy controller में जिसे कोई इस्तेमाल नहीं कर रहा था, इसका क्लासिक उदाहरण है। Google उस समय कह सका कि Compute Engine प्रभावित नहीं हुआ, ठीक इसलिए कि वह QEMU नहीं चलाता। आप चलाते हैं, तो भरपाई के उपाय आपके हैं: emulated हार्डवेयर के बजाय virtio चुनिए, ऐसे devices मत दिखाइए जिनकी ज़रूरत नहीं, AppArmor profiles को छेड़िए मत, और QEMU को उसी अनुशासन से patch कीजिए जिससे kernel को। Proxmox के extra/ patches ठीक यही काम आपकी ओर से करते हैं, और यह जाँचते रहना उचित है कि वे अब भी कर रहे हैं।\nयह प्लेटफ़ॉर्मों के बीच VM के व्यवहार को portable नहीं बनाता। CPU model का चुनाव, machine type versioning, live migration compatibility और clock का व्यवहार, सब परत 3 और 4 में तय होते हैं, और हर जगह अलग हैं। मिली-जुली CPU generations वाला cluster अब भी CPU type को host रखने की सज़ा देगा, और प्लेटफ़ॉर्म पर logo चाहे जो हो, guest clocks अब भी खिसकती हैं। वही हाइपरवाइज़र का मतलब वही व्यवहार नहीं है।\nयह support वाले सवाल का जवाब नहीं देता: वही सवाल जिसकी procurement को असल में परवाह है, और ठीक ही है। Proxmox VE AGPLv3 है और production में मुफ़्त चलाया जा सकता है। Subscription enterprise-tested repository और vendor support खरीदती है, €120 प्रति socket प्रति वर्ष से शुरू। Proxmox का अपना support Austria के कारोबारी घंटों में मिलता है, तो चौबीसों घंटे की coverage Vienna से नहीं, partners से आती है। croit, जहाँ मैं काम करता हूँ, उन partners में से एक है, और साल के 365 दिन 24/7 coverage देता है। यह व्यावसायिक मोलभाव है, तकनीकी जोखिम नहीं: और इसका व्यावसायिक मोलभाव होना ही ऊपर कही गई हर बात का मतलब है।\nइसके बजाय असल में क्या परखें अगर हाइपरवाइज़र का सवाल सुलझ गया है, तो proof of concept को अपना समय उस परत पर लगाना चाहिए जो सच में Proxmox VE की अपनी है:\nFencing और HA. चल रहे HA guests वाले node की बिजली खींचिए और restart का समय नापिए। फिर दो nodes के साथ कीजिए और पक्का कीजिए कि quorum खोने पर बाकी nodes वैसा ही व्यवहार करते हैं जैसी आप उम्मीद करते हैं। CPU generations के पार live migration. उस CPU model के साथ जिस पर आप सच में standardise करना चाहते हैं, host के साथ नहीं। Backup, और उससे भी ज़्यादा, restore. Load में restore का समय, backup का समय नहीं। तेज़ backup के लिए आज तक किसी को धन्यवाद नहीं मिला। Permissions model. क्या आप किसी application टीम को उनकी अपनी VMs का console और power control दे सकते हैं और उसके अलावा कुछ नहीं, इतनी बारीकी से कि auditor संतुष्ट हो जाए। API. web interface जो भी करता है, वह एक API call है; अगर आपका automation उसे चला नहीं सकता, तो प्लेटफ़ॉर्म आपके काम करने के तरीके में फ़िट नहीं होगा। Upgrade का रास्ता. PoC cluster पर एक major-version upgrade, उस पर 400 VMs होने से पहले। इनमें से कोई भी सवाल KVM के बारे में नहीं है। बात ही यही है।\nहाइपरवाइज़र सुलझा हुआ हिस्सा है। Proof of concept उन हिस्सों पर खर्च कीजिए जो सुलझे नहीं हैं।\nसंदर्भ KVM खुद\nKVM API documentation — /dev/kvm का ioctl interface, जो पूरा हाइपरवाइज़र अनुबंध है Linux 2.6.20 release notes — वह release जिसमें KVM merge हुआ, फ़रवरी 2007 Some KVM developments — LWN, जनवरी 2007, mainline में आने के कुछ दिन बाद KVM पर बाकी हाइपरवाइज़र कैसे बने हैं\nInterpreting virtual machine monitor and executable failures — Broadcom का अपना वर्णन, जिसमें चलती ESXi VM “several processes or userworlds” है, हर vCPU के लिए एक VMM और हर VM के लिए एक VMX The Architecture of VMware ESXi (PDF) — वह whitepaper जो VMkernel को processes, signals, file system और threads वाला “a POSIX-like operating system” कहता है। mirror के ज़रिए link किया गया है क्योंकि मूल VMware URL Broadcom के पुनर्गठन में नहीं बचा, जो vendor की निरंतरता पर अपने आप में एक छोटी टिप्पणी है Hyper-V architecture — Virtual Machine Worker Process पर Microsoft: एक user-mode component, हर VM के लिए एक, जिसमें सारे emulated devices रहते हैं The Nutanix Bible — AHV architecture — AHV को libvirt, QEMU और Open vSwitch के साथ KVM बताया गया है कौन KVM चलाता है, और उन्होंने इसे कैसे बदला\n7 ways we harden our KVM hypervisor at Google Cloud — बिना QEMU के KVM चलाने, और उनके upstream hardening पर Google The AWS Nitro System — कौन से EC2 instance types Nitro हाइपरवाइज़र चलाते हैं AWS EC2 Virtualization 2017: Introducing Nitro — Xen से KVM पर बदलाव पर Brendan Gregg का लेख, अब भी इसका सबसे साफ़ ब्योरा Firecracker — Lambda और Fargate के पीछे AWS का छोटा KVM-आधारित VMM Alibaba Cloud\u0026rsquo;s sixth-generation ECS instances — X-Dragon हाइपरवाइज़र और MoC offload KubeVirt — OpenShift Virtualisation और Harvester के पीछे pod में QEMU/KVM वाला मॉडल OpenStack Nova hypervisor support matrix — reference driver के रूप में KVM Proxmox क्या संभालता है\nThe Proxmox GitHub organisation — 89 repositories, जिनमें pve-qemu, pve-kernel, pve-edk2-firmware और lxc, zfsonlinux, openvswitch, libiscsi, corosync-pve और ceph की packaging शामिल है pve-qemu patch series — ऊपर गिने गए 78 patches, और यह देखने का सबसे तेज़ तरीका कि Proxmox QEMU में ठीक-ठीक क्या जोड़ता है Proxmox VE storage documentation — native plugin list, कौन से storage types shared हैं, और Debian Linux पर उपलब्ध सारी storage technologies इस्तेमाल करने वाली पंक्ति nvme-cli और nvmetcli — NVMe-oF host और target tooling; ATA over Ethernet के बराबर के लिए aoetools और vblade। सब Debian trixie में, जिस पर Proxmox VE 9 बना है Proxmox VE pricing and subscription tiers — subscription में क्या आता है खुलासा: मैं croit के लिए काम करता हूँ, जो एक Proxmox Gold Partner है। ऊपर के तकनीकी दावों के स्रोत दिए गए हैं और उन्हें जाँचा जा सकता है; व्यावसायिक paragraph वह हिस्सा है जिसमें मेरा हित है, तो उसे उसी नज़र से पढ़िए।\n","permalink":"https://blogs.damiendye.uk/hi/proxmox/kvm-the-hypervisor-inside-proxmox-ve/","summary":"“क्या Proxmox एंटरप्राइज़ ग्रेड है?” असल में हाइपरवाइज़र के बारे में सवाल है, और Proxmox VE में हाइपरवाइज़र है ही नहीं। हाइपरवाइज़र KVM है: वही kernel module जो EC2, Google Cloud, Alibaba Cloud, Nutanix AHV और OpenShift Virtualisation के नीचे चलता है। Proxmox असल में क्या संभालता है, type 1 वाली बहस गलत रेखा पर निशाना क्यों साधती है, और साझा नींव आपको क्या नहीं दिलाती।","title":"Proxmox VE हाइपरवाइज़र नहीं है: KVM है, और आप उसे पहले से चला रहे हैं"},{"content":"HDD फिर से मेन्यू में क्यों हैं सालों तक सलाह इतनी सीधी थी कि एक स्टिकी नोट पर लिखी जा सके: सब कुछ SSD पर रखिए।\nवह सलाह सही थी, और सस्ती भी थी। अब दोनों बातें पूरी तरह सच नहीं हैं। NAND की सप्लाई तंग हुई है, AI की माँग ने फ़्लैश की कीमतें ऊपर धकेल दी हैं, और बड़ी क्षमता वाले NVMe को किसी किफ़ायती Proxmox डिप्लॉयमेंट के लिए सही ठहराना मुश्किल हो गया है। उस तरह का डिप्लॉयमेंट जिसे चालू रहना है, भरोसेमंद रहना है, और जितना ईमानदारी से हो सके उतना सस्ता रहना है।\nएंटरप्राइज़ HDD फिर से दिलचस्प हैं, उसी वजह से जिससे वे हमेशा थे: प्रति पाउंड क्षमता, और इसमें कोई और उनके आसपास भी नहीं आता।\nदिक्कत यह है कि जिसने भी घूमती डिस्क पर VM चलाए हैं, वह जानता है कि यह कितना बुरा हो सकता है। वह अनुभव असली है, और आम तौर पर गलती आर्किटेक्चर की होती है, डिस्क की नहीं।\nडिस्क पर दोष डालना आसान है, यह मानना पड़ेगा। यह गलत भी है, और महँगा भी, क्योंकि इसी के चलते लोग वह फ़्लैश खरीद लेते हैं जिसकी उन्हें ज़रूरत नहीं थी।\nनीचे सब कुछ मानकर चलता है कि आपके पास हाइपर-कन्वर्ज्ड Ceph OSD वाला Proxmox है, क्योंकि लेआउट के फ़ैसले असल में वहीं चुभते हैं।\nसमस्या latency की है, throughput की नहीं एक आधुनिक एंटरप्राइज़ HDD बड़ा sequential डेटा बिल्कुल ठीक से चलाता है। वह कभी bottleneck था ही नहीं।\nएक 7.2k RPM एंटरप्राइज़ ड्राइव random काम में लगभग 80 से 100 IOPS देती है, क्योंकि हर random ऑपरेशन को head seek और प्लैटर के घूमने का इंतज़ार करना पड़ता है। यह आँकड़ा बीस साल में मुश्किल से हिला है। यह मैकेनिक्स है, इलेक्ट्रॉनिक्स नहीं। एक एंट्री-लेवल एंटरप्राइज़ SSD इससे तीन या चार ऑर्डर ऑफ़ मैग्निट्यूड दूर है।\nउसी ड्राइव को sequential काम दीजिए और यह एक काम का डिवाइस है। ऑपरेशन की दर लगभग दोगुनी होकर करीब 200 IOPS हो जाती है, पर अब हर ऑपरेशन एक बड़ा block ले जाता है, क्योंकि head पहले से सही जगह पर है और लगातार stream कर सकता है। तो आपको असली throughput मिलता है, 150 से 250 MB/s, ऐसी प्रति टेराबाइट कीमत पर जिसे कोई और छू भी नहीं पाता।\nयही अहम विषमता है, और यह “HDD धीमे हैं” वाली बात नहीं है। घूमती डिस्क sequential काम में अच्छी है और random काम में निकम्मी, और दोनों आँकड़े पास-पास सिर्फ़ इसलिए हैं क्योंकि सीमा ऑपरेशन की गिनती पर है, बाइट्स पर नहीं।\nइसी से पूरे डिज़ाइन का brief तय होता है। आप डिस्क को तेज़ बनाने की कोशिश नहीं कर रहे। वह आप कर नहीं सकते। आप यह इंतज़ाम कर रहे हैं कि वह अपना समय उस मोड में बिताए जिसमें वह पहले से सक्षम है, और छोटा random ट्रैफ़िक उससे दूर रहे। इसलिए आगे जो कुछ है वह इसी एक विचार को दो बार लागू करना है।\nसमस्या यह है कि वर्चुअल मशीनें वह workload पैदा ही नहीं करतीं जिसमें HDD अच्छे हैं। वे पैदा करती हैं मेटाडेटा अपडेट, जर्नल writes, छोटे synchronous flush, logging, फ़ाइलसिस्टम की साफ़-सफ़ाई, और एक साथ दर्जन भर guest से random गतिविधि के झोंके, जो डिस्क पर आपस में गुँथे हुए पहुँचते हैं।\nRandom काम में निकम्मी, sequential में सच में अच्छी: डिस्क किस मोड में चलती है, यही पूरा डिज़ाइन है प्रति सेकंड ऑपरेशन, एक डिवाइस: बार स्केल पर नहीं, क्योंकि तीन ऑर्डर ऑफ़ मैग्निट्यूड नहीं समाते 7.2k HDD: random 80–100 हर ऑपरेशन seek और घुमाव का इंतज़ार करता है: निकम्मा 7.2k HDD: sequential ~200 और हर एक बड़ा block ले जाता है: 150–250 MB/s असली throughput एंटरप्राइज़ NVMe 100k+ कोई चलता पुर्ज़ा नहीं, तो seek की कोई कीमत नहीं हाइपर-कन्वर्ज्ड क्लस्टर असल में डिस्क को क्या भेजता है guest मेटाडेटा अपडेट जर्नल writes और fsync logging और साफ़-सफ़ाई RocksDB मेटाडेटा random झोंके, कई guest बड़े sequential ट्रांसफ़र इन छह में से पाँच छोटे और random हैं। सिर्फ़ एक वह है जिसमें स्पिंडल अच्छा है। यह “HDD धीमे हैं” वाली बात नहीं है। घूमती डिस्क sequential काम में सच में अच्छी है और random काम में निकम्मी, और दोनों आँकड़े पास-पास सिर्फ़ इसलिए हैं क्योंकि सीमा ऑपरेशन की गिनती पर है, हर एक के बाइट्स पर नहीं। तो काम डिस्क को तेज़ बनाना नहीं है। काम है उसे उसी मोड में रखना जिसमें वह पहले से सक्षम है। Random और sequential ऑपरेशन की दरें हैरानी की हद तक पास-पास हैं, क्योंकि सीमा ऑपरेशन की संख्या पर है, हर ऑपरेशन में जाने वाले बाइट्स पर नहीं। Sequential वह जगह है जहाँ डिस्क अपनी कीमत वसूलती है; एक हाइपर-कन्वर्ज्ड क्लस्टर स्वाभाविक रूप से उसे दूसरी तरह का काम भेजता है। Ceph इसमें अपनी एक परत और जोड़ता है। हर write डेटा के साथ RocksDB मेटाडेटा अपडेट भी ले जाता है। अगर यह सब कच्चे स्पिंडल पर उतरे, तो डिस्क सेवा देने के बजाय seek करने में समय बिताती हैं, और आपको वह लक्षण मिलता है जिसे हर एडमिनिस्ट्रेटर पहचानता है: ऊँचा I/O wait, सुस्त guest, बेढंगी responsiveness, और एक क्लस्टर जो अपनी क्षमता शीट के हिसाब से कहीं ज़्यादा धीमा लगता है।\nCeph का अपना हार्डवेयर मार्गदर्शन इस बारे में साफ़-साफ़ बोलता है कि यह कहाँ ले जाता है। वह चेतावनी देता है कि “consider carefully the ostensible cost-per-gigabyte advantage of larger HDDs, and the concomitant limitations of IOPS per TB”, और कहता है कि 8 TB से बड़ी ड्राइव “may be best suited for storage of large files / objects that are not at all performance-sensitive.”\nयह हिसाब लगाना फ़ायदेमंद है, क्योंकि जो ड्राइव इसे किफ़ायती बनाती हैं वे बड़ी ही होती हैं। 20 TB और ऊपर। एक 20 TB ड्राइव भी अपने वही 80 से 100 random IOPS देती है, क्योंकि क्षमता से आपको एक भी ऑपरेशन ज़्यादा नहीं मिलता। तो यह लगभग 4 से 5 random IOPS प्रति टेराबाइट देती है, जबकि 8 TB ड्राइव लगभग ग्यारह देती है, और 2 TB ड्राइव चालीस।\nतो Ceph के अपने पैमाने से, 20 TB स्पिंडल पूरी तरह उस इलाके में है जहाँ वह आपसे performance-sensitive workload न रखने को कहता है।\nयह इन्हें खरीदने के खिलाफ़ तर्क नहीं है। यही वजह है कि इस पोस्ट का बाकी हिस्सा मौजूद है। नीचे का डिज़ाइन ठीक वही है जो 20 TB स्पिंडल को VM स्टोरेज के लिए व्यवहार्य बनाता है, इस इंतज़ाम से कि छोटा random काम उस तक कभी पहुँचे ही नहीं।\nमेटाडेटा को स्पिंडल से हटाइए HDD वाले क्लस्टर में सबसे ज़्यादा फ़ायदे वाला बदलाव है स्पिंडल से Ceph का हिसाब-किताब रखवाना बंद करना।\nBlueStore हर OSD के लिए तीन चीज़ें रखता है: डेटा खुद block पर, RocksDB मेटाडेटा डेटाबेस block.db पर, और write-ahead log block.wal पर। डिफ़ॉल्ट रूप से तीनों एक ही डिवाइस पर रहते हैं। block.db को NVMe पर रख दीजिए और बहुत सारा छोटा random I/O डिस्क को पूरी तरह छोड़ देता है।\nCeph का हार्डवेयर डॉक्यूमेंटेशन इसे सीधे कहता है: “HDD OSDs may see a significant write latency improvement by offloading WAL+DB onto an SSD.”\nBlueStore OSD लेआउट: सब कुछ स्पिंडल पर, बनाम मेटाडेटा NVMe पर डिफ़ॉल्ट: एक डिवाइस तीनों रखता है object डेटा writes RocksDB मेटाडेटा एक 7.2k HDD block block.db .wal दोनों धाराएँ एक ही 80-IOPS बजट बाँटती हैं। हर write पर डिस्क डेटा और मेटाडेटा के बीच seek करती है। block.db NVMe पर: मेटाडेटा चला जाता है object डेटा writes RocksDB मेटाडेटा 7.2k HDD block: सिर्फ़ डेटा एंटरप्राइज़ NVMe block.db .wal स्पिंडल अब एक ही काम करता है। DB डिवाइस बताइए और WAL साथ चला जाता है। RBD workloads के लिए\u0026#160;block.db\u0026#160;का साइज़\u0026#160;block\u0026#160;का 1–2% रखिए, या आराम के लिए 2.5%। इसे छोटा रखिए तो RocksDB फ़ेल नहीं होता: वह वापस स्पिंडल पर spill होता है, जो वह इकलौता नतीजा है जो अभी खरीदा फ़्लैश बर्बाद करता है। उपयोगी साइज़ लगभग 3 GB, 30 GB और 300 GB पर steps में हैं, क्योंकि DB पार्टीशन सिर्फ़ RocksDB levels के योग वाले साइज़ पूरे इस्तेमाल करता है। अगले step तक ऊपर जाना आम तौर पर सस्ता है; नीचे जाने से कुछ नहीं मिलता। बाएँ, सब कुछ एक स्पिंडल पर: डेटा writes और RocksDB अपडेट उन्हीं 80-के-आसपास IOPS के लिए लड़ते हैं। दाएँ, block.db NVMe पर: मेटाडेटा ट्रैफ़िक डिस्क छोड़ देता है, और स्पिंडल वही एक काम करता रह जाता है जिसमें वह अच्छा है। यहाँ ढंग का एंटरप्राइज़ NVMe इस्तेमाल कीजिए, कंज़्यूमर फ़्लैश नहीं। वजह हेडलाइन बेंचमार्क आँकड़े नहीं हैं। वजह है लगातार लोड में स्थिर latency, और power-loss protection। Ceph का डॉक्यूमेंटेशन सीधा है: “Enterprise-class SSDs are best for Ceph: they feature power loss protection (PLP)”, और “bargain client-class or off-brand SSDs are a false economy.”\nSamsung PM9A3 और Micron 7450 Pro श्रेणी की ड्राइव यहाँ की चीज़ हैं। write के दबाव में Ceph को peak आँकड़ों से कहीं ज़्यादा consistency की परवाह होती है, और ठीक यही चीज़ एक एंटरप्राइज़ ड्राइव को एक तेज़ कंज़्यूमर ड्राइव से अलग करती है।\nblock.db का साइज़, और spillover की कीमत साइज़ गलत हुआ और फ़ायदा चुपचाप उड़ जाता है, क्योंकि जब block.db भर जाता है, तो RocksDB फ़ेल नहीं होता: वह धीमे डिवाइस पर वापस spill हो जाता है, ठीक वहीं जहाँ वह NVMe के बिना होता।\nयह दोनों दुनिया का सबसे बुरा हाल है: आपने फ़्लैश खरीद लिया है और आप अब भी स्पिंडल पर seek कर रहे हैं।\nCeph का मौजूदा मार्गदर्शन:\nWorkload block के हिस्से के रूप में block.db RBD / block: VM डिस्क 1% से 2% RGW / object कम से कम 4% WAL+DB को offload करते समय सामान्य सिफ़ारिश कम से कम 2.5% Proxmox VM स्टोरेज RBD वाली पंक्ति है, तो 1–2% ईमानदार प्लानिंग आँकड़ा है, और 2.5% आराम से बैठने की जगह है।\nइसे 20 TB ड्राइव पर लगाइए और आँकड़े ध्यान खींचते हैं:\nएक 20 TB OSD के लिए block.db 1% पर 200 GB 2% पर 400 GB 2.5% पर 500 GB इसे नीचे बताए RocksDB level steps के साथ मिलाइए और प्रति OSD 300 GB समझदारी वाली जगह है। रेंज के बीच के सबसे पास वाला उपयोगी step।\nइससे यह बदल जाता है कि साझा मेटाडेटा डिवाइस असल में क्या है। आठ 20 TB OSD को मिलाकर 2.4 TB NVMe चाहिए; पंद्रह, जो एक NVMe के पीछे Ceph की बताई अधिकतम संख्या है, को 4.5 TB चाहिए। इतनी बड़ी ड्राइव पर यह DB की क्षमता तय करती है कि एक डिवाइस के पीछे कितने OSD बैठेंगे, अनुपात नहीं। Ceph की मंज़ूरी खत्म होने से बहुत पहले आपके गीगाबाइट खत्म हो जाएँगे।\nएक और पेच जानने लायक है, क्योंकि यह अंदाज़े वाली साइज़िंग को गलत बना देता है। RocksDB के level ढाँचे का मतलब है कि एक DB पार्टीशन सिर्फ़ उन्हीं साइज़ का पूरा इस्तेमाल कर सकता है जो उसके levels के योग से मेल खाते हैं। ऐतिहासिक रूप से इससे लगभग 3 GB, 30 GB और 300 GB पर उपयोगी steps बनते थे, और बीच के साइज़ नीचे वाले step से कुछ ज़्यादा नहीं देते थे। व्यवहार में 18 GB को ऊपर 30 GB करना अक्सर मुफ़्त होता है; उसे नीचे 20 GB करना सबसे बुरी हालत में आपको 3 GB से ज़्यादा कुछ नहीं देता।\nspillover की जाँच क्लस्टर कुछ समय चल लेने के बाद कीजिए, पहले दिन नहीं। यह धीरे-धीरे उभरने वाली समस्या है।\nअलग WAL डिवाइस की ज़रूरत नहीं इससे एक पार्टीशन और बहुत सारी माथापच्ची बचती है।\nअगर आप DB डिवाइस बताते हैं और कोई अलग WAL डिवाइस नहीं, तो Ceph WAL को अपने आप DB के साथ तेज़ डिवाइस पर रख देता है। डॉक्यूमेंटेशन कहता है कि “whenever a DB device is specified but an explicit WAL device is not, the WAL will be implicitly colocated with the DB on the faster device.”\nतो “DB और WAL को NVMe पर रखो” सही लक्ष्य है, पर यह एक argument है, दो नहीं। अलग block.wal तभी समझ में आता है जब आपके पास उसे रखने के लिए एक तीसरा, और तेज़ टियर हो।\nHDD का write cache बंद कीजिए छोटा, बेरौनक, और छूट जाने में आसान।\nCeph का डॉक्यूमेंटेशन बताता है कि HDD पर OSD performance “may be dramatically increased \u0026hellip; by disabling this write cache”। ड्राइव के अंदर का volatile cache writes का क्रम बदलता है और उन्हें ऐसे रोकता है जो Ceph के flush semantics से टकराता है, और इसे बंद करने से आम तौर पर चीज़ें धीमी नहीं, तेज़ होती हैं।\nbcache आने के बाद यह सलाह नहीं, अनिवार्यता बन जाता है, जो अगला सेक्शन है।\nजब आप वहाँ हैं ही: आपको RAID-capable HBA की ज़रूरत नहीं है। Ceph यह सीधे कहता है: “You do not need an RoC (RAID-capable) HBA.” OSD को डिस्क दे दीजिए।\nहर स्पिंडल के लिए एक Optane मेटाडेटा को डिस्क से हटाना steady state को ठीक करता है। यह झोंकों को ठीक नहीं करता, क्योंकि छोटे synchronous writes के एक झोंके को फिर भी acknowledge होना है, और स्पिंडल फिर भी स्पिंडल की रफ़्तार से acknowledge करता है।\nbcache इसी के लिए है, और यहाँ इसे जो चीज़ काम का बनाती है वह है Optane।\nमायने क्षमता के नहीं हैं। मायने write लोड में व्यवहार के हैं। NAND के मुकाबले Optane बहुत कम latency, बहुत ऊँची endurance देता है, और garbage collection की वे खाइयाँ बिल्कुल नहीं जो किसी SSD के write-cache performance को कुछ समय सेवा में रहने के बाद अनिश्चित बना देती हैं। छोटा, झोंकेदार, write-भारी ट्रैफ़िक सोखना वह काम है जिसमें यह दुनिया में सबसे अच्छा है।\nजो लेआउट मायने रखता है: हर HDD के लिए एक Optane, हर जोड़ी अपना अलग bcache डिवाइस। डिस्क की पूरी शेल्फ़ में बँटा एक Optane नहीं।\nतीन टियर, साझा करने के दो मॉडल: जोड़ी वाला write cache, साझा मेटाडेटा डिवाइस एक Proxmox नोड, तीन OSD Guest VM writes: छोटे, synchronous, झोंकेदार Ceph RocksDB मेटाडेटा bcache0 Optane write cache HDD osd.0 block bcache1 Optane write cache HDD osd.1 block bcache2 Optane write cache HDD osd.2 block हर स्पिंडल पर एक Optane: जोड़ी में, कभी साझा नहीं cache फ़ेल होने की कीमत ठीक एक OSD है, जिसे Ceph रोज़ की तरह rebuild करता है। यहाँ ज़रूरी endurance: 30–100 DWPD। सिर्फ़ Optane। साझा एंटरप्राइज़ NVMe block.db + अपने आप WAL, तीनों OSD power-loss protected साझा, क्योंकि मेटाडेटा छोटा है Ceph: प्रति SATA SSD 4–5 HDD, प्रति NVMe 15 से ज़्यादा नहीं। इसे खोइए और इसके पीछे का हर OSD साथ जाता है। एंटरप्राइज़ NAND ठीक है, पर तेज़ NVMe, सस्ता नहीं। दोनों टियर ज़रूरी हैं, और ये एक जैसी खरीद नहीं हैं। Optane write का acknowledgement छोटा करता है; Ceph के लगातार मेटाडेटा reads के लिए कुछ नहीं करता, और मेटाडेटा writes को सिर्फ़ टालता है। NVMe छोड़िए और RocksDB फिर प्लैटर पर है। OSD का हर write उसके cache डिवाइस से गुज़रता है, इसीलिए वह Optane होना चाहिए। मेटाडेटा डिवाइस का होना ज़रूरी नहीं, पर उसे फिर भी तेज़ NVMe होना है: write वॉल्यूम छोटा, फिर भी वह अपने पीछे के हर OSD की मेटाडेटा latency ढोता है। तीन टियर, साझा करने के दो अलग मॉडल। DB/WAL डिवाइस कई OSD में साझा है क्योंकि RocksDB का write वॉल्यूम छोटा है, फिर भी उसे तेज़ NVMe होना ही है क्योंकि वह उन सबकी मेटाडेटा latency ढोता है। Optane write cache अपने स्पिंडल के साथ एक-से-एक जोड़ा गया है, तो cache के फ़ेल होने पर कभी एक ही OSD जा सकता है। यह जोड़ी सोच-समझकर चुनी गई है, और इससे दो चीज़ें मिलती हैं।\nकोई होड़ नहीं। हर स्पिंडल को एक पूरे Optane की latency और queue depth अकेले मिलती है, बजाय इसके कि वह सात दूसरे OSD के झोंकों के पीछे कतार में लगे।\nएक failure domain जिसे झेलना Ceph पहले से जानता है। एक साझा write cache अपने पीछे के हर OSD का dirty डेटा रखता है, तो उसे खोने का मतलब सबको एक साथ खोना है; एक-से-एक जोड़ी में, एक Optane खोने की कीमत ठीक एक OSD है। यह फ़र्क इस डिज़ाइन का सबसे अहम नतीजा है, और इस पर अलग से बात आप क्या गँवा रहे हैं में है।\nयह Optane ही होना चाहिए, NAND नहीं “Optane” शब्द यहाँ ब्रांड की पसंद या शौक की चीज़ नहीं है। NAND NVMe लगाना, चाहे वह कितना भी महँगा हो, कुछ ऐसा बनाता है जो घिस जाता है, और वजह endurance है।\nदेखिए cache डिवाइस कहाँ बैठता है। क्योंकि यह डिज़ाइन bcache का sequential bypass बंद कर देता है, यानी नीचे वाले नियम में sequential_cutoff=0, इसलिए उस OSD पर हर एक write इसी से होकर जाता है: सिर्फ़ झोंके नहीं, सब कुछ। इससे cache नोड का सबसे ऊँचे duty cycle वाला डिवाइस बन जाता है, जिससे मशीन की पूरी उम्र तक एक पूरी घूमती डिस्क का write वॉल्यूम सोखने को कहा जाता है।\nEndurance को drive writes per day में बताया जाता है, और फ़र्क थोड़ा-बहुत नहीं है:\nडिवाइस रेटेड endurance Optane P5800X 100 DWPD Optane P4800X 30 DWPD Write-intensive एंटरप्राइज़ NAND, रेंज में सबसे ऊपर लगभग 10 DWPD Mixed-use एंटरप्राइज़ NAND 3 DWPD या कम आम एंटरप्राइज़ NAND: PM9A3, 7450 Pro श्रेणी लगभग 1 DWPD Optane की endurance उस NAND से दस से सौ गुना है जो आप वरना वहाँ लगाते। 1 DWPD वाली ड्राइव को उस एक जगह लगाइए जहाँ क्लस्टर का हर write आता है, और आपने cache नहीं बनाया, आपने एक खपने वाली चीज़ बना दी है।\nटेबल जितना बताती है हालत उससे बुरी है, क्योंकि NAND अंदरूनी तौर पर write amplification झेलता है और Optane नहीं। एक NAND ड्राइव का रेटेड DWPD वह है जो वह interface पर लेती है; उसकी cells असल में जितना सोखती हैं वह ज़्यादा है। Optane के आँकड़े को ऐसे किसी फ़ुटनोट की ज़रूरत नहीं।\nRebuild में इसकी परीक्षा होती है। Backfill बचे हुए नोड्स से एक सिकुड़ी हुई अवधि में टेराबाइट्स writes धकेलता है, उसका हर बाइट उनके cache डिवाइस से होकर: यह endurance की घटना है, सिर्फ़ latency की नहीं, और ठीक तब आती है जब आप सबसे कम चाहते हैं कि कोई दूसरा डिवाइस फ़ेल हो।\nतो दोनों फ़्लैश टियर को अलग-अलग वजहों से अलग-अलग ड्राइव चाहिए:\nटियर Write वॉल्यूम डिवाइस को क्या चाहिए DB/WAL छोटा, सिर्फ़ RocksDB एक तेज़ एंटरप्राइज़ NVMe। कम latency, ऊँचे random IOPS, PLP। एंटरप्राइज़ NAND सही तकनीक है; PM9A3 या 7450 Pro सही खरीद है Write cache सब कुछ PLP और दसियों DWPD वाली endurance। NAND किसी भी कीमत पर गलत तकनीक है दोनों कामों के लिए एक ही तरह की ड्राइव खरीदना वही गलती है जिसे रोकने के लिए यह सेक्शन है। पर पहली पंक्ति को बचत की इजाज़त मत समझिए, क्योंकि कम write वॉल्यूम का मतलब कम माँग नहीं है।\nDB/WAL डिवाइस को फिर भी सच में तेज़ NVMe होना है, तीन वजहों से जिनका इससे कोई लेना-देना नहीं कि उससे कितने बाइट्स गुज़रते हैं।\nयह अपने पीछे के हर OSD की एक साथ सेवा करता है, तो जो queue इसे दिखती है वह चार या पंद्रह सेट मेटाडेटा ट्रैफ़िक है, एक डिस्क जितना नहीं।\nइसकी latency सीधे आपके clients पर पड़ती है। RocksDB lookups objects खोजने, peering और scrub के critical path पर बैठते हैं, और वे छोटे random reads हैं। यही वह workload है जहाँ एक तेज़ NVMe और एक औसत NVMe का फ़र्क सबसे चौड़ा है। हर microsecond उस पर निर्भर हर OSD से गुणा होता है।\nऔर compaction झोंकेदार है। RocksDB समय-समय पर अपने levels दोबारा लिखता है, जिससे लगातार की हलचल reads और writes के एक घने उछाल में बदल जाती है। जो डिवाइस औसत झेल लेता है और उछाल पर अटकता है, वह अपने पीछे के हर OSD को एक ही पल में अटका देता है।\nCeph के अपने अनुपात इसका इशारा हैं। यह SATA SSD के मुकाबले एक NVMe के पीछे तीन गुना OSD की इजाज़त देता है, और यह interface और डिवाइस क्लास बोल रहे हैं, क्षमता नहीं। NVMe इस्तेमाल कीजिए।\nतो: cache डिवाइस Optane होना ही चाहिए, DB/WAL डिवाइस NAND हो सकता है, और इनमें से कोई भी जगह पैसे बचाने की नहीं है।\nकौन सा Optane: 32 GB का M10 अक्सर काफ़ी होगा इसका मतलब यह नहीं कि सबसे बड़ा Optane ही सही है। आपको कौन सा डिवाइस चाहिए यह आपका write workload तय करता है, हालाँकि जैसा आगे दिखेगा, सेकंड-हैंड बाज़ार शायद यह फ़ैसला आपके लिए वैसे भी कर दे। हिसाब फिर भी मायने रखता है, क्योंकि यह बताता है कि आप ज़्यादा खरीद रहे हैं या कम।\nशुरुआत इससे कीजिए कि cache है किसलिए। यह एक झोंका रखता है, डिस्क नहीं। writeback_percent=40 पर एक 32 GB डिवाइस लगभग 13 GB का dirty buffer देता है, जो छोटे synchronous writes की बहुत बड़ी संख्या है।\nतो अनुपात से घबराइए मत। 20 TB डिस्क के आगे 32 GB मॉड्यूल उसका 0.16% है, जो बेतुका लगता है जब तक आपको याद न आए कि यह झोंका सोखने वाला है, hot डेटा रखने की कोशिश करता working-set cache नहीं। उसी डिस्क के आगे 375 GB डिवाइस 1.9% है, जो बस उससे ज़्यादा गुंजाइश है जितनी आप इस्तेमाल करेंगे।\nइससे रेंज का सस्ता छोर खेल में आ जाता है। यह रहा छोटा कंज़्यूमर मॉड्यूल डेटासेंटर वाले पुर्ज़े के मुकाबले, क्योंकि फ़र्क वहाँ नहीं है जहाँ लोग उम्मीद करते हैं:\nOptane Memory M10 32 GB Optane DC P4800X 375 GB Random read, 4K 240,000 IOPS 550,000 IOPS Random write, 4K 65,000 IOPS read के बराबर Sequential read 1,200 MB/s 2,400 MB/s Sequential write 290 MB/s 2,000 MB/s आम latency नहीं बताया गया 10 µs से कम Endurance 365 TBW 12.3 PBW: 30 DWPD Interface PCIe 3.0 x2, M.2 2280 PCIe 3.0 x4, U.2 या AIC पहले write IOPS वाली पंक्ति देखिए। छोटा M10 एक सेकंड में 65,000 random writes करता है; उसके पीछे का स्पिंडल 80। सबसे सस्ता Optane भी जिस डिस्क को cache कर रहा है उससे लगभग 650 गुना है, तो performance के पैमाने पर बहस शुरू होने से पहले खत्म है। DC पुर्ज़े के अतिरिक्त IOPS के पास जाने की कोई जगह नहीं जब नीचे एक 7.2k डिस्क है।\nजो पंक्ति खरीद तय करती है वह endurance है, जहाँ फ़र्क 34× है। पाँच साल की उम्र पर इसे रोज़ के बजट में बदलिए:\nडिवाइस पाँच साल में रोज़ झेले जा सकने वाले writes M10 32 GB: 365 TBW लगभग 200 GB/दिन P4800X 375 GB: 12.3 PBW लगभग 6.7 TB/दिन रोज़ 200 GB से कम writes और एक 32 GB M10 पूरी बिल्ड की उम्र निकाल देता है। उसके दोगुने पर आपको ढाई साल मिलते हैं। सच में write-भारी हों तो DC पुर्ज़ा अपनी कीमत वसूलता है: IOPS के लिए नहीं, जिन्हें आप इस्तेमाल नहीं कर सकते, बल्कि उस तीस-गुना-के-आसपास ज़्यादा लिखाई के लिए जो वह झेलता है।\nतो अंदाज़ा मत लगाइए, नापिए। किसी मौजूदा cache डिवाइस पर nvme smart-log आपको data_units_written देता है; एक हफ़्ते के अंतर पर दो बार लीजिए, भाग दीजिए, और जिस चीज़ पर आप विचार कर रहे हैं उसके रेटेड TBW से तुलना कीजिए। अगर आप वहाँ पढ़ना पसंद करें तो bcache अपने खुद के कुल आँकड़े /sys/block/bcacheN/bcache/stats_total/ के नीचे रखता है।\nM10 पर दो सावधानियाँ। इसके random आँकड़े पूरे डिवाइस पर नहीं, 8 GB के दायरे पर बताए गए हैं, तो जिस cache को आप काफ़ी भरा चलाने वाले हैं, उस पर इन्हें आशावादी छोर मानिए। और यह एक कंज़्यूमर पुर्ज़ा है जिस पर एंटरप्राइज़ PLP का कोई दावा नहीं। Optane का मीडिया जगह पर ही लिखा जाता है और write path में कोई DRAM buffer नहीं होता, इसीलिए ये मॉड्यूल अचानक बिजली जाने पर कंज़्यूमर NAND से कहीं बेहतर बर्ताव करते हैं, पर “व्यवहार में ठीक रहता है” कोई specification नहीं है। अगर आपको गारंटी लिखित में चाहिए, तो DC-series पुर्ज़ा खरीदिए।\nनिचली सीमा bandwidth है, क्षमता नहीं: 16 GB मॉड्यूल छोड़िए एक दूसरी शर्त भी है, ऊपर की हर बात से अलग, और यह रेंज के सबसे सस्ते पुर्ज़े को बाहर कर देती है।\nCache को sequential में डिस्क से तेज़ होना ही चाहिए, वरना वह एक throttle है। 16 GB M10 नहीं है, और यही वह मॉड्यूल है जिसका लालच आपको सबसे ज़्यादा होगा क्योंकि यह लगभग मुफ़्त है:\nSequential write Optane Memory M10 16 GB 150 MB/s Optane Memory M10 32 GB 290 MB/s Optane DC P4800X 375 GB 2,000 MB/s एक 7.2k एंटरप्राइज़ HDD 150–250 MB/s पहली और आखिरी पंक्ति साथ पढ़िए। एक 16 GB मॉड्यूल sequential में लगभग उसी रफ़्तार से लिखता है जिस घूमती डिस्क को उसे तेज़ करना है, और किसी अच्छी डिस्क से धीमा। Random काम के लिए यह अब भी ज़बरदस्त तेज़ है, डिस्क के 80 के मुकाबले 35,000 random write IOPS, पर sequential stream पर यह सबसे अच्छी हालत में बराबरी है और सबसे बुरी में उस रफ़्तार से नीचे की छत जो अकेली डिस्क बिना मदद के दे लेती थी।\nऔर यह डिज़ाइन पक्का करता है कि आप उस छत से टकराएँगे, क्योंकि sequential bypass बंद करने से सब कुछ cache से होकर जाता है, जिससे cache की अपनी sequential write bandwidth पूरे OSD की पक्की छत बन जाती है। Recovery में यह सबसे ज़्यादा चुभता है: 20 TB OSD को backfill करना इस workload में लगभग सबसे sequential चीज़ है, और उसे 150 MB/s पर बाँध देना पहले से धीमे rebuild को और धीमा कर देता है।\nतो M10 लाइन की निचली सीमा 32 GB है, और यह क्षमता की नहीं, bandwidth की सीमा है। क्षमता के हिसाब ने कहा था कि 32 GB काफ़ी से ज़्यादा है; bandwidth का हिसाब 16 GB को बाहर करता है, चाहे आपको स्टोर करना कितना भी कम हो। दोनों जाँचें पास होनी चाहिए, और सस्ता पुर्ज़ा उस जाँच में फ़ेल होता है जिसे लोग देखते नहीं।\nआप जिस भी चीज़ पर विचार करें, खरीदने से पहले उसका sequential write आँकड़ा 250 MB/s के बगल में रखिए।\nएक ऐसा प्रोडक्ट खरीदना जिसे अब कोई नहीं बनाता Optane बंद हो चुका है। Intel ने 2022 में यह कारोबार समेट लिया, $559 million का inventory write off किया और development खत्म कर दिया। कोई नया उत्पादन नहीं, कोई restock नहीं; कुल सप्लाई अब सिर्फ़ घटेगी।\nइससे एक साफ़ सवाल उठता है, क्योंकि बिक्री के लिए हैरानी की हद तक काफ़ी माल है। यह कहाँ से आता है, यह समझना बताता है कि आप क्या खरीद रहे हैं।\nयह OEM सर्विस-स्पेयर्स का inventory है जो निकाला जा रहा है। तीन बड़े सर्वर निर्माताओं ने Optane को उन प्लैटफ़ॉर्म के सपोर्ट के लिए spare parts के रूप में स्टॉक किया था जिनमें वे इसे बेचते थे। वे प्लैटफ़ॉर्म end-of-life हो गए और सपोर्ट से बाहर हो गए, तो उनके पीछे के spares रातोंरात मरा हुआ स्टॉक बन गए: उन मशीनों के पुर्ज़ों के गोदाम जिन्हें ठीक करने की अब किसी की कॉन्ट्रैक्ट वाली ज़िम्मेदारी नहीं। यही inventory AliExpress और refurbishers की तरफ़ बह रहा है।\nदो नतीजे, और दोनों अच्छी खबर हैं।\nइसका बड़ा हिस्सा निकाला हुआ नहीं, बिना इस्तेमाल का है। सर्विस spares एक शेल्फ़ पर उस failure के इंतज़ार में पड़े रहे जो कभी आया ही नहीं, तो आने पर wear का आँकड़ा अक्सर लगभग शून्य होता है: “कुछ साल का हल्का काम” नहीं, बल्कि कभी लिखा ही नहीं गया। भरोसा मत कीजिए, जाँचिए: nvme smart-log आपको percentage_used और data_units_written देता है, और असली spares स्टॉक पर ये चौंकाने वाले कम होने चाहिए। असली wear दिखाने वाला कुछ भी किसी और चीज़ के नाम पर बेचा जा रहा निकाला हुआ पुर्ज़ा है, हालाँकि तब भी endurance की गुंजाइश का मतलब है कि एक इस्तेमाल किया Optane उसी क्षमता की एकदम नई NAND ड्राइव से ज़्यादा उम्र बचाए रख सकता है।\nइससे समझ आता है कि आपको कौन सी क्षमताएँ मिलेंगी। OEM spares सर्वरों के लिए स्टॉक किए गए थे, यानी डेटासेंटर पुर्ज़े। यह रही पूरी रेंज, और देखिए फ़्लैगशिप कहाँ से शुरू होता है:\nपुर्ज़ा क्षमताएँ फ़ॉर्म Optane Memory M10 16, 32, 64 GB M.2 2280, कंज़्यूमर Optane SSD 800P 58, 118 GB M.2 2280, कंज़्यूमर Optane SSD P1600X 58, 118 GB M.2 2280, डेटासेंटर boot और cache पुर्ज़ा Optane SSD DC P4801X 100, 200, 375 GB M.2 110 mm या U.2 Optane SSD DC P4800X सबसे छोटा 375 GB, 750 GB, 1.5 TB U.2 या add-in card Optane SSD P5800X 400 GB, 800 GB, 1.6 TB U.2 या add-in card सिद्धांत में छोटे M.2 पुर्ज़े सबसे सलीकेदार जवाब हैं: M10, 800P, P1600X और 100 GB वाला P4801X सब यह काम करते हैं, और सस्ते में। व्यवहार में बाज़ार में ये हैं ही नहीं, क्योंकि किसी ने डेस्कटॉप accelerator मॉड्यूल को सर्वर spares के रूप में गोदाम में नहीं रखा। जो लिस्टेड है वह 375 GB और ऊपर है, P4800X श्रेणी का हार्डवेयर।\nतो इस भूमिका की ज़रूरत से ज़्यादा क्षमता खरीदने की योजना बनाइए, क्योंकि बिक्री पर वही है। यह बुरा नतीजा नहीं है। cache डिवाइस ज़्यादा खरीदने से आप 30 DWPD और 10 µs से कम latency पर पहुँचते हैं जबकि आपके workload को दोनों का एक हिस्सा चाहिए था, और 20 TB के जिस स्पिंडल को आप सालों रखने वाले हैं, उसके लिए गलती करने का यही सही तरीका है। इसका मतलब यह ज़रूर है कि शुरुआती कीमत हिसाब से ऊँची है, और ऊपर की साइज़िंग खरीदारी की सूची के बजाय कम खरीदने के खिलाफ़ एक जाँच बन जाती है।\nतीन चीज़ों की योजना बनाइए, क्योंकि यह सप्लाई चेन नहीं, निकासी है:\nSpares बिल्ड के साथ ही खरीदिए। एक सीमित भंडार खाली किया जा रहा है। जब तीन साल बाद कोई डिवाइस फ़ेल होगा, तो आप replacement ऑर्डर नहीं करेंगे, आप उसे ढूँढ रहे होंगे, तो spares की लागत अभी जोड़िए, जब तक स्टॉक मौजूद है।\nOEM firmware की उम्मीद रखिए और namespace जाँचिए। किसी vendor के spares प्रोग्राम से आए पुर्ज़ों पर अक्सर उसी vendor का firmware होता है, और वे किसी ऐसे LBA साइज़ या metadata settings के साथ फ़ॉर्मैट होकर आ सकते हैं जो उस चीज़ के हिसाब से था जिसके लिए उन्हें स्टॉक किया गया था। उस पर कुछ बनाने से पहले nvme id-ns से पक्का कीजिए, और सादे 4096-byte फ़ॉर्मैट पर nvme format के लिए तैयार रहिए।\nकोई warranty नहीं, कोई सपोर्ट नहीं, और कोई नया firmware अपडेट नहीं। Intel का अपना सपोर्ट नोटिस बताता है कि सेवा में पहले से लगे डिवाइसों के लिए इस समेटने का क्या मतलब है, और आप जो भी खरीदते हैं वह पहले से उसी हालत में है। जो पुर्ज़ा आया वह वही है जो लिस्टिंग में था, यह जाँचना आपकी ज़िम्मेदारी है।\nbcache, DB/WAL offload की जगह नहीं लेता इसे साफ़ कहना ज़रूरी है, क्योंकि पैसे बचाने की कोशिश के लिए यह सबसे ज़ाहिर जगह है और यह काम नहीं करता: आपको फिर भी NVMe पर block.db चाहिए। दोनों परतें, एक या दूसरी नहीं।\nOptane एक write cache है। बस इतना ही। यह डिस्क की तरफ़ जा रहे writes का acknowledgement रास्ता छोटा करता है, और कुछ नहीं करता।\nRocksDB सिर्फ़ लिखता नहीं। Ceph अपना मेटाडेटा लगातार पढ़ता है: objects खोजने के लिए, peering के लिए, scrubs का जवाब देने के लिए। और एक write cache, डेटा उससे flush हो जाने के बाद, किसी read को ठीक कुछ नहीं देता। न ही cache मेटाडेटा ट्रैफ़िक को हटाता है; वह उसे टालता और बैच करता है, तो हर RocksDB अपडेट आखिरकार स्पिंडल पर पहुँचता ही है, उन्हीं seeks के लिए लड़ता हुआ। और compaction मामूली हलचल को उससे कहीं ज़्यादा डिवाइस ट्रैफ़िक में बदल देता है जितने writes ने उसे पैदा किया था।\nतो दोनों बदलाव अलग समस्याएँ ठीक करते हैं और कोई दूसरे की जगह नहीं लेता:\nयह क्या ठीक करता है यह क्या नहीं करता NVMe पर block.db मेटाडेटा फ़्लैश पर रहता है: reads और writes दोनों, हमेशा के लिए स्पिंडल से दूर guest writes के झोंके के लिए कुछ नहीं bcache के ज़रिए Optane डेटा writes के लिए झोंके की acknowledgement latency मेटाडेटा reads के लिए कुछ नहीं; मेटाडेटा writes को सिर्फ़ टालता है DB offload छोड़िए और Optane रखिए, तो RocksDB फिर प्लैटर पर है और उसके reads 80 IOPS पर चलते हैं। Optane छोड़िए और DB offload रखिए, तो steady state ठीक है पर झोंके फिर भी स्पिंडल की रफ़्तार पर अटकते हैं।\nudev नियम, एक-एक लाइन bcache के tunables sysfs में रहते हैं, और sysfs हर बार डिवाइस register होने पर उन्हें reset कर देता है, यानी हर boot पर। तो उनकी जगह एक udev नियम में है, किसी ऐसी स्क्रिप्ट में नहीं जिसे चलाना किसी को याद रखना पड़े:\n# /etc/udev/rules.d/99-bcache.rules ACTION==\u0026#34;add|change\u0026#34;, SUBSYSTEM==\u0026#34;block\u0026#34;, KERNEL==\u0026#34;bcache*\u0026#34;, \\ ATTR{bcache/cache_mode}=\u0026#34;writeback\u0026#34;, \\ ATTR{bcache/sequential_cutoff}=\u0026#34;0\u0026#34;, \\ ATTR{bcache/congested_read_threshold_us}=\u0026#34;0\u0026#34;, \\ ATTR{bcache/writeback_rate}=\u0026#34;81920\u0026#34;, \\ ATTR{bcache/writeback_rate_minimum}=\u0026#34;20480\u0026#34;, \\ ATTR{bcache/writeback_percent}=\u0026#34;40\u0026#34; KERNEL==\u0026quot;bcache*\u0026quot; नोड के हर bcache डिवाइस से मेल खाता है, तो एक नियम सारी जोड़ियों को कवर करता है। ACTION==\u0026quot;add|change\u0026quot; का मतलब है कि यह तब भी दोबारा लागू होता है जब कोई डिवाइस दिखता है या फिर से जुड़ता है, सिर्फ़ boot पर नहीं।\nहर setting क्या कर रही है, और क्यों:\ncache_mode=writeback: पूरा मकसद यही है। डिफ़ॉल्ट writethrough में कोई write तब तक acknowledge नहीं होता जब तक वह HDD तक न पहुँचे, तो cache write latency के लिए कुछ नहीं करता। writeback में Optane acknowledge करता है और स्पिंडल बाद में पकड़ लेता है।\nsequential_cutoff=0: डिफ़ॉल्ट रूप से bcache sequential I/O पहचानता है और 4 MB पार होते ही उसे सीधे cache के पार भेज देता है, इस सोच पर कि backing डिस्क sequential ठीक संभाल लेती है। शून्य वह bypass बंद कर देता है ताकि सब कुछ cache हो। हाइपर-कन्वर्ज्ड नोड पर यही सही फ़ैसला है: जो एक bcache डिवाइस को sequential दिखता है, वह कई OSD के आपस में गुँथने पर प्लैटर पर sequential नहीं रहता, और आप चाहते हैं कि हर write हर हाल में Optane की रफ़्तार पर acknowledge हो। इसके साथ एक ज़िम्मेदारी भी आती है: कोई bypass न होने पर cache डिवाइस की अपनी sequential write bandwidth पूरे OSD की छत बन जाती है, और यही 16 GB मॉड्यूल के बाहर होने की वजह है।\ncongested_read_threshold_us=0: bcache अपने cache डिवाइस की latency पर नज़र रखता है और जब उसे लगता है कि वह भीड़ में है तो cache को bypass करना शुरू कर देता है, reads के लिए डिफ़ॉल्ट 2000 µs पर। Optane उस तरह भीड़ में नहीं आता जैसे NAND आता है, तो यह bcache उस डिवाइस पर शक कर रहा है जिसे उसने गलत नापा है। शून्य यह tracking बंद कर देता है।\nwriteback_rate=81920 और writeback_rate_minimum=20480: बैकग्राउंड flush की दर, sectors per second में, यानी लगभग 40 MB/s का लक्ष्य और 10 MB/s की निचली सीमा। एक PD controller असली दर को इन दोनों के बीच चलाता है। लक्ष्य उसके पास रखा गया है जितना एक स्पिंडल sequential में सोख सकता है, और निचली सीमा controller को flush को शून्य की ओर दबाने और dirty डेटा को अनिश्चित काल तक जमा होने देने से रोकती है। दोनों शुरुआती बिंदु हैं, स्थिरांक नहीं: इन्हें कैसे बदलें नीचे है।\nwriteback_percent=40: bcache cache का कितना हिस्सा dirty रहने देगा इससे पहले कि वह ज़ोर से पीछे धकेले, डिफ़ॉल्ट 10 के मुकाबले। चालीस आपको कहीं गहरा burst buffer देता है। इसका यह भी मतलब है कि उस Optane के 40% तक हिस्से में सिस्टम के डेटा की इकलौती कॉपी होती है, यही सौदा है, और यही वजह है कि हर-स्पिंडल-एक वाला लेआउट मायने रखता है। असली workload देख लेने के बाद यही वह value है जिस पर दोबारा सोचना सबसे ज़्यादा फ़ायदेमंद है।\nभरने और flush की values बाद में बदलना ऊपर का 40% और दोनों दरें वे values हैं जो यहाँ चल रही हैं, सार्वभौमिक स्थिरांक नहीं। असली workload देखने के बाद यही पहली चीज़ें हैं जिन्हें आप हिलाना चाहेंगे, तो यह जानना फ़ायदेमंद है कि इन्हें बदलने की दो जगहें हैं, जो दो अलग काम करती हैं।\nsysfs इसे अभी बदलता है। udev नियम इसे अगले boot पर बदलता है। आपको दोनों चाहिए, और इसी क्रम में।\nइसे live बदलिए, एक डिवाइस पर:\necho 30 \u0026gt; /sys/block/bcache0/bcache/writeback_percent या नोड की हर जोड़ी पर:\nfor d in /sys/block/bcache*/bcache; do echo 30 \u0026gt; \u0026#34;$d/writeback_percent\u0026#34; done Flush दर भी इसी तरह काम करती है। दोनों values sectors per second में हैं, तो ये लक्ष्य और निचली सीमा दोनों को आधा कर देते हैं:\nfor d in /sys/block/bcache*/bcache; do echo 40960 \u0026gt; \u0026#34;$d/writeback_rate\u0026#34; echo 10240 \u0026gt; \u0026#34;$d/writeback_rate_minimum\u0026#34; done यह तुरंत लागू होता है और ठीक तब तक टिकता है जब तक डिवाइस दोबारा register नहीं होता। Kernel डॉक्यूमेंटेशन साफ़ कहता है कि ये settings “do not persist across reboot”, और udev नियम के होने की पूरी वजह यही है।\nजब आप किसी value से संतुष्ट हों, नियम एडिट कीजिए और बिना reboot के reload कीजिए:\nudevadm control --reload udevadm trigger --subsystem-match=block --action=change यहीं ACTION==\u0026quot;add|change\u0026quot; अपनी कीमत वसूलता है। Trigger पहले से मौजूद डिवाइसों पर change event भेजता है, तो नियम अगले boot का इंतज़ार करने के बजाय चलते नोड पर दोबारा लागू हो जाता है। अगर नियम सिर्फ़ add से मेल खाता, तो वह कमांड कुछ नहीं करती।\nफिर values वापस पढ़िए, क्योंकि udev नियम में टाइपो चुपचाप फ़ेल होता है:\ngrep . /sys/block/bcache*/bcache/writeback_percent किस दिशा में हिलाना है, यह कैसे जानें इसे पहले सिद्धांतों से tune मत कीजिए: bcache आपकी ज़रूरत की चीज़ें उसी sysfs डायरेक्टरी के नीचे दिखाता है।\nदेखने लायक dirty_data है: इस समय कितना डेटा cache में बैठा है और कहीं और नहीं। डॉक्यूमेंटेशन इसे “continuously updated unlike the cache set\u0026rsquo;s version, but may be slightly off” बताता है, जो इस मकसद के लिए ठीक है। इसे एक सामान्य कामकाजी दिन और एक backup विंडो के दौरान sample कीजिए।\ncache_hits, cache_misses और cache_hit_ratio बताते हैं कि cache इस्तेमाल हो रहा है या नहीं, इस शर्त के साथ कि “a partial hit is counted as a miss”। bypassed वह IO गिनता है जो cache के पूरी तरह पार चला गया: sequential_cutoff=0 के साथ यह लगभग सपाट होना चाहिए, तो बढ़ती संख्या का मतलब है कि कुछ अब भी इसके चारों ओर से रास्ता बना रहा है।\nये सब चलते कुल आँकड़ों के रूप में आते हैं, साथ में ऐसे versions जो पिछले दिन, घंटे और पाँच मिनट में घटते जाते हैं, जिससे कम अवधि वाले आँकड़े किसी समस्या को पकड़ने के लिए पूरी उम्र वाले आँकड़े से कहीं ज़्यादा काम के हैं।\nवहाँ से:\nलक्षण Knob दिशा झोंके अटकते हैं: writes झोंके के बीच स्पिंडल latency से टकराते हैं writeback_percent ऊपर, गहरे buffer के लिए cache पर उससे ज़्यादा डेटा खुला है जितने से आप सहज हैं writeback_percent नीचे सामान्य काम के दौरान dirty_data छत पर अटका है writeback_rate ऊपर: समस्या buffer नहीं, निकासी है बैकग्राउंड flush स्पिंडल पर guest reads से टकरा रहा है writeback_rate नीचे dirty_data घंटों के बजाय दिनों में धीरे-धीरे बढ़ रहा है writeback_rate_minimum ऊपर, ताकि controller रेंगने तक न दबा सके अगर dirty_data आप कुछ भी करें, छत पर ही अटका रहे, तो कोई knob जवाब नहीं है: क्लस्टर उससे तेज़ लिख रहा है जितना स्पिंडल सोख सकते हैं, और ईमानदार इलाज हैं ज़्यादा स्पिंडल या कम writes।\nएक फ़ाइल को छेड़िए मत: writeback_running। इसे बंद करने से writeback पूरी तरह रुक जाता है, और डॉक्यूमेंटेशन कहता है कि यह “only meant for benchmarking” है। एक production OSD पर इसका मतलब है कि dirty डेटा तब तक जमा होता रहता है जब तक cache भर न जाए, और कभी खाली नहीं होता।\nआप क्या गँवा रहे हैं इस डिज़ाइन के ज़्यादातर लेख अच्छी खबर पर रुक जाते हैं। ये वे हिस्से हैं जो सच में आपको चोट पहुँचाएँगे, और इनमें से हर एक को बनाने के बाद नहीं, पहले जानना फ़ायदेमंद है।\nदोनों जोड़े गए डिवाइस बहुत अलग तरह से फ़ेल होते हैं साझा DB/WAL NVMe मर जाता है osd.0–2 का block.db गया osd.0 खोया osd.1 खोया osd.2 खोया तीन OSD, एक घटना। पूरे नोड में एक correlated failure, जिससे replication आपको ठीक-ठीक नहीं बचाता। अनुपात उस rebuild के हिसाब से चुनिए जिसे झेलने को आप तैयार हैं, प्रति OSD कीमत से नहीं। जोड़ी वाला एक Optane मर जाता है Optane: osd.0 गया Optane: osd.1 ठीक Optane: osd.2 ठीक osd.0 खोया osd.1 चालू osd.2 चालू एक OSD, और Ceph यह रोज़ करता है। Blast radius एक डिस्क जितना डेटा है, जो वही failure है जिसे सोखने के लिए replicated pool बना है। एक बड़े डिवाइस के बजाय कई छोटे डिवाइस खरीदने का पूरा तर्क यही है। दोनों तरफ़ एक ही वर्ग का नुकसान: हर डिवाइस ऐसी state रखता है जो कहीं और नहीं, तो OSD रुकता नहीं, नष्ट होता है, और उसे दोबारा बनाकर backfill करना पड़ता है। फ़र्क सिर्फ़ गिनती का है, और हर-स्पिंडल-एक वाली जोड़ी यही खरीदती है। दोनों जोड़े गए डिवाइस ऐसी state रखते हैं जो कहीं और मौजूद नहीं, तो किसी को भी खोने से उस पर निर्भर OSD नष्ट हो जाते हैं। फ़र्क सिर्फ़ इतना है कि कितने: साझा DB/WAL NVMe अपने पीछे के हर OSD को गिरा देता है, जबकि एक-से-एक जोड़ा गया Optane ठीक एक को। अतिरिक्त डिवाइस यही खरीदते हैं। किसी भी फ़्लैश डिवाइस को खोना OSD को नष्ट कर देता है। रोकता नहीं, नष्ट करता है। दोनों डिवाइस ऐसी state रखते हैं जो कहीं और मौजूद नहीं: block.db वह RocksDB रखता है जो block को समझ में आने लायक बनाता है, और एक writeback cache हर वह write रखता है जो अभी flush नहीं हुआ। Kernel डॉक्यूमेंटेशन दूसरे वाले पर कोई नरमी नहीं बरतता: “In writeback mode you\u0026rsquo;ll lose data if something happens to your SSD.” दोनों ही तरह OSD वापस नहीं आता, उसे दोबारा बनाया और backfill किया जाता है।\nतो ये एक ही वर्ग का जोखिम हैं, और cache को डरावना मानने के बजाय इस बारे में साफ़ रहना फ़ायदेमंद है। Optane, NVMe से ज़्यादा खतरनाक डिवाइस नहीं है। दो चीज़ें इन्हें अलग करती हैं, और उनमें से कोई भी प्रति OSD गंभीरता नहीं है।\nपहली है blast radius, और जोड़ी बनाने का पूरा औचित्य यही है। हर स्पिंडल पर एक Optane का मतलब है कि cache के फ़ेल होने की कीमत एक OSD है: एक डिस्क का नुकसान, जो ठीक वही घटना है जिसे सोखने के लिए replicated pool बना है, और जिसे Ceph किसी को page किए बिना संभाल लेता है। DB/WAL डिवाइस साझा है, तो उसे खोने की कीमत उसके पीछे के हर OSD की एक साथ है, जो एक correlated failure है जिससे replication आपको नहीं बचाता। वही failure, एक डिवाइस बनाम पाँच।\nदूसरी है failure कैसे सामने आता है, और यह एक ऑपरेशनल जाल है। जब writeback में cache मरता है तो backing डिवाइस रुक जाता है और I/O errors लौटाता है, जो ठीक है: Ceph OSD को down मार्क करता है और आगे बढ़ जाता है। बुरा मामला वह reboot है जिसमें backing डिवाइस अपने cache के जुड़े बिना ऊपर आता है। तब वह एक mount करने लायक फ़ाइलसिस्टम जैसा दिखता है जिसमें बस हर dirty write गायब है, जो पुराना नहीं, बल्कि corrupt है। गायब block.db ज़ोर से फ़ेल होता है और OSD शुरू होने से इनकार करता है; गायब cache चुपचाप फ़ेल हो सकता है और आपको मलबा mount करने दे सकता है। bcache backing डिवाइस को उसके cache के बिना unmountable मानिए, और कभी भी किसी चीज़ को मदद के नाम पर उसे आपके लिए mount मत करने दीजिए।\nbcache अपने आप power-safe writeback की गारंटी नहीं देता। यहीं HDD write cache एक optimisation से ज़रूरत बन जाता है: उसे बंद कीजिए, और इतना नया kernel चलाइए जिसमें FUA handling हो, ताकि synchronous writes पूरे stack में सम्मानित हों, बीच में कहीं जल्दी acknowledge न हो जाएँ। Power-loss protection के बिना cache डिवाइस समस्या को और बढ़ाता है, क्योंकि वह वह डेटा खो सकता है जिसे वह पहले ही सुरक्षित बता चुका है।\nइससे DB/WAL अनुपात वह आँकड़ा बन जाता है जो मायने रखता है। Ceph प्रति SATA SSD 4–5 HDD OSD की इजाज़त देता है और प्रति NVMe 15 से ज़्यादा नहीं, और “balancing the risk of reducing costs by placing too many responsibilities into too few failure domains” के बारे में चेतावनी देता है। cache टियर के उलट, इसे सीमित रखने के लिए कोई जोड़ी उपलब्ध नहीं है: साझा करना ही इस डिवाइस का मकसद है।\n20 TB ड्राइव पर पूरी बातचीत यही है, क्योंकि rebuild बहुत बड़ा है। एक फ़ेल OSD का मतलब 20 TB का backfill; एक स्पिंडल जो 150–250 MB/s टिकाए रखता है उस पर, और इतना धीमा किया हुआ कि recovery guests को भूखा न रखे, आप एक अकेली डिस्क के लिए एक दिन से काफ़ी ज़्यादा degraded ऑपरेशन देख रहे हैं। उनमें से पाँच ढोने वाला एक साझा DB डिवाइस खोइए और 100 TB हिलाना है।\nतो अनुपात असल में लागत का फ़ैसला नहीं है। यह इसका फ़ैसला है कि आप कितनी देर degraded चलने को तैयार हैं, और क्लस्टर VM की सेवा करते हुए कितना rebuild ट्रैफ़िक उठा सकता है।\nयह डिज़ाइन एक ऐसे डिवाइस पर निर्भर है जिसे अब कोई नहीं बनाता। यह वह है जिसका कोई तकनीकी जवाब नहीं। Optane, cache की जगह के लिए सही पुर्ज़ा है और आज की कोई चीज़ उसकी जगह नहीं लेती: NAND वह write वॉल्यूम नहीं झेल सकता, और Intel जिस CXL-आधारित memory की ओर मुड़ा वह block cache के लिए सीधा विकल्प नहीं है। तो बचाव तकनीकी चतुराई नहीं, व्यापारिक है, यह ऊपर कवर हो चुका है, और ईमानदार सार यह है कि इस आर्किटेक्चर की भविष्य में कहीं एक आखिरी तारीख है।\nइनमें से कुछ भी HDD क्लस्टर को all-flash क्लस्टर नहीं बनाता। लगातार random write ट्रैफ़िक जो flush दर से आगे निकल जाए, cache को भर देगा, और भर जाने के बाद आप रास्ते में अतिरिक्त परतों के साथ स्पिंडल की रफ़्तार पर लिख रहे हैं। यह डिज़ाइन झोंके सोखता है और मेटाडेटा का बोझ हटाता है। यह IOPS पैदा नहीं करता।\nकुल मिलाकर इसका क्या मतलब है तीन टियर, हर एक वही एक काम करता हुआ जिसमें वह सबसे अच्छा है, और तीनों ज़रूरी हैं:\nOptane random write के झोंके सोखता है, हर स्पिंडल पर एक डिवाइस। यह Optane ही होना चाहिए, क्योंकि हर write इससे गुज़रता है और NAND की endurance उस जगह के लिए गलत है एक तेज़ एंटरप्राइज़ NVMe RocksDB और WAL रखता है, कुछ OSD में साझा, एक ऐसे अनुपात पर जो आपने सोच-समझकर चुना, न कि बस मान लिया HDD थोक क्षमता देते हैं, मेटाडेटा और झोंकों दोनों से आज़ाद मकसद यह दिखावा करना नहीं कि घूमती डिस्क फ़्लैश हैं। मकसद है उन्हें वह काम भेजना बंद करना जिसमें वे सबसे बुरी हैं, ताकि जिस क्षमता के लिए आपने असल में पैसे दिए वह इस्तेमाल हो सके।\nपूरी तरकीब यही है, और इसमें कुछ भी चालाकी वाला नहीं है। हर काम उस डिवाइस पर रखिए जो उसमें अच्छा है, और जो अच्छे नहीं हैं उनके लिए दो बार पैसे देना बंद कीजिए।\nएक हाइपर-कन्वर्ज्ड Proxmox क्लस्टर के लिए जिसे all-flash की कीमत के बिना कई टेराबाइट क्षमता चाहिए, यह एक बचाव करने लायक डिज़ाइन है। ठीक से बना हो तो यह कच्चे HDD से कहीं तेज़ लगता है, यह उन तरीकों से फ़ेल होता है जिन्हें संभालने के लिए Ceph बना है, और पैसा वहाँ जाता है जहाँ वह नतीजा बदलता है।\nइसके साथ पढ़ने लायक दो जुड़ी चीज़ें: 4Kn, 512e और 512n में sector-size का काम इसके लिए बहुत मायने रखता है कि स्पिंडल उन writes के साथ क्या करते हैं जो उन तक पहुँचते हैं, और अगर आप इसे direct-attached नोड्स पर बना रहे हैं, तो switchless mesh एक छोटे Ceph क्लस्टर का नेटवर्क वाला हिस्सा कवर करता है।\nसंदर्भ Ceph — Hardware Recommendations — बड़े HDD पर IOPS-प्रति-TB की चेतावनी, “HDD OSDs may see a significant write latency improvement by offloading WAL+DB onto an SSD”, प्रति SATA SSD 4–5 HDD और प्रति NVMe ≤15 के अनुपात, एंटरप्राइज़ SSD पर power-loss protection, HDD write cache बंद करना, और RoC HBA की ज़रूरत न होना Ceph — BlueStore Configuration Reference — RBD के लिए block का 1–2% और RGW के लिए कम से कम 4% block.db, 2.5% की सामान्य सिफ़ारिश, primary डिवाइस पर वापस spillover, 3/30/300 GB steps के पीछे के RocksDB level साइज़, और WAL का अपने आप DB के साथ colocated होना Linux kernel — bcache admin guide — cache modes, sequential_cutoff और उसका 4 MB डिफ़ॉल्ट, 2000 µs read congestion डिफ़ॉल्ट, sectors per second में writeback_rate, writeback_percent PD controller, dirty_data / cache_hit_ratio / bypassed counters और उनके घटते दिन, घंटे और पाँच-मिनट वाले versions, यह चेतावनी कि writeback_running “only meant for benchmarking” है, यह कथन कि ये settings “do not persist across reboot”, और “in writeback mode you\u0026rsquo;ll lose data if something happens to your SSD” Intel — Optane Memory M10 32 GB specifications — 365 TBW, 8 GB के दायरे पर 4K में 240,000 random read और 65,000 random write IOPS, 1200/290 MB/s sequential, PCIe 3.0 x2 Intel — Optane Memory M10 16 GB specifications — 150 MB/s sequential write और 35,000 random write IOPS जो इस पुर्ज़े को sequential throughput में घूमती डिस्क से नीचे रखते हैं PC Perspective — Optane SSD DC P4800X performance — 375 GB पुर्ज़े के 550K random 4K read IOPS, 2400/2000 MB/s sequential, 10 µs से कम आम latency, और 30 DWPD पर 12.3 PBW ServeTheHome — Optane DC P4801X 100GB M.2 review — छोटी क्षमता वाले डेटासेंटर M.2 पुर्ज़े, क्षमता की सीढ़ी के लिए StorageReview — Intel Optane SSD P5800X — 100 DWPD रेटिंग, P4800X के 30 DWPD, और NAND एंटरप्राइज़ ड्राइव से तुलना जो write-intensive पुर्ज़ों के लिए लगभग 10 DWPD और mixed-use के लिए 3 या कम पर रुकती हैं Bcache — ArchWiki — व्यावहारिक failure modes, जिनमें reboot के बाद backing डिवाइस का अपने cache के बिना ऊपर आना शामिल है, और HDD write cache और FUA के आसपास power-safety की ज़रूरतें Intel — Optane business update — कारोबार समेटना, और सेवा में पहले से लगे डिवाइसों की warranty और सपोर्ट के लिए इसका मतलब, जो वही हालत है जिसमें recycler बाज़ार से खरीदी गई कोई भी चीज़ पहले से है ","permalink":"https://blogs.damiendye.uk/hi/proxmox/hdd-backed-ceph-bcache-optane/","summary":"फ़्लैश की कीमतों ने all-NVMe को सही ठहराना मुश्किल कर दिया है, और एंटरप्राइज़ HDD फिर देखने लायक हैं। हाइपर-कन्वर्ज्ड Proxmox Ceph पर इनसे ठीक-ठाक latency पाने का मतलब है RocksDB को स्पिंडल से हटाना, bcache के ज़रिए हर डिस्क को उसका अपना Optane देना (खास तौर पर Optane, क्योंकि NAND की endurance उस काम के लिए गलत है), और इससे आपके हिस्से आने वाले failure mode के बारे में ईमानदार रहना।","title":"HDD वाले Proxmox Ceph क्लस्टर को तेज़ बनाना: मेटाडेटा NVMe पर, हर स्पिंडल के लिए एक Optane, और इसकी कीमत"},{"content":"अब तक यह महँगा क्यों रहा VDI, यानी Virtual Desktop Infrastructure, आपके सामने रखे device के बजाय data centre या cloud से पूरा desktop देता है। User laptop, thin client या अपनी मशीन से sign in करता है, और उसे जाना-पहचाना Windows या Linux desktop मिलता है जिसकी apps, files और processing सब केंद्र में होती हैं।\nIT टीम के लिए इसका आकर्षण यह है कि patching, access control और data protection सब एक जगह होते हैं, और लोग कहीं से भी वही desktop खोल सकते हैं।\nरुकावट कभी हाइपरवाइज़र नहीं रहा। रुकावट GPU रहा है।\nएक physical GPU को कई desktops में बाँटना NVIDIA का इलाका रहा है, और slicing करने वाले vGPU software के लिए NVIDIA पैसा लेता है। इसी licence की वजह से hardware-accelerated graphics वाला VDI ज़्यादातर corporate budget वाली संस्थाओं तक सीमित रहा। जो काम silicon पहले से कर सकता है, उसे चालू करने के लिए सालाना शुल्क देना, इसके लिए उत्साह जुटाना मुश्किल है।\nIntel ने Arc Pro line के साथ यह हिसाब बदल दिया। ये cards standard SR-IOV के ज़रिए hardware splitting support करते हैं, जो कोई उत्पाद नहीं, PCIe का एक feature है। इसलिए कोई licence server नहीं, कोई subscription नहीं, और खरीदने के लिए कोई अलग vGPU software नहीं।\nतो मैंने एक Intel Arc Pro B50 लिया, यह देखने के लिए कि यह Proxmox के साथ कितनी साफ़ी से जुड़ता है। छोटा जवाब: तरीका ठीक वैसे ही काम करता है जैसा बताया गया है, और फिर firmware बीच में आ गया। दोनों आधे नीचे हैं।\nएक card कई कैसे बनता है: physical function host पर, virtual functions guests को Intel Arc Pro Bxx 03:00.0: physical function host driver: xe 03:00.1 vfio-pci 03:00.2 vfio-pci 03:00.3 support हो तो बनता है 03:00.4 support हो तो बनता है Windows desktop 1 hardware accelerated Windows desktop 2 hardware accelerated Windows desktop 3 hardware accelerated Windows desktop 4 hardware accelerated कहीं भी कोई vGPU licence नहीं। SR-IOV एक PCIe capability है जिसे card या तो दिखाता है या नहीं: यह card इसे\u0026#160;[320]\u0026#160;पर दिखाता है। यह कितने functions बनाएगा, यह firmware तय करता है, क्योंकि हर एक को card की memory का तय हिस्सा मिलता है: बड़ा हिस्सा मतलब कम functions। 16 GB का B50 8 GB के दो देता है; 24 और 32 GB वाले cards सात बताते हैं। Physical function host के xe driver के पास रहता है। हर virtual function अपने आप में एक PCIe device है, vfio-pci से bound और एक guest को सौंपा हुआ: पूरे card वाली वही passthrough मशीनरी, बस कई बार। dashed जोड़ी card पर निर्भर है: हर card कितने functions बनाएगा, यह आगे नीचे है। सबसे बड़ी अड़चन: पहले आपको Windows चाहिए इसमें से कुछ भी काम करे, उससे पहले card अपना firmware update चाहता है। Intel वह update Windows driver installer के अंदर देता है।\nयह अटपटा है, क्योंकि card आपने Proxmox के नीचे चलाने के लिए ही खरीदा है।\nइसका एक रास्ता है जिसके लिए Proxmox के सिवा कुछ नहीं चाहिए: एक Windows VM बनाइए, पूरा card उसमें pass through कीजिए, Windows को firmware update करने दीजिए, फिर card host को वापस दे दीजिए। यह एक bootstrap loop है, और build की योजना बनाने से पहले इसे जानना बेहतर है, बाद में नहीं।\nएक अस्थायी VM से पहले-Windows वाला bootstrap loop तोड़ना पेच: SR-IOV को current firmware चाहिए, और firmware Windows driver installer के अंदर आता है। 1 Host में card lspci → 03:00.0 2 पूरा card → Windows VM hostpci0, Q35 + OVMF 3 Intel driver install साथ में firmware update 4 Host reboot card फिर initialise card Proxmox को वापस 5 SR-IOV मौजूद lspci -v → [320] 6 boot पर tmpfiles.d numvfs, unbind, bind 7 VFs guests को जितने firmware दे Steps 2 और 3 सिर्फ़ firmware update के लिए हैं। Windows VM अस्थायी है: card के host पर लौटते ही उसका कोई काम नहीं रहता, और तैयार setup की कोई चीज़ हाइपरवाइज़र पर चल रहे Windows पर निर्भर नहीं। Firmware current होने तक card SR-IOV नहीं कर सकता, और firmware update Windows driver के रूप में आता है। पूरे card के साथ एक अस्थायी Windows VM यह loop तोड़ देती है। Card ढूँढना Proxmox host पर, उसे ढूँढने के लिए lspci:\nlspci यह रहा, 03:00.0 पर, Battlemage G21 के रूप में दिख रहा है, जो Arc Pro B50 के पीछे का silicon है। पता लिख लीजिए। आपको इसकी कई बार ज़रूरत पड़ेगी, और इसके साथ 04:00.0 पर एक अलग audio function भी आता है।\nपूरा card एक Windows VM को देना Card को एक Windows VM में raw PCI device के रूप में जोड़िए। VM के hardware में, यह एक PCI Device entry है: pcie=1 के साथ 0000:03:00:\nयह भी देखने लायक है कि वह VM और क्या है, क्योंकि इसमें कुछ भी संयोग नहीं है: Q35 machine type, OVMF firmware, VirtIO SCSI single, और Windows 11 के लिए एक TPM। खास तौर पर Q35 इसके लिए वैकल्पिक नहीं है। i440fx पर pass through किया गया GPU एक पुराने PCI device के रूप में दिखता है, जो आधुनिक graphics driver के लिए गलत आकार है। यह Always Use Q35, Not i440fx में समझाया गया है।\nVM boot कीजिए और देखिए कि Windows को card दिखता है:\nयह Microsoft Basic Display Adapter के रूप में दिखता है क्योंकि अभी कोई driver install नहीं है। यही अपेक्षित स्थिति है, और इतना काफ़ी है। Windows ने हार्डवेयर ढूँढ लिया है।\nFirmware update करना Intel के Arc Pro B50 download page से current driver लीजिए। इस लेखन के समय वह version 32.0.101.8306 (Q4.25) था, Windows 11 और Windows 10 22H2 के लिए:\nइसे install कीजिए, और process के हिस्से के रूप में firmware update को चलने दीजिए, बीच में cancel मत कीजिए। यह पूरा चक्कर उसी firmware step के लिए है।\nजब यह पूरा हो जाए, card host को वापस दीजिए और reboot कीजिए, ताकि वह Proxmox के नीचे पूरी तरह फिर से initialise हो।\nपक्का करना कि SR-IOV मौजूद है अब card से पूछिए कि वह क्या कर सकता है:\nlspci -v जो पंक्ति मायने रखती है:\nCapabilities: [320] Single Root I/O Virtualization (SR-IOV) lspci output की एक पंक्ति में पूरी बात है, और उसके साथ कोई licence नहीं जुड़ा।\nजब आप वहाँ हैं, तो उस output की तीन और चीज़ें पढ़ने लायक हैं:\nKernel driver in use: xe: card i915 के बजाय Intel के नए xe driver पर है, और virtual functions यही बनाएगा। [420] Physical Resizable BAR और [220] Virtual Resizable BAR: card resizable BARs support करता है, और उसके virtual functions भी। अगर आप इनमें से कई pass through कर रहे हैं तो यह जानना ज़रूरी है कि इसकी address space में क्या कीमत है: देखिए PCIe Resizable BAR and Modern GPUs। IOMMU group 13: card एक अलग group में अकेला है, और साफ़ passthrough के लिए आप यही चाहते हैं। यह क्यों मायने रखता है, यह IOMMU tax वाले लेख में है। Boot पर virtual functions बनाना Virtual functions स्थायी नहीं हैं। उन्हें माँगना sysfs में एक write है, तो यह हर boot पर होना चाहिए।\ntmpfiles.d इसे declarative तरीके से करने का साफ़-सुथरा रास्ता है, किसी unit file पर script चिपकाने के बजाय:\nFile क्रम से तीन काम करती है।\nVirtual functions बनाना, physical function के sriov_numvfs में गिनती लिखकर:\nw /sys/devices/pci0000:00/0000:00:01.1/0000:01:00.0/0000:02:01.0/0000:03:00.0/sriov_numvfs - - - - 4 हर नए function को xe से unbind करना, क्योंकि host driver उन्हें आते ही अपना लेता है, और guest को वह device नहीं मिल सकता जिसे host पकड़े हुए है:\nw /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.1 w /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.2 w /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.3 w /sys/bus/pci/drivers/xe/unbind - - - - 0000:03:00.4 उन्हें vfio-pci से bind करना, जिससे वे pass through के लिए उपलब्ध होते हैं:\nw /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.1 w /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.2 w /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.3 w /sys/bus/pci/drivers/vfio-pci/bind - - - - 0000:03:00.4 Addresses पर ध्यान दीजिए: physical function 03:00.0 है और virtual functions .1 से .4 तक आते हैं।\nw के बारे में एक बारीकी जो क्रम को समझाती है, और गलत करने पर आपको काटेगी। systemd इसे ऐसे बताता है: “Write the argument parameter to a file, if the file exists.” sriov_numvfs तभी मौजूद होता है जब कोई driver physical function से bind हो चुका हो, और virtual function के paths तभी मौजूद होते हैं जब वह write हो चुका हो। तो file में क्रम शैली का मामला नहीं है। हर पंक्ति इस पर निर्भर है कि उससे पहले वाली लागू हो चुकी हो।\nचार नहीं, दो क्यों Driver 32.0.101.8306, यानी ऊपर install किया गया, graphics firmware BMG__21,1162 लाता है, और यही वह release है जिसमें Intel ने पहली बार आधिकारिक रूप से Arc Pro पर SR-IOV चालू किया। उस release में B50 के लिए Intel का बताया गया default है दो virtual functions, हर एक के साथ 8 GB का VF Local Memory BAR।\nइससे यह संख्या नीति नहीं, हिसाब बन जाती है। B50 में 16 GB है। हर virtual function को 8 GB दें, तो बस दो ही आते हैं।\nअगर आप कोई workaround ढूँढने निकलें तो एक पेच जानना ज़रूरी है। आधिकारिक support से पहले, कुछ लोग पुराना firmware चलाते थे जो B50 पर 12 virtual functions दिखाता था, और driver 32.0.101.6979 पर लौटने से वह गिनती वापस आ जाती है। वे 12 उसी 16 GB को बाँटते थे, तो हर एक को मेरे वालों की memory का एक हिस्सा भर मिलता था। Intel का कहना है कि दो जानबूझकर चुने गए, ताकि हर function को इतनी compute, क्षमता और bandwidth मिले कि वह अनुमान के मुताबिक व्यवहार करे।\nतो यह सीमा हिल सकती है, लेकिन आपके हाथ से नहीं। अधिकतम VF गिनती और VF Local Memory BAR का आकार IFWI में रहते हैं, दोनों में से किसी को बदलने का कोई public tool नहीं है, और current stack पर supported जवाब दो है।\nहर card आपको कितने desktops देता है B50 परिवार का छोटा card है, और उसके दो functions परिवार का सबसे निचला स्तर हैं। अगर seats की गिनती आपके लिए मायने रखती है, तो range में ऊपर का खरीदिए।\nपूरी Battlemage Arc Pro line SR-IOV करती है। फ़र्क इस बात में है कि firmware कितने functions काटेगा, और यह memory के हिसाब से चलता है:\nCard Memory current supported stack पर VFs दूसरी जगह देखा गया Arc Pro B50 16 GB 2, हर एक 8 GB VF BAR पर: Intel का दस्तावेज़ी default आधिकारिक से पहले वाले firmware पर 12, driver 32.0.101.6979 के ज़रिए Arc Pro B60 24 GB 7 बताए गए शुरुआती ASRock firmware पर 24, बाद वाले ने घटाकर 7 किया Arc Pro B60 Dual 2 × 24 GB हर GPU पर 7: दो GPUs, यानी एक slot से 14 ऊपर जैसा; दोनों आधे स्वतंत्र हैं Arc Pro B65 32 GB कोई प्रकाशित गिनती नहीं मिली कुछ नहीं Arc Pro B70 32 GB firmware 8517 पर 7 बताए गए पहले के firmware पर 4 सिर्फ़ B50 वाली पंक्ति Intel की दस्तावेज़ी है। B60 और B70 के आँकड़े वे हैं जो लोग lspci से बताते हैं, और ये एक से ज़्यादा बार बदले हैं। खास तौर पर B60 एक firmware update में 24 से 7 पर आ गया, जो उसी तरह का सिकुड़ना है जैसा B50 ने देखा। B65 के लिए किसी ने VF गिनती प्रकाशित ही नहीं की लगती, तो उस पंक्ति को शून्य नहीं, अज्ञात मानिए।\nउस तालिका से दो बातें निकलती हैं, और दोनों उसकी किसी भी एक संख्या से ज़्यादा मायने रखती हैं।\nVF गिनती memory का बँटवारा है, die का feature नहीं। Intel का नियम है कि बड़ा VF Local Memory BAR मतलब कम functions। इसीलिए 16 GB वाला card दो देता है और 32 GB वाले cards सात: GPU के shaders की कोई बात इसे तय नहीं करती।\nजो card आप खरीदने वाले हैं उसे जाँचिए, परिवार को नहीं। एक ही chip पर अलग board vendors के बीच SR-IOV की मौजूदगी बदलती रही है: Sparkle का B60 Blower शुरू में बिना दिखने वाली capability के आया और उसे वह igsc firmware update के बाद ही मिली। ठीक उसी model का lspci -v output माँगिए, या इनमें से किसी पर भरोसा करने से पहले firmware update का बजट रखिए।\nDual B60 एक bracket में दो cards है Seats की गिनती के लिए Maxsun का Arc Pro B60 Dual 48G Turbo दिलचस्प है, और समझने वाली बात यह है कि 48 GB कोई pool नहीं है।\nयह एक board पर दो B60 GPUs हैं, दो BMG-G21 dies, हर एक से 24 GB GDDR6 जुड़ा हुआ, और उनके बीच कोई PCIe bridge chip नहीं। दोनों dies सीधे x16 gold fingers से जुड़े हैं, हर एक PCIe 5.0 x8 पर।\nमतलब host को आपके लिए slot बाँटना पड़ता है। Card को primary x16 slot x8/x8 में bifurcated चाहिए, और ज़्यादातर consumer boards इसे default से चालू नहीं करते। यह एक firmware setting है जिसे आपको ढूँढना पड़ता है, उसी श्रेणी में जिसमें IOMMU और ACS settings हैं जो इस सब के लिए चाहिए।\nयह सही हो तो operating system को दो अलग GPUs दिखते हैं, हर एक का अपना physical function और अपनी SR-IOV capability। तो आपको एक slot से virtual functions के दो सेट मिलते हैं, अगर हर die एक अकेले B60 की तरह व्यवहार करे तो 14 seats, और ऊपर वाली tmpfiles.d file दोगुनी हो जाती है, हर die के लिए एक sriov_numvfs write।\nयह गलत हो तो आपको एक GPU दिखता है और आधा card अदृश्य रहता है।\nयह साफ़ कहना ज़रूरी है कि 48 GB क्या नहीं है: पहले die के virtual function से जुड़ा guest दूसरे die की memory तक नहीं पहुँच सकता। यह एक physical जगह में दो 24 GB cards हैं, जो VDI seats के लिए ठीक वही है जो आप चाहते हैं और एक बड़े model के लिए ठीक वही जो आप नहीं चाहते।\nतो: अगर दो seats काफ़ी हैं, तो B50 एक 70 W card है जो यह कर देगा। अगर आपको सात चाहिए, तो B70 के आसपास योजना बनाइए। अगर आपको चौदह चाहिए और आपके पास ऐसा board है जो bifurcate करेगा, तो dual B60 आपको एक slot में वहाँ पहुँचा देता है।\nक्या आप virtual function पर AI चला सकते हैं? छोटा जवाब: इसे unsupported मानिए। लंबा जवाब, क्योंकि वजह मायने रखती है और वह वह नहीं है जिसका आप अंदाज़ा लगाएँगे।\nये AI cards के रूप में बेचे जाते हैं और दिखावा नहीं कर रहे। B50 के 128 XMX engines 170 peak TOPS पर rated हैं, B70 367 पर, और Intel की software कहानी असली है: vLLM Arc Pro B-series पर 8B से 120B तक के models serve करता है, और IPEX-LLM और llama.cpp का SYCL backend दोनों इन पर चलते हैं।\nलेकिन देखिए कि उनमें से हर नतीजा कैसे बनता है। vLLM के अपने Arc Pro आँकड़े bare metal पर एक Docker container से आते हैं, ऐसे सिस्टमों पर जिनमें चार और आठ पूरे B60 cards tensor parallelism कर रहे हैं। Intel की post SR-IOV या virtual functions का एक बार भी ज़िक्र नहीं करती।\nमैंने जहाँ भी देखा, यही ढर्रा मिला। Intel SR-IOV के use cases को virtualised remote desktop, guest OS graphics acceleration, और media encode और decode तक सीमित रखता है। Compute उस सूची में नहीं है, और मुझे एक भी प्रकाशित मामला नहीं मिला जिसमें किसी ने virtual function से जुड़ी VM के अंदर LLM inference चलाया हो।\nलोग असल में जो करते हैं, वह बहुत कुछ कहता है: वे model को Docker में host पर चलाते हैं, और desktops के लिए VMs को virtual functions देते हैं। दोनों एक साथ करने वाला एक व्यक्ति बस इतना बताता है कि “VRAM gets pretty tight.”\nअसली समस्या यही है, और यह driver support का नहीं, हिसाब का मामला है।\nएक virtual function को local memory का एक तय हिस्सा मिलता है: B50 पर 8 GB, firmware में तय। वह हिस्सा उस guest में weights और KV cache की पक्की छत है, और card में ज़्यादा होने से वह नहीं बढ़ता। FP16 पर एक 8B model में कोई context जोड़ने से पहले ही लगभग 16 GB weights हैं, तो वह किसी भी driver पर B50 के virtual function में नहीं समाता। Q4 पर quantise करें तो 8B लगभग 4 GB में आ जाता है, context के लिए कुछ GB बचते हैं: यह चलता है, लेकिन यह उससे बहुत दूर है जो card बिना बँटे कर सकता है।\nतो दोनों workloads एक ही memory के लिए होड़ करते हैं, और बँटवारा firmware में उनमें से किसी के शुरू होने से पहले तय हो जाता है।\nअगर काम AI है, तो card मत बाँटिए। पूरा card एक VM को pass through कीजिए, वही hostpci0 passthrough जो इस post में पहले firmware update के लिए इस्तेमाल हुआ, या container को host पर चलाइए और उस workload के लिए virtualisation छोड़ दीजिए। दोनों model को पूरे 16 GB और पूरी XMX array देते हैं।\nअगर काम VDI है, तो virtual functions सही हैं, और हर एक के पीछे inference server नहीं, desktop graphics की उम्मीद रखिए। Hardware-accelerated desktops, video playback और encode काम करते हैं। यह तरीका इसी के लिए दस्तावेज़ी है।\nसाफ़ कहना ज़रूरी है: प्रकाशित सबूत का न होना यह साबित नहीं करता कि यह fail होता है। xe driver Level Zero और OpenCL के ज़रिए compute देता है, और यह पूरी तरह संभव है कि VF वाला guest उन्हें ठीक से चालू कर ले। लेकिन Intel की कोई बात नहीं कहती कि यह validated है, किसी ने इसे चलता हुआ नहीं दिखाया लगता, और अगर चले भी तो memory की छत फ़ायदे को सीमित कर देती है। इस पर योजना नहीं बनानी चाहिए।\nइसकी अब भी क्या कीमत है दो virtual functions मतलब एक card से दो hardware-accelerated Windows desktops, बिना vGPU licence, बिना subscription और बिना licence server के। ऐसे हाइपरवाइज़र पर जिसे चलाने में कुछ खर्च नहीं। तरीका काम करता है, यह साबित करने के लिए इतना काफ़ी है, और B50 का ईमानदार काम यही है। यह range का सबसे निचला सिरा है।\nअसली VDI deployment के लिए मैं dual B60 specify करूँगा।\nएक slot से चौदह functions, अगर हर die एक अकेले B60 की तरह व्यवहार करे, इसे seats की गिनती में उसी इलाके में रखता है जिसमें इस workload के लिए बिकने वाले NVIDIA cards हैं, बहुत कम कीमत पर, और हर user के हिसाब से licence करने को कुछ नहीं। वही आखिरी हिस्सा है जो जुड़ता जाता है। NVIDIA के vApps, vPC और RTX vWS सब हर concurrent user के हिसाब से licensed हैं, या तो सालाना subscription के रूप में, या perpetual licence के रूप में जिसे पाँच साल के support और maintenance subscription के साथ खरीदना पड़ता है। हर seat एक line item है, और वह फिर-फिर आता है। Intel की तरफ़ ऐसी कोई line नहीं है। आप card खरीदते हैं।\nऔर लंबे समय में मायने रखने वाला हिस्सा तरीका है। GPU पर SR-IOV एक PCIe capability है, कोई product tier नहीं, तो tmpfiles.d file बस उतनी बढ़ती है जितना card इजाज़त देता है।\nढाँचा है एक sriov_numvfs write, फिर हर function के लिए एक unbind और एक bind: तो दो functions पाँच पंक्तियाँ हैं, और ऊपर की नौ पंक्तियाँ उस card पर माँगे गए चार functions हैं जो दो देता है। सात functions पंद्रह पंक्तियाँ हैं। Dual B60 तीस है, क्योंकि हर die अपना physical function है और उसे अपना sriov_numvfs write मिलता है।\nइसे बढ़ाते हुए और कुछ नहीं बदलता। उस file में किसी भी जगह licence server नहीं आता।\nसंदर्भ Intel support — why the latest Arc Pro B50 firmware shows 2 SR-IOV VFs — आधिकारिक बयान: driver 32.0.101.8306 में graphics firmware BMG__21,1162 से SR-IOV आधिकारिक रूप से चालू, B50 पर हर एक 8 GB VF Local Memory BAR के साथ दो VFs, और अधिकतम VF गिनती और BAR आकार IFWI स्तर पर तय, जिन्हें बदलने का कोई public tool नहीं Intel Community — \u0026ldquo;Why did the latest Intel Arc Pro B50 firmware nerf SR-IOV VFs from 12 to 2?\u0026rdquo; — 12-VF वाला आधिकारिक से पहले का firmware, उसे वापस लाने वाला 32.0.101.6979 rollback, और कम default के लिए Intel का तर्क Level1Techs — B60 SR-IOV support in the Arc Pro drivers — B60 के लिए field से lspci reports, capability दिखाने वाला igsc firmware update, और 24 के बाद 7 वाले आँकड़े कहाँ से आए Level1Techs — B50, B60 or B70 for SR-IOV — हर card और हर firmware पर बताई गई VF गिनती, B70 वाली पंक्तियों का स्रोत ASRock — Intel Arc Pro B65 Creator 32GB — B65 के specifications: 32 GB GDDR6, 20 compute units, 160 XMX engines, 256-bit, PCIe 5.0 MAXSUN — Arc Pro B60 Dual 48G Turbo — vendor का अपना बयान कि card “uses PCIe 5.0 x8 + x8 interfaces and runs efficiently on consumer platforms that support PCIe x16 lane bifurcation” vLLM — Fast and affordable LLM serving on Intel Arc Pro B-Series — इन cards पर AI की कहानी, और यह तथ्य कि यह चार और आठ पूरे B60s पर bare metal पर Docker की कहानी है, SR-IOV या virtual functions का कोई ज़िक्र नहीं Linux kernel — Intel Xe driver — lspci -v के मुताबिक card पर इस्तेमाल हो रहा driver tmpfiles.d(5) — w line type, और उसकी “if the file exists” शर्त जो ऊपर का क्रम तय करती है NVIDIA Virtual GPU Software Packaging, Pricing and Licensing Guide — licensed विकल्प जिससे यह design बचता है: vApps, vPC और RTX vWS सब हर concurrent user के हिसाब से बिकते हैं, सालाना subscription के रूप में या पाँच साल के support और maintenance के साथ बँधे perpetual licence के रूप में Proxmox VE — PCI(e) Passthrough — host की तरफ़ passthrough की ज़रूरतें ","permalink":"https://blogs.damiendye.uk/hi/proxmox/licence-free-vdi-intel-arc-pro-sriov/","summary":"Intel के Arc Pro cards SR-IOV खुद करते हैं, कोई vGPU licence नहीं खरीदना पड़ता, और इसी से Proxmox पर बिना licence का Windows VDI सच में संभव हो जाता है। B50 पर पूरा build, पहले Windows चाहिए वाली bootstrap समस्या, firmware इसे दो virtual functions पर क्यों रोक देता है, और B-series का हर card आपको कितने देता है।","title":"Intel Arc Pro B50 के साथ Proxmox पर बिना licence का Windows VDI, और वह firmware सीमा जिसने उसे रोक दिया"},{"content":"वह स्विच जो आप नहीं ख़रीदते Ceph वाले तीन-नोड Proxmox क्लस्टर को नोड्स के बीच तेज़ नेटवर्क चाहिए। आम जवाब है 100 Gbit का स्विच, और आम आपत्ति है उसकी क़ीमत।\nतीन नोड के लिए एक और जवाब है: उन्हें त्रिकोण में सीधे एक-दूसरे से केबल करें और उसके पार रूट करें। स्टोरेज पाथ में कोई स्विच ही नहीं।\nकिसी भी डिज़ाइन का सबसे सस्ता हिस्सा वह है जो आप ख़रीदते ही नहीं, और वही अकेला हिस्सा है जो कभी ख़राब नहीं होता।\nइससे चार चीज़ें मिलती हैं।\nस्विच का ख़र्च ख़त्म हो जाता है। आपको नेटवर्क कार्ड और तीन केबल चाहिए, न कि उतने ही पोर्ट वाला 100 या 200 Gbit स्विच।\nडेटा पाथ में कोई single point of failure नहीं। जो स्विच ख़राब हो जाए या रीबूट हो, वह पूरे क्लस्टर का east-west ट्रैफ़िक साथ ले जाता है। सीधे एक-दूसरे से जुड़े नोड्स को इमारत में कहीं और किसी स्विच के साथ क्या होता है, इससे कोई फ़र्क़ नहीं पड़ता।\nभारी ट्रैफ़िक अपने ही तारों पर रहता है। Live migration और Ceph replication मेश पर रहते हैं, दफ़्तर और मैनेजमेंट ट्रैफ़िक से होड़ नहीं करते।\nइसे बढ़ाना वायरिंग का काम है, पोर्ट-बजट का नहीं। बीच में कोई ऐसा बॉक्स नहीं जो bandwidth या पोर्ट की गिनती की छत बने, इसलिए जब तक हर सर्वर में एक ख़ाली PCIe स्लॉट है, फ़ैब्रिक बढ़ता रहता है। OpenFabric नए लिंक पर ख़ुद ही रूट करने लगता है।\nऔर एक ईमानदार सीमा, क्योंकि वह इन चार फ़ायदों से ज़्यादा मायने रखती है। Full mesh में हर नोड-जोड़ी के बीच एक केबल चाहिए। तीन नोड यानी तीन केबल। चार यानी छह। पाँच यानी दस। वायरिंग नोड्स की गिनती से तेज़ बढ़ती है, और यह डिज़ाइन किसी छोटे क्लस्टर से आगे switched तरीक़े, जैसे leaf-spine, पर गए बिना नहीं टिकता।\nतीन नोड ठीक वही जगह है जहाँ full mesh समझ में आता है। उससे आगे, हर नोड पर दो मेश पोर्ट के साथ, जो आप अब भी बना सकते हैं वह एक ring है, और उसे एक ऐसी चीज़ चाहिए जिससे यह बिल्ड वैसे बचता है। वह नीचे बताया गया है।\nक्या बनता है तीन Proxmox VE होस्ट, हर एक में दो समर्पित 100 Gbit इंटरफ़ेस, त्रिकोण में केबल किए गए ताकि हर नोड के दो सीधे पड़ोसी हों।\nरूटिंग Proxmox SDN चलाता है। प्रोटोकॉल OpenFabric है: वह मेश के पार सबसे अच्छा पाथ निकालता है, और जब कोई केबल निकाली जाए या लिंक गिर जाए तो बचे हुए पाथ से रीरूट कर देता है। किसी को लॉग इन नहीं करना पड़ता।\nफ़ैब्रिक 10.10.10.0/24 में रहता है, जो सिर्फ़ मेश के लिए आरक्षित है: मैनेजमेंट, गेस्ट, स्टोरेज एड्रेसिंग या किसी बाहरी चीज़ के लिए नहीं।\nनोड मेश एड्रेस मेश इंटरफ़ेस mesh1 10.10.10.1/32 nic1, nic2 mesh2 10.10.10.2/32 nic1, nic2 mesh3 10.10.10.3/32 nic1, nic2 हर नोड को एक /32 मिलता है, subnet का कोई टुकड़ा नहीं। Bridged मेश के बजाय routed मेश का यही मतलब है। एड्रेस नोड की पहचान है, OpenFabric उसे advertise करता है, और दोनों फ़िज़िकल लिंक उस तक पहुँचने के बस रास्ते हैं। उसे रखने के लिए Proxmox एक dummy loopback इंटरफ़ेस बनाता है।\nतीन-नोड त्रिकोण, और हर केबल किस NIC पर लगती है 2.5 Gbit स्विच मैनेजमेंट + क्लाइंट mesh1 10.10.10.1/32 mesh2 10.10.10.2/32 mesh3 10.10.10.3/32 DAC-01 nic1 ↔ nic1 DAC-03 nic2 ↔ nic2 DAC-02 mesh2 nic2 ↔ mesh3 nic1 nic0 nic0 nic0 हर नोड बाक़ी दोनों तक सीधे पहुँचता है, इसलिए मेश का हर hop एक hop है। डैश वाले nic0 लिंक अलग 2.5 Gbit मैनेजमेंट पाथ हैं: फ़ैब्रिक का हिस्सा कभी नहीं, और इसी वजह से मेश टूटने पर भी आप लॉग इन कर सकते हैं। तीन केबल, छह पोर्ट, और हर नोड तक दो रास्ते। कोई भी एक केबल निकाल दें, हर नोड फिर भी पहुँच में रहता है: बचे हुए दो लिंक एक chain बनाते हैं जिसके चारों ओर OpenFabric रूट कर लेगा। वायरिंग Active fibre DAC केबल, त्रिकोण में, और हर नोड पर दोनों मेश इंटरफ़ेस पर jumbo frames चालू।\nकेबल कहाँ से कहाँ तक DAC-01 mesh1 nic1 mesh2 nic1 DAC-02 mesh2 nic2 mesh3 nic1 DAC-03 mesh3 nic2 mesh1 nic2 Copper DAC के बजाय active fibre, दो वजहों से जो नेटवर्क के बारे में नहीं, रैक के बारे में हैं:\nकेबल मैनेजमेंट। Active fibre DAC copper से पतले और कहीं ज़्यादा लचीले होते हैं, इसलिए साफ़ रूट होते हैं और सर्वरों के पीछे ढेर नहीं बनते। एयरफ़्लो। चेसिस के पीछे कम केबल का मतलब है front-to-back एयरफ़्लो में कम रुकावट, जो तब मायने रखता है जब कई high-speed लिंक उन्हीं कुछ रैक यूनिट में आते हैं। दो नेटवर्क, एक नहीं मेश अकेला नेटवर्क नहीं है, और उसे अकेला बनना भी नहीं चाहिए।\nहर नोड का nic0 एक 2.5 Gbit स्विच पर है, जो Proxmox को vmbr0 ब्रिज के रूप में दिखता है। उस पर वेब इंटरफ़ेस, एडमिन एक्सेस और क्लाइंट ट्रैफ़िक चलता है। फ़ैब्रिक बनाते समय भी आप इसी रास्ते का इस्तेमाल करते हैं, इसीलिए इसे फ़ैब्रिक से स्वतंत्र होना ज़रूरी है।\nnic0 को जानबूझकर फ़ैब्रिक से बाहर रखा गया है। फ़ैब्रिक नोड बनाते समय सिर्फ़ nic1 और nic2 चुने जाते हैं।\nमेश तीन चीज़ें ले जाता है:\nCeph। Hyper-converged स्टोरेज के लिए नोड-से-नोड replication, recovery और backfill। क्लाइंट वर्चुअल नेटवर्किंग। VXLAN पर आधारित VNet गेस्ट नेटवर्क को तीनों नोड्स पर फैलाते हैं, routed मेश को underlay की तरह इस्तेमाल करते हुए। Corosync, दूसरे रास्ते के रूप में। क्लस्टर membership ट्रैफ़िक मैनेजमेंट नेटवर्क और मेश दोनों पर चलता है, ताकि quorum किसी एक के अकेले बचे रहने पर निर्भर न हो। मैनेजमेंट नेटवर्क पर क्या चलता है, मेश पर क्या, और दोनों पर कौन सी एक चीज़ 2.5 Gbit मैनेजमेंट नेटवर्क nic0 → vmbr0 → स्विच Proxmox वेब इंटरफ़ेस एडमिन एक्सेस क्लाइंट की ओर का ट्रैफ़िक 100 Gbit routed मेश nic1 + nic2 → सीधा DAC, कोई स्विच नहीं Ceph replication, recovery, backfill VXLAN क्लाइंट वर्चुअल नेटवर्क Live migration Corosync: दोनों रास्ते क्लस्टर membership किसी एक नेटवर्क के अकेले बचे रहने पर निर्भर नहीं। यह अलगाव ही डिज़ाइन है। 100 Gbit इंटरफ़ेस किसी भी हालत में हों, मैनेजमेंट पहुँच में रहता है, और इसी से वेब इंटरफ़ेस से फ़ैब्रिक बनाना, और रोलबैक करना, सुरक्षित होता है। दोनों पर सिर्फ़ Corosync है। बाक़ी हर चीज़ का ठीक एक घर है, और मैनेजमेंट एक्सेस वह है जिसे दूसरे को बदलते समय चलते रहना है। चेंज टिकट पर लिखने लायक़ नियम: मैनेजमेंट और क्लाइंट एक्सेस हर समय 2.5 Gbit स्विच के ज़रिए उपलब्ध रहते हैं, 100 Gbit इंटरफ़ेस किसी भी हालत में हों।\nसब कुछ वेब इंटरफ़ेस से यह बिल्ड पूरी तरह Proxmox वेब इंटरफ़ेस में किया गया है। यह सोचा-समझा फ़ैसला है, टूलिंग की सीमा नहीं।\nजानबूझकर इस्तेमाल नहीं किया गया:\n/etc/network/interfaces को हाथ से एडिट करना। FRR कॉन्फ़िगरेशन फ़ाइलों को हाथ से एडिट करना। बिल्ड के तरीक़े के रूप में vtysh। आप जो SDN ऑब्जेक्ट परिभाषित करते हैं, उनसे Proxmox नीचे का नेटवर्क और रूटिंग कॉन्फ़िगरेशन ख़ुद बनाता है। अगर कोई चीज़ सच में इंटरफ़ेस में सेट नहीं हो सकती, तो उसे कमांड लाइन पर चुपचाप ठीक करने के बजाय prerequisite के रूप में बताना चाहिए। वेब इंटरफ़ेस खोलने वाले अगले व्यक्ति को पता नहीं चलेगा कि आपने क्या किया।\nकमांड-लाइन आउटपुट नीचे सिर्फ़ सबूत के रूप में आता है, बिल्ड के कदम के रूप में कभी नहीं।\nबिल्ड 1. Proxmox वेब इंटरफ़ेस खोलें और Datacentre → SDN → Fabrics पर जाएँ।\n2. फ़ैब्रिक जोड़ें। उसे नाम दें, मेश prefix दें, और timers सेट करें।\nHello और CSNP interval 1 होने पर कुछ बदलते ही state जितनी जल्दी हो सके अपडेट होती है, और इतने छोटे फ़ैब्रिक पर यही चाहिए। क़ीमत है control-plane पर ज़्यादा बातचीत। दो-दो लिंक वाले तीन नोड पर इसका कोई मतलब नहीं, पर फ़ैब्रिक कभी बढ़े तो इस पर दोबारा सोचना चाहिए।\n3. हर नोड को Add node से जोड़ें। उसे मेश रेंज से एक एड्रेस दें और जो इंटरफ़ेस हिस्सा लेते हैं उन पर टिक करें।\nध्यान दें किस पर टिक नहीं है: nic0 बाहर रहता है, और vmbr0 मैनेजमेंट एड्रेस रखता है। पहले दो नोड के लिए Create another और आख़िरी पर Create इस्तेमाल करें।\n4. लागू करने से पहले नतीजा जाँचें।\nतीन नोड, तीन एड्रेस, हर एक पर nic1, nic2, और सब new के रूप में चिह्नित: अभी तक कुछ भी लिखा नहीं गया है।\n5. SDN कॉन्फ़िगरेशन लागू करें।\nअगर आप पहले देखना चाहें कि यह क्या करने वाला है, तो Apply के बगल में Dry-Run है।\nकैसे पता चले कि यह चल गया Status व्यू में तीनों नोड पर zone और fabric दोनों एंट्री ok दिखनी चाहिए, और लागू करने के लिए कोई बदलाव बाक़ी नहीं होना चाहिए।\nफिर किसी नोड के अपने नज़रिए से फ़ैब्रिक जाँचें। पहले routes: हर नोड के पास बाक़ी हर नोड के लिए एक /32 होना चाहिए, और Via कॉलम बताता है कि वह किस पड़ोसी का इस्तेमाल कर रहा है।\nफिर पड़ोसी। तीन-नोड त्रिकोण पर दो, दोनों Up।\nफिर इंटरफ़ेस, जहाँ इस चीज़ की बनावट दिखती है: dummy_Mesh router एड्रेस रखने वाला loopback है, और nic1 और nic2 broadcast segment के बजाय Point-To-Point हैं।\nआख़िर में, शुरू से अंत तक साबित करें।\nकोई loss नहीं, और औसत 0.134 ms और 0.141 ms। दोनों पड़ोसी एक सीधे hop की दूरी पर हैं, त्रिकोण यही देता है।\nवह जाँच जो कोई स्क्रीनशॉट नहीं दिखा सकता: एक केबल निकालें और पक्का करें कि सब कुछ फिर भी पहुँच में है। Point-to-point लिंक की एक जोड़ी के बजाय routed मेश चुनने की पूरी वजह यही है। इसलिए, यही अकेली जाँच है जो मायने रखती है।\nतीन नोड से आगे: Ring त्रिकोण एक full mesh है। हर नोड का बाक़ी हर नोड से सीधा केबल है, हर hop एक hop है, और कोई नोड कभी ऐसा ट्रैफ़िक नहीं ढोता जो उसका अपना न हो।\nतीन नोड पर हर नोड के दो मेश पोर्ट आपको यही गुण देते हैं, और चार पर ठीक यही आप खो देते हैं। थोड़ा नहीं। पूरा। चार नोड के full mesh को हर नोड पर तीन पोर्ट चाहिए। दो के साथ, ज़्यादा से ज़्यादा आप एक ring वायर कर सकते हैं।\nRing ट्रैफ़िक का मॉडल बदल देता है। आस-पास के नोड्स के बीच अब भी सीधा केबल है, पर ring के आमने-सामने वाले नोड्स के बीच नहीं: उनका ट्रैफ़िक किसी बीच वाले नोड से होकर जाना पड़ता है। और उस नोड को अपने दोनों मेश इंटरफ़ेस के बीच पैकेट forward करने को तैयार होना चाहिए, जो Linux डिफ़ॉल्ट रूप से नहीं करता। Kernel ip_forward को “Forward Packets between interfaces” के रूप में दर्ज करता है, “Default: 0 (disabled)” के साथ।\nचार-नोड ring: आमने-सामने के नोड्स में केबल नहीं, इसलिए एक नोड उनके लिए forward करता है mesh1 10.10.10.1 mesh2 forward करता है mesh3 10.10.10.3 mesh4 10.10.10.4 mesh1 → mesh3 बीच में कोई केबल नहीं इसलिए mesh2 से होकर transit नोड इनके बीच forward nic1 और nic2 4 नोड पर full mesh 6 केबल, हर नोड पर 3 पोर्ट न transit, न forwarding Ring: 4 केबल, 2 पोर्ट, इसीलिए आप यहाँ हैं छह नोड-जोड़ियों में से दो के बीच सीधा केबल नहीं। उनका ट्रैफ़िक एक पड़ोसी ढोता है, यानी उस पड़ोसी के लिंक अपने साथ दूसरे नोड्स का Ceph replication भी ढोते हैं: यह वह क़ीमत है जो त्रिकोण में नहीं। mesh1 से mesh3 तक कोई केबल नहीं। उसका ट्रैफ़िक mesh2 या mesh4 से होकर जाता है, और वह नोड उसे सिर्फ़ इसलिए forward करता है क्योंकि जिन दो इंटरफ़ेस पर वह आता है उन पर forwarding चालू है। इसे मेश इंटरफ़ेस के लिए चालू करें, और सिर्फ़ उन्हीं के लिए:\n# /etc/sysctl.d/99-mesh-forwarding.conf net.ipv4.conf.nic1.forwarding = 1 net.ipv4.conf.nic2.forwarding = 1 sysctl --system मान लेने के बजाय उन्हें पढ़कर देखें:\nsysctl net.ipv4.conf.nic1.forwarding net.ipv4.conf.nic2.forwarding यहाँ हर इंटरफ़ेस वाली सेटिंग ही सही दायरा है, और वह अपने आप काम करती है। Global net.ipv4.ip_forward कोई prerequisite नहीं है। Kernel का forwarding वाला फ़ैसला पैकेट पाने वाले इंटरफ़ेस की अपनी वैल्यू पढ़ता है:\n#define IN_DEV_FORWARD(in_dev) IN_DEV_CONF_GET((in_dev), FORWARDING) IN_DEV_CONF_GET उस डिवाइस की सेटिंग लौटाता है, global वाली के साथ उसका AND नहीं। इसलिए nic1 और nic2 फ़ैब्रिक का transit ट्रैफ़िक forward करते हैं, जबकि nic0 और vmbr0 ठीक वही रहते हैं जो उन्हें होना चाहिए: होस्ट इंटरफ़ेस जो रूट नहीं करते। Global स्विच चालू करने से बॉक्स का हर इंटरफ़ेस router बन जाएगा, दफ़्तर के नेटवर्क की ओर वाला भी। इस डिज़ाइन को इसकी कोई ज़रूरत नहीं।\nGlobal IPv4 स्विच के बारे में एक बात जानने लायक़ है, भले ही आप उसे सेट नहीं कर रहे: net.ipv4.ip_forward एक bulk setter है, इसीलिए kernel डॉक्यूमेंटेशन चेतावनी देता है कि इसे बदलना “resets all configuration parameters to their default state”। अगर होस्ट पर कोई और चीज़ कभी इसे लिखे, तो वह इन हर-इंटरफ़ेस वैल्यू को ओवरराइट कर देती है। यह जानना अच्छा है, इससे पहले कि आप पूरी दोपहर यह सोचने में लगा दें कि transit क्यों बंद हो गया।\nIPv6 अपवाद है, और वही अकेली जगह है जहाँ global स्विच की जगह है। Kernel डॉक्यूमेंटेशन conf/all/forwarding के नीचे यह सीधे कहता है:\nEnable global IPv6 forwarding between all interfaces. IPv4 and IPv6 work differently here; the force_forwarding flag must be used to control which interfaces may forward packets.\nइसलिए ऊपर वाले साफ़-सुथरे हर-इंटरफ़ेस तरीक़े का कोई IPv6 बराबर नहीं है। अगर फ़ैब्रिक IPv6 ले जाता है, तो आप forwarding को globally चालू करते हैं और फिर उसे force_forwarding से सीमित करते हैं, जिसका दस्तावेज़ कहता है “Enable forwarding on this interface only — regardless of the setting on conf/all/forwarding”। ध्यान दें कि वही ओवरराइट वाला व्यवहार उलटी दिशा में भी लागू होता है: conf.all.forwarding को 0 करने से हर इंटरफ़ेस पर force_forwarding रीसेट हो जाता है।\nऊपर का बिल्ड फ़ैब्रिक का IPv6 prefix ख़ाली छोड़ता है, इसलिए इनमें से कुछ भी यहाँ लागू नहीं होता। यह तभी मायने रखता है जब आप एक जोड़ें।\nध्यान दें कि forwarding क्या नहीं बदलता: OpenFabric पहले से हर नोड का /32 advertise कर रहा था और पहले से ring के पार का पाथ निकाल रहा था। Forwarding छूटी हुई अनुमति है, छूटी हुई अक़्ल नहीं। Routing table शुरू से सही थी। Kernel बस router की तरह काम करने से मना कर रहा था।\nत्रिकोण की तुलना में ring की क़ीमत:\nTransit ट्रैफ़िक। चार-नोड ring पर दो तिरछी जोड़ियाँ किसी बीच वाले नोड से होकर जाती हैं, इसलिए उनका ट्रैफ़िक उस नोड के अपने ट्रैफ़िक के साथ उसकी लिंक bandwidth भी खाता है। Ceph इसे सबसे पहले महसूस करता है, क्योंकि replication पड़ोसी-से-पड़ोसी नहीं, सब-से-सब होता है। एक अतिरिक्त hop की latency उन रास्तों पर, बिना स्विच वाले डिज़ाइन के आम sub-millisecond आँकड़ों के ऊपर। ख़राबी के लिए कम गुंजाइश। एक टूटा लिंक ring को chain बना देता है: अब भी पूरी तरह जुड़ा हुआ, पर लंबे रास्तों और ज़्यादा transit के साथ। दूसरा टूटना क्लस्टर को दो हिस्सों में बाँट देता है। त्रिकोण एक टूटने को बिना किसी transit के झेल लेता है। और यह इस तरह बिगड़ता है जिसे बताने से आसान चित्र में दिखाना है। पाँचवाँ नोड जोड़ें और क्लस्टर की हर नोड-जोड़ी में से आधी किसी और के forward करने पर निर्भर हो जाती है:\nपाँच-नोड ring: आधी नोड-जोड़ियाँ अब किसी और के forward करने पर निर्भर mesh1 mesh2 mesh3 mesh4 mesh5 केबल: सीधा, एक hop केबल नहीं: पड़ोसी का forward करना ज़रूरी पाँच नोड, हर एक पर दो पोर्ट कुल 10 नोड-जोड़ियाँ 5 के बीच सीधा केबल 5 के बीच नहीं, पड़ोसी से होकर हर नोड अब ऐसा ट्रैफ़िक forward करता है जो उसका अपना नहीं। इसके बजाय full mesh? 10 केबल, और हर नोड पर 4 पोर्ट यानी हर सर्वर में दो और NIC, और यहीं डिज़ाइन रुक जाता है। तीन नोड पर कुछ transit नहीं होता। चार पर दो जोड़ियाँ होती हैं। पाँच पर आधी होती हैं, और एक टूटना हर रास्ता लंबा कर देता है। दस नोड-जोड़ियाँ, पाँच केबल। डैश वाली रेखाएँ वे जोड़ियाँ हैं जिनके बीच कोई केबल नहीं: उनमें से हर एक Ceph ट्रैफ़िक है जो किसी तीसरे नोड के लिंक से होकर जाता है। इससे बचाने वाला full mesh हर सर्वर पर चार पोर्ट माँगता है। इस डिज़ाइन की असली छत यही है, और वह routing प्रोटोकॉल नहीं है। OpenFabric ठीक संभाल लेता है। बात यह है कि हर नोड पर पोर्ट की गिनती तय है, इसलिए तीन नोड के बाद हर नया बॉक्स आपके ट्रैफ़िक का और हिस्सा किसी और के transit में बदल देता है।\nऔर ईमानदार बात, क्योंकि यह उस बिल्ड के लिए मायने रखती है जो अब तक सिर्फ़ वेब इंटरफ़ेस से हुआ है: sysctl वेब इंटरफ़ेस का काम नहीं है। पहले तय किए गए नियम के हिसाब से, यह एक prerequisite है जिसे बताना चाहिए, कमांड लाइन पर चुपचाप ठीक करने वाली चीज़ नहीं। इसे runbook में लिखें, क्योंकि SDN पैनल खोलने वाले अगले व्यक्ति को एक स्वस्थ फ़ैब्रिक दिखेगा और ज़रा भी इशारा नहीं मिलेगा कि ring /etc/sysctl.d की एक फ़ाइल पर टिका है।\nइसे वापस हटाना हटाना उसी इंटरफ़ेस में बिल्ड का उलटा है: मेश के लिए बनाए गए SDN ऑब्जेक्ट हटाएँ, कॉन्फ़िगरेशन लागू करें, और पक्का करें कि मैनेजमेंट एक्सेस पर कोई असर नहीं पड़ा।\nnic0 और 2.5 Gbit स्विच उसी आख़िरी कदम के लिए हैं। अगर मेश को रोलबैक करने में आपका वेब इंटरफ़ेस जा सकता है, तो डिज़ाइन शुरू करने से पहले ही ग़लत था।\nशुरू करने से पहले मैनेजमेंट एक्सेस सच में मेश से स्वतंत्र है। इसे जाँचें, मान न लें। किसी भी SDN बदलाव से पहले तीनों नोड स्वस्थ हैं। नोड के नाम, इंटरफ़ेस के नाम और केबलिंग लिखी हुई है, क्योंकि एक होस्ट का nic1 दूसरे पर nic2 होना पूरी दोपहर बर्बाद करता है। दोनों मेश इंटरफ़ेस पर jumbo frames सेट हैं, और MTU underlay पर VXLAN के overhead का हिसाब रखता है। मेश रेंज आरक्षित है और कहीं और इस्तेमाल में नहीं है। संदर्भ Proxmox VE — Software-Defined Network — SDN Fabrics का डॉक्यूमेंटेशन। Fabrics “provide automated routing between nodes in a cluster”, OpenFabric “based on IS-IS and optimized for the spine-leaf topology common in data centers” है, हर नोड को एक अनोखा Router-ID चाहिए, और “a dummy \u0026rsquo;loopback\u0026rsquo; interface with the router-id is automatically created” Proxmox VE — Cluster Manager — Corosync नेटवर्किंग और redundant लिंक, जिन पर दो-रास्ते वाला membership डिज़ाइन टिका है Proxmox VE — Deploy Hyper-Converged Ceph Cluster — hyper-converged क्लस्टर के लिए नेटवर्क की अपेक्षाएँ Linux kernel — IP sysctl documentation — ip_forward और उसका डिफ़ॉल्ट 0, हर इंटरफ़ेस वाला forwarding नियंत्रण, और यह चेतावनी कि global स्विच बदलने से हर इंटरफ़ेस का कॉन्फ़िगरेशन रीसेट हो जाता है ","permalink":"https://blogs.damiendye.uk/hi/proxmox/proxmox-routed-mesh-sdn-openfabric/","summary":"तीन Proxmox नोड एक त्रिकोण में सीधे एक-दूसरे से जुड़े हैं, मेश पर OpenFabric रूटिंग करता है और उसके ऊपर Ceph और VXLAN क्लाइंट नेटवर्क चलते हैं। पूरा सेटअप वेब इंटरफ़ेस में बना है, और यह भी साफ़ बताया गया है कि यह डिज़ाइन कहाँ आगे नहीं बढ़ता।","title":"SDN OpenFabric के साथ बिना स्विच का Proxmox मेश: 100G स्विच के बिना Ceph और क्लाइंट नेटवर्क"},{"content":"कॉपी की हुई बूट लाइनों की समस्या Proxmox ट्यूनिंग खोजिए और आपको एक लंबी GRUB_CMDLINE_LINUX लाइन मिलेगी, एक इकाई की तरह पेश की हुई, बिना किसी इशारे के कि कौन सा फ़्लैग कहाँ लागू होता है।\nयह जितना लगता है उससे ज़्यादा मायने रखता है। हाइपरवाइज़र और गेस्ट उल्टी समस्याएँ सुलझा रहे हैं।\nहोस्ट को असली हार्डवेयर तक तय पहुँच चाहिए: IOMMU का व्यवहार, PCIe लिंक स्टेट, भौतिक idle स्टेट। गेस्ट को यह दिखावा बंद करना है कि उसके पास हार्डवेयर है ही: उसके टाइमर अंदाज़े हैं, उसके idle स्टेट कल्पना हैं, और उसकी रुकावटें आम तौर पर किसी और के scheduler की होती हैं। इसलिए एक ही फ़्लैग एक तरफ़ सही, दूसरी तरफ़ बेमतलब, और कभी-कभी नुकसानदेह हो सकता है।\nनीचे बताया है कि हर एक असल में कहाँ जाता है।\nहर कर्नेल बूट फ़्लैग कहाँ जाता है सिर्फ़ होस्ट असली हार्डवेयर यहीं है iommu=pt amd_iommu=pgtbl_v2 pcie_acs_override=… pcie_aspm=off pci=pcie_bus_perf → USB4 हो तो pcie_bus_safe processor.max_cstate=1 + Intel पर intel_idle.max_cstate amd_pstate=disable governor भी सेट करें गेस्ट के पास कोई PCIe लिंक नहीं, न C-state, न cpufreq। सिर्फ़ गेस्ट हार्डवेयर होने का दिखावा बंद cpuidle.off=1 गेस्ट के idle स्टेट कल्पना हैं nmi_watchdog=0 शेड्यूल से हटा vCPU इसे चला देता है softlockup_panic=0 रुकावट होस्ट की गलती थी kvm-clock को छेड़िए मत। tsc या hpet ज़बरदस्ती न लगाएँ: काउंटर आपके नहीं हैं। होस्ट पर इन तीनों का मतलब अलग है, और दो की आपको असली कीमत चुकानी पड़ती है। दोनों: अलग कारण वही फ़्लैग, अलग फ़ैसला mitigations=off होस्ट: गेस्ट-से-होस्ट लीक गेस्ट: प्रोसेस isolation default_hugepagesz + hugepages होस्ट: गेस्ट RAM का आधार गेस्ट: एप्लिकेशन का आधार एक परत चुनें, दोनों नहीं watchdog_thresh / nowatchdog होस्ट: स्वीकार किया शोर गेस्ट: कभी भरोसेमंद नहीं “दोनों” का मतलब यह नहीं कि दोनों जगह सेट करें। मतलब है कि फ़ैसला दो बार लेना होगा। कहीं नहीं: ये कुछ नहीं करते amd_iommu=on वैध विकल्प नहीं; कर्नेल “Unknown option - 'on'” लॉग करके आगे बढ़ जाता है consoleblank=0 पहले से कर्नेल डिफ़ॉल्ट अगर कॉपी की गई बूट लाइन में इनमें से कोई है, तो वह कभी /proc/cmdline से जाँची नहीं गई, जो सबसे सस्ती जाँच है, और गलत bootloader वाली गलती भी वही पकड़ती है। चलन में मौजूद फ़्लैग, छाँटे हुए। दो मशहूर फ़्लैग किसी भी तरफ़ कुछ नहीं करते, और watchdog वाली पंक्ति नियम नहीं बल्कि सचमुच अपने विवेक का मामला है। पहले: क्या आप सही फ़ाइल बदल भी रहे हैं? ZFS root पर Proxmox इंस्टॉल systemd-boot से बूट होता है, जहाँ /etc/default/grub को कोई नहीं पढ़ता। उसे बदलकर रीबूट करने से न कोई बदलाव होता है, न कोई error। एक झुंझलाहट भरा घंटा।\nproxmox-boot-tool status # tells you which bootloader is in use # systemd-boot: edit /etc/kernel/cmdline, then proxmox-boot-tool refresh # GRUB: edit /etc/default/grub, then update-grub किसी भी तरह, मानिए मत, जाँचिए:\ncat /proc/cmdline और GRUB की तरफ़ GRUB_CMDLINE_LINUX_DEFAULT इस्तेमाल कीजिए, GRUB_CMDLINE_LINUX नहीं। दूसरा recovery समेत हर बूट एंट्री पर लागू होता है, और recovery ठीक वही समय है जब आपको स्टॉक व्यवहार चाहिए, बंद mitigations और पिन किए C-state नहीं।\nहोस्ट लाइन IOMMU और passthrough iommu=pt amd_iommu=pgtbl_v2 pcie_acs_override=downstream,multifunction iommu=pt IOMMU को passthrough मोड में रखता है: VM को दिए गए डिवाइस translate होते हैं, होस्ट के अपने डिवाइस translation से बचते हैं। यह असली है और arch/x86/kernel/pci-dma.c में संभाला जाता है, जो iommu_set_default_passthrough(true) बुलाता है। कर्नेल इसे iommu.passthrough=1 के बराबर बताता है।\namd_iommu=on कोई चीज़ नहीं है। Proxmox गाइडों में सबसे ज़्यादा कॉपी किया गया, अस्तित्व में न होने वाला पैरामीटर यही है। कर्नेल का parse_amd_iommu_options() fullflush, force_enable, off, force_isolation, pgtbl_v1, pgtbl_v2, irtcachedis, nohugepages और v2_pgsizes_only स्वीकार करता है। बाकी सब यहाँ पहुँचता है:\npr_notice(\u0026#34;Unknown option - \u0026#39;%s\u0026#39;\\n\u0026#34;, str); जब फ़र्मवेयर AMD-Vi का विज्ञापन करता है तो यह डिफ़ॉल्ट से चालू होता है। अपना लॉग जाँचिए और आप पाएँगे कि यह पैरामीटर वह काम कभी कर ही नहीं रहा था जिसका श्रेय इसे दिया गया:\ndmesg | grep -i \u0026#34;AMD-Vi\\|Unknown option\u0026#34; amd_iommu=pgtbl_v2 वैध है: यह v2 DMA page-table फ़ॉर्मैट चुनता है, जो AMD के अपने फ़ॉर्मैट की जगह CPU की page-table संरचना साझा करता है। दो बातें जानिए: दस्तावेज़ इसे DMA-API तक सीमित करता है, यानी होस्ट के अपने डिवाइस डोमेन, passthrough में इस्तेमाल होने वाले VFIO डोमेन नहीं; और यह सुरक्षित तरीके से विफल होता है, एक लॉग लाइन के साथ जिसे आपको जाँचना चाहिए:\nif (amd_iommu_pgtable == PD_MODE_V2) { if (!amd_iommu_v2_pgtbl_supported()) { pr_warn(\u0026#34;Cannot enable v2 page table for DMA-API. Fallback to v1.\\n\u0026#34;); amd_iommu_pgtable = PD_MODE_V1; } } इसलिए भारी होस्ट-साइड IO वाले नोड पर इसे नापना फ़ायदेमंद है, और यह जाँचना भी कि आपको यह सचमुच मिला।\npcie_acs_override=downstream,multifunction Proxmox का out-of-tree पैच है। यह उस isolation का दावा करके IOMMU ग्रुप बाँटता है जिसका हार्डवेयर विज्ञापन नहीं करता, और इसी से consumer बोर्ड पर passthrough मुमकिन होता है। यह ठीक-ठीक कर्नेल को टोपोलॉजी के बारे में कुछ झूठ बताना भी है। ऐसे बॉक्स पर ठीक जिसके गेस्ट पर आप होस्ट जितना भरोसा करते हैं। बाकी जगह ठीक नहीं। क्यों, इस पर और IOMMU tax वाले लेख में है।\nलेटेंसी और jitter pcie_aspm=off processor.max_cstate=1 amd_pstate=disable pcie_aspm=off PCIe लिंक को लो-पावर स्टेट से बाहर रखता है ताकि आता हुआ IO किसी लिंक के जागने का इंतज़ार न करे। इसकी कीमत हर लिंक पर कुछ वॉट है और यह लेटेंसी की वह पूँछ हटाता है जिसका निदान मुश्किल है। देखिए PCIe ASPM और passthrough।\nprocessor.max_cstate=1 ACPI idle को C1 पर रोकता है। ड्राइवर पर ध्यान दीजिए: यह processor/acpi_idle का knob है, इसलिए Intel पर आपको intel_idle.max_cstate=1 भी चाहिए, क्योंकि intel_idle को प्राथमिकता मिलती है। AMD पर यही सही है।\nएक असली विरोधी तर्क है। Idle कोर की गहरी नींद ही पैकेज को वह थर्मल और पावर गुंजाइश देती है जिससे व्यस्त कोर boost होते हैं, इसलिए सबको C1 पर पिन करने से आपकी अधिकतम single-thread फ़्रीक्वेंसी घट सकती है और idle खपत बढ़ सकती है। लेटेंसी-संवेदनशील होस्ट पर यह सौदा आम तौर पर फ़ायदे का है। throughput के पीछे भागते होस्ट पर शायद न हो। विरासत में लेने की जगह नापिए।\namd_pstate=disable acpi-cpufreq पर लौट आता है। इसे चुनने से पहले दस्तावेज़ में दिए विकल्प जान लेना ठीक है: passive (ड्राइवर एक performance स्तर माँगता है), active (EPP ड्राइवर, performance या efficiency की ओर झुकाव के साथ), और guided। Performance की ओर झुका active, या passive के साथ performance governor, अक्सर वही लेटेंसी देता है और CPPC का बारीक नियंत्रण भी रखता है। और अगर आप इसे बंद करते हैं तो governor सोच-समझकर सेट कीजिए: schedutil के साथ acpi-cpufreq पर पहुँचना पीछे का कदम हो सकता है।\nमेमोरी default_hugepagesz=1G hugepages=64 अकेला default_hugepagesz=1G कुछ भी आरक्षित नहीं करता। कर्नेल इसे इस रूप में बताता है कि यह “the size of the default HugeTLB page… the default hugetlb size used for shmget(), mmap() and mounting hugetlbfs” सेट करता है: एक इकाई, आवंटन नहीं। आवंटन hugepages= से आता है, जिसे “Number of HugeTLB pages to allocate at boot” बताया गया है।\nयह 2 MiB की तुलना में 1 GiB पेज के लिए कहीं ज़्यादा मायने रखता है, क्योंकि होस्ट के चलते रहने और मेमोरी बिखरने के बाद लगातार 1 GiB के हिस्से असल में मिलते ही नहीं। बूट ही आपका इकलौता भरोसेमंद मौका है।\nफिर गेस्ट को opt in करना होता है (VM कॉन्फ़िग में hugepages: 1024)। आरक्षित पेज जिन्हें कोई इस्तेमाल नहीं करता, बस वह मेमोरी है जो आप वापस नहीं ले सकते, और जो VM इन्हें इस्तेमाल करते हैं उन पर आप ballooning और KSM खो देते हैं।\nसुरक्षा का सौदा mitigations=off यह एक स्विच नहीं है। कर्नेल इसे एक सूची में फैलाता है, और हाइपरवाइज़र पर ये एंट्री मायने रखती हैं:\nl1tf=off mds=off mmio_stale_data=off kvm.nx_huge_pages=off gather_data_sampling=off retbleed=off spec_rstack_overflow=off nospectre_v2 nopti indirect_target_selection=off कर्नेल का अपना सार है “improves system performance, but it may also expose users to several CPU vulnerabilities”। L1TF, MDS और MMIO stale data खास तौर पर गेस्ट-से-होस्ट और गेस्ट-से-गेस्ट लीक के रास्ते हैं, और kvm.nx_huge_pages खुद KVM के अंदर iTLB-multihit का mitigation है।\nएक single-tenant बॉक्स पर बचाव लायक जहाँ हर गेस्ट होस्ट जितना भरोसेमंद है। वहाँ बचाव लायक नहीं जहाँ गेस्ट भरोसेमंद नहीं या अलग-अलग tenant के हैं। और ध्यान दीजिए कि यह pcie_acs_override के ऊपर जुड़ता है: एक ही लाइन पर दो स्वतंत्र isolation गारंटी हटीं। यह विरासत से नहीं, जानबूझकर करने लायक है।\nUSB4 पर PCIe इनमें से दो को बदल देता है अगर आपके PCIe डिवाइस USB4 या Thunderbolt पर आते हैं, जैसे बाहरी GPU या NVMe एनक्लोज़र, तो ऊपर के दो जवाब बदल जाते हैं।\nMPS ट्यूनिंग मुफ़्त नहीं रहती तय स्लॉट पर pci=pcie_bus_perf एक छोटी मुफ़्त जीत है। कर्नेल इसे ऐसे बताता है:\nSet device MPS to the largest allowable MPS based on its parent bus. Also set MRRS (Max Read Request Size) to the largest supported value… for best performance.\nपेंच यह है कि यह ब्रिज को बूट पर कॉन्फ़िगर करता है, बूट पर मौजूद टोपोलॉजी से। USB4 पर hot-plug सामान्य बात है, और बाद में जोड़ा गया डिवाइस उससे छोटे MPS को सपोर्ट कर सकता है जिस पर ब्रिज पहले से सेट था।\nकर्नेल एक अलग नीति का विज्ञापन करते हुए दबी बात खुलकर कह देता है:\npcie_bus_peer2peer — Set every device\u0026rsquo;s MPS to 128B, which every device is guaranteed to support… This also guarantees that hot-added devices will work.\nयह गारंटी सिर्फ़ एक नीति देती है, और वह वही है जो सब कुछ 128 बाइट पर पिन कर देती है, ठीक वह जिससे बचने के लिए MaxPayloadSize ट्यूनिंग निकलती है। Hot-plug टोपोलॉजी के लिए pcie_bus_safe (root complex के नीचे सभी डिवाइस का सपोर्ट किया सबसे बड़ा मान) या बस tune_off छोड़ देना ज़्यादा सुरक्षित शुरुआत है। टनल का अपना स्विच वैसे भी पाने लायक MPS की सीमा बाँध देता है, इसलिए वह छत उठाना कभी आपके हाथ में था ही नहीं।\nHot-plug MPS नीति का जवाब क्यों बदलता है बूट पर,\u0026#160;pcie_bus_perf\u0026#160;जो दिखता है उसी से ब्रिज सेट करता है ब्रिज: MPS 512 डिवाइस A · 512 डिवाइस B · 512 बूट पर मौजूद बाद में जुड़ा · सिर्फ़ 256 मेल नहीं दोबारा तय कुछ नहीं चेसिस में ऐसा कभी नहीं होता: बूट की टोपोलॉजी हमेशा की टोपोलॉजी है। USB4 पोर्ट पर यही सामान्य बात है। चार नीतियाँ, और कर्नेल किसे hot-plug के लिए सुरक्षित कहता है pcie_bus_tune_off BIOS के मान वैसे ही छोड़ें pcie_bus_safe root complex के नीचे सभी डिवाइस का सबसे बड़ा साझा मान pcie_bus_perf हर डिवाइस पर parent bus की अनुमति वाला सबसे बड़ा, और MRRS pcie_bus_peer2peer हर जगह 128 B: “guarantees that hot-added devices will work” यह गारंटी सिर्फ़ एक नीति देती है, और वही उस payload साइज़ को फेंक देती है जिसके लिए आप ट्यून कर रहे थे। ब्रिज एक बार, बूट पर, तब मौजूद डिवाइस से कॉन्फ़िगर होता है। उसके बाद हर चीज़ को उस फ़ैसले के साथ जीना होता है, जो चेसिस में ठीक है और पोर्ट पर ठीक नहीं। सुरक्षा का ढेर गंभीर हो जाता है बाहरी PCIe का मतलब है कि कोई आपके हाइपरवाइज़र में DMA करने वाला डिवाइस लगा सकता है। कर्नेल का Thunderbolt दस्तावेज़ इस पर सीधा है:\n…the connected devices can be DMA masters and thus read contents of the host memory without CPU and OS knowing about it. There are ways to prevent this by setting up an IOMMU but it is not always available for various reasons.\nIOMMU ही बचाव है। अब गिनिए कि होस्ट लाइन उसके साथ क्या करती है। iommu=pt होस्ट के अपने डिवाइस को बिना translation वाले identity डोमेन देता है, pcie_acs_override उस isolation का दावा करता है जो है ही नहीं, और mitigations=off गेस्ट-isolation के mitigations बंद करता है। हर एक अकेले बचाव लायक है। साथ में, ऐसी मशीन पर जिसका USB4 पोर्ट हाथ से छुआ जा सकता है, ये जुड़कर ढेर बन जाते हैं।\nदेखिए आप कहाँ खड़े हैं:\ncat /sys/bus/thunderbolt/devices/domain*/security # none | user | secure | dponly | usbonly उस बूट लाइन के साथ none खुला दरवाज़ा है। अगर पोर्ट तक वे लोग पहुँच सकते हैं जिन्हें आप root नहीं देंगे, तो iommu=pt पहली चीज़ है जिस पर मैं दोबारा सोचूँगा।\nगेस्ट लाइन ये वे हैं जो VM के अंदर जाते हैं, और इनमें से तीन का मतलब यहाँ होस्ट से अलग है।\nnmi_watchdog=0 softlockup_panic=0 cpuidle.off=1 cpuidle.off=1 cpuidle सबसिस्टम बंद करता है। गेस्ट में यह लगभग मुफ़्त है: गेस्ट के idle स्टेट इम्यूलेशन हैं, और सुलाने के लिए कोई भौतिक कोर नहीं है, इसलिए यह ढाँचा आपको सिर्फ़ जागने की लेटेंसी देता है। होस्ट पर यही फ़्लैग पावर और boost गुंजाइश का असली सौदा है, और यह processor.max_cstate=1 से टकराता है। सिर्फ़ गेस्ट की तरफ़।\nsoftlockup_panic=0 soft lockup को गेस्ट में panic करने से रोकता है। VM में यह सचमुच बचाव करता है, क्योंकि वहाँ soft lockup अक्सर गेस्ट की गलती नहीं होता। शेड्यूल से हटाया गया vCPU ठीक उस टास्क जैसा दिखता है जिसने हटने से मना कर दिया। यही तंत्र VM की घड़ी पर भरोसा क्यों नहीं किया जा सकता के पीछे है। फिर भी जाँचिए कि आपको इसकी ज़रूरत है या नहीं। ज़्यादातर बिल्ड पर यह डिफ़ॉल्ट से 0 है।\nsysctl kernel.softlockup_panic nmi_watchdog=0 दिलचस्प वाला है, और यह एक नियम से ज़्यादा का हकदार है।\nWatchdog का सवाल दो डिटेक्टर एक ही सीमा साझा करते हैं:\nwatchdog_thresh= — Set the hard lockup detector stall duration threshold in seconds. The soft lockup detector threshold is set to twice the value. A value of 0 disables both. Default is 10 seconds.\nHard lockup (nmi_watchdog) तब चलता है जब कोई CPU टाइमर इंटरप्ट लेना ही बंद कर दे। Soft lockup तब चलता है जब कोई टास्क बिना शेड्यूल हुए उससे दोगुनी देर CPU पकड़े रहे।\nगेस्ट में hard lockup डिटेक्टर बंद करना सही है। शेड्यूल से हटाया गया vCPU बिना अपनी गलती के इसे ट्रिगर कर सकता है, और डिटेक्टर का perf-counter वाला काम ऐसे संकेत के लिए VM exit करवाता है जो शोर के सिवा कुछ नहीं था।\nहोस्ट पर यह विवेक का मामला है, और यह इस पर निर्भर है कि आप असल में किस शोर के पीछे हैं। Over-provisioning गेस्ट को भूखा रखती है, होस्ट कर्नेल को नहीं: VM चाहे जितने ठुँसे हों, होस्ट के भौतिक CPU इंटरप्ट लेते रहते हैं। इसलिए व्यस्त हाइपरवाइज़र जो लॉग शोर फेंकता है, वह भारी मात्रा में soft lockup और RCU stall संदेश होते हैं, NMI hard-lockup रिपोर्ट नहीं। अगर शोर यही है, तो nmi_watchdog=0 उसे चुप नहीं कराएगा, और softlockup_panic=0 भी नहीं: वह panic रोकता है, संदेश नहीं।\nनिशाने वाले knob ये हैं:\nwatchdog_thresh=30 # hard 30s, soft 60s — scale to taste nowatchdog # honest single flag: disables both detectors sysctl -w kernel.soft_watchdog=0 # runtime, keeps hard-lockup detection व्यस्त होस्ट पर hard lockup डिटेक्टर बंद करने का एक अलग और बेहतर कारण है, जिसका शोर से कोई लेना-देना नहीं: यह हर CPU पर एक हार्डवेयर performance counter खाता है। इसीलिए पैरामीटर raw perf event कॉन्फ़िगर करने के लिए rNNN स्वीकार करता है। अगर आप PMU-आधारित profiling कर रहे हैं, या जानबूझकर over-provision किया बॉक्स चला रहे हैं जहाँ आपने density की कीमत के रूप में लेटेंसी के उतार-चढ़ाव को पहले ही मान लिया है, तो वह counter वापस देना ठीक सौदा है, और छोटी रुकावटें जिन्हें आपने सोच-समझकर स्वीकार किया है, घटनाएँ नहीं हैं।\nबस यह चुनाव इस कारण से कीजिए, शोर वाले कारण से नहीं, क्योंकि इनमें से सिर्फ़ एक सच है।\nconsoleblank=0 कुछ नहीं करता। कर्नेल console blank टाइमआउट को ऐसे बताता है: “A value of 0 disables the blank timer. Defaults to 0.” यह पहले से बंद है। हानिरहित, पर आम चलन में यह दूसरा पैरामीटर है जिसका कोई असर नहीं, और इसे साथ रखने से कॉपी होते समय लाइन सोची-समझी दिखती है।\nझटपट संदर्भ: हर फ़्लैग कहाँ जाता है फ़्लैग होस्ट गेस्ट नोट iommu=pt हाँ नहीं IOMMU होस्ट का है। गेस्ट में तभी लागू जब आप vIOMMU के साथ nested passthrough चला रहे हों amd_iommu=pgtbl_v2 हाँ नहीं होस्ट के DMA-API डोमेन। जाँचिए कि v1 fallback की जगह v2 मिला amd_iommu=on लागू नहीं लागू नहीं वैध विकल्प नहीं। कर्नेल “Unknown option - \u0026lsquo;on\u0026rsquo;” लॉग करता है pcie_acs_override=… हाँ नहीं Proxmox पैच, सिर्फ़ होस्ट टोपोलॉजी। डिज़ाइन से ही isolation कमज़ोर करता है pcie_aspm=off हाँ नहीं गेस्ट में कोई असली PCIe लिंक नहीं; भौतिक लिंक होस्ट का है pci=pcie_bus_perf हाँ भरोसेमंद नहीं होस्ट तार पर MPS सेट करता है। डिवाइस USB4 पर आएँ तो इसकी जगह pcie_bus_safe processor.max_cstate=1 हाँ नहीं असली idle स्टेट होस्ट के हैं। Intel पर intel_idle.max_cstate=1 जोड़िए amd_pstate=disable हाँ नहीं गेस्ट CPU फ़्रीक्वेंसी नियंत्रित नहीं करते cpuidle.off=1 सावधानी से हाँ गेस्ट में मुफ़्त। होस्ट पर boost गुंजाइश खाता है और max_cstate से टकराता है nmi_watchdog=0 विवेक हाँ गेस्ट में सही। होस्ट पर PMU counter के लिए कीजिए, शोर के लिए नहीं softlockup_panic=0 नहीं हाँ गेस्ट की रुकावटें अक्सर होस्ट के scheduler की होती हैं। आम तौर पर पहले से डिफ़ॉल्ट consoleblank=0 लागू नहीं लागू नहीं कुछ नहीं करता। कर्नेल डिफ़ॉल्ट पहले से 0 है mitigations=off दोनों दोनों दोनों तरफ़ वैध, जोखिम का हिसाब अलग: होस्ट पर गेस्ट-से-होस्ट लीक, गेस्ट में प्रोसेस isolation default_hugepagesz + hugepages= दोनों दोनों होस्ट: VM मेमोरी का आधार। गेस्ट: VM के अंदर का workload जिसे इनकी ज़रूरत है। अलग मकसद, वही फ़्लैग watchdog_thresh= / nowatchdog दोनों दोनों होस्ट: स्वीकार की गई रुकावटों को चुप कराना। गेस्ट: डिटेक्टर कभी भरोसेमंद था ही नहीं तीन सचमुच दोनों तरफ़ जाते हैं, और यह साफ़ होना ज़रूरी है कि “दोनों” का मतलब “एक ही कारण से” नहीं है:\nहोस्ट पर mitigations=off गेस्ट-से-होस्ट और गेस्ट-से-गेस्ट लीक के बारे में है। गेस्ट के अंदर यह उस VM के भीतर प्रोसेस isolation के बारे में है। आप उचित रूप से इसे एक जगह बंद कर सकते हैं और दूसरी जगह नहीं। होस्ट पर Hugepages गेस्ट RAM का आधार हैं; गेस्ट में वे किसी एप्लिकेशन का। एक ही मेमोरी के लिए इन्हें दो बार आरक्षित करना बर्बादी है, इसलिए तय कीजिए कि किस परत को इनकी ज़रूरत है। Watchdog ट्यूनिंग होस्ट पर शोर का फ़ैसला है और गेस्ट में सही होने का फ़ैसला। बाकी सब एक तरफ़ या दूसरी तरफ़ है, और उनमें से दो तो चुनाव हैं ही नहीं।\nदो लाइनें होस्ट, passthrough करते AMD बॉक्स पर, single-tenant:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet amd_iommu=pgtbl_v2 iommu=pt pcie_acs_override=downstream,multifunction pcie_aspm=off pci=pcie_bus_perf default_hugepagesz=1G hugepages=64 processor.max_cstate=1 amd_pstate=disable mitigations=off\u0026#34; अगर कुछ भी USB4 पर आता है तो pci=pcie_bus_perf की जगह pcie_bus_safe लगाइए। अगर सारे गेस्ट आपके नहीं हैं तो mitigations=off हटाइए। Intel पर intel_iommu=on AMD फ़्लैग की जगह लेता है और intel_idle.max_cstate=1 C-state सीमा में जुड़ता है।\nLinux गेस्ट:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet nmi_watchdog=0 softlockup_panic=0 cpuidle.off=1\u0026#34; और गेस्ट में kvm-clock को छेड़िए मत: tsc या hpet ज़बरदस्ती मत लगाइए। पैरावर्चुअल घड़ी ठीक इसीलिए है कि काउंटर आपके नहीं हैं। यही पूरा तर्क VM टाइमकीपिंग वाले लेख में है।\nक्या हटाना है अगर आपको किसी फ़ोरम पोस्ट से लाइन विरासत में मिली है, तो सबसे पहले ये दो हटाइए, क्योंकि इनसे आपको कुछ नहीं मिलता और ये साबित करते हैं कि लाइन कभी टेस्ट नहीं हुई:\namd_iommu=on: वैध विकल्प नहीं; कर्नेल “Unknown option - \u0026lsquo;on\u0026rsquo;” लॉग करता है और आगे बढ़ जाता है consoleblank=0: पहले से डिफ़ॉल्ट और रीबूट के बाद बाकी को /proc/cmdline से मिलाइए। उस लाइन का हर फ़्लैग ऐसा होना चाहिए जिसका कारण आप बता सकें।\nअगर आप नहीं बता सकते कि कोई फ़्लैग क्या करता है, तो वह ट्यूनिंग नहीं है। वह अंधविश्वास है। और उसे अगले बिल्ड में कोई ऐसा व्यक्ति कॉपी करेगा जो आप पर भरोसा करता है।\nसंदर्भ Linux kernel — the kernel\u0026rsquo;s command-line parameters — mitigations=, default_hugepagesz=, hugepages=, watchdog_thresh=, nowatchdog, consoleblank=, processor.max_cstate=, amd_pstate=, amd_iommu= और pci=pcie_bus_* नीतियाँ Linux kernel source — drivers/iommu/amd/init.c — parse_amd_iommu_options(), और v2 page-table क्षमता की जाँच जो v1 पर लौट आती है Linux kernel source — arch/x86/kernel/pci-dma.c — iommu=pt का iommu_set_default_passthrough() बुलाना Linux kernel — Thunderbolt — सुरक्षा स्तर, और जुड़े डिवाइस DMA masters के रूप में Proxmox VE — System Administration — proxmox-boot-tool status, systemd-boot बनाम GRUB के लिए कर्नेल कमांड लाइन बदलना ","permalink":"https://blogs.damiendye.uk/hi/proxmox/kernel-boot-flags-host-guest/","summary":"ऑनलाइन मिलने वाली ज़्यादातर Proxmox ट्यूनिंग लाइनें कर्नेल फ़्लैग का एक ढेर होती हैं। आधे हाइपरवाइज़र पर जाते हैं, आधे गेस्ट के अंदर, दो मशहूर फ़्लैग कुछ करते ही नहीं, और कुछ का मतलब इस पर बदल जाता है कि वे सीमा के किस तरफ़ लगे।","title":"दो बूट लाइनें: कौन से कर्नेल फ़्लैग Proxmox होस्ट पर जाते हैं, और कौन से गेस्ट में"},{"content":"आप इसे क्यों चाहेंगे QEMU एक असली NVMe controller emulate कर सकता है। यह कोई paravirtual डिवाइस नहीं है जिसके लिए ड्राइवर आपको देना पड़े, बल्कि एक PCIe NVMe controller है जिसे guest एक आम SSD की तरह पहचानता है और अपने पहले से मौजूद NVMe सपोर्ट से चलाता है।\nपूरा आकर्षण यही है, और यह सुनने में जितना लगता है उससे ज़्यादा क़ीमती है।\nLinux में सालों से in-box nvme ड्राइवर है। Windows, Windows 8.1 और Server 2012 R2 से stornvme के साथ आता है। तो guest boot होता है, एक PCIe NVMe controller गिनता है, अपना ड्राइवर load करता है और disk पा लेता है। न VirtIO ISO, न install के समय ड्राइवर डालना, और न Windows installer के बीच में “no drives found” वाली स्क्रीन।\nजिसने भी VirtIO ISO mount किए हुए उस स्क्रीन को घूरा है, और installer फिर भी कहता रहा है कि कोई disk नहीं है, वह यह आकर्षण तुरंत समझ जाएगा।\nदूसरी वजह यह है कि यह ऊपर तक NVMe की तरह ही बर्ताव करता है। nvme-cli चलता है। Namespaces असली हैं। LBA formats, metadata bytes और protection information सब कॉन्फ़िगर किए जा सकते हैं। इसलिए यह उन operations का अभ्यास करने की बहुत अच्छी जगह है जिनका अभ्यास आपको डेटा रखने वाले हार्डवेयर पर नहीं करना चाहिए।\nइसे कैसे जोड़ें Proxmox में इसके लिए न कोई GUI checkbox है, न कोई config key। यह एक raw QEMU डिवाइस है, इसलिए यह /etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf में args: के अंदर जाता है।\nQEMU का डॉक्यूमेंटेशन सबसे छोटी जोड़ी देता है: बिना interface वाला एक backing drive, और उसे इस्तेमाल करने वाला controller। सीधे /etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf में लिखा हुआ, बिना quotes के:\nargs: -drive file=/var/lib/vz/images/100/nvm.img,if=none,id=nvmidentifier -device nvme,serial=LAB-NVME-01,drive=nvmidentifier if=none मायने रखता है: यह QEMU से कहता है कि drive को किसी default controller से न जोड़े, क्योंकि -device nvme वाली line उस पर दावा करने वाली है। drive पर id= और device पर drive= का मेल खाना ज़रूरी है। यही जोड़ी दोनों हिस्सों को जोड़ती है।\nserial= अनिवार्य है; इसके बिना QEMU VM शुरू करने से मना कर देता है। कुछ ऐसा चुनें जिसे आप पहचान सकें, क्योंकि guest nvme list और smartctl में ठीक यही वापस बताता है, और “इन चार एक जैसे वर्चुअल ड्राइव में कौन-सा कौन है” यह सवाल आप कभी न कभी पूछेंगे।\nQuoting: वह हिस्सा जिसमें सब फँसते हैं उस string को quote करना है या नहीं, यह इस पर निर्भर है कि आप उसे कहाँ टाइप कर रहे हैं, और इसे उल्टा कर देना पहली कोशिश में इसके फ़ेल होने की सबसे आम वजह है।\nProxmox args: की value सहेजता है और बाद में उसे Text::ParseWords::shellwords से तोड़ता है। इसलिए config file में quotes माने जाते हैं और हटा दिए जाते हैं। पूरी तरह quoted string एक ही argument बन जाती है:\n# WRONG in the config file — collapses to one argv element QEMU cannot parse args: \u0026#34;-drive file=…,if=none,id=nvmidentifier -device nvme,serial=…,drive=nvmidentifier\u0026#34; shellwords से गुज़रकर इससे ठीक एक element निकलता है। बिना quotes के वही line वे चार देती है जो QEMU को सच में चाहिए: -drive, उसके parameters, -device, उसके parameters।\ncommand line पर इसका उल्टा है, क्योंकि वहाँ आप Proxmox के लिए नहीं, अपने shell के लिए quote कर रहे होते हैं। यहाँ quotes ज़रूरी हैं, और config में जो सहेजा जाता है वह बिना quotes वाली value है:\nqm set 100 --args \u0026#34;-drive file=/var/lib/vz/images/100/nvm.img,if=none,id=nvmidentifier -device nvme,serial=LAB-NVME-01,drive=nvmidentifier\u0026#34; दोनों सही हैं। बस वे एक-दूसरे की जगह नहीं ले सकते। अगर आप line qm set से बनाते हैं, तो बाद में qm config 100 से नतीजा देखें, आपको वह बिना quotes के सहेजा हुआ दिखेगा। config file यही रूप चाहती है।\nअगर backing image मौजूद नहीं है, तो पहले उसे बनाएँ:\nqemu-img create -f raw /var/lib/vz/images/100/nvm.img 32G एक से ज़्यादा Namespace एक disk से आगे किसी भी चीज़ के लिए controller को उसके namespaces से अलग करें:\n-device nvme,id=nvme-ctrl-0,serial=deadbeef -drive file=nvm-1.img,if=none,id=nvm-1 -device nvme-ns,drive=nvm-1 Namespace identifiers 1 से ऊपर अपने-आप दिए जाते हैं। यही कॉन्फ़िगरेशन इस डिवाइस को सीखने के लिए सच में काम का बनाता है, क्योंकि namespace management NVMe का वह हिस्सा है जिसे ज़्यादातर लोग कभी छू नहीं पाते।\nएक 4Kn वर्चुअल Namespace namespace आम block-size properties लेता है, और QEMU उन्हीं से LBA data size निकालता है। hw/nvme/ns.c format exponent को ds = 31 - clz32(ns-\u0026gt;blkconf.logical_block_size) के रूप में निकालता है। तो इससे आपको एक सही 4K-native namespace मिलता है:\n-device nvme-ns,drive=nvm-1,logical_block_size=4096,physical_block_size=4096 namespace डिवाइस metadata bytes प्रति LBA के लिए ms, extended LBAs के लिए mset, और protection information के type और guard format के लिए pi और pif भी लेता है।\nयह 4Kn और 512e वाले लेख की हर चीज़ के लिए एक पूरी प्रयोगशाला है: 512-byte बनाम 4096-byte logical blocks, metadata वाले formats, T10-PI, एक ऐसे डिवाइस पर जिसे आप जितनी बार चाहें नष्ट कर सकते हैं।\nजाँचें कि यह पहुँच गया guest के अंदर से:\nlsblk -o NAME,MODEL,SIZE,LOG-SEC,PHY-SEC nvme list nvme id-ns -H /dev/nvme0n1 | grep -i \u0026#34;lbaf\\|data size\u0026#34; आपको एक असली NVMe namespace दिखना चाहिए, उन block sizes के साथ जो आपने माँगे थे।\nआप क्या छोड़ देते हैं तीन चीज़ें, और पहली दो performance के समझौते नहीं हैं। वे क्षमताओं का हटना हैं। डिवाइस पर कुछ भी रखने से पहले उन्हें जान लें।\nProxmox क्या संभालता है, और args से जुड़ा डिवाइस किसके बाहर बैठता है VM config में, drive के रूप में scsi0: local-zfs:vm-100-disk-0,iothread=1 volume Proxmox का है और वह इसे जानता है vzdump / PBS backups में शामिल हाँ PVE snapshots हाँ Live migration हाँ GUI में Resize और Move Disk हाँ storage view में गिना जाता है हाँ args: से जुड़ा -device nvme,drive=nvm1,serial=… raw QEMU डिवाइस: PVE को इसका कुछ पता नहीं backups में शामिल नहीं PVE snapshots नहीं Live migration नहीं Resize और Move Disk नहीं storage view में गिना जाता है नहीं इनमें से सिर्फ़ एक “नहीं” ख़ुद को बताता है। Live migration error के साथ फ़ेल होता है, क्योंकि QEMU डिवाइस को unmigratable मानता है। backup बस disk के बिना सफल हो जाता है, इसीलिए यह आपकी runbook में होना चाहिए, सिर्फ़ याद में नहीं। Proxmox VM config में drive के रूप में जो है, उसे संभालता है। args से जुड़ा controller उसके बाहर है, इसलिए स्टोरेज layer पर बना हर फ़ीचर उस पर लागू ही नहीं होता। 1. Live Migration बंद है यह Proxmox की कोई सीमा या चूक नहीं है। QEMU ख़ुद device model में इस डिवाइस को unmigratable घोषित करता है। QEMU 10.2 के hw/nvme/ctrl.c से:\nstatic const VMStateDescription nvme_vmstate = { .name = \u0026#34;nvme\u0026#34;, .unmigratable = 1, }; तीन lines, और बीच वाली ही पूरी कहानी है। controller की कोई migration state नहीं है, इसलिए QEMU migration की कोशिश करने की जगह उसे मना कर देता है। यही सही फ़ेल होना है। आपको error मिलता है, न कि ऐसा guest जो किसी दूसरे node पर उलझी हुई disk के साथ फिर से चल पड़े।\nएक दूसरी, अलग वजह भी है कि यह काम नहीं कर सकता: Proxmox को पता ही नहीं कि disk मौजूद है। अगर QEMU डिवाइस state को ले भी जा सकता, तब भी PVE के migration logic में कुछ भी ऐसा नहीं है जो target पर backing volume उपलब्ध कराए।\nफिर भी इस पर नज़र रखने लायक़ है: QEMU की development branch ने इस थोक flag की जगह nvme_set_migration_blockers() function रखा है, जो migration की इजाज़त देता है और सिर्फ़ कुछ ख़ास फ़ीचरों के लिए उसे रोकता है। उदाहरण के लिए एक से ज़्यादा namespace, जहाँ comment कहता है “we don\u0026rsquo;t handle this in migration code yet”। यह 10.2 तक किसी release में नहीं आया है, इसलिए आज आपकी मदद नहीं करता, लेकिन यह पाबंदी नरम होती दिखती है। किसी लेख पर भरोसा करने की जगह अपना QEMU version जाँचें।\n2. Proxmox Backups इसे नहीं देखेंगे vzdump और Proxmox Backup Server उन volumes का backup लेते हैं जो VM config में drives के रूप में दिखते हैं: scsi0, virtio0 वग़ैरह। args: से जुड़ी disk उनमें से नहीं है। यह एक raw QEMU डिवाइस है जिसके बारे में PVE को कुछ भी पता नहीं।\nतो backup चलता है, सफलता बताता है, और उसमें डिवाइस नहीं होता।\nयह फ़ेल होने का तरीक़ा error से भी बुरा है, क्योंकि कुछ भी आपको बताता नहीं। यही बात हर जगह लागू होती है: न PVE snapshots, न GUI से disk resize, न Move Disk, न storage view में कोई हिसाब। अगर आपने volume PVE से बनाया और फिर उसे अलग कर दिया, तो शायद PVE उसे साफ़ भी न करे। एक अनाथ, जो बाद में किसी को उलझाने के इंतज़ार में है।\nअगर इनमें से किसी पर डेटा रहने वाला है, तो guest के अंदर से उसका backup लें, और कहीं लिखकर रखें कि hypervisor इसे कवर नहीं कर रहा।\n3. यह VirtIO SCSI से तेज़ नहीं है इस बात पर लोग हैरान होते हैं, क्योंकि “NVMe” performance फ़ीचर जैसा पढ़ता है। यहाँ ऐसा नहीं है।\nVirtIO SCSI और VirtIO block paravirtual हैं: guest ड्राइवर और hypervisor ठीक इसी काम के लिए बने एक ring buffer को साझा करते हैं, और guest जानता है कि वह hypervisor से बात कर रहा है।\nemulated NVMe controller डिज़ाइन से इसका उल्टा है। यह असली NVMe registers दिखाता है, इसलिए guest उसे ऐसे प्रोग्राम करता है जैसे वह हार्डवेयर हो। हर doorbell write एक MMIO access है जो hypervisor में trap होता है। सही, और ring पर एक descriptor रखने से हर IO पर ज़्यादा महँगा।\nसाझा ring बनाम emulated registers guest │ hypervisor VirtIO SCSI: paravirtual guest ड्राइवर जानता है कि वह VM है साझा ring दोनों सिरे इसे समझते हैं host block layer 1 notify descriptor ring पर जाता है और host को सूचना मिलती है। ring जानबूझकर सीमा के आर-पार है। Emulated NVMe: असली registers guest ड्राइवर समझता है कि यह हार्डवेयर है NVMe registers doorbells, queues, MMIO host block layer हर doorbell write trap होता है trap + emulate, हर IO पर guest ठीक वही कर रहा है जो वह किसी physical controller के साथ करता, और यही मक़सद है: उसका अपना ड्राइवर बिना बदले चलता है। इसीलिए यह compatibility फ़ीचर है, performance फ़ीचर नहीं। Interrupt coalescing सपोर्टेड नहीं और default में बंद है: सही हार्डवेयर बर्ताव, क़ीमत है हार्डवेयर emulate करना। paravirtual रास्ता एक ring है जिसे guest और host दोनों समझते हैं। emulated रास्ता guest से registers चलवाता है, और हर doorbell write एक trap है: सटीक हार्डवेयर बर्ताव, हार्डवेयर-emulation की क़ीमत पर। QEMU का अपना डॉक्यूमेंटेशन भी डिवाइस की कमियों के बारे में साफ़ है: interrupt coalescing “is not supported and is disabled by default”, और SMART/Health log page के हिसाब वाले आँकड़े “are reset when the device is power cycled”।\nइसमें से कुछ भी इसे पूरी तरह धीमा नहीं बनाता। यह बिल्कुल इस्तेमाल लायक़ है। बस इसका मतलब है कि इसे कभी VirtIO SCSI से ज़्यादा throughput की उम्मीद में न चुनें। इसे ड्राइवर के लिए चुनें, या NVMe semantics के लिए।\nयह असल में कहाँ अपनी जगह कमाता है बिना VirtIO media के guest install करना। जो Windows installer VirtIO SCSI disk नहीं देख पाता, वह NVMe disk देख लेगा, क्योंकि ड्राइवर image में पहले से है। उस पर install करें, फिर तय करें कि बाद में VirtIO पर जाना है या नहीं। Appliances और images जो आपके नियंत्रण में नहीं हैं। कोई भी चीज़ जो तय image के रूप में आती है, जिसमें VirtIO ड्राइवर नहीं हैं, और जिसे आप दोबारा बनाना नहीं चाहते। सीखना और lab का काम। nvme format --lbaf, namespace बनाना और जोड़ना, metadata और protection information: जो operations असली हार्डवेयर पर विनाशकारी और vendor पर निर्भर हैं, वे यहाँ मुफ़्त हैं। किसी ज़रूरी ड्राइव को छूने से पहले हाथ साधने का यह सबसे सुरक्षित तरीक़ा है। किसी और की topology दोहराना। अगर आप किसी ग्राहक के NVMe layout को debug कर रहे हैं, तो मेल खाते namespaces और block sizes वाला एक emulated controller उनका हार्डवेयर उधार लेने से कहीं तेज़ चक्र है। Production में इसकी जगह क्या इस्तेमाल करें ऐसे VM के लिए जिसे performance, PVE फ़ीचर और चैन चाहिए: VirtIO SCSI single, iothread=1, discard=on और ssd=1 के साथ, cache=none पर। यही व्यवस्था live migration, backups, snapshots और storage view को काम करता रखती है।\nऐसे VM के लिए जिसे आख़िरी कुछ प्रतिशत चाहिए और जो जानबूझकर वे फ़ीचर छोड़ सकता है, जवाब emulated NVMe डिवाइस नहीं है। जवाब असली पासथ्रू है, अपने कड़े समझौतों के साथ, जो IOMMU tax वाले लेख में बताए गए हैं।\nemulated NVMe डिवाइस इन दोनों में से किसी खेमे में नहीं है। इसलिए यह एक compatibility और lab औज़ार है, और उस काम में यह बहुत अच्छा है।\nइसे उस काम के लिए इस्तेमाल करें जिसमें यह अच्छा है, तो यह आपको निराश नहीं करेगा। इससे performance फ़ीचर बनने को कहें, तो यह बहुत जल्दी निराश करेगा।\nसंदर्भ QEMU — NVMe Emulation — -drive/-device nvme syntax, कई namespaces के लिए nvme-ns, ms/mset/pi/pif namespace parameters, और interrupt coalescing व SMART हिसाब पर बताई गई सीमाएँ QEMU source — hw/nvme/ctrl.c — 10.2 release में .unmigratable = 1 के साथ nvme_vmstate की घोषणा QEMU source — hw/nvme/ns.c — namespace जो अपना LBA format logical_block_size से निकालता है Proxmox VE — Backup and Restore — vzdump क्या कवर करता है, और PVE द्वारा संभाले गए drives के लिए per-volume backup options Proxmox VE — Qemu/KVM Virtual Machines — VirtIO SCSI, iothread, discard और सपोर्टेड disk options ","permalink":"https://blogs.damiendye.uk/hi/proxmox/virtual-nvme-proxmox/","summary":"QEMU एक असली NVMe controller emulate कर सकता है, जिससे guest अपना in-box NVMe ड्राइवर इस्तेमाल करता है और VirtIO media की ज़रूरत नहीं पड़ती। यह डिज़ाइन से ही migrate नहीं होता, Proxmox backups को नहीं दिखता, और VirtIO SCSI से तेज़ नहीं है। यहाँ बताया गया है कि इसे कैसे जोड़ें और कब यह काम का है।","title":"Proxmox में एक वर्चुअल NVMe डिवाइस, और वे तीन चीज़ें जो आप छोड़ देते हैं"},{"content":"हर घड़ी जो धारणा मानकर चलती है कंप्यूटर की घड़ी किसी नियमित चीज़ को गिनकर चलती है, और इस भरोसे पर कि वह गिनती चलती रहेगी। एक क्रिस्टल कंपन करता है, एक काउंटर बढ़ता है, और सॉफ़्टवेयर हिसाब लगाता है कि कितना समय बीता।\nवर्चुअलाइज़ेशन भरोसे वाला हिस्सा तोड़ देता है।\nkernel का अपना KVM timekeeping दस्तावेज़ समस्या को एक वाक्य में कह देता है: “the virtual operating system does not run with 100% usage of the CPU, despite the fact that it may very well make that assumption.” नीचे जो कुछ है, वह सब इसी से निकलता है।\nआपका vCPU हमेशा नहीं चल रहा होता vCPU होस्ट पर एक thread है। वह तब चलता है जब होस्ट का scheduler कहता है।\nजब वह नहीं चल रहा, तब गेस्ट सिर्फ़ खाली नहीं बैठा, वह गायब है। वह गिन नहीं सकता, timer interrupt संभाल नहीं सकता, और उसके पास यह जानने का कोई तरीका नहीं कि वह कितनी देर गायब रहा। होस्ट इसे steal time के रूप में दर्ज करता है, जो “वह समय जो आपके साथ हुआ, आपके लिए नहीं” का ईमानदार नाम है।\nसबसे ज़्यादा चोट timer interrupts पर लगती है। जो गेस्ट periodic tick माँगता है, वह होस्ट से तय दर पर interrupts पहुँचाने को कह रहा है, और होस्ट हमेशा ऐसा नहीं कर पाता। फिर से kernel दस्तावेज़ से: “the host virtualization engine may not be able to deliver the proper number of interrupts per second, and so guest time may fall behind.”\nगेस्ट के timer ticks बराबर अंतर पर आना क्यों बंद कर देते हैं Bare metal: CPU हमेशा आपका है चल रहा timer ticks बराबर अंतर पर: इन्हें गिनने से समय मिल जाता है VM में: vCPU किसी और के scheduler पर एक thread है चल रहा deschedule हुआ deschedule हुआ खाली हिस्सों के दौरान बकाया ticks देर से, झुंड में, या आते ही नहीं गेस्ट dashed हिस्सों को नहीं देख सकता। अंदर से लगता है कि घड़ी ने बस उम्मीद से कम ticks दिए, इसीलिए kernel दस्तावेज़ कहता है कि गेस्ट का समय “may fall behind” जब होस्ट उसके माँगे interrupts नहीं पहुँचा पाता। होस्ट dashed हिस्सों को steal time कहता है। गेस्ट उन्हें कुछ भी नहीं कहता, क्योंकि वह वहाँ था ही नहीं। गेस्ट का अपना नज़रिया नीचे वाली पंक्ति है: देर से आने वाले tick, झुंड में आने वाले tick, और ऐसे खाली हिस्से जिनका वह हिसाब नहीं दे सकता। वह समय के बीतने जितना ही होस्ट के scheduler को भी नाप रहा है। tick की दर जितनी ऊँची, हालत उतनी बुरी, और overcommit किया हुआ होस्ट इसे और बिगाड़ देता है। यही वजह है कि व्यस्त होस्ट शांत गेस्ट्स की timekeeping भी खराब कर देता है। सब एक ही physical cores के लिए कतार में हैं।\nकाउंटर भी आपके नहीं हैं अगर periodic tick भरोसेमंद नहीं, तो सीधा जवाब है कि कोई काउंटर पढ़ लिया जाए। उसकी अपनी समस्याएँ हैं।\nTSC तेज़ वाला है, और kernel दस्तावेज़ उसके बारे में साफ़ बोलता है: “The TSC is a CPU-local clock in most implementations… the TSCs of different CPUs may start at different times.” उसकी दर processor के power states के साथ बदल सकती है, और पुराने हिस्सों पर core के idle होने पर वह पूरी तरह रुक जाता है। इसलिए physical cores के बीच migrate होने वाला vCPU ऐसा काउंटर पढ़ सकता है जो एक microsecond पहले पढ़े काउंटर से मेल नहीं खाता।\nबाकी विकल्प दूसरी तरह से बुरे हैं। HPET, PIT और ACPI PM timer सब emulated डिवाइस हैं, इसलिए हर बार पढ़ना hypervisor में एक trap है। सही, पर इतना महँगा कि hot loop में घड़ी पढ़ने वाला गेस्ट इसे महसूस करेगा।\nइसीलिए paravirtual घड़ियाँ बनीं। KVM पर kvm-clock होस्ट को अपनी timekeeping एक साझा structure में डालने देता है जिसे गेस्ट सीधे पढ़ता है: न trap, न गिनती, न यह धारणा कि गेस्ट जागता रहा। यही वजह है कि गेस्ट के clocksource को छेड़ना नहीं चाहिए, सिर्फ़ इसलिए tsc या hpet ज़बरदस्ती मत लगाइए कि किसी forum पोस्ट ने कहा वह तेज़ है।\nMigration, snapshots और suspend Live migration, snapshot restore और suspend/resume, तीनों गेस्ट की घड़ी के साथ एक ही काम करते हैं: उसे रोकते हैं, फिर कहीं और दोबारा चालू करते हैं।\nगेस्ट को जो दिखता है वह भटकाव नहीं, एक छलाँग है। घड़ी एक मान पर थी, अब दूसरे मान पर है, और बीच में कुछ नहीं। ऐसे होस्ट पर migrate करना जिसका TSC दूसरी frequency पर चलता है, इसे और बढ़ा देता है।\nछलाँगें मायने रखती हैं क्योंकि घड़ी सुधारने वाला सॉफ़्टवेयर भटकाव सुधारने के लिए बना है, teleport के लिए नहीं।\nयह KVM की समस्या नहीं है ऊपर लिखी सब बातों को KVM की कमी मान लेना आसान है। ऐसा नहीं है।\nहर hypervisor एक paravirtual घड़ी देता है, क्योंकि हर hypervisor की बनावट में यही समस्या है: KVM के पास kvm-clock है, Hyper-V के पास reference TSC page, VMware के पास pseudo-performance counter और Tools वाला sync, Xen के पास pvclock। ये एक ही जुगाड़ के चार अलग-अलग implementation हैं।\nkernel दस्तावेज़ का अपना निष्कर्ष यह है कि यहाँ कोई परफ़ेक्ट हल नहीं है। सिर्फ़ accuracy, performance और complexity के बीच सौदे हैं।\nअगर आप यह kernel developers के बजाय किसी vendor से सुनना चाहते हैं, तो high-accuracy time के लिए Microsoft की support boundary हैरान करने वाली हद तक साफ़ है। वर्चुअलाइज़्ड Windows सिस्टम पर 50 ms accuracy का दावा करने के लिए एक लिखी हुई शर्त यह है कि “the one-day average CPU utilization of the host must not exceed 90%.” 1 ms के लिए होस्ट को 80% से नीचे रहना होगा।\nइसे फिर से पढ़िए: गेस्ट की घड़ी की accuracy लिखित रूप में इस पर निर्भर है कि होस्ट कितना व्यस्त है। यह Windows की कोई सनक नहीं, यह वही भौतिकी है जो kernel दस्तावेज़ बताता है, बस support boundary के रूप में लिखी हुई।\nगेस्ट timekeeping की तीन परतें, और गेस्ट असल में किनका मालिक है Wall-clock sync असल में कितना बजा है नेटवर्क पर NTP jitter, asymmetry, stratum ptp_kvm hypercall सीधे होस्ट से पूछता है Paravirtual घड़ी होस्ट अपनी timekeeping ख़ुद देता है हर hypervisor एक देता है, क्योंकि सबकी यही समस्या है: kvm-clock Hyper-V TSC page VMware pseudo-perf Xen pvclock एक ही जुगाड़ के चार अलग implementation Hardware counters VM में आपके नहीं TSC HPET PIT ACPI PM timer CPU-local और बदलती दर वाले, या emulated: हर बार पढ़ना hypervisor में trap है ऊपर वाली परत में चुनाव गेस्ट का है। बीच वाली परत में hypervisor उसे ऐसी घड़ी उधार देता है जो पूरे समय चल रही थी। तीन परतें, और गेस्ट सच में सिर्फ़ ऊपर वाली का मालिक है। हर hypervisor की paravirtual घड़ी नीचे की परत में उसी ग़ायब गारंटी का जुगाड़ है। गेस्ट के अंदर NTP गलत औज़ार क्यों है NTP उस काम में अच्छा है जिसके लिए वह बना था: असली oscillator वाली मशीन जो थोड़ी तेज़ या धीमी चलती है, जिसे किसी दूर के सर्वर तक round trip नापकर और लोकल घड़ी को धीरे-धीरे खिसकाकर सुधारा जाता है।\nVM में इनमें से हर धारणा कमज़ोर है।\nलोकल oscillator थोड़ा गलत नहीं, बल्कि बीच-बीच में गायब है। Round-trip नापने वाला process घड़ी पढ़ने और पैकेट भेजने के बीच deschedule हो सकता है, जो खुद नाप को बिगाड़ देता है। और migration के बाद जो सुधार चाहिए वे छलाँगें हैं, जिन्हें धीरे-धीरे खिसकाने वाला algorithm बुरी तरह संभालता है या सीधे मना कर देता है।\nयहाँ chrony, ntpd से कहीं बेहतर निभाता है। वह तेज़ी से खिसकाता है, छलाँगें सह लेता है, और अपनी अनिश्चितता के बारे में ईमानदार है। पर वह फिर भी गलत समस्या हल कर रहा है: 20 ms दूर के stratum-2 सर्वर से नेटवर्क के पार समय खींचना, जबकि सही समय hypervisor में बस एक memory boundary के उस पार रखा है।\nअसल में आपको जो मिलता है वह ऐसा गेस्ट है जो ज़्यादातर सही है, कभी-कभी दसियों या सैकड़ों milliseconds दूर, और कभी ठीक से बता नहीं पाता कि कब कौन सा।\nगड़बड़ी असल में क्या तोड़ती है किसी को घड़ियों से अपने आप में मतलब नहीं। मतलब तब होता है जब कुछ काम करना बंद कर देता है।\nKerberos और Active Directory Kerberos बनावट से ही समय पर निर्भर है, क्योंकि ticket की वैधता एक समय-खिड़की के रूप में लिखी होती है।\nMIT का krb5.conf दस्तावेज़ clockskew को परिभाषित करता है “the maximum allowable amount of clockskew in seconds that the library will tolerate before assuming that a Kerberos message is invalid”, और default 300 seconds है, यानी पाँच मिनट।\nइसे पार कीजिए और authentication धीमा नहीं पड़ता, सीधा fail होता है। चूँकि Active Directory authentication Kerberos ही है, इसका मतलब है domain logon, net use, SQL Server connections, Exchange, file shares, सब कुछ। पाँच मिनट तब तक काफ़ी लगते हैं जब तक snapshot restore के बाद कोई गेस्ट पीछे की ओर छलाँग नहीं लगा देता।\nTLS सर्टिफ़िकेट में एक वैधता-खिड़की होती है: notBefore और notAfter। जिस गेस्ट की घड़ी पीछे है, वह आज सुबह जारी हुए सर्टिफ़िकेट को ठुकरा देगा, क्योंकि उसकी जानकारी में वह अभी वैध ही नहीं हुआ। जिसकी घड़ी आगे है, वह ऐसा सर्टिफ़िकेट ठुकरा देगा जिसकी असल में मियाद ख़त्म नहीं हुई।\nयही हिसाब OCSP और CRL की ताज़गी, JWT के nbf/exp claims, और TOTP multi-factor codes पर लागू होता है, जो 30 सेकंड की खिड़कियों में जीते हैं। 45 सेकंड दूर की घड़ी एक authentication outage है, बहुत उलझाने वाले error message के साथ।\nCeph Ceph monitors को इसकी परवाह stack की लगभग हर चीज़ से ज़्यादा है, क्योंकि उनकी सहमति इसी पर टिकी है।\nMON_CLOCK_SKEW health check तब चलता है जब “the clocks on hosts running Ceph Monitor daemons are not well-synchronized”। ख़ास तौर पर, जब गड़बड़ी mon_clock_drift_allowed से ज़्यादा हो। दस्तावेज़ की सलाह है कि कई स्रोतों के साथ ntpd या chrony से sync कीजिए, और वह बताता है कि monitor-से-monitor sync ख़ास तौर पर मायने रखता है।\nआप mon_clock_drift_allowed बढ़ा सकते हैं, पर docs साफ़ हैं कि इसे “significantly below the mon_lease interval” रहना चाहिए। इसलिए यह छोटा बजट है, और इसे hypervisor की timekeeping समस्या ढकने पर खर्च करना अच्छा सौदा नहीं।\nबाकी सब कुछ अलग-अलग होस्ट्स के logs आपस में मेल खाना बंद कर देते हैं, जिससे किसी incident की timeline अंदाज़ा बन जाती है। Database replication और distributed consensus, यानी etcd, Galera, leader lease चलाने वाली कोई भी चीज़, परेशान हो जाती है। Backup और monitoring की खिड़कियाँ उस चीज़ से हट जाती हैं जिसे उन्हें देखना था।\nWindows गेस्ट अलग तरह से भटकते हैं Windows पर अलग से बात ज़रूरी है, क्योंकि उसकी time service अलग लक्ष्यों के लिए बनी थी और यह दिखता है।\nMicrosoft साफ़ कहता है कि Windows 10 1607 / Server 2016 से पहले के versions “can\u0026rsquo;t guarantee highly accurate time”। उन releases पर Windows Time service जो देती थी वह था “the necessary time accuracy to satisfy Kerberos version 5 authentication requirements” और एक साझा AD forest की मशीनों के लिए “loosely accurate time”। इससे ज़्यादा सटीक कुछ भी “outside of the design specification… and weren\u0026rsquo;t supported.” था।\nयानी पुराना Windows पाँच मिनट की Kerberos खिड़की के अंदर रहने का लक्ष्य रखता है, सही होने का नहीं। जो तब तक ठीक है जब तक आपके estate में किसी चीज़ को इससे बेहतर नहीं चाहिए। 90 सेकंड दूर वर्चुअलाइज़्ड Windows मशीन मज़े से authenticate करती रहेगी और ऐसे logs लिखती रहेगी जो किसी से मेल नहीं खाते।\nWindows 10 और Server 2016 से आगे 1 s, 50 ms, यहाँ तक कि 1 ms भी कर सकते हैं, पर सिर्फ़ ऊपर बताई शर्तों में, होस्ट CPU utilisation की सीमाओं समेत। Microsoft यह भी लिखता है कि “anything that introduces network asymmetry, such as a one-way satellite connection or high CPU load on the target system, will negatively influence accuracy”। भीड़ वाला vCPU, target system पर high CPU load का ही दूसरा नाम है।\nWindows के लिए कोई ptp_kvm नहीं है। उसकी जगह आपके पास यह है:\nHyper-V clock enlightenments. Proxmox ये पहले से Windows गेस्ट्स को देता है। PVE::QemuServer::CPUConfig, hv_vapic, hv_spinlocks, hv_relaxed और hv_synic के साथ hv_time सेट करता है। hv_time paravirtual घड़ी है, और यह kvm-clock का Windows वाला रूप है। Windows-type VMs के लिए यह default रूप से चालू है; कुछ चालू करने की ज़रूरत नहीं। QEMU guest agent. Agent इंस्टॉल हो तो resume या snapshot restore के बाद होस्ट अपना समय गेस्ट में डाल सकता है, जो उस छलाँग वाले मामले को संभालता है जिसे NTP सबसे बुरी तरह संभालता है। एक ही अधिकारी चुनिए. VM में Windows की क्लासिक गड़बड़ी है दो time sources का आपस में लड़ना: host-to-guest sync और domain hierarchy sync, दोनों एक ही घड़ी को उलटी दिशाओं में सुधारते हुए। Domain से जुड़े गेस्ट के लिए domain hierarchy को जीतने दीजिए और होस्ट को समय भेजने से रोकिए। अकेले गेस्ट के लिए host sync ठीक है। दोनों कभी नहीं। अगर आप जानना चाहते हैं कि आपका hypervisor किसी VM को समय के बारे में ठीक-ठीक क्या बता रहा है, तो अंदाज़ा लगाने के बजाय उससे पूछिए:\n# Everything Proxmox actually passes to QEMU for this VM, including -rtc and CPU flags qm showcmd \u0026lt;vmid\u0026gt; --pretty QEMU/KVM पर इलाज: ptp_kvm KVM पर Linux गेस्ट्स के लिए एक सही जवाब है, और वह “और NTP सर्वर” नहीं है।\nptp_kvm गेस्ट को सीधे होस्ट से पूछने देता है कि कितना बजा है, एक hypercall के ज़रिए: x86 पर KVM_HC_CLOCK_PAIRING, और arm64 पर उसके बराबर का firmware call। kernel इसे PTP hardware clock डिवाइस के रूप में दिखाता है, इसलिए userspace से यह किसी भी और precision clock source जैसा दिखता है, और chrony इसे reference clock की तरह इस्तेमाल कर सकता है।\nजो गुण मायने रखते हैं:\nकोई नेटवर्क नहीं. न jitter, न asymmetry, न stratum, न पैकेट। रास्ता एक memory boundary है। Microsecond से कम. Accuracy की सीमा hypercall तय करता है, datacentre के पार round trip नहीं। यह टूटे हिस्से को बायपास करता है. गेस्ट न कुछ गिन रहा है, न round trip का अंदाज़ा लगा रहा है। वह ऐसा मान पढ़ रहा है जिसे होस्ट ने ऐसी घड़ी से निकाला जो पूरे समय चल रही थी। नेटवर्क पार NTP बनाम memory boundary पार ptp_kvm नेटवर्क pools के साथ chrony गेस्ट घड़ी बार-बार रुकती है नेटवर्क jitter, asymmetry stratum 2 सर्वर दसियों ms दूर round trip उसी घड़ी से नपता है जिसे सुधारा जा रहा है और नापने वाला process नाप के बीच में deschedule हो सकता है ptp_kvm के साथ chrony गेस्ट /dev/ptp_kvm पढ़ता है होस्ट की घड़ी कभी नहीं रुकी hypercall KVM_HC_CLOCK_PAIRING एक memory boundary, नेटवर्क नहीं µs से कम न पैकेट, न stratum, न asymmetry, और कोई अंदाज़ा नहीं। गेस्ट यह हिसाब नहीं लगा रहा कि कितना बजा है: उसे बताया जा रहा है, उस अकेले हिस्सेदार से जो पूरे समय जागता रहा। दोनों रास्तों के अंत में गेस्ट अपनी घड़ी सेट करता है। एक रास्ता बार-बार रुकने वाली घड़ी से नेटवर्क round trip नापता है; दूसरा hypervisor से पूछ लेता है। Implementation इसे हर उस Linux VM पर लागू कीजिए जिसमें driver है। होस्ट hypervisor के पास अपना चालू NTP या PTP होना चाहिए। ptp_kvm गेस्ट को होस्ट का समय देता है, इसलिए होस्ट की गलती भी उसी के साथ आती है।\n1. Boot पर kernel module लोड कीजिए.\n# /etc/modules-load.d/ptp_kvm.conf ptp_kvm 2. उसे एक स्थिर नाम दीजिए और chrony को उसे पढ़ने दीजिए.\n# /etc/udev/rules.d/90-ptp-kvm.rules ACTION==\u0026#34;add\u0026#34;, SUBSYSTEM==\u0026#34;ptp\u0026#34;, ATTR{clock_name}==\u0026#34;kvm\u0026#34;, SYMLINK+=\u0026#34;ptp_kvm\u0026#34;, GROUP=\u0026#34;chrony\u0026#34;, MODE=\u0026#34;0660\u0026#34; Symlink मायने रखता है क्योंकि PTP डिवाइस की numbering स्थिर नहीं होती। /dev/ptp0 एक boot पर किसी NIC की घड़ी हो सकता है और अगले पर KVM की। clock_name पर match करने से हर बार सही वाला मिलता है।\n3. chrony को उसकी ओर मोड़िए, और pools हटा दीजिए.\nDebian और Ubuntu पर /etc/chrony/chrony.conf बदलिए, या RHEL परिवार पर /etc/chrony.conf। pool वाली लाइनें मिटाइए और यह लिखिए:\nrefclock PHC /dev/ptp_kvm poll 2 stratum 1 delay 0.0004 Pools हटाना वैकल्पिक सफ़ाई नहीं है। उन्हें छोड़ देना chrony से कहता है कि वह microsecond से कम वाले लोकल reference का मिलान दसियों milliseconds दूर के इंटरनेट सर्वरों से करे, और इंटरनेट वाले स्रोत जवाब को सिर्फ़ बिगाड़ सकते हैं।\n4. Restart कीजिए और जाँचिए.\nsystemctl restart chronyd # or chrony, on Debian/Ubuntu जाँच # The symlink exists and points at the KVM clock ls -l /dev/ptp_kvm cat /sys/class/ptp/ptp*/clock_name # chrony should be using PHC0 as its selected source chronyc sources -v # and the offset should be microseconds, not milliseconds chronyc tracking chronyc sources में चुने जाने के बाद PHC refclock #* PHC0 के रूप में दिखता है। # बताता है कि यह नेटवर्क peer नहीं, लोकल hardware reference है, और * बताता है कि यही इस्तेमाल में है। अगर यह सूची में दिखे पर चुना न गया हो, तो chrony ने इसे स्वीकार नहीं किया: डिवाइस की permissions जाँचिए, और यह कि udev rule का chrony group उस user से मेल खाता है जिससे आपके distribution पर chrony असल में चलता है।\nसावधानियाँ होस्ट सही होना चाहिए. यह गेस्ट को होस्ट से सहमत कराता है, जो तभी काम का है जब होस्ट हकीकत से सहमत हो। Hypervisors को असली NTP या PTP दीजिए। हर गेस्ट को चाहिए. ऐसा fleet जिसमें आधे VMs ptp_kvm इस्तेमाल करें और आधे इंटरनेट pools, दो time authorities वाला fleet है। Live migration ठीक है, और यही असली मकसद है. Migrate होने के बाद गेस्ट अपने नए होस्ट की घड़ी पढ़ता है। अगर होस्ट्स आपस में सहमत हैं, तो गेस्ट को कभी छलाँग नहीं दिखती। सिर्फ़ KVM. यह KVM hypercall है। Nested या दूसरे hypervisors यह डिवाइस नहीं दिखाएँगे, और udev rule बस चलेगा ही नहीं। यह साफ़ विफलता है, चुपचाप गलत जवाब नहीं। क्या नहीं करना है Clocksource ज़बरदस्ती मत बदलिए. kvm-clock को छोड़ दीजिए। गेस्ट kernel की command line पर tsc या hpet ज़बरदस्ती लगाना, इसी हालत के लिए बनी paravirtual घड़ी को ऐसे काउंटर से बदलना है जो कभी आपका था ही नहीं। cron से ntpdate या hwclock मत चलाइए. यह schedule पर छलाँग है, ठीक वही जिससे databases और Kerberos नफ़रत करते हैं। Pools को “fallback के तौर पर” मत रखिए. चालू refclock के साथ वे fallback नहीं हैं, वे एक बदतर स्रोत की दूसरी राय हैं। mon_clock_drift_allowed बढ़ाकर इसे ठीक हुआ मत कहिए. आपने उस बजट का हिस्सा खर्च कर दिया जो नेटवर्क की असलियत के लिए है, ताकि ऐसी समस्या सहन कर सकें जिसका हल पता है। आख़िरी वाली बात सीधे कहने लायक है: सीमा चौड़ी करना घड़ी ठीक करना नहीं है। यह alarm को खिसकाना है ताकि वह बजना बंद कर दे।\nReferences Linux kernel — KVM timekeeping — गेस्ट का समय पीछे क्यों रह जाता है, TSC की local-clock समस्या, और यह निष्कर्ष कि सिर्फ़ सौदे ही मौजूद हैं Linux kernel — PTP_KVM — PTP clock डिवाइस के पीछे का hypercall interface Linux kernel — KVM x86 hypercalls — KVM_HC_CLOCK_PAIRING, इसका x86 वाला हिस्सा chrony — chrony.conf — refclock directive और PHC driver के विकल्प MIT Kerberos — krb5.conf — clockskew और उसका 300 सेकंड वाला default Microsoft — support boundary for high accuracy time — accuracy के लक्ष्य, और वर्चुअलाइज़्ड सिस्टम के लिए होस्ट CPU utilisation की शर्तें Ceph — health checks — MON_CLOCK_SKEW, mon_clock_drift_allowed और mon_lease से उसका संबंध ","permalink":"https://blogs.damiendye.uk/hi/proxmox/vm-time-ptp-kvm/","summary":"वर्चुअल मशीन की घड़ी एक ऐसी धारणा पर बनी है जिसे वर्चुअलाइज़ेशन तोड़ देता है: कि CPU गिनता रहता है। हर hypervisor पर गेस्ट का समय क्यों भटकता है, यह गड़बड़ी असल में क्या तोड़ती है (Kerberos, TLS, Ceph, Windows), और QEMU/KVM पर ptp_kvm इसे ठीक से कैसे सुधारता है।","title":"VM की घड़ी पर भरोसा नहीं किया जा सकता, और QEMU/KVM के लिए ptp_kvm वाला इलाज"},{"content":"ड्राइव अपने आप को दिखाने के तीन तरीके एक ड्राइव के दो ब्लॉक साइज़ होते हैं, और उनके बीच का फ़र्क ही पूरी कहानी है।\nफ़िज़िकल सेक्टर वह है जिसमें मीडियम असल में काम करता है: सबसे छोटी इकाई जिसे ड्राइव बिना अतिरिक्त काम किए पढ़ या लिख सकती है। लॉजिकल ब्लॉक वह है जो ड्राइव होस्ट को बताती है कि वह इसमें काम करती है: वह इकाई जिससे होस्ट उसे एड्रेस करता है।\nबाज़ार में तीन जोड़ियाँ मिलती हैं।\n512n: नेटिव 512। दोनों साइज़ 512 बाइट। यह पुरानी दुनिया है: 2010 से पहले की हार्ड ड्राइव, और आज किसी काम के साइज़ में नया ख़रीदने लायक कुछ नहीं।\n512e: 512-बाइट इम्युलेशन। फ़िज़िकल सेक्टर 4096 बाइट का है, पर ड्राइव 512-बाइट लॉजिकल ब्लॉक बताती है और फ़र्मवेयर में ट्रांसलेट करती है। यह एक ही वजह से है: उन ऑपरेटिंग सिस्टम, बूटलोडर और एप्लिकेशन के साथ कम्पैटिबिलिटी जिन्होंने मान लिया था कि 512 हमेशा रहेगा। इंजीनियरिंग के तौर पर समझदारी, और आगे आने वाली लगभग हर परेशानी की जड़।\n4Kn: नेटिव 4K। दोनों साइज़ 4096 बाइट। ड्राइव सच बोलती है, होस्ट उसे उसी इकाई में एड्रेस करता है जो मीडियम इस्तेमाल करता है, और बीच में कोई ट्रांसलेशन लेयर नहीं बैठती।\n512n, 512e और 4Kn: होस्ट क्या एड्रेस करता है, मीडियम क्या इस्तेमाल करता है ऊपर की पंक्ति = लॉजिकल, होस्ट जो एड्रेस करता है · नीचे की पंक्ति = फ़िज़िकल, मीडियम जिसमें काम करता है 512n 512512 512512 512512 512512 1:1, और ईमानदार, पर पुराना। ऐसी कोई नई ड्राइव नहीं आती। 512e 8 × 512 B लॉजिकल: होस्ट को यही बताया जाता है एक 4096 B फ़िज़िकल सेक्टर: असल में यही है फ़र्मवेयर हर एक्सेस पर ट्रांसलेट करता है होस्ट ऐसी चीज़ को एड्रेस करता है जो है ही नहीं। जो writes पूरा सेक्टर नहीं भरतीं, महँगी पड़ती हैं। 4Kn एक 4096 B लॉजिकल ब्लॉक एक 4096 B फ़िज़िकल सेक्टर ट्रांसलेट करने को कुछ नहीं ड्राइव सच बोलती है, इसलिए आगे कोई चीज़ गलत संख्या पर फ़ैसला नहीं ले सकती। 512e दिलचस्प मामला है: होस्ट ऐसी चीज़ को एड्रेस कर रहा है जो है ही नहीं, और फ़र्मवेयर हर एक्सेस पर यह कहानी बनाए रखता है। हर अनअलाइन्ड write पर 512e क्या करता है तीनों मामलों में read सस्ता है। ड्राइव 4K सेक्टर पढ़ती है और आपने जो 512-बाइट टुकड़ा माँगा वह लौटा देती है।\nWrite वह जगह है जहाँ यह कहानी महँगी पड़ती है।\nअगर होस्ट एक अकेला 512-बाइट लॉजिकल ब्लॉक लिखता है, तो ड्राइव 512 बाइट नहीं लिख सकती। मीडियम में ऐसी कोई इकाई है ही नहीं। इसलिए वह यह करती है:\nपूरा 4096-बाइट फ़िज़िकल सेक्टर पढ़ो। उसमें नए डेटा के 512 बाइट मिलाओ। पूरा 4096-बाइट सेक्टर वापस लिखो। यह एक read-modify-write है, और यह एक छोटी write को एक read और एक write में बदल देता है। घूमती डिस्क पर इसका मतलब है प्लैटर के फिर से घूमकर आने का इंतज़ार। 7,200rpm पर एक पूरा चक्कर लगभग 8ms है, जिसका आपने हिसाब नहीं रखा था। फ़्लैश पर कीमत अलग किस्म की है, और write खत्म होने पर भी वह नहीं जाती। उसका अपना सेक्शन नीचे है।\nread-modify-write का जुर्माना, और मिसअलाइनमेंट उसके साथ क्या करता है 4Kn: अलाइन्ड 4 KB write 4 KB नया डेटा सेक्टर भर देता है 1 write पहले पढ़ने को कुछ नहीं 512e: एक 512 B लॉजिकल ब्लॉक लिखना 1. पूरा फ़िज़िकल सेक्टर पढ़ो 4096 B वापस पढ़े 2. 512 B मिलाओ असल में बस इतना बदला 3. पूरा सेक्टर वापस लिखो 4096 B लिखे 1 read + 1 write डिस्क पर एक चक्कर; फ़्लैश पर एक पेज प्रोग्राम 512e: मिसअलाइन्ड 4 KB write (महँगी वाली) एक 4 KB write, आधे सेक्टर खिसकी हुई फ़िज़िकल सेक्टर n फ़िज़िकल सेक्टर n+1 2 read-modify-writes हर write पर, हमेशा आधुनिक पार्टीशनिंग टूल डिफ़ॉल्ट से फ़िज़िकल सेक्टर पर अलाइन करते हैं, इसलिए यह आमतौर पर पुराने इंस्टॉल या क्लोन इमेज से विरासत में आता है, नया नहीं बनता। यह अपने आप ठीक नहीं होता। 4K की एक 4K-अलाइन्ड write को कोई read नहीं चाहिए। बाकी सबको चाहिए, और जो write सेक्टर की सीमा पार करती है उसे दो। मिसअलाइनमेंट इसका वह रूप है जो सबसे ज़्यादा चोट करता है। अगर कोई पार्टीशन किसी विषम 512-बाइट ऑफ़सेट पर शुरू होता है, जिसका क्लासिक उदाहरण पुराना 63-सेक्टर का चलन है, तो हर 4K फ़ाइलसिस्टम write दो फ़िज़िकल सेक्टरों में फैल जाती है। यह एक read-modify-write नहीं, दो है, हर एक write पर, हमेशा, जब तक कोई ड्राइव को फिर से पार्टीशन न करे।\nफ़्लैश पर write amplification हार्ड ड्राइव पर read-modify-write आपको एक चक्कर का पड़ता है और फिर खत्म। फ़्लैश पर यह ड्राइव की उम्र का पड़ता है, और यह एक ऐसा बिल है जो एक बार भरते हैं और भरते रहते हैं।\nWrite amplification वह अनुपात है जो असल में NAND पर लिखा गया, उसके मुकाबले जो होस्ट ने लिखने को कहा। 1.0 का अनुपात मतलब ड्राइव ने ठीक उतना लिखा जितना उसे दिया गया। यह कभी 1.0 नहीं होता, क्योंकि फ़्लैश अपनी जगह पर ओवरराइट नहीं कर सकता: ड्राइव एक नया पेज प्रोग्राम करती है, पुराने को stale मार्क करती है, और garbage collection बाद में बचे हुए पेजों को खिसकाता है ताकि पूरा ब्लॉक मिटाया जा सके। वह खिसकाना भी write है।\n512e इसके ऊपर एक टाली जा सकने वाली परत जोड़ता है, और वजह एक ऐसा ब्योरा है जिसे साफ़ कहना ज़रूरी है: ड्राइव की ट्रांसलेशन लेयर लगभग 4 KB की इकाइयों में मैप करती है, चाहे वह कोई भी लॉजिकल ब्लॉक साइज़ बताए। 512-बाइट ब्लॉक बताने वाली ड्राइव भी अंदर 4 KB इकाइयाँ ही ट्रैक कर रही है।\nतो होस्ट की एक 512-बाइट write ड्राइव के अंदर बन जाती है: 4 KB मैपिंग इकाई पढ़ो, उसमें 512 बाइट मिलाओ, एक नई 4 KB इकाई प्रोग्राम करो। 512 बाइट बदलने के लिए 4096 बाइट NAND तक पहुँचते हैं। उस write के लिए आठ गुना write।\nमिसअलाइनमेंट हर write पर कम नाटकीय है और कुल मिलाकर ज़्यादा बुरा। दो मैपिंग इकाइयों में फैली एक 4 KB write दोनों को गंदा करती है, इसलिए 4 KB डेटा के लिए 8 KB प्रोग्राम होता है। यह हर एक write पर 2× amplification है, स्थायी रूप से, जब तक पार्टीशन टेबल ठीक न हो।\nमिसअलाइन्ड write NAND तक पहुँचने वाले को दुगना क्यों करती है नीचे की ओर पढ़िए: होस्ट ने क्या लिखा → ड्राइव की 4 KB मैपिंग इकाइयाँ → NAND तक क्या पहुँचा 512e: 4 KB write, मिसअलाइन्ड होस्ट से 4 KB इकाई n इकाई n+1 4 KB फिर से लिखे 4 KB फिर से लिखे 4 KB के लिए 8 KB लिखे: WAF 2× हर write पर, जब तक पार्टीशन टेबल ठीक न हो 4Kn: 4 KB write, अलाइन्ड होस्ट से 4 KB इकाई n 4 KB लिखे 4 KB के लिए 4 KB: WAF ≈ 1× फ़र्श, garbage collection से पहले कोई भी तरफ़ garbage collection से नहीं बचती: ड्राइव को ब्लॉक मिटाने से पहले उसमें जो ज़िंदा है उसे खिसकाना ही है, और वह काम इस पर बढ़ता है कि शुरू में कितना लिखा गया। 4Kn amplification को गायब नहीं करता: वह उसका वह हिस्सा हटाता है जिसकी आप बेवजह कीमत दे रहे थे। दोनों मामलों में होस्ट ने वही 4 KB माँगा। बाईं ओर यह दो मैपिंग इकाइयों में पड़ता है, इसलिए दोनों फिर से लिखी जाती हैं, और garbage collection बाद में उनमें जो भी अब तक ज़िंदा है उसे खिसकाएगा। इसके आगे के असर ही इसे सिर्फ़ बेतरतीबी से ज़्यादा अहम बनाते हैं:\nज़्यादा NAND writes का मतलब है garbage collection ज़्यादा बार चलता है, और उसका खिसकाना ख़ुद amplification है। SLC write cache जल्दी भरता है, इसलिए ड्राइव पहले ही अपनी धीमी स्थिर अवस्था में आ जाती है और लगातार write throughput गिरता है। Program/erase cycles उस अनुपात में खर्च होते हैं जो NAND तक पहुँचा, न कि जो होस्ट ने भेजा। Amplification दुगना कीजिए और उसी वर्कलोड पर ड्राइव की उम्र आधी। Endurance रेटिंग, TBW और DWPD, होस्ट writes के हिसाब से बताई जाती हैं। Amplification चुपचाप वह मार्जिन खा जाता है, और ड्राइव उस वारंटी के हिसाब से पहले घिस जाती है जो आपने ख़रीदते वक़्त लगाया था। Direct और synchronous writes सबसे बुरी स्थिति हैं ज़्यादातर वक़्त page cache यह सब छुपा लेता है। कर्नेल छोटी writes इकट्ठा करता है, उन्हें मिलाता है, और ड्राइव को 4 KB या उससे बड़ा IO भेजता है, इसलिए read-modify-write कभी होता ही नहीं।\nदो फ़्लैग यह सुरक्षा हटा देते हैं, और जिन एप्लिकेशन को durability की परवाह है वे दोनों सेट करते हैं।\nO_DIRECT page cache को बायपास करता है। अब एप्लिकेशन और ड्राइव के बीच ऐसा कुछ नहीं जो 512-बाइट write को सेक्टर के साइज़ की चीज़ में मिला सके।\nO_SYNC या O_DSYNC माँगता है कि कॉल लौटने से पहले write स्थायी मीडिया पर हो। इससे ड्राइव write को किसी volatile बफ़र में रखकर बाद में पड़ोसियों के साथ मिला नहीं पाती।\nदोनों को साथ रखिए और हर 512-बाइट write एक पूरा read-modify-write चक्र है जिसे अभी खत्म होना है, अकेले, बिना किसी चीज़ के जिस पर उसे बाँटा जा सके। यहीं 512e ड्राइव पर amplification अपने सैद्धांतिक 8× के क़रीब पहुँचता है, और यह ठीक वही पैटर्न है जो डेटाबेस commit log, ZFS ZIL या Ceph BlueStore WAL बनाते हैं।\nEnterprise हार्डवेयर पर इसे power-loss protection बचाता है। PLP वाली ड्राइव synchronous write को तब स्वीकार कर सकती है जब वह कैपेसिटर-समर्थित DRAM बफ़र में हो, जो टिकाऊ है, और फिर भी NAND प्रोग्राम करने से पहले अंदर मिला सकती है। बिना PLP वाली consumer ड्राइव को जवाब देने से पहले फ़्लैश तक पहुँचना पड़ता है, इसलिए वह हर write पर पूरी कीमत देती है। इस तरह के वर्कलोड के लिए PLP वैकल्पिक क्यों नहीं, इसकी एक और वजह।\nProxmox में cache mode तय करता है कि आपको इनमें से क्या मिलेगा:\ncache=none का मतलब O_DIRECT है: PVE का डिफ़ॉल्ट, और all-flash HA के लिए सही चुनाव। होस्ट page cache रास्ते से बाहर है, इसलिए guest के write पैटर्न ड्राइव तक वैसे ही पहुँचते हैं जैसे guest ने भेजे। cache=directsync का मतलब O_DIRECT और O_DSYNC है: हर write synchronous। यह समर्पित डेटाबेस-log ड्राइव के लिए एक ख़ास सेटिंग है और आम वर्कलोड के लिए बेकार। 512e बैकिंग डिवाइस पर, 512-बाइट रिकॉर्ड में commit करने वाले guest के साथ cache=directsync लगभग सबसे कम कुशल व्यवस्था है: न होस्ट पर मिलाना, न ड्राइव पर मिलाना, और हर commit पर एक read-modify-write।\nऔर यह वह हिस्सा है जो 4Kn को सिर्फ़ बेहतर नहीं बल्कि ढाँचागत बनाता है। O_DIRECT माँगता है कि ऑफ़सेट, लंबाई और बफ़र ड्राइव के लॉजिकल ब्लॉक साइज़ पर अलाइन्ड हों। 512e ड्राइव पर यह 512 बाइट है, इसलिए 512-बाइट direct write जायज़ है और ड्राइव चुपचाप उसकी कीमत देती है। 4Kn पर लॉजिकल ब्लॉक 4096 है, इसलिए कर्नेल जो सबसे छोटी direct write स्वीकार करेगा वह 4 KB है। बीमार पैटर्न ऐसी चीज़ नहीं रहता जिससे आपको बचना है, बल्कि ऐसी चीज़ बन जाता है जिसे स्टैक व्यक्त ही नहीं कर सकता।\nमीडियम पर ओवरहेड दूसरी कीमत ढाँचागत है, और Advanced Format के होने की वजह यही है।\nसेक्टर सिर्फ़ उसका डेटा नहीं है। हार्ड ड्राइव पर हर एक के साथ एक sync mark होता है ताकि हेड को पता चले कि सेक्टर कहाँ शुरू होता है, एक gap ताकि लगातार सेक्टर एक-दूसरे में न घुसें, एक address marker, और read errors सुधारने के लिए एक ECC फ़ील्ड।\n512-बाइट सेक्टर के साथ आप 4K डेटा के लिए यह सब आठ बार देते हैं। एक 4K सेक्टर के साथ एक बार।\nइसके दो नतीजे हैं, और दूसरा पहले से ज़्यादा अहम है:\nप्लैटर का कुछ हिस्सा जो ओवरहेड था, इस्तेमाल लायक क्षमता बन जाता है। Advanced Format बदलाव के दौरान इंडस्ट्री की बताई गई वजह यही थी, कुछ प्रतिशत के निचले दायरे में। उसी कुल ओवरहेड में ECC फ़ील्ड बहुत बड़ा हो सकता है। 4096 बाइट बचाने वाला एक मज़बूत कोड 512-512 बाइट बचाने वाले आठ कमज़ोर कोडों से कहीं ज़्यादा सुधारता है। जैसे-जैसे areal density बढ़ी, यह अच्छी बात भर नहीं रही बल्कि error rate को स्वीकार्य रखने का अकेला तरीका बन गई। हर सेक्टर का ओवरहेड 512 बाइट पर आठ बार, 4K पर एक बार 512-बाइट सेक्टर: वही 4 KB डेटा 8 सेक्टर × (sync + डेटा + ECC + gap) 8 × हर सेक्टर का ओवरहेड, और आठ छोटे ECC फ़ील्ड एक 4096-बाइट सेक्टर: वही डेटा 1 × ओवरहेड, और एक कहीं बड़ा ECC फ़ील्ड sync mark, address marker, सेक्टरों के बीच gap ECC आपका डेटा पैमाने पर नहीं: ओवरहेड फ़ील्ड बढ़ाकर दिखाए गए हैं ताकि दिखें तो सही। वापस मिली क्षमता कुछ प्रतिशत की थी। इंडस्ट्री असल में मज़बूत ECC की वजह से आगे बढ़ी। sync marks, gaps और ECC के आठ सेट, या एक। वापस मिली जगह छोटी जीत है; मज़बूत error correction वह वजह है जिससे इंडस्ट्री आगे बढ़ी। फ़्लैश में sync marks या घूमने वाले gaps नहीं होते, पर वही तर्क एक स्तर ऊपर लागू होता है: NAND पेजों में प्रोग्राम होता है, पेज 512 बाइट से कहीं बड़े होते हैं, और ड्राइव की मैपिंग टेबल में हर एड्रेस होने वाली इकाई की एक एंट्री होती है। छोटे लॉजिकल ब्लॉक का मतलब है उतनी ही क्षमता ट्रैक करने के लिए ज़्यादा मेटाडेटा।\nहोस्ट में ओवरहेड: कमांड और इंटरप्ट तीसरी कीमत वह है जो लोग चूक जाते हैं, क्योंकि वह ड्राइव पर है ही नहीं।\nलॉजिकल ब्लॉक साइज़ तय करता है कि एक IO कम से कम कितना छोटा हो सकता है, यानी उसका फ़र्श। 512-बाइट लॉजिकल ड्राइव पर, फ़ाइलसिस्टम या एप्लिकेशन 512-बाइट write भेजने के लिए आज़ाद है, और हर एक पूरा IO है: एक कमांड बनाया और भेजा गया, एक doorbell write, एक completion queue entry, और खत्म होने की ख़बर देने वाला एक interrupt।\nइनमें से हर एक की एक तय कीमत है जिसे इस बात से फ़र्क नहीं पड़ता कि कितना डेटा था। 4KB को आठ 512-बाइट कमांड के रूप में भेजिए और आप वह कीमत आठ बार देते हैं। एक 4K कमांड के रूप में भेजिए और एक बार।\nलॉजिकल ब्लॉक साइज़ IO साइज़ का फ़र्श तय करता है, और हर कमांड की एक तय कीमत है 512 B लॉजिकल ब्लॉक: एप्लिकेशन 512 B writes भेज सकता है 4 KB डेटा 8 कमांड बन जाता है 512 B512 B 512 B512 B 512 B512 B 512 B512 B 8 × submission + doorbell 8 × completion entry 8 × interrupt का मौका 8 × हर कमांड की तय कीमत ठीक उसी 4 KB डेटा के लिए 4 KB लॉजिकल ब्लॉक: 4 KB फ़र्श है एक 4 KB कमांड 1 × submission, 1 × completion, 1 × interrupt 1 × तय कीमत यह सिर्फ़ वहाँ मदद करता है जहाँ सच में छोटा IO भेजा जा रहा है: एक कमांड कई ब्लॉक बता सकता है, इसलिए 1 MB write दोनों तरह से एक कमांड है। वही 4 KB डेटा। यहाँ ड्राइव bottleneck नहीं है, होस्ट में हर कमांड और हर completion की कीमत है। दो ईमानदार शर्तें, क्योंकि यहीं यह तर्क आमतौर पर बढ़ा-चढ़ाकर कहा जाता है।\nबड़े IO के लिए लॉजिकल ब्लॉक साइज़ कमांड की गिनती में कुछ नहीं बदलता। एक कमांड कई ब्लॉक बता सकता है, इसलिए 1MB की sequential write एक कमांड है, ब्लॉक 512 बाइट के हों या 4K के। बचत सिर्फ़ वहीं असली है जहाँ छोटा IO भेजा जा रहा है।\nपर जहाँ छोटा IO भेजा जा रहा है, वहाँ असर बारीक नहीं है: उन आठ requests में से हर एक को कर्नेल को बनाना, शेड्यूल करना और पूरा करना है, हर एक का अपना MSI-X interrupt और user-से-kernel transition है, और ऊँची queue depth पर interrupt storm ऐसे ही आता है। VM के अंदर यह और बुरा है, क्योंकि इनमें से हर interrupt एक guest context switch भी है।\nऔर आधुनिक NVMe कंट्रोलर interrupts को मिला देते हैं, इसलिए interrupt की गिनती बस कमांड की गिनती नहीं है। फिर भी हर कमांड का submission और completion काम रहता है, और कुछ लाख IOPS पर हर कमांड की CPU कीमत एक कोर का मापने लायक हिस्सा है। यह वही गणित है जो पासथ्रू सीरीज़ में posted interrupts का है: छोटी तय कीमतें, एक बहुत बड़ी संख्या से गुणा।\n4Kn, सेक्टर मेटाडेटा और हार्डवेयर RAID 4096 + 0 फ़ॉर्मैट पर जाने का एक नतीजा है जो लोगों को चौंकाता है, और वह सीधे हार्डवेयर RAID पर पड़ता है।\nकुछ RAID कंट्रोलर और स्टोरेज ऐरे सादे 512 या 4096-बाइट सेक्टर इस्तेमाल ही नहीं करते। वे ड्राइव को एक बढ़े हुए साइज़ में फ़ॉर्मैट करते हैं, 520 या 528 बाइट, या 4K के बराबर 4104, 4160 और 4224, क्योंकि हर सेक्टर के वे अतिरिक्त बाइट वह जगह हैं जहाँ कंट्रोलर अपना मेटाडेटा रखता है। यह T10-PI/DIF protection information है, या vendor integrity data, उसी डेटा के साथ रखा गया जिसका वह वर्णन करता है।\n4096 + 0 फ़ॉर्मैट के पास उसे रखने की कोई जगह नहीं। सेक्टर शुरू से आख़िर तक डेटा है, और उसे चुनने का पूरा मतलब यही है।\nतो जो कंट्रोलर इनलाइन मेटाडेटा चाहता है उसके पास तीन रास्ते हैं, और इनमें से कोई मुफ़्त नहीं:\nड्राइव को मना कर दे। उसे वापस बढ़े हुए फ़ॉर्मैट में फ़ॉर्मैट करे, और आपने अभी जो 4Kn काम किया उसे उलट दे। अपना मेटाडेटा ड्राइव पर कहीं और रखे। तीसरा वह है जहाँ फ़्लैश आपको सज़ा देता है। जिस डेटा का वह वर्णन करता है उससे अलग लिखा गया मेटाडेटा एक दूसरी write है, किसी और ऑफ़सेट पर, किसी और मैपिंग इकाई में। हर उस पेज के लिए जो आप सच में लिखना चाहते थे, एक और NAND पेज प्रोग्राम हुआ। यह ऊपर वाले सेक्शन का amplification है, जानबूझकर वापस लाया गया, ऐसा integrity मेटाडेटा ढोने के लिए जिसे ड्राइव बिना कुछ लिए इनलाइन रख सकती थी अगर आप उसे बढ़े हुए फ़ॉर्मैट में छोड़ देते।\nदोनों नहीं मिल सकते। या तो सेक्टर कंट्रोलर का मेटाडेटा ढोता है, या सिर्फ़ आपका डेटा।\nइसीलिए फ़्लैश ने हार्डवेयर RAID का तर्क काफ़ी कमज़ोर कर दिया है इसका बाकी हिस्सा mechanism नहीं बल्कि राय है, इसलिए इसे वैसे ही लीजिए।\nहार्डवेयर RAID कंट्रोलर एक समर्पित प्रोसेसर पर चलने वाला फ़र्मवेयर RAID है। “हार्डवेयर” एक CPU, कुछ DRAM और एक बैटरी है। parity निकालने का कोई बुनियादी तौर पर अलग तरीका नहीं। इतिहास में यह आपको एक बैटरी-समर्थित write cache और parity offload देता था, और फ़्लैश पर दोनों तर्क बुरी तरह कमज़ोर पड़े हैं। Enterprise NVMe के पास पहले से अपना power-loss-protected cache है, और कंट्रोलर उन डिवाइसों के आगे एक bandwidth की छत बन जाता है जिनमें से हर एक कई गीगाबाइट प्रति सेकंड भर सकता है।\nयह आपसे वे चीज़ें भी छीनता है जो अब आप सच में चाहते हैं:\nडिवाइस की स्थिति गायब हो जाती है। SMART ब्योरा, घिसाव के संकेत और vendor logs जिनसे आप write amplification निकाल सकते हैं, सब एक अपारदर्शी परत के पीछे हैं। कोई end-to-end checksum नहीं। कंट्रोलर parity जाँचता है, जो एक गायब ड्राइव पकड़ती है, मौजूद ड्राइव का गलत जवाब नहीं। ZFS और Ceph ख़ुद डेटा का checksum करते हैं और बता सकते हैं कि कौन सी कॉपी गलत है, वह silent corruption जिसे कंट्रोलर सीधे आगे भेज देता है। इसलिए कंट्रोलर गलत समस्या हल कर रहा है। ड्राइव पर vendor मेटाडेटा ऐरे को एक कंट्रोलर परिवार से बाँधता है, और जब ख़राब कंट्रोलर ही हो तो यह अपने आप में एक अलग तरह की अविश्वसनीयता है। Parity RAID अपना ख़ुद का read-modify-write करता है आंशिक-stripe writes पर, जो ऊपर के सेक्शनों की हर चीज़ के ऊपर जुड़ता है। Ceph के लिए यह पसंद का मामला भी नहीं है। Proxmox की अपनी hyper-converged सलाह है कि डिस्क HBA या pass-through मोड में दिखनी चाहिए, RAID कंट्रोलर के पीछे नहीं, और ZFS ठीक यही चीज़ उन्हीं वजहों से चाहता है।\nतो इस सबसे जो व्यवस्था निकलती है वह है: RAID कंट्रोलर के बजाय एक HBA, ड्राइव शून्य मेटाडेटा के साथ 4Kn फ़ॉर्मैट, और redundancy और checksum ZFS या Ceph करें, जो सच में बता सकते हैं कि कब कोई ड्राइव झूठ बोली। अगर आपके सिस्टम में किसी चीज़ को सच में बढ़ा हुआ सेक्टर फ़ॉर्मैट चाहिए, तो यह एक जानबूझकर किया जाने वाला या-तो/या फ़ैसला है जिसे ड्राइव खाली रहते तय करना है। OSD बन जाने के बाद पता चलने वाली चीज़ नहीं।\n512e असल में कहाँ काटता है यह कहना बेईमानी होगी कि 512e एक आधुनिक सिस्टम को बर्बाद कर देता है, क्योंकि आमतौर पर ऐसा नहीं होता।\nएक मौजूदा Linux स्टैक फ़िज़िकल सेक्टर साइज़ पढ़ता है, पार्टीशन उसी पर अलाइन करता है, parted और sfdisk दोनों अब डिफ़ॉल्ट से यह करते हैं, और 4K फ़ाइलसिस्टम ब्लॉक इस्तेमाल करता है। उस कॉन्फ़िगरेशन में होस्ट 4K-अलाइन्ड 4K IO भेजता है, ड्राइव को कभी read-modify-write की ज़रूरत नहीं पड़ती, और 512e की कीमत लगभग कुछ नहीं।\nसमस्याएँ ख़ास हैं:\nमिसअलाइन्ड पार्टीशन, आमतौर पर किसी पुराने इंस्टॉल या क्लोन की गई इमेज से विरासत में। हर write पर दो read-modify-write। 512e ड्राइव पर ashift=9 के साथ ZFS, क्योंकि ZFS ने बताए गए 512 पर भरोसा किया। हर record write एक read-modify-write बन जाती है, और आप बाद में ashift नहीं बदल सकते: pool फिर से बनाना पड़ता है। 512-बाइट रिकॉर्ड लिखने वाले एप्लिकेशन O_DIRECT के साथ, page cache के मिलाने को बायपास करते हुए। कुछ डेटाबेस और बहुत सारा ख़ास बनाया सॉफ़्टवेयर यह करता है। हर वह चीज़ जो लॉजिकल साइज़ को असली मानती है। इम्युलेशन का असली नुकसान यही है: वह एक गलत संख्या बाँटता है, और आगे की चीज़ें उससे फ़ैसले लेती हैं। 4Kn पूरी श्रेणी हटा देता है। ड्राइव उस सेक्टर साइज़ के बारे में झूठ नहीं बोल सकती जो उसके पास है ही नहीं।\nफिर भी इनाम के आकार के बारे में साफ़ रहना ठीक है। Seagate की अपनी सलाह है कि 4Kn का पीछा तब साफ़ तौर पर फ़ायदेमंद है जब स्टैक पूरी तरह 4K के लिए ऑप्टिमाइज़ हो और आप हर IOPS गिन रहे हों, जैसे एक ट्यून की गई all-flash tier। उससे नीचे, सही अलाइन्ड आधुनिक Linux पर, अलाइन्ड IO के लिए परफ़ॉर्मेंस का फ़र्क अक्सर छोटा होता है। दूसरा तर्क फ़्लीट की एकरूपता है: पूरी तरह 4Kn सिस्टम में मिले-जुले फ़ॉर्मैट की कोई चौंकाने वाली बात नहीं, और किसी को याद नहीं रखना पड़ता कि कौन सी ड्राइव झूठ बोलती है।\nज़्यादातर ड्राइव बदली जा सकती हैं, अगर vendor इजाज़त दे यह वह हिस्सा है जो छूट जाता है: 512e अक्सर एक फ़ॉर्मैट सेटिंग है, हार्डवेयर की ख़ासियत नहीं। बहुत सारी enterprise SAS और SATA ड्राइव, और ज़्यादातर enterprise NVMe, 512 बाइट बताते हुए आती हैं और ख़ुशी से 4Kn में फिर से फ़ॉर्मैट हो जाती हैं।\nनीचे का सब कुछ डिवाइस का हर बाइट मिटा देता है। अपनी जगह पर बदलने का कोई तरीका नहीं है।\nNVMe: nvme-cli पहले देखिए कि namespace क्या सपोर्ट करता है:\n# Lists each LBA format and marks which one is in use nvme id-ns -H /dev/nvme0n1 | grep -i \u0026#34;lbaf\\|data size\u0026#34; आपको ऐसा फ़ॉर्मैट चाहिए जिसमें Data Size 4096 और Metadata Size 0 हो, best मार्क हो और अभी इस्तेमाल में न हो। फिर उसे लगाइए:\n# -l/--lbaf selects the LBA format index from the list above nvme format /dev/nvme0n1 --lbaf=1 --force मेटाडेटा साइज़ उतना ही अहम है जितना डेटा साइज़। कुछ फ़ैक्टरी फ़ॉर्मैट हर सेक्टर में अतिरिक्त बाइट रखते हैं, 520, या 4160, ताकि end-to-end T10-PI/DIF protection मेटाडेटा ढो सकें। अगर आपके स्टैक में कुछ भी उसे इस्तेमाल नहीं करता, तो वह हर सेक्टर पर भराव है, इसलिए शून्य-मेटाडेटा वाला फ़ॉर्मैट चुनिए और उससे छुटकारा पाइए। गलती से मेटाडेटा वाला फ़ॉर्मैट चुनने से आपको ऐसी ड्राइव भी मिलती है जो उससे अलग बर्ताव करती है जो आप बनाना चाहते थे, और सेक्टर-साइज़ बदलाव को PI बदलाव के साथ मिलाने से तेज़ के बजाय धीमा पूरा format करना पड़ सकता है।\nपूरे होस्ट की ड्राइव के लिए, इसे लूप में चलाइए। इसे extended globs के लिए shopt -s extglob चाहिए, और यह सिर्फ़ वे फ़ॉर्मैट चुनता है जो 4096/0 हैं और इस्तेमाल में नहीं:\nshopt -s extglob for dev in /dev/nvme+([0-9])n+([0-9]); do # Skip anything that is not actually there [ -e \u0026#34;$dev\u0026#34; ] || continue # An LBA format with 4096-byte data, 0-byte metadata, marked Best, not in use lbaf=$(nvme id-ns -H \u0026#34;$dev\u0026#34; \\ | grep -P \u0026#39;(?=.*Metadata Size: 0)(?=.*Data Size: 4096)(?=.*Best)(?!.*in use)\u0026#39; \\ | awk \u0026#39;{found=$3} END {print (found != \u0026#34;\u0026#34; ? found : -1)}\u0026#39;) if [ \u0026#34;$lbaf\u0026#34; != \u0026#34;-1\u0026#34; ]; then echo \u0026#34;Formatting $dev using LBA Format: $lbaf\u0026#34; nvme format --force --lbaf=\u0026#34;$lbaf\u0026#34; \u0026#34;$dev\u0026#34; else echo \u0026#34;Skipping $dev: no matching LBA format found.\u0026#34; fi done इसमें दो चीज़ें जितना दिखती हैं उससे ज़्यादा काम कर रही हैं।\nGlob namespaces से मेल खाता है, nvme0n1, nvme12n3, और जानबूझकर nvme0n1p1 जैसे पार्टीशन से मेल नहीं खाता, क्योंकि पैटर्न n के बाद के अंकों पर खत्म हो जाता है। एक namespace को फिर से फ़ॉर्मैट करने और चलते सिस्टम के साथ कुछ ऐसा करने में जिसे वापस न लाया जा सके, यही फ़र्क है।\nऔर चुनाव सिर्फ़ उसी ड्राइव को बदलता है जो सच में वह देती है जो आपने माँगा। बाकी सब -1 पर गिरता है और छोड़ दिया जाता है, जिसमें तीन अलग मामले आते हैं:\nड्राइव सिर्फ़ 512 देती है। कोई 4096-बाइट फ़ॉर्मैट नहीं है, इसलिए बदलने को कुछ नहीं और लूप उसे छोड़ देता है। वह कोशिश नहीं करता, और बीच में फ़ेल नहीं होता। ड्राइव पहले से 4Kn है। 4096/0 फ़ॉर्मैट ही इस्तेमाल में है, और (?!.*in use) उसे बाहर करता है, इसलिए उसी होस्ट पर दूसरी बार चलाना कुछ नहीं करता। हर ड्राइव का बेवजह फिर से format नहीं। 4096 वाले फ़ॉर्मैट सिर्फ़ मेटाडेटा के साथ हैं। 4096 + 8 फ़ॉर्मैट Metadata Size: 0 पूरा नहीं करता, इसलिए लूप चुपचाप आपको ऐसी T10-PI ड्राइव नहीं थमाएगा जो आपने माँगी नहीं। दूसरे शब्दों में यह बंद होकर फ़ेल होता है। जब यह पक्का नहीं होता, छोड़ देता है।\nPortability पर एक बात: उन lookaheads को GNU grep का -P (PCRE) मोड चाहिए। जिस सिस्टम पर grep कुछ और है, वहाँ पैटर्न किसी से मेल नहीं खाता और हर ड्राइव छोड़ दी जाती है। झुँझलाने वाला, पर कम से कम गलती सुरक्षित दिशा में होती है।\nफिर भी चलाने से पहले लूप पढ़ लीजिए। जहाँ यह मेल खाता है, वहाँ बिना और पूछे फ़ॉर्मैट करता है। nvme format --force दो बार नहीं पूछता। इसकी जगह provisioning में है, ऐसी मशीन पर जिसकी ड्राइव में कुछ नहीं, कभी ऐसे होस्ट पर नहीं जिस पर चलता OSD, pool या VM डिस्क हो।\nFreeBSD पर इसके बराबर nvmecontrol है, जहाँ -f फ़ॉर्मैट इंडेक्स है:\nnvmecontrol format -f 1 nvme0ns1 SAS और SATA: openSeaChest Seagate का openSeaChest cross-platform और open source है, और दूसरे vendors की ड्राइव पर भी चलता है।\n# Find the handle openSeaChest_Format --scan # Ask the drive which sector sizes it will accept openSeaChest_Format -d /dev/sg1 --showSupportedFormats # Convert. The confirmation string is deliberately hard to type by accident. openSeaChest_Format -d /dev/sg1 --setSectorSize 4096 \\ --confirm this-will-erase-data-and-may-render-the-drive-inoperable वह confirmation वाक्य मेरा नाटक नहीं है। यह वह शाब्दिक स्ट्रिंग है जो टूल माँगता है, और “may render the drive inoperable” वाला हिस्सा सच है। बिजली जाने से बीच में रुका low-level format ड्राइव को ऐसी हालत में छोड़ सकता है कि उसे काम करने से पहले एक और format चाहिए।\nनीचे, ऑपरेशन ट्रांसपोर्ट के हिसाब से अलग है: SAS और SCSI Format Unit इस्तेमाल करते हैं, SATA Set Sector Configuration Ext, जो fast-format रास्ता है, और NVMe NVM Format। SAS ड्राइव के लिए आप Format Unit सीधे चला सकते हैं, और ध्यान दीजिए कि यह विकल्प छोटी confirmation स्ट्रिंग लेता है:\nopenSeaChest_Format -d /dev/sg1 --formatUnit 4096 --poll \\ --confirm this-will-erase-data दो अलग विकल्प, दो अलग confirmation स्ट्रिंग: इन्हें उल्टा लगाइए और टूल मना कर देता है।\nजहाँ ड्राइव fast format सपोर्ट करती है, सेक्टर साइज़ घंटों के बजाय सेकंडों में बदलता है; ड्राइव उसके बाद अपना integrity और background काम करती है, और उस पर अपना असली डेटा लिखने से वह background समय घटता है। पूरा format शुरू से आख़िर तक शून्य लिखता है और बड़ी घूमती डिस्क पर कई घंटे से कई दिन ले सकता है।\nopenSeaChest_Format -d /dev/sg1 --setSectorSize 4096 --fastFormat \\ --confirm this-will-erase-data-and-may-render-the-drive-inoperable SCSI: sg_format SCSI बोलने वाली किसी भी चीज़ के लिए sg3_utils यही काम करेगा:\n# --size requires --format; expect hours on a large spinning disk sg_format --format --size=4096 /dev/sdb # Fast format where the drive supports it — seconds instead of hours sg_format --format --size=4096 --ffmt=1 /dev/sdb sg_format commit करने से पहले 15 सेकंड की उलटी गिनती देता है, जिसे --quick छोड़ देता है। इसका डॉक्यूमेंटेशन एक ख़ास विफलता की चेतावनी भी देता है जो जानने लायक है: अगर ब्लॉक-साइज़ बदलाव सफल हो पर फिर format फ़ेल हो जाए, तो ड्राइव “format corrupt” हालत में जा सकती है और ठीक होने के लिए एक और format चाहिए।\nकुछ भी बदलने से पहले बूट पाथ जाँचिए। बूट डिवाइस के रूप में 4Kn ड्राइव को UEFI और उसे सपोर्ट करने वाला OS चाहिए। आधुनिक Linux ठीक है। पुराना Windows नहीं, और कुछ हार्डवेयर RAID कंट्रोलर अब भी 4Kn को पूरी तरह मना करते हैं। ड्राइव में कुछ होने से पहले करिए। बाद में करने का मतलब है खाली करो, बदलो, वापस लाओ। एक कीजिए, फिर जाँचिए। एक ड्राइव बदलिए, बताए गए साइज़ पक्के कीजिए, फिर बाकी। घंटों की उम्मीद रखिए बिना fast format वाली घूमती डिस्क पर। जिस मशीन की आपको जल्दी वापस ज़रूरत है उस पर low-level format शुरू मत कीजिए। आपके पास क्या है, यह जाँचना # LOG-SEC is what the host addresses, PHY-SEC is what the medium uses lsblk -o NAME,MODEL,SIZE,LOG-SEC,PHY-SEC # The same, from sysfs cat /sys/block/sda/queue/logical_block_size cat /sys/block/sda/queue/physical_block_size # SMART states both, and this is the clearest 512e signature there is smartctl -a /dev/sda | grep -i \u0026#34;sector size\u0026#34; 512 bytes logical, 4096 bytes physical एक 512e ड्राइव है। मेल खाती संख्याओं का मतलब नेटिव है: दोनों 512 हों तो 512n, दोनों 4096 हों तो 4Kn।\nऔर जाँचिए कि पार्टीशन सच में मेल खाते हैं:\nparted /dev/sda align-check optimal 1 ZFS, Ceph और वर्चुअल डिस्क ZFS: pool बनाते वक़्त ashift=12 साफ़ तौर पर सेट कीजिए, और ड्राइव के बताए साइज़ पर भरोसा मत कीजिए, क्योंकि 512e पर वह आपको 9 बताएगी और गलत होगी। इसे बाद में बदला नहीं जा सकता।\nCeph: फ़्लैश पर BlueStore का न्यूनतम allocation साइज़ 4 KB होना चाहिए। आधुनिक Ceph का डिफ़ॉल्ट 4096 है, पर पुराने बिल्ड का डिफ़ॉल्ट ज़्यादा था, SSD पर लगभग 16 KB और HDD पर 64 KB, और यह RBD VM डिस्क के लिए बुरा है, क्योंकि वे बहुत सारी छोटी random 4 KB writes भेजती हैं और 16 या 64 KB allocation इकाई में पड़ने वाली 4 KB write write को बढ़ाती भी है और बाकी को भराव पर बर्बाद भी करती है। यह OSD बनते वक़्त तय होता है, इसलिए इसे बनाने या फिर से बनाने से पहले सेट करना होगा:\nceph config set global bluestore_min_alloc_size_ssd 4096 # new or rebuilt OSDs only इसका साथी bluestore_min_alloc_size_hdd भी है। मौजूदा OSD वही रखते हैं जिससे वे बने थे, इसलिए इसे बदलने का मतलब उन्हें फिर से बनाना है।\nवर्चुअल डिस्क: guest वही देखता है जो hypervisor दिखाता है, नीचे की ड्राइव नहीं, इसलिए VM के नीचे 4Kn ड्राइव भी guest को 512-बाइट ब्लॉक देती है जब तक आप कुछ और न कहें। स्टैक को शुरू से आख़िर तक 4K रखने का मतलब है QEMU को 4K दिखाने को कहना, जो Proxmox में /etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf में एक raw argument लाइन है:\nargs: -global scsi-hd.physical_block_size=4k -global scsi-hd.logical_block_size=4096 यही लाइन असल में उन डिस्क के लिए QEMU को 4Kn पर मजबूर करती है: -global इसे VM के हर scsi-hd डिवाइस पर लगाता है, इसलिए guest को लॉजिकल और फ़िज़िकल दोनों ब्लॉक साइज़ के लिए 4096 बताया जाता है और वह उसी हिसाब से पार्टीशन और अलाइन करता है।\nपूरी स्ट्रिंग को quote मत कीजिए। Proxmox args: को Text::ParseWords::shellwords से पार्स करता है, इसलिए यह:\nargs: \u0026#34;-global scsi-hd.physical_block_size=4k -global scsi-hd.logical_block_size=4096\u0026#34; एक अकेले argument में सिमट जाता है: quotes माने जाते हैं और हटा दिए जाते हैं, और QEMU को चार के बजाय एक लंबा, पार्स न होने वाला विकल्प मिलता है। बिना quote के वही लाइन -global, scsi-hd.physical_block_size=4k, -global, scsi-hd.logical_block_size=4096 में बँटती है, जो आप चाहते हैं। यह आसान गलती है क्योंकि कमांड लाइन पर quote करना सही आदत है, और विफलता, एक VM जो शुरू नहीं होता और विकल्प की शिकायत करता है, quotes की ओर इशारा नहीं करती।\nयह guest OS इंस्टॉल करने से पहले कीजिए। पहले से इंस्टॉल सिस्टम के नीचे डिस्क का ब्लॉक साइज़ बदलना उसे बूट न होने लायक छोड़ सकता है, क्योंकि पार्टीशन लेआउट और बूटलोडर 512-बाइट सेक्टर के लिए लिखे गए थे। यह भी ध्यान दीजिए कि args: GUI के प्रबंधन से बाहर एक expert रास्ता है, और live migration और snapshots के साथ इसका तालमेल मौजूदा Proxmox डॉक्यूमेंटेशन से फिर जाँचने लायक है।\nजब guest 512 कहे और होस्ट 4K यह वह मामला है जिसे ठीक से समझना ज़रूरी है, क्योंकि ऊपर का सारा काम करने के बाद डिफ़ॉल्ट से आपको यही मिलता है।\nQEMU guest को 512-बाइट लॉजिकल ब्लॉक दिखाता है जब तक उसे कुछ और न कहा जाए, बैकिंग डिवाइस चाहे जो हो। तो आप होस्ट की हर ड्राइव को 4Kn में बदल सकते हैं, और ऊपर के VM को फिर भी 512 बताया जाएगा, और वे उस पर भरोसा करेंगे।\nफिर guest 512-बाइट सीमाओं पर पार्टीशन करता है क्योंकि वह कर सकता है, और 512-बाइट IO भेजता है क्योंकि वह भेज सकता है। पर होस्ट डिवाइस के पास अब सच में 4096-बाइट लॉजिकल ब्लॉक है, और वह 512-बाइट write स्वीकार नहीं करेगा। दोनों का मेल किसी को कराना है, और वह होस्ट है: QEMU आसपास के 4 KB पढ़ता है, उनमें guest के 512 बाइट मिलाता है, और पूरी चीज़ वापस लिखता है।\nआपने इम्युलेशन हटाया नहीं है। आपने उसे ड्राइव के फ़र्मवेयर से हटाकर अपने hypervisor में डाल दिया है, जहाँ वह ड्राइव के चक्रों के बजाय होस्ट CPU और एक bounce buffer का पड़ता है।\ncache=none के साथ यह कोई हल्का जुर्माना भी नहीं है। 4Kn डिवाइस पर O_DIRECT 4 KB-अलाइन्ड ऑफ़सेट और लंबाई माँगता है, इसलिए 4K से छोटी guest write सीधे आगे नहीं भेजी जा सकती: IO भेजने से पहले ही QEMU में अलाइनमेंट ठीक करना पड़ता है।\nऔर मिसअलाइनमेंट का मामला एक परत ऊपर वापस आता है। 512-बाइट बारीकी पर पार्टीशन किया गया guest अपनी 4 KB फ़ाइलसिस्टम writes ऐसे ऑफ़सेट पर रखता है जो होस्ट के दो 4 KB ब्लॉक में फैलते हैं, इसलिए हर एक होस्ट पर दो read-modify-write बन जाती है। वही विफलता जो खुली 512e ड्राइव पर मिसअलाइन्ड पार्टीशन की है, बस अब यह एक VM के अंदर हो रही है जहाँ कोई इसे ढूँढ नहीं रहा।\nतो नियम यह है: अगर होस्ट 4Kn है, तो guest को भी 4K दिखाइए, और OS डालने से पहले कीजिए।\nअपवाद guest सपोर्ट है, जो 512e के होने की पूरी वजह है:\nLinux guests 4Kn को बिना झंझट संभालते हैं। Windows Windows 8 और Server 2012 से आगे डेटा वॉल्यूम के लिए 4Kn सपोर्ट करता है, और 4Kn से बूट करने के लिए UEFI चाहिए। कुछ भी पुराना, Windows 7 और उससे पहले, 4Kn बिल्कुल नहीं कर सकता। उनके लिए 512 दिखाने वाली वर्चुअल डिस्क उन्हें चलाने की कीमत है, और मेल होस्ट कराएगा। अगर यह मायने रखता है, तो उन guests को अपनी सबसे तेज़ tier के बजाय ऐसे स्टोरेज पर रखिए जहाँ यह आपको सबसे कम पड़े। Guest के अंदर से जाँचिए कि उसे असल में क्या मिला:\nlsblk -o NAME,LOG-SEC,PHY-SEC 4Kn होस्ट पर वहाँ 512 का मतलब है कि ऊपर वाला मेल हर अनअलाइन्ड write पर हो रहा है।\nसंदर्भ OpenZFS — Workload Tuning — ashift, क्यों 2^ashift एक vdev पर सबसे छोटा संभव IO है, और यह टिप्पणी कि “many devices misreport their sector sizes” nvme-format man page — --lbaf, --namespace-id, --ses और --force sg_format man page — --format के साथ --size, fast-format विकल्प, और format-corrupt चेतावनी openSeaChest — Seagate की open-source ड्राइव यूटिलिटी, --setSectorSize और --showSupportedFormats समेत openSeaChest wiki — Format, Fast Format, And Sector Sizes — कौन सा ट्रांसपोर्ट कौन सा कमांड इस्तेमाल करता है, और fast format कब लागू होता है nvmecontrol(8) — FreeBSD का समकक्ष Linux block layer documentation — कर्नेल लॉजिकल और फ़िज़िकल ब्लॉक साइज़ को कैसे मॉडल करता है ","permalink":"https://blogs.damiendye.uk/hi/proxmox/block-sizes-4kn-512e/","summary":"512e ड्राइव ऐसे 512-बाइट सेक्टर दिखाती हैं जो उनके पास हैं ही नहीं, और हर अनअलाइन्ड write पर फ़र्मवेयर यह कमी पूरी करता है। मीडियम पर, होस्ट में और write amplification में इसकी कीमत, direct synchronous writes सबसे बुरी स्थिति क्यों हैं, और पूरे फ़्लीट को 4Kn में कैसे बदलें।","title":"4Kn, 512e और 512n: नेटिव 4K क्यों जीतता है, और इम्युलेशन की कीमत क्या है"},{"content":"BAR क्या है, और GPU उससे बड़े क्यों हो गए हर PCIe डिवाइस एक या ज़्यादा Base Address Registers दिखाता है। BAR सिस्टम को बताता है कि डिवाइस को कितना address space चाहिए, और firmware उसे host के memory map में मैप करता है। मैप होने के बाद CPU साधारण loads और stores से डिवाइस की मेमोरी तक पहुँचता है।\nBAR का आकार पहले silicon में तय होता था। firmware उसे power-on पर पढ़ता था और बात वहीं ख़त्म।\nजब तक BAR छोटे थे, यह ठीक था। नेटवर्क कार्ड को अपने registers के लिए कुछ दसियों किलोबाइट चाहिए। NVMe controller को 16KB से 64KB।\nग्राफ़िक्स कार्ड ने यह व्यवस्था तोड़ दी। आधुनिक कार्ड में 8, 12, 16 या 24GB वीडियो मेमोरी होती है, और ज़ाहिर बात है कि पूरी को मैप किया जाए ताकि CPU उसमें कहीं भी लिख सके। तय आकार वाले BAR यह नहीं कह सकते थे, इसलिए चलन बन गया एक छोटी खिड़की का, आमतौर पर 256MB, जिसे driver framebuffer पर इधर-उधर ले जाता है और टुकड़ों में कॉपी करता है। यह काम करता है। बस यह उस मेमोरी तक पहुँचने के लिए बेवकूफ़ी भरा हिसाब-किताब है जो आप पहले ही खरीद कर लगा चुके हैं।\nतय aperture एक बार में एक टुकड़ा दिखाता है; Resizable BAR पूरा मैप करता है तय BAR: 256 MB की खिड़की 24 GB VRAM, टुकड़ों में खिड़की driver खिड़की को इधर-उधर करके उससे कॉपी करता है, एक बार में एक टुकड़ा। टुकड़े उदाहरण हैं, पैमाने पर नहीं। Resizable BAR: पूरा वही 24 GB, एक बार में मैप एक BAR सब ढक लेता है CPU वहीं लिखता है जहाँ उसे लिखना है। हिलाने को कोई खिड़की नहीं। 256MB की खिड़की bandwidth की सीमा कम, हिसाब-किताब का टैक्स ज़्यादा है: driver डेटा हिलाने के बजाय खिड़की हिलाने में समय लगाता है। Resizable BAR क्या बदलता है Resizable BAR एक PCIe क्षमता है जो BAR के आकार को तय रखने के बजाय उस पर बातचीत करने देती है। डिवाइस बताता है कि वह कौन-से आकार सपोर्ट कर सकता है, और firmware या operating system उनमें से एक प्रोग्राम करता है।\nGPU के लिए इसका मतलब है कि पूरा framebuffer एक साथ मैप हो सकता है। driver खिड़की में घूमना बंद कर देता है और वहीं लिखता है जहाँ उसे लिखना है। kernel इस क्षमता को Physical Resizable BAR के रूप में दिखाता है, और यह किसी vendor से बँधी नहीं है। AMD कार्ड Intel प्लेटफ़ॉर्म पर इसके साथ चलता है, और उल्टा भी।\nतीनों vendor असल में क्या करते हैं दिलचस्प बात यह है कि vendor इस पर सहमत नहीं कि यह कितना मायने रखता है।\nतीन vendor, एक क्षमता, तीन अलग रुख़ Intel Arc / Arc Pro ज़रूरी “Required to get a good experience with Arc” बंद हो तो frametime के मौजूदा spikes बड़े होते हैं। प्लेटफ़ॉर्म: 10th Gen Core और नए, ज़्यादातर Ryzen 3000, सभी Ryzen 5000। NVIDIA हर गेम की PROFILE RTX 30 Series से आगे, मार्च 2021 “A few percent, up to 12%”: और कुछ गेम धीमे होते हैं, इसलिए driver इसे सिर्फ़ वहीं चालू करता है जहाँ यह तेज़ निकला। VBIOS + SBIOS अपडेट चाहिए था। AMD Radeon SMART ACCESS MEMORY वही क्षमता, एक ब्रांड के नाम से बिकती RX 6000 और Ryzen 5000 के साथ जोड़ी वाले फ़ीचर की तरह आया, पर क्षमता मानक PCIe है और हर vendor पर चलती है। Vega और Polaris पर अधूरा। क्षमता तीनों में एक जैसी है: फ़र्क यह है कि vendor इसे पहली शर्त मानता है, चुनकर लागू करने वाला optimisation, या product फ़ीचर। क्षमता वही, तीन अलग रुख़। Intel इसे पहली शर्त मानता है; NVIDIA इसे सिर्फ़ उन गेम के लिए चालू करके भेजता है जिन्हें उसने टेस्ट किया है; AMD इसे फ़ीचर की तरह बेचता है। Intel Arc और Arc Pro: Intel इसे ज़रूरी कहता है Intel सबसे ज़ोर देकर कहता है। उसका मार्गदर्शन कहता है कि Resizable BAR “required to get a good experience with Intel® Arc™ hardware”। किसी प्लेटफ़ॉर्म फ़ीचर के लिए यह असामान्य रूप से कड़ी भाषा है, और यह मार्केटिंग का फ़ैसला नहीं बल्कि यह दिखाती है कि Arc driver कैसे बना है।\nलक्षण के तौर पर Intel इसे बंद करने का असर औसत के बजाय स्थिरता के रूप में बताता है: “ReBAR off” के साथ आप “will generally result in spikes that were already there getting bigger”। यह frametime की स्थिरता का तर्क है, और यह उसी तरह की समस्या है जैसी latency tails पर ASPM का असर। औसत इसे छिपा लेता है।\nIntel समर्थित प्लेटफ़ॉर्म के रूप में 10th Generation और नए Intel Core प्रोसेसर, ज़्यादातर Ryzen 3000 series और सभी Ryzen 5000 CPU गिनाता है, और इसे मदरबोर्ड BIOS का ऐसा फ़ीचर मानता है जिसे आपको जाकर चालू करना पड़ता है।\nArc और Arc Pro के लिए व्यावहारिक नतीजा सीधा है। अगर आपने किसी मशीन में Arc कार्ड लगाया है और परफ़ॉर्मेंस निराशाजनक या असमान है, तो कुछ और देखने से पहले यह देखें। इसलिए उन कार्डों पर यह ट्यूनिंग का बटन कम और पहली शर्त ज़्यादा है।\nNVIDIA: Ampere से आगे, और सिर्फ़ जहाँ फ़ायदा हो NVIDIA ने मार्च 2021 में GeForce RTX 30 Series कार्ड और लैपटॉप के लिए सपोर्ट जोड़ा। इसे चलाने के लिए समर्थित VBIOS, संगत CPU और मदरबोर्ड, मदरबोर्ड firmware अपडेट और नया driver चाहिए था। RTX 3060 इसके साथ आया; 3060 Ti, 3070, 3080 और 3090 को इसके लिए firmware अपडेट की ज़रूरत पड़ सकती थी।\nNVIDIA का अपना परफ़ॉर्मेंस का बयान ताज़गी भरे ढंग से सादा है। उन्होंने पाया कि “some titles benefit from a few percent, up to 12%” जबकि “there are also titles that see a decrease in performance”।\nउनका जवाब ही जानने लायक बात है: इसे हर जगह चालू छोड़ने के बजाय, NVIDIA गेम पहले से टेस्ट करता है और हर गेम की profile से Resizable BAR सिर्फ़ वहीं चालू करता है जहाँ फ़ायदा मापा गया। तो NVIDIA कार्ड पर “क्या ReBAR चालू है?” का जवाब हर application के लिए अलग है, और जो benchmark कुछ नहीं दिखाता, वह शायद ऐसा गेम हो जिसे driver ने छोड़ देना तय किया।\nAMD: Smart Access Memory वही चीज़ है AMD इसे Smart Access Memory के ब्रांड से बेचता है, जो Radeon RX 6000 series और Ryzen 5000 CPU के साथ आया। मार्केटिंग AMD-CPU-और-AMD-GPU की जोड़ी का इशारा करती है, और लॉन्च भी ऐसे ही हुआ, पर नीचे की क्षमता मानक PCIe वाली ही है। Intel मशीन में Radeon कार्ड के साथ firmware में Resizable BAR चालू करें, और आपको ब्रांड के बिना वही फ़ीचर मिल जाता है।\nRadeon Pro W-series कार्ड भी इसे सपोर्ट करते हैं। पुराने architectures, Vega और Polaris, पर सपोर्ट अधूरा है, और वर्चुअलाइज़ेशन की परेशानी भी वहीं रहती है।\nResizable BAR और AI काम यहीं इस फ़ीचर को गलत समझा जाता है, इसलिए साफ़ होना ठीक है कि यह किसे छूता है।\nResizable BAR बदलता है कि CPU, GPU मेमोरी तक कैसे पहुँचता है। यह ट्रांसफ़र का रास्ता है: model weights रखना, batches भेजना, नतीजे वापस पढ़ना। यह GPU की अपनी memory bandwidth को नहीं छूता, और matrix multiply को तेज़ नहीं करता।\nतो ईमानदार सार यह है कि यह model को लोड करने और खिलाने पर असर डालता है, गणित पर नहीं। बड़े model के लिए लोड के समय host-से-device कॉपी असली लागत है, और पूरे आकार का BAR CPU को 256MB के झरोखे से गुज़रने के बजाय सीधे device मेमोरी में लिखने देता है। inference run की स्थिर हालत में, जहाँ weights पहले से मौजूद हैं और काम compute-bound है, कुछ उम्मीद न करें।\nतीन बातें जानने लायक हैं।\nAI के लिए Arc Pro, Intel का फ़ैसला विरासत में पाता है। अगर Intel कहता है कि अच्छे अनुभव के लिए कार्ड को Resizable BAR चाहिए, तो यह oneAPI या PyTorch चलाते कार्ड पर भी उतना ही लागू होता है जितना गेम चलाते कार्ड पर। inference करते Arc और Arc Pro कार्ड पर यह चालू होना चाहिए, बस।\nNVIDIA पर आपको BAR1 की संख्या चाहिए। BAR1, device मेमोरी पर host को दिखने वाली खिड़की है, और host-mapped allocations और GPUDirect RDMA इसी से गुज़रते हैं:\n# How much device memory is actually host-visible nvidia-smi -q | grep -A3 \u0026#34;BAR1 Memory Usage\u0026#34; डेटा-सेंटर कार्ड पहले से बड़े BAR1 के साथ बनता है। डेस्कटॉप कार्ड पर Resizable BAR ही उस खिड़की को छोटी के बजाय बड़ी बनाता है। अगर आप NIC से सीधे GPU मेमोरी में RDMA कर रहे हैं, तो यह कोई शौक की चीज़ नहीं।\nइसे ROCm की ज़रूरत से न मिलाएँ। AMD की ROCm system requirements ऐसे CPU माँगती हैं जो PCIe atomics सपोर्ट करें, “modern CPUs after the release of 1st generation AMD Zen CPU and Intel™ Haswell”, और BAR के आकार के बारे में कुछ नहीं कहतीं। ये दो अलग प्लेटफ़ॉर्म ज़रूरतें हैं जो एक ही BIOS मेन्यू में रहती हैं, और लोग इन्हें लगातार आपस में मिला देते हैं। वही जाँचें जिसकी आपको सचमुच ज़रूरत है।\nAI बिल्ड को सबसे ज़्यादा जो दिक्कत काटती है, वह परफ़ॉर्मेंस की है ही नहीं, और वह नीचे है: एक मशीन में बड़े BAR वाले कई GPU, address space ख़त्म कर सकते हैं।\nइसे चलाने के लिए क्या चाहिए चार चीज़ें, और सभी firmware-स्तर की:\nResizable BAR चालू मदरबोर्ड firmware में। अक्सर डिफ़ॉल्ट रूप से बंद। Above 4G Decoding चालू। 24GB BAR, 4GB रेखा के नीचे नहीं आ सकता, इसलिए प्लेटफ़ॉर्म को उसके ऊपर address space देने को तैयार होना चाहिए। GPU न हो तब भी इसे चालू करें। इसकी कोई कीमत नहीं। UEFI boot, CSM बंद। पुराना compatibility mode और बड़े BAR साथ नहीं चलते। नया firmware और drivers, ख़ासकर 2020–2021 के बदलाव के दौर के बोर्ड और कार्ड पर, जहाँ सपोर्ट लॉन्च पर नहीं बल्कि अपडेट से आया। बड़ा BAR सिर्फ़ 4GB के ऊपर आता है, और guest aperture उसे रखने लायक बड़ा होना चाहिए बड़ा किया गया BAR असल में कहाँ रह सकता है सिस्टम RAM 0 32-bit MMIO hole 4 GB 64-bit MMIO ऊपर GPU 0 24 GB BAR GPU 1: 24 GB GPU 2: 24 GB GPU 3: 24 GB भरा हुआ, और कुल सिर्फ़ 4 GB चौड़ा 24 GB BAR यहाँ नहीं आ सकता। 256 MB वाला मुश्किल से आता। सिर्फ़ Above 4G Decoding के साथ इस्तेमाल लायक एक firmware सेटिंग। कुछ बोर्ड पर डिफ़ॉल्ट रूप से बंद, और इसके बिना बड़ा BAR कभी मिलता ही नहीं। हर कार्ड को यहाँ अपनी जगह चाहिए चार 24 GB कार्डों को 96 GB की 64-bit MMIO चाहिए, bus की बाकी सब चीज़ों के अलावा। हर कंज़्यूमर बोर्ड का firmware यह नहीं करेगा। पहचान: दो कार्डों के साथ ठीक, चार के साथ एक initialise नहीं होता, और dmesg BAR के लिए जगह न होने की बात कहता है। पैमाने पर नहीं: 64-bit क्षेत्र नीचे के 4 GB से कहीं ज़्यादा बड़ा है, और बात यही है। Above 4G Decoding ही ऊपरी क्षेत्र को इस्तेमाल लायक बनाता है, और हर कार्ड को वहाँ अपनी जगह चाहिए, यहीं कई GPU वाले AI बिल्ड दीवार से टकराते हैं। Linux पर कैसे जाँचें कार्ड में यह क्षमता है या नहीं, और वह कौन-से आकार देता है:\n# Substitute your card\u0026#39;s address from lspci lspci -vvs 0000:XX:00.0 | grep -A6 \u0026#34;Physical Resizable BAR\u0026#34; kernel इसे sysfs में भी दिखाता है, हर resizable BAR की एक फ़ाइल:\ncat /sys/bus/pci/devices/0000:XX:00.0/resource1_resize यह वैल्यू समर्थित आकारों का bitmap है, आकार नहीं। bit 0 का मतलब 1MB, bit 1 का 2MB, bit 2 का 4MB, और किसी bit का आकार 2 ^ (bit + 20) है। तो 00000000000001c0 में bits 6, 7 और 8 सेट हैं, यानी BAR 64MB, 128MB या 256MB हो सकता है।\nअसल में क्या लागू है, यह देखने के लिए दिए गए regions पढ़ें:\nlspci -vvs 0000:XX:00.0 | grep -i Region पूरा framebuffer मैप करके चल रहा कार्ड 256MB के बजाय अपनी VRAM के आकार का region दिखाता है।\nहाथ से आकार बदलना आप bit की जगह खुद लिख सकते हैं:\n# bit 7 -\u0026gt; 2 ^ (7 + 20) = 128MB echo 7 \u0026gt; /sys/bus/pci/devices/0000:XX:00.0/resource1_resize इसकी शर्तें सख़्त हैं, और जिस मशीन की आपको परवाह है उस पर आज़माने से पहले पढ़ने लायक हैं। पहले हर driver को डिवाइस से unbind करना होगा। उसी parent bridge के नीचे के peer डिवाइसों को soft-remove करना पड़ सकता है। VGA डिवाइस पर resize वैल्यू लिखने से low-level console drivers हट जाते हैं। resourceN sysfs फ़ाइलों को खोले बैठी किसी भी चीज़ को उन्हें छोड़ना होगा।\nkernel का दस्तावेज़ नतीजे के बारे में भी साफ़ है: सफलता की गारंटी नहीं। अगर बड़े BAR को रखने के लिए address space नहीं है तो resize फ़ेल हो जाता है। जो आपको सीधे Above 4G Decoding पर वापस ले आता है।\nजब गड़बड़ हो dmesg कहता है कि वह BAR नहीं दे सकता। BAR 0: no space for [mem size ...] जैसे संदेश का मतलब है कि allocation फ़ेल हुआ, कार्ड खराब नहीं है। सबसे पहले Above 4G Decoding जाँचें।\nकई GPU और उनमें से एक initialise नहीं होता। यह कई GPU और AI rig वाली नाकामी है। 24GB BAR वाले चार कार्डों को 96GB की 64-bit MMIO space चाहिए, बाकी सब के अलावा, और हर कंज़्यूमर बोर्ड का firmware यह नहीं करेगा। लक्षण यह है कि मशीन दो कार्डों के साथ ठीक है और चार के साथ गिर जाती है।\nपरफ़ॉर्मेंस गिर गई। NVIDIA पर यह driver का अपना निष्कर्ष हो सकता है, क्योंकि वे इसे हर गेम के हिसाब से इसीलिए चालू करते हैं कि कुछ workload पीछे जाते हैं। बाकियों पर, मान लेने के बजाय दोनों तरह से मापें।\nकुछ भी नहीं बदला। उस workload के लिए सबसे संभावित नतीजा जो कभी VRAM में CPU की खिड़की से सीमित था ही नहीं।\nबड़े BAR वाला GPU VM में पासथ्रू करना यह बताने लायक है क्योंकि यह लोगों को चौंकाता है: guest को host का memory map विरासत में नहीं मिलता। VM का firmware अपनी 64-bit MMIO aperture बनाता है, और OVMF का डिफ़ॉल्ट आधुनिक GPU की ज़रूरत से बहुत छोटा है, इसलिए कार्ड या तो initialise नहीं होता या छोटे BAR पर लौट आता है। यह GPU का नहीं, Proxmox और QEMU का विषय है, और यह IOMMU टैक्स वाले लेख में है, साथ में हमेशा Q35 इस्तेमाल करें, i440fx नहीं की machine-type ज़रूरतों के।\nसंदर्भ Intel — Resizable BAR and Intel Arc Graphics — Intel का अपना बयान कि Arc पर अच्छे अनुभव के लिए यह ज़रूरी है, और समर्थित प्लेटफ़ॉर्म की सूची NVIDIA — Resizable BAR support for GeForce RTX 30 Series — ज़रूरतें, मापी गई रेंज, और हर गेम की profile वाला तरीका AMD — Smart Access Memory — AMD का ब्रांड और प्लेटफ़ॉर्म जोड़ी Linux kernel sysfs-bus-pci ABI — resourceN_resize — bitmap, 2 ^ (bit + 20) से आकार, और unbind की शर्तें ROCm system requirements — PCIe atomics की ज़रूरत, जिसे इससे मिला दिया जाता है ","permalink":"https://blogs.damiendye.uk/hi/proxmox/pcie-resizable-bar/","summary":"Resizable BAR से CPU, GPU का पूरा framebuffer मैप कर पाता है, 256MB की खिड़की से झाँकने के बजाय। Intel इसे Arc के लिए ज़रूरी कहता है, NVIDIA हर गेम के हिसाब से चालू करता है, AMD इसे Smart Access Memory के नाम से बेचता है। AI काम में यह ट्रांसफ़र बदलता है, गणित नहीं।","title":"PCIe Resizable BAR और आधुनिक GPU: Intel Arc, NVIDIA और AMD"},{"content":"समस्या यह एक ग्राहक के साथ काम के दौरान सामने आया, जहाँ हम latency के प्रति संवेदनशील workload के लिए NVMe पासथ्रू वाला Proxmox VE डिप्लॉयमेंट डिज़ाइन कर रहे थे। ग्राहक ने कॉल से पहले अपना benchmarking कर लिया था। host पर NVMe ड्राइव के ख़िलाफ़ fio ने 700K random read IOPS और 10µs से कम completion latency दिखाई। VM के अंदर, उसी ड्राइव और उसी टेस्ट के साथ, उन्हें मोटे तौर पर उसका आधा मिल रहा था।\nवे ज़ाहिर चीज़ें पहले ही जाँच चुके थे। ड्राइव नहीं बदली थी। firmware नहीं बदला था। PCIe स्लॉट नहीं हिला था। वे सोचने लगे थे कि कहीं पासथ्रू ही गलत तरीका तो नहीं।\nऐसा नहीं था। वे जो देख रहे थे वह IOMMU टैक्स है। यह लोगों को इसलिए चौंकाता है क्योंकि पासथ्रू डिज़ाइन पर फ़ैसला करने से पहले कोई इसके बारे में नहीं बताता। अच्छी खबर यह है कि एक बार समझ आ जाए कि यह आता कहाँ से है, तो ज़्यादातर overhead वापस मिल सकता है।\nगहराई में जिन समस्याओं को हल करना पड़ा किसी VM को फ़िज़िकल PCIe डिवाइस तक सीधी पहुँच देना सुनने में सीधा लगता है। व्यवहार में यह सिस्टम वर्चुअलाइज़ेशन की कठिन समस्याओं में से एक है। जो कुछ चीज़ें bare metal पर अपने आप काम करती हैं, वे तब ख़तरनाक हो जाती हैं जब डिवाइस host और guest के बीच बँटा हो।\nDMA अलगाव यह बुनियादी समस्या है।\nPCIe डिवाइस मेमोरी पढ़ने-लिखने के लिए CPU से होकर नहीं जाते। वे Direct Memory Access इस्तेमाल करते हैं। वे सीधे फ़िज़िकल RAM पतों पर लिखते हैं। bare metal पर यह ठीक है। डिवाइस और OS एक-दूसरे पर भरोसा करते हैं।\nवर्चुअलाइज़ेशन में guest VM का फ़िज़िकल मेमोरी का अपना नज़रिया होता है। guest driver NVMe controller को जो पते देता है वे guest physical address हैं। वे host RAM में उन्हीं जगहों से मेल नहीं खाते। अगर डिवाइस उन्हें सीधे इस्तेमाल करे, तो वह गलत मेमोरी पढ़ता और लिखता है। इससे host, दूसरे VM, या दोनों खराब हो जाते हैं।\nइससे भी बुरा, कोई दुर्भावनापूर्ण या बग वाला guest driver जानबूझकर डिवाइस को host मेमोरी के किसी भी हिस्से में DMA करने के लिए प्रोग्राम कर सकता है। यह असल में पूरी मशीन पर root access है, बिना कभी hypervisor का कोई बग इस्तेमाल किए।\nहल है IOMMU: एक हार्डवेयर translation यूनिट (Intel VT-d, AMD-Vi) जो हर PCIe डिवाइस और मुख्य मेमोरी के बीच बैठती है। यह अपनी page tables रखती है, CPU की tables से अलग। डिवाइस का हर DMA अनुरोध IOMMU से होकर जाता है, जो guest physical address को host physical address में बदलती है और guest को दिए गए मेमोरी क्षेत्रों के बाहर किसी भी access को रोक देती है।\nIOMMU के बिना सुरक्षित पासथ्रू असंभव है। इसके साथ डिवाइस काबू में रहता है।\nडिवाइस समूह IOMMU अलग-अलग डिवाइसों को अलग नहीं करती। वह समूहों को अलग करती है।\nPCIe स्पेसिफ़िकेशन Access Control Services (ACS) परिभाषित करता है, जो तय करती हैं कि एक ही bus पर डिवाइस सीधे एक-दूसरे से बात कर सकते हैं या नहीं, यानी peer-to-peer DMA, उस root complex से होकर गए बिना जहाँ IOMMU बैठी है। अगर दो डिवाइस ऐसा PCIe switch साझा करते हैं जो ACS लागू नहीं करता, तो एक डिवाइस दूसरे के memory space में DMA कर सकता है, IOMMU को पूरी तरह दरकिनार करके।\nkernel उन डिवाइसों को एक IOMMU समूह में रखता है जो IOMMU के लागू हुए बिना एक-दूसरे तक पहुँच सकते हैं। अगर आपका NVMe controller किसी और डिवाइस के साथ समूह साझा करता है, तो सिर्फ़ NVMe को पासथ्रू करना अलगाव के मॉडल को तोड़ देता है। समूह का दूसरा डिवाइस तब भी IOMMU के चारों ओर side channel की तरह इस्तेमाल हो सकता है।\nहर bridge और switch पर ठीक ACS सपोर्ट वाला सर्वर-ग्रेड हार्डवेयर आमतौर पर हर डिवाइस को उसका अपना समूह देता है। कंज़्यूमर और वर्कस्टेशन बोर्ड अक्सर कई डिवाइसों को एक साथ रख देते हैं, क्योंकि PCIe root complex हर पोर्ट पर ACS लागू नहीं करता।\nProxmox एक kernel patch रखता है, pcie_acs_override, जो kernel से कहता है कि हार्डवेयर ACS सपोर्ट चाहे जो हो, हर डिवाइस को अलग माने। व्यवहार में यह काम करता है, पर यह kernel से हार्डवेयर topology के बारे में झूठ बोल रहा है। production सिस्टम पर असली हार्डवेयर ACS पर टिके साफ़ समूह हमेशा बेहतर हैं।\nInterrupt पहुँचाना bare metal पर जब NVMe controller कोई IO operation पूरा करता है, तो वह सीधे CPU को MSI-X interrupt भेजता है। CPU उसे कुछ सौ नैनोसेकंड में संभाल लेता है।\nवर्चुअलाइज़ेशन में उस interrupt को host नहीं, guest तक पहुँचना होता है। सीधा-सादा तरीका है हर interrupt को hypervisor में पकड़ना, VM exit कराना, interrupt guest में डालना, और फिर चालू करना। यह काम करता है, पर हर VM exit 5–20µs लेता है। ऊँचे IOPS पर, यानी हर सेकंड लाखों interrupts, यह overhead बहुत बड़ा है।\nहार्डवेयर हल है posted interrupts। Intel का APICv और AMD का AVIC, IOMMU को बिना कोई VM exit कराए interrupt सीधे guest के virtual APIC page में लिखने देते हैं। guest को interrupt ऐसे दिखता है जैसे bare-metal हार्डवेयर से आया हो। overhead घटकर कुछ सौ नैनोसेकंड रह जाता है।\nसभी प्लेटफ़ॉर्म posted interrupts सपोर्ट नहीं करते। पुराने CPU, कुछ वर्कस्टेशन chipset और कुछ BIOS संस्करण यह क्षमता नहीं दिखाते। जब यह न हो, तो हर interrupt धीमे रास्ते से जाता है, और कोई software जुगाड़ नहीं है।\nडिवाइस reset जब VM बंद होता है या crash करता है, तो पासथ्रू किए गए डिवाइस को एक साफ़, जानी-पहचानी हालत में लौटना पड़ता है। वरना उसे किसी दूसरे VM को नहीं दिया जा सकता और न host उसे वापस ले सकता है।\nbare metal पर OS डिवाइस driver को व्यवस्थित ढंग से बंद करता है। पासथ्रू में guest crash कर सकता है, उपयोगकर्ता VM को ज़बरदस्ती रोक सकता है, या hypervisor प्रोसेस को मार सकता है। डिवाइस ट्रांसफ़र के बीच में हो सकता है, DMA operations चलते हुए।\nPCIe इसके लिए Function Level Reset (FLR) परिभाषित करता है: बाकी bus को छुए बिना एक अकेले डिवाइस function को reset करने का तरीका। NVMe controller आमतौर पर FLR सपोर्ट करते हैं और उसे अच्छे से संभालते हैं। GPU इसमें बदनाम रूप से खराब हैं, पर वह दूसरा लेख है।\nअगर FLR सपोर्ट न हो, तो विकल्प है secondary bus reset, जो उस PCIe bridge के पीछे की हर चीज़ को reset करता है। अगर bridge पर दूसरे डिवाइस हैं, तो वे भी reset हो जाते हैं। सबसे बुरी हालत में डिवाइस वापस पाने का एक ही तरीका है: पूरे host का reboot।\nAddress translation का overhead IOMMU सुरक्षा की समस्या हल करती है। इसलिए यह वैकल्पिक नहीं है। पर यह परफ़ॉर्मेंस की एक समस्या ले आती है।\nहर DMA operation अब address translation के एक अतिरिक्त स्तर से गुज़रता है। IOMMU का अपना TLB होता है, IOTLB, और जब उसमें hit होता है तो overhead छोटा होता है। जब miss होता है, तो IOMMU को अपनी page tables खंगालनी पड़ती हैं, और इससे हर प्रभावित IO operation में असली latency जुड़ती है।\nयही IOMMU टैक्स है। बाकी लेख यह समझने के बारे में है कि यह कहाँ से आता है और इसे कम कैसे करें।\nहर DMA, IOMMU से गुज़रता है: hit सस्ता है, miss पर page tables खंगाली जाती हैं Guest VM NVMe driver guest physical address देता है NVMe controller सीधे मेमोरी में लिखता है, CPU नहीं DMA IOMMU IOTLB अपनी page tables बदलो, फिर अनुमति दो या रोको Host मेमोरी इस VM के pages translation यहाँ पहुँचता है host और दूसरे VM जानबूझकर पहुँच से बाहर IOMMU के बिना controller guest के पते सीधे host RAM में लिखता और वहाँ जो भी है उसे खराब कर देता। IOTLB hit : translation पहले से cache में है और लगभग मुफ़्त है। IOTLB miss : IOMMU अपनी page tables खंगालती है, और वह latency इसी IO पर पड़ती है। यही टैक्स है। यहाँ से गुज़रे बिना कुछ भी मेमोरी तक नहीं पहुँचता। यही सुरक्षा की गारंटी है, और इसका किया translation ही लागत है। BAR mapping और address space हर PCIe डिवाइस एक या ज़्यादा Base Address Registers (BARs) दिखाता है, जो डिवाइस के अंदरूनी registers और मेमोरी को host के MMIO address space में मैप करते हैं। host CPU इन्हीं mappings से डिवाइस तक पहुँचता है। पासथ्रू के काम करने के लिए hypervisor को ये mappings guest को ठीक से दिखानी होती हैं।\nपहले BAR के आकार boot पर BIOS तय करता था और वे 4GB से नीचे की पुरानी 32-bit MMIO खिड़की में आ जाते थे। जब BAR छोटे थे, तब यह काम करता था। आधुनिक GPU ने तस्वीर बदल दी है। 24GB framebuffer को 24GB BAR चाहिए, जो 32-bit address space में नहीं आता।\nResizable BAR (ReBAR), जिसे AMD Smart Access Memory (SAM) के नाम से भी बेचता है, एक PCIe क्षमता है जो boot के बाद BAR का आकार फिर से तय करने देती है। GPU के लिए यह अहम फ़ीचर है। framebuffer तक 256MB की खिड़की से पहुँचने और उसमें टुकड़ों में घूमने के बजाय, host पूरी VRAM एक साथ मैप कर लेता है।\nNVMe के लिए सीधा असर कम है। NVMe controller के BAR आमतौर पर controller register set (BAR0) के लिए 16KB से 64KB के होते हैं। NVMe स्पेसिफ़िकेशन एक Controller Memory Buffer (CMB) परिभाषित करता है जो host-resident submission queues के लिए बड़ा BAR दिखा सकता है, पर ज़्यादातर ड्राइव इसे लागू नहीं करतीं। ReBAR, NVMe throughput को वैसे नहीं बदलता जैसे GPU के लिए बदलता है।\nNVMe पासथ्रू के संदर्भ में यह साझा PCIe माहौल की वजह से मायने रखता है। अगर आप उसी host पर GPU के साथ NVMe ड्राइव पासथ्रू कर रहे हैं, तो GPU के बड़े किए गए BAR को 4GB सीमा के ऊपर address space चाहिए। BIOS, IOMMU और वर्चुअल PCIe topology, तीनों को इसके लिए जगह बनानी होती है। address space का बँटवारा गलत हुआ तो डिवाइस initialise नहीं होते, और बाकी सब के साथ NVMe पासथ्रू भी फ़ेल हो जाता है।\nबिजली जाने का जोखिम वर्चुअल डिस्क पर write के क्रम और crash consistency को hypervisor और storage layer संभालते हैं। पासथ्रू में guest सीधे flash से बात कर रहा है। अगर write के बीच host की बिजली जाती है, तो NVMe controller का firmware अपने write cache के साथ जो करता है, या नहीं करता, वही तय करता है कि आपका डेटा जाएगा या नहीं।\nएंटरप्राइज़ NVMe ड्राइव में power loss protection (PLP) capacitors होते हैं जो बिजली जाने पर write cache को सुरक्षित रूप से flush कर देते हैं। PLP के बिना कंज़्यूमर ड्राइव शायद ऐसा न करें। पासथ्रू में guest और हार्डवेयर के बीच कोई hypervisor सुरक्षा जाल नहीं होता।\nproduction workload के लिए PLP वाली एंटरप्राइज़ ड्राइव वैकल्पिक नहीं है।\nव्यावहारिक समझौते पासथ्रू उन क्षमताओं को भी हटा देता है जो वर्चुअल डिस्क देती हैं।\nपासथ्रू किया गया डिवाइस फ़िज़िकल रूप से एक खास host से बँधा होता है। डिवाइस जुड़ा रहते VM को live-migrate नहीं किया जा सकता। HA वाले Proxmox cluster में नोड फ़ेल होने का मतलब है कि VM बंद हो जाता है और दूसरे नोड पर cold-start होता है। कोई सहज failover नहीं।\nड्राइव vzdump और Proxmox Backup Server को दिखती भी नहीं। यह VM snapshots या तय समय वाले backups में शामिल नहीं होगी। workload के लाइव होने से पहले एक अलग backup रणनीति, guest-स्तर, filesystem-स्तर या application-स्तर की, तैयार होनी चाहिए।\nVFIO पासथ्रू असल में कैसे काम करता है जब आप कोई PCIe डिवाइस VM में पासथ्रू करते हैं, तो hypervisor guest को डिवाइस के MMIO registers का सीधा नियंत्रण दे देता है। guest driver NVMe controller से ऐसे बात करता है जैसे bare metal पर चल रहा हो। यह हिस्सा लगभग native है। MMIO register access Extended Page Tables (Intel पर EPT, AMD पर NPT) से होकर जाता है और आमतौर पर बिना VM exit के पूरा हो जाता है।\nलागत DMA रास्ते पर दिखती है। हर DMA operation address translation के लिए IOMMU से गुज़रता है, और जैसा ऊपर बताया, उस translation की कीमत है। ख़ासकर IOTLB miss पर।\nBenchmark असलियत से बुरे क्यों दिखते हैं ज़्यादातर लोग अपनी टेस्टिंग में यहीं गलती करते हैं।\nजिस Proxmox फ़ोरम थ्रेड ने यह लेख शुरू करवाया, उसमें उपयोगकर्ता iodepth=1 के साथ fio चला रहे थे। उस queue depth पर fio एक IO भेजता है, उसके पूरे होने का इंतज़ार करता है, फिर अगला भेजता है। टेस्ट बस हर IO की latency नाप रहा है। IOMMU overhead का हर माइक्रोसेकंड पूरा दिखता है।\nउस थ्रेड के आँकड़े कहानी साफ़ बताते हैं। bare metal पर completion latency औसतन लगभग 10µs थी। VM के अंदर औसतन लगभग 28µs। हर IO पर वह अतिरिक्त ~18µs IOMMU translation का overhead है। iodepth=1 पर यह throughput को सीधे आधा कर देता है, क्योंकि जब एक ही IO चल रहा हो तो throughput 1 / latency के बराबर होता है।\nqueue depth को 32 या 64 पर ले जाइए, जिस पर NVMe ड्राइव चलने के लिए बनी हैं, और तस्वीर बदल जाती है। कई IO एक साथ चलने पर IOMMU overhead उन सब में बँट जाता है। controller completions प्रोसेस करता रहता है जबकि नए translations हो रहे होते हैं। throughput bare metal के कुछ प्रतिशत के अंदर लौट आता है।\nव्यावहारिक सबक यह है। अगर आपका workload 4 से ऊपर की queue depth पर चलता है, तो IOMMU का throughput नुकसान शायद नगण्य है। इसमें ज़्यादातर डेटाबेस, वर्चुअलाइज़ेशन और स्टोरेज workload आ जाते हैं। अगर आपका workload कम queue depth पर latency के प्रति संवेदनशील है, जैसे कुछ real-time applications या synchronous metadata operations, तो आपको यह महसूस होगा।\nIOMMU नुकसान throughput की छत कम, queue depth की देन ज़्यादा है bare metal के हिस्से के रूप में VM throughput असली workload यहाँ रहते हैं 0% 25% 50% 75% 100% वह benchmark जो सब चलाते हैं iodepth=1 सिर्फ़ हर IO की latency नापता है, इसलिए 10 µs बनाम 28 µs पूरा दिखता है कुछ प्रतिशत के अंदर 1 2 4 8 16 32 64 queue depth (fio iodepth) उदाहरण के लिए, लेख के अपने 10 µs / 28 µs आँकड़ों से। वही हार्डवेयर, वही टेस्ट, वही overhead: बदलती है बस queue depth। इस कर्व के हर बिंदु पर overhead वही है। बदलता बस यह है कि उसे बाँटने के लिए कितने IO एक साथ चल रहे हैं। पासथ्रू को बहुत धीमा मानने से पहले अपने benchmark असली queue depth पर चलाएँ:\n# Bare metal baseline — run on the host before binding to vfio-pci fio --name=randread --ioengine=libaio --direct=1 --bs=4k \\ --iodepth=32 --numjobs=4 --rw=randread --size=1G \\ --filename=/dev/nvme0n1 --runtime=30 --time_based \\ --group_reporting # Same test inside the VM after passthrough fio --name=randread --ioengine=libaio --direct=1 --bs=4k \\ --iodepth=32 --numjobs=4 --rw=randread --size=1G \\ --filename=/dev/nvme0n1 --runtime=30 --time_based \\ --group_reporting clat (completion latency) percentiles और IOPS के आँकड़ों की तुलना करें। चार jobs के साथ iodepth=32 पर अंतर कुछ ही प्रतिशत अंकों का होना चाहिए, 50% नहीं।\nNUMA अलाइनमेंट इसका अपना लेख है। देखें Proxmox VE पर NUMA अलाइनमेंट: यह क्यों मायने रखता है और इसे सही कैसे करें।\nछोटे में: मल्टी-सॉकेट सिस्टम पर हर PCIe डिवाइस किसी खास सॉकेट से जुड़ा होता है। अगर NVMe ड्राइव NUMA नोड 1 पर है और VM के vCPU नोड 0 पर pin हैं, तो हर DMA completion इंटर-सॉकेट लिंक पार करता है। इससे हर operation में 50–100ns जुड़ते हैं। ऊँचे IOPS पर सही और गलत NUMA अलाइनमेंट के बीच throughput का फ़र्क 20–30% है।\ncat /sys/bus/pci/devices/0000:XX:00.0/numa_node से जाँचें, फिर VM config में affinity पैरामीटर से VM के vCPU को उसी नोड के कोरों पर pin करें। सिंगल-सॉकेट सिस्टम पर यह कोई चिंता नहीं है।\nPCIe Active State Power Management (ASPM) इसका अपना लेख है। देखें PCIe ASPM, और पासथ्रू के लिए इसे बंद क्यों करना चाहिए।\nछोटे में: ASPM, PCIe लिंक को idle रहने पर कम-बिजली वाली हालत में जाने देता है। पासथ्रू में फ़िज़िकल लिंक host के नियंत्रण में रहता है, पर डिवाइस guest का होता है। जब guest IO भेजता है और लिंक सो रहा होता है, तो जागने का समय latency में जुड़ जाता है। लक्षण है आपके clat percentiles में बड़ा फैलाव। p99 औसत से 5–10 गुना ऊँचा हो सकता है जबकि mean ठीक दिखता है।\nhost पर kernel command line में pcie_aspm=off से इसे बंद करें। अगर आपके NVMe controller को power state से लौटने में दिक्कत है, तो vfio-pci module options में disable_idle_d3=1 भी जोड़ें। Samsung 990 EVO Plus इसका जाना-माना उदाहरण है।\nMaxPayloadSize (MPS) इसका अपना लेख है। देखें PCIe MaxPayloadSize: पासथ्रू के लिए मुफ़्त परफ़ॉर्मेंस।\nछोटे में: PCIe डिवाइस डेटा Transaction Layer Packets में भेजते हैं। QEMU का वर्चुअल root complex डिफ़ॉल्ट रूप से 128-byte का अधिकतम payload देता है। ज़्यादातर डिवाइस 256 या 512 bytes सपोर्ट करते हैं। host kernel command line में pci=pcie_bus_perf जोड़ने से MPS उस अधिकतम पर सेट हो जाता है जिसकी हर डिवाइस का parent bus अनुमति देता है। throughput में यह छोटा सुधार है, कुछ ही प्रतिशत, पर यह मुफ़्त है और इसका कोई नुकसान नहीं।\nResizable BAR और MMIO aperture ऊपर बताई गई BAR mapping की समस्या के लिए BIOS और VM, दोनों तरफ़ व्यावहारिक कदम हैं।\nपहले, BIOS में Above 4G Decoding चालू करें। इससे BAR को 4GB सीमा के ऊपर के address space में मैप किया जा सकता है, जो बड़े BAR वाले किसी भी डिवाइस के लिए ज़रूरी है। सिर्फ़ NVMe पासथ्रू के लिए भी इसे चालू करें। इसका कोई नुकसान नहीं, और अगर बाद में आप GPU या बड़े BAR वाला कोई और डिवाइस जोड़ें तो समस्याएँ टल जाती हैं।\nअगर BIOS में ReBAR उपलब्ध है, तो उसे भी चालू करें। यह NVMe परफ़ॉर्मेंस पर सीधा असर नहीं डालेगा, पर उसी host के GPU को अपनी पूरी framebuffer mapping इस्तेमाल करने देगा।\nVM की तरफ़, QEMU के वर्चुअल Q35 root complex को इतनी बड़ी 64-bit MMIO खिड़की चाहिए कि guest बड़े किए गए BAR देख सके। डिफ़ॉल्ट रूप से OVMF अपेक्षाकृत छोटी खिड़की देता है। सिर्फ़ NVMe पासथ्रू के लिए यह ठीक है। NVMe BAR आराम से आ जाते हैं। पर अगर VM में NVMe और GPU दोनों पासथ्रू हैं, तो MMIO aperture बढ़ाएँ:\nargs: -fw_cfg name=opt/ovmf/X-PciMmio64Mb,string=65536 यह OVMF से 64GB की 64-bit MMIO space देने को कहता है, जो NVMe controller के छोटे BAR के साथ ज़्यादातर GPU framebuffers के लिए काफ़ी है।\nQEMU का ReBAR सपोर्ट बेहतर हो रहा है पर अभी भी सहज नहीं है। कुछ AMD GPU (Vega और नए) QEMU में ReBAR चालू होने पर driver errors देते हैं (Windows में Code 43)। अगर ऐसा हो, तो पहले कदम के तौर पर BIOS में ReBAR बंद करें। NVMe पासथ्रू पर इसका किसी भी तरह असर नहीं पड़ेगा।\nGPU की तरफ़ Resizable BAR क्या करता है, और Intel इसे Arc पर अनिवार्य क्यों मानता है जबकि NVIDIA इसे हर गेम के हिसाब से चालू करता है, यह देखने के लिए पढ़ें PCIe Resizable BAR और आधुनिक GPU: Intel Arc, NVIDIA और AMD।\nInterrupt संभालना ऊपर बताई गई interrupt पहुँचाने की समस्या के लिए एक व्यावहारिक ट्यूनिंग कदम है। posted interrupts (Intel पर APICv, AMD पर AVIC) शायद डिफ़ॉल्ट रूप से चालू न हों।\nजाँचें कि वे सक्रिय हैं या नहीं:\n# Intel — look for \u0026#34;Posted-Interrupts\u0026#34; in dmesg dmesg | grep -i \u0026#34;posted\u0026#34; # AMD — check AVIC support dmesg | grep -i \u0026#34;avic\u0026#34; पकड़कर पहुँचाया गया interrupt बनाम posted interrupts posted interrupts नहीं: completion लंबा रास्ता लेता है NVMeMSI-X भेजता है hypervisorउसे पकड़ता है डालनाguest में guest चलता हैउसे संभालता है VM exit VM entry 5–20 µs हर interrupt कुछ लाख IOPS पर यह मामूली चूक नहीं: यही सबसे बड़ी लागत है। Posted interrupts (Intel APICv / AMD AVIC): सीधे अंदर NVMeMSI-X भेजता है IOMMUसीधे लिखती है guest का virtual APIC page guest को बस interrupt दिखता है कोई exit नहीं कोई exit नहीं ~सैकड़ों ns कोई software जुगाड़ नहीं: posted interrupts हार्डवेयर की क्षमता हैं। पर वे हमेशा डिफ़ॉल्ट रूप से चालू नहीं होते, इसलिए धीमे रास्ते को अनिवार्य मानने से पहले जाँचें। चार कदम और दो VM exit, या guest के APIC page में एक write। ऊँचे IOPS पर यह फ़र्क किताबी नहीं रहता। AMD EPYC सिस्टम पर, अगर डिफ़ॉल्ट रूप से चालू न हो तो KVM module में AVIC चालू करें:\n# /etc/modprobe.d/kvm.conf options kvm_amd avic=1 Intel सिस्टम पर, VT-d सक्रिय होने पर posted interrupts वाला APICv आमतौर पर अपने आप चालू हो जाता है।\nअगर आपका प्लेटफ़ॉर्म posted interrupts सपोर्ट नहीं करता, तो कोई software जुगाड़ नहीं है। यह हार्डवेयर की क्षमता है। पर धीमे रास्ते को अनिवार्य मानने से पहले यह पक्का कर लेना चाहिए कि यह सचमुच चालू है।\nInterrupt affinity और queue अलाइनमेंट NVMe controller कई submission और completion queue जोड़े इस्तेमाल करते हैं। आमतौर पर हर CPU कोर का एक। जब VM के vCPU उन फ़िज़िकल कोरों से मेल नहीं खाते जो NVMe interrupts संभाल रहे हैं, तो completions को inter-processor interrupts के ज़रिए कोर पार करने पड़ते हैं। इससे latency जुड़ती है।\nguest के अंदर देखें कि NVMe driver ने कितनी IO queues बनाई हैं और वे कैसे मैप हैं:\n# List NVMe IO queues cat /proc/interrupts | grep nvme # Check affinity for irq in $(grep nvme /proc/interrupts | awk \u0026#39;{print $1}\u0026#39; | tr -d \u0026#39;:\u0026#39;); do echo \u0026#34;IRQ $irq: $(cat /proc/irq/$irq/smp_affinity_list)\u0026#34; done आदर्श रूप से हर NVMe IO queue का interrupt उसी vCPU से affinitise होना चाहिए जो उस queue में भेजता है। ज़्यादातर आधुनिक NVMe drivers यह अपने आप संभालते हैं। पर इसकी जाँच करना ठीक है, ख़ासकर अगर आपने vCPU हाथ से pin किए हैं या vCPU की संख्या controller की queues से कम कर दी है।\nहमेशा Q35 इस्तेमाल करें, i440fx नहीं यह अपने लेख का हक़दार है। देखें हमेशा Q35 इस्तेमाल करें, i440fx नहीं।\nछोटे में: i440fx एक सपाट पुरानी PCI bus दिखाता है। Q35 एक ठीक-ठाक PCIe root complex दिखाता है। i440fx पर पासथ्रू डिवाइस पुराने PCI की तरह दिखते हैं, जिससे MSI-X multi-queue interrupt delivery टूट जाती है। NVMe controller को अपनी queue-per-core बनावट के लिए MSI-X चाहिए। इसके बिना सारे IO completions एक ही interrupt से होकर जाते हैं और ऊँचे IOPS पर ऐसी रुकावट आती है जिसे कोई भी kernel ट्यूनिंग ठीक नहीं करेगी।\nProxmox 8.x और नए में नए VM के लिए Q35 डिफ़ॉल्ट है। अगर आप किसी पुराने VM पर पासथ्रू कर रहे हैं जो अभी भी i440fx पर है, तो उसे बदल दें। RHEL 10 ने i440fx को औपचारिक रूप से deprecate कर दिया है, और बाकी KVM इकोसिस्टम भी उसी राह पर है।\nसब कुछ एक साथ असर के क्रम में ट्यूनिंग कदमों का सार यह है।\nअसर के क्रम में ट्यूनिंग कदम, और हर एक असल में क्या बदलता है असर के क्रम में क्या बदलता है 1 NUMA अलाइनमेंट मल्टी-सॉकेट मशीन पर throughput का 20–30%। इस सूची में कुछ भी इसके पास नहीं। THROUGHPUT 2 ASPM बंद tail से जागने की latency हटाता है। औसत मुश्किल से हिलता है; p99 हिलता है। LATENCY उतार-चढ़ाव 3 असली queue depth मशीन पर कुछ नहीं बदलता। iodepth=1 से गलत नतीजा निकालने से रोकता है। माप 4 Posted interrupts (APICv / AVIC) हर interrupt माइक्रोसेकंड से नैनोसेकंड, पर तभी जब प्लेटफ़ॉर्म में हो। जाँचें, मानें नहीं। हर INTERRUPT की लागत 5 MaxPayloadSize: pci=pcie_bus_perf कुछ ही प्रतिशत। मुफ़्त, कोई नुकसान नहीं, तो सेट करें, पर इसे दिखने की उम्मीद न करें। तार का OVERHEAD 6 vfio-pci disable_idle_d3 नखरीले controller को D3 में मरने से बचाता है। गति नहीं, भरोसा। भरोसा क्रम दिया है, जानबूझकर पट्टियाँ नहीं बनाईं: इनकी इकाई एक नहीं, तो bar chart ऐसी तुलना का न्योता देता जो है ही नहीं। इस सूची में ऊपर से नीचे चलें, आड़े नहीं। मल्टी-सॉकेट मशीन पर पहली चीज़ बाकी सब मिलाकर से ज़्यादा कीमती है। NUMA अलाइनमेंट: पक्का करें कि NVMe ड्राइव और VM के vCPU एक ही NUMA नोड पर हों। मल्टी-सॉकेट सिस्टम पर अकेले इसी से throughput में 20–30% का फ़र्क आ सकता है।\nASPM बंद: host kernel command line में pcie_aspm=off जोड़ें। PCIe लिंक की power state बदलने से आने वाला latency का उतार-चढ़ाव खत्म होता है।\nअसली queue depth: iodepth=1 पर नहीं, iodepth=32 या उससे ऊपर टेस्ट करें। कम queue depth पर हावी IOMMU overhead असली depth पर बँट जाता है।\nPosted interrupts: पक्का करें कि APICv (Intel) या AVIC (AMD) सक्रिय है। हर interrupt का overhead माइक्रोसेकंड से घटकर नैनोसेकंड में आ जाता है।\nMPS optimisation: host kernel command line में pci=pcie_bus_perf जोड़ें। MaxPayloadSize को topology की अधिकतम सीमा पर सेट करता है।\nvfio-pci power management: अगर पासथ्रू में आपके NVMe controller को power state की दिक्कतें हैं, तो disable_idle_d3=1 जोड़ें।\nAMD EPYC सिस्टम पर NVMe पासथ्रू करने वाले Proxmox नोड की मिली-जुली host kernel command line कुछ ऐसी दिखेगी:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet amd_iommu=on iommu=pt pcie_aspm=off pci=pcie_bus_perf\u0026#34; Intel के लिए:\nGRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet intel_iommu=on iommu=pt pcie_aspm=off pci=pcie_bus_perf\u0026#34; जब पासथ्रू इसके लायक नहीं इस राह पर जाने से पहले यह पूछना ठीक है कि क्या आपको NVMe पासथ्रू की ज़रूरत है भी।\nNVMe पर टिकी वर्चुअल डिस्क के साथ VirtIO-SCSI और VirtIO-BLK पहले से ही बहुत कुशल हैं। पासथ्रू की तुलना में latency पर overhead आमतौर पर 5–10% है। ज़्यादातर workload के लिए throughput का फ़र्क नगण्य है।\nपासथ्रू तब समझ में आता है जब आपको guest OS से डिवाइस सीधे संभलवाना हो। इसमें SMART निगरानी, firmware अपडेट, TRIM/discard नियंत्रण, और reservations जैसे खास NVMe फ़ीचर आते हैं। यह उन workload के लिए भी समझ में आता है जो latency के प्रति संवेदनशील हैं, जहाँ कुछ माइक्रोसेकंड भी मायने रखते हैं। कुछ डेटाबेस इंजन और real-time डेटा ingest इसी श्रेणी में आते हैं।\nबाकी सब के लिए, ऊपर बताए व्यावहारिक समझौते, यानी live migration और snapshots व backup integration का न होना, आमतौर पर छोटे परफ़ॉर्मेंस फ़ायदे पर भारी पड़ते हैं।\nजब आसान रास्ता काम कर दे, तो कठिन रास्ता चुनने में कोई चतुराई नहीं।\nअपने बदलावों की जाँच ट्यूनिंग कदम लागू करने के बाद जाँचें कि सब कुछ उम्मीद के मुताबिक काम कर रहा है:\n# Host side — confirm IOMMU is in passthrough mode dmesg | grep -i iommu # Confirm ASPM is disabled lspci -vv | grep -i \u0026#34;ASPM Disabled\u0026#34; # Check MPS on the NVMe controller lspci -vv -s XX:00.0 | grep MaxPayload # Inside the VM — run the fio comparison fio --name=randread --ioengine=libaio --direct=1 --bs=4k \\ --iodepth=32 --numjobs=4 --rw=randread --size=1G \\ --filename=/dev/nvme0n1 --runtime=30 --time_based \\ --group_reporting VM के नतीजों की तुलना अपनी पहले की bare-metal baseline से करें। iodepth=32 पर throughput bare metal के 5% के अंदर होना चाहिए। औसत completion latency host के आँकड़ों से 10–15µs के अंदर होनी चाहिए। अगर अंतर अब भी बड़ा है, तो पहले NUMA अलाइनमेंट जाँचें। यही सबसे ज़्यादा अनदेखी की जाने वाली चीज़ है। और इसकी कीमत बस एक config बदलाव है, जो इसे ऐसी समस्या बनाता है जो हाथ में रह जाए तो सबसे अच्छी।\nसंदर्भ Linux kernel PCI documentation — MPS and MRRS tuning options — pcie_bus_perf, pcie_bus_safe और जुड़े पैरामीटरों का आधिकारिक स्रोत Proxmox VE Administration Guide — PCI(e) Passthrough — VFIO डिवाइस पासथ्रू configuration पर Proxmox का आधिकारिक दस्तावेज़ Proxmox Forum — NVMe Passthrough Performance — वह सामुदायिक चर्चा जिसने यह लेख शुरू करवाया ","permalink":"https://blogs.damiendye.uk/hi/proxmox/pcie-passthrough-performance-the-iommu-tax/","summary":"VFIO के ज़रिए VM में पासथ्रू करने पर PCIe डिवाइस throughput क्यों खोते हैं, और वे व्यावहारिक ट्यूनिंग कदम जो उसका ज़्यादातर हिस्सा वापस ले आते हैं।","title":"Proxmox VE पर PCIe पासथ्रू परफ़ॉर्मेंस: IOMMU टैक्स और उसे कम कैसे करें"},{"content":"NUMA क्या है NUMA का मतलब है Non-Uniform Memory Access। सिंगल-सॉकेट सिस्टम पर हर CPU कोर सिस्टम की पूरी RAM तक एक ही memory controller से पहुँचता है। कोई भी कोर अनुरोध करे और डेटा फ़िज़िकल मेमोरी में कहीं भी हो, पहुँचने में उतना ही समय लगता है।\nमल्टी-सॉकेट सिस्टम पर हर CPU सॉकेट का अपना memory controller और अपनी RAM होती है। सॉकेट 0 का कोर सॉकेट 0 से जुड़ी RAM तक जल्दी पहुँचता है: यह local memory है। वह सॉकेट 1 से जुड़ी RAM तक भी पहुँच सकता है, लेकिन उस अनुरोध को इंटर-सॉकेट लिंक (Intel UPI, AMD Infinity Fabric) पार करना पड़ता है। यह remote memory है, और यह धीमी है।\nkernel हर सॉकेट और उसकी local memory को एक NUMA नोड कहता है। डुअल-सॉकेट AMD EPYC सिस्टम में कम से कम दो NUMA नोड होते हैं। कुछ EPYC प्रोसेसर हर सॉकेट पर चार NUMA नोड दिखाते हैं (हर CCD का एक), यानी डुअल-सॉकेट बोर्ड पर आठ नोड।\nlocal और remote memory access के बीच परफ़ॉर्मेंस का फ़र्क मामूली नहीं है। local access लगभग 80–100ns का होता है। remote access लगभग 130–200ns का। यानी हर memory operation पर 50–100% का नुकसान। अपने आप में यह बहुत छोटी संख्या है। पर VM की पूरी ज़िंदगी में हर memory access पर चुकाई जाए, तो यह छोटी नहीं रहती।\nवर्चुअलाइज़ेशन के लिए यह क्यों मायने रखता है जब Proxmox कोई VM बनाता है, तो वह vCPU और RAM देता है। डिफ़ॉल्ट रूप से वे vCPU किसी भी सॉकेट के किसी भी फ़िज़िकल कोर पर शेड्यूल हो सकते हैं। VM की RAM किसी भी NUMA नोड के memory pool से आ सकती है।\nअगर scheduler किसी vCPU को सॉकेट 0 पर रखे और VM की RAM सॉकेट 1 पर हो, तो उस vCPU का हर memory access इंटर-सॉकेट लिंक पार करता है। अगर vCPU सॉकेटों के बीच उछलते रहें, और pin न होने पर वे उछलेंगे ही, तो memory access का पैटर्न गड़बड़ हो जाता है। कुछ access local होते हैं, कुछ remote, और VM की परफ़ॉर्मेंस उसी हिसाब से डगमगाती है।\nआम workload के लिए, जैसे वेब सर्वर, फ़ाइल सर्वर या डेस्कटॉप VM, यह अक्सर चल जाता है। overhead रहता है, पर बहुत सारे operations में बँट जाता है और हावी नहीं होता।\nIO-भारी workload के लिए, जैसे डेटाबेस, स्टोरेज सर्वर या भारी डिस्क या नेटवर्क IO करने वाली कोई भी चीज़, यह नुकसान बढ़ता जाता है। हर DMA completion, हर interrupt delivery, हर buffer copy में memory access होता है। अगर वे access सॉकेट पार कर रहे हैं, तो overhead तेज़ी से जुड़ता है।\nपासथ्रू के लिए यह क्यों मायने रखता है PCIe डिवाइस फ़िज़िकल रूप से किसी खास CPU सॉकेट से जुड़े होते हैं। हर सॉकेट का अपना PCIe root complex होता है। स्लॉट 3 की NVMe ड्राइव सॉकेट 0 की PCIe lanes पर हो सकती है। स्लॉट 5 का GPU सॉकेट 1 की lanes पर हो सकता है।\nजब कोई डिवाइस DMA करता है, तो डेटा उस NUMA नोड से जुड़ी मेमोरी में जाता है जिस पर IOMMU उसे मैप करता है। अगर VM की RAM डिवाइस के local नोड से ली गई है, तो DMA write सीधे local memory में जाता है। अगर RAM दूसरे नोड पर है, तो हर DMA operation इंटर-सॉकेट लिंक पार करता है।\nलाखों IOPS करती NVMe ड्राइव के लिए हर operation पर 50–100ns का नुकसान जुड़ता जाता है। 4KB random reads के साथ iodepth=32 पर, सही और गलत NUMA अलाइनमेंट के बीच throughput का फ़र्क 20–30% हो सकता है। और यह IOMMU overhead, ASPM, MPS या किसी और चीज़ को देखने से पहले की बात है।\nगलत NUMA अलाइनमेंट हर DMA को इंटर-सॉकेट लिंक के पार भेजता है; सही अलाइनमेंट उसे local रखता है गलत अलाइनमेंट: VM नोड 0 पर, ड्राइव नोड 1 पर NUMA नोड 0 कोर 0–15 RAM 128 GB VM: vCPU 0–15 पर pin, RAM यहीं से NUMA नोड 1 कोर 16–31 RAM 128 GB NVMe: root complex 1 UPI / IF हर DMA लिंक पार करता है: 130–200 ns सही अलाइनमेंट: vCPU, RAM और ड्राइव सब नोड 1 पर NUMA नोड 0 कोर 0–15 RAM 128 GB दूसरे VM के लिए खाली NUMA नोड 1 कोर 16–31 RAM 128 GB NVMe: root complex 1 VM: affinity 16-31, numa0 hostnodes=1, policy=bind खाली 80–100 ns iodepth=32 और 4 KB random reads पर इन दोनों के बीच throughput का अंतर 20–30% है, IOMMU overhead, ASPM या MPS के आने से पहले ही। सिंगल-सॉकेट सिस्टम पर न दूसरा नोड है, न इंटर-सॉकेट लिंक, इसलिए इसमें से कुछ भी लागू नहीं होता। दोनों ओर हार्डवेयर वही है। फ़र्क बस इतना है कि VM किस नोड पर pin हुआ, और क्या ड्राइव के DMA को VM की मेमोरी तक पहुँचने के लिए लिंक पार करना पड़ता है। यही बात नेटवर्क कार्ड, GPU और पासथ्रू किए गए किसी भी दूसरे डिवाइस पर लागू होती है। डिवाइस का DMA ट्रैफ़िक local memory में पहुँचना चाहिए, और उस ट्रैफ़िक को प्रोसेस करने वाले vCPU भी उसी नोड पर होने चाहिए।\nअपनी topology कैसे जाँचें डिवाइस किस NUMA नोड पर है # Replace 0000:XX:00.0 with your device\u0026#39;s PCI address from lspci cat /sys/bus/pci/devices/0000:XX:00.0/numa_node यह NUMA नोड का नंबर लौटाता है। अगर यह -1 लौटाए, तो kernel नोड तय नहीं कर पाया। कुछ PCIe स्विच के पीछे लगे डिवाइसों के साथ कभी-कभी ऐसा होता है। उस हालत में lspci -tv से PCIe topology हाथ से देखें और root port को सॉकेट से मिलाएँ।\nअपना पूरा NUMA लेआउट देखें numactl --hardware यह आपको हर NUMA नोड दिखाता है: उस पर कितने CPU कोर हैं, कितनी मेमोरी जुड़ी है, और नोडों के बीच की दूरी (सापेक्ष लागत)।\nडुअल-सॉकेट EPYC सिस्टम का उदाहरण आउटपुट:\navailable: 2 nodes (0-1) node 0 cpus: 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 node 0 size: 131072 MB node 1 cpus: 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 node 1 size: 131072 MB node distances: node 0 1 0: 10 32 1: 32 10 numactl --hardware की नोड दूरी तालिका पढ़ना दूरी की तालिका, स्रोत:\u0026#160;numactl --hardware डुअल सॉकेट, हर सॉकेट पर 2 NUMA नोड। सापेक्ष लागत, नैनोसेकंड नहीं। नोड 0 नोड 1 नोड 2 नोड 3 नोड 0 नोड 1 नोड 2 नोड 3 10 16 32 32 16 10 32 32 32 32 10 16 32 32 16 10 सॉकेट 0 सॉकेट 1 10: वही नोड, local memory 16: वही सॉकेट, दूसरा नोड 32: इंटर-सॉकेट लिंक के पार VM और उसके डिवाइस को एक ही 10 में pin करें, और उसकी मेमोरी को कभी 32 पर न जाने दें। 2-नोड बोर्ड सिर्फ़ 10 और 32 दिखाता है; 16 तब दिखते हैं जब एक सॉकेट कई नोड दिखाता है। ये संख्याएँ सापेक्ष लागत हैं, नैनोसेकंड नहीं। VM और उसके डिवाइस को एक ही 10 के अंदर रखें, और उसकी मेमोरी को कभी 32 पर न जाने दें। दूरी वाली तालिका सापेक्ष लागत बताती है। 10 local है। 32 remote है। बड़ी संख्या का मतलब ज़्यादा hops। हर सॉकेट पर चार नोड वाले EPYC सेटअप में कुछ नोड-जोड़ों की दूरी 32 होती है और कुछ की 16, यह इस पर निर्भर है कि वे किस CCD पर हैं।\nडिवाइसों को नोडों से मिलाएँ # List all PCI devices and their NUMA nodes for dev in /sys/bus/pci/devices/*; do node=$(cat \u0026#34;$dev/numa_node\u0026#34; 2\u0026gt;/dev/null) echo \u0026#34;$(basename $dev) node=$node $(lspci -s $(basename $dev) 2\u0026gt;/dev/null | cut -d\u0026#39; \u0026#39; -f2-)\u0026#34; done इससे आपको पूरी तस्वीर मिल जाती है कि कौन सा डिवाइस किस नोड पर है। अपने NVMe controller, नेटवर्क कार्ड और पासथ्रू किए जा रहे GPU देखें।\nProxmox में VM को अलाइन कैसे करें vCPU को सही नोड पर pin करें VM की config फ़ाइल (/etc/pve/qemu-server/\u0026lt;vmid\u0026gt;.conf) में:\nnuma: 1 affinity: 0-15 # Adjust to match cores on the correct NUMA node affinity पैरामीटर VM के vCPU को खास फ़िज़िकल कोरों पर pin करता है। इसे उन कोरों की रेंज पर सेट करें जो आपके पासथ्रू किए गए डिवाइस वाले NUMA नोड पर हैं।\nअगर आपकी NVMe नोड 1 पर है और नोड 1 के कोर 16–31 हैं, तो affinity: 16-31 सेट करें। अगर VM को सिर्फ़ 8 vCPU चाहिए, तो उनके एक हिस्से पर pin करें: affinity: 16-23।\nमेमोरी सही नोड से लें VM config में numa: 1 चालू करने से Proxmox VM को NUMA topology दिखाता है। QEMU कोशिश करेगा कि VM की मेमोरी उसी NUMA नोड से आए जहाँ vCPU pin हैं।\nपूरे नियंत्रण के लिए आप VM config में NUMA topology खुद सेट कर सकते हैं:\nnuma0: cpus=0-7,hostnodes=0,memory=16384,policy=bind यह QEMU को बताता है कि VM के पहले NUMA नोड (guest की नज़र से नोड 0) को host के NUMA नोड 0 से बाँधे, कोर 0–7 और 16GB मेमोरी के साथ। policy=bind पक्का करता है कि मेमोरी सख्ती से उसी नोड से ली जाए, न कि local pool पर दबाव पड़ने पर दूसरे नोडों से।\npinning की जाँच करें VM शुरू करने के बाद देखें कि vCPU सचमुच वहीं चल रहे हैं जहाँ आप उम्मीद करते हैं:\n# Find the QEMU process pgrep -a qemu | grep \u0026lt;vmid\u0026gt; # Check CPU affinity of the process taskset -cp \u0026lt;pid\u0026gt; # Or check per-vCPU thread affinity for tid in $(ls /proc/\u0026lt;pid\u0026gt;/task/); do echo \u0026#34;Thread $tid: $(taskset -cp $tid 2\u0026gt;/dev/null)\u0026#34; done आम गलतियाँ pin ही न करना अगर आप affinity सेट नहीं करते, तो VM के vCPU किसी भी कोर पर शेड्यूल हो सकते हैं। kernel का scheduler load balancing के हिसाब से उन्हें नोडों के बीच ले जाएगा। हर बार जब कोई vCPU एक नोड से दूसरे पर जाता है, तो पुराने नोड के cache में जिस डेटा पर वह काम कर रहा था, वह remote हो जाता है।\nआम VM के लिए यह ठीक है। भारी IO करने वाले पासथ्रू VM के लिए नहीं।\nगलत नोड पर pin करना pin करने से पहले डिवाइस का NUMA नोड जाँचें। मान कर न चलें। कुछ मदरबोर्ड पर फ़िज़िकल स्लॉट की नंबरिंग NUMA नोड से किसी साफ़ तरीके से मेल नहीं खाती। हमेशा cat /sys/bus/pci/devices/.../numa_node से पुष्टि करें।\nएक नोड पर ज़रूरत से ज़्यादा भार अगर आप एक ही NUMA नोड पर बहुत सारे VM pin कर दें, तो उस नोड के कोरों पर ज़रूरत से ज़्यादा भार पड़ता है और local memory pool खत्म हो जाता है। जब मेमोरी remote नोड पर चली जाती है, तो आपको दोनों का सबसे बुरा हिस्सा मिलता है: pin किए गए vCPU और remote memory।\nअपने VM नोडों में बराबर बाँटें। अगर आपके पास दो NUMA नोड और चार VM हैं, तो उन्हें बराबर फैलाएँ।\nmemory allocation भूल जाना memory allocation को नियंत्रित किए बिना सिर्फ़ vCPU pin करने से आधा ही फ़ायदा मिलता है। vCPU सही नोड पर हैं, पर मेमोरी शायद नहीं। policy=bind इस्तेमाल करें, या कम से कम numa: 1 चालू करें ताकि QEMU का allocation CPU pinning के पीछे चले।\nसिंगल-सॉकेट सिस्टम सिंगल-सॉकेट सिस्टम पर सब कुछ NUMA नोड 0 पर है। एक ही memory controller है और PCIe lanes का एक ही सेट। NUMA अलाइनमेंट कोई चिंता नहीं है।\nआप तब भी VM config में numa: 1 सेट कर सकते हैं, इससे कुछ बिगड़ेगा नहीं, पर कुछ सुधरेगा भी नहीं। एक सॉकेट, एक memory controller, अलाइन करने को कुछ नहीं। यह मेहनत उस मशीन के लिए बचा कर रखें जिसमें दो हों। इसलिए यहाँ बताए गए परफ़ॉर्मेंस फ़ायदे सिर्फ़ उन मल्टी-सॉकेट सिस्टम पर लागू होते हैं जिनमें इंटर-सॉकेट लिंक होता है।\nसंदर्भ Proxmox VE Administration Guide — CPU and NUMA Configuration — vCPU pinning और NUMA विकल्पों पर आधिकारिक दस्तावेज़ Linux kernel NUMA documentation — kernel की memory policy का संदर्भ AMD EPYC 7003 Series — BIOS \u0026amp; Workload Tuning Guide (doc 58002) — NUMA-per-socket और CCD/CCX topology पर AMD का दस्तावेज़ ","permalink":"https://blogs.damiendye.uk/hi/proxmox/numa-alignment-proxmox/","summary":"मल्टी-सॉकेट सिस्टम पर, अगर किसी VM के vCPU एक NUMA नोड पर हैं और उसका पासथ्रू किया गया डिवाइस दूसरे नोड पर, तो बाकी कुछ भी देखने से पहले ही 20–30% throughput चला जाता है।","title":"Proxmox VE पर NUMA अलाइनमेंट: यह क्यों मायने रखता है और इसे सही कैसे करें"},{"content":"ASPM क्या करता है PCIe Active State Power Management (ASPM) PCIe लिंक को idle होने पर low-power स्टेट में जाने देता है। PCIe specification कई लिंक स्टेट परिभाषित करती है:\nL0 पूरी तरह active स्टेट है। लिंक चालू है, दोनों सिरों को पावर मिल रही है, डेटा तुरंत बह सकता है।\nL0s एक हल्की idle स्टेट है। लिंक आंशिक रूप से पावर डाउन होता है। L0 पर लौटने में हार्डवेयर के हिसाब से लगभग 1–4µs लगते हैं। दोनों सिरे अलग-अलग L0s में जा सकते हैं।\nL1 एक गहरी idle स्टेट है। लिंक के दोनों सिरे एक साथ पावर डाउन होते हैं। L0 पर लौटने में ज़्यादा समय लगता है: आमतौर पर 2–32µs, कभी-कभी उससे भी ज़्यादा। लौटने का सही समय डिवाइस, PCIe पीढ़ी और प्लेटफ़ॉर्म पर निर्भर है।\nL1.1 और L1.2 L1 की substates हैं जो PCIe 3.0 में आईं। ये PLL clock reference बंद करके पावर और घटाती हैं। L1.2 से लौटने में 32–100µs लग सकते हैं। स्टोरेज डिवाइस के लिए यह गोलाई की गलती नहीं है। यह लगभग उतना ही लंबा है जितना वह read जो आप शुरू में करने चले थे।\nलिंक जितना गहरा सोता है, अगला IO उतना लंबा इंतज़ार करता है लिंक स्टेट L0 पर लौटने का समय: वह latency जो अभी आने वाला IO चुकाता है L0 पूरी तरह active: डेटा तुरंत बहता है कुछ नहीं L0s हल्का idle, हर सिरा अलग-अलग 1–4 µs L1 गहरा idle, दोनों सिरे एक साथ 2–32 µs L1.1 / L1.2 PCIe 3.0 substates: PLL clock बंद 32–100 µs बार 100 µs वाले सबसे बुरे केस के अनुपात में हैं। गहरी नींद ज़्यादा पावर बचाती है और जागने पर ज़्यादा कीमत लेती है। बार लौटने के समय हैं, 100 µs वाले सबसे बुरे केस के अनुपात में बनाए गए। गहरी नींद ज़्यादा पावर बचाती है और ट्रैफ़िक लौटने पर ज़्यादा कीमत वसूलती है। विचार सीधा है। अगर कोई PCIe लिंक कुछ माइक्रोसेकंड के लिए idle है, तो उसे कम पावर वाली स्टेट में भेज दो। जब ट्रैफ़िक लौटे, उसे जगा दो। बीच में थोड़ी पावर बचा लो।\nलैपटॉप या डेस्कटॉप मशीन पर, जो ज़्यादातर समय कुछ नहीं करती, ASPM असली पावर बचाता है। हर लिंक पर कुछ वॉट, सिस्टम के सारे PCIe डिवाइस में जुड़ते हुए। IO-भारी वर्कलोड चलाने वाले सर्वर पर लिंक शायद ही कभी इतनी देर idle रहते हैं कि ASPM कुछ खास कर सके।\nपासथ्रू में यह समस्या क्यों बनता है bare metal पर OS और डिवाइस ड्राइवर मिलकर पावर मैनेजमेंट तय करते हैं। NVMe ड्राइवर जानता है कि लिंक कब idle होने वाला है और कब वह नया IO भेजने वाला है। Kernel का PCIe subsystem लिंक स्टेट के बदलावों को ड्राइवर के साथ तालमेल में रखता है। सब कुछ सिंक में है।\nVFIO पासथ्रू में वह तालमेल टूट जाता है।\nहोस्ट kernel अब भी भौतिक PCIe लिंक को नियंत्रित करता है। गेस्ट VM VFIO के ज़रिए डिवाइस का मालिक है, लेकिन लिंक को खुद नियंत्रित नहीं करता। होस्ट का PCIe subsystem देखता है कि लिंक idle हो गया, क्योंकि होस्ट के नज़रिए से कोई होस्ट-साइड ड्राइवर उसे इस्तेमाल नहीं कर रहा। वह लिंक को low-power स्टेट में भेज देता है। जब गेस्ट IO भेजता है, तो डिवाइस को लिंक वापस L0 में चाहिए। लौटने का समय उस IO ऑपरेशन पर अतिरिक्त latency के रूप में दिखता है।\nनतीजा है असंगत latency। ज़्यादातर IO सामान्य स्पीड से पूरे होते हैं। कुछ बहुत ज़्यादा समय लेते हैं क्योंकि वे ऐसे लिंक से टकराते हैं जो L1 या L1.2 में है और पहले उसे जागना पड़ता है। यह आपके clat (completion latency) percentiles में बड़े फैलाव के रूप में दिखता है। औसत ठीक दिख सकता है। p99 5–10x ज़्यादा हो सकता है।\nइसे पकड़ना मुश्किल है क्योंकि औसत throughput के आँकड़े ठीक दिख सकते हैं। समस्या आपको तभी दिखती है जब आप tail latency देखते हैं। कई benchmark इसे तब तक उभारते नहीं जब तक आप percentile आउटपुट न माँगें।\nASPM औसत को नहीं छूता और tail बिगाड़ देता है ASPM चालू pcie_aspm=off completion latency (µs) 0 30 60 90 120 p99 पर 3× बदतर, और अपने औसत का 7× ASPM चालू pcie_aspm=off p50 p90 p99 p99.9 p99.99 दोनों रन में औसत और p50 एक जैसे हैं: सिर्फ़ tail उन्हें अलग करती है। आँकड़े पैटर्न दिखाने के लिए हैं, किसी खास ड्राइव के माप नहीं। वही ड्राइव, ASPM के साथ और बिना। p50 एक जैसा है, तो सिर्फ़ औसत देखने वाला benchmark कोई समस्या नहीं बताता; सारा नुकसान p90 के बाद है, जहाँ वे IO जमा होते हैं जो सोते हुए लिंक से टकराए। VFIO वाला खास पेंच यहाँ एक पेंच है जो बुनियादी “होस्ट और गेस्ट लिंक स्टेट पर लड़ रहे हैं” वाली समस्या से आगे जाता है।\nजब कोई डिवाइस होस्ट पर vfio-pci से bound होता है, तो होस्ट kernel जानता है कि डिवाइस पासथ्रू मोड में है। लेकिन PCIe ASPM पॉलिसी लिंक के स्तर पर लागू होती है, डिवाइस के स्तर पर नहीं। होस्ट की ASPM पॉलिसी अब भी भौतिक लिंक पर लागू होती है क्योंकि PCIe topology अब भी होस्ट की है।\nVFIO ASPM के बदलावों को न रोकता है, न ओवरराइड करता है। यह डिवाइस का BAR space और interrupts पासथ्रू करता है, लेकिन लिंक का पावर मैनेजमेंट होस्ट के नियंत्रण में रहता है। गेस्ट के पास होस्ट को यह कहने का कोई तरीका नहीं कि “इस लिंक को L0 में रखो।”\nडिवाइस गेस्ट का है; लिंक अब भी होस्ट का है, और दोनों के बीच कोई चैनल नहीं गेस्ट VM NVMe ड्राइवर डिवाइस का मालिक, IO भेजता है होस्ट kernel PCIe subsystem ASPM पॉलिसी vfio-pci D-state पॉलिसी कहने का कोई तरीका नहीं “इस लिंक को L0 में रखो” भौतिक PCIe लिंक: L1 में, सोया हुआ यह होस्ट तय करता है, गेस्ट नहीं होस्ट को कोई ड्राइवर नहीं दिखता, तो लिंक को सोने देता है गेस्ट IO भेजता है, L0 की उम्मीद में यह IO लिंक के जागने का इंतज़ार करता है: 2–32 µs, या L1.2 से 100 µs तक VFIO BAR space और interrupts पासथ्रू करता है। लिंक पावर मैनेजमेंट सौदे का हिस्सा नहीं है। ज़्यादातर IO सोते लिंक से टकराते ही नहीं, इसीलिए सिर्फ़ tail हिलती है। वह बँटवारा जिससे यह होता है: गेस्ट डिवाइस का मालिक है और IO भेजता है, होस्ट लिंक का मालिक है और तय करता है कि वह कब सोए, और दोनों को कुछ भी नहीं जोड़ता। कुछ नए हार्डवेयर और kernel वर्ज़न इसे दूसरों से बेहतर संभालते हैं। इसलिए सबसे सुरक्षित तरीका है ASPM को पूरी तरह तस्वीर से बाहर कर देना।\nइसे बंद कैसे करें होस्ट की kernel command line में pcie_aspm=off जोड़िए:\n# Edit /etc/default/grub GRUB_CMDLINE_LINUX_DEFAULT=\u0026#34;quiet pcie_aspm=off\u0026#34; # Update GRUB and reboot update-grub reboot यह होस्ट को किसी भी PCIe लिंक को low-power स्टेट में डालने से रोकता है। यह ग्लोबल रूप से लागू होता है। होस्ट का हर PCIe डिवाइस, सिर्फ़ वह नहीं जो पासथ्रू हो रहा है।\nरीबूट के बाद जाँचिए:\n# Should show \u0026#34;ASPM Disabled\u0026#34; for all devices lspci -vv | grep -i \u0026#34;ASPM\u0026#34; पावर की कीमत ASPM बंद करने से idle पावर खपत सच में बढ़ती है। हर PCIe लिंक जो वरना L1 में होता, L0 में रहता है और कुछ सौ मिलीवॉट ज़्यादा खाता है। दस या पंद्रह PCIe डिवाइस वाले सिस्टम में यह idle पर 2–5 वॉट तक जुड़ सकता है।\nडेटा सेंटर के सर्वर के लिए 2–5 वॉट बिजली के बिल पर गोलाई की गलती है। होम लैब के लिए यह उसका एक छोटा हिस्सा है जो CPU और मेमोरी खा रहे हैं। लैपटॉप के लिए यह मायने रखता है। पर आप लैपटॉप की बैटरी पर VFIO पासथ्रू तो कर नहीं रहे होंगे।\nसौदा साफ़ है। idle पावर के कुछ वॉट, बनाम आपके पासथ्रू किए डिवाइस पर अनिश्चित latency spikes। पासथ्रू करने वाले किसी भी सिस्टम पर ASPM बंद होना चाहिए।\nडिवाइस-स्तर की पावर स्टेट की समस्याएँ ASPM PCIe लिंक की पावर स्टेट नियंत्रित करता है। डिवाइस का अपना पावर मैनेजमेंट भी होता है: PCIe D-states (D0 से D3 तक)।\nजब कोई डिवाइस D3 में होता है (पूरी तरह पावर डाउन), तो सिर्फ़ लिंक नहीं सोया होता। डिवाइस खुद रुक गया होता है। VFIO पासथ्रू में होस्ट का vfio-pci ड्राइवर डिवाइस को D3 में डाल सकता है जब VM नहीं चल रहा हो, या जब होस्ट की पावर मैनेजमेंट पॉलिसी तय करे कि डिवाइस idle है।\nकुछ NVMe कंट्रोलर D3 से D0 का बदलाव ठीक से नहीं संभालते। वे ठीक से वापस नहीं आते, गेस्ट डिवाइस खो देता है, और निकलने का अकेला रास्ता VM रीस्टार्ट है, या कभी-कभी होस्ट रीबूट।\nSamsung 990 EVO Plus एक जाना-माना दोषी है। इलाज है vfio-pci का disable_idle_d3 मॉड्यूल ऑप्शन:\n# /etc/modprobe.d/vfio.conf options vfio-pci disable_idle_d3=1 यह vfio-pci को idle होने पर किसी भी bound डिवाइस को D3 में डालने से रोकता है। pcie_aspm=off की तरह यह ग्लोबल सेटिंग है। vfio-pci से bound हर डिवाइस D0 में रहता है। पासथ्रू के लिए आमतौर पर आप यही चाहते हैं, जहाँ डिवाइस की पावर स्टेट को सिर्फ़ गेस्ट नियंत्रित करे।\ndisable_idle_d3 ऑप्शन ASPM से अलग है। ASPM लिंक को नियंत्रित करता है। D3 डिवाइस को नियंत्रित करता है। दोनों अलग-अलग समस्या पैदा कर सकते हैं। साफ़ पासथ्रू कॉन्फ़िगरेशन के लिए दोनों बंद कीजिए।\nहर डिवाइस के लिए ASPM कंट्रोल अगर आप ASPM को ग्लोबल रूप से बंद नहीं करना चाहते (शायद होस्ट पर दूसरे PCIe डिवाइस हैं जिन्हें पावर बचत से फ़ायदा होता है), तो आप sysfs के ज़रिए हर लिंक पर ASPM नियंत्रित कर सकते हैं:\n# Find the link\u0026#39;s ASPM policy cat /sys/bus/pci/devices/0000:XX:00.0/link/l1_aspm # Disable ASPM for a specific link echo 0 \u0026gt; /sys/bus/pci/devices/0000:XX:00.0/link/l1_aspm यह ज़्यादा निशाने पर है, लेकिन रीबूट और kernel अपडेट के पार कम भरोसेमंद। ज़्यादातर पासथ्रू सेटअप के लिए ग्लोबल pcie_aspm=off kernel फ़्लैग ज़्यादा सरल और ज़्यादा अनुमान लगाने लायक है।\nजब समस्या ASPM नहीं है latency का हर उतार-चढ़ाव ASPM नहीं होता।\nअगर आपके clat percentiles लगातार ऊँचे हैं (सिर्फ़ tail नहीं), तो समस्या ज़्यादा संभावना से IOMMU translation ओवरहेड, NUMA का गलत तालमेल, या MPS mismatch है। ASPM खास तौर पर दो-हिस्सों वाला पैटर्न बनाता है (ज़्यादातर IO तेज़, कुछ धीमे) क्योंकि यह सिर्फ़ उन IO पर असर डालता है जो संयोग से तब पहुँचते हैं जब लिंक low-power स्टेट में हो।\nASPM पहले जाँचिए जब आपको दिखे:\np99 latency औसत से 5x या उससे ज़्यादा अलग-अलग रन के बीच असंगत fio नतीजे latency जो लगातार लोड में सुधरती है पर रुक-रुककर आने वाले वर्कलोड में बिगड़ती है अगर लोड का पैटर्न कुछ भी हो, latency लगातार खराब है, तो कहीं और देखिए। ASPM को जल्दी खारिज करना फ़ायदेमंद है क्योंकि इसे टेस्ट करना सस्ता है। फिर भी यह हर धीमे लिंक का जवाब नहीं है, और जब आँकड़े पैटर्न से मेल न खाएँ तब इसके पीछे भागना एक ऐसी दोपहर है जो आपको वापस नहीं मिलेगी।\nसंदर्भ Linux kernel PCI documentation — ASPM parameters — pcie_aspm=off और उससे जुड़े ऑप्शन को कवर करने वाला kernel source Proxmox Forum — PCI Passthrough NVMe Unable to Change Power State — Samsung NVMe कंट्रोलर के लिए disable_idle_d3 पर कम्युनिटी थ्रेड Proxmox VE Wiki — PCI(e) Passthrough — पासथ्रू कॉन्फ़िगरेशन पर आधिकारिक डॉक्यूमेंटेशन ","permalink":"https://blogs.damiendye.uk/hi/proxmox/pcie-aspm-passthrough/","summary":"Active State Power Management idle PCIe लिंक पर कुछ वॉट बचाता है। VFIO पासथ्रू में यह latency में ऐसा उतार-चढ़ाव जोड़ता है जिसे पकड़ना मुश्किल और ठीक करना आसान है।","title":"PCIe ASPM, और पासथ्रू के लिए इसे बंद क्यों करना चाहिए"},{"content":"MPS क्या है PCIe डिवाइस डेटा को पैकेटों में भेजते हैं जिन्हें Transaction Layer Packets (TLPs) कहते हैं। हर TLP में एक header और एक payload होता है। उस payload का अधिकतम आकार MaxPayloadSize (MPS) है।\nlink training के दौरान डिवाइस और उसके ऊपर वाले bridge के बीच MPS तय होता है। तय की गई वैल्यू वह होती है जो डिवाइस के सपोर्ट और bridge की अनुमति में से छोटी हो। डिवाइस और root complex के बीच रास्ते के हर bridge और switch की अपनी MPS क्षमता होती है। किसी भी डिवाइस का अंतिम MPS उस श्रृंखला के सबसे तंग बिंदु से तय होता है।\nआम MPS वैल्यू 128, 256 और 512 bytes हैं। कुछ डिवाइस 1024 या 4096 bytes तक सपोर्ट करते हैं, पर व्यवहार में NVMe controller और नेटवर्क कार्ड के लिए 256 या 512 आम है। GPU अक्सर 256 bytes सपोर्ट करते हैं।\nयह क्यों मायने रखता है बड़े MPS का मतलब है उतने ही डेटा के लिए कम पैकेट। MPS 128 पर 4KB IO भेजने के लिए 32 TLP चाहिए। MPS 512 पर वही ट्रांसफ़र 8 TLP में होता है।\nहर TLP के साथ प्रोटोकॉल overhead आता है: header, CRC, framing। कम TLP का मतलब है हर byte पर कम प्रोटोकॉल overhead। ऊँचे throughput पर यह फ़र्क मापा जा सकता है। नाटकीय नहीं। पर असली। और यह वही overhead है, जो हर पैकेट पर चुकाया जाता है।\nMPS इस पर भी असर डालता है कि PCIe लिंक का कितना अच्छा इस्तेमाल होता है। छोटे payload का मतलब है कि लिंक डेटा की तुलना में headers पर ज़्यादा समय लगाता है। बड़े payload यह अनुपात काम के डेटा की ओर ले जाते हैं।\nवही 4 KB payload: MPS 128 पर 32 पैकेट headers, MPS 512 पर 8 MPS 128: 4 KB ट्रांसफ़र 32 TLP बनता है 32 headers × ≈24 B:\u0026#160;तार पर ≈16% bytes प्रोटोकॉल overhead MPS 512: वही 4 KB 8 TLP बनता है 8 headers × ≈24 B:\u0026#160;तार पर ≈4% bytes प्रोटोकॉल overhead header, sequence number, CRC और framing payload दोनों पट्टियाँ वही 4 KB ले जाती हैं। बड़े payload ज़्यादा डेटा नहीं ले जाते, बस लिंक उसे बताने में कम खर्च करता है। मापा गया फ़ायदा छोटा है। दोनों पट्टियाँ वही 4 KB ले जाती हैं। ठोस पट्टियाँ हर पैकेट के header हैं: MPS 128 पर 32, MPS 512 पर सिर्फ़ 8। latency पर असर throughput से कम है। MPS 128 और 512 पर एक अकेले 4KB read में latency का कोई मापने लायक फ़र्क नहीं दिखेगा, क्योंकि TLP pipeline में चलते हैं। पर ढेर सारे ट्रांसफ़र एक साथ चलाकर ऊँचे IOPS पर जाइए, तो बड़े MPS से घटा overhead जुड़ता जाता है।\nपासथ्रू में समस्या bare metal पर BIOS POST के दौरान PCIe topology के हिसाब से MPS सेट करता है। आधुनिक सर्वर BIOS आमतौर पर MPS को topology की अधिकतम सीमा पर रखता है, अक्सर 256 या 512 bytes।\nQEMU में वर्चुअल Q35 chipset के root complex की अपनी MPS क्षमता होती है। डिफ़ॉल्ट रूप से यह कम MPS दिखाता है। Linux kernel की डिफ़ॉल्ट MPS policy (pcie_bus_default) हर डिवाइस का MPS उसके parent bridge के बराबर करती है, जो वर्चुअल topology में QEMU root complex का डिफ़ॉल्ट है। अक्सर 128 bytes।\nइसलिए जो डिवाइस 512-byte payload कर सकता है, वह 128 पर चलता है, क्योंकि छत वर्चुअल root complex ने तय कर दी।\nMPS रास्ते के सबसे तंग बिंदु से तय होता है, और QEMU में वह वर्चुअल root complex है Bare metal: BIOS असली topology से MPS तय करता है NVMe512 सपोर्ट करता है PCIe switch512 की अनुमति Root complex512 की अनुमति MPS = 512 B रास्ते में सबसे छोटा VM में पासथ्रू: अब वर्चुअल root complex सबसे तंग बिंदु है NVMe512 सपोर्ट करता है QEMU Q35 वर्चुअल root complex डिफ़ॉल्ट रूप से 128 MPS = 128 B डिवाइस की क्षमता बेकार host kernel में\u0026#160;pci=pcie_bus_perf NVMe512 सपोर्ट करता है हर डिवाइस अपने parent bus की अधिकतम पर MRRS भी उसी हिसाब से MPS = 512 B host पर सेट करें, guest पर नहीं MPS रास्ते की सबसे छोटी वैल्यू है। डिवाइस को पासथ्रू करने से वर्चुअल root complex उस रास्ते में आ जाता है, और उसका सतर्क डिफ़ॉल्ट सबकी छत बन जाता है। इसे कैसे ठीक करें: host की तरफ़ kernel से कहें कि हर डिवाइस का MPS उसके parent bus की अधिकतम सीमा पर रखे:\n# Add to GRUB_CMDLINE_LINUX_DEFAULT in /etc/default/grub pci=pcie_bus_perf यह हर डिवाइस का MPS उस सबसे बड़ी वैल्यू पर रखता है जिसकी उसका parent bus अनुमति देता है। यह MRRS (Max Read Request Size) भी उसी हिसाब से सेट करता है। kernel source कहता है कि यह पक्का करता है कि किसी डिवाइस का MPS उसके parent से बड़ा न हो। इससे श्रृंखला एक-सी रहती है और ट्रांसफ़र के सबसे अच्छे आकार भी मिलते हैं।\nreboot के बाद नया MPS जाँचें:\n# Check MPS on a specific device lspci -vv -s XX:00.0 | grep -i \u0026#34;MaxPayload\u0026#34; आपको डिफ़ॉल्ट 128 की जगह MaxPayload 256 bytes या MaxPayload 512 bytes दिखना चाहिए।\nkernel के बाकी विकल्प kernel पाँच MPS policy देता है, हर एक pci= boot पैरामीटर से सेट होती है:\npcie_bus_tune_off: MPS को छूता ही नहीं। BIOS ने जो सेट किया, वही चलता है। अच्छे BIOS वाले bare metal पर यह अक्सर ठीक है। QEMU में BIOS OVMF या SeaBIOS होता है, जो शायद MPS को optimise न करे।\npcie_bus_default: kernel का डिफ़ॉल्ट। हर डिवाइस का MPS उसके upstream bridge के बराबर रखता है। सतर्क और सुरक्षित, पर परफ़ॉर्मेंस को अधिकतम नहीं करता।\npcie_bus_safe: MPS को उस सबसे बड़ी वैल्यू पर रखता है जिसे सिस्टम के सभी डिवाइस सपोर्ट करते हैं। बंद सिस्टम के लिए उपयोगी, जहाँ आप सारे डिवाइस जानते हैं और कुछ भी hotplug नहीं होगा। डिफ़ॉल्ट से थोड़ा ज़्यादा आक्रामक।\npcie_bus_perf: हर डिवाइस का MPS उस सबसे बड़ी वैल्यू पर रखता है जिसकी उसका parent bus अनुमति देता है। हर डिवाइस को उसकी local topology का सबसे अच्छा MPS मिलता है। पासथ्रू के लिए यही सही विकल्प है, क्योंकि यह हर रास्ते को अलग से optimise करता है।\npcie_bus_peer2peer: हर चीज़ पर MPS 128 bytes रखता है। हर डिवाइस सबसे छोटे साझा आकार पर बात करता है। तब इस्तेमाल होता है जब डिवाइसों को सीधे एक-दूसरे में DMA करना हो (GPU-से-GPU, RDMA के ज़रिए GPU-से-NIC)। सामान्य पासथ्रू के लिए उपयोगी नहीं।\nपासथ्रू के लिए pcie_bus_perf ही सही है।\nइसे कैसे ठीक करें: guest की तरफ़ आप guest kernel की boot configuration में भी pci=pcie_bus_perf सेट कर सकते हैं। इसका कोई व्यावहारिक असर होगा या नहीं, यह इस पर निर्भर है कि QEMU वर्चुअल PCIe topology कैसे दिखाता है। वर्चुअल root complex तय करता है कि guest अधिकतम क्या तय कर सकता है।\nटेस्टिंग में host वाला सुधार ही टिकता है। फ़िज़िकल डिवाइस host के पास है, और उसकी MPS सेटिंग ही तार पर असली TLP आकार तय करती है। guest की सेटिंग सिर्फ़ VM के अंदर की वर्चुअल topology को छूती है, और इससे असली व्यवहार बदलता है या नहीं, यह इस पर निर्भर है कि QEMU उस डिवाइस का PCIe रास्ता कैसे दिखाता है।\nइसे host पर सेट करें। guest में भी सेट करने से नुकसान नहीं, पर सिर्फ़ उसी के भरोसे न रहें।\nMRRS क्या है Max Read Request Size (MRRS) जुड़ा हुआ है, पर अलग है। MPS सीमित करता है कि डिवाइस एक TLP में कितना डेटा भेज सकता है। MRRS सीमित करता है कि डिवाइस एक read request में कितना डेटा माँग सकता है।\nMRRS 4096 वाला डिवाइस एक ही 4KB read request भेज सकता है। जवाब कई TLP में आता है, हर एक MPS आकार तक। ऊँचे MRRS का मतलब है कि डिवाइस हर transaction में ज़्यादा डेटा माँग सकता है, जिससे bus पर read request TLP कम होते हैं।\nMRRS request का आकार तय करता है, MPS जवाब के हर पैकेट का NVMe controller MRRS 4096 B host मेमोरी root complex के ज़रिए 1 × read request: “मुझे 4 KB भेजो” MRRS: एक request कितना माँग सकता है 8 × completion TLP: हर एक 512 B MPS: जवाब का हर पैकेट कितना बड़ा हो सकता है एक request, कई पैकेट।\u0026#160;pci=pcie_bus_perf\u0026#160;दोनों बढ़ाता है, अलग ट्यूनिंग की ज़रूरत नहीं। दोनों को आपस में मिलाना आसान है: MRRS सीमित करता है कि डिवाइस एक request में कितना माँग सकता है, MPS सीमित करता है कि जवाब का हर पैकेट कितना बड़ा हो सकता है। pci=pcie_bus_perf MPS और MRRS दोनों को उनकी सबसे अच्छी वैल्यू पर सेट करता है। आपको इन्हें अलग से ट्यून करने की ज़रूरत नहीं।\nबाकी ट्यूनिंग के मुकाबले असर MPS 128 और 512 bytes के बीच के फ़र्क का परफ़ॉर्मेंस असर NUMA अलाइनमेंट या ASPM से कम है। आमतौर पर throughput में कुछ ही प्रतिशत का सुधार। कम queue depth पर latency benchmark में यह नहीं दिखेगा।\nपर यह मुफ़्त optimisation है। एक kernel पैरामीटर, कोई नुकसान नहीं, कोई compatibility जोखिम नहीं। पासथ्रू करने वाले किसी भी सिस्टम पर इसे सेट न करने की कोई वजह नहीं।\nइसकी कोई कीमत नहीं, और हार्डवेयर के पैसे आप पहले ही दे चुके हैं। जो खरीदा है, वह पूरा ले ही लीजिए।\nसंदर्भ Linux kernel PCI Kconfig — MPS and MRRS tuning options — पाँचों MPS policy का आधिकारिक स्रोत Linux Plumbers Conference 2017 — MPS vs MRRS (PDF) — kernel के MPS/MRRS संभालने पर Sinan Kaya की प्रस्तुति ","permalink":"https://blogs.damiendye.uk/hi/proxmox/pcie-maxpayloadsize/","summary":"QEMU का वर्चुअल root complex डिफ़ॉल्ट रूप से 128-byte TLP payload देता है। ज़्यादातर डिवाइस 256 या 512 सपोर्ट करते हैं। एक kernel पैरामीटर इसे ठीक कर देता है।","title":"PCIe MaxPayloadSize: पासथ्रू के लिए मुफ़्त परफ़ॉर्मेंस"},{"content":"i440fx और Q35 क्या हैं? हर QEMU वर्चुअल मशीन का एक वर्चुअल चिपसेट होता है। यही पूरा वर्चुअल मदरबोर्ड तय करता है: PCI/PCIe bus topology, south bridge, interrupt controller, और boot के समय हार्डवेयर गिनते हुए guest OS को क्या दिखता है।\nQEMU दो विकल्प देता है: i440fx और Q35।\ni440fx Intel 440FX की नकल करता है, जिसका codename Natoma था और जो 1996 में Pentium Pro के लिए, और बाद में Pentium II के लिए, चिपसेट के रूप में आया था। यह एक सपाट PCI bus दिखाता है, जिसमें native PCIe सपोर्ट नहीं है। यह QEMU का मूल machine type था और लंबे समय से default रहा है। Pentium Pro के लिए बने चिपसेट के हिसाब से इसकी पारी अच्छी रही।\nQ35 Intel Q35 Express की नकल करता है, जो जून 2007 में Core 2 पीढ़ी के लिए ICH9 south bridge के साथ आया था। यह guest को एक सही PCIe root complex और एक आधुनिक interrupt controller देता है। पासथ्रू किए गए डिवाइस सही topology के साथ native PCIe डिवाइस के रूप में दिखते हैं।\nदोनों वर्चुअल हैं। कोई भी host के असली हार्डवेयर पर असर नहीं डालता। फ़र्क इस बात में है कि guest OS को क्या दिखता है।\ni440fx की सपाट PCI bus बनाम Q35 का PCIe root complex i440fx: एक सपाट PCI bus Intel 440FX “Natoma”: Pentium Pro / Pentium II, 1996 vCPU PCI bus 0 NVMelegacy PCI NIC सिर्फ़ INTx IDE legacy ऑडियोनक़ली MSI-X नहीं: सिर्फ़ INTx interrupts AER नहीं: PCIe गड़बड़ियाँ guest को नहीं दिखतीं ACS नहीं: कमज़ोर IOMMU isolation एक साझा bus: एक IOMMU group Q35: PCIe root complex Intel Q35 Express + ICH9: Core 2 दौर, जून 2007 vCPU PCIe root complex root port root port root port NVMeMSI-X NIC multi-queue GPU AER + ACS MSI-X: हर queue का अपना interrupt vector AER: guest PCIe गड़बड़ियाँ देखता और संभालता है ACS: peer-to-peer DMA नियंत्रित हर slot का अपना IOMMU group हो सकता है आगे का हर फ़र्क यहीं से आता है: i440fx हर डिवाइस को एक साझा bus पर लटकाता है, जबकि Q35 हर slot को PCIe root complex के नीचे उसका अपना root port देता है। पासथ्रू के लिए Q35 क्यों मायने रखता है i440fx VM में पासथ्रू किए गए डिवाइस legacy PCI डिवाइस की तरह दिखते हैं, चाहे वे असल में कुछ भी हों। guest उन्हें PCIe डिवाइस नहीं, बल्कि “बहुत तेज़ PCI डिवाइस” की तरह देखता है। कुछ ड्राइवर इससे ठीक चल जाते हैं। दूसरे PCIe की उम्मीद करते हैं, और जब वह नहीं मिलता तो ग़लत बर्ताव करते हैं या load होने से मना कर देते हैं।\nQ35 का PCIe root complex तस्वीर को कई तरह से बदलता है।\nMSI-X MSI-X (Message Signalled Interrupts, Extended) के लिए PCIe ज़रूरी है। i440fx पर MSI-X या तो legacy INTx interrupts पर लौट जाता है या बिल्कुल काम नहीं करता।\nNVMe के लिए यह बहुत मायने रखता है। NVMe controller अपने multi-queue आर्किटेक्चर के लिए MSI-X पर निर्भर हैं। हर IO queue pair को उसका अपना interrupt vector मिलता है। MSI-X के बिना सारे IO completions एक ही interrupt से होकर गुज़रते हैं, जो ऊँचे IOPS पर bottleneck बन जाता है।\nआधुनिक नेटवर्क कार्ड और GPU के लिए भी यह मायने रखता है। जो भी डिवाइस CPU cores पर लोड बाँटने के लिए कई interrupt vectors इस्तेमाल करता है, उसे MSI-X चाहिए।\nINTx हर NVMe completion को एक interrupt से गुज़ारता है; MSI-X हर queue को अपना vector देता है i440fx, INTx: हर queue के लिए एक line queue 0 queue 1 queue 2 queue 3 1 × INTx vCPU 0 completions क़तार में: ऊँचे IOPS पर छत Q35, MSI-X: हर queue का एक vector queue 0 queue 1 queue 2 queue 3 4 × MSI-X vectors vCPU 0 vCPU 1 vCPU 2 vCPU 3 हर queue पूरी होती है अपने core पर INTx के साथ हर queue के completions एक ही interrupt line पर आते हैं और एक ही vCPU पर उतरते हैं। MSI-X के साथ हर queue का अपना vector होता है और वह अपने core पर पूरी होती है। AER (Advanced Error Reporting) PCIe AER guest को डिवाइस की गड़बड़ियाँ पकड़ने और उन्हें ठीक से संभालने देता है, बजाय इसके कि चीज़ें चुपचाप फ़ेल हों। i440fx पर guest को PCIe-स्तर की गड़बड़ियों की कोई जानकारी नहीं मिलती।\nपासथ्रू किए गए डिवाइस वाले production workload के लिए गड़बड़ियों का चुपचाप निगल लिया जाना एक समस्या है। AER guest ड्राइवर को उन हार्डवेयर गड़बड़ियों को log करने, रिपोर्ट करने और कुछ मामलों में उनसे उबरने की क्षमता देता है, जो वरना डेटा ख़राब होने तक किसी की नज़र में नहीं आतीं।\nACS (Access Control Services) ACS एक ही bus पर मौजूद डिवाइसों के बीच peer-to-peer DMA को नियंत्रित करता है। यह IOMMU isolation मॉडल का हिस्सा है। यह एक डिवाइस को IOMMU से गुज़रे बिना दूसरे डिवाइस की memory space में DMA करने से रोकता है।\ni440fx पर वर्चुअल bus topology ACS को बिल्कुल सपोर्ट नहीं करती। इससे बुनियादी पासथ्रू नहीं टूटता, लेकिन IOMMU से जो isolation मिलना चाहिए, वह कमज़ोर हो जाता है।\nIOMMU Group का दिखना Q35 की PCIe hierarchy का मतलब है कि guest के भीतर हर वर्चुअल slot अपने अलग IOMMU group में रह सकता है। i440fx सब कुछ एक साझा bus पर डाल देता है, जिससे guest की तरफ़ IOMMU कॉन्फ़िगरेशन मुश्किल हो जाता है।\nयह nested virtualisation के लिए मायने रखता है, जहाँ guest को ख़ुद साफ़ IOMMU groups चाहिए। यह vIOMMU के लिए भी मायने रखता है, जो सिर्फ़ Q35 पर उपलब्ध है।\nvIOMMU अगर guest को ख़ुद IOMMU क्षमता चाहिए, nested पासथ्रू के लिए, DPDK के लिए, या कुछ security कॉन्फ़िगरेशन के लिए, तो उसके लिए Q35 machine type ज़रूरी है।\nvIOMMU emulation guest को अपना IOMMU चलाने देता है, जो इनके लिए काम का है:\nNested VM पासथ्रू (VM के अंदर VM, डिवाइस access के साथ) DPDK userspace networking, जहाँ application को IOMMU सुरक्षा चाहिए Security कॉन्फ़िगरेशन, जिनमें guest के अंदर DMA isolation ज़रूरी है पासथ्रू के अलावा भी Q35 क्यों मायने रखता है अगर आप पासथ्रू नहीं कर रहे, तब भी आधुनिक workloads के लिए Q35 बेहतर विकल्प है।\nOVMF (UEFI) Firmware Q35 और OVMF का मेल guest को Secure Boot सपोर्ट के साथ एक आधुनिक UEFI boot environment देता है। i440fx OVMF इस्तेमाल कर सकता है, लेकिन यह मेल कम परखा गया है और कुछ फ़ीचर ठीक से काम नहीं करते।\nWindows 11 को Secure Boot के साथ UEFI चाहिए। Microsoft की हार्डवेयर ज़रूरतें इसे अनिवार्य बनाती हैं। Windows Server 2025 UEFI के साथ सबसे अच्छा चलता है। दोनों के लिए Q35 के साथ OVMF ही सपोर्टेड रास्ता है।\nअगर आप Windows 11 या Server 2025 VM को i440fx पर SeaBIOS के साथ चला रहे हैं, तो आप धारा के उल्टे तैर रहे हैं। आज शायद चल जाए। ecosystem उस दिशा में नहीं जा रहा।\nAHCI Q35 में ICH9 south bridge के ज़रिए native AHCI (Advanced Host Controller Interface) emulation शामिल है। i440fx boot disks के लिए पुराना IDE या LSI SCSI emulation इस्तेमाल करता है।\nVirtIO स्टोरेज के लिए इससे कोई फ़र्क नहीं पड़ता। VirtIO चिपसेट के storage controller को पूरी तरह bypass करता है। लेकिन अगर आप ऐसे guest OS के लिए SATA emulation इस्तेमाल कर रहे हैं जिसके पास install के समय VirtIO ड्राइवर नहीं हैं, तो Q35 पर AHCI i440fx पर IDE से कहीं तेज़ है।\nIDE हर register access trap करता है; AHCI commands guest RAM में बनाकर एक doorbell बजाता है host / hypervisor सीमा: हर पार करना एक VM exit i440fx, IDE: हर register access trap होता है IDE ड्राइवर guest में port I/O, एक बार में एक access 5 × VM exit एक command देने में PIIX3 IDE 1 command चलता हुआ NCQ नहीं: अगला command पिछले के पूरा होने का इंतज़ार करता है IRQ 14/15, level-triggered INTx: mask और acknowledge के लिए और exits Q35, AHCI: RAM में बना, एक doorbell AHCI ड्राइवर guest में command list guest RAM में: मुफ़्त 1 × VM exit AHCI HBA (ICH9) 32 तक queue में (NCQ) queue के commands किसी भी क्रम में पूरे होते हैं: disk seek बचाने को क्रम बदलती है MSI-X: पहचानने को कोई साझा line नहीं, EOI का चक्कर नहीं IDE को legacy I/O ports के ज़रिए एक-एक register करके प्रोग्राम किया जाता है, और हर access host पर trap होता है। AHCI guest को command अपनी memory में बनाने और एक ही doorbell बजाने देता है। वह overhead जो i440fx ढोता है और Q35 नहीं AHCI का फ़र्क सिर्फ़ एक controller के नए होने का नहीं है। बात यह है कि i440fx लगभग हर बातचीत पर guest से hypervisor की क़ीमत वसूलता है, और Q35 ज़्यादातर नहीं।\nTrapped register access. IDE को legacy x86 I/O ports के ज़रिए प्रोग्राम किया जाता है। guest पहले sector count लिखता है, फिर LBA registers, फिर command register। हर write एक अलग port पर जाता है। इनमें से हर access host पर trap होकर emulate होता है, और हर trap एक VM exit है जिसकी क़ीमत कुछ microseconds है। इसलिए एक IDE command देने में ही, कोई भी डेटा हिलने से पहले, कई exits लग जाते हैं।\nAHCI उल्टा काम करता है। guest अपनी RAM में एक command table बनाता है, जिसमें कोई trap नहीं, क्योंकि यह बस memory में लिखना है, और फिर controller को उसे उठाने के लिए doorbell register में एक MMIO write करता है। एक command की क़ीमत पाँच-छह की जगह लगभग एक exit होती है।\nकोई command queueing नहीं। IDE एक command देता है और उसके पूरा होने का इंतज़ार करता है। AHCI NCQ सपोर्ट करता है, इसलिए 32 तक commands एक साथ लंबित रह सकते हैं, और ड्राइव seeking कम करने के लिए उन्हें किसी भी क्रम में पूरा कर सकता है। इसलिए हर command की बची हुई क़ीमत एक-एक करके चुकाने की जगह पूरी queue पर बँट जाती है।\nLegacy interrupt रास्ता। PIIX3 IDE controller पूरा होने का संकेत तय legacy IRQs 14 और 15 पर देता है, जो level-triggered INTx के रूप में पहुँचते हैं। level-triggered interrupt को acknowledge और unmask करना पड़ता है, और क्योंकि INTx lines साझा होती हैं, guest को यह भी पता लगाना पड़ता है कि किस डिवाइस ने उसे उठाया। इनमें से हर क़दम एक और trap है। MSI-X, जिसके लिए Q35 चाहिए, एक सीधा memory write है, जिसमें न पहचानने के लिए कोई साझा line है और न acknowledge का चक्कर। posted interrupts वाले हार्डवेयर पर यह बिना किसी exit के guest तक पहुँच सकता है।\nबड़ी legacy डिवाइस सतह। i440fx अपने legacy platform डिवाइस, IDE controller समेत, हमेशा दिखाता है, चाहे VM उन्हें इस्तेमाल करे या नहीं। वे PCI slots घेरते हैं, हर boot पर गिने और जाँचे जाते हैं, और guest ड्राइवर उन्हें poll कर सकते हैं। Q35 एक छोटा, आधुनिक सेट दिखाता है। host के लिए संभालने को कम, guest के लिए गिनने को कम।\nVirtIO वाले VM में इनमें से कुछ भी नहीं दिखता, इसीलिए यह फ़र्क आसानी से नज़र से छूट जाता है। यह installation के दौरान, बिना VirtIO ड्राइवर वाली appliance images पर, और हर उस guest पर मायने रखता है जो अब भी अपनी boot disk के लिए emulated SATA या IDE इस्तेमाल करता है।\nकम वर्चुअल डिवाइस, साफ़ topology i440fx के साथ legacy वर्चुअल हार्डवेयर आता है जिसे Q35 हटा देता है। एक dummy sound card। एक legacy IDE controller। दोनों में से कोई कुछ काम का नहीं करता, लेकिन दोनों वर्चुअल PCI slots खाते हैं और उन्हें इस्तेमाल करने की कोशिश करने वाले guest software को उलझा सकते हैं।\nQ35 वर्चुअल हार्डवेयर का एक साफ़ सेट दिखाता है जो किसी आधुनिक physical सर्वर के हार्डवेयर से ज़्यादा मेल खाता है।\nQ35 उन legacy platform डिवाइसों को फेंक देता है जिन्हें i440fx वर्चुअल PCI slots में रखता है i440fx legacy डिवाइस slots घेरते हैं Legacy IDE controller Floppy controller (FDC) PIIX3 legacy functions दूसरे legacy platform डिवाइस ख़ाली ख़ाली AHCI ने जगह ली Q35 ने फेंका Q35 कम डिवाइस, slots बचे ICH9 AHCI (SATA) PCIe root ports पासथ्रू NVMe के लिए ख़ाली NIC के लिए ख़ाली GPU के लिए ख़ाली ख़ाली legacy IDE controller हटाया नहीं जाता, बदला जाता है; बाक़ी सब कूड़ेदान में जाता है, और slots उन डिवाइसों के लिए ख़ाली रहते हैं जिन्हें आप सच में पासथ्रू करना चाहते हैं। हवा का रुख़ RHEL 10 ने i440fx को deprecate कर दिया है Red Hat ने RHEL 10 में i440fx machine type को औपचारिक रूप से deprecate कर दिया है। यह पूरे KVM ecosystem की दिशा का संकेत है। जब Red Hat किसी चीज़ को deprecate करता है, तो इसका मतलब है कि उन्होंने उसे पहले दर्जे के रास्ते के रूप में परखना बंद कर दिया है और उससे जुड़े bugs ठीक नहीं करेंगे।\nQEMU upstream प्रोजेक्ट सालों से i440fx को deprecate करने पर चर्चा कर रहा है। आम राय यह है कि दो चिपसेट रास्ते बनाए रखना बोझ है। Q35 वह है जो आधुनिक हार्डवेयर से मेल खाता है।\nProxmox ने पीछा नहीं किया Proxmox VE अब भी नए VM i440fx के रूप में बनाता है। create wizard में machine type “Default (i440fx)” लिखा होता है, और जब तक आप बदलें नहीं, वही रहता है। Q35 बस एक dropdown दूर है, लेकिन यह चुनाव आपको हर VM बनाते समय जानबूझकर करना पड़ता है।\nयह पोस्ट इसी वजह से है। default 1996 का चिपसेट है, और wizard में कुछ भी नहीं बताता कि यह चुनाव मायने रखता है।\nकिसी मौजूदा VM को बदलना अगर आपके पास i440fx पर कोई मौजूदा VM है, तो आप hardware settings में या सीधे config में उसे Q35 पर बदल सकते हैं:\nmachine: q35 असल में यह वर्चुअल मदरबोर्ड बदलना है। अगले boot पर अलग हार्डवेयर।\nLinux आम तौर पर बिना दिक़्क़त इसे संभाल लेता है। kernel डिवाइसों को फिर से गिनता है और सही ड्राइवर load करता है। interface के नाम बदल जाएँगे, क्योंकि वर्चुअल NIC PCI bus से PCIe bus पर चला जाता है। अगर आपका network config उनका नाम लेता है (जैसे eth0, ens18), तो reboot से पहले उसे अपडेट करें, वरना network access खो देंगे।\nWindows कम माफ़ करता है। चिपसेट बदलने का मतलब है storage controller, network adapter और दूसरे platform डिवाइसों के लिए अलग वर्चुअल हार्डवेयर IDs। Windows को ड्राइवर दोबारा install करने पड़ सकते हैं। कुछ मामलों में नया install सबसे साफ़ रास्ता है। पुराना Windows आम तौर पर यही करवाता है।\nFreeBSD और उससे बने सिस्टम (OPNsense, pfSense) आम तौर पर यह बदलाव संभाल लेते हैं, लेकिन पहले test करें।\nहर हाल में, किसी भी ज़रूरी चीज़ को बदलने से पहले किसी non-production VM पर test करें।\ni440fx की ज़रूरत अब भी कब है कुछ गिने-चुने मामलों में अब भी i440fx चाहिए।\nLegacy guest operating systems, जो UEFI से पहले के हैं, जैसे Windows XP, Windows 2000 और उसी दौर के दूसरे, शायद Q35 पर boot न हों। ये OS उस legacy PCI topology और SeaBIOS की उम्मीद करते हैं जो i440fx देता है।\nकुछ appliance images सिर्फ़ i440fx के लिए बनाई और परखी जाती हैं। अगर vendor सिर्फ़ i440fx सपोर्ट करता है, तो जब तक वह अपडेट न करे, आप वही इस्तेमाल करें।\nबाक़ी हर चीज़ के लिए, नए Linux VM, आधुनिक Windows, पासथ्रू वाला कोई भी workload, Q35 इस्तेमाल करें। आदत के चलते 1996 के चिपसेट से चिपके रहने में कुछ भी हासिल नहीं है।\nसंदर्भ Proxmox VE Wiki — PCI(e) Passthrough — Proxmox का आधिकारिक डॉक्यूमेंटेशन, जो पासथ्रू के लिए Q35 को सुझाया गया machine type बताता है QEMU Q35 Chipset Specification (PDF) — QEMU Q35 का मूल design दस्तावेज़ Proxmox Forum — Q35 vs i440fx Discussion — व्यावहारिक फ़र्कों पर कम्युनिटी चर्चा ","permalink":"https://blogs.damiendye.uk/hi/proxmox/q35-not-i440fx/","summary":"QEMU के दो वर्चुअल चिपसेट एक-दूसरे की जगह नहीं ले सकते। Q35 एक सही PCIe topology देता है, जिस पर पासथ्रू, आधुनिक Windows और पूरा KVM ecosystem निर्भर है।","title":"हमेशा Q35 चुनें, i440fx नहीं: Proxmox VE पर यह क्यों मायने रखता है"},{"content":"मैं Damien Dye हूँ।\ncroit GmbH में यूरोप और APAC के लिए प्रीसेल्स इंजीनियर। croit Ceph Foundation का संस्थापक सदस्य है और आधिकारिक Proxmox Gold Partner भी।\nबीस से ज़्यादा साल इसका वह हिस्सा रहे हैं जिसके पैसे मिले: Microsoft प्लेटफ़ॉर्म, Linux, एंटरप्राइज़ एप्लिकेशन, वर्चुअलाइज़ेशन, नेटवर्किंग, स्टोरेज और सिक्योरिटी। पैसे वाला हिस्सा पूरी कहानी नहीं है। मैं नब्बे के दशक के बीच से चीज़ें बना रहा हूँ और तोड़ रहा हूँ, और 1999 से Linux ठीक से चला रहा हूँ, उन सालों से पहले जब किसी ने इसके लिए मुझे पैसे देना ठीक समझा। मैं वे साल भी गिनता हूँ, क्योंकि जो हार्डवेयर आपका अपना है उससे आप उतना ही सीखते हैं जितना उस हार्डवेयर से जिसका बीमा किसी और ने करवाया है।\nसाउथ यॉर्कशायर से हूँ, इसलिए बात आपको सीधी मिलेगी। कुछ काम करता है तो मैं बताऊँगा क्यों। नहीं करता तो वह भी बताऊँगा, और मैं यह आपके पैसे खर्च करने से पहले कहना पसंद करूँगा, बाद में नहीं।\nशुरुआती साल आठ साल की उम्र से मैं कंप्यूटर खोलकर देख रहा हूँ। मेरी पहली मशीन 512K RAM वाला Atari STfm थी।\nपहला PC बारह साल की उम्र में आया, Windows 3.11 के साथ, और वहाँ से मैं हर एक से गुज़रा: 95, 95b, 95c, 98, 98SE और फिर Windows 2000।\nयह सिर्फ़ सॉफ़्टवेयर चलाना नहीं था। यह समझना था कि एक वर्ज़न से अगले में क्या बदला, रास्ते में क्या टूटा, और जब किसी चीज़ ने तय कर लिया कि वह नहीं चलेगी तब उसे चलाया कैसे जाए।\nWINDOWS डेस्कटॉप का सफ़र: 3.11 \u0026#8594; 10 3.11 95 98 2000 XP XP64-बिट Vista64-बिट 764-बिट 8.1 10 मेरा पहला इंटरनेट कनेक्शन Freeserve पर 56k डायल-अप मॉडम था, जो UK के पहले मुफ़्त ISP में से एक था। 2001 में ADSL आते ही मैं उस पर चला गया, Demon Internet के ज़रिए। फिर 2008 में VDSL, और आख़िर में 2017 में Zen Internet के साथ FTTP, और वहीं नेटिव IPv6 आया। नेटवर्किंग के मामले में सब कुछ वहीं से शुरू हुआ, और यह उन 100GbE फ़ैब्रिक से बहुत दूर है जो मैं आज डिज़ाइन करता हूँ। पर जिज्ञासा वही थी।\nलोकल नेटवर्क इससे भी पहले शुरू हुआ, और ज़्यादा कच्चे ढंग से। मेरा पहला LAN 10BASE2 था: पतली कोएक्सियल केबल, BNC कनेक्टर और दोनों सिरों पर 50-ओम का टर्मिनेटर, हर मशीन एक ही 10 Mbit बस साझा करती थी। मैंने उस पर दो PC आपस में बात करवाए, फिर मशीनें बढ़ीं तो 5-पोर्ट हब जोड़ा। वह हब बाद में स्विच बना, और यह असली क़दम आगे था: साझा कोएक्स पर सब आपस में लड़ने के बजाय हर पोर्ट को अपना collision domain मिला। उसके बाद वायरलेस आया, जैसे ही जेब में आया: लैपटॉप में Orinoco Gold PCMCIA कार्ड पर 11 Mbit वाला 802.11b। कोएक्स बस से साझा हब, फिर स्विच्ड Ethernet, फिर Wi-Fi: इसका हर क़दम मैंने अपने हाथ से पार किया।\nमैंने पूरी तरह unattended Windows XP इंस्टॉलेशन भी बनाए। इनमें ड्राइवर डालने के लिए पुराने DriverPacks थे और एप्लिकेशन अपने-आप इंस्टॉल करने के लिए कस्टम स्क्रिप्ट। आप खाली हार्डवेयर से पूरी तरह कॉन्फ़िगर सिस्टम तक कीबोर्ड छुए बिना पहुँच सकते थे। यह ऑटोमेशन वाली सोच थी, Ansible का नाम सुनने से सालों पहले, और वह भी Windows पर, Linux पर नहीं।\nLinux से मुलाक़ात Linux मैंने पंद्रह साल की उम्र में SuSE 6 पर शुरू किया। मैं सीधे उन डिस्ट्रिब्यूशन पर गया जो आपको समझने पर मजबूर करते थे कि नीचे क्या हो रहा है।\n2001 की क्रिसमस की छुट्टियों में मैंने Linux From Scratch किताब से पूरा सिस्टम बनाया। हर पैकेज हाथ से कंपाइल किया। हर डिपेंडेंसी समझी। कॉन्फ़िगरेशन का हर फ़ैसला सोच-समझकर लिया।\n2002 तक मैं Gentoo पर आ गया था। Gentoo उसी सिद्धांत पर चलता है: पूरा सिस्टम आप सोर्स से बनाते हैं, हर USE flag क्या करता है यह आप समझते हैं, और जब कुछ टूटता है तो आपको ठीक-ठीक पता होता है कहाँ देखना है।\nLINUX: डिस्ट्रो का सफ़र SuSE6–7.2 Mandrake Gentoo Ubuntu RHEL Fedora दूसरे प्लेटफ़ॉर्म की खोज मैं कभी एक आर्किटेक्चर से चिपका नहीं रहा।\n2001 से 2007 तक मेरे पास एक DEC Alpha सिस्टम था। Alpha, Digital Equipment Corporation का 64-बिट RISC प्रोसेसर था, जो 1992 में आया: एक असली 64-बिट मशीन, x86 के 2003 में AMD64 के साथ बराबरी पर आने से दस साल से भी ज़्यादा पहले। उस पर Tru64 UNIX, OpenVMS, Windows NT और Linux चलते थे, और कुछ समय तक यह डेस्क पर रखी जा सकने वाली सबसे तेज़ चीज़ों में से थी। कम्युनिटी में चर्चा के ज़रिए मैंने उस पर USB और FireWire चला लिए। मैंने पीछे एक PCMCIA-से-ISA अडैप्टर भी लगाया, ताकि जो PC Card मैं लैपटॉप में इस्तेमाल करता था, Orinoco Gold वायरलेस समेत, वे डेस्कटॉप Alpha में भी चलें। ऐसे प्लेटफ़ॉर्म पर यह छोटी बात नहीं थी जहाँ कुछ भी चलने की गारंटी नहीं थी।\nमैंने BeOS भी आज़माया। मल्टीथ्रेडिंग और मल्टीमीडिया को लेकर उसका तरीक़ा उस वक़्त की हर दूसरी चीज़ से बिल्कुल अलग था।\nयूनिवर्सिटी में एक दोस्त और मैंने फेंके जा रहे Sun SPARC वर्कस्टेशन बचाए और उन पर Gentoo बनाया। SPARC, Sun Microsystems का RISC आर्किटेक्चर था, जो 1987 में आया: उन Sun वर्कस्टेशन और सर्वर के पीछे का इंजन जिन पर नब्बे के दशक में Unix की दुनिया का बड़ा हिस्सा चलता था, आमतौर पर Solaris के साथ। उस हार्डवेयर पर सोर्स से बना Linux चलाना ही असली मक़सद था। क्योंकि क्यों न करें, जब हार्डवेयर सामने है और आप देखना चाहते हैं कि चलता है या नहीं।\nमैंने Raspberry Pi और Odroid पर ARM और ARM64 वाला Linux भी बनाया है और उस पर काम किया है। और ARM64 पर Windows भी चलाया है।\nएक ही ऑपरेटिंग सिस्टम x86, Alpha, SPARC, ARM और ARM64 पर चलाइए, तो एक पर जो मान्यताएँ आपने बनाईं वे अगले पर साथ नहीं जातीं: byte order, alignment, page size, ड्राइवर सपोर्ट और toolchain की अजीब आदतें, सब आपके नीचे खिसक जाते हैं। यह आज पहले से ज़्यादा मायने रखता है, जब ARM64 डेटा सेंटर में x86 के बगल में बैठा है, और यही सोच मिक्स्ड-आर्किटेक्चर Ceph या Proxmox सेटअप को ईमानदार रखती है।\nमैं IPv6 के साथ भी शुरू से प्रयोग कर रहा था। मेरे पास 6bone की पहुँच थी, जो प्रयोग वाला IPv6 टेस्ट नेटवर्क था। 6bone एक वैश्विक टेस्टबेड था जो 1996 से चला, ताकि प्रोडक्शन इंटरनेट के तैयार होने से पहले IPv6 को विकसित और लागू करने में मदद मिले। यह IPv6 को ज़्यादातर IPv4 टनल पर ढोता था, इसकी अपनी 3ffe::/16 एड्रेस रेंज थी, और 6 जून 2006 को जानबूझकर बंद कर दिया गया, जब नेटिव IPv6 अपने पैरों पर खड़ा होने लायक़ परिपक्व हो चुका था। मैंने Linux का IPv6 स्टैक और Windows XP के लिए Microsoft Research का IPv6 स्टैक, दोनों चलाए। मैं हर एक से गुज़रा हूँ। शुरुआत IPv6-in-IPv4 टनल से हुई। फिर अपने-आप टनलिंग के लिए 6to4 (RFC 3056) पर गया। फिर एक ढंग के ISP, Zen Internet, पर जाते ही पूरा नेटिव IPv6। ज़्यादातर लोगों ने IPv6 तब तक छुआ तक नहीं जब तक उनके एम्प्लॉयर ने मजबूर नहीं किया। तब तक मैं हर ट्रांज़िशन तरीक़े से गुज़र चुका था, Linux और Windows दोनों पर, क्योंकि मैं समझना चाहता था कि नेटवर्किंग किधर जा रही है। इसीलिए IPv6 आज मुझे स्वाभाविक लगता है, बाद में ऊपर से जोड़ी गई चीज़ नहीं। अब मेरा नब्बे प्रतिशत ट्रैफ़िक नेटिव IPv6 पर चलता है। मैं IPvFoo नाम का एक ब्राउज़र एक्सटेंशन चलाता हूँ जो दिखाता है कि हर कनेक्शन क्या इस्तेमाल कर रहा है, और साइटें मिक्स्ड प्रोटोकॉल दे रही हैं या सिर्फ़ IPv4। पुरानी आदत है: मुझे देखना अच्छा लगता है कि असल में क्या हो रहा है, सिर्फ़ मान लेना नहीं।\nIPv6: दो दशक, प्रयोग से क्रिटिकल तक घर के टेस्टबेड स्टैक से राष्ट्रीय स्तर के प्रोडक्शन इंफ्रास्ट्रक्चर तक 6bone: प्रयोग वाला IPv6 टेस्टबेड Linux और Microsoft Research के IPv6 स्टैक साथ-साथ चलाए IPv6-in-IPv4 टनल IPv4 इंटरनेट पर IPv6, हाथ से कॉन्फ़िगर किया हुआ 6to4 (RFC 3056) अपने-आप टनलिंग: सँभालने को कोई मैनुअल ब्रोकर नहीं नेटिव IPv6 घर पर FTTP से एंड-टू-एंड · Zen Internet · 2017 Nominet: क्रिटिकल राष्ट्रीय इंफ्रास्ट्रक्चर .uk रजिस्ट्री के लिए प्रोडक्शन में IPv6 · IPv4 और IPv6 पर F5 लोड बैलेंसर आज मेरा लगभग 90% ट्रैफ़िक नेटिव IPv6 पर चलता है। करके सीखना तकनीकी तौर पर जो कुछ मैं जानता हूँ, वह मैंने हाथ आज़माकर सीखा। चीज़ें बनाईं, तोड़ीं, पता लगाया कि क्यों टूटीं, फिर से बनाईं।\nडिग्री Sheffield Hallam से Business Studies and Computer Network Engineering की थी, और उसने मुझे वह एक चीज़ दी जो खुद से सीखने में नहीं मिलती: एक बिज़नेस असल में कैसे चलता है, एक तकनीकी फ़ैसला कैसे कमर्शियल नतीजे में बदलता है, और किसी सिस्टम के बारे में इस नज़र से कैसे सोचा जाए कि वह पैसा देने वाले की कौन-सी समस्या हल करता है। उसके बाद की हर भूमिका पर इसका असर रहा है।\nपर तकनीकी हुनर करने से आए, पढ़ने से नहीं। प्रोडक्शन की समस्याएँ रीडिंग लिस्ट के साथ नहीं आतीं। किसी चीज़ को बुनियादी सिद्धांतों से सुलझा पाना दीवार पर टँगे सर्टिफ़िकेट से ज़्यादा क़ीमती है, और इसकी एक्सपायरी नहीं होती।\nओपन सोर्स कहाँ से आता है जब 2000 के दशक की शुरुआत में Microsoft के नेतृत्व ने ओपन सोर्स को “एक कैंसर” कहा, तब मैं पहले से Linux में गहरे उतरा हुआ था। शून्य से सिस्टम बना रहा था। Gentoo चला रहा था। कम्युनिटी में योगदान दे रहा था।\nज्ञान बाँटने वाले और मिलकर चीज़ें बनाने वाले लोगों के प्रति इस तरह की दुश्मनी ने मुझे पीछे नहीं हटाया। इसने मुझे और आगे धकेला। अगर किसी कंपनी का मिलकर होने वाले डेवलपमेंट पर जवाब उसे बीमारी कहना है, तो यह आपको सॉफ़्टवेयर से ज़्यादा उस कंपनी के बारे में बताता है। मैं ओपन सोर्स में और गहरे गया और उस सोच का साथ देने के बजाय उसे अपना पहला विकल्प बना लिया।\nसालों में व्यावहारिक तर्क भी सिद्धांत वाले तर्क तक पहुँच गया। प्रोप्राइटरी प्लेटफ़ॉर्म तब तक ठीक-ठाक चलते हैं जब तक वेंडर लाइसेंसिंग न बदल दे, बिक न जाए, या यह तय न कर ले कि आपका इस्तेमाल रखने लायक़ नहीं है। फिर आप फँस जाते हैं। आपका डेटा, आपके वर्कफ़्लो और आपकी टीम की जानकारी, सब एक ऐसे प्लेटफ़ॉर्म से बँधे हैं जिस पर अब आपका नियंत्रण नहीं है। Broadcom का VMware ख़रीदना सबसे ताज़ा और सबसे दिखने वाला उदाहरण है, पर अकेला नहीं।\nयही सोच क्लाउड पर लागू होती है। पूछिए कि आप असल में किराए पर क्या ले रहे हैं, तो जवाब है वह क्षमता जो आप सीधे ख़रीद सकते थे, एक ऐसे मीटर पर जो कभी रुकता नहीं। वादे वाले फ़ायदे, यानी फुर्ती, लचीलापन और सँभालने को कम काम, शायद ही कभी उस शक्ल में आते हैं जो पिच में बताई गई थी, और लागत साल-दर-साल ऐसे बढ़ती है जैसे अपना हार्डवेयर नहीं बढ़ता। इसलिए जब भी किसी ने कहा, मैं हर बार दिखा पाया हूँ कि अच्छे से डिज़ाइन किए हार्डवेयर पर ओपन सोर्स बेहतर वैल्यू, ज़्यादा नियंत्रण और कम हैरानियाँ देता है। यह फ़ैशनेबल राय नहीं है। पर यह ऐसी राय है जिसके पीछे मैं आँकड़े रख सकता हूँ।\nकरियर बनाना मेरा करियर 2005 में Worksop की एक precision castings बनाने वाली कंपनी में शुरू हुआ। IT इंजीनियर, एक छोटी टीम का हिस्सा, लगभग पचास यूज़र को सपोर्ट करता हुआ।\nउस पहली भूमिका का दायरा अच्छा-ख़ासा चौड़ा था। Manusoft ERP सिस्टम और डॉक्यूमेंट आर्काइविंग की देखरेख। Linux और Windows 2003 सर्वर एडमिनिस्ट्रेशन। प्रोडक्शन और मेंटेनेंस के फ़ैसलों के लिए Crystal Reports डेवलपमेंट। PBX एडमिनिस्ट्रेशन। CAD/CAM सिस्टम इंटीग्रेशन और कंप्यूटर से चलने वाली रोबोटिक मैन्युफ़ैक्चरिंग का प्रबंधन। हार्डवेयर और सॉफ़्टवेयर की ख़रीद। एंड यूज़र को ट्रेनिंग देना और उनके वर्कस्टेशन पर सपोर्ट सँभालना।\nमैं पहले दिन से ऑटोमेशन भी लिख रहा था। मैंने कंपनी का Active Directory अपग्रेड किया और VB स्क्रिप्ट लिखीं जो ग्रुप मेंबरशिप के हिसाब से अपने-आप ड्राइव मैप करतीं, प्रिंटर देतीं और सॉफ़्टवेयर डिप्लॉय करतीं। वह 2006 था: मेरी पहली प्रोफ़ेशनल भूमिका में ढंग का इंफ्रास्ट्रक्चर ऑटोमेशन।\nयही मैन्युफ़ैक्चरिंग IT है। जब आपकी देखरेख वाली किसी चीज़ की वजह से लाइन रुकती है, तो आपको जल्दी पता चल जाता है कि भरोसेमंदी पसंद का मामला नहीं है, और मशीन के बगल में खड़े लोग आपको यह खुद बता देंगे। यह पहली बार भी था जब मैंने रोज़ी-रोटी के लिए एक ही इमारत में Linux और Windows चलाए, और तब से यही पैटर्न रहा है।\nवहाँ से मैं फ़्रंट-लाइन टेक्निकल सपोर्ट में आया। फ़र्स्ट और सेकंड लाइन, एक बड़े मल्टीनेशनल ग्राहक के लिए अलग डेस्क पर। Windows डेस्कटॉप, Active Directory, Exchange 2007, Cisco VPN, Cisco Call Manager, Remedy पर ITIL आधारित टिकट मैनेजमेंट। वह ITIL अनुशासन, यानी change management, problem management और व्यवस्थित प्रक्रियाएँ, तब से हर भूमिका में मेरे साथ रहा। मैंने Linux और Windows की दुनिया को भी जल्दी जोड़ा: Services for Unix कॉन्फ़िगर किया और Unix NFS शेयर तक Citrix की पहुँच की समस्याएँ सुलझाईं।\nउस डेस्क पर भी मैं जॉब डिस्क्रिप्शन से आगे बना रहा था। मैंने एक इंटरफ़ेस लिखा जो Agresso के HR डेटा से सीधे यूज़र अकाउंट बनाता और बंद करता था, और Active Directory अकाउंट, ग्रुप मेंबरशिप, Office Communicator कॉन्फ़िगरेशन, Exchange मेलबॉक्स और aliases सँभालता था। यह फ़र्स्ट-लाइन की कुर्सी से सिस्टम इंटीग्रेशन था, जो जॉब टाइटल में नहीं लिखा था।\nउस डेस्क पर जिन ग्राहकों को मैं सपोर्ट करता था, उनमें से एक ने बाद में अगली कंपनी में मुझे नौकरी दी।\nअगली थी एक ग्लोबल कम्युनिकेशन कंपनी, ICT और सिक्योरिटी। वहीं एप्लिकेशन डेवलपमेंट ठीक से शुरू हुआ। ढाई साल में मैंने छह अलग-अलग इंटरनल सिस्टम बनाए या उनमें योगदान दिया। एक कस्टम वेब-आधारित कोटेशन टूल। Salesforce और Agresso के बीच ऑर्डर प्रोसेसिंग इंटरफ़ेस। Salesforce और Agresso से भरा जाने वाला एक SharePoint मास्टर डेटा कैटलॉग। फ़ाइनेंशियल प्रोसेसिंग के लिए MSPE और Agresso से जुड़े इंटरफ़ेस वाला एक कस्टम वेब प्रोजेक्ट मैनेजमेंट सिस्टम। और एक कस्टमाइज़्ड Salesforce Service Cloud एप्लिकेशन से ServiceNow पर माइग्रेशन, पूरी ITIL प्रक्रिया लागू करने के साथ। मैं कॉर्पोरेट बिज़नेस एप्लिकेशन के लिए SQL इंटरफ़ेसिंग आर्किटेक्चर भी लिख रहा था और MS SQL की परफ़ॉर्मेंस ट्यून कर रहा था। मैंने IIS और Windows Server 2008 Terminal Services का एडमिनिस्ट्रेशन किया, और कॉर्पोरेट डेटा मॉडल मेरी ज़िम्मेदारी था। डायरेक्टरी सर्विसेज़, यानी Active Directory और LDAP, यहाँ मेरा मुख्य हुनर बनीं और उसके बाद हर भूमिका में साथ रहीं।\nमैंने पूरे UK में Windows 7 रिप्लेसमेंट प्रोग्राम भी चलाया, जिसमें UK के सारे यूज़र तीन हफ़्तों में नए HP हार्डवेयर पर ले जाए गए, और उनमें से 95% ने बताया कि उनके काम में कोई रुकावट नहीं आई। तीन हफ़्ते ऐसा आँकड़ा है जो तभी हासिल होता है जब तैयारी ठीक से हुई हो, और तैयारी वह फीका आधा हिस्सा है जिसके बारे में बाद में कोई नहीं पूछता।\nफिर मैनेजमेंट आया। एक सेमीकंडक्टर डिज़ाइन हाउस, जिसमें इंजीनियरों की छोटी टीम कई देशों में फैली थी। उसने एक साथ कई धागे जोड़ दिए। मैं Force.com प्लेटफ़ॉर्म पर डेवलप कर रहा था, यानी triggers, Visualforce pages और custom controllers, ताकि Financial Force अकाउंटिंग और PSA सिस्टम दुनिया भर में जुड़ सकें। उसी समय मैं दो अलग PXE boot HPC क्लस्टर बना रहा था। एक UK की यूरोपीय इंजीनियरिंग टीम के लिए और एक चीन की इंजीनियरिंग टीम के लिए। दोनों में Red Hat के साथ NFS root फ़ाइलसिस्टम थे, ताकि एक जैसे, 100% दोहराए जा सकने वाले diskless compute farm बनें। मैंने यूनिफ़ाइड स्टोरेज के लिए Dell PowerVault हार्डवेयर के साथ ZFS on Linux लगाया। मैंने पुराने, अलग-थलग सिक्योरिटी माहौल हटाकर Windows Server Active Directory लगाया, जिसमें Linux और Windows पर single sign-on के लिए नेटिव Kerberos और LDAP थे। मैंने चीन तक मुश्किल हालात में OpenVPN टनलिंग से एक यूनिफ़ाइड नेटवर्क बनाकर अंतरराष्ट्रीय कनेक्टिविटी स्थिर की।\nउस भूमिका के अच्छे-ख़ासे हिस्से में यह सब सँभालने वाला मैं अकेला था: Linux compute farm, Windows सपोर्ट, Salesforce डेवलपमेंट और कई टाइम ज़ोन में यूज़र सपोर्ट, एडवांस्ड टेक्नोलॉजी नोड पर SoC डिज़ाइन वर्कलोड के बीच। मुझे रिपोर्ट करने वाले इंजीनियरों में से एक आगे चलकर Salesforce डेवलपर बना, और उन सालों का बेहतर नतीजा मैं उसी को मानता हूँ।\nअगला था Linux में असली गहरा गोता। Pulsant में थर्ड-लाइन सपोर्ट, जो एक क्लाउड और होस्टिंग प्रोवाइडर है, पूरे स्टैक पर काम करते हुए। RHEL, CentOS, Ubuntu। Galera के साथ MySQL क्लस्टरिंग, MongoDB sharding, SNI और SSL termination के साथ HAProxy, Apache, PostgreSQL, तेज़ ई-कॉमर्स के लिए PHP-FPM ट्यूनिंग, Postfix मेल, DNS होस्टिंग के लिए BIND और PowerDNS, वेब कैशिंग के लिए Varnish, प्रॉक्सी कैशिंग के लिए Squid। फ़ायरवॉल और DoS सुरक्षा के लिए IPTables, IPset और Cisco ASA। नेटवर्क और स्टोरेज के लिए Linux सर्वर परफ़ॉर्मेंस ट्यूनिंग। CPanel ट्रबलशूटिंग, SolarWinds मॉनिटरिंग टेम्पलेट डेवलपमेंट और New Relic एडमिनिस्ट्रेशन। यह सब नीचे vCloud Director के साथ VMware 5.5 पर चलता था।\nयह सिर्फ़ सपोर्ट भी नहीं था। मैंने वहाँ एक Galera डेटाबेस रेप्लिकेशन प्रोडक्ट डिज़ाइन किया और उसे कॉन्सेप्ट से प्रोटोटाइप होते हुए एक ऐसी सर्विस तक ले गया जिसके लिए ग्राहकों ने पैसे दिए। वह लैब की कसरत नहीं थी। वह असली पैसे देने वाले ग्राहकों के असली वर्कलोड पर बनाया और परखा गया था, और कोई होस्टिंग प्रोवाइडर यह आसानी से नहीं सौंपता।\nथर्ड लाइन आपको सिखाती है कि एस्केलेशन की आख़िरी कड़ी होने का मतलब क्या है। जब बात आप तक पहुँचती है, तो आपके पीछे कोई नहीं है जो इसे ठीक करेगा।\nफिर Nominet, हर .uk डोमेन नाम के पीछे की रजिस्ट्री। राष्ट्रीय स्तर पर DNS। इंफ्रास्ट्रक्चर को चौबीसों घंटे, हर दिन, पूरी तरह पक्का रहना होता है, ज़ीरो डाउनटाइम और ऑफ़िस के बाद ऑन-कॉल के साथ। VMware 5.5 और 6, Brocade पर fibre-channel zoning के साथ HP 3par स्टोरेज, Puppet से मैनेज होने वाले RHEL 6 और 7, IPv4 और IPv6 पर F5 लोड बैलेंसर, Postfix मेल, और एक Zabbix डिप्लॉयमेंट जो मैंने पुरानी पड़ती VMware Hyperic मॉनिटरिंग की जगह बनाया। मैंने ServiceNow भी अपनाया और कस्टमाइज़ किया: वर्कफ़्लो, एप्लिकेशन डिप्लॉयमेंट, और कॉन्फ़िगरेशन मैनेजमेंट व इन्वेंटरी के लिए Linux node discovery लागू किए। ऑन-कॉल का बोझ घटाने के लिए ऑफ़िस के बाद की सर्विस डेस्क आउटसोर्सिंग की प्रक्रियाएँ डिज़ाइन करने और बनाने में मदद की।\nNominet में मैं वह पहला इंसान बन गया जिससे पूछा जाता था, चाहे बात Linux की हो, Unix की, ServiceNow की या किसी ऐसी चीज़ की जिसे कोई पहचान न पाए, और मैंने ध्यान रखा कि लौटकर कुछ ऐसा लाऊँ जो चले, कुछ ऐसा नहीं जो सिर्फ़ सुनने में अच्छा लगे। यह उस तरह की जगह है जहाँ आप सीखते हैं कि इंफ्रास्ट्रक्चर का उबाऊ, अनुशासित तरीक़ा ही वह है जो मंगलवार की सुबह से टकराकर बचा रहता है।\nNominet के बाद मैं इंफ्रास्ट्रक्चर और होस्टिंग में गया। VMware 6.7, डिज़ास्टर रिकवरी के लिए Zerto, Brocade fibre-channel zoning के साथ Dell Compellent और Nexsan स्टोरेज, Azure के साथ FSLogix प्रोफ़ाइल मैनेजमेंट वाला Citrix Cloud। मैंने वहाँ भी Zabbix मॉनिटरिंग शुरू की, टेम्पलेट और स्क्रिप्ट शून्य से डिज़ाइन करके।\nफिर रिटेल। एक छोटी टीम का लाइन मैनेजमेंट, VMware 6.7 एडमिन को एक थर्ड पार्टी से वापस अंदर लाना, Zabbix मॉनिटरिंग लगाना (फिर से, किसी की नाकाम कोशिश की जगह), OS डिप्लॉयमेंट को PXE और Chocolatey के इर्द-गिर्द फिर से बनाना, Fortinet हार्डवेयर से नेटवर्क अपग्रेड करना, और हार्डवेयर की ख़रीद ठीक करना।\nफिर वह भूमिका जिसने सब कुछ बदल दिया। UK Centre for Ecology \u0026amp; Hydrology में मैंने साइंस कंप्यूटिंग टीम सँभाली, चार लोग सीधे मुझे रिपोर्ट करते थे, और इंफ्रास्ट्रक्चर नींव से दोबारा बनाया। डुअल 100Gb स्विचिंग पर hyperconverged Ceph स्टोरेज के साथ 7-node Proxmox VE प्राइवेट क्लाउड। HDR InfiniBand पर Slurm चलाने वाला 8-node HPC क्लस्टर, फ़ैब्रिक तक VM की पहुँच के लिए SR-IOV और सॉफ़्टवेयर बिल्ड के लिए EasyBuild के साथ। GPFS से all-NVMe Ceph स्टोरेज पर माइग्रेशन। हर चीज़ के लिए Netbox को source of truth बनाकर Ansible: पैच मैनेजमेंट, कॉन्फ़िगरेशन ड्रिफ़्ट कंट्रोल, Cloudflare, PowerDNS और Active Directory से इंटीग्रेशन। क्लाउड नेटवर्क के लिए OSPF डायनेमिक राउटिंग। अधिकतम डिप्लॉयमेंट स्पीड और एकरूपता के लिए लोकल रिपॉज़िटरी मिरर। HPC माहौल का CentOS 7 से Rocky 9 पर दोबारा डिप्लॉयमेंट। DNS (DNSSEC समेत), DDoS सुरक्षा और Zero Trust रिमोट एक्सेस के लिए Cloudflare। इसमें 25 authoritative DNS ज़ोन को self-hosted BIND 9 से Cloudflare पर दो कामकाजी दिनों में ले जाना शामिल था। कई रजिस्ट्री अपडेट हुईं, और पूरा काम Ansible और Let\u0026rsquo;s Encrypt से जोड़ा गया।\nसब कुछ ओपन-सोर्स टूल पर, तंग बजट में, जानबूझकर इस तरह बनाया कि Broadcom और VMware का लाइसेंसिंग जाल बंद होने से पहले उससे दूर रहें। उसने बहस ख़त्म कर दी। उस पैमाने पर ओपन-सोर्स इंफ्रास्ट्रक्चर सिर्फ़ चलने लायक़ नहीं है, बेहतर है, और यह कहने के लिए मेरे पास क्लस्टर भी है और इनवॉइस भी।\nउस काम का दूसरा आधा हिस्सा टीम के चार लोग थे। वैज्ञानिकों को इससे मतलब नहीं कि स्टोरेज का नाम क्या है। उन्हें इससे मतलब है कि जॉब आज रात चलेगा या नहीं, और जिससे वे पूछें वह उन्हें बेवक़ूफ़ महसूस करवाए बिना जवाब समझा सके या नहीं।\nसब कुछ एक साथ कैसे आता है croit में प्रीसेल्स में आना दिशा बदलना नहीं था। यह सब कुछ एक जगह आकर उतरना था।\nमैन्युफ़ैक्चरिंग IT प्रोडक्शन आप पर टिका हो तो भरोसेमंदी ऐच्छिक नहीं फ़्रंट-लाइन सपोर्ट सुनना, बात करना और धीरज रखना सीखा एप्लिकेशन डेवलपमेंट ऐसे सिस्टम बनाना जो असली बिज़नेस समस्याएँ हल करें ग्लोबल IT मैनेजमेंट तकनीकी बोझ उठाते हुए लोगों को आगे बढ़ाना गहरी Linux इंजीनियरिंग एस्केलेशन की आख़िरी कड़ी: पीछे फ़ोन करने को कोई नहीं Nominet में क्रिटिकल DNS राष्ट्रीय स्तर का इंफ्रास्ट्रक्चर और अनुशासन इंफ्रास्ट्रक्चर \u0026amp; होस्टिंग बड़े पैमाने पर VMware, स्टोरेज और डिज़ास्टर रिकवरी साइंस कंप्यूटिंग (UKCEH) Proxmox VE + Ceph + HPC पर दोबारा बनाया, पूरा ओपन सोर्स croit में प्रीसेल्स सिस्टम डिज़ाइन करो, डिज़ाइन का बचाव करो, ईमानदार रहो मैन्युफ़ैक्चरिंग IT ने सिखाया कि जिस पल प्रोडक्शन किसी चीज़ पर टिक जाए, भरोसेमंदी पसंद का मामला नहीं रहती। फ़्रंट-लाइन सपोर्ट ने सिखाया कि कुछ भी करने से पहले सुनो। एप्लिकेशन डेवलपमेंट ने सिखाया कि ऐसे सिस्टम बनाओ जो दिलचस्प समस्या नहीं, बिज़नेस की समस्या हल करें। एक ग्लोबल टीम सँभालने ने सिखाया कि तकनीकी बोझ उठाते हुए भी आसपास के लोगों को आगे बढ़ाओ, जो दोनों में से किसी एक हिस्से से ज़्यादा मुश्किल है। थर्ड-लाइन Linux ने सिखाया कि एस्केलेशन की आख़िरी कड़ी होना कैसा लगता है। बीस साल Windows और Linux साथ-साथ चलाने ने सिखाया कि लोड पड़ने पर प्लेटफ़ॉर्म असल में कैसे बर्ताव करते हैं, डेटाशीट के दावे के मुक़ाबले। VMware, जो मैंने 2008 से लगभग हर भूमिका में चलाया, उसने सिखाया कि बड़े पैमाने पर एंटरप्राइज़ वर्चुअलाइज़ेशन कैसा दिखता है, और फिर यह कि जब पूरा सेटअप जिस प्लेटफ़ॉर्म पर टिका हो उसके नीचे की कमर्शियल ज़मीन खिसकती है तो क्या होता है। स्टोरेज और नेटवर्किंग ने सिखाया कि कठिन समस्याएँ कहाँ रहती हैं। सिक्योरिटी हर चीज़ में साथ चली है, शुरू में फ़ायरवॉल और VPN से लेकर आज DNSSEC, Zero Trust और हार्डनिंग तक। Nominet ने अनुशासन सिखाया।\nयह सब जोड़िए और आपको प्रीसेल्स मिलता है। आप सिस्टम डिज़ाइन करते हैं, फिर उस डिज़ाइन का बचाव करते हैं, और यह क्या नहीं करेगा इस पर ईमानदार रहते हैं, क्योंकि कोई आपकी बात पर असली पैसा खर्च करने वाला है।\ncroit में इसका मतलब है यूरोप और एशिया-प्रशांत की उन संस्थाओं के साथ काम करना जो अपने वर्चुअलाइज़ेशन और स्टोरेज पर नए सिरे से सोच रही हैं। बातचीत आमतौर पर VMware छोड़कर Ceph के साथ Proxmox VE पर जाने की होती है। जो वर्कलोड आते हैं वे ज़्यादातर Windows होते हैं, इसलिए क्रॉस-प्लेटफ़ॉर्म अनुभव पुरानी बात नहीं है। यही मैं आज करता हूँ।\nजिस हिस्से की मुझे परवाह है वह ईमानदारी है। मैं किसी के सामने जो रखूँ, वह ऐसी चीज़ होनी चाहिए जो उनकी इमारत में, उनके पैमाने पर, उनकी असली सीमाओं के साथ चले, और अगर उनका मौजूदा हार्डवेयर पहले से ज़्यादातर काम कर रहा है तो मैं उन्हें वही बताऊँगा।\nवह स्टैक जो मैं आज डिज़ाइन करता \u0026amp; बनाता हूँ ऑटोमेशन \u0026amp; source of truth Ansible · NetBox · Let's Encrypt कंप्यूट Proxmox VE: KVM वर्चुअल मशीन + LXC कंटेनर स्टोरेज Ceph: RBD ब्लॉक · CephFS · all-NVMe नेटवर्क 25/100GbE फ़ैब्रिक · BGP / OSPF · नेटिव IPv6 नींव ओपन सोर्स, आपके अपने हार्डवेयर पर स्टोरेज सबसे कठिन समस्याएँ बार-बार स्टोरेज में ही निकलती रहीं। यह सोचा-समझा करियर प्लान नहीं था, बस ऐसा होता चला गया।\nयह लगाव कम उम्र में शुरू हुआ। 90 के दशक में मैं Iomega Zip और Jaz डिस्क के सपने देखता था: एक हटाई जा सकने वाली कार्ट्रिज पर 100MB, और फिर पूरा एक गीगाबाइट, जब बाक़ी सब जो फ़्लॉपी आपस में अदल-बदल करते थे उनमें सिर्फ़ 1.44MB आता था। वे महँगे थे, इसलिए सालों तक वे “चाहिए” रहे, “है” नहीं बने। जब तक मुझे आख़िरकार USB Zip ड्राइव मिली, USB फ़्लैश ड्राइव आनी शुरू हो चुकी थीं, और जिस फ़ॉर्मेट को मैं इतने समय से चाहता था वह पहले ही जाने की राह पर था। एक शुरुआती सबक़ कि स्टोरेज कितनी तेज़ी से बदलता है, और आज की ज़रूरी चीज़ कितनी जल्दी कल की दराज़ का कबाड़ बन जाती है।\nऑप्टिकल भी उसी कहानी का हिस्सा था। 1998 में मेरे पास क्वाड-स्पीड HP CD-RW ड्राइव थी, और वह कमाल की थी। वह ऐसी डिस्क पढ़ और फिर से लिख सकती थी जिन्हें बाद की, तेज़ ड्राइव सीधे मना कर देती थीं, इसलिए रिटायर होने के बहुत बाद तक वह रेस्क्यू ड्राइव के तौर पर अपनी जगह कमाती रही।\nशुरुआत इंटरकनेक्ट से हुई। मैंने हर तरह के स्टोरेज हार्डवेयर पर काम किया है। direct-attached की तरफ़ IDE, SCSI की कई पीढ़ियाँ, SATA, SAS और NVMe। नेटवर्क स्टोरेज की तरफ़ ATA over Ethernet और iSCSI। HP 3par, Dell Compellent, Dell PowerVault, Nexsan: हर एक की अपनी अजीब आदतें और अपने ख़राब होने के तरीक़े।\nवहाँ से बात स्टैक में ऊपर गई। Clustered LVM ने सिखाया कि जब कई नोड को एक साथ पहुँच चाहिए तो शेयर्ड स्टोरेज कैसे बर्ताव करता है, और locking और fencing ठीक न हों तो क्या होता है। ZFS ने सिखाया कि जब आप फ़ाइलसिस्टम के स्तर पर डेटा की अखंडता के बारे में सच में सोचते हैं तो क्या होता है। GPFS ने बड़े पैमाने पर पैरेलल फ़ाइलसिस्टम दिखाए। Ceph ने सिखाया कि डिस्ट्रिब्यूटेड सिस्टम विफलता में कैसे अलग बर्ताव करते हैं।\nसालों में, जो “वह इंसान जो स्टोरेज भी देख लेता है” के रूप में शुरू हुआ था, वह “वह इंसान जिसे तब बुलाते हैं जब स्टोरेज ठीक से डिज़ाइन करना हो” बन गया।\nनेटवर्किंग नेटवर्किंग शुरू से साथ रही है। यह सहायक हुनर नहीं है, मुख्य हुनर है। TCP/IP, DHCP और DNS, McKenna से आगे की मेरी हर एक भूमिका में फैले हैं।\nNominet में काम करने का मतलब था UK की डोमेन नेम रजिस्ट्री के पीछे के इंफ्रास्ट्रक्चर पर काम करना। यह राष्ट्रीय स्तर पर DNS है। नामकरण, रिज़ॉल्यूशन, डेलिगेशन, और यह उम्मीद कि यह हर एक बार चलेगा।\nमैंने BIND 9 पर authoritative ज़ोन चलाए, DNSSEC कॉन्फ़िगर किया, IPv4 और IPv6 के लिए F5 लोड बैलेंसर लगाए, और बाद में API ऑटोमेशन और Let\u0026rsquo;s Encrypt इंटीग्रेशन के साथ DNS सेटअप Cloudflare पर ले गया। मैंने UK और चीन दोनों में क्लस्टर डिप्लॉयमेंट के लिए PXE boot DNS इंफ्रास्ट्रक्चर बनाया है। मैं DNS को दोनों तरफ़ से समझता हूँ। Self-hosted, जहाँ हर विफलता आपकी अपनी है। और managed, जहाँ आप एक प्रोवाइडर पर भरोसा कर रहे हैं और उस भरोसे को मॉनिटरिंग से परखना पड़ता है।\nDNS से आगे भी नेटवर्किंग मेरी हर भूमिका में रही है। VLAN, bonding, LACP, Brocade के साथ fibre-channel zoning, Fortinet और Cisco ASA फ़ायरवॉल, IPTables और IPset। 25GbE और 100GbE फ़ैब्रिक डिज़ाइन, BGP, OSPF डायनेमिक राउटिंग, MTU मैनेजमेंट, IPv6 आर्किटेक्चर। VPN टनलिंग: मुश्किल अंतरराष्ट्रीय लिंक पर OpenVPN से लेकर आधुनिक सुरक्षित एक्सेस के लिए WireGuard और cloudflared तक। Samba भी कई भूमिकाओं में प्रोफ़ेशनल हुनर रहा है, Linux फ़ाइल शेयरिंग और Windows डोमेन इंटीग्रेशन को जोड़ते हुए, उससे बहुत पहले जब मैं alpha में AD इम्प्लीमेंटेशन टेस्ट कर रहा था।\nएक Ceph क्लस्टर नेटवर्क एप्लिकेशन है। स्टोरेज परफ़ॉर्मेंस की छत उसके नीचे का नेटवर्क तय करता है। विफलता के तरीक़े नेटवर्क की विफलता के तरीक़े हैं। यह किताब से सीखी जाने वाली चीज़ नहीं है। यह रात के दो बजे ट्रबलशूटिंग करते हुए सीखी जाती है।\nLinux मैंने दो दशक से ज़्यादा RHEL, Debian, SUSE और Fedora परिवारों पर काम किया है। प्रोफ़ेशनल तौर पर इसका मतलब रहा है लाइव सर्विस के लिए RHEL और CentOS, एप्लिकेशन होस्टिंग के लिए Ubuntu, HPC के लिए Rocky, और निजी इस्तेमाल के लिए Gentoo और Fedora। मैंने LinkedIn का Linux skill assessment पास किया है।\nगहराई उन समस्याओं से आई जिनका Stack Overflow पर कोई जवाब नहीं, और वहीं आप PCI सबसिस्टम अफ़वाहों से नहीं, ठीक से सीखते हैं: IOMMU groups, ACS, VFIO, SR-IOV, Resizable BAR और DMA translation चुपचाप आपकी क्या क़ीमत वसूल रहा है, और kernel boot parameters ऐसे कंट्रोल के रूप में जो मशीन का बर्ताव बदलते हैं, किसी विकी से उतारी गई सूची के रूप में नहीं, सिर्फ़ इसलिए कि किसी के ब्लॉग ने कहा था कि इससे उसकी चीज़ ठीक हो गई।\nस्टोरेज और वर्चुअलाइज़ेशन की परफ़ॉर्मेंस समस्याएँ लगभग हमेशा उस परत तक जाती हैं जिसे किसी ने देखा नहीं। मेरा Linux ज्ञान वहीं रहता है।\nWindows आज मेरा समय Linux पर बीतता है, पर Windows वाला हिस्सा भी उतना ही असली है और मेरी हर नौकरी में रहा है। Windows Server, Active Directory, LDAP, Exchange, IIS, Microsoft SQL Server। इनमें से कुछ भी पुराना हुनर नहीं है जिसे मैंने छोड़ दिया हो।\nयह guest के स्तर पर मायने रखता है, और ज़्यादातर लोग वहीं देखना बंद कर देते हैं। जब कोई Windows वर्कलोड KVM पर चल रहा हो, तो जो इंसान आपको बता सके कि किसी ख़ास CPU टोपोलॉजी में वह guest कैसे बर्ताव करता है, और परफ़ॉर्मेंस की शिकायत को hypervisor पर दोष डालने के बजाय किसी Microsoft पैच तक ट्रेस कर सके, वह वही इंसान है जिसने बाड़ के दोनों तरफ़ साल बिताए हैं। VM परफ़ॉर्मेंस की जितनी बहसें मैंने देखी हैं, उनमें से ज़्यादातर उसने जीतीं जो guest को जानता था, host को नहीं।\nजिन लोगों को मैंने सपोर्ट किया है वे प्रोफ़ेसर और बोर्ड डायरेक्टर से लेकर इमारतों की देखभाल करने वाली टीम तक हैं। हर मामले में काम एक ही है। पता लगाओ कि उन्हें असल में क्या चाहिए, उसे चालू करो, और ऐसे समझाओ कि पूछने के लिए उन्हें बेवक़ूफ़ महसूस न हो।\nVMware VMware वह प्लेटफ़ॉर्म है जिस पर मैं प्रोफ़ेशनल तौर पर बड़ा हुआ, 2008 से सात भूमिकाओं में, और मैंने इसका पूरा स्टैक चलाया: ESXi, vCenter, vSAN, vSphere clustering, vMotion। मुझे पता है यह क्या अच्छा करता है। मुझे पता है कहाँ नहीं करता। और मैंने देखा कि Broadcom के अधिग्रहण ने उन संस्थाओं के नीचे की कमर्शियल हक़ीक़त कैसे फिर से लिख दी जिन्होंने अपना पूरा सेटअप इसी पर बनाया था, और यह इसके बारे में पढ़ने से अलग बात है।\nजिस प्लेटफ़ॉर्म पर आपने कभी ठीक से काम नहीं किया, उसे छोड़ने में आप किसी की मदद नहीं कर सकते। इसलिए मैं उन्हें बता सकता हूँ कि वे क्या छोड़ रहे हैं, क्या पा रहे हैं, और माइग्रेशन का कौन-सा हिस्सा उनकी बताई गई उम्मीद से बुरा होगा।\nऑटोमेशन ऑटोमेशन वाली सोच 2006 में मेरी पहली प्रोफ़ेशनल भूमिका में शुरू हुई। McKenna में AD ड्राइव मैपिंग, प्रिंटर असाइनमेंट और सॉफ़्टवेयर डिप्लॉयमेंट को ऑटोमेट करने वाली VB स्क्रिप्ट। फिर BT Engage IT में HR-से-AD प्रोविज़निंग टूल। फिर Sondrel में diskless compute क्लस्टर के लिए PXE boot सिस्टम। फिर Nominet में Puppet। फिर एक रिटेल कंपनी में Chocolatey पैकेजिंग और PXE रीबिल्ड। फिर कई भूमिकाओं में ServiceNow वर्कफ़्लो कस्टमाइज़ेशन।\nअब यह Netbox को source of truth बनाकर Ansible है। इसलिए नहीं कि ये ट्रेंडी हैं, बल्कि इसलिए कि जो इंफ्रास्ट्रक्चर कोड से दोबारा नहीं बन सकता, उस पर भरोसा नहीं किया जा सकता।\nडॉक्यूमेंटेशन पर भी यही तर्क है। जो जानकारी सिर्फ़ किसी के दिमाग़ में रहती है वह single point of failure है, और वह बाक़ी सबके साथ शाम पाँच बजे इमारत से बाहर चली जाती है। बिल्कुल वैसे ही जैसे पीछे बिना redundancy वाली डिस्क, और उसे उतनी ही गंभीरता से लेना चाहिए।\nमॉनिटरिंग मेरा मॉनिटरिंग का अनुभव Pulsant में SolarWinds से शुरू हुआ, पूरे होस्टिंग सेटअप पर बड़े पैमाने की मॉनिटरिंग चलाते हुए। Zabbix बाद में आया, और यह अलग से ज़िक्र का हक़दार है क्योंकि उसके बाद लगभग हर जगह मैंने इसे लगाया है। इसकी शुरुआत Nominet में हुई, जहाँ मैंने टेंडर और टेस्टिंग चलाई और फिर पुराने पड़ते VMware Hyperic सेटअप की जगह हमें Zabbix पर ले गया, और यह इसलिए जीता कि यह सच में आसानी से समझ आता था, ऊपर से नया दिखने वाला और नीचे Nagios पहने एक और टूल नहीं था। उसके बाद मैंने इसे एक होस्टिंग और इंफ्रास्ट्रक्चर प्लेटफ़ॉर्म पर शून्य से लगाया, रिटेल में किसी की नाकाम कोशिश की जगह लगाया, और UKCEH में 8-node HPC क्लस्टर पर नज़र रखने के लिए इस्तेमाल किया।\nहर बार मॉनिटरिंग टेम्पलेट मैंने खुद डिज़ाइन किए और स्क्रिप्ट खुद लिखीं। 2018 में जब मैंने Zabbix Specialist और Professional परीक्षाएँ दीं, तब तक मैं इसे सालों से डिप्लॉय कर रहा था।\nबातचीत क्रिटिकल इंफ्रास्ट्रक्चर में काम करना आपको सटीक होना सिखाता है। प्रीसेल्स में काम करना आपको साफ़ होना सिखाता है। दोनों जुड़े हैं, पर एक नहीं हैं।\nसटीक होने का कोई मतलब नहीं अगर सुनने वाला तर्क समझ ही न पाए, इसलिए मुझे एक ही बात दो बार समझाना सीखना पड़ा: एक बार उस इंजीनियर के लिए जो CRUSH map देखना चाहता है, और एक बार उसके लिए जिसे मंज़ूरी देनी है कि बजट वही रक़म क्यों है जो है। मैं कुछ भी हल्का करके नहीं बताता। मैं बस तर्क का हर क़दम दिखने लायक़ बनाता हूँ, और जहाँ वे चाहें मुझे रोक लें।\nसालों के एंड यूज़र ने मुझे एक अलग तरह का धीरज सिखाया। जो लोग खुद को कमरे में सबसे होशियार समझते हैं, वे आमतौर पर सबसे ज़्यादा बेबस बर्ताव करते हैं। जो “मैं बहुत टेक्निकल नहीं हूँ” से शुरू करते हैं, वे अक्सर सुनते हैं, क़दम मानते हैं और दस मिनट में मामला निपटा लेते हैं। और जो बताते हैं कि उन्हें ठीक-ठीक पता है वे क्या कर रहे हैं, उन्होंने फ़ोन उठाने से पहले आमतौर पर हालत और बिगाड़ दी होती है।\nबिज़नेस सिस्टम का अनुभव यहाँ लोगों की उम्मीद से ज़्यादा काम आता है, क्योंकि मुझे हमेशा दोनों दिशाओं में अनुवाद करना पड़ा है। किसी ऑपरेशंस मैनेजर के लिए SQL आर्किटेक्चर, किसी CTO के लिए स्टोरेज डिज़ाइन, या किसी के बगल में उनकी अपनी डेस्क पर बैठकर उन्हें वह चीज़ दिखाना जो उन्हें कभी दिखाई ही नहीं गई। हर बार वही हुनर।\nकम्युनिटी ज्ञान बाँटना पूरे करियर में साथ चला है।\nजब मैं सोर्स से सिस्टम बना रहा था और समझना था कि USE flag का कोई मेल कंपाइल क्यों तोड़ रहा है, तब मैं Gentoo फ़ोरम पर सक्रिय था। जब मैं Linux और Windows के बीच फ़ाइल शेयरिंग और डोमेन इंटीग्रेशन की समस्याएँ सुलझा रहा था, तब मैंने Samba फ़ोरम पर योगदान दिया। यह सिर्फ़ सवाल पूछने से आगे गया। मैंने Samba पर आधारित एक Active Directory डोमेन कंट्रोलर तब बनाया जब AD सपोर्ट अभी alpha में था। मैंने उसे Windows 2000, XP और Vista क्लाइंट पर टेस्ट किया और नतीजे कम्युनिटी को वापस दिए।\nआज मैं Proxmox कम्युनिटी फ़ोरम पर DamienDye नाम से सक्रिय योगदान देता हूँ। मैं NVMe passthrough परफ़ॉर्मेंस, Windows VM ट्यूनिंग, Ceph ट्रबलशूटिंग और क्लस्टर नेटवर्किंग में मदद करता हूँ।\nतकनीकें बदलती हैं। सिद्धांत नहीं बदलता। अगर मैंने कोई समस्या सुलझा ली है, तो उस पर बैठे रहने से कुछ हासिल नहीं, और छह महीने बाद रात के दो बजे कोई ख़ुश होगा कि यह लिखा हुआ है।\nमुझे समस्याओं में उतना गहरा खोदने की आदत भी है जितना काम को सख़्ती से चाहिए उससे आगे। मैंने एक DIY NVMe power loss protection बोर्ड डिज़ाइन किया है, क्योंकि मैं ठीक-ठीक समझना चाहता था कि हार्डवेयर के स्तर पर FTL करप्शन क्यों होता है। मैंने self-hosted ईमेल प्रोटोकॉल पर रिसर्च की है, क्योंकि मैं किसी प्रोवाइडर पर भरोसा करने के बजाय JMAP को RFC से ऊपर तक समझना चाहता था। मैंने यह ब्लॉग इसलिए बनाया क्योंकि चीज़ों को ठीक से लिखना ही वह तरीक़ा है जिससे आपको अपनी समझ की कमियाँ दिखती हैं।\nकीबोर्ड से दूर कम्युनिटी सब कुछ फ़ोरम पर नहीं रहा।\n2018 में मैं Banbury में Longford Park Community Association के संस्थापकों में से एक था, उसी एस्टेट पर जहाँ मैं रहता हूँ। नए निर्माण के चार फ़ेज़, प्लान में लिखा एक कम्युनिटी सेंटर, और उसे चलाने के लिए कुछ भी मौजूद नहीं। तो मुट्ठी भर निवासियों ने कुछ खड़ा किया।\nमैंने पहले IT वाला हिस्सा सँभाला, क्योंकि देने के लिए मेरे पास वही था। lpca.org.uk डोमेन जनवरी 2018 में लाइव हुआ, और उसके पीछे मैंने वेबसाइट, मेल सिस्टम और कमेटी की सूचियाँ बनाईं, और प्राइवेसी पॉलिसी लिखी।\nमैं शुरू से कमेटी में था, और दिसंबर 2018 से फ़रवरी 2020 तक उसका चेयरमैन रहा। चौदह महीने, और जो चीज़ें सच में मायने रखती थीं वे सब इन्हीं के भीतर हुईं। 11 फ़रवरी 2019 को हमने इसे चैरिटी के रूप में रजिस्टर करवाया, नंबर 1181953। मैंने इमारत की कमर्शियल लीज़ तय करवाई। फिर हमने सेंटर खोला।\nचेयर इसी के लिए था। एजेंडा और मिनट्स के लिए नहीं। एक ऐसी इमारत खुलवाने के लिए जिसमें कुछ सौ घर चलकर आ सकें। निवासी स्वयंसेवक आज भी इसे डेवलपमेंट के फ़ेज़ 1 से 4 तक चलाते हैं: तीन कमरे, एक किचन और एक कार पार्क, जो एस्टेट पर जिसे भी चाहिए उसे घंटे के हिसाब से किराए पर मिलते हैं।\nस्वयंसेवी कमेटियाँ सद्भाव पर चलती हैं, और सद्भाव कोई गवर्नेंस मॉडल नहीं है। इसलिए मैंने लोगों को संविधान पर टिकाए रखा, खुद को भी। मैंने पूछा कि जब संविधान कहता है निवासियों को जोड़ो तो हम बाहर से भर्ती क्यों कर रहे हैं, और मैंने एक ऐसा मेलआउट रोका जो एस्टेट के हर स्पैम फ़ोल्डर में जाकर गिरता। अड़ंगा डालने के लिए नहीं। जो रेज़िडेंट्स एसोसिएशन निवासियों तक पहुँच ही न सके, वह अपने इकलौते काम में पहले ही नाकाम है, और शिकायत के साथ मैंने उसे ठीक करने के लिंक भी भेजे।\nसेंटर अब भी खुला है और मैं कमेटी में नहीं हूँ, और यही सही क्रम है। जो चीज़ तभी तक चलती है जब तक आप वहाँ खड़े होकर उसे थामे रहें, वह कभी ठीक से बनी ही नहीं थी।\nयह साइट यह ब्लॉग एक Hugo स्टैटिक साइट है, जो PaperMod थीम इस्तेमाल करती है। यह Cloudflare Workers पर होस्ट है, जो बनी हुई साइट को स्टैटिक एसेट के रूप में परोसता है।\nमैं यहाँ उस इंफ्रास्ट्रक्चर के बारे में लिखता हूँ जिसके साथ रोज़ काम करता हूँ: Proxmox VE, Ceph, Ansible, Netbox, सर्टिफ़िकेट, और उस हफ़्ते मैं जिस भी चीज़ में खोद रहा था। यह इस्तेमाल करने के लिए लिखा गया है, कमांड और आँकड़ों के साथ, क्योंकि जिस पोस्ट को आप कीबोर्ड पर बैठकर फ़ॉलो न कर सकें वह सिर्फ़ सजावट है। कोई मार्केटिंग की फ़ालतू बातें नहीं। अगर किसी चीज़ में खुरदुरे किनारे हैं, तो पोस्ट यह कहती है।\nसंपर्क करें आप मुझे LinkedIn पर या Proxmox फ़ोरम पर पा सकते हैं।\nअगर आप अपनी जगह के लिए Ceph या Proxmox देख रहे हैं और इस पर पिच के बजाय ढंग की बातचीत चाहते हैं, तो मुझे एक लाइन लिख दीजिए। वर्कलोड, सीमाएँ और वह बजट लेकर आइए जो सच में आपके पास है। मैं बताऊँगा यह क्या करेगा, क्या नहीं करेगा, और अगर ईमानदार जवाब यह है कि आपके पास जो है वही रखिए और उसे ठीक से कॉन्फ़िगर कीजिए, तो वह जवाब भी आपको मिलेगा।\n","permalink":"https://blogs.damiendye.uk/hi/about/","summary":"Damien Dye: प्रीसेल्स इंजीनियर, इंफ्रास्ट्रक्चर विशेषज्ञ और ओपन सोर्स के समर्थक।","title":"मेरे बारे में"}]