Skip to content
Crimson, SeaStore के साथ OSD का Ceph का अपना Seastar रीराइट, बनाम croit FlashStore, अपने खुद के स्टोर वाला Rust रीराइट

FlashStore बनाम Crimson: एक ही OSD को दो बार नए सिरे से लिखना

Crimson, Ceph का अपना OSD रीराइट है, C++ में, Seastar फ़्रेमवर्क पर, SeaStore नाम के नए नेटिव स्टोर के साथ; FlashStore croit का रीराइट है, Rust में, अपने खुद के स्टोर के साथ। दोनों प्रीव्यू में हैं और दोनों का निशाना NVMe और तेज़ नेटवर्क है। यह पोस्ट दोनों की तुलना वैसे करती है जैसे Ceph 21.2.0 Umbrella Crimson को शिप करता है, Ceph के सोर्स और डॉक्यूमेंटेशन और croit के ceph-rust स्नैपशॉट से: हर एक कहाँ से आता है और किस लाइसेंस में, Rust Five Eyes की मेमोरी-सेफ़्टी गाइडेंस पर खरा क्यों उतरता है और C++ क्यों नहीं, Crimson को अपने पूल और एक एक्सपेरिमेंटल फ़्लैग क्यों चाहिए जबकि FlashStore मौजूदा पूल में सीधे जुड़ जाता है, Umbrella में किसी मौजूदा पूल को Crimson पूल में बदलने का कोई तरीका क्यों नहीं है और इसलिए डेटा कॉपी करना पड़ता है, बूट पर हर एक मॉनिटर को क्या बताता है, Seastar रिएक्टर बनाम पिन किए हुए पोलिंग कोर, यह तथ्य कि डिफ़ॉल्ट Crimson OSD अब भी BlueStore चलाता है, SeaStore के onode, OMAP और LBA ट्री बनाम FlashStore का हर शार्ड पर एक ट्री, हर एक किस क्रम में राइट कमिट करता है, SeaStore का सेगमेंट क्लीनर, और हर एक कौन सा हार्डवेयर और कौन से पूल लेगा।

11 नवंबर 2026 · 22 मिनट · 5306 शब्द · Damien Dye
Umbrella BlueStore, किसी भी ड्राइव पर BlueFS के ऊपर RocksDB, बनाम croit FlashStore, power-loss protection वाले NVMe पर हर core के लिए copy-on-write B+tree और WAL

FlashStore बनाम Umbrella BlueStore: croit ने OSD के नीचे क्या बदला

croit का ceph-rust, Ceph OSD का clean-room Rust rewrite है, अपने object store FlashStore के साथ, 9 नवंबर 2026 से public preview में। यह पोस्ट उसे BlueStore के साथ रखती है, ठीक वैसे जैसा Ceph 21.2.0 Umbrella उसे शिप करता है, दोनों प्रोजेक्ट के source और documentation से पढ़कर: repository में क्या है और किन licences के तहत, हर store अपना metadata कहाँ रखता है, 4 KiB का write और 4 KiB से छोटा write हर एक में ड्राइव तक कैसे पहुँचता है, Umbrella के thread pools बनाम FlashStore का हर core पर एक thread, FlashStore power-loss protection को अनिवार्य क्यों बनाता है, यह किस पर नहीं चलता, यह आपके monitors को खुद को BlueStore क्यों बताता है, कौन से BlueStore options यह मानता है और कौन से अनदेखा करता है, और दोनों के बीच का एकमात्र रास्ता backfill क्यों है।

11 नवंबर 2026 · 21 मिनट · 5079 शब्द · Damien Dye
एक Proxmox VE नोड, जिस पर Proxmox का अपना Ceph monitor और manager चल रहा है, और उसके बगल में आठ Optane drives पर croit FlashStore OSDs

Proxmox VE पर FlashStore OSD: एक नोड पर इसे चलाने में क्या लगा

croit का FlashStore OSD, ceph-osd और BlueStore की जगह Rust में लिखा गया OSD है, जो 9 नवंबर 2026 से public preview में है। यह post उसे एक अकेले Proxmox VE 9.2 नोड पर hyperconverged चलाती है: monitor और manager के लिए PVE wizard से Ceph Umbrella 21.2.0, और Intel Optane P4800X drives पर FlashStore OSDs। इसमें है: Umbrella ही Proxmox की एकमात्र release क्यों है जो मेल खाती है, drives को 4 KiB पर format करना और वह controller reset जो format को बीच में तोड़ देता है, croit-flashstore-osd –check क्या बताता है, shipped unit Proxmox की ceph.conf क्यों नहीं पढ़ पाती और उसे ठीक करने वाला drop-in, वह NVMe passthrough जिसे Proxmox का kernel मना करता है और direct backend जो चलता है, PCI address से OSDs को prepare करना, PVE का OSD panel उन्हें क्या समझता है, एक pool, RBD storage और उस पर install हुई Fisher-Price OS (Windows) VM, उस VM के अंदर से CrystalDiskMark जिसे drives के अपने counters के सामने पढ़ा गया, आठों OSDs के चलते Ceph की memory, 1 GiB memory target पर एक साथ तीन VMs, और एक setup script जो यह सब करती है, जिसे एक OSD को शून्य से दोबारा बनाकर परखा गया।

11 नवंबर 2026 · 38 मिनट · 8238 शब्द · Damien Dye
Proxmox के दो डिफ़ॉल्ट: VM के OS टाइप से चालू होने वाले Hyper-V enlightenments, और होस्ट के इंस्टॉल होने के तरीके से चालू होने वाला CPU माइक्रोकोड

Proxmox VE 9 के दो डिफ़ॉल्ट जो शायद आपके पास नहीं हैं: Hyper-V Enlightenments और CPU माइक्रोकोड

Proxmox VE 9 Fisher-Price OS (Windows) गेस्ट के लिए Hyper-V enlightenments चालू करता है और नए होस्ट पर CPU माइक्रोकोड इंस्टॉल करता है, पर सिर्फ़ तब जब VM को Microsoft Windows OS टाइप दिया गया हो और होस्ट 9.x इंस्टॉलर से आया हो। यह पोस्ट बताती है कि enlightenments क्या करते हैं, qemu-server उन्हें चुनने के लिए कौन से सटीक नियम लगाता है (एक लाइव 9.2 होस्ट पर नापा हुआ), मशीन वर्ज़न पिनिंग पुराने VM को जुलाई 2026 के hv-evmcs फ़िक्स से दूर क्यों रखती है, उस फ़िक्स को कौन सा pve-qemu-kvm बिल्ड चाहिए और 10.0 के बाद हर QEMU रिलीज़ ने इन गेस्ट के लिए क्या ठीक किया, ये q35 पर क्यों होने चाहिए और i440fx पर कभी नहीं (जो विज़ार्ड अब भी ज़्यादातर को दे देता है), वे दो फ़्लैग जो आप हाथ से सेट कर सकते हैं, कैसे साबित करें कि VM क्या चला रहा है, माइक्रोकोड कहाँ से आता है (बोर्ड फ़र्मवेयर, Debian और Proxmox की अपनी रिपॉज़िटरी), अपग्रेड किए होस्ट के पास यह क्यों नहीं होता (उदाहरण में एक Intel नोड जो चार Intel रिलीज़ पीछे है), इसे इंस्टॉल करने पर होने वाला initramfs रीबिल्ड और वे पुराने कर्नेल जो वह रीबिल्ड छोड़ देता है, उसके बाद आने वाली Zen 5 RDSEED खराबी, इसे चालू करना, Ceph क्लस्टर पर रोलिंग रीबूट, और खराब अपडेट को वापस लेना।

27 अक्टूबर 2026 · 27 मिनट · 6482 शब्द · Damien Dye

Ceph असल में कौन लिखता है और कौन चलाता है

मैंने पिछले दस साल में Ceph की main ब्रांच का हर कमिट गिना, 478 संगठनों के 1,718 लोगों के कुल 69,613 कमिट, Steering Committee के सभी 38 सदस्यों को उनकी कंपनी तक खोजा, और सार्वजनिक रूप से बताए गए डिप्लॉयमेंट इकट्ठा किए। नतीजा एक ऐसा प्रोजेक्ट है जिसने अपने संस्थापक और अपने दूसरे सबसे बड़े योगदानकर्ता को खोने का झटका बिना लड़खड़ाए झेल लिया, और आज भी उसी रफ़्तार से शिप कर रहा है।

27 अगस्त 2026 · 37 मिनट · 7877 शब्द · Damien Dye
एक NVMe ड्राइव tri-mode adapter में जाती है और 128 की queue depth वाली SCSI disk बनकर निकलती है

Tri-Mode Adapter लचीलापन ख़रीदते हैं, क़ीमत आपकी NVMe queues से चुकती है

Tri-mode adapter हर bay में SAS, SATA या NVMe लगने देता है: असली लचीलापन, और U.3 backplane के होने की वजह। जो वह नहीं बताता, वह यह कि आपकी NVMe ड्राइव NVMe ड्राइव नहीं रहतीं: वे Linux में mpt3sas पर SCSI disk बनकर आती हैं, queue depth 128, एक साझा tag pool और एक x8 uplink के साथ। दो Gen4 ड्राइव कार्ड को भर देती हैं। एक अकेली Gen5 ड्राइव पहले ही उससे आगे है। 2026 में यह सौदा अब भी ठीक है या नहीं, और universal bay controller के नहीं, backplane के क्यों हैं।

13 अगस्त 2026 · 26 मिनट · 5450 शब्द · Damien Dye
तीन स्टोरेज टियर: Optane writes सोखता है, NVMe पर Ceph का मेटाडेटा, और HDD थोक क्षमता देते हैं

HDD वाले Proxmox Ceph क्लस्टर को तेज़ बनाना: मेटाडेटा NVMe पर, हर स्पिंडल के लिए एक Optane, और इसकी कीमत

फ़्लैश की कीमतों ने all-NVMe को सही ठहराना मुश्किल कर दिया है, और एंटरप्राइज़ HDD फिर देखने लायक हैं। हाइपर-कन्वर्ज्ड Proxmox Ceph पर इनसे ठीक-ठाक latency पाने का मतलब है RocksDB को स्पिंडल से हटाना, bcache के ज़रिए हर डिस्क को उसका अपना Optane देना (खास तौर पर Optane, क्योंकि NAND की endurance उस काम के लिए गलत है), और इससे आपके हिस्से आने वाले failure mode के बारे में ईमानदार रहना।

7 अगस्त 2026 · 39 मिनट · 8117 शब्द · Damien Dye
तीन Proxmox नोड त्रिकोण मेश में सीधे केबल से जुड़े, कोई स्विच नहीं

SDN OpenFabric के साथ बिना स्विच का Proxmox मेश: 100G स्विच के बिना Ceph और क्लाइंट नेटवर्क

तीन Proxmox नोड एक त्रिकोण में सीधे एक-दूसरे से जुड़े हैं, मेश पर OpenFabric रूटिंग करता है और उसके ऊपर Ceph और VXLAN क्लाइंट नेटवर्क चलते हैं। पूरा सेटअप वेब इंटरफ़ेस में बना है, और यह भी साफ़ बताया गया है कि यह डिज़ाइन कहाँ आगे नहीं बढ़ता।

7 अगस्त 2026 · 15 मिनट · 3021 शब्द · Damien Dye
गेस्ट की घड़ी होस्ट की घड़ी से दूर भटकती हुई, और एक hypercall उसे वापस खींचती हुई

VM की घड़ी पर भरोसा नहीं किया जा सकता, और QEMU/KVM के लिए ptp_kvm वाला इलाज

वर्चुअल मशीन की घड़ी एक ऐसी धारणा पर बनी है जिसे वर्चुअलाइज़ेशन तोड़ देता है: कि CPU गिनता रहता है। हर hypervisor पर गेस्ट का समय क्यों भटकता है, यह गड़बड़ी असल में क्या तोड़ती है (Kerberos, TLS, Ceph, Windows), और QEMU/KVM पर ptp_kvm इसे ठीक से कैसे सुधारता है।

7 अगस्त 2026 · 15 मिनट · 3153 शब्द · Damien Dye
आठ 512-बाइट लॉजिकल ब्लॉक एक 4K फ़िज़िकल सेक्टर पर मैप होते हुए, बगल में एक-से-एक 4K मैपिंग

4Kn, 512e और 512n: नेटिव 4K क्यों जीतता है, और इम्युलेशन की कीमत क्या है

512e ड्राइव ऐसे 512-बाइट सेक्टर दिखाती हैं जो उनके पास हैं ही नहीं, और हर अनअलाइन्ड write पर फ़र्मवेयर यह कमी पूरी करता है। मीडियम पर, होस्ट में और write amplification में इसकी कीमत, direct synchronous writes सबसे बुरी स्थिति क्यों हैं, और पूरे फ़्लीट को 4Kn में कैसे बदलें।

7 अगस्त 2026 · 28 मिनट · 5934 शब्द · Damien Dye