Skip to content
Crimson, SeaStore के साथ OSD का Ceph का अपना Seastar रीराइट, बनाम croit FlashStore, अपने खुद के स्टोर वाला Rust रीराइट

FlashStore बनाम Crimson: एक ही OSD को दो बार नए सिरे से लिखना

Crimson, Ceph का अपना OSD रीराइट है, C++ में, Seastar फ़्रेमवर्क पर, SeaStore नाम के नए नेटिव स्टोर के साथ; FlashStore croit का रीराइट है, Rust में, अपने खुद के स्टोर के साथ। दोनों प्रीव्यू में हैं और दोनों का निशाना NVMe और तेज़ नेटवर्क है। यह पोस्ट दोनों की तुलना वैसे करती है जैसे Ceph 21.2.0 Umbrella Crimson को शिप करता है, Ceph के सोर्स और डॉक्यूमेंटेशन और croit के ceph-rust स्नैपशॉट से: हर एक कहाँ से आता है और किस लाइसेंस में, Rust Five Eyes की मेमोरी-सेफ़्टी गाइडेंस पर खरा क्यों उतरता है और C++ क्यों नहीं, Crimson को अपने पूल और एक एक्सपेरिमेंटल फ़्लैग क्यों चाहिए जबकि FlashStore मौजूदा पूल में सीधे जुड़ जाता है, Umbrella में किसी मौजूदा पूल को Crimson पूल में बदलने का कोई तरीका क्यों नहीं है और इसलिए डेटा कॉपी करना पड़ता है, बूट पर हर एक मॉनिटर को क्या बताता है, Seastar रिएक्टर बनाम पिन किए हुए पोलिंग कोर, यह तथ्य कि डिफ़ॉल्ट Crimson OSD अब भी BlueStore चलाता है, SeaStore के onode, OMAP और LBA ट्री बनाम FlashStore का हर शार्ड पर एक ट्री, हर एक किस क्रम में राइट कमिट करता है, SeaStore का सेगमेंट क्लीनर, और हर एक कौन सा हार्डवेयर और कौन से पूल लेगा।

11 नवंबर 2026 · 22 मिनट · 5306 शब्द · Damien Dye
Umbrella BlueStore, किसी भी ड्राइव पर BlueFS के ऊपर RocksDB, बनाम croit FlashStore, power-loss protection वाले NVMe पर हर core के लिए copy-on-write B+tree और WAL

FlashStore बनाम Umbrella BlueStore: croit ने OSD के नीचे क्या बदला

croit का ceph-rust, Ceph OSD का clean-room Rust rewrite है, अपने object store FlashStore के साथ, 9 नवंबर 2026 से public preview में। यह पोस्ट उसे BlueStore के साथ रखती है, ठीक वैसे जैसा Ceph 21.2.0 Umbrella उसे शिप करता है, दोनों प्रोजेक्ट के source और documentation से पढ़कर: repository में क्या है और किन licences के तहत, हर store अपना metadata कहाँ रखता है, 4 KiB का write और 4 KiB से छोटा write हर एक में ड्राइव तक कैसे पहुँचता है, Umbrella के thread pools बनाम FlashStore का हर core पर एक thread, FlashStore power-loss protection को अनिवार्य क्यों बनाता है, यह किस पर नहीं चलता, यह आपके monitors को खुद को BlueStore क्यों बताता है, कौन से BlueStore options यह मानता है और कौन से अनदेखा करता है, और दोनों के बीच का एकमात्र रास्ता backfill क्यों है।

11 नवंबर 2026 · 21 मिनट · 5079 शब्द · Damien Dye
एक Proxmox VE नोड, जिस पर Proxmox का अपना Ceph monitor और manager चल रहा है, और उसके बगल में आठ Optane drives पर croit FlashStore OSDs

Proxmox VE पर FlashStore OSD: एक नोड पर इसे चलाने में क्या लगा

croit का FlashStore OSD, ceph-osd और BlueStore की जगह Rust में लिखा गया OSD है, जो 9 नवंबर 2026 से public preview में है। यह post उसे एक अकेले Proxmox VE 9.2 नोड पर hyperconverged चलाती है: monitor और manager के लिए PVE wizard से Ceph Umbrella 21.2.0, और Intel Optane P4800X drives पर FlashStore OSDs। इसमें है: Umbrella ही Proxmox की एकमात्र release क्यों है जो मेल खाती है, drives को 4 KiB पर format करना और वह controller reset जो format को बीच में तोड़ देता है, croit-flashstore-osd –check क्या बताता है, shipped unit Proxmox की ceph.conf क्यों नहीं पढ़ पाती और उसे ठीक करने वाला drop-in, वह NVMe passthrough जिसे Proxmox का kernel मना करता है और direct backend जो चलता है, PCI address से OSDs को prepare करना, PVE का OSD panel उन्हें क्या समझता है, एक pool, RBD storage और उस पर install हुई Fisher-Price OS (Windows) VM, उस VM के अंदर से CrystalDiskMark जिसे drives के अपने counters के सामने पढ़ा गया, आठों OSDs के चलते Ceph की memory, 1 GiB memory target पर एक साथ तीन VMs, और एक setup script जो यह सब करती है, जिसे एक OSD को शून्य से दोबारा बनाकर परखा गया।

11 नवंबर 2026 · 38 मिनट · 8238 शब्द · Damien Dye
एक NVMe ड्राइव tri-mode adapter में जाती है और 128 की queue depth वाली SCSI disk बनकर निकलती है

Tri-Mode Adapter लचीलापन ख़रीदते हैं, क़ीमत आपकी NVMe queues से चुकती है

Tri-mode adapter हर bay में SAS, SATA या NVMe लगने देता है: असली लचीलापन, और U.3 backplane के होने की वजह। जो वह नहीं बताता, वह यह कि आपकी NVMe ड्राइव NVMe ड्राइव नहीं रहतीं: वे Linux में mpt3sas पर SCSI disk बनकर आती हैं, queue depth 128, एक साझा tag pool और एक x8 uplink के साथ। दो Gen4 ड्राइव कार्ड को भर देती हैं। एक अकेली Gen5 ड्राइव पहले ही उससे आगे है। 2026 में यह सौदा अब भी ठीक है या नहीं, और universal bay controller के नहीं, backplane के क्यों हैं।

13 अगस्त 2026 · 26 मिनट · 5450 शब्द · Damien Dye
तीन स्टोरेज टियर: Optane writes सोखता है, NVMe पर Ceph का मेटाडेटा, और HDD थोक क्षमता देते हैं

HDD वाले Proxmox Ceph क्लस्टर को तेज़ बनाना: मेटाडेटा NVMe पर, हर स्पिंडल के लिए एक Optane, और इसकी कीमत

फ़्लैश की कीमतों ने all-NVMe को सही ठहराना मुश्किल कर दिया है, और एंटरप्राइज़ HDD फिर देखने लायक हैं। हाइपर-कन्वर्ज्ड Proxmox Ceph पर इनसे ठीक-ठाक latency पाने का मतलब है RocksDB को स्पिंडल से हटाना, bcache के ज़रिए हर डिस्क को उसका अपना Optane देना (खास तौर पर Optane, क्योंकि NAND की endurance उस काम के लिए गलत है), और इससे आपके हिस्से आने वाले failure mode के बारे में ईमानदार रहना।

7 अगस्त 2026 · 39 मिनट · 8117 शब्द · Damien Dye
एक emulated NVMe controller, VirtIO SCSI रास्ते के बगल में, और Proxmox पहले वाले को देख नहीं पाता

Proxmox में एक वर्चुअल NVMe डिवाइस, और वे तीन चीज़ें जो आप छोड़ देते हैं

QEMU एक असली NVMe controller emulate कर सकता है, जिससे guest अपना in-box NVMe ड्राइवर इस्तेमाल करता है और VirtIO media की ज़रूरत नहीं पड़ती। यह डिज़ाइन से ही migrate नहीं होता, Proxmox backups को नहीं दिखता, और VirtIO SCSI से तेज़ नहीं है। यहाँ बताया गया है कि इसे कैसे जोड़ें और कब यह काम का है।

7 अगस्त 2026 · 11 मिनट · 2193 शब्द · Damien Dye
आठ 512-बाइट लॉजिकल ब्लॉक एक 4K फ़िज़िकल सेक्टर पर मैप होते हुए, बगल में एक-से-एक 4K मैपिंग

4Kn, 512e और 512n: नेटिव 4K क्यों जीतता है, और इम्युलेशन की कीमत क्या है

512e ड्राइव ऐसे 512-बाइट सेक्टर दिखाती हैं जो उनके पास हैं ही नहीं, और हर अनअलाइन्ड write पर फ़र्मवेयर यह कमी पूरी करता है। मीडियम पर, होस्ट में और write amplification में इसकी कीमत, direct synchronous writes सबसे बुरी स्थिति क्यों हैं, और पूरे फ़्लीट को 4Kn में कैसे बदलें।

7 अगस्त 2026 · 28 मिनट · 5934 शब्द · Damien Dye
एक कर्व जो queue depth 1 पर bare metal के 36 प्रतिशत से उठकर queue depth 32 तक कुछ प्रतिशत के अंदर आ जाता है

Proxmox VE पर PCIe पासथ्रू परफ़ॉर्मेंस: IOMMU टैक्स और उसे कम कैसे करें

VFIO के ज़रिए VM में पासथ्रू करने पर PCIe डिवाइस throughput क्यों खोते हैं, और वे व्यावहारिक ट्यूनिंग कदम जो उसका ज़्यादातर हिस्सा वापस ले आते हैं।

7 अगस्त 2026 · 21 मिनट · 4448 शब्द · Damien Dye