Одразу розкриття: я працюю в croit, яка продає Ceph і фігурує в таблицях нижче. Я намагався бути таким самим критичним до нас, як і до всіх інших. Кожна цифра взята з публічної історії git, власних записів Ceph у дереві або з названої публічної заяви: усе можна відтворити, і все перелічено в джерелах наприкінці.
Ceph тримає на собі купу заліза, про яке ніхто не думає. Кластери Proxmox, OpenStack, Kubernetes, національні дослідницькі лабораторії, банки, телекоми, прискорювачі частинок. Через двадцять років він досі є першою відповіддю, коли комусь потрібне блокове, файлове й об’єктне зберігання з одного кластера на звичайному залізі.
То хто його пише, хто його підтримує і хто його запускає?
Не «хто є в списку розсилки» чи «хто виступав на Cephalocon». Я клонував ceph/ceph, узяв кожен коміт без злиття, створений за десять років до 2026-08-27, і зіставив авторів із компаніями за власним .organizationmap від Ceph плюс задокументованим набором виправлень. Потім я взяв файл керування Ceph у дереві і простежив усіх 38 членів Steering Committee до роботодавця в їхній власній опублікованій адресі. Потім я пошукав, хто публічно каже, що його запускає.
Разом це 69 613 комітів від 1718 людей із 478 організацій. Картина краща, ніж я очікував на початку, і не та, про яку я збирався писати.
Десятиліття
| Місце | Організація | Коміти | Частка |
|---|---|---|---|
| 1 | Red Hat | 42 354 | 60,8 % |
| 2 | SUSE | 6191 | 8,9 % |
| 3 | IBM | 4308 | 6,2 % |
| 4 | Intel | 2066 | 3,0 % |
| 5 | ZTE | 1176 | 1,7 % |
| 6 | QiAnXin | 900 | 1,3 % |
| 7 | Ceph Foundation | 691 | 1,0 % |
| 8 | Mirantis | 566 | 0,8 % |
| 9 | IONOS | 498 | 0,7 % |
| 10 | China Mobile | 397 | 0,6 % |
| 11 | Proxmox | 254 | 0,4 % |
| 12 | croit | 242 | 0,3 % |
| 13 | Cloudbase Solutions | 239 | 0,3 % |
| 14 | Bloomberg | 231 | 0,3 % |
| 15 | XSKY | 225 | 0,3 % |
| Clyso 181, Huawei 159, Inspur 155, Cafe Bazaar 130, CERN 121, SK Telecom 120, UMCloud 106, Deutsche Telekom 105, EasyStack 103, ISCAS 99, Tencent 83 і ще 460 організацій | |||
| Роботодавця в адресі не видно | 6295 | 9,0 % |
Рядки 1 і 3 є однією командою. 4 жовтня 2022 Red Hat і IBM оголосили, що вся команда Ceph із Red Hat переходить до IBM, і IBM перебрала спонсорство Foundation від Red Hat та допомагає фінансувати upstream-лабораторію для тестів. Люди не змінилися; їхні поштові адреси досі мігрують, по одному інженеру, чотири роки потому.
Додай їх: 46 662 коміти. 67,0 % десятиліття.
Обміркуй це перед усім іншим, бо саме ця угода і дає Ceph існувати. Одна компанія платила десяткам інженерів, щоб будувати й доглядати розподілене зберігання, яке вона потім віддає безкоштовно. Десять років поспіль, крізь два поглинання і зміну материнської компанії. Ніхто їх не змушував.
Останні три роки
| Місце | Організація | Коміти | Частка |
|---|---|---|---|
| 1 | Red Hat | 7273 | 45,0 % |
| 2 | IBM | 3818 | 23,6 % |
| 3 | QiAnXin | 597 | 3,7 % |
| 4 | Ceph Foundation | 526 | 3,3 % |
| 5 | IONOS | 498 | 3,1 % |
| 6 | Intel | 279 | 1,7 % |
| 7 | Proxmox | 249 | 1,5 % |
| 8 | Bloomberg | 220 | 1,4 % |
| 9 | croit | 157 | 1,0 % |
| 10 | Clyso | 153 | 0,9 % |
| 11 | Cafe Bazaar | 118 | 0,7 % |
| 12 | ISCAS (Інститут програмного забезпечення Китайської академії наук) | 99 | 0,6 % |
| Роботодавця в адресі не видно | 2008 | 12,4 % |
16 160 комітів. Red Hat плюс IBM: 11 091, або 68,6 %.
Стійкість, про яку ніхто не говорить
Ось те, чого я не очікував, і це найкраще в усій цій вправі.
Ceph уже пережив дві події, яких ці дані радили б боятися, і навіть не здригнувся.
Його творець, Sage Weil, написав 7517 комітів за десятиліття, більше, ніж будь-яка організація, крім Red Hat, SUSE та IBM. Лише у 2017 році він написав 2184 коміти, 21,5 % усього проєкту одноосібно. Він відійшов у жовтні 2021 після 17 років; його останній коміт датовано 2022-01-20.
Другий за розміром контриб’ютор десятиліття, SUSE, написав 6191 коміт і досяг піку в 1839 за один рік. Потім компанія скасувала SUSE Enterprise Storage на користь Longhorn від Rancher і згорнулася: 463 у 2021, 110 у 2022, 14 у 2023, 10 у 2024, відтоді нічого.
Обидва в межах тих самих п’яти років. Якби такий сконцентрований проєкт був крихким, саме тоді він би й зламався.
Не зламався. Темп комітів цього року становить 14,6 на день проти 14,8 минулого. Рівно. Випуски продовжували виходити. Керування перебудували в Executive Council і Steering Committee на 38 осіб, і воно втрималося.
| Рік | Усього комітів | Red Hat + IBM | Частка | Усі інші |
|---|---|---|---|---|
| 2016 | 10 286 | 5834 | 56,7 % | 4452 |
| 2017 | 10 158 | 6942 | 68,3 % | 3216 |
| 2018 | 8099 | 5265 | 65,0 % | 2834 |
| 2019 | 9000 | 5934 | 65,9 % | 3066 |
| 2020 | 8361 | 5230 | 62,5 % | 3131 |
| 2021 | 7381 | 4517 | 61,1 % | 2864 |
| 2022 | 4731 | 2937 | 62,0 % | 1794 |
| 2023 | 4634 | 3315 | 71,5 % | 1319 |
| 2024 | 5410 | 3571 | 66,0 % | 1839 |
| 2025 | 5389 | 3730 | 69,2 % | 1659 |
| 2026 | 3495 | 2329 | 66,6 % | 1166 |
(2026 рік до 27 серпня, приблизно вісім місяців.)
Від 57 до 72 відсотків від одного вендора, щороку протягом десятиліття. Обсяг нижчий за пік 2016 року, і так буває, коли проєкт перестає перебудовувати свій фундамент і починає його доглядати. Останні три роки рівні або трохи вище.
Ceph пережив компанії, які його будували
Це справжня історія десятиліття, і в трирічному вікні її взагалі не видно.
Подивися на рядки 2, 5, 8, 10, 13 і 15. SUSE, ZTE, Mirantis, China Mobile, Cloudbase Solutions, XSKY, а ще Inspur, EasyStack, UMCloud, Kylin, UnitedStack, Xtao, Istuary і інші нижче. Разом значно більше 10 000 комітів. Майже все це зупинилося.
- SUSE: 6191 коміт, пік у 2020, тепер нуль.
- ZTE: 1176 комітів, 1071 лише у 2016, останній коміт у 2020.
- Mirantis: 566 комітів, зникли.
- XSKY, EasyStack, Inspur, UMCloud, Kylin, UnitedStack: когорта зберігання епохи OpenStack, усі згорнулися.
Кожна з них була компанією, що ставила продукт на Ceph. Продукти скасували або змінили напрям. А Ceph досі тут і випускає код у тому самому темпі, з їхнім кодом у дереві, і доглядає його вже хтось інший.
Найкраща ілюстрація це дашборд. За десятиліття src/pybind/mgr/dashboard виглядає так:
src/pybind/mgr/dashboard, десять років | Коміти | Частка |
|---|---|---|
| SUSE | 1408 | 36,6 % |
| Red Hat | 1177 | 30,6 % |
| IBM | 734 | 19,1 % |
| Роботодавця не видно | 478 | 12,4 % |
Дашборд Ceph був здебільшого роботою SUSE. Потім SUSE повністю пішла з проєкту. За останні три роки той самий каталог на 57,5 % IBM і на 30,3 % Red Hat, а дашборд досі випускається і досі отримує нові функції.
Це розробка за принципом upstream first, яка робить саме ту роботу, для якої існує. Вендор багато вклав, вендор пішов, а користувачі зберегли програму. Якби SUSE збудувала цей дашборд як закритий шар, прикручений зверху, як зробило б чимало вендорів систем зберігання, він помер би разом із продуктовою лінійкою. Натомість він пішов в upstream, тож вижив.
Наступне десятиліття будують кілька компаній одночасно
Crimson є переписаним з нуля OSD, демона, що володіє твоїми дисками, на фреймворку Seastar, з прицілом на модель «потік на ядро», якої вимагає сучасний NVMe. Це найбільша ставка на наступні десять років Ceph. За десятиліття:
src/crimson, десять років | Коміти | Частка |
|---|---|---|
| Red Hat | 3038 | 52,1 % |
| Intel | 1269 | 21,8 % |
| QiAnXin | 824 | 14,1 % |
| Роботодавця не видно | 450 | 7,7 % |
А за останні три роки Red Hat та IBM разом є меншістю з 45,4 %, при цьому QiAnXin має 28,4 %, а Intel 13,4 %.
Найважливіше, що зараз будується в Ceph, справді є роботою кількох компаній. Не дорожня карта одного вендора з кількома прикрученими контриб’юторами, а три організації, що роками ведуть важку інженерну роботу над тією самою підсистемою, публічно.
QiAnXin заслуговує на примітку, бо більшості людей зі світу зберігання ця назва нічого не каже. Це китайська компанія з корпоративної кібербезпеки, заснована як дочірня компанія Qihoo 360 у 2014 році і виділена приблизно у 2016; Qihoo 360 продала свою решту частки 22,6 % фірмам, пов’язаним із China Electronics Corporation, у квітні 2019 року, а на момент подання на IPO у 2020 році CEC володіла 38,3 %. Корпоративну історію видно в журналі git: їхній провідний контриб’ютор, Xuehan Xu, має коміти під @360.cn у 2017 і 2018 роках і під @qianxin.com з 2021. Компанія з безпеки, що не має продукту зберігання на продаж, вклала 900 комітів у майбутній OSD Ceph. Це відкритий проєкт, що працює саме так, як написано на етикетці.
Хто підтримує Ceph і хто їм платить
Писати код це одне; тримати ключі це інше. Ceph зберігає своє керування в репозиторії, у doc/governance.rst, і Ceph Steering Committee перелічено там поіменно з адресами електронної пошти. Тож на питання «мейнтейнер і його роботодавець» можна відповісти з першоджерела, а не навмання.
Тридцять вісім місць, простежених до роботодавця у власній вказаній адресі кожного члена:
| Роботодавець | Місця |
|---|---|
| Red Hat | 16 |
| IBM | 9 |
| Clyso | 3 |
| Особиста адреса (Anthony D’Atri, Myoungwon Oh) | 2 |
| croit: Igor Fedotov | 1 |
| Bloomberg: Joseph Mundackal | 1 |
| Intel: Yingxin Cheng | 1 |
| Ceph Foundation: Zac Dover | 1 |
| XSKY: Haomai Wang | 1 |
| ZTE: Xie Xingguo | 1 |
| Ubiquiti: Yehuda Sadeh | 1 |
| 11:11 Systems: David Orman | 1 |
Red Hat та IBM мають 25 із 38 місць, тобто 65,8 %. Проти 67,0 % комітів десятиліття і 68,6 % останніх трьох років. Орган керування майже точно відображає код, і це здоровий порядок: голос мають ті, хто робить роботу, а отже, ніхто не має права вето, якого не заробив.
Варто виділити дві деталі, і обидві кажуть щось добре.
XSKY і ZTE досі мають місця. Жодна з цих компаній не закомітила й рядка з 2020 року: останній коміт Haomai Wang датовано 2020-03-18, Xie Xingguo 2020-07-24, після 750 комітів за десятиліття. Ceph їх не вигнав. Проєкт, який тримає місце за людьми, що збудували великі частини BlueStore і OSD, через роки після того, як їхній роботодавець пішов, не ставиться до контриб’юторів як до одноразових.
Yehuda Sadeh сидить у комітеті з адресою @ui.com. Він написав RADOS Gateway, вхідні двері S3 і Swift до RADOS, Reliable Autonomic Distributed Object Store, на якому стоїть усе інше в Ceph, починаючи в DreamHost у 2008 році, через Inktank, Red Hat та IBM: 972 коміти лише за десятиліття і тисячі до того. Ще в липні 2025 року він писав криптографічний код cephx. А в червні 2026 року зробив рівно один коміт, doc: governance/csc: update email address, змінивши власний запис на Ubiquiti. Він змінив роботодавця і зберіг місце. Тут твоя репутація переходить разом із тобою, і це одна з кращих речей у роботі на відкритому.
Лідери компонентів
Лідери компонентів щодня відповідають кожен за свою підсистему:
| Компонент | Що це | Лідер | Роботодавець |
|---|---|---|---|
| Cephadm | Розгортання і керування кластером | Adam King | Red Hat |
| CephFS | POSIX-файлова система | Venky Shankar | Red Hat |
| Crimson | OSD наступного покоління | Matan Breizman | Red Hat |
| Dashboard | Вебінтерфейс керування | Afreen Misbah | IBM |
| RADOS | Сховище об’єктів, на якому стоїть усе інше | Radosław Zarzyński | Red Hat |
| RBD | RADOS Block Device: віртуальні диски | Ilya Dryomov | Red Hat |
| RGW | RADOS Gateway: шар S3 і Swift | Adam Emerson, Eric Ivancich | Red Hat |
| NVMe-oF | Шлюз NVMe over Fabrics | Aviv Caro | IBM |
| Seastore | Бекенд зберігання Crimson | Yingxin Cheng | Intel |
Десять названих лідерів, дев’ять у Red Hat або IBM, а Seastore, бекенд зберігання Crimson, очолюють з Intel. Над ними стоїть Executive Council з трьох осіб, створена, коли пішов Sage Weil: Dan van der Ster (Clyso), Neha Ojha (Red Hat), Patrick Donnelly (IBM). Clyso має третину найвищого органу керування з 0,3 % комітів десятиліття: раду будували навколо судження і репутації, а не чисельності.
Мейнтейнери переходили, а код лишався
Найсильніший аргумент на користь того, що Ceph є справжнім спільним надбанням, а не продуктом однієї компанії, це те, що відбувається, коли його мейнтейнери змінюють роботу. Кожен із цих переходів простежується за адресами в репозиторії:
| Мейнтейнер (поточний роботодавець) | Кар’єра за журналом git | Останній коміт |
|---|---|---|
| Igor Fedotov (croit): BlueStore | Mirantis (2015–17) → SUSE (2017–24) → croit (2021–) | 2026-08-24 |
| Kefu Chai (Proxmox): ядро, збірка | Red Hat (2015–22, 4770 комітів) → XSKY → Proxmox (2025–) | 2026-08-18 |
| Radosław Zarzyński (Red Hat): лідер RADOS | Mirantis (2015–17) → Red Hat (2017–) | 2026-06-16 |
| Dan van der Ster (Clyso): Executive Council | CERN (2013–22) → Clyso (2023–) | 2026-03-18 |
| Zac Dover (Ceph Foundation): документація | незалежний → Clyso → Ceph Foundation | 2026-07-23 |
| Yehuda Sadeh (Ubiquiti): автор RGW | DreamHost → Inktank → Red Hat → IBM → Ubiquiti | 2026-06-08 |
| Mark Nelson (Clyso): продуктивність | DreamHost → Inktank → Red Hat → Clyso | 2024-04-16 |
| Xuehan Xu (QiAnXin): Crimson | Qihoo 360 (2017–18) → QiAnXin (2021–) | 2026 |
По три роботодавці в кожного, у декого чотири, і робота тривала крізь кожен перехід. Igor Fedotov уже пережив стратегії Ceph двох своїх роботодавців і досі підтримує рушій, який кладе твої байти на диск. Тож чесна відповідь на «а що, як вендор піде» така: інженери продовжують.
Хто насправді запускає Ceph
Внески це лише половина. Ось хто вголос каже, що запускає Ceph, з цифрами, які вони опублікували самі.
| Організація | Публічно заявлене розгортання |
|---|---|
| CERN, Європейська організація з ядерних досліджень | 19 продуктивних кластерів, ~73 PB сирої ємності, плюс ще 5 у новому дата-центрі: основа зберігання під IT-хмарою CERN |
| Bloomberg | Сховища об’єктів від сотень TB до понад 8 PB; додали 6 PB сирої ємності наживо, на 50 % більше для онлайн-кластера, менш ніж за годину |
| Wikimedia Foundation | П’ять продуктивних кластерів Ceph: блокове зберігання для Cloud VPS, S3 через multisite RGW і CephFS для Airflow, Dumps і ML-Lab |
| DigitalOcean | Ceph живить її сервіс Block Storage через RBD, із «hundreds of enterprise-class SSDs» на регіон і 3× реплікацією між серверами та стійками |
| OVHcloud | «Persistent storage for virtual machines is ensured by Ceph RADOS Block Device» у її On-Prem Cloud Platform |
| Proxmox | Постачає Ceph як вбудований варіант гіперконвергентного зберігання в Proxmox VE |
На CERN варто подивитися уважніше, бо це найдокладніший публічний опис, який хтось опублікував. З доповіді CERN IT у вересні 2024 року від Enrico Bocchi:
| Ceph у CERN, за застосуванням | Сира ємність | Кластери |
|---|---|---|
| Блоки: OpenStack Cinder/Glance, HDD, 3× репліка | 25,1 PB | 5 |
| Блоки: Flash, EC 4+2 | 976 TB | 2 |
| Файлова система: OpenStack Manila, K8s/OKD, HPC, HDD, 3× репліка | 13,4 PB | 5 |
| Файлова система: Flash, 3× репліка | 1,7 PB | 4 |
| Об’єкти: S3, Swift, резервні копії, HDD, EC 4+2 | 28,2 PB | 2 |
| Об’єкти: multi-site, EC 4+2 | 3,6 PB | 1 |
EC 4+2 означає erasure coding, чотири фрагменти даних на два фрагменти парності. HPC означає високопродуктивні обчислення, K8s це Kubernetes, а OKD його upstream-дистрибутив. Цифри є сирою ємністю, до накладних витрат на реплікацію і кодування.
Дев’ятнадцять продуктивних кластерів, що працюють за проголошеним принципом «don’t put all your eggs in the same basket», і ще п’ять ідуть у новий дата-центр. Історія сервісу є тихою рекламою програми: пілот на 300 TB у 2013 році, 3 PB у продакшені для RBD до грудня, розширення з 3 PB до 6 PB без простою у 2016, S3 і CephFS у продакшені у 2018, цілий кластер CephFS фізично перенесено без простою у 2022, RBD у ядрі в продакшені у 2023.
Найкраще про все каже те, що на ньому тримається в CERN: GitLab, OpenStack, OpenShift, Kubernetes, Harbor, Jenkins, Grafana, Kafka, OpenSearch, InfluxDB, HTCondor, Slurm, Jupyter, Spark, Zenodo, Indico і віртуалізація NFS, AFS та CVMFS. Ceph там не побічний експеримент. Це підлога, на якій стоїть решта будівлі.
І загальна цифра спільноти, з власного оголошення Linux Foundation про випуск Squid: 1 ексабайт даних у понад 3000 кластерах Ceph.
Цей ексабайт є нижньою межею, а не підсумком
На цьому варто зупинитися, бо це змінює те, як читати кожну цифру про поширення Ceph.
Телеметрія Ceph вмикається за бажанням. Тебе рахують, лише якщо хтось виконав ceph telemetry on --license sharing-1-0. Кожен, хто цього не зробив, невидимий, а на практиці це більшість, бо за замовчуванням вона вимкнена і ніщо про неї не нагадує.
А тепер додай Proxmox. Proxmox VE постачає Ceph як свій варіант гіперконвергентного зберігання: три вузли, кілька клацань у вебінтерфейсі, pveceph під капотом, і в тебе кластер Ceph. Дуже багато людей запускають Ceph у продакшені, жодного разу не вважаючи себе користувачами Ceph. Вони користувачі Proxmox. Вони ніколи не підписувалися на розсилку, ніколи не напишуть відгук, не вмикали телеметрію і не з’являються в жодній таблиці вище.
Кожна невелика хостингова компанія, постачальник керованих послуг, університетська кафедра, домашня лабораторія, що тихо пішла в продакшен, і офісний кластер із трьох вузлів у цій категорії є справжнім розгортанням Ceph, якого не рахує жодна цифра в цьому дописі. Те саме стосується всіх, хто отримує Ceph через Rook на Kubernetes або всередині аплаєнса вендора, який ніколи не каже, що в нього під кришкою.
Тож 1 EB у 3000 кластерах є цифрою від кластерів, які підняли руку. Справжня встановлена база значно більша, і ніхто не знає наскільки. Для інфраструктурного програмного забезпечення це дивне становище, бо зазвичай вендор знає, адже ти мусив купити ліцензію, і це прямий наслідок того, що програма безкоштовна.
Код вклали 478 організацій
Журнал комітів водночас є списком тих, хто запускає Ceph у масштабі, бо компанія, що надсилає патчі, майже завжди є компанією, що цю штуку запускає. За десятиліття з’являються 478 окремих організаційних поштових доменів, 140 із них мають п’ять комітів або більше.
Назви, згруповані, лише з журналу git:
- Виробники чипів, дисків і заліза: Intel, Samsung, Seagate, SanDisk, Western Digital, Quantum, Mellanox, Lenovo, Fujitsu, Hitachi, Nokia, Arm, Linaro, HiSilicon, Synology, 45Drives
- Хмари і хостинги: DigitalOcean, OVH, IONOS, Akamai, Linode, Hetzner, Binero, City Network, iland, 11:11 Systems, Vexxhost, StackHPC, Canonical, Deutsche Telekom, China Telecom, China Unicom, China Mobile, Chunghwa Telecom
- Інтернет- і корпоративні користувачі: Bloomberg, eBay, GoDaddy, Flipkart, Wikimedia, Naver, LINE, Kakao, SK Telecom, Alibaba, Tencent, Baidu, ByteDance, Kuaishou, UnionPay, SenseTime, Sangfor, Micro Focus, MITRE, Igalia, Walmart Labs
- Вендори зберігання та інтегратори: SUSE, Mirantis, XSKY, EasyStack, Inspur, UMCloud, Kylin, UnitedStack, H3C, Xtao, Eisoo, Cloudin, Istuary, ProphetStor, SoftIron, Bigtera, Cloudbase Solutions, Digiware, Bisect, 42on, croit, Clyso, Proxmox, DreamHost
- Наука й освіта: CERN, Institute of Software at the Chinese Academy of Sciences (ISCAS), Pennsylvania State University, Boston University, University of Michigan, Carnegie Mellon University, плюс асоційовані члени Foundation: FAS Research Computing у Гарварді, Greek Research and Technology Network (GRNET), Monash University, South African Radio Astronomy Observatory (SARAO), Science and Technology Facilities Council (STFC), SWITCH, SLAC у Стенфорді і Center for Research in Open Source Software (CROSS) в UC Santa Cruz
Не всі з них актуальні, і саме для цього варто дивитися на десятиліття. Воно показує весь діапазон тих, хто спирався на цю програму настільки сильно, що надсилав патчі назад, і наскільки широким був цей розкид.
Гравці, які кажуть, що підтримують Ceph, проти того, що вони постачають
Рівневе членство у Foundation є місцем, де компанії заявляють про підтримку. Рівні не відстежують інженерну роботу, і найяскравіша ілюстрація походить від трьох діамантових членів, яких цитує власне оголошення Linux Foundation про випуск Ceph Squid.
| Діамантовий член | Що вони сказали публічно | Коміти, останні 3 роки |
|---|---|---|
| IBM: Vincent Hsu, IBM Fellow, CTO & VP of IBM Storage | «reinforce our trust in Ceph and our commitment to open source» | 11 091 (разом із Red Hat) |
| Bloomberg: Matthew Leonard, Head of Storage Engineering | «Our Diamond Membership is a symbol of our commitment to the future of Ceph and its growing community» | 220 |
| 45Drives: Doug Milburn, Co-founder and President | «our unwavering commitment to open-source excellence» | 0 |
Заяву IBM підкріплено найбільшим інженерним внеском в історії проєкту, і навіть більше. Заяву Bloomberg підкріплено 220 комітами, місцем у Steering Committee і продуктивним парком на 8 PB, про який вони відкрито говорять: серйозний внесок за будь-якою мірою. 45Drives будує і продає апаратні аплаєнси Ceph і фінансує спільну інфраструктуру; це теж справжній внесок, просто не код.
Повна картина за рівнями:
| Член | Рівень | Коміти, останні 3 роки |
|---|---|---|
| IBM | Diamond | 11 091 (разом із Red Hat) |
| Bloomberg | Diamond | 220 |
| CLYSO | Diamond | 153 |
| 45Drives | Diamond | 0 |
| Western Digital | Platinum | 0 |
| 42on | Gold | 1 |
| croit | Silver | 157 |
| DigitalOcean | Silver | 13 |
| Canonical | Silver | 9 |
| OVHcloud, Sony, OSNexus, CloudFerro | Silver | по 0 |
А в іншому напрямку: четверо з семи найбільших контриб’юторів узагалі не є членами:
| Контриб’ютор | Коміти | Член? |
|---|---|---|
| QiAnXin | 597 | Ні |
| IONOS | 498 | Ні |
| Intel | 279 | Уже ні |
| Proxmox | 249 | Ні |
Я не читаю це як лицемірство і волів би, щоб ніхто інший теж так не читав. Гроші Foundation оплачують upstream-лабораторію для тестів, безперервну інтеграцію, через яку проходить кожен pull request, Cephalocon і персонал спільноти: речі, без яких Ceph не обійтися, і які вендор заліза, що постачає аплаєнси Ceph, цілком слушно фінансує. Western Digital, DigitalOcean і OVHcloud продають продукти, що спираються на Ceph, і платять у спільне надбання, яке тримає його на ходу. Це чесний обмін.
Практичний висновок вузький: читай сторінку членів як список тих, хто фінансує спільну інфраструктуру, а журнал комітів як список тих, хто пише код. Це різні питання з різними відповідями, і обидві відповіді корисні.
Засновники, вісім років потому
Foundation запустили 12 листопада 2018. Склад зафіксовано двічі, в оголошенні Linux Foundation і в копії на стрічці новин, і вони точно збігаються: тринадцять членів Premier, десять General, вісім Associate.
Проти сьогоднішньої сторінки членів: четверо з тринадцяти членів Premier досі перелічені під власною назвою (Canonical, DigitalOcean, OVHcloud, Western Digital), п’ятеро, якщо рахувати IBM як місце Red Hat. З десяти членів General лишилися двоє: croit і Intelligent Systems.
А всі вісім членів Associate досі там. Їхні повні назви, як їх подає оголошення про заснування:
- Boston University Information Services and Technology
- CERN, Європейська організація з ядерних досліджень
- FAS Research Computing, Harvard University
- The Greek Research and Technology Network (GRNET)
- Monash University, Мельбурн
- The South African Radio Astronomy Observatory (SARAO)
- The Science and Technology Facilities Council (STFC) у UK Research and Innovation (UKRI)
- The Center for Research in Open Source Software (CROSS) в University of California, Santa Cruz, де Ceph і було написано спочатку, як докторську роботу Sage Weil разом зі Scott Brandt, Ethan Miller, Darrell Long і Carlos Maltzahn; оригінальна стаття 2006 року досі розміщена на ceph.io
Вісім із восьми, за вісім років.
Платні члени змінювалися. Університети й дослідницькі лабораторії, які вступають безкоштовно, протрималися вісім років, і жоден не пішов. Це ті, хто запускає Ceph у масштабі заради науки, і жоден не пішов геть.
Документація Quincy досі містить список членів, яким він був приблизно у 2022 році, і це дає середню точку: дванадцять із двадцяти чотирьох комерційних членів у тому знімку відтоді пішли, рівно половина. Ритм Ceph за цей період не змінився.
Про croit, оскільки це мій роботодавець і один із тих, хто лишився. croit GmbH вступила як засновницький член General у перший же день і досі є членом вісім років потому, довше, ніж протрималися Intel, SUSE, ZTE, Arm чи Samsung. Водночас це 0,3 % комітів десятиліття. Залишатися не те саме, що будувати, і я не збираюся видавати довголіття за внесок для компанії, яка мені платить.
Документація це одна людина, і Foundation йому платить
Рядок 7 таблиці десятиліття це «Ceph Foundation», 691 коміт. Майже повністю одна людина.
Zac Dover має 1060 комітів за десятиліття, майже повністю документацію. За останні три роки він дає 28,4 % усього в doc/, найбільший окремий контриб’ютор, попереду і Red Hat, і IBM. Його історія адрес іде від @gmail.com до @clyso.com, потім до @proton.me, і у власних записах Ceph зіставлена з Ceph Foundation.
doc/, останні три роки | Коміти | Частка |
|---|---|---|
| Ceph Foundation | 499 | 28,4 % |
| Роботодавця не видно | 383 | 21,8 % |
| Red Hat | 379 | 21,5 % |
| IBM | 333 | 18,9 % |
doc/ є єдиним каталогом, де найбільший окремий контриб’ютор не Red Hat і не IBM, і це помітно. Посібник Ceph кращий, ніж вдається більшості інфраструктурних програм такого розміру. Платити технічному письменнику, який не звітує жодному вендору, це найрозумніше, що Foundation робить із грошима.
Окремі люди досі можуть щось змінити
Найактивніші люди десятиліття, згруповані за іменем автора:
| Людина | Коміти за десятиліття | Роботодавець(і) |
|---|---|---|
| Sage Weil | 7517 | Red Hat: творець, пішов у 2022 |
| Kefu Chai | 5538 | Red Hat → Proxmox |
| Casey Bodley | 2472 | Red Hat |
| Patrick Donnelly | 2330 | Red Hat → IBM |
| Jason Dillaman | 1629 | Red Hat: пішов у 2021 |
| Radosław Zarzyński | 1607 | Mirantis → Red Hat |
| Samuel Just | 1415 | DreamHost → Inktank → Red Hat |
| John Mulligan | 1300 | Red Hat |
| Yingxin Cheng | 1202 | Intel |
| Zac Dover | 1060 | Ceph Foundation |
| Yehuda Sadeh | 972 | Red Hat → IBM → Ubiquiti |
| Alfredo Deza | 930 | Red Hat: пішов у 2019 |
Двадцять одна людина написала половину комітів десятиліття; дев’яносто одна написала 80 %. Це нормально для великої кодової бази на C++, і саме тому окремі люди тут так багато важать.
Найясніший доказ того, що двері відчинені: п’яте місце за останні три роки посідає один інженер з IONOS. Max Kellermann має 498 комітів з 2024 року, більше, ніж Intel, Proxmox, Bloomberg, croit чи Clyso як компанії, у src/mds, src/common, src/mon, src/tools, src/librbd, src/mgr і src/rgw. Він дає 19,3 % усієї роботи над метаданими CephFS у цьому вікні, поступаючись лише Red Hat.
Ніхто його не призначав. Він прийшов і почав виправляти, і через три роки він один із найактивніших контриб’юторів проєкту, яким керує компанія з Fortune 50. У Ceph досі можна прийти й мати значення.
Proxmox є іншим боком тієї самої монети: 249 комітів за останні три роки, 241 з них від Kefu Chai з 30 вересня 2025. Proxmox за одинадцять місяців пройшов шлях від нуля до першої десятки контриб’юторів Ceph, найнявши одного доброго інженера.
RGW: де насправді йде робота
Якщо хочеш знати, куди йде інженерна робота Ceph, відповідь: об’єктне зберігання, і причина проста: RGW має пройти найдовший шлях, щоб зрівнятися з тим, із чим конкурує.
src/rgw є найбільшою функціональною підсистемою Ceph за десятиліття, 6958 комітів, попереду Crimson з 5827, OSD з 4499, дашборда з 3848, BlueStore з 2560 і CephFS з 2546. Це вчетверо більше за зусилля над блоковим рівнем. За останні три роки він отримав 1705 комітів, поступаючись лише Crimson, а Crimson є переписуванням з нуля. Серед коду, що вже постачається, RGW є найбільшою поточною програмою розвитку функцій у проєкті.
S3 від Amazon є рухомою ціллю з величезною поверхнею API, і щороку в нього з’являються функції, яких клієнти потім очікують від усього, що називає себе S3-сумісним. Тож RGW за ним женеться. Порахуй теми комітів RGW за останні три роки за функціональними напрямами, і форма цієї гонитви стає очевидною:
| Робота над RGW за останні 3 роки | Коміти, що це згадують |
|---|---|
| Multisite-реплікація | 94 |
| Облікові записи | 94 |
| IAM: керування ідентифікацією і доступом | 72 |
| Політики | 71 |
| Сповіщення бакетів | 69 |
| STS (тимчасові облікові дані) | 67 |
| Topics | 50 |
| Ролі | 47 |
| Restore | 41 |
| POSIX / шлюз файлової системи | 40 |
| Шифрування на боці сервера (SSE) | 38 |
| Multipart upload | 32 |
| Lifecycle | 16 |
| KMS: сервіс керування ключами | 12 |
| S3 Select | 11 |
| Контрольні суми | 11 |
| Cloud transition | 10 |
| Versioning, CORS, object lock, bucket logging, tagging | 28 разом |
(Підрахунок ключових слів у 1705 темах комітів, тож один коміт може з’являтися в кількох рядках: суть у розподілі, а не в точному підсумку.)
Це не підтримка. Це облікові записи, ролі й політики, сесійні токени, сповіщення бакетів і topics, SSE-KMS, object lock, правила lifecycle, S3 Select, контрольні суми, хмарне рівневе зберігання і multisite-реплікація: список функцій AWS, який вибудовують. Прочитай свіжі теми і знайдеш роботу над перевіркою підпису SigV4, обробку x-amz-content-sha256, presigned URL. Копітка дрібниця сумісності, з тих, що мають значення лише тому, що чиясь клієнтська бібліотека очікує точної поведінки Amazon і без неї впаде.
Тому ж у RGW і найстрокатіший список контриб’юторів серед великих підсистем. За десятиліття Red Hat дає 64,3 % його, але там є й Bloomberg (8,6 % у недавньому вікні) і Cafe Bazaar (6,2 %), компанії, що запускають великі сховища об’єктів у продакшені і виправляють те, що їх кусає.
Якщо ти зважуєш Ceph для роботи з S3, саме ця цифра має тебе заспокоїти. Відставання від Amazon є причиною, чому RGW отримує більше уваги, ніж будь-що інше в дереві, і найбільше окреме інженерне зусилля в проєкті спрямоване на те, щоб його скоротити.
RBD: стабільний код, а не занепад
src/librbd є блоковим пристроєм Ceph: його використовує Proxmox, його використовує OpenStack Cinder, його використовує більшість драйверів Container Storage Interface для Kubernetes. Якщо ти запускаєш Ceph, то, ймовірно, запускаєш RBD. Його графік комітів виглядає так:
159 комітів за останні три роки, приблизно один на тиждень, проти 1705 для RGW і 1944 для Crimson.
Ось так виглядає стабільний код, і це перевага. Блокове зберігання поверх RADOS є розв’язаною задачею. RBD роками має знімки, клони, шарування, дзеркалювання, шифрування, живу міграцію і постійний кеш, і попереду нього не мчить нічого схожого на API S3, бо те, чого гіпервізор хоче від блокового пристрою, за десятиліття майже не змінилося. Роботу над функціями зроблено. Лишається догляд: виправлення помилок, крок у ногу з ядром, зрідка виграш у продуктивності.
Порівняй його з RGW навмисно. RGW отримує вдесятеро більше комітів, бо йому лишилося пройти вдесятеро довший шлях. RBD не лишилося, тож він і не отримує. Компонент, який перестав змінювати форму, не є компонентом, що занепадає, і якби librbd раптом отримував 400 комітів на рік, я б хотів знати, що пішло не так, бо тримає він диски моїх віртуальних машин.
Єдине, що варто знати: експертиза тут зосереджена в дуже небагатьох головах. RBD це більш-менш Ilya Dryomov, який доглядає обидва кінці, upstream Ceph і драйвер rbd у ядрі Linux. Це майже найкраща можлива схема, і все одно глибина тут в одну людину. Це каже тобі, кого питати, а не чи розгортати.
Де лежить робота
Те саме зіставлення по всьому дереву, десятиліття і недавнє вікно поруч:
| Ділянка | Лідер десятиліття | Частка | Лідер останніх 3 років | Група IBM, останні 3 роки |
|---|---|---|---|---|
src/mds: метадані CephFS | Red Hat | 78,5 % | Red Hat 56,4 % | 73,9 % |
src/osd: поточний OSD | Red Hat | 69,7 % | Red Hat 56,9 % | 84,0 % |
src/cephadm: розгортання | Red Hat | 66,8 % | Red Hat 73,7 % | 92,0 % |
src/rgw: S3 | Red Hat | 64,3 % | Red Hat 56,1 % | 66,7 % |
src/librbd: блоки | Red Hat | 61,1 % | Red Hat 76,7 % | 83,0 % |
src/crimson: наступний OSD | Red Hat | 52,1 % | Red Hat 42,0 % | 45,4 % |
doc/: посібник | Red Hat | 45,6 % | Ceph Foundation 28,4 % | 40,5 % |
src/os/bluestore: рушій | Red Hat | 36,9 % | IBM 46,5 % | 54,2 % |
src/pybind/mgr/dashboard | SUSE 36,6 % | IBM 57,5 % | 87,8 % |
Тут варто прочитати дві речі. Володіння: що ближче до частин, які продає вендор, інструменти розгортання, GUI, то більше це одна компанія; що далі, OSD наступного покоління, рушій зберігання, посібник, то тісніше, і саме там є місце, якщо хочеш робити внесок десь, що ще не має власника.
Обсяг: за загальною кількістю комітів за десятиліття рейтинг такий: RGW 6958, Crimson 5827, OSD 4499, дашборд 3848, монітори 2896, BlueStore 2560, CephFS 2546, RBD 1750, cephadm 1685. Зусилля йдуть за відстанню до готовності, а не за часткою розгортань. RGW перший, бо до паритету з S3 ще далеко; RBD біля дна, бо блокове зберігання завершене.
BlueStore заслуговує окремого рядка. Це рушій, що записує твої байти на диск, і за останні три роки другий за розміром контриб’ютор після IBM це croit із 18,1 %: Igor Fedotov, його головний мейнтейнер, у компанії з кількох десятків людей. Це мій роботодавець, тож зважай на це. Суть лишається хоч би хто підписував йому чеки: невелика компанія може наймати мейнтейнера одного з найкритичніших для безпеки компонентів у стеку, і проєкту від цього краще.
Хто тримає кнопку злиття
Я порахував і злиття: 7893 за останні три роки, приписані тому, хто натиснув кнопку:
| Організація | Злиття | Частка |
|---|---|---|
| Red Hat | 3892 | 49,3 % |
| IBM | 1597 | 20,2 % |
| Ceph Foundation | 524 | 6,6 % |
| Proxmox | 202 | 2,6 % |
| Intel | 136 | 1,7 % |
| croit | 76 | 1,0 % |
69,5 % злиттів проти 68,6 % комітів. Ворота і робота мають однакову форму. Тут немає ситуації, коли одна компанія пише код, а інша контролює, що потрапляє в дерево, а саме цей режим відмови справді вартий тривоги в корпоративному open source. У Ceph його немає.
Звідки беруться цифри
Усе це можна відтворити. Ceph підтримує власне зіставлення контриб’юторів з організаціями в репозиторії, .organizationmap, поруч із .mailmap, .peoplemap і .githubmap, і документує команду для його використання.
git clone --filter=blob:none --no-checkout https://github.com/ceph/ceph.git
cd ceph
git show HEAD:.organizationmap > /tmp/orgmap
# Ceph's own documented method, over the last ten years
git log --no-merges --since=2016-08-27 --until=2026-08-27 --pretty='%aN <%aE>' \
| git -c mailmap.file=/tmp/orgmap check-mailmap --stdin \
| sort | uniq -c | sort -rn | head -30
# the maintainer-to-employer mapping, straight from the repo
git show HEAD:doc/governance.rst | sed -n '/^.. _csc:/,/^\.\. _ctl:/p' \
| grep -oE '\* [^<]+<[^>]+>'
Запусти першу, і отримаєш меншу IBM, ніж у мене, бо офіційна мапа застаріла. Вона не знає aainscow@uk.ibm.com, bill_scales@uk.ibm.com, ylifshit@ibm.com, rkachach@ibm.com, leonid.usov@ibm.com чи машинно згенерованих імен хостів li-*.ibm.com. Використання власного інструментарію проєкту занижує концентрацію.
Мої виправлення поверх мапи:
- Будь-яка адреса, що закінчується на
ibm.com, включно зuk.ibm.com,il.ibm.com,in.ibm.com,de.ibm.comі формамиli-*.ibm.com, є IBM. redhat.comіinktank.comє Red Hat, показані окремо від IBM, але це та сама команда з жовтня 2022.- Сім особистих адрес приписано роботодавцям там, де це доводить сам репозиторій:
sage@newdream.net(Red Hat),idryomov@gmail.com(вказаний якidryomov@redhat.comу власномуdoc/governance.rstCeph),max.kellermann@gmail.com(IONOS),xxhdx1985126@gmail.com(QiAnXin),yuvalif@yahoo.com(IBM),yingxincheng@gmail.com(Intel),shraddha.agrawal000@gmail.com(IBM). - Усе інше зберігає свій домен. Особисті адреси лишаються «роботодавця не видно», а не вгадуються.
Застереження, які я не можу виправити. Коміти є грубою одиницею: ретельний рефакторинг на 900 рядків рахується один раз, сорок виправлень друкарських помилок рахуються сорок разів, і нічого тут не зважено. Поштові домени неідеальні: 9,0 % десятиліття не показує роботодавця, і комусь із цих людей напевно платять за написання Ceph. Рецензування в git не видно: Ceph рецензує в pull request на GitHub, а не трейлерами Reviewed-by:, яких я знайшов дванадцять за три роки; найважливіші ворота проєкту не лишають сліду в клоні. Цифри лише для main, тож бекпорти в стабільні гілки не пораховано, що занижує роботу з підтримки. І кожна цифра поширення тут є нижньою межею, з причини телеметрії, описаної вище.
Де твердження спирається на дату, я використовував дату автора; де на роботодавця, адресу, яку людина опублікувала сама.
Що я з цього виношу
Ceph є проєктом із корпоративним фінансуванням і справжньою спільнотою по краях, і таким він був усе своє комерційне життя. Це не шпилька. Хтось має платити інженерам, щоб доглядати розподілене зберігання такого масштабу, і десять років хтось платить.
Я не вдаватиму, що Ceph типовий, бо я перевірив. Статистика LWN для Linux 6.15 фіксує 2068 розробників щонайменше від 195 роботодавців, де найбільша окрема компанія, Intel, має 12,0 % наборів змін. У Ceph 1718 людей за десятиліття і одна компанія з 67,0 %. Ядро розподіляє свою корпоративну залежність між десятками фірм. Ceph зосереджує її в одній. Це справжня різниця, і «так роблять усі» було б лінивим способом від неї відмахнутися.
Але ось що десять років даних кажуть про те, чи це важливо, і ця відповідь краща, ніж та, яку я йшов шукати:
Ceph міцний там, де це має значення. Він утратив людину, яка його написала і робила п’яту частину роботи. Він утратив SUSE, свого другого за розміром контриб’ютора й автора дашборда. Він утратив ZTE, Mirantis, XSKY, EasyStack, Inspur і половину засновницьких членів Foundation. Темп комітів сьогодні в межах двох відсотків від минулорічного. Двадцять років інженерної роботи над зберіганням лежать у цьому дереві під LGPL-2.1 або LGPL-3, і ніхто не може його закрити, переліцензувати чи забрати назад.
Мейнтейнери переносні. Fedotov тримає BlueStore на ходу крізь трьох роботодавців. Kefu Chai перейшов з Red Hat до Proxmox і продовжив. Sadeh написав RGW у DreamHost і цього червня змінив свою адресу в комітеті на Ubiquiti. Коли компанія йде, її люди часто лишаються.
Двері справді відчинені. Один інженер з IONOS за три роки став п’ятим за розміром контриб’ютором. Proxmox потрапив у першу десятку з одним найманням. Компанія з безпеки без продукту зберігання будує п’яту частину OSD наступного покоління. Патчі надіслали 478 організацій. Якщо хочеш долучитися, тебе не зупиняє ніщо, крім самої роботи.
База користувачів значно більша, ніж хтось може виміряти. Ексабайт у 3000 кластерах це те, що підняло руку через телеметрію за бажанням, а CERN сам по собі має дев’ятнадцять продуктивних кластерів. Кожен гіперконвергентний кластер Proxmox, кожне розгортання Rook, кожен аплаєнс вендора з Ceph під кришкою є реальним продуктивним використанням, якого не рахує жодна опублікована цифра. Програма, розгорнута так широко і так тихо, просто так не зникає.
Зусилля йдуть туди, де відставання, а не туди, де користувачі. RGW є найбільшою програмою в проєкті, 6958 комітів за десятиліття, бо наздогнати Amazon у S3 це довга гонитва за рухомою ціллю. RBD біля дна, бо блокове зберігання зроблено. Низька кількість комітів у зрілого компонента означає завершену роботу, а не попередження, і прочитати ці дві цифри навпаки є найлегшою помилкою з такими даними. Я сам її зробив на першому проході.
Оцінюй постачальників за комітами, а не за рівнями. Історія публічна, і чотири рядки shell покажуть тобі, хто насправді доглядає те, від чого ти збираєшся залежати. Закрите зберігання не пропонує тобі цього за жодні гроші.
Тож якщо ти зважуєш Ceph: концентрацію варто знати, коли плануєш на п’ять років уперед, і вона не є причиною стримуватися. Зрілий блоковий рівень. Найбільше інженерне зусилля проєкту, спрямоване прямо на паритет із S3. Майбутній OSD, який будують три компанії одночасно. Посібник кращий за більшість. Керування, яке пережило втрату засновника. Десятиліття рецензування на відкритому, робота 478 організацій у дереві і ліцензія, найгіршим випадком якої є форк, а не глухий кут. За свідченням 69 613 комітів, цей проєкт у доброму здоров’ї.
І порахуй сам, якщо мені не віриш. Команди є вище, дані публічні, і ніщо в цьому дописі не треба брати на віру, ні моє, ні чиєсь інше.
Джерела
Джерела проєкту Ceph
- “Ceph: A Scalable, High-Performance Distributed File System” — Weil, Brandt, Miller, Long і Maltzahn, OSDI ‘06, листопад 2006. Стаття, з якої почався Ceph
- ceph/ceph on GitHub — репозиторій, з якого взято кожну цифру комітів;
.organizationmap,.mailmap,.peoplemap,.githubmap,doc/governance.rstіCOPYINGлежать у дереві - Ceph governance — склад Executive Council і Ceph Steering Committee, з адресами
- Ceph component team — лідери компонентів
- Ceph Foundation members — поточне членство за рівнями
- Ceph Foundation documentation — структура рівнів і безкоштовне членство Associate
- Ceph Foundation members, Quincy documentation — членство приблизно станом на 2022 рік
- Ceph telemetry module — підтверджує, що телеметрія вмикається за бажанням
- “Red Hat’s Ceph team is moving to IBM”, 4 жовтня 2022
- Ceph Community Newsletter, November 2021 — відхід Sage Weil
Ceph Foundation і Linux Foundation
- Introducing Ceph Squid — заяви діамантових членів, процитовані вище, і цифри 1 ексабайт / понад 3000 кластерів
- The Linux Foundation Launches Ceph Foundation, 12 листопада 2018 — склад засновницьких членів
- The same release via PRNewswire — використано для незалежного підтвердження складу
Розгортання
- “Ceph: Infrastructure Storage at CERN” — Enrico Bocchi, CERN IT Storage, 27 вересня 2024. Кожна цифра CERN вище взята з цієї презентації
- Why We Chose Ceph to Build Block Storage — DigitalOcean
- “We Added 6 Petabytes Of Ceph Storage and No Clients Noticed” — Matthew Leonard і Joseph Mundackal, Bloomberg, Cephalocon 2020
- Ceph on Wikitech — п’ять продуктивних кластерів Wikimedia Foundation
- Ceph RBD block storage — власна документація OVHcloud
- Deploy Hyper-Converged Ceph Cluster — Proxmox VE постачає Ceph як своє гіперконвергентне зберігання
Компанії
- “SUSE says tschüss to Ceph-based enterprise storage product”, The Register, 25 березня 2021 — SUSE Enterprise Storage скасовано на користь Longhorn
- Qi An Xin files for $634m IPO, Global Venturing, 13 травня 2020 — походження QiAnXin з Qihoo 360, частка CEC і структура власності
Порівняння
- Development statistics for the 6.15 kernel, LWN.net — кількість розробників і роботодавців ядра, використана для порівняння концентрації