Для лиги лени: редкий бардак в импортозамещении.
Про что текст: я попытался упорядочить мое представление о качестве импортозаместительных серверов. Не вышло.
Предисловие-1. Культурологическое.
Перед прочтением нужно вспомнить теорию «истинности» в лекциях Техноложки (СПбГТИ(ТУ))
Зачем: чтобы понимать, что 0, иногда, это просто 0. Это не «хорошо» и не «плохо», и тем более «вообще», это 0, и это не 1. Сначала надо принять это как факт, у некоторых комментаторов с этим проблемы.
Предисловие-2. Материальное.
Своего производства микроэлектроники в РФ практически нет, причем нет на всех стадиях и лучше ситуация с 2008 года (покупка AMD Fab 30 - 200 мм подложки,процесс 130 нм) - не стала. Кому интересно обсуждение и ответное рррряя вретииии, заказано же производство супер-рентген-машины – могут почитать статью Российская микроэлектроника — два года спустя и комментарии. Там же приведены ссылки на производство рассыпухи и прочих мелочей. Ее не то чтобы «нет совсем», но ее объемы и качество годятся только для отчетов про успешно закрытый этап финансирования, или для производства каких-то штучных одноразовых изделий. И то, если хоть чуть-чуть поверить лживой пропаганде стран НАТО, под названием Royal United Services Institute (RUSI) Silicon Lifeline: Western Electronics at the Heart of Russia's War Machine, которой верить ни в коем случае нельзя, то не все так хорошо. Верить этому докладу мы, конечно, не будем.
Как комплексное следствие нехватки «всего, кроме неквалифицированных дешевых кадров - этих избыток» – говорить про производство «российских серверов» можно, но. Но учитывая, что там из российского – ручной поверхностный монтаж элементов на схему.
Для современных плат уже идут 20-24 слойные платы, до недавнего времени в РФ делали что-то на 16 слоев.
Российский софт по разметке \ трассировке \ рисованию дорожек для такой сложности – может и есть, а может кто-то доделал что-то опенсорсное. Но может быть и так, что весь дизайн куплен в Китае или на Тайване у Gigabyte Technology (про это ниже).
Станки и линии по сборке – тоже не РФ, возможно даже бессвинцовый припой в РФ не делают. Изагри, может, делает, а может только фасует что-то от KMI Company (KAZAKHSTAN METAL INDUSTRIAL COMPANY).
Что остается из работы:
- оператор-загрузчик многослойного готового текстолита в машину,
- оператор-наладчик установленного шаблона разметки,
- оператор - ручной установщик компонентов,
- оператор – разгрузчик готовой схемы в коробку.
Может быть, что на такие ответственные задачи уже взяли ценных иностранных специалистов (ТМ).
Примеры производства плат в новостях:
9 октября 2021 - Высокотехнологичные серверы российского производства начали делать в Новосибирске
Новость про следующий успешный успех - «Центр открытых разработок» запустил в Рязани серийный выпуск серверов OpenYard (6 декабря 2023) содержит видеоряд от видео из 2021 года, только кадрированное, сравните 0:32 первого видео и 0:04 второго, и 1:10 первого и 0:15 второго. Хотя, это канал MASH, может взяли что было.
После всех процедур
получается какой-то Sugon или Inspur, собранный в РФ, со всеми их проблемами – нет документации, нет поддержки, нет сообщества - есть непонятные сбои. Хотя, почему непонятные – неправильная разводка дорожек в слоях, ослабление сигнала, наводки, прочие ошибки проектирования, старый BIOS, старый BMC, несовместимость наводок от установленных дополнительных плат – и на выходе ситуация «сегодня работало, завтра от вибрации что-то где-то пошло не так - и не работает, а встроенных средств диагностики нет, кроме термодатчика». Intel просто так, всем подряд не раздает инструментария для создания чего-то типа FDM (Fault Diagnosis Management) и анализа дампов на уровне CPU\RAM\PCIe и DR0-DR3, DR6, DR7, JTAG и прочие udbgrd, udbgwr.
Предисловие-3. Общий подход к тестам и уровень брака.
Я до недавнего времени верил, что в ИТ в РФ люди различают состояние «включилось», «сразу не умерло» и «90% партии работает без сбоев год, у 10% вышли из строя следующие компоненты .. ». Оказывается, для многих это не так, и даже наоборот: включилось == работает на 5+.
Хотя те же самые люди не стесняются писать про 95% импортозамещение ESXi – даже если их продукт не умеет элементарного - загружаться с USB флешки, какие уж там многопользовательские файловые системы.
Уровень брака. Для большой четверки (Dell, HPE, Lenovo, Huawei \ xfusion) и примкнувшим к ним Supermicro, и даже для такого странного продукта, как материнские платы от Intel – известен и понятен уровень брака. Для всех российских серверов – я не нахожу открытой статистики и какого-то опыта эксплуатации. Редко когда есть тесты. Сложно судить не только о каких-то эксплуатационных \ технических характеристиках, но и о комплексных – что там с условиями поставки по гарантии, тем более вне Москвы и дальше бетонки (Московское Малое Кольцо (А107). Московское Большое Кольцо (А108)), особенно в условиях уходаDNS DFS DSL DHL. Нет информации, что еще уносят за собой в могилу российские сервера – начиная от связки процессор + память и заканчивая уходом всей стойки от, в хорошем случае, выбитых предохранителей PDU.
Общий обзор, попытка номер 1
На странице Серверы российского производства для госзаказчиков (это один из сайтов "Карма Групп" ) предоставлены аж 14! российских производителей.
Это:
Карма, Крусайдер, Фплюс, Гагарин
ИЦЛ Тимрей, Иру, Нерпа, Кутех
Рикор, Ситроникс, Ютинет, Ядро
Аквариус, Гравитон
Кроме этого, есть еще реестр Минпромторга - https://gisp.gov.ru/pp719v2/pub/prod/
куда включено вообще все и всё подряд. На первой странице списка Минпромторга -
ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "ПРОИЗВОДСТВЕННАЯ КОМПАНИЯ АКВАРИУС" с продуктом Плата материнская AQH110M R30 (АМПР.687283.300),
строкой ниже
ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "СПЕКТР"- с продуктом Крой фуфайки (футболки) с короткими рукавами для осужденных мужчин
Дополнительно поиском нашлись:
Депо шторм, Тринити, Дельта, и кто-то еще, те же OpenYard (кто сказал Gigabyte ?),
Промобит (Bitblaze) - Сервер BITBLAZE Ganymed I3212d
У Промобит в каталог включены целых 3 (три) сервера, причем согласно документу – в 3U сервер устанавливается 2 процессора, но максимум 128 Гб (DDR4) памяти.
Бизнес Система Телеком - Сервер «Иридиум» торговой марки «Звезда», модель ИР-224Х БВМТ.466219.006
Какие-то сервера СИЛА СР2-5422
Пока дописывал текст, нашел еще вот такое - Вычислительные серверы «Звезда» -
На сайтеLone Starr Звезда содержится превосходный, отборный копиум … цитата:
10406138 Корпус сервера
Можно поискать отличия
10398458 Сервер Delta Tioga Pass I22W6U0D00 (ВРТГ.467569.017КДDS.SKUTPBASE.1)
от
10398459 Сервер Delta Tioga Pass I22W2U0D21 (ВРТГ.467569.017КДDS.SKUTPBASE.1-05)
Или найти отличия
10407479 Сервер «Аквариус» T30 S100DC (АМПР.466539.020) (со сроками от 18.04.2023 до 15.04.2026)
10407479 Сервер «Аквариус» T30 S100DC (АМПР.466539.020) (со сроками от 28.11.2023 до 25.11.2026)
Так что реестр это конечно хорошо, только сделано не для выбора серверов, а для показа реестра и актуальности документов.
Листать реестр и перечни интересно, пока не начинаешь искать какие-то детали из списка выше. Например -
Сервер KARMA Basis .. на базе Fujitsu RX1330 M4
Сервер KARMA Data .. на базе Fujitsu RX2540 M5
Сервер KARMA Neuro .. на базе решения Fujitsu RX2530 M5.
Сервер Crusader Squire 220R - 4 слота для установки модулей DIMM DDR4, 128 Gb RAM
Сервер Crusader Squire 420R 2U – на C621 , это чипсет 2017 года, времен Dell R740 и HPE DL380 Gen10. Текущее поколение HPE – Gen 11 (ноябрь 2022 для AMD и Ampere, январь 2023 на Intel) на Intel C741, до 8 Tb RAM (32*256) на 2U (8-Channel DDR5 @ 4800 MT)
С 4 февраля 2024 доступны HPE ProLiant Gen11 servers featuring 5th Gen Intel® Xeon® Scalable processors.
Текущее поколение Dell - PowerEdge R760 (февраль 2023) на Intel C741. Вышел в январе 2023, под LGA 4677 (Socket E)
Российский стоечный сервер F+ data FPD-1-SP-A4K2H-CTO-S1029 корпоративного уровня в корпусе 2U .. лицензия iLO Advanced – это HPE DL360Gen10.
Российский стоечный сервер F+ data FPD-8-SP-5K288G5-CTO корпоративного уровня в корпусе 4U, разработан на базе платформы 5288V5 – это Huawei \ xfusion
GAGARIN Оракул Gen 2 – это Open Compute Project (OCP). Стандарт интересный, только в обычную 19 стойку не ставится. И не понятно, как их правильно писать – GAGARIN, GAGAR>N, GAGAR>IN, Gagar.IN LLC или как-то еще ?
ИЦЛ (ICL) – представляет линейку серверов, не совместимую ни с чем, и скорее всего, уже не существующую в природе после прекращения выпуска Эльбрусов и Байкалов на TSMC -
Сервер teamRAY 1021-1U - 2U корпус, блок питания 800/1000W Redundant, процессор Эльбрус-8С
Сервер teamRAY 1031-1U - 2U корпус, блок питания 800/1000W Redundant, процессор Байкал-S
Или сервера на том же старом Intel C621 -
Сервер teamRAY 2082-2U-M - 2U стоечный корпус, Intel C621
Часть информации, предоставленная на сайте в части серверов, как бы это правильно сказать – не подтверждена ничем. Для тех же teamRAY 2082-2U-M – на сайте заявлена:
совместимость с Windows, Linux, VMware
Открываю VMware Compatibility Guide, ищу -
There are no results found for "teamRAY"
Впрочем, и на официальном сайте то же самое – вот Сервер teamRAY 2122-2U-M, цитата:
Совместимость с операционными системами: Microsoft Windows Server 2016, Microsoft Windows Server 2019, Microsoft Hyper-V Server 2016, Red Hat Enterprise Linux 7/8, CentOS 7.0 и выше, Ubuntu 14.10, SuSE Linux 13.1, SuSE SLES 11/12 SP3/12, VMware ESXi 6.5, 6.7, 7.0
В приложенных документах, разумеется, никаких ссылок на тестирование совместимости и ссылок на Windows Server Catalog или VMware Compatibility Guide – нет. Кому не лень, может поискать подтверждение совместимости с RHEL.
Для тех же Fujitsu-RX2530M5 из первых строк, все тоже не очень хорошо с совместимостью – заявлена (на VMware Compatibility Guide) совместимость только с ESXi 6.7 U3 (vSAN 6.7 Update 3), EOL\EOS – последний патч в рамках стандартной поддержки - ESXi 6.7 P08 20497097, 2022/10/06 (Build numbers and versions of VMware ESXi/ESX (2143832)
Совместимость с ESXi 7.0 U3 (vSAN 7.0 Update 3) начинается только с M6 - Fujitsu-RX2530M6
Аналогичная ситуация для iRU C2212P (внутри все тот же старый Intel C621) – официальный сайт заявляет:
Поддерживаемая операционная среда
Alt Server 10, Astra Linux, Microsoft Windows 10 Pro, Microsoft Windows 11 Pro, Microsoft Windows Server 2019 / 2022, Citrix Xen Server, Vmware ESXi, Linux KVM, Windows Hyper-V
Снова открываю VMware Compatibility Guide -
There are no results found for "iRU"
Что хотели сказать писатели документа фразой Linux KVM – я не знаю.
Есть интересный вопрос. Если производитель пишет про поддержку VMware by Broadcom на официальном сайте – то будет ли он решать проблемы по версиям, пусть не 5.5 и не 6.0, а по работе 7u3 и 8u1 на этом оборудовании? Или нет? Если не будет, то про какую «поддержку» речь ?
То же самое касается Windows Hyper-V , что именно там «поддерживается»?
Открываю Windows Server Catalog - https://www.windowsservercatalog.com/ - никакого сервера iRu там нет. Есть только iRU ROCK - by Delovoy Office, Ltd, который совместим с Windows Server 2008 R2 x64 .
Возник еще один интересный вопрос, пока я листаю официальный сайт iRu -
Берем Сервер iRU S3216P под LGA 3647 на все том же C621 -
Оперативная память: 16 x RDIMM/LRDIMM slots,DDR4 RDIMM/LRDIMM (2933 MT/s),8, 16, 32, 64, 128 GB DIMMs (max 4TB)
Кто-то может объяснить, как 16 слотами и модулями по 128 Gb набрать 4 Тб?
Кто там еще пробегал по новостям?
05 декабря 2023: В России запустили массовое производство серверов на территории технопарка «Рязанский». Мощности производителя OpenYard позволяют выпускать 60 тыс. серверных единиц в год.
Ведомости пишут, что Гигабайт покинул здание
Следующим номером в нашей программе идет Delta - Delta Bright Lake.
Просто так открылось, никакого алфавитного или иного порядка тут нет. Кто бы еще обьяснил, почему сервер называется Delta Bright Lake, а не скажем, Добрыня. То есть, DOBRYNYA, конечно.
Открываю полное техническое описание в pdf (ссылка), и читаю:
Поддерживаемые ОС: Astra Linux, ALT Linux, РЕД ОС, ROSA Linux, Windows Server, VMware, Microsoft Azure, RedHat Enterprise Linux
Как это понимать? Любой Windows Server? Любой RHEL ?
VMware – это точно операционная система?
Microsoft Azure – где можно подробнее изучить данную ОС?
Самое удивительное для меня, что сервера Delta действительно тестировали с тогда еще VMware ESXi, 16.08.2021 было в новостях, и в VMware Compatibility Guide сервер Delta Tioga Pass от DELTA SOLUTIONS LLC - присутствует. Для 7u2 / 7u3, но присутствует.
Еще большим удивлением для меня стало, что там же (в Compatibility Guide) есть и Tioga Pass Single Side/HEPB.466216.007 от Gagar.IN LLC и Tioga Pass ORv2-DDR4 RED 5KT от ITRenew Inc.
Придется поверить и в заявленное прохождение тестирования Горизонт-ВС (OpenNebula ?) . Даже на сайте Астры есть, Tioga Pass I22A [8009]
Тут должен был бы быть сарказм «даже документацию нормально сделать не могут, что же с железом», но нет. Документация написана небрежно, но сертификация настоящая. Чего нельзя сказать про часть остальных заявителей.
Гагарин (GAGAR>N ? GAGAR>IN ? Gagar.IN LLC ? Как правильно-то?) тестировался в Кроке – есть микро отчет на Хабре
В том же блоге Крока (от 11 дек 2023 ) висит статья Обзор OpenYard RS1B7I. Что скрывается в 1U сервере из семейства RS101?
Злые языки пишут, что это уж очень похоже на Gigabyte R182 (в модификации R182-N20).
тестирование со странным мнением, цитата:
По степени «нам вообще все равно, что вы о нас думаете» - на первом месте связка Гравитон плюс гелиус.рф . Идем на https://graviton.ru/, оттуда в продукты – гиперконвергентные решения, и тут же идет переадресация на https://гелиус.рф/
Бог с ним с бесплатным сертификатом от LE на три месяца, но каталог с названием «безымянный-1» по ссылке - это пять. В каталоге есть и малоизвестный производитель Элвис (ну как, малоизвестный. Обещали что-то для спутников, но не срослось даже на 180 нм, в 2022 их обещали покарать). Для как - бы - гражданского рынка – процессоры тоже делали на TSMC, 40 нм, ARM Cortex-A9 - 1892ВМ14Я (MCom-02) , каталог на 2017 год тут.
Тем не менее, более-менее полный каталог от Гравитона – лежит как пдф на сайте Гелиуса. Очень, очень очевидное решение. Лучше только заявляемая поддержка 9/5.
Что касается каталога, то оформление pdf разъезжается по всему тексту, выполнено в стиле «и так сойдет», разбавленное грамматическими ошибками типа «бущем» или мутантов «Intel® Xeon® ScalaЫe».
Вызывает интерес и математика в документе – например, для серверов 1U
раздел Администрирование тоже удался. Указаны:
Astra Linux® Special Edition 1.6; 1,7 релиз Смоленск
Альт 8 СП Сервер; Альт Сервер 9.1
РЕД ОС 7.2 МУРОМ
Windows Server® 2019 Standard
Windows Server® 2020 Standard
Windows Server® 2016 Standard
CentOS 6; CentOS 7; FreeBSD 11; VMware ESXi 6.5; VMware ESXi 6.7
Не очень понятно. Документ из 2022 года, может просто устарел, а поддержка Windows Server Datacenter и Windows Server Datacenter: Azure Edition – слишком сложна.
Что есть на самом сайте Гравитона? Посмотрю серверы «Гравитон» С2082И/С2122И/С2242И
Что пишут:
Сервер поддерживает центральные процессоры с тепловыделением 205 Вт, накопители NVMe с малым временем задержки, а также до двух мощных графических процессоров (GPU) в корпусе 2U
Нюанс из документации: До пяти графических процессоров тепловыделением до 75 Вт в корпусе 2U.
Не очень понятно, как это понимать – как 5*75 и всего 375, или как 15*5, и всего 75.
одна NVIDIA A10 – это уже 150 W
Расширенные возможности: наличие 4 сетевых портов.
Нюанс из документации: это 4х 1 Гбит/с RJ-45
Операционная система, цитата
Alt 8 SP Server, Alt Server 9.1, VMware ESXi 6.7, Windows Server® 2016 Standard, Windows Server® 2019 Standard, Ред OС Муром
Снова - говорить про поддержку Datacenter и Datacenter: Azure Edition и VMware by Broadcom 7\8 – не приходится.
Зато на сервере есть звук, и, цитата:
Слот MicroSD с использованием в качестве загрузочного диска и поддержкой гипервизора, специальные внутренние диски SATA DOM
Интересно, какого именно гипервизора? Их, гипервизоров, чуть больше 1, и даже чуть больше 2.
Документации по BIOS\ BMC\IPMI - нет никакой. Вообще.
Документации по работе, запуску и массовому обновлению - нет никакой. Вообще.
Шаблонов под Zabbix или описания SNMP \ OID - нет никаких. Вообще.
Итог
Сначала я хотел написать статью «ой все пропало, полный хлам».
Но. Ситуация сложнее. Сама техника выпускается, и не «полный хлам». Не «топ 5», но и сразу не выделяет волшебный белый дым.
Но все остальное, кроме самой техники – это какой-то квест, и вовсе не уровня «Похищение слона». Хотя, может, и его – в той части, где надо открыть холодильник. Обзоров почти нет, таблиц совместимости с прочим оборудованием нет. Нет каких-то элементарных вещей, типа SNMP \ OID.
То же самое касается «импортозамещающих деривативов» - что-то из документации по совместимости ОС + сервер есть, но
- даже не рядом с Windows Server Catalog или VMware Compatibility Guide по объему и качеству,
- отвратительно оформленное, без рекомендаций по настройкам компонентов, версионности, драйверам, etc.
У интеграторов иногда все же удается собрать стенды и отловить какие-то проблемы или сравнить настройки, и Ростелеком-ЦОД \Даталайн очень вовремя опубликовали полезную статью Как мы тестируем серверы, и, похоже, они много знают про больные места.
Но без интеграторов заниматься этим всем разнообразием и возможными проблемами, будет не просто сложно, но и дорого – нужны специально обученные люди, а они жадные и на обещания грамоты или права подписи «всамделишный архитектор» не ведутся, как руками не води. Магия такого типа работает в основном на джунов, не на сеньоровтойдарианцев.
Тем кто будет с этим работать, я не завидую – денег больше не дадут, а квалификация будет сводится к работе с частными случаями одного из 20 - 30 вендоров. Тупиковая ветка развития для специалиста, которая еще и в любой момент может закрыться.
Пока статья писалась, нашлось разное интересное.
Вне конкурса в номинации «Что это было, Холмс» выступает Российский научный фонд.
В конце 2022 года Фонд разместил Извещение о проведении запроса котировок на поставку сетевого оборудования и выполнение работ для актуализации IT-инфраструктуры # 000152
С такими предметами как:
Маршрутизатор Звезда ZRT-8140-12G10XG, 10 ports 10GE(SFP+), 8 ports GE Combo, 4 ports GE Copper, 1*USB3.0, 4*SIC, 2*PS 350W AC, 3m cable RJ45-to-DB9, 3m cable SFP+ 10G CC2P0.254B(S), 2*SFP GE RJ45
Маркировку 8140-12G10XG имеет Huawei NetEngine AR8140-12G10XG (8 x GE combo, 4 x GE electrical, 10 x 10 GE optical (all WAN ports can be configured as LAN))
Коммутатор Звезда ZSW-6300-H28Y4C, 28 ports 25GE SFP28, 4 ports 100GE QSFP28, 2*PS 300W AC, Basic SW, 2*SFP GE RJ45
Что же это могло быть? Неужели Huawei CloudEngine S6730-H 25GE S6730-H28Y4C ?
Коммутатор Звезда ZSW-5320-H48UM2CC, 48 ports 100M/1G, 4 ports 25GE - Неужели Huawei CloudEngine S5732-H48UM2CC ?
Точка доступа Звезда ZAP5711 - неужели Huawei AirEngine 5761-11 Access Point ?
Точка доступа Звезда ZAP6721 - неужели Huawei AirEngine 6761-21T Access Point ?
Контроллер Звезда ZAC6508 - неужели Huawei AC6508 Access Controller ?
Маршрутизатор Звезда ZRT-8140-12G10XG - неужели Huawei NetEngine AR8140-12G10XG ?
Что же это за такой на самом деле производитель сетевой техники - Звезда, который, кроме этой закупки, не встречается нигде?
Есть еще такой производитель, как Российские коммутаторы доступа - Вектор Технологии с коммутаторами VA2100-48P-4X или VA2100-48T-4X. Интересно, где же я видел маркировку «48T-4X», кто бы это мог быть ?
После таких закупок в вакансиях появляются строки типа:
Опыт работы с гипервизорами Звезда, маршрутизаторами Звезда.
Примечания и дополнения
Импортозамещение на практике. Часть 1. Варианты
Импортозамещение на практике. Часть 2. Начало. Гипервизор
Импортозамещение на практике. Часть 3. Операционные системы
«Мыши плакали и кололись..» Импортозамещение на практике. Часть 4 (теоретическая, завершающая). Системы и сервисы
Примечание
Как многократно разоблаченный бдительными комментаторами (почему-то в основном с вчерашней регистрацией или позавчерашней разморозкой и первым комментарием в 2023 году после молчания с 2014-2015 года), не могу не отметить, что «импортозамещение» не то что буксует, а скорее массово не едет никуда дальше выставок, новостей, разговоров и отчетов про успешное внедрение. Дело не столько в наличии коробки под ключ для бизнеса (ихнет), и не в цене (как бы не дороже, чем HPE\Dell даже сейчас), дело в том что продукты, от железа до софта, действительно «не очень». Продвижение ИЗ никогда не велось сколько-то рыночными методами, но в текущей командно-административной системе потребительские \ эксплуатационные качества техники не имеют принципиального значения. Что сверху скажут (настоятельно рекомендуют, или сделают предложение, от которого нельзя отказаться) закупить сервер ЛЧШ-РБ-Э-КЛБС – то и придется покупать, и, возможно, даже эксплуатировать. Но. Ввиду архаизации российского ИТ сообщества – открыто делиться опытом не выгодно с точки зрения бесплатной раздачи своего как-бы уникального знания «как работать с этим». Очень странный это опыт, не очень нужный. Да и, судя по вакансиям, платить за него готовы вне интеграторов только названиями должностей, а не деньгами. Поэтому в паблике будет или реклама, или крики боли.
Единственное что могу сказать, что доволен иногда просачивающимися криками боли от того, что продукт импортозаместительный, ИТ-содержащий, не идентичный натуральному, поставил в определенную позицию организацию, причем с полной потерей данных (не остановкой IO) на импортозаместительном СХД.
Пара тройка удивлений от того, что бекапы надо не только делать, но и проверять (потому что зеленая пометка в российских продуктах вовсе не означает, что данные действительно забекапились и их можно восстановить*), и хранить офлайн, и иметь схему и процедуру восстановления – и, может быть, чему-то через боль эксплуататоры научатся.
* Это не всегда проблема системы бекапа, но давно работающие с бекапом, отлично знают на что отсылка, как этот продукт назывался ранее, как называется теперь.
** Иногда это действительно может быть проблема с CBT, но про ее работу в продуктах импортозаместительных пока никто писать не желает, как и про то, что понимается под 95% аналогом VMFS или ReFS в импортозамещениях.
habr.com
Про что текст: я попытался упорядочить мое представление о качестве импортозаместительных серверов. Не вышло.
Предисловие-1. Культурологическое.
Перед прочтением нужно вспомнить теорию «истинности» в лекциях Техноложки (СПбГТИ(ТУ))
Зачем: чтобы понимать, что 0, иногда, это просто 0. Это не «хорошо» и не «плохо», и тем более «вообще», это 0, и это не 1. Сначала надо принять это как факт, у некоторых комментаторов с этим проблемы.
Предисловие-2. Материальное.
Своего производства микроэлектроники в РФ практически нет, причем нет на всех стадиях и лучше ситуация с 2008 года (покупка AMD Fab 30 - 200 мм подложки,процесс 130 нм) - не стала. Кому интересно обсуждение и ответное рррряя вретииии, заказано же производство супер-рентген-машины – могут почитать статью Российская микроэлектроника — два года спустя и комментарии. Там же приведены ссылки на производство рассыпухи и прочих мелочей. Ее не то чтобы «нет совсем», но ее объемы и качество годятся только для отчетов про успешно закрытый этап финансирования, или для производства каких-то штучных одноразовых изделий. И то, если хоть чуть-чуть поверить лживой пропаганде стран НАТО, под названием Royal United Services Institute (RUSI) Silicon Lifeline: Western Electronics at the Heart of Russia's War Machine, которой верить ни в коем случае нельзя, то не все так хорошо. Верить этому докладу мы, конечно, не будем.
Как комплексное следствие нехватки «всего, кроме неквалифицированных дешевых кадров - этих избыток» – говорить про производство «российских серверов» можно, но. Но учитывая, что там из российского – ручной поверхностный монтаж элементов на схему.
Для современных плат уже идут 20-24 слойные платы, до недавнего времени в РФ делали что-то на 16 слоев.
Российский софт по разметке \ трассировке \ рисованию дорожек для такой сложности – может и есть, а может кто-то доделал что-то опенсорсное. Но может быть и так, что весь дизайн куплен в Китае или на Тайване у Gigabyte Technology (про это ниже).
Станки и линии по сборке – тоже не РФ, возможно даже бессвинцовый припой в РФ не делают. Изагри, может, делает, а может только фасует что-то от KMI Company (KAZAKHSTAN METAL INDUSTRIAL COMPANY).
Что остается из работы:
- оператор-загрузчик многослойного готового текстолита в машину,
- оператор-наладчик установленного шаблона разметки,
- оператор - ручной установщик компонентов,
- оператор – разгрузчик готовой схемы в коробку.
Может быть, что на такие ответственные задачи уже взяли ценных иностранных специалистов (ТМ).
Примеры производства плат в новостях:
9 октября 2021 - Высокотехнологичные серверы российского производства начали делать в Новосибирске
Новость про следующий успешный успех - «Центр открытых разработок» запустил в Рязани серийный выпуск серверов OpenYard (6 декабря 2023) содержит видеоряд от видео из 2021 года, только кадрированное, сравните 0:32 первого видео и 0:04 второго, и 1:10 первого и 0:15 второго. Хотя, это канал MASH, может взяли что было.
После всех процедур
получается какой-то Sugon или Inspur, собранный в РФ, со всеми их проблемами – нет документации, нет поддержки, нет сообщества - есть непонятные сбои. Хотя, почему непонятные – неправильная разводка дорожек в слоях, ослабление сигнала, наводки, прочие ошибки проектирования, старый BIOS, старый BMC, несовместимость наводок от установленных дополнительных плат – и на выходе ситуация «сегодня работало, завтра от вибрации что-то где-то пошло не так - и не работает, а встроенных средств диагностики нет, кроме термодатчика». Intel просто так, всем подряд не раздает инструментария для создания чего-то типа FDM (Fault Diagnosis Management) и анализа дампов на уровне CPU\RAM\PCIe и DR0-DR3, DR6, DR7, JTAG и прочие udbgrd, udbgwr.
Предисловие-3. Общий подход к тестам и уровень брака.
Я до недавнего времени верил, что в ИТ в РФ люди различают состояние «включилось», «сразу не умерло» и «90% партии работает без сбоев год, у 10% вышли из строя следующие компоненты .. ». Оказывается, для многих это не так, и даже наоборот: включилось == работает на 5+.
Хотя те же самые люди не стесняются писать про 95% импортозамещение ESXi – даже если их продукт не умеет элементарного - загружаться с USB флешки, какие уж там многопользовательские файловые системы.
Уровень брака. Для большой четверки (Dell, HPE, Lenovo, Huawei \ xfusion) и примкнувшим к ним Supermicro, и даже для такого странного продукта, как материнские платы от Intel – известен и понятен уровень брака. Для всех российских серверов – я не нахожу открытой статистики и какого-то опыта эксплуатации. Редко когда есть тесты. Сложно судить не только о каких-то эксплуатационных \ технических характеристиках, но и о комплексных – что там с условиями поставки по гарантии, тем более вне Москвы и дальше бетонки (Московское Малое Кольцо (А107). Московское Большое Кольцо (А108)), особенно в условиях ухода
Общий обзор, попытка номер 1
На странице Серверы российского производства для госзаказчиков (это один из сайтов "Карма Групп" ) предоставлены аж 14! российских производителей.
Это:
Карма, Крусайдер, Фплюс, Гагарин
ИЦЛ Тимрей, Иру, Нерпа, Кутех
Рикор, Ситроникс, Ютинет, Ядро
Аквариус, Гравитон
Кроме этого, есть еще реестр Минпромторга - https://gisp.gov.ru/pp719v2/pub/prod/
куда включено вообще все и всё подряд. На первой странице списка Минпромторга -
ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "ПРОИЗВОДСТВЕННАЯ КОМПАНИЯ АКВАРИУС" с продуктом Плата материнская AQH110M R30 (АМПР.687283.300),
строкой ниже
ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "СПЕКТР"- с продуктом Крой фуфайки (футболки) с короткими рукавами для осужденных мужчин
Дополнительно поиском нашлись:
Депо шторм, Тринити, Дельта, и кто-то еще, те же OpenYard (кто сказал Gigabyte ?),
Промобит (Bitblaze) - Сервер BITBLAZE Ganymed I3212d
У Промобит в каталог включены целых 3 (три) сервера, причем согласно документу – в 3U сервер устанавливается 2 процессора, но максимум 128 Гб (DDR4) памяти.
Бизнес Система Телеком - Сервер «Иридиум» торговой марки «Звезда», модель ИР-224Х БВМТ.466219.006
Какие-то сервера СИЛА СР2-5422
Пока дописывал текст, нашел еще вот такое - Вычислительные серверы «Звезда» -
На сайте
Всего на сайте Минпромторга в списке при фильтрации по слову «сервер» находится 690 позиций, но в нем есть и такие позиции:
10406138 Корпус сервера
Можно поискать отличия
10398458 Сервер Delta Tioga Pass I22W6U0D00 (ВРТГ.467569.017КДDS.SKUTPBASE.1)
от
10398459 Сервер Delta Tioga Pass I22W2U0D21 (ВРТГ.467569.017КДDS.SKUTPBASE.1-05)
Или найти отличия
10407479 Сервер «Аквариус» T30 S100DC (АМПР.466539.020) (со сроками от 18.04.2023 до 15.04.2026)
10407479 Сервер «Аквариус» T30 S100DC (АМПР.466539.020) (со сроками от 28.11.2023 до 25.11.2026)
Так что реестр это конечно хорошо, только сделано не для выбора серверов, а для показа реестра и актуальности документов.
Листать реестр и перечни интересно, пока не начинаешь искать какие-то детали из списка выше. Например -
Сервер KARMA Basis .. на базе Fujitsu RX1330 M4
Сервер KARMA Data .. на базе Fujitsu RX2540 M5
Сервер KARMA Neuro .. на базе решения Fujitsu RX2530 M5.
Сервер Crusader Squire 220R - 4 слота для установки модулей DIMM DDR4, 128 Gb RAM
Сервер Crusader Squire 420R 2U – на C621 , это чипсет 2017 года, времен Dell R740 и HPE DL380 Gen10. Текущее поколение HPE – Gen 11 (ноябрь 2022 для AMD и Ampere, январь 2023 на Intel) на Intel C741, до 8 Tb RAM (32*256) на 2U (8-Channel DDR5 @ 4800 MT)
С 4 февраля 2024 доступны HPE ProLiant Gen11 servers featuring 5th Gen Intel® Xeon® Scalable processors.
Текущее поколение Dell - PowerEdge R760 (февраль 2023) на Intel C741. Вышел в январе 2023, под LGA 4677 (Socket E)
Российский стоечный сервер F+ data FPD-1-SP-A4K2H-CTO-S1029 корпоративного уровня в корпусе 2U .. лицензия iLO Advanced – это HPE DL360Gen10.
Российский стоечный сервер F+ data FPD-8-SP-5K288G5-CTO корпоративного уровня в корпусе 4U, разработан на базе платформы 5288V5 – это Huawei \ xfusion
GAGARIN Оракул Gen 2 – это Open Compute Project (OCP). Стандарт интересный, только в обычную 19 стойку не ставится. И не понятно, как их правильно писать – GAGARIN, GAGAR>N, GAGAR>IN, Gagar.IN LLC или как-то еще ?
ИЦЛ (ICL) – представляет линейку серверов, не совместимую ни с чем, и скорее всего, уже не существующую в природе после прекращения выпуска Эльбрусов и Байкалов на TSMC -
Сервер teamRAY 1021-1U - 2U корпус, блок питания 800/1000W Redundant, процессор Эльбрус-8С
Сервер teamRAY 1031-1U - 2U корпус, блок питания 800/1000W Redundant, процессор Байкал-S
Или сервера на том же старом Intel C621 -
Сервер teamRAY 2082-2U-M - 2U стоечный корпус, Intel C621
Часть информации, предоставленная на сайте в части серверов, как бы это правильно сказать – не подтверждена ничем. Для тех же teamRAY 2082-2U-M – на сайте заявлена:
совместимость с Windows, Linux, VMware
Открываю VMware Compatibility Guide, ищу -
There are no results found for "teamRAY"
Впрочем, и на официальном сайте то же самое – вот Сервер teamRAY 2122-2U-M, цитата:
Совместимость с операционными системами: Microsoft Windows Server 2016, Microsoft Windows Server 2019, Microsoft Hyper-V Server 2016, Red Hat Enterprise Linux 7/8, CentOS 7.0 и выше, Ubuntu 14.10, SuSE Linux 13.1, SuSE SLES 11/12 SP3/12, VMware ESXi 6.5, 6.7, 7.0
В приложенных документах, разумеется, никаких ссылок на тестирование совместимости и ссылок на Windows Server Catalog или VMware Compatibility Guide – нет. Кому не лень, может поискать подтверждение совместимости с RHEL.
Для тех же Fujitsu-RX2530M5 из первых строк, все тоже не очень хорошо с совместимостью – заявлена (на VMware Compatibility Guide) совместимость только с ESXi 6.7 U3 (vSAN 6.7 Update 3), EOL\EOS – последний патч в рамках стандартной поддержки - ESXi 6.7 P08 20497097, 2022/10/06 (Build numbers and versions of VMware ESXi/ESX (2143832)
Совместимость с ESXi 7.0 U3 (vSAN 7.0 Update 3) начинается только с M6 - Fujitsu-RX2530M6
Аналогичная ситуация для iRU C2212P (внутри все тот же старый Intel C621) – официальный сайт заявляет:
Поддерживаемая операционная среда
Alt Server 10, Astra Linux, Microsoft Windows 10 Pro, Microsoft Windows 11 Pro, Microsoft Windows Server 2019 / 2022, Citrix Xen Server, Vmware ESXi, Linux KVM, Windows Hyper-V
Снова открываю VMware Compatibility Guide -
There are no results found for "iRU"
Что хотели сказать писатели документа фразой Linux KVM – я не знаю.
Есть интересный вопрос. Если производитель пишет про поддержку VMware by Broadcom на официальном сайте – то будет ли он решать проблемы по версиям, пусть не 5.5 и не 6.0, а по работе 7u3 и 8u1 на этом оборудовании? Или нет? Если не будет, то про какую «поддержку» речь ?
То же самое касается Windows Hyper-V , что именно там «поддерживается»?
Открываю Windows Server Catalog - https://www.windowsservercatalog.com/ - никакого сервера iRu там нет. Есть только iRU ROCK - by Delovoy Office, Ltd, который совместим с Windows Server 2008 R2 x64 .
Возник еще один интересный вопрос, пока я листаю официальный сайт iRu -
Берем Сервер iRU S3216P под LGA 3647 на все том же C621 -
Оперативная память: 16 x RDIMM/LRDIMM slots,DDR4 RDIMM/LRDIMM (2933 MT/s),8, 16, 32, 64, 128 GB DIMMs (max 4TB)
Кто-то может объяснить, как 16 слотами и модулями по 128 Gb набрать 4 Тб?
Кто там еще пробегал по новостям?
05 декабря 2023: В России запустили массовое производство серверов на территории технопарка «Рязанский». Мощности производителя OpenYard позволяют выпускать 60 тыс. серверных единиц в год.
Ведомости пишут, что Гигабайт покинул здание
Следующим номером в нашей программе идет Delta - Delta Bright Lake.
Просто так открылось, никакого алфавитного или иного порядка тут нет. Кто бы еще обьяснил, почему сервер называется Delta Bright Lake, а не скажем, Добрыня. То есть, DOBRYNYA, конечно.
Открываю полное техническое описание в pdf (ссылка), и читаю:
Поддерживаемые ОС: Astra Linux, ALT Linux, РЕД ОС, ROSA Linux, Windows Server, VMware, Microsoft Azure, RedHat Enterprise Linux
Как это понимать? Любой Windows Server? Любой RHEL ?
VMware – это точно операционная система?
Microsoft Azure – где можно подробнее изучить данную ОС?
Самое удивительное для меня, что сервера Delta действительно тестировали с тогда еще VMware ESXi, 16.08.2021 было в новостях, и в VMware Compatibility Guide сервер Delta Tioga Pass от DELTA SOLUTIONS LLC - присутствует. Для 7u2 / 7u3, но присутствует.
Еще большим удивлением для меня стало, что там же (в Compatibility Guide) есть и Tioga Pass Single Side/HEPB.466216.007 от Gagar.IN LLC и Tioga Pass ORv2-DDR4 RED 5KT от ITRenew Inc.
Придется поверить и в заявленное прохождение тестирования Горизонт-ВС (OpenNebula ?) . Даже на сайте Астры есть, Tioga Pass I22A [8009]
Тут должен был бы быть сарказм «даже документацию нормально сделать не могут, что же с железом», но нет. Документация написана небрежно, но сертификация настоящая. Чего нельзя сказать про часть остальных заявителей.
Гагарин (GAGAR>N ? GAGAR>IN ? Gagar.IN LLC ? Как правильно-то?) тестировался в Кроке – есть микро отчет на Хабре
В том же блоге Крока (от 11 дек 2023 ) висит статья Обзор OpenYard RS1B7I. Что скрывается в 1U сервере из семейства RS101?
Злые языки пишут, что это уж очень похоже на Gigabyte R182 (в модификации R182-N20).
тестирование со странным мнением, цитата:
Ничего нормального в отсутствии документации я не вижу. Практика есть, но чего в этом нормального?
По степени «нам вообще все равно, что вы о нас думаете» - на первом месте связка Гравитон плюс гелиус.рф . Идем на https://graviton.ru/, оттуда в продукты – гиперконвергентные решения, и тут же идет переадресация на https://гелиус.рф/
Бог с ним с бесплатным сертификатом от LE на три месяца, но каталог с названием «безымянный-1» по ссылке - это пять. В каталоге есть и малоизвестный производитель Элвис (ну как, малоизвестный. Обещали что-то для спутников, но не срослось даже на 180 нм, в 2022 их обещали покарать). Для как - бы - гражданского рынка – процессоры тоже делали на TSMC, 40 нм, ARM Cortex-A9 - 1892ВМ14Я (MCom-02) , каталог на 2017 год тут.
Тем не менее, более-менее полный каталог от Гравитона – лежит как пдф на сайте Гелиуса. Очень, очень очевидное решение. Лучше только заявляемая поддержка 9/5.
Что касается каталога, то оформление pdf разъезжается по всему тексту, выполнено в стиле «и так сойдет», разбавленное грамматическими ошибками типа «бущем» или мутантов «Intel® Xeon® ScalaЫe».
Вызывает интерес и математика в документе – например, для серверов 1U
Как в 8 слотов по 128 Гб можно собрать 4 Тб? И какой процессор, интересно, предлагается ставить из указанных поколений?
раздел Администрирование тоже удался. Указаны:
Astra Linux® Special Edition 1.6; 1,7 релиз Смоленск
Альт 8 СП Сервер; Альт Сервер 9.1
РЕД ОС 7.2 МУРОМ
Windows Server® 2019 Standard
Windows Server® 2020 Standard
Windows Server® 2016 Standard
CentOS 6; CentOS 7; FreeBSD 11; VMware ESXi 6.5; VMware ESXi 6.7
Не очень понятно. Документ из 2022 года, может просто устарел, а поддержка Windows Server Datacenter и Windows Server Datacenter: Azure Edition – слишком сложна.
Что есть на самом сайте Гравитона? Посмотрю серверы «Гравитон» С2082И/С2122И/С2242И
Что пишут:
Сервер поддерживает центральные процессоры с тепловыделением 205 Вт, накопители NVMe с малым временем задержки, а также до двух мощных графических процессоров (GPU) в корпусе 2U
Нюанс из документации: До пяти графических процессоров тепловыделением до 75 Вт в корпусе 2U.
Не очень понятно, как это понимать – как 5*75 и всего 375, или как 15*5, и всего 75.
одна NVIDIA A10 – это уже 150 W
Расширенные возможности: наличие 4 сетевых портов.
Нюанс из документации: это 4х 1 Гбит/с RJ-45
Операционная система, цитата
Alt 8 SP Server, Alt Server 9.1, VMware ESXi 6.7, Windows Server® 2016 Standard, Windows Server® 2019 Standard, Ред OС Муром
Снова - говорить про поддержку Datacenter и Datacenter: Azure Edition и VMware by Broadcom 7\8 – не приходится.
Зато на сервере есть звук, и, цитата:
Слот MicroSD с использованием в качестве загрузочного диска и поддержкой гипервизора, специальные внутренние диски SATA DOM
Интересно, какого именно гипервизора? Их, гипервизоров, чуть больше 1, и даже чуть больше 2.
Документации по BIOS\ BMC\IPMI - нет никакой. Вообще.
Документации по работе, запуску и массовому обновлению - нет никакой. Вообще.
Шаблонов под Zabbix или описания SNMP \ OID - нет никаких. Вообще.
Итог
Сначала я хотел написать статью «ой все пропало, полный хлам».
Но. Ситуация сложнее. Сама техника выпускается, и не «полный хлам». Не «топ 5», но и сразу не выделяет волшебный белый дым.
Но все остальное, кроме самой техники – это какой-то квест, и вовсе не уровня «Похищение слона». Хотя, может, и его – в той части, где надо открыть холодильник. Обзоров почти нет, таблиц совместимости с прочим оборудованием нет. Нет каких-то элементарных вещей, типа SNMP \ OID.
То же самое касается «импортозамещающих деривативов» - что-то из документации по совместимости ОС + сервер есть, но
- даже не рядом с Windows Server Catalog или VMware Compatibility Guide по объему и качеству,
- отвратительно оформленное, без рекомендаций по настройкам компонентов, версионности, драйверам, etc.
У интеграторов иногда все же удается собрать стенды и отловить какие-то проблемы или сравнить настройки, и Ростелеком-ЦОД \Даталайн очень вовремя опубликовали полезную статью Как мы тестируем серверы, и, похоже, они много знают про больные места.
Но без интеграторов заниматься этим всем разнообразием и возможными проблемами, будет не просто сложно, но и дорого – нужны специально обученные люди, а они жадные и на обещания грамоты или права подписи «всамделишный архитектор» не ведутся, как руками не води. Магия такого типа работает в основном на джунов, не на сеньоров
Тем кто будет с этим работать, я не завидую – денег больше не дадут, а квалификация будет сводится к работе с частными случаями одного из 20 - 30 вендоров. Тупиковая ветка развития для специалиста, которая еще и в любой момент может закрыться.
Пока статья писалась, нашлось разное интересное.
Вне конкурса в номинации «Что это было, Холмс» выступает Российский научный фонд.
В конце 2022 года Фонд разместил Извещение о проведении запроса котировок на поставку сетевого оборудования и выполнение работ для актуализации IT-инфраструктуры # 000152
С такими предметами как:
Маршрутизатор Звезда ZRT-8140-12G10XG, 10 ports 10GE(SFP+), 8 ports GE Combo, 4 ports GE Copper, 1*USB3.0, 4*SIC, 2*PS 350W AC, 3m cable RJ45-to-DB9, 3m cable SFP+ 10G CC2P0.254B(S), 2*SFP GE RJ45
Маркировку 8140-12G10XG имеет Huawei NetEngine AR8140-12G10XG (8 x GE combo, 4 x GE electrical, 10 x 10 GE optical (all WAN ports can be configured as LAN))
Коммутатор Звезда ZSW-6300-H28Y4C, 28 ports 25GE SFP28, 4 ports 100GE QSFP28, 2*PS 300W AC, Basic SW, 2*SFP GE RJ45
Что же это могло быть? Неужели Huawei CloudEngine S6730-H 25GE S6730-H28Y4C ?
Коммутатор Звезда ZSW-5320-H48UM2CC, 48 ports 100M/1G, 4 ports 25GE - Неужели Huawei CloudEngine S5732-H48UM2CC ?
Точка доступа Звезда ZAP5711 - неужели Huawei AirEngine 5761-11 Access Point ?
Точка доступа Звезда ZAP6721 - неужели Huawei AirEngine 6761-21T Access Point ?
Контроллер Звезда ZAC6508 - неужели Huawei AC6508 Access Controller ?
Маршрутизатор Звезда ZRT-8140-12G10XG - неужели Huawei NetEngine AR8140-12G10XG ?
Что же это за такой на самом деле производитель сетевой техники - Звезда, который, кроме этой закупки, не встречается нигде?
Есть еще такой производитель, как Российские коммутаторы доступа - Вектор Технологии с коммутаторами VA2100-48P-4X или VA2100-48T-4X. Интересно, где же я видел маркировку «48T-4X», кто бы это мог быть ?
После таких закупок в вакансиях появляются строки типа:
Опыт работы с гипервизорами Звезда, маршрутизаторами Звезда.
Примечания и дополнения
Импортозамещение на практике. Часть 1. Варианты
Импортозамещение на практике. Часть 2. Начало. Гипервизор
Импортозамещение на практике. Часть 3. Операционные системы
«Мыши плакали и кололись..» Импортозамещение на практике. Часть 4 (теоретическая, завершающая). Системы и сервисы
Примечание
Как многократно разоблаченный бдительными комментаторами (почему-то в основном с вчерашней регистрацией или позавчерашней разморозкой и первым комментарием в 2023 году после молчания с 2014-2015 года), не могу не отметить, что «импортозамещение» не то что буксует, а скорее массово не едет никуда дальше выставок, новостей, разговоров и отчетов про успешное внедрение. Дело не столько в наличии коробки под ключ для бизнеса (ихнет), и не в цене (как бы не дороже, чем HPE\Dell даже сейчас), дело в том что продукты, от железа до софта, действительно «не очень». Продвижение ИЗ никогда не велось сколько-то рыночными методами, но в текущей командно-административной системе потребительские \ эксплуатационные качества техники не имеют принципиального значения. Что сверху скажут (настоятельно рекомендуют, или сделают предложение, от которого нельзя отказаться) закупить сервер ЛЧШ-РБ-Э-КЛБС – то и придется покупать, и, возможно, даже эксплуатировать. Но. Ввиду архаизации российского ИТ сообщества – открыто делиться опытом не выгодно с точки зрения бесплатной раздачи своего как-бы уникального знания «как работать с этим». Очень странный это опыт, не очень нужный. Да и, судя по вакансиям, платить за него готовы вне интеграторов только названиями должностей, а не деньгами. Поэтому в паблике будет или реклама, или крики боли.
Единственное что могу сказать, что доволен иногда просачивающимися криками боли от того, что продукт импортозаместительный, ИТ-содержащий, не идентичный натуральному, поставил в определенную позицию организацию, причем с полной потерей данных (не остановкой IO) на импортозаместительном СХД.
Пара тройка удивлений от того, что бекапы надо не только делать, но и проверять (потому что зеленая пометка в российских продуктах вовсе не означает, что данные действительно забекапились и их можно восстановить*), и хранить офлайн, и иметь схему и процедуру восстановления – и, может быть, чему-то через боль эксплуататоры научатся.
* Это не всегда проблема системы бекапа, но давно работающие с бекапом, отлично знают на что отсылка, как этот продукт назывался ранее, как называется теперь.
** Иногда это действительно может быть проблема с CBT, но про ее работу в продуктах импортозаместительных пока никто писать не желает, как и про то, что понимается под 95% аналогом VMFS или ReFS в импортозамещениях.
Импортозамещение – взгляд от эксплуатации. Что не так с ним. Часть первая и последняя. Серверы
Для лиги лени: редкий бардак в импортозамещении. Про что текст : я попытался упорядочить мое представление о качестве импортозаместительных серверов. Не вышло. Предисловие-1. Культурологическое. Перед...
habr.com