Материалы по тегу: 400gbe

15.06.2022 [21:18], Алексей Степин

Cisco обновила коммутаторы Nexus 9000: активный переход на 400G и задел для 800G

Взрывной рост объёмов сетевого трафика, вызванный широким внедрением удалённых рабочих мест, HD-видеоконференций и устройств класса IoT, включая «умную индустрию», требует и соответствующего роста пропускной способности сетевых каналов, а значит, и более скоростных устройств коммутации. Компания Cisco ответила на вызов времени пополнением серии коммутаторов Nexus 9000, которые получили поддержку 400GbE и 800GbE.

Данная серия относится к флагманским, в неё входят как модульные коммутаторы, допускающие гибкую конфигурацию, так и устройства с фиксированной конфигурацией. Компания обновила оба варианта: представлены две новые модульные модели Nexus 9800 и 9400, а также модели в серии Nexus 9300. Позднее на этот год компания намечает внедрение DPU, способных справляться с линейным трафиком на скорости 400 Гбит/с на каждом порту, а также шины PCI Express 5.0.

 cs

Источник изображений: Cisco (via ServeTheHome)

Новое модульное шасси Cisco Nexus 9800, которое является наследником серии 8800, подняло планку суммарной коммутационной способности с 57 до 115 Тбит/с. Оно может вмещать четыре или восемь линейных карт, два модуля супервизора и и несколько модулей питания. На данный момент поддерживаются опции 100GbE и 400GbE, а в ближайшем будущем появится и модули 800GbE.

Каждый слот может обслуживать до 36 портов 400GbE QSFP-DD с потребляемой мощностью 32 Вт на порт; для 100GbE (максимум 48 портов на слот) этот показатель равен 7,5 Вт на порт. Поддержка MACSec заявлена для всех портов. Конфигурация модулей супервизора не разглашается, ранее компания использовала процессоры Intel Broadwell-DE, но не исключено, что в новых моделях флагманских коммутаторов она перешла на более современные решения.

Шасси Nexus 9400 более компактно, оно имеет высоту всего 4U. В модуле супервизора применён четырёхъядерный Xeon D-1500, а сама платформа полагается на 25,6-Тбит/с ASIC Cisco. Всего можно установить восемь модулей и получить до 64 портов 400GbE или до 128 портов 100GbE/200GbE. Заявлена поддержка MACSec для 400GbE-портов.

Серия Nexus 9300 пополнилась моделями N9K-C9364D-GX2A (64 порта 400GbE) и N9K-C9348D-GX2A (48 портов 400GbE) высотой 2U. Они базируются на ASIС с производительностью 25,6 и 19,2 Тбит/с соответственно. По какой-то причине поддержка MACSec на всех портах реализована только в 48-портовой модели. Третья модель, N9K-C9332D-GX2B, имеет только 32 порта 400GbE и использует ASIC класса 12,8 Тбит/с, но при этом она имеет высоту всего 1U.

Таким образом, можно сказать, что стандарт 200GbE, ставший доступным благодаря внедрению PCI Express 4.0, оказался достаточно короткоживущим: рынок крупных ЦОД, провайдеров и владельцев крупномасштабных облачных систем очень активно переходит с привычных 100 Гбит/с на порт на вчетверо более высокую скорость, и не за горами внедрение и 800G-портов. Во всяком случае, поддержка этого стандарта имеется в планах Cisco относительно дальнейшего развития серии Nexus 9800.

Cisco ещё год назад отмечала резкий рост спроса на 400G-решения. Вместе с тем проблемы в цепочке поставок компонентов не позволяют полностью удовлетворить спрос. По состоянию на начало этого года объём невыполненных заказов достиг почти $14 млрд. А в последнем квартале Cisco эта цифра выросла уже до $15 млрд, причём компания недосчиталась $300 млн из-за невозможности получить блоки питания в Китае. Невозможность поставок оборудования также влияет на продажи ПО. К слову, теперь Cisco намерена внедрять облачное управление для практических всех новых устройства в рамках платформу Nexus Cloud.

Постоянный URL: http://servernews.ru/1068132
12.05.2022 [01:20], Алексей Степин

Intel опубликовала планы по развитию IPU: 400GbE в 2024 г., 800GbE в 2026 г.

На мероприятии Vision 2022 компания Intel продолжает рассказывать о текущих и грядущих новинках, и на этот раз речь пойдет о так называемых об IPU (или DPU терминах других производителей). Новые планы Intel простираются до 2026 года и включают в себя создание ускорителей, рассчитанных на работу в сетях 400GbE и 800GbE.

Первое поколение IPU (100/200GbE) Mount Evans использует ASIC и ядра Arm Neoverse N1. Mount Evans разрабатывается совместно с Google и Microsoft. Есть и серия Oak Springs Canyon, в которой компания применила Xeon D и FPGA Agilex. На смену им в будущем придут Mount Morgan (ASIC) и Hot Springs Canyon (FPGA). Оба варианта ожидаются в 2023–24 гг. и позволят Intel освоить скорость 400 Гбит/с. Добраться до 800 Гбит/с планируется в 2025–2026 гг., и тоже при помощи ASIC и FPGA. О развитии «обычных» SmartNIC на базе FPGA компании рассказывать пока не стала.

 Изображение: Intel

Изображение: Intel

Для разработки предлагается использовать открытый фреймворк Infrastructure Programmer Development Kit (IPDK), который можно использовать для IPU/DPU, коммутаторов и даже обычных CPU. В ближайшее время IPU Intel будут «сопровождать» коммутаторы на базе Tofino 3, которые тоже поддерживаются IPDK, что позволит создать сквозную цепочку работы с сетевым трафиком. И наличие развитой программной экосистемы может сыграть решающую роль, поскольку занять свою нишу пытается целый ряд компаний: AMD (Pensando и Xilinx), Chelsio, Fungible, Kalray, Marvell, Nebulon, NVIDIA.

Постоянный URL: http://servernews.ru/1065731
06.05.2022 [22:31], Владимир Мироненко

Omni-Path неплохо живётся и без Intel — Cornelis Networks получила ещё $18 млн на дальнейшую разработку OPA

Cornelis Networks, созданная выходцами из Intel для дальнейшего развития интерконнекта Omni-Path (OPA), получила контракт на исследования и разработки с Национальным управлением ядерной безопасности Министерства энергетики (NNSA) США стоимостью $18 млн. Cornelis сообщила, что выделенных средств в совокупности с другими инвестициями вполне достаточно для создания программного-аппаратных решений OPA-400 (400 Гбит/с), которые должны появиться уже в следующем году.

В рамках проекта Next-Generation High Performance Computing Network (NG-HPCN) Cornelis и NNSA займутся разработкой и производством технологий интерконнекта следующего поколения для поддержки научных и инженерных рабочих нагрузок NNSA, а также высокопроизводительных вычислений (HPC). Курировать проект будет Ливерморская национальная лаборатория Лоуренса (LLNL) при участии ещё двух лабораторий NNSA — Лос-Аламосской (LANL) и Сандийской (SNL) национальных лабораторий.

 Изображение: NHR

Изображение: NHR

Напомним, что Intel отказалась от развития Omni-Path в 2019 году. Годом позже было объявлено, что все наработки по OPA переходят к Cornelis Networks, которая анонсировала 100-Гбит/с решения под брендом Omni-Path Express (OPX). OPX является несколько доработанной версией OPA-100. в частности, появилась поддержка фреймворка Open Fabrics Interface (OFI), разработанного альянсом OpenFabrics Alliance (OFA). OPX-решения станут массово доступны в течение ближайших недель.

А вот поколение OPA-200 (200 Гбит/с) компания решила пропустить, сосредоточившись на развитии OPA-400. Полученные от NNSA средства пойдут на развитие открытой (open source) программной платформы, ускорение моделирования будущих сетей на базе OPA-400 и разработка коммутационной инфраструктуры для OPA-400. Конкурировать Cornelis придётся в первую очередь с NVIDIA, которая ещё в позапрошлом году анонсировала 400-Гбит/с решения InfiniBand NDR.

Контракт с Cornelis финансируется из бюджета программы Advanced Simulation Computing (ASC) NNSA в рамках инвестиционного портфеля инициативы Exascale Computing Initiative (ECI). В рамках данной программы шести поставщикам технологий (в том числе и Intel, создавшей Omni-Path) были выделены средства на развития решений для экзафлопсных вычислений в США. Конечная цель Cornelis в рамках контракта с NNSA — подготовка нового поколения интерконнекта для будущих суперкомпьютеров экзафлопсного класса.

Постоянный URL: http://servernews.ru/1065460
28.04.2022 [22:54], Алексей Степин

Chelsio представила седьмое поколение сетевых чипов Terminator: 400GbE и PCIe 5.0 x16

Компания Chelsio Communications анонсировала седьмое поколение своих сетевых процессоров Terminator с поддержкой 400GbE. От предшественников T7 отличает более развитая вычислительная часть общего назначения, включающая в себя до 8 ядер Arm Cortex-A72, так что их уже можно назвать DPU. Всего представлено пять вариантов 5 чипов (T7, N7, D7, S74 и S72), которые различаются между собой набором движков и ускорителей. Референсная платформа T7 будет доступна в мае, первых же адаптеров на базе новых DPU следует ожидать в III квартале 2022 года.

Для задач сжатия, дедупликации или криптографии есть отдельные сопроцессоры. Никуда не делся и привычный для серии Unified Wire встроенный L2-коммутатор. Для подключения к хосту T7 теперь использует шину PCIe 5.0 x16, причём он же содержит и root-комплекс. Более того, имеется и набортный коммутатор+мост PCIe 4.0, и NVMe-интерфейс, и даже поддержка эмуляции NVMe. Всё это, к примеру, позволяет легко и быстро создать NVMe-oF хранилище или мост NVMe-NVMe для компрессии и шифрования данных на лету. Новинка предлагает ускорение работы RoCEv2 и iWARP, FCoE и NVMe/TCP, iSCSI и iSER, а также RAID5/6. Сетевая часть поддерживает разгрузку Open vSwitch и Virt-IO.

 Блок-схема старшего варианта T7 (Изображения: Chelsio Communcations)

Блок-схема старшего варианта T7 (Изображения: Chelsio Communcations)

Впрочем, поддержки P4 тут нет — Chelsio продолжает использовать собственные движки для обработки трафика. Но наработки, сделанные для серий T5 и T6, будет проще перенести на новое поколение чипов. Кроме того, появилась и практически обязательная нынче «глубокая» телеметрия всего проходящего через DPU трафика для повышения управляемости и его защиты. Если и этого окажется мало, то к T7 (и D7) можно напрямую подключить FPGA, а набортную память расширить банками DDR4/5. В пресс-релизе также отмечается, что T7 сможет стать достойной заменой InfiniBand в HРC-системах.

Вариант D7 наиболее близок к T7, но предлагает только 200GbE-подключение, лишён некоторых функций и второстепенных интерфейсов, да и в целом рассчитан на создание СХД. N7, напротив, лишён Arm-ядер и всех функций для работы с хранилищами, нет у него и PCIe-коммутатора и моста. Предлагает он только 200GbE-интерфейсы. Наконец, чипы серии S7 лишены целого ряда второстепенных функций и предоставляют только 100/200GbE-подключение. Они относятся скорее к SmartNIC, поскольку начисто лишены Arm-ядер и некоторых функций. Но зато они и недороги.

Кроме того, в седьмом поколении Termintator появилась возможность обойтись без набортной DRAM с сохранением всей функциональности. Так что использование памяти хоста позволит дополнительно снизить стоимость конечных решений, которые будут создавать OEM-производители. Сами чипы производятся с использованием техпроцесса TSMC 12-нм FFC, так что даже у старшей версии чипов типовое энергопотребление не превышает 22 Вт.

Постоянный URL: http://servernews.ru/1064908
25.04.2022 [22:55], Алексей Степин

Edgecore Networks представила 400G-коммутатор DCS240

Компания Edgecore Networks, специализирующаяся на разработке сетевых продуктов, использующих открытое ПО, представила новый высокопроизводительный 1U-коммутатор, предназначенный для гиперскейлеров и облачных провайдеров. Новая модель DCS240 относится к spine-коммутаторам и располагает 32-мя 400bE-портами QSFP56-DD. В основе платформы лежит чипсет Broadcom BCM56880 (Trident 4, до 12,8 Тбит/с).

 Изображение: Edgecore Networks

Изображение: Edgecore Networks

Коммутатор Edgecore DCS240 оснащён двумя блоками питания мощностью 1300 Вт каждый, а также шестью (5+1) — все с поддержкой горячей замены. Верхний ряд портов допускает использование мощных трансиверов 400G ZR/ZR+ (20 Вт), что позволяет расширить зону действия сети. По умолчанию на коммутатор загружено окружение ONIE для установки полноценной ОС, например, SONiC.

Предполагается, что новая модель может быть использована в связке с коммутаторами Edgecore DSC204 на базе чипсета Trident 3, которые предлагают 32 порта 100GbE (QSFP28). Такая связка получается экономичной и поддерживающей быстрое и удобное масштабирование инфраструктуры ЦОД, уже использующего 100G-сети без потерь в производительности.

Постоянный URL: http://servernews.ru/1064641
20.04.2022 [21:05], Руслан Авдеев

Nokia будет поставлять 400G-решения с SONiC для облака Microsoft Azure

400G-маршрутизаторы, коммутаторы и иные сетевые решения Nokia помогут Microsoft в дальнейшем расширении облачных сервисов Azure. Сделка расширяет сферу взаимодействия компаний, совместно работающих над предоставлением быстрого и надёжного доступа к облаку Azure.

Nokia, в частности, поставит Microsoft платформы 7250 IXR для организации сетевой инфраструктуры дата-центров Azure. Серия 7250 IXR включает целый ряд высокопроизводительных решений — платформа предлагает 400GbE-порты, с перспективой обновления до 800 GbE. По словам представителя Microsoft Azure, выбор Nokia стал естественным решением, поскольку последняя предлагает высокоплотные, производительные и гибкие сетевые платформы.

 Источник изображения: Nokia

Источник изображения: Nokia

Впрочем, есть и ещё один аргумент — системы Nokia совместимы с открытой сетевой ОС SONiC (Software for Open Networking in the Cloud), разработку которой долгое время курировала сама Microsoft. Теперь же проект SONiC передан в ведение Linux Foundation, что наверняка позволит стать ему ещё более популярным. Уже сейчас SONiC совместима с коммутаторами и прочими сетевыми решениями от более чем 100 вендоров. Сама Microsoft использует эту ОС на десятках тысяч своих коммутаторов.

Постоянный URL: http://servernews.ru/1064339
09.03.2022 [01:35], Алексей Степин

Intel представила FPGA серии Agilex M с рекордно быстрой подсистемой памяти — почти 1,1 Тбайт/с

Intel анонсировала новые ПЛИС Agilex M-Series. Литера «M» в названии означает Memory, и в анонсе указано, что новинки обладают беспрецедентно производительной для FPGA подсистемой памяти, что делает их востребованными в добыче криптовалют и сетевых приложениях, а также везде, где пропускная способность памяти играет решающую роль.

Действительно, характеристики этой подсистемы впечатляют: на борту новых чипов устанавливается по два кристалла HBM2e с совокупной пропускной способностью 820 Гбайт/с, что на почти на две трети больше, нежели у предыдущего лидера в этой области, FPGA Stratix 10 MX. В зависимости от конкретной модели, объём набортного банка HBM2e может достигать 32 Гбайт. Но это не всё — у Agilex M есть ещё и восемь каналов для DDR5-памяти, что суммарно даёт почти 1,1 Тбайт/с.

 Изображения: Intel

Изображения: Intel

За тесную связь двух типов оперативной памяти отвечает шина Memory Network-on-Chip (7,52 Тбайт/с). Это первые FPGA Intel, выпущенные с использованием техпроцесса Intel 7 (10-нм SuperFin). Более того, это, по словам Intel, первые ПЛИС, поддерживающие когерентность кешей и памяти с процессорами Intel Xeon благодаря поддержки CXL. Наконец, Agilex M единственные в природе FPGA, способные одновременно работать с памятью HBM2e, DDR5 и Optane.

С внешним миром чипы общаются посредством PCI Express 5.0 и 400GbE-интерфейсов (116G-трансирверы). Intel называет свои новые детища лучшими решениями в области цифровой обработки сигналов, а в удельной производительности интерконнекта (в пересчёте на потребление) они более чем вдвое превосходят ближайшего соперника в лице Versal от Xilinx, принадлежащих сейчас AMD.

Поскольку FPGA априори универсальны, конкретную область применения новинок назвать сложно, но с учётом рекордных показателей подсистем памяти и наличия 12300 DSP-блоков (18 Тфлопс FP32, 88,6 Топс INT8), это может быть любой сценарий, связанный с обработкой серьёзных потоков данных: DPU/IPU на 400G/800G-сетях, тестовые стенды для 5G/6G-сетей, радары и прочие задачи обработки радиосигналов, машинное обучение и HPC, блокчейн и добыча криптовалют.

Постоянный URL: http://servernews.ru/1061548
10.02.2022 [23:14], Алексей Степин

CESNET и Reflex CES представили свой первый 400GbE-адаптер с PCIe 5.0 и CXL

CESNET, альянс чешских университетов и национальной академии наук, поставил перед собой задачу разработать высокоскоростные адаптеры для использования в современных СХД и HPC-системах. Совместно с французской компанией Reflex CES, специализирующейся на разработке FPGA-решений, они представили первый европейский SmartNIC XpressSX AGI-FH400G класса 400GbE. И это первое аппаратное решение в рамках проекта Liberouter, цель которого — создание высокоскоростных сетевых платформ на базе ПЛИС.

 Изображения: www.reflexces.com

Изображения: www.reflexces.com

Новый адаптер интересен тем, что он является одной из пока немногих карт расширения, поддерживающих PCIe 5.0 и CXL. В его основе лежит мощная ПЛИС Intel серии Agilex I-Series c 2,7 млн логических элементов, 8,5 тыс блоков DSP и 260 Мбит быстрой памяти на кристалле. Дополнительно она имеет собственный четырёхъядерный процессор Arm Cortex-A53.

 Блок-схема XpressSX AGI-FH400G

Блок-схема XpressSX AGI-FH400G

В качестве основного интерфейса используется стандартный разъём PCIe 5.0 x16, но на плате установлено ещё две пары HSI-коннекторов для подключений PCIe 5.0 и CXL. Подсистема памяти представлена тремя независимыми банками: 4 Гбайт DDR4-2666 на борту (общей для CPU и FPGA) + два слота SO-DIMM для 32-Гбайт модулей.

 Программно-аппаратная архитектура Liberouter NDK

Программно-аппаратная архитектура Liberouter NDK

Как уже было сказано, целью проекта было создание современного сетевого ускорителя, способного с минимальными задержками обрабатывать данные на скорости 400 Гбит/с, и разработчикам удалось создать базовый набор ядер для ПЛИС с поддержкой DMA.

 Новый ускоритель XpressSX AGI-FH400G имеет двухслотовый форм-фактор

Новый ускоритель XpressSX AGI-FH400G имеет двухслотовый форм-фактор

В комплект поставки входят все необходимые средства разработки, включая набор IP-блоков, скрипты для синтеза конечного дизайна ускорителя, драйверы и программный стек для Linux с поддержкой DPDK, а также пользовательские библиотеки и инструментарий для настройки компонентов. Программно архитектура новинки полностью модульная и масштабируемая, что позволит создавать на её основе гибкие и высокопроизводительные сетевые решения класса 400GbE, и не только их.

Постоянный URL: http://servernews.ru/1059952
07.02.2022 [22:08], Алексей Степин

Cisco представила новые коммутаторы Catalyst 9500X и 9600X на базе Silicon One Q200

Платформа Cisco Silicon One впервые была представлена в 2019 году, а её первенцем стал чип Q100, обеспечивавший маршрутизацию на скоростях до 10,8 Тбит/с. Именно она стала основой флагманских маршрутизаторов серии 8000. В первой половине 2021 года компания обновила серию флагманского кремния, расширив её до 10 различных чипов, среди которых появились чипы Q200 и G100 с совокупной производительностью 12,8 и 25,6 Тбит/с, соответственно.

Однако теперь эти производительные решения доступны не только гиперскейлерам — компания анонсировала новые модели коммутаторов Catalyst 9500X и 9600X, в основу которых легли процессоры Silicon One Q200. Silicon One программируется на языке P4 и изначально поддерживает массу фирменных технологий Cisco. Всё это позволяет наиболее полно использовать все возможности аппаратной части.

Новые модели коммутаторов Cisco Catalyst 9500X и 9600X предназначены для использования в крупных корпоративных сетях и дата-центрах. В серии реализована поддержка uplink-портов 400GbE и клиентских портов 100GbE. Так, Catalyst C9500X-28C8D на базе старшей версии чипа Sillicon One Q200 имеет 36 портов QSFP28: 28×40/100GbE + 8×40/100/200/400GbE. С помощью специальных кабелей-разветвителей поддерживаются и подключения 10GbE или 25/50GbE.

 Cisco Catalyst C9500X-28C8D (центральная группа портов с зелёной маркировкой — 400GbE)

Cisco Catalyst C9500X-28C8D (центральная группа портов QSFP28 с зелёной маркировкой — 400GbE)

Сам процессор дополнен 8 Гбайт быстрой набортной памяти HBM под сетевой буфер, внутренний же буфер имеет объем 80 Мбайт. В коммутаторах новых серий есть и 8-ядерный процессор Intel с частотой 2,43 ГГц с 32 Гбайт DDR4, а также может устанавливаться локальный SSD объёмом до 960 Гбайт под контейнерные приложения. Новинки поддерживают протоколы синхронизации PTP/IEEE 1588v2, а также 256-бит шифрование на лету: 802.1ae MACsec и WAN-MACsec1.

 Модульная платформа Cisco Catalyst 9600

Модульная платформа Cisco Catalyst 9600

К сожалению, на сайте производителя пока нет подробных данных о старших моделях Catalyst 9600X, однако упоминаются модули 9600 v2 (Supervisor Engine 2 и новые линейные модули), которые также базируются на кремнии Sillicon One Q200, в версии с предельной скоростью коммутации 12,8 Тбит/с.

Постоянный URL: http://servernews.ru/1059666
11.11.2021 [18:01], Алексей Степин

Meta* уже использует в своей инфраструктуре чипы Broadcom Tomahawk 4

О планах Meta* (ранее известной как Facebook*) уже рассказывалось неоднократно — так, к примеру, на OCP Global Summit компания сообщила о том, что открытые технологии позволяют ей использовать сетевые процессоры разных производителей. Есть и более любопытная новость: Broadcom объявила о том, что первой в индустрии массовой платформой на базе нового коммутатора Tomahawk 4 стала система Meta* Minipack2.

Если серия коммутаторов Wedge 400 базируется на кремнии с предельной производительностью обработки трафика 12,8 Тбит/с, то в основе Minipack2 лежит наиболее продвинутая на сегодня разработка Broadcom, чип Tomahawk 4 (BCM56990), способный «прокачивать» трафик на вдвое большей скорости — 25,6 Тбит/с. Этот ASIC в максимальной конфигурации способен обслуживать до 64 портов 400GbE и вдвое больше портов 200GbE. В настоящее время это единственный производимый в достаточных количествах 7-нм коммутатор с такой производительностью.

 *** Minipack2

Meta* Minipack2

Благодаря 7-нм техпроцессу Tomahawk4 обеспечивает низкий удельный уровень энергопотребления и тепловыделения, а эти факторы критичны с учётом сверхплотной компоновки ЦОД Meta*. Так, максимальный TDP нового чипа составляет всего 450 Ватт, и с учётом вдвое более высокой производительности по сравнению с Tomahawk 3 — это совсем немного, поскольку у последнего этот показатель составлял 300 Ватт.

 Архитектура Broadcom Tomahawk 4

Архитектура Broadcom Tomahawk 4

Платформа Meta* Minipack2 относится к коммутаторам класса leaf/spine, в ней ASIC Broadcom работает в конфигурации 128 × 200GbE, но сам коммутатор, как и его предшественник первого поколения, имеет модульную конструкцию, позволяющую использовать разные типы сетевых интерфейсов: либо 128 портов QSFP56, либо 64 порта QSFP-DD (для новой 400GbE-топологии F16). Дополняют Tomahawk 4 ретаймеры Barchetta 2 на базе SerDes-блоков PAM4 56 Гбит/с, а также Intel Xeon D-1527.

 Arista Networks 7388X5 также имеет модульную конструкцию

Arista Networks 7388X5 также имеет модульную конструкцию

Но Minipack2 не единственная новинка Meta* — компания активно сотрудничает с Arista Networks, представившей коммутатор Arista 7388X5, который также базируется на Tomahawk 4. Этот коммутатор также имеет модульную компоновку, но отличается большей ориентированностью на инфраструктуру гиперскейлеров и имеет выделенный криптографический SerDes-сопроцессор Credo MACSec, обеспечивающий шифрование AES-256.


* Внесена в перечень общественных объединений и религиозных организаций, в отношении которых судом принято вступившее в законную силу решение о ликвидации или запрете деятельности по основаниям, предусмотренным Федеральным законом от 25.07.2002 № 114-ФЗ «О противодействии экстремистской деятельности».

Постоянный URL: http://servernews.ru/1053522
Система Orphus