Институт биомедицинских и геномных исследований имени Эли и Эдит Л. Брод при Массачусетском технологическом институте и Гарварде взял на вооружение аппаратные решения Intel и облачную инфраструктуру Google Cloud для повышения эффективности вычислений.

Речь идёт об оптимизации рабочих процессов, связанных с геномными исследованиями. Intel сотрудничает с институтом имени Эли и Эдит Л. Брод с 2017 года. Совместно с этой организацией был создан центр Intel-Broad Center for Genomic Data Engineering: данный проект помогает исследователям и разработчикам ПО со всего мира создавать и оптимизировать инструменты и инфраструктуру для работы с геномными данными.

Intel

Как теперь сообщается, с целью дальнейшей оптимизации рабочих процессов институт перенёс свои рабочие нагрузки на инстансы Google Cloud N2 на базе Intel Xeon Scalable. В рамках проекта отдельные ядра платформы геномной аналитики Genome Analytics Toolkit оптимизированы с использованием библиотеки Intel Genomics Kernel Library под векторные операции AVX-512. А часть функций по работе с хранением данных теперь используют Intel Intelligent Storage Acceleration Library (ISA-L).

«Благодаря модульному проектированию ПО, верному выбору размеров облачной инфраструктуры в зависимости от необходимой рабочей нагрузки и оптимизации для процессоров Intel Xeon Scalable сотрудники учреждения могут решать поставленные задачи в области геномики на 25 % быстрее, уменьшая при этом затраты на 34 %», — говорится в публикации Intel.

Google в ходе конференции Cloud Next '21 анонсировала портфель решений Google Distributed Cloud, состоящий из аппаратного и программного обеспечения, который позволит расширить инфраструктуру вендора на периферию и в дата-центры. В число первых продуктов этого портфеля вошли решения Google Distributed Cloud Edge и Google Distributed Cloud Hosted.

Google отметила, что некоторые из рабочих нагрузок компаний не могут быть перенесены в публичное облако полностью или сразу из-за таких факторов, как необходимость соответствия отраслевым или региональным требованиям и потребности в суверенитете данных, из-за высокой задержки и требований к локальности обработки данных, или из-за того, что они должны работать близко к другим сервисам. Google Distributed Cloud поможет решить эту проблему.

Портфель Google Distributed Cloud построен на Anthos, платформе Google с открытым исходным кодом для управления инфраструктурой и приложениями в локальных, пограничных и общедоступных облаках. Клиенты могут использовать его для миграции приложений и локальной обработки данных с помощью облачных сервисов Google в дополнение к продуктам сторонних поставщиков, таких как Cisco, Dell, HPE и NetApp.

Портфель Google Distributed Cloud спроектирован для работы в нескольких местах, включая границу сети, границу оператора, границу клиента и центры обработки данных клиентов. Google отметила, что он может использовать более 140 периферийных точек присутсвия по всему миру. Distributed Cloud также может использовать преимущества сервисов 5G и LTE от поставщиков услуг связи (CSP), независимо от того, развернуты ли они, к примеру, в розничных магазинах и на заводах или в локальных системах банков и на колокейшн-объектах.

Доступное в предварительном варианте решение Distributed Cloud Edge позволяет компаниям запускать функции ядра 5G и сети радиодоступа на периферии совместно с корпоративными приложениями. Решение поддерживает такие варианты использования, как компьютерное зрение и ИИ-инференс, локальная обработка данных, вычислительные нагрузки с низкой задержкой и развёртывание частных сетей 4G/5G. Например, ретейлеры перенести нагрузки на периферийные облачные узлы Google, а поставщики услуг связи могут предлагать своим клиентам высокоскоростное частное 5G-подключение совместно со специализированными услугами.

Решение Google Distributed Cloud Hosted, предварительный доступ к которому запланирован на первую половину 2022 года, предназначено для поддержки клиентов государственного сектора и предприятий, которые предъявляют строгие требования к хранению данных, безопасности или конфиденциальности. Для управления инфраструктурой, сервисами, API или инструментами не требуется подключение к Google Cloud, а управлением занимается развёрнутая локально платформа Anthos.

Одними из первых Google Distributed Cloud Hosted получат немецкая T-Systems и французская OVHCloud. Также было объявлено о партнёрстве с французской Thales в рамках проекта Trusted Cloud. Во всех случаях это поможет соблюсти регуляции как Евросоюза, так и отдельных стран или ведомств.

Анонс Google Distributed Cloud на базе Anthos является ответом на похожие от AWS и Microsoft Azure. Наряду с такими сервисами, как Anthos Config Management, Anthos Service Mesh и Migrate for Anthos, Distributed Cloud является частью амбициозного плана Google Cloud по дальнейшему захвату рынка публичных облачных вычислений, который, согласно прогнозам, к 2023 году вырастет до $482 млрд.

Вслед за анонсом обновления Intel-инстансов Compute Engine N2 было объявлено и об апгрейде AMD-инстансов N2D, которые получили процессоры EPYC Milan. Как отмечается, виртуальные машины N2D на базе EPYC третьего поколения на 30 % лучше по соотношению цены и производительности при различных рабочих нагрузках по сравнению со вторым, поскольку стоимость ВМ обоих поколений осталась одинаковой.

Обновлённые инстансы предлагают до 224 vCPU и до 896 Гбайт оперативной памяти, а также 50- и 100-Гбит/с подключение (при числе vCPU более 48) для связи между инстансы и локальные SSD ёмкостью до 9 Тбайт. Есть эксклюзивный (sole-tenant) режим работы и поддержка GKE. А отличительно чертой новинок станет возможность задействовать конфиденциальные вычисления (благодаря SEV) для Dataproc и GKE.

Как отмечают в Google, виртуальные машины N2D подходят для широкого спектра рабочих нагрузок общего назначения — веб-приложений, баз данных, корпоративного ПО и так далее. Предварительный доступ к новинкам организован в облачных регионах us-central, us-east1, europe-west4 и asia-southeast1.

Google Cloud анонсировала новые инстансы на базе процессоров Intel Xeon Scalable 3-го поколения (Ice Lake-SP) в семействе Compute Engine N2. Новые виртуальные машины предлагают на 30 % лучшее соотношение цены и производительности для самых разных рабочих нагрузок по сравнению с виртуальными машинами N2 на базе Intel Xeon 2-го поколения (Cascade Lake-SP).

Инстансы N2 предлагают гибкий выбор размеров со сбалансированной производительностью и экономией для таких рабочих нагрузок, как обслуживание веб-сайтов и приложений, корпоративные приложения, средние и большие базы данных, кеширование, транскодирование мультимедиа, потоковая передача и игровые серверы. Возможно конфигурации вплоть до 128 vCPU и 864 Гбайт RAM, а все новые инстансы с более чем 80 vCPU в обязательно порядке будут использовать только процессоры Ice Lake-SP (для других конфигураций можно будет вручную указать предпочитаемое поколение CPU).

Кроме того, для N2 теперь доступны быстрое 100GbE-подключение для связи между инстансами и локальные SSD ёмкостью до 9 Тбайт, а также возможность эксклюзивного (sole-tenant) режима работы, в котором физический сервер в облаке доступен только заказчику и не используется для запуска инстансов других клиентов. В этом случае появляется дополнительный уровень контроля и изоляции, а заодно и поддержка BYOL-модели для ПО.

В любом случае для заказчиков будут доступны все возможности новых процессоров, включая Intel Crypto Acceleration, DL Boost, AVX-512 и т.д. Предварительный доступ к новым инстансам будет предоставлен в начале четвёртого квартала 2021 года в регионах us-central1, europe-west4 и asia-southeast1. Впоследствии они станут доступны и для GKE-кластеров.

Компания Google, входящая в состав холдинга Alphabet, сообщила о дальнейшем росте выручки от предоставления облачных сервисов. Речь идёт об инфраструктуре Google Cloud, которая включает платформу GCP (Google Cloud Platform) и набор сервисов Workspace для организации совместной работы.

Во втором квартале текущего финансового года выручка Google Cloud составила $4,63 млрд. Это примерно в полтора раза (на 54 %) больше прошлогоднего результата, когда компания получила $3,01 млрд. Вместе с тем Google удалось сократить операционные убытки облачного подразделения. В период с апреля по июнь включительно они составила $591 млн. Для сравнения: годом ранее финансовые потери равнялись $1,42 млрд.

Фото: Reuters

Американский IT-гигант отмечает, что в обозримом будущем продолжит фокусировать усилия на увеличении выручки облачной платформы. В частности, компания намерена инвестировать средства в наращивание вычислительных мощностей и расширение перечня услуг. Отметим, что в целом холдинг Alphabet получил во втором квартале $61,9 млрд выручки. Это на 62 % больше по сравнению с результатом годичной давности.

Nokia и Vodafone запустили сервис по обнаружению аномалий в работе сетей. Совместно разработанный продукт под названием Anomaly Detection Service задействует машинное обучение (МО) в Google Cloud. По ожиданиям Vodafone, сервис сможет автоматически обнаруживать и устранять до 80% всех аномалий в работе мобильных сетей. После развёртывания Anomaly Detection Service в Италии (более 60 тыс. сот 4G) Vodafone внедрит сервис на всех своих европейских рынках к началу 2022 г.

Начало работе было заложено подписанием соглашения между компаниями в 2020 г., дополнившее шестилетнее соглашение Vodafone с Google Cloud о совместном создании интегрированных облачных решений. Основой стали технологии Nokia Bell Labs. Получившийся продукт быстро обнаруживает и устраняет такие неполадки, как перегрузка мобильной сети, интерференция радиосигнала и неожиданные задержки, которые могут повлиять на качество обслуживания клиентов. Модель предоставления Anomaly Detection Service как услуги (as-a-service) является важным аспектом бизнеса Nokia в области сетей и облачных вычислений. Поэтому она планирует распространить этот сервис и на 5G-сеть Vodafone.

Dr. Ganapathi Pulipaka

Служба обнаружения аномалий, развёрнутая в Google Cloud позволяет передавать данные о работе сети данные в потоковом режиме на платформу аналитики Vodafone, обеспечивая их одновременную обработку в средах различных поставщиков. А благодаря безопасным и надёжным инструментам работы с данными в Google инженеры Vodafone могут принимать быстрые и обоснованные решения, такие как увеличение ёмкости там, где это больше всего необходимо клиентам.

Новая совместная лаборатория, о создании которой сегодня объявили NVIDIA и Google, поможет создавать, тестировать, оптимизировать и вводить в эксплуатацию комплексные 5G- и ИИ-решения. Партнёры надеются, что это ускорит создание умных городов, фабрик и других объектов в рамках цифровой трансформации. Достигнутое соглашение стало важной вехой в плане NVIDIA по созданию экосистемы решений для платформы AI-on-5G.

Вклад Google заключается в предоставлении предприятиям доступа к Anthos — единой платформе для развёртывания приложений, с сервисоцентричным подходом. Она поддерживает серверы с ускорителями NVIDIA, снижает накладные расходы, повышает скорость развёртывания контейнеризированных приложений корпоративного уровня на основе Kubernetes.

В NVIDIA убеждены, что переход телекоммуникационных компаний на стандарт 5G, обеспечивающий высокую скорость передачи и низкие задержки, создаёт беспрецедентные возможности для поставщиков вычислительных услуг на периферии. «Наша совместная работа поможет операторам сетей и смежникам создавать новые точки роста прибыли благодаря ИИ и машинному обучению», — сказал вице-президент телекоммуникационного подразделения NVIDIA, Ронни Васишта (Ronnie Vasishta).

«Google Cloud, с нашей платформой Anthos, позволит сервис-провайдерам и предприятиям на многих вертикальных рынках беспрепятственно подключаться посредством 5G к периферии сети», — сказал Шайлех Шукла (Shailesh Shukla), вице-президент и генеральный менеджер по сетям Google Cloud. Важной особенностью для операторов сетей и поставщиков является то, что Anthos не только обеспечивает ориентированный на результат подход к управления политиками в различных средах, но и защищает цепочку поставок приложения и ПО.

Аппаратной основой решения станет комплект разработчика Aerial с конвергентной картой, объединяющей GPU и DPU — NVIDIA BlueField-2 A100. Такая комбинация даёт возможность создавать высокопроизводительные ИИ-приложения с 5G-подключением для управления высокоточными промышленными роботами, автоматизированными транспортными средствами, дронами, беспроводными камерами, кассами самообслуживания и сотнями других конечных решений. В комбинации с фреймворком Metropolis для умных городов, Isaac для автономных машин и Clara для здравоохранения Nvidia Aerial SDK являются интегральными частями экосистемы AI-on-5G и могут быть развёрнуты на сертифицированных системах NVIDIA EGX.

Следующим этапом развития станет внедрение ещё более производительных ускорителей NVIDIA BlueField-3 с 16-ядерными Arm-процессорами на борту, которые появятся во второй половине 2022 года и смогут работать в связке как с x86-процессорами, так и Arm-процессорами Ampere Altra. Это позволит создать высокоинтегрированные, программно определяемые базовые станции 5G с поддержкой полностью облачных vRAN.

Сервис Transfer Appliance, доступный в ряде регионов США, ЕС и Сингапуре, позволяет клиентам просто и безопасно перенести петабайты данных из их корпоративных ЦОД и других мест эксплуатации в Google Cloud. Сервис основан на одноимённой специализированной All-Flash СХД, которую клиент может запросить в Google Cloud Console, чтобы перенести на него свою информацию. На днях компания анонсировала новую версию Transfer Appliance.

Google Cloud проверяет потребности заказчика, такие как мощность и необходимая ёмкость, и отправляет полностью укомплектованное устройство, включая все необходимые кабели. Доступные для заказа ёмкости находятся в диапазоне от 40 до 300 Тбайт. Имеются также две базовые модификации Transfer Appliance: на 100 и 480 Тбайт. Благодаря встроенным средствам дедупликации и сжатия данных потенциально можно перенести до 1 Пбайт. Кроме того, предприятия могут выбрать вариант исполнения — для монтажа в стойку или автономное устройство.

Как только устройство прибывает к заказчику, его можно смонтировать как общий ресурс NFS и приступить к копированию данных. Затем устройство запечатывается для защиты от несанкционированного доступа при траспортировке и отправляется обратно Google. Перед переездом данные шифруются (AES-256), а клиент создаёт пароль и секретную фразу для их дешифровки. Это не только защищает информацию, но и позволяет соблюсти отраслевые стандарты ISO, SOC, PCI и HIPAA.

По прибытии устройства в Google специалисты компании осуществляют обратные операции, которые для краткости они называют «регидратацией». О её успешном завершении Google сообщает заказчику как правило в течении 1-2 недель. После миграции клиентам становятся доступны средства для анализа данных BigQuery и Vertex AI.

Google рекомендует предприятиям использовать сервис Transfer Appliance в тех случаях, когда для загрузки данных в облако через Интернет потребуется более недели, или когда необходимо перенести более 60 Тбайт данных. Ещё один вариант использования устройства — сбор данных в полевых условиях и на подвижных объектах, таких как корабли. По прибытии в порт их можно легко перенести в облако для последующей обработки или архивирования.

Следует отметить, что сервис особенно полезен в условиях недостаточной пропускной способности каналов передачи данных или отсутствия возможности подключения к Интернет. Несмотря на то, что данная концепция не нова и компании десятилетиями отправляли данные на физические устройства для архивирования и аварийного восстановления, она не утратила своей актуальности и сегодня. Аналогичные решения есть у всех крупных облачных провайдеров.

Компания IonQ, разработчик квантовых компьютеров на ловушках для ионов и других связанных с ними решений, объявила о полной интеграции своих продуктов с Cirq, фреймворком для квантовых вычислений с открытым исходным кодом от компании Google.

«Благодаря быстроте и лёгкости развёртывания Cirq квантовые вычисления на оборудовании IonQ станут доступны более широкой аудитории», — считает вице-президент по программному обеспечению IonQ и один из первых авторов Cirq, Дейв Бэкон (Dave Bacon). IonQ добавила поддержку ключевых языков программирования, чтобы пользователи различных SDK, таких как Qiskit, PennyLane, Orquestra, Strangeworks QC, могли запускать свои приложения на платформе IonQ без необходимости переписывать код.

ml2quantum.com

11-кубитная система IonQ доступна клиентам напрямую через API или в облачных сервисах Amazon Braket и Microsoft Azure, а после интеграции с инструментами Google доступ появился и в Google Marketplace. В последнем случае всё обслуживание, включая выставление счетов, ложится на плечи Google Cloud. Несмотря на относительно небольшое количество кубит, системы IonQ на ионных ловушках более устойчивы к ошибкам во время вычислений. Средняя точность двухкубитных вентилей IonQ достигает 99,9%.

researchgate.net

Ожидается, что в течение года пользователям станет доступна и самая мощная квантовая машина компании, состоящая из 32 кубит. А к 2023 году IonQ планирует разработать модульные квантовые компьютеры, пригодные для объединения в сеть, и стать первой публично торгуемой компанией в области квантовых вычислений (с ожидаемой оценкой в $2 млрд) в результате соглашения с dMY Technology Group III.

В Google Cloud появилось новое семейство инстансов Tau. Первые системы серии T2D на базе процессоров AMD EPYC 7003 предлагают до 60 vCPU и до 4 Гбайт памяти на каждый vCPU. Общедоступными они станут в третьем квартале 2021 года.

Как утверждается, семейство Tau на базе процессоров AMD EPYC отлично справляется с такими нагрузками как веб-серверы, контейнеризированные микросервисы, обработка мультимедиа, крупные Java-приложения и многое другое. В компании заявляют, что это идеальное решение для горизонтально масштабируемых рабочих нагрузок. Кроме того, есть поддержка и Google Kubernetes Engine, что позволяет создавать кластеры для развёртывания контейнерных приложений.

Нажмите для увеличения

Как утверждает Google, T2D с EPYC Milan в сравнительном тестировании на 56% быстрее инстансов общего назначения в AWS и Microsoft Azure в SPEC CPU 2017 (int) и при этом на 42% выгоднее по соотношению цена/производительность. В CoreMark новинки тоже лидируют. Google в первую очередь противопоставляет T2D Arm-инстансам AWS на базе Graviton2. При этом компания прямо не говорит, что в семействе Tau не будет Arm-предложений. С полными условиями тестирования можно ознакомиться здесь.

Интересно, что для T2D компания использовала фирменный оптимизирующий компилятор AMD AOCC, благодаря которому и получилась полуторакратная разница с Arm в производительности в SPECrate2017_int_base. Тем не менее, отмечается, что и при использовании GCC 11.1 T2D оказались на четверть быстрее. Но что ещё более интересно, согласно подсчётам Anandtech, в T2D vCPU впервые соответствует одному физическому ядру, а не одному SMT/HT-потоку, как у большинства облачных провайдеров.