Бессерверный Amazon OpenSearch

Поиск и анализ журналов без выделения и настройки ресурсов

Почему стоит выбрать бессерверную конфигурацию Amazon OpenSearch?

Бессерверная конфигурация Amazon OpenSearch — это бессерверный вариант Сервиса Amazon OpenSearch. Бессерверная конфигурация OpenSearch позволяет разработчикам выполнять петабайтные рабочие нагрузки без настройки, управления и масштабирования кластеров OpenSearch. Вы получаете те же интерактивные отклики в несколько миллисекунд, как и в Сервисе OpenSearch, но с простой бессерверной конфигурацией.

Преимущества бессерверной системы OpenSearch

Используйте знакомое получение данных и конвейеры с открытым исходным кодом без необходимости модификации приложений.
Автоматическое выделение и непрерывная корректировка для достижения высокой скорости получения данных и времени отклика в несколько миллисекунд при изменении характера использования и спроса с OpenSearch бессерверным.
Платите только за то, что используете, автоматически масштабируя ресурсы и обеспечивая необходимую емкость для приложения, не снижая скорость получения данных.
Расширьте возможности своих приложений генеративного искусственного интеллекта (ИИ) с помощью простого, масштабируемого и высокопроизводительного векторного поиска. 

Примеры использования

Плавное масштабирование ресурсов приложений без предварительной настройки необходимой вычислительной мощности и памяти.
Предварительно инициализируйте ресурсы приложения и обеспечьте время отклика в несколько миллисекунд.
Быстро создавайте среды разработки и тестирования, автоматически масштабируйте их при непредсказуемом использовании и быстрее выводите продукты на рынок.
Генерируйте более точные и достоверные результаты поиска, объединяя векторный и текстовый поиск для работы приложений генеративного искусственного интеллекта.

Клиенты и партнеры

Отзыв клиента riskCanvas

riskCanvas является дочерней компанией корпорации Genpact. Это продукт SaaS (программное обеспечение как услуга), предлагающий решение для соблюдения законодательства в сфере финансовых преступлений, которое использует самые современные технологии больших данных, автоматизации и машинного обучения для соответствия требованиям, эффективности и автоматизации для своих клиентов.

«Мониторинг, ориентированный на субъекты, от riskCanvas охватывает мониторинг транзакций, внешнее обогащение, проверку списков наблюдения и негативных новостей для автоматической оценки риска и оповещения только клиентов с высоким уровнем риска, что значительно сокращает усилия по соблюдению нормативных требований. Для этого требуется значительная и разнообразная аналитическая обработка, которая часто испытывает скачкообразную и непредсказуемую нагрузку данных. Мы в восторге от бессерверной конфигурации сервиса Amazon OpenSearch, который автоматически масштабируется для удовлетворения потребностей наших рабочих нагрузок в получении данных и аналитической обработке, а затем масштабируется обратно по мере снижения спроса для резкого снижения затрат – и все это без перестройки или технического обслуживания».

Райан Скоузен, руководитель технологического отдела riskCanvas и вице-президент технологического отдела подразделения Genpact по борьбе с финансовыми преступлениями

Логотип riskCanvas

Отзыв клиента SmugMug

SmugMug – одно из ведущих в мире сообществ, ориентированных на фотографов.

«Компания SmugMug использует поисковые сервисы AWS с 2011 года для поиска фотографий и альбомов своих клиентов. Со временем, на протяжении многих поколений применения технологии поиска AWS, количество недифференцированного тяжелого труда уменьшилось, затраты снизились, а производительность и возможности поиска улучшились. Amazon OpenSearch бессерверный автоматически масштабируется в соответствии со спросом, что еще больше сокращает объем операционной работы, необходимой для обеспечения быстрого поиска, и помогает нам снизить общие затраты. Благодаря бессерверной конфигурации Amazon OpenSearch мы можем расширить возможности использования OpenSearch и создать новые функции, чтобы порадовать наших клиентов».

Эндрю Шиэ, главный инженер, SmugMug и Flickr

Логотип SmugMug

Отзыв клиента Valtix

Valtix помогает организациям защищать рабочие нагрузки в общедоступных облачных средах с помощью облачной платформы сетевой безопасности, предоставляемой как услуга.

«В настоящее время мы используем множество кластеров OpenSearch для своей базы данных разведки безопасности. Наша команда инженеров отвечает за текущее обслуживание, чтобы периодически масштабировать и настраивать эти кластеры. С бессерверной конфигурацией Amazon OpenSearch управление инфраструктурой осуществляется автоматически, что позволяет им сосредоточиться на создании ценных возможностей для наших клиентов. А поскольку этот сервис автоматически масштабируется в зависимости от спроса, нам не нужно выделять большой кластер для пиковой нагрузки, поэтому мы платим только за те ресурсы, которые реально используем».

Правин Патнала, соучредитель и вице-президент по инженерным вопросам, Valtix

Логотип Valtix

Отзыв клиента Kaizen Analytix

Kaizen Analytix – ведущий поставщик аналитических продуктов и решений в области бизнес-интуиции, которые помогают клиентам увеличить доходы, снизить затраты и максимизировать прибыль.

«В Kaizen Analytix мы постоянно ищем способы сократить расходы и повысить производительность за счет использования облачных платформ для аналитических проектов. Мы очень рады появлению бессерверной конфигурации сервиса Amazon OpenSearch, который позволит нашим клиентам удовлетворять непредсказуемые пики трафика без ущерба для производительности или управления какой-либо инфраструктурой OpenSearch, при этом оплачивая только те ресурсы, которые они используют».

Суджит Сингх, управляющий директор, Kaizen Analytix

Логотип Kaizen Analytix

Отзыв клиента SquareShift

SquareShift предоставляет услуги по консультированию, внедрению и поддержке сервиса Amazon OpenSearch.

«В SquareShift мы гордимся тем, что создаем масштабируемые и экономически эффективные облачные решения для своих клиентов. Мы рады поддержать наших клиентов новой бессерверной опцией в сервисе Amazon OpenSearch. У нас есть клиенты, у которых поисковый трафик иногда скачет от нескольких сотен до миллионов запросов пользователей в минуту во время определенных событий. Новая бессерверная конфигурация поможет нашим клиентам справиться с непредсказуемыми пиками трафика без ущерба для производительности, поскольку Amazon OpenSearch бессерверный будет плавно масштабировать ресурсы в соответствии с требованиями рабочей нагрузки».

Аанант Солайяппан, генеральный директор, SquareShift.co

Логотип Square

Часто задаваемые вопросы по бессерверному решению

Amazon OpenSearch бессерверный – это бессерверный вариант Сервиса OpenSearch. Он обеспечивает упорядоченный подход, который устраняет необходимость в предоставлении, конфигурировании и настройке кластеров. Ниже приведены преимущества OpenSearch бессерверного.

  • Автоматическое выделение и масштабирование для достижения неизменно высокой скорости получения данных и времени отклика в несколько миллисекунд при изменении характера использования приложения и спроса.
  • Поддержка производственных рабочих нагрузок с резервированием на случай отключения ЗД и сбоев инфраструктуры.
  • Такая же надежность хранения данных, как и у Amazon S3.
  • Оплата только за ресурсы, потребляемые вашей рабочей нагрузкой.

Основные компоненты ядра OpenSearch бессерверного работают на базе проекта OpenSearch с открытым исходным кодом, который включает поисковую систему OpenSearch и интерфейс визуализации панелей управления OpenSearch.

OpenSearch бессерверный помогает выполнять различные аналитические и поисковые нагрузки. Однако вы можете предпочесть использовать управляемые кластеры Сервиса OpenSearch, если вам необходим жесткий контроль над конфигурацией кластера или специфические настройки. В управляемых кластерах вы можете выбирать предпочтительные инстансы и иметь больший контроль над конфигурацией, например над стратегией совместного использования данных. Это может быть критично для случаев использования, выходящих за рамки типичных шаблонов, которые поддерживает OpenSearch бессерверный. Кроме того, OpenSearch бессерверный в настоящее время не поддерживает расширенные функции или плагины, такие как оповещения, обнаружение аномалий, kNN. Вы можете использовать управляемые кластеры для этих функций, пока OpenSearch бессерверный не добавит их поддержку.

Чтобы начать работу, выберите вариант «OpenSearch бессерверный» в Сервисе Amazon OpenSearch и создайте новые коллекции – логическое объединение индексов, которые работают вместе для поддержки рабочей нагрузки. Для создания коллекций можно использовать интерфейс командной строки (CLI), AWS SDK или Консоль управления AWS. OpenSearch бессерверный поддерживает те же API ввода и запросов, что и пакет OpenSearch с открытым исходным кодом. Таким образом, вы можете продолжать использовать существующие клиенты и конвейеры потокового ввода данных, такие как Данные Amazon Kinesis Firehose, Kafka, Logstash, Fluent Bit и Fluentd. Когда ваши данные хранятся в OpenSearch бессерверном, вы можете интерактивно анализировать и визуализировать их с помощью бессерверных панелей управления OpenSearch.

OpenSearch бессерверный легко интегрируется с AWS KMS, IAM, сервисом выставления счетов AWS, CloudWatch, CloudFormation и CloudTrail.

OpenSearch бессерверный по умолчанию поддерживает усиленную безопасность. Все данные шифруются в состоянии покоя с возможностью на уровне коллекции использовать либо управляемый сервисом ключ, либо назначить собственный ключ через AWS KMS. Доступ к коллекциям контролируется с помощью IAM, группы безопасности VPC и SAML 2.0. OpenSearch бессерверный поддерживает иерархические политики доступа к данным, где вы можете настраивать политики на уровне аккаунта, коллекции и индекса. Вы также можете настроить управление доступом на основе ролей для коллекций и индексов.

Когда системные ресурсы, такие как процессор, память и диск, на узлах ввода или поиска превышены или обнаружены горячие сегменты, обрабатывающие большое количество запросов на чтение или запись, OpenSearch бессерверный горизонтально масштабирует узлы в ответ на увеличение рабочей нагрузки. Аналогично, когда использование ресурсов падает ниже определенного порога, OpenSearch бессерверный автоматически и постепенно наращивает ресурсы, не влияя на производительность.