Начало работы с сервисами Amazon AI

Искусственный интеллект (AI) – раздел информатики, который занимается решением когнитивных задач, обычно предназначаемых для человеческого интеллекта, таких как обучение, решение проблем и распознавание шаблонов. Искусственный интеллект (AI) часто ассоциируется с робототехникой и научной фантастикой, но на самом деле он давно вышел за пределы фантастических фильмов. Сегодня искусственный интеллект – это часть продвинутых компьютерных технологий. Одним из выдающихся ученых в этой области является профессор Педро Домингос. Он выделил пять групп ученых, которые вносят вклад в развитие машинного обучения: символисты, сфера которых берет начало в логике и философии; коннекционисты, которые берут знания из нейробиологии; эволюционисты, развивающие методы эволюционной биологии; байесовцы, применяющие математическую статистику и теорию вероятности; и аналогисты, исследования которых базируются на психологии. За последние годы успехи в области статистических вычислений привели к дальнейшему развитию искусственного интеллекта в ряде областей, которые в совокупности обозначаются как «машинное обучение». Аналогичным образом прогресс в области нейронных сетей привел к развитию дополнительной области под названием «глубокое обучение». Машинное обучение и глубокое обучение – это две области компьютерных технологий, начало которым положило исследование искусственного интеллекта.

В широком смысле эти подходы разделяются на «направляемое» и на «произвольное» обучение. В первом случае используются данные с заданным результатом, а во втором – без него.

Каждый день компании производят данные для систем машинного и глубокого обучения, и с увеличением объемов данных AI становится «умнее» и развивается все быстрее и быстрее. Данные извлекаются из хранилищ, таких как Amazon Redshift, собираются с помощью платформ для краудсорсинга, таких как Mechanical Turk, или загружаются динамически с помощью Kinesis Streams. Кроме того, с развитием Интернета вещей и сенсорных технологий данные, которые раньше практически не использовались, теперь стали доступны для анализа, и их объем возрастает в геометрической прогрессии.


Машинным обучением обычно называют методы анализа, основанные на байесовской теории, которые используются для распознавания шаблонов и обучения. В основе машинного обучения лежит набор алгоритмов, которые используют предоставленные данные для обучения и прогнозирования, оптимизируют функцию полезности в условиях неопределенности, распознают в данных скрытые структуры и классифицируют данные в кратким описанием. Машинное обучение часто применяется в тех случаях, когда использование точных программных алгоритмов не обеспечивает достаточной гибкости или неэффективно. Обычный компьютерный код обрабатывает входные данные по алгоритму, заложенному разработчиком, и возвращает соответствующий ответ. Система машинного обучения анализирует входные данные для поиска шаблонов и создает статистический код (модель машинного обучения), который возвращает «правильный результат» на основании предыдущих входных данных (а также выходных данных в случае направляемого обучения). Точность модели машинного обучения во многом зависит от качества и количества накопленных со временем данных.

При использовании качественных данных модель может анализировать многомерные проблемы с миллиардами возможных вариантов и находить оптимальную функцию, которая по входным данным будет прогнозировать корректное значение. Как правило, модели машинного обучения прогнозируют ответ со статистической достоверностью и достаточно надежны. Такие оценочные показатели следует учитывать при принятии решения об использовании моделей машинного обучения или любого отдельного прогнозирования.

Amazon.com активно использует системы машинного обучения для решения практических задач. Технологии машинного обучения помогают расширять сферу деятельности, улучшать работу сервисов, повышать качество логистики и скорость доставки. Amazon.com запустила платформу AWS, чтобы другие компании могли гибко и экономично использовать эти преимущества в своей ИТ-инфраструктуре, и продолжает делать технологии машинного обучения доступными для других.

Сама структура подразделений разработки Amazon.com и приверженность к решению утилитарных коммерческих проблем с помощью машинного обучения помогают создавать простые, но мощные инструменты и сервисы машинного обучения. Сначала эти инструменты тестируются на критически важных процессах в рамках Amazon.com – и только потом становятся доступны для других компаний, так же, как и другие ИТ-сервисы.

Машинное обучение часто используется для прогнозирования результатов на основании данных за прошедший период. Например, компании могут использовать машинное обучение для прогнозирования объемов продаж в будущем финансовом квартале на основе информации о демографической ситуации или оценивать, какие клиенты могут разочароваться в конкретном бренде или, наоборот, стать наиболее лояльными к нему, на основе профиля клиента. Такие прогнозы позволяют принимать более эффективные решения, улучшать качество продуктов и снижать расходы на удержание клиентов. Машинное обучение дополняет системы бизнес-аналитики, которые предоставляют информацию о деятельности компании за прошлые периоды, но фокусируется на прогнозах будущих тенденций.

Успешная реализация технологий машинного обучения в компании состоит из нескольких шагов. Прежде всего необходимо определить, какую проблему должна решать система, т. е. какие прогнозы могут быть полезны для компании. Затем необходимо собрать данные за прошлые периоды на основании бизнес-показателей (транзакции, показатели продаж, потери клиентов и т. п.). Эти данные будут использоваться для построения модели машинного обучения. После этого модель машинного обучения будет делать прогнозы, которые можно использовать для принятия более обоснованных бизнес-решений.

Использование машинного обучения в вашей организации

Использование машинного обучения в вашей организации

Определяйте объекты, события и данные, которые отличаются от ожидаемых результатов или сильно выделяются в своей категории объектов.

Создавайте предсказательные модели для обнаружения потенциально мошеннических сделок, а также обманных или некорректных описаний.

Определяйте клиентов, которые с большой вероятностью могут отказаться от услуг. Это позволяет заблаговременно заинтересовать таких клиентов с помощью акций или индивидуального обслуживания. 

Используйте модели анализа с прогнозированием для рекомендации товаров и отображения на сайте индивидуально настроенного контента на основе предыдущих действий клиента. 


Глубокое обучение – это частный случай машинного обучения, в котором используются многоуровневые алгоритмы для более глубокого анализа данных.В таких нелинейных алгоритмах создается не просто объяснимый набор связей, как при простом регрессионном анализе,а распределенные представления данных, которые взаимодействуют друг с другом в зависимости от определенного набора факторов. Если предоставить алгоритмам глубокого обучения большой объем входных данных, они смогут определять взаимоотношения между элементами.Например, это могут быть взаимоотношения между формой, цветом, словами и т п.Затем эти отношения используются для прогнозирования.В случае искусственного интеллекта эффективность алгоритмов глубокого обучения заключается в том, что они могут определять гораздо больше взаимоотношений между объектами, чем способен включить в программу человек, а также находить такие взаимоотношения, которые, возможно, люди вообще не в состоянии обнаружить.При достаточно больших объемах входных данных сеть алгоритмов будет делать прогнозы или интерпретировать очень сложные структуры данных.

Сверточные нейронные сети работают эффективнее людей во многих задачах, включая задачи классификации объектов.  После исследования нескольких миллионов изображений известного содержания такая система алгоритмов сможет определять предмет новых изображений.  Во многих сервисах хранения фотографий используются алгоритмы распознавания лиц, основанные на использовании возможностей глубокого обучения.  Они легли в основу сервисов Amazon Rekognition, Amazon Prime Photos и Firefly Service от Amazon.

Amazon Alexa и другие виртуальные помощники способны распознавать запрос и возвращать ответ.Известно, что люди способны распознавать голос с самого раннего возраста, а вот компьютеры научились распознавать голос и отвечать ему относительно недавно.Задачу распознавания речи достаточно трудно решить, используя только традиционные математические и вычислительные алгоритмы, так как они не позволяют охватить все множество акцентов и речевых шаблонов.С использованием глубокого обучения системы алгоритмов справляются с этой задачей более эффективно и способны распознавать содержание и намерение речи. 

Системы обработки естественных языков предназначены для понимания человеческого языка, эмоциональной окраски текста и контекста.Это позволяет алгоритму распознавать более сложные характеристики, такие как эмоции или сарказм.Наблюдается возрастающая потребность в таких системах, так как компании стремятся автоматизировать службы работы с клиентами с помощью текстовых или голосовых ботов, например таких, которые используются в Amazon Lex.

На страницах интернет-магазинов часто отображается контент, индивидуально настроенный для каждого пользователя: товары, фильмы или новости, которые могут его заинтересовать.Раньше этими материалами занимались сотрудники компаний, создавая связи между товарами. Однако с появлением больших данных и глубокого обучения эту работу вместо людей могут делать программы, в которых соответствующие алгоритмы могут определять потенциально интересные для пользователя товары на основе данных о предыдущих покупках и просмотренных товарах и сопоставления этой информации с информацией о других пользователях.

>> Подробнее о MXnet, открытой системе глубокого обучения, и о том, как начать работу.

 

Начало работы с сервисами Amazon AI