Streaming Data Solution for Amazon Kinesis

可大規模擴展且持久的即時資料串流服務，讓您能夠持續擷取資料進行處理。
檢視實作指南

概觀

適用於 Amazon Kinesis 的串流資料解決方案提供 AWS CloudFormation 範本，其中資料將流經產生者、串流儲存體、使用者和目的地的。為了支援多個使用案例和業務需求，該解決方案提供了四個 CloudFormation 範本。與適用於 Amazon MSK 的串流資料解決方案類似，這些範本設定為套用最佳實務，以使用儀表板和警報監控功能，以及保護資料安全。

串流資料必須由可大規模擴展的儲存體持久擷取，能夠處理來自資料產生者的大量資料。產生者可以是成千上萬的資料來源，每個資料來源持續產生資料，並且通常會同時以較小的大小 (KB) 提交記錄。

串流資料包含各式各樣的資料，例如客戶使用行動或 Web 應用程式產生的日誌檔、電子商務採購、遊戲中的玩家活動、來自社交網路、金融交易所或地理空間服務的資訊，以及來自連線裝置或資料中心儀器的遙測結果。

適用於此 AWS 解決方案的使用案例
商業智慧與分析 資料營運 資料倉儲 即時串流資料

優勢

自訂化組態
自動設定能夠輕鬆擷取、存放、處理和交付串流資料所需的 AWS 服務。
四個範本選項
從四個不同的 AWS CloudFormation 範本選項中進行選擇。為您的生產環境測試新的服務組合，並改進現有的應用程式。
即時使用案例
擷取大量應用程式日誌，分析點擊流資料，持續交付至資料湖等。
可自訂的原始程式碼
自訂解決方案的未定案程式碼，然後使用監控功能快速從測試過渡到生產。

技術詳細資訊

下圖顯示了四個 AWS CloudFormation 範本，您可以使用解決方案實作指南來自動部署這些範本。
  • 選項 1
  • 使用 Amazon API Gateway 和 AWS Lambda 的 AWS CloudFormation 範本
    選項 1 – 使用 Amazon API Gateway、Kinesis Data Streams 和 AWS Lambda 的 AWS CloudFormation 範本

    相關內容

    AWS 架構部落格
    Real-Time In-Stream Inference with AWS Kinesis, SageMaker, & Apache Flink

    這篇文章概述了使用各種 AWS 服務實現串流資料即時推理的架構。它還涵蓋了 Amazon Managed Service for Apache Flink 的整合，以非同步調用基礎服務或數據庫。

    閱讀完整的部落格文章 
    培訓
    Introduction to Amazon Kinesis Analytics

    這是 Amazon Kinesis Analytics 的入門課程，可協助您使用 SQL 查詢串流資料或建置整個串流應用程式。

    立即報名 
    培訓
    Data Analytics Fundamentals

    在此自主進度課程中，您將了解規劃資料分析解決方案的過程，以及所涉及的各種資料分析過程。

    立即報名 
    關於此部署
    版本
    1.8.1
    發行時間
    10/2023
    作者
    AWS
    預估部署時間
    5-10 分鐘
    預估成本
    查看詳細資訊
    檢視實作指南
    下載實作指南  原始程式碼  CloudFormation 範本  訂閱 RSS 摘要 
    部署選項
    準備好開始使用了嗎？
    在您的 AWS Console 中啟動此解決方案，即可將其部署
    在 AWS Console 啟動
    此 AWS 解決方案是否對您有幫助？
    是
    否
    提供意見回饋
  • 選項 2

  • 使用 Amazon EC2、Amazon Kinesis Producer Library、Amazon Kinesis Data Streams、Amazon Managed Service for Apache Flink 和 Amazon CloudWatch 的 AWS CloudFormation 範本 

    選項 2 – 使用 Amazon EC2、Amazon Kinesis Producer Library、Amazon Kinesis Data Streams、Amazon Managed Service for Apache Flink 和 Amazon CloudWatch 的 AWS CloudFormation 範本

    相關內容

    AWS 架構部落格
    Real-Time In-Stream Inference with AWS Kinesis, SageMaker, & Apache Flink

    這篇文章概述了使用各種 AWS 服務實現串流資料即時推理的架構。它還涵蓋了 Amazon Managed Service for Apache Flink 的整合，以非同步調用基礎服務或數據庫。

    閱讀完整的部落格文章 
    培訓
    Introduction to Amazon Kinesis Analytics

    這是 Amazon Kinesis Analytics 的入門課程，可協助您使用 SQL 查詢串流資料或建置整個串流應用程式。

    立即報名 
    培訓
    Data Analytics Fundamentals

    在此自主進度課程中，您將了解規劃資料分析解決方案的過程，以及所涉及的各種資料分析過程。

    立即報名 
    關於此部署
    版本
    1.8.1
    發行時間
    10/2023
    作者
    AWS
    預估部署時間
    5-10 分鐘
    預估成本
    查看詳細資訊
    檢視實作指南
    下載實作指南  原始程式碼  CloudFormation 範本  訂閱 RSS 摘要 
    部署選項
    準備好開始使用了嗎？
    在您的 AWS Console 中啟動此解決方案，即可將其部署
    在 AWS Console 啟動
    此 AWS 解決方案是否對您有幫助？
    是
    否
    提供意見回饋
  • 選項 3
  • 使用 Amazon Kinesis Data Streams、Amazon Kinesis Data Firehose 和 Amazon S3 的 AWS CloudFormation 範本
    選項 3 – 使用 Amazon Kinesis Data Streams、Amazon Kinesis Data Firehose 和 Amazon S3 的 AWS CloudFormation 範本

    相關內容

    AWS 架構部落格
    Real-Time In-Stream Inference with AWS Kinesis, SageMaker, & Apache Flink

    這篇文章概述了使用各種 AWS 服務實現串流資料即時推理的架構。它還涵蓋了 Amazon Managed Service for Apache Flink 的整合，以非同步調用基礎服務或數據庫。

    閱讀完整的部落格文章 
    培訓
    Introduction to Amazon Kinesis Analytics

    這是 Amazon Kinesis Analytics 的入門課程，可協助您使用 SQL 查詢串流資料或建置整個串流應用程式。

    立即報名 
    培訓
    Data Analytics Fundamentals

    在此自主進度課程中，您將了解規劃資料分析解決方案的過程，以及所涉及的各種資料分析過程。

    立即報名 
    關於此部署
    版本
    1.8.1
    發行時間
    10/2023
    作者
    AWS
    預估部署時間
    5-10 分鐘
    預估成本
    查看詳細資訊
    檢視實作指南
    下載實作指南  原始程式碼  CloudFormation 範本  訂閱 RSS 摘要 
    部署選項
    準備好開始使用了嗎？
    在您的 AWS Console 中啟動此解決方案，即可將其部署
    在 AWS Console 啟動
    此 AWS 解決方案是否對您有幫助？
    是
    否
    提供意見回饋
  • 選項 4
  • 使用 Amazon Kinesis Data Streams、Amazon Managed Service for Apache Flink 和 Amazon API Gateway 的 AWS CloudFormation 範本
    選項 4 – 使用 Amazon Kinesis Data Streams、Amazon Managed Service for Apache Flink 和 Amazon API Gateway 的 AWS CloudFormation 範本
    AWS 架構部落格
    Real-Time In-Stream Inference with AWS Kinesis, SageMaker, & Apache Flink

    這篇文章概述了使用各種 AWS 服務實現串流資料即時推理的架構。它還涵蓋了 Amazon Managed Service for Apache Flink 的整合，以非同步調用基礎服務或數據庫。

    閱讀完整的部落格文章 
    培訓
    Introduction to Amazon Kinesis Analytics

    這是 Amazon Kinesis Analytics 的入門課程，可協助您使用 SQL 查詢串流資料或建置整個串流應用程式。

    立即報名 
    培訓
    Data Analytics Fundamentals

    在此自主進度課程中，您將了解規劃資料分析解決方案的過程，以及所涉及的各種資料分析過程。

    立即報名 
    關於此部署
    版本
    1.8.1
    發行時間
    10/2023
    作者
    AWS
    預估部署時間
    5-10 分鐘
    預估成本
    查看詳細資訊
    檢視實作指南
    下載實作指南  原始程式碼  CloudFormation 範本  訂閱 RSS 摘要 
    部署選項
    準備好開始使用了嗎？
    在您的 AWS Console 中啟動此解決方案，即可將其部署
    在 AWS Console 啟動
    此 AWS 解決方案是否對您有幫助？
    是
    否
    提供意見回饋