ENGIE 在 AWS 上建立 Common Data Hub，加速零碳轉型

ENGIE 擁有各種不同的客戶群，從城市到零售客戶再到大型公司等。該公司日益支援更多客戶，以利用像是太陽能電池板和風力發電廠等分散式資產進行發電。隨著 ENGIE 朝去中心化邁進，而發現資料處理企業資源規劃軟體中的系統、應用程式和產品需要進行更新。該公司需要統一收集和分析資料的方法，以協助客戶管理價值鏈。指導 ENGIE 資料計劃開發和交付的技術團隊領導人 Gregory Wolowiec 表示：「我們需要使用資料來測量能源消耗，並根據天氣預報來預測電力生產量。」Wolowiec 還舉出幾個跨國所產生的孤立和不一致問題：「各國的解決方案皆不同，組織中的不同部門也不會共用資料。對我們來說，能夠以簡化的方式收集和共用全球資料是非常重要的事情。」

ENGIE 數位營運長 Yves LeGélard 解釋公司宗旨道：「ENGIE 的永續性是一切的基礎。這是我們存在的理由。我們協助大型公司和全球大城市快速實現零碳轉型，因為這實際上是目前人類面臨的一大問題。」

ENGIE 首席資料長 Gérard Guinamand 補充說道：「我們在資料方面的策略實際上與我們的宗旨相符。若您想要推動和實現零碳轉型，則需要先收集最新資訊資料。這其中包含與二氧化碳燃燒量、燃燒處以及連結像是天氣、溫度和人口等環境議題的相關資料。您必須儲存、收集和運算所有資料，以利測量和執行進度。」

無論 ENGIE 採用任何方法，均具備高安全性且符合全球法律規範。該公司進行概念驗證，並與當地和全球雲端提供商一同探索各種解決方案。Wolowiec 表示：「出於各種成本模型以及資料儲存等原因，我們深信 AWS 是個優秀的解決方案。」因此 ENGIE 自 2018 年中旬開始在 AWS 上著手進行大型資料專案。

Wolowiec 將 Common Data Hub 描述為「可讓 ENGIE 儲存和共用資料並利用資料創造價值的合作分散式資料湖。」 它使用 Amazon Simple Storage Service (Amazon S3) 建置，是一項物件儲存服務，提供領先業界的可擴展性、資料可用性、安全性及效能。該解決方案還使用 Amazon Redshift，這是一種雲端全受管 PB 級資料倉儲服務，可查詢 Amazon S3 資料湖的半結構化資料，進而展現資料倉儲的資料湖倉儲方法。

由於該解決方案使用了 Amazon Redshift，客戶可在其 Common Data Hub 環境中安全地部署資料倉儲，並善用其分析。該公司的業務單位管理員可透過在 Common Data Hub 管理 Amazon Redshift 叢集，將其新增至 Common Data Hub 專案，並輕鬆存取 Amazon S3 資料湖的資料集，還可從 Common Data Hub 的豐富資料集目錄中建立寶貴洞見 。Common Data Hub 將 Amazon Redshift 運用於兩種不同類型的資料存取。它使用 Amazon Redshift Spectrum 來直接查詢 Common Data Hub 的 S3 儲存貯體，並使用 Amazon Redshift 作為擁有內建內部儲存的佈建資料倉儲。Wolowiec 表示：「我們倚賴 Amazon Redshift Spectrum 功能，在 Common Data Hub 和 Amazon Redshift 資料倉儲管理的 Amazon S3 資料湖之間建立連結。」

其他涉及 Common Data Hub 的 AWS 服務包含 Amazon Kinesis Data Streams (Amazon KDS)，其為可大規模擴展且耐久的即時資料串流服務。ENGIE 可透過 Amazon KDS 從物聯網即時裝置輕鬆收集、處理和分析串流資料，這代表 ENGIE 可以快速收集用於開發洞見的資訊。AWS Glue 為用於中繼資料儲存庫的全受管擷取、載入、轉換 (ETL) 服務，可進一步協助資料傳輸和清理。Amazon Athena 為互動式查詢服務，透過標準 SQL 輕鬆分析 Amazon S3 資料，可讓 ENGIE 業務單位查看資料。為了從資料中收集更多洞見，ENGIE 倚賴 Amazon SageMaker，這是可為每位開發人員和資料科學家提供快速建立、訓練和部署機器學習模型能力的全受管服務。

為了以順暢輕鬆的方式採用全球 Common Data Hub，ENGIE 提供加速範本和文件，以協助其業務單位管理員看到所收集資料的價值以及存取分散式資料湖資料。Common Data Hub 還可實現高層級資料治理和安全性。資料生產者可以共用和控制對資料集和工作流程的存取，而取用者則可以要求存取和使用資料。

AWS 服務整合為 ENGIE 提供安全、敏捷和可擴展的解決方案。不同的業務單位現在可以隨需使用其架構，且無須犧牲任何重要營運資料。簡單易用和自動化的特色讓 ENGIE 業務單位在將 Common Data Hub 解決方案建立在 AWS 上後，可以快速提高生產力。此舉也對環境產生正面影響：ENGIE 運用資料以從風力發電場取得最大能源量，進而協助提高該重要再生能源的效率。Wolowiec 表示：「我們提供正確工具，促使實體專注於價值創造，而不是花費時間解決技術問題。」到目前為止，ENGIE 總共在 Common Data Hub 中收集了 200 TB 的資料。

Common Data Hub 透過啟用資訊技術和業務使用者之間的資料社群，組成 ENGIE 資料驅動策略的支柱，進而加速提高各個 ENGIE 等級的資料素養，並協助最佳化內部程序或建立新的資料驅動服務。現在所有的業務單位均具備獨一無二的解決方案，以更快的速度建立資料驅動應用程式。ENGIE 目前在全球的 Common Data Hub 上建立了超過 1,000 個專案。因為消除了孤立並讓每個部門以平等存取的方式從通用架構中受益，所以 Common Data Hub 可以提供真正具凝聚力的解決方案。

有了新的收集和共用資料方法，ENGIE 看到了改變業務方式的契機，公司也正在建立垂直資料中心來實現此目標。ENGIE 歷年來採用從下到上的方法，其業務單位為各區域的客戶提供服務。但是，因為許多能源服務均相同，而導致不必要的重複工作。Wolowiec 表示：「我們的發電活動，特別是可再生能源的生產，基本上在每個地方均相同，我們可以將 Common Data Hub 運用在建立全球通用使用案例。我們接下來將介紹更多從上到下的方法，特別是針對風力發電場。」

ENGIE 透過使用 AWS 服務來建立 Common Data Hub，讓全球業務單位以更高生產力的方式收集、共用和分析資料，從中發掘到了巨大的價值。ENGIE 的業務單位仍然保留自主性，而且現在可以從集中式資料的優勢中獲益，因為他們發現更新、更有效的方法來為全球提供電力，並從相似的使用案例中取得重要洞見。