什麼是資料傳輸?
資料傳輸是在系統重新設定過程中或為增強資料利用率和安全性而在系統之間移動資料的程序。該程序通常涉及透過網路將資料從來源複製到目的地。
如果同時保留來源副本和目的地副本,則稱為資料複寫或資料備份,並且需要持續付出努力來同步兩個副本之間的任何變更。如果刪除或停用來源副本,則該程序稱為資料移轉。
資料傳輸也可能涉及將資料儲存裝置從一個位置實際傳輸到另一個位置
為什麼要執行資料傳輸?
企業可能出於以下幾種原因而將資料從一個位置或系統傳輸到另一個位置或系統。
雲端資料移轉
雲端資料移轉是最常見的資料傳輸形式之一,因為它可讓企業將本機的內部部署資料重新放置到雲端基礎設施。向雲端移動資料可為企業提供儲存和運算方面的無限可擴展性,以及資料用量方面的可擴展性,同時能夠增強對組織範圍內資料的存取。向雲端移動資料是資料現代化的標準部分。
資料備份
資料備份是災難復原的關鍵步驟,可為企業提供其資料的大量時間點副本,確保營運的連續性。企業可以開發備份並將其分佈到多個位置以增強其安全狀態,同時有助於防止災難事件產生最嚴重後果。通常,透過將資料副本傳輸到遠端位置來建立備份是資料管理的標準部分。
資料封存
資料封存涉及將不常使用的資料傳輸至長期儲存設施。透過使用這些替代資料倉儲,企業可以在其活躍營運中釋放空間來儲存更多的必備資料集。將檔案傳輸到資料封存還可確保根據需要存取資料,而不會佔用目前工作負載中的太多空間。
混合工作流程
當企業暫時將資料傳輸到雲端以處理高峰時段的額外需求時,就會產生混合雲端工作流程 (也稱為雲端高載)。這種形式的資料分享需要快速的資料傳輸速度、可靠的傳輸和大型網路頻寬,才能管理往返雲端的大量資料移動。
如何執行資料傳輸?
企業可以採用兩種主要的工作流程策略進行資料傳輸。
手動資料傳輸
手動資料傳輸策略涉及雲端服務供應商將實體裝置傳送給您的企業,然後您可以將資料載入該裝置並傳回給它們。這可確保您的所有資料安全地上傳到自己的雲端帳戶,從而減輕公司在傳輸過程中損害資料完整性的任何擔憂。實體裝置方法也可以消除對移動大型資料集的擔憂,例如頻寬有限或資料傳輸速率低,這些問題會影響其他通訊通道。
自動資料傳輸
自動資料傳輸利用網路型工具和服務在不同系統之間傳輸資料,而無需人為干預。對於需要頻繁或持續移動資料的企業,例如依賴外部備份網站的企業,自動方法就特別有用。某些企業可能會自動化檔案傳輸通訊協定系統,以簡化檔案從一個伺服器到另一個伺服器的移動。組織可以持續傳輸資料或批次處理資料,從而減少負擔,但需要佔用更多時間。
資料傳輸的主要考量為何?
企業在從事資料傳輸時有幾點關鍵考量。
可用性
資料傳輸情境中的可用性意味著該服務可以在公司需要時運作,而不會造成任何阻止存取的中斷。資料傳輸程序中的高可用性規劃涉及使用彈性服務,確保資料來源保持可存取性,以及使用具有容錯功能的資料中心。
可靠性
可靠性是指確保從來源傳送的任何資料在到達目標時不會出現資料損壞、重複或遺失的能力。可靠性涉及實作端對端驗證,從而增強資料管道每個步驟的可見性。藉助全面的可見性,資料工程師可以識別資料傳輸過程中的任何問題,並在其造成上述任何問題之前進行修復。
效率
資料傳輸中的效率是指確保簡化資料傳輸程序,同時取用盡可能少的資源。高效率的資料傳輸系統使用非同步和同步傳輸等策略,以最大限度地減少潛在的中斷並盡可能提高傳輸速度。
資料壓縮技術的改進、使用平行傳輸代替序列傳輸以及在提供的情況下使用有線連線均有助於提高效率。
延遲
延遲是資料傳輸速度方面的差異,通常與電腦網路條件或任何給定時刻的頻寬用量總計等因素有關。高延遲度會降低跨平台的數位通訊效率,並可能造成意外的中斷。
備援
備援是不必要的資料重複,這種重複會佔用時間和資源,而不會為公司帶來任何實際利益。在某些情況下,重複資料有其必要性,甚至可能是資料傳輸的主要原因,例如建立資料備份時。如果沒有理由建立資料的第二個副本,則導致同一資料產生兩個版本的資料傳輸就會在系統中形成備援。
安全性
組織應始終遵守安全資料傳輸實務,以最大限度地減少安全事件發生的可能性。網路和資料保護可確保敏感資訊保持私密性。絕大多數的資料傳輸系統和系統間通訊協議均採用嚴格的安全防禦措施,以確保資料在整個傳輸過程中盡可能安全。
AWS 雲端服務如何支援您的資料傳輸要求?
AWS 提供廣泛的解決方案,協助您將資料傳輸到 AWS 雲端和其中。例如,您可以使用
- AWS DataSync,透過端對端安全性、簡化的規劃和資料移動管理,安全地探索資料並移轉至 AWS。
- AWS Direct Connect,建立與 AWS 的專用網路連線。這樣,您就可以使用多種加密選項,讓資料在您的網路和 AWS 之間移動時確保安全。
- Amazon Data Firehose,串流資料。您可以穩定地將即時串流載入資料湖、資料倉儲和分析服務中。
- AWS Snowcone,存取安全及堅固型裝置,將 AWS 運算與儲存功能帶至邊緣環境,並將資料傳入或傳出 AWS。
- AWS Transfer Family,輕鬆管理往返 AWS 的檔案資料傳輸。
立即建立免費帳戶,開始在 AWS 上進行資料傳輸。