心智圖資源庫 阿里雲端日誌服務 SLS
日誌服務 (Simple Log Service,簡稱 SLS) 是雲端原生觀測分析平台,為 Log/Metric/Trace 等資料提供大規模、低成本、即時平台化服務。一站式提供資料擷取、加工、分析、警告視覺化與投遞功能,全面提升研發、維運、營運與安全等場景數位化能力。
編輯於2024-01-13 15:13:18This is a mind map about bacteria, and its main contents include: overview, morphology, types, structure, reproduction, distribution, application, and expansion. The summary is comprehensive and meticulous, suitable as review materials.
This is a mind map about plant asexual reproduction, and its main contents include: concept, spore reproduction, vegetative reproduction, tissue culture, and buds. The summary is comprehensive and meticulous, suitable as review materials.
This is a mind map about the reproductive development of animals, and its main contents include: insects, frogs, birds, sexual reproduction, and asexual reproduction. The summary is comprehensive and meticulous, suitable as review materials.
This is a mind map about bacteria, and its main contents include: overview, morphology, types, structure, reproduction, distribution, application, and expansion. The summary is comprehensive and meticulous, suitable as review materials.
This is a mind map about plant asexual reproduction, and its main contents include: concept, spore reproduction, vegetative reproduction, tissue culture, and buds. The summary is comprehensive and meticulous, suitable as review materials.
This is a mind map about the reproductive development of animals, and its main contents include: insects, frogs, birds, sexual reproduction, and asexual reproduction. The summary is comprehensive and meticulous, suitable as review materials.
阿里雲端日誌服務 SLS
產品簡介
日誌服務SLS是雲端原生觀測與分析平台,為Log、Metric、Trace等資料提供大規模、低成本、即時的平台化服務。日誌服務一站式提供資料擷取、加工、查詢與分析、視覺化、警告、消費與投遞等功能,全面提升您在研發、維運、營運、安全等場景的數位化能力。
功能概覽
數據採集
支援Log、Metric、Trace等資料類型,並支援50多種資料來源,包括阿里雲產品、伺服器與應用、物聯網設備、行動端、開源軟體、標準協定等。
日誌儲存
支援智慧分層儲存。資料分層儲存時,可降低您長週期儲存的成本,同時確保日誌的查詢、分析、視覺化、警告、投遞和加工等能力不受影響。
數據加工
提供200多個內建函數、400多個正規表示式、靈活的自訂函數,實現過濾、分割、轉換、富化、複製等效果,滿足資料分派、規則、融合等場景。
查詢與分析
支援PB級資料即時查詢與分析,提供10多種查詢運算子、10多種機器學習函數、100多個SQL函數,並支援定時SQL和SQL獨享版。
視覺化
支援查詢與分析結果視覺化,提供10多種統計圖表,包括表格、線圖、長條圖、地圖等,並支援基於統計圖表自訂儀表板(支援外嵌與下鑽分析)。
告警
提供一站式警報功能,包括警報監控、警告管理、通知(行動)管理等,適用於開發維運、IT維運、智慧維運、安全維運、商務維運等多個場景。
消費與投遞
支援資料即時消費,適用於Storm消費、Flume消費、Flink消費等情境;支援資料即時投遞,適用於將資料投遞至OSS、TSDB等雲端產品。
日誌審計
在繼承現有日誌服務所有功能基礎上,也支援多帳戶下即時自動化、中心化採集雲端產品日誌並進行審計,以及支援審計所需的儲存、查詢及資訊摘要。
功能特性
數據採集
支援採集伺服器與應用程式相關的日誌、時序資料和連結資料。
支援採集物聯網設備日誌。
支援採集阿里雲產品日誌。
支援採集行動端數據。
支援採集Logstash、Flume、Beats、FluentD、Telegraf等開源軟體中的資料。
支援透過HTTP、HTTPS、Syslog、Kafka、Prometheus等標準協定存取資料。
查詢與分析
支援精確查詢、模糊查詢、全文查詢、欄位查詢。
支援上下文查詢、日誌聚類、LiveTail、重建索引等功能。
支援標準的SQL 92語法。
提供SQL獨享實例。
數據加工
資料規整:針對混亂格式的日誌進行欄位擷取、格式轉換,取得結構化資料以支援後續的流程處理、資料倉儲計算。
資料富化:對日誌(例如訂單日誌)和維表(例如使用者資訊表)進行欄位連接(JOIN),為日誌添加更多維度的信息,用於資料分析。
資料流轉:透過全球加速功能將海外地域的日誌傳輸到中心地域,實現全球日誌集中化管理。
資料脫敏:將資料中包含的密碼、手機號碼、地址等敏感資訊進行減敏。
資料過濾:過濾出關鍵服務的日誌,用於重點分析。
消費與投遞
支援透過Splunk、QRadar、Logstash、Flume等第三方軟體消費資料。
支援透過Java、Python、GO等語言消費資料。
支援透過函數運算、即時運算、雲端監控 等阿里雲產品消費數據。
支援透過Flink、Spark、Storm等串流運算平台消費資料。
支援將資料投遞到OSS、MaxCompute、AnalyticDB、TableStore 等阿里雲產品。
視覺化
儀錶板內建圖表:日誌服務為您提供表格、線圖、長條圖等多種統計圖表,您可以根據分析需求選用合適的圖表類型展示查詢和分析結果,並將結果儲存到儀表板中。
第三方視覺化工具:日誌服務支援直接對接Grafana、DataV等第三方圖表。
告警
警報監控:支援透過警告監控規則定期檢查評估查詢和分析結果,觸發警告或恢復通知,發送給警告管理系統。
警報管理:支援透過警報策略對所接收到的警告進行路由分派、抑制、去重、靜默、合併等操作,然後傳送給通知(行動)管理系統。
通知(行動)管理:支援透過行動策略將警告動態分派給特定的通知管道,再通知給目標使用者、使用者群組或值班群組。
日誌審計
支援即時自動化、中心化採集多帳號下的雲端產品日誌並進行稽核。
覆蓋基礎(ActionTrail、容器服務Kubernetes版)、儲存(OSS、NAS)、網路(SLB、API網關)、資料庫(關聯式資料庫RDS、雲端原生分散式資料庫PolarDB-X、PolarDB MySQL雲端原生資料庫)、安全(WAF、DDoS防護、雲端防火牆、雲端安全中心)等雲端產品。
支持自由對接其他生態產品或自有SOC中心。
內建百種警告規則,支援一鍵開啟,涵蓋帳戶安全、權限管理、儲存、主機、資料庫、網路、日誌等各方面的合規監控。
產品架構和優勢
產品架構
產品優勢
統一存取
支援多種來源的多種類型資料存取。
智慧
提供完整AIOps能力,支援智慧異常偵測與根因分析能力。
高效率
提供千億級資料即時採集與查詢與分析能力。
一站式
提供一站式資料功能,包括資料收集、加工、查詢與分析、視覺化、警告等。
彈性
提供PB等級資料彈性伸縮能力。
低成本
支持按量付費。您僅需為實際用量付費,總擁有成本(TCO)降低50%以上。
應用場景
數據採集與消費
透過日誌服務LogHub功能,可以大規模低成本接入各種即時日誌資料(包括Metric、Event、BinLog、TextLog、Click等)。
使用便利:提供50 即時資料擷取方式,讓您快速建置平台;強大配置管理能力,減輕維運負擔。
彈性伸縮:無論是流量高峰或業務成長都能輕鬆應付。
資料清洗與流計算 (ETL/Stream Processing)
日誌中樞(LogHub)支援與各種即時運算及服務對接,並提供完整的進度監控,警報等功能,並可根據SDK/API實現自訂消費。
操作便利:提供豐富SDK以及程式框架,與各流運算引擎無縫對接。
監控警報:提供豐富監控數據,以及延遲警報機制。
彈性伸縮:PB級彈性能力,0延遲。
資料倉儲對接(Data Warehouse)
日誌投遞(LogShipper)功能可以將日誌中樞(LogHub)中資料投遞至儲存類別服務,流程支援壓縮、自訂Partition、以及行列等各種儲存格式。
海量資料:對資料量不設上限。
種類豐富:支援行、列、TextFile等各種儲存格式。
配置靈活:支援使用者自訂Partition等配置。
日誌即時查詢與分析
即時查詢分析(LogAnalytics)可以即時索引LogHub中數據,提供關鍵字、模糊、上下文、範圍、SQL聚合等豐富查詢手段。
即時性強:寫入後即可查詢。
海量低成本:支援PB/Day索引能力,成本為自建方案15%。
分析能力強:支援多種查詢手段,及SQL進行聚合分析,並提供視覺化及警報功能。