Splunk机器数据及日志分析平台课件.ppt

安装部署 收集数据源包括操作系统、网络设备、安全设备和应用程序的日志。（包括linux、Firewall、交换机、路由器、负载均衡，入侵检测，审计系统、身份认证系统等） * Education Healthcare Technology Energy and Utilities Manufacturing Telecommunications Cloud and Online Services Government Retail Financial Services and Insurance Media Travel and Leisure 全球 90+国家拥有7,000+ 客户 超过2/3 财富100企业 * Splunk 中国客户 * 数据在高速增长 Volume | Velocity | Variety | Variability GPS, RFID, Hypervisor, Web Servers, Email, Messaging, Clickstreams, Mobile, Telephony, IVR, Databases, Sensors, Telematics, Storage, Servers, Security Devices, Desktops 机器数据 是大数据领域中增长最快、内容最复杂、也最具有价值的一类数据 * 机器数据是什么样的? Sources Order Processing Twitter Care IVR Middleware Error * 机器数据包含有大量有价值的信息 Customer ID Order ID Customer’s Tweet Time Waiting On Hold Twitter ID Product ID Company’s Twitter ID Customer ID Order ID Customer ID Sources Order Processing Twitter Care IVR Middleware Error * 机器数据包含有大量有价值的信息 Order ID Customer’s Tweet Time Waiting On Hold Product ID Company’s Twitter ID Order ID Customer ID Twitter ID Customer ID Customer ID Sources Order Processing Twitter Care IVR Middleware Error * * 让机器数据对所有人都可以访问、 使用并带来价值 业内领先的机器数据分析平台 任何机器数据 运维智能 HA Indexes and Storage 有哪些信誉好的足球投注网站与调查 主动监控 运维可视化 实时业务洞察 CommodityServers Online Services Web Services Servers Security GPS Location Storage Desktops Networks Packaged Applications Custom Applications Messaging Telecoms Online Shopping Cart Web Clickstreams Databases Energy Meters Call Detail Records Smartphones and Devices RFID * * * Splunk 是什么? Splunk 是一个针对机器数据的数据平台 针对所有 IT 系统和基础设施数据， 提供数据有哪些信誉好的足球投注网站、报表和可视化展现 Splunk 是软件 – 几分钟就可以完成下载和安装 可以运行在各种主流的操作系统平台 处理机器数据需要新方法 * 关系型数据、高度结构化、基于僵化模式 财务记录、多维数据、数据计算 月报，非实时事件 时间序列非结构化数据，无预定义模式 由所有 IT 系统生成，大量不同类型的格式 巨量；快速导航和相关性最重要 由人与人之间的互动而产生 包括电子邮件、即时通信、语音、视频和文本 储存在集中式公司服务器、文件共享和桌面中 机器产生的数据 商业应用程序数据 人为产生的数据 Distributed File System (semi-structured) 分布式文件系统 （半结构化） Key/Value, Columnar or Other (semi-structured) 键/值、纵列或其它 （半结构化） Relational Database (highly structured) 关系数据库 （高度结构化） Map / Reduce 映射 / 化简 TeraData Greenplum Cassandra