哪个行业日志增长量大？
在各大行业日志存储场景中，互联网行业对系统日志、访问日志、业务日志存储的实时性、可靠性、可扩展性要求最高，日志数据量也是增长最快的行业。通信行业、政府和金融行业日志数据量次之。主要因为通信行业和政府和金融行业日志数据对安全性的要求最高，所以日志数据量大，保留时间长。
日志大数据由于数据源众多、数据量巨大，并且数据传输可能被中断，从而造成部分数据无法入库等问题，同时由于日志数据本身数据质量无法保证，其语义、内容、质量等可能不符合用户的期望，清洗也存在诸多困难。因此，需要基于日志大数据处理平台进行分析和处理。
日志大数据处理平台是基于日志大数据的分布式架构，将采集、存储、检索、分析以及可视化等功能模块进行流程整合，再通过用户交互界面驱动整个平台工作的日志大数据应用系统。
日志大数据处理平台
日志大数据处理平台采集终端设备、服务器日志数据，以及数据文件等，通过日志解析、数据清洗和语义理解等预处理，再根据用户需求选择进行日志检索、日志分析或者日志挖掘等任务，最后把处理结果以日志报告、搜索结果、仪表盘和数据导出方式呈现出来，支持日志大数据的集中管控。