一般的大数据平台从平台搭建到数据分析大概包括以下几个步骤:
Linux系统安装。分布式计算平台或组件安装,当前分布式系统的大多使用的是Hadoop系列开源系统。数据导入。数据分析。一般包括两个阶段:数据预处理和数据建模分析。数据预处理是为后面的建模分析做准备,主要工作时从海量数据中提取可用特征,建立大宽表。数据建模分析是针对预处理提取的特征或数据建模,得到想要的结果。结果可视化及输出API。可视化一般式对结果或部分原始数据做展示。一般有两种情况,行数据展示,和列查找展示。一般的大数据平台从平台搭建到数据分析大概包括以下几个步骤:
Linux系统安装。分布式计算平台或组件安装,当前分布式系统的大多使用的是Hadoop系列开源系统。数据导入。数据分析。一般包括两个阶段:数据预处理和数据建模分析。数据预处理是为后面的建模分析做准备,主要工作时从海量数据中提取可用特征,建立大宽表。数据建模分析是针对预处理提取的特征或数据建模,得到想要的结果。结果可视化及输出API。可视化一般式对结果或部分原始数据做展示。一般有两种情况,行数据展示,和列查找展示。