如何获取大数据？如何统计分析？

如何获取大数据？如何统计分析？

物联网系统、传统信息处理系统和互联网应用(Web和App），因此，要想获取大数据，必须从这三个渠道获取大数据。

物联网系统产生的数据占大数据的重要比例。物联网产生的数据主要是非结构化数据，包括视频、音频、传感数据等。物联网有许多应用领域，如工业物联网、农业物联网、汽车互联网、智能城市等。通常，这些数据的收集有严格的要求，不能对个人开放。如果个人想要获取这部分数据，一个更可行的解决方案是与数据收集者合作，如数据分析。

传统信息系统涵盖广泛的领域，包括政府系统和企业ERP、教育信息系统、医疗信息系统等，传统信息系统覆盖的数据主要是结构化数据，往往具有较高的精度和相关性，这部分数据的价值密度也相对较高。

然而，传统信息系统所涵盖的数据往往涉及个人隐私、商业秘密和其他内容，因此这部分内容通常受到严格保护。随着大数据技术的发展，行业对政府系统数据开放的呼声越来越高，脱敏数据往往不会侵犯个人隐私，因此未来一些政府系统的大数据将陆续开放。

互联网应用程序也是大数据的重要基础之一，包括各种网络应用程序和大量的应用程序产品，这部分数据主要是半结构化的，数据内容难以区分，但由于这部分数据的价值密度相对较高，所以现在许多互联网公司基于这些数据“肖像”用户，从而进行多维分类。

至于大数据分析工具，推荐两个给你。

1、FineReport

Finereport是一款集数据显示(报表)和数据输入(表单)功能于一体的纯Java企业级web报表工具。它具有“专业、简单、灵活”的特点和无码概念。设计复杂的中国报表，构建数据决策分析系统，只需简单的拖动操作。

来看看它做的dashboard吧：

很多人看到上面的可视化会好奇是什么图表做的。其实大部分H5图表都是Finereport带来的。之前提到Finereport具有良好的开放性，可以让IT同事写代码开发，所以在制作时也可以访问Echarts等第三方控制器来制作图表。

2、FineBI

FineBI是新一代自助大数据分析的商业智能产品，为数据准备、自助数据处理、数据分析与挖掘、数据可视化提供了完整的解决方案。它也是我所尊重的可视化工具之一。

首先，作为一种报告工具，Finereport主要用于解决提高IT部门常规/复杂报告开发效率的问题；FineBI是一种商业智能BI工具。它是一种分析产品，在IT信息部门分类准备数据业务包的前提下，给出数据，让业务人员或领导自行分析，满足即席数据分析的需要。

FineBI的使用感与Tableau相似，都提倡可视化的探索性分析，有点像强化版的数据透视表。使用简单，可视化库丰富。它可以作为数据报告的门户网站，也可以作为各种业务分析的平台。