公安大数据关键技术——数据采集

什么是数据采集？

▷数据采集(DAQ)： 又称数据获取，是指从传感器和其它待测设备等模拟和数字被测单元中自动采集信息的过程。

数据分类新一代数据体系中，将传统数据体系中没有考虑过的新数据源进行归纳与分类，可将其分为线上行为数据与内容数据两大类。

▷线上行为数据：页面数据、交互数据、表单数据、会话数据等。

▷内容数据：应用日志、电子文档、机器数据、语音数据、社交媒体数据等。

▷大数据的主要来源：

1）商业数据

2）互联网数据

3）传感器数据

数据采集与大数据采集区别

传统数据采集

1. 来源单一，数据量相对于大数据较小

2. 结构单一

3. 关系数据库和并行数据仓库

大数据的数据采集

1. 来源广泛，数据量巨大

2. 数据类型丰富，包括结构化，半结构化，非结构化

3. 分布式数据库

大数据技术广泛应用于各个行业，包括公安部门。公安工作越来越智能化，离不开大数据技术。

许多人对公安大数据非常好奇，到底什么是公安大数据？

公安大数据就是，以维护国家安全，维护社会治安秩序为目标，能被公安利用的一切数据。这个数据可以是图像、视频、文本、声音等等。

公安初期使用的数据，主要是文本数据，靠手写记录下来。后来随着科技的发展，图片、视频、文本数据广泛被采集，以终端采集设备代替人工采集，数据量越来越庞大，直至无法用常规软件工具进行处理，进而出现了大数据技术。

大数据应用于公安实战中，形成了从前端采集到中端服务，再到后端分析、应用的大数据全产业链。我们应该更多关注应用，从应用的角度来寻找数据来源。以往的数据来源，主要来自公安机关需要采集的一些特殊行业的信息，例如旅馆、网吧、卡口、印章、典当、涉危涉爆等实体（这里的实体指人）、事件信息（例：人在旅馆的住宿信息），采用u盘拷贝的方式，隔一段时间拷贝一次。

而现在，公安需要采集的行业越来越多，传统人工拷贝的方式相对落后，满足不了公安对大数据的需求。采集行业除了旅馆、网吧、卡口、印章、典当，还有例如：物流、药店、停车场、火车站、汽车站、医院、ktv、社保等场所的实体、事件信息。

公安无法自己快速的获取大量所需的数据，这就需要到了第三方平台来收集数据。

在这里，为大家介绍一款公安大数据前端信息采集系统——从晶社会信息采集系统，这是一款针对公安信通、情报、治安、反恐等部门搜集社会面数据而研发的，汇集社会多行业数据，形成可视化报表，为公安提供检索查询、布控预警、统计分析、设备管理、设备运维等服务，为一线民警减负增效。