You are currently viewing 移动互联网大数据分析系统

移动互联网大数据分析系统

移动互联网大数据分析系统基于WIFI探测技术、移动互联网和云计算等先进计算,对移动互联网上网行为进行大数据分析,具有信息比对、轨迹回放、追溯取证、人流分析等多种功能。系统对提升移动互联网使用价值、确保移动互联网安全,强化移动互联网管理具有重要的意义。

1、系统组成

本系统由采集探针、云平台和关联分析平台组成。系统在移动互联网上网区域内安装探针,探针采集监控区域内移动设备的上网行为并及时上传到云平台,云平台对分布的审计数据进行统一存储、管理和分析。

(1)数据采集探针

数据采集由探针实现。探针类似一个代理服务器,移动用户上网的信息都要经过探针进行采集,转发。探针采集信息上传至云平台。

(2)云平台

数据采集系统将分布在不同物理位置的移动终端的上网行为存储到云端。由于移动终端已经成为上网的主要工具,大量的移动智能终端将产生大量的上网数据,这些数据的统一存储需要一个能够进行高效数据访问的超大存储空间。本系统采用云存储技术,将大量的独立的硬件存储资源利用云存储技术进行了虚拟整合,根据存储的需求还可以动态地添加新的硬件存储资源。

(3)关联分析平台

系统根据预定义的审计规则对数据进行实时分析,并对异常行为进行实时控制。本系统基于Hadoop分布式系统实现用户行为关联分析功能,具有异常检测、违规发现及实体关联分析、地理空间关联分析和数据统计分析等能力。同时,采用可视化平台监控界面的方式,为系统提供一种友好、美观的数据展示以及操作方式。

2、系统功能

通过WiFi探测技术采集移动互联网的上网行为,系统进行大数据分析。具有数据统计、轨迹回放、人流分析、信息比对、增值服务等多种功能。

(1)采集分析

  1. 提供对每天从各设备上传的数据总量的统计分析。
  2. 提供对场所数量统计。
  3. 提提对设备数量、在线数量、在线统计及趋势统计。
  4. 提供对统计的MAC地址数量、同一场所采集到的MAC地址数量、同一MAC地址出现次数、前端设备数量、在线前端设备数量、离线前端设备数量、某一前端设备当前运行状态统计
  5. 提供系统采集的MAC日志、发现MAC数量、移动终端MAC数量、按时间段的统计查询,时间维度可支持昨日、最近7天、最近30天、自定义等维度,并支持以趋势图形进行分析与展示。

(2)数据统计

  1. 提供手机号码量数据的采集分析,支持对手机号码采集的趋势分析,从手机号码量得出数据采集的关联性的趋势变化,进一步体现数据的采集能力和关联分析能力。
  2. 提供实名数据分析,支持对实名采集的趋势分析与记录,体现实名数据与移动采集数据的关联性的趋势变化,通过数据记录可进一步了解数据的真实性和实用性的分析能力。
  3. 提供手机与实名绑定比例分析,实现通过手机与实名与绑定比例即可了解手机与MAC绑定、MAC与实名绑定的比例结果,为数据整合来源提供更多的监测信息。
  4. 支持不同厂商(第三方)数据来源统计管理,统计内容包括虚拟身份,真实身份,场所总数等,支持每周,每日场所(第三方场所)的采集数据(真实身份,手机号码, 虚拟身份, mac地址, IMEI,  IMSI)的分析图表,方便直观的考核和统计管理。
  5. 查询关联数据包括:真实身份(姓名, 证件号码),手机号码, 虚拟身份, mac地址, IMEI,  IMSI。
  6. 根据mac地址进行相应的移动终端品牌关联。如:苹果,三星等等

(3)轨迹查询回放

  1. 结合地图展示MAC地址出现次数、出现的时间、方位的形式进行回放展示。查询目标MAC的活动轨迹。
  2. 直观形象化展示MAC的活动轨迹。可支持在离线地图上描绘前端采集到同一MAC地址出现在不同地理位置(场所)的轨迹变化。
  3. MAC轨迹回放可提供MAC首次出现的场所、最后出现场所、首次活动时间、最后活动时、出现的次数、最常出的场所等详细信息记录,同时支持MAC地址的轨迹动态变化显示。

(4)人流分析

  1. 根据实时数据,分析场所当前的人流量以及场所之间的人流趋势。
  2. 在地图上以不同颜色显示不同种类型(酒店, 咖啡厅,商厦等)的场所信息,分析相邻场所之间的数据变化规律,从而分析人流走向。
  3. 平台支持对特定场所数据分析,场所频繁出现的MAC终端,场所密集人流时段,场所在特定时间段(月, 周, 天, 时)内人流趋势图。

3、应用领域

    本系统的成果可以在以下领域推广使用:

  • 茶楼、酒吧、超市、连锁店、智慧广场等场所;
  • 各大移动营运商;
  • 各类移动上网营运场所。