特别感谢本期特邀嘉宾:数字冰雹副总经理丁冬先生!
嘉宾介绍:
北京数字冰雹信息技术有限公司副总经理,公司联合创始人之一,目前负责市场和财务工作。北京工业大学软件工程硕士。曾与团队一起在众多国际计算机技术大赛中屡获桂冠。在人机交互开发及大数据可视化领域拥有十余年经验,对行业有着深刻的理解与认知。
公司简介:
北京数字冰雹信息技术有限公司成立于2006年,经营范围:电子计算机软件开发、技术咨询、技术转让;计算机系统设计、集成;销售电子计算机软件及辅助设备、电子产品。数字冰雹现有员工近百人;曾在众多国际计算机技术大赛中屡获桂冠,并被比尔盖茨亲自授予“创新英雄”奖。公司通过了国家高新技术企业及软件企业认证,拥有军工二级保密资质和国军标质量体系认证,是国家火炬计划项目承担单位。
北京数字冰雹信息技术有限公司致力于提供完美的大数据可视化分析决策系统。公司秉承“将科技与艺术相结合”的理念,提供集设计、程序开发、硬件集成为一体的一站式服务。系统平台与行业需求深度结合,形成了一系列行业化可视化产品,成功应用于航天军工、智慧城市、网络安全、企业管理、工业监控等领域。
首先感谢联盟提供这么好的一个平台让我们可以在此进行分享,那么我们今天探讨的主题就是—大数据可视化的关键技术及行业应用,来自于数字冰雹。
数字冰雹核心团队成立于2001年,在人机交互开发及大数据可视化领域拥有十余年经验,对大数据行业有着深刻的理解与认知。自主研发的数据可视化核心产品AVE?(Advanced Visualization Engine先进可视化引擎),是国内首屈一指的数据可视化系统平台。平台与行业需求深度结合,形成了一系列行业化可视化产品,成功应用于航天军工、智慧城市、网络安全、企业管理、工业监控等领域。
数据可视化行业应用
大数据可视化系统最终是要应用到行业中去的,数字冰雹基于多年来积累的基础可视化产品组件,又与行业深度结合,基于各个行业不同的需求,形成针对各行业的基础产品。
以下是我们主要涉猎的行业领域系统简介:
一、智慧城市大数据可视化系统
数字冰雹的智慧城市大数据可视化系统,能够将城市运行核心系统的各项关键数据进行可视化呈现,从而对包括应急指挥、城市管理、公共安全、环境保护、智能交通、基础设施等领域进行管理决策支持,进而实现城市智慧式管理和运行。
系统支持集成包括地理信息、GPS数据、建筑物三维数据、统计数据、摄像头采集画面等多类数据,可以把政府各个部门、各种类型的数据融合打通,包括市政、警务、消防、交通、通讯、商业等,汇集在此统一的大数据平台之上,用于综合管理监控城市整体运行态势。
支持数字冰雹独创的大屏多屏操控方式,系统内置大屏拼接控制,可以根据客户不同的应用场景,自由布局多块屏幕的分布以及显示内容,既可重点关注专项事件态势,又可全面掌控城市整体态势。同时可以通过PAD手持设备作为控制终端,来实现对大屏显示布局、监控模式的切换以及软件界面内容的交互控制。为客户提供一种灵活、便捷的操控体验。
二、航天军工可视化系统
数字冰雹的航天军工态势感知平台是面向航天军工领域的高级可视化仿真解决方案。平台拥有几近写实的视觉效果,实时动态的战场环境与态势仿真,灵活自由的大屏多屏操作模式,强大的数据多维分析,无以伦比的大数据性能,以及对无边界的复杂场景的支持。
战场态势可视化拥有全三维战场态势,多样化的二维电子地图,支持海陆空天电大规模联合作战的战略、战役、战术全层面可视化,同时支持复杂电磁态势、作战辅助信息的呈现。
三、网络安全态势感知平台
数字冰雹的网络安全态势感知平台,能够将抽象的网络和系统数据进行可视化呈现,从而对网络中的安全设备、网络设备、应用系统、操作系统等整体环境进行安全状态监测,帮助用户快速掌握网络状况,识别网络异常、入侵,把握网络安全事件发展趋势,全方位感知网络安全态势。
系统功能包括网络安全态势感知、IT运维可视化、信息资产监测、安全决策驾驶舱以及安全数据情报分析等。
四、企业管理可视化平台
数字冰雹的商业智能可视化平台,能够结合各行各业独特的指标和 KPI 表示方式,通过数据多维度、可交互联动分析,实时解答用户问题,对政府、金融、零售、电商、环保、电信、医疗、房地产等领域进行管理决策支持。
系统将数据按主题、成体系地加以呈现,统计数据既可以加载于综合页面之上,也可单独形成专门的数据统计分析主题页面,展示数据在不同维度下呈现的数据背后的规律,帮助用户从不同角度观察、分析数据,聚焦趋势规律。
五、工业监控可视化平台
数字冰雹提供的工业监控可视化平台,可以实现与用户原有的自动控制系统相结合,通过虚拟现实和数据仪表盘等多种展现手段,为大数据时代的工业生产监控和虚拟制造应用,提供效果最优异的可视化解决方案。
系统支持将虚拟现实技术有机融入到工业监控系统,以真实厂房生产线的仿真场景为基础,对各个工段、重要设备的形态进行复原,并实时反映其运行状态。针对各种运行数据,例如设备温度、转速、电流、电压以及各种实时产能、统计汇总数据的监控,我们充分发挥数据仪表盘中各种图表的展现优势,针对不同岗位监控的需要对数据仪表进行合理分组,以实现快速状态切换,适应不同场景。
总结:数据可视化是科学、艺术和设计的结合,当枯燥隐晦的数据被数据科学家们以优雅、简明、直观的视觉方式呈现时,带给人们的不仅仅是一种全新的观察世界的方法。数字冰雹希望通过我们的努力,真正帮助客户实现“驾驭数据、洞悉价值”的目标,用好大数据,切实提升决策效率与能力。
大数据可视化的关键技术
大数据可视化的关键技术是通过一个可以与用户直接对话、帮助用户完成决策的载体工具。
一个优秀的数据可视化系统,在完美体验加高颜值的外表之下,隐藏着大数据整个产业链领域的融会贯通:从数据清理集成,到数据存储整合,再到数据分析挖掘,之后进行可视化呈现,最终完成人机交互的完美体验,整个过程缺一不可。
其中几大重要技术包括:
一、数据集成处理
原始数据来源庞杂,各式各样,可能来自传感器、业务人员操作记录、网络日志等各种不同来源;可能是结构化数据、文本数据也有可能是图像、视频等,大数据的特点决定了这些数据会存在着不一致、重复、含噪声等问题。在数据应用之前,需要通过数据清理、数据集成、数据变换、数据归约等手段对这些问题进行处理,以达到可以用于数据分析的目的。
二、数据存储管理
由于大数据具备4V的特点(即Volume、Variety、Value和Velocity,意为数据体量巨大、数据类型繁多、价值密度低和处理速度快),仅依赖传统的结构化数据库已经无法完成相应的存储、管理任务。而需要引入键值数据库、列存数据库、图存数据库、文档型数据库等非机构化数据库数据技术,同时运用分布式、云存储等技术对数据加以存储和管理,实现海量批处理和高速流处理。
面对这样复杂的数据管理机制,则需要一个统一的数据管理平台,在应用层面对数据存储资源进行统一管理控制。
三、数据分析、挖掘
1、多维联动分析
不止可视化数据,更要可视化观点。通过专业的统计数据分析系统设计方法,理清海量数据指标与维度,按主题、成体系呈现复杂数据背后的联系;将多个视图整合,展示同一数据在不同维度下呈现的数据背后的规律,帮助用户从不同角度分析数据、缩小答案的范围、展示数据的不同影响。具备显示结果的形象化和使用过程的互动性,便于用户及时捕捉其关注的数据信息。
包括:
? 多视图整合,交互联动
? 任意多维度分析
? 数据上卷下钻,多层钻取
? 多样的指标计算模型
? 可配置的Dashboard
2、算法及模型嵌入
除了内置常见的统计算法,还需要针对不同行业的业务需求,嵌入行业专用的指标分析模型、仿真模型和预测模型等业务模型,运用深度学习算法等前沿科技成果,以适应行业用户的不同业务需求。
3、数据挖掘
数据挖掘是一种高级的数据分析方法,侧重解决四类数据分析问题:分类、聚类、关联和预测,重点在寻找模式与规律。数据挖掘往往是目标不是很清楚,在实现目标的过程中采用什么方法不能确定,所以数据挖掘比数据分析难度要高很多。优异的数据可视化决策系统,应该具备优异的数据发现、相关性分析等功能支持,并且提供友好的交互方式和直观的可视化呈现表达手段。
四、数据可视化
数据可视化将各种类型的数据,通过不同的呈现方式,包括结合地理信息系统、数据统计图表、三维建模、时空态势展示等丰富的展现形式,将数据直观地呈现给用户。
一个成熟的可视化产品平台是基础技术保障,能够保证系统的交付质量与效率。比如数字冰雹的可视化产品包括了人机交互引擎、数据驱动引擎、图像渲染引擎、多维分析引擎等一系列基础产品平台;这些基础产品来自于数年技术与经验的积累,在应用当中不断完善,确保了项目高水准的实施与交付。
五、人机交互
数据最终是要和人打交道,人机交互设计是非常重要的。一个良好的数据可视化分析环境,是要从推开门那一刹那开始体验的,即人机交互包括最终的数据可视化软件系统,也包括了用于数据呈现或交互的各种显示、控制设备。一个适用的人机交互方案,要根据用户的使用情境来设计,针对形象展示厅到大型指控中心等不同环境,以及各个应用行业的各类需求,都会有不同的交互解决方案。
总结:数据可视化是科学、艺术和设计的结合,当枯燥隐晦的数据被数据科学家们以优雅、简明、直观的视觉方式呈现时,带给人们的不仅仅是一种全新的观察世界的方法。数字冰雹希望通过我们的努力,真正帮助客户实现“驾驭数据、洞悉价值”的目标,用好大数据,切实提升决策效率与能力。