博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
当一个大数据团队加入存储公司之后会发生什么?
阅读量:5891 次
发布时间:2019-06-19

本文共 2142 字,大约阅读时间需要 7 分钟。

  
近几年来,大数据技术在中国得到了很快的发展,并逐渐在各大企业落地。大数据解决方案的根基是大数据量,如何将这些数据有效地利用起来成为用户和厂商急需解决的一大课题。

罗忠富—现任柏科数据技术(深圳)股份有限公司大数据事业部首席架构师。曾任职于Teradata、当当网、Oracle、联通研究院,参与或主导过中国网通决策分析系统、中国移动集团经营分析系统、当当网数据仓库、宏源证券大数据平台、新华社大数据平台等多项重大项目。而其所在团队,也已经有将近十年BI、数据挖掘、大数据分析的经验与积累,拥有基于内存计算的高性能核心挖掘算法以及海量实时数据处理的行业客户分析模型。经手项目从联通的固移融合经营分析,到增值业务、导航业务、垃圾短信业务的专项业务分析挖掘;从运营商大数据平台的搭建,到深入运营商在校园市场的大数据分析等等。

对于一个拥有多名专家级人才的大数据团队,他们对国内的大数据行业有何看法?又是出于何种原因加入了柏科数据?

故事一定是有的,下面我们来一一展开吧。

缘起大数据

罗忠富所在的大数据团队,在运营商行业有七八年的大数据解决方案部署经验,除了运营商以外,还在政府,医疗,教育等行业有积累,在加入柏科数据之前,罗忠富的团队服务了十几个客户,其中北京联通,上海电信,山东移动就是典型案例,这些客户中每一个客户都是长期在做,一做就是好几年的,处理超过百PB的数据量。

2016年5月,罗忠富与其团队的近三十人加入做存储的柏科数据公司,一个大数据的团队为什么要加入做数据存储基础设施的柏科数据呢?

罗忠富表示,他的大数据团队原先在运营商行业积累较为深厚,加入柏科数据后,鉴于柏科数据在行业客户方面拓展的优势,罗忠富的大数据团队从原本相对单一的应用行业拓展到柏科数据其他具有大数据挖掘需求的行业客户中。行业涉及政府,教育,军工,医疗,对客户的总量也有很大扩展,尤其是发现了政府和教育这两个热衷于做大数据解决方案的行业。

“软”“硬“兼施 超融合实现优势互补

2016年,是柏科数据的转型之年。但柏科十年以来却没有改变过自己的既定路线,以用户数据生命周期作为核心,公司在数据存储、灾备等领域的大方向不变 。一直秉承着“bring life to data”的信念,柏科数据为客户提供政府、广电、科研、金融、制造、医疗、教育、物流、电信、运营商、互联网、媒体等行业数据生命周期完整解决方案。结合大数据团队后,进一步完善了其数据解决方案,即存储+容灾+数据挖掘,为客户带来了更多价值。今天提到的大数据解决方案正是新拓展的领域。

近年来,存储行业发生了许多变化,软件定义存储的兴起带动了超融合这一类新的产品形态,这为打造大数据解决方案提供了便利。据了解,大数据一体化解决方案智搜客正是超融合一体机产品和大数据解决方案的结合体,将大数据挖掘解决方案的“软”与柏科数据存储、容灾这些基础架构的“硬”相结合。这一结合对柏科数据的意义在于数据存储之外增加额外的价值,提升用户的大数据变现能力。

智搜客在运营商领域得以应用,运营商的数据量非常大。“智搜客可以完美整合客户原有Hadoop等大数据平台,将原本一周的建模时间降低到30分钟以内,并且实时对客户进行标签管理与更新,保证数据挖掘的时效性与精准性。同时,不同于原本必须由专业技术人员的建模与输出,智搜客可以由营销人员直接操作,快速实施针对性的营销活动,进一步减少了企业内部沟通确认时间,真正实现大数据营销的实时化与高速化。”罗忠富介绍说。

如今作为柏科数据的一部分,罗忠富的大数据团队有了多个通用化的解决方案,智搜客是一个通用型产品,因为集成到了超融合的解决方案中,从而帮助用户省去了安装部署的过程,大大缩短了部署周期,此外在交通大数据方案,监测伪基站的一体机平台也都是主要产品。

数据创造价值

在交通大数据解决方案中,根据用户的位置信息,上下班走的路径,帮助人们规划,通过告警信息,来防止人流堆积,环节线路拥挤程度。在政府行业,政府希望打通各部门数据,希望帮助企业和个人,建立信用信息,把各个部门的数据,包括各种信息综合起来,进行信用评估,服务于智慧城市,响应国家信用中国战略。

柏科数据的基础大数据平台可针对不同的用户类型采取灵活的部署策略,针对纯粹的企业级用户可以部署基于cloudera、华为等平台的成熟解决方案,针对中小企业的话可以选择开源平台,为用户节省成本。在大数据平台基础上通过大数据应用,复制在运营商行业数据挖掘、数据分析的成功经验。

罗忠富表示,未来还将立足于在大数据应用方面,继续努力做好产品,用大数据应用做深一两个行业,推出自己的行业性产品。

从柏科数据的角度来看,公司也会进一步完善产品功能和性能,包括超融合灾备方案、大数据整合方案等。帮助客户充分利用原有的数据资源,让灾备中心同时转变为数据挖掘中心。目前,柏科数据的容灾网关已经可以在不影响主存储的情况下将其容灾数据进行数据挖掘分析。

综上,存储基础设施做的是先把数据存起来,然后再管起来,如果还能帮用户用起来的话就相当于利用大数据技术完成了增值。然而大数据是个又新又专的领域,存储公司通过直接并入大数据团队不失为一个互惠双赢的发展方向。

  
  
作者:zl
 
来源:51CTO

转载地址:http://npbsx.baihongyu.com/

你可能感兴趣的文章
博客园博客自动生成三级目录(generate three levels content using JS in cnblogs)
查看>>
联通高管频频出走:通信业已成鸡肋?
查看>>
关于多线程的那些事
查看>>
js 将json字符串转换为json对象的方法解析
查看>>
1. Two Sum
查看>>
让浏览器不再显示 https 页面中的 http 请求警报
查看>>
hdu4893Wow! Such Sequence! (线段树)
查看>>
Android 最简单的SD卡文件遍历程序
查看>>
JavaScript获取DOM元素位置和尺寸大小
查看>>
1065: 贝贝的加密工作
查看>>
lintcode 单词接龙II
查看>>
Material Design学习之 ProgreesBar
查看>>
WEB版一次选择多个文件进行批量上传(WebUploader)的解决方案
查看>>
Redis之 命令行 操作
查看>>
Jvm(46),指令集----对象创建与访问指令
查看>>
EL 表达式小结
查看>>
内部排序
查看>>
jQuery EasyUI API 中文文档 - 组合(Combo)
查看>>
10个关于 Dropbox 的另类功用(知乎问答精编)[还是转来了]
查看>>
Oracle体系结构
查看>>