时间:2017-07-26 13:22:32 次数:2824
火热七月,威廉希尔中文网站技术委员会为促进跨部门及内外部的技术交流,隆重推出“williamhill英国威廉希尔官网大咖说”!2017年 7月21日,来自数据事业部的技术大咖们,齐聚一堂为大家献上了一场别开生面的技术盛宴。
主题讨论
本期williamhill英国威廉希尔官网大咖说的分享内容为——《公开?那就公开了吧!williamhill英国威廉希尔官网龙腾大数据体系产品架构解密》,数据事业部的技术大咖们对公司的大数据管家、ETL、服务总线、数据魔方等产品进行了详细的介绍与和解读。出乎我们预料的是,炎热的夏天并没能阻止小伙伴们热爱学习交流的心, 此次分享现场座无虚席。
技术委员会会长何总分享了他对“大咖说”技术分享的的一些看法和见解。他指出,技术委员会开设的技术分享,旨在让大家进一步提升了自身业务水平,加深对公司产品的认知,为技术人员日后开展工作奠定基础,力争为客户提供更加完美的服务。
下面,就由小编带你领略一下数据事业部技术大咖们的风采吧!
听大咖说了啥
williamhill英国威廉希尔官网数据事业部的优秀技术人员,结合自己的实际工作经验,慷慨分享了产品开发设计、挑战与弯路、团队建设等实在、接地气的干货。引导大家思考如何做好产品。
探秘一:ETL
—— ETL产品那么多, 做它干嘛?
在公安信息化的建设过程中,除了要求业务数据快速准确进仓之外,还要能够支持各种清洗,校验,数据流转复杂业务,并保证数据整合,项目的快速响应。这对ETL产品的性能提出了新的要求。
williamhill英国威廉希尔官网ETL产品为公安海量数据历提供集数据转换、库抽取、库加载、文件处理、预评估等服务,不仅解决了海量异构数据的抽取和管理难题,还可为未来进一步的数据挖掘打造基础数据平台。同时构建于普通PC Server之上的Hadoop平台具有硬件廉价,系统高容错、水平灵活扩展、运行高效等特点。
探秘二:服务总线
—— 为什么需要总线?
我们知道,通过数据治理形成优良的数据资产之后,下一步的工作就是数据共享和服务了。以往数据共享存在安全漏洞,有一定风险。资源服务总线是本地建设的信息共享传输通道,现在通过总线,可监管请求方访问情况,有授权才可访问,这也大大提高了数据共享的安全系数。
此外,总线还能能产生更多的价值
williamhill英国威廉希尔官网资源服务总线通过集合本地资源,以请求、服务的形式帮助本地实现跨应用、跨警种、跨区域的信息共享 。第三方应用通过请求总线的服务获得数据,而不直接访问底层数据库。
至2017年中旬,williamhill英国威廉希尔官网总线已运用在公安科信、情报、网安以及海关等部门;williamhill英国威廉希尔官网总线已部署了20多个省厅,40多个地市,并且为公安部科信的全网分布式应用提供了很好的运行支撑;在网安,已有150多个地市部署了总线,并且这些数字在逐渐增长中。
探秘三:数据魔方
——阿里已经有类似的产品,做它干嘛
大数据的魅力不在于掌握庞大的信息资源,而在于科学地让这些信息透析事物本质反映发展趋势。如果把大数据比作一种产业,那么这种产品实现盈利的关键,在于提高对数据的“加工能力”,实现数据的“增值”。换言之,“大数据”需要更新的“处理载体”由此迸发其真正的价值魅力。而数据挖掘与分析正是“载体”的关键。
龙腾数据魔方采用大数据云计算为支撑架构,辅以建模可视化/数据可视化/智慧引擎/大数据计算框架/轻应用框架/快速开发框架等能力创新打造,其核心价值具体在:
参会人员全神贯注、侧耳倾听,并在互动环节与讲师进行积极的交流与探讨,使原本停留在文字上的理论更加清晰明了,令大家受益匪浅。
通过此次培训和经验分享,加强了技术人员间的交流联系,提升了大家对龙腾大数据体系产品的认知程度,为以后更加持续高效地工作打好了基础。相信下次的williamhill英国威廉希尔官网大咖说主题研讨必定会持续带给大家更多的惊喜,让我们共同期待吧!