首页 > 科技 > 问答 > 科技知识 > 大数据现在涉及哪些领域,哪些 领域有大数据

大数据现在涉及哪些领域,哪些 领域有大数据

来源:整理 时间:2022-04-24 17:13:47 编辑:科技知识 手机版

不过,有些旧有模式,比如即席查询在中国视角下会一直存在,因为很难从别的应用场景完全替代它。数据分析平台体系建设中原银行目前规划了一套数据平台体系,但目前这个体系还在演进。在过去几年,中原银行大概做了将近 1000 张报表、20 多个主题的自助分析以及数据实验室的平台。这些平台面向的人员有所不同,报表主要面向数据使用人员;自助分析主要面向条线,比如给领导编制报表和往下发布数据的人;数据实验室主要面向一些有科技背景的人员,比如建模师。

除了上述三大平台,中原银行还建立了一个社区平台,我们把这些统称为一站式分析平台。数据驱动创新社区的建立是为了引领行业数据驱动的发展,目前,科技部正在主导这个社区的建设。我们会在该社区大量地发布一些数据驱动的内容,比如,数据分析报告,文章等。个人认为,像数据驱动这种工作的推动,将来一定是业务牵头的,因为即使技术人员有思路也很难达到盈利,所以需要站到业务角度上去实践,现在,我们会把自己的技术人派遣到业务部门,学习在业务场景下进行分析。

前面提到的这几种数据分析平台还是比较偏技术方向,不过我始终认为,未来一定是场景化的方向才有发展。因为场景化的成本更低,比如,更低的使用成本,场景化让业务人员使用更方便;更低的人才成本,场景化的应用不需要招很多技术人员。面向大数据的综合分析平台架构这是中原银行目前面向大数据的综合分析平台架构,在这方面各行差异不大。

不过,中原银行集市做的很薄,只有一个贴源的 ODS,以及 4-5 块集市,比如管会、内部运营、营销等,与其他银行相比,中原银行是一个非常轻的架构,从贴源可以直接到集市,有的集市甚至没有指标加工,就直接整合明细,再到自助分析、报表,有的也往实验室里面供。个人认为,像自助分析和场景化分析、数据湖这样的思路早晚会替代我们之前做的大量报表,T 0 会替代 T 1,这只是时间问题,所以,我们整个架构现在也在往这边迁移。

分析平台建设实践—性能优化在前几年中原银行对分析平台做了一些性能调优。一般刚开始从报表转到 BI,肯定会面临性能问题,因为 BI 本身是一种以空间换取灵活性的方式。我们采用大数据技术支撑计算,用了 30 个物理计算节点,大概有二三十个面向大数据反范式设计的主题模型,也就是宽表模型,因为宽表模型牺牲了很多空间的代价,在这个大数据的平台上一般会跑得比较顺,冗余度高一点,性能会提高。

不过,大数据平台的一个主要特点是成本较低,扩容方面也可以接受,所以我们现在更多选用这种方式。分析平台建设实践—质量提升数据质量提升,是中原银行今年的重点,我们准备启动一个新的数据治理项目。下面简单介绍下:我们建设了一个在线口径管理的渠道。举个例子,现在业务在看报表发现数据问题的时候,会有一个线上的渠道直接在上面反馈问题,之后会有专门的技术人员跟进,除此之外,我们还有一个类似知识库的渠道,该渠道有利于口径的沉淀,但是,对数据的治理,比如主数据、标准管理,我们还需要进一步完善。

分析平台建设实践-灵活性提升这个是中原银行的 BI 平台,总体来说使用还不错。我认为银行到一个阶段必须做 BI,如果没有 BI 很难把数据驱动的思路真正地让业务落地,因为业务人员无法直接接触数据,很难了解数据在未来的作用。只有他们把 BI 用熟了之后,你才能告诉他以后可以做场景化分析和预测类分析,现在中原银行就是沿着这样的轨迹发展。

分析平台建设实践—数据安全管控金融业会涉及很多敏感数据,特别要注意数据安全问题,为了保证数据安全,我们做了一些技术上的加工,比如:下载管理,我们建立了完善的数据使用审核流程和设定了数据最小访问授权,按需分配报表访问权限;实时脱敏,Smartbi 支持不同形式的数据脱敏展现,可以实现前台敏感信息的脱敏展示,对像身份证号这样的敏感数据在实时展现时会隐去;使用痕迹的管理,我们会统计发布报表访问数据,促进报表使用过程中的自我监督和相互监督,便于及时发现因岗位调整,多余授权带来的数据泄漏风险;行为监控,我们利用大数据与机器学习技术,建设数据安全智能分析预警平台,对数据操作行为进行智能化监控,防范内部数据安全事件。

文章TAG:有大领域数据涉及

最近更新

  • 手机里的图片都在哪里?,你们手机里的照片都存在哪里

    手机空间释放后,上传到腾讯相册不显示占用空间,手机操作过程中也不会出现卡顿现象。清理手机垃圾时,腾讯相册不会有垃圾,所以整体上没有发现内存占用现象。我给大家分享一个储存照片的好方法 ......

    科技知识 日期:2022-07-20

  • 人为什么要有价值观,一个人存在的价值是什么

    树立正确的人生观和积极的价值观,首先要树立正确的是非观。决定一个人价值观的标准不一样。根本区别在于各自的创造力、精力,差异化的社会分工,利益分配平衡中相对统一的需求。一个人的认识和 ......

    科技知识 日期:2022-07-19

  • 为什么黄牛抢票用什么软件,为什么还会有黄牛抢票

    黄牛使用的抢票软件是独立软件。最后黄牛用的抢票软件和我们的差别很大。我们平时用的软件都是市面上常用的。这些抢票软件都是很多人用的,服务器平均分配后自然减少了我们每个人的份额,这也是 ......

    科技知识 日期:2022-07-18

  • 为什么苹果亮银贵,为什么苹果的数据线这么贵

    你知道为什么苹果的数据线贵但是容易断吗?苹果手机最大的优势就是iOS系统和苹果的A系列处理器。关键是最便宜的苹果数据线官方售价149元。按照大部分苹果数据线不到一年的使用寿命,光是 ......

    科技知识 日期:2022-07-18

  • 谷歌眼镜显示屏在哪里,哪些VR眼镜值得买

    VR眼镜的分类目前VR眼镜主要分为VR盒子VR一体机和PCVR。去的太早了,先发明骑行用的智能眼镜还好,但还没消失。第二代企业版谷歌眼镜高通SnapdraonXR1平台运行,不出售 ......

    科技知识 日期:2022-07-18

  • 上海哪里体验一加手机,一加手机真的快不行了吗

    说到一加,总会有一大批人说一加手机只活在互联网上。比如现实中没有一加手机的踪迹。一加定位,首先你必须是网络爱好者,否则一般没机会看到。其次,一加一直以来都是精品旗舰策略,每一次新机 ......

    科技知识 日期:2022-07-17

  • 为什么冬季雾霾最严重怎么办,夏天难道就没有雾霾吗

    为什么冬天有雾霾,夏天没有?看来雾霾的主要原因还是气象条件。其实冬天的雾霾已经比以前轻很多了。所以直到现在,冬天还是有雾霾。个人认为和农民烧麦秸没关系。入秋以来,随着来自中国的西北 ......

    科技知识 日期:2022-07-17

  • 苹果为什么好用,苹果的系统那么难用

    我用的是苹果安卓,我觉得苹果不好用。我承认苹果系统很流畅,但是旗舰安卓机型还可以,更重要的是也很耐用。苹果系统真的没有安卓系统自由。换了苹果第二天就开始想念安卓了,应用很忙。微信视 ......

    科技知识 日期:2022-07-17