新闻资讯

大数据工程技术人员: 让数据发挥最大价值
2019-06-24 17:27:40来源:100唯尔

大数据来了,are you ready?

  在大数据时代的今天,为打通金融服务实体经济的“最后一公里”,基于大数据技术的研究。智慧医疗、智慧城市、精准扶贫以及其他相关高新技术产业都离不开大数据的支撑,因此,大数据工程人员也起着举足轻重的作用。今年4月,大数据工程人员被人社部等三部门列为13个新职业之一。想知道这个重要职业究竟做些什么吗?同中国网信网一起来看看吧!

  用政府数据跑路代替企业跑腿,不仅实现了小微企业融资合理配置,还帮助银行为小微企业提供无抵押、纯信用、在线办理、快速审批的放贷服务。郭宏毅及其团队设计的“一贷通”金融服务平台实现了企业(个人)融资合理配置,帮助金融机构为企业(个人)提供一站式金融服务。

  数据是一种价值巨大的新资源,已成为政府和企业机构等新的核心竞争力。大数据工程技术人员在面对海量的数据时,“首先是将政府平台中关于企业的数据、企业自身经营数据、互联网数据等各类数据进行梳理,统一起来,再导入数据仓库中分类存储,然后根据业务目标进行建模。而建模是最核心的部分,模型就像婴儿一样,要不断用数据来训练它。” 回想设计“一贷通”服务平台的过程时,郭宏毅说道。

  海量的数据带来商业、科技价值的同时也存在隐患,为维护和保障大数据系统稳定运行,“这就需要我们的大数据工程技术人员对多源、多类型数据进行深度挖掘。”郭宏毅说,“以反欺诈模型为例,随着欺诈行为的变化,我们不断地进行数据挖掘,‘告诉’模型哪种是欺诈行为,让它学会自己识别出来。并对模型进行不断地调试,保证预测结果精准可靠。” 魔高一尺道高一丈,提到信贷欺诈的潜在危机,郭宏毅胸有成竹地说。

  大数据时代,庞大的数据资源使得各个领域开始了量化进程,决策将日益基于数据和分析而做出,而并非基于经验和直觉。郭宏毅说:“以前为了审核信贷进件,要人工从网上搜集海量的数据,现在一个大数据工程技术人员可以替代50个信贷员的工作,节省了人力、物力、财力。并且,大数据得出的结果更具有客观性,不仅提升了效率,还促进了公平公正。”在今天高速运转的信息化社会中,大数据已然成了风向标,大数据技术也在推动着社会的发展。

面对海量的数据,大数据工程技术人员需要进行采集、清洗、分析、治理、挖掘等技术研究

  在2018年政府工作报告中,大数据第五次被写入政府工作报告,首次明确大数据上升为国家层面。据国家发改委等权威机构预测,到2020年,我国的数据总量将会超过8000亿PB,占全球数据总量的比例达到20%,我国大数据市场规模将超过8000亿元。数据正在迅速膨胀并变大,大数据工程技术人员需求庞大。通过海量数据的交换、整合和分析创造着新的价值,大数据工程人员是这新一波生产力增长的生力军。