分享
Scan me 分享到微信

世纪安图祝欣欣:数据时代的挑战——让数据流动起来

在6月11日举行的地图客开发者专场上,来自北京世纪安图数码科技发展有限责任公司技术经理祝欣欣为大家带来了主题为“数据时代的挑战——让数据流动起来”的精彩演讲。

  6月10日,北京国家会议中心,以“构筑地理信息新生态”为主题的2015年全球地理信息开发者大会 (WGDC2015)在此拉开帷幕。WGDC自2012年起开始举办,四年时间里,伴随着中国地理信息产业的快速发展,WGDC已经成为位置与空间领域最具影响力的技术创新盛会。

  在6月11日举行的地图客开发者专场上,北京世纪安图数码科技发展有限责任公司技术经理祝欣欣为大家带来了主题为“数据时代的挑战——让数据流动起来”的精彩演讲。

泰伯网

  以下为演讲实录(未经本人核实):

  祝欣欣:大家好!真正的数据整合是能够让你在任何时候,能够无缝的连接、提取、转换和加载任何数据。在现在的信息时代,数据是大家最关注的,不管是我们现在传统的GIS还是过去的数据,我们现在主动式的获取数据的方法,也是精度不断的提高产生了越来越多的大的数据。现在我们处在一个大数据时代,数据一方面来自于我们一个开放的数据,像高德、百度也好,我们使用数据的时候,他们也收取大量的数据,他们愿意把数据开放给大家让大家来使用。

  现在人人都是一个传感器,可能未来一个人就是作为一个芯片。我们现在人携带的手机就是传感器了,我们不自觉的消费了很多数据,产生了很多数据。在传统GIS和大数据时代的背景下,大量的数据是如何产生价值是大家所关注的。

  像现在已经有很多的团体来针对数据挖掘价值,做很多这样的实验。我们看到,通过传感器的数据来分析办公室的加班状况,用它来读取我们的城市。通过我们用这些数据的分析来做空气质量,或者是制造一些可视化,进行城市的计算,帮助城市更好可持续的发展。也有可能我们把这些数据通过可视化的方式,用地图来讲故事。

  数据价值的体现,数据从采集到应用,其实是一个很长的数据生产链,在这个过程当中,你的数据价值要体现,数据应该像一个流体一样随时变为你想要的形态。在这个生产链的过程中,我们现在比较关注数据的采集,或者我们比较关注数据可视化的应用。

  我们现在做的很多应用,我们发现大家都是有痛点的。从拿到原始数据,到应用到你的系统里面,或者其他的应用里面,数据加工的周期非常长。在这个过程中你会面临很多的问题,比如格式的不兼容,或者数据的来源不一致等等问题。

  在这个过程当中我们如何解决这些问题,首先就是多重工具的叠加使用,把这个周期加长了。另外,我们在这个领域里大家都定位了两类数据处理人员,一类是数据生产人员,另一种是我的开发人员,当我面临数据的各种格式问题,或者是结构问题,大家想到我用大脑来解决。其实专业的事情应该交给专业的人来做,其实我们缺乏的是专业的空间数据分析人员。对于空间数据分析师的职责,就是能够完成数据的连接、变换和自动化,让你随时随地使用数据。

  对于空间数据分析师来说,就像开发人员需要有开发的语言,或者是工具也好,空间数据分析师也需要专业的软件来辅助完成这样的事情。FME就是基于这个概念提出的,它的设计理念就是从三个方面来体现的:连接、变换和自动化。FME这个技术包含了三个产品体系,有桌面端的完成数据加工的操作。FME Server,就是把你的处理能力放在服务器上供你调用。现在大家都在说云的概念,很多企业都会搭建自己的云,FME也具有云服务能力,我们可以把它架在云环境下来提供云服务能力。

  FME为什么能够辅助空间数据分析师来完成这些操作,它的几个特点:首先是它对多种格式的支持。FME从最开始的版本一直到现在2015年,一共是三版20多种数据格式,以及数据服务和协议的连接。传统的GIS到CA的数据格式,包括数据库,以及现在的三维,或者各种协议,还有云和大数据。FME具有连接自动化的能力,我的连接能力在于能够让用户无缝的从A到B进行一个数据连接,让用户的数据能够跨越各种格式。

  FME通过一个转化器的概念,能够让用户的数据进行结构和内容的变换,放到用户所需要的地方去。我们通过任务定制或者事件触发的形式,让用户的数据处理任务能够自动化的完成。

  在这个里面我们所有的操作都是可视化的操作界面,帮助大家完成空间数据处理建模的流程,整个过程是零编码的。

  我们为什么使用FME?我举一个简单的例子,这个例子是FME粉丝在他的工作当中使用到并反馈给我的。当时他的客户要把他的数据导到数据库里面去。我们先把原始数据找到。在这个过程当中还加入了大量的开发,当时他们自己做的时候周期是两个月。他很高兴跟我说我用FME解决这个问题,只花了两天时间。在现在这个时代,时间是最宝贵的。如果我们能换一种更快的解决问题的方式,就能够带来大量效益。

  不管是从传统的GIS行业做数据处理,像这个是在农村土地确权里面我们做数据的生成,或者做三维的建模,或者我们做一些表格生成,这是外部环节,我们从百度和高德上抓取它的数据,以及我们用FME生成室内导航的三维数据,甚至你有一些天马行空的创意,今年4月份,我们用FME来做的抽奖模板。像这个是用FME生成的日晷,就是古代通过太阳阴影来计算时间的一个设备。你可能通过FME实现很多的创意。

  我们想通过这样一个简单的介绍告诉大家,其实每一个人都可以成为空间数据分析师,我们可以用它帮助我们解决工作当中遇到的各种数据的问题,也可以用它来帮助我们实现很多自己的想法。关于更多的案例下面有请我的同事周跃给大家做更详细的介绍。谢谢大家!

参与评论

【登录后才能评论哦!点击

  • {{item.username}}

    {{item.content}}

    {{item.created_at}}
    {{item.support}}
    回复{{item.replynum}}
    {{child.username}} 回复 {{child.to_username}}:{{child.content}}

更多精选文章推荐

泰伯APP
感受不一样的阅读体验
立即打开