下载安卓APP箭头
箭头给我发消息

客服QQ:3315713922

大数据共享原则

作者:Aman Chitkara;李思楚     来源: 可持续发展经济导刊点击数:2879发布时间: 2020-09-08 09:23:40

标签: 大数据数据库虚拟化

城市交通大数据共享原则。随着云时代的来临,大数据(Big data)也吸引了越来越多的关注。分析师团队认为,大数据(Big data)通常用来形容一个公司创造的大量非结构化数据和半结构化数据,这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起,因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。

 城市交通

随着信息技术的飞速发展,城市交通逐渐将“人-车-路-管”多方面结合,开发智能交互系统来解决交通问题正在实现中。交通信息平台的建设,其核心任务是实现交通数据的采集与统计、通信传输、分析与挖掘、交换与共享、实时发布等服务。

大数据共享原则_大数据_数据库_虚拟化_课课家

然而,数据共享涉及的公平性、安全性、隐私性、包容性等问题同样不容忽视。本文将尝试围绕未来交通数据共享的价值、挑战以及原则等问题进行解读。

数据共享的价值与挑战

城市交通正在经历一场巨大的变革,交通利益相关方正在对新技术、新商业模式,以及社会和客户的新需求做出反应。未来,我们很可能会看到共享交通的增长,电力和替代动力系统技术的不断提高,新型轻质材料的兴起和普及,以及自动驾驶或者CASE技术(互联、自动驾驶、汽车共享、电动汽车)的实现与增长。当前,我们面临的任务就是要设计一个动态的、反应灵敏的城市交通系统,通过保障安全、公平、可持续性和可达性来应对新的社会和环境挑战。

共享数据正是实现和管理这样一个系统的关键,它通过聚合来自智能手机、车辆和基础设施的数据,创建了一个复杂、灵活和互联的交通系统;并通过访问不同来源的数据,生成城市及其交通的实时图像。整合的数据可以帮助交通警察对紧急情况做出更快的反应,同时疏散事故发生地交通;此外,数据还可以为旅客提供高效和便捷的多模式线路,减少停留时间,改善拥堵。总之,交通数据的真正力量还有待发掘,而且随着数据和研究的积累,很可能还会出现更多新的机遇。

然而,目前数据共享也面临着挑战。出于隐私、道德、网络安全、问责、互操性和竞争等方面的原因,持有数据的实体可能“不愿”共享所掌握的数据。例如,公共交通运营商和私营企业将客户数据视为创造价值的源泉,由于担心会分流乘客或降低票价,通常不愿意提供全面的访问权限。

此外,数据的发起者——通常是个人,和数据的持有者对谁控制和拥有哪有数据也有不同的理解,因此,谁有收集、分析或共享数据的权利也存在很大争议。克服这些困难可以为所有利益相关方带来价值,但是也需要包括公民、政府、企业和社会在内的多方合作。

世界可持续发展工商理事会(WBCSD)正在通过城市交通转型项目(TransformingUrbanMobilityproject)中的数据共享原则工作流程(data-sharingprinciplesworkstream)解决这个问题。我们的目标就是在利益相关方之间建立起对问题的共同理解,并定义一组原则,帮助形成数据共享的模型和标准。数据共享是加速向可持续城市交通过渡的一个关键行动领域,也是实现联合国可持续发展目标(SDGs)和《巴黎协定》的关键推动力。

数据共享的原则和标准

现在,交通领域的数据共享已经开始形成,尽管在一些区域的应用范围还比较有限。因此,目前的状态可以概括为“过渡时期”。对于许多地区的交通利益相关方来说,第一步仍然是在保证安全和隐私的基础上能够持续地收集数据。

同时,一些地区的试点和项目也开始进行,包括公开数据倡议、政府强制的数据公开,以及一对一的数据交换等,这些通常都是商业性质的。伦敦交通局(TfL)从伦敦交通网络开放匿名数据就是一个例子,这些数据的共享使一些新的业务和应用得以出现。

此外,一些数据合作伙伴关系也在形成中,例如学术机构作为可信的第三方对数据进行管理。在未来,随着更多成功的多方合作、多方向数据共享试点的建设,数据共享也将在更多实践中被应用和拓展。

为了推动和支持交通大数据资源共享,WBCSD提出了五项数据共享原则:

首先,数据共享应该使所有利益相关方创造和获取价值。让所有相关方获益是数据共享面临的挑战之一。所以,应该探索许多方法来确保各方实现价值。例如,订阅和服务费用可以帮助回收收集和处理数据的成本,其他非财政措施,如数据的交换或跨实体共享用于数据收集、分析、处理、存储和管理的人才资源,也可以考虑。

第二,数据共享必须是道德的、包容的和公正的。首先,数据共享的手段、目的应该与政府、公民和企业的发展保持一致。此外,还应建立透明和可核查的程序,以解决有关偏见、歧视、操纵和数据的再利用等问题。在这方面,独立、公正的第三方数据审核机制或创建数据信任可以提供帮助。

第三,数据共享应该在设计上考虑隐私。人们有理由担心,将敏感的个人信息传播给那些未经授权的组织机构,不仅损害用户的隐私权,还会增加因数据泄露或处理不当而引发的风险。所以,要建立隐私规范框架,以确保在利益相关方之间建立信任。此外,数据收集的范围和目的应该被明确界定,可以通过公开透明的机制,特别是数据共享模型来实现。

第四,数据共享应该从设计上包含网络安全。将网络安全控制作为数据生命周期的一部分,采用一种集成的、安全的设计方法,是确保系统和设备能够得到保护的关键。制定一个定义明确的、符合城市发展的、能够应对交通系统在融合性和互联性方面挑战的网络安全战略也是至关重要的。

第五,数据共享应该适应迭代更新。数据共享框架还应响应并适应来自试点和实施过程中提供的新数据,建立健全反馈机制,便于监管机构进行监测,并相应地调整数据共享框架。

以上五条数据共享原则有助于为实现交通的未来建立一个普适的框架。我们认为,这些原则可以直接应用于测试和开发未来的数据共享模型、框架和协议。当然,还有其他有关数据共享的多种标准,比如通用传输馈送规范(GeneralTransitFeedSpecification,GTFS)及其扩展规范(extensionGTFS-realtime)允许交通运输机构公布其数据,第三方开发人员可以以互相操作的方式使用这些数据。类似地,通用共享单车数据流规范(GeneralBikeshareFeedSpecification,GBFS)是共享单车领域的数据使用标准,提供实时信息并方便终端用户获取车辆信息。

另一方面,移动数据规范(MobilityDataSpecification,MDS)是一种更全面的数据交换标准。它提供历史和实时信息,可用于例如执法、运营服务、交通和基础设施规划和安全管理等场景。在交通领域还存在其他几个标准,数据开放共享标准被认为是交通生态系统繁荣和创新的关键。

数据共享的商业机遇

目前,来自手机、联网车辆、智能基础设施的数字信息已经被大量实体收集和存储,这些数据的创新应用创造了例如,网约车、微交通和智能交通系统等创新商业模式。通过整合乘客提供的行程信息、快递公司最后一公里的运输数据和交通流量信息,私营部门可以与政府合作,动态管理和规范道路使用,以增加交通流量、减少停留时间、改善拥堵。

这些应用程序依赖于多个实体之间的数据共享,包括公共交通运营商;优步、Lyft、滴滴出行等网约车平台;数字支付供应商;卫生服务提供者;政府部门;物流公司;基建公司;票务供应商和终端用户。

交通中的数据共享可以使大大小小的企业参与其中并扮演不同的角色,形成一个充满活力的生态系统。从数据生成、清理、聚合、存储、分析,创造价值的新机会不断出现。新的业务和政策需求,以及交通领域的技术解决方案,将继续为企业创造越来越多的可能性。例如,交通领域的一些组织扮演着数据独立持有者的角色,在合规范畴内授权可信的实体共享数据。

同样,中小企业也收集和处理数据,提供给监管机构和决策者进行监测和管理,并增加公共交通能力。其他一些实践中,中小企业通过众包和聚合多个来源的数据,提醒世界各城市的行人注意不安全的高危地区,并在必要时将他们与当地执法机构联系起来。所有这些例子都指向了数据在公共和私人领域的创新用途。

然而,创建这个生态系统的关键是需要在城市和企业之间实现丰富的数据共享,以及一个积极主动的监管和政策环境,以激发所有利益相关方之间的信任,从而为所有人创造价值,并体现出一个城市交通系统的集体愿景。

最后,我们想强调,政策制定者在促进城市交通数据共享方面不可低估的作用。决策者正越来越多地理解和运用数据的力量来解决城市交通遇到的可访问性、安全性、效率和排放等问题。虽然新技术可以有效地解决这些问题,但其暴露的隐私、安全和竞争方面的挑战,需要政策和监管来平衡这些风险和数据共享的价值,同时创造一个良性竞争的生态系统。

WBCSD正在开展一项新举措,旨在为政策制定和监管行动提供必要的信息,帮助释放数据的真正价值。我们打算在关键地区进行有针对性的测试和试点,并在现有数据共享计划的基础上确定这些政策建议。该项目将围绕数据共享的能力建设、治理结构、激励措施等方面,制定关键建议和最佳实践。

从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

赞(12)
踩(0)
分享到:
华为认证网络工程师 HCIE直播课视频教程