收藏本站 劰载中...网站公告 | 吾爱海洋论坛交流QQ群:835383472

解决“数据孤岛” | 区块链技术在跨部门海洋数据共享中的应用 - 海洋科研数据共享

[复制链接]
, {0 J' |* n1 d5 T, y

. H- v% k, L6 u1 w! F1 M) ?; Z6 E# N- J/ q

各种海洋活动的顺利开展,离不开海洋信息的支撑保障,而海洋事业的迅速发展,使得海洋数据规模越来越庞大,将各行业获取的各种类型的海洋数据关联衔接与有机融合,能够实现海洋安全、海洋开发及海洋生态等方面的协同发展与相互支撑,形成“三位一体”的海洋发展格局。

7 |! s' d$ O8 d1 d5 X9 u0 o# |% j# T t! K8 L: l) ^1 U

然而,传统的中心化数据共享模式在安全方面存在诸多隐患。王毅等提出了利用区块链技术解决该问题的基本思路,并以支援船观测数据共享为应用背景,设计了区块链跨部门海洋数据共享平台架构与数据共享平台模型,构建基于超级账本(hyperledger)联盟链技术的海洋数据共享平台实现方式和平台运行流程。

) ?! _3 Z( J# K4 H; }

2013年,习近平总书记提出“海洋强国”战略,推动了更加丰富、更加频繁的海上活动。海洋数据共享服务是实现这一目标的重要手段之一。

% p" c, b2 b& | J8 k) O ! Y) z( J. ]6 L" {

针对中心化数据共享模式在安全方面的隐患,区块链技术为问题的解决提供了新的解决途径。

& F' E z) K. D* B

研究现状

! F2 h7 ^* R- A! ^

“数据孤岛”现象

0 r7 q7 c5 |" w' C+ ^

每个部门的数据存储、数据定义等数据属性与行为局限在部门内部,部门之间无法安全地数据共享。由于数据之间无法建立联系,遏制了综合信息的挖掘利用,“数据孤岛”已逐步成为制约海洋信息化发展的瓶颈

( v" W ~* r# V. H4 y( \

“数据开放”所带来的风险

% }8 p( R+ C9 N, f( v7 L

解决跨部门数据共享问题的最直接方法是采用数据开放策略,但有一系列风险。

; H/ k# d+ j; q

安全风险。数据直接开放后,关联分析来自不同数据集的海量数据后可能会得到更为深层次的信息,由此可能会给涉密海洋部门带来威胁;当前中国海洋信息化建设过程中的某些基础设施严重依赖进口,电子信息设备可能存在能窃取数据的“后门”。

) G. t& Q/ E: Z

社会风险。数据开放共享给了更多组织机构获取数据的机会。而获取数据的过程是不平等的,是产生潜在风险的重要因素。

4 W( n5 h' I( r6 I& N. P+ J

经济风险。目前海洋数据开放很难直接产生经济收入,从而对开展海洋信息共享工作的单位带来一定的经济风险。

4 t* r1 `. b9 j6 }1 m

“数据孤岛”形成的原因

8 @* ~ d) L! O* h

“数据孤岛”现象主要由3个原因引起。

& ^" G3 N! {" b9 b% \

第一,海洋数据分散在不同的部门,每个部门有着独立的数据格式、数据使用方式和数据保存方案

! i. U6 c) e' q6 o8 M0 a0 C$ c

第二,负责海洋数据的信息技术部门,无法及时满足所有业务部门的实际需求,倒逼业务部门独立开发信息系统、进行独立的数据存储。

' G- D) y; O" x) T! y

第三,不同涉海部门之间缺少统一的信息化建设标准

/ q/ `9 B. U' ]' W

“数据孤岛”问题解决思路

5 b) ?- j/ a* L! T# E+ Z6 f+ j

区块链本质上是一种去中心化的新型分布式数据库

, K5 C' i" c0 x: d" U4 y6 i

区块链首次从技术上解决了基于信任的中心化模型带来的安全问题,保障了链上价值的转移,确保了多方数据的一致性

! l1 r' W% J7 x# b% [, |: s8 S1 h

区块链依靠其天然优势(去中心化、公开透明等)实现了低成本价值交换,是构建价值互联网的基石。

( R7 |% o5 g; |% q2 R$ ~$ E- z

基于区块链天然特性而构造的价值网络,可以更好地保障海洋数据跨部门使用过程中所有者的权益,防止数据被篡改和违规拷贝,同时降低第三方造成的数据交易成本。

' O. h. _4 k! A# H* M' O/ \5 m

数据共享平台的不同形式

8 O4 D0 Y/ ?1 ~' |5 b, g. X

联盟链形式下的数据共享平台

l& R5 z7 J- h) I0 a. T* p: \' l$ e

联盟链的特点在于只有联盟内部成员才有对链上数据进行操作的权限,适合机构间的交易、结算等B2B场景

+ X% O7 V3 @2 o# m& Z( D. z- E9 L! a

基于联盟链的交易系统大大提升了结算、清算效率,减少了人工参与的程度,降低了中间成本,因其成员数量有限且需要获得许可才能加入,可以视其为“部分去中心化”。

) f8 J, o9 U! j" L, j4 |4 Z6 Z

超级账本(Hyperledger)为代表的联盟链在海洋数据跨部门开放共享方面有着广泛的前景,可以使各部门的数据资产轻松实现去中心化管理,各部门可不通过中间环节直接访问其他部门的资产。

H" |! Z: X/ w a6 m) j! w/ G9 w

同时,数据资产所有者可以进一步优化链上智能合约,自动化处理业务,降低操作成本。

4 I( L! f) A1 F

联盟链在数字资产确认、交易数据的追踪溯源方面优势显著,可以推动各涉海部门发展数据共享经济。

0 n* r$ ^* _+ B1 d

公有链形式下的数据共享平台

1 X' B" c/ G% | w5 w% }1 _$ V

任何人都可以访问公有链上的数据以及进行交易,并且可以自由地加入或者退出公有链网络。

8 `# ~8 g' q9 t7 I5 q+ j; k* W

理论上讲,公有链是“完全去中心化”的。公有链采用了密码学技术保证交易数据的不可篡改,提高了交易数据的安全性,主要应用在数字货币、知识产权、互联网金融等领域

2 O$ d$ { U+ |8 G5 v/ E4 e9 s7 v

基于公有链的特点,各涉海部门产生的相关数据可以选择性地对外有偿开放,提升业务透明度,而每份数据都有可辨识的签名,方便大众了解数据来源,提升了数据的权威性,加强民众公信力。

- f- N' ^% }- O- C

由此可以构建一个基于去中心化机制的交易市场,并与身份和信誉系统相绑定。

" ~& W) x9 {1 G$ ]% }, g5 t R

海洋数据共享核心技术

+ j0 E0 ?* j7 `' c* V# b5 x

“区块+链”

. B) \- j4 m5 X; U7 N0 l

“区块链”3个字来源于把数据分成了不同的区块,区块通过哈希值链接到上个区块,整体形成一个链状结构存储数据

. b* B4 n' R9 E3 t; `' @

区块链中每个区块结构的主要特点:(1)每个区块包含的交易,限定在上一个区块产生后到当前区块产生前的时间段内,该时间段内的交易全部属于当前区块;(2)交易被写入块上后无法被改写,保证了链上数据无法被篡改

: X0 z. M* R5 W+ u+ T3 Y

区块链数据库最大的创新点是“区块+链+时间戳”形成了一个不可篡改、不可伪造且有序的数据库。

& w2 o8 ]% z7 C

Merkle树结构

7 G, X& `- k8 `* o

Merkle树能快速校验区块数据是否存在、是否被破坏。Merkle树结构中主要包含区块头的根哈希值、区块体的底层数据库底层区块数据到根哈希的分支

% e6 _6 ^4 A; q2 G: _* [

处理过程主要是将区块体数据进行分组后获取哈希输出值,并插入到Merkle树中。

0 g& `; \8 X6 G* S; K, y0 |2 u

分布式结构

( {+ e# S! T4 M' q5 c* H" g

区块链网络将数据存放在网络中的每一个节点上,相当于有了多个备份。

) [/ c4 A5 H* c# R9 _5 G+ y

(1)利用共识机制验证机制使所有的节点都可以记录达到一致性的数据。

4 Z0 @$ X8 ~: h5 h ~3 ~! m

(2)构建一个具有分布式结构的网络,使数据库中的数据通过共识机制更新并同步到整个网络。

- F3 V* N" \( Y3 |/ ?

非对称加密算法

+ m( W9 _& l0 \0 g! j: H" t

非对称加密算法指加密和解密的过程中不使用相同的秘钥,加密时使用大家都知道的公钥,解密时使用数据接收方独有的私钥。在区块链系统中,验证机制采用了非对称加密算法。

6 }1 |4 N7 M' c) v+ D

非对称加密算法在区块链网络中的应用主要体现在这两个场景中:公钥加密信息,私钥解密信息使用私钥签名信息,使用公钥验证签名

0 p- E7 w2 q' I7 g) f+ v# o: k, D

区块链实际上是应用数学方法来解决信任问题,无需交给第三方机构。

* H+ t; H$ t! n+ t

自动化脚本

9 D) n! R5 ]4 @, `% `

自动执行脚本(也被称为智能合约),可以理解为一种可编程的合约文件

m8 g6 H$ k4 U# B# H; C% z/ r

在部署脚本后,区块链系统内部可以自动执行程序、处理交易。一个脚本是多个指令的列表,记录了某次价值交换活动的双方及交换内容。

7 M! v% E" D% i1 f' p/ x* ]

应用模式设计

7 L' C g6 B, k" _4 s, h3 A

以志愿观测船获取的海洋数据进行跨部门共享这一应用场景为例。

0 Z$ ~5 g1 o- n- v& J6 G

整体架构

" |5 z7 r+ g. r/ S) L( j

志愿观测船是获取海洋环境信息的重要手段,主要利用区块链技术解决志愿观测船采集数据的跨部门共享、数据资产所有权保护、数据有偿使用等问题。

4 j2 U+ a6 w' H4 x- d

该平台将需要使用志愿观测船获取数据的涉海部门、科研院所、相关企业作为目标用户,构建如下图所示的海洋数据共享平台

# Y4 d+ z8 Q+ ]+ z; E4 k# B

" K& c, z5 Z5 r; W

基于区块链的跨部门海洋数据共享平台架构

$ a2 o( B! F* m% A. t V( U2 Y; `

基本模型

2 z* V5 l/ U+ G7 a2 Z

模型采用联盟链技术,由参与志愿观测船数据共享的组织共同参与,形成数据共享平台。平台模型主要包括区块链节点、数据存储节点、终端3种节点形式。

- e3 O4 {# G6 z4 X, n" c& X

+ r6 Z! H; H: O) Y2 `

基于区块链的跨部门海洋数据共享平台模型

# Q1 \- A$ j. ^5 O4 o1 m( c

01

i! d) j" q; o5 G

数据上传处理

3 r7 u, n+ n' Q# l. q3 L

以“组织1”采集到的海洋数据为例。志愿观测船靠岸后,将执行如下操作:

4 X9 p: f$ f- n4 E

(1)将志愿观测船存储的各类海洋数据转存到本地数据中心的服务器上

& {+ f8 m% }4 F! N6 D; P

(2)登陆到上传节点终端,将存到本地的海洋数据的哈希值上传到区块链数据库中,并返回可以查询该数据的唯一标识

, m0 `/ _( c+ a# J7 [: J, O

(3)在本地形成数据摘要,连同数据标识上传至全网共同维护的数据列表中。

! q5 J/ n9 D3 R' ]# ? {4 v, F

02

; [ E, ^4 W9 A y2 z

跨部门海洋数据共享

, d1 M8 t0 n" R, @1 x" h9 j

(1)“组织2”某终端浏览全网共同维护的数据列表,查找数据摘要,找到目标海洋数据;

7 f2 y( n5 h2 I& c, F% t" Z

(2)通过数据共享平台向“组织1”的上传节点发起有偿使用请求

& i! j; ?# S$ T2 F6 |

(3)“组织1”进行授权

0 ~3 K0 v. r$ `

(4)“组织2”转移代币给“组织1”,“组织1”将原数据发送给“组织2”。

; O; m* H2 d9 h6 j

0 3

' Q; A5 J3 E1 k: ]$ ?. [

节点权限控制与监管

! V/ M$ Z1 L$ z1 R5 W

准入控制及权限管理在联盟链中尤为重要,分为两级:(1)终端节点拥有权限;(2)区块链节点需要进入区块链网络参与记账和交易的权限。

" \7 c3 w# }" e

0 4

1 C5 [) X2 I) }9 Z( Z

代币安全控制

* T6 x1 ?9 X) M( @+ J9 ]& E

代币用于衡量使用志愿观测船获取数据所需代价。在海洋数据共享平台上,参与者在具有可追溯性和证明保护机制下使用代币,以确保数据生成的代币符合国家网络安全法要求。

) N) n5 J4 p, [0 k9 Q

基于区块链的海洋数据共享平台设计

% j! H3 K3 s+ k

设计思路

, O* v& B, S: X; Q% ^9 b& F$ W

以应用模式和Hyperledger联盟链为基础,开发基于区块链的海洋数据共享平台。

0 X! v+ H' G6 b# S$ u

8 f1 F: ]' y0 A$ Q

联盟链平台工作流程

0 c: N; l6 W8 M2 @ [& A5 x1 i% l

涉海部门将收集的海洋数据进行哈希处理得到哈希值,编写数据的摘要信息,并读取对应的智能合约程序。

9 q R4 j2 v7 z0 C6 q! d0 i2 L& \; j

随后,涉海部门用属于自己的私钥对这些数据和智能合约签名,并上传到数据共享平台。其他涉海部门可通过对应的智能合约获取该部门的海洋数据。

/ X* x7 L6 T0 `. }5 q

运行流程

2 J D- d7 |$ H y+ m6 Z

8 O# m! o& ]2 i8 H O* j- T

基于区块链的海洋数据共享流通的流程

/ `+ t! m; p$ K7 q7 R' M

01

2 B. I" C6 b2 h8 Z) ?2 G

生成智能合约

7 x8 P V, Q6 @6 q, k0 T6 G

将多方共同参与制定的智能合约程序部署在区块链网络上,达到某个明确的必要条件时,执行对应的数据共享操作。

8 e0 j# y2 a& I) b% r ]$ V! b

0 2

: C# B! r q' T! l

共享业务创建

8 K% o! x3 J; n) H% @

当某一涉海部门处理某项业务时,智能合约核查其基本信息,通过后利用其私钥对交易进行签名;然后存入区块链数据库中,得到返回值,区块链再将此次交易通过P2P网络扩散其他节点。

0 H( w. u9 P: y$ b- T' u0 L8 A

0 3

* l/ \2 M; G4 g( A1 [" @1 p

全网共识

1 ^7 } h, E% g; @" g% `+ N6 V s

交易传播到全网后,每个节点都会将其缓存到区块中。通过链上共识机制选择出一个节点把此次的交易记录到区块中,再传播到全网备份。

, e5 a% F: U0 f; P, }; d8 I' J& r

0 4

# s' x. J+ C3 {" s6 ]3 Q! a

结果反馈

4 Z3 j% v% v+ ~1 `) ^% [

链上节点信息通过验证后,交易数据被签名并反馈给请求节点,请求部门做出合理决策。

1 }! v: n& L' j3 W5 J- f

0 5

6 r" G4 U; G/ o* n5 K% J& T; o+ e

带有激励机制的数据共享

! R- Y3 i& F4 w w

网络中的各个节点都可以查阅链上存储数据的摘要信息,通过向数据持有方发起索取请求获取某项数据的详情信息。

+ N2 P5 L9 t& l# f: ~: d$ o

结论

% B) D' W" j) y+ k( M, N- @

本文充分利用区块链技术的特点与优势,提出了一种有效解决海洋“数据孤岛”难题、实现跨部门海洋数据共享的思路与技术解决方案,具有较大的参考与借鉴价值

# x$ ^$ N' X1 @4 m$ Q# C+ |( x

本文作者:程骏超,张驰,何元安作者简介:程骏超,中国船舶工业系统工程研究院,国防科技工业海洋安全体系创新中心,高级工程师,研究方向为海洋信息化、系统工程。

! l% c) L3 A q; C

《科技导报》创刊于1980年,中国科协学术会刊,主要刊登科学前沿和技术热点领域突破性的成果报道、权威性的科学评论、引领性的高端综述,发表促进经济社会发展、完善科技管理、优化科研环境、培育科学文化、促进科技创新和科技成果转化的决策咨询建议。常设栏目有院士卷首语、智库观点、科技评论、热点专题、综述、论文、学术聚焦、科学人文等。

5 `9 x- B+ b0 t4 h# [6 u2 M0 _ r( m

《科技导报》微信公众平台创建于2014年,主要刊登《科技导报》期刊内容要点,报道热点科技问题、科技事件、科学人物,打造与纸刊紧密联系又特色鲜明的新媒体平台。

; T# @5 v& A6 E4 h 9 N, y# E- X2 [ 6 Z! K" E) f: v2 p w" B* E3 D ( X- q7 G0 E; U( m7 j4 z8 P% _ 3 X9 B; W# w0 P5 G
回复

举报 使用道具

全部回帖
暂无回帖,快来参与回复吧
懒得打字?点击右侧快捷回复 【吾爱海洋论坛发文有奖】
您需要登录后才可以回帖 登录 | 立即注册
开悟余生
活跃在3 天前
快速回复 返回顶部 返回列表