數(shù)據(jù)平臺范文10篇
時間:2024-03-18 10:49:03
導語:這里是公文云根據(jù)多年的文秘經(jīng)驗,為你推薦的十篇數(shù)據(jù)平臺范文,還可以咨詢客服老師獲取更多原創(chuàng)文章,歡迎參考。

主題數(shù)據(jù)平臺分析論文
摘要本文在解決遠程開放教育系統(tǒng)的信息孤島問題的基礎上,總結出了一個通用的主題數(shù)據(jù)平臺架構。并進一步針對它在不同的環(huán)境、采用不同的策略,給出了實現(xiàn)框架。
關鍵詞SOA;數(shù)據(jù)平臺;信息暴露
1引言
本課題來源于中央廣播電視大學教務管理系統(tǒng)的后續(xù)開發(fā)。隨著中央電大在開放式教育思想指導下的教學改革的展開,系統(tǒng)業(yè)務量急劇猛增,原有的教學管理系統(tǒng)已經(jīng)逐漸的滿足不了應用需求。所以新一代教學管理系統(tǒng)正在開發(fā)中,同時由于教育業(yè)務本身的連貫性,導致了新舊系統(tǒng)并行的局面出現(xiàn)。但是由于新舊系統(tǒng)間缺少關聯(lián)和通信以及必要的規(guī)范,導致信息“孤島”現(xiàn)象嚴重,而舊系統(tǒng)又恰恰是電大不可放棄的重要投資。同時由于各個系統(tǒng)集成度不足,運行業(yè)務的數(shù)據(jù)庫和應用程序也是在不同時期部署的,它們來自不同的供應商,使用各不相同的定制技術。從而面臨著如何構建一個強壯的、可靠的,將新舊系統(tǒng)中的分散功能組織成可共用的標準服務來滿足業(yè)務要求的平臺,成為我們需要研究的難點。
通過實踐我們可以發(fā)現(xiàn),應用程序始終都與數(shù)據(jù)有關,企業(yè)級的服務程序更是如此。今天,企業(yè)應用程序開發(fā)中有高達70%的時間都是用于訪問不同的數(shù)據(jù)。因此,對企業(yè)信息和數(shù)據(jù)按業(yè)務邏輯進行梳理和抽取,形成企業(yè)數(shù)據(jù)的統(tǒng)一表現(xiàn)實體,該實體可以在全企業(yè)范圍內得到一致性的使用,是邁向面向服務的體系架構的第一步。因此我們提出了主題數(shù)據(jù)平臺的概念。
2主題數(shù)據(jù)平臺結構
政務大數(shù)據(jù)管理平臺規(guī)劃與技術研究
摘要:政務大數(shù)據(jù)管理平臺建設的背景是優(yōu)化營商環(huán)境、促進政務服務改革,以“數(shù)據(jù)多跑腿、群眾少跑腿”為目的,促進政務數(shù)據(jù)共享交換,提升政府服務能力、城市智慧管理能力。近年來在大數(shù)據(jù)技術快速發(fā)展的背景下,我國已經(jīng)開始創(chuàng)建政務大數(shù)據(jù)平臺,獲得了一定的成績。新時期為制定與我國政務工作需求相適應的政務大數(shù)據(jù)平臺的建設策略,文章提出幾點戰(zhàn)略規(guī)劃建議,旨在為提升政務大數(shù)據(jù)管理平臺的規(guī)劃建設效果提供幫助。
關鍵詞:政務大數(shù)據(jù)管理平臺;戰(zhàn)略規(guī)劃;技術政務
大數(shù)據(jù)管理平臺主要就是政府進行數(shù)據(jù)管理的系統(tǒng),具有5V屬性,主要就是容量、速率、多樣性、真實性、價值,從宏觀層面來講,政務大數(shù)據(jù)主要就是面向政府或者是政府自由的數(shù)據(jù),涉及到生活、服務與公共三項數(shù)據(jù)。為了能夠提升政府大數(shù)據(jù)的管理效果,應著重構建有關的管理平臺,制定相應的戰(zhàn)略規(guī)劃,合理使用先進技術,確保有關的管理平臺良好發(fā)展。為了更好的完成政務大數(shù)據(jù)管理平臺的建設工作,應該完善戰(zhàn)略規(guī)劃,合理使用先進技術,積極構建數(shù)據(jù)歸集交換、數(shù)據(jù)管理與統(tǒng)一身份認證的相關平臺,完善有關平臺的政務大數(shù)據(jù)管理功能,保證各項工作的高質量、有序性開展。
1合理建設數(shù)據(jù)歸集交換的數(shù)據(jù)管理平臺
1.1平臺的構建要求。對于數(shù)據(jù)歸集交換平臺而言,主要就是面向政務部門,合理使用完善的網(wǎng)絡信息基礎設施與優(yōu)勢性的資源,在資源共享、業(yè)務協(xié)同的過程中,提升區(qū)域之內的信息資源共享效果,達到良好的網(wǎng)絡互通的目的,預防出現(xiàn)重復建設問題、縱強橫弱問題、信息孤島問題等等,使得各級政府部門都能夠在數(shù)據(jù)交換的過程中,有著集約化、具體性的指導。數(shù)據(jù)歸集交換平臺的建設,主要是依托國家電子政務外網(wǎng),在合理利用原本系統(tǒng)的同時,對其進行擴容處理和優(yōu)化處理,建設出多級條塊都能融會貫通、運行管理性能和效果較高、自控能力良好、持續(xù)性擴展性能強的平臺。在建設平臺的過程中,應遵循節(jié)約投資的基本原則,盡可能提升各種基礎設施的應用效率,創(chuàng)建完善的多交換域模式,增強平臺的交換能力、效率,確保平臺管理效果和數(shù)據(jù)采集效果,在優(yōu)化并且拓展相關框架的同時,使得平臺之內更好的容納各級政府的數(shù)據(jù)共享、交換,符合政府在數(shù)據(jù)共享方面與交換方面的根本需求。1.2平臺的戰(zhàn)略規(guī)劃。具體的數(shù)據(jù)歸集平臺建設和發(fā)展過程中,應結合政務信息化發(fā)展的根本需求,將基礎性的網(wǎng)絡設施、安全體系當做是載體,按照電子政務的發(fā)展需求制定統(tǒng)一規(guī)范、平臺與設計的戰(zhàn)略規(guī)劃,使得平臺建設工作能夠向著標準化、制度化、規(guī)范化的方向發(fā)展。政府部門在有關的平臺中可以對數(shù)據(jù)進行系統(tǒng)性的分析,梳理目錄的同時可以更好地實現(xiàn)信息交換的目的,也可以在平臺中各種資源,訂閱相關的信息,對政務數(shù)據(jù)進行統(tǒng)一性的共享與交換處理。在設計平臺的過程中,應保證其在人口、法人、地理信息、宏觀經(jīng)濟四大庫有著專門的信息交換域,可以為進一步開展民生資金方面、財稅增收方面、經(jīng)濟運行監(jiān)測方面的政務業(yè)務的協(xié)同工作提供基礎、支撐。在制定戰(zhàn)略規(guī)劃的過程中,應按照政府部門的具體需求,遵循著安全性原則、穩(wěn)定性原則、標準型原則等等,完善平臺的可維護性能、廣泛應用的性能、拓展性延展性的性能。①應該遵循標準性的戰(zhàn)略規(guī)劃原則,根據(jù)有關的法律制度、行業(yè)技術標準等,在確保合理共享政務信息資源的同時,增強信息交換的效果,盡可能使用統(tǒng)一性的基礎設施與產(chǎn)品,增強其中信息交換系統(tǒng)的穩(wěn)定性,保證通用性,健全有關的數(shù)據(jù)構架,爭取在戰(zhàn)略規(guī)劃的過程中提升平臺的標準化程度[1]。②遵循先進性的戰(zhàn)略規(guī)劃原則,創(chuàng)建耦合性較低的軟件架構,利用先進的軟件設計良好運行的軟件系統(tǒng),保證系統(tǒng)的先進性,同時還需將行業(yè)標準當做是基礎部分,運用先進的技術工具,確保系統(tǒng)具有一定的通用性,可以針對信息資源全面的共享處理。③遵循安全性的戰(zhàn)略規(guī)劃原則。就是在規(guī)劃的過程中設置有關的管理維護模式,保證所使用的基礎設施部分、中間設備部分、軟件硬件部分的安全性,在規(guī)劃建設平臺的過程中,選用與標準相符的基礎設施,創(chuàng)建科學化、有效性的信息安全管控體系,完善其中的CA認證模式和SSL功能。④遵循實用性的戰(zhàn)略規(guī)劃基本原則,形成正確的平臺構建和設計觀念意識,完善其中的方案內容,在確保系統(tǒng)性能的同時,提升平臺運行的合理性,確保平臺運作的適用性,可以在具體工作中有效解決和應對問題,保證平臺建設的實用性。⑤遵循靈活性的戰(zhàn)略規(guī)劃原則,將API接口當做是基礎部分,在其中設置適配器工具,保證內部系統(tǒng)和外部系統(tǒng)之間的良好對接,在增強系統(tǒng)運行穩(wěn)定性的同時,改善系統(tǒng)在發(fā)展過程中的松耦合性,使得系統(tǒng)之內的資源可以高效性的整合運用。除此之外,戰(zhàn)略規(guī)劃期間還應該遵循可管理性、可擴展性的基本原則,形成良好的數(shù)據(jù)歸集處理平臺[2]。1.3具體的技術措施。如圖1所示,數(shù)據(jù)歸集平臺屬于數(shù)據(jù)共享平臺中的一部分,構建政務大數(shù)據(jù)歸集管理平臺的過程中,應該完善相關的標準規(guī)范體系,統(tǒng)一的數(shù)據(jù)交換、運行管理、平臺對接等規(guī)范內容,在規(guī)范性應用技術的同時不斷增強相關的平臺建設效果。在應用技術的過程中,主要的要求為:①明確有關的平臺建設內容,就是要進行交換管理平臺的良好建設,保證分布式的各個節(jié)點服務器都能夠統(tǒng)一性的接入處理,確保區(qū)級的業(yè)務都可以全面性的覆蓋連接,保證數(shù)據(jù)歸集交換平臺具備穩(wěn)定運行的性能,可以增強數(shù)據(jù)傳遞的安全性與可靠性。應該構建交換業(yè)務的多域管理模式,保證各種業(yè)務域都能夠更好的進行交換邏輯隔離。同時還需對政務資源進行統(tǒng)一性的目錄處理,融入到有關的數(shù)據(jù)歸集交換平臺中,統(tǒng)一開展政務數(shù)據(jù)的管理工作。②具體的建設工作中應該遵循統(tǒng)一性的技術規(guī)劃原則,將政務數(shù)據(jù)資源的交換需求當做是基礎部分,全面進行部署、逐漸落實各類工作,因地制宜的整合資源,遵守著經(jīng)濟性原則、實用性原則,按照政務部門的具體發(fā)展、信息化的現(xiàn)狀,明確有關的數(shù)據(jù)歸集交換平臺的規(guī)模和標準,使用信息技術、大數(shù)據(jù)技術等全面進行信息資源的整合,以此減少平臺構建的成本。在建設期間還應該借鑒國內外的成功經(jīng)驗,確保所使用技術的先進性和規(guī)范性[3]。
2合理建設系統(tǒng)化的數(shù)據(jù)管理平臺
本體電子政務數(shù)據(jù)平臺研究運用
全球性的網(wǎng)絡化、信息化進程正改變著人們的生活方式,Internet技術應用以及電子商務的飛速增長給人們生活工作的各個層面帶來了深刻的影響。隨著計算機與網(wǎng)絡技術的迅猛發(fā)展,“政府信息化”越來越受到政府機關的重視,各地政府機關紛紛開始建立電子政務業(yè)務系統(tǒng)。目前大多數(shù)政府機關已建立了大量的信息系統(tǒng),例如檔案管理系統(tǒng)、稅務系統(tǒng)、工資系統(tǒng)、人事管理系統(tǒng)、OA系統(tǒng)、公共服務一卡通、資產(chǎn)管理系統(tǒng)等。但眾多業(yè)務應用系統(tǒng)相互獨立,它們各自采用不同平臺、不同數(shù)據(jù)庫、不同編碼,致使各業(yè)務系統(tǒng)之間的數(shù)據(jù)交換和信息資源共享存在困難,信息孤島現(xiàn)象明顯¨1]。
同時,眾多的應用系統(tǒng)所帶來的身份的認證和管理的復雜性既使得管理成本不能降低,又使得整個系統(tǒng)的安全性、可整合性降低,這已成為電子政務信息管理系統(tǒng)進一步發(fā)展的瓶頸所在。因此,要想改變電子政務信息化水平的現(xiàn)狀,整合信息資源,解決“信息孤島”問題,就必須建立一個公共數(shù)據(jù)平臺,它是在政府部門原有的各業(yè)務系統(tǒng)層面上搭建的一個高層應用平臺,將各業(yè)務系統(tǒng)的異構數(shù)據(jù)集成應用,向下屏蔽各異構信息源異構性,向上提供數(shù)據(jù)集成基礎服務,實現(xiàn)各種信息系統(tǒng)的互通互聯(lián)和數(shù)據(jù)共享、數(shù)據(jù)的一致性,并在此基礎上實現(xiàn)規(guī)范的信息管理。近年來,隨著語義Web的發(fā)展,其核心技術本體在數(shù)據(jù)集成方面得到了應用。本體作為共享領域概念模型,可以通過定義領域內一致的術語和術語間的關系來描述異構信息源的語義信息,從而消除異構數(shù)據(jù)源的語義沖突。
在國外,對本體的研究較早,本體已經(jīng)應用到各個領域。相比國外,國內對本體的研究起步較晚,尤其是在電子政務方面,缺乏一致的本體模型,相關的應用也少。目前,本體技術很少在電子政務信息化建設中應用,因此,如何把本體技術應用到電子政務異構數(shù)據(jù)管理集成中,采取何種策略進行構建,消除電子政務各信息系統(tǒng)異構數(shù)據(jù)庫模式的語義沖突,從而解決電子政務中異構系統(tǒng)導致的信息孤島問題,構建統(tǒng)一的數(shù)據(jù)平臺,以便提高政府管理效率,就顯得尤為重要。
1電子政務與本體
1.1電子政務與本體概述
電子政務是政府機構廣泛深入地應用現(xiàn)代信息和通信技術,將政府內部和外部(社會)的責權與職能通過計算機網(wǎng)絡硬件和軟件技術進行集成、整合、優(yōu)化、重組,做到跨越時間和空間,突破部門分割和傳統(tǒng)組織、工作方法與工作流程的限制,力求全方位地、有效地施行與提供安全、高效、優(yōu)質、規(guī)范和符合國際水準的管理與服務。本體是為了某種目的描述世界時的一組抽象化概念,并且該組概念是得到廣泛認可的、以規(guī)范化形式描述的。根據(jù)定義描述本體時目的的不同,本體可以分為多種類型,依照領域依賴程度,可以細分為頂級(top—leve1)、領域(domain)、任務(task)和應用(application),這里研究的是領域本體,領域本體由屬性、對象、關系和子領域本體組成。引入本體的思想,借助本體對領域知識進行詳細描述,以抽象出概念化的語義層次,為進一步研究語義化的信息交互提供了基本的語義層次2J。從形式上來說,本體由概念、關系、函數(shù)、公理和實例5種元素組成。本體中的概念可以是一般意義上的概念,也可以是任務、功能、行為、策略推理過程等;關系表示概念之間的關聯(lián);函數(shù)則是一種特殊的關系;公理用于表示一些永真式;實例是指屬于某種概念的基本元素,即某概念類所指的具體實例。
智慧校園數(shù)據(jù)集成共享平臺探討
摘要:為了解決高校各業(yè)務系統(tǒng)在信息化建設過程中,由于建設時間和空間上的差異,出現(xiàn)的“信息孤島”現(xiàn)象和數(shù)據(jù)離散、異構等問題,提出一種基于ODI的智慧校園數(shù)據(jù)集成共享平臺。平臺通過利用Oracle的ETL工具ODI,對各業(yè)務系統(tǒng)數(shù)據(jù)進行集成,并將集成后的數(shù)據(jù)共享給統(tǒng)一身份認證平臺以及網(wǎng)上辦事大廳和校園移動App中的各種應用與服務。通過平臺的構建和應用表明,業(yè)務系統(tǒng)的主要數(shù)據(jù)得到了治理和標準化,數(shù)據(jù)的交換和共享率也得到了很多大提升。
關鍵詞:智慧校園;數(shù)據(jù)集成;數(shù)據(jù)共享;統(tǒng)一身份認證;網(wǎng)上辦事大廳;ODI
1背景
高校信息化建設隨著云計算、物聯(lián)網(wǎng)、大數(shù)據(jù)、智能感知等新興信息技術的不斷發(fā)展已經(jīng)步入智慧校園建設階段,而高校在信息化發(fā)展的過程中,由于缺乏有效合理的規(guī)劃和協(xié)調,各業(yè)務部門根據(jù)自己的需求建設了眾多業(yè)務系統(tǒng),出現(xiàn)了“信息孤島”現(xiàn)象,形成了數(shù)據(jù)類型和數(shù)據(jù)訪問方式多樣,數(shù)據(jù)標準不統(tǒng)一等問題,并且隨著時間的發(fā)展累積了大量的業(yè)務和數(shù)據(jù)資源,冗余數(shù)據(jù)和垃圾數(shù)據(jù)都普遍存在于業(yè)務系統(tǒng)中[1-4]。這些問題嚴重阻礙了智慧校園建設的進程,導致在數(shù)據(jù)層面,數(shù)據(jù)私有化,數(shù)據(jù)流動性不強,數(shù)據(jù)質量不高,各業(yè)務系統(tǒng)產(chǎn)生的數(shù)據(jù)無法交換、共享,無法發(fā)揮大數(shù)據(jù)的作用;業(yè)務層面,校內業(yè)務系統(tǒng)相互隔離,各應用之間的融合度不高[4-5],師生辦理業(yè)務跑路多、不方便。為了解決上述問題,數(shù)據(jù)的集成和共享勢在必行,數(shù)據(jù)集成是把不同來源、格式、特點、性質的數(shù)據(jù)在邏輯上或物理上有機地集中,從而為用戶提供全面的數(shù)據(jù)共享,數(shù)據(jù)只有通過共享,才能保證數(shù)據(jù)的一致,減少冗余,提高利用率[6],實現(xiàn)數(shù)據(jù)的流動和業(yè)務的融合。本文提出一種基于ODI(OracleDataInte⁃grator)的智慧校園數(shù)據(jù)集成共享平臺,利用Oracle的ETL(Ex⁃tract-Transform-Load)工具ODI對各業(yè)務系統(tǒng)產(chǎn)生的源數(shù)據(jù)進行抽取、清洗和轉換后,將數(shù)據(jù)共享給統(tǒng)一身份認證平臺以及網(wǎng)上辦事大廳和校園移動App中的各業(yè)務系統(tǒng)、表單流程和服務,實現(xiàn)數(shù)據(jù)的交換、共享和流動;師生通過統(tǒng)一身份認證訪問網(wǎng)上辦事大廳和校園移動App中的各種業(yè)務和服務,實現(xiàn)單點登錄和業(yè)務的融合。
2智慧校園數(shù)據(jù)集成共享平臺架構
針對智慧校園建設充分整合信息資源和應用資源的需求,本文提出的智慧校園數(shù)據(jù)集成共享平臺主要包括數(shù)據(jù)源層、數(shù)據(jù)處理層、數(shù)據(jù)存儲與管理層和數(shù)據(jù)應用與服務層,如圖1所示。數(shù)據(jù)源層,主要是作為數(shù)據(jù)源的各業(yè)務系統(tǒng)的數(shù)據(jù),包括結構化和非結構化的數(shù)據(jù),利用ETL工具抽取到數(shù)據(jù)處理層。數(shù)據(jù)處理層根據(jù)國家規(guī)范標準和學校標準,對抽取過來的源數(shù)據(jù)進行清洗和轉換后,存儲到數(shù)據(jù)中心。數(shù)據(jù)存儲與管理層主要是對數(shù)據(jù)的存儲和管理。其中,元數(shù)據(jù)管理的目的是在建立元數(shù)據(jù)標準的基礎上,統(tǒng)一進行數(shù)據(jù)抽取、清洗和轉換,以實現(xiàn)對各業(yè)務系統(tǒng)數(shù)據(jù)的整合[3]。主數(shù)據(jù)是全校范圍統(tǒng)一標準和規(guī)范的數(shù)據(jù),以解決異構系統(tǒng)之間關鍵數(shù)據(jù)的不一致、不正確、不完整等問題。數(shù)據(jù)中心則以數(shù)據(jù)庫的形式存儲集成后的數(shù)據(jù),主要用于各業(yè)務系統(tǒng)的數(shù)據(jù)共享、綜合查詢以及數(shù)據(jù)分析與挖掘等。數(shù)據(jù)應用與服務層是應用和服務集中展示層,網(wǎng)上辦事大廳和校園移動App將各種應用、工作流流程、綜合化查詢、表單制作和服務集成到同一平臺,并作為進入應用和服務的唯一門戶。師生通過統(tǒng)一身份認證平臺對身份的合法認證之后進入網(wǎng)上辦事大廳和校園移動App,便可在該平臺根據(jù)角色的不同快速找到符合角色的服務。
畜牧業(yè)管理平臺搭建與數(shù)據(jù)挖掘
摘要:基于紅河州高原特色畜牧業(yè)發(fā)展信息化管理平臺成功搭建和兩年有效運行,文章從數(shù)據(jù)收集的管理體制基礎、平臺開發(fā)基礎和日常管理制度等幾方面詳細介紹畜牧業(yè)數(shù)據(jù)管理平臺的搭建,并從規(guī)模養(yǎng)殖場數(shù)據(jù)采集、散養(yǎng)戶數(shù)據(jù)采集、價格數(shù)據(jù)采集、臨時數(shù)據(jù)采集等幾方面介紹畜牧業(yè)數(shù)據(jù)的挖掘利用,以及提取相關數(shù)據(jù)形成展示頁面的功能。
關鍵詞:畜牧業(yè);大數(shù)據(jù);采集;管理;挖掘
傳統(tǒng)畜牧業(yè)數(shù)據(jù)的收集過程比較復雜,數(shù)據(jù)分散,無法長期保存和難以深入挖掘利用,信息孤島嚴重。以物聯(lián)網(wǎng)、云計算、大數(shù)據(jù)以及人工智能為代表的新一輪信息技術革命推動粗放式傳統(tǒng)畜牧養(yǎng)殖向知識型、技術型、現(xiàn)代化的智慧畜牧養(yǎng)殖轉變,利用技術優(yōu)勢已成為驅動畜牧業(yè)快速發(fā)展的重要因素[1]。搭建一個有效的數(shù)據(jù)收集管理平臺,做到日常數(shù)據(jù)實時更新、填報數(shù)據(jù)實時審核、臨時數(shù)據(jù)快速增加模塊的數(shù)據(jù)采集管理平臺就很有必要。平臺搭建完成后的數(shù)據(jù)保存、管理和挖掘利用非常方便,能夠快速形成畜牧業(yè)大數(shù)據(jù)中心。紅河哈尼族彝族自治州初步建設完成的“紅河州高原特色畜牧業(yè)發(fā)展信息化管理平臺”(以下簡稱平臺),在利用先進的信息化手段提高管理效率,縱向整合畜牧業(yè)州、縣市、鄉(xiāng)鎮(zhèn)、村(企)四級數(shù)據(jù),橫向整合豬、雞、牛、羊等各畜種養(yǎng)殖信息的基礎上,基本形成了全州畜牧業(yè)大數(shù)據(jù)服務中心。
1畜牧業(yè)數(shù)據(jù)采集管理的基礎
1.1數(shù)據(jù)采集的體制基礎。紅河州按管理體制分為州、縣市和鄉(xiāng)鎮(zhèn)三級業(yè)務管理部門,這三級管理部門組成了一套完整的、運轉正常的畜牧業(yè)管理體系,基于正常的體制配備,平臺按三級劃分初步建立了數(shù)據(jù)收集管理平臺的體制。州畜牧技術推廣部門負責州級管理并向下可查詢所有數(shù)據(jù),13個縣市畜牧技術推廣部門各安排一個管理人員和若干個業(yè)務人員(賬號級別不同)管理本級和鄉(xiāng)鎮(zhèn)數(shù)據(jù),每個鄉(xiāng)鎮(zhèn)設置一個管理人員和若干個業(yè)務人員管理鄉(xiāng)鎮(zhèn)數(shù)據(jù),從而形成三級聯(lián)動,每一級根據(jù)不同權限實時負責和掌握不同數(shù)據(jù)報表進度。1.2數(shù)據(jù)采集的平臺基礎。平臺設計全面采用了B/S結構,主要邏輯功能在服務器端完成[2]。州、縣市和鄉(xiāng)鎮(zhèn)三級畜牧管理部門用戶操作完全通過www瀏覽器實現(xiàn),形成3-tier結構[3]。全州一套平臺,程序維護開發(fā)全部由州級完成。在設計上,為了保證平臺運行的穩(wěn)定性和可擴充性,采用了模塊化結構設計,使用了友好的圖形圖像界面,最終實現(xiàn)所有管理操作網(wǎng)絡化,節(jié)約了大量后期開發(fā)和維護成本。同時采用了地理信息技術展示轄區(qū)內養(yǎng)殖場的分布,此設計基于主流WebGIS開源框架OpenLayers[4]開發(fā),能夠展示所有養(yǎng)殖場地理位置分布、查看養(yǎng)殖場衛(wèi)星圖、瀏覽養(yǎng)殖場基本信息等。1.3數(shù)據(jù)采集的制度基礎。為了有效地收集和管理數(shù)據(jù),數(shù)據(jù)收集實行“周五數(shù)據(jù)日”制度。每個周五為數(shù)據(jù)集中上報日,當天各級管理人員均在線上報、審核數(shù)據(jù)和管理維護日常養(yǎng)殖場的基本信息。同時,平臺實行進度跟蹤制度,每一級數(shù)據(jù)的填報進度自動計算更新率,各級按更新百分率進行跟蹤,有利于實時查看數(shù)據(jù)的更新進度。例如,州級規(guī)定所有養(yǎng)殖場基本數(shù)據(jù)最少一個季度更新一輪,那么在本季度的3個月中,每個月的更新率應該達到33.33%以上,否則會提醒相關管理員加強維護數(shù)據(jù)。
2畜牧業(yè)數(shù)據(jù)的挖掘與利用
農(nóng)業(yè)大數(shù)據(jù)應用策略及平臺構建
摘要:文章通過對農(nóng)業(yè)大數(shù)據(jù)及其在農(nóng)產(chǎn)品銷售中的作用的分析,探討農(nóng)業(yè)大數(shù)據(jù)在助力農(nóng)產(chǎn)品營銷、提升農(nóng)產(chǎn)品電子銷售運輸,創(chuàng)新農(nóng)業(yè)營銷活動,提高使用者業(yè)務能力等方面的應用效果,以期為未來農(nóng)業(yè)發(fā)展有所貢獻。
關鍵詞:農(nóng)業(yè)大數(shù)據(jù);大數(shù)據(jù)分析;平臺構建
1農(nóng)產(chǎn)品銷售中大數(shù)據(jù)的作用
1.1農(nóng)業(yè)大數(shù)據(jù)有助于確保農(nóng)作物農(nóng)產(chǎn)品的質量。農(nóng)業(yè)大數(shù)據(jù)平臺使人們可以更好地了解農(nóng)業(yè)實踐并利用由農(nóng)業(yè)部提供的科學,技術和氣象信息大數(shù)據(jù)確保作物質量和生產(chǎn)力。1.2農(nóng)業(yè)大數(shù)據(jù)節(jié)省了農(nóng)產(chǎn)品的銷售成本。大數(shù)據(jù)節(jié)省了農(nóng)產(chǎn)品銷售的大部分市場研究成本。根據(jù)實時數(shù)據(jù),以實現(xiàn)對農(nóng)產(chǎn)品和銷售市場的了解;農(nóng)業(yè)大數(shù)據(jù)除了提供有關農(nóng)產(chǎn)品價格的實時信息之外,還節(jié)省了營銷成本,并促進了農(nóng)產(chǎn)品的購買,買賣雙方通過信息平臺相互了解,基于自身需求訪問和購買數(shù)據(jù),這使得農(nóng)產(chǎn)品的銷售更加方便快捷。1.3大數(shù)據(jù)技術可以實現(xiàn)農(nóng)產(chǎn)品的電商銷售。比如美團生鮮、京東生鮮等都推出了農(nóng)產(chǎn)品銷售的電商平臺。通過使用大數(shù)據(jù)來分析農(nóng)產(chǎn)品消費者的購買習慣,從而進行針對性的營銷,精確開發(fā)潛在客戶。
2農(nóng)業(yè)大數(shù)據(jù)的應用策略
2.1農(nóng)業(yè)大數(shù)據(jù)+農(nóng)產(chǎn)品營銷。2.1.1通過大數(shù)據(jù)精準定位目標客戶。在農(nóng)業(yè)綜合企業(yè)平臺上使用大數(shù)據(jù)來分析和處理數(shù)據(jù),可以使農(nóng)業(yè)商品生產(chǎn)商更好地了解客戶群,從而精準營銷和目標廣告投放。農(nóng)產(chǎn)品營銷不再是“廣撒網(wǎng)”,而是有針對性。例如,向喜歡使用QQ的客戶發(fā)送消息,向喜歡使用郵件的客戶發(fā)送郵件,給優(yōu)先客戶回電或在線維護。實踐表明,精確廣告不僅可以節(jié)省企業(yè)的成本,還可以避免不必要的浪費,通過精確的信息推送,滿足客戶需求。2.1.2通過農(nóng)業(yè)大數(shù)據(jù)打造新的農(nóng)產(chǎn)品營銷。當今世界處于數(shù)字化媒體時代,農(nóng)產(chǎn)品銷售也需要利用農(nóng)業(yè)大數(shù)據(jù)建立新媒體營銷團隊,開展新媒體宣傳活動,吸引客戶。例如利用抖音短視頻現(xiàn)場直播農(nóng)產(chǎn)品的過程,定期組織優(yōu)惠活動鼓勵消費者購買等。2.1.3農(nóng)業(yè)大數(shù)據(jù)可用于提供個性化的營銷服務。農(nóng)業(yè)大數(shù)據(jù)為消費者提供海量的信息,這也使消費者的選擇范圍更廣,因此銷售信息需要基于客戶的個性化需求呈現(xiàn),通過個性化的營銷策略使客戶成為粉絲,例如引入動態(tài)農(nóng)產(chǎn)品電子商務網(wǎng)頁,動態(tài)頁面更新與數(shù)據(jù)庫相關的銷售信息,為消費者提供個性化和準確的服務。2.2利用大數(shù)據(jù)提升農(nóng)產(chǎn)品電子商務的運輸與跟蹤。2.2.1利用農(nóng)業(yè)大數(shù)據(jù)改善農(nóng)產(chǎn)品運輸管理。通過大規(guī)模的數(shù)據(jù)建立快速響應、層次豐富、覆蓋面積大、物流系統(tǒng)完善的服務,從而確保農(nóng)產(chǎn)品的運輸和保存。大型農(nóng)業(yè)數(shù)據(jù)平臺可以將農(nóng)業(yè)生產(chǎn)區(qū)與加工區(qū)連接起來,通過非結構化系統(tǒng)數(shù)據(jù)(例如用于物流管理的條形碼和二維碼)打造網(wǎng)上農(nóng)產(chǎn)品供應鏈。2.2.2借助農(nóng)業(yè)數(shù)據(jù)實現(xiàn)農(nóng)產(chǎn)品安全監(jiān)測。近年來,有關糧食安全的負面信息頻發(fā),糧食安全問題已引起社會各界的普遍關注。利用農(nóng)業(yè)大數(shù)據(jù)可以確保對農(nóng)業(yè)生產(chǎn)和消費的不同環(huán)節(jié)進行實時監(jiān)控和有效追溯,幫助監(jiān)管者制定決策,并賦予消費者權力,在監(jiān)視農(nóng)產(chǎn)品生產(chǎn)者和分銷者的同時保證產(chǎn)品安全。此外,依靠大型農(nóng)業(yè)數(shù)據(jù)平臺對農(nóng)產(chǎn)品的動態(tài)反應,也可了解消費者的需求和喜好,從而有助于改進產(chǎn)品質量,優(yōu)化生產(chǎn)策略。2.2.3完善農(nóng)產(chǎn)品售后服務的控制和檢查。農(nóng)產(chǎn)品質量控制部門應規(guī)范農(nóng)產(chǎn)品檢驗程序,定期檢測和抽查,并加大對不合格農(nóng)產(chǎn)品的制裁力度,以確保食品的安全。2.3通過大數(shù)據(jù)創(chuàng)新農(nóng)業(yè)營銷相關活動。企業(yè)通過分析耕地數(shù)據(jù)制定具有針對性的農(nóng)產(chǎn)品種植計劃,及時了解市場信息,這有助于提高資源利用率,為農(nóng)民帶來更多收益。通過利用農(nóng)業(yè)大數(shù)據(jù)將金融服務公司與農(nóng)民聯(lián)系起來,可以提高農(nóng)業(yè)金融活動的效率,評估和轉移與農(nóng)業(yè)活動有關的風險。此外,農(nóng)業(yè)金融公司可以在融資的同時制定一套農(nóng)產(chǎn)品加工和營銷計劃,以幫助農(nóng)民,尤其是邊遠地區(qū)的農(nóng)民解決農(nóng)產(chǎn)品的銷售問題。
大數(shù)據(jù)創(chuàng)新實踐教學平臺建設分析
摘要:在教育部發(fā)展數(shù)據(jù)科學與大數(shù)據(jù)技術專業(yè)的背景下,本文以貴州理工學院阿里巴巴大數(shù)據(jù)學院為依托,以數(shù)據(jù)科學與大數(shù)據(jù)技術專業(yè)學生為研究對象,通過與阿里云和慧科集團進行校企合作,提出了大數(shù)據(jù)專業(yè)創(chuàng)新實踐教學平臺的建設思路,對實踐平臺中的智慧教室和智慧學習管理系統(tǒng)進行了闡述,為培養(yǎng)大數(shù)據(jù)人才提供創(chuàng)新實踐教學平臺。
關鍵詞:新工科;大數(shù)據(jù);校企合作;實踐教學平臺
1引言
國家十三五規(guī)劃綱要中明確提出:“實施國家大數(shù)據(jù)戰(zhàn)略,推進數(shù)據(jù)資源開放共享”。在這樣的契機下,大數(shù)據(jù)領域必將迎來建設高峰和投資良機,而推動大數(shù)據(jù)發(fā)展不僅依靠國家戰(zhàn)略與相關政策的支持,更需要大數(shù)據(jù)相關人才的支撐。截至2019年,在教育部每年度公布的高校新增數(shù)據(jù)科學與大數(shù)據(jù)技術專業(yè)名單中,2015年度首次獲批3所,2016年度獲批32所,2017年度獲批248所,2018年度獲批203所,共計486所[1]。該專業(yè)今后會有大量畢業(yè)生涌入市場,為市場需求填補人才空白。教育部于2017年提出了以實施“卓越工程師教育培養(yǎng)計劃2.0版”為抓手,把握工科的新要求、加快建設發(fā)展新興工科的號召[2]。與此同時,工業(yè)和信息化部近年來為推動我國制造業(yè)轉型升級和重塑國際競爭新優(yōu)勢,相繼實施了推動互聯(lián)網(wǎng)+、大數(shù)據(jù)產(chǎn)業(yè)發(fā)展等若干重大舉措,對信息技術人才培養(yǎng)也提出了新的需求。為積極響應教育部和工信部的號召,本文立足產(chǎn)業(yè)發(fā)展對大數(shù)據(jù)技術新工科人才的需要,積極探索大數(shù)據(jù)創(chuàng)新實踐教學平臺的建設,助力加快大數(shù)據(jù)技術領域的新工科建設,促進大數(shù)據(jù)技術人才的培養(yǎng)[3]。大數(shù)據(jù)專業(yè)創(chuàng)新實踐教學平臺是實踐教學的重要組成部分[4]。它是支撐大數(shù)據(jù)人才培養(yǎng)的重要平臺,是支撐大數(shù)據(jù)學院校企聯(lián)合共建特色特點構建的核心,是大數(shù)據(jù)學院賦能學校和社會的共享平臺。創(chuàng)新實踐教學平臺的建設對支撐大數(shù)據(jù)專業(yè)人才培養(yǎng)、探索適合本校師生的混合式教學模式、構建具備創(chuàng)新精神的學習氛圍、促進教師水平整體提升具有重要的探索價值[5]。
2創(chuàng)新實踐學習智慧教室建設
智慧教室包括集翻轉課堂、實時直播、在線互動、移動學習、學習行為追蹤等多種功能為一體,導入行業(yè)前沿的應用技術及最佳實踐案例,采用新興教育技術手段打造云生態(tài)教育環(huán)境解決方案,為大數(shù)據(jù)人才培養(yǎng)帶來無限可能的未來實驗室。智慧教室主要包括以下幾個功能:(1)無線覆蓋。教師和學生可以在教室里下載或者上傳資源,進行云上實驗。以公有云的方式為教學提供服務,云端系統(tǒng)擁有全媒體學習行為跟蹤在線教學系統(tǒng)、前沿科技領域的在線課程體系。彈性的公有云計算服務支持大數(shù)據(jù)相關課程的實驗教學。(2)高清視頻。教師可以播放高保真視頻以及教學內容,方便學生對實驗有一個更加清晰直觀的認識。(3)互動直播。通過遠程視頻雙向互動系統(tǒng)模塊套裝,可以實現(xiàn)實時直播。教師和學生雙方可以進行現(xiàn)場互動,逼近真實的課堂,猶如優(yōu)秀名師在現(xiàn)場實施教學。(4)座位靈活。通過教室里靈活多變的布線,可以靈活機動地安排實訓、討論、練習等實驗室教學安排,以便在功能性上對教室的布局進行調整。比如,教室的桌椅不僅可以拼接成傳統(tǒng)的四邊形上課形式,方便教師在講臺上傳授知識;還可以拼接成六邊形上課形式,方便學生成組討論。
企業(yè)安全大數(shù)據(jù)平臺建設及實現(xiàn)
在不同的領域以及不同的時期,人們對于信息安全也具有不一樣的認識,并且在對于安全問題的解決上仍然存在著一定的側重面的差異性。因此需要借助于大數(shù)據(jù)技術,整合安全系統(tǒng)的安全信息進行關聯(lián)分析以及威脅建模,從而將其計算提速,把有效的信息從大量的日志告警的信息之中發(fā)現(xiàn),將其脆弱性以及安全的威脅進行定位,并且還需要將安全的場景模型進行設計,強化針對業(yè)務的安全威脅監(jiān)控,實現(xiàn)俯瞰企業(yè)安全狀況的安全全景視圖。
一、企業(yè)大數(shù)據(jù)平臺建設的目的與意義
現(xiàn)如今,企業(yè)業(yè)務的不斷發(fā)展,已經(jīng)漸漸地向著采集方式、數(shù)據(jù)源的分布化、多樣化以及碎片化趨勢發(fā)展,采集分析系統(tǒng)中的條塊化分析將安全分析限制,將系統(tǒng)的分析效能嚴重的降低,因此數(shù)據(jù)采集分析的架構亟需優(yōu)化,以便快速提取數(shù)據(jù)的應用價值。企業(yè)安全大數(shù)據(jù)的建設目標是基于大數(shù)據(jù)技術,實現(xiàn)對應用系統(tǒng)操作日志(4A日志)、各類設備的安全事件日志(SMP日志)、業(yè)務系統(tǒng)流量數(shù)據(jù)等安全數(shù)據(jù)的采集、存儲與管理的統(tǒng)一處理,實現(xiàn)4A、SMP、業(yè)務系統(tǒng)日志分析及報表功能的無縫遷移與性能大幅優(yōu)化,進一步實現(xiàn)針對風險、事件等高維度的全新分析模型與技術,提供完整高效的進行安全事件的溯源和處理手段。
二、安全大數(shù)據(jù)平臺設計與實現(xiàn)
1、安全大數(shù)據(jù)平臺框架。通過大數(shù)據(jù)分析技術實現(xiàn)對企業(yè)網(wǎng)絡與信息安全指標呈現(xiàn)、安全預測/預警以及事件分析體系的研究。安全大數(shù)據(jù)的總體框架包含統(tǒng)一采集、數(shù)據(jù)處理、搜索引擎、挖掘分析和統(tǒng)一展示等模塊。2、安全數(shù)據(jù)的集中采集。安全大數(shù)據(jù)平臺采用大數(shù)據(jù)集中采集方式收集各類日志數(shù)據(jù),日志采集主要分為4A審計日志、SMP日志、業(yè)務流量日志,實現(xiàn)由目前各系統(tǒng)獨立采集向集中化大數(shù)據(jù)架構的轉換。3、業(yè)務系統(tǒng)旁路流量采集。業(yè)務系統(tǒng)旁路流量采集主要是以網(wǎng)絡鏡像流量的方式采集業(yè)務系統(tǒng)流量,根據(jù)http協(xié)議分析、過濾、格式化以及補全操作,分析出需要的數(shù)據(jù)提交給上層數(shù)據(jù)存儲中,為業(yè)務安全模型分析提供數(shù)據(jù)基礎。4、業(yè)務安全模型分析。1、異常登錄行為分析,分析登錄日志建立模型,其特征審計模型包括維度包括:非法密碼猜解、使用程序賬號登錄、異常IP地址登錄、非正常時段登錄、維護人員共享賬號、離職人員工號非法盜用等行為進行審計分析,及時發(fā)現(xiàn)運維人員的違規(guī)操作。2、人員違規(guī)操作監(jiān)控分析,關聯(lián)登錄日志、操作日志建立正常的人員行為特征模型:(1)學習建模;(2)冗余范圍建立:標準模型*1.2范圍;(3)根據(jù)模型的的規(guī)律,及時營業(yè)員的違規(guī)操作5、系統(tǒng)安全事件分析。針對安全事件發(fā)生時研究范圍中系統(tǒng)狀態(tài)進行分析,分析不同安全事件時各系統(tǒng)運行狀態(tài)與正常情況下差異。能夠提供每個信息安全資產(chǎn)的安全態(tài)勢,動態(tài)圖表的形式展示,訪問量趨勢圖、攻擊走勢圖等可視化圖,能夠對攻擊進行溯源分析,能夠分析攻擊的影響范圍,并能夠提供安全預警。6、安全趨勢預測。對研究范圍內業(yè)務系統(tǒng)的安全數(shù)據(jù)進行統(tǒng)一采集整理、從多個維度綜合分析,提升整體的預警能力,為系統(tǒng)安全預警與安全事件體系研究做出依據(jù)。同時對業(yè)務安全和系統(tǒng)安全所面臨的安全風險定制化模型分析的結果進行安全量化指標排名,進一步將安全風險做到可度量、可視化的動態(tài)展示。
三、實現(xiàn)和應用效果
地方科技管理大數(shù)據(jù)平臺建設研究
1地方科技管理大數(shù)據(jù)的內涵與國內研究現(xiàn)狀
1.1地方科技管理大數(shù)據(jù)的內涵。本文所指科技管理主要是科學技術研發(fā)與應用的過程管理。傳統(tǒng)的地方科技管理數(shù)據(jù)是與科技管理相關各類數(shù)據(jù)集合,包括科技項目、研發(fā)機構、科研成果、專家、企業(yè)(高新型或科技型)、財政投入、政策法規(guī)等信息。從大數(shù)據(jù)概念上講,傳統(tǒng)的地方科技管理數(shù)據(jù)體量有限,類別也很難稱為復雜,而且大多數(shù)屬于關系型數(shù)據(jù),無論是項目還是論文、專利、成果,價值密度都比較高,這些特點都不符合大數(shù)據(jù)的特征[6]。本文認為,如果運用大數(shù)據(jù)思維去分析,地方科技管理涉及的人力、物力、財力資源最終都會以數(shù)據(jù)的形式存儲、整合,這些數(shù)據(jù)分散于長期積累的各類電子政務系統(tǒng)、科技管理信息系統(tǒng)及其他業(yè)務系統(tǒng)中,如能將這些系統(tǒng)的數(shù)據(jù)整合與互聯(lián)網(wǎng)實時數(shù)據(jù)進一步擴展,此時的地方科技管理數(shù)據(jù)無論是體量還是類型復雜度、數(shù)據(jù)價值密度都將接近大數(shù)據(jù)特征。如傳統(tǒng)的專家?guī)彀男畔⑾鄬τ邢蓿绻尤雽<耶嬒窦夹g,通過收集專家的項目、成果、專利、論文、合作關系、同行評價、社交媒體引用熱度等,對一位專家的綜合評價就會更加準確。同樣的,單純的科技計劃項目數(shù)據(jù)難以稱為大數(shù)據(jù),如果按照國務院辦公廳《關于印發(fā)科學數(shù)據(jù)管理辦法的通知》(國辦發(fā)[2018]17號)規(guī)定的,將每個項目涉及的科學數(shù)據(jù)與項目進行匹配,綜合財政提供的項目資金使用情況、項目中期檢查情況、財務預算及開支情況等信息,再輔以科技報告、科技成果登記等文獻資源,將在項目立項、評審專家遴選、項目實施過程管理、項目驗收及成果共享等科技管理流程發(fā)揮重要作用。1.2地方科技管理大數(shù)據(jù)的國內研究現(xiàn)狀。在大數(shù)據(jù)與科技管理的理論研究方面,喬曉東等[7]提出科技大數(shù)據(jù)概念,分為科技知識大數(shù)據(jù)與科技活動大數(shù)據(jù),分別對應文獻類資源和科技活動中的實體及其關系之間的數(shù)據(jù),進而提出一種包括資源發(fā)現(xiàn)、網(wǎng)絡檢測采集、科研分析評價、科技情報服務等綜合科技管理的大數(shù)據(jù)服務體系;袁偉等[8]從科技資源的挖掘與利用角度,提出借助大數(shù)據(jù)管理方法與模式對科技資源數(shù)據(jù)進行標準化整合匯聚,面向科技創(chuàng)新發(fā)展與管理決策需求深度挖掘與利用科技資源數(shù)據(jù)的對策建議;徐迪威[9]對大數(shù)據(jù)與科技管理的關系進行研究,提出基于大數(shù)據(jù)的科技管理存儲層、處理層、應用層的層次體系。在大數(shù)據(jù)與科技管理的實際應用方面,北京市科學技術委員會提出打造“首都科技大數(shù)據(jù)平臺”的口號,整合分散于各政府部門、科研機構等單位的科技資源并向社會數(shù)據(jù)需求方開放[10];貴州省借助“云上貴州”建設,提出“科技云”這一科技數(shù)據(jù)資源開發(fā)與利用的新范式[11];上海市研發(fā)公共服務平臺整合專家人才、大型儀器、科技文獻、研發(fā)基地等科技創(chuàng)新數(shù)據(jù)資源,建成“上??萍紕?chuàng)新資源數(shù)據(jù)中心”[12];“內蒙古科技創(chuàng)新大數(shù)據(jù)平臺”分類實現(xiàn)服務云、管理云、數(shù)據(jù)云,實現(xiàn)“一站式”創(chuàng)新資源平臺服務[13]。
2地方科技管理大數(shù)據(jù)建設的現(xiàn)存問題
由于我國大數(shù)據(jù)環(huán)境下的科技管理研究尚處于起步階段,雖取得一定成果,但還存在以下問題。2.1缺少成體系的理論研究支撐。以科技管理為主題的大數(shù)據(jù)建設研究,公開的文獻報道多以平臺搭建、數(shù)據(jù)中心建設為主;對科技管理數(shù)據(jù)資源整合的標準,跨體系各分散系統(tǒng)的科技管理數(shù)據(jù)如何匯交,科技管理大數(shù)據(jù)平臺的基礎模型如何構建,社交媒體等互聯(lián)網(wǎng)數(shù)據(jù)如何融入科技管理,以及平臺安全保障及運行維護模式等方面的深入研究不多;同時,雖然對大數(shù)據(jù)技術在科技管理某些環(huán)節(jié)的應用開展了研究,但對于科技管理整體過程的體系化研究不夠全面,未能覆蓋科技管理的各個環(huán)節(jié),如針對應用大數(shù)據(jù)優(yōu)化科技管理的關鍵決策環(huán)節(jié)、優(yōu)化科技管理公共服務模式等問題,缺少相關理論研究。2.2平臺重建設,輕服務。在科技管理領域,各地都紛紛開展各自的大數(shù)據(jù)平臺建設,如“首都科技大數(shù)據(jù)平臺”“內蒙古科技創(chuàng)新大數(shù)據(jù)平臺”“貴州科技云”“青島科技大數(shù)據(jù)平臺”“上??萍紕?chuàng)新資源數(shù)據(jù)中心”等,重點多在于基礎環(huán)境建設及平臺搭建,在服務內容方面,大部分停留在信息整合、數(shù)據(jù)初步分析等粗加工服務模式[14]。“上??萍紕?chuàng)新資源數(shù)據(jù)中心”提供以各類情報分析產(chǎn)品為代表的科技管理數(shù)據(jù)精加工服務,而在時下熱門的精準化定制及智能決策支撐等創(chuàng)新服務模式方面未見過多涉及。2.3缺少特色數(shù)據(jù),數(shù)據(jù)應用能力較弱。已有研究成果在研究或實現(xiàn)科技管理大數(shù)據(jù)時,多將專利、期刊論文、成果等科技文獻元數(shù)據(jù)作為大數(shù)據(jù)的主要來源,雖然在一定程度上保證了科技管理大數(shù)據(jù)的體量,但缺少深度挖掘(如基于科技文獻的專家畫像、科研合作關系發(fā)現(xiàn)、專家及人才評價等),也缺少特色的科技管理數(shù)據(jù)(如項目管理過程數(shù)據(jù)、科技成果登記數(shù)據(jù)、財政支付財務數(shù)據(jù)等),最終實現(xiàn)的科技管理服務僅是常規(guī)科技管理的信息化展示。除此之外,各大數(shù)據(jù)平臺提供的數(shù)據(jù)開放、創(chuàng)新輔助等公共服務能力較弱,社會公眾對科技管理大數(shù)據(jù)的獲取及應用熱情不高,影響平臺的社會價值。2.4存在數(shù)據(jù)主權爭議、涉密數(shù)據(jù)安全難以保障。由于科技管理業(yè)務的條塊化分割及其他方面的原因,大多數(shù)數(shù)據(jù)處于碎片化存儲階段,各省很難有同一機構保存科技管理的全部或者大多數(shù)原始數(shù)據(jù),也很難在所有權層面實現(xiàn)科技資源的重新整合。雖然有學者提出“科技云”這一概念,以期在資源供給層面減少科技信息資源服務的復雜性,但實際操作中總在一些技術層面存在無法逾越的壁壘,需要通過研究相關理論、制定相關政策法律等以保障實施??萍脊芾聿块T并非不愿意主動開放科技管理大數(shù)據(jù)平臺,很大一部分原因是地方科技管理部門對科技管理數(shù)據(jù)的研究并不充分,對相關數(shù)據(jù)哪些可以公開、哪些包含隱私信息、是否涉密等問題,缺少專門機構梳理和研究,在一定程度上影響了科技管理數(shù)據(jù)的有效利用。2.5缺少專業(yè)化人才團隊。科技管理大數(shù)據(jù)建設不僅需要數(shù)據(jù)科學、軟件開發(fā)等方面的技術人才,也需要相關政策理論研究人員、科研管理人員參與其中,缺少復合型的專業(yè)化人才團隊已成為地方科技管理部門開展大數(shù)據(jù)平臺建設遇到的突出問題之一,管理決策部門還停留在經(jīng)驗決策階段并不擅長應用大數(shù)據(jù)環(huán)境下的分析,數(shù)據(jù)分析部門并不了解底層數(shù)據(jù)邏輯無法有效建模,平臺開發(fā)人員不理解科技管理業(yè)務邏輯無法有效設計并開發(fā)數(shù)據(jù)模型及業(yè)務系統(tǒng)接口,科研管理人員對科技管理大數(shù)據(jù)應用的需求也很難轉化為大數(shù)據(jù)平臺開發(fā)者需要的模型。
3地方科技管理大數(shù)據(jù)平臺模型及服務模式實例
在科技管理大數(shù)據(jù)平臺建設方面,已開展了一些共性方面的研究,比較一致的做法是將科技管理大數(shù)據(jù)平臺按科技管理服務內容劃分為若干子平臺。如許秀梅[15]提出的基礎條件子平臺、科技研發(fā)服務子平臺、成果轉化與交易子平臺、產(chǎn)業(yè)科技大數(shù)據(jù)服務平臺;李歡[16]提出的科技戰(zhàn)略子平臺、技術產(chǎn)業(yè)化平臺、科技研發(fā)子平臺等。這些平臺構建模型,根據(jù)科技管理各項業(yè)務進行劃分,是對現(xiàn)有科技管理體系的改良,將原先分散在各個不同機構的科技管理業(yè)務整合到一個平臺上,從而解決原先各個科技管理業(yè)務系統(tǒng)間相互關聯(lián)性不足的問題。2017年,安徽省科學技術情報研究所提出“十三五”期間要建成“一個智庫、一個中心、一個服務基地”,其中“一個中心”即建成科技管理大數(shù)據(jù)中心。本文以此為實例探討科技管理大數(shù)據(jù)平臺建設實踐問題。3.1數(shù)據(jù)融合策略。通過安徽省科技管理大數(shù)據(jù)平臺建設項目實踐,本文提出科技管理大數(shù)據(jù)整合的策略:一是盡可能升級系統(tǒng),拓展數(shù)據(jù)接口,互通互享公開信息;二是某個機構承接科技管理數(shù)據(jù)的使用權;三是通過制定統(tǒng)一的數(shù)據(jù)匯交標準、數(shù)據(jù)匯交管理辦法等搜集科技管理數(shù)據(jù);四是必須與有知識產(chǎn)權的數(shù)據(jù)商合作。通過上述策略,實現(xiàn)從離散數(shù)據(jù)到大數(shù)據(jù),從大數(shù)據(jù)到大情報,從大情報到大決策的轉變。在大數(shù)據(jù)管理及數(shù)據(jù)融合方面,采取行政手段與數(shù)據(jù)交換相結合的方式,一是將原有安徽省科技管理信息系統(tǒng)升級,并預留與其他業(yè)務系統(tǒng)的接口,如安徽省政務服務系統(tǒng)、科技文獻服務平臺、科技成果登記系統(tǒng)、科技報告服務系統(tǒng)、成果獎勵系統(tǒng)、各類科技統(tǒng)計系統(tǒng)、財政支付平臺等;二是將不適宜重構的其他科技管理大數(shù)據(jù)相關業(yè)務系統(tǒng)的業(yè)務、管理與后臺支撐分離,不影響業(yè)務的開展,同時將數(shù)據(jù)的使用權集中于一個機構;三是對于極少部分存在數(shù)據(jù)主權爭議的系統(tǒng),通過行政手段制定數(shù)據(jù)交換制度,雖然在一定程度上影響了數(shù)據(jù)的時效,但保證了科技管理大數(shù)據(jù)的完整性;四是采購專業(yè)數(shù)據(jù)商的可信社交媒體數(shù)據(jù),并與專業(yè)數(shù)據(jù)商合作,開展全部科技管理大數(shù)據(jù)整合加工工作。3.2平臺模型與服務模式。在盡可能獲取科技管理相關大數(shù)據(jù)的基礎上,借鑒吳信東等[17]提出的“從大數(shù)據(jù)到大知識”的HACE+BigKE模型,提出安徽省科技管理大數(shù)據(jù)平臺數(shù)據(jù)融合框架及平臺整體架構(見圖1)。該模型主要展現(xiàn)地方科技管理大數(shù)據(jù)池的數(shù)據(jù)來源,包括科技計劃項目、科技成果登記、科技統(tǒng)計數(shù)據(jù)、地方專家?guī)?、專利信息服務及科技成果獎勵等;單位自建的科技文獻平臺及可交換數(shù)據(jù)的大型儀器共享平臺等;采購來自專業(yè)數(shù)據(jù)商的社交媒體數(shù)據(jù)。同時,該模型還實現(xiàn)了安徽省科技管理大數(shù)據(jù)平臺主體架構。數(shù)據(jù)池外層是各項數(shù)據(jù)挖掘算法,如最基礎的中文分詞系統(tǒng),專家畫像所需的聚類及關聯(lián)規(guī)則算法,項目評審所需的基于深度學習的專家推薦系統(tǒng),成果轉化推薦所需的協(xié)同過濾算法等。最外層是整個科技管理大數(shù)據(jù)的統(tǒng)一服務平臺,對外主要分為四大類服務,即面向社會公眾的開放數(shù)據(jù)服務、基礎條件服務、統(tǒng)計分析服務等,面向宏觀科技管理決策的深度分析與情報支撐服務,面向科技研發(fā)的嵌入式信息服務,面向成果產(chǎn)業(yè)化的技術轉移與成果推介服務等。同時,還需要有移動App及微信小程序等移動端服務的支撐,以適應當前用戶的使用習慣。本文以面向科技研發(fā)的嵌入式信息服務為例,說明地方科技管理大數(shù)據(jù)平臺如何嵌入科研項目流程,提供面向科技研發(fā)的嵌入式信息服務(見圖2)。面向科技研發(fā)的嵌入式信息服務需要結合創(chuàng)新主體的科技研發(fā)需求,主動對接、參與重大科研項目的研發(fā)活動,體現(xiàn)對重大科研項目的支撐作用,主要實現(xiàn)科技文獻輔助、專利分析支持、創(chuàng)新資訊檢索、文獻資源檢索、科技政策咨詢、技術難題找專家或團隊等業(yè)務功能,實現(xiàn)以科技項目研發(fā)活動為中心,嵌入科技研發(fā)鏈各個環(huán)節(jié),面向重大科研項目的精準化、鏈條化信息服務模式。
高職公共數(shù)據(jù)平臺安全建設分析
摘要:伴隨著社會的不斷進步,高等職業(yè)院校的教育也在不斷的改革以及提升,有關的教育部門對公平數(shù)平臺的安全建設越來越重視。對于高職院校來說,公平數(shù)據(jù)有著能夠把院校日常管理進行有效的推動,與此同時,高職院校也將其作為人才培養(yǎng)的重要設施。把公共數(shù)據(jù)平臺進行合理的利用,在問題查找的時候可以更加的快速,把高職院校的特點以及有點給戰(zhàn)士了出來,在校園的日常事務管理當中也起到了很好的效果,現(xiàn)在的高職院校在進行建設公共數(shù)據(jù)平臺的時候會發(fā)現(xiàn)一些問題,每個子系統(tǒng)里面的數(shù)據(jù)沒有辦法進行共享,這個問題的出現(xiàn)給公共數(shù)據(jù)平臺帶來了極大的危險,需要將科學的管理方法融入其中,讓每個子系統(tǒng)可以無間隙的融合。通過對高職院校公共數(shù)據(jù)平臺安全建設進行分析,希望能夠將高職院的信息數(shù)據(jù)安全能夠安全的發(fā)展。
關鍵詞:高職院校;公共數(shù)據(jù)平臺;安全建設;分析
現(xiàn)在的市場經(jīng)濟的發(fā)展速度愈發(fā)的快速,國家對高等職業(yè)教育的發(fā)展也重視起來,并提出了相關的戰(zhàn)略計劃,讓高職院校的發(fā)展能夠更加的迅速,近幾年,高職院校的規(guī)模在全國都在一直的擴大,為了促進高職院校的發(fā)展,高職院校的教學體系以及安全管理正慢慢的完善起來,但還是有一些高職院校的相關水平達不到維持發(fā)展的要求,需要根據(jù)院校自身的情況來把業(yè)務進行拓展,讓每個業(yè)務可以結合起來組合成一個完善以及安全的公共數(shù)據(jù)平臺,只有通過這樣的手段才可以把每個業(yè)務之間的信息進行共享,把院校的教學質量和教學生平提高起來。在把數(shù)量比較大的信息數(shù)據(jù)資源進行整理的時候,需要把信息資源的優(yōu)勢給整理出來,讓他們的優(yōu)勢發(fā)揮出來。高職院校在進行公共數(shù)據(jù)平臺建設的時候,會被業(yè)界各方討論,教育部在這方面需要對高職院校進行傳統(tǒng)觀念的改變,將意識轉變過來,把公共數(shù)據(jù)平臺的安全建設融入進高職院校當中,把院校的信息管理不斷的更新、完善,把公共數(shù)據(jù)平臺安全建設進行加強,這樣才可以把高職院校的教學水平給提高起來[1]。
1建設高職院校的公共數(shù)據(jù)平臺的重要性
1.1公共數(shù)據(jù)平臺可以為高職院校提供相關的信息依據(jù)公共數(shù)據(jù)平臺的建設需要把教育部門所的文件以及評估的標準用來進行參考,所以公共數(shù)據(jù)平臺和我們國家的教育改革發(fā)展有相同的方向,在進行公共數(shù)據(jù)平臺建設的時候,可把高職院校的教育重點工作給體現(xiàn)出來,還可以體現(xiàn)出教育改革和發(fā)展方向的重要性。在進行制定公共數(shù)據(jù)平臺的時候,可以從中挖取出高職院校的特點和人才培養(yǎng)的方向,這也可以把高職院校的基礎信息以及社會的響應力給體現(xiàn)出來[2]。1.2公共數(shù)據(jù)平臺可以把數(shù)據(jù)信息進行整合。高職院校在李彤公共數(shù)據(jù)平臺的時候,用的主要方法是分析統(tǒng)計法,把院校里面的各種信息數(shù)據(jù)整理起來,然后通過轉換變成院校希望得到的信息數(shù)據(jù),把這些數(shù)據(jù)用過傳輸?shù)氖侄屋斔偷矫總€子系統(tǒng)里面,或者就在平臺上進行評價,把數(shù)據(jù)進行分類變成單獨的數(shù)據(jù)串,通過數(shù)據(jù)的手段來對數(shù)據(jù)串上的信息進行即使的補充,把每個數(shù)據(jù)鏈進行相關的對比分析,可以把高職院的年度工作都城貨以及院校的實力給分析出來,把分析出來的問題進行評價,為了院校以后的發(fā)展可以打下很好的基礎。1.3在高職院校中公共數(shù)據(jù)平臺可以起到很好的發(fā)展作用。高職院校的行政管理工作需要很多的決策,而準確以及安全的卻側所帶來的的使公共數(shù)據(jù)安全的有效數(shù)據(jù),只有公共安全平臺的數(shù)據(jù)準確了才可以在做出決策的時候有相關的依據(jù),這種循環(huán)是一直存在的。在高職院校當中的行政管理人員處理高職院校的日常事務的時候,不用再和以前一樣慢慢的進行每個系統(tǒng)的信息數(shù)據(jù)的考察,只要院校建立了公共數(shù)據(jù)平臺,就可以從中取得院校內的所有信息數(shù)據(jù),讓管理人員和做決策的人可以更加的準確以及安全進行相關的工作[3]。公共數(shù)據(jù)平臺的建立最初是為了進行培養(yǎng)人才、管理課程以及專業(yè)建設而創(chuàng)建的平臺,其最主要的目的還是為了將院校的教學質量進行提高,在進行公共數(shù)據(jù)平臺建設的時候,可以把社會的信息技術的了解,在高職院校的發(fā)展當中有著非常重要的地位。1.4高職院校的內部管理在公共數(shù)據(jù)平臺當中可以進行加強。把公共數(shù)據(jù)平臺建立可以讓高職院校中的教職人員可以十分方便以及快捷的進行信息資源的獲取,可以把高職院校里面的管理技術提高。高職院校的管理工作使用傳統(tǒng)的方法是需要由上級領導慢慢的傳遞到下層領導當中,這種傳遞的聯(lián)系方式會讓院校的日常處理工作十分的慢,在這種管理的過程當中,會導致一些信息的丟失,導致信息的傳達失誤,在公共數(shù)據(jù)平臺建立起來后,就不一樣了,可以把高職院校里面的管理進行加強,院校內的教職人員只需要在平臺當中進行信息的,把可以把相關的信息進行傳遞,讓層層傳遞的信息出現(xiàn)失誤的概率不在發(fā)生,從而把高職院校管理的效率提高起來[4]。
2高職院校內公共數(shù)據(jù)平臺建設的問題建議