• <input id="zdukh"></input>
  • <b id="zdukh"><bdo id="zdukh"></bdo></b>
      <b id="zdukh"><bdo id="zdukh"></bdo></b>
    1. <i id="zdukh"><bdo id="zdukh"></bdo></i>

      <wbr id="zdukh"><table id="zdukh"></table></wbr>

      1. <input id="zdukh"></input>
        <wbr id="zdukh"><ins id="zdukh"></ins></wbr>
        <sub id="zdukh"></sub>
        公務(wù)員期刊網(wǎng) 精選范文 大數(shù)據(jù)庫建設(shè)方案范文

        大數(shù)據(jù)庫建設(shè)方案精選(九篇)

        前言:一篇好文章的誕生,需要你不斷地搜集資料、整理思路,本站小編為你收集了豐富的大數(shù)據(jù)庫建設(shè)方案主題范文,僅供參考,歡迎閱讀并收藏。

        大數(shù)據(jù)庫建設(shè)方案

        第1篇:大數(shù)據(jù)庫建設(shè)方案范文

        關(guān)鍵詞:NoSQL 3.20工程 研判分析

        一、前言

        當(dāng)今世界是一個信息高速發(fā)展的時代,隨著網(wǎng)民參與互聯(lián)網(wǎng)產(chǎn)品和應(yīng)用的程度越來越深,互聯(lián)網(wǎng)將更加智能,互聯(lián)網(wǎng)的數(shù)據(jù)量也將呈爆炸式增長。可以預(yù)見公安行業(yè)信息化發(fā)展在未來幾年里,數(shù)據(jù)將以每年 30%到50%的速度爆炸式增長。

        在大數(shù)據(jù)時代下對系統(tǒng)又提出了新的需求:1、高并發(fā)讀寫的需求,高并發(fā)、實時動態(tài)獲取和更新數(shù)據(jù)。2、海量數(shù)據(jù)的高效率存儲和訪問的需求,類似SNS網(wǎng)站,海量用戶信息的高效率實時存儲和查詢。3、高可擴展性和高可用性的需求,需要擁有快速橫向擴展能力、提供7*24小時不間斷服務(wù)。

        物聯(lián)網(wǎng)發(fā)展和互聯(lián)網(wǎng)應(yīng)用帶來了多源海量數(shù)據(jù)的存貯、管理、處理、融合、整合和挖掘分析問題,傳統(tǒng)的關(guān)系數(shù)據(jù)庫管理系統(tǒng)(SQL數(shù)據(jù)庫管理系統(tǒng))已不能完全適應(yīng)這些海量數(shù)據(jù)的管理與計算要求,NoSQL數(shù)據(jù)庫管理系統(tǒng)應(yīng)運而生。NoSQL數(shù)據(jù)庫主要有鍵-值存貯(key-value stores)、 BigTable、文件存貯數(shù)據(jù)庫(document store databases)和圖形數(shù)據(jù)庫(graph databases)等類型,相關(guān)的數(shù)據(jù)庫軟件主要memcached, Redis, MongoDB, CouchDB, Apache Cassandra和HBase等等,都是開源的。

        NoSQL數(shù)據(jù)庫與傳統(tǒng)的關(guān)系數(shù)據(jù)庫管理系統(tǒng)相結(jié)合,為智慧城市數(shù)據(jù)管理提供整體解決方案,應(yīng)用NoSQL并不是全盤否定SQL數(shù)據(jù)庫,而應(yīng)該是NoJustSQL依賴于SQL。

        二、傳統(tǒng)數(shù)據(jù)庫在大數(shù)據(jù)處理中存在的問題

        傳統(tǒng)數(shù)據(jù)庫,主要指關(guān)系型數(shù)據(jù)庫,在長期的實踐中體現(xiàn)出性能好、穩(wěn)定性高等特點,在使用上也比較簡單,功能強大,在實際的數(shù)據(jù)庫工作和研究發(fā)揮了很好的作用。但關(guān)系數(shù)據(jù)庫在應(yīng)對大數(shù)據(jù)存在明顯的問題:

        1、分庫分表缺點:

        (1)受業(yè)務(wù)規(guī)則影響,需求變動導(dǎo)致分庫分表的維護復(fù)雜。

        (2)系統(tǒng)數(shù)據(jù)訪問層代碼需要修改。

        2、Master-Slave缺點:

        (1)Slave的實時性保障,在實時性要求很高的應(yīng)用中,可能需要進行相關(guān)處理。

        (2)在高可用性方面的問題,Master存在容易產(chǎn)生單點故障的致命弱點。

        3、 MMM缺點: 本身擴展性差,一次只能一個Master可以寫入,只能解決有限數(shù)據(jù)量下的可用性。

        三、NoSQL概念

        1、什么是NoSQL NoSQL是Not Only SQL的縮寫,而不是Not SQL,它不一定遵循傳統(tǒng)數(shù)據(jù)庫的一些基本要求,比如說遵循SQL標(biāo)準(zhǔn)、ACID屬性、表結(jié)構(gòu)等等。相比傳統(tǒng)數(shù)據(jù)庫,叫它分布式數(shù)據(jù)管理系統(tǒng)更貼切,數(shù)據(jù)存儲被簡化更靈活,重點被放在了分布式數(shù)據(jù)管理上。

        2、主流NoSQL數(shù)據(jù)庫--HBase簡介 HBase是Hadoop Database的簡稱,它是一個高可靠性、高性能、面向列、可伸縮的分布式存儲系統(tǒng),利用HBase技術(shù),可在廉價的PC Server上搭建起大規(guī)模、結(jié)構(gòu)化的存儲集群。

        HBase是由Google Bigtable的開源實現(xiàn),類似于Google Bigtable利用GFS作為其文件的存儲系統(tǒng),HBase利用Hadoop HDFS作為其文件的存儲系統(tǒng);Google是通過運行MapReduce來處理Bigtable中的海量數(shù)據(jù),HBase同樣是通過利用Hadoop MapReduce來處理HBase中的海量數(shù)據(jù)的;Google Bigtable利用 Chubby來作為協(xié)同服務(wù),HBase是利用Zookeeper來作為對應(yīng)的。

        四、NoSQL的特點分析

        1、NoSQL是易擴展的

        NoSQL數(shù)據(jù)庫的種類繁多,但是他們有一個共同的特點,就是去掉了傳統(tǒng)關(guān)系數(shù)據(jù)庫的“關(guān)系型”這一特性,所以NoSQL數(shù)據(jù)庫的數(shù)據(jù)之間是無“關(guān)系”的,這樣的數(shù)據(jù)庫就非常容易擴展,同時,在架構(gòu)的層面上也具有可擴展性,有多種NoSQL數(shù)據(jù)庫之間的整合能力。

        2、NoSQL是靈活的數(shù)據(jù)模型

        NoSQL數(shù)據(jù)庫不需要事先為要存儲的數(shù)據(jù)建立對應(yīng)的字段,隨時可以存儲自定義的數(shù)據(jù)格式。而在傳統(tǒng)的關(guān)系數(shù)據(jù)庫里,增刪字段是非常麻煩的,如果是大數(shù)據(jù)量的數(shù)據(jù)庫表,增加一個字段簡直是很麻煩的。

        3、NoSQL是高可用的

        NoSQL數(shù)據(jù)庫可以方便的實現(xiàn)高可用的架構(gòu),而且不太影響性能。比如Cassandra,HBase模型,就可以通過復(fù)制模型實現(xiàn)高可用。

        4、NoSQL是具有大數(shù)據(jù)量的處理能力,具有高性能的特點

        NoSQL數(shù)據(jù)庫都具有非常高的讀寫性能,尤其在大數(shù)據(jù)量下,這種讀寫能力體現(xiàn)更加突出,這得益于它的“無關(guān)系性”,數(shù)據(jù)庫的結(jié)構(gòu)簡單,NoSQL的 Cache是記錄級的,是一種細(xì)粒度的Cache,所以NoSQL在這個層面上來說就要性能高很多了。

        五、“3.20”工程海量數(shù)據(jù)分析應(yīng)用

        “3.20”工程是在江蘇省公安廳統(tǒng)一部署下開展的路面監(jiān)控建設(shè)工程,要求在市區(qū)主要道路每3公里記錄一次車輛軌跡,國道等城市道路每20公里記錄一次。

        由于“3.20”工程每天產(chǎn)生海量過車信息,數(shù)據(jù)總量大、日均增量大、占用存儲空間多,僅僅依靠Oracle關(guān)系數(shù)據(jù)庫技術(shù)的存儲建庫模式,已不能完全滿足實戰(zhàn)應(yīng)用的需求。對于傳統(tǒng)的關(guān)系數(shù)據(jù)庫來說,在一張幾百億條數(shù)據(jù)記錄的表里面進行SQL查詢,效率極其低下,用戶不可忍受。在傳統(tǒng)的關(guān)系數(shù)據(jù)庫系統(tǒng)中往往采用分庫、分表的策略進行數(shù)據(jù)存儲,這種方式使得單表的查詢效率得到提高。然而在能耗監(jiān)測系統(tǒng)中往往需要對全局?jǐn)?shù)據(jù)進行綜合統(tǒng)計查詢,往往涉及到幾十上百個表,查詢效率無法保證。

        這就需要在“大平臺”總體數(shù)據(jù)庫體系下,深入研究“大數(shù)據(jù)”應(yīng)用處理問題,引進HDFS分布式文件系統(tǒng),采用Hadoop架構(gòu)的NoSQL數(shù)據(jù)庫技術(shù),科學(xué)規(guī)劃設(shè)計數(shù)據(jù)存儲、傳輸、建庫的模式,滿足“3.20”工程車輛數(shù)據(jù)應(yīng)用需要。NoSQL數(shù)據(jù)庫采用“鍵-值”對的方式對數(shù)據(jù)進行存儲,該存儲方式是不需要固定的表結(jié)構(gòu)的,也就不存在連接操作,具體操作時效率就比較高。在大數(shù)據(jù)存取上具備關(guān)系型數(shù)據(jù)庫無法比擬的性能優(yōu)勢。

        Hadoop應(yīng)用場景

        基于Hadoop HDFS等分布式文件系統(tǒng)存儲結(jié)構(gòu),能夠有效解決海量數(shù)據(jù)快速讀寫的性能瓶頸問題,是開展“大數(shù)據(jù)”應(yīng)用訪問、統(tǒng)計分析很好的解決方案

        對于需要分析的大數(shù)據(jù),特別是對于日均增量達(dá)4000萬的過車信息數(shù)據(jù)等,采用NoSQL數(shù)據(jù)庫技術(shù),運用Hadoop的HDMS結(jié)構(gòu)方式進行存儲建庫,搭建多個“3.20”工程大數(shù)據(jù)專題庫,并利用MapReduce功能來進行數(shù)據(jù)分析,多臺機器組成集群進行并行計算,以此提升全省“3.20”工程大數(shù)據(jù)的處理和分析能力。

        在匯集整合全省道路監(jiān)控網(wǎng)“3.20”工程相關(guān)信息資源的基礎(chǔ)上,結(jié)合各警種業(yè)務(wù)部門實戰(zhàn)需求,充分利用“大數(shù)據(jù)”技術(shù),以人車案關(guān)聯(lián)分析為建設(shè)重點,實現(xiàn)全省一體化查詢服務(wù)、人車案關(guān)聯(lián)分析、重點車輛電子檔案、重點車輛積分預(yù)警、警務(wù)地理信息系統(tǒng)對接應(yīng)用、指揮調(diào)度系統(tǒng)對接應(yīng)用等功能,面向全省基層單位、專業(yè)部門、各級公安機關(guān)領(lǐng)導(dǎo)提供系統(tǒng)服務(wù),為開展深度研判應(yīng)用奠定基礎(chǔ)。

        參考文獻

        [1]黃富潔.公安決策支持系統(tǒng)的研究與設(shè)計[D].濟南:山東山東大學(xué),2004

        [2]張嵐.淺析數(shù)據(jù)庫技術(shù)的發(fā)展趨勢[J].信息與電腦(理論版).2012

        第2篇:大數(shù)據(jù)庫建設(shè)方案范文

        顛覆性改變

        由于醫(yī)院數(shù)據(jù)具有數(shù)據(jù)量總體偏小,并以結(jié)構(gòu)化數(shù)據(jù)為主,以及管理工具以O(shè)RACLE、SQLserver等數(shù)據(jù)庫管理系統(tǒng)為主等特點,使得醫(yī)院信息系統(tǒng)仍然以提高工作效率、提升精細(xì)管理和優(yōu)化診療流程為主,醫(yī)療質(zhì)量主要體現(xiàn)在對醫(yī)療過程的環(huán)節(jié)控制上,真正以提高診斷水平和診療技術(shù)為目的的信息系統(tǒng)還屈指可數(shù)。另外由于醫(yī)院管理總體上還比較粗放,對于這些有限的數(shù)據(jù)利用率也還不夠高,因此有人得出醫(yī)院沒有大數(shù)據(jù)的結(jié)論。

        但作者認(rèn)為盡管大數(shù)據(jù)目前在醫(yī)院還沒有得到充分應(yīng)用,卻已越來越表現(xiàn)出大數(shù)據(jù)的特征。首先區(qū)域醫(yī)療的發(fā)展使得一個地區(qū)的醫(yī)療數(shù)據(jù)完全達(dá)到PB級,即使是在醫(yī)院內(nèi)部,10多年的數(shù)據(jù)也接近乃至達(dá)到PB級。其次醫(yī)療數(shù)據(jù)越來越多樣化,臨床的深入應(yīng)用必然要采集包括數(shù)值、文字、影像、文本、語音等各種類型的診療數(shù)據(jù)。另外,云計算、移動互聯(lián)網(wǎng)、可穿戴設(shè)備、基因治療、大型影像設(shè)備的發(fā)展讓醫(yī)療領(lǐng)域快速積累了大量蘊含極大價值的診療數(shù)據(jù)。這些海量數(shù)據(jù)依靠原有的數(shù)據(jù)庫或數(shù)據(jù)倉庫技術(shù)已經(jīng)難以得到充分的利用,必須引入新的技術(shù)才能解決。

        利用這些“大數(shù)據(jù)”將對醫(yī)療服務(wù)模式產(chǎn)生巨大影響。首先在臨床決策支持上,通過全面分析同類型患者的體征數(shù)據(jù)和療效數(shù)據(jù),比較多種干預(yù)措施的有效性,找到最佳治療途徑。精確分析包括患者體征數(shù)據(jù)、費用數(shù)據(jù)和療效數(shù)據(jù)在內(nèi)的大型數(shù)據(jù)集,幫助醫(yī)生確定臨床上最有效和最具有成本效益的治療方法。

        利用規(guī)則和數(shù)據(jù)進行實時分析,給出藥物過敏重點人群、慢病患者等各類警示信息以及重復(fù)檢查檢驗提示,提醒醫(yī)生防止?jié)撛诘腻e誤,降低醫(yī)療事故率。對數(shù)據(jù)的深入分析和挖掘,能給醫(yī)生提供診療建議,從而提高工作效率和診療質(zhì)量。

        其次,基于海量的臨床和分子生物學(xué)數(shù)據(jù)、信息與知識的整合與分析,個性化醫(yī)療逐漸進入臨床實踐。通過高級算法和分布式計算加快基因測序計算效率,加速基因序列分析,讓疾病的發(fā)現(xiàn)過程變得更快、更容易和更便宜。根據(jù)基因信息,制定專門的疾病治療方案。考察遺傳變異對特定疾病的易感性和對特殊藥物的反應(yīng)的關(guān)系,針對不同患者采取不同的診療方案,提供個性化治療服務(wù)。

        另外,大數(shù)據(jù)分析技術(shù)對非結(jié)構(gòu)化數(shù)據(jù)的分析能力更加強大,以此可以發(fā)展智能化診療技術(shù)。比如可以使用圖像分析和識別技術(shù)識別醫(yī)療影像(X線、CT、MRI)數(shù)據(jù),或者挖掘醫(yī)療文獻數(shù)據(jù)建立醫(yī)療專家數(shù)據(jù)庫,從而通過操作計算機就基本可以對大部分常見病和多發(fā)病做出診斷。另外大數(shù)據(jù)分析、海量醫(yī)學(xué)影像檢查、三維重建技術(shù)和機器人手術(shù)等將顛覆手術(shù)模式,未來醫(yī)院的手術(shù)也許將按如下路徑展開:智能診斷->海量影像檢查->三維重建->手術(shù)導(dǎo)航->機器人手術(shù)。

        同時,大數(shù)據(jù)采集管理結(jié)合可視化技術(shù),可以有效提升醫(yī)療效率和質(zhì)量。如西雅圖兒童醫(yī)院的醫(yī)護人員通過使用iPad上的數(shù)據(jù)可視化和分析工具Tableau來分析遍布醫(yī)院各處的服務(wù)器和數(shù)據(jù)庫里的數(shù)億TB數(shù)據(jù),并以數(shù)據(jù)可視化方式展現(xiàn)數(shù)據(jù)之間的關(guān)系和趨勢。可視化數(shù)據(jù)分析不但幫助醫(yī)護人員減少醫(yī)療事故,制定臨床試驗計劃,而且還幫醫(yī)院節(jié)省了供應(yīng)鏈成本。

        此外,在健康管理和流行病檢測以及疾病預(yù)防方面,大數(shù)據(jù)也將大有作為。通過對健康傳感器采集的如睡眠質(zhì)量數(shù)據(jù)、日常活動數(shù)據(jù),以及大量公共衛(wèi)生和健康行為數(shù)據(jù),還有來自社交網(wǎng)絡(luò)上的各種相關(guān)數(shù)據(jù)進行關(guān)聯(lián)分析,提供一個可針對個人的健康行為分析平臺,協(xié)助將健康傳感器和移動數(shù)據(jù)轉(zhuǎn)換為個人健康建議和指導(dǎo)。

        另一方面,公共衛(wèi)生部門可以通過覆蓋全國的患者電子病歷數(shù)據(jù)庫,快速檢測傳染病,進行全面的疫情監(jiān)測,并通過集成疾病監(jiān)測和響應(yīng)程序,快速進行響應(yīng)。大數(shù)據(jù)幫助確定哪些人是某類疾病的易感人群,如應(yīng)用高級分析可以幫助識別哪些患者有患糖尿病的高風(fēng)險,使他們盡早接受預(yù)防性保健方案。這些方法也可以幫患者從已經(jīng)存在的疾病管理方案中找到最好的治療方案。

        總而言之,通過對大數(shù)據(jù)的深度挖掘利用,不僅能夠改變診療模式,還會使患者服務(wù)、決策方式和精細(xì)化管理等方面都發(fā)生質(zhì)的改變。

        積極應(yīng)對

        面對大數(shù)據(jù)帶來的機遇和挑戰(zhàn),作者認(rèn)為首先要轉(zhuǎn)變對大數(shù)據(jù)的態(tài)度。現(xiàn)在業(yè)內(nèi)對新技術(shù)往往存在不正確的認(rèn)識,一種是盲目追隨,不管是否符合實際,不管是否能夠產(chǎn)生效益,盲目引進新技術(shù),導(dǎo)致不必要的浪費;另一種是盲目拒絕,覺得大數(shù)據(jù)還很遙遠(yuǎn),高掛免戰(zhàn)牌。

        對待像大數(shù)據(jù)這類新技術(shù),一定要樹立大數(shù)據(jù)意識。首先要熱情擁抱,不要排斥,要跟進、學(xué)習(xí)和體驗,并思考大數(shù)據(jù)與行業(yè)的結(jié)合點,努力應(yīng)用創(chuàng)新。其次是要科學(xué)對待,思考并創(chuàng)新應(yīng)用新技術(shù)解決現(xiàn)實問題。

        之后,還要有效組織大數(shù)據(jù)。大數(shù)據(jù)不是憑空而來的,醫(yī)療大數(shù)據(jù)完全是在互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、云計算和可穿戴設(shè)備等深入應(yīng)用到醫(yī)療行業(yè)各個領(lǐng)域后聚集而來的,應(yīng)用大數(shù)據(jù)還必須學(xué)會有效組織大數(shù)據(jù)。醫(yī)療領(lǐng)域的信息系統(tǒng)不少還是離散的、垂直的業(yè)務(wù)和單一的應(yīng)用。通過云計算可以搭建一個扁平化的信息云平臺,在此之上可以把原來離散的信息系統(tǒng)整合起來,進而促進業(yè)務(wù)的有效協(xié)同。可以把離散在各個系統(tǒng)、各個機構(gòu)甚至各個醫(yī)療器械中的健康信息提取出來,形成完整的診療信息,從而形成完整的臨床診療數(shù)據(jù)中心。

        第3篇:大數(shù)據(jù)庫建設(shè)方案范文

        關(guān)鍵詞:大數(shù)據(jù);BIM系統(tǒng);基礎(chǔ)數(shù)據(jù);施工企業(yè)

        大數(shù)據(jù)時代,建筑行業(yè)無可回避。那么,大數(shù)據(jù)對建筑行業(yè)到底會帶來哪些影響呢?“大數(shù)據(jù)”的標(biāo)簽已經(jīng)開始引領(lǐng)建筑業(yè)。但“大數(shù)據(jù)”的真正含義是什么[1],它如何影響建筑行業(yè)?在最簡單的形式中,大數(shù)據(jù)是一個龐大而復(fù)雜的數(shù)據(jù)集的集合。管理數(shù)據(jù)的能力成為關(guān)鍵。許多建筑公司開始為業(yè)務(wù)和技術(shù)進行大數(shù)據(jù)定義,將大數(shù)據(jù)與BIM結(jié)合,管理與BIM相關(guān)的數(shù)據(jù)和其他協(xié)作流程[2]。

        大數(shù)據(jù)技術(shù)的戰(zhàn)略意義在于借助于專業(yè)軟件,對這些含有意義的數(shù)據(jù)進行專業(yè)化處理。提高對數(shù)據(jù)的“加工能力”,通過“加工”實現(xiàn)數(shù)據(jù)的“增值”。建筑行業(yè)是數(shù)據(jù)最多的行業(yè),但也是數(shù)據(jù)最不透明的行業(yè)。建筑行業(yè)中,掌握數(shù)據(jù)能力強的企業(yè),必然產(chǎn)生極大的競爭優(yōu)勢,并形成核心的競爭能力。那么,大數(shù)據(jù)時代,施工企業(yè)該如何構(gòu)建企業(yè)的基礎(chǔ)數(shù)據(jù)庫?企業(yè)基礎(chǔ)數(shù)據(jù)又該如何利用呢?

        1 建筑施工企業(yè)基礎(chǔ)數(shù)據(jù)定義

        施工企業(yè)在施工全過程中產(chǎn)生的資料,將其電子信息化后產(chǎn)生的數(shù)據(jù),就可以成為基礎(chǔ)數(shù)據(jù);基礎(chǔ)數(shù)據(jù)包括:預(yù)算數(shù)據(jù),建筑施工模型,企業(yè)定額,企業(yè)指標(biāo)庫、企業(yè)知識經(jīng)驗庫;其中,企業(yè)定額庫是企業(yè)所獨特的,通過設(shè)計階段的建筑實物模型得到的計劃量,根據(jù)各個企業(yè)的管理水平和技術(shù)力量不同,資源實際的消耗量也不一樣。施工過程中發(fā)生的人、材、機、稅、費、技術(shù)、消耗量、價格等,都屬于施工企業(yè)的基礎(chǔ)數(shù)據(jù)中的預(yù)算數(shù)據(jù)。對于施工企業(yè)來講,最核心的基礎(chǔ)數(shù)據(jù)就是企業(yè)定額。通過搜集、分析、歸納、反饋、再收集這一循環(huán)來制定一個企業(yè)的基礎(chǔ)數(shù)據(jù)庫;施工企業(yè)的基礎(chǔ)數(shù)據(jù)有很多種類:工程數(shù)據(jù)、企業(yè)消耗量指標(biāo)、價格庫、構(gòu)件庫等,只有工程項目本身的數(shù)據(jù)來源于設(shè)計,其它的數(shù)據(jù)另有解決方案來收集、處理、共享、應(yīng)用。

        2 基礎(chǔ)數(shù)據(jù)構(gòu)建基本條件

        2.1 共同平臺,相同規(guī)范

        上下層級協(xié)同歸集,創(chuàng)建一個共同開發(fā)的平臺;最好能有一個和清單計價規(guī)范一樣的整體分類;建筑企業(yè)基礎(chǔ)數(shù)據(jù)要在BIM平臺發(fā)揮使用價值,首先要歸集成大家認(rèn)可的企業(yè)定額庫、指標(biāo)庫等。平臺的構(gòu)建是關(guān)鍵,一定要由懂得施工流程與控制相關(guān)的專業(yè)人員和系統(tǒng)軟件建立數(shù)據(jù)庫。

        2.2 需求出發(fā),部門配合

        首先要從需求出發(fā),再分析自己的需求應(yīng)該來源于哪些數(shù)據(jù);由對應(yīng)的各部門提供,專門部門管理;基礎(chǔ)數(shù)據(jù)庫要開發(fā)對應(yīng)的應(yīng)用,讓數(shù)據(jù)流動起來。

        2.3 做好規(guī)劃,管理先行

        做好大數(shù)據(jù)規(guī)劃,信息細(xì)度的劃分等數(shù)據(jù)管理規(guī)范是基礎(chǔ)數(shù)據(jù)庫的基石。在管理手段上提出符合專業(yè)數(shù)據(jù)的要求;在技術(shù)手段上和云、BIM等先進系統(tǒng)軟件結(jié)合;在理念上基礎(chǔ)數(shù)據(jù)是需要的;在制度上規(guī)定必須用;在技術(shù)保障上推廣BIM等手段[3]。

        不同的建筑數(shù)據(jù)來源,必定對應(yīng)不同的管理出處和管理目標(biāo),整合是關(guān)鍵,但還要進行必要的區(qū)分和歸類;基礎(chǔ)數(shù)據(jù)協(xié)同、共享的基礎(chǔ)是數(shù)據(jù)的結(jié)構(gòu)化;建筑企業(yè)的目標(biāo)是將項目流程化,模塊化,規(guī)范化。這樣整理出的大數(shù)據(jù),才能為行業(yè)所用;建筑過程中發(fā)生的所有數(shù)據(jù),都要能自動化、低成本、高效率收集起來,并能將數(shù)據(jù)盡可能結(jié)構(gòu)化,并與行業(yè)業(yè)務(wù)系統(tǒng)對接,可隨時再利用,并可分享給全行業(yè)。

        3 目前存在的數(shù)據(jù)構(gòu)建難點

        3.1 數(shù)據(jù)難以收集

        建筑企業(yè)長期處于手工時代,基礎(chǔ)數(shù)據(jù)都存放于業(yè)務(wù)人員的大腦中。

        3.2 數(shù)據(jù)無法實現(xiàn)共享

        尤其是中小施工企業(yè),各職能部門的數(shù)據(jù),都是為自己部門服務(wù),沒有統(tǒng)一口徑的數(shù)據(jù);企業(yè)編碼不統(tǒng)一,建筑企業(yè)信息化數(shù)據(jù)難以共享,缺乏一個大的數(shù)據(jù)平臺。

        3.3 基礎(chǔ)數(shù)據(jù)庫對專業(yè)要求太高

        數(shù)據(jù)庫的專業(yè)化程度太高,非數(shù)據(jù)專家不能應(yīng)用;建立數(shù)據(jù)庫考驗企業(yè)人員的業(yè)務(wù)能力;基礎(chǔ)數(shù)據(jù)庫的創(chuàng)建與運維,考驗信息化部門的信息管理能力。最關(guān)鍵的問題是,建筑行業(yè)管理層次的困難,就是對這海量數(shù)據(jù)的掌控能力不夠,因此必須要借助BIM這樣的工具。同時基礎(chǔ)數(shù)據(jù)庫需要一個緩慢積累過程。

        4 BIM系統(tǒng)在基礎(chǔ)數(shù)據(jù)構(gòu)建方面的作用

        4.1 基礎(chǔ)數(shù)據(jù)提升管控力度,改善管理效率

        基于BIM的基礎(chǔ)數(shù)據(jù)庫,數(shù)據(jù)被處理后的信息,是支持決策的關(guān)鍵,可以派生管理所需的信息;數(shù)據(jù)的歸集主要是將數(shù)據(jù)結(jié)構(gòu)化,管控就是通過對結(jié)構(gòu)化數(shù)據(jù)的應(yīng)用,完成特定的任務(wù)與工作;基礎(chǔ)數(shù)據(jù)庫的建立實際是可以認(rèn)為是我們施工企業(yè)管理理念的更新,提升管理的效率。

        4.2 借助基礎(chǔ)數(shù)據(jù),提升經(jīng)濟價值

        基于BIM的基礎(chǔ)數(shù)據(jù)庫,為我們規(guī)范管理,帶來經(jīng)濟利潤的提高;基礎(chǔ)數(shù)據(jù)可以歸納、分析、提煉出一些KPI指標(biāo),應(yīng)用于企業(yè)內(nèi)部的考核和外部溝通;還能促進建筑工廠化建設(shè),減少耗材和浪費,控制人工支出等。

        4.3 實現(xiàn)數(shù)據(jù)共享,提升項目和企業(yè)協(xié)同能力

        輕松管理軟件資產(chǎn),過程數(shù)據(jù)留在企業(yè)數(shù)據(jù)服務(wù)器,不再擔(dān)心數(shù)據(jù)流失;工程問題照片實時收集和監(jiān)管處理;知識積累和共享、建立企業(yè)標(biāo)準(zhǔn):企業(yè)指標(biāo)庫、企業(yè)自動套、企業(yè)定額庫、企業(yè)構(gòu)件庫,讓企業(yè)中的每位員工都能成為行業(yè)專家,企業(yè)專家建設(shè),全公司員工共享,大幅提升團隊專業(yè)水平;共享、協(xié)同、應(yīng)用:輕松建立基于BIM的企業(yè)級項目基礎(chǔ)數(shù)據(jù)庫,實現(xiàn)BIM圖形數(shù)據(jù)、報表數(shù)據(jù)共享,實現(xiàn)產(chǎn)值統(tǒng)計、生產(chǎn)計劃、材料用量分析、成本分析等多項企業(yè)應(yīng)用。

        5 結(jié)束語

        大數(shù)據(jù)時代,BIM技術(shù)不僅在處理項目級的基礎(chǔ)數(shù)據(jù)方面發(fā)揮了作用,在支撐企業(yè)級海量數(shù)據(jù)方面,同樣具備強大的能力。建筑業(yè)項目管理主流模式至今還是以承包制為主,集約化運營難以做到。其根源就在于企業(yè)級數(shù)據(jù)集約化還無法實現(xiàn),但基于大數(shù)據(jù)時代的需求,借助于BIM的企業(yè)級項目管理系統(tǒng)的發(fā)展,解決這一問題將不再是難事。

        參考文獻

        [1]孟小峰,慈祥.大數(shù)據(jù)管理:概念,技術(shù)與挑戰(zhàn)[J].計算機研究與發(fā)展,2013,50(1):146-169.

        [2]侍干霞.建筑企業(yè)信息化建設(shè)[J].城市建設(shè)理論研究(電子版),2014(7).

        第4篇:大數(shù)據(jù)庫建設(shè)方案范文

        Gartner報告預(yù)計,2013年全球各大企業(yè)用于大數(shù)據(jù)業(yè)務(wù)的投資總額將增至340億美元,同比增長8倍;2013年年初IDC預(yù)測,大數(shù)據(jù)技術(shù)與服務(wù)市場將從2010年的32億美元攀升至2015年的169億美元,實現(xiàn)高達(dá)40%的年增長率,并將是整個IT與通信產(chǎn)業(yè)增長率的7倍。大數(shù)據(jù)的發(fā)展趨勢毋庸置疑。

        數(shù)據(jù)越發(fā)龐大,積累的商業(yè)信息越多,價值也就越大。以海量、多樣、快速為顯著特征的大數(shù)據(jù),不像傳統(tǒng)數(shù)據(jù)庫的數(shù)據(jù)那么易于管理和分析,在為整個IT及通信行業(yè)帶來機會的同時,也提出了更高的要求。大數(shù)據(jù)時代的戰(zhàn)略意義已超越如何掌握龐大的數(shù)據(jù)信息,而是實現(xiàn)對這些數(shù)據(jù)的深層挖掘,進而讓其“增值”。

        驅(qū)動大數(shù)據(jù)發(fā)展的重要因素主要來自兩個方面:一是消費領(lǐng)域,如網(wǎng)購及社交媒體應(yīng)用產(chǎn)生的大量數(shù)據(jù);另一方面來自城市基礎(chǔ)設(shè)施建設(shè),安防便是其中之一。建設(shè)平安城市的過程伴隨大量數(shù)據(jù)的產(chǎn)生,尤其是以視頻監(jiān)控為主要特征的數(shù)字安全監(jiān)控(Digital Security Surveillance, DSS)。我們所居住的城市中有無數(shù)的高清攝像頭,涉及治安監(jiān)控、指揮通信、偵查破案、規(guī)范執(zhí)法、社會服務(wù)等,視頻接入規(guī)模從幾千到幾十萬,隨著安防監(jiān)控對高清、智能、聯(lián)網(wǎng)的要求越來越高,每天產(chǎn)生的數(shù)據(jù)規(guī)模正以驚人的速度不斷增長。

        安防大數(shù)據(jù)

        從全省、市視頻監(jiān)控,交通卡口監(jiān)控,到運營商機房和基站的環(huán)境量監(jiān)控,原有的系統(tǒng)數(shù)據(jù)查詢越來越慢,寫入的數(shù)據(jù)越來越多,需要配置的存儲也越來越大,原先使用的關(guān)系型數(shù)據(jù)庫性能壓力激增,IO陷入瓶頸,不得不承認(rèn)安防領(lǐng)域的大數(shù)據(jù)時代已經(jīng)來臨。然而,一直以來,由于安防行業(yè)的自身業(yè)務(wù)特點以及國內(nèi)廠商受研發(fā)方向所限,大數(shù)據(jù)技術(shù)在安防領(lǐng)域并不如在IT、互聯(lián)網(wǎng)行業(yè)那樣得以深入應(yīng)用。隨著科技巨頭的入駐,這一市場格局正在發(fā)生巨變。

        基于安防的大數(shù)據(jù)同樣引起了計算機和服務(wù)巨頭IBM的注意。2012年10月,IBM了專為大數(shù)據(jù)處理打造的專家集成系統(tǒng)PureData,并和南京有關(guān)部門達(dá)成建設(shè)“智慧南京”的戰(zhàn)略合作,綜合應(yīng)用智慧交通、智慧醫(yī)療、智慧數(shù)據(jù)系統(tǒng),提高南京市民的生活水平。

        云計算解決方案供應(yīng)商浪潮緊隨其后,于同年年底宣布推出用于大規(guī)模部署的公共云數(shù)據(jù)中心——“模塊化數(shù)據(jù)中心”。 “數(shù)字安全監(jiān)控遠(yuǎn)非安裝幾個攝像頭那么簡單。除了捕獲數(shù)據(jù),還要從中充分挖掘新知,在此基礎(chǔ)上開發(fā)更多應(yīng)用。傳統(tǒng)安防廠商和IT廠商合作是未來的發(fā)展趨勢。安防廠商對業(yè)務(wù)的熟悉度與IT公司的大數(shù)據(jù)檢索和分析能力是絕佳的互補。”英特爾公司全球數(shù)字安全監(jiān)控市場總監(jiān)Todd Matsler如此評價。

        智能計算至關(guān)重要

        隨著政府部門大力推動“平安城市”、“和諧社會”建設(shè),各行各業(yè)對安防產(chǎn)品的需求全面爆發(fā)。金融、交通、政府等傳統(tǒng)領(lǐng)域的安防應(yīng)用更加深入,新生領(lǐng)域如教育、衛(wèi)生、體育、能源飛速發(fā)展,社區(qū)、居民相關(guān)應(yīng)用也在不斷升溫。根據(jù)《安防產(chǎn)業(yè)“十二五”規(guī)劃》所提到的目標(biāo),到“十二五”末期,安防產(chǎn)業(yè)規(guī)模將翻一倍,年均增長率達(dá)到20%左右,2015年總產(chǎn)值達(dá)到5000億元。從高端市場如軍隊、政府、司法、金融、交通、核電站、機場與港口,到中端市場如工業(yè)設(shè)施、教育、醫(yī)療,再到居民小區(qū)、零售店鋪、倉庫管理、物流等民用市場,安防需求將全面爆發(fā)。

        與此同時,安防行業(yè)在國內(nèi)的發(fā)展表現(xiàn)出一個重要特點,即由政府主導(dǎo)的大型項目推動,如智能交通系統(tǒng)。以視頻監(jiān)控為主要特征的數(shù)字安全監(jiān)控扮演著無可替代的重要角色,在城際間、城市中的各類設(shè)施及行業(yè)中不斷部署、滲透。隨著視頻監(jiān)控與IT、電信行業(yè)的聯(lián)系日益緊密,數(shù)字化、高清化、網(wǎng)絡(luò)化和智能化成為其發(fā)展方向。

        如何從前端攝像頭獲得的數(shù)據(jù)中挖掘出有用的信息,最終服務(wù)于智慧城市、智能交通?我們需要構(gòu)建一個復(fù)雜而精致的系統(tǒng),并考慮互聯(lián)性、安全性和可管理性。英特爾在構(gòu)建這個系統(tǒng)時,利用主動管理技術(shù)實現(xiàn)了設(shè)備之間的互聯(lián),并提出了分布式智能計算的構(gòu)想。后者包含三個重要概念,一是如何從瀚如煙海的數(shù)據(jù)中挖掘出對各行業(yè)有用的知識,二是保證基礎(chǔ)架構(gòu)及設(shè)備與設(shè)備間的數(shù)據(jù)流動,三是降低數(shù)據(jù)對來自于不同用戶或者不同系統(tǒng)的訪問障礙。”

        這套系統(tǒng)化解決方案,從數(shù)據(jù)獲取、存儲到分析及應(yīng)用各個層面均有覆蓋,包括軟件。這些基于IA架構(gòu)的技術(shù),不僅廣泛應(yīng)用于后端運算系統(tǒng)以及開發(fā)系統(tǒng),也在前端和邊緣設(shè)備中發(fā)揮著巨大作用,可以幫助設(shè)備開發(fā)商大幅縮短產(chǎn)品上市周期,降低開發(fā)成本,同時,其強大的計算能力以及基于互聯(lián)網(wǎng)應(yīng)用的開放平臺也將進一步促進安防行業(yè)的多樣化發(fā)展。

        而博康智能副總裁田廣表示,安防行業(yè)的數(shù)字化、高清化、網(wǎng)絡(luò)化和智能化轉(zhuǎn)變,也契合了國家的物聯(lián)網(wǎng)政策。數(shù)字安防監(jiān)控行業(yè)的現(xiàn)狀是缺乏標(biāo)準(zhǔn)卻要謀求大發(fā)展,這對企業(yè)產(chǎn)品兼容性、未來的可擴展性、產(chǎn)品性能、安全性以及穩(wěn)定性是個很大的挑戰(zhàn),需要企業(yè)在軟件、上層平臺等方面都有很強的規(guī)劃和實施能力。

        安防的可期未來

        全國政協(xié)委員、南京政協(xié)主席沈健就大數(shù)據(jù)時代政府的公共基礎(chǔ)建設(shè)需求這一主題曾說過:在大數(shù)據(jù)時代,政府要做的事情,第一應(yīng)該高度重視數(shù)據(jù)的采集和生成;第二做好數(shù)據(jù)的公開工作;第三,數(shù)據(jù)的整合;第四,建立我們的數(shù)據(jù)文化;第五,數(shù)據(jù)安全。這意味著在智慧城市的基礎(chǔ)建設(shè)中,大數(shù)據(jù)將承擔(dān)更多信息的挖掘和整合工作。

        當(dāng)數(shù)據(jù)全面實現(xiàn)聯(lián)網(wǎng)、共享,得到有效存儲,并予以充分分析和挖掘,安防領(lǐng)域的大數(shù)據(jù)時代將真正深化。那時警察可以輕松地搜索某一時段某一顏色或某一品牌汽車的所有視頻并快速識別違章行為;在沒有人為干擾的情況下,視頻監(jiān)控設(shè)備通過自動分析對動態(tài)場景中的目標(biāo)進行定位、識別和跟蹤,在異常情況發(fā)生時做出反應(yīng),進行自動報警;現(xiàn)在每年社會走失的老人、小孩成千上萬,開發(fā)“人員走失查詢系統(tǒng)”,聯(lián)網(wǎng)共享這些視頻資源,將為更多的老百姓服務(wù)……

        大數(shù)據(jù)究竟可以帶給安防一個怎樣的未來,我們拭目以待!

        -李育新

        LSI SAS力挺新型服務(wù)器

        LSI 公司日前宣布,其12Gb/s SAS存儲解決方案將用于100多款新型服務(wù)器,這些服務(wù)器均采用日前宣布的IntelXeon處理器E5-2600 v2產(chǎn)品系列。包括Asustek、Fujitsu、Gigabyte、Huawei、Intel、Supermicro等在內(nèi)的領(lǐng)先服務(wù)器制造商,均已選用LSI12Gb/s SAS和MegaRAID解決方案,為其新一代服務(wù)器平臺提供存儲性能加速和企業(yè)數(shù)據(jù)保護功能。

        LSI 12Gb/s SAS技術(shù)能將存儲I/O性能提升50%。Intel Xeon 處理器E5-2600 v2產(chǎn)品系列采用22nm工藝技術(shù),大幅降低了功耗,同時提升了性能。這樣的組合解決方案將為新一代服務(wù)器提供強大的平臺。

        今年,針對服務(wù)器和外部存儲OEM廠商,LSI宣布推出業(yè)界首批12Gb/s SAS 片上RAID(RAID-on-Chip)和I/O控制器。7月,LSI率先宣布向市場推出12Gb/s SAS主機總線適配器系列產(chǎn)品。

        自SAS誕生以來,LSI推出了眾多領(lǐng)先的產(chǎn)品。LSI SAS解決方案能提供同類最佳的SAS技術(shù),確保互操作性和統(tǒng)一的廠商支持,現(xiàn)已應(yīng)用于業(yè)界最廣泛的服務(wù)器平臺之上。

        昆騰改變數(shù)據(jù)存儲、共享和保護方式

        昆騰公司近日宣布正在與CommVault一同擴展其對象存儲產(chǎn)品,以便為數(shù)據(jù)中心融合備份與歸檔提供獨一無二的解決方案。這個經(jīng)過驗證的解決方案基于昆騰Lattus對象存儲技術(shù)以及CommVaultSimpana 10 軟件,能夠?qū)崿F(xiàn)全面數(shù)據(jù)保護和歸檔戰(zhàn)略,從而降低了主存儲成本并優(yōu)化了備份性能,同時在多 PT 級環(huán)境中最大程度降低了管理復(fù)雜性、管理成本和資本支出。

        在一個高度可擴展、高成本效益,并且不需要“叉車式”升級的一種永久性磁盤歸檔的磁盤解決方案中,Quantum Lattus可近線訪問全球各地的歸檔數(shù)據(jù)。Lattus提供比傳統(tǒng) RAID 產(chǎn)品更優(yōu)異的耐用性,其中包括真正的自我修復(fù)和自我保護功能,并且無需復(fù)制就能自動進行多站點保護。最終實現(xiàn)一個無需備份的高彈性、容災(zāi)、可擴展的歸檔庫。CommVaultSimpana將備份、歸檔、報告和災(zāi)難恢復(fù)(DR)統(tǒng)一到一個軟件平臺上,提供一個融合數(shù)據(jù)管理解決方案來控制成本和風(fēng)險。通過昆騰Lattus-D 與CommVaultSimpana的整合,企業(yè)現(xiàn)在可以放心地在Lattus上存儲單一歸檔數(shù)據(jù)實例。這種方式超出了傳統(tǒng)冗余副本數(shù)據(jù)保護計劃所提供的保護措施。客戶還能得益于全球規(guī)模所實現(xiàn)的低延遲訪問。

        Emulex光纖通道助力HP StoreFabric

        第5篇:大數(shù)據(jù)庫建設(shè)方案范文

        關(guān)鍵詞:大數(shù)據(jù);管理會計信息系統(tǒng);項目管理

        引言:大數(shù)據(jù)時代,能否從海量信息中獲取關(guān)鍵或相關(guān)信息,進而獲得客戶,成為企業(yè)盈利的重要環(huán)節(jié)。對大數(shù)據(jù)的分析和應(yīng)用是管理會計的職能之一。傳統(tǒng)管理會計重視財務(wù)信息的分析和應(yīng)用,忽略了海量非結(jié)構(gòu)化的業(yè)務(wù)數(shù)據(jù),與業(yè)務(wù)脫節(jié)嚴(yán)重,管理會計報告質(zhì)量不高。2016年,財政部《會計改革與發(fā)展“十三五”規(guī)劃綱要(2016-2020)》,提出“提高企業(yè)會計信息化水平”,“推動基層單位會計信息系統(tǒng)與業(yè)務(wù)系統(tǒng)的有機融合,推動會計工作從傳統(tǒng)核算型向現(xiàn)代管理型轉(zhuǎn)變”,并“密切關(guān)注大數(shù)據(jù)、“互聯(lián)網(wǎng)+”發(fā)展對會計工作的影響”。這表明管理會計信息化已上升成為國家戰(zhàn)略層面的高度。管理會計信息化成為企業(yè)的基本要求,數(shù)字化、信息化、智能化轉(zhuǎn)型勢在必行。如何構(gòu)建大數(shù)據(jù)管理會計信息系統(tǒng)并應(yīng)用,是本文研究的重點。

        一、大數(shù)據(jù)對管理會計的要求

        1.大數(shù)據(jù)和大數(shù)據(jù)技術(shù)

        自媒體和多渠道電商平臺的興起,產(chǎn)生了海量大數(shù)據(jù)。大數(shù)據(jù)是指與目標(biāo)群體相關(guān)的存儲類型多樣化的海量數(shù)據(jù),具有短時間體量巨大、類型多樣化、價值密度低、時效性高等特征。大數(shù)據(jù)分為結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)兩種。結(jié)構(gòu)化數(shù)據(jù)是指能夠以一定的邏輯結(jié)構(gòu)進行呈現(xiàn)的數(shù)據(jù),通常指以文字、數(shù)字和表格形式存儲的財務(wù)數(shù)據(jù)、人事數(shù)據(jù)、供應(yīng)商和客戶數(shù)據(jù)等,這些數(shù)據(jù)便于使用者運用傳統(tǒng)技術(shù)方法進行計算和分析。非結(jié)構(gòu)化數(shù)據(jù)是指不能以一定的結(jié)構(gòu)呈現(xiàn),以圖片、動畫、音頻、視頻等多樣化存儲形式存在的數(shù)據(jù),這些數(shù)據(jù)難以使用傳統(tǒng)技術(shù)方法提取有效信息,且產(chǎn)生時效短,數(shù)量巨大,因此,需要大數(shù)據(jù)技術(shù)及時對數(shù)據(jù)進行挖掘、清洗和分析,才能提取經(jīng)營決策有效信息。

        大數(shù)據(jù)技術(shù)包括大數(shù)據(jù)信息平臺構(gòu)建、數(shù)據(jù)挖掘和清洗、數(shù)據(jù)分析和處理等技術(shù)。大數(shù)據(jù)挖掘是對數(shù)據(jù)的全覆蓋式搜索,通過關(guān)鍵詞的精準(zhǔn)和模糊搜索,全面搜索含關(guān)鍵詞的字段、圖片、動畫、網(wǎng)頁、音頻、視頻等數(shù)據(jù),按一定規(guī)則對數(shù)據(jù)進行描述、分類,歸入數(shù)據(jù)倉庫。數(shù)據(jù)清洗是依據(jù)一定規(guī)則對分類數(shù)據(jù)提取關(guān)鍵信息,清洗無用數(shù)據(jù)和信息,歸集至相應(yīng)的數(shù)據(jù)庫。數(shù)據(jù)分析和處理是指運用聚類分析、回歸分析、決策樹分析等大數(shù)據(jù)分析方法對數(shù)據(jù)進行分析,發(fā)現(xiàn)數(shù)據(jù)的變化趨勢,為經(jīng)營決策提供數(shù)據(jù)佐證。

        2.大數(shù)據(jù)與管理會計信息系統(tǒng)的關(guān)系

        大數(shù)據(jù)的發(fā)展為管理會計信息系統(tǒng)提供了共享云平臺,提高了會計信息化處理效率,降低了會計信息化成本。應(yīng)用大數(shù)據(jù)技術(shù)數(shù)據(jù),能夠做好市場預(yù)測幫助企業(yè)抓住先機,提高財務(wù)決策的科學(xué)性,提升了管理會計分析預(yù)測的精準(zhǔn)度和效率。同時,大數(shù)據(jù)對管理會計提出了大數(shù)據(jù)思維、分析能力、工具應(yīng)用能力等更高的要求。

        管理會計信息系統(tǒng)是助力管理會計實現(xiàn)增值目標(biāo)的應(yīng)用工具,其構(gòu)建的原則和框架,不僅應(yīng)基于項目單位的建設(shè)需求,還應(yīng)符合大數(shù)據(jù)時代的要求。管理會計信息系統(tǒng)基于大數(shù)據(jù)技術(shù)進行搭建,對結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)進行全面搜索,歸集到基礎(chǔ)數(shù)據(jù)庫中,采用信息技術(shù)對數(shù)據(jù)進行挖掘和清洗、分析處理形成可視化數(shù)據(jù)庫,提供專業(yè)化、可視化的數(shù)據(jù)處理報告、專項報告、項目決策報告。

        二、大數(shù)據(jù)時代管理會計信息系統(tǒng)構(gòu)建原則和框架

        1.構(gòu)建原則

        (1)安全性原則

        管理會計信息系統(tǒng),是多部門協(xié)同建設(shè)和使用的數(shù)據(jù)系統(tǒng),應(yīng)從用戶級別和使用權(quán)限、信息搜集和處理、跨庫數(shù)據(jù)提取等方面保證數(shù)據(jù)庫的安全性。首先,建設(shè)單位應(yīng)依據(jù)管理層級和權(quán)限設(shè)置用戶級別和權(quán)限,確保在用戶登陸和使用范圍的安全性;應(yīng)設(shè)置信息的重要性等級標(biāo)準(zhǔn),便于數(shù)據(jù)讀取部門能夠依據(jù)數(shù)據(jù)等級標(biāo)準(zhǔn)判斷數(shù)據(jù)來源的重要性。其次,管理會計為了做出戰(zhàn)略決策、財務(wù)決策、項目決策,需要從內(nèi)外部搜索、接收大量數(shù)據(jù)。信息搜索過程面臨較大風(fēng)險,應(yīng)建立高標(biāo)準(zhǔn)的防御措施,抵抗病毒和黑客的入侵。最后,管理會計信息系統(tǒng)內(nèi)部跨庫數(shù)據(jù)的訪問和提取環(huán)節(jié),是安全保障的重要環(huán)節(jié),應(yīng)在確保安全性的前提下提升跨庫訪問和提取的速度。

        (2)開放性原則

        管理會計信息系統(tǒng)應(yīng)按照開放性原則,建立開源云平臺,架設(shè)開放性結(jié)構(gòu),滿足大數(shù)據(jù)處理的需求。未來的稅務(wù)征管系統(tǒng)、銀行系統(tǒng)、工商系統(tǒng)等平臺都將實現(xiàn)數(shù)據(jù)開放查詢。架設(shè)開放性結(jié)構(gòu)的管理會計信息系統(tǒng),能夠滿足外部環(huán)境和信息復(fù)雜多變的管理需求,多端口設(shè)計可以為企業(yè)后續(xù)擴容提供便利。

        (3)統(tǒng)一性原則

        管理會計信息系統(tǒng)包括人力資源系統(tǒng)、財務(wù)信息系統(tǒng)、供應(yīng)鏈系統(tǒng)、銷售信息系統(tǒng)等多個數(shù)據(jù)庫。各個數(shù)據(jù)庫相互獨立,具有不同的數(shù)據(jù)代碼和標(biāo)準(zhǔn)。要建設(shè)管理會計信息系統(tǒng),需要整合各獨立數(shù)據(jù)庫的序號、代碼、標(biāo)準(zhǔn)和轉(zhuǎn)換規(guī)則,按照統(tǒng)一性的原則,實施整體統(tǒng)一代碼規(guī)則。只有依據(jù)統(tǒng)一性原則建設(shè),各獨立數(shù)據(jù)庫才能實現(xiàn)跨庫搜索和查詢,形成統(tǒng)一的數(shù)據(jù)庫資產(chǎn),才能為實現(xiàn)管理會計目標(biāo)提供數(shù)據(jù)支持。

        2.構(gòu)建框架

        管理會計信息系統(tǒng)是由多個數(shù)據(jù)系統(tǒng)組成的復(fù)雜系統(tǒng)。依據(jù)系統(tǒng)論的理論,多個要素組成的復(fù)雜系統(tǒng),具有開放性、自組織性、整體性、關(guān)聯(lián)性、等級結(jié)構(gòu)性、動態(tài)平衡性等共同特征。根據(jù)系統(tǒng)論的觀點和方法,管理會計信息系統(tǒng)可按照基礎(chǔ)設(shè)施層、基礎(chǔ)數(shù)據(jù)層、分析應(yīng)用層和綜合報告層進行構(gòu)建。管理會計信息系統(tǒng)構(gòu)建框架見下圖。

        (1)基礎(chǔ)設(shè)施層

        基礎(chǔ)設(shè)施層是系統(tǒng)的平臺,是數(shù)據(jù)存儲的媒介,由互聯(lián)網(wǎng)、服務(wù)器、云服務(wù)器、計算機軟硬件等組成。企業(yè)應(yīng)根據(jù)戰(zhàn)略發(fā)展的需要和實際財務(wù)狀況,系統(tǒng)化設(shè)計管理會計信息系統(tǒng),明確項目建設(shè)預(yù)算,制定合理的實施方案。基礎(chǔ)設(shè)施層的構(gòu)建不僅要滿足現(xiàn)有的系統(tǒng)管理需求,還應(yīng)保留足夠的可拓展空間,便于未來的開放性結(jié)構(gòu)擴容。

        (2)基礎(chǔ)數(shù)據(jù)層

        基礎(chǔ)數(shù)據(jù)層是管理會計信息系統(tǒng)的數(shù)據(jù)輸入層,分為結(jié)構(gòu)性數(shù)據(jù)和非結(jié)構(gòu)性數(shù)據(jù)。其中,結(jié)構(gòu)性數(shù)據(jù)由人力資源部門、財務(wù)部門、業(yè)務(wù)部門、研發(fā)部門等分別在相應(yīng)系統(tǒng)端口輸入源數(shù)據(jù);非結(jié)構(gòu)性數(shù)據(jù)則由系統(tǒng)采用大數(shù)據(jù)挖掘技術(shù)從外部獲取,包括從政府網(wǎng)站、工商、稅務(wù)、銀行、電商平臺、論壇等多渠道獲得實時數(shù)據(jù)。基礎(chǔ)數(shù)據(jù)層存儲各種類型的源數(shù)據(jù),為分析應(yīng)用提供數(shù)據(jù)依據(jù)。

        (3)分析應(yīng)用層

        分析應(yīng)用層包括兩部分,第一部分是預(yù)算管理、戰(zhàn)略管理、資金管理、成本管理、投融資管理、風(fēng)險管理、績效管理等管理會計工作任務(wù);第二部分是大數(shù)據(jù)技術(shù)工具和管理會計工具。分析應(yīng)用層的職能是通過大數(shù)據(jù)挖掘、分析技術(shù)、管理會計工具,對基礎(chǔ)數(shù)據(jù)進行分析和應(yīng)用,完成管理會計工作任務(wù)。系統(tǒng)運用大數(shù)據(jù)挖掘、清洗技術(shù),對非結(jié)構(gòu)化數(shù)據(jù)的圖片、音頻、視頻、動畫、網(wǎng)站信息進行描述、歸類,挖掘有效信息;并通過聚類分析、決策樹分析、回歸分析等技術(shù)對有效信息進行分析,為管理會計的預(yù)算管理、資金管理、投融資管理、成本管理、風(fēng)險管理、績效管理等職能管理提供清洗后有效信息。管理會計應(yīng)對結(jié)構(gòu)化和轉(zhuǎn)化后的非結(jié)構(gòu)化數(shù)據(jù)進行綜合處理,才能做出精準(zhǔn)的決策。

        (4)綜合報告層

        綜合報告層是管理會計經(jīng)過分析處理后提供的可視化報告,包括預(yù)算報告、戰(zhàn)略報告、經(jīng)營管理報告和績效報告等。綜合報告層是管理會計信息系統(tǒng)的核心,其機密程度、訪問權(quán)限和修改權(quán)限應(yīng)為最高級。綜合報告可以不設(shè)置固定匯報格式,依據(jù)管理層的需求,提供有針對性的管理報告。

        三、管理會計信息系統(tǒng)在項目管理中的應(yīng)用

        在阿米巴經(jīng)營理念下,每個業(yè)務(wù)部門都是一個獨立經(jīng)營、自負(fù)盈虧的主體。各獨立核算主體按業(yè)務(wù)類別劃分項目制進行運營。每個業(yè)務(wù)部門或每個項目配備一名業(yè)務(wù)伙伴(以下簡稱BP)。企業(yè)設(shè)置BP崗位,是對業(yè)務(wù)的支持。BP是將財務(wù)職能提升到業(yè)務(wù)前端,與業(yè)務(wù)同步,為業(yè)務(wù)提供預(yù)算編制和調(diào)整、風(fēng)險識別和防控、資金結(jié)算與費用控制、財務(wù)分析和評價等管理會計服務(wù)和支持。BP的職能,一是輔助業(yè)務(wù)部門跟進全流程,為業(yè)務(wù)提供專業(yè)的財務(wù)建議和服務(wù),二是為管理會計提供全過程鏈的分析數(shù)據(jù)。BP崗位能力,除了具備管理會計能力和信息系統(tǒng)使用能力,還需要掌握宏觀經(jīng)濟基礎(chǔ)、行業(yè)生命周期、產(chǎn)業(yè)鏈、企業(yè)的經(jīng)營戰(zhàn)略和策略、采購模式、生產(chǎn)工藝流程、營銷模式等信息。本文以項目管理中BP的工作流程來介紹管理會計信息系統(tǒng)在項目管理中的應(yīng)用。

        項目管理中,BP的工作主要分為事前預(yù)測和服務(wù)、事中控制和支持、事后評價和反饋三部分。BP進入項目組,需要掌握項目實施區(qū)域環(huán)境和風(fēng)險評估、項目業(yè)務(wù)流程、主要競爭對手、項目預(yù)算等情況,才能為項目提供全流程專業(yè)預(yù)測和支持。管理會計信息系統(tǒng)是BP快速掌握項目情況的優(yōu)質(zhì)工具。項目階段BP和業(yè)務(wù)的工作成果表如下。

        1.事前預(yù)測和服務(wù)

        事前,BP的職責(zé)是對項目區(qū)域宏觀環(huán)境、法律規(guī)章、行業(yè)生命周期、項目競爭程度進行風(fēng)險評估,完成項目預(yù)算計劃。BP可以運用大數(shù)據(jù)挖掘技術(shù),搜集項目實施區(qū)域最新的政策文件、稅收優(yōu)惠條件、項目實施最新規(guī)定、同類項目案例文書等資料,錄入管理會計信息系統(tǒng)的基礎(chǔ)數(shù)據(jù)層;通過對比分析,生成該區(qū)域項目實施的外部環(huán)境可視化報告;結(jié)合企業(yè)過去存儲的同類或相同區(qū)域的區(qū)域環(huán)境風(fēng)險評估報告,生成本項目的可視化風(fēng)險評估報告。風(fēng)險評估報告應(yīng)包括項目流程圖和風(fēng)險識別點標(biāo)識,有利于項目業(yè)務(wù)執(zhí)行的風(fēng)險防控。BP編制項目預(yù)算,應(yīng)在公司年度總預(yù)算內(nèi)控制項目預(yù)算額度。BP編制項目預(yù)算計劃,應(yīng)依據(jù)項目執(zhí)行方案,按照時間序列和項目進度,填制預(yù)算資金支付計劃表,并按預(yù)算調(diào)整因素確定預(yù)算調(diào)整金額幅度。經(jīng)項目負(fù)責(zé)人調(diào)整和確定后,確定項目預(yù)算計劃。

        2.事中控制和支持

        事中,BP的職責(zé)是對項目執(zhí)行的風(fēng)險識別和控制,提供財務(wù)支持和服務(wù)。BP的風(fēng)險識別和控制主要體現(xiàn)在對項目合同的成果交付和支付等條款議定,以及財務(wù)結(jié)算風(fēng)險控制。項目按產(chǎn)品和服務(wù)類型可分為常規(guī)項目和新增項目。對于常規(guī)項目,BP可以通過管理會計信息系統(tǒng)獲得以往期間同類項目的風(fēng)險評估報告和項目風(fēng)險控制表,可對同產(chǎn)品項目的風(fēng)險點識別和控制有清晰認(rèn)知。對于新增項目的風(fēng)險識別,BP可以運用大數(shù)據(jù)挖掘技術(shù)搜索項目風(fēng)險評估因素,并通過與項目負(fù)責(zé)人的溝通,明確項目風(fēng)險識別和控制環(huán)節(jié),提升項目風(fēng)險防控水平。BP對項目的財務(wù)支持主要體現(xiàn)在對結(jié)算票據(jù)的核算處理環(huán)節(jié)。BP將票據(jù)掃描錄入后,系統(tǒng)調(diào)用合同庫數(shù)據(jù),自動比對開票人、票據(jù)金額、產(chǎn)品名稱、發(fā)票號碼、發(fā)票專用章等信息要素。通過比對審核后,項目的業(yè)務(wù)流、資金流、信息流進入相應(yīng)分析應(yīng)用層的專項管理系統(tǒng)。資金流信息進入資金管理系統(tǒng),完成資金收付和會計記賬等核算工作。業(yè)務(wù)流信息進入項目管理系統(tǒng),動態(tài)顯示項目進度。供應(yīng)商、客戶、產(chǎn)品工藝、產(chǎn)品流程、采購費用等信息流信息進入信息管理系統(tǒng),豐富項目信息數(shù)據(jù)。

        3.事后評價和反饋

        事后,BP的職責(zé)是對項目績效、人員績效和往來單位進行評價,并完成項目績效報告、員工績效報告、往來單位評價報告和項目總結(jié)報告。項目績效報告不再是過去對項目的經(jīng)驗總結(jié),而是依據(jù)管理會計信息系統(tǒng)的預(yù)算計劃、執(zhí)行、調(diào)整、項目盈利等情況進行針對性的科學(xué)評價。員工績效報告,依據(jù)項目方案,按進度和時間節(jié)點,對員工完成項目任務(wù)的質(zhì)量和進度進行評價,既利于項目員工成長,也利于項目管理。往來單位評價報告,從信息管理系統(tǒng)導(dǎo)出基礎(chǔ)數(shù)據(jù),按照項目評價標(biāo)準(zhǔn)對供應(yīng)商和客戶進行級別評價,并列出評價依據(jù)。評價依據(jù)應(yīng)按照往來單位規(guī)模、管理制度、人員能力、預(yù)算執(zhí)行、合同議價等因素進行客觀列示。項目總結(jié)報告是從財務(wù)角度對項目方案、預(yù)算執(zhí)行、盈利能力、發(fā)展能力等進行總結(jié)。

        綜上,可以看出,大數(shù)據(jù)時代,管理會計信息系統(tǒng)運用大數(shù)據(jù)信息技術(shù)和管理會計技術(shù)進行大數(shù)據(jù)信息處理、財務(wù)支持和風(fēng)險防控,在事前、事中、事后三個環(huán)節(jié)能夠有效降低項目的風(fēng)險水平,提高項目執(zhí)行效率,提升項目盈利能力。

        四、管理會計信息系統(tǒng)的安全保障

        第6篇:大數(shù)據(jù)庫建設(shè)方案范文

        關(guān)鍵詞:大數(shù)據(jù) SAP HANA 電力大數(shù)據(jù) 電力系統(tǒng)

        中圖分類號:TP311.13 文獻標(biāo)識碼:A 文章編號:1007-9416(2016)11-0150-01

        近年來,國內(nèi)許多電力企業(yè)的業(yè)務(wù)不斷發(fā)展,除了傳統(tǒng)的火電發(fā)電,還涉及風(fēng)力發(fā)電、光伏發(fā)電、電站檢修和運營服務(wù)等方面業(yè)務(wù)。為了加快兩化融合,促進企業(yè)管理及信息化雙提升要求是建設(shè)企業(yè)運營管理系統(tǒng)的大數(shù)據(jù)平臺的關(guān)鍵驅(qū)動因素,大數(shù)據(jù)平臺的建成將成為企業(yè)管理及信息化運轉(zhuǎn)的驅(qū)動引擎,是加快電力信息化規(guī)劃實現(xiàn)步伐。

        通過大數(shù)據(jù)平臺建設(shè),形成全公司范圍的運營管理解決方案,保障企業(yè)管理工作標(biāo)準(zhǔn)化、規(guī)范化、精細(xì)化、高效化,真正為決策服務(wù)。電力企業(yè)大數(shù)據(jù)平臺具有業(yè)務(wù)數(shù)據(jù)量大,分析模式復(fù)雜,數(shù)據(jù)讀取頻繁,等諸多特點,如何利用最前沿的軟硬一體的大數(shù)據(jù)庫應(yīng)用支撐是擺在電力企業(yè)運營管理系統(tǒng)建設(shè)面前的重要難題。

        1 大數(shù)據(jù)定義與特征

        大數(shù)據(jù)又稱海量數(shù)據(jù),指的是所涉及的數(shù)據(jù)規(guī)模巨大,以至于目前已有的軟件工具無法在合理時間內(nèi),處理、管理、挖掘這些數(shù)據(jù),并將其整理成為幫助企業(yè)經(jīng)營決策更積極目的的信息。大數(shù)據(jù)的4V特征:數(shù)量(Volume),即數(shù)據(jù)巨大;多樣性(Variety),即數(shù)據(jù)類型繁多;速度(Velocity),即處理速度快;價值性(Veracity),即追求高質(zhì)量的數(shù)據(jù)。

        2 SAP HANA技術(shù)

        SAP HANA提供多用途的內(nèi)存應(yīng)用設(shè)備,企業(yè)可以利用它即時掌握業(yè)務(wù)運營情況,從而對所有可用的數(shù)據(jù)進行分析,并對快速變化的業(yè)務(wù)環(huán)境做出迅速響應(yīng)。

        通過SAP HANA,企業(yè)可以在業(yè)務(wù)運作期間基于海量實時詳細(xì)信息分析業(yè)務(wù)運營情況。企業(yè)可以探索和分析來源于所有數(shù)據(jù)源的全部交易數(shù)據(jù)和分析數(shù)據(jù)。運營數(shù)據(jù)在產(chǎn)生時由內(nèi)存獲取,并通過靈活的視圖迅速將分析信息呈現(xiàn)給用戶。外部數(shù)據(jù)可輕松的被添加至分析模型,與整個企業(yè)的數(shù)據(jù)進行整合。

        3 電力大數(shù)據(jù)平臺的架構(gòu)設(shè)計

        電力大數(shù)據(jù)平臺系統(tǒng)具有業(yè)務(wù)數(shù)據(jù)量大,分析模式復(fù)雜,數(shù)據(jù)讀取頻繁,等諸多特點,如何利用最前沿的軟硬一體的大數(shù)據(jù)庫應(yīng)用支撐是擺在電力企業(yè)運營管理系統(tǒng)建設(shè)面前的重要難題。

        3.1 電力大數(shù)據(jù)平臺架構(gòu)

        將數(shù)據(jù)平臺總體架構(gòu)劃分為三大層:采集層,存儲層以及分析/展現(xiàn)層。這種架構(gòu),是對傳統(tǒng)標(biāo)準(zhǔn)企業(yè)級數(shù)據(jù)倉庫架構(gòu)的擴展,既能滿足一個數(shù)據(jù)中心平臺層面的所有需求,又具備充分的前瞻性,為未來EOM提供實時、兼具廣度和深度的大數(shù)據(jù)應(yīng)用提供支撐。

        3.2 數(shù)據(jù)采集層設(shè)計

        數(shù)據(jù)抽取、轉(zhuǎn)換、加載的任務(wù)將在此處完成。整個平臺的數(shù)據(jù)整合能力將由SAP HANA Smart Data Integrator來提供,通過開放的數(shù)據(jù)接口連接各種類型的底層數(shù)據(jù)源,并且在數(shù)據(jù)加載的同時進行第一輪的數(shù)據(jù)清洗任務(wù),提高保證數(shù)據(jù)的規(guī)范性。

        3.3 數(shù)據(jù)存儲層設(shè)計

        數(shù)據(jù)存儲管理是本方案的核心部分。在整個方案設(shè)計中,SAP建議把數(shù)據(jù)按照數(shù)據(jù)的時效性分層管理,即歷史數(shù)據(jù)和活動數(shù)據(jù)。歷史數(shù)據(jù)部分包含所有的分析數(shù)據(jù),存放電力企業(yè)歷年來的數(shù)據(jù)。活動數(shù)據(jù)(熱點數(shù)據(jù))部分包含日常分析中最常使用的數(shù)據(jù),所有的前端分析數(shù)據(jù)都將在活動數(shù)據(jù)中命中,在活動數(shù)據(jù)中將進行保證最大的數(shù)據(jù)分析并提高和數(shù)據(jù)檢索效率。

        3.4 數(shù)據(jù)分析/展現(xiàn)層

        SAP建議使用SAP BusinessObject作為整體的數(shù)據(jù)展現(xiàn)平臺。BO中的語義層工具Information Designer Tool(IDT)將負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)模型的整體管理,通過IDT中的數(shù)據(jù)調(diào)用,把需要展現(xiàn)的數(shù)據(jù)輸送給前端工具進行報表展示。

        4 關(guān)鍵技術(shù)及方案優(yōu)勢

        高性能內(nèi)存計算技術(shù):數(shù)據(jù)分析應(yīng)用,對實效性往往要求極高,對數(shù)據(jù)存儲平臺提出了更高的要求:高速的數(shù)據(jù)裝載的同時,提供毫秒級的查詢響應(yīng)。全面的數(shù)據(jù)集成能力:本方案ETL工具將利用SAP數(shù)據(jù)采集系統(tǒng)SAP Data Integrator,這是一個專門面向企業(yè)信息管理的應(yīng)用平臺,幫助企業(yè)遷移、轉(zhuǎn)變和提升數(shù)據(jù)。實時數(shù)據(jù)流分析能力:SAP在信息集成過程,增加了獨一無二的架構(gòu)――基于內(nèi)存的實時數(shù)據(jù)流處理機制,把需要處理的數(shù)據(jù)在內(nèi)存中流動起來,高效地輸送到各個處理環(huán)節(jié),實現(xiàn)高頻次、小批量的數(shù)據(jù)處理調(diào)度,到達(dá)高吞吐量、低延時的理想效果。

        5 結(jié)語

        本文提出了一套針對電力系統(tǒng)的解決方案和基于SAP HANA的大數(shù)據(jù)平臺架構(gòu),大數(shù)據(jù)平臺架構(gòu)包括對電力數(shù)據(jù)采集層,數(shù)據(jù)存儲層和數(shù)據(jù)分析/展現(xiàn)層,該平臺在高性能,數(shù)據(jù)集成,實時數(shù)據(jù)流分析和可靠性上具有很大的提高。對電力大數(shù)據(jù)平臺的研究還存在很多不足之處,還有待在今后的學(xué)習(xí)和工作中進一步研究。

        參考文獻

        [1]Liu Qingyun, Gao Shu, Cao Xiufeng, Chen Liangchen.Research Of The Security Situation Visual Analysis For Multidimensional Inland Navigation Based On Parallel Coordinates. The Third International Conference on Cyberspace Technology[C].EI: 20161802313580.

        第7篇:大數(shù)據(jù)庫建設(shè)方案范文

        百尺竿頭

        推動基礎(chǔ)軟件平臺建設(shè)

        中國信息化周報:您如何看待南大通用2014年的發(fā)展?

        崔維力:2014是公司成立十年來發(fā)展最快的一年。首先員工人數(shù)從年初的300人發(fā)展到年末的近500人,并建立了一套有效的技術(shù)人員任職資格評價體系;其次,我們自主研發(fā)的支撐大數(shù)據(jù)應(yīng)用的新型數(shù)據(jù)庫GBase 8a集群規(guī)模突破120節(jié)點,在電信、金融等領(lǐng)域應(yīng)用不斷突破,市場營收增長40%以上,特別是中國農(nóng)業(yè)銀行基于GBase 8a構(gòu)建的總行數(shù)據(jù)倉庫正式上線,可以說是國產(chǎn)基礎(chǔ)軟件在金融領(lǐng)域應(yīng)用的一個里程碑。我們還專門搭建了PB級的結(jié)構(gòu)化大數(shù)據(jù)測試平臺,來驗證GBase 8a產(chǎn)品,這應(yīng)該也是國內(nèi)數(shù)據(jù)庫廠家獨有的。另外,今年我們還通過和IBM戰(zhàn)略合作獲得了Informix數(shù)據(jù)庫技術(shù)授權(quán),我們將基于Informix最新源代碼自主構(gòu)造一款面向高端行業(yè)復(fù)雜事務(wù)處理的數(shù)據(jù)庫產(chǎn)品GBase 8t,這樣通過引進、消化吸收、再創(chuàng)新,GBase 8t將與GBase 8a一起構(gòu)成公司“雙子星”產(chǎn)品,分別在OLTP和OLAP領(lǐng)域為南大通用的更高速發(fā)展提供有力支撐。2014年的這些發(fā)展,使公司上下樹立了打造國產(chǎn)數(shù)據(jù)庫龍頭的信心。

        中國信息化周報:中國擁有數(shù)據(jù)庫龍頭企業(yè)也是用戶、產(chǎn)業(yè)、政府所期望的。

        崔維力:是的。數(shù)據(jù)庫具備平臺屬性,平臺需要龍頭。國際上無論軟硬件平臺,都是圍繞龍頭構(gòu)建產(chǎn)業(yè)鏈,龍頭需要一定規(guī)模的用戶、配套工具、人才來支撐。我們國家硬件平臺的龍頭效應(yīng)好一些,比如服務(wù)器、PC機,甚至手機等,但CPU、OS、數(shù)據(jù)庫尚缺乏真正龍頭,很難形成良性格局。

        中國信息化周報:在當(dāng)前環(huán)境下,推動基礎(chǔ)軟件平臺的龍頭打造,需要政府哪方面的引導(dǎo)?

        崔維力:南大通用2014年的高速發(fā)展離不開政府部門的支持。今年,工信部電子發(fā)展基金、發(fā)改委云專項都支持了南大通用打造面向關(guān)鍵行業(yè)的大數(shù)據(jù)處理平臺,我們將基于GBase 8a集群與Hadoop的“混搭架構(gòu)”構(gòu)建支撐我國電信、金融、安全等領(lǐng)域的大數(shù)據(jù)處理平臺解決方案。另外,今年天津市也把南大通用列為重點支持企業(yè),何樹山副市長及各委辦局領(lǐng)導(dǎo)都專程到公司調(diào)研指導(dǎo),濱海新區(qū)領(lǐng)導(dǎo)更是多次到南大通用指導(dǎo)工作。

        中國信息化周報:但是,龍頭可能帶來壟斷的問題。

        崔維力:這個問題需要辯證的看。追求商業(yè)目標(biāo),龍頭往往會帶來壟斷。打破壟斷則往往靠創(chuàng)新,然后新的一代龍頭形成。正是在這個不斷打破的過程中,技術(shù)、社會在進步和發(fā)展。當(dāng)前環(huán)境下,培育龍頭是支撐國產(chǎn)化及自主可控戰(zhàn)略的抓手。這個龍頭首先是催生類似CPU、OS、數(shù)據(jù)庫等基礎(chǔ)平臺產(chǎn)品的龍頭。參照IBM、MS等從軟硬一體化上打造全鏈條也許是可行的,鏈條上產(chǎn)品選擇不開放,也許會帶來整個鏈條的“木桶效應(yīng)”。

        布局OLTP市場

        實現(xiàn)數(shù)據(jù)庫國產(chǎn)化替代

        中國信息化周報:前面您提到農(nóng)行數(shù)據(jù)倉庫案例,您說它是國產(chǎn)基礎(chǔ)軟件在金融領(lǐng)域應(yīng)用的一個里程碑?

        崔維力:南大通用今年在行業(yè)營銷上取得持續(xù)增長態(tài)勢,這得感謝我們中興、榮之聯(lián)、浪潮、東軟等合作伙伴,不斷拓展我們GBase 8a產(chǎn)品在電信、金融、安全等領(lǐng)域的應(yīng)用,更把它帶出國門。農(nóng)行數(shù)據(jù)倉庫項目是一個十分典型的案例。農(nóng)行數(shù)據(jù)倉庫建設(shè)選用的是我們GBase 8a集群產(chǎn)品,目前已經(jīng)上線的數(shù)據(jù)存儲與管理平臺,數(shù)據(jù)量達(dá)到500TB、每日新增數(shù)據(jù)800G,支撐包括貸記卡、信用卡、網(wǎng)絡(luò)銀行、資金轉(zhuǎn)移定價等多個業(yè)務(wù)需求。

        此項目成功實施,使農(nóng)行成為國內(nèi)首家在核心系統(tǒng)中進行數(shù)據(jù)庫國產(chǎn)化部署的銀行,破除了對國外昂貴產(chǎn)品的依賴心理,而且節(jié)約建設(shè)成本70%以上。該項目能成功實施與農(nóng)行領(lǐng)導(dǎo)重視國產(chǎn)化及安全可控信息技術(shù)應(yīng)用,保障金融數(shù)據(jù)安全可控,并從響應(yīng)國家戰(zhàn)略角度,以一種使命感、頂著巨大壓力支持國產(chǎn)化應(yīng)用分不開。正是這種敢“吃螃蟹”的勇氣,不僅幫助了國產(chǎn)數(shù)據(jù)庫產(chǎn)品的成熟,堅定了金融領(lǐng)域?qū)崿F(xiàn)數(shù)據(jù)庫國產(chǎn)化替代的信心,而且也成就了國產(chǎn)基礎(chǔ)軟件在金融領(lǐng)域應(yīng)用的一個里程碑。

        中國信息化周報:GBase 8a在金融、電信領(lǐng)域的主要競爭對手是國外產(chǎn)品嗎?

        崔維力:GBase 8a定位數(shù)據(jù)分析類應(yīng)用,也就是OLAP應(yīng)用,它的價值點在高速。我們在國內(nèi)市場上直面競爭的是EMC、HP、Teradata等國際一線產(chǎn)品。經(jīng)過我們5年多的產(chǎn)品打造,GBase 8a在技術(shù)上與國際同類產(chǎn)品保持同步,這兩年我們與國際上競爭對手同臺竟測,一直名列前三甲。GBase 8a集群定位于支撐行業(yè)大數(shù)據(jù)或結(jié)構(gòu)化大數(shù)據(jù),我們很多應(yīng)用實踐表明它與Hadoop的混搭架構(gòu)是復(fù)雜大數(shù)據(jù)應(yīng)用場景下的理性選擇,Hadoop的非結(jié)構(gòu)化大數(shù)據(jù)處理能力強大,而GBase 8a集群使用SQL進行結(jié)構(gòu)化大數(shù)據(jù)處理和分析,并具有高并發(fā)、支持多表聯(lián)合復(fù)雜查詢、高安全等優(yōu)勢。

        當(dāng)前我們的研發(fā)團隊正在進一步完善在大數(shù)據(jù)存儲管理平臺中GBase 8a計算引擎和Hadoop計算引擎的深度融合,并實現(xiàn)相互間的數(shù)據(jù)透明交換。構(gòu)建全數(shù)據(jù)統(tǒng)一存儲、統(tǒng)一計算、統(tǒng)一分析、統(tǒng)一服務(wù)接口、統(tǒng)一監(jiān)控管理的大數(shù)據(jù)應(yīng)用平臺。明年我們將創(chuàng)新突破200節(jié)點以上更大規(guī)模的集群部署,以及跨數(shù)據(jù)中心的數(shù)據(jù)同步與統(tǒng)一管理等很有挑戰(zhàn)性的問題,從而保持市場競爭力。

        中國信息化周報:國內(nèi)基礎(chǔ)軟件領(lǐng)域,包括操作系統(tǒng)和數(shù)據(jù)庫,大多采用基于開源軟件的發(fā)展模式。GBase 8a這種引進商業(yè)源代碼授權(quán)的模式,其差異化何在?

        崔維力:首先一個不同之處在于我們基于Informix源代碼進一步開發(fā)的功能,包括對國產(chǎn)CPU的支持、安全功能模塊、集群功能模塊等源代碼的知識產(chǎn)權(quán)完全屬于南大通用,我們是可以不反饋給IBM的。當(dāng)然,和IBM協(xié)同發(fā)展Iinformix源代碼體系是另外一個問題。開源軟件已成為一種主流的軟件開發(fā)模式,軟件服務(wù)化也已成為一種趨勢,我們也在計劃在適當(dāng)時間把我們GBase 8a的源代碼以及我們基于Informix的增值開發(fā)模塊的源代碼開源到社區(qū)里。南大通用希望推動國產(chǎn)數(shù)據(jù)庫領(lǐng)域軟件開發(fā)上的參與分享模式。

        中國信息化周報:南大通用今年發(fā)展很快,您目前的感受是什么?

        第8篇:大數(shù)據(jù)庫建設(shè)方案范文

        1檔案數(shù)據(jù)采集安全

        檔案數(shù)據(jù)采集包括電子文檔的收集和紙質(zhì)檔案的數(shù)字化處理兩個部分。檔案數(shù)據(jù)采集安全在強調(diào)數(shù)據(jù)收集的齊全完整的同時,也要考慮由于重復(fù)收集產(chǎn)生的數(shù)據(jù)冗余問題。

        1.1檔案數(shù)據(jù)收集范圍擴展

        從某種意義上來說,“大數(shù)據(jù)”的一個重要理念就是掌握的數(shù)據(jù)量越大、內(nèi)容越豐富,從中推斷出的信息就越多、結(jié)論就越有參考價值。具體到檔案工作,無論是從檔案的憑證價值和情報價值,還是檔案的現(xiàn)實價值和長遠(yuǎn)價值,抑或檔案的第一價值和第二價值來考慮,就檔案數(shù)據(jù)收集而言,可能需要重新思考收集的范圍和形式。大數(shù)據(jù)往往是唯一的樣本數(shù)據(jù)集。舉例而言,那些測量交通、土壤酸堿、雨量、風(fēng)力等物理信號的監(jiān)控設(shè)備,或視頻監(jiān)控以及其他類型的器材所連續(xù)積累的時段性或?qū)崟r性數(shù)據(jù),都單獨記錄著一個唯一的活動片段,一旦數(shù)據(jù)丟失,這個片段就隨之永遠(yuǎn)消失。[6]從檔案收集的齊全、完整、真實、有效和數(shù)據(jù)安全考慮,這些數(shù)據(jù)文檔都應(yīng)該實時在線歸檔,并同時保存離線副本。具體操作規(guī)范和標(biāo)準(zhǔn)可參考《電子文件管理暫行辦法》(中辦、國辦廳字〔2009〕39號)和《電子文件歸檔與管理規(guī)范》(標(biāo)準(zhǔn)號:GB/T18894-2002)。另一個比較典型的案例是美國政府的《聯(lián)邦政府Web2.0使用情況和檔案價值報告》,該報告中提到,在社交平臺上產(chǎn)生的信息,只要具有業(yè)務(wù)價值、證據(jù)價值和背景價值,就可以認(rèn)定為歸檔的文件。我國迄今為止雖對這類內(nèi)容無具體的歸檔規(guī)定,但根據(jù)大趨勢判斷,各級各類檔案館的收集范圍需要主動擴展。檔案大數(shù)據(jù)也可以說是檔案的“全數(shù)據(jù)”。相對于其他領(lǐng)域的數(shù)據(jù)收集,檔案大數(shù)據(jù)更強調(diào)的是數(shù)據(jù)的“全”:收集業(yè)務(wù)范圍內(nèi)的所有檔案數(shù)據(jù)。一個基層檔案部門,只要收集了本機關(guān)、團體、企事業(yè)單位的全部檔案數(shù)據(jù),即使數(shù)據(jù)總量不大,也可以稱之為大數(shù)據(jù)。因為在其后對這些數(shù)據(jù)進行的分析,將采取“樣本=總體”的方法;凡采用這種分析方式的數(shù)據(jù)分析方法,就稱為大數(shù)據(jù)分析。當(dāng)一個機構(gòu)擁有全部或者幾乎全部的檔案數(shù)據(jù),就能從不同的“相關(guān)”關(guān)系而非“因果”關(guān)系中更細(xì)致地統(tǒng)計和研究數(shù)據(jù)的方方面面。因此,檔案大數(shù)據(jù)中的“大”不是絕對意義上的,而是相對意義上的“大”。與此同時,在具體工作中我們也發(fā)現(xiàn),在大數(shù)據(jù)環(huán)境下,原來按“單位”進行的檔案收集會有相當(dāng)程度的冗余信息產(chǎn)生。例如,各級部門下發(fā)的紅頭文件,如果每個收文單位都作了歸檔,在今后可能建立的某種級別的云檔案數(shù)據(jù)庫中就存在相當(dāng)?shù)臄?shù)據(jù)冗余。[7]這時就可能需要在歸檔的源頭與具體規(guī)定這類文件的歸檔單位,其它收到此類文件的單位不需要歸檔,但在需要時有查詢和利用的權(quán)限。

        1.2紙質(zhì)檔案數(shù)字化過程和結(jié)果安全

        紙質(zhì)檔案數(shù)字化的過程安全是指在檔案數(shù)字化過程中沒有發(fā)生危害檔案實體和信息安全的事件或行為。因此,一系列的規(guī)章制度和規(guī)范的操作流程是必要的。首先,要考察數(shù)字化服務(wù)提供單位的資質(zhì)和信譽。其次,要建立完善的管理制度。例如,案卷不準(zhǔn)擅自帶離加工現(xiàn)場;當(dāng)日數(shù)字化的案卷必須當(dāng)日歸庫;案卷進出庫有嚴(yán)格的交接、檢查手續(xù)等等。最后,在數(shù)字化的過程中嚴(yán)格遵守《紙質(zhì)檔案數(shù)字化技術(shù)規(guī)范》(標(biāo)準(zhǔn)號:DA/T31-2005),檔案的拆卷要以不破壞檔案裝訂原貌為基礎(chǔ),在掃描過程中保證案卷整潔并確保掃描圖像與原件一致。紙質(zhì)檔案數(shù)字化的結(jié)果安全是指數(shù)字化后的檔案數(shù)據(jù)有效、可用。因此,檔案數(shù)字化后必須經(jīng)過電子檔案質(zhì)量檢查這一環(huán)節(jié)。這也是對檔案數(shù)字化結(jié)果安全監(jiān)控的重要一步。主要包括三個過程或環(huán)節(jié):一是質(zhì)量抽查,對于不合格的數(shù)據(jù)要及時返工重掃。二是數(shù)據(jù)檢測,主要內(nèi)容包括病毒檢測、運行檢測和數(shù)據(jù)核對等三個方面。三是數(shù)據(jù)利用檢測,主要是將全部數(shù)據(jù)直接掛接到檔案管理系統(tǒng)后,對外提供利用時,是否出現(xiàn)錯誤或者使用者發(fā)現(xiàn)的一系列問題。[8]為了保證數(shù)字化后檔案信息的長期有效可用,異地的多種載體備份存儲和數(shù)字信息定期可讀性抽查、復(fù)制備份等制度的建立也是必要的。

        2檔案信息管理系統(tǒng)安全

        從上世紀(jì)90年代國內(nèi)最早的檔案管理軟件產(chǎn)生至今,已經(jīng)經(jīng)歷了近20年的發(fā)展。隨著計算機及網(wǎng)絡(luò)技術(shù)的發(fā)展,數(shù)字化檔案管理方式在分布形式上從最初的單機版(C/S架構(gòu))、到網(wǎng)絡(luò)版(B/S架構(gòu))、直至發(fā)展到最新的面向服務(wù)的數(shù)據(jù)平臺(SOA架構(gòu));在功能上則從單一的僅實現(xiàn)簡單檔案管理的軟件、到檔案管理軟件與OA系統(tǒng)整合的數(shù)據(jù)庫、再到現(xiàn)今的將數(shù)字化檔案管理方式滲透到整個工作流(workflow)的數(shù)據(jù)庫平臺。檔案大數(shù)據(jù)是在檔案方面涉及的資料量規(guī)模巨大到無法通過目前主流軟件工具,在合理時間內(nèi)達(dá)到擷取、管理、處理并整理成為幫助企業(yè)經(jīng)營決策更積極目的的信息。[9]因此,檔案信息管理系統(tǒng)的安全在很大程度上決定了檔案信息的安全。

        2.1數(shù)據(jù)支持平臺安全

        美國政府大數(shù)據(jù)計劃中的國家檔案和文件署(NARA)計劃為十億電子記錄(CI-BER)建設(shè)網(wǎng)絡(luò)基礎(chǔ)設(shè)施,這是一個聯(lián)合機構(gòu)主辦的測試平臺。這個多機構(gòu)主辦的網(wǎng)絡(luò)基礎(chǔ)設(shè)施,對國家檔案館87萬多樣化的數(shù)字記錄文件和信息的收集,可稱為計算研究所的“文藝復(fù)興”。這個試驗臺將評估技術(shù)和方法,進行超大規(guī)模數(shù)據(jù)收集,以支持可持續(xù)的訪問。[10]縱覽國內(nèi)外各行業(yè)大數(shù)據(jù)建設(shè)實踐,構(gòu)建檔案大數(shù)據(jù)平臺至少要實現(xiàn)四個層次的部署:一、云服務(wù)商提供全面、可視化的服務(wù),尤其是檔案大數(shù)據(jù)服務(wù)委托方有權(quán)隨時監(jiān)管、分析基礎(chǔ)設(shè)施中發(fā)生的所有事項;二、收集海量檔案數(shù)據(jù),并解決各個數(shù)據(jù)庫的兼容問題;三、數(shù)據(jù)庫有更快識別目標(biāo)、鎖定威脅來源和敵對事件的能力和相關(guān)設(shè)置;四、基礎(chǔ)設(shè)施具有可擴展性,可以執(zhí)行短期和長期的分析。監(jiān)控管理、風(fēng)險控制、規(guī)則遵從是檔案云數(shù)據(jù)支持平臺確保安全的最基本要求。

        2.2數(shù)據(jù)計算環(huán)境安全

        傳統(tǒng)的數(shù)據(jù)庫系統(tǒng)不能有效地處理大數(shù)據(jù)的原因在于,這些系統(tǒng)的設(shè)計無法應(yīng)對現(xiàn)如今結(jié)構(gòu)化數(shù)據(jù)所占比例越來越低,數(shù)據(jù)類型日益復(fù)雜的狀況,以及傳統(tǒng)的數(shù)據(jù)庫無法既迅速又比較經(jīng)濟地對系統(tǒng)進行拓展。不僅是硬件程序的設(shè)計環(huán)節(jié),從數(shù)據(jù)管理的角度來看,少量的數(shù)據(jù)樣本容易進行單獨的測試和監(jiān)控,而檔案大數(shù)據(jù)計算平臺上存儲的數(shù)據(jù)首先要有詳細(xì)的類別劃分,其次才是存儲和計算。檔案數(shù)據(jù)庫的數(shù)據(jù)分析完成后,是要將結(jié)果呈現(xiàn)給不同的人群使用的。針對同一條查詢指令,應(yīng)該讓不同角色的人群看到不同的結(jié)果信息,即查詢所反饋的結(jié)果應(yīng)該是不一樣的:技術(shù)人員讀取有關(guān)系統(tǒng)和設(shè)置管理的數(shù)據(jù);檔案工作人員查看、操作與自身業(yè)務(wù)范圍相關(guān)的內(nèi)容;普通利用者可以得到經(jīng)審核公開的電子文本或目錄。大數(shù)據(jù)時代的檔案安全解決方案應(yīng)該包括足夠強大的、能夠針對不同層次的人群提供不同的展現(xiàn)界面和工具。同時,檔案大數(shù)據(jù)系統(tǒng)必須具有目錄整理、檔案采集、檔案審核、系統(tǒng)維護等功能,并利用現(xiàn)化代網(wǎng)絡(luò)技術(shù),實現(xiàn)多人多客戶端操作。

        3檔案數(shù)據(jù)提供利用安全

        正如1893年立式文件柜的出現(xiàn)最終解決了紙質(zhì)文件的存儲和檢索的困難,檔案大數(shù)據(jù)必將對檔案信息的查找利用帶來顛覆性的變革:檔案收集保管的最終目的是為了方便利用;檔案大數(shù)據(jù)的核心不是擁有數(shù)據(jù),而是拿這些檔案數(shù)據(jù)去做什么。

        3.1檔案數(shù)據(jù)比對分析

        檔案大數(shù)據(jù)最直觀的應(yīng)用在于數(shù)據(jù)的比對分析。例如,在經(jīng)適房的申購過程中,如何才能快速有效地鑒別申購者的資格?用申購者提供的姓名、身份證號等相關(guān)信息比對在房地產(chǎn)交易、車輛管理、金融機構(gòu)等數(shù)據(jù)庫的相關(guān)信息,可以準(zhǔn)確掌握申購者的資產(chǎn)狀況,剔除不夠格的申請者。還有一個典型例子就是我國醫(yī)療檔案大數(shù)據(jù)建設(shè)的“3521工程”。該項目融合了我國絕大部分三甲醫(yī)院和部分二甲醫(yī)院的數(shù)據(jù)庫和影像文件的數(shù)字化信息系統(tǒng)以及電子健康檔案系統(tǒng),旨在通過數(shù)據(jù)自動匯總、統(tǒng)計分析,進行慢性病、流行病的自動篩查、趨勢分析和爆發(fā)預(yù)警;同時系統(tǒng)還可以為新藥研發(fā)、新治療方案的設(shè)計等工作提供數(shù)據(jù)支持。檔案大數(shù)據(jù)提供利用在一定程度上來說只需要知道檔案大數(shù)據(jù)“是什么”,而不需要知道“為什么”。這種變化已經(jīng)遠(yuǎn)遠(yuǎn)突破了技術(shù)層面,將對人類認(rèn)知世界的方式方法產(chǎn)生重大影響。從檔案大數(shù)據(jù)進行的對比分析,就是用檔案數(shù)據(jù)說話的最簡單直接證明。檔案工作的核心在“用”。利用者在檔案數(shù)據(jù)比對分析時,通過軌跡研判、信息關(guān)聯(lián)等方式,由已存的較全面的檔案信息,才能得出正確、合理的結(jié)論。在這種狀況下,可提供利用的數(shù)據(jù)資源的豐富,就代表了一定程度上的利用環(huán)境安全。

        3.2檔案咨詢服務(wù)

        第9篇:大數(shù)據(jù)庫建設(shè)方案范文

        (1.中南大學(xué) 信息科學(xué)與工程學(xué)院,湖南 長沙410083;2.中南大學(xué) 地球科學(xué)與信息物理學(xué)院,湖南 長沙 410083)

        摘要:計算思維能力是當(dāng)前國內(nèi)外大學(xué)課程建設(shè)和教學(xué)改革的重要內(nèi)容和方向。文章以非計算機專業(yè)數(shù)據(jù)庫系列課程為例,探討如何在教學(xué)過程中培養(yǎng)計算思維能力,同時對改革的重要內(nèi)容即數(shù)據(jù)庫課程群建設(shè)進行分析,闡述如何在數(shù)據(jù)庫系列課程教學(xué)過程和課程群建設(shè)中引入計算思維的思路和方法,為高等學(xué)校教育教學(xué)方法和課程改革提供思路。

        關(guān)鍵詞 :計算思維;教學(xué)方法;教學(xué)質(zhì)量;課程群建設(shè);課程改革

        基金項目:湖南省普通高等學(xué)校教學(xué)改革研究項目(湘教通[2014]247號);教育部高等學(xué)校文科大學(xué)計算機教學(xué)改革項目(教高文計函[2014]05號2014-A128);全國高等院校計算機基礎(chǔ)教育研究會2014年課題(201445)。

        第一作者簡介:奎曉燕,女,副教授,研究方向為計算機網(wǎng)絡(luò)和數(shù)據(jù)庫技術(shù),xykui@csu.edu.cn。

        0 引言

        計算思維是由美國卡內(nèi)基·梅隆大學(xué)周以真教授在Computational Thinking中提出來的。周教授認(rèn)為計算思維是運用計算機科學(xué)的基礎(chǔ)概念求解問題、設(shè)計系統(tǒng)和理解人類的行為,其根本內(nèi)容是本質(zhì)、抽象和自動化。計算思維涵蓋了反映計算機科學(xué)之廣泛性的一系列思維活動,是與讀寫能力一樣的人類基本思維方式[1]。目前,國內(nèi)外計算機界學(xué)者對計算思維這一課題進行了大量的研究。研究結(jié)果表明,計算思維不僅反映了計算機及計算機科學(xué)在當(dāng)前社會中重要的新認(rèn)識,也反映了計算機學(xué)科最本質(zhì)的特征和最核心的方法,這在計算機技術(shù)飛速發(fā)展的今天尤為重要[2]。

        1 計算思維在數(shù)據(jù)庫系列課程改革中的作用

        數(shù)據(jù)庫技術(shù)是信息系統(tǒng)的核心技術(shù)。近年來,數(shù)據(jù)庫技術(shù)和計算機網(wǎng)絡(luò)技術(shù)相互滲透、相互促進,已成為當(dāng)今計算機領(lǐng)域發(fā)展迅速、應(yīng)用廣泛的兩大技術(shù)。在數(shù)據(jù)庫系列課程中,教學(xué)方法革新和課程群建設(shè)是課程改革的兩個重要方面。在數(shù)據(jù)庫課程改革中引入計算思維有助于正確理解計算和計算機,可以更好地揭示表象背后的核心問題,揭示不同現(xiàn)象之間的共同本質(zhì),從而有效提高教學(xué)質(zhì)量,培養(yǎng)出時展所需要的高素質(zhì)人才。

        在數(shù)據(jù)庫系列課程的教學(xué)過程中引入計算思維的理念,應(yīng)當(dāng)使計算思維的本質(zhì)始終貫穿整個數(shù)據(jù)庫課程教學(xué)過程,根據(jù)講授的具體知識點適時引入計算思維的思想,培養(yǎng)學(xué)生的創(chuàng)新能力和計算思維能力,久而久之,教師形成新的教學(xué)思路和行之有效的教學(xué)方法。具體來說,計算的想法是把復(fù)雜問題分解,把問題簡單化;計算的方法是選擇一個合適的模型反映這個問題的相關(guān)方面;計算的思維是考慮當(dāng)出現(xiàn)問題時如何恢復(fù)等。總的來說,計算思維是采取適當(dāng)?shù)姆椒ń鉀Q問題并理解人類行為,這是計算機科學(xué)中非常重要的一些想法[3]。

        在數(shù)據(jù)庫系列課程的課程群建設(shè)中引入計算思維,必須先研究課程群各門課程的關(guān)聯(lián)性,通過課程整合刪除重復(fù)過時的內(nèi)容,增加可增強學(xué)生應(yīng)用和創(chuàng)新能力的新內(nèi)容,一方面提高教學(xué)效率,使學(xué)生在有限的學(xué)時內(nèi)能吸收更多的知識;另一方面,針對課程群理論與實踐并重的特點,通過引入計算思維更好地訓(xùn)練學(xué)生的思維能力,提高學(xué)生的綜合技能。

        2 在數(shù)據(jù)庫教學(xué)過程中引入計算思維的方法和步驟

        在數(shù)據(jù)庫系列課程的教學(xué)過程中,一方面是理論知識講授,通過教學(xué)幫助學(xué)生正確理解和掌握數(shù)據(jù)庫的基本原理,熟練掌握數(shù)據(jù)庫的設(shè)計方法和應(yīng)用技能;另一方面是通過實踐環(huán)節(jié)激發(fā)學(xué)生對數(shù)據(jù)庫相關(guān)知識的興趣,培養(yǎng)獨立探求新方法、新技術(shù)的技能,使之成為適應(yīng)能力強、有創(chuàng)新精神和創(chuàng)造才能的專門人才。在數(shù)據(jù)庫系列課程的教學(xué)過程中引入計算思維,需要結(jié)合課堂教學(xué)和實踐環(huán)節(jié)這兩個方面。教師應(yīng)當(dāng)始終將計算思維的本質(zhì)貫穿在課堂教學(xué)中,根據(jù)講授的具體知識點適時引入計算思維中涉及的關(guān)注點、嵌入、保護、轉(zhuǎn)化、糾錯和恢復(fù)、啟發(fā)式等基本概念和思維方法,引導(dǎo)學(xué)生領(lǐng)會計算思維的新方法;在實踐環(huán)節(jié),教師提出問題、給出實驗任務(wù),學(xué)生通過獨立完成或者小組協(xié)作的方式運用計算思維的系列方法解決實際問題,從中探索解決問題的新方法,發(fā)現(xiàn)問題的本質(zhì),達(dá)到更好吸收和鞏固知識、學(xué)會運用計算思維方法的目的,最終培養(yǎng)學(xué)生的創(chuàng)新思維和計算思維,提高其獨立思考、解決問題的技能[4]。具體實現(xiàn)方法主要包括以下幾方面。

        1) 整合并精煉教學(xué)內(nèi)容。

        由于課程教學(xué)內(nèi)容較多,教師應(yīng)在課堂教學(xué)和實踐環(huán)節(jié)中將教學(xué)內(nèi)容根據(jù)章節(jié)進行歸類、重新整合,選取重點和難點知識中的典型問題以提問的方式入手,用討論的形式加強互動,啟發(fā)學(xué)生同步思考,調(diào)動學(xué)生的學(xué)習(xí)積極性和參與熱情,形成師生積極互動的良好氛圍,使學(xué)生從被動接受知識變?yōu)橹鲃犹接憜栴},達(dá)到良好的教學(xué)效果。此外,教師應(yīng)通過對整合性教學(xué)內(nèi)容的分析,建立各相關(guān)知識點與計算思維核心概念之間的關(guān)系和聯(lián)系,在教學(xué)中表述出各知識點對應(yīng)的應(yīng)強化和滲透的計算思維具體核心概念。通過教師整合、分析和精煉教學(xué)內(nèi)容,學(xué)生在有限的學(xué)時內(nèi)可以更高效、主動地掌握更多知識和技能,同時這也有效促進教師不斷地自我學(xué)習(xí)和提高。

        2) 采用生動具體的實例教學(xué)法。

        在教學(xué)過程中,教師以當(dāng)前點擊率頗高的淘寶網(wǎng)、當(dāng)當(dāng)網(wǎng)、京東網(wǎng)等多個購物平臺和銀行數(shù)據(jù)庫管理系統(tǒng)為切入點,引入數(shù)據(jù)庫的相關(guān)概念以及數(shù)據(jù)存儲、數(shù)據(jù)模型、數(shù)據(jù)組織等相關(guān)知識;通過在購物平臺上進行

        關(guān)鍵詞 搜索查找特定信息的過程,引入關(guān)系、數(shù)據(jù)表、查詢、索引、視圖、存儲過程、觸發(fā)器等相關(guān)知識;通過購物者選中物品、點擊支付平臺進行網(wǎng)上提交訂單和在線付費購買的過程,引入數(shù)據(jù)庫的安全機制、身份驗證、登錄和權(quán)限管理、數(shù)據(jù)備份等方面的知識,這樣用學(xué)生熟悉的生活實例引出相關(guān)的數(shù)據(jù)庫知識點,幫助學(xué)生從更簡易、更直觀、更清晰、更生動、更透徹的角度學(xué)習(xí)相關(guān)知識,始終將計算思維的思想貫穿其中,擺脫傳統(tǒng)教學(xué)方法的單一性和枯燥性,激發(fā)學(xué)生的學(xué)習(xí)興趣,提高學(xué)習(xí)效果,一方面鍛煉學(xué)生的思維,另一方面激發(fā)學(xué)生的創(chuàng)造力和學(xué)習(xí)能力,讓學(xué)生掌握用計算思維思考和解決問題的本領(lǐng)。

        3) 將計算思維融入實踐教學(xué)。

        數(shù)據(jù)庫課程實踐環(huán)節(jié)重點鍛煉學(xué)生對計算思維方法的運用能力,引導(dǎo)學(xué)生探索解決實際問題的方法,是對課堂教學(xué)內(nèi)容的補充,促進學(xué)生更好地認(rèn)識和鞏固計算思維的方法。實踐環(huán)節(jié)可以采用課堂練習(xí)、綜合設(shè)計等多種形式;對于單一知識點練習(xí)題可以要求學(xué)生獨立運用計算思維方法完成;對于綜合設(shè)計題,學(xué)生可劃分小組進行探討,各自闡述對問題的認(rèn)識和對知識點的理解,提出解決思路與方法,確定方案,然后上機實踐,讓計算機檢驗思路和方法的正確性。實踐過程將知識作為載體,實現(xiàn)思想和方法的傳授,通過有效使用工具,可以達(dá)到事半功倍的教學(xué)效果,使得學(xué)生不僅可以掌握數(shù)據(jù)庫相關(guān)的軟硬件工具、數(shù)據(jù)庫系統(tǒng)及各類語言,而且通過抽象表示設(shè)計有效的算法,通過程序的實現(xiàn)高效地解決實際問題,真正掌握數(shù)據(jù)庫的相關(guān)知識和技能。

        3 在數(shù)據(jù)庫課程群建設(shè)中引入計算思維的方法和步驟

        數(shù)據(jù)庫課程群建設(shè)中的系列課程均是高校非計算機專業(yè)必修或選修的與數(shù)據(jù)庫相關(guān)的公共基礎(chǔ)課程(數(shù)據(jù)庫應(yīng)用基礎(chǔ)、數(shù)據(jù)庫技術(shù)與應(yīng)用、數(shù)據(jù)庫系統(tǒng)原理、數(shù)據(jù)庫應(yīng)用系統(tǒng)開發(fā)等),這些課程涉及全校非計算機專業(yè)的所有學(xué)生。課程群建設(shè)是近年來課程建設(shè)改革的一個發(fā)展趨勢,是針對某一受教育對象將相關(guān)的課程組合在一起,進行整合更新,使課程內(nèi)容更貼近現(xiàn)實需求,提高學(xué)生應(yīng)用和創(chuàng)新能力以及教學(xué)效率和質(zhì)量。

        數(shù)據(jù)庫課程群的教學(xué)內(nèi)容是根據(jù)教育部對計算機基礎(chǔ)教學(xué)基本要求設(shè)計的,教學(xué)目標(biāo)是通過課程學(xué)習(xí)幫助學(xué)生了解數(shù)據(jù)庫應(yīng)用領(lǐng)域,掌握基本的數(shù)據(jù)庫技術(shù),提高數(shù)據(jù)庫管理系統(tǒng)分析、數(shù)據(jù)庫應(yīng)用程序設(shè)計和開發(fā)、數(shù)據(jù)庫使用和維護的能力。課程群建設(shè)以教指委提出的“普及計算機文化、訓(xùn)練計算思維、培養(yǎng)信息應(yīng)用能力”為總體目標(biāo),從培養(yǎng)學(xué)生信息素養(yǎng)、計算機應(yīng)用能力等方面著手,以數(shù)據(jù)庫技術(shù)為基礎(chǔ),以計算思維為切入點,以應(yīng)用能力為目標(biāo),構(gòu)造并設(shè)計數(shù)據(jù)庫課程群知識體系及教學(xué)方案,旨在新形勢下進一步提高高校計算機基礎(chǔ)教育的質(zhì)量[5]。具體實現(xiàn)方法主要包括以下幾方面。

        1) 以計算思維為切入點。

        數(shù)據(jù)庫課程群建設(shè)的實施可采用課程知識體系及教學(xué)內(nèi)容重組與教學(xué)方法推動相結(jié)合的方式,在宏觀上,以計算思維為切入點重組課程知識體系框架;微觀上,參照教學(xué)指導(dǎo)委員會編制的《高等學(xué)校計算機基礎(chǔ)教學(xué)發(fā)展戰(zhàn)略研究報告暨計算機基礎(chǔ)課程教學(xué)基本要求》和《高等學(xué)校計算機基礎(chǔ)核心課程教學(xué)實施方案》提出的課程基本知識體系和實驗體系,融入最新數(shù)據(jù)庫技術(shù)、通信技術(shù)、網(wǎng)絡(luò)技術(shù)等相關(guān)概念、方法和應(yīng)用,形成數(shù)據(jù)庫課程群建設(shè)的方案。

        一個高效的教學(xué)團隊對于強化質(zhì)量意識、深化教學(xué)改革、促進課程群建設(shè)、提高教學(xué)質(zhì)量發(fā)揮著極其重要的作用。基于師資隊伍的現(xiàn)狀,教學(xué)團隊建設(shè)應(yīng)以教學(xué)研究為切入點,以提高隊伍的教學(xué)水平和改善隊伍職稱結(jié)構(gòu)為目的,最終形成穩(wěn)定的、高水平的師資隊伍。團隊中的教師應(yīng)該認(rèn)真學(xué)習(xí)并掌握計算思維的精髓,能夠在教學(xué)過程中引入計算思維,啟發(fā)學(xué)生訓(xùn)練思維能力,用計算思維的方法思考和分析問題,提高學(xué)生對知識的綜合運用能力。

        2) 采用層次化教學(xué)方法。

        教學(xué)方法的研究與實踐在數(shù)據(jù)庫課程群建設(shè)中占據(jù)相當(dāng)重要的地位。教師要改革傳統(tǒng)的以單純的操作、技術(shù)為重點的教學(xué)方式,轉(zhuǎn)變?yōu)橐运季S能力養(yǎng)成訓(xùn)練、問題求解能力培養(yǎng)、工作實踐能力培養(yǎng)為目標(biāo)的新型教學(xué)方式,采用層次化教學(xué)方法進行數(shù)據(jù)庫課程群建設(shè),針對不同層次的課程和不同專業(yè)的學(xué)生采用不同的教學(xué)方法(如圖1所示)。第1層課程采用啟發(fā)式教學(xué)方法,教師用多媒體課件等教具向?qū)W生形象、生動地演示課程重點和難點,通過靈活設(shè)計教學(xué)過程讓學(xué)生積極參與教學(xué)活動,更好地掌握知識;第2層課程采用案例教學(xué)法、講授教學(xué)法、實驗教學(xué)法相結(jié)合的方式;第3層課程采用課題研究教學(xué)法、討論教學(xué)法、指導(dǎo)自學(xué)法相結(jié)合的方式。除此之外,無論是哪一個層次的教學(xué),都應(yīng)該在整個教學(xué)過程中研究計算思維要素的概念、案例、課題的教授方法,研究如何將隱式計算思維要素與課程內(nèi)容有機結(jié)合并呈現(xiàn)出來,使學(xué)生感受計算思維的科學(xué)性與普適性,從而提高學(xué)生的計算思維能力和科學(xué)素養(yǎng)。

        3) 科學(xué)制訂課程知識體系。

        在數(shù)據(jù)庫課程群建設(shè)中,建立科學(xué)的課程知識體系能大大提高課程群建設(shè)的質(zhì)量和效果。具體來說,一方面要準(zhǔn)確分析計算機公共課的培養(yǎng)目標(biāo)及知識結(jié)構(gòu)要求,在正確認(rèn)識數(shù)據(jù)庫技術(shù)系列課程知識體系特點的基礎(chǔ)上科學(xué)提煉計算機學(xué)科內(nèi)涵;另一方面要及時跟蹤國內(nèi)外計算機技術(shù)和數(shù)據(jù)庫技術(shù)的發(fā)展和趨勢,不斷根據(jù)大數(shù)據(jù)[6]、透明計算、云計算、物聯(lián)網(wǎng)[7]時代的技術(shù)發(fā)展特點修正、更新和調(diào)整教學(xué)內(nèi)容,讓課程知識體系能始終適應(yīng)時展的需求。同時,要以培養(yǎng)計算機應(yīng)用開發(fā)能力為目標(biāo),以計算思維為切入點,對教學(xué)內(nèi)容進行科學(xué)組織和優(yōu)化;在充分調(diào)研、認(rèn)真分析的基礎(chǔ)上,確定學(xué)生應(yīng)具備的知識結(jié)構(gòu),明確改革目標(biāo),提出具體方案并投入課程改革實踐,分析改革效果,進行總結(jié)和推廣研究。這個過程可以反復(fù)交叉進行。改革是無止境的,改革的效果也是相對的,沒有最好,只有更好。教師應(yīng)在實踐中不斷調(diào)整和修正教學(xué)改革方案,建立科學(xué)的課程知識體系。

        4 結(jié)語

        數(shù)據(jù)庫系列課程是高等學(xué)校非計算機專業(yè)中非常重要的公共基礎(chǔ)課[8],如何在計算機技術(shù)飛速發(fā)展的背景下更加深入地理解計算機學(xué)科的內(nèi)涵和性質(zhì),根據(jù)不同專業(yè)、不同年級學(xué)生的特點開展有針對性的教學(xué),在數(shù)據(jù)庫系列課程教學(xué)和數(shù)據(jù)庫課程群建設(shè)中引入計算思維以有效促進課程改革,是高校計算機基礎(chǔ)課教師應(yīng)重點關(guān)注和思考的問題。筆者闡釋了計算思維在數(shù)據(jù)庫系列課程改革中的作用,介紹了在數(shù)據(jù)庫系列課程教學(xué)過程和在課程群建設(shè)中融入計算思維的方法和步驟,期望通過大膽的探索為培養(yǎng)和提高教師和學(xué)生的計算思維能力打下基礎(chǔ)。

        參考文獻:

        [1] 周以真. 計算思維[J]. 中國計算機學(xué)會通訊, 2007(11): 11-14.

        [2] 李廉. 計算思維: 概念與挑戰(zhàn)[J]. 中國大學(xué)教學(xué), 2012(1): 7-12.

        [3] 龔沛森, 楊志強. 大學(xué)計算機基礎(chǔ)教學(xué)中的計算思維培養(yǎng)[J]. 中國大學(xué)教學(xué), 2012(5): 51-54.

        [4] 李曉明, 蔣宗禮, 王志英, 等. 積極研究和推進計算思維能力的培養(yǎng)[J]. 計算機教育, 2012(5): 1.

        [5] 教育部高等學(xué)校計算機基礎(chǔ)課程教學(xué)指導(dǎo)委員會. 高等學(xué)校計算機基礎(chǔ)核心課程教學(xué)實施方案[M].北京: 高等教育出版社, 2011: 4-5.

        [6] 大數(shù)據(jù)時代來臨[N]. 北京晚報, 2012-06-15(40).

        [7] 嚴(yán)大虎, 陳明選. 物聯(lián)網(wǎng)在智慧校園中的應(yīng)用[J]. 現(xiàn)代教育技術(shù), 2011, 21(6): 123-125.

        无码人妻一二三区久久免费_亚洲一区二区国产?变态?另类_国产精品一区免视频播放_日韩乱码人妻无码中文视频
      2. <input id="zdukh"></input>
      3. <b id="zdukh"><bdo id="zdukh"></bdo></b>
          <b id="zdukh"><bdo id="zdukh"></bdo></b>
        1. <i id="zdukh"><bdo id="zdukh"></bdo></i>

          <wbr id="zdukh"><table id="zdukh"></table></wbr>

          1. <input id="zdukh"></input>
            <wbr id="zdukh"><ins id="zdukh"></ins></wbr>
            <sub id="zdukh"></sub>
            夜夜夜久久久综合视频 | 亚州国产欧美一区二区三区 | 亚洲日本va一区二区 | 久久精品福利中文字幕 | 亚洲综合久久综合网 | 日韩精品免费观看视频 |