引論:我們?yōu)槟砹?篇數(shù)據(jù)處理論文范文,供您借鑒以豐富您的創(chuàng)作。它們是您寫作時的寶貴資源,期望它們能夠激發(fā)您的創(chuàng)作靈感,讓您的文章更具深度。
數(shù)據(jù)處理論文:生物醫(yī)學(xué)信號數(shù)據(jù)處理系統(tǒng)的研究
生物醫(yī)學(xué)信號采集處理是生物醫(yī)學(xué)研究的重要依據(jù)和基礎(chǔ),信號拾取、采集和處理的正確與否,直接影響到生物醫(yī)學(xué)研究的性,因此,研究生物醫(yī)學(xué)信號采集處理系統(tǒng)有著重要的意義.論文介紹了生物醫(yī)學(xué)信號采集處理系統(tǒng)的概念和特點,并采取將生物醫(yī)學(xué)信號調(diào)理和數(shù)據(jù)采集分別放在兩塊板上,解決了"一塊板"設(shè)計中不同性質(zhì)信號即數(shù)字信號和模擬信號間的相互干擾問題.大大提高了系統(tǒng)的抗干擾能力.從生物信號的特點開發(fā),作者研究并設(shè)計了以AT89C51為核心的生物醫(yī)學(xué)信號數(shù)據(jù)處理系統(tǒng),并集成了一個電子刺激器,以滿足不同的實驗要求.作者首先闡述了生物醫(yī)學(xué)信號數(shù)據(jù)處理系統(tǒng)的硬件接口電路設(shè)計;其次,對信號的輸入電路、程控放大電路、濾波電路、電源模塊及刺激發(fā)生器等功能模塊的設(shè)計要點和工作原理進(jìn)行了詳細(xì)分析,并對系統(tǒng)軟件的設(shè)計思想以及主程序、中斷程序和其它功能程序進(jìn)行了系統(tǒng)介紹.對系統(tǒng)進(jìn)行了調(diào)試和分析,另外對系統(tǒng)的噪聲和干擾也進(jìn)行了分析和相應(yīng)的防治.
數(shù)據(jù)處理論文:電力自動化系統(tǒng)的數(shù)據(jù)處理
對于我國的經(jīng)濟(jì)發(fā)展來說電力系統(tǒng)就是最重要的大動脈之一,目前隨著經(jīng)濟(jì)迅速發(fā)展以及社會建設(shè)的不斷完善,我國不同行業(yè)以及各地居民對于電力系統(tǒng) 發(fā)展提出了更高的要求。電力系統(tǒng)的自動化技術(shù),其作用就是可以更好的實現(xiàn)對于運行狀態(tài)的集中展示以及及時的監(jiān)控,并且可以對之進(jìn)行優(yōu)化,同時提高安全運行的性能。在電力自動化系統(tǒng)中數(shù)
據(jù)處理部分是其核心,也是信息流的主要表現(xiàn)形式。一些高新技術(shù),比如計算機(jī)或網(wǎng)絡(luò)通訊技術(shù)等在電力自動化技術(shù)中的應(yīng)用,讓其數(shù)據(jù)處理工作也日趨復(fù)雜,可以快速以及的獲取和處理數(shù)據(jù)是保障電力自動化系統(tǒng)正常運轉(zhuǎn)的保障。本文對此作出簡要的分析和探討。
一、電力自動化系統(tǒng)的數(shù)據(jù)分析
(一)數(shù)據(jù)分類
一般在電力自動化系統(tǒng)中,可以根據(jù)數(shù)據(jù)來源的不同將其分為原始數(shù)據(jù)以及再生數(shù)據(jù)。原始數(shù)據(jù)指的就是在現(xiàn)場直接采集的數(shù)據(jù),再生數(shù)據(jù)具體是指在原始數(shù)據(jù)的基礎(chǔ)之上進(jìn)行二次加工得到的數(shù)據(jù)。根據(jù)電力自動化系統(tǒng)的特點可以將數(shù)據(jù)進(jìn)行更為細(xì)致的分類:
首先就是現(xiàn)場的實時數(shù)據(jù),指的就是在現(xiàn)場實時采集到的數(shù)據(jù),其特點就是數(shù)據(jù)量特別大,因此對于此類數(shù)據(jù)的存儲提出了更高的要求。第二就是基礎(chǔ)數(shù)據(jù),指的是電力設(shè)備數(shù)學(xué)的一些數(shù)據(jù),其屬于設(shè)備管理的基本范疇之內(nèi),例如線路或者發(fā)電機(jī)等。第三就是日常的運行數(shù)據(jù),主要有電力自動化系統(tǒng)中記錄的數(shù)據(jù)以及各種職能部門在工作中處理的數(shù)據(jù)。就是市場數(shù)據(jù),因為電力行業(yè)的市場化改革正在逐步進(jìn)行,所以將市場數(shù)據(jù)納入數(shù)據(jù)分類中也是適應(yīng)發(fā)展趨勢的必然要求。
(二)數(shù)據(jù)獲取
獲取數(shù)據(jù)也可以被稱為采集數(shù)據(jù),指的是電力自動化的輸入,分為數(shù)據(jù)的采集以及處理和轉(zhuǎn)發(fā)等三個環(huán)節(jié)。與電力自動化系統(tǒng)相對應(yīng)的就是數(shù)據(jù)的傳輸是采集的關(guān)鍵。目前來看針對數(shù)據(jù)的傳輸,主要有有線以及無線兩種主要方式,有線傳輸?shù)姆绞桨斯饫w和電纜等,無線傳輸?shù)姆绞接形⒉ㄒ约盁o線擴(kuò)頻等。目前我國電力系統(tǒng)發(fā)展中主要采用的傳輸方式是有線傳輸,但是無線傳輸在一些特殊區(qū)域發(fā)揮出重要作用,因為無線傳輸具有減少鋪設(shè)線路的優(yōu)點所以在一些偏遠(yuǎn)地區(qū)的電網(wǎng)數(shù)據(jù)采集來說就具有較大優(yōu)勢。但是無線傳輸中的一些技術(shù)問題還是有待解決的,比如數(shù)據(jù)的實時性以及性等。如果解決了這些問題,無線傳輸可能成為電力自動化系統(tǒng)發(fā)展的新重點。
二、電力自動化系統(tǒng)中數(shù)據(jù)的特點分析
(一)性的特點
在電力自動化系統(tǒng)中存在著大量的數(shù)據(jù),這些數(shù)據(jù)的特點就是具備一定的獨立性,但是在子系統(tǒng)進(jìn)行交流的過程中這些數(shù)據(jù)也會包含其他子系統(tǒng)中的大量數(shù)據(jù),所以子系統(tǒng)之間的數(shù)據(jù)會存在交叉現(xiàn)象,如果不能對這些數(shù)據(jù)進(jìn)行妥善處理的話就會出現(xiàn)數(shù)據(jù)冗余的問題。一旦出現(xiàn)了數(shù)據(jù)的冗余很可能導(dǎo)致系統(tǒng)在處理數(shù)據(jù)時能力降低湖或者更新速度較慢,嚴(yán)重的話還可能導(dǎo)致系統(tǒng)數(shù)據(jù)的可信度降低。所以說為了能有效的保障數(shù)據(jù)的性,就需要對數(shù)據(jù)庫進(jìn)行統(tǒng)一的管理以及日常維護(hù)工作。通常來說對于離線數(shù)據(jù)庫可以比較容易進(jìn)行管理,實現(xiàn)其性難度不高,但是針對實時數(shù)據(jù)庫就需要將數(shù)據(jù)庫的信息映射到不同工作站的內(nèi)存中,就需要在線進(jìn)行統(tǒng)一管理來確保不同子工作站的數(shù)據(jù)庫進(jìn)行更新來避免重復(fù)性。
(二)數(shù)據(jù)共享性
目前在數(shù)據(jù)的共享方面主要的方式有文件的共享、基于web的數(shù)據(jù)共享以及直接方位內(nèi)存和網(wǎng)絡(luò)通訊、內(nèi)存數(shù)據(jù)庫等?;趙eb的數(shù)據(jù)共享,是通過互聯(lián)網(wǎng)的共享數(shù)據(jù)。目前隨著我國信息化的進(jìn)行以及網(wǎng)絡(luò)的普及,互聯(lián)網(wǎng)的影響已經(jīng)深入到了社會的不同層面以及角落,網(wǎng)絡(luò)帶寬也越來越大,網(wǎng)速也逐步提高,這就使得web數(shù)據(jù)共享方式變得更為可行。跟其他的數(shù)據(jù)共享方式比起來,基于web的數(shù)據(jù)共享技術(shù)充分利用了互聯(lián)網(wǎng)技術(shù),具有高效率低成本的優(yōu)勢,但是其缺點也較為明顯,實時性較差。近年來,因為基于內(nèi)存數(shù)據(jù)庫的數(shù)據(jù)共享方式具有結(jié)構(gòu)簡單同時靈活性和實時性較好、訪問速度較快等優(yōu)點所以得到了快速發(fā)展,這也是之后電力自動化系統(tǒng)發(fā)展的主要方向?;趦?nèi)存的數(shù)據(jù)共享指的就是把數(shù)據(jù)放在內(nèi)存中,其缺點就是開放性不夠好。為了實現(xiàn)其開放性可以利用dcom技術(shù)來實現(xiàn)其訪問接口。
三、數(shù)據(jù)流的安全性
目前伴隨著計算機(jī)以及網(wǎng)絡(luò)技術(shù)的快速發(fā)展,把數(shù)據(jù)流作為信息載體的系統(tǒng)內(nèi)部數(shù)據(jù)管理方式開始成為主流,通常來說數(shù)據(jù)流的特點就是實時性以及連續(xù)性、順序性,其過程中就是從數(shù)據(jù)進(jìn)入系統(tǒng)開始,數(shù)據(jù)在系統(tǒng)內(nèi)的各個環(huán)節(jié)進(jìn)行流動,其運動的基本策略跟系統(tǒng)的功能有關(guān)。隨著我國電力系統(tǒng)自動化水平的不斷提升出現(xiàn)了越來越多的需要處理的數(shù)據(jù)流,數(shù)據(jù)的結(jié)構(gòu)也更加復(fù)雜。所以只有進(jìn)行合理的部署,數(shù)據(jù)流才可以逐步的提高其傳輸?shù)男蕘肀U想娏ψ詣踊到y(tǒng)的安全性以及性。數(shù)據(jù)流在電力自動化系統(tǒng)中的關(guān)鍵,就是要解決系統(tǒng)的統(tǒng)一接口的問題以及實現(xiàn)子系統(tǒng)之間的互聯(lián)。其未來發(fā)展的基本方向就是實現(xiàn)電力自動化系統(tǒng)的數(shù)據(jù)流優(yōu)化策略。 隨著電力系統(tǒng)中數(shù)據(jù)的存
儲了急劇增加,互聯(lián)網(wǎng)中的病毒等也開始泛濫,但是礙于一些硬件設(shè)備的限制導(dǎo)致了電力系統(tǒng)中的數(shù)據(jù)備份等還是不夠完善,這就大大的增加了數(shù)據(jù)丟失的風(fēng)險。數(shù)據(jù)丟失很可能會導(dǎo)致電位運行的不穩(wěn)定甚至是癱瘓。所以說數(shù)據(jù)的安全問題成為了現(xiàn)在電力自動化發(fā)展中十分重要的問題??梢詮囊韵聨讉€角度入手談及提高數(shù)據(jù)安全性。
及時就是制度完善來確保數(shù)據(jù)安全。要在企業(yè)內(nèi)逐步制定以及完善有關(guān)計算機(jī)使用和數(shù)據(jù)安全維護(hù)的規(guī)章制度,通過加強對工作人員的思想教育來提高員工對于數(shù)據(jù)安全的重視晨讀,并且在之后的日常工作中要按照操作規(guī)范等來進(jìn)行數(shù)據(jù)的傳輸以及保存,形成良好的數(shù)據(jù)安全意識。
第二就是硬件設(shè)施的安全性,針對控制室的設(shè)計等要符合建筑規(guī)范,水電的安裝要符合技術(shù)要求,同時還需要安裝防火以及防盜、防雷等措施。控制室要有必要的安全保衛(wèi)措施。
就是技術(shù)性的安全,系統(tǒng)要有完整性,要安裝必備的防病毒軟件,并且及時的對操作系統(tǒng)等進(jìn)行升級,同時定式更新病毒庫。有關(guān)數(shù)據(jù)要進(jìn)行及時的備份。計算機(jī)來設(shè)置密碼,重要的文件要加密。數(shù)據(jù)的刪除要進(jìn)行記錄以便可以恢復(fù)誤操作的數(shù)據(jù)。要堅持網(wǎng)絡(luò)專用制度,把電力自動化的網(wǎng)絡(luò)跟商業(yè)網(wǎng)絡(luò)隔離開來。同級別部門之間進(jìn)行互相訪問是需要設(shè)置密碼,下級對于上級網(wǎng)絡(luò)的訪問需要進(jìn)認(rèn)證,通過技術(shù)上的進(jìn)步來確保數(shù)據(jù)的安全才是核心所在。
結(jié)語:
電力自動化系統(tǒng)是一個會涉及到多方面內(nèi)容的系統(tǒng),其核心就是數(shù)據(jù)的處理。正確有效的數(shù)據(jù)處理是保障電力自動化系統(tǒng)安全有效運轉(zhuǎn)的必要手段。目前隨著計算機(jī)技術(shù)以及網(wǎng)絡(luò)技術(shù)的發(fā)展,在電力系統(tǒng)中的運用讓數(shù)據(jù)的處理凸顯出更高的價值。尤其是我國目前無線網(wǎng)絡(luò)逐步興起,無線網(wǎng)絡(luò)數(shù)據(jù)傳輸?shù)男砸约皩崟r性等問題解決之后,必將成為數(shù)據(jù)處理的重要增長點,所以基于無線網(wǎng)絡(luò)的數(shù) 據(jù)處理等將是一個新的課題。
數(shù)據(jù)處理論文:分析電力自動化系統(tǒng)的數(shù)據(jù)處理
對于我國的經(jīng)濟(jì)發(fā)展來說電力系統(tǒng)就是最重要的大動脈之一,目前隨著經(jīng)濟(jì)迅速發(fā)展以及社會建設(shè)的不斷完善,我國不同行業(yè)以及各地居民對于電力系統(tǒng) 發(fā)展提出了更高的要求。電力系統(tǒng)的自動化技術(shù),其作用就是可以更好的實現(xiàn)對于運行狀態(tài)的集中展示以及及時的監(jiān)控,并且可以對之進(jìn)行優(yōu)化,同時提高安全運行的性能。在電力自動化系統(tǒng)中數(shù)
據(jù)處理部分是其核心,也是信息流的主要表現(xiàn)形式。一些高新技術(shù),比如計算機(jī)或網(wǎng)絡(luò)通訊技術(shù)等在電力自動化技術(shù)中的應(yīng)用,讓其數(shù)據(jù)處理工作也日趨復(fù)雜,可以快速以及的獲取和處理數(shù)據(jù)是保障電力自動化系統(tǒng)正常運轉(zhuǎn)的保障。本文對此作出簡要的分析和探討。
一、電力自動化系統(tǒng)的數(shù)據(jù)分析
(一)數(shù)據(jù)分類
一般在電力自動化系統(tǒng)中,可以根據(jù)數(shù)據(jù)來源的不同將其分為原始數(shù)據(jù)以及再生數(shù)據(jù)。原始數(shù)據(jù)指的就是在現(xiàn)場直接采集的數(shù)據(jù),再生數(shù)據(jù)具體是指在原始數(shù)據(jù)的基礎(chǔ)之上進(jìn)行二次加工得到的數(shù)據(jù)。根據(jù)電力自動化系統(tǒng)的特點可以將數(shù)據(jù)進(jìn)行更為細(xì)致的分類:
首先就是現(xiàn)場的實時數(shù)據(jù),指的就是在現(xiàn)場實時采集到的數(shù)據(jù),其特點就是數(shù)據(jù)量特別大,因此對于此類數(shù)據(jù)的存儲提出了更高的要求。第二就是基礎(chǔ)數(shù)據(jù),指的是電力設(shè)備數(shù)學(xué)的一些數(shù)據(jù),其屬于設(shè)備管理的基本范疇之內(nèi),例如線路或者發(fā)電機(jī)等。第三就是日常的運行數(shù)據(jù),主要有電力自動化系統(tǒng)中記錄的數(shù)據(jù)以及各種職能部門在工作中處理的數(shù)據(jù)。就是市場數(shù)據(jù),因為電力行業(yè)的市場化改革正在逐步進(jìn)行,所以將市場數(shù)據(jù)納入數(shù)據(jù)分類中也是適應(yīng)發(fā)展趨勢的必然要求。
(二)數(shù)據(jù)獲取
獲取數(shù)據(jù)也可以被稱為采集數(shù)據(jù),指的是電力自動化的輸入,分為數(shù)據(jù)的采集以及處理和轉(zhuǎn)發(fā)等三個環(huán)節(jié)。與電力自動化系統(tǒng)相對應(yīng)的就是數(shù)據(jù)的傳輸是采集的關(guān)鍵。目前來看針對數(shù)據(jù)的傳輸,主要有有線以及無線兩種主要方式,有線傳輸?shù)姆绞桨斯饫w和電纜等,無線傳輸?shù)姆绞接形⒉ㄒ约盁o線擴(kuò)頻等。目前我國電力系統(tǒng)發(fā)展中主要采用的傳輸方式是有線傳輸,但是無線傳輸在一些特殊區(qū)域發(fā)揮出重要作用,因為無線傳輸具有減少鋪設(shè)線路的優(yōu)點所以在一些偏遠(yuǎn)地區(qū)的電網(wǎng)數(shù)據(jù)采集來說就具有較大優(yōu)勢。但是無線傳輸中的一些技術(shù)問題還是有待解決的,比如數(shù)據(jù)的實時性以及性等。如果解決了這些問題,無線傳輸可能成為電力自動化系統(tǒng)發(fā)展的新重點。
二、電力自動化系統(tǒng)中數(shù)據(jù)的特點分析
(一)性的特點
在電力自動化系統(tǒng)中存在著大量的數(shù)據(jù),這些數(shù)據(jù)的特點就是具備一定的獨立性,但是在子系統(tǒng)進(jìn)行交流的過程中這些數(shù)據(jù)也會包含其他子系統(tǒng)中的大量數(shù)據(jù),所以子系統(tǒng)之間的數(shù)據(jù)會存在交叉現(xiàn)象,如果不能對這些數(shù)據(jù)進(jìn)行妥善處理的話就會出現(xiàn)數(shù)據(jù)冗余的問題。一旦出現(xiàn)了數(shù)據(jù)的冗余很可能導(dǎo)致系統(tǒng)在處理數(shù)據(jù)時能力降低湖或者更新速度較慢,嚴(yán)重的話還可能導(dǎo)致系統(tǒng)數(shù)據(jù)的可信度降低。所以說為了能有效的保障數(shù)據(jù)的性,就需要對數(shù)據(jù)庫進(jìn)行統(tǒng)一的管理以及日常維護(hù)工作。通常來說對于離線數(shù)據(jù)庫可以比較容易進(jìn)行管理,實現(xiàn)其性難度不高,但是針對實時數(shù)據(jù)庫就需要將數(shù)據(jù)庫的信息映射到不同工作站的內(nèi)存中,就需要在線進(jìn)行統(tǒng)一管理來確保不同子工作站的數(shù)據(jù)庫進(jìn)行更新來避免重復(fù)性。
(二)數(shù)據(jù)共享性
目前在數(shù)據(jù)的共享方面主要的方式有文件的共享、基于web的數(shù)據(jù)共享以及直接方位內(nèi)存和網(wǎng)絡(luò)通訊、內(nèi)存數(shù)據(jù)庫等?;趙eb的數(shù)據(jù)共享,是通過互聯(lián)網(wǎng)的共享數(shù)據(jù)。目前隨著我國信息化的進(jìn)行以及網(wǎng)絡(luò)的普及,互聯(lián)網(wǎng)的影響已經(jīng)深入到了社會的不同層面以及角落,網(wǎng)絡(luò)帶寬也越來越大,網(wǎng)速也逐步提高,這就使得web數(shù)據(jù)共享方式變得更為可行。跟其他的數(shù)據(jù)共享方式比起來,基于web的數(shù)據(jù)共享技術(shù)充分利用了互聯(lián)網(wǎng)技術(shù),具有高效率低成本的優(yōu)勢,但是其缺點也較為明顯,實時性較差。近年來,因為基于內(nèi)存數(shù)據(jù)庫的數(shù)據(jù)共享方式具有結(jié)構(gòu)簡單同時靈活性和實時性較好、訪問速度較快等優(yōu)點所以得到了快速發(fā)展,這也是之后電力自動化系統(tǒng)發(fā)展的主要方向。基于內(nèi)存的數(shù)據(jù)共享指的就是把數(shù)據(jù)放在內(nèi)存中,其缺點就是開放性不夠好。為了實現(xiàn)其開放性可以利用dcom技術(shù)來實現(xiàn)其訪問接口。
三、數(shù)據(jù)流的安全性
目前伴隨著計算機(jī)以及網(wǎng)絡(luò)技術(shù)的快速發(fā)展,把數(shù)據(jù)流作為信息載體的系統(tǒng)內(nèi)部數(shù)據(jù)管理方式開始成為主流,通常來說數(shù)據(jù)流的特點就是實時性以及連續(xù)性、順序性,其過程中就是從數(shù)據(jù)進(jìn)入系統(tǒng)開始,數(shù)據(jù)在系統(tǒng)內(nèi)的各個環(huán)節(jié)進(jìn)行流動,其運動的基本策略跟系統(tǒng)的功能有關(guān)。隨著我國電力系統(tǒng)自動化水平的不斷提升出現(xiàn)了越來越多的需要處理的數(shù)據(jù)流,數(shù)據(jù)的結(jié)構(gòu)也更加復(fù)雜。所以只有進(jìn)行合理的部署,數(shù)據(jù)流才可以逐步的提高其傳輸?shù)男蕘肀U想娏ψ詣踊到y(tǒng)的安全性以及性。數(shù)據(jù)流在電力自動化系統(tǒng)中的關(guān)鍵,就是要解決系統(tǒng)的統(tǒng)一接口的問題以及實現(xiàn)子系統(tǒng)之間的互聯(lián)。其未來發(fā)展的基本方向就是實現(xiàn)電力自動化系統(tǒng)的數(shù)據(jù)流優(yōu)化策略。 隨著電力系統(tǒng)中數(shù)據(jù)的存
儲了急劇增加,互聯(lián)網(wǎng)中的病毒等也開始泛濫,但是礙于一些硬件設(shè)備的限制導(dǎo)致了電力系統(tǒng)中的數(shù)據(jù)備份等還是不夠完善,這就大大的增加了數(shù)據(jù)丟失的風(fēng)險。數(shù)據(jù)丟失很可能會導(dǎo)致電位運行的不穩(wěn)定甚至是癱瘓。所以說數(shù)據(jù)的安全問題成為了現(xiàn)在電力自動化發(fā)展中十分重要的問題??梢詮囊韵聨讉€角度入手談及提高數(shù)據(jù)安全性。
及時就是制度完善來確保數(shù)據(jù)安全。要在企業(yè)內(nèi)逐步制定以及完善有關(guān)計算機(jī)使用和數(shù)據(jù)安全維護(hù)的規(guī)章制度,通過加強對工作人員的思想教育來提高員工對于數(shù)據(jù)安全的重視晨讀,并且在之后的日常工作中要按照操作規(guī)范等來進(jìn)行數(shù)據(jù)的傳輸以及保存,形成良好的數(shù)據(jù)安全意識。
第二就是硬件設(shè)施的安全性,針對控制室的設(shè)計等要符合建筑規(guī)范,水電的安裝要符合技術(shù)要求,同時還需要安裝防火以及防盜、防雷等措施??刂剖乙斜匾陌踩Pl(wèi)措施。
就是技術(shù)性的安全,系統(tǒng)要有完整性,要安裝必備的防病毒軟件,并且及時的對操作系統(tǒng)等進(jìn)行升級,同時定式更新病毒庫。有關(guān)數(shù)據(jù)要進(jìn)行及時的備份。計算機(jī)來設(shè)置密碼,重要的文件要加密。數(shù)據(jù)的刪除要進(jìn)行記錄以便可以恢復(fù)誤操作的數(shù)據(jù)。要堅持網(wǎng)絡(luò)專用制度,把電力自動化的網(wǎng)絡(luò)跟商業(yè)網(wǎng)絡(luò)隔離開來。同級別部門之間進(jìn)行互相訪問是需要設(shè)置密碼,下級對于上級網(wǎng)絡(luò)的訪問需要進(jìn)認(rèn)證,通過技術(shù)上的進(jìn)步來確保數(shù)據(jù)的安全才是核心所在。
結(jié)語:
電力自動化系統(tǒng)是一個會涉及到多方面內(nèi)容的系統(tǒng),其核心就是數(shù)據(jù)的處理。正確有效的數(shù)據(jù)處理是保障電力自動化系統(tǒng)安全有效運轉(zhuǎn)的必要手段。目前隨著計算機(jī)技術(shù)以及網(wǎng)絡(luò)技術(shù)的發(fā)展,在電力系統(tǒng)中的運用讓數(shù)據(jù)的處理凸顯出更高的價值。尤其是我國目前無線網(wǎng)絡(luò)逐步興起,無線網(wǎng)絡(luò)數(shù)據(jù)傳輸?shù)男砸约皩崟r性等問題解決之后,必將成為數(shù)據(jù)處理的重要增長點,所以基于無線網(wǎng)絡(luò)的數(shù) 據(jù)處理等將是一個新的課題。
數(shù)據(jù)處理論文:面向中小企業(yè)智能數(shù)據(jù)處理工具
吳 堅 王家捷 張波
摘要:
本文分析了目前國內(nèi)企業(yè)MIS應(yīng)用的的現(xiàn)狀,分析了今后企業(yè)信息系統(tǒng)的應(yīng)用需求,根據(jù)目前狀況和需求介紹了一個商業(yè)智能工具軟件的設(shè)計。
關(guān)鍵詞:MIS DSS 商業(yè)智能 OLAP 數(shù)據(jù)倉庫
一、企業(yè)MIS應(yīng)用現(xiàn)狀
隨著國內(nèi)企業(yè)改革的不斷深入,企業(yè)管理也隨之深化,企業(yè)領(lǐng)導(dǎo)、管理人員和專業(yè)技術(shù)人員都更加充分認(rèn)識到了信息資源只有通過信息系統(tǒng)的加工處理,才能得到更有效的利用。信息系統(tǒng)的建設(shè)在社會經(jīng)濟(jì)活動中起著越來越重要的作用。經(jīng)過幾十年的探索與實踐,我國各企事業(yè)信息系統(tǒng)的建設(shè)也由單項應(yīng)用、小系統(tǒng)應(yīng)用向大型化和網(wǎng)絡(luò)化方向發(fā)展。
但是,我們也清楚地看到目前MIS的建設(shè)仍有許多不盡人意之處,如:許多MIS往往只限于對數(shù)據(jù)的統(tǒng)計分析,而真正涉及到預(yù)測、決策及優(yōu)化方面的工作較少,結(jié)果是只能代替一部分繁重的手工勞動,并沒有充分發(fā)揮MIS的效益。當(dāng)前的MIS所必須解決的一些較普遍的問題有:
涉及的數(shù)據(jù)種類多、數(shù)據(jù)量大,而且數(shù)據(jù)往往分散在各業(yè)務(wù)部門,每個業(yè)務(wù)部門對信息的收集方式、分析方法、統(tǒng)計口徑、報表輸出形式等都有各自獨特的處理要求。 具有明顯的時變性。管理制度的不斷改革和經(jīng)濟(jì)形式的不斷變化,引起信息處理方法頻繁變更,各業(yè)務(wù)口采集的數(shù)據(jù),及對基礎(chǔ)數(shù)據(jù)的分析統(tǒng)計方法,報表輸出格式都會隨著形勢的發(fā)展而有新的變化和側(cè)重。這些修改必須由專業(yè)程序員利用較長的時間才能完成,遠(yuǎn)遠(yuǎn)無法滿足對系統(tǒng)數(shù)據(jù)靈活查詢,隨機(jī)查詢的要求,浪費了寶貴的數(shù)據(jù)內(nèi)在的價值。而且由于系統(tǒng)不停地被改動,穩(wěn)定性也大大降低。 新、舊系統(tǒng)的繼承與發(fā)展。有的企業(yè)原來就有MIS,但是舊的系統(tǒng)不能滿足各業(yè)務(wù)部門自身的業(yè)務(wù)需求,而且早期的系統(tǒng)多采用單機(jī)環(huán)境,所采用的應(yīng)用平臺及數(shù)據(jù)庫系統(tǒng)也各不相同。怎樣將這些現(xiàn)有的、零散的、獨立的信息繼承起來,有效地利用,也是企業(yè)信息化建設(shè)的重要課題。 缺乏輔助決策支持功能。許多MIS往往只限于解決一些具體的業(yè)務(wù)處理問題,對數(shù)據(jù)的統(tǒng)計分析較少,而涉及到多維分析、決策支持及數(shù)據(jù)挖掘方面的工作則更少,使大量數(shù)據(jù)不能充分發(fā)揮效益。
二、企業(yè)通用管理軟件現(xiàn)狀
我國中小型企業(yè)占國內(nèi)企業(yè)總數(shù)的94%,它們在市場中具活力。在大型企業(yè)對計算機(jī)的需求已經(jīng)趨于平穩(wěn)的時候,中小型企業(yè)用戶就顯得格外的突出。中小型企業(yè)由于企業(yè)自身的規(guī)模有限,沒有能力自己獨立開發(fā)內(nèi)部管理軟件,而并不十分健全的內(nèi)部經(jīng)營體系又急需系統(tǒng)化的管理,這就為企業(yè)管理軟件的發(fā)展打下了堅實的基礎(chǔ)。
當(dāng)前,建立競爭優(yōu)勢,提高市場競爭力已經(jīng)成為企業(yè)管理的核心,而原有的管理軟件已經(jīng)越來越不能適應(yīng)管理實踐的要求,新的時代需要新一代的管理軟件。我國企業(yè)管理軟件的發(fā)展,在經(jīng)歷了單項管理系統(tǒng)、MRP/MRPⅡ應(yīng)用之后,正朝著更先進(jìn)的ERP模式發(fā)展。ERP(企業(yè)資源計劃)是管理信息系統(tǒng)在九十年代的近期發(fā)展,近年來被引入到中國后,受到國內(nèi)的廣泛關(guān)注。ERP不僅集成了企業(yè)運營和管理的各主要部分(財務(wù)、分銷、制造、人力資源、決策支持),更代表了先進(jìn)的管理思想和管理方式。我們可以預(yù)見, ERP將作為管理現(xiàn)代化的重要工具,在我國企業(yè)等組織得到越來越廣泛的應(yīng)用。
但是,當(dāng)前國內(nèi)ERP 系統(tǒng)的數(shù)據(jù)分析能力大都不夠強大,而ERP系統(tǒng)啟動運行之后,其數(shù)據(jù)分析能力是決定性能的重要指標(biāo)。面向ERP軟件的數(shù)據(jù)分析功能被稱為“商業(yè)智能”,其主要功能是對ERP系統(tǒng)積累的數(shù)據(jù)進(jìn)行分析處理,形象地說就是幫助用戶發(fā)現(xiàn)ERP系統(tǒng)積累的數(shù)據(jù)的潛在價值??梢赃@么說,普通的ERP 系統(tǒng)能夠幫助用戶規(guī)范企業(yè)的管理,而擁有強大數(shù)據(jù)分析功能的ERP 系統(tǒng)則能夠使用戶從這種規(guī)范的管理中獲得更大的效益。因此,如果企業(yè)要采用ERP系統(tǒng),一般需要一個強大的數(shù)據(jù)分析部件。這個數(shù)據(jù)分析部件能夠與ERP系統(tǒng)集成,在ERP系統(tǒng)運行過程中采集數(shù)據(jù)進(jìn)行分析,并能將樣本數(shù)據(jù)和分析結(jié)果存入數(shù)據(jù)倉庫以便用戶查詢采用。
三、企業(yè)信息系統(tǒng)應(yīng)用需求
1、企業(yè)對數(shù)據(jù)倉庫的需求
調(diào)查研究表明,大多數(shù)企業(yè)并不缺少數(shù)據(jù),而是受阻于過量的冗余數(shù)據(jù)和數(shù)據(jù)不一致;而且它們變得越來越難于訪問、管理和用于決策支持;其數(shù)據(jù)量正以成倍的速度增長。這樣,信息中心面臨著不斷增長的決策支持的需求,但是,開發(fā)應(yīng)用變得越來越復(fù)雜和耗費人力。那么怎樣把大量的數(shù)據(jù)轉(zhuǎn)換成的、商用的信息以便于決策支持呢?數(shù)據(jù)倉庫正廣泛地被公認(rèn)為是好的解決方案。
數(shù)據(jù)倉庫化是企業(yè)范圍內(nèi)數(shù)據(jù)的處理過程,它將企業(yè)內(nèi)分散的原始操作數(shù)據(jù)和來自外部的數(shù)據(jù)匯集和整理在一起,為企業(yè)提供完整、及時、和明了的決策信息,使最終用戶能夠真正利用DSS工具直接從企業(yè)信息池中隨機(jī)地提取、分析數(shù)據(jù),有效地服務(wù)于企業(yè)的多方位決策。作為一個決策支持環(huán)境,DW(Data Warehouse)收集存儲了各種不同數(shù)據(jù)源中的數(shù)據(jù)。通過數(shù)據(jù)的組織給決策支持者提供分布在整個企業(yè)內(nèi)部跨平臺的數(shù)據(jù)。
再下一步,現(xiàn)有的管理系統(tǒng)和現(xiàn)有的數(shù)據(jù)倉庫將得到擴(kuò)展,一是使數(shù)據(jù)倉庫從一種局部的企業(yè)解決方案擴(kuò)展到企業(yè)外部,擴(kuò)展到企業(yè)的用戶中去,使企業(yè)用戶的數(shù)據(jù)倉庫使用面更加廣泛,這些可以通過Internet/Intranet的幫助來實現(xiàn),這是數(shù)據(jù)倉庫與電子商務(wù)相互融合的一點;二是使數(shù)據(jù)倉庫從一種企業(yè)數(shù)據(jù)管理工具擴(kuò)展到企業(yè)輔助決策工具,能夠充分利用數(shù)據(jù)倉庫中的數(shù)據(jù)資源,為企業(yè)的發(fā)展起到輔助決策的功能,使企業(yè)用戶的數(shù)據(jù)倉庫得到更加深入的使用,這些可以通過數(shù)據(jù)庫廠商提供的工具來實現(xiàn),也可以由其它軟件公司提供的獨立工具包來實現(xiàn),這是數(shù)據(jù)倉庫與商務(wù)智能相互融合的一點。
2、企業(yè)對Internet/Intranet的需求
企業(yè)決策系統(tǒng)與互聯(lián)網(wǎng)的結(jié)合,正成為企業(yè)亟待解決的焦點問題之一。因為隨著企業(yè)內(nèi)部和企業(yè)間的信息交流量的增大,用戶已不再滿足于簡單的文件共享方式,而是追求一種更靈活、更方便的數(shù)據(jù)共享策略,這便是大批企業(yè)用戶將自身以數(shù)據(jù)庫為核心的MIS系統(tǒng)從客戶機(jī)/服務(wù)器計算模式
向Internet/Intranet的系統(tǒng)架構(gòu)轉(zhuǎn)變。另外,發(fā)展到一定規(guī)模的企業(yè),其自身的國際化已成為必然,一些分支機(jī)構(gòu)可能是跨地區(qū)、跨國界的,因此,在數(shù)據(jù)傳遞、信息共享和時,Internet成為這些跨地域企業(yè)的必然選擇;激烈的市場競爭,也要求企業(yè)對市場變化做出快速的反應(yīng),用戶的需求也不再是對離散的單個信息做簡單的查詢,而是要求能夠提供一種對企業(yè)大量數(shù)據(jù)做出匯總的、多層次的、多側(cè)面的快速靈活的查詢、分析及報表制作手段。因此,市場上最需求的是如何使數(shù)據(jù)庫中的大量信息滿足人們不斷變化的業(yè)務(wù)需求,并能及時為管理決策支持提供服務(wù)。如何將企業(yè)決策支持系統(tǒng)與Internet/Intranet技術(shù)有機(jī)地結(jié)合起來,提供基于Web,集查詢、報表、OLAP(On-Line Analytical Processing)分析及數(shù)據(jù)挖掘為一體的企業(yè)級決策支持解決方案,已經(jīng)成為一個重要課題。四、企業(yè)智能數(shù)據(jù)處理工具的設(shè)計
針對企業(yè)應(yīng)用需求,我們分別在一九九五年和一九九七年開發(fā)出“科力MIS—多媒體MIS系統(tǒng)生成工具軟件”DOS版和Windows版本,這個工具軟件主要解決用戶不寫程序,通過可視化交互設(shè)計工具建立管理系統(tǒng)的需求,它還支持聲音、圖像和AVI活動圖像的數(shù)據(jù)庫存儲和顯示等的多媒體應(yīng)用。經(jīng)過幾年來的實踐,我們認(rèn)為企業(yè)迫切需要一種智能化的數(shù)據(jù)處理工具,這類工具將解決如下問題:
建立在企業(yè)已有MIS系統(tǒng)或ERP系統(tǒng)的基礎(chǔ)之上,利用已有的數(shù)據(jù)?,F(xiàn)在有許多中小型企業(yè)已經(jīng)有了一些MIS系統(tǒng)或ERP系統(tǒng),但由于形勢的變化,很快就會有進(jìn)一步的需求,因此迫切需要新的軟件,既能解決出現(xiàn)的問題,又能利用已有的數(shù)據(jù)。 為部分中型企業(yè)提供基于數(shù)據(jù)倉庫的解決方案。對小型企業(yè),出于各方面的考慮,一般都不采用基于數(shù)據(jù)倉庫的解決方案,而對于中型企業(yè),則應(yīng)該給他們一個建立自己的數(shù)據(jù)倉庫的機(jī)會。如果能建立數(shù)據(jù)倉庫,就能更好地組織企業(yè)的數(shù)據(jù),智能決策工具也能發(fā)揮更大的功效。 可以為小型企業(yè)提供通用MIS系統(tǒng)生成工具。對一些需求比較簡單的小型企業(yè),不用用戶編程,就能通過可視化的方法實現(xiàn)一個MIS系統(tǒng),再結(jié)合智能決策系統(tǒng),將能實現(xiàn)更靈活、更強大的功能。 既可以實現(xiàn)傳統(tǒng)的查詢及統(tǒng)計報表功能,又可以實現(xiàn)多維數(shù)據(jù)分析、決策支持及數(shù)據(jù)發(fā)掘等高級功能。智能決策工具可以實現(xiàn)極為靈活的查詢和報表,而且內(nèi)嵌了部分分析功能,可以稱之為交互式的查詢和報表。另外,即使在較大型的MIS系統(tǒng)甚至ERP系統(tǒng)中,都很難找到多維數(shù)據(jù)分析、決策支持及數(shù)據(jù)發(fā)掘等高級功能,智能決策工具內(nèi)卻提供這些功能,這樣就可以很好地利用原有的數(shù)據(jù),大大加強原有系統(tǒng)的能力. 支持Internet/Intranet。絕大部分的輸出都可以定向為HTML文件,這中間包括查詢結(jié)果、報表、分析和數(shù)據(jù)挖掘的結(jié)果等;另外,還提供部分功能在基于瀏覽器的環(huán)境中實現(xiàn),使用戶可以通過瀏覽器來進(jìn)行諸如查詢數(shù)據(jù)、瀏覽報表、簡單分析等功能。
五、系統(tǒng)的結(jié)構(gòu)
系統(tǒng)分為兩大部分棗分析設(shè)計部分和應(yīng)用系統(tǒng)部分,分別面向企業(yè)IS(信息系統(tǒng)管理員)人員與企業(yè)管理人員,IS人員除了負(fù)責(zé)高級數(shù)據(jù)分析工作以外,還負(fù)責(zé)為管理人員設(shè)計具體應(yīng)用系統(tǒng),由于大部分具體的應(yīng)用工作可以由管理人員來完成,所以從另一個方面緩解了信息人才缺乏的問題。應(yīng)用系統(tǒng)部分的功能結(jié)構(gòu)圖見圖一,設(shè)計部分功能結(jié)構(gòu)圖見圖二。系統(tǒng)中最重要的是“描述層”的設(shè)計。
在一般的商業(yè)用戶訪問數(shù)據(jù)時,他們最擔(dān)心的往往是復(fù)雜的數(shù)據(jù)庫術(shù)語和繁復(fù)的數(shù)據(jù)庫操作。如何才能賦予這些商業(yè)用戶自主訪問數(shù)據(jù)庫和數(shù)據(jù)倉庫中信息的能力,使他們可以把那些數(shù)據(jù)庫術(shù)語和操作拋之腦后呢?我們在此使用了一種稱為“描述層”的技術(shù)來解決這個問題。在使用了“描述層”技術(shù)后,不但解決了一般商業(yè)用戶擔(dān)心的問題,而且同時也提供了IS人員控制和管理數(shù)據(jù)訪問所必須的工具。這一技術(shù)把復(fù)雜的數(shù)據(jù)庫結(jié)構(gòu)描述成易于理解的業(yè)務(wù)術(shù)語,把商業(yè)用戶同技術(shù)性的數(shù)據(jù)庫術(shù)語以及復(fù)雜的SQL訪問語言分離開來。它就像一個透鏡,用戶可以通過它來看數(shù)據(jù)倉庫。這樣最終用戶無須具備計算機(jī)專業(yè)知識,更不必是數(shù)據(jù)庫方面的專家,就能夠自主地訪問公共數(shù)據(jù),分析信息,從而更好地理解企業(yè)發(fā)展的趨勢,作出明智的決策。
“描述層”可以被稱為一個覆蓋在數(shù)據(jù)庫內(nèi)部數(shù)據(jù)對象之上的一個解釋層,是用戶和數(shù)據(jù)庫之間的一個代碼翻譯層,也就是將數(shù)據(jù)庫中比較凌亂、復(fù)雜的數(shù)據(jù)對象(例如:存儲在數(shù)據(jù)表中的各個字段的記錄)通過預(yù)先定義好的規(guī)則(“描述層”)過濾轉(zhuǎn)換成實際使用的業(yè)務(wù)對象,例如:人員姓名、物資類型等等。同時,“描述層”的功能不僅僅在于過濾和映射,還可以對數(shù)據(jù)通過預(yù)先定義好的規(guī)則進(jìn)行重組,例如在數(shù)據(jù)庫中沒有的高層數(shù)據(jù)(比如:通過價格和銷售量在本地提取銷售額),所以我們可以通過“描述層”給數(shù)據(jù)庫增加一些不存在而又有實際意義的內(nèi)容。另外,我們還可以利用“描述層”來增加數(shù)據(jù)庫中數(shù)據(jù)所包含的信息量(比如:建立某一字段的分類規(guī)則,使數(shù)據(jù)庫中的記錄可以分屬于不同的類別,具體的例子是,按銷售業(yè)績多少分為優(yōu)、良、中、差,用戶就可以直接用諸如 “銷售業(yè)績=優(yōu)”之類的條件進(jìn)行查詢;類似的還有分層規(guī)則等其它許多規(guī)則)。,我們還可以在“描述層”中加入一些預(yù)定義的條件,在以后的查詢或分析時,就可以直接從“描述層”中提取條件。使用“描述層”重組數(shù)據(jù)的實際意義在于:數(shù)據(jù)庫內(nèi)大量珍貴的數(shù)據(jù)資源不再是只有數(shù)據(jù)庫開發(fā)人員才能理解的“天書”,通過“描述層”的解釋和組織,大多數(shù)不具備計算機(jī)專業(yè)知識的業(yè)務(wù)人員,可以直接使用這些數(shù)據(jù)。
在這個部分,主要的工作就是兩點,即“描述層”的定義與解釋。在“描述層”的定義部分,要進(jìn)行各種不同類型的定義,具體來說就是上一段提到的幾種類型,然后將各個類型的定義作為元數(shù)據(jù)進(jìn)行存儲。在定義的過程中,必然要通過數(shù)據(jù)庫連接工具來對數(shù)據(jù)庫或數(shù)據(jù)倉庫進(jìn)行訪問,再按照數(shù)據(jù)庫的結(jié)構(gòu)和內(nèi)容來設(shè)計各個不同的“描述”。另外,在以后使用本系統(tǒng)的其它主體部分如查詢、報表、分析和數(shù)據(jù)挖掘部分時,將用到“描述層”中定義的“描述”,這是就需要“描述層”的解釋部分來進(jìn)行解釋,將“描述”語言翻譯為數(shù)據(jù)庫能夠接受的語言。
本軟件設(shè)計中的另一個重點是體現(xiàn)商業(yè)智能化的數(shù)據(jù)挖掘功能,隨著數(shù)據(jù)庫技術(shù)的不斷發(fā)展及數(shù)據(jù)庫管理系統(tǒng)的廣泛應(yīng)用,數(shù)據(jù)庫中存儲的數(shù)據(jù)量急劇增大,可是目前用于對這些數(shù)據(jù)進(jìn)行分析處理的工具卻很少?,F(xiàn)在所能做到的只是對數(shù)據(jù)庫中已有的數(shù)據(jù)進(jìn)行由人驅(qū)動的分析,人們通過這些數(shù)據(jù)所獲得的信息量僅僅是整個數(shù)據(jù)庫所包含的信息量的一部分,隱藏在這些數(shù)據(jù)之后的更重要的信息是關(guān)于這些數(shù)據(jù)的整體特征的描述及對其發(fā)展趨勢的預(yù)測,這些信息在決策生成的過程中具有重要的參考價值。
數(shù)據(jù)庫中的知識發(fā)現(xiàn)(KDD)就是利用機(jī)器學(xué)習(xí)的方法從數(shù)據(jù)庫中提取有價值知識的過程,是數(shù)據(jù)庫技術(shù)和機(jī)器學(xué)習(xí)兩個學(xué)科的交叉學(xué)科。數(shù)據(jù)庫技術(shù)側(cè)重于對數(shù)據(jù)存儲處理的高效率方法的研究,而機(jī)器學(xué)習(xí)則側(cè)重于設(shè)計新的方法從數(shù)據(jù)中提取知識。KDD利用數(shù)據(jù)庫技術(shù)對數(shù)據(jù)進(jìn)行前端處理,而利用機(jī)器學(xué)習(xí)方法則從處理后的數(shù)據(jù)中提取有用的知識。KDD與其他學(xué)科也有很強的聯(lián)系,如統(tǒng)計學(xué)、數(shù)學(xué)和可視化技術(shù)等等。
在我們的系統(tǒng)中,將實現(xiàn)一個完整的KDD工具,也可以稱為數(shù)據(jù)挖掘(Data Mining)工具。因為我們要面向廣大商業(yè)用戶,所以我們的系統(tǒng)特別注重對用戶與數(shù)據(jù)庫交互的支持,由用戶根據(jù)數(shù)據(jù)庫中的數(shù)據(jù),選擇一種模型,然后選擇有關(guān)數(shù)據(jù)進(jìn)行知識的挖掘,并不斷對模型的數(shù)據(jù)進(jìn)行調(diào)整優(yōu)化。整個處理過程分為下面一些步驟:
數(shù)據(jù)發(fā)現(xiàn):了解任務(wù)所涉及的原始數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)及數(shù)據(jù)所代表的意義,并從數(shù)據(jù)庫中提取相關(guān)數(shù)據(jù)。
數(shù)據(jù)清理:對用戶的數(shù)據(jù)進(jìn)行清理以使其適于后續(xù)的數(shù)據(jù)處理。這需要用戶的背景知識,同時也應(yīng)該根據(jù)實際的任務(wù)確定清理規(guī)則。
模型的確定:通過對數(shù)據(jù)的分析選擇一個初始的模型。模型定義一般分為三個步驟:數(shù)據(jù)分隔,模型選擇和參數(shù)選擇。在我們的系統(tǒng)中,主要引入了關(guān)聯(lián)規(guī)則模型和分類模型。
數(shù)據(jù)分析:對選中的模型進(jìn)行詳細(xì)定義,確定模型的類型及有關(guān)屬性;通過對相關(guān)數(shù)據(jù)的計算,計算模型的有關(guān)參數(shù),得到模型的各屬性值;通過測試數(shù)據(jù)對得到的模型進(jìn)行測試和評價;根據(jù)評價結(jié)果對模型進(jìn)行優(yōu)化。
輸出結(jié)果生成:數(shù)據(jù)分析的結(jié)果一般都比較復(fù)雜,很難被人理解,將結(jié)果以文檔或圖表形式表現(xiàn)出來則易于被人接受。
在KDD過程中,最重要的是其中的數(shù)據(jù)挖掘部分,即模型和相關(guān)屬性的確定。我們計劃采用其中應(yīng)用最廣泛的兩個模型,分別是關(guān)聯(lián)規(guī)則和分類規(guī)則,以下作詳細(xì)的介紹。
關(guān)聯(lián)規(guī)則是形式如下的一種規(guī)則,“在購買面包和黃油的顧客中,有90%的人同時也買了牛奶”(面包+黃油=>牛奶 )。用于關(guān)聯(lián)規(guī)則發(fā)現(xiàn)的主要對象是事務(wù)型數(shù)據(jù)庫,其中最典型的應(yīng)用則是售貨數(shù)據(jù),一個事務(wù)一般由如下幾個部分組成:事務(wù)處理時間,一組顧客購買的物品,有時也有顧客標(biāo)識號(如信用卡號)。如果對這些歷史事務(wù)數(shù)據(jù)進(jìn)行分析,則可對顧客的購買行為提供極有價值的信息。例如,可以幫助如何擺放貨架上的商品(如把顧客經(jīng)常同時買的商品放在一起),幫助如何規(guī)劃市場(怎樣相互搭配進(jìn)貨)。由此可見,從事務(wù)數(shù)據(jù)中發(fā)現(xiàn)關(guān)聯(lián)規(guī)則,對于改進(jìn)零售業(yè)等商業(yè)活動的決策非常重要。隨著應(yīng)用的推廣,關(guān)聯(lián)規(guī)則已經(jīng)在許多領(lǐng)域發(fā)揮作用,成為最典型的數(shù)據(jù)挖掘應(yīng)用。
分類也是數(shù)據(jù)挖掘中的一項非常重要的任務(wù)。分類的目的是學(xué)會一個分類函數(shù)或分類模型(也常常稱作分類器),該模型能把數(shù)據(jù)庫中的數(shù)據(jù)項映射到給定類別中的某一個。分類的應(yīng)用實例也很多,比較典型的由保險公司的保費設(shè)置。保險公司成功的一個關(guān)鍵因素是在設(shè)置具有競爭力保費和覆蓋風(fēng)險之間選擇一種平衡。保險市場競爭激烈,設(shè)置過高的保費意味著失去市場,而保費過低又會影響公司的贏利。保費通常是通過對一些主要的因素(如駕駛員的年齡、車輛的類型等)進(jìn)行多種分析和直覺判斷來確定。由于投資組合的數(shù)量很大,分析方法通常是粗略的。采用分類進(jìn)行數(shù)據(jù)挖掘以后,就可以利用計算機(jī)處理海量數(shù)據(jù)的能力來進(jìn)行合理的分類,定出合理的保費,使保險公司得到較大收益。
六、結(jié)束語
面向企業(yè)應(yīng)用的智能決策支持工具是很有前途的研究開發(fā)方向,在我國隨著市場經(jīng)濟(jì)的確立和發(fā)展,中小企業(yè)對企業(yè)信息化決策支持工具的需求會越來越強烈,本文提出的智能決策支持工具的設(shè)計方案旨在與廣大同行交流共同推進(jìn)智能決策支持工具的開發(fā)和研究,最終開發(fā)出適合國內(nèi)中小企業(yè)應(yīng)用需求的軟件。
數(shù)據(jù)處理論文:高中物理實驗數(shù)據(jù)處理方法的幾點研究
論文關(guān)鍵詞:高中 物理實驗 數(shù)據(jù)處理方法
論文摘要:物理實驗測得的數(shù)據(jù),必須經(jīng)過科學(xué)的分析和處理,才能揭示出各物理最之間的關(guān)系。就高中物理實驗常用數(shù)據(jù)的處理方法進(jìn)行分析,以期對物理實驗教學(xué)有所幫助。
實驗是物理學(xué)的重要組成部分,是物理教學(xué)不可缺少的環(huán)節(jié)。但學(xué)生在實際操作與處理中。往往容易在實驗數(shù)據(jù)上出現(xiàn)錯誤,究其原因是學(xué)生沒有牢固掌握數(shù)據(jù)處理的方法,不求甚解,一知半解,更不用說觸類旁通了。根據(jù)我的教學(xué)經(jīng)驗,提出幾種處理方法。(下面提出幾種數(shù)據(jù)處理方法,供大家參考)
一、平均法
平均法是指對待測物理量進(jìn)行很多次的測量,把測量的值相加再除以測量次數(shù),或把每一次的測量值用固定的算式分別進(jìn)行計算再求出結(jié)果,再把結(jié)果相加除以測量次數(shù),取其平均值。這種方法就叫做平均法。
1.平均法的使用原理:每一次的測量因為多方面的因素都會不一樣,測量值偏大或偏小,但其偏大或偏小的機(jī)會與程度往往均等,所以需要進(jìn)行多次測量,再求其平均值,這樣的測量值才會更真實、科學(xué),有說服性。
2.數(shù)據(jù)的處理
(1)如果所求的結(jié)果是經(jīng)過直接測量所得,應(yīng)使用平均法。如“測定金屬電阻率”的實驗,在測定金屬絲的直徑d時,用“螺旋測微器”在金屬絲的三個不同點上分別進(jìn)行測量,然后取三次的測量結(jié)果,其平均值就是的直徑。
(2)如果所求的結(jié)果不能經(jīng)過直接測量得出,則要依據(jù)其實驗的原理多次進(jìn)行計算待測物理量的值,最終結(jié)果要把多次測量的物理量的值相加得出平均值。“用單擺測重力加速度”是個很典型的實驗,求單擺周期的步驟如下:把單擺往一個方向拉開一個小角度,讓小球順利擺動,這時測出單擺完成n(20-30)次全振動的時間t,用公式T=t/n計算得出小球完成一次全振動的周期,這個步驟重復(fù)3次,用公式T=(T1+T2+T1)/3算出平均值,即求出單擺的振動周期。
二、描跡法
描跡法是指通過若干次描點、頻閃照相、用打點計時器打點等記錄形式,直觀形象地顯現(xiàn)實驗結(jié)果的方法。如,在進(jìn)行“平拋物體的運動”這個實驗時,可以用頻閃照相的方式記錄小球的運動軌跡;在進(jìn)行“勻變速直線運動”實驗時,用打點計時器記錄運動情況。在使用描跡法時,以下幾個方面要高度注意:
1.在結(jié)果出來之前,應(yīng)仔細(xì)觀察、分析結(jié)果,去掉誤差太大的數(shù)值。若中間出現(xiàn)個別的點偏離正常位置很遠(yuǎn),有可能是偶然因素導(dǎo)致,應(yīng)舍棄該點再重復(fù)進(jìn)行實驗,分析記錄結(jié)果。如,在“勻變速直線運動”的實驗中進(jìn)行紙帶選取的時候,首先多打出幾條紙帶,選擇打點最清楚的一條進(jìn)行研究分析,分析時一般去掉前面相對密集的點,在后面找出一個點作為開始的點。
2.若要根據(jù)記錄的點進(jìn)行描線,則應(yīng)描平滑的實線,并盡可能讓更多的記錄點通過平滑線或靠滑線,而且這些記錄點要在平滑線的兩側(cè)均勻分布,不能在描線的過程中出現(xiàn)折線。
3.為了使描述的結(jié)果比較,實驗中記錄的點不能太少,并且要在所描范圍內(nèi)合理、均勻分布。
三、圖像法
圖像法因其直觀、形象、容易操作的特點被廣泛應(yīng)用于物理實驗中,又被稱為作圖法,顧名思義是指在坐標(biāo)紙上把實驗數(shù)據(jù)之間的對應(yīng)關(guān)系連成圖線,由圖線得出相應(yīng)物理量之間的關(guān)系,并由此進(jìn)一步得出實驗結(jié)果。用圖像法處理實驗數(shù)據(jù)的步驟如下:
1.將測量的數(shù)據(jù)列表歸類整理。
2.在坐標(biāo)紙上以相應(yīng)的物理量為橫軸、縱軸建立坐標(biāo)系,并定出標(biāo)度。
3.描點。
4.連線:連線要遵循三個原則,一條直線上要描上盡可能多的點;其余的點要均勻分布兩側(cè);離描線太遠(yuǎn)的點直接去掉。遵循這種連線原則處理數(shù)據(jù),與多次測量取平均值殊途同歸(但由于去掉偶然誤差過大的數(shù)據(jù)點。使得結(jié)果比平均值法更加些)。
5.注明圖像的名稱、制圖時間及其他說明:中學(xué)物理實驗運用圖像法,一般情況下會得出y=kx+b形式的一次函數(shù)關(guān)系,即結(jié)果是一條直線(一次函數(shù)擬合),圖線畫出后,可以用圖線與坐標(biāo)軸上的截距求出相應(yīng)的物理量,也可以用圖線的斜率或者用圖線圍成的面積求出相應(yīng)物理量,還可以用圖線反應(yīng)一定的物理規(guī)律。如果描出的數(shù)據(jù)點連成了一條曲線。則應(yīng)變換物理量,最終要得到一條直線(一次函數(shù))。如,在驗證“牛頓第二定律”的實驗中,在研究“外力一定時物體的加速度和物質(zhì)的質(zhì)量之間的關(guān)系”時,假若a為縱坐標(biāo),m為橫坐標(biāo),連接各數(shù)據(jù)點后得到一條曲線,實驗結(jié)論就不會;但若以1/m為橫坐標(biāo)軸,連接各數(shù)據(jù)點則基本上可以畫出一條過原點的直線,即得出正確的結(jié)論:外力一定時,物體的加速度a與物體的質(zhì)量m成反比,即物體的加速度a與物體的質(zhì)量m的倒數(shù)成正比。通過變換,完成了化曲線為直線,更直觀、快捷地得出實驗結(jié)果。
四、直接比較法
在做一些物理實驗時。物理量之間的關(guān)系只需要定性地去確定,或把實驗結(jié)果與標(biāo)準(zhǔn)值進(jìn)行比較則可求出實驗結(jié)論,都可以采用直接比較法。如,在“互成角度的兩個共點力的合成”實驗中,可將實驗中測得的合力與根據(jù)實驗畫出的平行四邊形對角線兩矢量的大小與方向進(jìn)行直接比較,就可以確定驗證平行四邊形定則的目的是否已經(jīng)達(dá)到了。
五、計算機(jī)輔助處理數(shù)據(jù)
信息技術(shù)已被廣泛運用到物理教學(xué)課堂上,也被廣大師生所接收,中學(xué)生的計算機(jī)水平日益提高,已能熟練運用計算機(jī)記錄與處理數(shù)據(jù),對數(shù)據(jù)的圖像進(jìn)行分析等。計算機(jī)中的Excel軟件功能非常強大,能夠進(jìn)行大量的數(shù)據(jù)記錄與處理,還能畫出物理實驗中比較實用的x-y散點圖,能夠進(jìn)行一次函數(shù)、冪函數(shù)以及擬合,求出相應(yīng)的函數(shù)系數(shù),從而得出物理量的值。
總之,在高中物理實驗教學(xué)中引導(dǎo)學(xué)生學(xué)會合理使用數(shù)據(jù)處理方法。這樣可以盡可能地減少學(xué)生在實驗中的系統(tǒng)誤差和過失誤差,指導(dǎo)學(xué)生運用正確的分析方法,同時使其學(xué)會對實驗結(jié)果的正確評估和描述。
數(shù)據(jù)處理論文:對高中物理實驗數(shù)據(jù)處理方法的幾點研究
論文關(guān)鍵詞:高中 實驗 數(shù)據(jù)處理方法
論文摘要:物理實驗測得的數(shù)據(jù),必須經(jīng)過科學(xué)的分析和處理,才能揭示出各物理最之間的關(guān)系。就高中物理實驗常用數(shù)據(jù)的處理方法進(jìn)行分析,以期對物理實驗教學(xué)有所幫助。
實驗是物的重要組成部分,是物理教學(xué)不可缺少的環(huán)節(jié)。但學(xué)生在實際操作與處理中。往往容易在實驗數(shù)據(jù)上出現(xiàn)錯誤,究其原因是學(xué)生沒有牢固掌握數(shù)據(jù)處理的方法,不求甚解,一知半解,更不用說觸類旁通了。根據(jù)我的教學(xué)經(jīng)驗,提出幾種處理方法。(下面提出幾種數(shù)據(jù)處理方法,供大家參考)
一、平均法
平均法是指對待測物理量進(jìn)行很多次的測量,把測量的值相加再除以測量次數(shù),或把每一次的測量值用固定的算式分別進(jìn)行計算再求出結(jié)果,再把結(jié)果相加除以測量次數(shù),取其平均值。這種方法就叫做平均法。
1.平均法的使用原理:每一次的測量因為多方面的因素都會不一樣,測量值偏大或偏小,但其偏大或偏小的機(jī)會與程度往往均等,所以需要進(jìn)行多次測量,再求其平均值,這樣的測量值才會更真實、科學(xué),有說服性。
2.數(shù)據(jù)的處理
(1)如果所求的結(jié)果是經(jīng)過直接測量所得,應(yīng)使用平均法。如“測定金屬電阻率”的實驗,在測定金屬絲的直徑d時,用“螺旋測微器”在金屬絲的三個不同點上分別進(jìn)行測量,然后取三次的測量結(jié)果,其平均值就是的直徑。
(2)如果所求的結(jié)果不能經(jīng)過直接測量得出,則要依據(jù)其實驗的原理多次進(jìn)行計算待測物理量的值,最終結(jié)果要把多次測量的物理量的值相加得出平均值?!坝脝螖[測重力加速度”是個很典型的實驗,求單擺周期的步驟如下:把單擺往一個方向拉開一個小角度,讓小球順利擺動,這時測出單擺完成n(20-30)次全振動的時間t,用公式T=t/n計算得出小球完成一次全振動的周期,這個步驟重復(fù)3次,用公式T=(T1+T2+T1)/3算出平均值,即求出單擺的振動周期。
二、描跡法
描跡法是指通過若干次描點、頻閃照相、用打點計時器打點等記錄形式,直觀形象地顯現(xiàn)實驗結(jié)果的方法。如,在進(jìn)行“平拋物體的運動”這個實驗時,可以用頻閃照相的方式記錄小球的運動軌跡;在進(jìn)行“勻變速直線運動”實驗時,用打點計時器記錄運動情況。在使用描跡法時,以下幾個方面要高度注意:
1.在結(jié)果出來之前,應(yīng)仔細(xì)觀察、分析結(jié)果,去掉誤差太大的數(shù)值。若中間出現(xiàn)個別的點偏離正常位置很遠(yuǎn),有可能是偶然因素導(dǎo)致,應(yīng)舍棄該點再重復(fù)進(jìn)行實驗,分析記錄結(jié)果。如,在“勻變速直線運動”的實驗中進(jìn)行紙帶選取的時候,首先多打出幾條紙帶,選擇打點最清楚的一條進(jìn)行研究分析,分析時一般去掉前面相對密集的點,在后面找出一個點作為開始的點。
2.若要根據(jù)記錄的點進(jìn)行描線,則應(yīng)描平滑的實線,并盡可能讓更多的記錄點通過平滑線或靠滑線,而且這些記錄點要在平滑線的兩側(cè)均勻分布,不能在描線的過程中出現(xiàn)折線。
3.為了使描述的結(jié)果比較,實驗中記錄的點不能太少,并且要在所描范圍內(nèi)合理、均勻分布。
三、圖像法
圖像法因其直觀、形象、容易操作的特點被廣泛應(yīng)用于物理實驗中,又被稱為作圖法,顧名思義是指在坐標(biāo)紙上把實驗數(shù)據(jù)之間的對應(yīng)關(guān)系連成圖線,由圖線得出相應(yīng)物理量之間的關(guān)系,并由此進(jìn)一步得出實驗結(jié)果。用圖像法處理實驗數(shù)據(jù)的步驟如下:
1.將測量的數(shù)據(jù)列表歸類整理。
2.在坐標(biāo)紙上以相應(yīng)的物理量為橫軸、縱軸建立坐標(biāo)系,并定出標(biāo)度。
3.描點。
4.連線:連線要遵循三個原則,一條直線上要描上盡可能多的點;其余的點要均勻分布兩側(cè);離描線太遠(yuǎn)的點直接去掉。遵循這種連線原則處理數(shù)據(jù),與多次測量取平均值殊途同歸(但由于去掉偶然誤差過大的數(shù)據(jù)點。使得結(jié)果比平均值法更加些)。
5.注明圖像的名稱、制圖時間及其他說明:中學(xué)物理實驗運用圖像法,一般情況下會得出y=kx+b形式的一次函數(shù)關(guān)系,即結(jié)果是一條直線(一次函數(shù)擬合),圖線畫出后,可以用圖線與坐標(biāo)軸上的截距求出相應(yīng)的物理量,也可以用圖線的斜率或者用圖線圍成的面積求出相應(yīng)物理量,還可以用圖線反應(yīng)一定的物理規(guī)律。如果描出的數(shù)據(jù)點連成了一條曲線。則應(yīng)變換物理量,最終要得到一條直線(一次函數(shù))。如,在驗證“牛頓第二定律”的實驗中,在研究“外力一定時物體的加速度和物質(zhì)的質(zhì)量之間的關(guān)系”時,假若a為縱坐標(biāo),m為橫坐標(biāo),連接各數(shù)據(jù)點后得到一條曲線,實驗結(jié)論就不會;但若以1/m為橫坐標(biāo)軸,連接各數(shù)據(jù)點則基本上可以畫出一條過原點的直線,即得出正確的結(jié)論:外力一定時,物體的加速度a與物體的質(zhì)量m成反比,即物體的加速度a與物體的質(zhì)量m的倒數(shù)成正比。通過變換,完成了化曲線為直線,更直觀、快捷地得出實驗結(jié)果。
四、直接比較法
在做一些物理實驗時。物理量之間的關(guān)系只需要定性地去確定,或把實驗結(jié)果與標(biāo)準(zhǔn)值進(jìn)行比較則可求出實驗結(jié)論,都可以采用直接比較法。如,在“互成角度的兩個共點力的合成”實驗中,可將實驗中測得的合力與根據(jù)實驗畫出的平行四邊形對角線兩矢量的大小與方向進(jìn)行直接比較,就可以確定驗證平行四邊形定則的目的是否已經(jīng)達(dá)到了。
五、輔助處理數(shù)據(jù)
信息技術(shù)已被廣泛運用到物理教學(xué)課堂上,也被廣大師生所接收,中學(xué)生的計算機(jī)水平日益提高,已能熟練運用計算機(jī)記錄與處理數(shù)據(jù),對數(shù)據(jù)的圖像進(jìn)行分析等。計算機(jī)中的Excel軟件功能非常強大,能夠進(jìn)行大量的數(shù)據(jù)記錄與處理,還能畫出物理實驗中比較實用的x-y散點圖,能夠進(jìn)行一次函數(shù)、冪函數(shù)以及擬合,求出相應(yīng)的函數(shù)系數(shù),從而得出物理量的值。
總之,在高中物理實驗教學(xué)中引導(dǎo)學(xué)生學(xué)會合理使用數(shù)據(jù)處理方法。這樣可以盡可能地減少學(xué)生在實驗中的系統(tǒng)誤差和過失誤差,學(xué)生運用正確的分析方法,同時使其學(xué)會對實驗結(jié)果的正確評估和描述。
數(shù)據(jù)處理論文:數(shù)據(jù)處理的系統(tǒng)在電子政務(wù)中的運用
一數(shù)據(jù)處理在電子政務(wù)中的作用
一.一增進(jìn)政府之間交換
在服務(wù)器和閱讀器端日志記錄的數(shù)據(jù)中暗藏著模式信息,運用網(wǎng)絡(luò)用法數(shù)據(jù)處理技術(shù)可以自動發(fā)現(xiàn)系統(tǒng)的走訪模式以及用戶的行動模式,從而進(jìn)行預(yù)測分析。例如,通過評價用戶對于某1信息資源閱讀所花費的時間,可以判斷出用戶對于何種資源感興致;對于日志文件所搜集到的域名數(shù)據(jù),依據(jù)國家或者類型進(jìn)行分類分析;利用聚類分析來辨認(rèn)用戶的走訪念頭以及走訪趨勢等。這項技術(shù)已經(jīng)經(jīng)有效地運用在政府之間的交換中。通過模式分析,找到有用的信息,再通過聯(lián)機(jī)分析(OLAP)的驗證,結(jié)合客戶登記信息,找出政務(wù)交往對于象,或者發(fā)現(xiàn)潛伏的交換價值。
一.二為政府重大政策出臺提供信息支撐
例如,通過對于網(wǎng)站所公布的各種經(jīng)濟(jì)資源的數(shù)據(jù)分析處理,肯定未來經(jīng)濟(jì)的走勢,從而制訂出相應(yīng)的宏觀經(jīng)濟(jì)調(diào)控政策。同理,通過對于各類渠道獲取的社會資源的數(shù)據(jù)分析處理,可以科學(xué)地制訂出1些社會服務(wù)、社會保障與福利政策。
二電子政務(wù)中數(shù)據(jù)處理技術(shù)癥結(jié)問題探討
二.一數(shù)據(jù)處理體系的構(gòu)建
數(shù)據(jù)包含數(shù)字、符號、字母以及各種文字的聚攏。數(shù)據(jù)處理系統(tǒng)需要用計算機(jī)搜集、記錄數(shù)據(jù),經(jīng)加工發(fā)生新的信息情勢的技術(shù)。1個的計算機(jī)數(shù)據(jù)處理體系主要包含八個方面。
①數(shù)據(jù)采集:采集所需的信息。
②數(shù)據(jù)轉(zhuǎn)換:把信息轉(zhuǎn)換成機(jī)器能夠接管的情勢。
③數(shù)據(jù)分組:指定編碼,按有關(guān)信息進(jìn)行有效的分組。
④數(shù)據(jù)組織:收拾數(shù)據(jù)或者用某些法子支配數(shù)據(jù),以便進(jìn)行處理。
⑤數(shù)據(jù)計算:進(jìn)行各種算術(shù)以及邏輯運算,以便患上到進(jìn)1步的信息。
⑥數(shù)據(jù)存儲:將原始數(shù)據(jù)或者計算的結(jié)果保留起來,供之后使用。
⑦數(shù)據(jù)檢索:按用戶的請求找出有用的信息。
⑧數(shù)據(jù)排序:把數(shù)據(jù)按必定請求排成秩序序。
二.二數(shù)據(jù)處理系統(tǒng)的工作順序
數(shù)據(jù)處理的進(jìn)程大致分為數(shù)據(jù)的錄入、處理以及輸出三個階段的工序。數(shù)據(jù)錄入階段,也能夠稱為數(shù)據(jù)的籌備階段。數(shù)據(jù)錄入之后,就要由計算機(jī)對于數(shù)據(jù)進(jìn)行處理,為此預(yù)先要由用戶編制程序并把程序輸入到計算機(jī)中,計算機(jī)是按程序的唆使以及請求對于數(shù)據(jù)進(jìn)行處理的。所謂處理,就是指上述八個工作方面中的1個或者若干個的組合。數(shù)據(jù)經(jīng)處理,輸出的是各種文字以及數(shù)字的報表或者表格。概括的講,數(shù)據(jù)錄入是基礎(chǔ),數(shù)據(jù)處理是重點,數(shù)據(jù)輸出是目的。數(shù)據(jù)采集、管理,其重點是在此基礎(chǔ)長進(jìn)行分析以及匯總,主要目的是為政府決策提供、、客觀、科學(xué)的數(shù)字根據(jù)。
二.三數(shù)據(jù)處理體系的分類根據(jù)
數(shù)據(jù)處理依據(jù)處理裝備的結(jié)構(gòu)方式、工作方式,和數(shù)據(jù)的時間空間散布方式的不同,數(shù)據(jù)處理有不同的方式。不同的處理方式請求不同的硬件以及軟件支撐。每一種處理方式都有自己的特色,應(yīng)該依據(jù)利用問題的實際環(huán)境選擇適合的處理方式。數(shù)據(jù)處理主要有4種分類方式:
①依據(jù)處理裝備的結(jié)構(gòu)方式區(qū)別,有聯(lián)機(jī)處理方式以及脫機(jī)處理方式。
②依據(jù)數(shù)據(jù)處理時間的分配方式區(qū)別,有批處理方式、分時處理方式以及實時處理方式。
③依據(jù)數(shù)據(jù)處理空間的散布方式區(qū)別,有集中式處理方式以及散布處理方式。
④依據(jù)計算機(jī)中央處理器的工作方式區(qū)別,有單道功課處理方式、多道功課處理方式以及交互式處理方式。
三結(jié)語
跟著電子政務(wù)的發(fā)展以及網(wǎng)絡(luò)用戶對于高品質(zhì)、個性化的信息需求的不斷擴(kuò)展,勢必對于數(shù)據(jù)處理技術(shù)提出更高的請求。從發(fā)展趨勢上看,數(shù)據(jù)處理技術(shù)未來發(fā)展的重點將主要集中于智能性、易用性、集成性3個方面,需要從這3方面入手推進(jìn)信息處理技術(shù)的不斷發(fā)展與,更好地為電子政務(wù)服務(wù),從而提高全世界的信息化水平。
數(shù)據(jù)處理論文:關(guān)于GPS網(wǎng)與邊角網(wǎng)的數(shù)據(jù)處理成果比較與分析
摘 要:本文以李家河水庫樞紐區(qū)平面施工控制網(wǎng)的建立與復(fù)測為例,敘述了平面施工控制測量建網(wǎng)采用邊角網(wǎng)、復(fù)測采用GPS網(wǎng)的不同觀測方案,通過實例對比統(tǒng)計分析,得出有益的建議,對類似水電工程樞紐測量可作一定參考作用。
關(guān)鍵詞:樞紐施工控制 ,GPS與邊角網(wǎng) , 成果比較, 分析應(yīng)用
1.概況
西安市輞川河引水李家河水庫工程的主要任務(wù)是以西安市城東區(qū)城鎮(zhèn)供水為主,兼有發(fā)電。該工程由水庫樞紐和輸水工程兩大部分組成,水庫樞紐主要由大壩、施工導(dǎo)流洞、引水發(fā)電洞及電站廠區(qū)等組成。大壩壩型為碾壓混凝土拱壩,較大壩高98.50m;導(dǎo)流洞布置于左岸,導(dǎo)流洞長361.5m;引水發(fā)電洞布置于左岸,為下游供水和發(fā)電引水共用,洞身長957m,發(fā)電洞出口銜接電站廠區(qū)。 壩址處河谷深切呈“V”字型,河道狹窄,河床寬度僅15~30m;兩岸山坡陡峻,荊棘叢生、植被茂密、通行及通視條件較差。
該工程樞紐區(qū)施工控制網(wǎng)為2009年3月采用TCA2003按邊角網(wǎng)觀測方案建立,壩基開挖削坡到位之后,又于2011年7月采用Trimble GPS-R8按GPS觀測方案進(jìn)行了復(fù)測。
2.施工控制網(wǎng)坐標(biāo)系統(tǒng)和投影面的確定
大壩頂高程884.00m,較大壩高98.50m。為了解決投影變形和施工方便,同時保持與前期設(shè)計圖基準(zhǔn)的聯(lián)系和統(tǒng)一,坐標(biāo)系統(tǒng)采用掛靠在1954年北京坐標(biāo)系統(tǒng)下的獨立坐標(biāo)系統(tǒng),樞紐區(qū)平面控制將邊長投影到840m高程面。
3.邊角網(wǎng)的建立
3.1平面控制布網(wǎng)選點
根據(jù)樞紐區(qū)工程施工總體平面布置圖,結(jié)合實地地形先在1:2000圖面上設(shè)計,然后到施工現(xiàn)場按照施工區(qū)域的情況,會同設(shè)計、地質(zhì)人員現(xiàn)場實地選點。經(jīng)現(xiàn)場反復(fù)的比選,選定如右圖示的網(wǎng)形作為施工基本平面控制網(wǎng)。
首級網(wǎng)點編號為:Ⅲ01~Ⅲ10。其中Ⅲ01、Ⅲ02、Ⅲ05、Ⅲ06主要用于壩體施工測量;Ⅲ03、Ⅲ04、Ⅲ10主要用于導(dǎo)流洞和發(fā)電洞進(jìn)口施工測量;Ⅲ06、Ⅲ07用于導(dǎo)流洞出口施工測量; Ⅲ07、Ⅲ08、Ⅲ09主要用于引水發(fā)電洞出口及電站廠區(qū)施工測量。
平面控制網(wǎng)中共有20條邊,較大邊長639.05m,最短邊長164.07m,平均邊長356.16m。雖然規(guī)范規(guī)定兩點間高度角不宜大于10°,大于10°的占到46.2%,且較大為25°51′35″。
3.2精度估算
網(wǎng)中起始點Ⅲ01,起始方向Ⅲ01-Ⅲ05,取測角中誤差±1.8″,測距中誤差1mm+1ppm· D(D 取350m)。在1:2000地形圖上選設(shè)網(wǎng)形,確定點位并量取各待定平面控制點的概略坐標(biāo),采用《工程測量控制網(wǎng)微機(jī)平差系統(tǒng) NASEW》軟件進(jìn)行模擬計算和優(yōu)化設(shè)計。精度估算結(jié)果:較大點位中誤差±2.18 mm,較大點間中誤差±1.85 mm ,較大邊長比例誤差1/301200;內(nèi)性R較大值6.2,外性R′較大值4.63,性分析說明, 內(nèi)外性一般。由于點位調(diào)整困難,因此,外業(yè)觀測時提高儀器等級,增加水平角測回數(shù),以保障精度。
3.3邊角網(wǎng)測量
(1)觀測。采用Leica TC2003全站儀,按邊角組合網(wǎng)進(jìn)行觀測。作業(yè)前將儀器工具送計量部門進(jìn)行了檢定。水平角觀測采用方向觀測法。水平角觀測測回數(shù)9個,垂直角往返各四個測回,邊長往返測距各兩個測回,儀器鏡站兩端同時進(jìn)行氣象要素測定。測距讀數(shù)取中數(shù),經(jīng)儀器加乘常數(shù)、氣象數(shù)據(jù)改正之后計算斜距、往(或返)測觀測高差。
(2)外業(yè)觀測成果驗算及數(shù)據(jù)處理。利用斜距、往返測高差中數(shù)及相應(yīng)的儀器高、棱鏡高分別計算往(或返)測水平距離,往返測水平距離≤2(1mm+1ppm·D),符合規(guī)范要求之后將往返水平距離取中數(shù),作為實測水平距離。外業(yè)觀測成果驗算如下表1。
外業(yè)觀測成果驗算統(tǒng)計表 表1
(3)數(shù)據(jù)處理。外業(yè)驗算均符合規(guī)范要求后,采用《工程測量控制網(wǎng)微機(jī)平差系統(tǒng) NASEW》軟件,以Ⅲ01為坐標(biāo)起算點(Ⅲ01~Ⅲ05為起算方位),按邊角網(wǎng)進(jìn)行數(shù)據(jù)處理,平差后主要精度指標(biāo)如下表2。
平面網(wǎng)數(shù)據(jù)處理主要精度指標(biāo)統(tǒng)計表 表2
4.復(fù)測方案及數(shù)據(jù)處理
4.1復(fù)測方案
采用我院新購置的4臺Trimble GPS-R8按三等GPS及邊角組合網(wǎng)方案進(jìn)行觀測;觀測網(wǎng)見圖二所示。
4.2 GPS觀測
GPS控制網(wǎng)數(shù)據(jù)采集采用了4臺天寶 R8雙頻GPS 接收機(jī),儀器精度滿足要求,各項性能檢定合格。外業(yè)觀測采用靜態(tài)測量方式sh雙時段觀測,全部采用邊聯(lián)接的方式構(gòu)網(wǎng),滿足衛(wèi)星的高度角不低于15度、觀測時有效衛(wèi)星的數(shù)量不少于5顆、每一時段的觀測時間不少于90分鐘和PDOP 值不大于6 等外業(yè)觀測技術(shù)要求。
4.3 邊角網(wǎng)觀測
使用Leica TCA2003全站儀按三等精度觀測。水平角采用方向法觀測6測回,天頂距觀測采用中絲法對向觀測各4測回,斜距觀測往返各2測回。測站、鏡站觀測前后各測量一次氣溫、氣壓,最小讀值分別至0.2℃、50Pa,并取中值。斜改平計算時加入氣象、加常數(shù)、乘常數(shù)改正。
4.4 GPS數(shù)據(jù)處理
4.4.1 GPS網(wǎng)基線向量解算采用Trimble Geomatics office軟件;平差采用GPS工程測量網(wǎng)通用平差軟件包(Cosa GPS V5.20)。
4.4.2基線及同步環(huán)、異步環(huán)各坐標(biāo)分量閉合差等外業(yè)觀測質(zhì)量的檢核。樞紐區(qū)GPS控制網(wǎng)由41條基線組成,其中重復(fù)觀測基線17條;隧洞GPS網(wǎng)由52條基線組成,其中重復(fù)觀測基線22條。GPS網(wǎng)同步環(huán)閉合差、異步環(huán)閉合差、重復(fù)邊較差的檢驗統(tǒng)計如表3所示。
基線向量精度統(tǒng)計分析 表3
從以上的三項檢核可知,本次觀測的所有基線均滿足三等GPS網(wǎng)外業(yè)觀測的精度要求。
4.4.3 GPS網(wǎng)平差與精度分析。在WGS-84坐標(biāo)系統(tǒng)下對樞紐區(qū)控制網(wǎng)進(jìn)行三維無約束平差,平差后各網(wǎng)點的縱、橫向中誤差均較小,表明測量數(shù)據(jù)無粗差。由于多余觀測量較多,計算出的三維基線向量內(nèi)部性均值分別達(dá)0.8和0.85,表明GPS 控制網(wǎng)具有較好的內(nèi)部符合精度。
二維網(wǎng)約束平差采用了一點一方位的工程獨立網(wǎng)形式,并且以一條地面實測邊(投影至840米高程面)作為尺度約束,減小了由于投影而引起的誤差,使控制網(wǎng)成果更好的滿足施工精度要求。工程獨立網(wǎng)平差后的精度統(tǒng)計分析見表4。
獨立網(wǎng)平差精度統(tǒng)計 表4
從GPS網(wǎng)中的點位精度看,各點的點位中誤差均較小。除個別短邊外,全網(wǎng)各邊的方位角中誤差大部分小于±1.5""。邊長的距離相對中誤差大部分小于1/20萬,優(yōu)于規(guī)定的1/15萬。
4.5 邊角網(wǎng)外業(yè)觀測成果驗算及數(shù)據(jù)處理
邊角網(wǎng)共觀測了3個三角形,較大三角形閉合差-1.6″,允許±7″;以GPS獨立網(wǎng)Ⅲ01、Ⅲ06為坐標(biāo)起算點按邊角網(wǎng)進(jìn)行平差。平差后較大點位中誤差±2.9mm,允許±10mm;較大點間誤差2.90mm,允許±10mm。邊長相對中誤差除一條短邊外,均優(yōu)于1/15萬。
5.GPS與邊角網(wǎng)成果對比分析
5.1 GPS與邊角網(wǎng)數(shù)據(jù)處理后的坐標(biāo)成果對比分析。根據(jù)2009年邊角網(wǎng)及2011年GPS網(wǎng)復(fù)測坐標(biāo),計算二者較差如下表5。
GPS與邊角網(wǎng)數(shù)據(jù)處理后的坐標(biāo)成果對比計算統(tǒng)計表 表5
5.2 控制點的穩(wěn)定性分析。根據(jù)兩期數(shù)據(jù)處理后的點位中誤差m1、m2來評定控制點的穩(wěn)定性,控制點坐標(biāo)的較差值S小于2m=2時,認(rèn)為該點為穩(wěn)定 點,否則為不穩(wěn)定點,如表6。
由上表可以看出,Ⅲ07、Ⅲ08點不穩(wěn)定、明顯發(fā)生位移;經(jīng)現(xiàn)場查勘這兩點周邊施工過程中近距離開挖,通過數(shù)據(jù)對比及現(xiàn)場受施工大開挖影響而引起位移的分析是相一致的。
6.結(jié)論與建議
(1)該項目施工控制網(wǎng)復(fù)測采用GPS觀測方案,通過與首期觀測采用邊角網(wǎng)的結(jié)果分析及驗證,在峽谷地域的水利水電樞紐工程施工平面控制網(wǎng)采用GPS觀測方案,可以滿足三等控制測量的精度。
(2)水利水電樞紐工程施工控制網(wǎng)在基礎(chǔ)、邊坡開挖等施工因素影響后,可能引起部分點位位移,因此,施工過程中及時復(fù)測控制網(wǎng)是十分必要的。
數(shù)據(jù)處理論文:Excel在商業(yè)銀行數(shù)據(jù)處理中的應(yīng)用設(shè)計
[摘 要] 本文主要是針對商業(yè)銀行電子銀行會計處理中的憑證設(shè)計和填制、打印等問題,利用計算機(jī)進(jìn)行了自動化設(shè)計。
[關(guān)鍵詞] 電子銀行 原始憑證 函數(shù)
隨著電子銀行的普及,銀行會計的數(shù)據(jù)處理工作中存在的問題也日益顯露,筆者認(rèn)為電子銀行業(yè)務(wù)開展后,銀行會計的日常數(shù)據(jù)處理工作中存在票據(jù)中數(shù)據(jù)的填制等具體的業(yè)務(wù)處理問題可以通過EXCEL的強大的電子數(shù)據(jù)處理功能來完成。
銀行會計在填制某些原始憑證的時候,如銀行承兌匯票等票據(jù),以前都是用手工方法填寫,工作量大,且容易出錯,為了節(jié)約人力和財力,筆者在調(diào)研后進(jìn)行了如下設(shè)計:
一、打印區(qū)域設(shè)置
以網(wǎng)銀手續(xù)費憑證的填制為例,如圖1,會計人員需要在印制好格式的憑證上填制如下內(nèi)容,筆者通過測量憑證上需要填制的位置,通過EXCEL的列寬和行高來設(shè)定數(shù)據(jù)區(qū)域。
二、單位名稱設(shè)置
對于單位名稱和賬號等,可以直接輸入賬號,利用VLOOK()函數(shù)來自動完成填制。例如,我們預(yù)先設(shè)置一個“客戶名稱與賬號”工作表如圖2,然后在“網(wǎng)上銀行手續(xù)費”工作表中C2單元格中輸入公式:=VLOOKUP(A3,客戶名稱與賬號!B3:C38,2,FALSE),則只要在A3單元格中輸入相關(guān)的單位賬號,就可以直接取得相關(guān)的單位名稱。
三、金額自動填寫設(shè)計
如圖,我們設(shè)K8單元格為數(shù)據(jù)源,可以通過函數(shù)或鏈接等方式獲取數(shù)據(jù),筆者在此處通過直接輸入數(shù)字的方式來說明問題。
在S6單元格中輸入公式:=INT($K$×8100)-INT($K$8×10)10,直接獲取分位數(shù)字。設(shè)計如下:
1.獲取角分位數(shù)字。設(shè)K8單元格中的數(shù)為345.67(元),則INT($K$8×100)的運算結(jié)果為34567,而$K$8×10的運算結(jié)果為3456.7,INT($K$8×10)10的運算結(jié)果為34560,則INT($K$8×100) -INT($K$8×10)×10=34567-34560=7,為S6單元格中的分位數(shù)字,同理,在角位輸入:=INT(ABS($K$8×10))-INT(ABS($K$8))×10,在元位輸入:=INT(ABS($K$8))-INT(ABS($K$8/10))10,則角位和元位數(shù)字也可以輕松取得。
2.整數(shù)位數(shù)字的確定和人民幣符號的設(shè)置。在T8單元格輸入:= INT(K8),再在P6單元格中輸入公式:=IF(LEN($T$8)>=2,LEFT(RIGHT($T$8,2),1),“¥”)。
在O6單元格中輸入:=IF(LEN($T$8)>=3,LEFT(RIGHT($T$8,3),1),IF(LEN($T$8)=2,“¥”,“”)),同理,N6、M6、L6、K6單元格中分別輸入:=IF(LEN($T$8)>=4,LEFT(RIGHT($T$8,4),1),IF(LEN($T$8)=3,“¥”,“”)),=IF(LEN($T$8)>=5,LEFT(RIGHT($T$8,5),1),IF(LEN($T$8)=4,“¥”,“”)),=IF(LEN($T$8)>=7,LEFT(RIGHT($T$8,7),1),IF(LEN($T$8)>=6,“¥”,“”))(假設(shè)數(shù)字不超過百萬),完成了小寫數(shù)字與“¥”輸入工作。
3.生成大寫金額。在C8單元格中輸入:=TEXT(INT(ABS(K8)),“[DBNum2]”),然后在單元格D8中輸入:=TEXT(INT(ABS(K8 10))-INT(ABS(K8))×10,”[DBNum2]”)或=TEXT(R6,”[DBNum2]”),在E8單元格中輸入:=TEXT(INT(ABS(K8×100))-INT(ABS(K8×10))×10,”[DBNum2]”)或=TEXT(S6,”[DBNum2]”),然后我們在B7單元格中輸入:=IF(K8
也可以設(shè)置如下:在C8單元格中輸入:=TEXT(INT(ABS(K8)),”[DBNum2][$-804]G/通用格式元”),直接取出不含角分的數(shù)值,然后和上面同理,取“整”、“角”或“分”,此處不再探討。
為了隱藏第8、9行的數(shù)值,可以設(shè)置文字顏色為白色,打印的時候就不打印這部分的內(nèi)容了。
四、日期自動更正為銀行特殊規(guī)定格式的設(shè)計
銀行要求會計人員在填寫有關(guān)憑證的時候,需要按照“某某某某年某某月某某日”的大寫格式來填寫,主要是為了防止篡改日期。而我們在利用EXCEL作為工具的時候,發(fā)現(xiàn)其日期格式根本沒有我們所需要的格式,可以通過如下操作完成日期格式設(shè)計:
在設(shè)置單元格格式的時候,采用自定義格式,輸入:[DBNum2][$-804]yyyy”年”mm”月”dd”日”;@,定義其格式即可。例如,輸入2007-3-2,則自動顯示為“貳零零柒年零叁月零貳日”。
也可以在特定的單元格(假設(shè)為AC17)中輸入:=TEXT(AD17,”[DBNum2][$-804]yyyy年mm月dd日”)其中,設(shè)AD17為輸入日期的單元格,則AC17單元格返回的數(shù)值為銀行規(guī)定的日期格式:“某某某某年某某月某某日”。
數(shù)據(jù)處理論文:淺論會計數(shù)據(jù)處理變革中審計的演進(jìn)
【論文關(guān)鍵詞】 傳統(tǒng)審計; 電算化審計; 電算化審計的演進(jìn)
【論文摘要】 隨著電子計算機(jī)的產(chǎn)生與廣泛普及,傳統(tǒng)會計工作使用的工具逐漸為計算機(jī)所取代,會計電算化成為現(xiàn)代及未來會計工作的主導(dǎo)方式。因此,審計方式也必然存在著由傳統(tǒng)審計過渡到電算化審計的變革。電算化審計的演進(jìn)從審計對象、審計手段、審計證據(jù)等幾個方面充分體現(xiàn)出以傳統(tǒng)審計為基礎(chǔ)的進(jìn)一步繼承與發(fā)揚。
傳統(tǒng)會計工作即手工會計,主要借助于紙、算盤或計算器、筆等工具進(jìn)行會計數(shù)據(jù)的處理。隨著電子計算機(jī)的產(chǎn)生與廣泛普及,傳統(tǒng)會計工作使用的工具逐漸為計算機(jī)所取代,會計電算化成為現(xiàn)代及未來會計工作的主導(dǎo)方式。而審計是從會計工作中逐漸獨立出來的,同時又以會計工作為對象,它們所面臨的巨變環(huán)境又具有一致性,這就決定了審計在會計數(shù)據(jù)處理工具的演變中,必然存在著由傳統(tǒng)審計過渡到電算化審計的變革。
一、傳統(tǒng)審計的主體特征
傳統(tǒng)審計即手工審計。由于傳統(tǒng)審計環(huán)境下,會計資料的載體是紙介質(zhì),所以傳統(tǒng)審計的審計對象是載有會計資料的紙性介質(zhì)。傳統(tǒng)審計的審計手段,無論是審計抽樣還是撰寫審計報告,都是由手工操作完成的。審計證據(jù)包括實物證據(jù)、書面證據(jù)、口頭證據(jù)和環(huán)境證據(jù)四大類。傳統(tǒng)審計中的書面證據(jù)包括各種原始憑證、記賬憑證、會計賬簿和明細(xì)表等,它們都有自己的作用。在傳統(tǒng)審計中,審計方法主要包括制定審計計劃的方法、收集審計證據(jù)的方法和提出審計報告的方法。從狹義上說,就是指與取得審計證據(jù)相關(guān)的各種方法。按不同的標(biāo)準(zhǔn),可劃分為順查法、逆查法、詳查法、抽查法等;再具體一些,包括核對法、查詢法、函證法、觀察法、分析法等。在手工會計處理的條件下,所有審計方法的執(zhí)行都是由人工完成的。從審計線索上來看,由于傳統(tǒng)會計中,由原始憑證到記賬憑證,記賬憑證到登記賬簿,到編制報表,每一步都有文字記錄和經(jīng)手人簽章,因而審計線索十分清晰。審計人員能夠利用書面資料從原始業(yè)務(wù)開始,一路追查到報表中的各項指標(biāo),并通過這些審計線索來檢查和確定這些指標(biāo)是否能夠正確反映被審計單位的經(jīng)濟(jì)活動情況,檢查其財務(wù)活動的合法性、合規(guī)性和有效性。在傳統(tǒng)審計中,企業(yè)一般是通過職責(zé)分割、職權(quán)分工、規(guī)定標(biāo)準(zhǔn)的業(yè)務(wù)處理程序以及憑證、賬簿、報表之間的勾稽關(guān)系等而形成的一個內(nèi)部控制體系,這一體系能夠較好地保障會計數(shù)據(jù)處理的真實、和安全。
二、電算化審計的演進(jìn)
(一)審計對象
在傳統(tǒng)審計環(huán)境下,審計對象是紙性介質(zhì)。而在電算化審計環(huán)境下,會計資料存儲在硬盤、軟盤、光盤等磁性介質(zhì)上,審計對象包括了整個電子數(shù)據(jù)處理系統(tǒng)。相對于紙性介質(zhì)來說,磁性介質(zhì)具有數(shù)據(jù)存儲量大、易查詢、體積輕等特點,但也有易被改寫的安全性問題。審計過程中判斷會計資料合法性與正確性的一項重要證據(jù)就是看它是否出現(xiàn)被涂改的情況,傳統(tǒng)會計環(huán)境中一旦發(fā)生涂改會計資料的情況,審計人員一眼就能看出。但是在電算化會計環(huán)境中,被涂改的會計數(shù)據(jù)可能未留下任何痕跡,因此審計人員很難立即察覺。另外一些因素如計算機(jī)病毒等容易造成磁盤上會計數(shù)據(jù)的丟失,直接影響到會計資料的完整性。
(二)審計手段
在傳統(tǒng)審計中,整個審計過程都是由手工操作完成的。而在電算化審計中,許多工作可以由計算機(jī)來完成,免去審計人員許多繁瑣的手工計算與復(fù)核之苦。例如審計調(diào)查,可利用計算機(jī)程序語言設(shè)計出審計抽樣程序,實現(xiàn)電算化抽樣調(diào)查。
(三)審計證據(jù)
傳統(tǒng)審計中的書面證據(jù)包括各種原始憑證、記賬憑證、會計賬簿和明細(xì)表等,它們之間可以實現(xiàn)相互核對。而在電算化環(huán)境中,當(dāng)輸入原始憑證的數(shù)據(jù)生成記賬憑證后,記賬工作由計算機(jī)自動進(jìn)行批處理,各種賬簿記錄數(shù)出一源,都是依據(jù)記賬憑證同時成賬,相對來說作為審計證據(jù)的作用就減弱了。在環(huán)境證據(jù)如內(nèi)部控制的重點和管理人員的業(yè)務(wù)素質(zhì)方面,傳統(tǒng)審計和電算化審計有著不同的內(nèi)容,從而導(dǎo)致了環(huán)境證據(jù)的差別。
(四)審計方法
在傳統(tǒng)審計中,審計人員可根據(jù)具體情況對會計資料進(jìn)行人工審查工作,一般采用順查法、逆查法、詳查法、抽查法等審計方法,更為具體的審計方法還有核對法、查詢法、函證法等。在會計電算化條件下,人工審計的技術(shù)方法仍然是重要的,但是由于會計信息以磁性介質(zhì)作為主要存儲方式,因此計算機(jī)審計已成為必不可少的審計方法。同時,審查電算化系統(tǒng)的處理和控制功能,也需要借助于計算機(jī)系統(tǒng)來施行。在電算化審計中,傳統(tǒng)審計方法發(fā)生了較大改變,被劃分為計算機(jī)輔助審計方法和面向電算化會計系統(tǒng)的審計方法。而后者又可以細(xì)分為電算化會計信息系統(tǒng)程序的審計方法、數(shù)據(jù)文件的審計方法和內(nèi)部控制的審計方法。具體包括測試數(shù)據(jù)法、并行模擬法、嵌入審計程序法、代碼比較法、程序解析法、受控處理法等。
(五)審計線索
在傳統(tǒng)會計中,審計線索非常直觀、清楚,審計人員可以根據(jù)需要進(jìn)行順查、逆查或抽查,通過這些審計線索來檢查和確定被審計單位的經(jīng)濟(jì)業(yè)務(wù)是否真實,檢查其財務(wù)活動是否合法、合規(guī)和有效。而在電算化會計系統(tǒng)中,從記賬憑證數(shù)據(jù)的輸入到會計報表的輸出,全部業(yè)務(wù)處理都是借助計算機(jī)程序自動完成的,加之會計信息主要存儲在磁性介質(zhì)上,即使有所改動也不易令人察覺,使得審計線索缺乏直觀性和真實性。例如:各種賬簿和報表數(shù)出一源、自動產(chǎn)生,使得證、賬、表之間的關(guān)系缺乏相互的驗證性;再如,反記賬、反結(jié)賬功能的使用使得憑證修改后不會留下任何痕跡,審計人員無法辨別數(shù)據(jù)修改前的情況以及數(shù)據(jù)是否被修改。
(六)內(nèi)部控制
進(jìn)行審計時,對內(nèi)部控制的了解是一項非常重要的工作,審計人員據(jù)此估計審計風(fēng)險、確定審計范圍、制定審計程序。在傳統(tǒng)審計中,內(nèi)部控制主要包括授權(quán)控制、責(zé)任分工、管理控制、審批和核對控制、內(nèi)部審計、業(yè)務(wù)處理標(biāo)準(zhǔn)化等內(nèi)容,以工作人員之間的相互牽制為基本特征,審計人員利用直觀性很強的紙介質(zhì)進(jìn)行手工核對和檢查,明確相關(guān)職責(zé)。而在電算化審計中,數(shù)據(jù)的處理權(quán)限高度集中,由計算機(jī)自動完成,傳統(tǒng)會計中的內(nèi)部控制失去作用。例如,在電算化會計條件下,一旦輸入記賬憑證數(shù)據(jù),各種賬簿都能同時產(chǎn)生,原有手工條件下的賬證核對、賬賬核對等內(nèi)部控制措施不再生效。因此,電算化會計系統(tǒng)中的內(nèi)部控制產(chǎn)生了新的意義,如操作控制中的輸入控制、數(shù)據(jù)處理過程控制、輸出控制等;組織控制的內(nèi)容也發(fā)生了較大變化。這就要求審計人員在了解審計對象的內(nèi)部控制時應(yīng)該采用新的審計程序,采取新的評價方法,以適應(yīng)電算化會計環(huán)境下企業(yè)內(nèi)部控制的新變化。
(七)審計環(huán)境
內(nèi)部控制、被審計單位管理人員和業(yè)務(wù)人員的組成及素質(zhì)、各種管理條件與管理水平都構(gòu)成了傳統(tǒng)審計環(huán)境的內(nèi)容。在電算化審計條件下,上述內(nèi)容發(fā)生了變化:1.電算化會計系統(tǒng)內(nèi)部控制與手工會計內(nèi)部控制有著不同的內(nèi)容;2.信息化數(shù)據(jù)系統(tǒng)的應(yīng)用導(dǎo)致會計人員無論是組成上還是知識素質(zhì)上都有差別;3.管理內(nèi)容、管理條件的變化。這些變化要求審計人員提高自身的能力,適應(yīng)新的審計環(huán)境。
(八)審計檔案
傳統(tǒng)審計檔案分為長期性檔案和當(dāng)期檔案,均為紙性介質(zhì)。而電算化審計檔案具有以下特點:1.查詢方便。電算化審計檔案資料可以實現(xiàn)電子檢索的功能,查詢方便、快捷。2.保存有難度。因為在電子數(shù)據(jù)處理環(huán)境下,大量數(shù)據(jù)存儲在磁性介質(zhì)上,而磁介質(zhì)容易因盜竊、丟失、故意或偶然的毀壞及使用等原因而受到損害。3.成本較高。硬性存儲器的價格較高,審計檔案保存年限也較長,在此期間,物理性損耗等原因使得這些硬盤上的數(shù)據(jù)必須不斷地備份到新的硬盤上,昂貴的檔案保存成本也就在所難免。
三、信息化時代審計的未來發(fā)展謀略
(一)將現(xiàn)代信息技術(shù)運用在審計領(lǐng)域
將運用現(xiàn)代化信息技術(shù)運用在審計的理論研究、實務(wù)工作、知識結(jié)構(gòu)等領(lǐng)域,是當(dāng)代電子計算機(jī)信息技術(shù)與審計工作內(nèi)容緊密結(jié)合、提高審計工作質(zhì)量和效率的關(guān)鍵一步。在理論研究方面,應(yīng)逐步建立適應(yīng)現(xiàn)代化信息技術(shù)發(fā)展的新型的審計理論。在實務(wù)工作方面,力求使傳統(tǒng)審計工作向“計算機(jī)審計”和“使用計算機(jī)審計”方向轉(zhuǎn)變,如審計人員既以紙性會計數(shù)據(jù)又以磁性介質(zhì)數(shù)據(jù)為對象;審計底稿和審計證據(jù)及其有關(guān)審計檔案應(yīng)逐步實現(xiàn)無紙化等。知識結(jié)構(gòu)上,審計人員除了應(yīng)掌握傳統(tǒng)審計的基本知識外,還應(yīng)掌握計算機(jī)知識及其應(yīng)用技術(shù),掌握數(shù)據(jù)處理和管理技術(shù),掌握現(xiàn)代化信息技術(shù)的應(yīng)用及網(wǎng)絡(luò)知識等;既能夠熟練操作審計軟件,又能夠適時編寫各種應(yīng)用性審查程序。
(二)事后靜態(tài)審計向事中和事前動態(tài)、實時審計轉(zhuǎn)變
在過去的手工會計條件下,審計工作往往更重視事后審計。隨著會計電算化工作的廣泛開展,為了保障電算化會計條件下審計工作的真實性,審計工作應(yīng)從事后審計轉(zhuǎn)變?yōu)槭虑皩徲嫼褪轮袑徲嫛.?dāng)單位實施會計電算化工作之前,首先應(yīng)對單位采用的會計系統(tǒng)軟件的適用性進(jìn)行審計,軟件中提供的各項核算與管理功能是否滿足了信息使用者的要求。通過事前審計,保障單位使用的會計軟件系統(tǒng)的合法、安全、。當(dāng)會計電算化軟件應(yīng)用于會計工作以后,應(yīng)該重視對會計信息系統(tǒng)軟件的數(shù)據(jù)處理程序、自動轉(zhuǎn)賬公式的設(shè)置和會計報表公式的定義進(jìn)行事中審計,防止核算單位惡意篡改系統(tǒng)程序。另外,還要做好事后審計,將會計電算化系統(tǒng)的運算結(jié)果與軟件提供的核算功能進(jìn)行符合性和實質(zhì)性測試,保障會計數(shù)據(jù)的真實性,進(jìn)一步保障審計工作的正確性。
(三)未來審計的重點將側(cè)重會計明細(xì)信息的數(shù)據(jù)安全性、性
會計電算化的發(fā)展,促使企業(yè)提供更多的明細(xì)信息,因此,審計的工作重點在于檢驗企業(yè)會計明細(xì)信息的真實性以及審核進(jìn)入外部網(wǎng)絡(luò)的明細(xì)信息的安全性。企業(yè)內(nèi)部形成的明細(xì)信息的真實性往往取決于企業(yè)會計電算化系統(tǒng)內(nèi)部控制的有效程度,而審計人員的主要工作將是證實從數(shù)據(jù)庫存取信息的性。對于進(jìn)入外部網(wǎng)絡(luò)的明細(xì)信息,必須通過對整個系統(tǒng)的網(wǎng)絡(luò)進(jìn)行安全控制,以保障此信息的安全性。
(四)審計軟件應(yīng)能實現(xiàn)諸多功能
未來審計軟件應(yīng)具有以下功能:能夠與會計電算化系統(tǒng)鏈接,實現(xiàn)直接通過會計電算化系統(tǒng)中的接口程序取數(shù);能夠減少審計人員的工作量,盡可能讓計算機(jī)代替人工的大量抄抄寫寫和計算,使審計人員的工作精力集中到職業(yè)性強的事務(wù)處理上去,如抽樣檢查底稿中的部分項目(憑證號、科目、金額等)交由計算機(jī)審計軟件自動取數(shù)生成;審計軟件應(yīng)能自動完成某些審計工作底稿的整理功能;審計軟件應(yīng)有擴(kuò)充功能,應(yīng)能對審計事務(wù)進(jìn)行管理,如審計日程的安排、工時的計算、底稿管理、審計收費管理等??傊?,未來審計軟件如果具有了上述功能,實現(xiàn)審計無紙化將不再只是一個夢想。
數(shù)據(jù)處理論文:高職院?!段锫?lián)網(wǎng)數(shù)據(jù)處理技術(shù)》課程建設(shè)的探索與實踐
【摘 要】目前物聯(lián)網(wǎng)教學(xué)研究在高職院校,也已經(jīng)成為一個研究熱點。如何能制定出適合高職院校的物聯(lián)網(wǎng)課程教學(xué)體系,已經(jīng)成為業(yè)內(nèi)亟待解決的一個熱點問題。本文以我校一門物聯(lián)網(wǎng)核心課程的建設(shè)經(jīng)驗,探索了高職院校物聯(lián)網(wǎng)課程建設(shè)的一般方法和規(guī)律。
【關(guān)鍵詞】高職;物聯(lián)網(wǎng);課程建設(shè)
0 引言
目前,it業(yè)界和學(xué)術(shù)界一致認(rèn)為,物聯(lián)網(wǎng)技術(shù)將帶來世界信息產(chǎn)業(yè)發(fā)展的第三次浪潮,國家“十二五”規(guī)劃也已明確提出將物聯(lián)網(wǎng)產(chǎn)業(yè)作為新興戰(zhàn)略產(chǎn)業(yè)。無論是在企業(yè)界、工程界還是在學(xué)術(shù)界,物聯(lián)網(wǎng)研究和應(yīng)用都受到了前所未有的重視,面對如此良好的發(fā)展契機(jī),作為全國的首批示范性高職,我校對該領(lǐng)域的發(fā)展也非常重視,并已開始籌建物聯(lián)網(wǎng)專業(yè)。物聯(lián)網(wǎng)專業(yè)相關(guān)的的課程建設(shè),是專業(yè)建設(shè)的一個重要基礎(chǔ),是培養(yǎng)合格的物聯(lián)網(wǎng)專業(yè)人才的一個必備條件,因此物聯(lián)網(wǎng)課程的建設(shè)就成了一個極其迫切的任務(wù)和亟待完成工作。本文以我校物聯(lián)網(wǎng)專業(yè)的核心課程《物聯(lián)網(wǎng)數(shù)據(jù)處理技術(shù)》為落腳點,探索適用于高職的物聯(lián)網(wǎng)課程建設(shè)方案,對于其他同類的課程的建設(shè)也有一定的借鑒意義。
1 課程建設(shè)的知識點涵蓋與難點
1.1 課程建設(shè)涵蓋的技術(shù)領(lǐng)域
物聯(lián)網(wǎng)是通過新一代的it技術(shù)(如rfid射頻識別技術(shù)、zigbee技術(shù)、云計算技術(shù)等)將傳感器裝備或者嵌入到全球各行各業(yè)的物體中,通過相互之間的鏈接形成“物聯(lián)網(wǎng)”,然后通過云計算技術(shù)和超級計算機(jī)對收集到的海量數(shù)據(jù)進(jìn)行處理和分析,達(dá)到對物體智能化管理和控制的目的。
物聯(lián)網(wǎng)中的個體通過感應(yīng)器來感知信息,然后通過中間傳輸網(wǎng)來傳送信息,在數(shù)據(jù)處理中心進(jìn)行智能處理和控制。隨著物聯(lián)網(wǎng)技術(shù)的廣泛應(yīng)用,我們將面對大量異構(gòu)的、混雜的、不完整的物聯(lián)網(wǎng)數(shù)據(jù)。在物聯(lián)網(wǎng)的萬千終端收集到這些數(shù)據(jù)后,如何對它們進(jìn)行處理、分析和使用成為物聯(lián)網(wǎng)應(yīng)用的關(guān)鍵[1]。
因此,物聯(lián)網(wǎng)信息數(shù)據(jù)處理涉及到物聯(lián)網(wǎng)通信數(shù)據(jù)結(jié)構(gòu)、zigbee協(xié)議算法設(shè)計和實現(xiàn)、ipv6技術(shù)、中間件技術(shù)、后臺數(shù)據(jù)庫技術(shù)、數(shù)據(jù)挖掘技術(shù)和云計算與海計算技術(shù)。而就這些的技術(shù)相關(guān)的課程有《計算機(jī)網(wǎng)絡(luò)及ipv6技術(shù)》、《數(shù)據(jù)結(jié)構(gòu)》、《數(shù)據(jù)庫》、《算法設(shè)計》和《面向?qū)ο蟮木幊碳夹g(shù)》。其中我系開設(shè)的《物聯(lián)網(wǎng)通信技術(shù)》課程就可以解決ipv6技術(shù)的問題,在該課教學(xué)中不再重復(fù)。
1.2 課程建設(shè)的難點
考慮到該門課程涉及的技術(shù)領(lǐng)域,我們將講授物聯(lián)網(wǎng)通信數(shù)據(jù)結(jié)構(gòu)、zigbee協(xié)議算法原理與實現(xiàn)、z-stack原理和實驗部分,以及部分物聯(lián)網(wǎng)中間件技術(shù)和云計算技術(shù)的相關(guān)內(nèi)容。與四年制普通本科院校相比,要涉及這些內(nèi)容所開設(shè)的課程有《數(shù)據(jù)結(jié)構(gòu)和算法》、《面向?qū)ο蟮木幊碳夹g(shù)》、《中間件技術(shù)》、《傳感器信息融合云與計算技術(shù)》,由此可見需要開設(shè)的科目多而且內(nèi)容理論性很高。特別是《中間件技術(shù)》、《傳感器信息融合與云計算技術(shù)》這兩門課,均是大量的理論推導(dǎo)計算,通常在本科高年級或者研究生階段才講授。由于我們的同學(xué)在校學(xué)習(xí)只有兩年,該課程將在大二第二學(xué)期開設(shè),很多同學(xué)的知識也僅限于模電數(shù)電c語言,如果大量的講授抽象的中間件技術(shù)、傳感器信息融合與云計算技術(shù),很多同學(xué)會很難聽懂。同時高職學(xué)生的培養(yǎng)特點是加強他們應(yīng)用和實踐的能力,所以大量講解理論的效果會是事倍功半[2-3]。
2 課程建設(shè)的具體實施過程
結(jié)合我系對物聯(lián)網(wǎng)專業(yè)學(xué)生的培養(yǎng)定位和學(xué)時分配,在充分考慮考慮課程技術(shù)內(nèi)容和重難點的基礎(chǔ)上,我們課程的重點放在數(shù)據(jù)結(jié)構(gòu)和算法編程實踐上,讓學(xué)生在實踐中學(xué)習(xí),在編程中理解一些基本的數(shù)據(jù)處理方法和物聯(lián)網(wǎng)數(shù)據(jù)結(jié)構(gòu),做到實踐中有理論,理論和實踐相結(jié)合。在pc端的編程,我們采用dev++的編譯環(huán)境,側(cè)重于常用數(shù)據(jù)結(jié)構(gòu)的編程與理解,這部分內(nèi)容是課程學(xué)習(xí)的基礎(chǔ),占到總課時的35%。在嵌入式和物聯(lián)網(wǎng)的技術(shù)方面,我們的技術(shù)落腳點選擇在了z-stack上。借助于z-stack物聯(lián)網(wǎng)實驗平臺,學(xué)生可以學(xué)習(xí)到物聯(lián)網(wǎng)技術(shù)領(lǐng)域中常用的數(shù)據(jù)處理技術(shù),同時有了數(shù)據(jù)結(jié)構(gòu)的基礎(chǔ)之后,就可以對z-stack協(xié)議棧中的算法實現(xiàn)和數(shù)據(jù)結(jié)構(gòu)有更深的理解。該部分的內(nèi)容占到總課時的35%。對于云計算和中間件技術(shù),我們在課程中主要是以概念介紹和學(xué)生調(diào)研、小組匯報的方式進(jìn)行學(xué)習(xí),該部分的內(nèi)容占到總課時的10%。我們針對課程開發(fā)了一個物聯(lián)網(wǎng)的實訓(xùn)項目,主要以智能家居為切入點,技術(shù)內(nèi)
容涉及到上位機(jī)使用、數(shù)據(jù)存儲、物聯(lián)網(wǎng)節(jié)點和協(xié)調(diào)器的調(diào)試和網(wǎng)關(guān)的設(shè)置,該課程的內(nèi)容占到總課時的20%。該項目對前面的內(nèi)容進(jìn)行總結(jié)和具體實現(xiàn),突出學(xué)生在做中學(xué),弱化純原理性的學(xué)習(xí),突出實踐性和學(xué)生對數(shù)據(jù)處理內(nèi)容體驗。
3 效果與結(jié)語
考慮到高職學(xué)生在校學(xué)習(xí)該課程在國內(nèi)目前缺少相關(guān)的教材,我們在整合和相關(guān)技術(shù)內(nèi)容后,完成該課程素材、ppt以及程序?qū)崿F(xiàn)部分。與此同時,我們引導(dǎo)學(xué)生積極查閱圖文資料,并借助于互聯(lián)網(wǎng)絡(luò)來積累項目素材和問題的解決方案。在教材編寫的過程中,我們積極利用現(xiàn)有的實驗平臺和多媒體技術(shù),同時在課程建設(shè)過程中讓學(xué)生也參與進(jìn)來,多聽取他們的學(xué)習(xí)感受,在及時輪教學(xué)實踐中取得了良好的效果。同時我們在課余時間積極鼓勵學(xué)生多學(xué)習(xí)、多思考,并帶領(lǐng)他們到物聯(lián)網(wǎng)企業(yè)了解實踐,把所學(xué)的技術(shù)直接應(yīng)用到實際的開發(fā)中去,不斷加強專業(yè)本領(lǐng),為將來就業(yè)打下堅實基礎(chǔ)。
數(shù)據(jù)處理論文:數(shù)據(jù)處理技術(shù)與環(huán)境監(jiān)測論文
1監(jiān)測數(shù)據(jù)集標(biāo)準(zhǔn)化處理
1.1監(jiān)測任務(wù)名稱的標(biāo)準(zhǔn)化處理
以目前的全國業(yè)務(wù)化海洋環(huán)境監(jiān)測任務(wù)為基礎(chǔ),對上報的監(jiān)測任務(wù)進(jìn)行標(biāo)準(zhǔn)化命名,如海洋生物多樣監(jiān)測、海洋大氣監(jiān)測,對不同填報的名稱進(jìn)行標(biāo)準(zhǔn)化處理。
1.2組織單位名稱的標(biāo)準(zhǔn)化處理
各地上報的組織單位比較混亂,有的上報了監(jiān)測機(jī)構(gòu)名稱,有的上報了其隸屬的行政部門名稱,不利于監(jiān)測任務(wù)的考核。根據(jù)國家海洋環(huán)境監(jiān)測工作任務(wù)以及各海區(qū)年度海洋環(huán)境監(jiān)測工作方案,目前組織單位主要包括國家海洋局局屬單位、3個分局、11個沿海省(自治區(qū)、直轄市)海洋行政管理部門和5個計劃單列市海洋行政管理部門,如國家海洋環(huán)境監(jiān)測中心、國家海洋局北海分局、遼寧省海洋與漁業(yè)廳、大連市海洋與漁業(yè)局,對不同填報的組織單位進(jìn)行標(biāo)準(zhǔn)化處理。
1.3監(jiān)測區(qū)域名稱的標(biāo)準(zhǔn)化處理
由于各地方上報的監(jiān)測區(qū)域不夠規(guī)范,且很難表現(xiàn)出更多的區(qū)域信息,同時考慮到區(qū)域統(tǒng)計分析,因此需對監(jiān)測區(qū)域進(jìn)行規(guī)范化命名。監(jiān)測區(qū)域命名結(jié)構(gòu)為:沿海地區(qū)/海區(qū)+沿海城市/特定區(qū)域+名稱,其中沿海地區(qū)/自然海區(qū)和名稱字段不能省略,沿海城市/特定區(qū)域字段若無可以省略。如,遼寧葫蘆島赤潮監(jiān)控區(qū),廣東近岸、福建廈門近岸、東海近海及遠(yuǎn)海,對不同填報的監(jiān)測區(qū)域名稱進(jìn)行標(biāo)準(zhǔn)化處理。
1.4監(jiān)測要素名稱的標(biāo)準(zhǔn)化處理
每個監(jiān)測任務(wù)里包含了不同的監(jiān)測要素,且不同的任務(wù)可能會監(jiān)測相同的要素,因此需對監(jiān)測要素進(jìn)行規(guī)范命名,以便對相同的要素進(jìn)行統(tǒng)一分析、數(shù)據(jù)量統(tǒng)計等。以目前的業(yè)務(wù)化海洋環(huán)境監(jiān)測要素為基礎(chǔ),對上報的監(jiān)測要素進(jìn)行標(biāo)準(zhǔn)化命名,如水文氣象、海水水質(zhì)、沉積物質(zhì)量、浮游植物和浮游動物等,對不同填報的監(jiān)測要素進(jìn)行標(biāo)準(zhǔn)化處理。
1.5監(jiān)測參數(shù)及單位的標(biāo)準(zhǔn)化處理
由于每個監(jiān)測要素需要監(jiān)測不同的監(jiān)測參數(shù),如海水水質(zhì)需要監(jiān)測化學(xué)需氧量、氨氮和溶解氧等。而每個監(jiān)測參數(shù)的名稱在寫法上有不同的形式,如化學(xué)需氧量也可寫為COD,氨氮也可寫為氨-氮或NH4-N等,給數(shù)據(jù)的統(tǒng)計、評價帶來一定的不便,因此有必要規(guī)范不同監(jiān)測參數(shù)的名稱。另外,每個監(jiān)測要素的單位也需統(tǒng)一規(guī)范。如重金屬的鋅元素,有的上報其參數(shù)單位為mg/L,有的上報為μg/L。在數(shù)據(jù)統(tǒng)一進(jìn)入標(biāo)準(zhǔn)數(shù)據(jù)庫時,需將單位統(tǒng)一。參照國際標(biāo)準(zhǔn)、國內(nèi)海洋環(huán)境監(jiān)測調(diào)查規(guī)范以及各地監(jiān)測機(jī)構(gòu)的填報習(xí)慣等,針對不同的監(jiān)測任務(wù)和監(jiān)測要素,對每個監(jiān)測參數(shù)的名稱及計量單位進(jìn)行標(biāo)準(zhǔn)化處理。
1.6站位基礎(chǔ)信息的數(shù)據(jù)類型標(biāo)準(zhǔn)化處理
監(jiān)測數(shù)據(jù)的類型包括數(shù)值型、字符型、布爾型和百分比等。對站位基礎(chǔ)信息如站位編號、經(jīng)緯度、監(jiān)測日期、水深和層號等的數(shù)據(jù)類型進(jìn)行規(guī)范。(1)站位編號。上報的站位編號大部分為字符型,但也有站位編號為1、2、3等,為數(shù)據(jù)庫的統(tǒng)一管理,需統(tǒng)一轉(zhuǎn)換為字符型。站位編號不規(guī)范主要有以下幾個方面:①站位編號英文大小寫不一致;②監(jiān)測機(jī)構(gòu)各自命名;③在站位編號上加“臨”“平行樣”和“空白樣”等字樣。參照目前海洋環(huán)境監(jiān)測站位編號規(guī)則,由任務(wù)編號、海區(qū)編號、類別編號和站位序號順次排列組成。對站位進(jìn)行統(tǒng)一編號。對于歷史站位編號的確認(rèn),可通過核查相關(guān)的監(jiān)測數(shù)據(jù)、核實年度監(jiān)測方案、聯(lián)系地方監(jiān)測機(jī)構(gòu)等方式,將站位編號統(tǒng)一。(2)站位的經(jīng)、緯度。上報的經(jīng)緯度有兩種形式:一個是小數(shù)形式,另一個是度分秒形式。為便于計算機(jī)的計算方便,目前統(tǒng)一為小數(shù)形式。由于經(jīng)緯度的小數(shù)位數(shù)不一致,會導(dǎo)致部分空間定位有細(xì)微的差別。結(jié)合監(jiān)測任務(wù)計劃和實際監(jiān)測情況,統(tǒng)一經(jīng)緯度的有效位數(shù),目前保留到小數(shù)點后6位。(3)監(jiān)測日期。上報的監(jiān)測日期格式不一致,主要形式為:“2011-08-20”“2011/8/20”、或為時間型等?,F(xiàn)統(tǒng)一其形式為“2011-8-20”,年份:填滿4位;監(jiān)測月份:1—12,月信息小于10,前位無需補零。注意檢查,監(jiān)測年份是否為該年度;月份是否大于12;日期是否在該月的自然日以內(nèi)。(4)采樣深度與層號。部分地方監(jiān)測機(jī)構(gòu)在該填報“層號”的地方填寫了采樣深度,同時層號不統(tǒng)一,有的為中文———“表層”“中層”“底層”;有的為英文———“S”“M”“B”?!逗Q蟊O(jiān)測規(guī)范》中對水深和相應(yīng)的采樣層次進(jìn)行了規(guī)范。對層號,統(tǒng)一用英文表示。其中:表層為S;底層為B;若只有一個中層用M表示,若為多個中層,則分別用M1、M2、M3等順延表示。另需檢查層號與層深的匹配情況,若層號為S(表層),則采樣深度應(yīng)小于或等于2m;層號為B(底層),則采樣深度大于3m。部分填報機(jī)構(gòu)填寫層號時,出現(xiàn)表層填寫“B”和底層填寫為“D”的現(xiàn)象,可能是按“表層”和“底層”的首拼音字母填寫造成的。
1.7監(jiān)測參數(shù)不規(guī)范類型的處理
監(jiān)測參數(shù)的不規(guī)范類型問題,主要應(yīng)注意以下幾點。(1)大于號、小于號。某些監(jiān)測參數(shù)如重金屬、大腸桿菌數(shù)等,其監(jiān)測參數(shù)值上報中含有大于號或小于號。此類數(shù)據(jù)通常不影響其評價等級的判定,但會影響該類參數(shù)較大值、最小值、均值等統(tǒng)計的結(jié)果??裳芯吭搮?shù)的理化性質(zhì)并聯(lián)系地方監(jiān)測機(jī)構(gòu),確認(rèn)該參數(shù)的具體值大小。其缺省解決方法是刪除大于號、小于號,以便該參數(shù)的統(tǒng)計及評價。(2)未、無、“-”等字樣。結(jié)合年度監(jiān)測任務(wù),聯(lián)系地方監(jiān)測機(jī)構(gòu),確認(rèn)該監(jiān)測參數(shù)是未被監(jiān)測,還是低于檢出限。未監(jiān)測用空值表示;低于檢出限用“未檢出”表示。(3)空格及其他無效字符。上報的監(jiān)測數(shù)據(jù)中常含有空格及其他無效字符,使得計算機(jī)在識別、歸類等過程中出現(xiàn)異常??珊瞬楸O(jiān)測數(shù)據(jù)的內(nèi)容和性質(zhì),確認(rèn)為無效字符后,對數(shù)據(jù)值前、后含有的空格或其他無效字符進(jìn)行刪除處理。對經(jīng)緯度空缺,可核查相關(guān)的原始上報數(shù)據(jù)集和年度監(jiān)測工作方案,或聯(lián)系地方監(jiān)測機(jī)構(gòu);對層號空缺,可根據(jù)水深判斷,或聯(lián)系地方監(jiān)測機(jī)構(gòu)補缺;對某些監(jiān)測參數(shù)值空缺,可結(jié)合年度監(jiān)測任務(wù),聯(lián)系地方監(jiān)測機(jī)構(gòu),確認(rèn)該監(jiān)測參數(shù)是未被監(jiān)測,還是低于檢出限,再根據(jù)判斷結(jié)果給出規(guī)范填寫。
2監(jiān)測數(shù)據(jù)的齊全性檢驗
海洋環(huán)境監(jiān)測數(shù)據(jù)的齊全性檢驗,是以海洋環(huán)境監(jiān)測方案為依據(jù),檢查監(jiān)測方案中規(guī)定的監(jiān)測數(shù)據(jù)是否全部上報完整。首先對國家海洋環(huán)境監(jiān)測工作任務(wù)以及各海區(qū)年度海洋環(huán)境監(jiān)測工作方案進(jìn)行分析,對監(jiān)測工作方案進(jìn)行信息解析,按空間維度、指標(biāo)維度和時間維度對監(jiān)測任務(wù)進(jìn)行細(xì)化,空間維度包括監(jiān)測站位、監(jiān)測區(qū)域、管轄區(qū)域等,指標(biāo)維度包括監(jiān)測參數(shù)、監(jiān)測要素等,時間維度包括監(jiān)測時間等。其中監(jiān)測站位、監(jiān)測參數(shù)、監(jiān)測時間是空間維度、指標(biāo)維度和時間維度的最小單元,通過對最小單元的數(shù)據(jù)量統(tǒng)計,可獲得其上一統(tǒng)計單元的數(shù)據(jù)情況。因此對海洋環(huán)境監(jiān)測方案的解析按監(jiān)測站位、監(jiān)測參數(shù)和監(jiān)測時間3個方面進(jìn)行分解。對照監(jiān)測方案,檢查接收的數(shù)據(jù)是否存在區(qū)域、站位或頻次等有空缺監(jiān)測的情況。記錄缺失的原因:可能由于某些緣故未能進(jìn)行監(jiān)測、地方調(diào)整了監(jiān)測方案或地方漏報。仔細(xì)核查年度監(jiān)測任務(wù)計劃,聯(lián)系地方監(jiān)測機(jī)構(gòu)確認(rèn)。
3站位基礎(chǔ)信息數(shù)據(jù)質(zhì)量控制
3.1空間位置檢驗
空間位置檢驗主要針對調(diào)查單位在站位信息匯總過程中可能出現(xiàn)的錄入錯誤。將調(diào)查站位經(jīng)緯度轉(zhuǎn)換為十進(jìn)制的單位后,通過利用GIS生成站位圖的方式檢查站位落點所在位置,看其是否落在規(guī)定的監(jiān)測區(qū)域,對于斷面上的調(diào)查站位,還要檢查其是否明顯偏離斷面沿線。同時還需檢查“相同的站位編號,經(jīng)緯度不同”和“不同的站位編號,經(jīng)緯度相同”等數(shù)據(jù)空間位置精度的問題。對于該類問題,可通過核查相關(guān)的監(jiān)測數(shù)據(jù)、核對年度監(jiān)測任務(wù)、聯(lián)系監(jiān)測機(jī)構(gòu)確認(rèn)等方法,予以更正。
3.2站位基礎(chǔ)信息一致性的檢測
根據(jù)站位基礎(chǔ)信息一致性檢驗方法,即監(jiān)測區(qū)域、站位編號、站位經(jīng)緯度、監(jiān)測日期等基礎(chǔ)信息決定一條數(shù)據(jù)記錄,根據(jù)不同的監(jiān)測任務(wù)和監(jiān)測要素,分析站位基礎(chǔ)信息一致性是否符合。針對站位編號和經(jīng)緯度不一致的情況,從空間位置檢驗是否合理,并核實監(jiān)測方案進(jìn)行解決。針對監(jiān)測日期相同且站位編號相同等情況,判斷兩條記錄的監(jiān)測參數(shù)值是否一致,若一致則認(rèn)為是重復(fù)記錄;若不一致,可認(rèn)為是平行樣記錄,并進(jìn)一步核實。
3.3數(shù)據(jù)記錄重復(fù)的處理
海洋環(huán)境監(jiān)測數(shù)據(jù)的上報過程中存在很多重復(fù)的數(shù)據(jù)記錄,產(chǎn)生這種重復(fù)記錄的主要有如下原因。(1)地方上報數(shù)據(jù)時,重復(fù)上報了監(jiān)測數(shù)據(jù)集,如8月份上報了5月份和8月份兩份數(shù)據(jù);年底將全年的監(jiān)測數(shù)據(jù)再次上報。(2)不同監(jiān)測機(jī)構(gòu)報送的重復(fù)數(shù)據(jù),如屬于上下兩級監(jiān)測機(jī)構(gòu)(省、計劃單列市)重復(fù)報送。(3)地方監(jiān)測機(jī)構(gòu)監(jiān)測人員填寫報表時,將某些記錄重復(fù)填寫。(4)地方監(jiān)測機(jī)構(gòu)監(jiān)測人員填寫報表時,將平行樣的數(shù)據(jù)填寫。(5)數(shù)據(jù)集合并時,將曾經(jīng)合并過的數(shù)據(jù)集再次合并。對于重復(fù)的記錄數(shù)據(jù),在建立環(huán)境監(jiān)測數(shù)據(jù)庫中應(yīng)做剔除處理。
3.4平行樣的處理
平行樣數(shù)據(jù)只作為監(jiān)測數(shù)據(jù)質(zhì)量保障的輔助,在實際統(tǒng)計、評價和監(jiān)測數(shù)據(jù)時需區(qū)別對待。一般來說,只有少數(shù)站位上報的數(shù)據(jù)是平行樣。為了數(shù)據(jù)量統(tǒng)計、環(huán)境質(zhì)量評價等的需要,對于平行樣的記錄數(shù)據(jù),可將監(jiān)測參數(shù)值進(jìn)行求平均處理。
4監(jiān)測參數(shù)數(shù)據(jù)質(zhì)量控制
4.1值域一致性檢驗
在海洋環(huán)境監(jiān)測中,每個監(jiān)測參數(shù)有其對應(yīng)的經(jīng)驗值域范圍,通過值域檢測規(guī)則對填報的監(jiān)測數(shù)據(jù)按不同監(jiān)測要素分別對每個監(jiān)測參數(shù)值進(jìn)行檢驗,對于超出值域范圍的值,需進(jìn)一步分析該區(qū)域其他站位、其他頻次、周邊站位的參數(shù)值情況,并結(jié)合監(jiān)測任務(wù)性質(zhì)以及超出值域比例,從而判斷該參數(shù)值的性。
4.2邏輯一致性檢驗
某些監(jiān)測參數(shù)間存在一定的邏輯關(guān)系,即監(jiān)測參數(shù)與監(jiān)測參數(shù)間存在某種相關(guān)關(guān)系,有些關(guān)系具有一定的規(guī)律性,根據(jù)邏輯一致性檢驗方法,對于不符合邏輯一致性的監(jiān)測數(shù)據(jù)記錄,應(yīng)進(jìn)一步同監(jiān)測機(jī)構(gòu)進(jìn)行核實。
4.3數(shù)據(jù)輸出
對文件進(jìn)行批量檢驗處理,對于檢驗結(jié)果,給出合理且足夠詳細(xì)的錯誤提示,并保存質(zhì)檢日志,使得數(shù)據(jù)便于修改。為了區(qū)別一個數(shù)據(jù)是否進(jìn)行了質(zhì)檢、是否通過質(zhì)檢,以及了解質(zhì)檢的情況,需要對質(zhì)檢過后數(shù)據(jù)增加一個質(zhì)量控制符號,簡稱質(zhì)量符。綜合參考“國標(biāo)GB/T12460-2006海洋數(shù)據(jù)應(yīng)用記錄格式”以及“908海洋化學(xué)標(biāo)準(zhǔn)記錄格式”等質(zhì)量符格式。其中,“908海洋化學(xué)標(biāo)準(zhǔn)記錄格式”中質(zhì)量符2表示可疑傾向正確,3表示可疑傾向錯誤,本研究將這兩者綜合考慮,記為可疑;另外,“908海洋化學(xué)標(biāo)準(zhǔn)記錄格式”中質(zhì)量符8表示痕量,由于與“未檢出”有一定的重疊,因此本研究只采用“未檢出”。表1給出海洋環(huán)境監(jiān)測數(shù)據(jù)的質(zhì)量符及說明。一般來說,數(shù)值型的監(jiān)測參數(shù)數(shù)據(jù),對其質(zhì)量檢驗出有問題的只能作為“可疑”處理,不宜隨意修改或刪除。除非經(jīng)過專家經(jīng)驗檢驗,并經(jīng)監(jiān)測單位核實,可明確其為錯誤的,其質(zhì)量符方可標(biāo)注為“4”。對于監(jiān)測站位基礎(chǔ)信息,如監(jiān)測日期、站位編號、經(jīng)緯度、層號等,檢驗出有問題的,可根據(jù)檢驗情況,標(biāo)注其質(zhì)量符為“4”或“3”等。按步驟完成監(jiān)測數(shù)據(jù)處理流程后,可分年度或季度對處理的文件形成數(shù)據(jù)處理報告,并制作經(jīng)標(biāo)準(zhǔn)化處理和質(zhì)量控制后的標(biāo)準(zhǔn)數(shù)據(jù)集。
5結(jié)束語
目前,全國業(yè)務(wù)化海洋環(huán)境監(jiān)測數(shù)據(jù)逐年積累,但監(jiān)測數(shù)據(jù)的處理尚未有一個通用的、規(guī)范化的處理技術(shù)流程,給監(jiān)測數(shù)據(jù)的處理帶來一定的困難。本研究從海洋環(huán)境監(jiān)測數(shù)據(jù)管理的角度,以各監(jiān)測機(jī)構(gòu)上報的海洋環(huán)境監(jiān)測數(shù)據(jù)為對象,研究了監(jiān)測數(shù)據(jù)集的處理技術(shù)流程及方法體系。這一處理技術(shù)流程及方法體系的推廣將會,進(jìn)一步規(guī)范監(jiān)測數(shù)據(jù)的業(yè)務(wù)化處理流程,大大提高監(jiān)測數(shù)據(jù)的處理效率和水平,為海洋環(huán)境保護(hù)信息化持續(xù)健康發(fā)展提供高質(zhì)量的數(shù)據(jù)保障。
作者:路文海 向先全 楊翼 付瑞全 單位:中國海洋大學(xué) 國家海洋信息中心
數(shù)據(jù)處理論文:稅務(wù)數(shù)據(jù)處理系統(tǒng)設(shè)計論文
我國稅務(wù)系統(tǒng)信息化經(jīng)過將近二十年的建設(shè)與完善,逐步實現(xiàn)稅務(wù)系統(tǒng)數(shù)據(jù)大集中,解決好數(shù)據(jù)傳輸、數(shù)據(jù)安全和數(shù)據(jù)儲存等問題,為增加數(shù)據(jù)的透明度、整合數(shù)據(jù)、查詢數(shù)據(jù)和分析數(shù)據(jù)提供基礎(chǔ),促進(jìn)稅務(wù)征管的精細(xì)化和科學(xué)化,雖現(xiàn)已初具規(guī)模,并且積累了大量的經(jīng)驗和成果,但是同樣也存在數(shù)據(jù)沉積、分散建設(shè)在基層,使得信息孤立,難以規(guī)范統(tǒng)一、難以監(jiān)控實時等很多矛盾和問題。所以,我國提出稅務(wù)系統(tǒng)數(shù)據(jù)處理的總體建設(shè)規(guī)劃。如何實現(xiàn)稅務(wù)系統(tǒng)數(shù)據(jù)一體化建設(shè)的實施呢?做以下三個方面的分析:
一、HA技術(shù)的建立
何為HA技術(shù)呢?HA技術(shù)其實就是為了保障在錯誤管理和操作、系統(tǒng)故障、正常情況下的軟硬件維修所引起的一場失敗時,正常的稅務(wù)系統(tǒng)數(shù)據(jù)不受影響,盡可能降低停機(jī)幾率,確保系統(tǒng)的可用性的一種新技術(shù)。HA技術(shù)的類型包括HP9000MC/SG集群和Sybase’sFailoverHA技術(shù)。HP9000MC/SG集群是一組把HP服務(wù)器由網(wǎng)絡(luò)連接,同時經(jīng)硬件和軟件共同實現(xiàn)冗余,以致避免因為單節(jié)點的連接失敗致使整個系統(tǒng)癱瘓。其優(yōu)點就是能夠克服單點故障,并且可以保障應(yīng)用系統(tǒng)的正常工作,當(dāng)其中一個或多個包的數(shù)據(jù)資源出現(xiàn)連接失敗時,MC/SG軟件就會自動把那個連接失敗的應(yīng)用包送到接群的其他節(jié)點上。Sybase’sFailoverHA技術(shù)有兩大功能,一個是數(shù)據(jù)庫失敗返回功能,另一個是數(shù)據(jù)庫失敗恢復(fù)功能。Sybase’sFailover由兩臺或兩臺以上的機(jī)器組成,每一臺機(jī)器都是HA集群的節(jié)點,每兩臺上的兩個AS相互成為彼此的備節(jié)點胡主節(jié)點,通常情況下,AS只執(zhí)行自己的應(yīng)用,互相是伙伴關(guān)系。但是當(dāng)某一個節(jié)點因為機(jī)器本身或者AS問題以致不能啟動數(shù)據(jù)庫服務(wù)時,另一個節(jié)點自動啟動數(shù)據(jù)庫服務(wù),這就稱為失敗恢復(fù)過程;當(dāng)那個連接失敗的節(jié)點恢復(fù)連接后,服務(wù)由另一個節(jié)點返回到那個恢復(fù)連接的節(jié)點上,這個過程叫做失敗返回。
二、J2EE框架平臺的系統(tǒng)設(shè)計
J2EE的全稱為Java2PlatformEnterpriseEdition,是一種分布式應(yīng)用開發(fā)的技術(shù)框架。J2EE整合了DAS<稅務(wù)數(shù)據(jù)處理平臺>、XMLBeans,Hibernate,Spring框架等關(guān)鍵技術(shù)與一身,結(jié)合稅務(wù)系統(tǒng)技術(shù)整體規(guī)劃和數(shù)據(jù)儲備要求,闡述了J2EE框架平臺在稅務(wù)系統(tǒng)數(shù)據(jù)處理應(yīng)用中的特點和優(yōu)勢。通過J2EE提供的統(tǒng)一開發(fā)平臺,大大的降低了開發(fā)多層框架應(yīng)用的成本費用,并且還有力支持了現(xiàn)有的應(yīng)用程序,增添了目錄支持,使安全機(jī)制增強了提高了稅務(wù)系統(tǒng)的性能。DAS采用粗粒度設(shè)計模式,結(jié)合稅務(wù)數(shù)據(jù)信息資源建立總體的框架結(jié)構(gòu),支持DAS對非單一數(shù)據(jù)接口協(xié)議或技術(shù)的采集,使得納稅人能夠自主選擇渠道接入DAS來完成業(yè)務(wù)辦理,很大程度上方便了納稅人。在現(xiàn)實的技術(shù)上DAS采用了成熟的多層體系結(jié)構(gòu),使稅務(wù)系統(tǒng)平臺更易于維修保養(yǎng)和拓展,即可以適應(yīng)未來稅務(wù)數(shù)據(jù)隨著業(yè)務(wù)變化而加快適應(yīng)的要求,又可以完成當(dāng)前的業(yè)務(wù)需求。XMLBeans的作用是處理和訪問XML文檔和數(shù)據(jù),是用Java技術(shù)處理和訪問XML文檔和數(shù)據(jù)技術(shù)的突破性技術(shù)。XMLBeans能夠讓操作者面向?qū)ο蟮牧鰜硖幚眇I對待XML文檔和數(shù)據(jù),而且還能夠忠于此XML數(shù)據(jù)所對應(yīng)的Schema和XML結(jié)構(gòu)。Hibemate是通過reflection機(jī)制把JavaBeans對象及其間關(guān)系完整的映射到關(guān)系型的數(shù)據(jù)庫中,同時能夠使開發(fā)人員脫離JDBC代碼直接對JavaBeans的管理,包括CRUD的增加、更新、讀取和刪除操作。Hibernate的優(yōu)勢還不止于此,還有其出色的管理功能。經(jīng)過Hibernate完整的封裝,其能夠輕松的解決鎖機(jī)制、事務(wù)操作、延遲加載和數(shù)據(jù)緩存等等問題。尤其,Hibernate還是個免費的開源項目,很實用。但其缺點是不支持?jǐn)?shù)據(jù)庫中的一部分高級功能。Spring框架是個開源框架,框架的主要優(yōu)點就是它的分層結(jié)構(gòu),有七個定義完好的模塊構(gòu)成,以致允許操作者選擇哪個組件使用,而且為J2EE程序的開發(fā)提供了集成框架。
三、面向?qū)ο笙到y(tǒng)技術(shù)的應(yīng)用
猶豫考慮到數(shù)據(jù)本身具有多態(tài)性、分類性、繼承性等特征那個和處理數(shù)據(jù)軟件的可維護(hù)性和復(fù)用等要求,適時開發(fā)優(yōu)勢數(shù)據(jù)處理軟件——面向?qū)ο蠹夹g(shù)。該技術(shù)著眼于現(xiàn)在放眼于未來,大大的減少了物理和人力的浪費。結(jié)合稅務(wù)的實際情況應(yīng)認(rèn)真思考以下因素:
首先,應(yīng)該充分分析軟件的完整性和系統(tǒng)性,稅務(wù)數(shù)據(jù)的應(yīng)用范圍光、內(nèi)容多,內(nèi)容包含著納稅人的稅種登記、申申報繳納,資產(chǎn)負(fù)債、利潤損益以及基本信息情況等等,再確定軟件處理整體。應(yīng)用于納稅評估、征管分析、經(jīng)濟(jì)政策分析、行業(yè)分析、區(qū)域分析、進(jìn)出口統(tǒng)計和經(jīng)濟(jì)統(tǒng)計等等;稅務(wù)系統(tǒng)數(shù)據(jù)的應(yīng)用用戶比較多,涉及各級稅務(wù)機(jī)關(guān),同樣也涉及到我國國家統(tǒng)計機(jī)構(gòu)和經(jīng)濟(jì)決策機(jī)構(gòu);充分考慮到軟件功能的開放性、完整性和建設(shè)稅務(wù)系統(tǒng)數(shù)據(jù)信息化的長遠(yuǎn)性。
其次,應(yīng)該考慮稅務(wù)系統(tǒng)數(shù)據(jù)處理軟件的代碼、功能、分析、設(shè)計、測試和軟件的復(fù)用性。能夠保持代碼、功能、分析、設(shè)計、測試信息的獨立性、完整性和課移植性,必然也可以為此后的研發(fā)工作節(jié)約時間和節(jié)省財力,好的解決問題的方法就是運用面向?qū)ο蠹夹g(shù)。
再次,隨著時代的發(fā)展和進(jìn)步,稅務(wù)業(yè)務(wù)范圍不可避免的會擴(kuò)大延展,采用開放式的思路,不影響其他部分的實現(xiàn),從而獲得較大的收益。
,稅務(wù)系統(tǒng)數(shù)據(jù)的分類,數(shù)據(jù)龐大而又復(fù)雜,但是稅務(wù)數(shù)據(jù)具有分類性,經(jīng)濟(jì)行業(yè)具有系統(tǒng)分類,能夠分成幾個父行業(yè),每個父行業(yè)可以有若干個子行業(yè),而每個子行業(yè)又能有幾個孫行業(yè)。其中,子行業(yè)在持其特立獨行的方面外往往還繼承父行業(yè)具有的特性,對于某個方面和程度分析來說,子行業(yè)不應(yīng)窮舉全部經(jīng)濟(jì)算法和指標(biāo),應(yīng)繼承其父類的相同點,盡其所能減少重復(fù),冗余。
面向?qū)ο蠹夹g(shù)具有對象性、分類性、信息隱蔽性、繼承性和多態(tài)性特征。面向?qū)ο蠹夹g(shù)在程序設(shè)計方面有很大的優(yōu)勢。面向?qū)ο蠹夹g(shù)強調(diào)從客觀事物發(fā)來認(rèn)識構(gòu)造系統(tǒng)和問題域,這樣就使得系統(tǒng)能夠更加的對問題域做出反應(yīng)。從稅務(wù)系統(tǒng)數(shù)據(jù)出發(fā),尋找有關(guān)規(guī)律才能做出合理出色的軟件。進(jìn)行該技術(shù)的開發(fā),有益于人類思維能力的開發(fā),并且能夠有效的控制稅務(wù)系統(tǒng)的復(fù)雜性,是軟件更加有效,更加完善。研發(fā)始終都要貫穿對象概念,使每個開發(fā)階段的稅務(wù)系統(tǒng)成分都具有良好的對應(yīng)。不難看出,稅務(wù)系統(tǒng)數(shù)據(jù)的很多特性都十分面向?qū)ο蠹夹g(shù)的工作范疇,若處理方法和軟件工程上采用面向?qū)ο蠹夹g(shù),必然可以得到良好的效果。
綜上所述,稅務(wù)機(jī)關(guān)數(shù)據(jù)系統(tǒng)建設(shè)發(fā)展迅速,稅務(wù)系統(tǒng)數(shù)據(jù)的途徑和來源愈來愈多,數(shù)據(jù)處理顯然已滲透到工作的點點滴滴,如何運用一種高效的方法技術(shù)來處理這些海量的稅務(wù)信息數(shù)據(jù),并且得出有效的結(jié)果,儼然已經(jīng)成為稅務(wù)機(jī)關(guān)的重中之重。無論是建立HA技術(shù)的數(shù)據(jù)處理中心,J2EE框架下的數(shù)據(jù)處理平臺還是應(yīng)用面向?qū)ο蠹夹g(shù)數(shù)據(jù)處理軟件,都是有效,系統(tǒng),處理龐大繁雜的稅務(wù)數(shù)據(jù)的強大手段,大大的提高稅務(wù)機(jī)關(guān)的工作效率和工作質(zhì)量。由此,我們也能夠充分從技術(shù)改革中看到時代的進(jìn)步和經(jīng)濟(jì)的發(fā)展使技術(shù)得到前所未有的飛躍,使得各行各業(yè)從中獲益,在這個良好的框架中,因為盡較大限度的降低了系統(tǒng)內(nèi)部的消耗,因此使得軟件系統(tǒng)設(shè)計和硬件系統(tǒng)設(shè)計的性能和操作更好的協(xié)調(diào)發(fā)揮作用,與此同時也降低了整個系統(tǒng)的運營成本和建設(shè)成本。
數(shù)據(jù)處理論文:數(shù)據(jù)處理下通信設(shè)備論文
1狀態(tài)檢修系統(tǒng)中的關(guān)鍵
狀態(tài)檢修是以狀態(tài)評價為前提,并結(jié)合設(shè)備分析診斷結(jié)果等因素加以考慮,然后做出時間及項目安排的一種主動檢修方式。傳統(tǒng)的檢修方法只能反映檢修時設(shè)備的狀態(tài),比較片面。而狀態(tài)檢修則是對整個過程的監(jiān)測。某供電公司根據(jù)狀態(tài)檢修方式設(shè)計的信息通信設(shè)備系統(tǒng)狀態(tài)檢修流程圖,如圖1所示,包括了基本信息、巡視數(shù)據(jù)、在線監(jiān)測系統(tǒng)等諸多內(nèi)容,與傳統(tǒng)的檢修方式比自然更加科學(xué),但同時也帶來了新的問題,例如如何有效處理海量數(shù)據(jù)、如何將處理后得到的設(shè)備數(shù)據(jù)用于狀態(tài)評價服務(wù)等。為解決這兩個關(guān)鍵點,在此建立相適應(yīng)的數(shù)據(jù)處理模型和評價模型,并對其可行性加以驗證。假設(shè)狀態(tài)檢修周期是一個月,計算周期是24小時。
2數(shù)據(jù)處理模型分析
針對不同的設(shè)備,評價標(biāo)準(zhǔn)也各有差異。為反映設(shè)備的運行狀態(tài),評價標(biāo)準(zhǔn)中含有多項指標(biāo),均有專家系統(tǒng)為其打出的分值。在此將指標(biāo)主要分為兩大類,一是連續(xù)變化型,二是開關(guān)型。
2.1面積法
先將周期內(nèi)采集的所有數(shù)據(jù)轉(zhuǎn)換為面積數(shù)據(jù),將其作為評價模型的輸入。此方法主要用于連續(xù)變化型指標(biāo)的處理。通過在線監(jiān)測系統(tǒng)將監(jiān)測數(shù)據(jù)生成統(tǒng)計曲線,可反映指在特定階段內(nèi)的運行狀況;而后挑選設(shè)備的一個指標(biāo),將其評價標(biāo)準(zhǔn)與相應(yīng)的統(tǒng)計曲線置于同一個坐標(biāo)系中,以方便觀察分析。評價標(biāo)準(zhǔn)會將曲線劃分為兩部分,只考慮能夠表示設(shè)備超標(biāo)運行的異常面積。面積越大、異常時間越久,表明設(shè)備超標(biāo)越嚴(yán)重,則評價時給的分?jǐn)?shù)就低;相反,超標(biāo)越輕,得分越多??筛鶕?jù)實際運行的異常面積在較大異常面積占的比重衡量設(shè)備指標(biāo)的異常程度。通常需要考慮兩種情況,即當(dāng)某一指標(biāo)有且只有一條評判標(biāo)準(zhǔn)線和某一指標(biāo)有多條評判標(biāo)準(zhǔn)線。此外,設(shè)備在實際工作時,隨著時間的變動,電力系統(tǒng)負(fù)荷也在起伏變動。這必然會影響到信息通信系統(tǒng)中的數(shù)據(jù)流量,所以就同一個指標(biāo)而言,在其不同的運行階段,應(yīng)制定相適應(yīng)的標(biāo)準(zhǔn)。標(biāo)準(zhǔn)變化的幅值與時間區(qū)間可參考電力系統(tǒng)負(fù)荷曲線、系統(tǒng)運行經(jīng)驗以及各通信設(shè)備運行特點而具體確定。須注意的是,在求面積時,還應(yīng)觀察設(shè)備指標(biāo)是否長時間運行在規(guī)定的較高告警線上方。并根據(jù)實際情況設(shè)計一個合理的值,一旦超過此值,必須提出緊急告警,并予以相應(yīng)的處理。
2.2統(tǒng)計方法
適用于開關(guān)型指標(biāo)。該方法具有離散性,所以不適宜采用曲線模型處理,可借助概率統(tǒng)計的方法加以處理。即將周期內(nèi)采集的數(shù)據(jù)信息轉(zhuǎn)換為概率,作為評價模型的輸入。同時規(guī)定采集結(jié)果為真時,其值為1,否則為0。該方法有兩個步驟,先求取參考值,然后確定處理結(jié)果。
3評價模型
3.1閾值型評分模型
主要適用于給定正常運行邊界或者是極限運行范圍的指標(biāo),其中,i表示設(shè)定的指標(biāo)運行邊界或者是指標(biāo)極限運行條件;ki(i=0,1)表示設(shè)備每種狀態(tài)下的應(yīng)扣除的分?jǐn)?shù)。
3.2曲線型評分模型
主要適用在指標(biāo)偏離基準(zhǔn)越大扣分越多的情況。本文選擇指數(shù)函數(shù)作為評分模型,基本模式如下:y=ax-1該模型輸入x為連續(xù)變化型數(shù)據(jù)處理的結(jié)果S或者是開關(guān)型指標(biāo)為0的狀態(tài)量的個數(shù)。在實際計算中,指標(biāo)類型不同,確定底數(shù)a的方式也不同。4.3邏輯與型評分模型主要適用于某一指標(biāo)由若干狀態(tài)共同決定的情況,其基本模型如下:x=x1∩x2∩…xi∩…∩xn其中,布爾值1代表狀態(tài)良好;布爾值0表示故障;xi代表評分對象中第i個狀態(tài)的布爾值;ki(i=0,1)代表建議設(shè)備每種狀態(tài)下的應(yīng)扣除分?jǐn)?shù)。最終評分方法則分為三個步驟,先篩選,確保篩選后的數(shù)據(jù)包含有分值和時間;再判斷,加以處理。
4模型可行性的驗證
采用的是自2012年05月20日到2012年06月20日的CPU利用率數(shù)據(jù)。已知評價標(biāo)準(zhǔn)為設(shè)備CPU平均利用率高于60%的部分越限越多扣越多,嚴(yán)重故障警戒為90%,該指標(biāo)滿分5分。經(jīng)過對所有指標(biāo)模型的實際校驗,本文提出模型均符合現(xiàn)有實際系統(tǒng),能夠滿足信息和通信系統(tǒng)狀態(tài)檢修的基本要求。但必須經(jīng)過長期實際運行檢驗,不斷修正參數(shù)和完善模型,最終才能達(dá)到更加符合實際、更加的評價效果。
5結(jié)語
信息通信設(shè)備的意義不言而喻,為保障其能夠正常運行,必須做好檢修工作。針對目前狀態(tài)檢修面臨的困難,即數(shù)據(jù)處理和狀態(tài)評價,在此以數(shù)學(xué)建模的方法予以解決。
作者:郭興 單位:國網(wǎng)福建長汀縣供電有限公司