10.需要支持?jǐn)?shù)據(jù)降頻、插值、特殊函數(shù)計(jì)算等操作。原始數(shù)據(jù)的采集可能頻次挺高,但具體分析時(shí),往往不需要對(duì)原始收據(jù)進(jìn)行,而是數(shù)據(jù)降頻之后。系統(tǒng)需要提供高效的數(shù)據(jù)降頻操作。設(shè)備是很難同步的,不同設(shè)備采集數(shù)據(jù)的時(shí)間點(diǎn)是很難對(duì)齊的,因此分析一個(gè)特定時(shí)間點(diǎn)的值,往往需要插值才能解決,系統(tǒng)需要提供線性插值、設(shè)置固定值等多種插值策略才行。工業(yè)互聯(lián)網(wǎng)里,除通用的統(tǒng)計(jì)操作之外,往往還需要支持一些特殊函數(shù),比如時(shí)間加權(quán)平均、11.需要支持即席分析和查詢。為提高大數(shù)據(jù)分析師的工作效率,系統(tǒng)應(yīng)該提供一命令行工具或容許用戶通過其他工具,執(zhí)行SQL查詢,而不是非要通過編程接口。查詢分析的結(jié)果可以很方便的導(dǎo)出,再制作成各種圖標(biāo)。12.需要提供靈活的數(shù)據(jù)管理策略。一個(gè)大的系統(tǒng),采集的數(shù)據(jù)種類繁多,而且除采集的原始數(shù)據(jù)外,還有大量的衍生數(shù)據(jù)。這些數(shù)據(jù)各自有不同的特點(diǎn),有的采集頻次高,有的要求保留時(shí)間長(zhǎng),有的需要多個(gè)副本以保證更高的安全性,有的需要能快速訪問。因此物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)必須提供多種策略,讓用戶可以根據(jù)特點(diǎn)進(jìn)行選擇和配置,而且各種策略并存。 需要通過將一個(gè)或多個(gè)設(shè)備產(chǎn)生的數(shù)據(jù)流進(jìn)行實(shí)時(shí)聚合計(jì)算。深圳安全物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)開發(fā)
物聯(lián)網(wǎng)近年呈蓬勃發(fā)展之勢(shì),為更好的迎接物聯(lián)網(wǎng)數(shù)據(jù)爆發(fā)式增長(zhǎng)帶來的挑戰(zhàn),天澤信息研發(fā)了一款專業(yè)面向物聯(lián)網(wǎng)領(lǐng)域的大數(shù)據(jù)處理產(chǎn)品——TIZASTAR企業(yè)級(jí)物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái),提供物聯(lián)網(wǎng)數(shù)據(jù)的接入、計(jì)算、存儲(chǔ)、交換和管理等功能,可廣泛應(yīng)用于裝備制造、交通管理、氣象監(jiān)測(cè)、環(huán)境保護(hù)和新能源等諸多領(lǐng)域。客戶價(jià)值●***的數(shù)據(jù)接入,可支持千萬級(jí)物聯(lián)網(wǎng)終端并發(fā)接入、每秒接入百萬個(gè)數(shù)據(jù)包?!窀咝У臄?shù)據(jù)處理,在千億級(jí)數(shù)據(jù)集內(nèi),達(dá)到秒級(jí)的查詢響應(yīng)時(shí)間?!耢`活的數(shù)據(jù)交換,提供多種接口方式,用戶可以根據(jù)實(shí)際情況靈活選擇。●多重的數(shù)據(jù)保護(hù),從五個(gè)層面保證數(shù)據(jù)的安全。數(shù)據(jù)接入時(shí),傳感器或者采集終端通過無線或者有線的方式發(fā)送到平臺(tái)端,平臺(tái)端通過軟負(fù)載均衡(LVS)或者硬負(fù)載均衡(F5等)將流量均勻的負(fù)載到各個(gè)可水平擴(kuò)展的網(wǎng)關(guān),每個(gè)網(wǎng)關(guān)都是基于netty實(shí)現(xiàn)的高性能的網(wǎng)絡(luò)接入程序。數(shù)據(jù)接入?yún)f(xié)議分兩個(gè)層次,在通訊層次上,支持TCP、UDP、HTTP和WEBSOCKET等通訊協(xié)議;在數(shù)據(jù)協(xié)議層次上,支持MQTT、JSON、SOAP和自定義二進(jìn)制協(xié)議。通過這兩個(gè)層次的互相搭配,可以輕松實(shí)現(xiàn)任何物聯(lián)網(wǎng)終端、任何協(xié)議的數(shù)據(jù)接入。網(wǎng)關(guān)接收到數(shù)據(jù),并完成解包之后。
紹興奧暢物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)軟件開發(fā)需要高效的緩存功能。絕大部分場(chǎng)景,都需要能快速獲取設(shè)備當(dāng)前狀態(tài)或其他信息,用以報(bào)警、大屏展示或其他。
近年來,我國(guó)**密切關(guān)注農(nóng)業(yè)大數(shù)據(jù)的建立與發(fā)展。自2012年起,中國(guó)開始重點(diǎn)關(guān)注「智慧農(nóng)業(yè)」的發(fā)展并推出「精細(xì)農(nóng)業(yè)」技術(shù);2016年,《「十三五」全國(guó)農(nóng)業(yè)農(nóng)村信息發(fā)展規(guī)劃》指出,要加快推動(dòng)農(nóng)業(yè)農(nóng)村大數(shù)據(jù)發(fā)展,統(tǒng)籌推進(jìn)農(nóng)業(yè)農(nóng)村電子商務(wù)發(fā)展,創(chuàng)新流通方式,打造新業(yè)態(tài);2017年,***印發(fā)的《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》中,明確要求推進(jìn)各地區(qū)、各行業(yè)、各領(lǐng)域涉農(nóng)數(shù)據(jù)資源的共享開放,加快農(nóng)業(yè)大數(shù)據(jù)關(guān)鍵技術(shù)研發(fā),推動(dòng)農(nóng)業(yè)資源要素?cái)?shù)據(jù)共享;2018年我國(guó)**又提出關(guān)于實(shí)施鄉(xiāng)村振興戰(zhàn)略的意見,其中提到要大力發(fā)展數(shù)字農(nóng)業(yè),實(shí)施智慧農(nóng)業(yè)農(nóng)林水利工程,推進(jìn)物聯(lián)網(wǎng)試驗(yàn)示范和遙感技術(shù)應(yīng)用;2019年,**一號(hào)文件提出要深入推進(jìn)「互聯(lián)網(wǎng)+農(nóng)業(yè)」,擴(kuò)大農(nóng)業(yè)物聯(lián)網(wǎng)示范應(yīng)用,推進(jìn)重要農(nóng)產(chǎn)品全產(chǎn)業(yè)鏈大數(shù)據(jù)建設(shè),加強(qiáng)國(guó)家數(shù)字農(nóng)業(yè)農(nóng)村系統(tǒng)建設(shè)。
物聯(lián)網(wǎng)是一個(gè)非常寬泛的概念,它意味著各種設(shè)備和機(jī)器都是通過互聯(lián)網(wǎng)連接起來的,汽車網(wǎng)絡(luò)和工業(yè)互聯(lián)網(wǎng)屬于物聯(lián)網(wǎng)范疇。根據(jù)Gartner的報(bào)告,2019年,聯(lián)網(wǎng)設(shè)備的數(shù)量已超過142億臺(tái),到2021年有望達(dá)到250億臺(tái)。毫無疑問,我們需要一個(gè)物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)來處理這些聯(lián)網(wǎng)設(shè)備產(chǎn)生的大量數(shù)據(jù)。一個(gè)物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)需要具備哪些功能?與通用的大數(shù)據(jù)平臺(tái)相比,它需要具備什么樣的特征呢?我們來仔細(xì)分析一下。1.高效分布式必須是高效的分布式系統(tǒng)。物聯(lián)網(wǎng)產(chǎn)生的數(shù)據(jù)量巨大,*中國(guó)而言,就有5億多臺(tái)智能電表,每臺(tái)電表每隔15分鐘采集一次數(shù)據(jù),***全國(guó)智能電表就會(huì)產(chǎn)生500多億條記錄。這么大的數(shù)據(jù)量,任何一臺(tái)服務(wù)器都無能力處理,因此處理系統(tǒng)必須是分布式的,水平擴(kuò)展的。為降低成本,一個(gè)節(jié)點(diǎn)的處理性能必須是高效的,需要支持?jǐn)?shù)據(jù)的快速寫入和快速查詢。 實(shí)時(shí)數(shù)據(jù)在緩存里,歷史數(shù)據(jù)在持久化存儲(chǔ)介質(zhì)里,而且可能依據(jù)時(shí)長(zhǎng),保留在不同存儲(chǔ)介質(zhì)里。
數(shù)據(jù)倉庫服務(wù)(DWS):數(shù)據(jù)倉庫服務(wù)(DataWarehouseService)是一種基于公有云基礎(chǔ)架構(gòu)和平臺(tái)的在線數(shù)據(jù)處理數(shù)據(jù)庫,提供即開即用、可擴(kuò)展且完全托管的分析型數(shù)據(jù)庫服務(wù)。DWS是基于華為融合數(shù)據(jù)倉庫GaussDB產(chǎn)品的云原生服務(wù),兼容標(biāo)準(zhǔn)ANSISQL99和SQL2003,同時(shí)兼容PostgreSQL/Oracle數(shù)據(jù)庫生態(tài),為各行業(yè)PB級(jí)海量大數(shù)據(jù)分析提供有競(jìng)爭(zhēng)力的解決方案。數(shù)據(jù)可視化服務(wù)(DLV):數(shù)據(jù)可視化服務(wù)(DataLakeVisualization)是一站式數(shù)據(jù)可視化平臺(tái),適配云上云下多種數(shù)據(jù)源,提供豐富多樣的2D、3D可視化組件,采用拖拽式自由布局,旨在幫助您快速定制和應(yīng)用屬于您自己的數(shù)據(jù)大屏。該方案的數(shù)據(jù)流向如下:物聯(lián)網(wǎng)平臺(tái)將設(shè)備上報(bào)的數(shù)據(jù)通過規(guī)則引擎功能轉(zhuǎn)發(fā)至數(shù)據(jù)接入服務(wù)(DIS)。實(shí)時(shí)流計(jì)算服務(wù)(CS)從DIS的通道中獲取實(shí)時(shí)數(shù)據(jù),通過SQL語句分析并處理后,再寫入另一個(gè)DIS通道。DIS以對(duì)象存儲(chǔ)服務(wù)(OBS)為中介將分析結(jié)果轉(zhuǎn)儲(chǔ)至數(shù)據(jù)倉庫服務(wù)(DWS)。數(shù)據(jù)可視化服務(wù)(DLV)讀取分析結(jié)果呈現(xiàn)為可視化報(bào)表。 如果數(shù)據(jù)處理系統(tǒng)宕機(jī),直接導(dǎo)致停產(chǎn),產(chǎn)生經(jīng)濟(jì)有損失、導(dǎo)致對(duì)終端消費(fèi)者的服務(wù)無法正常提供。天津可視化物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)
原始數(shù)據(jù)的采集可能頻次挺高,但具體分析時(shí),往往不需要對(duì)原始收據(jù)進(jìn)行,而是數(shù)據(jù)降頻之后。深圳安全物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)開發(fā)
4.需要高效的緩存功能。絕大部分場(chǎng)景,都需要能快速獲取設(shè)備當(dāng)前狀態(tài)或其他信息,用以報(bào)警、大屏展示或其他。系統(tǒng)需要提供一高效機(jī)制,讓用戶可以獲取全部、或符合過濾條件的部分設(shè)備的***狀態(tài)。5.需要實(shí)時(shí)流式計(jì)算。各種實(shí)時(shí)預(yù)警或預(yù)測(cè)已經(jīng)不是簡(jiǎn)單的基于某一個(gè)閾值進(jìn)行,而是需要通過將一個(gè)或多個(gè)設(shè)備產(chǎn)生的數(shù)據(jù)流進(jìn)行實(shí)時(shí)聚合計(jì)算,不只是基于一個(gè)時(shí)間點(diǎn)、而是基于一個(gè)時(shí)間窗口進(jìn)行計(jì)算。不僅如此,計(jì)算的需求也相當(dāng)復(fù)雜,因場(chǎng)景而異,應(yīng)容許用戶自定義函數(shù)進(jìn)行計(jì)算。6.需要支持?jǐn)?shù)據(jù)訂閱。與通用大數(shù)據(jù)平臺(tái)比較一致,同一組數(shù)據(jù)往往有很多應(yīng)用都需要,因此系統(tǒng)應(yīng)該提供訂閱功能,只要有新的數(shù)據(jù)更新,就應(yīng)該實(shí)時(shí)提醒應(yīng)用。而且這個(gè)訂閱也應(yīng)該是個(gè)性化的,容許應(yīng)用設(shè)置過濾條件,比如只訂閱某個(gè)物理量五分鐘的平均值。 深圳安全物聯(lián)網(wǎng)大數(shù)據(jù)平臺(tái)開發(fā)
上海奧暢智能科技有限公司位于上海市普陀區(qū)祁連山南路2891弄盛源科技園C311,交通便利,環(huán)境優(yōu)美,是一家其他型企業(yè)。公司致力于為客戶提供安全、質(zhì)量有保證的良好產(chǎn)品及服務(wù),是一家私營(yíng)合伙企業(yè)企業(yè)。公司擁有專業(yè)的技術(shù)團(tuán)隊(duì),具有人臉識(shí)別,物聯(lián)網(wǎng),現(xiàn)實(shí)增強(qiáng),機(jī)器人等多項(xiàng)業(yè)務(wù)。奧暢科技以創(chuàng)造***產(chǎn)品及服務(wù)的理念,打造高指標(biāo)的服務(wù),引導(dǎo)行業(yè)的發(fā)展。