隨著計算機(jī)技術(shù)的發(fā)展,各行各業(yè)都開始采用計算機(jī)及相應(yīng)的信息技術(shù)進(jìn)行管理和運(yùn)營,這使得企業(yè)生成、收集、存貯和處理數(shù)據(jù)的能力大大提高,數(shù)據(jù)量與日俱增。企業(yè)數(shù)據(jù)實際上是企業(yè)的經(jīng)驗積累,當(dāng)其積累到 程度時,必然會反映出規(guī)律性的東西;所以對企業(yè)來說,這些堆積如山的數(shù)據(jù)無異于一個巨大的寶庫。除此之外,互聯(lián)網(wǎng)的發(fā)展更是為我們帶來了海量的數(shù)據(jù)和信息。在缺乏強(qiáng)有力的工具的情況下,這些海量的數(shù)據(jù)已經(jīng)遠(yuǎn)遠(yuǎn)的超出了人的理解和概括的能力。在這樣的背景下,人們迫切需要新一代的計算技術(shù)和工具來開采數(shù)據(jù)庫中蘊(yùn)藏的寶藏,使其成為有用的知識。在市場需求和技術(shù)基礎(chǔ)這兩個因素都具備的環(huán)境下,數(shù)據(jù)挖掘(Data?Mining)的概念與技術(shù)就應(yīng)運(yùn)而生了。
　　數(shù)據(jù)挖掘技術(shù)未來的發(fā)展方向和研究焦點是對各種非結(jié)構(gòu)化數(shù)據(jù)的挖掘,如對文本數(shù)據(jù)、空間數(shù)據(jù)、圖形數(shù)據(jù)、視頻圖像數(shù)據(jù)進(jìn)行挖掘,處理的數(shù)據(jù) 會涉及到更多的數(shù)據(jù)類型,它們更復(fù)雜,結(jié)構(gòu)更 。
　　北京理工大學(xué)大數(shù)據(jù)搜索與挖掘?qū)嶒炇覐埲A平主任研發(fā)的NLPIR大數(shù)據(jù)語義智能分析技術(shù)是滿足大數(shù)據(jù)挖掘?qū)φZ法、詞法和語義的綜合應(yīng)用。NLPIR大數(shù)據(jù)語義智能分析平臺是根據(jù)中文數(shù)據(jù)挖掘的綜合需求,融合了網(wǎng)絡(luò)采集、自然語言理解、文本挖掘和語義搜索的研究成果,并針對互聯(lián)網(wǎng)內(nèi)容處理的全技術(shù)鏈條的共享開發(fā)平臺。
　　NLPIR大數(shù)據(jù)語義智能分析平臺主要有采集、文檔轉(zhuǎn)化、新詞發(fā)現(xiàn)、批量分詞、語言統(tǒng)計、文本聚類、文本分類、摘要實體、智能過濾、情感分析、文檔去重、全文檢索、編碼轉(zhuǎn)換等十余項功能模塊，平臺提供了客戶端工具，云服務(wù)與二次開發(fā)接口等多種產(chǎn)品使用形式。各個中間件API可以無縫地融合到客戶的各類復(fù)雜應(yīng)用系統(tǒng)之中，可兼容Windows，Linux， Android，Maemo5, FreeBSD等不同操作系統(tǒng)平臺，可以供Java，Python，C，C#等各類開發(fā)語言使用。
　　數(shù)據(jù)挖掘技術(shù)及其應(yīng)用是目前 上的一個研究熱點，并在許多行業(yè)中得到了很好的應(yīng)用，尤其是在市場營銷中獲得了成功，初步體現(xiàn)了其優(yōu)越性和發(fā)展?jié)摿ΑＴ谛畔⒐芾眍I(lǐng)域，綜合應(yīng)用數(shù)據(jù)挖掘技術(shù)和人工智能技術(shù)，獲取用戶知識、文獻(xiàn)知識等各類知識，將是實現(xiàn)知識檢索和知識管理發(fā)展的必經(jīng)之路。