一千萬行數據用什麼軟體處理

㈠ 大數據分析一般用什麼工具分析

1、專業的大數據分析工具
2、各種Python數據可視化第三方庫
3、其它語言的數據可視化框架
一、專業的大數據分析工具
1、FineReport
FineReport是一款純Java編寫的、集數據展示(報表)和數據錄入(表單)功能於一身的企業級web報表工具，只需要簡單的拖拽操作便可以設計復雜的中國式報表，搭建數據決策分析系統。
2、FineBI
FineBI是新一代自助大數據分析的商業智能產品，提供了從數據准備、自助數據處理、數據分析與挖掘、數據可視化於一體的完整解決方案，也是我比較推崇的可視化工具之一。
FineBI的使用感同Tableau類似，都主張可視化的探索性分析，有點像加強版的數據透視表。上手簡單，可視化庫豐富。可以充當數據報表的門戶，也可以充當各業務分析的平台。
二、Python的數據可視化第三方庫
Python正慢慢地成為數據分析、數據挖掘領域的主流語言之一。在Python的生態里，很多開發者們提供了非常豐富的、用於各種場景的數據可視化第三方庫。這些第三方庫可以讓我們結合Python語言繪制出漂亮的圖表。
1、pyecharts
Echarts(下面會提到)是一個開源免費的javascript數據可視化庫，它讓我們可以輕松地繪制專業的商業數據圖表。當Python遇上了Echarts，pyecharts便誕生了，它是由chenjiandongx等一群開發者維護的Echarts Python介面，讓我們可以通過Python語言繪制出各種Echarts圖表。
2、Bokeh
Bokeh是一款基於Python的互動式數據可視化工具，它提供了優雅簡潔的方法來繪制各種各樣的圖形，可以高性能地可視化大型數據集以及流數據，幫助我們製作互動式圖表、可視化儀錶板等。
三、其他數據可視化工具
1、Echarts
前面說過了，Echarts是一個開源免費的javascript數據可視化庫，它讓我們可以輕松地繪制專業的商業數據圖表。
大家都知道去年春節以及近期央視大規劃報道的網路大數據產品，如網路遷徙、網路司南、網路大數據預測等等，這些產品的數據可視化均是通過ECharts來實現的。
2、D3
D3（Data Driven Documents）是支持SVG渲染的另一種JavaScript庫。但是D3能夠提供大量線性圖和條形圖之外的復雜圖表樣式，例如Voronoi圖、樹形圖、圓形集群和單詞雲等。

㈡ 大數據處理軟體用什麼比較好

常見的數據處理軟體有Apache Hive、SPSS、Excel、Apache Spark、Jaspersoft BI 套件。

1、Apache Hive

Hive是一個建立在Hadoop上的開源數據倉庫基礎設施，通過Hive可以很容易的進行數據的ETL,對數據進行結構化處理,並對Hadoop上大數據文件進行查詢和處理等。 Hive提供了一種簡單的類似SQL的查詢語言—HiveQL,這為熟悉SQL語言的用戶查詢數據提供了方便。

數據分析與處理方法：

採集

在大數據的採集過程中，其主要特點和挑戰是並發數高，因為同時有可能會有成千上萬的用戶來進行訪問和操作，比如火車票售票網站和淘寶，它們並發的訪問量在峰值時達到上百萬，所以需要在採集端部署大量資料庫才能支撐。

並且如何在這些資料庫之間進行負載均衡和分片的確是需要深入的思考和設計。

統計/分析

統計與分析主要利用分布式資料庫，或者分布式計算集群來對存儲於其內的大量數據進行普通的分析和分類匯總等，以滿足大多數常見的分析需求，在這方面，一些實時性需求會用到EMC的GreenPlum、Oracle的Exadata，以及基於MySQL的列式存儲Infobright等。

而一些批處理，或者基於半結構化數據的需求可以使用Hadoop。統計與分析這部分的主要特點和挑戰是分析涉及的數據量大，其對系統資源，特別是I/O會有極大的佔用。

導入/預處理

雖然採集端本身會有很多資料庫，但是如果要對這些大量數據進行有效的分析，還是應該將這些來自前端的數據導入到一個集中的大型分布式資料庫，或者分布式存儲集群，並且可以在導入基礎上做一些簡單的清洗和預處理工作。

也有一些用戶會在導入時使用來自Twitter的Storm來對數據進行流式計算，來滿足部分業務的實時計算需求。導入與預處理過程的特點和挑戰主要是導入的數據量大，每秒鍾的導入量經常會達到百兆，甚至千兆級別。

㈢ 新手處理大量的數據用什麼數據分析工具

新手處理大量的數據推薦你用思邁特軟體Smartbi用數據分析工具簡單易上手。思邁特軟體Smartbi Eagle圍繞業務人員提供企業級數據分析工具和服務滿足不同類型的業務用戶，在Excel或者瀏覽器中都可實現全自助的數據提取、數據處理、數據分析和數據共享，具有無以倫比的適用性。

產品優勢:

一、簡單易用上手快

融合分析(Excel界面自助取數完成自助分析，無需學習)、自然語言分析、自助儀表盤(所見即所得)

二、億級數據，秒級響應

支持滾動載入，大大提升報表的載入速度；採用負載均衡，內置查詢引擎能進行線性擴充；支持MPP高速緩存庫抽取數據，真正實現億級數據，秒級響應！

三、強大的計算能力

提供分布式計算，支持表計算、跨庫計算、OLAP多維計算、時間智能計算、SQL擴展、Python擴展，所有的表現層使用統一的數據模型，具備非常強大的計算能力！

四、保障系統穩定性

平台支持分布式session共享、擴展包熱載入，持續擴展產品補丁包更新機制，還能可視化地進行系統檢查和監控，安全有效地保障系統的穩定性。

思邁特軟體Smartbi公司在北京、上海、深圳、鄭州、天津、武漢、成都、西安、廈門、濟南、烏魯木齊等地設有分支機構，對本地用戶進行支持服務！此外，在線開放提供的文檔服務日均訪問量超過萬次；在線開放提供的技術交流社群日均在線超過千人。

數據分析工具靠不靠譜，來試試Smartbi,思邁特軟體Smartbi經過多年持續自主研發，凝聚大量商業智能最佳實踐經驗，整合了各行業的數據分析和決策支持的功能需求。滿足最終用戶在企業級報表、數據可視化分析、自助探索分析、數據挖掘建模、AI智能分析等大數據分析需求。

思邁特軟體Smartbi個人用戶全功能模塊長期免費試用
馬上免費體驗:Smartbi一站式大數據分析平台

㈣ 數據分析用什麼軟體

做數據分析，比較好用的軟體有哪些？
數據分析軟體有很多種，每一種都適合不同類型的人員。

簡單說：

Excel：普遍適用，既有基礎，又有中高級。中級一般用Excel透視表，高級的用Excel VBA。

hihidata：比較小眾的數據分析工具。三分鍾就可以學會直接上手。無需下載安裝，直接在線就可以使用。

SPSS：專業統計軟體，沒有統計功底很難用的。同時包含了數據挖掘等高大功能。

SAS：專業統計軟體，專業人士用的，不懂編程還是不要碰了。

MARLAB：建立統計與數學模型，但是比較難學，很難上手。

Eview：比較小眾，建立一些經濟類的模型還是很有用的。計量經濟學中經常用到。

各種BI與報表工具：FineBI，FineReport，tableau，QlikView等。
比較好的數據分析軟體有哪些？
SPSS是軟體里比較簡單的 ，學校里使用的比較多一些，可以採用菜單的模式 帶少量的命令編輯MATLAB常常在建立統計和數學模型的時候比較好用 但是很難學 反正我學了一個學期楞是就知道個皮毛Finereport 兼顧了基本的數據錄入與展現功能，一般的數據源都支持，學習成本比較低，比較適合企業級用戶使用，SAS我沒用過
網站數據分析工具哪個好用些阿？
推薦吆喝科技的ab測試，軟體分析的數據比較全面和精準
學數據分析需要熟悉哪些軟體基礎
軟體只是一個工具 看你要從事的數據分析的方向很深度而定

一般的用excel也可以進行常規簡單的數據分析

再深入一點的用spss、stata、sas

如果要搞數據挖掘的話，用spss modeler / sas

不過一般的常規數據分析用excel和spss基本上能夠應付
常用的數據分析工具有哪些
數據分析的概念太寬泛了，做需要的是側重於數據展示、數據挖掘、還是數據存儲的？是個人用還是企業、部門用呢？應用的場景是製作簡單的個人圖表，還是要做銷售、財務還是供應鏈的分析？

那就說說應用最廣的BI吧，企業級應用，其實功能上已經涵蓋了我上面所述的部分，主要用於數據整合，構建分析，展示數據供決策分析的，譬如FineBI，是能夠」智能」分析數據的工具了。
android數據分析工具用什麼軟體
1. 開源大數據生態圈

Hadoop HDFS、Hadoop MapRece, HBase、Hive 漸次誕生，早期Hadoop生態圈逐步形成。

開源生態圈活躍，並免費，但Hadoop對技術要求高，實時性稍差。

2. 商用大數據分析工具

一體機資料庫/數據倉庫（費用很高）

IBM PureData(Netezza), Oracle Exadata, SAP Hana等等。

數據倉庫（費用較高）

Teradata AsterData, EMC GreenPlum, HP Vertica 等等。

數據集市（費用一般）

QlikView、 Tableau 、國內永洪科技Yonghong Data Mart 等等。

前端展現

用於展現分析的前端開源工具有JasperSoft，Pentaho, Spagobi, Openi, Birt等等。

用於展現分析商用分析工具有Cognos,BO, Microsoft, Oracle,Microstrategy,QlikView、 Tableau 、國內永洪科技Yonghong Z-Suite等等。
數據分析軟體有哪些，他們分別的特點是什麼
除了EXCEL 數據分析用的多的有以下幾個軟體，你看看你們公司符合哪個

SPSS（StatisticalProct and Service Solutions），「統計產品與服務解決方案」軟體，是數據定量分析的工具，適用於社會科學（如經濟分析，市場調研分析）和自然科學等林林總總的統計分析，國內使用的最多，領域也多。

SPSS就如一個傻瓜相機，界面友好，使用簡單，但是功能強大，可以編程，能解決絕大部分統計學問題，適合初學者。它有一個可以點擊的交互界面，能夠使用下拉菜單來選擇所需要執行的命令。它也有一個通過拷貝和粘貼的方法來學習其「句法」語言，但是這些句法通常非常復雜而且不是很直觀。

SPSS致力於簡便易行（其口號是「真正統計，確實簡單」），並且取得了成功。但是如果你是高級用戶，隨著時間推移你會對它喪失興趣。SPSS是制圖方面的強手，由於缺少穩健和調查的方法，處理前沿的統計過程是其弱項。

SAS是全球最大的軟體公司之一，是全球商業智能和分析軟體與服務領袖。SAS由於其功能強大而且可以編程，很受高級用戶的歡迎，也正是基於此，它是最難掌握的軟體之一，多用於企業工作之中。

SAS就如一台單反相機，你需要編寫SAS程序來處理數據，進行分析。如果在一個程序中出現一個錯誤，找到並改正這個錯誤將是困難的。在所有的統計軟體中，SAS有最強大的繪圖工具，由SAS/Graph模塊提供。然而，SAS/Graph模塊的學習也是非常專業而復雜，圖形的製作主要使用程序語言。SAS適合高級用戶使用。它的學習過程是艱苦的，正所謂「五年入門，十年精通」，最初的階段會使人灰心喪氣。然而它還是以強大的數據管理和同時處理大批數據文件的功能，得到高級用戶的青睞。

R 是用於統計分析、繪圖的語言和操作環境，屬於GUN系統的一個自由、免費、源代碼開放的軟體，它是一個用於統計計算和統計制圖的優秀工具，多用於論文，科研領域。

R的思想是：它可以提供一些集成的統計工具，但更大量的是它提供各種數學計算、統計計算的函數，從而使使用者能靈活機動的進行數據分析，甚至創造出符合需要的新的統計計算方法。因此R有很多最新的模型和檢驗方法，但是非常難自學，對英語的要求很高。R與SAS的區別在於，R是開放免費的，處理更靈活，同時對編程要求較高。
大數據是什麼意思？哪些軟體適合大數據分析？
大數據定義什麼的網路很多。個人理解：現有的互聯網數據量越來越大，面對這么大的數據量，如何利用好這些數據是極具挑戰性的。一方面數據量提升，數據處理的方法必須改變，才能提高數據處理速度，比如大規模，高並發的網站訪問，12306，淘寶天貓什麼的；另一方面從這些海量數據中挖掘出有用的信息，比如根據淘寶根據用戶點擊訪問，反饋出用戶的喜好，給用戶推薦相關商品。

推薦Hadoop，適合大數據處理的。

網上學習資料很多，自己搜去！

當然你也可以自己使用資料庫MYSQL等去做大數據處理，這樣很多Hadoop做好的東西都需要你自己去做。要是熟悉某個資料庫，並且應用明確就用資料庫自己去做吧！

加油！
數據分析軟體哪個好
最常用的是spss,屬於非專業統計學的! sas是專業的統計分析軟體,需要編程用,都是專業人士用的 數據分析中的數據挖掘,可以使用spss公司的clementine
大數據分析一般用什麼工具分析
在大數據處理分析過程中常用的六大工具：

Hadoop

Hadoop 是一個能夠對大量數據進行分布式處理的軟體框架。但是 Hadoop 是以一種可靠、高效、可伸縮的方式進行處理的。Hadoop 是可靠的，因為它假設計算元素和存儲會失敗，因此它維護多個工作數據副本，確保能夠針對失敗的節點重新分布處理。Hadoop 是高效的，因為它以並行的方式工作，通過並行處理加快處理速度。Hadoop 還是可伸縮的，能夠處理 PB 級數據。此外，Hadoop 依賴於社區伺服器，因此它的成本比較低，任何人都可以使用。

HPCC

HPCC，High Performance puting and munications(高性能計算與通信)的縮寫。1993年，由美國科學、工程、技術聯邦協調理事會向國會提交了「重大挑戰項目：高性能計算與 通信」的報告，也就是被稱為HPCC計劃的報告，即美國總統科學戰略項目，其目的是通過加強研究與開發解決一批重要的科學與技術挑戰問題。HPCC是美國 實施信息高速公路而上實施的計劃，該計劃的實施將耗資百億美元，其主要目標要達到：開發可擴展的計算系統及相關軟體，以支持太位級網路傳輸性能，開發千兆 比特網路技術，擴展研究和教育機構及網路連接能力。

Storm

Storm是自由的開源軟體，一個分布式的、容錯的實時計算系統。Storm可以非常可靠的處理龐大的數據流，用於處理Hadoop的批量數據。Storm很簡單，支持許多種編程語言，使用起來非常有趣。

Apache Drill

為了幫助企業用戶尋找更為有效、加快Hadoop數據查詢的方法，Apache軟體基金會近日發起了一項名為「Drill」的開源項目。Apache Drill 實現了 Google's Dremel.

據Hadoop廠商MapR Technologies公司產品經理Tomer Shiran介紹，「Drill」已經作為Apache孵化器項目來運作，將面向全球軟體工程師持續推廣。

RapidMiner

RapidMiner是世界領先的數據挖掘解決方案，在一個非常大的程度上有著先進技術。它數據挖掘任務涉及范圍廣泛，包括各種數據藝術，能簡化數據挖掘過程的設計和評價。

Pentaho BI

Pentaho BI 平台不同於傳統的BI 產品，它是一個以流程為中心的，面向解決方案(Solution)的框架。其目的在於將一系列企業級BI產品、開源軟體、API等等組件集成起來，方便商務智能應用的開發。它的出現，使得一系列的面向商務智能的獨立產品如Jfree、Quartz等等，能夠集成在一起，構成一項項復雜的、完整的商務智能解決方案。

㈤ 超過千萬條數據分析用那個軟體比較好

數據可視化分析軟體（OurwayBI）

OurwayBI採用Node.js。

Node.js是一個Javascript運行環境(runtime)，它實際上是對Google V8引擎進行了封裝。V8引擎執行Javascript的速度非常快，性能非常好。

強大的計算能力

獨創的內存OLAP僅需要創建一個動態視圖即可以完成分析模型的創建，而所有OLAP強大的計算能力，則通過內存計算來完成。

效果圖

㈥ 大量數據計數用什麼軟體，有比EXCEL表格好的嗎

EXCEL可以管理100萬以內的數據，20萬完全沒問題。
使用COUNTIF去統計數據效率很低，一般上萬的數據建議使用VBA的字典編程，20萬的數據完全可以秒出結果。
比EXCEL刪除大數據管理的軟體非常多，例如SPSS，以及SQL SERVER、ORACLE等各種資料庫，還有R、PYTHON等語言自己編程統計也不錯。根據自己的特長，選擇合適自己的工具。