國(guó)內(nèi)外有什么好的數(shù)據(jù)平臺(tái)？

時(shí)間：2022-07-30 06:27:02 | 來源：網(wǎng)站運(yùn)營(yíng)

時(shí)間：2022-07-30 06:27:02 來源：網(wǎng)站運(yùn)營(yíng)

直接進(jìn)入主題！

一、行業(yè)數(shù)據(jù)

互聯(lián)網(wǎng)數(shù)據(jù)

1. 艾瑞網(wǎng)：高頻率更新互聯(lián)網(wǎng)前沿的新聞資訊、分析報(bào)告，旗下包括艾瑞指數(shù)、艾瑞咨詢等
2. 艾媒網(wǎng)：艾媒與艾瑞無關(guān)，艾媒網(wǎng)發(fā)布的研究報(bào)告多偏向移動(dòng)互聯(lián)網(wǎng)方向
3. CBNDdata：以阿里巴巴的商業(yè)數(shù)據(jù)庫(kù)為基礎(chǔ)，輸出產(chǎn)業(yè)經(jīng)濟(jì)分析報(bào)告
4. QuestMobile：周期性地發(fā)布一些關(guān)于APP的研究報(bào)告
5. 阿里研究院：阿里旗下/發(fā)布研究電商等方向趨勢(shì)的數(shù)據(jù)報(bào)告，內(nèi)容多與阿里相關(guān)
6. 360研究報(bào)告：360旗下/移動(dòng)、PC、網(wǎng)站、企業(yè)、詐騙等安全領(lǐng)域的研究，以及大數(shù)據(jù)等非安全領(lǐng)域的研究
7. 中國(guó)互聯(lián)網(wǎng)信息研究中心：經(jīng)國(guó)家主管部門批準(zhǔn)組建的管理和服務(wù)機(jī)構(gòu)，經(jīng)常發(fā)布一些有價(jià)值的互聯(lián)網(wǎng)信息報(bào)告
8. 中國(guó)信通院：針對(duì)互聯(lián)網(wǎng)多個(gè)行業(yè)的發(fā)展趨勢(shì)，發(fā)布白皮書，角度較為宏觀
9. 中國(guó)互聯(lián)網(wǎng)數(shù)據(jù)平臺(tái)：提供全國(guó)各地區(qū)互聯(lián)網(wǎng)發(fā)展報(bào)告、基礎(chǔ)數(shù)據(jù)及研究分析報(bào)告，數(shù)據(jù)及報(bào)告偏向?qū)W術(shù)性研究
10. 清博大數(shù)據(jù)：提供微信、微博、頭條榜單數(shù)據(jù)，各種研究報(bào)告、數(shù)據(jù)報(bào)告、輿情報(bào)告及行業(yè)熱點(diǎn)
11. 數(shù)據(jù)觀：豐富的前沿行業(yè)資訊，及部分研究報(bào)告下載
12. 騰訊大數(shù)據(jù)：數(shù)據(jù)服務(wù)平臺(tái)，提供調(diào)查研究、移動(dòng)互聯(lián)網(wǎng)及特色數(shù)據(jù)報(bào)告，質(zhì)量較高
13. 大數(shù)據(jù)世界：提供大數(shù)據(jù)相關(guān)資訊、應(yīng)用案例、技術(shù)方案及資料下載

金融財(cái)經(jīng)數(shù)據(jù)

1. 同花順數(shù)據(jù)中心：提供股票債券等金融數(shù)據(jù)
2. 和訊數(shù)據(jù)：提供各種股票、基金、外匯、債券等實(shí)時(shí)數(shù)據(jù)，有付費(fèi)，有免費(fèi)
3. 零壹財(cái)經(jīng)：大大小小的網(wǎng)貸數(shù)據(jù)、排行榜等
4. 金融數(shù)據(jù)網(wǎng)：提供每日的黃金、匯率、農(nóng)產(chǎn)品、汽油價(jià)格的相關(guān)數(shù)據(jù)
5. 蘿卜投研：提供股市、證券等數(shù)據(jù)，多以數(shù)據(jù)研究報(bào)告形式展示
6. 金融界：提供股市、融資等各種資金流向數(shù)據(jù)，以及豐富的財(cái)報(bào)和研報(bào)
7. 東方財(cái)富網(wǎng)：提供多國(guó)的股票、財(cái)稅、行業(yè)、消費(fèi)等大量豐富的經(jīng)濟(jì)數(shù)據(jù)

其他行業(yè)數(shù)據(jù)

1. 中研網(wǎng)數(shù)據(jù)：提供醫(yī)療、房產(chǎn)、制造業(yè)、服務(wù)業(yè)、零售消費(fèi)、車輛等全行業(yè)數(shù)據(jù)
2. 中國(guó)報(bào)告大廳：提供各行各業(yè)的基礎(chǔ)數(shù)據(jù)、調(diào)查報(bào)告、分析報(bào)告、預(yù)測(cè)報(bào)告，種類豐富
3. CADMAPPER：世界各大城市的DXF文件，原始數(shù)據(jù)源為OSM，NASA，USGS
4. 亞馬遜網(wǎng)絡(luò)服務(wù)公共數(shù)據(jù)集：跨科學(xué)云數(shù)據(jù)平臺(tái)，包含化學(xué)、生物、經(jīng)濟(jì)等多個(gè)領(lǐng)域的數(shù)據(jù)集
5. Awesome Public Datasets：Github公共數(shù)據(jù)搜集項(xiàng)目，自然科學(xué)、社會(huì)科學(xué)覆蓋較面，包含各個(gè)細(xì)分領(lǐng)域的數(shù)據(jù)庫(kù)資源。
6. figshare：數(shù)據(jù)分析與研究成果共享平臺(tái)。
7. 英國(guó)公開數(shù)據(jù)瀏覽工具：James Trimble制作的英國(guó)數(shù)據(jù)可視化瀏覽工具集；
8. 數(shù)據(jù)法國(guó)：法國(guó)各類數(shù)據(jù)的可視化呈現(xiàn)；
9. DataEye：基于國(guó)內(nèi)游戲、汽車行業(yè)數(shù)據(jù)，進(jìn)行多角度的行業(yè)調(diào)查報(bào)告撰寫發(fā)布
10. CBO中國(guó)票房：基于國(guó)內(nèi)票房數(shù)據(jù)，統(tǒng)計(jì)票房排行、上座率等信息。
11. 易車指數(shù)：反映國(guó)內(nèi)汽車銷售市場(chǎng)，為購(gòu)車者或汽車從業(yè)者提供參考的數(shù)據(jù)指數(shù)
12. 高德地圖：支持實(shí)時(shí)查看國(guó)內(nèi)交通情況，此外高德周期性提供一系列數(shù)據(jù)報(bào)告
13. 房天下：提供中國(guó)指數(shù)研究院和CREIS中指數(shù)據(jù)，展示國(guó)內(nèi)房地產(chǎn)數(shù)據(jù)情況
14. 藝恩：CBO中國(guó)票房數(shù)據(jù)的提供方，提供一些行業(yè)數(shù)據(jù)報(bào)告，如動(dòng)漫IP價(jià)值研究報(bào)告

二、免費(fèi)的數(shù)據(jù)源網(wǎng)站

1、簡(jiǎn)單、公開的數(shù)據(jù)集

先分享一些科研機(jī)構(gòu)、企業(yè)、政府會(huì)開放的一些數(shù)據(jù)集和一些專業(yè)的數(shù)據(jù)下載網(wǎng)站。這些數(shù)據(jù)集一般都比較完善、質(zhì)量相對(duì)較高，拿到手?jǐn)?shù)據(jù)清洗的工作比較少，適合新手做一些簡(jiǎn)單基礎(chǔ)的分析

1）中國(guó)統(tǒng)計(jì)信息網(wǎng)：http://www.tjcn.org/

全國(guó)各級(jí)政府各年度的國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展統(tǒng)計(jì)信息，部分?jǐn)?shù)據(jù)免費(fèi)

2）國(guó)家統(tǒng)計(jì)局:http://www.stats.gov.cn/

各種民生相關(guān)的統(tǒng)計(jì)數(shù)據(jù)，而且所有數(shù)據(jù)都是免費(fèi)，而且這個(gè)網(wǎng)站的友情鏈接里還有很多其他地方的數(shù)據(jù)以及國(guó)外數(shù)據(jù)。

3）中國(guó)產(chǎn)業(yè)信息網(wǎng)：http://www.chyxx.com/data/

包含了各個(gè)行業(yè)相關(guān)的數(shù)據(jù)，所有的數(shù)據(jù)全部免費(fèi)，做行業(yè)分析經(jīng)常用到的

4）美國(guó)政府公開數(shù)據(jù)：https://www.data.gov/

美國(guó)政府公開數(shù)據(jù)的網(wǎng)站，包含了經(jīng)濟(jì)、消費(fèi)、教育、醫(yī)療、農(nóng)業(yè)等多個(gè)領(lǐng)域的數(shù)據(jù)

5）世界銀行：https://data.worldbank.org/

世界銀行的開放數(shù)據(jù)。平臺(tái)還提供了一些工具，比如開放數(shù)據(jù)目錄，世界發(fā)展指數(shù)，教育指數(shù)等。

6）百度數(shù)據(jù)開放平臺(tái)：https://open.baidu.com/open/#/open

7）國(guó)云數(shù)據(jù)市場(chǎng)：http://www.moojnn.com/data-market/

主要包含：生活服務(wù)、教育、能源、建筑、交通運(yùn)輸、政府、金融、農(nóng)業(yè)、醫(yī)療、衛(wèi)生等行業(yè)的數(shù)據(jù)，大部分免費(fèi)，有些需要付費(fèi)

2、數(shù)據(jù)可視化項(xiàng)目數(shù)據(jù)集

最常見的數(shù)據(jù)可視化項(xiàng)目就是制作某某地區(qū)人均收入?yún)^(qū)別的信息圖，找數(shù)據(jù)可視化項(xiàng)目相關(guān)的數(shù)據(jù)集的時(shí)候，我們希望數(shù)據(jù)集盡量“干凈”，減少數(shù)據(jù)清洗的工作，數(shù)據(jù)要足夠有趣，能夠支撐起豐富的圖表，所以這類的數(shù)據(jù)可以去上面我的說一些公開數(shù)據(jù)網(wǎng)站找，另外我也列一些除了政府網(wǎng)站之外的相關(guān)網(wǎng)站：

1）FiveThirtyEight：http://fivethirtyeight.com/

這是互動(dòng)式新聞與體育賽事的網(wǎng)站，網(wǎng)站中會(huì)發(fā)布許多數(shù)據(jù)相關(guān)的文章，這些文章中會(huì)把使用到的數(shù)據(jù)集發(fā)布在github上，除了獲取數(shù)據(jù)集，你還可以參考別人的項(xiàng)目過程

2）Socrata OpenData：https://opendata.socrata.com/

Socrata OpenData 網(wǎng)站包含多個(gè)清洗后的數(shù)據(jù)集，可以直接在瀏覽器中查看，也可以下載到本地進(jìn)行可視化，大部分?jǐn)?shù)據(jù)來源于美國(guó)政府。

3、數(shù)據(jù)建模、機(jī)器學(xué)習(xí)的數(shù)據(jù)集

1）UCI：https://archive.ics.uci.edu/ml/datasets.html

UCI是加州大學(xué)歐文分校開放的經(jīng)典數(shù)據(jù)集，是機(jī)器學(xué)習(xí)領(lǐng)域最有名的數(shù)據(jù)存儲(chǔ)庫(kù)。包含各種數(shù)據(jù)集，比如經(jīng)典的泰坦尼克號(hào)幸存預(yù)測(cè)到最新的數(shù)據(jù)（如空氣質(zhì)量和GPS軌跡）。

2）阿里天池：https://tianchi.aliyun.com/

作為國(guó)內(nèi)互聯(lián)網(wǎng)龍頭阿里巴巴旗下的大數(shù)據(jù)競(jìng)賽網(wǎng)站，提供了很多比賽數(shù)據(jù)集可以練手，說不定還能順手拿個(gè)獎(jiǎng)，賺點(diǎn)獎(jiǎng)金

3）Kaggle：https://www.kaggle.com/datasets

Kaggle 是一個(gè)舉辦了多項(xiàng)機(jī)器學(xué)習(xí)競(jìng)賽的數(shù)據(jù)科學(xué)社區(qū)。用戶可以自己上傳數(shù)據(jù)集，也可以通過某項(xiàng)競(jìng)賽下載數(shù)據(jù)集，里面有不少別的平臺(tái)找不到的有趣數(shù)據(jù)集。

4）科賽網(wǎng)：https://www.kesci.com/home/project

這個(gè)網(wǎng)站提供了不少數(shù)據(jù)集可以免費(fèi)下載，而且還有一些數(shù)據(jù)項(xiàng)目的比賽，不過整體來說項(xiàng)目的難度比較低，獎(jiǎng)金也不是很多，學(xué)生參加的比較多，反正單純用來獲取數(shù)據(jù)集還是很不錯(cuò)的

5）Quandl

這是一個(gè)包含經(jīng)濟(jì)與金融數(shù)據(jù)的倉(cāng)庫(kù)。其中的部分信息是免費(fèi)的，但是大部分?jǐn)?shù)據(jù)集需要購(gòu)買，數(shù)據(jù)可以用來構(gòu)建經(jīng)濟(jì)指標(biāo)預(yù)測(cè)或者股價(jià)分析模型等等。




4、大型數(shù)據(jù)集

有時(shí)候你可能只是想找一些大型的數(shù)據(jù)集來進(jìn)行分析，分析的結(jié)果可能并不重要，重要的只是對(duì)于數(shù)據(jù)的讀取與分析過程，練習(xí)數(shù)據(jù)處理能力，這里我也列舉幾個(gè)用的比較多的網(wǎng)站：

1）AWS 公開數(shù)據(jù)集：https://www.amazon.com/aws

亞馬遜在其 Amazon Web Services 中提供了一些大型數(shù)據(jù)集可以免費(fèi)下載，不過你得注冊(cè)一個(gè)aws賬戶，新用戶有免費(fèi)訪問的權(quán)限







2）Google 公開數(shù)據(jù)集：https://cloud.google.com/bigquery/public-data/

Google提供了一些數(shù)據(jù)集作為其Big Query工具的一部分。包括 GitHub 公共資料庫(kù)的數(shù)據(jù)，Hacker News 的所有故事和評(píng)論。

3）Youtube標(biāo)簽視頻數(shù)據(jù)集:https://research.google.com/youtube8m/

Youtube標(biāo)簽視頻數(shù)據(jù)集包括來自4800個(gè)可視化實(shí)體的800萬個(gè)YouTube視頻ID和相關(guān)標(biāo)簽。它具有數(shù)十億幀的預(yù)計(jì)算的、最先進(jìn)的視覺功能。

有了數(shù)據(jù)之后怎么分析呢？有什么好方法呢？從哪些維度來分析呢？用什么數(shù)據(jù)分析工具呢？帆軟君建議你試試FineBI，有mac版本也有win版本。

相比于Excel，BI軟件FineBI能直接對(duì)接數(shù)據(jù)庫(kù)類的企業(yè)數(shù)據(jù)源，快速拉取數(shù)據(jù)，并且可以以任何的字段作為維度進(jìn)行篩選整合數(shù)據(jù)。

在數(shù)據(jù)處理的靈活性是僅次于Excel，但其又可以處理比Excel無法處理的大數(shù)據(jù)量。如果說企業(yè)的數(shù)據(jù)業(yè)態(tài)很成熟且數(shù)據(jù)量很大，數(shù)據(jù)分析需求強(qiáng)烈，是很建議上BI的。

說到數(shù)據(jù)展現(xiàn)，就會(huì)想到各種圖表和可視化報(bào)告。

圖形的選擇是在可視化過程中很重要的環(huán)節(jié)，然而很多實(shí)際實(shí)施過程中都將其忽略，這就造成圖形選擇較為隨意，看到的維度不夠等問題。

現(xiàn)在BI軟件的可視化已經(jīng)很“傻瓜化”，相比于Excel。比如FineBI的圖表基本能做到自動(dòng)推薦，類似數(shù)據(jù)透視圖的操作，拖拽字段到橫縱維度，多樣化展現(xiàn)。另有下鉆、聯(lián)動(dòng)的功能，能多一層級(jí)的分析。

所以說，BI軟件讓業(yè)務(wù)用其實(shí)很好上手，有了數(shù)據(jù)明確分析什么，能很快的將數(shù)據(jù)展示出來。

以銷售數(shù)據(jù)為例，帆軟君教你們一個(gè)實(shí)際的例子。

我是 @帆軟 ，專注BI商業(yè)智能領(lǐng)域十五年！