大數(shù)據(jù)時(shí)代，用數(shù)據(jù)做出理性分析顯然更為有力。做數(shù)據(jù)分析前，能夠找到合適的數(shù)據(jù)源是一件非常重要的事，獲取數(shù)據(jù)的方式有很多種，不必局限。本文中給大家推薦一些能夠用得上的數(shù)據(jù)獲取方式~
一 公開數(shù)據(jù)集
1 常用數(shù)據(jù)公開網(wǎng)站
UCI ：經(jīng)典的機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘數(shù)據(jù)集，包含分類、聚類、回歸等問題下的多個(gè)數(shù)據(jù)集。很經(jīng)典也比較古老，但依然活躍在科研學(xué)者的視線中。
國(guó)家數(shù)據(jù) ：數(shù)據(jù)來源中華人民共和國(guó)國(guó)家統(tǒng)計(jì)局，包含了我國(guó)經(jīng)濟(jì)民生等多個(gè)方面的數(shù)據(jù)，并且在月度、季度、年度都有覆蓋，全面又權(quán)威。
CEIC ：最完整的一套超過128個(gè)國(guó)家的經(jīng)濟(jì)數(shù)據(jù)，能夠精確查找GDP、CPI、進(jìn)口、出口、外資直接投資、零售、銷售以及國(guó)際利率等深度數(shù)據(jù)。其中的“中國(guó)經(jīng)濟(jì)數(shù)據(jù)庫”收編了300,000多條時(shí)間序列數(shù)據(jù)，數(shù)據(jù)內(nèi)容涵蓋宏觀經(jīng)濟(jì)數(shù)據(jù)、行業(yè)經(jīng)濟(jì)數(shù)據(jù)和地區(qū)經(jīng)濟(jì)數(shù)據(jù)。
萬得 ：簡(jiǎn)要介紹：被譽(yù)為中國(guó)的Bloomberg，在金融業(yè)有著全面的數(shù)據(jù)覆蓋，金融數(shù)據(jù)的類目更新非?？?，據(jù)說很受國(guó)內(nèi)的商業(yè)分析者和投資人的青睞。
搜數(shù)網(wǎng) ：已加載到搜數(shù)網(wǎng)站的統(tǒng)計(jì)資料達(dá)到7874本，涵蓋1,761,009張統(tǒng)計(jì)表格和364,580,479個(gè)統(tǒng)計(jì)數(shù)據(jù)，匯集了中國(guó)資訊行自92年以來收集的所有統(tǒng)計(jì)和調(diào)查數(shù)據(jù)，并提供多樣化的搜索功能。
中國(guó)統(tǒng)計(jì)信息網(wǎng) ： 國(guó)家統(tǒng)計(jì)局的官方網(wǎng)站，匯集了海量的全國(guó)各級(jí)政府各年度的國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展統(tǒng)計(jì)信息，建立了以統(tǒng)計(jì)公報(bào)為主，統(tǒng)計(jì)年鑒、階段發(fā)展數(shù)據(jù)、統(tǒng)計(jì)分析、經(jīng)濟(jì)新聞、主要統(tǒng)計(jì)指標(biāo)排行等。
亞馬遜 ：來自亞馬遜的跨科學(xué)云數(shù)據(jù)平臺(tái)，包含化學(xué)、生物、經(jīng)濟(jì)等多個(gè)領(lǐng)域的數(shù)據(jù)集。
figshare ：研究成果共享平臺(tái)，在這里可以找到來自世界的大牛們的研究成果分享，獲取其中的研究數(shù)據(jù)。
github ：一個(gè)非常全面的數(shù)據(jù)獲取渠道，包含各個(gè)細(xì)分領(lǐng)域的數(shù)據(jù)庫資源，自然科學(xué)和社會(huì)科學(xué)的覆蓋都很全面，適合做研究和數(shù)據(jù)分析的人員。
2 政府開放數(shù)據(jù)
北京市政務(wù)數(shù)據(jù)資源網(wǎng) ：包含競(jìng)技、交通、醫(yī)療、天氣等數(shù)據(jù)。
深圳市政府?dāng)?shù)據(jù)開放平臺(tái) ：交通、文娛、就業(yè)、基礎(chǔ)設(shè)施等數(shù)據(jù)。
上海市政務(wù)數(shù)據(jù)服務(wù)網(wǎng) ：覆蓋經(jīng)濟(jì)建設(shè)、文化科技、信用服務(wù)、交通出行等12個(gè)重點(diǎn)領(lǐng)域數(shù)據(jù)。
貴州省政府?dāng)?shù)據(jù)開放平臺(tái) ：貴州省在政務(wù)數(shù)據(jù)開放方面做的確實(shí)不錯(cuò)。
Data.gov ：美國(guó)政府開放數(shù)據(jù)，包含氣候、教育、能源金融等各領(lǐng)域數(shù)據(jù)。
3 數(shù)據(jù)競(jìng)賽網(wǎng)站
競(jìng)賽的數(shù)據(jù)集通常干凈且可研究性非常高。
DataCastle ：專業(yè)的數(shù)據(jù)科學(xué)競(jìng)賽平臺(tái)。
Kaggle ：全球最大的數(shù)據(jù)競(jìng)賽平臺(tái)。
天池 ：阿里旗下數(shù)據(jù)科學(xué)競(jìng)賽平臺(tái)。
Datafountain ：CCF制定大數(shù)據(jù)競(jìng)賽平臺(tái)。
二 利用爬蟲可獲得有價(jià)值數(shù)據(jù)
這里給出了一些網(wǎng)站平臺(tái)，我們可以使用爬蟲爬取網(wǎng)站上的數(shù)據(jù)，某些網(wǎng)站上也給出獲取數(shù)據(jù)的API接口，但需要付費(fèi)。
1 財(cái)經(jīng)數(shù)據(jù)
新浪財(cái)經(jīng)：免費(fèi)提供接口，這篇博客教授了如何在新浪財(cái)經(jīng)上獲取獲取歷史和實(shí)時(shí)股票數(shù)據(jù)。東方財(cái)富網(wǎng)：可以查看財(cái)務(wù)指標(biāo)或者根據(jù)財(cái)務(wù)指標(biāo)選股。中財(cái)網(wǎng)：提供各類財(cái)經(jīng)數(shù)據(jù)。黃金頭條：各種財(cái)經(jīng)資訊。StockQ：國(guó)際股市指數(shù)行情。Quandl：金融數(shù)據(jù)界的維基百科。Investing：投資數(shù)據(jù)。整合的96個(gè)股票API合集。Market Data Feed and API：提供大量數(shù)據(jù)，付費(fèi)，有試用期。2 網(wǎng)貸數(shù)據(jù)
網(wǎng)貸之家：包含各大網(wǎng)貸平臺(tái)不同時(shí)間段的放貸數(shù)據(jù)。零壹數(shù)據(jù)：各大平臺(tái)的放貸數(shù)據(jù)。網(wǎng)貸天眼：網(wǎng)貸平臺(tái)、行業(yè)數(shù)據(jù)。76676互聯(lián)網(wǎng)金融門戶：網(wǎng)貸、P2P、理財(cái)?shù)然ソ饠?shù)據(jù)。3 公司年報(bào)
巨潮資訊：各種股市咨詢，公司股票、財(cái)務(wù)信息。SEC.gov：美國(guó)證券交易數(shù)據(jù)HKEx news披露易：年度業(yè)績(jī)報(bào)告和年報(bào)。4 創(chuàng)投數(shù)據(jù)
36氪：最新的投資資訊。投資潮：投資資訊、上市公司信息。IT桔子：各種創(chuàng)投數(shù)據(jù)。5 社交平臺(tái)
新浪微博：評(píng)論、輿情數(shù)據(jù)，社交關(guān)系數(shù)據(jù)。Twitter：輿情數(shù)據(jù)，社交關(guān)系數(shù)據(jù)。知乎：優(yōu)質(zhì)問答、用戶數(shù)據(jù)。微信公眾號(hào)：公眾號(hào)運(yùn)營(yíng)數(shù)據(jù)。百度貼吧：輿情數(shù)據(jù)Tumblr：各種福利圖片、視頻。6 就業(yè)招聘
拉勾：互聯(lián)網(wǎng)行業(yè)人才需求數(shù)據(jù)。中華英才網(wǎng)：招聘信息數(shù)據(jù)。智聯(lián)招聘：招聘信息數(shù)據(jù)。獵聘網(wǎng)：高端職位招聘數(shù)據(jù)。7 餐飲食品
美團(tuán)外賣：區(qū)域商家、銷量、評(píng)論數(shù)據(jù)。百度外賣：區(qū)域商家、銷量、評(píng)論數(shù)據(jù)。餓了么：區(qū)域商家、銷量、評(píng)論數(shù)據(jù)。大眾點(diǎn)評(píng)：點(diǎn)評(píng)、輿情數(shù)據(jù)。8 交通旅游
12306：鐵路運(yùn)行數(shù)據(jù)。攜程：景點(diǎn)、路線、機(jī)票、酒店等數(shù)據(jù)。去哪兒：景點(diǎn)、路線、機(jī)票、酒店等數(shù)據(jù)。途牛：景點(diǎn)、路線、機(jī)票、酒店等數(shù)據(jù)。貓途鷹：世界各地旅游景點(diǎn)數(shù)據(jù)，來自全球旅行者的真實(shí)點(diǎn)評(píng)。類似的還有同程、驢媽媽、途家等
9 電商平臺(tái)
亞馬遜：商品、銷量、折扣、點(diǎn)評(píng)等數(shù)據(jù)淘寶：商品、銷量、折扣、點(diǎn)評(píng)等數(shù)據(jù)天貓：商品、銷量、折扣、點(diǎn)評(píng)等數(shù)據(jù)京東：3C產(chǎn)品為主的商品信息、銷量、折扣、點(diǎn)評(píng)等數(shù)據(jù)當(dāng)當(dāng)：圖書信息、銷量、點(diǎn)評(píng)數(shù)據(jù)。類似的唯品會(huì)、聚美優(yōu)品、1號(hào)店等。
10 影音數(shù)據(jù)
豆瓣電影：國(guó)內(nèi)最受歡迎的電影信息、評(píng)分、評(píng)論數(shù)據(jù)。時(shí)光網(wǎng)：最全的影視資料庫，評(píng)分、影評(píng)數(shù)據(jù)。貓眼電影專業(yè)版：實(shí)時(shí)票房數(shù)據(jù)，電影票房排行。網(wǎng)易云音樂：音樂歌單、歌手信息、音樂評(píng)論數(shù)據(jù)。11 房屋信息
58同城房產(chǎn)：二手房數(shù)據(jù)。安居客：新房和二手房數(shù)據(jù)。Q房網(wǎng)：新房信息、銷售數(shù)據(jù)。房天下：新房、二手房、租房數(shù)據(jù)。小豬短租：短租房源數(shù)據(jù)。12 購車租車
網(wǎng)易汽車 ：汽車資訊、汽車數(shù)據(jù)。人人車 ：二手車信息、交易數(shù)據(jù)。中國(guó)汽車工業(yè)協(xié)會(huì) ：汽車制造商產(chǎn)量、銷量數(shù)據(jù)。13 新媒體數(shù)據(jù)
新榜：新媒體平臺(tái)運(yùn)營(yíng)數(shù)據(jù)。
清博大數(shù)據(jù)：微信公眾號(hào)運(yùn)營(yíng)榜單及輿情數(shù)據(jù)。
微問數(shù)據(jù)：一個(gè)針對(duì)微信的數(shù)據(jù)網(wǎng)站。
知微傳播分析：微博傳播數(shù)據(jù)。
14 分類信息
58同城：豐富的同城分類信息。趕集網(wǎng)：豐富的同城分類信息。- 蜜度索驥：以跨模態(tài)檢索技術(shù)助力“企宣”向上生長(zhǎng)
- 密態(tài)計(jì)算技術(shù)助力農(nóng)村普惠金融 螞蟻密算、網(wǎng)商銀行項(xiàng)目入選大數(shù)據(jù)“星河”案例
- 專利糾紛升級(jí)！Netflix就虛擬機(jī)專利侵權(quán)起訴博通及VMware
- 兩大難題發(fā)布！華為啟動(dòng)2024奧林帕斯獎(jiǎng)全球征集
- 2025年工業(yè)軟件市場(chǎng)格局：7個(gè)關(guān)鍵統(tǒng)計(jì)數(shù)據(jù)與分析
- Commvault持續(xù)業(yè)務(wù)策略：應(yīng)對(duì)現(xiàn)代數(shù)據(jù)保護(hù)挑戰(zhàn)的新范式
- 2025年網(wǎng)絡(luò)安全主要趨勢(shì)
- 2025年值得關(guān)注的數(shù)據(jù)中心可持續(xù)發(fā)展趨勢(shì)
- 量子計(jì)算火熱，投資者又在大舉尋找“量子概念股”
- 從量子威脅到人工智能防御：2025年網(wǎng)絡(luò)安全將如何發(fā)展
- 后人工智能時(shí)代：2025年，在紛擾中重塑數(shù)據(jù)、洞察和行動(dòng)
免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。
