經(jīng)常有初學(xué)者在博客和QQ問(wèn)我，自己想往大數(shù)據(jù)方向發(fā)展，該學(xué)哪些技術(shù)，學(xué)習(xí)路線是什么樣的，覺(jué)得大數(shù)據(jù)很火，就業(yè)很好，薪資很高。如果自己很迷茫，為了這些原因想往大數(shù)據(jù)方向發(fā)展，也可以，那么我就想問(wèn)一下，你的專業(yè)是什么，對(duì)于計(jì)算機(jī)/軟件，你的興趣是什么？是計(jì)算機(jī)專業(yè)，對(duì)操作系統(tǒng)、硬件、網(wǎng)絡(luò)、服務(wù)器感興趣？是軟件專業(yè)，對(duì)軟件開發(fā)、編程、寫代碼感興趣？還是數(shù)學(xué)、統(tǒng)計(jì)學(xué)專業(yè)，對(duì)數(shù)據(jù)和數(shù)字特別感興趣。。

2017-05-11 14:54:50.000

作者是業(yè)界資深的數(shù)據(jù)分析師，人工智能投資人，他在文章里給我們介紹了什么是大數(shù)據(jù)的來(lái)源，目前在數(shù)據(jù)領(lǐng)域的初創(chuàng)公司與現(xiàn)有巨頭的競(jìng)爭(zhēng)現(xiàn)狀，各自在數(shù)據(jù)領(lǐng)域所采取的不同做法，數(shù)據(jù)分析工作的外包，為什么有關(guān)大數(shù)據(jù)的項(xiàng)目總是會(huì)失敗？

2017-05-10 14:29:36.000

在現(xiàn)如今，隨著IT互聯(lián)網(wǎng)信息技術(shù)的飛速發(fā)展和進(jìn)步。目前大數(shù)據(jù)行業(yè)也越來(lái)越火爆，從而導(dǎo)致國(guó)內(nèi)大數(shù)據(jù)人才也極度缺乏，下面介紹一下關(guān)于Hadoop環(huán)境中管理大數(shù)據(jù)存儲(chǔ)技巧。

2017-05-09 16:39:34.000

有人認(rèn)為 Hadoop 正在失敗，但硅谷數(shù)據(jù)管理公司 Hortonworks 的總經(jīng)理 Vamsi K. Chemitiganti 并不這么看，本文就是對(duì)其觀點(diǎn)的編譯介紹。

2017-05-08 09:48:13.000

目前，編程人員面對(duì)的最大挑戰(zhàn)就是復(fù)雜性，硬件越來(lái)越復(fù)雜，OS越來(lái)越復(fù)雜，編程語(yǔ)言和API越來(lái)越復(fù)雜，我們構(gòu)建的應(yīng)用也越來(lái)越復(fù)雜。根據(jù)外媒的一項(xiàng)調(diào)查報(bào)告，以下列出了Java程序員在過(guò)去12個(gè)月內(nèi)一直使用的一些工具或框架，或許會(huì)對(duì)你有意義。

2017-05-04 10:04:31.000

其實(shí)參看Hadoop官方文檔已經(jīng)能夠很容易配置分布式框架運(yùn)行環(huán)境了，不過(guò)這里既然寫了就再多寫一點(diǎn)，同時(shí)有一些細(xì)節(jié)需要注意的也說(shuō)明一下，其實(shí)也就是這些細(xì)節(jié)會(huì)讓人摸索半天。Hadoop可以單機(jī)跑，也可以配置集群跑，單機(jī)跑就不需要多說(shuō)了，只需要按照Demo的運(yùn)行說(shuō)明直接執(zhí)行命令即可。這里主要重點(diǎn)說(shuō)一下集群配置運(yùn)行的過(guò)程。

2017-05-03 09:40:35.000

Hadoop是Apache開源組織的一個(gè)分布式計(jì)算開源框架，在很多大型網(wǎng)站上都已經(jīng)得到了應(yīng)用，如亞馬遜、Facebook和Yahoo等等。對(duì)于我來(lái)說(shuō)，最近的一個(gè)使用點(diǎn)就是服務(wù)集成平臺(tái)的日志分析。服務(wù)集成平臺(tái)的日志量將會(huì)很大，而這也正好符合了分布式計(jì)算的適用場(chǎng)景（日志分析和索引建立就是兩大應(yīng)用場(chǎng)景）。

2017-04-28 10:42:06.000

本篇主要介紹在大數(shù)據(jù)應(yīng)用中比較常用的一款軟件Mysql，我相信這款軟件不緊緊在大數(shù)據(jù)分析的時(shí)候會(huì)用到，現(xiàn)在作為開源系統(tǒng)中的比較優(yōu)秀的一款關(guān)系型開源數(shù)據(jù)庫(kù)已經(jīng)被很多互聯(lián)網(wǎng)公司所使用，而且現(xiàn)在正慢慢的壯大中。

2017-04-27 10:54:00.000

經(jīng)過(guò)前三篇文章的介紹，已經(jīng)通過(guò)VMware安裝了Hadoop的集群環(huán)境，當(dāng)然，我相信安裝的過(guò)程肯定遇到或多或少的問(wèn)題，這些都需要自己解決，解決的過(guò)程就是學(xué)習(xí)的過(guò)程，本篇的來(lái)介紹幾個(gè)Hadoop環(huán)境中需要用到的軟件，確切的說(shuō)是兩款：VSFTP和SecureCRT。

2017-04-26 09:51:46.000

上一篇我們講解了Hadoop單節(jié)點(diǎn)的安裝，并且已經(jīng)通過(guò)VMware安裝了一臺(tái)CentOS 6.8的Linux系統(tǒng)，咱們本篇的目標(biāo)就是要配置一個(gè)真正的完全分布式的Hadoop集群，閑言少敘，進(jìn)入本篇的正題。

2017-04-25 09:37:03.000