javalinuxmysql

㈠ 大數據初學者應該怎麼學

記住學到這里可以作為你學大數據的一個節點。

Zookeeper：這是個萬金油，安裝Hadoop的HA的時候就會用到它，以後的Hbase也會用到它。它一般用來存放一些相互協作的信息，這些信息比較小一般不會超過1M，都是使用它的軟體對它有依賴，對於我們個人來講只需要把它安裝正確，讓它正常的run起來就可以了。

Mysql：我們學習完大數據的處理了，接下來學習學習小數據的處理工具mysql資料庫，因為一會裝hive的時候要用到，mysql需要掌握到什麼層度那?你能在linux上把它安裝好，運行起來，會配置簡單的許可權，修改root的密碼，創建資料庫。這里主要的是學習SQL的語法，因為hive的語法和這個非常相似。

Sqoop：這個是用於把Mysql里的數據導入到Hadoop里的。當然你也可以不用這個，直接把Mysql數據表導出成文件再放到HDFS上也是一樣的，當然生產環境中使用要注意Mysql的壓力。

Hive：這個東西對於會SQL語法的來說就是神器，它能讓你處理大數據變的很簡單，不會再費勁的編寫MapRece程序。有的人說Pig那?它和Pig差不多掌握一個就可以了。

Oozie：既然學會Hive了，我相信你一定需要這個東西，它可以幫你管理你的Hive或者MapRece、Spark腳本，還能檢查你的程序是否執行正確，出錯了給你發報警並能幫你重試程序，最重要的是還能幫你配置任務的依賴關系。我相信你一定會喜歡上它的，不然你看著那一大堆腳本，和密密麻麻的crond是不是有種想屎的感覺。

Hbase：這是Hadoop生態體系中的NOSQL資料庫，他的數據是按照key和value的形式存儲的並且key是唯一的，所以它能用來做數據的排重，它與MYSQL相比能存儲的數據量大很多。所以他常被用於大數據處理完成之後的存儲目的地。

Kafka：這是個比較好用的隊列工具，隊列是干嗎的?排隊買票你知道不?數據多了同樣也需要排隊處理，這樣與你協作的其它同學不會叫起來，你干嗎給我這么多的數據(比如好幾百G的文件)我怎麼處理得過來，你別怪他因為他不是搞大數據的，你可以跟他講我把數據放在隊列里你使用的時候一個個拿，這樣他就不在抱怨了馬上灰流流的去優化他的程序去了，因為處理不過來就是他的事情。而不是你給的問題。當然我們也可以利用這個工具來做線上實時數據的入庫或入HDFS，這時你可以與一個叫Flume的工具配合使用，它是專門用來提供對數據進行簡單處理，並寫到各種數據接受方(比如Kafka)的。

Spark：它是用來彌補基於MapRece處理數據速度上的缺點，它的特點是把數據裝載到內存中計算而不是去讀慢的要死進化還特別慢的硬碟。特別適合做迭代運算，所以演算法流們特別稀飯它。它是用scala編寫的。java語言或者Scala都可以操作它，因為它們都是用JVM的。

㈡ Linux系統下MYSQL資料庫中文數據亂碼問題

根據你的問題，資料庫不在自己手邊。
那首先要調查清楚，數據表的編碼，看清，不是資料庫，是表，表的字元集編碼。
然後往前順。
然後再java程序中轉碼，保證寫到sql中的數據是以該數據表所用的字元集編碼的就好了。

亂碼出現在不同部分的通信之間
一個系統中，通常是在顯式輸入中文的地方發生轉碼錯誤。
比如，servlet處理從瀏覽器傳來的數據的時候，
從資源文件讀取數據的時候。
在程序中顯式地硬編碼字元串中文字面值的時候。
從別人的資料庫讀取數據的時候。

這些地方經常會跟之後的系統編碼不一致，所以在這些地方使用字元串數據的時候，就要轉碼。
資源文件，可以用文本工具保存成需要的編碼。
對於request中的數據，可以在正式處理之前加
過濾器。
對於別的資料庫，可以設一個專門的過濾類來轉碼。

㈢ linux 一台伺服器，訪問另外一台伺服器上的 mysql 資料庫怎麼設置。

首先在資料庫伺服器上設置mysql可以遠程訪問，其次打開資料庫伺服器所在的linux系統上的防火牆策略添加3306埠，最後配置網路環境讓2台機器可以進行通信。

其它java工程配置資料庫的ip和用戶名密碼即可。

㈣ linux mysql，插入數據'0000-00-00 00:00'到datetime類型的欄位時報錯，什麼原因呢

1.數據表中有記錄的time欄位（屬性為timestamp）其值為：「0000-00-00 00:00:00」
程序使用select 語句從中取數據時出現以下異常：
java.sql.SQLException:Value '0000-00-00' can not be represented as java.sql.Date
後查資料發現 「0000-00-00 00:00:00」在mysql中是作為一個特殊值存在的
但 java.sql.Date 將其視為 不合法的值 格式不正確

㈤ linux查看mysql版本的命令（linux如何查看mysql版本）

在部署測試環境的時候，偶爾會碰到一些莫名其妙的問題，有時候是跟軟體的版本號相關，例如：有些功能上個版本支持該功能，新的版本就不支持了等等；本文主要對一些常見的軟體服務版本進行查看版本信息，主要包括：Linux、mysql、jdk、tomcat、ant、git、nginx
1、查看Linux版本，在Linux命令行中，輸入如下命令
【查看命令】：uname -a
2、查看mysql版本，在Linux中已經安裝好了mysql，在命令行中，輸入如下命令
【查看命令】：mysql -V
3、查看jdk版本，在Linux中已經安裝好了jdk，在命令行中，輸入如下命令
【查看命令】：java -version
4、查看tomcat版本，在Linux中已經安裝好了tomcat，在命令行中，輸入如下命令
【查看命令】進入tomcat安裝目錄下的bin目錄 ，執行version.sh，例如：/server/tomcat8/bin/version.sh
5、查看nginx版本，在Linux中已經安裝好了nginx，在命令行中，輸入如下命令
【查看命令】：nginx -v
6、查看git版本，在Linux中已經安裝好了git，在命令行中，輸入如下命令
【查看命令】：git --version
7、查看ant版本，在Linux中已經安裝好了ant，在命令行中，輸入如下命令
【查看命令】：ant -version