Quantcast
Channel: iT邦幫忙
Viewing all articles
Browse latest Browse all 15645

Hadoop實作簡易的SQL查詢

$
0
0
這幾天把單機版的Hadoop環境給架起來了,想試看看實作一個題目,題目是這樣的:
有一個資料庫,裡面有兩個欄位,分別是index 和 name
然後先假設輸入10000筆資料進去,然後我想要找出name內容有abc的index
以SQL語法是寫 select name from tablexx where name="abc"
但我想利用Hadoop的力量幫我分割好幾台運算,那我該怎麼實作呢?我還需要懂什麼呢?
pig Mahout hive hivesql ??
讓hadoop幫我分成10台運算,每台只要運算1000筆的資料,這樣是不是會比較快。
因為網路上找到這種簡易實作的資訊不多,所以才想說上來這邊問一下大家。

Viewing all articles
Browse latest Browse all 15645

Trending Articles



<script src="https://jsc.adskeeper.com/r/s/rssing.com.1596347.js" async> </script>