查看测试结果
使用BulkLoad批量导入1TB数据并记录时间。
1 2 | hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.columns=HBASE_ROW_KEY,f1:H_NAME,f1:ADDRESS -Dimporttsv.separator="," -Dimporttsv.skip.bad.lines=true -Dmapreduce.split.minsize=1073741824 -Dimporttsv.bulk.output=/tmp/hbase/hfile ImportTable /tmp/hbase/datadirImport hbase org.apache.hadoop.hbase.mapreduce.LoadIncrementalHFiles /tmp/hbase/hfile ImportTable |
再次测试之前需要删除“/tmp/hbase”目录下的badline和hfile。