这是一个创建于 3255 天前的主题，其中的信息可能已经有所发展或是发生改变。
目前项目中使用的是星环的 TDH 平台，采取 sql bulkload 的方式将 Inceptor 的数据加载到 HBASE 中，300 万行的数据量插入大概耗时 3 分钟，2000 万行的数据(大概在 1G)的 10 分钟左右,全量数据大概是 4 亿行数据左右。。所以差不多 20G 左右...尝试插了 3 亿的数据，时间在 1 个小时以上。。。查看了相关文档，说在预分 region 可以提高插入的效率。。。具体没怎么找到如何去预分 region。。另这里的建表 采取的是星环的 HYPERDRIVE 表建法。。。对于行建 rowkey 的设计采取了几个需要查询的字段加上主键的方式拼接。。希望有大佬可以给一哈这个效率解决方案！！感谢~~
目前尚无回复
Select Language