如何取出大数据量的 redis hash 结构的数据并遍历导出？

一定是设计出了问题

你需要的是 HSCAN ： http://redisdoc.com/hash/hscan.html

@yuankui 那像这种一开始没有记录到数据库，直接存到 redis 的数据，如何导出呢

先 keys * 取所有 key ， 然后遍历

@Jaylee 先 hkeys key ，然后根据这个 key 去遍历取 hash 的数据？？ 1.这个 keys 可能非常大有没有影响 2.这样会大大增加操作 redis 的次数，是不是问题

@tanteng 1, 没有影响 2.不是问题

@tanteng Redis 官方原来有个加密的功能，但是官方说你们不应该太相信这个功能，因为 Redis 的存取速度太快了，破解起来飞起。

http://redis.io/commands/AUTH

Note: because of the high performance nature of Redis, it is possible to try a lot of passwords in parallel in very short time, so make sure to generate a strong and very long password so that this attack is infeasible.

高速存取是 Redis 的优势，操作次数根本不是问题。

可以使用 redis 内的 lua 脚本进行处理
EVAL script numkeys key [key ...] arg [arg ...]

可能理解错了楼主的意思，同 2L ，你需要的应该是 HSCAN 进行遍历

@kingddc314 hscan 只支持 2.8 以上版本

keys * 确认没问题？不要误导。。

像这种情况一般还会有个 set 存所有用户的用户名吧。这样直接取这个 set,再根据 key 遍历就好了。

hscan 啊。。。。。

@fwrq41251 并没有

@tanteng 是说设计成自带一个 Key 的集合啊。

从集合中取出所有用户 id ，和从 hash 中通过 hkeys 取，有什么不同吗

@rubytek 从集合中取出所有用户 id ，和从 hash 中通过 hkeys 取，有什么不同吗

@tanteng 一个是全部读到你 Client 端的内存里面，在 Client 端以一个数据结构或者对象的形式存在。一个只是一个迭代器。
简单而言，内存消耗不一样。

KEYS 、 HGETALL 等命令应禁止在生产环境使用。看官方文档，都有非常显眼的警告。

@neoblackcap 这个明白，但是要 2.8 才支持 hscan

@soli 看来不能用这种方式

@Jaylee 你这种做法就是要坑死楼主的， keys * 在生产环境里我都是禁用的，量大的时候秒蹦你缓存你信不信，执行一次得卡上 N 秒或者 N 十秒

@solaro 还没着手做这个，用 hscan 是否可行？

如果是我，我会这么做：
1.一个 hash ， hash-key :uid, hash-value:zsetid_uid
2.一个 zset, id:uid ,value : user info
各种好判断， hash 效率高，单量小， zset 可以用来分页，分段取出
甚至你存储的时候可以做 shard

如果 hash 丢了，重建结构简单，
如果 zset 丢了，重建，也不难。
当然，你那个 hash 其实从业务上来说是最简单的

@tanteng 建议：
方案 1 、凌晨某个点，一次 hgetall 把 key 写入到队列当中，这样你的队列与 hash 就能保持一致了，以后取数据就相当的容易。因为 list 里的值就为 hash 的 key 。但可以告诉你的是：一次性读入大量的数据，整个网站都会很慢。

方案 2 、如果你的 hash 的 key 是有规律的，那就写个程序往 list 里赛吧，定时定量跑。跑完为止。