【E-23】ConnectionError: Error 32 while writing to socket. Broken pipe.
一、问题源头
dict1 = dict(zip(X_train_t,y_train_t))
r.hmset('name',dict1)
当数量到100 0000 时候会报错。后来试了下60 0000也会报错,50 0000不会出这种错误
二、原因
您可以考虑增加套接字超时等选项,以允许在服务器端传输和解析数据,以避免套接字超时或其他与套接字相关的问题。回答1。,没有神奇的标志,使一些优化来解决这个问题。
对于这个问题,我的建议是不要每次发送这么多条目,而是将操作批量处理成更小的块,每次在10 - 100万键之间,然后一个一个地发送批处理。RPUSH可能是您想要使用的。
https://github.com/andymccurdy/redis-py/issues/997
三、解决方案
使用少量多次送入。