Redis-Pipeline
正常的Redis 命令的生命周期是 Client 给 Server 发一条命令,Server 执行后把结果反馈给 Client,但这个过程中, Client 和 Server 之间的通信会花费大量时间,pipeline 的思路就是每一次 Client 和 Server 通信不再是一次发一条命令(/结果)而是把一批命令打包传输给 Server,然后Server把这些命令按顺序执行的结果反馈给 Client
pipeline 并不是原子命令,在执行时,他是以子命令的形式穿插在Redis正在执行的其他命令之间的
通过python测试,效果非常明显
import redis | |
# run_time 是我自己写的一个装饰器,用来返回被装饰对象的执行时间 | |
from my_python_package.Modifys import run_time | |
def redis_connection(address: str, port: int, password: str): | |
return redis.StrictRedis(address, port, password=password) | |
def execute_multiple_commands_without_pipes(client): | |
for i in range(1000): | |
client.set(f"string{i}", i) | |
def execute_multiple_commands_with_pipes(client): | |
pipeline = client.pipeline() | |
for i in range(1000): | |
pipeline.set(f"string with pipes{i}", i) | |
pipeline.execute() | |
if __name__ == '__main__': | |
client = redis_connection("0.0.0.0", 8100, "password") | |
# execute_multiple_commands_without_pipes(client) # execute_multiple_commands_without_pipes runs at:35.10040497779846 s | |
execute_multiple_commands_with_pipes(client) # execute_multiple_commands_with_pipes runs at:0.17360401153564453 s |
同样是执行1000次写入,使用pipeline效率提高了两百多倍。多出来的这些时间就是节省的网络传输的时间,