亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 開發 > 綜合 > 正文

利用Lua定制Redis命令的方法詳解

2024-07-21 23:05:03
字體:
來源:轉載
供稿:網友

前言

Redis作為一個非常成功的數據庫,提供了非常豐富的數據類型和命令,使用這些,我們可以輕易而高效地完成很多緩存操作,可是總有一些比較特殊的問題或需求需要解決,這時候可能就需要我們自己定制自己的 Redis 數據結構和命令。

Redis命令問題

線程安全問題

我們都知道 Redis 是單線程的,可是它怎么會有 線程安全 問題呢?

我們正常理解的線程安全問題是指單進程多線程模型內部多個線程操作進程內共享內存導致的數據資源充突。而 Redis 的線程安全問題的產生,并不是來自于 Redis 服務器內部。

Redis 作為數據服務器,就相當于多個客戶端的共享內存,多個客戶端就相當于同一進程下的多個線程,如果多個客戶端之間沒有良好的數據同步策略,就會產生類似線程安全的問題。

典型場景是:

  • Redis 內存儲了一個用戶的狀態: user5277=idle;
  • 客戶端連接 A 讀取了用戶狀態,獲取到用戶的空閑狀態 status = get("user5277");
  • 客戶端連接 B 也同樣讀取了用戶狀態;
  • 客戶端連接 A 給用戶安排了一個任務,并將 Redis 內用戶狀態置為忙碌 set("user5277", "busy");
  • 客戶端連接 B 同樣設置用戶為忙碌狀態。
  • 可是此時用戶卻被同時分配了兩個任務。

導致這個問題的原因就是雖然 Redis 是單線程的,能保證命令的序列化,但由于其執行效率很高,多個客戶端的命令之間不做好請求同步,同樣會造成命令的順序錯亂。

當然這個問題也很好解決,給用戶狀態加鎖就行了,使同一時間內只能有一個客戶端操作用戶狀態。不過加鎖我們就需要考慮鎖粒度、死鎖等問題了,無疑添加了程序的復雜性,不利于維護。

效率問題

Redis 作為一個極其高效的內存數據服務器,其命令執行速度極快,之前看過阿里云 Redis 的一個壓測結果,執行效率可以達到 10W寫QPS, 60W讀QPS,那么,它的效率問題又來自何處呢?

答案是網絡,做 Web 的都知道,效率優化要從網絡做起,服務端又是優化代碼,又是優化數據庫,不如網絡連接的一次優化,而網絡優化最有效的就是減少請求數。我們要知道執行一次內存訪問的耗時約是 100ns,而不同機房之間來回一次約需要 500000ns,其中的差距可想而知。

Redis在單機內效率超高,但工業化部署總不會把服務器和 Redis 放在同一臺機器上,如果觸碰到效率瓶頸的話,那就是網絡。

典型場景就是我們從 Redis 里讀出一條數據,再使用這條數據做鍵,讀取另外一條數據。這樣來來回回,便有兩次網絡往返。

導致這種問題的原因就是 Redis 的普通命令沒有服務端計算的能力,無法在服務器進行復合命令操作,雖然有 Redis 也提供了 pipeline 的特性,但它需要多個命令的請求和響應之間沒有依賴關系。想簡化多個相互依賴的命令就只能將數據拉回客戶端,由客戶端處理后再請求 Redis。

綜上,我們要更高效更方便的使用 Redis 就需要自己“定制”一些命令了。

內嵌Lua的執行

萬幸 Redis 內嵌了 Lua 執行環境,支持 Lua 腳本的執行,通過執行 Lua 腳本,我們可以把多個命令復合為一個 Lua 腳本,通過 Lua 腳本來實現上文中提到的 Redis 命令的次序性和 Redis 服務端計算。

Lua

Lua 是一個簡潔、輕量、可擴展的腳本語言,它的特性有:

  • 輕量:源碼包只有核心庫,編譯后體積很小。
  • 高效:由 ANSI C 寫的,啟動快、運行快。
  • 內嵌:可內嵌到各種編程語言或系統中運行,提升靜態語言的靈活性。如 OpenResty 就是將 Lua 嵌入到 nginx 中執行。

而且完全不需要擔心語法問題,Lua 的語法很簡單,分分鐘使用不成問題。

執行步驟

Redis 在 2.6 版本后,啟動時會創建 Lua 環境、載入 Lua 庫、定義 Redis 全局表格、存儲 redis/208153.html">redis/224550.html">redis.pcall 等 Redis 命令,以準備 Lua 腳本的執行。

一個典型的 Lua 腳本執行步驟如下:

  1. 檢查腳本是否執行過,沒執行過使用腳本的 sha1 校驗和生成一個 Lua 函數;
  2. 為函數綁定超時、錯誤處理勾子;
  3. 創建一個偽客戶端,通過這個偽客戶端執行 Lua 中的 Redis 命令;
  4. 處理偽客戶端的返回值,最終返回給客戶端;

交互時序如圖

redis,lua,lua腳本,模塊

雖然 Lua 腳本使用的是偽客戶端,但 Redis 處理它會跟普通客戶端一樣,也會將執行的 Redis 命令進行 rdb aof 主從復制等操作。

使用

Lua 腳本的使用可以通過 Redis 的 EVAL 和 EVALSHA 命令。

EVAL 適用于單次執行 Lua 腳本,執行腳本前會由腳本內容生成 sha1 校驗和,在函數表內查詢函數是否已定義,如未定義執行成功后 Redis 會在全局表里緩存這個腳本的校驗和為函數名,后續再次執行此命令就不會再創建新的函數了。

而要使用 EVALSHA 命令,就得先使用 SCRIPT LOAD 命令先將函數加載到 Redis,Redis 會返回此函數的 sha1 校驗和, 后續就可以直接使用這個校驗和來執行命令了。

以下是使用上述命令的例子:

127.0.0.1:6379> EVAL "return 'hello'" 0 0"hello"127.0.0.1:6379> SCRIPT LOAD "return redis.pcall('GET', ARGV[1])""20b602dcc1bb4ba8fca6b74ab364c05c58161a0a"127.0.0.1:6379> EVALSHA 20b602dcc1bb4ba8fca6b74ab364c05c58161a0a 0 test"zbs"

EVAL 命令的原型是 EVAL script numkeys key [key ...] arg [arg ...] ,在 Lua 函數內部可以使用 KEYS[N]ARGV[N] 引用鍵和參數,需要注意 KEYS 和 ARGV 的參數序號都是從 1 開始的。

還需要注意在 Lua 腳本中,Redis 返回為空時,結果是 false,而 不是 nil;

Lua 腳本實例

下面寫幾個 Lua 腳本的實例,用來介紹語法的,僅供參考。

Redis 里 hashSet A 的 字段 B 的值是 C,取出 Redis 里鍵為 C 的值。

// 使用: EVAL script 2 A Blocal tmpKey = redis.call('HGET', KEYS[1], KEYS[2]); return redis.call('GET', tmpKey); 

一次 lpop 出多個值,直到值為 n,或 list 為空(pipeline 也可輕易實現);

// 使用: EVAL script 2 list countlocal list = {};local item = false;local num = tonumber(KEYS[2]);while (num > 0)do  item = redis.call('LPOP', KEYS[1]);  if item == false then    break;  end;  table.insert(list, item);  num = num - 1;end;return list;

獲取 zset 內 score 最多的 n 個元素 對應 hashset 中的詳細信息;

local elements = redis.call('ZRANK', KEYS[1], 0, KEY[2]);local detail = {};for index,ele in elements do  local info = redis.call('HGETALL', ele);  table.insert(detail, info);end;return detail;

基本使用語法就是如此,更多應用就看各個具體場景了。

一些思考

實現之外,還要一些東西要思考:

使用場景

首先來總結一下 Redis 中 Lua 的使用場景:

  • 可以使用 Lua 腳本實現原子性操作,避免不同客戶端訪問 Redis 服務器造成的數據沖突。
  • 在前后多次請求的結果有依賴時,可以使用 Lua 腳本把多個請求整合為一個請求。

注意點

使用 Lua 腳本,我們還需要注意:

  • 要保證安全性,在 Lua 腳本中不要使用全局變量,以免污染 Lua 環境,雖然使用全局變量全報錯,Lua 腳本停止執行,但還是在定義變量時添加 local 關鍵字。
  • 要注意 Lua 腳本的時間復雜度,Redis 的單線程同樣會阻塞在 Lua 腳本的執行中。
  • 使用 Lua 腳本實現原子操作時,要注意如果 Lua 腳本報錯,之前的命令同樣無法回滾。
  • 一次發出多個 Redis 請求,但請求前后無依賴時,使用 pipeline,比 Lua 腳本方便。

小結

最近工作有了較大的變動,從業務到技術棧都跟原來完全不同了,所有代碼和業務都脫離了自己掌控的感覺真的很不爽,工作中全是“開局一個搜索引擎,語法全靠查”,每天還要熬到很晚熟悉新的東西,有點小累,果然換工作就是找罪受啊。不過走出舒適區后的充實感也在提醒自己正在不停進步,倒也挺有成就感的。

剛接觸新的東西沒什么沉淀,又不想寫一些《帶你三天精通 Java》這種水文,工作之余的時間都被拿去補充工作需要的技術棧了,也沒時間研究些自己覺得有意思的東西,寫文章需要素材啊,為了不自砸招牌,最近可能會少更。。

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對VeVb武林網的支持。


注:相關教程知識閱讀請移步到lua頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
欧美风情在线观看| 亚洲欧洲日产国产网站| 日韩中文字幕久久| 久久久999国产| 国模极品一区二区三区| 欧美天天综合色影久久精品| 国产精品成人v| 欧美成人精品一区二区| 日韩美女视频免费看| 88国产精品欧美一区二区三区| 亚洲视频免费一区| 国产69精品99久久久久久宅男| 亚洲欧洲日产国产网站| 国产v综合ⅴ日韩v欧美大片| 国产噜噜噜噜久久久久久久久| 久久久久久国产精品三级玉女聊斋| 色偷偷噜噜噜亚洲男人| 久久精品视频网站| www国产精品com| www.日韩av.com| 日本91av在线播放| 国产va免费精品高清在线观看| 91在线观看免费观看| 最近2019年好看中文字幕视频| 欧美日韩激情视频| 国产噜噜噜噜噜久久久久久久久| 亚洲精品第一页| 成人免费视频网| 国产精品久久9| 亚洲一区第一页| 亚洲欧美国产日韩天堂区| 欧美成人午夜免费视在线看片| 欧美一级在线播放| 日韩中文字幕网| 久操成人在线视频| 国产精品欧美日韩一区二区| 色老头一区二区三区| 国产一区欧美二区三区| 亚洲国产日韩精品在线| 欧美福利在线观看| 超碰91人人草人人干| 亚洲97在线观看| 亚洲欧美一区二区三区四区| 尤物yw午夜国产精品视频| 久国内精品在线| 久久久久久97| 久久精品国产成人精品| 91老司机在线| 日韩欧美一区视频| 国内精品久久久久久影视8| 日韩免费高清在线观看| 日韩成人网免费视频| 久久精品视频va| 日韩亚洲欧美中文在线| 欧美疯狂xxxx大交乱88av| 日韩中文理论片| 精品视频一区在线视频| 久久久久久国产精品美女| 国产日韩欧美电影在线观看| 日韩av高清不卡| 91国内产香蕉| 国产成人精品在线视频| 精品女同一区二区三区在线播放| 亚洲第一色中文字幕| 欧美风情在线观看| 国产精品xxxxx| 亚洲深夜福利网站| 国产成人久久久| 韩国19禁主播vip福利视频| 午夜精品福利电影| 日韩欧美第一页| 日韩一区二区三区xxxx| 亚洲激情成人网| 美女少妇精品视频| 俺也去精品视频在线观看| 69视频在线免费观看| 色噜噜国产精品视频一区二区| 另类色图亚洲色图| 欧美午夜片在线免费观看| 欧美一级淫片videoshd| 精品视频在线观看日韩| 久久精品国产欧美激情| 久久精品亚洲国产| 岛国av一区二区在线在线观看| 亚洲女人天堂av| 欧美影院成年免费版| 欧美一区二区三区免费观看| 国产精品入口福利| 欧美中文字幕精品| 欧美精品免费在线| 亚洲天堂影视av| 欧美性xxxxxxx| 国产精品都在这里| 国产精品三级美女白浆呻吟| 亚洲欧美另类在线观看| 久久中文字幕视频| 日韩在线视频中文字幕| 中文字幕精品www乱入免费视频| 国产精品影院在线观看| 精品久久久久久久大神国产| 久久久久久伊人| 精品av在线播放| 高清欧美电影在线| 亚洲最新视频在线| 91sao在线观看国产| 久久久亚洲福利精品午夜| 91沈先生作品| 韩国三级电影久久久久久| 欧美激情亚洲综合一区| 久久精品中文字幕免费mv| 日产精品99久久久久久| 欧美日韩亚洲精品内裤| 国产欧美日韩高清| 欧美一区二区三区免费视| 日韩av中文在线| 日韩av大片免费看| 国产欧洲精品视频| 久久亚洲精品小早川怜子66| 一本色道久久综合狠狠躁篇的优点| 亚洲视频电影图片偷拍一区| 欧美激情中文字幕乱码免费| 亚洲成人黄色网| 国产一区二区三区四区福利| 不卡在线观看电视剧完整版| 亚洲欧洲一区二区三区久久| 欧美日韩一区二区三区在线免费观看| 亚洲国产精品999| 亚洲跨种族黑人xxx| 911国产网站尤物在线观看| 久久在精品线影院精品国产| 精品国产一区二区三区久久狼5月| 疯狂做受xxxx欧美肥白少妇| 国产精品国语对白| 国产欧美日韩中文字幕| 欧美综合在线观看| 亚洲欧美国内爽妇网| 欧美国产一区二区三区| 国产999精品久久久| 成人网页在线免费观看| 4438全国亚洲精品在线观看视频| 欧美日韩在线观看视频小说| 欧美日韩免费网站| 国产精品91久久久| 亚洲国产精品va| 国产精品r级在线| 亚洲精品乱码久久久久久按摩观| 最近的2019中文字幕免费一页| 亚洲成人精品视频在线观看| 一区二区三区四区在线观看视频| 91豆花精品一区| 亚洲成人av片在线观看| 久久精品久久久久| 国产精品久久久久久超碰| 亚洲永久免费观看| 欧美有码在线观看视频| 一区二区三欧美| 97精品一区二区三区| 精品夜色国产国偷在线| 91在线视频精品| 国产成人拍精品视频午夜网站| 中文字幕精品av| 亚洲欧洲日产国产网站| 亚洲久久久久久久久久| 视频在线观看一区二区|