精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

使用Nginx+Lua(OpenResty)開發(fā)高性能Web應(yīng)用

開發(fā) 開發(fā)工具
今天我們來認(rèn)識(shí)下Nginx、Lua、ngx_lua模塊和ngx_lua到底能開發(fā)哪些類型的web應(yīng)用。

使用Nginx+Lua(OpenResty)開發(fā)高性能Web應(yīng)用

幾乎所有互聯(lián)網(wǎng)公司,Nginx可以說是標(biāo)配組件,但是主要場景還是負(fù)載均衡、反向代理、代理緩存、限流等場景;而把Nginx作為一個(gè)Web容器使用的還不是那么廣泛。Nginx的高性能是大家公認(rèn)的,而Nginx開發(fā)主要是以C/C++模塊的形式進(jìn)行,整體學(xué)習(xí)和開發(fā)成本偏高;如果有一種簡單的語言來實(shí)現(xiàn)Web應(yīng)用的開發(fā),那么Nginx絕對是把好的瑞士軍刀;目前Nginx團(tuán)隊(duì)也開始意識(shí)到這個(gè)問題,開發(fā)了nginxScript:可以在Nginx中使用JavaScript進(jìn)行動(dòng)態(tài)配置一些變量和動(dòng)態(tài)腳本執(zhí)行;而目前市面上用的非常成熟的擴(kuò)展是由章亦春將Lua和Nginx粘合的ngx_lua模塊,并且將Nginx核心、LuaJIT、ngx_lua模塊、許多有用的Lua庫和常用的第三方Nginx模塊組合在一起成為OpenResty,這樣開發(fā)人員就可以安裝OpenResty,使用Lua編寫腳本,然后部署到Nginx Web容器中運(yùn)行。從而非常輕松就能開發(fā)出高性能的Web服務(wù)。

接下來我們就認(rèn)識(shí)下Nginx、Lua、ngx_lua模塊和ngx_lua到底能開發(fā)哪些類型的web應(yīng)用。

一、ngx_lua簡介

1、Nginx優(yōu)點(diǎn)

Nginx設(shè)計(jì)為一個(gè)主進(jìn)程多個(gè)工作進(jìn)程的工作模式,每個(gè)進(jìn)程是單線程來處理多個(gè)連接,而且每個(gè)工作進(jìn)程采用了非阻塞I/O來處理多個(gè)連接,從而減少了線程上下文切換,從而實(shí)現(xiàn)了公認(rèn)的高性能、高并發(fā);因此在生成環(huán)境中會(huì)通過把CPU綁定給Nginx工作進(jìn)程從而提升其性能;另外因?yàn)閱尉€程工作模式的特點(diǎn),內(nèi)存占用就非常少了。

Nginx更改配置重啟速度非常快,可以毫秒級,而且支持不停止Nginx進(jìn)行升級Nginx版本、動(dòng)態(tài)重載Nginx配置。

Nginx模塊也是非常多,功能也很強(qiáng)勁,不僅可以作為http負(fù)載均衡,Nginx發(fā)布1.9.0版本還支持TCP負(fù)載均衡,還可以很容易的實(shí)現(xiàn)內(nèi)容緩存、web服務(wù)器、反向代理、訪問控制等功能。

2、Lua的優(yōu)點(diǎn)

Lua是一種輕量級、可嵌入式的腳本語言,這樣可以非常容易的嵌入到其他語言中使用。另外Lua提供了協(xié)程并發(fā),即以同步調(diào)用的方式進(jìn)行異步執(zhí)行,從而實(shí)現(xiàn)并發(fā),比起回調(diào)機(jī)制的并發(fā)來說代碼更容易編寫和理解,排查問題也會(huì)容易。Lua還提供了閉包機(jī)制,函數(shù)可以作為First Class Value 進(jìn)行參數(shù)傳遞,另外其實(shí)現(xiàn)了標(biāo)記清除垃圾收集。

因?yàn)長ua的小巧輕量級,可以在Nginx中嵌入Lua VM,請求的時(shí)候創(chuàng)建一個(gè)VM,請求結(jié)束的時(shí)候回收VM。

3、什么是ngx_lua

ngx_lua是Nginx的一個(gè)模塊,將Lua嵌入到Nginx中,從而可以使用Lua來編寫腳本,這樣就可以使用Lua編寫應(yīng)用腳本,部署到Nginx中運(yùn)行,即Nginx變成了一個(gè)Web容器;這樣開發(fā)人員就可以使用Lua語言開發(fā)高性能Web應(yīng)用了。

ngx_lua提供了與Nginx交互的很多的API,對于開發(fā)人員來說只需要學(xué)習(xí)這些API就可以進(jìn)行功能開發(fā),而對于開發(fā)web應(yīng)用來說,如果接觸過Servlet的話,其開發(fā)和Servlet類似,無外乎就是知道接收請求、參數(shù)解析、功能處理、返回響應(yīng)這幾步的API是什么樣子的。

4、開發(fā)環(huán)境

我們可以使用OpenResty來搭建開發(fā)環(huán)境,OpenResty將Nginx核心、LuaJIT、許多有用的Lua庫和Nginx第三方模塊打包在一起;這樣開發(fā)人員只需要安裝OpenResty,不需要了解Nginx核心和寫復(fù)雜的C/C++模塊就可以,只需要使用Lua語言進(jìn)行Web應(yīng)用開發(fā)了。

如何安裝可以參考《跟我學(xué)Nginx+Lua開發(fā)》。

5、OpenResty生態(tài)

OpenResty提供了一些常用的ngx_lua開發(fā)模塊:如

  • lua-resty-memcached
  • lua-resty-mysql
  • lua-resty-redis
  • lua-resty-dns
  • lua-resty-limit-traffic
  • lua-resty-template

這些模塊涉及到如mysql數(shù)據(jù)庫、redis、限流、模塊渲染等常用功能組件;另外也有很多第三方的ngx_lua組件供我們使用,對于大部分應(yīng)用場景來說現(xiàn)在生態(tài)環(huán)境中的組件已經(jīng)足夠多了;如果不滿足需求也可以自己去寫來完成自己的需求。

6、場景

理論上可以使用ngx_lua開發(fā)各種復(fù)雜的web應(yīng)用,不過Lua是一種腳本/動(dòng)態(tài)語言,不適合業(yè)務(wù)邏輯比較重的場景,適合小巧的應(yīng)用場景,代碼行數(shù)保持在幾十行到幾千行。目前見到的一些應(yīng)用場景:

  • web應(yīng)用:會(huì)進(jìn)行一些業(yè)務(wù)邏輯處理,甚至進(jìn)行耗CPU的模板渲染,一般流程:mysql/redis/http獲取數(shù)據(jù)、業(yè)務(wù)處理、產(chǎn)生JSON/XML/模板渲染內(nèi)容,比如京東的列表頁/商品詳情頁;
  • 接入網(wǎng)關(guān):實(shí)現(xiàn)如數(shù)據(jù)校驗(yàn)前置、緩存前置、數(shù)據(jù)過濾、API請求聚合、AB測試、灰度發(fā)布、降級、監(jiān)控等功能,比如京東的交易大Nginx節(jié)點(diǎn)、無線部門正在開發(fā)的無線網(wǎng)關(guān)、單品頁統(tǒng)一服務(wù)、實(shí)時(shí)價(jià)格、動(dòng)態(tài)服務(wù);
  • Web防火墻:可以進(jìn)行IP/URL/UserAgent/Referer黑名單、限流等功能;
  • 緩存服務(wù)器:可以對響應(yīng)內(nèi)容進(jìn)行緩存,減少到后端的請求,從而提升性能;
  • 其他:如靜態(tài)資源服務(wù)器、消息推送服務(wù)、縮略圖裁剪等。

二、基于Nginx+Lua的常用架構(gòu)模式

1、負(fù)載均衡

流量的負(fù)載均衡

如上圖,我們首先通過LVS+HAProxy將流量轉(zhuǎn)發(fā)給核心Nginx 1和核心Nginx 2,即實(shí)現(xiàn)了流量的負(fù)載均衡,此處可以使用如輪訓(xùn)、一致性哈希等調(diào)度算法來實(shí)現(xiàn)負(fù)載的轉(zhuǎn)發(fā);然后核心Nginx會(huì)根據(jù)請求特征如“Host:item.jd.com”,轉(zhuǎn)發(fā)給相應(yīng)的業(yè)務(wù)Nginx節(jié)點(diǎn)如單品頁Nginx 1。此處為什么分兩層呢?

1、核心Nginx層是無狀態(tài)的,可以在這一層實(shí)現(xiàn)流量分組(內(nèi)網(wǎng)和外網(wǎng)隔離、爬蟲和非爬蟲流量隔離)、內(nèi)容緩存、請求頭過濾、故障切換(機(jī)房故障切換到其他機(jī)房)、限流、防火墻等一些通用型功能;

2、業(yè)務(wù)Nginx如單品頁Nginx,可以在在業(yè)務(wù)Nginx實(shí)現(xiàn)業(yè)務(wù)邏輯、或者反向代理到如Tomcat,在這一層可以實(shí)現(xiàn)內(nèi)容壓縮(放在這一層的目的是減少核心Nginx的CPU壓力,將壓力分散到各業(yè)務(wù)Nginx)、AB測試、降級;即這一層的Nginx跟業(yè)務(wù)有關(guān)聯(lián),實(shí)現(xiàn)業(yè)務(wù)的一些通用邏輯。

不管是核心Nginx還是業(yè)務(wù)Nginx,都應(yīng)該是無狀態(tài)設(shè)計(jì),可以水平擴(kuò)容。

不管是核心Nginx還是業(yè)務(wù)Nginx,都應(yīng)該是無狀態(tài)設(shè)計(jì),可以水平擴(kuò)容

業(yè)務(wù)Nginx一般會(huì)把請求直接轉(zhuǎn)發(fā)給后端的業(yè)務(wù)應(yīng)用,如Tomcat、PHP,即將請求內(nèi)部轉(zhuǎn)發(fā)到相應(yīng)的業(yè)務(wù)應(yīng)用;當(dāng)有的Tomcat出現(xiàn)問題了,可以在這一層摘掉;或者有的業(yè)務(wù)路徑變了在這一層進(jìn)行rewrite;或者有的后端Tomcat壓力太大也可以在這一層降級,減少對后端的沖擊;或者業(yè)務(wù)需要灰度發(fā)布時(shí)也可以在這一層Nginx上控制。

2、單機(jī)閉環(huán)

所謂單機(jī)閉環(huán)即所有想要的數(shù)據(jù)都能從本服務(wù)器直接獲取,在大多數(shù)時(shí)候無需通過網(wǎng)絡(luò)去其他服務(wù)器獲取。

單機(jī)閉環(huán)的三種應(yīng)用模式

如上所示,主要有三種應(yīng)用模式:

2.1、第一張圖應(yīng)用場景是Nginx應(yīng)用誰也不依賴,比如我們的Cookie白名單應(yīng)用,其目的是不在白名單中的Cookie將被清理,防止大家隨便將Cookie寫到j(luò)d.om根下;大家訪問http://www.jd.com時(shí),會(huì)看到一個(gè)http://ccc.jd.com/cookie_check的請求用來清理Cookie的;對于這種應(yīng)用非常簡單,不需要依賴數(shù)據(jù)源,直接單應(yīng)用閉環(huán)即可。

2.2、第二張圖,是讀取本機(jī)文件系統(tǒng),如靜態(tài)資源合并:比如訪問http://item.jd.com/1856584.html,查看源碼會(huì)發(fā)現(xiàn)【】這種請求,即多個(gè)請求合并為一個(gè)發(fā)給服務(wù)端,服務(wù)端進(jìn)行了文件資源的合并;

讀取本機(jī)文件系統(tǒng),如靜態(tài)資源合并

目前有成熟的Nginx模塊如nginx-http-concat進(jìn)行靜態(tài)資源合并;因?yàn)槲覀兪褂昧薕penResty,那么我們完全可以使用Lua編寫程序?qū)崿F(xiàn)該功能,比如已經(jīng)有人寫了nginx-lua-static-merger來實(shí)現(xiàn)這個(gè)功能。

還一些業(yè)務(wù)型應(yīng)用場景如下圖所示

單機(jī)閉環(huán)業(yè)務(wù)型應(yīng)用場景

商品頁面是由商品框架和其他維度的頁面片段(面包屑、相關(guān)分類、商家信息、規(guī)格參數(shù)、商品詳情)組成;或者首頁是由首頁框架和一些頁面片段(分類、輪播圖、樓層1、樓層N)組成;分維度是因?yàn)椴煌木S度是獨(dú)立變化的。對于這種靜態(tài)內(nèi)容但是需要進(jìn)行框架內(nèi)容嵌入的方式,Nginx自帶的SSI(Server Side Include)可以很輕松的完成;也可以使用Lua程序更靈活的完成(讀取框架、讀取頁面片段、合并輸出)。

比如商品頁面的架構(gòu)我們可以這樣:

單機(jī)閉環(huán)的商品頁面架構(gòu)

首先接收到商品變更消息,商品頁面同步Worker會(huì)根據(jù)消息維度生成相關(guān)的頁面推送到Nginx服務(wù)器;Nginx應(yīng)用再通過SSI輸出。目前京東商品詳情頁沒有再采用這種架構(gòu),具體架構(gòu)可以參考《構(gòu)建需求響應(yīng)式億級商品詳情頁》。

對于首頁的架構(gòu)是類似的,因?yàn)槠涮攸c(diǎn)(框架變化少,樓層變化較頻繁)和個(gè)性化的要求,樓層一般實(shí)現(xiàn)為異步加載。

2.3、 第三張圖和第二張圖的不同處是不再直接讀取文件系統(tǒng),而是讀取本機(jī)的Redis或者Redis集群或者如SSDB這種持久化存儲(chǔ)或者其他存儲(chǔ)系統(tǒng)都是可以的,比如直接說的商品頁面可以使用SSDB進(jìn)行存儲(chǔ)實(shí)現(xiàn)。文件系統(tǒng)一個(gè)很大的問題是當(dāng)多臺(tái)服務(wù)器時(shí)需要Worker去寫多臺(tái)服務(wù)器,而這個(gè)過程可以使用SSDB的主從實(shí)現(xiàn)。

商品頁面可以使用SSDB進(jìn)行存儲(chǔ)實(shí)現(xiàn)

此處可以看到,不管是圖二還是圖三架構(gòu),都需要Worker去進(jìn)行數(shù)據(jù)推送;假設(shè)本機(jī)數(shù)據(jù)丟了可怎么辦?因此實(shí)際大部分應(yīng)用不會(huì)是完全單機(jī)閉環(huán)的,而是會(huì)采用如下架構(gòu):

沒數(shù)據(jù)會(huì)回源到相應(yīng)的Web應(yīng)用從數(shù)據(jù)源拉取原始數(shù)據(jù)進(jìn)行處理

沒數(shù)據(jù)會(huì)回源到相應(yīng)的Web應(yīng)用從數(shù)據(jù)源拉取原始數(shù)據(jù)進(jìn)行處理

即首先讀本機(jī),如果沒數(shù)據(jù)會(huì)回源到相應(yīng)的Web應(yīng)用從數(shù)據(jù)源拉取原始數(shù)據(jù)進(jìn)行處理。這種架構(gòu)的大部分場景本機(jī)都可以命中數(shù)據(jù),只有很少一部分情況會(huì)回源到Web應(yīng)用。如京東的實(shí)時(shí)價(jià)格/動(dòng)態(tài)服務(wù)就是采用類似架構(gòu)。

3、分布式閉環(huán)

單機(jī)閉環(huán)會(huì)遇到如下兩個(gè)主要問題: 1、數(shù)據(jù)不一致問題(比如沒有采用主從架構(gòu)導(dǎo)致不同服務(wù)器數(shù)據(jù)不一致);2、遇到存儲(chǔ)瓶頸(磁盤或者內(nèi)存遇到了天花板)。

解決數(shù)據(jù)不一致的比較好的辦法是采用主從或者分布式集中存儲(chǔ);而遇到存儲(chǔ)瓶頸就需要進(jìn)行按照業(yè)務(wù)鍵進(jìn)行分片,將數(shù)據(jù)分散到多臺(tái)服務(wù)器。

如采用如下架構(gòu),按照尾號(hào)將內(nèi)容分布到多臺(tái)服務(wù)器。

分布式閉環(huán)

即第一步先讀取分布式存儲(chǔ)(JIMDB是京東的一個(gè)分布式緩存/存儲(chǔ)系統(tǒng),類似于Redis);如果不命中則回源到Tomcat集群(其會(huì)調(diào)用數(shù)據(jù)庫、服務(wù)總線獲取相關(guān)數(shù)據(jù))來獲取相關(guān)數(shù)據(jù)??梢詤⒖肌稑?gòu)建需求響應(yīng)式億級商品詳情頁》來獲取更詳細(xì)的架構(gòu)實(shí)現(xiàn)。

JIMDB集群會(huì)進(jìn)行多機(jī)房主從同步,各自機(jī)房讀取自己機(jī)房的從JIMDB集群,如下圖

JIMDB集群會(huì)進(jìn)行多機(jī)房主從同步,各自機(jī)房讀取自己機(jī)房的從JIMDB集群

4、接入網(wǎng)關(guān)

接入網(wǎng)關(guān)也可以叫做接入層,即接收到流量的入口,在入口我們可以進(jìn)行如下事情:

接入網(wǎng)關(guān)入口

4.1、核心接入Nginx會(huì)做如下事情:

(1)動(dòng)態(tài)負(fù)載均衡;1、普通流量走一致性哈希,提升命中率;熱點(diǎn)流量走輪訓(xùn)減少單服務(wù)器壓力;2、根據(jù)請求特征將流量分配到不同分組并限流(爬蟲、或者流量大的IP);3、動(dòng)態(tài)流量(動(dòng)態(tài)增加upstream或者減少upstream或者動(dòng)態(tài)負(fù)載均衡)可以使用balancer_by_lua或者微博開源的upsync;

(2)防DDOS攻擊限流:可以將請求日志推送到實(shí)時(shí)計(jì)算集群,然后將需要限流的IP推送到核心Nginx進(jìn)行限流;

(3)非法請求過濾:比如應(yīng)該有Referer卻沒有,或者應(yīng)該帶著Cookie卻沒有Cookie;

(4)請求聚合:比如請求的是http://c.3.cn/proxy?methods=a,b,c,核心接入Nginx會(huì)在服務(wù)端把Nginx并發(fā)的請求并把結(jié)果聚合然后一次性吐出;

(5)請求頭過濾:有些業(yè)務(wù)是不需要請求頭的,因此可以在往業(yè)務(wù)Nginx轉(zhuǎn)發(fā)時(shí)把這些數(shù)據(jù)過濾掉;

(6)緩存服務(wù):使用Nginx Proxy Cache實(shí)現(xiàn)內(nèi)容頁面的緩存;

4.2、業(yè)務(wù)Nginx會(huì)做如下事情:

(1)緩存:對于讀服務(wù)會(huì)使用大量的緩存來提升性能,我們在設(shè)計(jì)時(shí)主要有如下緩存應(yīng)用:首先讀取Nginx本地緩存 Shared Dict或者Nginx Proxy Cache,如果有直接返回內(nèi)容給用戶;如果本地緩存不命中,則會(huì)讀取分布式緩存如Redis,如果有直接返回;如果還是不命中則回源到Tomcat應(yīng)用讀取DB或調(diào)用服務(wù)獲取數(shù)據(jù)。另外我們會(huì)按照維度進(jìn)行數(shù)據(jù)的緩存。

(2)業(yè)務(wù)邏輯:我們會(huì)進(jìn)行一些數(shù)據(jù)校驗(yàn)/過濾邏輯前置(如商品ID必須是數(shù)字)、業(yè)務(wù)邏輯前置(獲取原子數(shù)據(jù),然后在Nginx上寫業(yè)務(wù)邏輯)。

(3)細(xì)粒度限流:按照接口特征和接口吞吐量來實(shí)現(xiàn)動(dòng)態(tài)限流,比如后端服務(wù)快扛不住了,那我們就需要進(jìn)行限流,被限流的請求作為降級請求處理;通過lua-resty-limit-traffic可以通過編程實(shí)現(xiàn)更靈活的降級邏輯,如根據(jù)用戶、根據(jù)URL等等各種規(guī)則,如降級了是讓用戶請求等待(比如sleep 100ms,這樣用戶請求就慢下來了,但是服務(wù)還是可用)還是返回降級內(nèi)容。

(4)降級:降級主要有兩種:主動(dòng)降級和被動(dòng)降級;如請求量太大扛不住了,那我們需要主動(dòng)降級;如后端掛了或者被限流了或者后端超時(shí)了,那我們需要被動(dòng)降級。降級方案可以是:1、返回默認(rèn)數(shù)據(jù)如庫存默認(rèn)有貨;2、返回靜態(tài)頁如預(yù)先生成的靜態(tài)頁;3、部分用戶降級,告訴部分用戶等待下再操作;4、直接降級,服務(wù)沒數(shù)據(jù),比如商品頁面的規(guī)格參數(shù)不展示;5、只降級回源服務(wù),即可以讀取緩存的數(shù)據(jù)返回,實(shí)現(xiàn)部分可用,但是不會(huì)回源處理;

(5)AB測試/灰度發(fā)布:比如要上一個(gè)新的接口,可以通過在業(yè)務(wù)Nginx通過Lua寫復(fù)雜的業(yè)務(wù)規(guī)則實(shí)現(xiàn)不同的人看到不同的版本。

(6)服務(wù)質(zhì)量監(jiān)控:我們可以記錄請求響應(yīng)時(shí)間、緩存響應(yīng)時(shí)間、反向代理服務(wù)響應(yīng)時(shí)間來詳細(xì)了解到底哪塊服務(wù)慢了;另外記錄非200狀態(tài)碼錯(cuò)誤來了解服務(wù)的可用率。

京東的交易大Nginx節(jié)點(diǎn)、無線部門正在開發(fā)的無線Nginx網(wǎng)關(guān)、和單品頁統(tǒng)一服務(wù)都是接入網(wǎng)關(guān)的實(shí)踐,而單品頁統(tǒng)一服務(wù)架構(gòu)可以參考《京東商品詳情頁服務(wù)閉環(huán)實(shí)踐》。

5、Web應(yīng)用

此處所說的Web應(yīng)用指的是頁面模板渲染類型應(yīng)用或者API服務(wù)類型應(yīng)用;比如京東列表頁/商品詳情頁就是一個(gè)模板渲染類型的應(yīng)用,核心業(yè)務(wù)邏輯都是使用Lua寫的,部署到Nginx容器。目前核心業(yè)務(wù)代碼行數(shù)有5000多行,模板頁面有2000多行,涉及到大量的計(jì)算邏輯,性能數(shù)據(jù)可以參考《構(gòu)建需求響應(yīng)式億級商品詳情頁》。

頁面模板渲染類型應(yīng)用或者API服務(wù)類型應(yīng)用

整體處理過程和普通Web應(yīng)用沒什么區(qū)別:首先接收請求并進(jìn)行解析;然后讀取JIMDB集群數(shù)據(jù)、如果沒有則回源到Tomcat獲取;然后進(jìn)行業(yè)務(wù)邏輯處理;渲染模板;將響應(yīng)內(nèi)容返回給用戶。

三、如何使用Nginx+Lua開發(fā)Web應(yīng)用

開發(fā)一個(gè)Web應(yīng)用我們需要從項(xiàng)目搭建、功能開發(fā)、項(xiàng)目部署幾個(gè)層面完成。

3.1、項(xiàng)目搭建

開發(fā)一個(gè)Web應(yīng)用的項(xiàng)目搭建

整個(gè)項(xiàng)目結(jié)構(gòu)從啟停腳本、配置文件、公共組件、業(yè)務(wù)代碼、模板代碼幾塊進(jìn)行劃分。

(1)啟停腳本

啟停腳本放在項(xiàng)目目錄/export/App/nginx-app/bin/下。

start.sh是啟動(dòng)和更新腳本,即如果nginx沒有啟動(dòng)則啟動(dòng)起來,否則reload:

  1. if nginx沒啟動(dòng) then   
  2.   sudo /export/servers/nginx/sbin/nginx  -t -c /export/App/nginx-app/config/nginx.conf   
  3.   sudo /export/servers/nginx/sbin/nginx  -c /export/App/nginx-app/config/nginx.conf   
  4. else   
  5.   sudo /export/servers/nginx/sbin/nginx  -t   
  6.   sudo /export/servers/nginx/sbin/nginx  -s reload   
  7. end     

(2)配置文件

配置文件放在/export/App/nginx-app/config目錄下,包括了nginx.conf配置文件、nginx項(xiàng)目配置文件和資源配置文件。

nginx.confg配置文件

  1. worker_processes  1;   
  2. events {   
  3.     worker_connections  1024;   
  4. }   
  5. http {   
  6.    include       mime.types;   
  7.    default_type  text/html;   
  8.    #gzip相關(guān)   
  9.    #超時(shí)時(shí)間   
  10.    #日志格式   
  11.    #反向代理配置   
  12.    
  13.    #lua依賴路徑   
  14.    lua_package_path  "/export/App/nginx-app/lualib/?.lua;;";   
  15.    lua_package_cpath  "/export/App/nginx-app/lualib/?.so;;";   
  16.    
  17.    #server配置   
  18.    include /export/App/nginx-app/config/domains/*;   
  19.    
  20.    #初始化腳本   
  21.    init_by_lua_file "/export/App/nginx-app/lua/init.lua";   
  22. }    

對于nginx.conf會(huì)進(jìn)行一些通用的配置,如工作進(jìn)程數(shù)、超時(shí)時(shí)間、壓縮、日志格式、反向代理等相關(guān)配置;另外需要指定如下配置:

lua_package_path、lua_package_cpath指定我們依賴的通用Lua庫從哪里加載;

include /export/App/nginx-app/config/domains/*:用于加載server相關(guān)的配置,此處通過*可以在一個(gè)nginx下指定多個(gè)server配置;

init_by_lua_file "/export/App/nginx-app/lua/init.lua":執(zhí)行項(xiàng)目的一些初始化配置,比如加載配置文件。

nginx項(xiàng)目配置文件

/export/App/nginx-app/config/domains/nginx_product.conf用于配置當(dāng)前web應(yīng)用的一些server相關(guān)的配置:

  1. #upstream   
  2. upstream item_http_upstream {   
  3.     server 192.168.1.1 max_fails=2 fail_timeout=30s weight=5;   
  4.     server 192.168.1.2 max_fails=2 fail_timeout=30s weight=5;   
  5. }   
  6. #緩存   
  7. lua_shared_dict item_local_shop_cache 600m;   
  8. server {   
  9.      listen                   80;   
  10.      server_name              item.jd.com item.jd.hk;   
  11.      #模板文件從哪加載   
  12.     set $template_root "/export/App/nginx-app/template ";   
  13.      #url映射   
  14.         location ~* "^/product/(\d+)\.html$" {   
  15.             rewrite /product/(.*)    http://item.jd.com/$1 permanent;   
  16.         }   
  17.     location ~* "^/(\d{6,12})\.html$" {   
  18.             default_type text/html;   
  19.             charset gbk;   
  20.             lua_code_cache on;   
  21.             content_by_lua_file "/export/App/nginx-app/lua/product_controller.lua";   
  22.         }   
  23. }    

我們需要指定如upstream、共享字典配置、server配置、模板文件從哪加載、url映射,比如我們訪問http://item.jd.com/1856584.html將交給/export/App/nginx-app/lua/product_controller.lua處理;也就是說我們項(xiàng)目的入口就有了。

資源配置文件resources.properties包含了我們的一些比如開關(guān)的配置、緩存服務(wù)器地址的配置等等。

(3)業(yè)務(wù)代碼

/export/App/nginx-app/lua/目錄里存放了我們的lua業(yè)務(wù)代碼,init.lua用于讀取如resources.properties來進(jìn)行一些項(xiàng)目初始化;product_controller.lua可以看成Java Web中的Servlet,接收、處理、響應(yīng)用戶請求。

(4)模板

模板文件放在/export/App/nginx-app/template/目錄下,使用相應(yīng)的模板引擎進(jìn)行編寫頁面模板,然后渲染輸出。

(5)公共Lua庫

存放了一些如redis、template等相關(guān)的公共Lua庫,還有一些我們項(xiàng)目中通用的工具庫如product_util.lua。

到此一個(gè)簡單的項(xiàng)目的結(jié)構(gòu)就介紹完了,對于開發(fā)一個(gè)項(xiàng)目來說還會(huì)牽扯到分模塊等工作,不過對于我們這種Lua應(yīng)用來說,建議不要過度抽象,盡量小巧即可。

3.2、功能開發(fā)

接下來就需要使用相應(yīng)的API來實(shí)現(xiàn)我們的業(yè)務(wù)了,比如product_controller.lua:

  1. --加載Lua模塊庫   
  2. local template = require("resty.template")     
  3. --1、獲取請求參數(shù)中的商品ID   
  4. local skuId = ngx.req.get_uri_args()["skuId"];   
  5. --2、調(diào)用相應(yīng)的服務(wù)獲取數(shù)據(jù)   
  6. local data = api.getData(skuId)   
  7.    
  8. --3、渲染模板   
  9. local func = template.compile("product.html")     
  10. local content = func(data)     
  11. --4、通過ngx API輸出內(nèi)容     
  12. ngx.say(content)   

開發(fā)完成后將項(xiàng)目部署到測試環(huán)境,執(zhí)行start.sh啟動(dòng)nginx然后進(jìn)行測試。

詳細(xì)的開發(fā)過程和API的使用,請參考《跟我學(xué)Nginx+Lua開發(fā)》。此處不做具體編碼實(shí)現(xiàn)。

四、基于Nginx+Lua的常用功能總結(jié)

到此我們對于Nginx開發(fā)已經(jīng)有了一個(gè)整體的認(rèn)識(shí),對于Nginx粘合Lua來開發(fā)應(yīng)用可以說是一把鋒利的瑞士軍刀,可以幫我們很容易的解決很多問題,可以開發(fā)Web應(yīng)用、接入網(wǎng)關(guān)、API網(wǎng)關(guān)、消息推送、日志采集等應(yīng)用,不過個(gè)人認(rèn)為適合開發(fā)業(yè)務(wù)邏輯單一、核心代碼行數(shù)較少的應(yīng)用,不適合業(yè)務(wù)邏輯復(fù)雜、功能繁多的業(yè)務(wù)型或者企業(yè)級應(yīng)用;最后我們總結(jié)下基于Nginx+Lua的常用架構(gòu)模式中一些常見實(shí)踐和場景:

  • 動(dòng)態(tài)負(fù)載均衡;
  • 防火墻(DDOS、IP/URL/UserAgent/Referer黑名單、防盜鏈等);
  • 限流;
  • 降級;
  • AB測試/灰度發(fā)布;
  • 多級緩存模式;
  • 服務(wù)端請求聚合;
  • 服務(wù)質(zhì)量監(jiān)控。

一些問題

1、在開發(fā)nginx應(yīng)用時(shí)使用UTF-8編碼可以減去很多麻煩;

2、GBK轉(zhuǎn)碼解碼時(shí)使用GB18030,否則一些特殊字符會(huì)出現(xiàn)亂碼;

3、cjson庫對于如\uab1這種錯(cuò)誤的unicode轉(zhuǎn)碼會(huì)失敗,可以使用純Lua編寫的dkjson;

4、社區(qū)版nginx不支持upstream的域名動(dòng)態(tài)解析;可以考慮proxy_pass http://p.3.local/prices/mgets$is_args$args,然后配合resolver來實(shí)現(xiàn);或者在lua中進(jìn)行http調(diào)用;如果DNS遇到性能瓶頸可以考慮在本機(jī)部署如dnsmasq來緩存;或者考慮使用balancer_by_lua功能實(shí)現(xiàn)動(dòng)態(tài)upstream;

5、為響應(yīng)添加處理服務(wù)器IP的響應(yīng)頭,方便定位問題;

6、根據(jù)業(yè)務(wù)設(shè)置合理的超時(shí)時(shí)間;

7、走CDN的業(yè)務(wù)當(dāng)發(fā)生錯(cuò)誤時(shí)返回的500/503/302/301等非正常響應(yīng)不要設(shè)置緩存。

【本文是51CTO專欄作者張開濤的原創(chuàng)文章,作者微信公眾號(hào):開濤的博客( kaitao-1234567)】

責(zé)任編輯:趙寧寧 來源: 開濤的博客
相關(guān)推薦

2016-08-23 14:37:21

2023-10-26 08:35:53

2023-12-26 00:58:53

Web應(yīng)用Go語言

2013-09-10 16:16:19

移動(dòng)網(wǎng)站性能優(yōu)化移動(dòng)web

2011-06-14 09:27:43

高性能WEB開發(fā)

2019-01-25 07:41:29

OpenResty物流網(wǎng)關(guān)Web

2011-04-07 13:53:25

Web工具

2011-04-18 10:16:30

WEB高性能

2020-12-07 06:17:37

OpenRestynginxIP

2011-11-01 09:41:54

Nginx

2011-04-19 11:06:03

JavaScriptweb

2011-10-18 13:58:32

高性能web

2009-02-27 14:46:09

AjaxGWT開發(fā)

2024-01-05 07:38:55

2011-01-26 10:46:30

FreeBSD 8.0NginxPHP

2016-11-28 09:13:29

單頁Web模板數(shù)據(jù)

2011-04-21 09:59:48

WEBjavascript

2011-04-27 10:57:29

高性能web開發(fā)

2011-04-07 13:39:24

WebHTTP

2009-07-30 10:28:56

Web高性能開發(fā)
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)

国产精品a久久久久久| 欧美一卡二卡在线观看| 日韩国产美国| 一级片视频网站| 午夜欧美视频| 亚洲欧美www| 91在线第一页| 伊人久久国产| 亚洲精品福利视频网站| 久久久久久一区| 国产一区二区三区黄片| 国产精品一区亚洲| 久久伊人精品视频| 91成年人网站| 亚洲无线观看| 欧美体内she精视频| 久久手机在线视频| 欧美jizzhd欧美| 久久丝袜美腿综合| 国产高清一区二区三区| 91麻豆国产视频| 欧美综合国产| 久久久久久久久久久久久久久久久久av | 国产精品偷伦视频免费观看了 | 欧美视频久久| 日韩在线精品一区| 人妻av无码一区二区三区| 超碰cao国产精品一区二区| 欧美亚洲一区三区| 欧美亚洲另类色图| 电影k8一区二区三区久久| 婷婷亚洲最大| 亚洲精品国偷自产在线99热| 欧美一级特黄aaa| 日韩精品麻豆| 欧美性色视频在线| 99视频在线免费播放| 少女频道在线观看高清| 亚洲免费观看高清完整版在线| 性刺激综合网| av亚洲在线| 国产目拍亚洲精品99久久精品| 精品一区二区三区国产| 欧美一级淫片aaaaaa| 国产一区二区三区黄视频| 国产噜噜噜噜久久久久久久久| 亚洲国产精品无码久久久| 亚洲综合99| 欧美综合激情网| www.日本精品| 久久在线91| 日韩av日韩在线观看| 欧美videossex极品| 亚洲一区欧美激情| 国产精品爱久久久久久久| 黄色片中文字幕| 日韩av高清在线观看| 国产精品h在线观看| 成人免费视频国产免费| 蜜臀av一区二区在线观看| 国产精品久久久久久av福利软件| 波多野结衣视频网址| 日韩电影在线一区二区三区| 国产精品美乳一区二区免费| 在线观看免费中文字幕| 老司机午夜精品99久久| 91视频免费在线| 亚洲国产精品久久久久爰性色| 丁香啪啪综合成人亚洲小说| 国产一区二区三区四区五区在线| 三级做a全过程在线观看| 久久久久久久久久看片| 亚洲欧洲精品一区| 亚洲按摩av| 福利精品视频在线| 中文字幕 91| 日本精品视频| 精品一区二区三区三区| 人人妻人人澡人人爽| 91tv官网精品成人亚洲| 久久频这里精品99香蕉| 五月天婷婷久久| 精品在线播放午夜| 国产九色91| 91视频在线观看| 亚洲在线中文字幕| 午夜肉伦伦影院| 四虎国产精品永久在线国在线| 欧美成人r级一区二区三区| 性欧美丰满熟妇xxxx性久久久| 精品免费一区二区| 欧美黑人性生活视频| 中文字幕一区二区人妻视频| 国产美女av一区二区三区| 精品欧美一区二区精品久久| 丝袜美腿美女被狂躁在线观看| 亚洲综合无码一区二区| 久久久久久三级| 一区二区三区欧洲区| 影音先锋欧美精品| 中文字幕第28页| 蜜臀av在线播放一区二区三区| 国产视频一区二区不卡| 蜜桃av在线免费观看| 都市激情亚洲色图| 久久久久亚洲av成人网人人软件| 精品视频网站| 欧美中文字幕在线播放| www.色视频| 中文在线一区二区| 免费无遮挡无码永久视频| www.久久99| 一区二区成人av| 日本三级午夜理伦三级三| 精品在线观看免费| 无码免费一区二区三区免费播放 | 免费看毛片的网站| 国产精品久久久久一区二区三区厕所 | 日本一区二区视频在线播放| 亚洲国产裸拍裸体视频在线观看乱了中文| 国产精品中文久久久久久久| 色一情一乱一乱一区91av| 亚洲精品一二三| 自拍偷拍一区二区三区四区| 九九久久婷婷| 国产91精品不卡视频| 日本国产在线观看| 亚洲愉拍自拍另类高清精品| 在线视频观看91| 日韩成人三级| 国产精品美女免费视频| 美女毛片在线看| 岛国视频午夜一区免费在线观看| 久久精品aⅴ无码中文字字幕重口| 五月天激情综合网| 91精品久久久久久| 永久免费在线观看视频| 欧美揉bbbbb揉bbbbb| www.av天天| 奇米四色…亚洲| 日本中文不卡| 亚洲a∨精品一区二区三区导航| 亚洲男人第一网站| 成人h动漫精品一区二区下载| 26uuu亚洲综合色欧美| 国产精品50p| 乱亲女h秽乱长久久久| 97在线视频免费观看| 人妻少妇精品无码专区久久| 亚洲第一成人在线| 日韩Av无码精品| 国产精品久久久久久久久久妞妞| 精品一区二区三区免费毛片| 欧美粗大gay| 中文字幕日韩电影| 中文字幕自拍偷拍| 亚洲天天做日日做天天谢日日欢| 国产精品久久久久久9999| 亚洲大全视频| 国产区一区二区| 中文字幕在线中文字幕在线中三区| 精品视频www| 中文字幕在线天堂| 亚洲天堂av一区| 久久久无码人妻精品无码| 精品99视频| 欧美久久久久久久| 久久亚洲精品人成综合网| 美女精品视频一区| 国产成人无码www免费视频播放| 精品国产91久久久久久| 在线国产视频一区| 精品无码三级在线观看视频| 免费人成在线观看视频播放| 亚洲区小说区| 国产欧美精品日韩| av白虎一区| 一区二区三区四区精品| 99热在线只有精品| 欧美特黄级在线| 永久免费看片直接| 成人午夜视频网站| 北条麻妃av高潮尖叫在线观看| 国产精品传媒精东影业在线| 国产美女精品久久久| 亚洲人免费短视频| 欧美另类极品videosbestfree| 婷婷丁香花五月天| 欧美日韩亚洲另类| 日韩福利片在线观看| 亚洲国产成人私人影院tom | 国产亚洲一二三区| 1314成人网| 日韩电影一区二区三区| www.xxx麻豆| 久久香蕉国产| 久久久久久国产精品mv| 国产一区二区三区精品在线观看| 91sao在线观看国产| 黄色av免费在线| 亚洲欧美中文日韩在线v日本| 国产喷水福利在线视频| 色综合激情五月| 国产一级片网址| 中文字幕日本乱码精品影院| 你懂得在线视频| 国产一区二区三区精品视频| 免费男同深夜夜行网站| 亚洲性色视频| 欧美大片免费播放| 欧美日韩精品一区二区视频| 狠狠色狠狠色综合人人| 久久久国产精品入口麻豆| 国产精品99导航| 蜜桃视频在线观看播放| 欧美猛少妇色xxxxx| 69av亚洲| 国产亚洲美女久久| 视频一区二区三区在线看免费看| 日韩手机在线导航| 97精品人妻一区二区三区香蕉| 91国产视频在线观看| 99热国产在线观看| 亚洲电影在线免费观看| 午夜精品福利在线视频| 国产精品高潮久久久久无| 久久丫精品忘忧草西安产品| 91在线观看免费视频| 成人做爰www看视频软件| 国产一区二区调教| 免费在线观看污网站| 另类中文字幕网| 亚洲人辣妹窥探嘘嘘| 日韩av一区二区在线影视| 韩国日本在线视频| 久久国产成人| 国产亚洲天堂网| 美女国产精品| 欧美成人免费高清视频| 久久国产精品99国产| 色综合av综合无码综合网站| 久久福利影视| 国产自偷自偷免费一区 | 精品日本美女福利在线观看| 国产精品99无码一区二区| 亚洲国产精品久久艾草纯爱| 国产系列精品av| 精品久久香蕉国产线看观看亚洲| 日韩av电影网址| 欧美午夜影院在线视频| 日韩 国产 欧美| 欧美视频一区二区三区四区 | 九九九在线视频| 亚洲福利视频导航| 51国产偷自视频区视频| 日本国产一区二区| 伊人网视频在线| 91精品欧美一区二区三区综合在| 国产黄色一级大片| 亚洲第一视频网站| 精品av中文字幕在线毛片| 中文字幕在线亚洲| caopon在线免费视频| 久久久久日韩精品久久久男男| 黄在线观看免费网站ktv| 国产成人精品亚洲精品| 日韩免费在线电影| 99久久国产免费免费| 理论片一区二区在线| 欧美激情一区二区三区在线视频| 日韩情爱电影在线观看| 欧美日韩dvd| 米奇777在线欧美播放| 最新中文字幕2018| 国产精品亚洲专一区二区三区| 黄色激情在线观看| 国产午夜亚洲精品羞羞网站| 东方av正在进入| 五月天网站亚洲| 亚洲视频在线观看免费视频| 欧美va在线播放| 国产尤物视频在线| 欧美高清自拍一区| 日韩在线影院| 97久草视频| 国产亚洲电影| 国产爆乳无码一区二区麻豆| 丝瓜av网站精品一区二区| 国产一级免费大片| 91美女福利视频| www.av免费| 欧美午夜电影在线| www五月婷婷| 亚洲一区第一页| 久久www人成免费看片中文| 国产精品流白浆视频| japanese色系久久精品| 亚洲乱码国产乱码精品天美传媒| 国产精品99一区二区| 熟妇人妻va精品中文字幕| 国产一区在线观看麻豆| 女女互磨互喷水高潮les呻吟 | 久久久久久**毛片大全| 久久久久久久久毛片| 欧美视频中文一区二区三区在线观看| 日本毛片在线观看| 久久成人人人人精品欧| 亚洲国产尤物| 久久久久网址| 最新亚洲视频| gogo亚洲国模私拍人体| 国产精品入口麻豆九色| 久久久久久久久久久久久av| 欧美一区二区三区公司| 91欧美在线视频| 国产不卡一区二区在线播放| 国产精品乱战久久久| 波多野结衣激情| 麻豆91小视频| 中字幕一区二区三区乱码| 精品久久中文字幕| 亚洲精品911| 欧美成人网在线| 中文字幕成人| 亚洲三区在线| 三级欧美韩日大片在线看| 亚洲精品视频大全| 午夜精品成人在线| 黑人乱码一区二区三区av| 久久久黄色av| 91精品国产一区二区在线观看 | 中文字幕网站在线观看| 欧美日韩亚洲精品一区二区三区| 韩国av在线免费观看| 欧美精品午夜视频| 国产日本亚洲| 亚洲精品偷拍视频| 国产尤物一区二区| 福利所第一导航| 欧美变态tickle挠乳网站| 中文字幕在线三区| 97人人模人人爽视频一区二区| 亚洲无中文字幕| 性生活在线视频| 夜夜嗨av一区二区三区中文字幕| 精品久久久久中文慕人妻| 另类专区欧美制服同性| 日韩精品中文字幕一区二区| 亚洲国产一二三精品无码| 成人av一区二区三区| 91精品国产乱码久久久张津瑜| 亚洲精品国产欧美| 春暖花开亚洲一区二区三区| 亚洲春色在线视频| 久88久久88久久久| 欧美日韩综合一区二区| 精品播放一区二区| 色综合亚洲图丝熟| 青青草原成人| 蜜臀av国产精品久久久久| 国产一二三区精品| 亚洲国产天堂网精品网站| 中日韩脚交footjobhd| 亚洲精品国产一区| 国产毛片精品国产一区二区三区| 国产在线观看你懂的| 亚洲精品中文字幕av| 国产精品99| 国产免费内射又粗又爽密桃视频| 成人午夜av影视| 无码人妻熟妇av又粗又大| 日韩中文综合网| 国产精品17p| 蜜臀视频一区二区三区| 亚洲日本va午夜在线影院| 免费观看a视频| 国产成人精品久久久| 在线看片不卡| 国产男男chinese网站| 欧美男人的天堂一二区| 丁香花电影在线观看完整版| 视频一区二区三| 国产不卡在线播放| 丁香社区五月天| 久久99久久久久久久噜噜| 色橹橹欧美在线观看视频高清| 欧美日韩一区二区三区69堂| 亚洲国产色一区| 最新真实国产在线视频| 国产欧美日韩一区二区三区| 美女诱惑一区二区| 日韩精品乱码久久久久久| 色噜噜久久综合伊人一本| 国产精品久久久网站| 九九热免费在线观看| 精品久久久久久久久久ntr影视| 免费的黄网站在线观看| 蜜桃精品久久久久久久免费影院| 精品亚洲aⅴ乱码一区二区三区| 在线观看 亚洲|