文档章节

模仿京东使用Openresty+Redis做读服务

翟志军
 翟志军
发布于 2016/10/17 21:01
字数 970
阅读 5195
收藏 162

看了开涛的Nginx+Lua开发教程,很是感兴趣。所以,自己也把环境搭建起来玩。

跟开涛的不同,我使用Vagrant + Ansible来搭建(不要问我为什么不使用Docker)。这样,所有的人只要两条命令就可以搭建好了,而不需要手工一条命令一条命令打。

所谓使用Openresty来做读服务,是指Openresty直接从数据源读数据,然后渲染输出,而不经过应用服务器,比如Tomcat服务器。Openresty 是一个基于Nginx和LuaJIT的动态Web开发平台。我不知道京东是否是直接使用Openresty还是自己编译Nginx + Lua。反正,我直接使用Openresty。

本次文章就是根据开涛的教程,实现使用lua-resty-template 做模块引擎,使用Redis做数据源。我把Openresty和Redis都安装在同一台机器上,以方便做实验,当然,如果你想装在不同的服务器,只需要修改下配置就好了。以下是架构:

openresty_redis

搭建的步骤:

  1. 安装Openresty及其相关的Openresty module: lua-resty-template、lua-resty-redis
  2. 安装Redis,启动Redis
  3. 配置Openresty,启动Openresty
  4. 写页面逻辑代码

整个步骤我都写成了Ansible自动化配置脚本。所以,你已经不需要自己搭建。所有的代码都托管在:http://git.oschina.net/zacker330/openresty-lab

启动方法

启动前,你必须安装Vagrant 和 Ansible 2.0+。

git clone https://git.oschina.net/zacker330/openresty-lab.git
cd openresty-lab
vagrant up 
ansible-playbook ./ansible/playbook.yml -i ./ansible/inventory -u vagrant -k
>> 输入ssh密码 `vagrant`

PS. ansible-playbook需要通过ssh登录上目标机器来执行我们的任务。

接下来,我们解释下代码。

Openresty的配置如下:

## 省去了一些不重要的nginx配置

http {
    default_type  application/octet-stream;
    ## 省去了一些不重要的nginx配置
  
    ## 初始化所需要对象
    init_by_lua '
        require "resty.core"
        redis = require "resty.redis"
        template = require "resty.template"
        template.caching(false); -- you may remove this on production
    ';

   server{
      listen       80;
      server_name  192.168.8.10;
      charset        utf-8;      
  	  ## 指定 模板路径	
      set $template_root "/usr/local/openresty/nginx/html/templates";
      location ~ \.lsp$ {
        default_type text/html;
        content_by_lua 'template.render(ngx.var.uri)'; ## 访问index.lsp,将使用index.lsp模板
      }

	}
}

页面逻辑代码 index.lsp:

    {%

        layout = "layouts/default.lsp" -- 模板

        local  blogid= ngx.var.arg_blogId
        local  title = "博客标题"
        local    author = {name = "fooname", gender = "female", level= 3}
        local    description = "<script>alert(1);</script>"
        local    content = "java8的流式处理极大了简化我们对于集合、数组等结构的操作,让我们可以以函数式的思想去操作,<br/>本篇文章将探讨java8的流式数据处理的基本使用。"
        local    tags = {"life", "lua", "openresty"}
        local    radar = {lua = 90, openresty = 80, nginx = 70}

  		-- 使用nginx的内置变量
        local a = ngx.var.arg_a
        local b = ngx.var.arg_b
        local ip = ngx.var.remote_addr

  	    -- 使用redis读数据源
        local red = redis:new()
        red:set_timeout(1000)
        local ok, err = red:connect("127.0.0.1", 6379)
        if not ok then
           ngx.say("failed to connect: ", err)
           return
        end

        local ok, err = red:lpush("list", a, b)
        local member, err = red:llen("list")

    %}
<div>
 member: {{ member }}<br/>
 remote ip: {{ ip }}

 blogId: {{blogid}}<br/>
 作者: {{author.name}} {{author.gender}} level: {{author.level}}<br/>
 description: {{description}} <br/>
 tags:  {% for i = 1, #tags do %}
     {% if i > 1 then %},{% end %}
     {* tags[i] *}
  {% end %}<br/>
</div>

最终访问效果:http://192.168.8.10/index.lsp?a=12&b=asdfasdf&blogId=111

result

小结

  1. 这种不经过应用服务器的方式,读的速度似乎更快,毕竟省去了中间的Tomcat服务。但是,谁来填充数据给Redis和什么时机填充数据,又是另一回事了。

  2. 开发过程似乎有些麻烦,因为修改nginx配置后,不能像普通的页面开发那样立马看到效果,还要nginx -s reload一下。这个,我想到的解决方案是使用Ruby的guard gem来监控文件变动,然后reload nginx配置,最后使用浏览器的livereload来自刷新页面。https://github.com/guard/guard-livereload 目前还没有时间实现,希望有热心朋友实现提pr。或者开涛能分享下他们的实践。希望他本人能看到这篇博客。:P

参考:

第五章 常用Lua开发库3-模板渲染

lua-resty-template

2016.10 于深圳西丽人民医院

© 著作权归作者所有

共有 人打赏支持
翟志军

翟志军

粉丝 339
博文 76
码字总数 79851
作品 2
深圳
程序员
加载中

评论(11)

MingjunYang
MingjunYang
应用场景就是,招个人进来不要他/她知道Java怎么工作的,不要去弄一套笨重的Java环境,就可以轻松工作了。。

学lua差不多上手就会了,而且lua这么多年没多少变化,稳定轻便。。。
2973901695
2973901695
图图噢噢噢
一曲
一曲
为什么不用docker?
透过玻璃的光
透过玻璃的光

引用来自“简单代码”的评论

比JEE+Tomcat的优势是什么?除了京东这种体量,其他似乎看不出优势吧?等高手解惑!
性能。非京东体量也可以利用openresty去处理一些代理,权限验证,流量限制,缓存等等操作。
在入口层面做这种东西会要求对后端无感,并且不影响正常响应
铂金蛋蛋
铂金蛋蛋
祝 安康
清靜無虞
清靜無虞
住院还不忘写博客啊
简单代码
简单代码
比JEE+Tomcat的优势是什么?除了京东这种体量,其他似乎看不出优势吧?等高手解惑!
tuerqidi
tuerqidi
没有明白使用的场景,请多多讲解!
翟志军
翟志军

引用来自“zhjx922”的评论

lua_code_cache off;
content_by_lua_file 把业务代码放到Lua文件,不需要重启
了解了。多谢。
zhjx922
zhjx922
lua_code_cache off;
content_by_lua_file 把业务代码放到Lua文件,不需要重启
写在《分布式服务架构:原理、设计与实战》印刷量超过一万

《分布式服务架构:原理、设计与实战》自2017年7月份出版以来,到现在已经印刷超过了一万本,深的小伙伴们的好评,有些小伙伴反馈说这是面试经典,读了以后BAT面试通关,而有的小伙伴做了架构...

李艳鹏
02/22
0
0
让我们来谈谈对Linux的认识,值得每一位运维人员深读

Linux系统是使用Linux内核及开源自由软件组成的一套操作系统,是一种类UNIX系统,其内核在1991年10月5日由林纳斯·托瓦兹首次发布。它的主要特性:Linux文件一切皆文件、完全开源免费、支持多...

linuxprobe16
2017/10/29
0
0
让我们来谈谈对Linux的认识,值得每一位运维人员深读

Linux系统是使用Linux内核及开源自由软件组成的一套操作系统,是一种类UNIX系统,其内核在1991年10月5日由林纳斯·托瓦兹首次发布。它的主要特性:Linux文件一切皆文件、完全开源免费、支持多...

linux-tao
2017/10/29
0
0
让我们来谈谈对Linux的认识,值得每一位运维人员深读

Linux系统是使用Linux内核及开源自由软件组成的一套操作系统,是一种类UNIX系统,其内核在1991年10月5日由林纳斯·托瓦兹首次发布。它的主要特性:Linux文件一切皆文件、完全开源免费、支持多...

linuxCool
2017/10/29
0
0
模仿微信图片点击全屏效果

转载请注明出处:王亟亟的大牛之路 昨天想着模仿写些什么,然后觉得什么仿京东啊,仿美团之类的外面都有,正好又找到点资源就写了这篇“高仿微信图片放大” 废话不多说,先看下效果: 先是微...

ddwhan0123
2016/04/13
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

移除或自定义 WordPress 仪表盘欢迎面板

第一次登录 WordPress 后台仪表盘页面,默认都会显示 WordPress 的欢迎面板: 如果我们要移除这个面板,在主题的 functions.php 中添加下面的代码即可: 12 //移除 WordPress 仪表盘欢迎面...

james_laughing
10分钟前
0
0
HashMap实现原理及源码分析

HashMap实现原理及源码分析   哈希表(hash table)也叫散列表,是一种非常重要的数据结构,应用场景及其丰富,许多缓存技术(比如memcached)的核心其实就是在内存中维护一张大的哈希表,...

DemonsI
14分钟前
0
0
eggjs学习笔记

快速初始化 生成项目(要求最低的node版本8.x) npm i egg-init -gegg-init egg-example --type=simplecd egg-examplenpm i 启动项目 npm run dev 配置 环境配置会覆盖默认配置 config...

别人说我名字很长
17分钟前
1
0
Winform Timer控件时间间隔

sender as System.Timers.Timer).Interval = 23 * 60 * 60 * 1000.0;//将时间间隔改为23小时,23小时后重新发生timer_Elapsed事件。 //60000:时间间隔1分钟,300000:时间间隔5分钟,600000:...

笑丶笑
17分钟前
0
0
在win10系统下怎样快速切换任务视图

切换窗口:Alt + Tab 任务视图:Win + Tab (松开键盘界面不会消失) 切换任务视图:Win + Ctrl +左/右 创建新的虚拟桌面:Win + Ctrl + D 关闭当前虚拟桌面:Win + Ctrl + F4...

SummerGao
21分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部