学用FFI调用C在lua-resty-string实现murmurhash2的过程中遇到的一些问题

lhmwzy · 2014-04-02T13:29:12+00:00

了解了~~我重构了这部分搞定~2014-04-01 22:26 GMT+08:00 DeJiang Zhu <douj...@gmail.c...

学用FFI调用C在lua-resty-string实现murmurhash2的过程中遇到的一些问题

lhmwzy

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？

C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

lhmwzy

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

plc1989

function hash2(string,key)

local len = string.len(string)

local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)

end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

lhmwzy

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--
class="HOEnZb">

--

plc1989

你是指没有调用像local lib = ffi.load("c库名")这样的语句吧?

2014-04-02 21:55 GMT+08:00 lhmwzy <lh...@gmail.com>:

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

--

--

lhmwzy

对的。

在 2014年4月2日下午10:03，aCayF <plc...@gmail.com>写道：

你是指没有调用像local lib = ffi.load("c库名")这样的语句吧?

2014-04-02 21:55 GMT+08:00 lhmwzy <lh...@gmail.com>:

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

--

--

--

lhmwzy

但也可以像lua-resty-core那样，不再另外编译库
可以参考
bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件中的
ngx_http_lua_ffi_*的相关函数

ffi的调用，可以看lua-resty-core目录下的lua文件

在 2014年4月2日下午10:05，lhmwzy <lh...@gmail.com>写道：

对的。

在 2014年4月2日下午10:03，aCayF <plc...@gmail.com>写道：

你是指没有调用像local lib = ffi.load("c库名")这样的语句吧?

2014-04-02 21:55 GMT+08:00 lhmwzy <lh...@gmail.com>:

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

--

--

--

plc1989

我看了看你的lua库代码,看到你调用了module(...)函数,强烈建议不要使用这样的方式编写lua库代码,它有很多副作用,可以参考章老师写的官方lua库代码的编写方式

2014-04-02 22:11 GMT+08:00 lhmwzy <lh...@gmail.com>:

但也可以像lua-resty-core那样，不再另外编译库
可以参考
bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件中的
ngx_http_lua_ffi_*的相关函数

ffi的调用，可以看lua-resty-core目录下的lua文件

在 2014年4月2日下午10:05，lhmwzy <lh...@gmail.com>写道：

对的。

在 2014年4月2日下午10:03，aCayF <plc...@gmail.com>写道：

你是指没有调用像local lib = ffi.load("c库名")这样的语句吧?

2014-04-02 21:55 GMT+08:00 lhmwzy <lh...@gmail.com>:

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

--

--

--

--

plc1989

具体有什么副作用,你可以在坛子里搜索下module()副作用:)

2014-04-02 22:15 GMT+08:00 aCayF <plc...@gmail.com>:

我看了看你的lua库代码,看到你调用了module(...)函数,强烈建议不要使用这样的方式编写lua库代码,它有很多副作用,可以参考章老师写的官方lua库代码的编写方式

2014-04-02 22:11 GMT+08:00 lhmwzy <lh...@gmail.com>:

但也可以像lua-resty-core那样，不再另外编译库
可以参考
bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件中的
ngx_http_lua_ffi_*的相关函数

ffi的调用，可以看lua-resty-core目录下的lua文件

在 2014年4月2日下午10:05，lhmwzy <lh...@gmail.com>写道：

对的。

在 2014年4月2日下午10:03，aCayF <plc...@gmail.com>写道：

你是指没有调用像local lib = ffi.load("c库名")这样的语句吧?

2014-04-02 21:55 GMT+08:00 lhmwzy <lh...@gmail.com>:

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

--

--

--

--

lhmwzy

好的，谢谢指正，我现在先保正确，然后再优化。

在 2014年4月2日下午10:16，aCayF <plc...@gmail.com>写道：

具体有什么副作用,你可以在坛子里搜索下module()副作用:)

2014-04-02 22:15 GMT+08:00 aCayF <plc...@gmail.com>:

我看了看你的lua库代码,看到你调用了module(...)函数,强烈建议不要使用这样的方式编写lua库代码,它有很多副作用,可以参考章老师写的官方lua库代码的编写方式

2014-04-02 22:11 GMT+08:00 lhmwzy <lh...@gmail.com>:

但也可以像lua-resty-core那样，不再另外编译库
可以参考
bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件中的
ngx_http_lua_ffi_*的相关函数

ffi的调用，可以看lua-resty-core目录下的lua文件

在 2014年4月2日下午10:05，lhmwzy <lh...@gmail.com>写道：

对的。

在 2014年4月2日下午10:03，aCayF <plc...@gmail.com>写道：

你是指没有调用像local lib = ffi.load("c库名")这样的语句吧?

2014-04-02 21:55 GMT+08:00 lhmwzy <lh...@gmail.com>:

多谢指出错误，这个错误在今天已经修正了。
今天弄明白了错误所在了，必须要将所定义的C函数统计进来。
昨天这个，定义以后，并没有编译进来，所以造成引用错误。

想问一下春哥
将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来

2014-04-02 20:52 GMT+08:00 aCayF <plc...@gmail.com>:

function hash2(string,key)
local len = string.len(string)
local hash = C.ndk_murmur2_hash(string,len,key)

return ffi_str(hash)
end

这两个红色标记的string有歧义呀,前一个你想指lua自带的string关键字,后一个string你又想指你传参的string,语法错误了吧?

On 2 April 2014 13:36, lhmwzy <lh...@gmail.com> wrote:

需要调整一下某些地方的Makefile？

2014-04-02 13:29 GMT+08:00 lhmwzy <lh...@gmail.com>:

1、在resty目录下，写了一个murmur.lua，里面用ffi调用
local ffi = require "ffi"
local ffi_new=ffi.new
local C =ffi.C
local ffi_str = ffi.string
local setmetatable=setmetatable
local error = error

module(...)
_VERSION='0.01'

local mt={__index = _M}

ffi.cdef[[

void ndk_murmur2_hash(const void * data, int len,unsigned int seed);
void ndk_murmur264A_hash(const void * data, int len,unsigned uint64_t seed);

]]

function hash2(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur2_hash(string,len,key)
        return ffi_str(hash)
end

function hash264A(string,key)
        local len = string.len(string)
        local hash = C.ndk_murmur264A_hash(string,len,key)
        return ffi_str(hash)
end

local class_mt = {
    -- to prevent use of casual module global variables
    __newindex = function (table, key, val)
        error('attempt to write to undeclared variable "' .. key .. '"')
    end
}

2、在ngx_devel_kit-0.2.19/src/hash/murmurhash2.c文件中定义两个函数
unsigned int MurmurHash2 ( const void * key, int len, unsigned int seed )
uint64_t MurmurHash64A ( const void * key, int len, uint64_t seed )

3、在ngx_devel_kit-0.2.19/src/ndk_hash.c定义
void
ndk_murmur2_hash (u_char *p, char *data, size_t len)
{
     uint32_t    hash;

     hash = MurmurHash2 (data, len, 47);

     ndk_hex_dump (p, (u_char*) &hash, 4);
}

void
ndk_murmur264A_hash (u_char *data, size_t len,size_t seed)
{
      uint64_t    hash;
      seed = (uint64_t)seed
     hash = MurmurHash64A(data, len, seed);
}

4、在nginx/conf/目录下建立一个文件mur.lua
local mur= require "resty.murmur"
ngx.say(mur.hash2("test",33))
在nginx.conf中调用
content_by_lua_file 'conf/mur.lua';

运行报错：

2014/04/01 16:09:06 [error] 89643#0: *2 lua entry thread aborted: runtime error: /usr/local/openresty/nginx/conf/mur.lua:2: attempt to call field 'hash2' (a nil value)
stack traceback:
coroutine 0:
        /usr/local/openresty/nginx/conf/mur.lua: in function </usr/local/openresty/nginx/conf/mur.lua:1>, client: 10.68.143.131, server: 10.68.150.6, request: "GET /mur HTTP/1.    1", host: "10.68.150.6"

我哪里写得不对？
C语言我觉得不是很好，照葫芦画瓢，写得不对的地方，请大家多多包涵。

--

--

--

--

--

--

agentzh

Hello!

2014-04-02 6:55 GMT-07:00 lhmwzy:
> 想问一下春哥
> 将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来
>

我在 gtalk 上和你说过了呀，我不希望把这个加进标准 ngx_lua 的核心 API. 这个应该放进 lua-resty-string 这样的外部库中：

    https://github.com/agentzh/lua-resty-string

Regards,
-agentzh

lhmwzy

嗯，这个我记得。
我想问的是我定义的两个函数，unsigned int murmurhash2和uint64_t murmurhash264A我该放在哪个文件中？

ffi调用murmur2.lua可放在lua-resty-string中。

另外，lua-resty-string中的lua依然使用了


module(...)

_VERSION = '0.08'


这样的定义方式，春哥一年多没更新过了。

在 2014年4月3日上午2:12，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2014-04-02 6:55 GMT-07:00 lhmwzy:

> 想问一下春哥
> 将自定义的murmurhash2的函数放在bundle\ngx_lua-0.9.4\src目录下的ngx_http_lua_string.c文件里，还是另外在某个目录增加一个文件，然后将此文件作为模块编译进来
>

我在 gtalk 上和你说过了呀，我不希望把这个加进标准 ngx_lua 的核心 API. 这个应该放进 lua-resty-string 这样的外部库中：

https://github.com/agentzh/lua-resty-string

Regards,
-agentzh

--

agentzh

Hello!

2014-04-02 16:29 GMT-07:00 lhmwzy:
> 嗯，这个我记得。
> 我想问的是我定义的两个函数，unsigned int murmurhash2和uint64_t murmurhash264A我该放在哪个文件中？

可以参考现有的函数的做法。

> 另外，lua-resty-string中的lua依然使用了
> module(...)
> _VERSION = '0.08'
> 这样的定义方式，春哥一年多没更新过了。
>

欢迎贡献补丁 :)

Regards,
-agentzh

lhmwzy

>可以参考现有的函数的做法。

还是很疑惑。我看ngx_lua中与ngx_http_lua_ffi_*相关定义的函数，这些函数都是与nginx相关的api，我知道murmur的定义放在这里面可能有点不伦不类。

lua-resty-*中，都是lua，未有涉及到自定义的C函数的放置问题。

春哥，您有空就举个例子说明一下吧，也为以后其他人提供类似patch的时候，有个规范。

在 2014年4月3日上午7:42，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2014-04-02 16:29 GMT-07:00 lhmwzy:

> 嗯，这个我记得。
> 我想问的是我定义的两个函数，unsigned int murmurhash2和uint64_t murmurhash264A我该放在哪个文件中？

可以参考现有的函数的做法。

> 另外，lua-resty-string中的lua依然使用了
> module(...)
> _VERSION = '0.08'
> 这样的定义方式，春哥一年多没更新过了。
>

欢迎贡献补丁 :)

Regards,
-agentzh

--

agentzh

Hello!

2014-04-02 16:59 GMT-07:00 lhmwzy:
> 还是很疑惑。我看ngx_lua中与ngx_http_lua_ffi_*相关定义的函数，这些函数都是与nginx相关的api，我知道murmur的定义放在这里面可能有点不伦不类。
> lua-resty-*中，都是lua，未有涉及到自定义的C函数的放置问题。
>

一般应该按如下的顺序来考虑实现：

1. 如果 nginx 中有现成的 C API，直接通过 FFI 调用之；
2. 如果有现成的 C 库可供使用，则直接通过 ffi.load() 加载之；
3. 必须引入自己的 C 实现，则将之编译为 .so，然后通过 ffi.load() 加载之。

Regards,
-agentzh

lhmwzy

提交了pull request，春哥看看吧

在 2014年4月3日上午7:42，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2014-04-02 16:29 GMT-07:00 lhmwzy:

> 嗯，这个我记得。
> 我想问的是我定义的两个函数，unsigned int murmurhash2和uint64_t murmurhash264A我该放在哪个文件中？

可以参考现有的函数的做法。

> 另外，lua-resty-string中的lua依然使用了
> module(...)
> _VERSION = '0.08'
> 这样的定义方式，春哥一年多没更新过了。
>

欢迎贡献补丁 :)

Regards,
-agentzh

--