分享

lz4编译后运行报错

一颗银杏树 发表于 2017-3-13 16:31:33 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 7723
本帖最后由 一颗银杏树 于 2017-3-13 16:33 编辑

java.lang.RuntimeException: native lz4 library not available
        at org.apache.hadoop.io.compress.Lz4Codec.getCompressorType(Lz4Codec.java:125)
        at org.apache.hadoop.io.compress.CodecPool.getCompressor(CodecPool.java:150)
        at org.apache.hadoop.io.compress.CompressionCodec$Util.createOutputStream            WithCodecPool(CompressionCodec.java:131)
        at org.apache.hadoop.io.compress.Lz4Codec.createOutputStream(Lz4Codec.java:87)
        at com.it18zhang.hadoopIO.CompressForAll.compressForAll(CompressForAll.java:45)
        at com.it18zhang.hadoopIO.CompressForAll.testAllCodec(CompressForAll.java:31)
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.lang.reflect.Method.invoke(Method.java:498)
        at org.junit.runners.model.FrameworkMethod$1.runReflectiveCall(FrameworkMethod.java:47)
        at org.junit.internal.runners.model.ReflectiveCallable.run(ReflectiveCallable.java:12)
        at org.junit.runners.model.FrameworkMethod.invokeExplosively(FrameworkMethod.java:44)
        at org.junit.internal.runners.statements.InvokeMethod.evaluate(InvokeMethod.java:17)
        at org.junit.runners.ParentRunner.runLeaf(ParentRunner.java:271)
        at org.junit.runners.BlockJUnit4ClassRunner.runChild(BlockJUnit4ClassRunner.java:70)
        at org.junit.runners.BlockJUnit4ClassRunner.runChild(BlockJUnit4ClassRunner.java:50)
        at org.junit.runners.ParentRunner$3.run(ParentRunner.java:238)
        at org.junit.runners.ParentRunner$1.schedule(ParentRunner.java:63)
        at org.junit.runners.ParentRunner.runChildren(ParentRunner.java:236)
        at org.junit.runners.ParentRunner.access$000(ParentRunner.java:53)
        at org.junit.runners.ParentRunner$2.evaluate(ParentRunner.java:229)
        at org.junit.internal.runners.statements.RunBefores.evaluate(RunBefores.java:26)
        at org.junit.runners.ParentRunner.run(ParentRunner.java:309)
        at org.eclipse.jdt.internal.junit4.runner.JUnit4TestReference.run(JUnit4TestReference.java:86)
        at org.eclipse.jdt.internal.junit.runner.TestExecution.run(TestExecution.java:38)
        at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.runTests(RemoteTestRunner.java:459)
        at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.runTests(RemoteTestRunner.java:678)
        at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.run(RemoteTestRunner.java:382)
        at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.main(RemoteTestRunner.java:192)

编译后的so文件在/usr/lib目录下:
root@ubuntu1:/soft/lz4-r127# ls -al /usr/lib/liblz4.*
-rw-r--r-- 1 root root 90212 Mar 13 15:44 /usr/lib/liblz4.a
lrwxrwxrwx 1 root root    15 Mar 13 15:44 /usr/lib/liblz4.so -> liblz4.so.1.5.0
lrwxrwxrwx 1 root root    15 Mar 13 15:44 /usr/lib/liblz4.so.1 -> liblz4.so.1.5.0
-rwxr-xr-x 1 root root 86855 Mar 13 15:44 /usr/lib/liblz4.so.1.5.0

hadoop是2.7.3版本,里面自带有lz4自带的codec
哪位大神知道这是什么原因吗?





已有(2)人评论

跳转到指定楼层
easthome001 发表于 2017-3-13 17:10:54
楼主尝试下面两个方法看是否有包hadoop-gpl-compression-0.*.0.jar,如果有的话,就删掉,再试试
或则执行下面脚本试试

export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/usr/local/lib:/usr/lib





回复

使用道具 举报

一颗银杏树 发表于 2017-3-14 17:00:59
easthome001 发表于 2017-3-13 17:10
楼主尝试下面两个方法看是否有包hadoop-gpl-compression-0.*.0.jar,如果有的话,就删掉,再试试
或则执行 ...

米有hadoop-gpl-compression-0.*.0.jar这个包,那个环境变量写进.profile也不行。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条