PROSAGA码农传奇-ONOS/AWS Lambda/Kappa-AWS lambda中的Pandas出现numpy错误

0# biu~ | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”>
  
    要在Lambda中获取其他库，我们需要在Amazon Linux上编译它们（如果底层库基于C或C ++，如Numpy，则这很重要），并将它们与要在Lambda中运行的python脚本一起打包为ZIP文件。
  
  
    获取Amazon Linux编译版本的库。您可以找到某个已经编译过的版本，例如@pbegle编译的版本，也可以自己编译。要自己编译，有两种选择：
  - 在EC2实例上编译库
    <a href="https://streetdatascience.com/2016/11/24/using-numpy-and-pandas-on-aws-lambda/" rel="nofollow noreferrer">
      https://streetdatascience.com/2016/11/24/using-numpy-and-pandas-on-aws-lambda/
    </A>
    
  - 在Docker版本的Lambda环境中编译库

<a href="https://serverlesscode.com/post/scikitlearn-with-amazon-linux-container/" rel="nofollow noreferrer">
      https://serverlesscode.com/post/scikitlearn-with-amazon-linux-container/
    </A>
  
  
    在使用Docker的最后一个选项之后，可以使用上面博客文章中的说明并通过添加以下内容使其工作：
  
   <pre>
 <code>
 pip install --use-wheel pandas

</code>
 </pre>
  
    在脚本中编译库：
  
  
    <a href="https://github.com/ryansb/sklearn-build-lambda/blob/master/build.sh#L21" rel="nofollow noreferrer">
      https://github.com/ryansb/sklearn-build-lambda/blob/master/build.sh#L21
    </A>
  
</DIV>

1# 谦成 | 2019-08-31 10-32

2# 没身份别烦我 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”>
  
    使用创建新的本地目录
     <code>
 lambda_function.py
 </code>
     文件。使用pip将Pandas安装到本地目录：
  
   <pre>
 <code>
 $ pip install -t . pandas

</code>
 </pre>
  
    <a href="https://docs.aws.amazon.com/lambda/latest/dg/current-supported-versions.html" rel="nofollow noreferrer">
      AWS Lambda使用Amazon Linux
    </A>
     操作系统。想法是下载
    <a href="https://pypi.org/project/pandas/" rel="nofollow noreferrer">
      熊猫
    </A>
     和
    <a href="https://pypi.org/project/numpy/" rel="nofollow noreferrer">
      NumPy的
    </A>
     兼容
    <a href="https://aws.amazon.com/amazon-linux-ami/" rel="nofollow noreferrer">
      亚马逊Linux
    </A>
    。
  
  
    大熊猫。导航
    <a href="https://pypi.org/project/pandas/#files" rel="nofollow noreferrer">
      https://pypi.org/project/pandas/#files
    </A>
    。搜索并下载最新的
     <code>
 *manylinux1_x86_64.whl
 </code>
     包。在我的情况下，Python 3.6是
    <a href="https://files.pythonhosted.org/packages/e6/de/a0d3defd8f338eaf53ef716e40ef6d6c277c35d50e09b586e170169cdf0d/pandas-0.24.1-cp36-cp36m-manylinux1_x86_64.whl" rel="nofollow noreferrer">
      大熊猫-0.24.1-CP36-cp36m-manylinux1_x86_64.whl
    </A>
     文件。
  
  
    NumPy的。为NumPy做同样的事情。档案是
    <a href="https://files.pythonhosted.org/packages/f5/bf/4981bcbee43934f0adb8f764a1e70ab0ee5a448f6505bd04a87a2fda2a8b/numpy-1.16.1-cp36-cp36m-manylinux1_x86_64.whl" rel="nofollow noreferrer">
      numpy的-1.16.1-CP36-cp36m-manylinux1_x86_64.whl
    </A>
    。
  
  
    将whl文件下载到目录
     <code>
 lambda_function.py
 </code>
    。去掉
     <code>
 pandas
 </code>
    ，
     <code>
 numpy
 </code>
    ，和
     <code>
 *.dist-info
 </code>
     目录。解压缩文件。
  
   <pre>
 <code>
 $ rm -r pandas numpy *.dist-info
$ unzip numpy-1.16.1-cp36-cp36m-manylinux1_x86_64.whl
$ unzip pandas-0.24.1-cp36-cp36m-manylinux1_x86_64.whl

</code>
 </pre>
  
    删除whl文件，
     <code>
 *.dist-info
 </code>
    ，和
     <code>
 __pycache__
 </code>
    。准备
     <code>
 zip.zip
 </code>
     档案：
  
   <pre>
 <code>
 $ rm -r *.whl *.dist-info __pycache__
$ zip -r zip.zip .

</code>
 </pre>
  
    <a href="https://i.stack.imgur.com/BdFlZ.png" rel="nofollow noreferrer">
      <img src =“https://i.stack.imgur.com/BdFlZ.png”alt =“在此处输入图片说明”/>
    </A>
  
  
    资源：
    <a href="https://medium.com/@korniichuk/lambda-with-pandas-fd81aa2ff25e" rel="nofollow noreferrer">
      https://medium.com/@korniichuk/lambda-with-pandas-fd81aa2ff25e
    </A>
  
</DIV>

3# 不易青年。 | 2019-08-31 10-32

4# 回忆氵独奏♪ | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”>
  
    您的代码始终会出现此错误
     
    
因为lambda不包含任何外部库，它有一个默认带有Python的库。
  
  
    的
      如果您使用任何外部库，如熊猫，numpy或任何其他。你需要在Aws Lambda上安装该库
    </强>
     
     在使用它之前
  
  
    看你的代码
  
   <pre>
 <code>
 import json
print('Loading function')
import pandas as pd
def lambda_handler(event, context):
 return "Welcome to Pandas usage in AWS Lambda"

</code>
 </pre>
  
    这里没有安装pandas库，所以你的代码不起作用。

我的建议是使用你的代码如下。在lambda函数中写下你所有的代码
  
   <pre>
 <code>
 import json
def lambda_handler(event, context):
 #install python libray here 
 print('Loading function')
 import pandas as pd
 return "Welcome to Pandas usage in AWS Lambda"

</code>
 </pre>
  
    的
      所以最终代码如下所示
    </强>
  
   <pre>
 <code>
 def lambda_handler(event, context):
 import pip

def install(package):
        if hasattr(pip, 'main'):
            pip.main(['install', package])
        else:
            pip._internal.main(['install', package])

if __name__ == '__main__':
        install('pandas')

#install python libray here 
    print('Loading function')
    import pandas as pd
    return "Welcome to Pandas usage in AWS Lambda"

</code>
 </pre>
</DIV>