Обработчик ресурсов вернул сообщение: «Размер разархивированного файла должен быть меньше 262144000 байт AWS Lambda и CDK, файл serverless.yaml отсутствует.

Я пытаюсь заставить функцию Lambda работать с AWS CDK. Я реализовал лямбда-функцию в python и хочу включить внешние библиотеки в свой лямбда-код. В настоящее время это мой код CDK:

import aws_cdk as core
from aws_cdk import (
    Stack,
    aws_lambda as _lambda,
    aws_apigateway as apigw,
)


class SportsTeamGeneratorStack(Stack):

    def __init__(self, scope: Construct, id: str, **kwargs) -> None:
        super().__init__(scope, id, **kwargs)
        
        my_lambda = _lambda.Function(self, 'HelloHandler',
            runtime=_lambda.Runtime.PYTHON_3_8,
                code=_lambda.Code.from_asset("lambda",
                    bundling= core.BundlingOptions(
                        image=_lambda.Runtime.PYTHON_3_8.bundling_image,
                        command=[
                            "bash", "-c",
                            "pip install --no-cache -r requirements.txt -t /asset-output && cp -au . /asset-output"
                        ],
                    ),
                ),
            handler='hello.handler',
        )

        apigw.LambdaRestApi(
            self, 'Endpoint',
            handler=my_lambda,
        )

И это мой лямбда-код:

import json
import pandas

def handler(event, context):
    print('request: {}'.format(json.dumps(event)))
    return {
        'statusCode': 200,
        'headers': {
            'Content-Type': 'text/plain'
        },
        'body': 'Hello, CDK! You have hit {}\n'.format(event['path'])
    }

Код cdk находится в каталоге с именем sports_team_generator, а код лямбда — в файле hello.py, расположенном в каталоге с именем «лямбда». В каталоге «лямбда» у меня также есть файл requirements.txt, который содержит следующее:

aws-cdk-lib==2.19.0
constructs>=10.0.0,<11.0.0
pytz==2022.1
requests==2.27.1
sportsipy==0.6.0
numpy==1.22.3
pandas==1.4.2
pyquery >= 1.4.0

В настоящее время я пытаюсь избежать использования ECR для загрузки образов докеров, а затем связывать эти изображения с лямбда-функциями в консоли, так как я хочу делать все через CDK. Я чувствую, что сама лямбда маленькая, и понятия не имею, почему она может превышать требования к размеру. Кажется, что проблема связана с файлом requirements.txt, и я не уверен, что есть какой-то обходной путь. Предпочтительно, чтобы я исправил эту ошибку, хотя, если это невозможно, я мог бы создать образ докера и загрузить его в ECR, а также связать этот экземпляр ECR с лямбда-функцией через cdk, если это возможно. Если у кого-то есть решение/предложения, пожалуйста, дайте мне знать.

Анализ настроения постов в Twitter с помощью Python, Tweepy и Flair
Анализ настроения постов в Twitter с помощью Python, Tweepy и Flair
Анализ настроения текстовых сообщений может быть настолько сложным или простым, насколько вы его сделаете. Как и в любом ML-проекте, вы можете выбрать...
7 лайфхаков для начинающих Python-программистов
7 лайфхаков для начинающих Python-программистов
В этой статье мы расскажем о хитростях и советах по Python, которые должны быть известны разработчику Python.
Установка Apache Cassandra на Mac OS
Установка Apache Cassandra на Mac OS
Это краткое руководство по установке Apache Cassandra.
Сертификатная программа "Кванты Python": Бэктестер ансамблевых методов на основе ООП
Сертификатная программа "Кванты Python": Бэктестер ансамблевых методов на основе ООП
В одном из недавних постов я рассказал о том, как я использую навыки количественных исследований, которые я совершенствую в рамках программы TPQ...
Создание персонального файлового хранилища
Создание персонального файлового хранилища
Вы когда-нибудь хотели поделиться с кем-то файлом, но он содержал конфиденциальную информацию? Многие думают, что электронная почта безопасна, но это...
Создание приборной панели для анализа данных на GCP - часть I
Создание приборной панели для анализа данных на GCP - часть I
Недавно я столкнулся с интересной бизнес-задачей - визуализацией сбоев в цепочке поставок лекарств, которую могут просматривать врачи и...
1
0
26
1
Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

Боюсь, у вас единственный вариант — развернуть лямбду из контейнера, см. https://docs.aws.amazon.com/lambda/latest/dg/gettingstarted-limits.html

Максимальный размер распакованного пакета развертывания из zip составляет 250 МБ. Уровни Lambda также не помогают, так как общий размер пакета развертывания всех уровней должен быть меньше 250 МБ.

Однако предельный размер пакета кода образа контейнера составляет 10 ГБ. Поэтому, если вы не можете уменьшить размер пакета вашей лямбды до 250 МБ, контейнеры — это то, что вам нужно. Руководство по регистрации контейнера и его использованию для лямбда-развертывания находится по адресу https://docs.aws.amazon.com/lambda/latest/dg/images-create.html и https://aws.amazon.com/blogs/aws/new-for-aws-lambda-container-image-support/.

Спасибо за комментарий. Я только что выбрал решение для докеров. Для тех, кому интересно, я только что создал метод Python с синтаксисом, идентичным лямбде, и связал его с помощью докера. Затем я загрузил его в ECR, создал лямбду и соединил их вместе.

Jack Gitter 07.04.2022 16:26

Другие вопросы по теме