如何建立与Django的储存和Amazon S3一个Django项目,但对静态文件和媒体文件不同的文

2019-05-13 18:00发布

我配置使用的服务器的文件系统,用于存储应用程序的静态文件(即一个Django项目STATIC_ROOT )和用户上传的文件( MEDIA_ROOT )。

我现在需要主办Amazon的S3所有的内容,所以我创建了一个水桶这一点。 使用django-storagesboto存储后端,我设法收集静态上传到S3斗:

MEDIA_ROOT = '/media/'
STATIC_ROOT = '/static/'

DEFAULT_FILE_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
AWS_ACCESS_KEY_ID = 'KEY_ID...'
AWS_SECRET_ACCESS_KEY = 'ACCESS_KEY...'
AWS_STORAGE_BUCKET_NAME = 'bucket-name'
STATICFILES_STORAGE = 'storages.backends.s3boto.S3BotoStorage'

然后,我有一个问题: MEDIA_ROOTSTATIC_ROOT不斗内使用,所以斗根同时包含静态文件和用户上传的路径。

于是我可以设置:

S3_URL = 'http://s3.amazonaws.com/%s' % AWS_STORAGE_BUCKET_NAME
STATIC_URL = S3_URL + STATIC_ROOT
MEDIA_URL = 'S3_URL + MEDIA_ROOT

而在模板中使用这些设置,但有静态/媒体文件S3存储与时没有区别django-storages

这可怎么办呢?

谢谢!

Answer 1:

我认为有以下应该工作,将会比Mandx的方法比较简单,但它是非常相似的:

创建s3utils.py文件:

from storages.backends.s3boto import S3BotoStorage

StaticRootS3BotoStorage = lambda: S3BotoStorage(location='static')
MediaRootS3BotoStorage  = lambda: S3BotoStorage(location='media')

然后在您的settings.py

DEFAULT_FILE_STORAGE = 'myproject.s3utils.MediaRootS3BotoStorage'
STATICFILES_STORAGE = 'myproject.s3utils.StaticRootS3BotoStorage'

一个不同但相关的例子(我已经实际测试)可以在这两个可以看出example_文件在这里 。



Answer 2:

我目前使用此代码的分离s3utils模块:

from django.core.exceptions import SuspiciousOperation
from django.utils.encoding import force_unicode

from storages.backends.s3boto import S3BotoStorage


def safe_join(base, *paths):
    """
    A version of django.utils._os.safe_join for S3 paths.

    Joins one or more path components to the base path component intelligently.
    Returns a normalized version of the final path.

    The final path must be located inside of the base path component (otherwise
    a ValueError is raised).

    Paths outside the base path indicate a possible security sensitive operation.
    """
    from urlparse import urljoin
    base_path = force_unicode(base)
    paths = map(lambda p: force_unicode(p), paths)
    final_path = urljoin(base_path + ("/" if not base_path.endswith("/") else ""), *paths)
    # Ensure final_path starts with base_path and that the next character after
    # the final path is '/' (or nothing, in which case final_path must be
    # equal to base_path).
    base_path_len = len(base_path) - 1
    if not final_path.startswith(base_path) \
       or final_path[base_path_len:base_path_len + 1] not in ('', '/'):
        raise ValueError('the joined path is located outside of the base path'
                         ' component')
    return final_path


class StaticRootS3BotoStorage(S3BotoStorage):
    def __init__(self, *args, **kwargs):
        super(StaticRootS3BotoStorage, self).__init__(*args, **kwargs)
        self.location = kwargs.get('location', '')
        self.location = 'static/' + self.location.lstrip('/')

    def _normalize_name(self, name):
        try:
            return safe_join(self.location, name).lstrip('/')
        except ValueError:
            raise SuspiciousOperation("Attempted access to '%s' denied." % name)


class MediaRootS3BotoStorage(S3BotoStorage):
    def __init__(self, *args, **kwargs):
        super(MediaRootS3BotoStorage, self).__init__(*args, **kwargs)
        self.location = kwargs.get('location', '')
        self.location = 'media/' + self.location.lstrip('/')

    def _normalize_name(self, name):
        try:
            return safe_join(self.location, name).lstrip('/')
        except ValueError:
            raise SuspiciousOperation("Attempted access to '%s' denied." % name)

然后,在我的设置模块:

DEFAULT_FILE_STORAGE = 'myproyect.s3utils.MediaRootS3BotoStorage'
STATICFILES_STORAGE = 'myproyect.s3utils.StaticRootS3BotoStorage'

我得到了重新定义_normalize_name()使用的“固定”版本的私有方法safe_join()函数,因为原来的代码是给我SuspiciousOperation例外法律路径。

我张贴这种考虑,如果任何人都可以提供一个更好的答案或提高这一块,这将是非常欢迎的。



Answer 3:


文件:PROJECT_NAME / custom_storages.py

from django.conf import settings
from storages.backends.s3boto import S3BotoStorage

class StaticStorage(S3BotoStorage):
    location = settings.STATICFILES_LOCATION

class MediaStorage(S3BotoStorage):
    location = settings.MEDIAFILES_LOCATION

文件:PROJECT_NAME / settings.py

STATICFILES_LOCATION = 'static'
MEDIAFILES_LOCATION = 'media'

if not DEBUG:
    STATICFILES_STORAGE = 'PROJECT_NAME.custom_storages.StaticStorage'
    DEFAULT_FILE_STORAGE = 'PROJECT_NAME.custom_storages.MediaStorage'
    AWS_ACCESS_KEY_ID = 'KEY_XXXXXXX'
    AWS_SECRET_ACCESS_KEY = 'SECRET_XXXXXXXXX'
    AWS_STORAGE_BUCKET_NAME = 'BUCKET_NAME'
    AWS_HEADERS = {'Cache-Control': 'max-age=86400',}
    AWS_QUERYSTRING_AUTH = False

并运行: python manage.py collectstatic



Answer 4:

我认为答案是非常简单的,默认情况下完成的。 这是为我工作在AWS弹性魔豆Django的1.6.5和宝途2.28.0:

STATICFILES_FINDERS = (
    'django.contrib.staticfiles.finders.FileSystemFinder',
    'django.contrib.staticfiles.finders.AppDirectoriesFinder',
)

TEMPLATE_LOADERS = (
    'django.template.loaders.filesystem.Loader',
    'django.template.loaders.app_directories.Loader',
)

DEFAULT_FILE_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
STATICFILES_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
AWS_ACCESS_KEY_ID = os.environ['AWS_ACCESS_KEY_ID']
AWS_SECRET_ACCESS_KEY = os.environ['AWS_SECRET_KEY']

AWS的密钥是从容器的配置文件传递,我没有STATIC_ROOTSTATIC_URL设置的。 另外,无需对s3utils.py文件。 这些细节是由存储系统自动处理。 这里的诀窍是,我需要在我的模板正确和动态引用这个未知的路径。 例如:

<link rel="icon" href="{% static "img/favicon.ico" %}">

这就是我如何处理我的图标,其在当地住(部署前) ~/Projects/my_app/project/my_app/static/img/favicon.ico

当然,我有一个单独的local_settings.py文件在开发环境本地访问这个东西,它也有静态和媒体设置。 我不得不做大量的实验和阅读找到这个解决方案,并没有错误都能正常工作。

据我所知,你需要的静态和根分离,并考虑到你只能提供一个斗我想指出的是,这种方法需要的所有文件夹在我的本地环境下的~/Projects/my_app/project/my_app/static/并创建一个文件夹中的桶根(即:S3bucket / IMG /如在上面的例子)。 所以,你得到的文件分离。 例如,你可以有一个media在文件夹static文件夹,并通过模板与此访问:

{% static "media/" %}

我希望这有帮助。 我来到这里寻找答案,并推了一下很难找到比来扩展存储系统,简单的解决方案。 相反,我读到用途宝途的文件,我发现了很多我需要的是内置的默认。 干杯!



文章来源: How to set-up a Django project with django-storages and Amazon S3, but with different folders for static files and media files?