amazon-s3 - 在 Git Repo 与 S3 中存储 NLP 模型?

标签 amazon-s3 machine-learning nlp

存储 NLP 模型的最佳方式是什么?我有多个 NLP 模型,总共大小约为 800MB。我的代码将在启动时将模型加载到内存中。不过我想知道存储模型的最佳方式是什么。我应该将其存储在 git repo 中,然后可以直接从本地系统加载,还是应该存储在 S3 等外部位置并从那里加载?各自的优点/缺点是什么?或者人们是否使用了我没有考虑过的其他方法?

最佳答案

您的 NLP 模型需要版本控制吗?您是否需要恢复到以前的 NLP 模型?如果情况并非如此,将您的工件存储在 S3 存储桶中当然就足够了。如果你打算长期存储很多NLP模型,我也推荐AWS Glacier 。对于长期储存来说,冰川是一种极具成本效益的方法。

关于amazon-s3 - 在 Git Repo 与 S3 中存储 NLP 模型?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/44191060/

相关文章:

machine-learning - BaggingClassifier 每次都会获取所有数据集

python - 在线求职很乏味。帮我自动化

javascript - 给定字典和字母列表,让程序学习生成有效单词 | Javascript

mysql - s3 key 最接近的 mysql 类型是什么?

amazon-s3 - 如何保护我的Amazon S3照片,但仍通过URL使它们可用?

c# - 使用 Sagemaker 获取 Amazon.RegionEndpoint 的冲突错误

django - 如何在heroku上设置django-compressor,离线压缩到S3

frameworks - 机器学习人工智能框架的设计

python - 人脸识别keras维数问题

python - 识别出现在语料库文档中少于 1% 的单词