云社区云博客博客详情
云社区云博客博客详情

如何使用modelarts训练海量数据

山找海味 发表于 2019-09-03 18:47:0209-03 18:47
山找海味 发表于 2019-09-03 18:47:022019/09/03
0
3

【摘要】 在modelarts上使用notebook上使用evs空间默认大小是5G,能满足大部分文本和图片训练模型的需求。如果训练数据稍微超过这个限额,可以适当的扩增下空间。但如果训练对象是视频,或是实际生成过程中的海量数据,这个空间就显得小了,这时候扩增evs空间就显得很不经济了。最近老山便碰到这样的案例,客户的训练数据大约在1T的量级,在obs上存储的数据结构大概如下图所示。your-obs-na...
【版权声明】本文为亚博电竞官方登录链接8云社区用户原创内容,转载时必须标注文章的来源(亚博电竞官方登录链接8云社区),文章链接,文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:huaweicloud.bbs@huawei.com进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
评论文章 3
点赞
分享文章到微博
分享文章到朋友圈

相关文章


评论 (0)


0/1000
评论

登录后可评论,请 登录注册

评论
温馨提示

您确认删除评论吗?

确定
取消
?
温馨提示

您确认删除评论吗?

删除操作无法恢复,请谨慎操作。

确定
取消
?
温馨提示

您确认删除博客吗?

确定
取消
?

确认删除

您确认删除博客吗?

确认删除

您确认删除评论吗?

温馨提示

登录超时或用户已下线,请重新登录!!!

确定
取消
?