亿级-采集X姐姐资料及图片 数据量巨大应该选择什么存储？-我是小蜜蜂

图片及数据库应该怎么选择存储？阿里云的成品数据库好贵

数据库：MongoDB or MariaDB（MySQL）
图片存储：自建 or 第三方

热议
推荐楼 holinhot 昨天20:38

一台机子18TB x36 做raid6 后612TB可用。
你上3个柜就行了，多大点事啊。

这肯定比你用s3便宜100倍

你这种业务根本用不起什么阿里云 亚马逊云 到头来只会赔钱，别说存储，就算存上去了后面流出宽带费都是百万美金

推荐楼 eny 昨天21:12

算个帐：
假设高清到相机直出那种 一张20MB 一套套图50张，那么一套套图占1GB
一共19.3PB，那就是有20237516套图，假设19.3PB包含了数据库的，那抹个零就是2000W套图
论坛注册人数125603，mjj们就平均1.5个账号吧，算80000人
假设每个mjj一套撸5分钟，换着套图撸，所有人都足够持久，皮足够厚，需要连续不眠不休撸20.8个小时

2楼 我是小蜜蜂 昨天18:00

数据量太巨大了

3楼 inighty 昨天18:02

往精品做 辣鸡的不要了

4楼 我是小蜜蜂 昨天18:22

往精品做 辣鸡的不要了

很精品的

5楼 CrazyCC 昨天18:41

亿级而已，有多少T？

6楼 我是小蜜蜂 昨天18:45

亿级而已，有多少T？

19.3 PB而已

7楼 bluxessssc 昨天18:47

19.3 PB而已

草 PB .

8楼 千牛 昨天18:49

我觉得可以用word试试

9楼 forgeter 昨天18:49

dmm吧

10楼 require 昨天19:16

19.3 PB而已

nb，这个数据还是买一个机房吧

12楼 hyf3513 昨天19:34

百万级别的我或许还可以说说，这个级别的只能大佬来了

13楼 我是小蜜蜂 昨天19:44

百万级别的我或许还可以说说，这个级别的只能大佬来了

图片太多了，主要是还都是高清套图

14楼 beng 昨天19:44

nvme的固态硬盘+好一点cpu mysql默认配置应该秒级查询结果

15楼 yingbob 昨天19:46

卧槽，图片能有这么大容量

16楼 我是小蜜蜂 昨天19:47

卧槽，图片能有这么大容量

说明你平常不怎么看美女写真

17楼 晴空 昨天19:49

应该没有那个站有这么大的量把

18楼 sah 昨天19:57

图呢，不分享几张么

19楼 心乐 昨天19:58

PB只能自建机房了

20楼 我不是你的 昨天19:59

图片太多了，主要是还都是高清套图

套图分享一下

22楼 dragonfsky 昨天20:10

postgresql 你值得拥有

23楼 micms 昨天20:16

找cf啊找销售聊

24楼 qingchunfeiyang 昨天20:18

找机房谈吧，对他们来说不是很大

25楼 lyhiving 昨天20:18

数据库选mongodb吧，大几千万的数据没问题。
储存的话估计用第三方会好点，毕竟除了储存还要冗余

26楼 CrazyCC 昨天20:21

19.3 PB而已

如果是19PB 你咋统计的，都还没爬下来。PB直接投资机房好吧

27楼 Yzindex 昨天20:21

大佬这么多数据……
起码日入过万吧？
找大厂应该很好谈。

28楼 Liu`e 昨天20:26

这么大容量直接自建 MinIO + PostgreSQL 就能搞定。

29楼 holinhot 昨天20:38

一台机子18TB x36 做raid6 后612TB可用。
你上3个柜就行了，多大点事啊。

这肯定比你用s3便宜100倍

你这种业务根本用不起什么阿里云 亚马逊云 到头来只会赔钱，别说存储，就算存上去了后面流出宽带费都是百万美金

30楼 yingbob 昨天20:41

采的哪个站

32楼 eny 昨天21:12

算个帐：
假设高清到相机直出那种 一张20MB 一套套图50张，那么一套套图占1GB
一共19.3PB，那就是有20237516套图，假设19.3PB包含了数据库的，那抹个零就是2000W套图
论坛注册人数125603，mjj们就平均1.5个账号吧，算80000人
假设每个mjj一套撸5分钟，换着套图撸，所有人都足够持久，皮足够厚，需要连续不眠不休撸20.8个小时

33楼 三和大神 昨天21:53

数据库选 PostgreSQL + Redis 绝对满足你。

存储的话，PB级上公有云明显不划算，强烈建议IDC租机房，然后自己买NetApp、EMC、Vantara这种成品存储。当然，使用普通服务器组SDS超融合方案也可以。

如果实在想要便宜点的云存储，可以找Backblaze谈谈看他们接不接单，他们家放温数据还是可行的

34楼 laianguo 昨天21:56

数据缺是很大 可以利用起来就赚了

35楼 起床夨贁 昨天22:03

都是什么XJJ。

36楼 yrj 7小时前

一亿数据，只存图片索引，数据库比较好选型。19pb，你的难点在存储上。

37楼 streamer 6小时前

好奇你现在存在哪的

38楼 yingaoyun 5小时前

19PB套图？这么多数据准备拿来干什么

39楼 flcx 4小时前

这不得跟P站谈合作？视频要有，图片也不能落下啊

40楼 我是小蜜蜂 2小时前

好奇你现在存在哪的

先做还没爬完 ，爬下来没地方存

申明：本文内容由网友收集分享，仅供学习参考使用。如文中内容侵犯到您的利益，请在文章下方留言，本站会第一时间进行处理。