站点图标 谷姐靓号网

亿级-采集X姐姐资料及图片 数据量巨大应该选择什么存储?-我是小蜜蜂

Rate this post

图片及数据库应该怎么选择存储?阿里云的成品数据库好贵

数据库:MongoDB or MariaDB(MySQL)
图片存储:自建 or 第三方

热议
推荐楼 holinhot 昨天20:38

一台机子18TB x36 做raid6 后612TB可用。
你上3个柜就行了,多大点事啊。

这肯定比你用s3便宜100倍

你这种业务根本用不起什么阿里云 亚马逊云 到头来只会赔钱,别说存储,就算存上去了后面流出宽带费都是百万美金

推荐楼 eny 昨天21:12

算个帐:
假设高清到相机直出那种 一张20MB 一套套图50张,那么一套套图占1GB
一共19.3PB,那就是有20237516套图,假设19.3PB包含了数据库的,那抹个零就是2000W套图
论坛注册人数125603,mjj们就平均1.5个账号吧,算80000人
假设每个mjj一套撸5分钟,换着套图撸,所有人都足够持久,皮足够厚,需要连续不眠不休撸20.8个小时

2楼 我是小蜜蜂 昨天18:00

数据量太巨大了

3楼 inighty 昨天18:02

往精品做 辣鸡的不要了

4楼 我是小蜜蜂 昨天18:22

往精品做 辣鸡的不要了

很精品的

5楼 CrazyCC 昨天18:41

亿级而已,有多少T?

6楼 我是小蜜蜂 昨天18:45

亿级而已,有多少T?

19.3 PB而已

7楼 bluxessssc 昨天18:47

19.3 PB而已

草 PB .

8楼 千牛 昨天18:49

我觉得可以用word试试

9楼 forgeter 昨天18:49

dmm吧

10楼 require 昨天19:16

19.3 PB而已

nb,这个数据还是买一个机房吧

12楼 hyf3513 昨天19:34

百万级别的我或许还可以说说,这个级别的只能大佬来了

13楼 我是小蜜蜂 昨天19:44

百万级别的我或许还可以说说,这个级别的只能大佬来了

图片太多了,主要是还都是高清套图

14楼 beng 昨天19:44

nvme的固态硬盘+好一点cpu mysql默认配置应该秒级查询结果

15楼 yingbob 昨天19:46

卧槽,图片能有这么大容量

16楼 我是小蜜蜂 昨天19:47

卧槽,图片能有这么大容量

说明你平常不怎么看美女写真

17楼 晴空 昨天19:49

应该没有那个站有这么大的量把

18楼 sah 昨天19:57

图呢,不分享几张么

19楼 心乐 昨天19:58

PB只能自建机房了

20楼 我不是你的 昨天19:59

图片太多了,主要是还都是高清套图

套图分享一下

22楼 dragonfsky 昨天20:10

postgresql 你值得拥有

23楼 micms 昨天20:16

找cf啊找销售聊

24楼 qingchunfeiyang 昨天20:18

找机房谈吧,对他们来说不是很大

25楼 lyhiving 昨天20:18

数据库选mongodb吧,大几千万的数据没问题。
储存的话估计用第三方会好点,毕竟除了储存还要冗余

26楼 CrazyCC 昨天20:21

19.3 PB而已

如果是19PB 你咋统计的,都还没爬下来。PB直接投资机房好吧

27楼 Yzindex 昨天20:21

大佬这么多数据……
起码日入过万吧?
找大厂应该很好谈。

28楼 Liu`e 昨天20:26

这么大容量直接自建 MinIO + PostgreSQL 就能搞定。

29楼 holinhot 昨天20:38

一台机子18TB x36 做raid6 后612TB可用。
你上3个柜就行了,多大点事啊。

这肯定比你用s3便宜100倍

你这种业务根本用不起什么阿里云 亚马逊云 到头来只会赔钱,别说存储,就算存上去了后面流出宽带费都是百万美金

30楼 yingbob 昨天20:41

采的哪个站

32楼 eny 昨天21:12

算个帐:
假设高清到相机直出那种 一张20MB 一套套图50张,那么一套套图占1GB
一共19.3PB,那就是有20237516套图,假设19.3PB包含了数据库的,那抹个零就是2000W套图
论坛注册人数125603,mjj们就平均1.5个账号吧,算80000人
假设每个mjj一套撸5分钟,换着套图撸,所有人都足够持久,皮足够厚,需要连续不眠不休撸20.8个小时

33楼 三和大神 昨天21:53

数据库选 PostgreSQL + Redis 绝对满足你。

存储的话,PB级上公有云明显不划算,强烈建议IDC租机房,然后自己买NetApp、EMC、Vantara这种成品存储。当然,使用普通服务器组SDS超融合方案也可以。

如果实在想要便宜点的云存储,可以找Backblaze谈谈看他们接不接单,他们家放温数据还是可行的

34楼 laianguo 昨天21:56

数据缺是很大 可以利用起来就赚了

35楼 起床夨贁 昨天22:03

都是什么XJJ。

36楼 yrj 7小时前

一亿数据,只存图片索引,数据库比较好选型。19pb,你的难点在存储上。

37楼 streamer 6小时前

好奇你现在存在哪的

38楼 yingaoyun 5小时前

19PB套图?这么多数据准备拿来干什么

39楼 flcx 4小时前

这不得跟P站谈合作?视频要有,图片也不能落下啊

40楼 我是小蜜蜂 2小时前

好奇你现在存在哪的

先做还没爬完 ,爬下来没地方存

申明:本文内容由网友收集分享,仅供学习参考使用。如文中内容侵犯到您的利益,请在文章下方留言,本站会第一时间进行处理。

退出移动版