[技术交流] 千万级数据用帝国如何搞数据库？分表蛋疼啊~~ [复制链接]
查看:11172 | 回复:49

leexiaochong · 发表于 2015-7-24 14:11:29

感觉单表存储50万、400万、1000万在只做存储和基本的按Id读取没有什么区别。

天上人间 · 发表于 2015-7-24 14:11:47

不是很懂，帝国没有按日期分表的吗？

crazy · 发表于 2015-7-24 14:14:04

yuewolf 发表于 2015-7-24 14:02
重新看了一遍WC在帝国6.0时代的2000万信息测试，其中有一句：

无论是MySQL还是MSSQL，大了，都不行，单个文件过大导致读/写一次会耗费大量资源。
从目前的硬件发展条件来看，几个G的单表在读取方面应该问题不是很大，但是10G以上请考虑分表吧。

数据 24.2 GB
索引 7.2 GB
总计 31.4 GB
行数 87,163,110

这是落伍的post表，我相信帝国在8千万数据时，单表不会比这个小得了多少，甚至更大。

crazy · 发表于 2015-7-24 14:16:48

yuewolf 发表于 2015-7-24 13:29
Crazy 哥，您的意思是这样分区以后，单表也搞得定？

理论上是这样，实际行动中得稍微灵活变通。有时候MyISAM表表现也非常不错

yuewolf · 发表于 2015-7-24 14:33:32

leexiaochong 发表于 2015-7-24 14:11
感觉单表存储50万、400万、1000万在只做存储和基本的按Id读取没有什么区别。

帝国的副表可以自动分表。

主表里面一般只有标题摘要缩略图一张还有一些置顶推荐栏目ID等数字信息，所以WC会这么说。

内容一般放副表了的。

yuewolf · 发表于 2015-7-24 14:44:10

crazy 发表于 2015-7-24 14:14
无论是MySQL还是MSSQL，大了，都不行，单个文件过大导致读/写一次会耗费大量资源。
从目前的硬件发展条 ...

帝国的index表字段比较少是9G多；

news 算是一个索引一样的，字段我定义得也少，还改了char等类型为varchar ，是60多G；

内容存在副表中，300多G。

iceteaa · 发表于 2015-7-24 15:05:04

这么大主机费赚的回来吗

yuewolf · 发表于 2015-7-24 15:11:20

iceteaa 发表于 2015-7-24 15:05
这么大主机费赚的回来吗

试试看呗

wuzhicheng · 发表于 2015-7-24 15:13:18

楼主是做采集站的吧，弱弱的问下，多少ip呢

hxr009 · 发表于 2015-7-24 15:20:52

360doc到不如做百度文库

百独托管7500 紫田网络	超高转化播放器收cps[推荐]	速盾CDN 免实名免备防屏蔽	阿里云爆款特卖9.9元封顶	提升alexa、IP流量7Q5团队
【腾讯云】中小企福利专场	【腾讯云】多款产品1折起	高防随时退换好耶数据	小飞国外网赚带你月入万元	炎黄网络4H4G10M 99每月
香港带宽CN2/美国站群优惠	中客数据中心服务器租用	联盟系统移动广告平台中易	企业专场腾讯云服务器2.5折	九九数据工信部正规资质
腾讯云新用户大礼包代金券	高价收cpa注册量高价展示	【腾讯云】2核2G/9.93起	租服务器找45互联随时退换	阿里云短信服务验证秒达

[技术交流] 千万级数据用帝国如何搞数据库？分表蛋疼啊~~ [复制链接]
查看:11172 | 回复:49

QQ绑定

落伍微信绑定

落伍手机绑定

[技术交流] 千万级数据用帝国如何搞数据库？分表蛋疼啊~~ [复制链接] 查看:11172 | 回复:49

QQ绑定

落伍微信绑定

落伍手机绑定

[技术交流] 千万级数据用帝国如何搞数据库？分表蛋疼啊~~ [复制链接]
查看:11172 | 回复:49