<kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

              <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                      <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                              <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                                      <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                                              <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                                                      <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                                                              <kbd id='lAc3SssbmqUzqjN'></kbd><address id='lAc3SssbmqUzqjN'><style id='lAc3SssbmqUzqjN'></style></address><button id='lAc3SssbmqUzqjN'></button>

                                                                  爱赢娱乐国际_知名互联网公司都在行使哪些数据库?(2)

                                                                  作者:爱赢娱乐国际  发布时间:2018-05-01 10:08  点击:898

                                                                    【IT168 专稿】大数据已经成为国度计谋,而大数据起首所面对的题目就是大数据的存储题目,这就绕不开数据库,由于数据库就是用来存储数据的应用软件。任何数据库,都有其优弱点, 无论是传统相关型数据库照旧NoSQL数据库又可能NewSQL数据库。因此,到底选择哪个数据库,对企业而言这个决定进程都很是伟大。

                                                                    就数据库现实应用程度而言,互联网公司显然走在了火线,它们都在行使哪些数据库?别离对应哪些营业场景,为什么会是这样选择?相识的人却并不多。为此,老鱼在DTCC 2017中国数据库技能大会召开前夕,走访了多家知名互联网公司并采访了其技能认真人或DBA,为各人逐一揭秘。

                                                                    (注:部门受访者所属部分范围,因此,以下所列企业营业线对应数据库并不全面,仅列出首要应用数据库,供参考。)

                                                                  知名互联网公司都在行使哪些数据库?(2)


                                                                    本篇为《知名互联网公司都在行使哪些数据库?》系列第二篇,本期内容将为你揭秘新浪网,新浪微博、58抵家、京东、美团外卖、原来糊口网的数据库应用环境及选型来由。

                                                                    假如你想相识蚂蚁金服,去哪儿,百度外卖,魅族,腾讯在行使哪些数据库,请阅读第一篇!(点击传送门)

                                                                    新浪网

                                                                    采访工具:

                                                                    赵景波,新浪数据库平台高级DBA,首要认真新浪数据库平台Redis自动化运维、kafka运维等相干方面事变。热爱Redis、MySQL等开源DB内部道理的探讨。

                                                                    今朝新浪网数据库平台共有9个首要IDC、1200+处事器、7k+实例、1000+亿 hits/天、总存储容量1PB+。

                                                                    大部门的时辰我们的选型是这样的:假如营业场景较量得当MySQL,我们就选择MySQL作为存储,事实MySQL是一个很成熟的产物,其插件式的引擎特征也能满意大大都场景要求,同时其社区相等的活泼,人才储蓄也是最富厚的。那什么前提下会思量除MySQL外其他数据库呢?好比营业对相应时刻要求极高,可能营业场景就是简朴的kv存储模子,亦或营业但愿schemaless范例的数据库便于营业快速开拓迭代等等,此时我们就会思量一些其他的数据库,这也就是今朝我们平台不只仅只是提供MySQL处事,同时也提供MongoDB、Redis、Memcached、Hbase等处事的缘故起因。

                                                                    拿我们的内部处事宣布体系来说,,从前宣布的消息都是用MySQL存储,跟着营业成长,本性化的需求一日千里,营业表布局改观(添加字段)的需求也越来越多,而此时MySQL这种牢靠schema的存储模子不能满意营业快速开拓迭代的需求,因此最近我们把宣布体系的消息数据从MySQL所有迁徙到了MongoDB这种schemaless数据库上,给开拓带来的收益照旧很明明的,而我们运维利便着实也没增进太多本钱,由于新版本的MongoDB照旧相对很不变的,运维照旧相比拟力省心。同时消息保举push等营业对部门接口的相应时刻要求很高,那此时显而易见的我们会 保举营业回收Redis可能Memcached这种内存KV缓存来办理营业的需求。

                                                                    新浪微博

                                                                    采访工具:

                                                                    肖鹏,微博研发中心微博数据库平台技能副总监,首要认真微博数据库相干的打点和处事支撑事变。事变范畴包罗MySQL、Redis、Mmemcached、MCQ、HBase、Hadoop等软件的可用性保障、架构计划、机能优化以及自动化运维支撑平台的研发。

                                                                    因为我们较为重视缓存层的建树,故在缓存层我们有较量多的选择,包罗Memcached、Redis、pika以及我们内部定制的RedisCounter,这些软件根基满意如下的场景

                                                                    - Memcached ,通例类缓存选择

                                                                    - Redis, 负载数据布局选择

                                                                    - Pika,海量缓存数据选择

                                                                    - RedisCounter,计数类场景选择

                                                                    而数据存储层就较量通例了,因为MySQL不停的不变性和示意,我们大部门耐久化存储都选择了MySQL,在MySQL上我们默认选择innodb引擎,而对付大存储需求的我们会选择TokuDB引擎。

                                                                    其它,我们还会对付部门得当的营业选择HBase举办耐久化存储,因为漫衍式便利的扩容方法,对付超大存储需求的本钱可以获得有用的节制。今朝除了存储离线数据外,我们也在实行让HBase存储在线数据,并提供在线处事支持。

                                                                    京东

                                                                    采访工具:

                                                                    朱健,2015年插手京东告白部,参加告白部反作弊体系、告白日记体系、及时统计和BI相干的事变,今朝任职大数据处理赏罚高级工程师。京东之前,在雅虎北京环球研发中心,认真告白流量反作弊相干的事变。

                                                                    我们在告白及时结果体系中行使到了Redis、HBase和MySQL。面临告白数以十万计的曝光流量,必要一个高吞吐量、低耽误的数据库才气满意及时统计告白指标的需求,Redis和Redis在这方面都很是精彩的,可是Redis不支持累加,以是对付变换的数据存放在Redis中,然后汗青数据转储到Redis中。可是k-v体系有维度爆炸的题目,以是对付数据量不太大可是维度组合变革多的及时指标统计,我们有部门营业线行使MySQL。

                                                                    MySQL在离线OLAP体系中行使过HIVE和Greenplum。HIVE着实不算数据库,是MapReduce+HDFS的抽象,很是不变,可以处理赏罚超大局限数据,用来构建我们的日报体系,可是弱点是太慢。其后为了做到低延时的OLAP,满意告白指标及时查询的目标,MySQL引入了Greenplum。今朝来看,Greenplum较量得当中等局限的大数据(百T级)。

                                                                    58抵家

                                                                    采访工具:

                                                                    沈剑,58抵家架构师,在百度做过几年即时通信后端,2011年插手58同城,任高级架构师,技能委员会主席,2015年调到58抵家,此刻认真企业,付出,营销、客户相关等多个后端营业部分。

                                                                    和绝大部门互联网公司的存储选型相同,58抵家今朝的固化存储行使的是MySQL,几个很重要的缘故起因:

                                                                    一个是技能成熟,开源计划活泼,在业内行使普及,并在在出产情形颠末很大数据量、并发量、扩展性的验证;

                                                                    二个是研发、测试、运维职员相对更好雇用;最首要的,它可以或许办理营业的种种需求。

                                                                    美团外卖

                                                                    采访工具:

                                                                    王兴星,美团外卖贸易技能认真人,前搜狗PC&无线算法认真人。2016年头插手美团外卖,从0到1搭建贸易变现技能系统。

                                                                    美团外卖从2013开始,今朝已经单日打破1000万单,是最首要的O2O应用。

                                                                    行使内部定制优化的数据库Cellar,告白营业对可用要求较高,同时针对差异局限数据,存储的方案也有所差别,针对量较小平响要求较低的行使全内存方案,针对数据量较大平响要求不太高可以回收内存+SSD的方案,同时为了整体可用性思量,还必要一套房机房的方案。

                                                                    原来糊口网

                                                                    采访工具:

                                                                    范学蠡,原来糊口网BI总监。曾在Daum认真研发,后进入贝塔斯曼认真多个数据项目。

                                                                    原来糊口网首要行使了MySQL、MongoDB 、SQL Server、HBASE、Hive。焦点营业依然是SQL Server集群。大量写入好比用户举动回收Hbase。Mysql首要用户BI体系的集市层。

                                                                  上一篇:丽水市世界创始大数据茶园栽培新模式亩均增收数万元
                                                                  下一篇:统计局:统计观测到数据宣布严酷执行保密划定