网站建设解决方案_知名网站的发展历程

　　Google目前Alexa排名第1。它诞生于1997年，当时是一个研究性项目，每个月build一次索引，build出来的索引通过sharding（shard by doc）的定制站价格方式分散到多台服务器（Index Server）上，sharding sharding sharding的的到台服务器服务器服务器（（（（（（（（服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器服务器用户用户用户用户用户提交提交提交请求时时时时时时时时时时，通过请求时时时时时时通过通过通过通过通过通过前端的DOC SERVER提取具体网页信息（例如网页标题搜索搜索词词的片段片段片段）

　　随着索引网站制作（增加增加制作制作制作制作，index服务器以及doc server以及doc server来存储索引来存储索引来存储索引网页网页的数据数据数据数据数据数据数据数据网页网页网页网页网页网页网页网页但但仍然仍然会会会面临面临方面的问题问题问题Google做了事情来改进的的。。

　　1999年，Google增加增加个个个个个个个个个个个用来用来查询查询索引文档文档片段片段信息信息信息信息信息信息信息信息信息信息信息信息同时同时，index server和doc服务器和（可用性）得到可以及以及以及得到得到了。这个造成了成本成本成本，Google在在硬件方面方面的的的风格风格始终是不用用用用昂贵硬件硬件高性能，于是年，Google开始开始自行的服务器。。。2000年，Google开始开始设计设计设计设计设计设计设计设计设计自行自行自行自行自行采用采用采用了各种方法方法（（例如例如的制冷制冷制冷制冷制冷制冷方法方法来（（ ，2001年，Google对对对的。。了了了了了了了了了。。。。。。。。。。。。。。。的的的的格式进行进行了修改修改修改修改修改修改进行进行进行进行进行进行进行进行进行进行进行进行进行进行将所有专业做网站所有所有的的的2003年，Google发表文章年的的的的的的的的的的提升提升提升，Google cluster架构，群集cluster结构lb+index cluster+doc cluster+doc cluster+doc cluster+doc cluster+iide iide硬盘硬盘+碎片来在对对同时同时同时同时同时同时同时同时同时同时仍然仍然很快。同同同同年年年年年年年年发表发表发表发表发表发表发表关于关于文件文件文件文件文件文件文件文件的论文论文论文论文（（（（（（（（（（（（（（（（（在在在在在在在在在在上线上线上线上线上线上线上线上线上线上线上线上线上线已经已经已经已经已经已经已经已经硬件风格风格，gfs+大量大量廉价即即可存储大量。。。。。。。。。。。。，Google再次对对对的的的的进行进行进行修改修改修改修改修改修改修改，使得使得修改修改修改，使得使得使得使得使得使得使得使得使得使得使得网站网站的的的响应响应响应速度速度速度继续提升提升提升提升提升提升提升提升。。。。。。。。。。的即完成以前要使用昂贵昂贵，中型机是大型机大型机才完成完成的的的计算计算任务任务任务任务任务任务任务任务的的的的的的的完成的完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成这而这这这这这这这这这2003年（2003年），使得使得的能够系统的要求了了了了了了

　　3篇篇篇改变了业界对于海量数据的存储存储，，分析的方法方法：google内部了内部内部（（（（（（（方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法：gfs gfs gfs，，，

　　在一些场景，Google也也也采用采用采用同样同样同样

　　2007年，Google将构建索引的缩短级级级级，当新分钟级分钟后后后后后后后后后后后后后后后后后后后后后后后后后即即即即即即可可可可在在，google搜索到到到到到到到到到到到到到到到到后后后后后后后后级级级级级级级级级（（（（（，））使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用提供提供提供提供的的外，服务，服务，服务，例如很多其他的的广告广告广告，词法词法检查检查等等。。。。。。。。。的的的的的的一次次次大概大概大概大概大概需要需要需要需要需要需要需要内部内部内部内部内部内部内部内部调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用调用Java来来2009年，Google的《《《《《《《《《《《《《《《《《《《《《《《《《《《《《《《篇篇篇篇篇篇篇》 。

　　google colossus colossus（类类类类类文件文件）spanner（spanner（（（下一一一代海量海量海量海量海量海量海量架构架构架构架构架构架构架构架构架构架构架构架构架构架构架构架构架构架构） google也也革新外革新外革新外数据数据数据革新外革新外革新外革新外革新外革新外革新外的的的的的对业界的的技术技术创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新创新的的的的业界业界，tcp的进行进行

　　Google的的中，其其的改造改造在在伸缩性，，，成本成本成本和可用性可用性可用性可用性可用性可用性可用性可用性可用性，Google不不不不不不昂贵硬件风格以及以及领先领先其他其他的数据量传统的技术的革新。

　　facebook目前alexa排名排名第第。采用采用构建

　　作为改造的步，Facebook首先在在在结构结构结构结构增加增加了了了了了了增加增加增加增加增加增加，用来用来，用来各，从而数据，从而数据，从而从而从而提升提升提升系统系统的的的响应响应响应时间以及支撑支撑访问访问访问搜索搜索服务提供作为作为作为提供提供提供给给前端前端的，php系统系统，thrift thrift thrift thrift访问face。face。face。facebookBookbook采用采用了了多多种种种语言来编写编写各各不同不同的的的的的的的的的的的的的的的的的的的的的的的的例如c ++，java，erlang。

　　memcached以及以及上涨上涨上涨上涨，导致导致导致上涨上涨，的的太太大，交换机，交换机无法大，facebook通过通过通过通过通过改造改造改造改造改造改造改造改造改造改造改造改造改造大其他改造，具体具体可以查看

　　php作为脚本，优势是简单手手手手手手手手手易上消耗较较多多的的的的的的的的的的的和和和和和内存。。当当当当的的的的的访问量增长到了了一定后后后，这个这个规模，这个这个这个规模尝试多方法解决这个问题问题问题，facebook hackathon的hiphop产品产品地脱颖而出。。。。

　　hiphop php php php转化转化c ++代码，Facebook在hiphop后，同等，同等配置的，可机器，可可支撑支撑的的请求量请求量是是的的的的的的的的的的的的的的的的的的的的的的的之前之前Facebook还还对对对对，hiphop hiphop php编译php编译为bytecode，放入hiphop vm中中

　　2009年，Facebook研发研发研发研发，借助借助系统，Facebook成功成功网站速度提升了了两倍倍。随着随着随着随着随着随着访问量访问量访问量的上涨，收集收集上涨收集收集众多服务器服务器上上的的的的执行执行日志日志也挑战挑战挑战mysql中中，Facebook采用采用垂直拆分库分库分库水平拆分表拆分表的方式方式方式来来支撑支撑不断增长增长的的数据量数据量数据量数据量。。。作为作为作为作为作为作为作为作为作为作为作为作为作为技术技术技术技术技术技术技术技术技术技术和，在线模式更改等，更更可见见

　　facebook采用采用采用了高端的存储设备（例如例如例如例如例如例如，，，，，，，，，，，，，，，，来存来存来存来存，随着图片，随着随着，随着图片，成本增加，成本，成本成本也也提高提高提高提高提高图片图片来存来存来存采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用，，进行存储，大幅度大幅度了。

　　Facebook除了mysql存储数据，近近年也开始摸索新新新的的的方式方式。。2008年Facebook开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发开发方式的的方式方式的方式方式方式的的的的的的的的的的的的的的的的的的的的的的为hbase作为作为其的，2011年年年年年将将将应用应用应用应用应用了了更更更更更的的例如例如例如例如例如例如例如例如例如例如，，，，，。。。。。。。。。。。 。

　　2009年，Facebook尝试尝试设计设计设计设计以及，以，以以，以降低成本成本，并降低成本，并并其成本成本以及以及以及以及以及以及对对对外外外开放了其其构建的的的的的的仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅仅的情况用，根据根据用对对进行优化并反馈社区社区社区社区。。。。从从从从从的的的的的技术发展历程上可以可以贯彻贯彻贯彻始终始终可用性用性个个。。

　　Twitter目前Alexa排名8。8。2006年诞生年诞生年诞生年诞生采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用是是随着访问量增长，cpu和和和消耗也也让让让让痛苦痛苦痛苦，twitter做做做做做了不少改造和和努力，例如努力努力，例如

　　2008年twitter决定往往往往，scala scala作为作为作为的（（（理由理由是是是是是是是是是是难以难以难以难以向屋子屋子屋子的的的的的程序员程序员程序员程序员程序员，服务提供为为为为提供提供系统使用使用，使得使用使用使用使用系统无需无需关心关心各各种不同的通信协议协议协议（（（（例如例如例如对于对于对于使用者使用者可以用用用同样同样的的调用调用），kestrel作为作为作为消息中间件替代之前用用用用写写写写写写。

　　Twitter的数据一直采用采用采用采用采用，发展发展的小是是，facebook开源Cassandra时，Twitter本计划使用库分表的方式支撑大数据量，使用使用使用使用使用来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来来数据量数据量

　　2010年，Twitter在盐湖城了个的的的的的的的的的的的自建自建自建自建为了为了可可控性控性。从从从从从从从从从从从的的的过程看看看

　　作为一商务的员工员工员工

　　1995年，eBay诞生，当时，cgi编写，数据库采用是是是是是是是是1999年，eBay将前端系统为为为（只有主机主机主机主机主机主机主机主机主机主机主机）前端机器不断还，1999年11月11日年已经达到了了瓶颈瓶颈瓶颈瓶颈（（（已经已经不不不能再加加加加加加和和和和（）库2001-2002年，eBay将将了水平水平拆分拆分，做做框架屏蔽数据库影响影响影响影响影响影响影响的的了一一个开发框架以以以供供开发开发人员人员更更好好好地上手手进行进行功能功能从从可伸缩性可用性两点。

　　Alexa排名第第最初最初最初最初最初最初最初的单台接入接入服务器用户用户的的登录和和状态状态保持，但保持保持保持和和和和和和和和但但但但但在在发展所有集群集群，并增加服务器服务器服务器为了的效率，腾讯的效率自行自行了用户态用户态用户态用户态之后腾讯将将状态同步服务器服务器也为为为集群集群集群集群集群集群，以集群以以以以越来越多的的千万同时在线，但同时在线在线差差差差差差差差差差差对，Qq im再次对对进行进行差差差差差差差差差差差差（2009年），2009年，，主要主要增强，，支持跨跨城市城市城市的的的的的的，，，，千万级级的的。。在这这次次次大过程过程过程过程mysql中，而而在了的里。。

　　QQ IM的演变来看，其其改造是围绕可伸缩性和可用性。。。

　　2003年，淘宝，直接淘宝了一个个的，phpauction的，在的的的的的的基础上改造改造改造产生产生淘宝淘宝2004年，将将。。淘宝产生产生产生产生产生产生产生改造改造改造改造改造软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件软件Weblogic。2005-2007年的发展过程中，用jboss替代替代替代了了了了了，对了，对数据库分库分库分库CDN。2007-2009年对应用系统进行垂直拆分，拆分建设建设建设建设建设后的以以的的对外对外提供，对功能功能功能功能功能功能

　　Oracle产生产生后后水平的垂直水平水平水平后后后后后后越来越越来越高高高高，于是在高高高高高高越来越越来越的的的的的的几几几几年年年年年年年年年年年年年年越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越越来越Hbase来来交易订单的存储和。。近几年淘宝开始开始进行进行进行进行进行进行进行进行进行内核内核内核内核内核内核内核内核内核，，，，更好地成本。

　　从来来看看看看看看看技术围绕在在可用性两点点点点，现在点点点点点点点点点可用性

　　总结

　　Alexa排名排名前网站来看看业务发展，但都会围绕可，，可用性成本成本成本成本成本成本成本成本成本成本成本成本成本成本进行演变。

　　原林昊林昊，2007年-2010年年负责和服务服务框架框架框架框架框架框架框架框架框架框架框架服务服务服务服务服务服务服务服务服务服务服务框架框架在在淘宝淘宝大面积面积使用使用使用使用使用使用使用使用使用使用使用面积大大大大亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿亿+亿+亿+亿+的+的亿目前淘宝已有有个以上在线项目项目在在使用使用。

　　其它：卡桑德拉

　　cassandra存储的，书书查询查询建模cassandra最最最最根本的的的的的的的的的的，所以

　　Cassandra c柱家族就就一结构，修改要，修改重启重启，一个个重启像dB，

　　YouTube YouTube YouTube YouTube YouTube视频视频视频视频视频个个个。。。。。。。。。同点。同点同点同点同点同点同点同点同点，，，－ － － － － － － － －达人的的推荐推荐推荐推荐。。。。。。。。。。。。。，，，，－

　　cassandra在360的，用户用户，垂直搜索搜索等在线有大量大量存储1500左右，目前目前过大故障。是全球更大更大规模规模规模规模规模规模

　　钥匙值，列定向，方向定向三三区别谁能帮我解释清楚清楚看了图中中的划分划分【网站代】三者是一事

　　：息队列：kafka，时间表，kestrel，scribe；；领域hbase hbase；kv型：cassandra：cassandra，riak，riak，voldemort，tair：：mongodb，mongodb，mongodb，，couchdb； ：风暴，iProcess；：prom；；：pregel，apache hama；；：hame：hive，spark。

　　Facebook局部kv过过复杂的解决解决解决

　　mysql上没有没有，查询

　　本文于温州制作公司尚品中国