﻿<?xml version="1.0" encoding="utf-8" standalone="yes"?><rss version="2.0" xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:trackback="http://madskills.com/public/xml/rss/module/trackback/" xmlns:wfw="http://wellformedweb.org/CommentAPI/" xmlns:slash="http://purl.org/rss/1.0/modules/slash/"><channel><title>BlogJava-黑夜里的狼-随笔分类-分布式</title><link>http://www.blogjava.net/hellxoul/category/53524.html</link><description /><language>zh-cn</language><lastBuildDate>Tue, 25 Mar 2014 05:59:34 GMT</lastBuildDate><pubDate>Tue, 25 Mar 2014 05:59:34 GMT</pubDate><ttl>60</ttl><item><title>适合于云端部署的应用架构</title><link>http://www.blogjava.net/hellxoul/archive/2014/03/25/411440.html</link><dc:creator>hellxoul</dc:creator><author>hellxoul</author><pubDate>Tue, 25 Mar 2014 01:18:00 GMT</pubDate><guid>http://www.blogjava.net/hellxoul/archive/2014/03/25/411440.html</guid><wfw:comment>http://www.blogjava.net/hellxoul/comments/411440.html</wfw:comment><comments>http://www.blogjava.net/hellxoul/archive/2014/03/25/411440.html#Feedback</comments><slash:comments>0</slash:comments><wfw:commentRss>http://www.blogjava.net/hellxoul/comments/commentRss/411440.html</wfw:commentRss><trackback:ping>http://www.blogjava.net/hellxoul/services/trackbacks/411440.html</trackback:ping><description><![CDATA[<p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">基于云的应用与运行在私有数据中心的应用之间最大的差别就是可扩展性。云提供了按需扩展的能力，能够根据负载的波动对应用进行扩展和收缩。但是传统应用要充分发挥云的优势，并不是简单地将应用部署到云上就万事大吉，而是需要根据云的特点围绕可扩展性重新进行架构设计，近日<a href="http://www.appdynamics.com/" style="text-decoration: none; color: #286ab2; outline: none !important; margin: 0px; border: 0px; padding: 0px;">AppDynamics</a>的开发布道者Dustin.Whittle<a href="http://www.appdynamics.com/blog/cloud/architecting-for-the-cloud/" style="text-decoration: none; color: #286ab2; outline: none !important; margin: 0px; border: 0px; padding: 0px;">撰文阐述了适合云端部署的应用架构</a>，对我们传统应用往云端部署有很大的启发和借鉴意义。</p><h2>应用的架构</h2><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">Dustin.Whittle给出了云应用的示例架构，它具有高度的可扩展性，如下图所示：</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><img src="http://infoqstatic.com/resource/news/2014/03/architecting-for-the-cloud/zh/resources/0324000.png" width="600" _href="img://null" _p="true" alt="" style="border: 0px; margin: 0px 10px 10px 0px; padding: 0px; max-width: 100%;" /></p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">在这个图中，应用按照分层的理念进行了拆分，分别介绍如下：</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><strong style="margin: 0px; border: 0px; padding: 0px;">客户端层：</strong>客户端层包含了针对目标平台的用户界面，可能会包括基于Web的、移动端的甚至是胖客户端的用户界面。一般来讲，这可能会是Web应用，包含诸如用户管理、会话管理、页面构建等功能，但是其他客户端所发起的交互都需要以RESTful服务的形式调用服务器。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><strong style="margin: 0px; border: 0px; padding: 0px;">服务：</strong>服务器包含了缓存服务以及聚合（aggregate）服务，其中缓存服务中持有记录系统（system of record）中最新的已知状态，而聚集服务会直接与记录系统交互，并且会执行一些破坏性的操作（会改变记录系统中的状态）。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><strong style="margin: 0px; border: 0px; padding: 0px;">记录系统：</strong>记录系统是领域特定的服务端，它会驱动业务功能，可能会包括客户管理系统、采购系统、预定系统等等，这些很可能是遗留系统，你的应用需要与其进行交互。聚集服务要负责将你的应用从这些特有的记录系统中抽象出来，并为你的应用提供一致的前端接口。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><span style="margin: 0px; border: 0px; padding: 0px;">ESB</span><span style="margin: 0px; border: 0px; padding: 0px;">：</span>当记录系统发生数据变化的时候，它需要触发到指定主题（topic）的事件，这就是事件驱动架构（event-driven architecture，EDA）能够影响应用的地方了：当记录系统进行了一项其他系统可能感兴趣的变更时，它会触发一个事件，任何关注记录系统的其他系统会监听到这个事件，并作出对应的响应。这也是使用使用主题（topic）而不是队列（queue）的原因：队列支持点对点（point-to-point）的消息，而主题支持发布-订阅（publish-subscribe）的消息或事件。当与遗留系统进行集成时，我们很期望这些遗留的系统能够免遭负载的影响。因此，我们实现了一个缓存系统，这个缓存系统维持了记录系统中所有最新的已知状态。缓存系统会使用EDA的规则监听记录系统的变化，它会更新自己所保存数据的版本，从而保证与记录系统中的数据相匹配。这是一个很强大的策略，不过会将一致性模型变为最终一致性，也就是说如果你在社交媒体上发布一条状态的话，你的朋友可能在几秒钟甚至几分钟之后才能看到，数据最终是一致的，但有时你所看到的与你的朋友所看到的并不一致。如果能接受这种一致性的话，就能在很大程度上实现可扩展性的收益。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><strong style="margin: 0px; border: 0px; padding: 0px;">NoSQL</strong><strong style="margin: 0px; border: 0px; padding: 0px;">：</strong>在数据存储方面，有很多的可选方案，但如果要存储大量数据的话，使用NoSQL存储能够更容易地扩展。有多种NoSQL存储可供选择，不过这要匹配所存储数据的特点，如MongoDB适合存储可搜索的数据，Neo4j适合存储高度互相关联的数据，而Cassandra适合存储键/值对，像Solr这样的搜索索引有利于加速对经常访问数据的查询。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">将应用拆分为多个层的时候，最好的模式就是使用面向服务架构（service-oriented architecture，SOA）。要实现这一点，可以使用SOAP，也可以使用REST，但是REST更为合适，因为它可扩展性更强。作者接下来对REST的理念进行了深入的阐述，InfoQ上关于REST已有很多相关的文章，如<a href="http://www.infoq.com/cn/articles/rest-introduction" style="text-decoration: none; color: #286ab2; outline: none !important; margin: 0px; border: 0px; padding: 0px;">这里</a>和<a href="http://www.infoq.com/cn/articles/understanding-restful-style" style="text-decoration: none; color: #286ab2; outline: none !important; margin: 0px; border: 0px; padding: 0px;">这里</a>，甚至包括<a href="http://en.wikipedia.org/wiki/Representational_state_transfer" style="text-decoration: none; color: #286ab2; outline: none !important; margin: 0px; border: 0px; padding: 0px;">Roy Fielding经典博士论文</a>的<a href="http://www.infoq.com/cn/minibooks/web-based-apps-archit-design" style="text-decoration: none; color: #286ab2; outline: none !important; margin: 0px; border: 0px; padding: 0px;">中译本</a>，所以这里不再赘述。不过，作者在这里特别强调了RESTful Web服务能够保持无状态性（stateless）。无状态是实现可扩展性的关键需求，因为无状态，所以请求可以由任何一个服务器响应。如果你在服务层上需要更多的容量时，只需要为该层添加虚拟机即可，而不需关注客户端状态保持的问题，负载可以很容易地重新分配。</p><h2>部署到云端</h2><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">前面介绍了基于云的应用架构，接下来作者阐述了这样的应用该如何部署到云端。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">RESTful Web服务要部署到Web容器中，并且要位于数据存储之前。这些Web服务是没有状态的，只会反映其暴露的底层数据的状态，因此可以根据需要部署任意数量的服务器。在基于云的部署中，开始时可以开启足够的实例以应对日常的需求，然后配置弹性策略，从而根据负载增加或减少服务器的数量。衡量饱和度的最好指标就是服务的响应时间。另外还需要考虑这些服务所使用的底层数据存储的性能。示例的部署图如下所示：</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><img src="http://infoqstatic.com/resource/news/2014/03/architecting-for-the-cloud/zh/resources/0324001.png" width="600" _href="img://null" _p="true" alt="" style="border: 0px; margin: 0px 10px 10px 0px; padding: 0px; max-width: 100%;" /></p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">如果在云部署时有EDA的需求，那么就需要部署ESB，作者给出的建议是根据功能对ESB进行分区（partitioning），这样一个segment的过大负载不会影响到其他的segment。如下图所示：</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;"><img src="http://infoqstatic.com/resource/news/2014/03/architecting-for-the-cloud/zh/resources/0324002.png" width="600" _href="img://null" _p="true" alt="" style="border: 0px; margin: 0px 10px 10px 0px; padding: 0px; max-width: 100%;" /></p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">这种分离使System 1的负载与System 2的负载实现了隔离。如果System 1产生的负载拖慢了ESB，它只会影响到自己的segment，并不会影响到System 2的segment，因为它部署在其他硬件上。如果ESB产品支持的话，我们还可以给指定的segment添加服务器来实现扩展。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">基于云的应用与传统应用有着很大的差别，因为它有着不同的扩展性需求。基于云的应用必须有足够的弹性以应对服务器的添加与移除，必须松耦合，必须尽可能的无状态，必须预先规划失败的情况，并且必须能够从几台服务器扩展到成千上万台服务器。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">针对云应用并没有唯一正确的架构，但是本文所阐述的RESTful服务以及事件驱动架构却是经过实践检验有效的架构。作者认为REST和EDA是实现云端可扩展应用的基本工具。</p><p style="margin: 0px 0px 15px; padding: 0px; border: 0px; float: left; clear: both; width: 610px; font-family: Arial, sans-serif; background-color: #ffffff;">目前，国内许多传统的软件厂商正在逐渐往云端迁移，希望本文所阐述的架构理念能够为读者提供一些借鉴。</p><img src ="http://www.blogjava.net/hellxoul/aggbug/411440.html" width = "1" height = "1" /><br><br><div align=right><a style="text-decoration:none;" href="http://www.blogjava.net/hellxoul/" target="_blank">hellxoul</a> 2014-03-25 09:18 <a href="http://www.blogjava.net/hellxoul/archive/2014/03/25/411440.html#Feedback" target="_blank" style="text-decoration:none;">发表评论</a></div>]]></description></item><item><title>diamond sql</title><link>http://www.blogjava.net/hellxoul/archive/2013/04/25/398386.html</link><dc:creator>hellxoul</dc:creator><author>hellxoul</author><pubDate>Thu, 25 Apr 2013 06:43:00 GMT</pubDate><guid>http://www.blogjava.net/hellxoul/archive/2013/04/25/398386.html</guid><wfw:comment>http://www.blogjava.net/hellxoul/comments/398386.html</wfw:comment><comments>http://www.blogjava.net/hellxoul/archive/2013/04/25/398386.html#Feedback</comments><slash:comments>0</slash:comments><wfw:commentRss>http://www.blogjava.net/hellxoul/comments/commentRss/398386.html</wfw:commentRss><trackback:ping>http://www.blogjava.net/hellxoul/services/trackbacks/398386.html</trackback:ping><description><![CDATA[<div style="background-color:#eeeeee;font-size:13px;border:1px solid #CCCCCC;padding-right: 5px;padding-bottom: 4px;padding-left: 4px;padding-top: 4px;width: 98%;word-break:break-all"><!--<br />
<br />
Code highlighting produced by Actipro CodeHighlighter (freeware)<br />
http://www.CodeHighlighter.com/<br />
<br />
--><span style="color: #0000FF; ">CREATE</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">TABLE</span><span style="color: #000000; ">&nbsp;`config_info`&nbsp;(<br />
&nbsp;`id`&nbsp;</span><span style="color: #000000; font-weight: bold; ">BIGINT</span><span style="color: #000000; ">(</span><span style="color: #800000; font-weight: bold; ">64</span><span style="color: #000000; ">)&nbsp;UNSIGNED&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">&nbsp;AUTO_INCREMENT,<br />
&nbsp;`data_id`&nbsp;</span><span style="color: #000000; font-weight: bold; ">VARCHAR</span><span style="color: #000000; ">(</span><span style="color: #800000; font-weight: bold; ">255</span><span style="color: #000000; ">)&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">DEFAULT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #FF0000; ">''</span><span style="color: #000000; ">,<br />
&nbsp;`group_id`&nbsp;</span><span style="color: #000000; font-weight: bold; ">VARCHAR</span><span style="color: #000000; ">(</span><span style="color: #800000; font-weight: bold; ">128</span><span style="color: #000000; ">)&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">DEFAULT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #FF0000; ">''</span><span style="color: #000000; ">,<br />
&nbsp;`content`&nbsp;LONGTEXT&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">,<br />
&nbsp;`md5`&nbsp;</span><span style="color: #000000; font-weight: bold; ">VARCHAR</span><span style="color: #000000; ">(</span><span style="color: #800000; font-weight: bold; ">32</span><span style="color: #000000; ">)&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">DEFAULT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #FF0000; ">''</span><span style="color: #000000; ">,<br />
&nbsp;`gmt_create`&nbsp;</span><span style="color: #000000; font-weight: bold; ">DATETIME</span><span style="color: #000000; ">&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">DEFAULT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #FF0000; ">'</span><span style="color: #FF0000; ">2010-05-05&nbsp;00:00:00</span><span style="color: #FF0000; ">'</span><span style="color: #000000; ">,<br />
&nbsp;`gmt_modified`&nbsp;</span><span style="color: #000000; font-weight: bold; ">DATETIME</span><span style="color: #000000; ">&nbsp;</span><span style="color: #808080; ">NOT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">NULL</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">DEFAULT</span><span style="color: #000000; ">&nbsp;</span><span style="color: #FF0000; ">'</span><span style="color: #FF0000; ">2010-05-05&nbsp;00:00:00</span><span style="color: #FF0000; ">'</span><span style="color: #000000; ">,<br />
&nbsp;</span><span style="color: #0000FF; ">PRIMARY</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">KEY</span><span style="color: #000000; ">&nbsp;(`id`),<br />
&nbsp;</span><span style="color: #0000FF; ">UNIQUE</span><span style="color: #000000; ">&nbsp;</span><span style="color: #0000FF; ">KEY</span><span style="color: #000000; ">&nbsp;`uk_config_datagroup`&nbsp;(`data_id`,`group_id`)<br />
&nbsp;);</span></div>
<img src ="http://www.blogjava.net/hellxoul/aggbug/398386.html" width = "1" height = "1" /><br><br><div align=right><a style="text-decoration:none;" href="http://www.blogjava.net/hellxoul/" target="_blank">hellxoul</a> 2013-04-25 14:43 <a href="http://www.blogjava.net/hellxoul/archive/2013/04/25/398386.html#Feedback" target="_blank" style="text-decoration:none;">发表评论</a></div>]]></description></item></channel></rss>