【开源】分布式可编程的云平台，可大规模开展Web服务开发，期待专家点评

.                  百万商业圈分布式云平台功能及使用说明
.      -------------------需要代码的请留下邮件地址
平台功能概述：
    简单的说就是将N台电脑，有序分层(逻辑层次划分)组织起来，形成一个有机体(计算集群)，去完成一台电脑很难完成的任务。
  说的更通俗一点这个云平台就是将数十万台电脑变成一台电脑那样来使用

简而言之百万商业圈云平台就是提供了：
1、远程文件分发服务
2、远程文件分发服务开发接口
3、创建远程非透明代理服务
4、提供创建远程对象开发接口
5、Web服(用Microsoft Web Application Stress Tool 进行压力测试，每分钟有效并发超过10万)
6、定时获取节点、集群性能指数服务
7、提供获取节点、集群性能指数服务开发调用接口
8、提供创建远程最优节点对象的开发接口，提供创建远程指定IP节点机的对象的开发接口
9、提供并行创建远程以某IP为根IP的某组集群的对象的开发接口

名词解释：
    远程非透明代理服务服务提供：创建最优代理，创建某节点群的代理群，注册代理服务等
    非透明代理服务：创建并提供一个远程对象，让你可以通过代理对象创建并调用远程节点机真实对象的任何属性方法
    如：
      （1）创建以192.168.2.201 为起始的节点群中的最优代理对象
         testdemo. Class1 c1 = (testdemo. Class1)rf.CreateTheBestRemoteObject( typeof(testdemo. Class1)," 192.168.2.201"); 
      （2）创建指定IP 为192.168.2.201 节点机的代理对象
         testdemo. Class1 c1 = (testdemo. Class1)rf.CreateSpecifyIpRemoteObject( typeof(testdemo. Class1)," 192.168.2.201 ");
  Console.WriteLine(s4.sum(1,2)); //看看输出结果你就知道效果了
       （3）创建以192.168.2.115 为起始的节点群中的代理对象群
         object[] objs = rf.CreateAllRemoteObjects( typeof(testdemo. Class1)," 192.168.2.115");

图表1集群中小型应用架构模型

图表2大规模实际应用架构模型

图表3集群实际测试架构模型

平台功能概述：
    简单的说就是将N台电脑，有序分层(逻辑层次划分)组织起来，形成一个有机体(计算集群)，去完成一台电脑很难完成的任务。
    说的更通俗一点这个云平台就是将数十万台电脑变成一台电脑那样来使用！

平台组成部分：
        1、 .NETFrameWork3.5
        2、 平台云集群服务器系统
        3、 平台云集群应用开发包
        4、 平台云集群应用开发范例源代码

 
平台组成部分功能详述：

        1、.NETFrameWork3.5
               安装在哪里？ 答：安装在集群节点机上，每台机器都要装
               如何安装呢？ 答：下载Framework3.5Setup.rar 解压后运行：dotNetFx35setup.exe 按提示下一步下一步即可
               还有其他配置或设置吗？ 答：没有。
               备注：没有Framework3.5Setup.rar 也可以直接安装VS2008(Microsoft Visual Studio 2008)。 
        2、平台云集群服务器系统
               安装在哪里？ 答：安装在集群节点机上，每台机器都要装
               如何安装呢？ 答：下载DistributedPlatForm.rar解压后运行：install.bat 提示安装完成，回车即可。
               还有其他配置或设置吗？ 答：有，需要对配置文件进行设置。
               先安装还是先配置？ 答：配置好之后再安装集群服务。
               集群服务器系统配置文件（Bwsyq.Distributed.Cluster.exe.config）的使用及说明：
               <!-- 分布式集群配置AliasName:节点或子节点名称RootNodeIp:本节点IP UpperNodeIp:上层节点IP HeartRate:心跳频率(秒) WebServerPort:Web服务端口号-->
              <WebSystem.Framework.Distributed AliasName="1"RootNodeIp="192.168.2.201" UpperNodeIp="192.168.2.201"HeartRate="1" WebServerPort="8080">
                  <!-- 子节点信息 可配置多个节点(理论上无限制),考虑到并行处理建议每个节点配置10个子节点,四层配置可达10000台机器-->
                  <NodeInfo AliasName="02" IP="192.168.2.209"WebServerPort="8080"/> 
                  <!— 没有下层节点需要写 “<NodeInfo …> ”这一行吗？ 答：不需要写 -->
                 <!— 有多个下层节点需要怎么写 “<NodeInfo …> ”这一行呢？ 答：一个节点一行 -->
              </WebSystem.Framework.Distributed>
              名词解释：
                 AliasName节点或子节点名称 命名规则要求：无 命名原则：上层节点名+XX(00~99) 如：根结点用1第二层节点用1XX 比如：101第三层10101以此类推
                 AliasName最好不要重复，重复了也不影响
                 RootNodeIp须是根节点的地址(不能使用127.0.0.1)。
                 UpperNodeIp是你的上层节点的地址(不能使用127.0.0.1)。
                 HeartRate 心跳频率，建议设置为1，单位：秒(越小表示频率越高，负载均衡算法越准确) 会影响机器性能吗？答：微乎其微。
                 WebServerPort:Web服务端口号对外的可以采用80如果只是集群内部使用就无所谓了，取值范围(1~65535)
                 备注：集群配置的时候在填写IP地址时要注意尽量避免使用127.0.0.1，请使用该节点的真实IP地址，否则会带来不可预知的错误。
        3、平台云集群应用开发包
             用什么工具进行开发？ 答：Microsoft Visual Studio 2008/ MicrosoftVisual Studio 2010
             安装在哪里？ 答：开发人员的电脑上
             需要安装到集群节点机上吗？ 答：不需要。
             如何使用呢？ 答：下载DistributedPlatFormSDK.rar 解压即可，无需安装，在开发的时候进行全部引用即可。
             有SDK接口函数说明吗？ 答：有。
             用来开发什么程序？ 答：三种程序，
             注：无论开发哪种程序，请先引用SDK中的所有DLL类库
            一、开发集群应用业务逻辑程序，也叫商业逻辑(BussinessObject)，简称BO，编译成dll类库形式，如：
                    public class  Class1  : WebSystem.Framework.Bo. BaseBo
                   {
                        public string sum( int a,  int b)
                       {
                             //这里输出结果的时候做个小实验，在结果中增加一个IP地址，看看真正运行的到底是哪个节点机
                             return (a + b).ToString()+ " 实际运行的节点是："+  Api.LocalIps()[0].ToString();
                       }
                   }
                 假设编译成： testdemo.dll
                  有特殊要求吗？ 答：有，所有需要在客户端被调用的类都必须继承WebSystem.Framework.Bo.BaseBo 这个类，不继承发布到集群后，在其它客户端程序将无法调用。
            二、用来开发对集群进行管理的程序
                (1)、将开发好的BO类库分发到集群中去，只需要2行代码：
                       RemoteFactory rf =  newRemoteFactory();
                      //192.168.2.201是假设的根节点IP，应根据实际情况修改
                      rf.DistributionFile(@" d:\testdemo.dll", " 192.168.2.201"); 
                      这样就能将testdemo.dll发布到集群中所有电脑上吗？ 答：是的，就这么简单。

                (2)、查看集群中所有电脑的性能指标及运行状况，只需要8行代码
                       //192.168.2.201是假设的根/子节点IP，应根据实际情况修改                 
                       NodesPerFormanceList npfs = rf.GetPerFormanceList(" 192.168.2.201");
                       Console .Write(" 节点群*有节点："+ npfs.Count);
                      foreach ( NodesPerFormance npf in npfs)
                      {
                          if (npf.Index == 0)
                              Console.Write(" 节点机"+ npf.Ip + " 有故障！");
                      }
                      npfs.Sort();
                       Console.Write(" 节点群中性能最优节点机IP是："+ npfs[0].Ip);
                      这样就能得到节点群的运行情况吗？ 答：是的，就这么简单。
                      备注：GetPerFormanceList填写的如果是根节点IP将获取整个集群的运行情况，如果是某个子节点IP获取的将只是节点群的运行情况

192 个解决方案

#1

             三、用来开发基于集群的分布式应用，这里又分成三种情况：
                (1)、开发那种 百万军中取上将首级的程序，什么意思呢？就是让集群中性能最优的机来执行某个函数，并得到返回结果
                     这里我们假设：上面开发的业务逻辑程序 testdemo.dll 已经分发到了集中，
                     首先我们要引用testdemo.dll别奇怪，客户端也需要一份
                     testdemo. Class1 s4 = (testdemo. Class1)rf.CreateTheBestRemoteObject( typeof(testdemo. Class1)," 192.168.2.201");
                      Console.WriteLine(s4.sum(1,2)); //看看输出结果你就知道效果了
                      备注：CreateTheBestRemoteObject 填写的如果是根节点IP将获取整个集群的最优节点，如果是某个子节点IP获取的将只是节点群的最优节点

                 (2)、开发那种 定点式的程序，什么意思呢：就是让集群中某个指定的节点机来执行某个函数，并得到返回结果
                      这里我们假设：上面开发的业务逻辑程序 testdemo.dll 已经分发到了集中，
                      首先我们要引用testdemo.dll别奇怪，客户端也需要一份
                      testdemo. Class1 s4 = (testdemo. Class1)rf.CreateSpecifyIpRemoteObject( typeof(testdemo. Class1)," 192.168.2.201");
                       Console.WriteLine(s4.sum(1,2)); //看看输出结果你就知道效果了
                 (3)、开发那种 狼群战术- 并行的程序，什么意思呢：就是让集群/节点群中的所有机器来执行某个函数，并得到返回结果
                      这里我们假设：上面开发的业务逻辑程序 testdemo.dll 已经分发到了集中，
                      首先我们要引用 testdemo.dll别奇怪，客户端也需要一份
                        object[] objs = rf.CreateAllRemoteObjects( typeof(testdemo. Class1)," 192.168.2.115");
                       for (int i = 0; i < objs.Length; i++)
                       {
                             Console.WriteLine(((testdemo. Class1)objs[i]).GetName()); //看看输出结果你就知道效果了
                       }
                       备注：CreateAllRemoteObjects 填写的如果是根节点IP将获取整个集群的所有节点对象，如果是某个子节点IP获取的将只是节点群的节点对象

 
       4、平台云集群应用开发范例源代码
             平台云集群应用开发范例源代码

平台系统环境要求：XP/Vista/Win7/Win2003/Win2008

FAQ&名词解释：
集群：集群（Cluster）是由两台或多台节点机（服务器）构成的一种松散耦合的计算节点集合，为用户提供网络服务或应用程序(包括数据库、Web服务和文件服务等)的单一客户视图，同时提供接近容错机的故障恢复能力。集群系统一般通过两台或多台节点服务器系统通过相应的硬件及软件互连，每个群集节点都是运行其自己进程的独立服务器。这些进程可以彼此通信，对网络客户机来说就像是形成了一个单一系统，协同起来向用户提供应用程序、系统资源和数据。除了作为单一系统提供服务，集群系统还具有恢复服务器级故障的能力。集群系统还可通过在集群中继续增加服务器的方式，从内部增加服务器的处理能力，并通过系统级的冗余提供固有的可靠性和可用性。
根节点：集群的最上级。
子节点：集群中除根节点机之外的所有机器都是一个子节点。
节点群：以某个子节点为起始的，包含它下面所有节点的集合称为一个子集群，下面没有节点那这个节点群就是他本身。
某节点群：集群下的某一个节点群。

这个云平台稳定吗？
     答：非常稳定，实际测试用13台PC，连续运行了一周，没有出现任何故障。
根节点挂了会导致整个集群崩溃吗？
     答：不会崩溃，任何节点都可以担任跟节点继续提供服务，也可以设置多根。
某个节点挂了会导致整个集群崩溃吗？
     答：不会崩溃，有严密的异常处理，不会导致整体崩溃。
为什么考虑到Windows系统而不采用Linux系统呢？
     答：C#目前已经可以在Linux上进行编译和运用了，请放心会在近期提供Linux版本的。
新增加的节点，如何获得之前集群中分发的业务逻辑程序？
     答：很简单。1、新节点一旦开启服务，会自动从上层节点获取。2、你也可以手工复制一下。
这个云平台优日志记录吗？
     答：有非常详细的日志记录，在配置文件Bwsyq.Distributed.Cluster.exe.config中，
        只要将<level value="OFF" /> 改成<level value="ALL" />即可
这个云平台完全免费吗？
     答：是的。
这个云平台是谁开发的？
     答：是我，我叫黄智，典型的中国人，英俊、潇洒、爽快、正直、勤劳、善良，我的QQ是99923309。
开发这个云平台的目的是什么？
     答：打破大公司的技术垄断，降低技术壁垒，振兴中华，让普通人也能很快进行大规模的应用。
这个云平台能有哪些具体的应用？
     答：科学计算、大规模检索、高性能计算、海量数据存储、破译外星信号、高性能数据信息采集 等
这个云平台是有第三方技术吗？
     答：没有，是本人完全凭空想象出来的，没有参考过任何第三方的代码。
利用这个云平台能做成google那样的大规模网站吗？
     答：很轻松就能实现。
发现平台错误或有好的建议怎么办？
     答：发邮件告诉我[e-mail]


下载地址：
        1、 .NETFrameWork3.5
        2、 平台云集群服务器系统
        3、 平台云集群应用开发包
        4、 平台云集群应用开发范例源代码

其他相关：
开源：完全自主研发搜索引擎1.0源代码及说明，单机400万网页，任意50词以内的检索不超过 20毫秒
开源：基于百万商业圈.NET开发框架开发的并行带分词的采集器
百万商业圈 .NET 开发框架2.0及开发框架API说明书(BWFW)(含并行计算及中英文分词功能)
分享一点代码（小型C web开发框架），用C语言实现的一个WEB 文件上传（含全部源代码）一

天心天字辈ERP全部PDK源代码到了我手上的后果 - 超越天心之WEB天云
大家看看我的BS的甘特图排程做的如何? 无刷新Ajax甘特图 展示生产排程结果 演示
软件工程概述 - 企业架构 - IT企业做大做强之根本 - 之我见
实践检验得出的真理：asp.net 项目在 linux mono上编译需要修改的只有 3个地方
给大家漏一手本人亲自精心撰写的通用ajax框架,完全兼容 IE FireFox各个版本!(附完整源码及完整范例)
开发了一个中文分词服务器(C语言开发+词库+源代码),最大特色可以让javascript来调用!
用纯C语言写了一个HtmlParse(网页分析器)外带采集功能，大小只有200K(免费+开源+操作示意图)


版权所有： 百万商业圈 未经许可不得转载 作者：QQ 99923309

#2

支持一下 
慢慢看

#3

我想起来了  上次那个什么ERP也是你发布的？
觉得夸张了点
对于 “云”的定义 我觉得LZ需要审视一下
不是什么沾上了云就牛B了    云的概念和应用也拒绝对不会局限与几台或者几十台计算机
这种情况下叫局域网   不叫云

#4

引用 3 楼 fengyarongaa 的回复:

我想起来了  上次那个什么ERP也是你发布的？
觉得夸张了点
对于 “云”的定义 我觉得LZ需要审视一下
不是什么沾上了云就牛B了    云的概念和应用也拒绝对不会局限与几台或者几十台计算机
这种情况下叫局域网   不叫云

首先谢谢您的推荐。
对于云的定义确实需要认真审视，可能我那篇文章描述的不够详细，目前也还在开发中，上次主要介绍的是SaaS部分，对于PaaS、IaaS层都还没有做详细的介绍，下次我会重新对这几个部分做一个说明。

当然，对于“云”的定义目前还没有统一的标准，因此还希望跟大家多学习。

再次感谢对于我的指点和支持！

#5

引用 4 楼 xeryak 的回复:

引用 3 楼 fengyarongaa 的回复:

我想起来了  上次那个什么ERP也是你发布的？
觉得夸张了点
对于 “云”的定义 我觉得LZ需要审视一下
不是什么沾上了云就牛B了    云的概念和应用也拒绝对不会局限与几台或者几十台计算机
这种情况下叫局域网   不叫云

首先谢谢您的推荐。
对于云的定义确实需要认真审视，可能我那篇文章描述的不够详细，目前也还在开发中，上次……

就目前中国而言    云已经能够把人晕了    很多人都是人云亦云
而作为Net开发者  Win8对于云或许有良好的设计和准备

#6

学习。

#7

[e-mail] ，学习者，麻烦了呵呵

#8

该回复于2011-12-19 14:44:37被版主删除

#9

不错。学习一下。

[e-mail]
谢谢！！

#10

大势所趋,该了解了....

#11

学习学习学习学习

#12

学习了，有图，好支持楼主

#13

不错，图文并茂，我喜欢！

#14

非常感谢,好东西!
[e-mail]

#15

[e-mail] 谢谢

#16

学习学习学习学习

#17

该回复于2011-11-10 09:09:47被版主删除

#18

该回复于2012-08-28 09:12:11被版主删除

#19

该回复于2011-09-19 11:53:24被版主删除

#20

楼主加油~

#21

[e-mail] 谢谢~

#22

开发这个云平台的目的是什么？
  答：打破大公司的技术垄断，降低技术壁垒，振兴中华，让普通人也能很快进行大规模的应用。



哎呀 ，连占3楼~~尴尬尴尬~

#23

支持，随便多学习些！！

#24

好像很牛啊 
顶楼主啊

#25

[e-mail]

#26

[e-mail]，学习致敬

#27

学习学习！！！！！！！！

#28

上次erp的代码至今未发送到我邮箱，不知是你什么原因，。希望这次可以不要放鸽子、
[e-mail]

#29

给力，顶一个

#30

支持一下，我要，[e-mail]

#31

很牛啊   [e-mail]

#32

[e-mail] 谢谢

#33

[e-mail] 很强大

#34

[e-mail]，学习致敬

#35

该回复于2011-09-19 10:40:52被版主删除

#36

看的晕晕乎乎的！！！

#37

头大！

#38

看不明白，垃圾

#39

[e-mail]
谢谢

#40

慢慢理解中

#41

学习 学习

#42

[e-mail]

#43

学习一下,[e-mail]

#44

有性能测试报告就好了
[e-mail]

#45

给力，顶一个

#46

值得学习，期待超过微软

#47

引用 46 楼 highpr 的回复:

值得学习，期待超过微软

楼上真能扯啊

[e-mail] 谢谢了

#48

期待学习[e-mail]

#49

不错，顶一个~！

#50

虽然技术不懂，但给思路加分。顶！