求助apache關於集群的方案.

求助apache關於集群的方案.

請大家幫忙提供一些apache集群方案給我
問過身邊的朋友大概了解了一些,如squid和lvs
請問還有哪些方案做apache集群的呢?

apache+tomcat+mysql 負載平衡和集群技術
公司開發了一個網站，估計最高在線人數是3 萬，併發人數最多100 人。開發的網站是否能否承受這個壓力，如何確保網站的負荷沒有問題，經過研究決定如下：    （1 ）採用負載平衡和集群技術，初步機構採用Apache+Tomcat 的機群技術。
    （2 ）採用壓力測試工具，測試壓力。工具是Loadrunner.
   
    硬體環境搭建：
    為了能夠進行壓力測試，需要搭建一個環境。剛開始時，測試在公司區域網內進行，但很快發現了一個問題，即一個腳本的壓力測試結果每次都不一樣，並且差別很大。原來是受公司網路的影響，於是決定搭建一個完全隔離的區域網測試。搭建后的區域網配置如下：
   （1） 網路速度：100M
   （2） 三台伺服器：
    負載伺服器 ：操作系統windows2003，
    Tomcat伺服器：操作系統windows2000 Professional
    資料庫伺服器：操作系統windows2000 Professional
    三台機器的cpu 2.4 G, 內存 1G。
    軟體環境搭建：
    軟體的版本如下：
    Apache 版本：2.054，
    Tomcat5.0.30,
    mysql ：4.1.14.
    JDK1.5
    壓力測試工具：Loadrunner7.8。
    負載平衡方案如下：
    一台機器（操作系統2003）安裝apache，作為負載伺服器，並安裝tomcat作為一個worker；一個單獨安裝tomcat，作為第二個worker；剩下的一台單獨作為資料庫伺服器。
    Apache和tomcat的負載平衡採用JK1.2.14（沒有採用2.0，主要是2.0不再維護了）。
    集群方案：
    採用Tomcat本身的集群方案。在server.xml配置。
    壓力測試問題：
    壓力測試后，發現了一些問題，現一一列出來：
   （1） 採用Tocmat集群后，速度變得很慢。因為集群后，要進行session複製，導致速度較慢。Tomcatd的複製，目前不支持application複製。複製的作用，主要用來容錯的，即一台機器有故障后，apache可以把請求自動轉發到另外一個機器。在容錯和速度的考慮上，我們最終選擇速度，去掉了Tomcat集群。
   （2） 操作系統最大併發用戶的限制：
    為了採用網站的壓力，我們開始的時候，僅測試Tomcat的最大負載數。Tomcat伺服器安裝的操作系統是windows2000 Professional。當我們用壓力測試工具，併發測試時，發現只要超過15個併發用戶，會經常出現無法連接伺服器的情況。經過研究，發現是操作系統的問題：windows2000 Professional 支持的併發訪問用戶有限，默認的好像是15個。於是我們把操作系統全部採用windows2003 server版本。
   （3） 資料庫連接池的問題：
    測試資料庫連接性能時，發現資料庫連接速度很慢。每增加一些用戶，連接性能就差了很多。我們採用的資料庫連接池是DBCP，默認的初始化為50個，應該不會很慢吧。查詢資料庫的連接數，發現初始化，只初始化一個連接。併發增加一個用戶時，程序就會重新創建一個連接，導致連接很慢。原因就在這裡了。如何解決呢？偶爾在JDK1.4下的Tomcat5.0.30下執行資料庫連接壓力測試，發現速度很快，程序創建資料庫連接的速度也是很快的。看來JDK1.5的JDBC驅動程序有問題。於是我們修改 JDK的版本為1.4.
   （4） C3P0和DBCP
    C3P0是Hibernate3.0默認的自帶資料庫連接池，DBCP是Apache開發的資料庫連接池。我們對這兩種連接池進行壓力測試對比，發現在併發300個用戶以下時，DBCP比C3P0平均時間快1秒左右。但在併發400個用戶時，兩者差不多。
    速度上雖然DBCP比C3P0快些，但是有BUG：當DBCP建立的資料庫連接，因為某種原因斷掉后，DBCP將不會再重新創建新的連接，導致必須重新啟動Tomcat才能解決問題。DBCP的BUG使我們決定採用C3P0作為資料庫連接池。
    調整后的方案：
    操作系統Windows2003 server版本
    JDK1.4
    Tomcat 5.0.30
    資料庫連接池C3P0
    僅採用負載平衡，不採用集群。
    軟體的配置：
    Apache配置：主要配置httpd.conf和新增加的文件workers.properties
    Httpd.conf：
    #一個連接的最大請求數量
    MaxKeepAliveRequests 10000
    #NT環境，只能配置這個參數來提供性能
    <IfModule mpm_winnt.c>
    #每個進程的線程數，最大1920。NT只啟動父子兩個進程，不能設置啟動多個進程
    ThreadsPerChild 1900
    每個子進程能夠處理的最大請求數
    MaxRequestsPerChild 10000
    </IfModule>
    # 載入mod_jk
    #
    LoadModule jk_module modules/mod_jk.so
    #
    # 配置mod_jk
    #
    JkWorkersFile conf/workers.properties
    JkLogFile logs/mod_jk.log
    JkLogLevel info
    #請求分發，對jsp文件，.do等動態請求交由tomcat處理
    DocumentRoot "C:/Apache/htdocs"
    JkMount /*.jsp loadbalancer
    JkMount /*.do loadbalancer
    JkMount /servlet/* loadbalancer
    #關掉主機Lookup，如果為on，很影響性能，可以有10多秒鐘的延遲。
    HostnameLookups Off
   #緩存配置
    LoadModule cache_module modules/mod_cache.so
    LoadModule disk_cache_module modules/mod_disk_cache.so
    LoadModule mem_cache_module modules/mod_mem_cache.so
    <IfModule mod_cache.c>
    CacheForceCompletion 100
    CacheDefaultExpire 3600
    CacheMaxExpire 86400
    CacheLastModifiedFactor 0.1
    <IfModule mod_disk_cache.c>
    CacheEnable disk /
    CacheRoot c:/cacheroot
    CacheSize 327680
    CacheDirLength 4
    CacheDirLevels 5
    CacheGcInterval 4
    </IfModule>
    <IfModule mod_mem_cache.c>
    CacheEnable mem /
    MCacheSize 8192
    MCacheMaxObjectCount 10000
    MCacheMinObjectSize 1
    MCacheMaxObjectSize 51200
    </IfModule>
    </IfModule>
    worker. Properties文件
    #
    # workers.properties ，可以參考
    http://jakarta.apache.org/tomcat/connectors-doc/config/workers.html
    # In Unix, we use forward slashes:
    ps=
    # list the workers by name
    worker.list=tomcat1, tomcat2, loadbalancer
    # ------------------------
    # First tomcat server
    # ------------------------
    worker.tomcat1.port=8009
    worker.tomcat1.host=localhost
    worker.tomcat1.type=ajp13
    # Specify the size of the open connection cache.
    #worker.tomcat1.cachesize
    #
    # Specifies the load balance factor when used with
    # a load balancing worker.
    # Note:
    # ----> lbfactor must be > 0
    # ----> Low lbfactor means less work done by the worker.
    worker.tomcat1.lbfactor=900
    # ------------------------
    # Second tomcat server
    # ------------------------
    worker.tomcat1.port=8009
    worker.tomcat1.host=202.88.8.101
    worker.tomcat1.type=ajp13
    # Specify the size of the open connection cache.
    #worker.tomcat1.cachesize
    #
    # Specifies the load balance factor when used with
    # a load balancing worker.
    # Note:
    # ----> lbfactor must be > 0
    # ----> Low lbfactor means less work done by the worker.
    worker.tomcat1.lbfactor=2000
    # ------------------------
    # Load Balancer worker
    # ------------------------
    #
    # The loadbalancer (type lb) worker performs weighted round-robin
    # load balancing with sticky sessions.
    # Note:
    # ----> If a worker dies, the load balancer will check its state
    # once in a while. Until then all work is redirected to peer
    # worker.
    worker.loadbalancer.type=lb
    worker.loadbalancer.balanced_workers=tomcat1,tomcat2
    #
    # END workers.properties
    #
    Tomcat1配置:
    <!--配置server.xml
    去掉8080埠，即註釋掉如下代碼：-->
    <Connector
    port="8080" maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
    enableLookups="false" redirectPort="8443" acceptCount="100"
    debug="0" connectionTimeout="20000"
    disableUploadTimeout="true" />
    <!--配置8009埠如下：-->
    <Connector port="8009"
    maxThreads="500" minSpareThreads="400" maxSpareThreads="450"
    enableLookups="false" redirectPort="8443" debug="0"
    protocol="AJP/1.3" />
    <!--配置引擎-->
    <Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="tomcat1">
    啟動內存配置,開發configure tomcat程序即可配置：
    Initial memory pool: 200 M
    Maxinum memory pool:300M
    Tomcat2配置：
    配置和tomcat1差不多，需要改動的地方如下：
    <!--配置引擎-->
    <Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="tomcat2">
    啟動內存配置,開發configure tomcat程序即可配置：
    Initial memory pool: 512 M
    Maxinum memory pool:768M
    Mysql配置：
    Server類型：Dedicated MySQL Server Machine
    Database usage:Transational Database Only
    併發連接數量：Online Transaction Processing(OLTP)
    字符集：UTF8
    資料庫連接池的配置：
    我們採用的是spring 框架，配置如下：
    <property name="hibernateProperties">
    <props>
    <prop key="hibernate.dialect">org.hibernate.dialect.MySQLDialect</prop>
    <prop key="hibernate.connection.driver_class">com.mysql.jdbc.Driver</prop>
    <prop key="hibernate.connection.url">jdbc:mysql://202.88.1.103/db</prop>
    <prop key="hibernate.connection.username">sa</prop>
    <prop key="hibernate.connection.password"></prop>
    <prop key="hibernate.show_sql">false</prop>
    <prop key="hibernate.use_sql_comments">false</prop>
    <prop key="hibernate.cglib.use_reflection_optimizer">true</prop>
    <prop key="hibernate.max_fetch_depth">2</prop>
    <prop key="hibernate.c3p0.max_size">200</prop>
    <prop key="hibernate.c3p0.min_size">5</prop>
    <prop key="hibernate.c3p0.timeout">12000</prop>
    <prop key="hibernate.c3p0.max_statements">50</prop>
    <prop key="hibernate.c3p0.acquire_increment">1</prop>
    </props>
    </property>
    其他的沒有額外配

如果是動態的集群，有點麻煩，因為數據得一致，還是弄個GFS或者NFS!
這裡是ipvs的發源地，linux內核里ipvs的模塊就是他寫的，是個中國人
www.linuxvirtualserver.org

Tags: