跳到主要內容

SEQUOIA初體驗(一)

1.下載SEQUOIAhttp://sequoia.continuent.org/HomePage),有幾個版本可以下載bin-install的版本。

2. 安裝步驟如圖。










3. 安裝後先將安裝後的SEQUOIA路徑中config資料夾的sequencer.xml複製到driver資料夾(因為有個case需要使用到JGroupAPI不過似乎該APIIP為寫死的)。


4. 複製所需的資料來源的JDBC Driverdriver資料夾,例如MSSQLjtds.jar等等


5. 先透過該API提供的demo進行測試

5.1執行demo資料夾中的demo-raidb1.bat啟動HSQLDB,分別啟動900190029003 portHSQLDBnetstat -na

5.2config\controller資料夾中controller.xml換成controller-raidb1.xml,再執行bin\controller.bat

5.3執行bin\console.bat,若是有出現localhost:1090>表示相關設定無誤。可以試試幾個指令操作看看

admin myDB,選擇要操作的VirtualDatabase

輸入使用者(admin)及密碼(無)

show backend *,顯示目前所有的backend

initialize localhost1backend名稱) force

enable *,啟動全部的backend※要先要initialize backend後方可enable

6. 進行研究RAIDb-0模式(同一資料來源)(Full partitioning of database

l 同一個資料來源(MSSQL),兩個資料庫(database1及database2)設定檔如下

l 直接執行bin\controller.bat(請修改controller.xml的對應)

l 啟動console.bat進行確認

admin myDB,選擇VirtualDatabase

admin,使用者

無,密碼

show backend *,確認是否都已經啟動了

quit,登出

sql client jdbc:sequoia://127.0.0.1:25322/myDB,連接virtualdatabase

user,使用者

無,密碼

select top 1 * from log1,簡易SQL測試(For database1

select top 1 * from log2,簡易SQL測試(For database2

常會出現Java Heap不夠的問題,需要進行最佳化

2. 進行研究RAIDb-0模式(不同資料來源)(Full partitioning of database

l 不同資料來源(MSSQLHSQLDB),兩個資料庫(database1及database2)設定檔如下

l 先啟動demo\demo-raidb1.bat

l 執行bin\controller.bat(請修改controller.xml的對應)

l 啟動console.bat進行確認

admin myDB,選擇VirtualDatabase

admin,使用者

無,密碼

show backend *,確認是否都已經啟動了

quit,登出

sql client jdbc:sequoia://127.0.0.1:25322/myDB,連接virtualdatabase

user,使用者

無,密碼

select top 1 * from log1,簡易SQL測試(For database1

select * from product,簡易SQL測試(For database2

7. 進行研究RAIDb-1模式(同一資料來源)(Full replication

l 同一個資料來源(MSSQL),兩個資料庫(database1及database2)設定檔如下

l 先啟動demo\demo-raidb1.bat(因為這裡會使用到RecoverLog

l 直接執行bin\controller.bat(請修改controller.xml的對應)

l 啟動console.bat進行確認

admin myDB,選擇VirtualDatabase

admin,使用者

無,密碼

show backend *,確認是否都已經啟動了

quit,登出

sql client jdbc:sequoia://127.0.0.1:25322/myDB,連接virtualdatabase

user,使用者

無,密碼

Create table test1(id bigint not null,name varchar not null),會看到database1及database2資料庫均會有該資料表,

需要進階透過程式或JMeter測試效能及shutdown database測試

這裡設定主要為localhost1也就是使用database1為主要,也可透過url的參數設定如亂數或是RoundRobin等等方式。

總結

api提供的一透通性的介面(與各資料來源或是資料庫),應用程式或系統可透過單一連線方式(sequoia)同時取得不同資料來源的資料,或透過本api可進行資料庫的Cluster可不用透過昂貴的軟體進行(但是效能需要測試),另外因為採用類似磁碟陣列方式進行的資料庫陣列有多種模式可以進行,並提供所謂的Hot swapping可以動態增加資料來源(backend),而且使用Java撰寫所以安裝在不同的作業系統上,又因為為OpenSource所以其成本較低。待續(sequoia進階使用)


p.s因為xml貼上怪怪的需要設定檔的再發個email給我囉!

留言

這個網誌中的熱門文章

IReport中的條碼類別BcImage

最近有一個繳費單的專案,需要列印條碼,因為IReport本身就有提供列印條碼的功能,所以就用IReport設計繳費單然後再用Jasperreport API寫批次程式去產生PDF,資料量大概3000多筆(頁)拆成幾個檔案,可是就發生了一個問題居然發生部分繳費單的條碼有問題,看了一下程式研判是Race Condition因為程式採用的是多執行緒,若是依序個別產生是不會有問題,但是同時執行的時候就會亂掉,而且都錯在條碼,令我覺得很奇怪,後來我查了一下發現it.businesslogic.ireport.barcode.BcImage 類別我猜是這裡的問題,就先加上synchronized重新編譯在去執行,嘿嘿條碼就對了,做了一下壓測也正常,程式碼如下,不過這樣事不是對了可能還要仔細查查看。 public class BcImage { private static net.sourceforge.barbecue.Barcode bc = null; public synchronized static net.sourceforge.barbecue.Barcode getBarcode() { return bc; } public synchronized static BufferedImage getBarcodeImage(int type, Object aText, boolean showText, boolean checkSum) { return getBarcodeImage(type, aText, showText, checkSum,"",0,0); } public synchronized static BufferedImage getBarcodeImage(int type, Object aText, boolean showText, boolean checkSum, String applicationIdentifier, int width, int height) { // 2of7, 3of9, Bookland, Codabar, Code128,...

Pentaho kettle取指定目錄下的所有檔案

最近開始玩 BI的東西,而之前專案有使用到Pentaho Open Source這個好物.... Pentaho裡面很多東西,跟 Jasperreport一樣東西很多,我最先接觸到的是kettle ETL的工具,玩了一陣子,開始有空就把它寫下來,以免忘記。 Scan一個目錄下所有檔案,然後塞進去資料庫 1.先拉兩個 Input,一個Get File Names,一個是CSV file input,再拉一個 output 中的 Table output,然後把他連起來。 2.點開 Get File Names,File or directory設定你的指定目錄,Regular Expression則是輸入.*\.*$則是所有檔案,若是CSV則可.*\.torrent$這可以了,可以按一下 Preview rows看看是否正確。

Spring boot v1.5 (六) spring data jpa 基本操作

最近天氣好熱,做甚麼事都覺得很懶,想要寫個spring data jpa也是懶懶的,不過這部分卻也是滿重要的一部分,前一篇介紹 JDBCTemplate ,已經覺得跟以前寫SQL方式有所差異了,JPA帶來的是物件導向的設計面思考,說到JPA不得不提提 ORM ,Object-relational mapping主要想法為簡化及物件導向的設計,讓RDB更貼近Object,在設計上可以更加便利,甚至透過一些設計可以讓Table具有物件導向的特性如繼承等等,以往要使用ORM的框架,都會先以 Hibernate 進行,不過近來慢慢地轉向JPA,主要還是在減少程式碼、增加彈性等等,大體的功能沒有差異很大,所以從Hibernate轉到JPA問題不大,JPA要介紹的東西還滿多的,所以我這裡會再分成三個章節來介紹。 SPRING DATA JPA基本操作 JPQL & Named SQL & Native SQL Cache & DB Design Pattern SPRING DATA JPA更加簡化的程式撰寫,只需要一個 Interface內寫一些查詢 method就可以操作JPA,因為利用 method 組合查詢條件,確實很方便也很容易理解,若是都沒有辦法符合需求當然也可以自己實作一個來用當然沒有問題。 學習目的 :SPRING DATA JPA基本操作。 學習時數 :3.5hr 教學影片: pom.xml 說明 spring-boot-starter-web:配置 Web Project所需的函式庫。 spring-boot-starter-test:配置 unit or mock test 所需的函式庫。 spring-boot-starter-actuator:配置監控spring boot所需的函式庫,後續spring cloud會使用到,所以一開就導入。 spring-boot-starter-jdbc:配置使用jdbc所需的函式庫。 postgresql:配置postgresql連接Driver所需的函式庫。 jasypt-spring-boot-starter:加解密所需的函式庫。 spring-boot-starter-data-jpa:配置Spring data jpa所需的函式庫。 ...