2010年12月13日 星期一

文件撰寫&架構圖修正

本周進度:

1.實體模行&架構圖修正

平台實體模型:


平台完整架構圖
後續進度:
1.文件撰寫
2.bug修正及頁面整頓

2010年12月6日 星期一

平台架構(without推論部份)

本周進度:

平台架構(不包含推論部份):

1.Physical model

2.Structure


後續進度:
1.平台bug修正及頁面整頓
2.文件撰寫

2010年11月29日 星期一

文件撰寫&頁面整頓

本周進度:
1.文件撰寫
http://140.130.34.170/wikiproject/index.php/99Project-1-mid
2.平台頁面整頓

後續進度:
1.新增搜尋頁面
2.平台頁面整頓
3.製作多本不同類別電子書供推論用

2010年11月22日 星期一

推論腳本&平台架構

本周進度:

1.推論腳本:
一.使用者先從個人書目勾選欲參與推論的書籍。
二.使用者接著勾選interest。
三.根據使用者勾選的部分書籍及interest推論出相關class的公開權限書籍(如其他使用者上傳的書籍)。

實踐方式如下:

推論的流程主要分為3個step(上圖1~3):
step 1.將勾選後的個人書籍及所有公開書籍的opf傳給下個頁面產生fact檔 。
step 2.產生fact檔的頁面同時提供interest給使用者勾選,接著將這些interest傳給下個頁面並產生profile 。
step 3.最後連進到推論頁面,並根據fact檔及profile進行推論。


本周完成step1的部分,使用者可從其上傳的書籍清單勾選,接著按確認後,會將使用者勾選書籍的opf檔及所有公開權限的opf檔之路徑傳給下個頁面。 (如下)


接著下個頁面便可根據這些opf檔的內容撈取class並產生fact檔。
(輸出上個頁面所傳的opf檔路徑)
2.架構圖:



後續進度:
1.完成wiki+期末報告文件。
2.平台修正 。
3.新建多本電子書供推論用。

2010年11月15日 星期一

期中報告進度規劃

本周進度:

本周主要規劃兩周後期中報告前,需完成的事項。

1.將推論部分整合至平台

經討論過後決定將原本藉由使用者上傳電子書時同步更新推論用的fact檔部份,改成另新增一個推論選取頁面,列出使用者上傳的所有電子書,使用者可選取特定的電子書,推論引擎會根據這些電子書的class及使用者的profile作推論。
相較於原本的設計,這樣的構造一來能讓使用者更具彈性的選擇推論範圍,二來平台提供的功能更明朗化。


原本打算將建構fact檔的部分結合於此頁面(此頁面會同步將書籍檔案上傳)



2.文件撰寫

由於兩周後即將面臨期中報告,近起將以完成期中報告相關文件為主。


後續進度:
1.在app engine 中新增使用者勾選書籍頁面,供推論引擎用。
2.架構圖。
3.期中報告文件。

2010年11月1日 星期一

新增變更帳戶資料

本周進度:
1.修改會員資料:
使用者可對其註冊的會員資料作修改,如下:

1.點選右上角變更帳戶資料


2.輸入欲變更的資料,接著點選OK
3.完成帳戶資料變更



2.平台測試實作:
分成兩部份-

a.分別測資料量是1000, 2000, 5000, 10000筆時,使用者查詢所須之時間.[資料量寫一支程式來自動產生]

b. 使用者10, 50, 100人, 同時查詢上數不同資料量時所須之時間.[使用者人數也是寫一支程式來自動查詢,考量由多個client來起動某支jsp程式來同時執行,而該jsp程式中則跑一個loop來重覆執行查詢, 也是在該jsp程式中統計查詢所回覆的時間]


a.的部分近幾天可完成,但b的部份查詢使用者人數的部分,上網找了相關範例,皆是利用輸出文件檔來統計使用者人數(如:http://ruyi2008.blog.51cto.com/387450/81512/),然而app engine並不支援檔案的輸入輸出,這部份可能需找尋替代方法 ,此外模擬100個client同時對該jsp作存取的部份尚待解決。
後續進度:
1.平台測試
2.除錯及頁面整頓
3.平台功能擴增
4.期中報告文件

2010年10月25日 星期一

修正刪除書籍bug & 新增書籍權限

本周進度:
1.修正刪除書籍bug:
原先的刪除書籍頁面會將資料庫中的書籍資料欄位刪除,但刪除後並無順帶刪除書籍檔案,而書籍檔案的路徑跟書籍id相關,因此在刪除書籍後接著另新增書籍可能會造成檔案的cover,因此將刪除書籍的部分改用遮罩的方式呈現。
2.新增書籍權限:
使用者在上傳書籍時可選擇"Public"或"Private"選擇前者書籍可以分享給其他使用者,選擇後者上傳的書籍僅供個人閱讀。


點選"public"展現公開權限書籍


顯示公開書籍及上傳者資訊並可進行閱讀,點選"private"返回個人書籍頁面

後續進度:
1.新增更改帳戶資料頁面
2.除錯及頁面整頓
3.平台功能擴增
4.期中專題報告文件

2010年10月18日 星期一

新增刪除書籍頁面

本周進度:
新增刪除書籍頁面

1.點選"delete"按鈕



2.選取欲刪除的書籍


3.點選刪除後會自動刷新書目


原本期望能呈現在中間的書目頁面選取書籍後按"delete"紐能直接刪除書本並刷新,但中間的書目按下按鈕後會將值傳遞給檔案伺服器(FORM action="140.130.34.51:8080/99project_1/menu/menu.jsp")然而刪除檔案需要更動資料庫,因此只好以另彈跳出刪除視窗來實踐。
form預設通往檔案伺服器如下:
後續進度規劃:
1.使用者閱讀書籍權限
2.新增變更帳戶資料頁面
3.除錯及頁面整頓

2010年10月10日 星期日

app enginejsp -utf-8編碼測試

本周進度:
1.utf-8代碼測試:
查詢此代碼表後將代碼鍵入jsp檔案測試是否能成功上傳至app engine,首先測試的是html區塊,將代碼直接鍵入html標籤涵蓋的區域,如下:


結果可成功上傳至app engine,不過此部分即使不用代碼直接鍵入中字仍可上傳。




接下來是測試jsp區塊的部分,利用輸出字串的語法嘗試,如下:


結果上傳時出現錯誤,跟先前將中字鍵入jsp區塊的報錯訊息一樣。


故嘗試用代碼方式不可行。
上網搜尋相關解法,其中一篇文章提到:


參考網址http://dogbitesme.blogspot.com/2009/04/google-app-enginejava.html

2.查詢epub中opf檔可作為推論書籍用的欄位
如下:
檔案中的"subject"欄位,可作為推論用。
在資料庫中先前已針對opf檔路徑設欄位,程式解壓縮後會自動篩選出檔案路徑並丟入資料庫,可直接提取。

3.wiki文件撰寫:
http://140.130.34.170/wikiproject/index.php/99Project-1

後序進度規劃:
一.將書籍從平台中刪除功能實鍵

二.新增變更帳戶資料頁面
三.除錯及頁面整頓

2010年10月3日 星期日

平台中文亂碼克服

本周主要在克服平台中文呈現亂碼的,分成兩個部份:
1.電子書書名中文亂碼:
電子書的書名(中文)由app engine頁面使用form的方式傳遞 request至 file server頁面,
在file server頁面收到的書名(中文)卻是亂碼,但傳遞方與接收方都採用UTF-8編碼。
解決方法:
由於form傳遞的內容包含一般的"text""file"及"hidden",然而這兩者加密方式不同, (分別為:multipart/form-data及application/x-www-form-urlencoded) 提取request時會取不到值,因此利用javabean對request作提取,發現原本提取檔名的部分是設定為"big5"因此在頁面顯示上會呈現亂碼,修改後便解決此問題。


2.app engine頁面亂碼:
app engine的jsp頁面若包含中文便無法上傳,然而若將中文的部分含蓋在jsp檔中的html區塊便可進行上傳,但上傳後發現會呈現亂碼。在瀏覽器上變更編碼方式仍是以亂碼呈現。
(上傳至app engine的jsp似乎僅能採用UTF-8型式)
解決方法:
這部分嘗試多次仍無進展,試圖在jsp區塊內加入中文都會導致無法上傳,原本以為 html區塊的中文可能會因為預設的編碼方式與utf-8產生衝突中文才會呈現亂碼,但若添加 此行『meta http-equiv="Content-Type" content="text/html; charset=UTF-8"』至html 區塊又會導致無法上傳。
目前要在app engine的頁面上呈現中文,該頁面必須非jsp檔,抑或是 可將中文的部分存至app engine的資料庫,再利用jsp去讀取。
demo:








2010年9月27日 星期一

使用gmail帳戶登入平台

本周將『以gmail帳戶登入』功能整合進平台中,相關操作如下:


1.google 登入

2.登入成功

3.閱讀頁面


4.雖然另彈跳出示窗稍有不便,但使用google瀏覽器翻譯時
能避免掉原本以框架頁展現翻譯不到的情形。


接下來要實踐的部分:

1.相關使用者、電子書、資料異動功能及書籍權限功能的完整實踐。
2.克服 appengine頁面上的中文書名(utf-8)傳至file server上時會顯示亂碼問題。


由於2.的部分尚需要多嘗試才能解決因此主要先實踐1.部份。

PS:使用gmail帳戶登入平台中瀏覽器需把cookie打開,似乎google會利用cookie記錄帳戶登錄狀態。

2010年9月18日 星期六

Google appengine 實作(三)

目前平台已能完整的運作可點選以下URL
http://freedomandy49643234.appspot.com/

然而仍有部分問題尚未解決:

1.在appengine頁面上的中文書名(utf-8)傳至file server上時會顯示亂碼。
2.再閱讀頁面點選書籍(html or xhtml)閱讀時會另彈出視窗。

尚未實踐部分:
1.帳戶管理部份尚未納入以gmail登錄部分。
2.書籍設定公開及私有功能尚未實質展現。
3.除基本使用者帳戶申請、登入及電子書上傳、閱讀外的其他資料異動功能尚未完全實踐。

目前打算以實踐第1項(gmail部分)為優先。

2010年9月17日 星期五

appengine 上傳

在測試上傳至appengine面臨許多問題,上網搜尋相關解法,找到與debug錯誤資訊較接近的解法大都要求需將SDK中的appcfg檔路徑java的部分改成jdk所在位置;但試過此法後並無改善,似乎是較新版的SDK已解決jdk路徑問題?

由於使用eclipse嘗試多次都得到相同錯誤資訊,後來改用SDK將一個個jsp檔從新置入測試,發現沒有中文的檔案能成功的compile,最後將所有jsp頁面中文的部分改成英文上傳至appengine


然而中文亂碼的問題尚未解決,接下來預計先實作兩個server能成功互動為主。

2010年8月30日 星期一

將平台劃分 kernel server 及 file server

將平台劃分為kernel server 及 file server,主要的部分在於針對資料庫操作的頁面及檔案的頁面作區分,將非檔案操作的頁面(包含資料庫頁面)架設於google app engine ,再將檔案操作相關頁面架設於實驗室,實踐整個平台。
本周已完成劃分部分並將可能的bug除去,接下來準備著手進行kernel server 及 file server的架設。

2010年8月22日 星期日

關於app engine無提供檔案儲存的解決方法

由於app engine 應用程式無法寫入檔案系統,只能上傳應用程式編碼的檔案,以及對其提供的資料庫作存取,因此若要使用google app engine架設平台解決方法有二:

1.將檔案的二進位資料透過資料庫儲存,如將 jpeg檔的二進位資料存入資料庫欄位,欲使用時再透過資料庫語法提取。 但若將平台中操作的各種檔案透過此方式儲存會面臨;一來每本電子書包含多少個檔案不定,資料庫的規劃上較不易,二來app engine限制單筆資料大小不得超1MB,而部分電子書(如漫畫)的檔案大小普遍超過1MB 等問題。
如: 此範例http://stackoverflow.com/questions/1513603/how-to-upload-and-store-an-image-with-google-app-engine-java

2.第二種方法是將平台分成兩部分,一部分為帳戶管理及資料庫存取的核心伺服(此部分架設於app engine),另一部分是存取檔案用的檔案伺服(此部分包含unzip程式,而程式中包含多個檔案的輸出輸入,故不能架設於app engine,因此可能需將此部分架設於實驗室主機)。 但如此一來僅能確保核心伺服的操作能享有google 雲端的優勢,而檔案伺服由於並非架設於app engine因此操作上並無優化。
將檔案儲存空間與app engine分開的相關範例:http://sinohost.appspot.com/



相關資料參考於:
1.[心得] google app engine的缺點及限制
2.[網站程式設計師日記]google app engine 與如何上傳檔案

2010年8月15日 星期日

google app engine 實作(二)

近來依照Google App Engine 的資料存放區格式將資料庫佈置完成,接著要進一步佈置檔案上傳及解壓時面臨問題,Google App Engine 似乎不提供檔案的上傳,只允許用於transaction的資源資料存放於『資料存放區』,抑或是用於css排版等事先配置的靜態檔案存放,然而平台動態的執行解壓縮後的檔案將無法置放,以下是Google App Engine的相關限制即使操作上面臨的錯誤:

1.「應用服務引擎」無法執行寫入檔案系統。 (點選圖片可放大)


2.使用eclipse撰寫程式時 ,出現Google App Engine不支援串流輸出。


2010年7月30日 星期五

google app engine 實作(一)

目前已嘗試將較近態的網頁部屬於eclips上,用local端 ip稍作驗證,由於app engine有限制每個「Google 帳號」最多可以註冊 10 個應用程式 ID,因此打算在先將平台整個部屬完畢後在上傳至google。
以下是部屬後的測試:


由於app engine提供的資料庫另有一套操作方式,因此目前部屬部分僅有與資料庫無關的部分,接下來要著手研究資料庫相關部分。


2010年7月21日 星期三

暑期進度

近幾周都在嘗試實作"電子書製作"的部分,使用者上傳word的doc檔,接著平台將其依照epub規格製作成電子書,目前已完成local端可將doc轉成html檔,但以tomcat呈現時似乎與所使用的套件有衝突,這部分還有待嘗試;經老師建議後決定優先實作技術性較高的"將平台架設於『Google 應用服務引擎』上",近幾天仍在摸索,盡量趕在暑假前將這部份進度完成。

2010年6月13日 星期日

Pronlem-帳戶管理

Q:『使用者登入後,登入成功頁面要如何將記錄其權限的相關參數傳入其它框架頁?』雖然可以把各框架頁改成動態網頁的型式,但要如何傳參數到框架頁呢?


A: 使用session的方式記錄使用者驗證完的資料及權限,由於每一個客戶端都對應著一個session物件用來存放與這個客戶端相關的互動資料,因此各框架頁要進行操作時會根據session中記錄的資料來提供相對的服務。

解決方法參考自: http://www.hosp.ncku.edu.tw/java/cookie.htm

帳戶管理實作(二)

上周提到『使用者登入後,登入成功頁面要如何將記錄其權限的相關參數傳入其它框架頁?』之問題,已找到透過session來記錄使用者權限的方式解決;因此本周致力於將帳戶管理的部分完成,以下是完成帳戶管理後的平台呈現:


1.使用者註冊

2.使用者註冊完後登入帳密

3.驗證使用者資料頁面


4.接著使用者取得權限使用平台中提供的功能(以下是上傳電子書)



5.點選右上角的閱讀平台會列出所有使用者上傳的電子書




6.接著勾選欲觀看的書籍再點選左上方的閱讀即可開始閱覽





1.在第4張圖中有設定權限的選項,可選擇公開或私有,公開會將書籍開放給其它使用者閱覽,私有則僅有上傳者能獨享閱覽權;此一部分在往後會多加入開放權限的書籍閱覽表。
2.在上傳書籍部分會另外提供一個欄位讓使用者對其上傳之書籍作簡述,這段簡述會在使用者(可能是其它使用者)欲閱覽該書籍時呈現在第6張圖表單中的簡介部分。

2010年6月6日 星期日

帳戶管理實作

本周進度再實作帳戶管理,但實作上發現問題,由於平台是以框架頁呈現,因此使用者登入後,平台須把使用者的權限傳給每個框架頁,各頁面才能根據不同使用者賦予不同的權限操作,但問題在於『使用者登入後,登入成功頁面要如何將記錄其權限的相關參數傳入其它框架頁?』雖然可以把各框架頁改成動態網頁的型式,但要如何傳參數到框架頁呢?

如圖:
紅色框的部分是框架頁,中間是登入成功頁面,登入成功後無法把相關權限參數傳給其它框架頁。





原本預計本周完成帳戶部分,但尚未找到克服問題的相關資料,因此本周進度僅完成對路徑部分的修正:
根據不同的epub,其ncx檔及opf檔所存放的路徑也不同,本周測試多本epub並將原過濾路徑的程式改善更加完善。

接下來將繼續找尋克服此問題的方法,如找到的方法所需代價過大,可能會放棄以框架頁呈現平台的方式,改成以原始頁面呈現。

2010年5月29日 星期六

upload與unzip整合

本周主要進度在於wiki文件的撰寫以及upload與unzip的整合

wiki文件的部分請參照:http://140.130.34.170/wikiproject/index.php/99Project-1-Final

以下是平台整合的部分:


1.點選上傳檔案並將路徑導入

2.點選上傳後自動進行解壓縮

3.輸入id即可開始閱覽



接下來主要的方向在於:
1.帳戶管理的實作,以及將平台欲提供的功能與帳戶部分做整合。
2.wiki文件的補足,期末專題報告準備。



2010年5月22日 星期六

reader實作

本周已確切實踐reder功能,以下是完整流程:
1.上傳檔案


2.並反映至資料庫
3.unzip






4. 使用者輸入書本id




5.藉由menu選單可對電子書章節索引,選擇欲觀看部分



接下來進度規畫將網兩個方向實踐 1.帳戶管理2.版面整合
帳戶管理的部分目前已大概規畫出藍圖,但為避免實作後更改範圍過大,因此從版面整合先著手。目前要著手實踐的版面整合部分是將上傳跟unzip的頁面加以整合,當使用者將epub上傳後,平台便直接將其解壓縮並存放相對路徑,如此一來可避免掉unzip的步驟。另外,將會根據帳戶管理部份新增功能,提供使用者可上傳開放權限的電子書,其他使用者可直接瀏覽,以實踐web 2.0 透過人為傳播來達到資訊分享的精神。