2011/09/19

製作 iPhone/iPad 電子書

想要製作可以在iPhone/iPad上瀏覽的電子書嗎? Go ahead!

首先要釐清,是想做『iBook電子書』還是『電子書App』
  • iBook電子書是可以用iBook這個app來瀏覽的文件檔,透過iTunes就可以自己同步到iPhone/iPad裡面。
  • 而製作一個獨立的電子書App手續就麻煩多了。首先你必須跟Apple申請一個開發者帳號 (年費NT3000),再來製作自己的App(可能需要會寫程式),最後把app submit到apple store,待工作人員審核過了,就可以在apple store供大家下載。

如果你只是想打發時間,想把網路小說放到iPhone那就選擇第一項。如果是想營運收費,那兩樣都可以上架收費。


iBook電子書製作

App電子書製作

初學 Tornado web framework

最近需要架設一個線上平台,對於架設平台我實在沒什麼經驗,從前有開發過網站,會用asp.net、php自己刻東西,但時代不一樣了,為了講求快速,依附在framework上是有必要的。Tornado — 對我來說是個全新的開始,我不會python,對物件導向的程式語言也不熟,平常都在寫C語言居多,更別提用過web framework了...但我堅信我的底子跟熱情可以支撐我去學習這一切!

話說剛開始學習真的超不順,中文英文的教學都很少,官方的文件又寫的很簡略...但看著看著,突然有一天感覺就來了,就像任督二脈被打通般的,我看得懂了,我會使用了,程式寫這麼久了,我覺得對我幫助最大就是學會這種感覺。如果看懂Overview又學會使用Source code裡面的demo程式,對Tornado的掌握度就很高了!

API
Tornado真是個強大的東西,它陳列的API不多,但每一個都是在建立平台時很常見的需求:
  • OAuth第三方認證 - 使用facebook、google、twitter帳號來登入自己的網站,API都很精簡了
  • Python decorator tornado.web.authenticated - Sorry我不知道怎麼翻譯這個,簡單來說就是user尚未通過認證,存取到任何網頁都會被導回login頁面
  • Non-blocking, asynchronous http request - facebook graph API query、backend server query
  • Template - MVC架構開發,這是每個framewrok都必備的
  • Security cookie - 防止cookie被篡改
  • L10N, CSRF protect

IDE選擇

2011/09/14

Python 教學網站

基本語法教學 - 初學者用

推薦IDE - PyDev

如何在MacOS下安裝python套件?
參考官方網站 Python on the Macintosh

建議使用 Macports 套件管理程式來安裝:
# 搜尋套件
port list | grep python

# 安裝python主程式
sudo port install python26

# 安裝 easy_install
sudo port install py26-setuptools

#之後就可以利用easy_install去安裝更多python套件了

2011/09/06

Forward Proxy 的選擇 - Squid

Forward proxy 與 Reverse proxy 是什麼可以參考聯成電腦這篇的說明

用途方面簡單舉幾個例子

  • Forward proxy
    • 用戶套用Hinet的proxy,抓國外的東西會比較快,因為proxy上面已經cache一份。
    • 公司或宿舍網路禁止對外存取facebook或上msn,proxy上有強大的parser可以check/replace特定字眼。
  • Reverse proxy
    • 在多台web server前架一台proxy做分流可以大大提高capacity與安全性,推薦Nginx。
    • 搭配virtual host,可將不同domain name的request導向不同的server。



最近剛好有使用forward proxy的需求,也就是用戶透過proxy連到public網路,如果遇到連接對向很慢或不存在的時候,此時proxy的connection就會被占住,直到timeout為止。剛開始是使用apache,apache prefork或worker模式下,其connection的數量是有限的(再設定檔內指定),若遇到上述的狀況,整體服務狀況就會變得很差。

Proxy的選擇
  • Apache + module proxy: 很吃記憶體,polling的做法不合用
  • Tinyproxy: 較apache省記憶體,但運作方式也是一個thread一個connection,response time比apache還差
  • Lighttpd: 不支援forward proxy,底層為epoll
  • Nginx: 不支援forward proxy,底層為epoll
  • Squid: 支援forward proxy,底層採用epoll (最後的選擇)

Squid的filter真的很強大,過濾ip, port, mac都沒有問題。
效能方面,我讓他hang了20,000條connection,new request上去反應並沒有被影響。

設定方面可以參考

2011/09/04

實作 TableView Section 展開/收合

iPhone中的UITableViewController變化真的很多!
最近剛好需要實作展開/收合的功能,效果如圖所示:

我是參考Expanding/Collapsing TableView Sections的實作,然後在自己簡化。
一個展開/收合的單位為一個Section,Row0表示Parent,Row1~N表示Child,程式碼中都有註解。

2011/08/31

Apache with event MPM mode

最近把apache當forward proxy來使用,遇到反應速度嚴重下降的問題。

Apache在prefork mode下,一個process同時間只能服務一條connection,而worker mode一個thread只能服務一條connection,他們都是blocking mode,一旦所有的process/thread被block住,就沒辦法再服務新的connection,系統全部都在等待io,CPU使用率相對很低。

Event MPM mode可以解決上述問題。

(題外話,就算是把fd設定成non-blocking,搭配polling (select())的方式,其反應速度仍遠不及event-driven,因為fd數目越多polling的時間就會越久,而且polling也是很浪費CPU的。Event-driven的高效能要在current connection量大時才看得出來,特別是keep-alive的connection。)

不過官方網站寫著event mode目前還在實驗階段:
Warning
This MPM is experimental, so it may or may not work as expected.

編譯與設定可以參考

Configure參數
./configure --with-mpm=event #主要是加這個參數

httpd.conf設定檔
        
     StartServers         1
     ServerLimit          1
     MaxClients           50
     MinSpareThreads      1
     MaxSpareThreads      10
     ThreadsPerChild      50
     MaxRequestsPerChild  0


Benchmark在上面的連結中也有提到。

2011/08/08

Oprofile - program performance analysis

一套 profiling 工具,透過分析結果可以得知程式運作這段期間,哪個 function 花費最多時間,哪一行程式碼被執行最多次。

下載

使用步驟
Initial and setup
$ opcontrol --init
$ opcontrol --reset 
$ opcontrol --setup --no-vmlinux --separate=library
$ opcontrol --start
--separate=none: 只想看程式本身的 function
--separate=lib: 想連程式使用到的library都一起看到
適度調整取樣率

啟動想分析的 program
$ ./app

Stop
$ opcontrol --dump
$ opcontrol --stop
$ opcontrol -h

Analysis
$ opreport -l ./app

CPU: CPU with timer interrupt, speed 1999.97 MHz (estimated)
Profiling through timer interrupt
samples  %        image name               symbol name
7251     30.3186  libx264.so.128           x264_cavlc_init
6247     26.1206  libx264.so.128           x264_coeff_level_run16
3018     12.6192  libx264.so.128           x264_analyse_init_costs   encoder/analyse.c:292
1496      6.2552  libavcodec.so.52.72.2    /opt/ffmpeg-0.6.5/lib/libavcodec.so.52.72.2
1426      5.9625  libc-2.12.so             __strcmp_sse42
1120      4.6831  libm-2.12.so             __ieee754_log2f
384       1.6056  libavformat.so.52.64.2   /opt/ffmpeg-0.6.5/lib/libavformat.so.52.64.2
329       1.3756  libc-2.12.so             memcpy
239       0.9993  libc-2.12.so             _int_malloc
213       0.8906  libm-2.12.so             __ieee754_pow
180       0.7526  libx264.so.128           x264_cqm_init

$ opannotate --source ./app

... (執行次數) (花費比例)

               :static uint64_t pop_buffer_value(struct transient * trans)
 11510  1.9661 :{ /* pop_buffer_value total:  89901 15.3566 */
               :        uint64_t val;
               :
 10227  1.7469 :        if (!trans->remaining) {
               :                fprintf(stderr, "BUG: popping empty buffer !\n");
               :                exit(EXIT_FAILURE);
               :        }
               :
               :        val = get_buffer_value(trans->buffer, 0);
  2281  0.3896 :        trans->remaining--;
  2296  0.3922 :        trans->buffer += kernel_pointer_size;
               :        return val;
 10454  1.7857 :}
...



在 AWS EC2 上使用 oprofile
opcontrol --deinit 
modprobe oprofile timer=1
opcontrol --reset 
opcontrol --no-vmlinux --separate=library
opcontrol --start


參考資料