2012年3月24日 星期六

在 Windows Phone 上讀取 BIG5 網頁

SNAGHTML2b39c0e

Windows Phone SDK 是不支援 BIG5 編碼的,它只支援三種編碼。

BigEndianUnicode、Unicode、UTF8

image 

 

因此若要讀取 BIG5 的網頁,就必須自行將 BIG5 轉換為 Unicode,實作的主要重點在於:

  1. 取得 BIG5 –> Unicode 轉換表。(BIG5.TXT)
  2. 將轉換表改用 Dictionary 型態儲存。
  3. 讀取網頁時,用 stream,不要用 WebClient!

使用 WebClient 來讀取網頁,得到的並非是 raw data,而是已被 default encoding 轉換過的 data。更進一步解釋,就是使用了 UTF8 –> Unicode 轉換表來轉換 BIG5 的資料,這會導致資料整個變成不可用的亂碼。

 

實作

將 BIG5.TXT 加入專案

image 

 

在 ContentPanel 加入一個 textBlock

image

 

MainPage.xaml.cs

using System;
using System.Collections.Generic;
using System.Linq;
using System.Net;
using System.Windows;
using System.Windows.Controls;
using System.Windows.Documents;
using System.Windows.Input;
using System.Windows.Media;
using System.Windows.Media.Animation;
using System.Windows.Shapes;
using Microsoft.Phone.Controls;
 
using System.IO;
using System.Globalization;
using System.Diagnostics;
using System.Text;
 
namespace PhoneApp2
{
    public partial class MainPage : PhoneApplicationPage
    {
        // async http
        delegate void DownDelegate(string content);
        DownDelegate downDelegate;
 
        // Big5 to Unicode mapping table
        private static Dictionary<int, int> mBIG5_Unicode_MAP = new Dictionary<int, int>();
 
        // 建構函式
        public MainPage()
        {
            InitializeComponent();
            createBig5ToUnicodeDictionary();
            readBig5WebPage();
        }
 
        private void setConent(string content)
        {
            textBlock1.Text = content;
        }
 
        private void createBig5ToUnicodeDictionary()
        {
            var resource = Application.GetResourceStream(new Uri("BIG5.TXT", UriKind.Relative));
            StreamReader sr = new StreamReader(resource.Stream);
            string line;
            while ((line = sr.ReadLine()) != null)
            {
                // 忽略註解
                if (line.StartsWith("#")) continue;
                string[] lTokens = line.Split(new char[] {'\t'});
                mBIG5_Unicode_MAP.Add(hexToInt(lTokens[0].Substring(2)), hexToInt(lTokens[1].Substring(2)));
            }
        }
 
        private void readBig5WebPage()
        {
            textBlock1.Text = "讀取中...";
            string url = "http://www.businessweekly.com.tw/feednews.php";
            downDelegate = setConent;
            System.Net.WebRequest request = HttpWebRequest.Create(url);
            IAsyncResult result = request.BeginGetResponse(ResponseCallback, request);
        }
 
        private void ResponseCallback(IAsyncResult result)
        {
            HttpWebRequest request = (HttpWebRequest)result.AsyncState;
            WebResponse response = request.EndGetResponse(result);
            Stream s = response.GetResponseStream();
            Dispatcher.BeginInvoke(downDelegate, big5ToUnicode(s).ToString());
        }
 
        private StringBuilder big5ToUnicode(Stream s)
        {
            StringBuilder lSB = new StringBuilder();
            byte[] big5Buffer = new byte[2];
            int input;
            while ((input = s.ReadByte()) != -1)
            {
                if (input > 0x81 && big5Buffer[0] == 0)
                {
                    big5Buffer[0] = (byte)input;
                }
                else if (big5Buffer[0] != 0)
                {
                    big5Buffer[1] = (byte)input;
                    int Big5Char = (big5Buffer[0] << 8) + big5Buffer[1];
                    try
                    {
                        int UTF8Char = mBIG5_Unicode_MAP[Big5Char];
                        lSB.Append((char)UTF8Char);
                    }
                    catch (Exception)
                    {
                        lSB.Append((char)mBIG5_Unicode_MAP[0xA148]);
                    }
 
                    big5Buffer = new byte[2];
                }
                else
                {
                    lSB.Append((char)input);
                }
            }
            return lSB;
        }
 
        private int hexToInt(string hexString)
        {
            return int.Parse(hexString, NumberStyles.HexNumber);
        }
    }
}

 

範例程式碼下載

 

參考連結

2011年12月10日 星期六

My iOS UI Automation Testing(自動化測試)

PastedGraphic-1
自動化測試是程式開發中,不可或缺的一環,而 xcode Instruments 裡面的 Automation tool ,便是 iOS UI 的自動化測試工具。
Automation tool 的測試腳本中,可以看得出來編譯完成的 APP,是符合 DOM(Document Object Model) 的。所以測試腳本,也很理所當然找了它最老的夥伴 - Javascript 來調用。

往下閱讀之前,建議一定要先看過...

DOM 雖然強大,但寫測試時卻又嫌囉嗦,要準確取得元件是一件很麻煩的事,看完上述連結,可以知道有兩種取得元件的方式:
  1. 用位置來取得,例如「window.buttons()[0]」,指的是第一個建立出來的 button。
  2. 用「name」來取得,例如「window.buttons()[“login”]」。
第一種方式,元件數量少還好,元件一多,會很容易指錯,而且測試程式碼可讀性幾乎是0,根本不知道到底取得的是哪一個元件。
第二種方式是比較理想的,但必須在 xib 上,或是 Objective-C 程式碼中,另外指定 accessibilityLabel 來命名 DOM 這邊所謂的「name」,也是挺麻煩的。
上述連結有這兩種方式的圖文說明。

突然想到之前寫 RSpec(Ruby 的自動測試框架) 測試 RoR 的時候,所有的操作,都只需要直接使用「肉眼所看到的字」,便可正確取得元件的文字或是進行操作(如點擊),於是便動手進行實作,簡化測試的程式。

https://github.com/alexvollmer/tuneup_js
借用了上述的測試框架,將自己寫的整合了進去,主要寫了三個 function
function haveContent(text) {

    var elements = window.elements();

    

    for (i = 0; i < elements.length; i++) {

        var element = elements[i];

        if (element.name() == text && element.isValid()) {

            return true;

        }

    }

    return false;

}

 

function click_button(name) {

    var buttons = window.buttons();

    

    for (i = 0; i < buttons.length; i++) {

        var button = buttons[i];

        if (button.name() == name) {

            button.tap();

        }

    }

}

 

function fill_in(name, text) {

    var textFields = window.textFields();

    

    for (i = 0; i < textFields.length; i++) {

        var textField = textFields[i];

        if (textField.name() == name) {

            textField.setValue(text);

        }

    }

}

haveContentclick_button 這兩個 function,只需指定肉眼看得到的文字就好,例如
test("Clear Hello", function(app, target) {

     click_button("Clear All");

     assertFalse(haveContent("Hello World"));

});

fill_in 則還是得在 xib 上,或是  Objective-C 程式碼中,另外指定 accessibilityLabel ,讓測試程式可以準確的指定到輸入框中,例如
test("Say Hello", function(app, target) {

     fill_in("name", "World");

     click_button("Say Hello");

     assertTrue(haveContent("Hello World"));

});

其實這三個 function 就可以搞定 95% 的測試了,其餘等需要時再補上,提供完整的範例下載

其它參考資源:

2011年11月27日 星期日

關於 Objective-C memory

兩個問題:
  1. 一個app在mobile device上使用了多少記憶體可能導致crash?
  2. 我們要如何看到我們的app使用記憶體的狀況?
在回答這兩個問題之前,再特別強調一個觀念:
在Objective-C裡面指的memory leak,只是產生了一個程式再也無法用任何方式回收的記憶體空間,其實它沒有那麼恐怖!(指的是它並非是造成crash的主因)」
為何我特別標註第一句話,因為在通用語言的定義中,指的是「沒有任何程式碼來回收的記憶體空間,都叫做memory leak」,事實上也是如此,真正恐怖的不是Objective-C指的memory leak,而是你沒有好好控管你的程式,導致一堆記憶體空間雖然可以用程式回收,但你卻沒有在適當的時機回收,這種memory leak,是你用xcode(Objective-C IDE)的Leaks工具也抓不出來的!
更詳細的memory leak的例子,可以參考這個連結http://www.shopify.com/technology/4321572-most-memory-leaks-are-good
這又回到了上面第二個問題,我們即便知道了記憶體在mobile device上是很珍貴的,但我們如果不知道自己寫的app是如何使用記憶體的,那我們又怎麼規劃最適當的記憶體使用方式?(xcode 4.2預設已經是ARC(Automatic Reference Counting),理論上並不會再出現Objective-C指的memory leak,但仍會出現通用語言定義的memory leak)
先回答第二個問題,其實xcode(instruments)內建的allocations工具就可以觀察記憶體使用狀況了。
再回到第一個問題,「一個app在mobile device上使用了多少記憶體可能導致crash
記憶體使用本來就是作業系統動態管理的,沒有「明確的指標」是正常的,但一定有所謂的理論危險值,而就我查到的資料,雖然沒有人給100%的肯定答案,不過仍有一些人有推論值(這部份可以隨著我們觀察的經驗,越來越精準):
  • iPhone3G:14MB進入危險邊緣、20MB肯定crashl
  • iPhone3GS:iOS改為更動態的分配記憶體,ram也較大(256mb),較不容易發生,有人推論是iPhone3G的四倍左右,也就是56-80MB
  • ipad:ram規格同上
  • iPhone4:沒查到相關資料,但總之iphone4的ram是512mb,然後作業系統iOS4~5大概佔1xx,我猜超過200mb就進入危險邊緣。
  • ipad2:ram規格同上

參考資源








2011年11月7日 星期一

解決 iOS5 / xcode 4.2 導致第三方函式庫無法使用的問題

由於 iOS5 SDK 將 retain, release, autorelease, dealloc…等記憶體管理的指令都拿掉了,對後進開發者雖然是一大福音,但此舉卻也導致許多第三方的函式庫無法正常使用,最好的解決方案就是告訴 IDE 不要對這些第三方的函式庫進行 Automatic Reference Counting(ARC)。
target > build phases > compile sources,將有用到這個記憶體管理的檔案,全部加上
-fno-objc-arc

img

如此一來,便可正常引用第三方的函式庫了。

Note : 相反則是 -fobjc-arc

2011年11月5日 星期六

Objective-C Protocol 觀念

http://www.otierney.net/objective-c.html.zh-tw.big5 裡,其實就已經很清楚的提到 Objective-C 的 Protocol 與 Java 的 Interface 相同,底下以一個例子說明。
我們有個 Hero,職業是巫師,而這個職業有火球技能。火球技能的傷害算法是
火球等級 * 火球基礎傷害 * 職業加成倍率

那麼身為 Hero 的火球技能,必須知道 Hero 現在的職業加成倍率為何才對。如果 Hero 轉職了,職業加成倍率也就不同了。所以每當火球技能引發傷害時,都得動態問問看 Hero 現在的職業加成倍率。
在 Objective-C 裡面會這樣實作
Wizard.h
#import <Foundation/Foundation.h>
#import "FireBolt.h"
 
@interface Wizard : NSObject <MagicDamage> {
    FireBolt* fireBolt;
    int intelligence;
    int level;
}
 
-(void) castFireBolt:(id) target;
 
@end


Wizard.m
#import "Wizard.h"
 
@implementation Wizard
 
- (Wizard*) init
{
    self = [super init];
    
    if (self) {
        intelligence = 15;
        level = 5;
        
        FireBolt *tmpFireBolt = [[FireBolt alloc] init];
        tmpFireBolt.delegate = self;
        fireBolt = tmpFireBolt;
    }
    
    return self;
 
}
 
-(void) castFireBolt:(id) target
{
    [fireBolt cast:target];
}
 
-(double) getRate
{
    return intelligence * level;
}
@end


FireBolt.h
#import <Foundation/Foundation.h>
 
@protocol MagicDamage
 
-(double) getRate;
 
@end
 
@interface FireBolt : NSObject {
    double baseDamage;
    int level;
}
 
@property (nonatomic, strong) id <MagicDamage> delegate;
 
-(void) cast:(id) target;
 
@end
FireBolt.m
#import "FireBolt.h"
#import "Enemy.h"
 
@implementation FireBolt
 
@synthesize delegate;
 
- (FireBolt*) init
{
    self = [super init];
    
    if (self) {
        level = 1;
        baseDamage = 10;
    }
    
    return self;
    
}
 
-(void) cast:(Enemy*) target
{
    double rate = [self.delegate getRate];
    double damage = rate * baseDamage * level;
    NSLog(@"%@ 被攻擊了!受到 %f 的傷害", target.Name, damage);
    target.Life -= damage;
    NSLog(@"%@ 的生命剩下 %d", target.Name, target.Life);
}
 
@end


Enemy.h
#import <Foundation/Foundation.h>
 
@interface Enemy : NSObject
 
@property (nonatomic) int Life;
@property (nonatomic, retain) NSString* Name;
 
- (Enemy*) initWithName:(NSString*) name;
 
@end


Enemy.m
#import "Enemy.h"
 
@implementation Enemy
 
@synthesize Life, Name;
 
- (Enemy*) initWithName:(NSString*) name
{
    self = [super init];
    
    if (self) {
        self.Name = name;
        self.Life = 5000;
    }
    
    return self;
    
}
 
@end


main.m
#import "Wizard.h"
#import "Enemy.h"
 
int main( int argc, const char *argv[] ) {
    Enemy *dan = [[Enemy alloc] initWithName:@"Dan"]; 
    Wizard *zephyr = [[Wizard alloc] init];
    [zephyr castFireBolt:dan];
    [zephyr castFireBolt:dan];
    [zephyr castFireBolt:dan];
    [zephyr castFireBolt:dan];
    [zephyr castFireBolt:dan];
    
    return 0;
}


Output
2011-11-05 17:31:53.595 test[886:f803] Dan 被攻擊了!受到 750.000000 的傷害
2011-11-05 17:31:53.596 test[886:f803] Dan 的生命剩下 4250
2011-11-05 17:31:53.597 test[886:f803] Dan 被攻擊了!受到 750.000000 的傷害
2011-11-05 17:31:53.597 test[886:f803] Dan 的生命剩下 3500
2011-11-05 17:31:53.598 test[886:f803] Dan 被攻擊了!受到 750.000000 的傷害
2011-11-05 17:31:53.598 test[886:f803] Dan 的生命剩下 2750
2011-11-05 17:31:53.599 test[886:f803] Dan 被攻擊了!受到 750.000000 的傷害
2011-11-05 17:31:53.599 test[886:f803] Dan 的生命剩下 2000
2011-11-05 17:31:53.600 test[886:f803] Dan 被攻擊了!受到 750.000000 的傷害
2011-11-05 17:31:53.600 test[886:f803] Dan 的生命剩下 1250