檔案頭(File Header)
Dex檔案頭主要包括校驗和以及其他結構的偏移位址和長度資訊。
字段名稱 | 偏移值 | 長度 | 描述 |
---|---|---|---|
magic | 0x0 | 8 | 'Magic'值,即魔數字段,格式如”dex/n035/0”,其中的035表示結構的版本。 |
checksum | 0x8 | 4 | 校驗碼。 |
signature | 0xC | 20 | SHA-1簽名。 |
file_size | 0x20 | 4 | Dex檔案的總長度。 |
header_size | 0x24 | 4 | 檔案頭長度,009版本=0x5C,035版本=0x70。 |
endian_tag | 0x28 | 4 | 辨別位元組順序的常量,根據這個常量可以判斷檔案是否交換了位元組順序,預設情況下=0x78563412。 |
link_size | 0x2C | 4 | 連接配接段的大小,如果為0就表示是靜态連接配接。 |
link_off | 0x30 | 4 | 連接配接段的開始位置,從本檔案頭開始算起。如果連接配接段的大小為0,這裡也是0。 |
map_off | 0x34 | 4 | map資料基位址。 |
string_ids_size | 0x38 | 4 | 字元串清單的字元串個數。 |
string_ids_off | 0x3C | 4 | 字元串清單表基位址。 |
type_ids_size | 0x40 | 4 | 類型清單裡類型個數。 |
type_ids_off | 0x44 | 4 | 類型清單基位址。 |
proto_ids_size | 0x48 | 4 | 原型清單裡原型個數。 |
proto_ids_off | 0x4C | 4 | 原型清單基位址。 |
field_ids_size | 0x50 | 4 | 字段清單裡字段個數。 |
field_ids_off | 0x54 | 4 | 字段清單基位址。 |
method_ids_size | 0x58 | 4 | 方法清單裡方法個數。 |
method_ids_off | 0x5C | 4 | 方法清單基位址。 |
class_defs_size | 0x60 | 4 | 類定義類表中類的個數。 |
class_defs_off | 0x64 | 4 | 類定義清單基位址。 |
data_size | 0x68 | 4 | 資料段的大小,必須以4位元組對齊。 |
data_off | 0x6C | 4 | 資料段基位址 |
魔數字段
魔數字段,主要就是Dex檔案的辨別符,它占用4個位元組,在目前的源碼裡是 “dex\n”,它的作用主要是用來辨別dex檔案的,比如有一個檔案也以dex為字尾名,僅此并不會被認為是Davlik虛拟機運作的檔案,還要判斷這 四個位元組。另外Davlik虛拟機也有優化的Dex,也是通過個字段來區分的,當它是優化的Dex檔案時,它的值就變成”dey\n”了。根據這四個字 節,就可以識别不同類型的Dex檔案了。
跟在“dex\n”後面的是版本字段,主要用來辨別Dex檔案的版本。目前支援的版本号為“035\0”,不管是否優化的版本,都是使用這個版本号。
檢驗碼字段
主要用來檢查從這個字段開始到檔案結尾,這段資料是否完整,有沒有人修改過,或者傳送過程中是否有出錯等等。通常用來檢查資料是否完整的算法,有 CRC32、有SHA128等,但這裡采用并不是這兩類,而采用一個比較特别的算法,叫做adler32,這是在開源zlib裡常用的算法,用來檢查檔案 是否完整性。該算法由MarkAdler發明,其可靠程度跟CRC32差不多,不過還是弱一點點,但它有一個很好的優點,就是使用軟體來計算檢驗碼時比較 CRC32要快很多。可見Android系統,就算法上就已經為移動裝置進行優化了。
Java中可使用java.util.zip.Adler32類做校驗操作
SHA-1簽名字段
dex檔案頭裡,前面已經有了面有一個4位元組的檢驗字段碼了,為什麼還會有SHA-1簽名字段呢?不是重複了嗎?可是仔細考慮一下,這樣設計自有道理。因 為dex檔案一般都不是很小,簡單的應用程式都有幾十K,這麼多資料使用一個4位元組的檢驗碼,重複的機率還是有的,也就是說當檔案裡的資料修改了,還是很 有可能檢驗不出來的。這時檢驗碼就失去了作用,需要使用更加強大的檢驗碼,這就是SHA-1。SHA-1校驗碼有20個位元組,比前面的檢驗碼多了16個字 節,幾乎不會不同的檔案計算出來的檢驗是一樣的。設計兩個檢驗碼的目的,就是先使用第一個檢驗碼進行快速檢查,這樣可以先把簡單出錯的dex檔案丢掉了, 接着再使用第二個複雜的檢驗碼進行複雜計算,驗證檔案是否完整,這樣確定執行的檔案完整和安全。
SHA(Secure Hash Algorithm, 安全雜湊演算法)是美國國家安全局設計,美國國家标準與技術研究院釋出的一系列密碼散列函數。SHA-1看起來和MD5算法很像,也許是Ron Rivest在SHA-1的設計中起了一定的作用。SHA-1的内部比MD5更強,其摘要比MD5的16位元組長4個位元組,這個算法成功經受了密碼分析專家 的攻擊,也因而受到密碼學界的廣泛推崇。這個算法在目前網絡上的簽名,BT軟體裡就有大量使用,比如在BT裡要計算是否同一個種子時,就是利用檔案的簽名 來判斷的。同一份8G的電影從幾千BT使用者那裡下載下傳,也不會出現錯誤的資料,導緻電影不播放。
map_off字段
這個字段主要儲存map開始位置,就是從檔案頭開始到map資料的長度,通過這個索引就可以找到map資料。map的資料結構如下:
名稱 | 大小 | 說明 |
---|---|---|
size | 4位元組 | map裡項的個數 |
list | 變長 | 每一項定義為12位元組,項的個數由上面項大小決定。 |
map資料排列結構定義如下:
/*
*Direct-mapped "map_list".
*/
typedef struct DexMapList {
u4 size; /* #of entries inlist */
DexMapItem list[1]; /* entries */
}DexMapList;
每一個map項的結構定義如下:
/*
*Direct-mapped "map_item".
*/
typedef struct DexMapItem {
u2 type; /* type code (seekDexType* above) */
u2 unused;
u4 size; /* count of items ofthe indicated type */
u4 offset; /* file offset tothe start of data */
}DexMapItem;
DexMapItem結構定義每一項的資料意義:類型、類型個數、類型開始位置。
其中的類型定義如下:
/*map item type codes */
enum{
kDexTypeHeaderItem = 0x0000,
kDexTypeStringIdItem = 0x0001,
kDexTypeTypeIdItem = 0x0002,
kDexTypeProtoIdItem = 0x0003,
kDexTypeFieldIdItem = 0x0004,
kDexTypeMethodIdItem = 0x0005,
kDexTypeClassDefItem = 0x0006,
kDexTypeMapList = 0x1000,
kDexTypeTypeList = 0x1001,
kDexTypeAnnotationSetRefList = 0x1002,
kDexTypeAnnotationSetItem = 0x1003,
kDexTypeClassDataItem = 0x2000,
kDexTypeCodeItem = 0x2001,
kDexTypeStringDataItem = 0x2002,
kDexTypeDebugInfoItem = 0x2003,
kDexTypeAnnotationItem = 0x2004,
kDexTypeEncodedArrayItem = 0x2005,
kDexTypeAnnotationsDirectoryItem = 0x2006,
};
從上面的類型可知,它包括了在dex檔案裡可能出現的所有類型。可以看出這裡的類型與檔案頭裡定義的類型有很多是一樣的,這裡的類型其實就是檔案頭裡定義 的類型。其實這個map的資料,就是頭裡類型的重複,完全是為了檢驗作用而存在的。當Android系統加載dex檔案時,如果比較檔案頭類型個數與 map裡類型不一緻時,就會停止使用這個dex檔案
string_ids_size/off字段
這兩個字段主要用來辨別字元串資源。源程式編譯後,程式裡用到的字元串都儲存在這個資料段裡,以便解釋執行這個dex檔案使用。其中包括調用庫函數裡的類名稱描述,用于輸出顯示的字元串等。
string_ids_size辨別了有多少個字元串,string_ids_off辨別字元串資料區的開始位置。字元串的存儲結構如下:
/*
* Direct-mapped "string_id_item".
*/
typedef struct DexStringId {
u4 stringDataOff; /* file offset to string_data_item */
} DexStringId;
可以看出這個資料區儲存的隻是字元串表的位址索引。如果要找到字元串的實際資料,還需要通過個位址索引找到檔案的相應開始位置,然後才能得到字元串資料。 每一個字元串項的索引占用4個位元組,是以這個資料區的大小就為4*string_ids_size。實際資料區中的字元串采用UTF8格式儲存。
例如,如果dex檔案使用16進制顯示出來内容如下:
063c 696e 6974 3e00
其實際資料則是”<init>\0”
另外這段資料中不僅包括字元串的字元串的内容和結束标志,在最開頭的位置還标明了字元串的長度。上例中第一個位元組06就是表示這個字元串有6個字元。
關于字元串的長度有兩點需要注意的地方:
1、關于長度的編碼格式
dex檔案裡采用了變長方式表示字元串長度。一個字元串的長度可能是一個位元組(小于256)或者4個位元組(1G大小以上)。字元串的長度大多數都是小于 256個位元組,是以需要使用一種編碼,既可以表示一個位元組的長度,也可以表示4個位元組的長度,并且1個位元組的長度占絕大多數。能滿足這種表示的編碼方式有 很多,但dex檔案裡采用的是uleb128方式。leb128編碼是一種變長編碼,每個位元組采用7位來表達原來的資料,最高位用來表示是否有後繼位元組。
它的編碼算法如下:
/*
* Writes a 32-bit value in unsigned ULEB128 format.
* Returns the updated pointer.
*/
DEX_INLINE u1* writeUnsignedLeb128(u1* ptr, u4 data)
{
while (true) {
u1 out = data & 0x7f;
if (out != data) {
*ptr++ = out | 0x80;
data >>= 7;
} else {
*ptr++ = out;
break;
}
}
return ptr;
}
它的解碼算法如下:
/*
* Reads an unsigned LEB128 value, updating the given pointer to point
* just past the end of the read value. This function tolerates
* non-zero high-order bits in the fifth encoded byte.
*/
DEX_INLINE int readUnsignedLeb128(const u1** pStream) {
const u1* ptr = *pStream;
int result = *(ptr++);
if (result > 0x7f) {
int cur = *(ptr++);
result = (result & 0x7f) | ((cur & 0x7f) << 7);
if (cur > 0x7f) {
cur = *(ptr++);
result |= (cur & 0x7f) << 14;
if (cur > 0x7f) {
cur = *(ptr++);
result |= (cur & 0x7f) << 21;
if (cur > 0x7f) {
/*
* Note: We don't check to see if cur is out of
* range here, meaning we tolerate garbage in the
* high four-order bits.
*/
cur = *(ptr++);
result |= cur << 28;
}
}
}
}
*pStream = ptr;
return result;
}
根據上面的算法分析上面例子字元串,取得第一個位元組是06,最高位為0,是以沒有後繼位元組,那麼取出這個位元組裡7位有效資料,就是6,也就是說這個字元串是6個位元組,但不包括結束字元“\0”。
2、關于長度的意義
由于字元串内容采用的是UTF-8格式編碼,表示一個字元的位元組數是不定的。即有時是一個位元組表示一個字元,有時是兩個、三個甚至四個位元組表示一個字元。 而這裡的長度代表的并不是整個字元串所占用的位元組數,表示這個字元串包含的字元個數。是以在讀取時需要注意,尤其是在包含中文字元時,往往會因為讀取的長 度不正确導緻字元串被截斷。