雷 濤

(華南師范大學(xué) 物理與電信工程學(xué)院，廣州 510006)

隱馬爾可夫模型下視頻手寫簽名認(rèn)證算法研究

雷 濤

(華南師范大學(xué) 物理與電信工程學(xué)院，廣州 510006)

為了提高視頻手寫簽名認(rèn)證的準(zhǔn)確率，確保身份認(rèn)證的嚴(yán)謹(jǐn)性，需要對隱馬爾可夫(Hidden Markov Models,HMM)模型下視頻手寫簽名認(rèn)證算法進行改進設(shè)計;使用當(dāng)前算法對視頻手寫簽名進行認(rèn)證時，存在認(rèn)證判斷誤差大、效率低的問題;提出基于HMM模型下視頻手寫簽名認(rèn)證算法;該算法將使用Wacom手寫板采集手寫簽名特征點及壓力數(shù)據(jù)，對采集到的手寫簽名特征與壓力數(shù)據(jù)進行預(yù)處理，消除采集過程中環(huán)境和手寫板產(chǎn)生的影響，并且規(guī)范采集的視頻手寫簽名特征位置、尺寸，提取手寫簽名特征與壓力數(shù)據(jù)，再以HMM模型對已提取的視頻手寫簽名特征點與壓力數(shù)據(jù)進行認(rèn)證與計算，確定簽名的真實度;實驗仿真證明，所提算法提高了視頻簽名認(rèn)證的性能。

隱馬爾可夫模型；視頻手寫簽名；簽名認(rèn)證

0 引言

視頻手寫簽名認(rèn)證是對個人特有的生理行為或生物特征進行認(rèn)證的一種認(rèn)證技術(shù)，隨著科學(xué)技術(shù)的發(fā)展，該技術(shù)已受到人們的重視[1]。手寫簽名認(rèn)證是身份認(rèn)證的傳統(tǒng)認(rèn)證方法，但隨著電子技術(shù)的發(fā)展，推出視頻手寫簽名認(rèn)證方法，現(xiàn)有的視頻手寫簽名認(rèn)證方法大多采用提取關(guān)鍵點或筆畫特征來提高手寫簽名認(rèn)證效果[2]。手寫簽名有很嚴(yán)重的連筆現(xiàn)象，使得視頻手寫簽名不能穩(wěn)定、準(zhǔn)確的判斷出真假簽名[3]。而基于HMM模型下視頻手寫簽名認(rèn)證算法，使用Wacom手寫板采集手寫簽名的特征點與壓力數(shù)據(jù)，對采集到的手寫簽名特征與壓力數(shù)據(jù)進行預(yù)處理，消除采集過程中環(huán)境和手寫板產(chǎn)生的噪聲干擾，利用高斯濾波器對視頻手寫簽名樣本的各個分量進行平滑化處理，并對采集到的視頻手寫簽名特征位置、尺寸進行規(guī)范化，對自然筆畫進行筆畫分段，獲得一個比較穩(wěn)定的筆畫序列，消除視頻手寫簽名過程中書寫大小及在手寫板坐標(biāo)系中位置的不同對手寫簽名認(rèn)證結(jié)果產(chǎn)生的干擾，采用HMM算法有效的提取手寫簽名的每一個筆畫特征，除去手寫簽名筆記中不穩(wěn)定的因素，并對筆跡進行適當(dāng)?shù)膭澐?，確保手寫簽名認(rèn)證的準(zhǔn)確性。通過HMM模型對視頻手寫簽名進行認(rèn)證。由于視頻手寫簽名認(rèn)證的普遍使用，使得視頻手寫簽名認(rèn)證受到許多社會人士的關(guān)注與重視，同時取得了一定的研究成果[4-5]。

文獻[6]提出基于信息融合的視頻手寫簽名認(rèn)證算法。采用三種不同的計算方法分別計算出測試簽名和參考簽名的可信度，再將三種算法的計算結(jié)果加權(quán)融合，以加權(quán)融合的結(jié)果進行簽名真假最終的判定。信息融合算法的誤拒率和誤納率都有顯著的提高，但該算法的計算量較多，計算復(fù)雜。文獻[7]提出基于多項式的視頻手寫簽名認(rèn)證算法，主要采用多項式算法計算手寫簽名曲線中特征點的匹配情況。首先提取手寫簽名曲線中特征點位置坐標(biāo)，再將手寫簽字特征的至高點與至低點提取出來，并以Fréchet距離對手寫簽字特征的至高點與至低點進行研究，手寫簽名曲線有一定的相似性，在此基礎(chǔ)上建立手寫簽名曲線相似性的數(shù)學(xué)模型，并以多項式算法求解，但該算法認(rèn)證視頻手寫簽名真假的有效性較低。文獻[8]提出基于DTW的視頻手寫簽名認(rèn)證算法，DTW算法結(jié)合距離測度和時間來認(rèn)證視頻手寫簽名的真假，對手寫簽名模板全部或局部的壓縮、擴展或變形后的特點信息進行匹配，尋找出匹配模板與測試模板之間手寫簽名數(shù)據(jù)的匹配路徑，解決動態(tài)模板的相似度和分類問題。該算法具有概念簡潔、算法魯棒的優(yōu)點。但在準(zhǔn)確率上需要進一步的研究。

針對上述問題，提出基于HMM模型下視頻手寫簽名認(rèn)證算法。實驗仿真證明，HMM模型提高了視頻手寫簽名認(rèn)證的準(zhǔn)確率。

1 HMM模型的基本理論

HMM是隱馬爾可夫模型，該模型可以通過觀察參數(shù)確定該過程中的隱含參數(shù)，然后利用這些參數(shù)來作進一步的分析，進而達到認(rèn)證的目的[9-10]?？梢杂萌M表示一個標(biāo)準(zhǔn)的HMM，如：

λ=(A,B,π)

(1)

其中：A、B、π3個元素分別代表的意義如下：

(2)

bj,k=p(qt=Ok/qt=θj)，1≤j≤N，1≤k≤M

(3)

3)HMM初始狀態(tài)概率分布為：

πi=p(q1=θi)，1≤i≤N

(4)

HMM的隱含狀態(tài)在初始時刻t=1的概率矩陣為p(θ1)=p1，則初始狀態(tài)概率矩陣為：

π=[P1,P2,P3]

(5)

其中θ表示HMM的隱藏狀態(tài)，O表示HMM的可觀測狀態(tài)，N是自然數(shù)。

想要在視頻手寫簽名認(rèn)證中引用HMM算法，就要解決3個HMM的基本問題。

1)建模問題，調(diào)整模型λ的參數(shù)：λ=(A,B,π)使模型概率值p(O/λ)達到最大值。

2)預(yù)測問題，HMM的模型參數(shù)λ=(A,B,π)為未知，如何調(diào)整參數(shù)使觀測序列O=O1,O2,O3......OT的概率值p(O/λ)最大化。

3)評價問題，已給定觀測序列O=O1,O2,O3......OT，則HMM模型可以表達其意義上的狀態(tài)序列為I=I1,I2,I3......IT。

2 HMM模型下視頻手寫簽名特征抽取

2.1 HMM模型下視頻手寫簽名特征收集

為了收集HMM模型下視頻手寫簽名特征，將使用Wacom手寫板、PTH451寫圖板或Por無線數(shù)位手寫板收集視頻手寫簽名特征。在手寫板上簽名經(jīng)常會出現(xiàn)瞬間滑動和沖擊，在加上Wacom手寫板多數(shù)采用多維力傳感器采集信號，使得產(chǎn)生的滑動和沖擊導(dǎo)致簽名過程中手寫筆畫的落筆與抬筆均出現(xiàn)短小轉(zhuǎn)折，這種形式的轉(zhuǎn)折與正常人們手寫簽名習(xí)慣中的筆鋒不同，筆鋒的出現(xiàn)和方向具有一定隨機性，對HMM模型認(rèn)證視頻手寫簽名影響較小，因此我們將采用優(yōu)化的多維力傳感器進行特征點與壓力數(shù)據(jù)的采集，它以100Hz的頻率采集手寫簽名特征點與壓力數(shù)據(jù)，采集到的特征點表示為(x,y)，壓力表示為p，在一定的范圍內(nèi)書寫姓名時不與手寫板接觸也可以采集到特征點，不過此時P=0。

假如一個簽名有R個特征點，則其整體特征可以表示為：

(6)

其中x、y表示橫坐標(biāo)和縱坐標(biāo)，P表示特征點的壓力，h表示從第一個視頻手寫簽名特征點開始的相對時間，單位毫秒，其中p1≠0，pR≠0且相鄰視頻手寫簽名特征點的時間間隔固定，即ht+1-ht=const，為10毫秒。

2.2 視頻手寫簽名特征預(yù)處理

由于在HMM模型下采集視頻手寫簽名特征過程中，受到環(huán)境噪聲、采集設(shè)備的差異、簽名姿勢等各種因素的影響，采集到的樣本簽名經(jīng)常出現(xiàn)大小不一、傾斜程度不一、長度相差懸殊的問題，給HMM模型認(rèn)證視頻手寫簽名帶來極大的影響，為了盡可能的消除各個影響因素，必須對采集的手寫簽名特征進行預(yù)處理。預(yù)處理包括兩個步驟：平滑化和規(guī)范化，詳細(xì)的步驟如下所示。

1)平滑化：對采集到的視頻手寫簽名特征進行平滑化處理，利用高斯濾波器，對視頻手寫簽名樣本的各個分量進行平滑化處理，消除特征采集過程中環(huán)境和，平滑后x軸坐標(biāo)為：

(7)

其中：

(8)

同理可得平滑后的y(t)、Fx(t)、Fy(t)、Fz(t)等各分量。在公式中高斯濾波器參數(shù)σ取為1，即取滑動窗寬度為5個特征點。

2)規(guī)范化：對采集到的視頻手寫簽名特征的位置、尺寸進行規(guī)范化，消除視頻手寫簽名過程中書寫大小和在手寫板坐標(biāo)系中位置不同對認(rèn)證結(jié)果產(chǎn)生的影響。視頻手寫簽名位置的平移和尺寸的規(guī)范化與坐標(biāo)變換同時完成：

x′(t)=[x(t)-xcenter]S/max(width,height)

(9)

y′(t)=[y(t)-ycenter]S/max(width,height)

(10)

其中：

(11)

(12)

公式(11)(12)為視頻手寫簽名的寬度和高度；xcenter=width/2，ycenter=height/2為簽名外接矩形中心的坐標(biāo)；S是規(guī)范化后手寫簽名外接正方形的邊長，規(guī)范化后將得到一個被標(biāo)準(zhǔn)正方形包圍的視頻手寫簽名，該簽名能夠有效保持原有的寬高比例。

視頻手寫簽名筆跡中筆跡轉(zhuǎn)折點的速度是最慢的，所以將速度最慢的點設(shè)置為筆跡分段的關(guān)鍵點。根據(jù)Fz方向的力值確定落筆和抬筆，得到手寫簽名的自然筆畫，然后根據(jù)速度計算公式，計算出每個分段關(guān)鍵點的速度值，對于t時刻的手寫簽名關(guān)鍵點，選取任意兩個相鄰的手寫簽名關(guān)鍵點坐標(biāo)代入公式(13)(14)分別計算該點在x和y方向的速度分量：

(13)

(14)

可以得到，t時刻點速度的大小為；

(15)

2.3 HMM模型下視頻手寫簽名特征提取與認(rèn)證

對預(yù)處理后視頻手寫簽名的每一個筆畫進行特征提取，將筆畫的起始點與結(jié)束點視為特征點，開始點和結(jié)束點對筆跡形狀起關(guān)鍵作用，HMM算法有效的保留筆跡特點，除去筆記中不穩(wěn)定因素，并對筆跡進行適當(dāng)?shù)膭澐?，在視頻手寫簽名的認(rèn)證過程中筆畫分段是一個重要的步驟，筆畫分段的穩(wěn)定性和可靠性直接影響著手寫簽名的認(rèn)證結(jié)果。能否通過曲線的轉(zhuǎn)折點來對筆畫進行分段，并結(jié)合手寫簽名速度，確保手寫簽名特征提取的穩(wěn)定性，是視頻手寫簽名特征點選取的關(guān)鍵，具體的HMM模型下視頻手寫簽名特征點選取算法實現(xiàn)過程如下：

1)標(biāo)記手寫簽名筆劃的開始點和結(jié)束點，即手寫簽名的特征點。

2)設(shè)點pstart和pend為已求得的手寫簽名特征點，pi為pstart和pend之間的手寫簽名筆劃段上的某一點，i∈(start,end)，通過下列步驟求得pstart和pend之間的筆跡所有特征點。

①若pstart和pend之間不存在特征點，則結(jié)束計算。若pstart和pend重合，則轉(zhuǎn)到第②步，否則轉(zhuǎn)到第④步。

②計算pi和pstart之間的直線距離計算公式為：

di=d(pi,pstart)

(16)

通過公式(16)求得di的最大值dmax和對應(yīng)點pn。

③若dmax>MinEdage，則轉(zhuǎn)到第⑧步，否則結(jié)束計算。

(17)

通過公式(17)求得di的最大值dmax和對應(yīng)點pn。

⑤若dmax>MinArc，則轉(zhuǎn)到第⑧步，否則執(zhí)行⑥步。

⑥分別計算pi到pstart和pend的距d(pi,pstart)和d(pi,pend)計算公式為：

(18)

公式(18)求得di的最大值dmax和對應(yīng)點pn。

⑦若dmax>MinEdge，則轉(zhuǎn)到第⑧步，否則結(jié)束計算。

⑧將點pn選取為手寫簽名的特征點，并使用HMM模型對新的筆劃段pstartpn和pnpend進行處理。

HMM模型算法中的MinArc和MinEdge為定值，分別表示手寫簽名特征點的最小垂直偏離量和最小直線偏離量。在本系統(tǒng)中我們?nèi)inArc=3.0，MinEdge=8.0。

τt=Meani-ω×Vart

(19)

其中Meani和Vart分別為第i用戶訓(xùn)練樣本集的規(guī)范化后輸出概率的平均值和方差；ω為闌值系數(shù)，系統(tǒng)中所有用戶取為相同值。

3 實驗與分析

本實驗將采用VC2004手寫簽名數(shù)據(jù)庫，數(shù)據(jù)庫包含60個人的漢字視頻手寫簽名數(shù)據(jù)，每個人都有將近30個手寫簽名，其中有15個手寫是真實簽名，真實簽名與模仿簽名數(shù)據(jù)中包括手寫簽名漢字、每個時刻采集到的手寫簽名特征點的坐標(biāo)位置X(t)和Y(t)；并且包括手寫簽名時運筆壓力P(t)筆傾斜的方位角Azimuth以及筆傾斜的高度角Altitude數(shù)據(jù)。該實驗將VC2004手寫簽名數(shù)據(jù)庫中的45個人的漢字視頻手寫簽名數(shù)據(jù)平均分成3份實驗數(shù)據(jù)集，分別以HMM模型認(rèn)證算法、信息融合算法、多項式的算法以及基DTW算法進行實驗。

實驗中每個手寫簽名的起始點不同，為了避免手寫簽名起始點對算法的影響，需要對數(shù)據(jù)規(guī)范化處理，手寫簽名越復(fù)雜，認(rèn)證的結(jié)果越準(zhǔn)確，通過實驗確定相關(guān)的參數(shù)，即懲罰因子為C=100 000方差的倒數(shù)1/σ2=0.08，而HMM模型我們則選擇高斯密度函數(shù)連續(xù)的HMM模型，為了方便比較這3種算法認(rèn)證視頻手寫簽名的性能，將使用DET曲線中的等錯率來體現(xiàn)。3種算法在各個狀態(tài)及不同混合度下的等錯率分別用3個表格表示，如表1、表2、表3所示。

表1 信息融合算法在各個狀態(tài)及不同混合度下的等錯率

為了顯示HMM模型認(rèn)證算法在各個狀態(tài)及不同混合度數(shù)下的等錯率，如表2所示。

表1、表2與表3對比可以看出，HMM模型認(rèn)證算法相對于信息融合算法與DTW算法的手寫簽名認(rèn)證在性能上有所提高。從表1中還可以看出，當(dāng)多項式算法的認(rèn)證狀態(tài)數(shù)為1時，手寫簽名特征點數(shù)據(jù)出現(xiàn)大量混疊現(xiàn)象，使系統(tǒng)等錯率提高，這主要是因為該算法采集到的時間函數(shù)包含視頻手寫簽名特征信息，直接將視頻手寫簽名特征信息代入時間函數(shù)，導(dǎo)致實際認(rèn)證過程計算量過大，導(dǎo)致手寫簽名的數(shù)據(jù)出現(xiàn)大量的冗余數(shù)據(jù)，認(rèn)證效果不理想。

表2 HMM模型認(rèn)證算法在各個狀態(tài)及不同混合度下的等錯率

表3 DTW算法在各個狀態(tài)及不同混合度數(shù)下的等錯率

狀態(tài)數(shù)N以及高斯混合度M對系統(tǒng)認(rèn)證性能的影響從表1、表2、表3可以看出，當(dāng)狀態(tài)數(shù)N較小且高斯混合度M較低時，信息融合算法認(rèn)證的效果較低，影響認(rèn)證視頻手寫簽名的準(zhǔn)確性。當(dāng)狀態(tài)數(shù)N較大且高斯混合度M較高時，用信息融合算法進行認(rèn)證耗時較長，導(dǎo)致認(rèn)證數(shù)據(jù)不足。因此選擇適當(dāng)?shù)臓顟B(tài)數(shù)N以及高斯混合度M對于提高系統(tǒng)認(rèn)證性能具有重要作用。正樣本數(shù)對認(rèn)證性能的影響從圖1、圖2所示。

在該實驗中，任取10個人的手寫簽名樣本，實驗手寫簽名集包含100個模仿簽名，而其中的真實簽名樣本數(shù)分別為1～15個，進行多次實驗，實驗手寫簽名集包含10個真實簽名樣本和90個模仿簽名樣本，并且此時系統(tǒng)的參數(shù)分別為懲罰因子為C=100 000，方差的倒數(shù)1/σ2=0.08，狀態(tài)數(shù)為N=3，混合度M=6。得到結(jié)果如圖1、圖2所示，從中可以看出，實驗中的正樣本數(shù)越大則表現(xiàn)在測試集上的FRR拒真率越小，相反其在測試集上的FAR認(rèn)假率越大。

圖1 不同真實簽名樣本數(shù)對FRR的影響

圖2 不同真實簽名樣本數(shù)對FAR的影響

4 結(jié)論

針對當(dāng)前算法在視頻手寫簽名認(rèn)證的過程中不能穩(wěn)定、準(zhǔn)確的判斷出簽名的真假簽名，降低了視頻手寫簽名的認(rèn)證效果。提出基于HMM模型下視頻手寫簽名認(rèn)證算法。仿真實驗結(jié)果表明，所提算法提高了視頻簽名認(rèn)證的性能。

[1] 范 菁,阮體洪,吳佳敏,等.基于二次譜聚類和HMM-RF混合模型的車輛行為識別方法研究[J].計算機科學(xué),2016,43(5):288-293.

[2] 王相海,叢志環(huán),方玲玲,等.混合種群多樣性自適應(yīng)遺傳操作的HMM訓(xùn)練模型[J].計算機研究與發(fā)展,2014,51(8):1833-1844.

[3] 達吾勒·阿布都哈依爾,古麗拉·阿東別克.基于HMM的聯(lián)機手寫哈薩克文字的識別研究[J].計算機工程與應(yīng)用,2014,50(1):145-148.

[4] 何 夢,吳仲城,李 芳.基于在線手寫簽名的密鑰生成方法[J].計算機工程,2016,42(10):164-168.

[5] 張利利,馬艷琴,卜春霞.標(biāo)準(zhǔn)模型下基于格的代理環(huán)簽名方案[J].數(shù)學(xué)的實踐與認(rèn)識,2015,45(3):107-111.

[6] 張騰飛,張敏情,王緒安.新的標(biāo)準(zhǔn)模型下安全的數(shù)字簽名方案[J].計算機應(yīng)用,2014,34(5):1300-1303.

[7] 馬 勇. 基于IBC機制的內(nèi)容中心網(wǎng)絡(luò)安全認(rèn)證方案[J]. 電子設(shè)計工程, 2016, 24(13):88-91.

[8] 張延紅,陳 明.標(biāo)準(zhǔn)模型下增強的基于身份部分盲簽名[J].四川大學(xué)學(xué)報工程科學(xué)版,2014,46(1):95-101.

[9] 許 輝,熱依曼吐爾遜,吾守爾斯拉木.基于HMM和GMM的維吾爾語聯(lián)機手寫體識別研究[J].計算機工程與應(yīng)用,2014,50(11):202-205.

[10] 趙洪建,達漢橋.基于HMM-LSSVM組合模型的模擬電路故障診斷[J].計算機工程與應(yīng)用,2014,50(19):237-240.

Research on Video Based Handwritten Signature Verification Algorithm Based on HMM Model

Lei Tao

(South China Normal University, School of Physics And Electronic Engineering,Guangzhou 510006,China)

In order to improve the accuracy of the handwritten signature verification and ensure the preciseness of the authentication, we need to improve the design of the HMM(Hidden Markov Models) algorithm. When the current algorithm is used to authenticate the handwritten signature, there are many problems such as low error and low efficiency. A video based handwritten signature verification algorithm based on HMM(Hidden Markov Models) model is proposed. The algorithm will use the Wacom tablet collection handwritten signature feature points and pressure data of handwritten signature features and pressure data collected for pretreatment, eliminate the influence of environment in the process of collecting and writing board, and standard video handwriting signature features location, size, feature extraction of handwritten signature and pressure data, and then to the HMM model of the extracted video signature feature points and the pressure data authentication and calculation, to determine the true degree of signature. The simulation results show that the proposed algorithm improves the performance of video signature verification.

hidden markov model; video handwritten signature; signature authentication

2017-04-01；

2017-04-24。

廣東省省級科技計劃項目：基于移動終端及網(wǎng)絡(luò)的遠(yuǎn)程智能醫(yī)療監(jiān)護平臺(2013B010204019)。

雷 濤(1973-)，女，四川成都人，博士研究生，講師，主要從事信息安全方向的研究。

1671-4598(2017)07-0290-04

10.16526/j.cnki.11-4762/tp.2017.07.072

TP391

A