本文使用CNN來對可穿戴傳感器收集的大規(guī)模運(yùn)動(dòng)數(shù)據(jù)進(jìn)行分類，同時(shí)對傳感器數(shù)據(jù)轉(zhuǎn)換為不同的圖像格式輸入做出了比較。最佳性能配置以92.1%的準(zhǔn)確率將50種健身房運(yùn)動(dòng)分類。

作者在這里使用的是CNN而不是RNN(常用來處理時(shí)序數(shù)據(jù))，是因?yàn)槊看蔚闹貜?fù)運(yùn)動(dòng)練習(xí)（如舉啞鈴）是花費(fèi)的時(shí)間是非常短的少于4秒，訓(xùn)練時(shí)不需要長時(shí)間的記憶。

數(shù)據(jù)集使用的是從PUSH（一種戴在前臂上的可穿戴設(shè)備，用于測量運(yùn)動(dòng)員的運(yùn)動(dòng)）收集的，該數(shù)據(jù)是由1441名男運(yùn)動(dòng)員和307名女運(yùn)動(dòng)員的449260個(gè)重復(fù)運(yùn)動(dòng)練習(xí)組成的49194個(gè)集合組成。

因?yàn)镃NN的輸入長度是固定的，所以將每條序列的長度固定為784。擁有超過784個(gè)樣本的代表被簡單地裁剪出來784個(gè)樣本，不足的采用zero-paded。

該裝置緊緊地綁在上臂上，分別用內(nèi)置加速度計(jì)和陀螺儀測量加速度和方向，因此，時(shí)間序列數(shù)據(jù)具有9個(gè)特征(Acc x， Acc y，Acc z) in the local frame， (Acc x， Acc y， Acc z) in the world frame and (EulerAngle x，EulerAngle y， EulerAngle z) in the world frame，數(shù)據(jù)采集的頻率為200HZ。

將傳感器數(shù)據(jù)轉(zhuǎn)換成2D形式的輸入有3種方法。不同的圖像格式選擇會導(dǎo)致不同的卷積與不同的相鄰元素，其中可能包括不相關(guān)元素之間的卷積。

把9×784的時(shí)間序列數(shù)據(jù)作為一個(gè)矩形二維圖像。

將三個(gè)不同的特征組（local accelerations，world accelerations，and Euler angles）類比為圖像中的RGB通道，并創(chuàng)建一個(gè)3×784×3的張量。

將9×784的時(shí)間序列數(shù)據(jù)重新塑造為84×84的方陣如下圖所示。

不同各式的2D輸入對于卷積的影響

對于9*784形式的輸入來說，如果進(jìn)行步長為1的卷積操作（作者稱為9*784 full），Acc_x_local位于圖像的最上面一行，直到最后一層才與位于最下面一行的Euler_Angle_z進(jìn)行卷積，然而Acc_z_world位于圖像的第6行，它與位于第7行的Euler_Angle_x有很多卷積的機(jī)會，因?yàn)樗鼈兪窍噜彽摹?/p>

對于3*784*3 形式的輸入來說，由于卷積分別在3個(gè)通道上分別進(jìn)行，這樣不同的組之間就不會發(fā)生卷積。

為了避免9*784形式的輸入在一層中不同組之間的卷積，可以使用卷積步長來避免這種影響（作者稱為9*789 disjointed）。如下圖所示。

左圖中沿著y軸移動(dòng)步長為1這樣不同的組之間就會發(fā)生卷積。右圖中沿著y軸移動(dòng)而步長為3，可以避免不同組之間進(jìn)行卷積。

實(shí)驗(yàn)結(jié)果表明，將不同的特征組（local acceleration，world acceleration， Euler angle）作為不同的圖像通道(3*784*3)處理比二維正方形(84*84)圖像或矩形(9*783)圖像效果更好。