通過兩個主要的API,Android提供了一個直接在位圖上進行臉部檢測的方法,這兩個API分別是 android.media.FaceDetector和android.media.FaceDetector.Face,已經包含在Android官方API中。本教程來自Developer網站,向大家介紹了這些API,同時提供教程中實例代碼下載。
圖片來源:Wikipedia
所謂人臉檢測就是指從一副圖片或者一幀視頻中標定出所有人臉的位置和尺寸。人臉檢測是人臉識別系統中的一個重要環節,也可以獨立應用於視頻監控。在數字媒體日益普及的今天,利用人臉檢測技術還可以幫助我們從海量圖片數據中快速篩選出包含人臉的圖片。 在目前的數位相機中,人臉檢測可以用來完成自動對焦,即「臉部對焦」。「臉部對焦」是在自動曝光和自動對焦發明後,二十年來最重要的一次攝影技術革新。家用數位相機,佔絕大多數的照片是以人為拍攝主體的,這就要求相機的自動曝光和對焦以人物為基準。
via cdstm.cn
構建一個人臉檢測的Android Activity
你可以構建一個通用的Android Activity,我們擴展了基類ImageView,成為MyImageView,而我們需要進行檢測的包含人臉的位圖文件必須是565格式,API才能正常工作。被檢測出來的人臉需要一個置信測度(confidence measure),這個措施定義在android.media.FaceDetector.Face.CONFIDENCE_THRESHOLD。
最重要的方法實現在setFace(),它將FaceDetector對象實例化,同時調用findFaces,結果存放在faces裡,人臉的中點轉移到MyImageView。代碼如下:
- public class TutorialOnFaceDetect1 extends Activity {
- private MyImageView mIV;
- private Bitmap mFaceBitmap;
- private int mFaceWidth = 200;
- private int mFaceHeight = 200;
- private static final int MAX_FACES = 1;
- private static String TAG = "TutorialOnFaceDetect";
-
- @Override
- public void onCreate(Bundle savedInstanceState) {
- super.onCreate(savedInstanceState);
-
- mIV = new MyImageView(this);
- setContentView(mIV, new LayoutParams(LayoutParams.WRAP_CONTENT, LayoutParams.WRAP_CONTENT));
-
-
- Bitmap b = BitmapFactory.decodeResource(getResources(), R.drawable.face3);
- mFaceBitmap = b.copy(Bitmap.Config.RGB_565, true);
- b.recycle();
-
- mFaceWidth = mFaceBitmap.getWidth();
- mFaceHeight = mFaceBitmap.getHeight();
- mIV.setImageBitmap(mFaceBitmap);
-
-
-
- mIV.invalidate();
- }
-
- public void setFace() {
- FaceDetector fd;
- FaceDetector.Face [] faces = new FaceDetector.Face[MAX_FACES];
- PointF midpoint = new PointF();
- int [] fpx = null;
- int [] fpy = null;
- int count = 0;
-
- try {
- fd = new FaceDetector(mFaceWidth, mFaceHeight, MAX_FACES);
- count = fd.findFaces(mFaceBitmap, faces);
- } catch (Exception e) {
- Log.e(TAG, "setFace(): " + e.toString());
- return;
- }
-
-
- if (count > 0) {
- fpx = new int[count];
- fpy = new int[count];
-
- for (int i = 0; i < count; i++) {
- try {
- faces[i].getMidPoint(midpoint);
-
- fpx[i] = (int)midpoint.x;
- fpy[i] = (int)midpoint.y;
- } catch (Exception e) {
- Log.e(TAG, "setFace(): face " + i + ": " + e.toString());
- }
- }
- }
-
- mIV.setDisplayPoints(fpx, fpy, count, 0);
- }
- }
接下來的代碼中,我們在MyImageView中添加setDisplayPoints() ,用來在被檢測出的人臉上標記渲染。圖1展示了一個標記在被檢測處的人臉上處於中心位置。
-
- public void setDisplayPoints(int [] xx, int [] yy, int total, int style) {
- mDisplayStyle = style;
- mPX = null;
- mPY = null;
-
- if (xx != null && yy != null && total > 0) {
- mPX = new int[total];
- mPY = new int[total];
-
- for (int i = 0; i < total; i++) {
- mPX[i] = xx[i];
- mPY[i] = yy[i];
- }
- }
- }
圖1:單一人臉檢測
多人臉檢測
通過FaceDetector可以設定檢測到人臉數目的上限。比如設置最多只檢測10張臉:
- private static final int MAX_FACES = 10;
圖2展示檢測到多張人臉的情況。
圖2:多人人臉檢測
定位眼睛中心位置
Android人臉檢測返回其他有用的信息,例同時會返回如eyesDistance,pose,以及confidence。我們可以通過eyesDistance來定位眼睛的中心位置。
下面的代碼中,我們將setFace()放在doLengthyCalc()中。同時圖3展示了定位眼睛中心位置的效果。
- public class TutorialOnFaceDetect extends Activity {
- private MyImageView mIV;
- private Bitmap mFaceBitmap;
- private int mFaceWidth = 200;
- private int mFaceHeight = 200;
- private static final int MAX_FACES = 10;
- private static String TAG = "TutorialOnFaceDetect";
- private static boolean DEBUG = false;
-
- protected static final int GUIUPDATE_SETFACE = 999;
- protected Handler mHandler = new Handler(){
-
- public void handleMessage(Message msg) {
- mIV.invalidate();
-
- super.handleMessage(msg);
- }
- };
-
- @Override
- public void onCreate(Bundle savedInstanceState) {
- super.onCreate(savedInstanceState);
-
- mIV = new MyImageView(this);
- setContentView(mIV, new LayoutParams(LayoutParams.WRAP_CONTENT, LayoutParams.WRAP_CONTENT));
-
-
- Bitmap b = BitmapFactory.decodeResource(getResources(), R.drawable.face3);
- mFaceBitmap = b.copy(Bitmap.Config.RGB_565, true);
- b.recycle();
-
- mFaceWidth = mFaceBitmap.getWidth();
- mFaceHeight = mFaceBitmap.getHeight();
- mIV.setImageBitmap(mFaceBitmap);
- mIV.invalidate();
-
-
- doLengthyCalc();
- }
-
- public void setFace() {
- FaceDetector fd;
- FaceDetector.Face [] faces = new FaceDetector.Face[MAX_FACES];
- PointF eyescenter = new PointF();
- float eyesdist = 0.0f;
- int [] fpx = null;
- int [] fpy = null;
- int count = 0;
-
- try {
- fd = new FaceDetector(mFaceWidth, mFaceHeight, MAX_FACES);
- count = fd.findFaces(mFaceBitmap, faces);
- } catch (Exception e) {
- Log.e(TAG, "setFace(): " + e.toString());
- return;
- }
-
-
- if (count > 0) {
- fpx = new int[count * 2];
- fpy = new int[count * 2];
-
- for (int i = 0; i < count; i++) {
- try {
- faces[i].getMidPoint(eyescenter);
- eyesdist = faces[i].eyesDistance();
-
-
- fpx[2 * i] = (int)(eyescenter.x - eyesdist / 2);
- fpy[2 * i] = (int)eyescenter.y;
-
-
- fpx[2 * i + 1] = (int)(eyescenter.x + eyesdist / 2);
- fpy[2 * i + 1] = (int)eyescenter.y;
-
- if (DEBUG) {
- Log.e(TAG, "setFace(): face " + i + ": confidence = " + faces[i].confidence()
- + ", eyes distance = " + faces[i].eyesDistance()
- + ", pose = ("+ faces[i].pose(FaceDetector.Face.EULER_X) + ","
- + faces[i].pose(FaceDetector.Face.EULER_Y) + ","
- + faces[i].pose(FaceDetector.Face.EULER_Z) + ")"
- + ", eyes midpoint = (" + eyescenter.x + "," + eyescenter.y +")");
- }
- } catch (Exception e) {
- Log.e(TAG, "setFace(): face " + i + ": " + e.toString());
- }
- }
- }
-
- mIV.setDisplayPoints(fpx, fpy, count * 2, 1);
- }
-
- private void doLengthyCalc() {
- Thread t = new Thread() {
- Message m = new Message();
-
- public void run() {
- try {
- setFace();
- m.what = TutorialOnFaceDetect.GUIUPDATE_SETFACE;
- TutorialOnFaceDetect.this.mHandler.sendMessage(m);
- } catch (Exception e) {
- Log.e(TAG, "doLengthyCalc(): " + e.toString());
- }
- }
- };
-
- t.start();
- }
- }
圖3:定位眼睛中心位置
色彩 vs. 灰度
通常來講,人臉檢測成功取決於搜索人臉高對比度區域,實際效果來看色彩和灰度的差距不會太遠。不過很多學者仍在致力於證明色彩比灰度更靠譜。經過在對示例圖片的驗證,發現Android APIs返回的結果非常接近,似乎APIs意圖忽略掉不同顏色通道的因素。請看圖4(BTW,獨自一人在陰暗環境下請謹慎觀看):
圖4:灰度人臉檢測看起來會稍微有點恐怖
總結
通過本次教程,我們介紹了簡單的Android人臉檢測APIs,並通過實例進行了演示。以上的軟體包均可在官網上下載,方便大家將其import到Eclipse中。最後提供一些有益的忠告:
- 很多應用對人臉檢測其實都有著潛在的重要需求,例如去紅眼、計算人頭數、自動對焦人臉、添加人臉特效等等。
- 這個世界上存在有非常多的人臉資料庫,有意者請點擊此處。
- 在實時的人臉檢測過程中,Android的表現的會有一點點差強人意。
文章及圖片來源:developer