機能

きっかけ

TikTokの動画フィルターの威力にざわつく人々 - Togetter を見て、ハトマスクかぶせたら面白そうと思ったよ
- 上で紹介されているツイートの動画が見れなくなってるので、確認したい人はこっちをみるとわかるかもよ
  - なかじ / リリカちゃん on Twitter: "TikTokで指でなぞった場所だけ盛れるフィルターがやばい……！！！ https://t.co/QzL5wbAjru" / Twitter
Facebookで知り合いに背中を押されたよ
- リスペクトしてる人だったから、ちょっと浮かれたよ
さらに夏休みが近かったので、夏休みの宿題と言うことでチャレンジをしてみたよ
5月くらいから色々あったので、鬱憤が溜まってたから何か作りたかったんだと思うよ。

アプリの作成にはUnityを使ったよ
顔検出にはDlib FaceLandmark Detector - Asset Storeを使ったよ
- 画像を渡すと、目や鼻、口の位置を検出してくれるライブラリだよ
- チュートリアルやGitHubのサンプルを参考にしたよ
  - Dlib FaceLandmark Detector Setup Tutorial - YouTube
  - DlibFaceLandmarkDetector/Texture2DExample.cs at master · EnoxSoftware/DlibFaceLandmarkDetector · GitHub
顔の向き推定にはOpenCV for Unity - Asset Storeを使ったよ
- 以下の記事を見ながら作ったよ。とはいえ、完全には理解できてないよ
  - OpenCVで顔向き推定を行う - Qiita
  - Head Pose Estimation using OpenCV and Dlib | Learn OpenCV
写真の保存には Capture and Save (Pro) - Asset Store を使ったよ
- README見て作ったらあっという間にできたよ。アセットすごいよ。
ハトマスクを作るのにBlenderを使ったよ
- 始めのモデルはこんな感じだったよ
- 潜水服みたいと言われたのでディティールアップをしたよ
- 【#03】Blenderで美少女錬成講座その3 顔のモデリング【トポロジー美人になりたいの】 - YouTube を参考にディティールアップしたよ
調べた人ならわかるけど、それなりにお金使ったよ
- Apple Developer Programにも参加したよ...
  - 趣味とはいえお金使いすぎな気はするよ。でも気にしないよ。(気にしてる)

原型作るのは1週間だったよ
- 顔の向きにある程度合わせてマスクが出るところまで作ったよ
- dlibのサンプルプログラムを改変したらできるかなと安易に考えてたけど、Unityさっぱりわからないので結局チュートリアルから始めたよ
- マスクのディティールアップに1日使ってたりするよ
その後、コードの整理や顔の向きの調整、スマフォの縦向き、横向きに対応してたら2ヶ月経ってたよ
- 自分の時間にやってる(ので平日は1時間くらい、休日は5,6時間)とはいえ、そんなにかかるとは思ってなかったよ
- 原型はコピペで作ったんだけど、細かい調整するためには理屈をある程度理解する必要があったので苦労したよ
- コードは整理というかほぼ書き直したよ
理屈が先か、動かすのが先か悩むけど、私は最初に理屈を求めるとメゲるので、動かすのが先派だよ

ちなみに右往左往はScrapboxにメモしたよ。
フォーマットあんまり気にせずガシガシ書けるから実況に使うと捗るよ。
ハトマスクをおみまいするぞアプリ - のび犬.メモ

AppStoreに出すのが目標だよ
まずはβ版を出してみるので、フィードバックもらえると嬉しいよ
- iPhoneだとTestFlightってアプリを入れる必要があるのでちょっと敷居が高いかもしれないよ
ハトマスクはアーチーマクフィーのものを参考にしてるので、許可を取ろうと思っているよ
- 実はお問い合わせから打診のメールを送ったんだけど、全く相手にされなかったよ...。
  - ぶっきらぼうなメールだったので、怪しいメールで終わっちゃったんだと思ってるよ