「顔」タグアーカイブ

Speech2Face – 声からあなたの顔つきを当てる研究

2019-05-31 akky コメントする

上に並んでいるのが、短文の音声メッセージの話者です。これ左端はダニエル・クレイグ氏(007)ですよね。他はわかりませんが。

サイトで再生ボタンを押すと、推定に使われた音声データが聴けます。10秒も無いぐらいの短い文章です。

そして、下に並んでいるのが、その音声から深層ニューラルネットワークを利用して推定した話者の顔。

学習データとしては、インターネット/YouTube 上の数百万の人が喋っている動画を使ったそうです。「こんな風貌の人は、こんな風に話す」というデータを大量に食わせることで、「こんな風に話す人は、こんな見た目なことが多い」という変換を得たということですね。

推測結果には性別・ジェンダー・人種など繊細な問題が絡むことから、倫理的な注意書きが添えられています。学習データは全人類の平均的な喋り方を集めたのではなく、YouTube などから動画を集めたことから、データには当然バイアスがあります、と。YouTube に出ているような人の喋り方、に偏っているかもしれないし、喋っている言語のサンプルが少なかったりする言語の場合も偏りがあるかもしれない、などなど。

また、話者本人を特定したり、話者のファッション(髪の色やメガネ等)を特定したりは当然できません。(メガネをかけた人特有の話し方、とかない限り)

アプリやブラウザに対して喋ると顔写真を出してくれたり、というお遊びサービスは面白そうですが、その先にどのような実用的な応用がありうるのか。何か面白いことができそうな研究ではありますね。

via Futurism

ネットのサービス

www.ThisWaifuDoesNotExist.net – 「存在しない俺の嫁(waifu)」画像を作ってくれるサイト

2019-02-20 akky コメントする

先週ご紹介した、thispersondoesnotexist.com は、StyleGAN を使って実在するかのような顔写真を生成してくれるサービスでした。

その時に、同じ StyleGAN を使って、「実在しない絵画」や「実在しないアニメ絵」を作った人たちがいたことも紹介しましたが、顔写真だけではなく、特徴量のデータを使えば様々な画像の合成が可能ということです。

ということで、このThisPersonDoesNotExist のフォーマットをそのまま踏襲した、この世に実在しない Waifu(=日本のネットで言うところの「俺の嫁」を英語圏で呼ぶときの英製和語) を生成してくれるのが、この ThisWaifuDoesNotExist.net です。

ページのリロードやrefreshボタンのクリックで、次々と違うアニメ顔の画像が表示されます。ほおっておいても勝手に次の画像を表示しますね。

どれも、存在しないキャラクターをプログラムで合成したものだそうです。

# 存在しない、という意味ではアニメのキャラクターは元々存在しないので、意味的に混乱してしまうところはありますが。未発表のもの、誰かが描いたものではないもの、ということで

時々、合成がうまくいってない個所のある画像が出てくるのも、元ネタと同様ですね。

生成されたはずのキャラクターが、既存のキャラクターと見分けがつかなった場合、なんていう新たなトラブルも発生するかもしれませんけど。

この手のサービスはこれが最初というわけではありません(例)が、StyleGAN の論文やその実装が簡単に使える状態になったことと、ThisPersonDoesNotExist がかなり話題になったので、今いろいろなところで応用例を作ってる人たちがいるのでしょうね。

たとえば、他に、「存在しない猫画像を作るサイト」や「存在しない AirBnB の物件画像を作るサイト」も同様に登場しています。

via HackerNews

ネットの事件

Wiredの「Facebookが顔写真認証をテスト中」は誤報のような気がする

2017-12-01 akky コメントする

a friend sent me this: Facebook is now locking users out of account features, then demanding that those users "verify" their account to get back in by scanning an image of their face. AN IMAGE OF THEIR FACE. pic.twitter.com/T4TIsJFxX8

— can Amy Goodman pls stop inviting Assange on thx (@flexlibris) November 28, 2017

これが発端のツイート、「フェイスブックにログインできなくなってると思ったら自撮り写真のアップロードを要求された」という体験なのですが、これをWired が取り上げて、フェイスブックが顔写真をCaptcha とした本人認証を実験中、みたいに報じ、他メディアもそれを参照する形で追ってるわけです。

しかし、7か月前にredditでまったく同じ体験が公開されていますし、フェイスブックのサポートコミュニティでも顔の映った写真をアップロードしろと出てきましたが、どうしてですか?というFAQ として公開されています。

自分の写真をすでにたくさん上げているユーザーなら、それらと同一人物か判定することも今ならできなくはないでしょうけど、写真をアップロードしたかどうかに関わらずこれは発動している(どちらかというと、二つ目のアカウントを使おうとしたら、とか、家から遠く離れたところでログインしようとしたら、とかの事例が多い)ので、AIで本人確認とかそういう高度な話ではなく、免許証のコピーをアップロードさせるとかと同じく、「スパマーやなりすましなら時間をかけて対応してこないだろう」という、以前からやってる人力確認の話ではないかなと思うんですよね。

データ可視化

人間の顔を、世界地図の「図法」で表すとこうなる、というコード

2017-10-13 akky 1件のコメント

Projection face! は、人間の顔を世界地図の上に描いて、図法を変えたらどう歪んで見えるか、というのを見せてくれるウェブサイトです。

図法というのは、メルカトルとかモルワイデとかいうアレですね。代表的なものは社会科で習ったと思います。

D3.js を使って63もの図法で表示してくれますが、ソースコードも公開されています。

一個ずつ選択するのではなく全部を並べて見たい人のために一ページにおさめられたものがこちらになります。

球の表面を二次元で表そうとした時の図法、こんなにたくさんあってそれぞれ名前がついているんですね。

顔をマップしてみるというのは、元々は、1921年に書かれた論文 “Elements of Map Projection”に描かれていたものが初出だそうです。100年近く前ですから、この時のプロットは当然手書きでしょうね。

geojson形式のデータを用意すれば、別の絵についても簡単に同様のプロジェクションが作れます。さまざまな図法の違いの体感もできるし、架空の世界の地図で、真東がどこになるか、等距離の場所はどこになるか、等を考えるのに使えたりするかもしれません。

via FlowingData

UIデザイン

まさに「面の皮」なスーツケースカバー

2017-08-22 akky 3件のコメント

空港の荷物受け取りで、コンベアーベルトに乗って出てくる自分のスーツケースを見分けやすくするためにステッカーなどをベタベタ貼ってる人がいますよね。

Firebox が新たに発売した Head Case は、スーツケースの持ち主が瞬時にしてわかるというスーツケースカバー。なぜわかるかというと、こんな図柄だから。

これはインパクト大きい。

「もう、他の誰も、間違ってあなたのスーツケースを持って行くことはありません」だそうです。

カバーのサイズは大・中・小の3つあり、高解像度の顔写真をアップロードして、できあがったものを20-30ポンドで購入できます。

via Laughing Squid

技術

Dreambit – キーワードで写真のヘアスタイルを着せ替えできる実験サービス

2016-07-25 akky コメントする

Dreambitは、顔写真を加工してくれるサービス。「インド」や「1930」などといったキーワードを与えると、写真に写っている人物の髪型を「インド風」にしたり「1930年代風」に変換してくれます。

ベータアクセスは申請式ということで、とりあえず申請しましたがまだ自分で使えてはいません。髪型やファッションスタイルを表す言葉「以外」の言葉を入れてどんな髪型が出てくるか、試せると面白そうですね。

Captain Picard simulated with curly hair by #dreambit pic.twitter.com/rPiHIgaOt6

— Dreambit (@dreambitxyz) July 24, 2016

ピカード船長!

Tom Hanks with "Long Hair" #dreambit pic.twitter.com/HyXjAZwZUu

— Dreambit (@dreambitxyz) July 22, 2016

デモの動画はこちら。

同じ助教のチームは、2014年に「写真の人が歳を取ったらどんな顔になるか」という画像処理研究を発表しています。

本人の特徴さえ残っていれば、証明写真や記念写真の中の髪型や服装は、後で好きに変更できる、というような時代が来るのかもしれませんね。

さらに研究が進めば、動画の中の人の髪型なども自由に変更できるようになったりするかもしれません。古い映画を現代のファッションで自動リメイクする、といったことも起こるかも。

via Futurity

ネットのマーケティング

大量の画像素材で、有名人の顔を合成

2016-07-04 akky 5件のコメント

素材画像販売の大手 Getty Images 、その大量に抱える素材を活用したクリエイティブで面白いプロモーションをすることがよくあるのですが (参考)、今回のプロモーションは、多数の一般人の顔写真素材を組み合わせて、誰もが知っているあの有名人の顔を作る、というもの。

ウェールズ公や

ドイツ首相アンゲラ・メルケル氏など。

有名人の顔が少しずつできていく動画を観ていると、顔のパーツに関しては必ずしも同性でなくても似てる人がいる、というのがわかります。

多数の写真から、4か月の実験とテストを経て、有名人のと似たパーツを探しだしたということです。

機械学習などを活用して、機械にこういった写真を合成させることは今後どんどん簡単になっていくでしょうね。

本人の写真や映像をまったく使わずに、その人の表情や立ち居振る舞いを再現できるようになる未来もこのままいけば実現できてしまうわけで、そうなった時に肖像権とかはいったいどう判定されるのでしょうかね?

via Design Boom

技術

Megabite – 並んだ食材から福笑いのように顔を作るアルゴリズム

2016-02-02 akky コメントする

Megabite は、皿に盛った料理の写真をパーツとして、福笑いのように顔を作るアプリだそうです。

考えてみよう、食べ物もハッピーに見えるに越した事はない。あるランチの時、料理で遊んでるときにふと思ったんだ – このプロセスは自動化できるのでは? 解決すべきビッグな問題がここにあるじゃないか。Let’s face it, food is more fun when it looks happy. I was playing with my food one lunchtime, and I wondered to myself – would it be possible to automate this process? Solving the big problems right here.

このアプリは画像中の皿に乗った食べ物を個別に切り出し、それをより興味深く並べ替えます。

作者の解説するアプリの全行程は以下のようなもの。