画像認識

アナログなメーターをデジタルなネットワークに接続する

従来の機器についたメーターが示すデータをネットワークで利用するためにカメラと画像認識を組み合わせるという話、つい最近も新型コロナウイルスのワクチンを低温で保管する冷凍庫の温度監視という文脈でNHKニュースで紹介されて話題となってました。 メータのデータは内部に存在するのだから、データを直接取り出すのが技術的には筋が良いように思います。しかし、既存の冷凍庫をこのために新しいものに置き換えるのは費用が …

Audeo - 鍵盤部分だけのピアノ上で動かした手の映像から音を鳴らす技術

音が鳴らないピアノを弾いた手の映像から、指の動きを見て音声をつけるという研究[pdf]が Audeo です。 ワシントン大学のエリ・シュリザーマン氏の研究室のこの研究では、音楽家がピアノを弾いている「映像」だけを持ってきて、その映像から本来流れていたであろう「楽曲」を構築します。 ピアノ演奏の動画(映像)からピアノロールに変換するコンポーネント(Video2Roll)、生成されたピアノロールから指 …

機械学習で最密充填ピーナッツバナナサンドイッチづくり

バナナをはさんでピーナッツバターを塗ったサンドイッチを作る際に、いかにバナナをぎっしりと敷き詰めることができるか、というのを機械学習によって示すツール EthanRosenthal/nannernest が公開されています。 http://localhost:8099/wp-content/uploads/2020/08/banana_small.mp4 家にバナナが無かったので買ってきました。 …

CRAPPSY - 毎日トイレ(大)の写真を送って健康状態チェックするサービス

CRAPPSY は、15歳の高校生イスカンダル・ハンさん(ハンドル名かもしれないけどすごい名前)による新サービス。ほとんどの人類が毎日のように接するものをテーマにしています。お通じです。 大便の写真を撮影してアップロードすると、その状態を機械学習によって判定し、腸の状態を点数化した Crappsyスコアが表示されます。 スコアは、腸の消化状態を表しているそう。7段階に分類するブリストル便形状スケー …

GoogleのCloud Vision API が画像内の男女の性別分類を停止

Cloud Vision API の利用者にメールで告知があったようです 2020年2月19日から、もう過ぎてますね、Vision API はラベルによる分類をした時に画像の中の人物に対して"man"/“woman"といった男女を区別したラベルを返さず、“person"を返すようになったということです。 人の性別は外見からわからないは …

賞金の出る4択クイズゲームを隠しカメラとOCRで解くプロジェクト

イギリスのパブなどに置いてあるゲーム機に、クイズを解き続けることで勝ち進み、最後は賞金が出るものがあるそうです。 GitHub に公開されたこちらのリポジトリでは、そのトリビアクイズ機を解いてしまう支援ツールが公開されています。 こちらのアニメーションgif でプレイしている様子が見られますが、質問文と、4択の回答が表示されて、時間内に正答をタッチすると次の問題へ行けるんですね。 …

HomeCourt - バスケットボールのシュート結果を画像認識で自動記録するアプリ

HomeCourtは、スマートフォンのカメラを使ったバスケットボールの練習支援アプリケーションです。打ったシュートをリアルタイムで追跡し、結果をまとめてくれます。 シュート練習が映っているアプリの画面の右上に、シュートの企図回数や成功数、コート内でのシュート位置がリアルタイムで更新されていますね。 このアプリ、コートの外側に三脚でスマートフォンを固定設置して、3ポイントラインやゴールなどを認識させ …