2021-10 on akky@サイボウズラボ・ブログ

アクセント付きアルファベットの名前を登録できないEUの銀行はGDPR違反

Fri, 29 Oct 2021 00:00:00 +0000

EU 内の銀行で、氏名のアルファベットにグレーブ(á)とかウムラウト(ü)とか、アクセント記号がついている人が本名を登録できない、という問題に対する訴訟があり、アクセント記号が登録できないのはGDPR(一般データ保護規則)違反である、という判決が2019年に出ていたそうです。

テレンス・エデン氏(Terence Eden)のブログによれば、銀行がアクセント記号つきの氏名登録を拒絶したのに対し、この顧客はEU一般データ保護規則(GDPR)の16条「訂正の権利」を根拠に訴えるに至ったそうです。

この16条は以下のようなもの。

The data subject shall have the right to obtain from the controller without undue delay the rectification of inaccurate personal data concerning him or her. Taking into account the purposes of the processing, the data subject shall have the right to have incomplete personal data completed, including by means of providing a supplementary statement.

データ主体は、管理者から、不当に遅滞することなく、自己と関係する不正確な個人データの訂正を得る権利を有する。取扱いの目的を考慮に入れた上で、データ主体は、補足の陳述を提供する方法による場合を含め、不完全な個人データを完全なものとさせる権利を有する。

一般データ保護規則(仮訳)

これに対し銀行は、1995年に開発された米国製メインフレーム上のアプリを使っており、このシステムが1964-65 に制定されたEBCDICコード表を使っていることから技術的に対応不可能なのだ、と弁明していたということ。

IKEAの1950年からの毎年のカタログが見られる公式アーカイブ

Wed, 27 Oct 2021 00:00:00 +0000

昨年末に紙のカタログを廃止することを発表し、2021年度版が紙としては最後のカタログ発行になったイケアですが、1950年代からの毎年のカタログ(スウェーデン版)をデジタル化して公開しています。

紙カタログ廃止のリリースでは1951年が最初とありましたが、アーカイブは1950年から始まっていますね。

1950年のカタログでは、食器やカバン、ネックレスやネクタイなど雑多なものを売っていて、後半が家具になっていますね。

こちらは1989年のカタログから。家具を置いた部屋全体を見せるのは今のカタログでも見ますね。

暦年のカタログが全部見られるというのは、インテリアの流行や人気の家具の変遷などを追えるということで、資料としても面白いですよね。70年分ですから。

Hacker News のスレッドでは、「スウェーデンでは郵便受けに『広告不要! ただしイケアのカタログは除く』というステッカーが良く貼られていた」という証言が出ていて、ステッカーの画像も紹介されていました。

ingen reklam tak! Men garna IKEA Katalogen. (広告はご遠慮ください! IKEAカタログ以外)

hashids - 自然数からか逆なユニークidを生成する多言語に対応したライブラリ

Fri, 22 Oct 2021 00:00:00 +0000

Hashids は、0または正の数をアルファベット+数字の短い並びに変換し、また逆変換で元の数を取り出すことができるライブラリです。

YouTubeの動画ページのURLについている、動画と一対一にマッチした文字列や、bit.ly などのURL転送サービスでURLごとに生成される文字列のような、一意に決まってなるべく短い文字列を作るという目的で作られたそうです。

サイトのトップに列挙されているのですぐにわかりますが、非常に多くのプログラミング言語に移植されています。

JavaScript, Ruby, Python, Java, Scala, PHP, Perl, Perl 6, Swift, Clojure, Objective-C, C, C++11, D, F#, Go, Erlang, Lua, Haskell, OCaml, Elixir, Rust, Smalltalk, ColdFusion, Kotlin, Nim, VBA, Haxe, Crystal, Elm, ActionScript, Bash, R, TSQL, PostgreSQL, PLpgSQL, Dart, Io, Julia, .NET

Rails, Django, WordPress, など言語だけでなくフレームワークやCMSのプラグインも作られていて、多くの言語や環境を超えて生成されたunique id を渡して取り出すこともできそうです。双方向の変換ができますが、ソルトを与えることで変換結果は個々に違わせることができます。 w 昨日のワードフィルタに関する Hacker News の議論で出てきたのでこのライブラリを知ったのですが、このライブラリの十分にコンパクトな仕様の中で面白いと思ったのは、このユニークな文字列の生成時に「よくある英語の卑語が出てこないようにする」ための方法がドキュメントに大きく書いてあることですね。

ユニークな文字列の生成時に、c, s, f, h, u, i, t の文字が連続して並ばないように指定することで、システムが自動的に作ったユニークidの中に英語のマズイ単語が偶然出てくることを防げることが多い、そうです。経験的なものでしょうけどそんなハックがあるんですね。hashid の変換関数ではセパレータとしてこれらの文字を与えることで、セパレータ同士が隣接しないようにできます。これによって使えない文字列が相当数出てしまいユニークidも少し長くなってしまうでしょうけれど、ユニークidに偶然卑語が出るとよくない、と思うサービス開発者も多いのかもしれません。

問題のあるユーザー名登録を防ぐ英語圏のワードフィルタの実例

Thu, 21 Oct 2021 00:00:00 +0000

小片コード共有サービスの pastebin に貼られ、Hacker News でゲーム配信サービス大手のTwitch がユーザー登録時に弾いているフィルタ部分のソースコードだ、との主張で紹介されている SQL コードは、問題のある単語をチェックするためのコードです。

CREATE OR REPLACE FUNCTION is_terrorism (VARCHAR) RETURNS BOOLEAN STABLE AS $$ SELECT replace($1,'_','') LIKE '%did911%' OR replace($1,'_','') LIKE '%support%isis%' OR replace($1,'_','') LIKE '%isis%support%' OR replace($1,'_','') LIKE '%join%isis%' OR replace($1,'_','') LIKE '%isismember%' $$ LANGUAGE SQL;

CREATE OR REPLACE FUNCTION is_child_exploitation (VARCHAR) RETURNS BOOLEAN STABLE AS $$ SELECT replace($1,'_','') SIMILAR TO '%ped(o|0)(f|ph)(i|1)le%' OR replace($1,'_','') SIMILAR TO '%isa%ped(o|0)%'

SQL 文としてジャンルごとに定義されている関数は、イスラム国(ISIS)への参加を呼び掛ける文字列や、児童ポルノや人種差別・性犯罪やドラッグに関する英単語が含まれる文字列で True を返すようです。

また、単純な単語の一致だけではなく、それら英単語の一部の文字を数字に置き換えるなどしてチェックをすり抜けようとするものもある程度見つけるようになっていました。a を 4 にしたり、 e を3 にしたりという leetspeak と言われる変換ですね。

ユーザー登録のできるwebサービスでは大なり小なりこのようなフィルタリングを行っているとは思います。コードが Hacker News の投稿者の言う通り Twitch で使われているものかはわかりませんが、この SQL で引っかかるような文字列をいくつか入れてユーザー登録しようとしたら、エラーは出ますね。実際には JavaScript レベルでエラーにしているようなので、SQL 文のフィルタは誰かが再現したものかもしれませんし、あるいはそれぞれが同じネタ元のフィルタを参照して作られたものかもしれません。

各関数の名前からどのような性格の「悪い単語」を排除しようとしてるのかがわかります。

関数名	意味
is_terrorism	テロ
is_child_exploitation	児童搾取
is_hateful	ヘイト
is_harassment	ハラスメント
is_violence	暴力
is_tragedy	悲劇
is_selfharm	自傷
is_sexual	性的
is_drugs	ドラッグ
is_derogatory	軽蔑的
is_profanity	淫ら
is_blasphemy	冒涜
is_marijuana	大麻
is_sex_insult	性的侮辱

チェックされる単語の一つ一つは、多くが理解して気持ちのよい単語とは言えません。細かく紹介はしませんが、英語での罵倒や悪口の勉強がしたければいい教材となるやもしれません。

1万6000個のチェックボックス要素で作られたDoom

Tue, 19 Oct 2021 00:00:00 +0000

HTMLのチェックボックス「だけ」をひたすら活用できるライブラリ Checkboxland を先週紹介しましたが、さっそくすごい応用サービスが登場しました。

Doom といえば、非力なレトロPC や関数電卓から、ATM やデジカメ、プリンターの液晶などCPUのあるところならどこでも移植されてきたゲームですが、今回は Checkboxland を使って、すべてチェックボックスで作られた Doom が遊べるようになっています。

ページ上部にあるように、カーソルキーの移動と Ctrlキーの射撃で遊べるのですが、青白の二色で解像度も160x100と低いため、敵が出てくるなど込み入った表示になると正直何が起こってるのか判別は難しくなります。Doom ファンならこれでもわかるのかもしれませんが。

左上には元の Doom 画面も表示されているので、どうにもならないときはそちらを見るしかないでしょう。

ブラウザ上で動く Doom は「WebAssembly で FizzBuzz から Doom までを作る」プロジェクトで作られているものを呼び出し、これが非表示の canvas 要素に描いたゲーム画面を MediaStream 経由でCheckboxland の動画描画機能に渡しています。

via DOOM Rendered via Checkboxes via reddit

scaffoldy - よくあるwebサービス構成の Docker Compose ファイルを作ってくれるジェネレータ

Thu, 14 Oct 2021 00:00:00 +0000

Scaffoldy は、選択したサービスを組み合わせた webサービスの Docker Compose 設定ファイルを作ってくれるwebサービスです。

対話式のフォームに回答していくだけで、docker compose で動作する yml ファイルが作られます。現在選べるのは以下のような項目

言語/環境 - Python / Node.js / その他
.gitignore 等 git の設定
データベース - MySQL / MariaDB / PostgreSQL / MongoDB
データベース管理web UI - phpMyAdmin / pgAdmin / Mongo Express
キャッシュサーバ - Memcached / Redis
メッセージング - RabbitMQ / NATS
メトリクス - Prometheus / Grafana
その他 - Clickhouse / ElasticSearch / Mailhog

Checkboxland - HTMLのチェックボックスですべてを作れるライブラリ

Tue, 12 Oct 2021 00:00:00 +0000

Checkboxland は、HTML のチェックボックス要素を活用してしまくるための JavaScriptライブラリです。

HTML のチェックボックス要素と言えばこれ↓ ですが、

このチェックボックスを使って様々な表現を実行できます。

デモでは、文字が横に流れるマーキー、デジタル時計、アニメーション、QRコード表示、ライフゲーム、動画再生(!)、など様々な表現が、すべてチェックボックスだけで実現されています。

API documentによれば、チェックボックスを縦横に並べたグリッド上でグリッド上の各座標を調べたり書き換えたりする低レイヤAPIと、文字を大きく描く、スクロールさせる、画像や動画を描写させるなどの拡張APIが用意されています。プラグイン機構も用意されているので、自分で Checkboxland に新たな機能を追加することも可能です。

It's Friday night so of course I'm eating cookie dough and making a QR code out of html checkboxes that always tells you the current time.https://t.co/ZNjG0SWAce pic.twitter.com/Fywf7FZFpu
— Bryan Braun (@BryanEBraun) May 23, 2020

多数の要素を表示しようとするとページが重くなるのはチェックボックスであっても(当然)同じで、チェックボックスの数が1500個を超えるとチェックボックスの更新速度が問題となることから、32x32 や 64x16 といったサイズ以下のグリッドを推奨するそうです。

I made a webcam filter out of html checkboxes.

Try it out here: https://t.co/1lBHfEgmhw pic.twitter.com/tZrFOg3PWl

このスニーカーは存在しない - 機械学習で自動生成されたスニーカー画像

Tue, 12 Oct 2021 00:00:00 +0000

This sneaker does not exist(このスニーカーは存在しない) は、機械学習で生成された実在しないスニーカーの画像を大量に作ってくれるwebサービスです。

実在しない人物の顔写真を作るThisPersonDoesNotExist.com や存在しないアニメ女性キャラクター(俺の嫁)を合成するwww.ThisWaifuDoesNotExist.netなど、敵対的生成ネットワーク(GAN)を利用した同種のサービスの一つで、このサイトでは5000種類の生成したスニーカーを並べていて、今後も元となるスタイルを増やすことでさらに多くのスニーカーデザインを追加する予定だそうです。

生成されたスニーカーを選び、“futuristic(革新的)"、“creativity(創造的要素)"、色の明暗のスライダーをいじることで、さらに多少のカスタマイズを行うこともできます。

新しいスニーカーをデザインする人がインスピレーションを得るために使えるか、ここで生成されたデザインをそのまま実際に作って販売する商売を立ち上げるか(といっても、ベースとなるスニーカー画像を参考にしてるので結果的に盗作になるケースは避けないと)、などの用途が考えられるでしょうか。

via Hacker News

Commute Time Map - 一定時間内にたどり着ける範囲を示せる地図サービス

Thu, 07 Oct 2021 00:00:00 +0000

「ピカデリーサーカスから電車で20分」と「ブリクストンから車で10分」の2つを指定した地図。すべての条件が成り立つ領域だけを表示させたりすることもできます。

いわゆる「等時間地図(isochrone map)」と呼ばれるタイプの地図で、地図上の地点間の所要時間を大量に集めないと描けないものです。

徒歩で指定した時は、時間内で行ける範囲は円形に近い形となります。

「東京駅から電車で30分」、絶対にこれは違いますね。電車利用は線路沿い、自動車は高速道路沿いにそって大きく伸びそうなものですが、時間を伸ばしても思ったほど距離が伸びてないような気もします。

「ロンドン中心部から電車で30分」だともう少しそれっぽい範囲が出てくるので、このサービスが使っているIsoline APIが日本の電車に未対応なのでしょう。残念。

ある一か所から一定時間内でどこまでいけるかだけでなく、複数地点からの到達を条件にできることで、どんな使い方が考えられるでしょうか?

別々の会社で働く3人の友人が、徒歩・徒歩・自転車でランチを食べに集まるとして、全員が同じぐらいの時間がたどり着けるのはどこか、みたいなのを可視化することができるかもしれません。

また、同棲カップルがお互いの職場からの時間ができるだけ短くなるところをみつける、みたいなのに使えるかもしれませんね。通勤時間が同じになる場所をみつけて、そこで賃貸物件を探す、とか。

電車での速い移動がもっと正確にでるようになれば、日常的に使える便利サービスになるような気がします。

SeriesHeat - 海外ドラマの各話レーティングをまとめて面白い話を見つけられるサービス

Wed, 06 Oct 2021 00:00:00 +0000

SeriesHeat は、海外の巨大映画情報/レビューサイト imdb のレーティングデータをシリーズ毎に並べて表示してくれるというwebサービスです。

このように、何回にもわたってドラマ化されている人気シリーズの、どの話が評判が良くどの話が不評なのか、を一望することができます。

各話のレートをクリックすると imdb のその話のページへジャンプするので、不思議に評価が低い回の何がダメで悪いレビューが集まっているのか、などを見ることもできます。

Flip ボタンでシリーズx各話の縦と横を逆にしたり、 Color Scheme を3種類変更したりもできます。

リメイク作品の1話は、厳しいレートだったりしますね。

もともとのアイデアは reddit に投稿された The Simpsons のレーティングを手動で可視化した表にあるそうです。

このサービス、話が続いていて連続してみないとわからないドラマよりも、一話完結でどこから観ても楽しめるようなドラマでより使えそうに思います。今はサブスクリプションでシリーズ全話を見放題なんて環境もありますし、全部の話を観るほどの暇はないけど評判のよい話だけを選んで観たい、なんていう時にも役に立つかもしれません。