morioka / reading

0 stars 0 forks source link

Does GPT-2 Know Your Phone Number? #42

Open morioka opened 3 years ago

morioka commented 3 years ago

https://twitter.com/Eric_Wallace_/status/1341221479426400256 https://bair.berkeley.edu/blog/2020/12/20/lmmem/

大規模言語モデルへの懸念。ジェンダーバイアスのような問題ではなくて、GDPRの忘れ去られる権利への対応の必要性はないか、という点。

誰が気付くのか? https://twitter.com/quasimondo/status/1341309626969710592

NMTではanomymizationが一つの解らしい、 https://twitter.com/JochenHummel/status/1341292509859819520

といった議論が続いている。 最初のブログでは、GPT-2で生成させた文でウェブ検索してヒットするか否かで見ている。 GPT-2も権利的に怪しいデータを食っている可能性はあるし、ウェブ検索も権利的に怪しいデータを返している可能性はある。 どちらも始末が悪い。

。。。それに画像や音声であれば透かし情報を埋め込むこともできるだろうが、テキストには適用できないな。リンクや署名を添えることはできても、それが一般的になるとは言えない。