ハクソク

世界を動かす技術を、日本語で。

HNに聞きます: 新しいアカウントの投稿を制限してください

46日前

概要

最近、HNでAI生成と思われる投稿が増加
特に新規アカウント(緑)からの投稿が目立つ
Show HNセクションで顕著な傾向
新規アカウントの投稿制限やフィルタ機能の要望
HNがTwitterのようなノイズだらけになることへの懸念

HNにおけるAI生成投稿の増加とその懸念

  • 最近、Hacker News(HN)でAI生成と思われる投稿の増加傾向
  • 新規アカウント(緑バッジ)からの投稿が特に多い現象
  • Show HNセクションでAI投稿が目立つ傾向
  • 新規アカウントによる投稿を制限する仕組みの必要性
  • 投稿表示にフィルタ機能(アカウント条件による絞り込み)の要望
  • HNがTwitterのようにボットやノイズで溢れる事態への強い懸念
  • コミュニティの質の維持を重視する姿勢
  • AI投稿の増加がHNの信頼性低下につながるリスク
  • 運営チームへの改善依頼とユーザー体験向上への期待

Hackerたちの意見

それに加えて、「LLM生成のコメントを投稿して(自分のものとして通す)」のが即バンされるべきだと思う。非グリーンアカウントからもこういう行動をよく見るから。追記:自分の「提案」は、LLMであることが明らかな場合にだけ適用されるって言いたかったんだけど、すっかり忘れてた。なんか「常識的な人」の基準を作ればいいんじゃないかな。おそらく、モデレーターは流す方向で判断するだろうけど。それでも、見たコメントの中には、どんな常識的な人でも「人間が書いた」と主張するのは無理だと思うものが多い。デフォルトのChatGPTスタイルはあまりにも独特だから。
モデレーターは、見たらすぐにわかるってこと?それがそんなにはっきりしてるの?それとも、たくさんの誤検出は我慢しなきゃいけない代償なの?
ガイドラインは、AI生成の投稿や提出が許可されていないって更新されてすらいない。数年前からの方針なのに、モデレーターの投稿を検索してもわからないから、外部の人や新しいHNユーザーはそれが禁止されてる理由を知る術がない。理由はあるんだろうけど、外部から見るとその無行動がすごく謎だよね。
提出物にもこれを適用してほしいな。もしくは、AI生成だって分かるマークをつけてほしい。
あなたのコメント、LLMによって生成されたと思うから、即刻かつ永久にバンすることに投票します。
HNへの投稿はすべて郵送で、手書きじゃないとダメにすればいいと思う。それで問題が解決するよ。/重い皮肉 そういえば、うちの母は、求人応募者には手書きのカバーレターを必ず求めてたな。彼女の理由は、手間がかかるから、適当に応募してる人をふるい落とせるってことだった。
今のところ、かなり効果的なメカニズムがあるよ。自分が「ラインを越えてる」と思うコメントにはダウンボートやフラグを付ければいいんだ。だけど、原則的には君に同意するよ。私のルールは「書く価値がなかったなら、他の人が読む価値も1000倍ない」ってこと。
最近は、何でもLLM生成だって言われてるよね。それを強制するのは難しいルールだな。
公平に施行するのが難しいかもしれないけど、もしアカウントがほとんど完全にLLMによって改変されたコメントやストーリーを投稿してるって強い証拠があれば、確かにバンされるべきだと思う。
多くのHNユーザーは、AIのテキストと非AIのテキストを区別するのは絶対に不可能だと強く主張してるね。中には、LLMを使っていると非難されて仕事をクビになった人たちの一方的な話に対する反応みたいなものもあるし、LLM生成の投稿やコードを罰する文化ができないように保険をかけているだけのようにも見える。私の主な問題は、LLMについての無限のオピニオン記事を生成できるってこと。これを毎日読みたいの?もし私がChatGPTがバイブコーディングのリスクや利点についてどう思ってるか知りたいなら、直接聞けばいいだけだし。
デビルズアドボケイト的な意見だけど、ShowHNのプロジェクトの質は実際に上がってると思う。少なくともフロントページに載るものはね。問題は、以前は数週間、数ヶ月、あるいは数年かかっていたプロジェクトが、今では週末にできちゃうってこと。民主化されてるけど、これらの投稿を見ると、(正しく)AIの助けを借りた新しいプロジェクトはそれほどの努力が必要ないって感じるよね。だから、正直に言うべきかも:私たちの基準は上がった。もっと努力や献身が必要なShow HNの投稿を見たいんだ。
でも、問題はShow HNだけじゃなくて、一般的な投稿も新しいアカウントから増えてきてる。中にはフロントページに載るものもあるよ。一例として:https://news.ycombinator.com/item?id=46884481
それだけじゃなくて…コミュニティグループが自分たちで話してるところに、いきなり見知らぬ人が現れて「みんなが好きそうなものを作ったよ!」って叫んで、1時間ほどいて、その後は二度と姿を見せないって感じ。これはアイデアや議論を刺激するから、適度にはいいと思うけど、これがProduct Huntになっちゃうのはダメだよね。ここに投稿する理由は、Product Huntに投稿する理由とは全然違うべきだと思う。
でも、質は上がってないよね。ほとんどのプロジェクトは、人間が作ったらHNに値しないと思う。LLMによって生成されたからこそ評価されてるだけで、実際には最新モデルの能力を示すデモに過ぎない。Show HNやHN全体の目的は、知的好奇心を刺激して面白い会話を生むことなのに、LLM生成のコードはそれを実現しない。AIに作らせた人はそれを理解してないし、深く議論することもできないからね。
先日これについて考えてたんだけど、もし今TempleOSを作ったら、みんなあんまり感心しないだろうな。AIを使ったに違いないって思うだろうし、実際にAIを使ってなくても、AIがそれを実現できないとしても、そう思われるだろうね。
最後に思いつくのは、ちゃんと説明しないサービスとか、GitHubアカウントへのフルアクセスを求めてくるやつ、あるいは実際よりもずっと大きなことを主張してるやつ(例えば「これを作った」って言っても、実際は他の人のもののためのシムに過ぎない)だね。
別の視点を提案したいな。非ハイプサイクルのShow HNは、投稿する前に自分たちで設定した基準が高くなる傾向があると思う。民主化が進む中で、初めてのコミットからShow HNまでの時間が数時間の投稿も多くて、私が見た中では25分が最短だったよ。コミュニティの基準は意味のある変化はしていないと思うけど、基盤のミックスが変わったから、フロントページも変わるんだよね。とはいえ、明らかにお金の木を植えようとしている低品質の投稿が平均以上に増えてる傾向がある。これは、OpenClawみたいな「ほら、手を使わずに」AIツールと、ほぼゼロの労力で簡単にお金を稼ごうとしているクリプト界隈が混ざってるからだと思う。でも、AIの貢献が大きい本当に良い投稿も見たことがあるから、HNの運営方法を最小限に変えることには賛成だよ。小さな変更としては、ガイドラインとFAQに、投稿する前にエージェントが読むものを追加することかな(自動投稿が禁止されてるってことを知るためにね)。
今朝、特に技術的ではないけど、ダンに手伝う提案をしようと思ってメールしそうになった。考えた解決策はこれ:1 - ハニーポット、投稿されたら人間じゃない可能性が高いリンクを隠す。2 - LLMだけが答えられるキャプチャを作る。最近、難しすぎてすぐにはわからない質問を出して人間が参加できないソーシャルネットワークを2つ作った。3 - LLMを使ってLLMを検出する。遊びで作った別のソーシャルネットワークでは、モデレーションの問題を探すLLMがうまくフラグを立ててくれる。4 - 招待制だけど、アカウントの年齢やカルマによって配布する数を変える。最初の3つはしばらくの間は何%かを防げそうだけど、結局は古くなっちゃうだろうね。
リバースキャプチャは楽しいよね。ロボットだって証明するためにこのボタンを10,000回クリックしてみて!
人間らしさを証明する新しい方法が必要だね。
これが何かを解決するとは思えないし、何度も解決策として提案されてるのを見たけど。コメントを古いアカウントに制限したら、ボットの作成者が将来のためにアカウントを積極的に年齢を重ねるだけになると思う。
完璧を求めるあまり、良いものを見逃すのはよくないと思う。コメントするのに年数が必要なアカウントを求めるのは、短期的な運営や「実験」を減らすかもしれないね。
フィルターができたら、カーマベースも欲しいな。{x}+ カーマポイントを持ってるアカウントの投稿だけ見たい。
見た投稿のいくつかは自律型AIエージェントからのもので、今のところそんな長期的な計画を持ってるようには見えないね。
僕の予想では、人間の確認なしにはこれを解決するのは無理だと思う。
それに、カルマファーミングにももっと力を入れようよ。つまり、Show HNのハードルを上げれば、スレッド内で生成されたコメントがもっと増えると思うんだ。
今でもこれ、実際に起こってるよ。「Show HN」の作者をいくつか見てみて。必ず50〜100日くらいのアカウントがいくつかあって、カーマが1のままのやつがいるから、緑のラベルを避けてるんだ。OPは投稿について話してるんであって、コメントじゃないよね。最もシンプルな解決策は、誰かが「Show HN」を投稿する前に25か50のカーマを獲得させることかも。そうすれば、自分を宣伝するためだけに使ってるんじゃなくて、Hacker Newsに積極的に参加してることが示せるし。
自転車に鍵をかける理由がわからないな。やる気のある人なら、簡単に切り落とせるし。
知識的には明るい面もあるよね。これは勝てないレッドクイーンのレースだから、結局のところ、作成者の地位に関係なく、テキストそのものの価値を評価するのが唯一の解決策なんだ。地位はもはや信頼できないからね。こういう公共のフィードでは、無視するのが唯一の選択肢かも。データの洪水はますます質が悪くなるだろうし、私たちはそれから離れるか、選別するのにもっと注意を払うしかない。真珠を見つけるのが上手くなれば、うまくいくかもね。
「勝てない」「唯一の解決策」「唯一の選択肢」って、ちょっと極端すぎるよ。他にも解決策はあると思う。たとえそれが数日、数ヶ月、数年しか持たなくてもね。
> 結局のところ、唯一の解決策はテキストをそのものの価値で評価することだ これは、テキストを評価するのにかかる労力が生成するのに比べてはるかに大きいことに気づくと崩れちゃう。2秒で生成されたテキストを2分かけて読むなら、もう負けてるよ。
AIの荒廃した世界で、人間だけのHNが進化する可能性を考えると、やる気のある人たちが小さなローカルグループに参加して、対面でのミートアップで承認を得るって感じかな。信頼できるリーダーがそのグループの投稿を管理して、スケーラブルなモデレーションが機能する。悪質な投稿はすぐに排除されるし、上位レベルでのコントロールがあれば、SNRが低くても「木の下の方」のコンテンツをもっと見られるかも。投稿が広まるまでの遅延は増えるけど、それが大きな問題になるとは思わないな。
同意だね。メリットが唯一の公正な解決策だと思う。OPがゴミの投稿に気づいたってことは、その投稿をメリットで評価して、ゴミだと判断したってことだから、ちゃんと機能してる。今、genAIが動画を生成してるけど、人間が作ったコンテンツと比べると質が悪い。みんなそれを指摘してるし、劇場でgenAIの映画を見る人なんていないし、genAIのテレビ番組を一気見する人もいないよ。メリットに基づくフィルタリングが必要だね。音楽に関しても、genAIは人間が作った音楽には敵わない。SunoやUdioのAIソングがトップ40に入ったことは一度もないし、100%人間の曲だからこそ評価されてる。コーディングLLMをメリットで評価するためのSWEやエージェンティックなベンチマークもあるし。ちなみに、私は新しいアカウントなんだ。
ATProtoのフィードジェネレーターやラベラーのコンセプトを取り入れて、代替の新しいコメント優先システムを作りたいなと思ってる。
このコメント、難しい言葉がいっぱい使われてるけど、論理的な欠陥が多いね。HNのユーザー層はLLMコンテンツを見抜くのが完璧じゃないけど、結構な数がフラグ付けされて、最終的にはダウンボートされてるよ。毎日1回はリンクをクリックして、AIのゴミだって気づいて、HNに戻ってフラグを付けようとするけど、もうフラグが付いてることが多いんだ。showdeadをオンにすると、見つかってシャドウバンされたLLMボットのコメントが全部見えるよ。上のコメントの論理的欠陥はシンプルで、今の状況を極端な未来に引き延ばして、その未来の予測を今の状況に当てはめてるってこと。今の状況は予測された極端な未来を代表してないから、LLMコンテンツは簡単に見分けられるし、読むのに時間の無駄なものも多いから、取り締まって禁止するのは正しいと思うよ。たとえ完璧じゃなくてもね。
しばらくの間、Show HNを制限するつもりだよ。これも関係あると思うけどね。「HNはマクロトレンドから免れられない」 - https://hn.algolia.com/?dateRange=all&page=0&prefix=true&que...
すべてのアカウントに対して、それとも新しいアカウントだけ?
あなたのユーモア、好きだな。
ぜひそうしてほしい。ちょっと異端なことを言うかもしれないけど、アカウントを作るにはもっと手間が必要だと思う。チャットGPTアトラスみたいなのが、簡単に新しいアカウントを作れるのには驚いたよ。
同意だね、HNもプログラミング界で起こることから免れられないよね。アカウントをミュートしたり隠したりする方法があればいいな。そうすれば、各HNユーザーが自分のフィードを整理できるし。
それは悲しいね、そうやって素晴らしいものが共有されてたのに、仕方ないよね。
100%同意。解決策が何かは分からないけど、最近はShow HNsに興味を失っちゃった。前は誰かが投稿すると、結構時間をかけて考えた結果だって感じがあったし、そのプロジェクトにエネルギーを使う価値があると思ってた。これが悪いアイデアをフィルタリングする良い基準になってたのに、今はそれがなくなっちゃった。興味がある投稿でも、たぶんLLMを使って作られたんだろうなって思うと、見ても意味ない気がする。別にLLMに対して文句があるわけじゃないけど、個人的にはShow HNsは愛情を持って何かをする場だと思ってたから、結果はおまけみたいなもんだったんだよね。
最終的にはHNも投稿するのに1ドル取らないといけなくなるかもね、スパムフィルタリングのために。お金はオープンソースに寄付するとか。
こういうサイトでお金を取るのはあまり良いアイデアじゃないと思う。ユーザーが全てのコンテンツをアップロードすることを期待してるのにね。それに、クレジットカード情報が必要になるから、たとえ1セントでも大きな障壁になるよ。
1ドルじゃスパムを止めることはできないよ。結局、たったの1ドルだし…。
それはイーロンのTwitterに関するアイデアだったけど、Xのメンバーシップの範囲が広がったね。月1ドルってのはいい感じ。
$1で広告を出せるのはめっちゃ安いけど、コミュニティとちゃんとやり取りするにはすごく高い値段だよね。これじゃ、意図した効果とは真逆になっちゃうよ。
RedditやHNのようなサイトを置き換えるものは、ほぼ完全に信頼ネットワークに基づくと思ってる。つまり、信頼できる人が投稿したりアップボートしたりした表面的なストーリーだけが表示されて、逆に信頼できない人のはそうじゃない。信頼を指数関数的に減らしていけば、ほぼ機能するかもしれない。
>ほぼ完全に信頼ネットワークに基づくって? FacebookやLinkedInみたいな感じ?
Advogatoが帰ってきたね。もし知らなかったら、あれは君が言ってるような認証システムがあって、結構良質なコンテンツがあったんだ。でも、しばらくするとスパマーがその質の高さのおかげで検索エンジンで上位に表示されることに気づいて、ほぼそれを台無しにしちゃった。今はもうなくなっちゃったけど。
リスクは、すごく良いエコーチェンバーを作っちゃうことだね。自由な時間にAIのクソみたいな意見や嫌な意見を読む必要はないけど、代わりに尊敬できる、バカじゃない意見に触れることはデザインの一部にすべきだと思う。
19日前のこの投稿がすごく近いよね:https://news.ycombinator.com/item?id=47045804 さらに、dangがそれに返信してるよ:https://news.ycombinator.com/item?id=47050421