Charlie's volatile short

これぞGoogleキラー？Wikipedia創始者らの手による検索エンジン公開@日経BP ITproでは、

（1）透明性（2）コミュニティー（3）品質（4）プライバシー、という4つの原則を掲げている。このうち、Googleに代表される既存の検索エンジンと一線を画すのが（1）と（2）だ。（1）の透明性は、検索システムやアルゴリズムを公開することで、検索結果の妥当性や信頼性を高めようとするもの。そして（2）のコミュニティーは、さまざまな人がWikia Searchの開発に貢献できる仕組みを用意することを示す。

と説明しているが、とりあえず透明性については疑問。
アルゴリズムやシステム（って何を指す？）が公開されていれば何がどううれしいのかというところが。とりあえず3つ想像してみる。

1. 似非SEOに対抗して、ユーザの望む情報が得られやすくなる。
2. 検索サービスの提供者やそこに圧力を掛ける人々の経済的政治的理由による偏向を排除して、ユーザの望む情報が得られやすくなる。
3. アルゴリズムの欠陥などによって、人間の直観とは異なる検索結果が生じた時に、原因を公開できる

以下、一つずつに疑問を投げてみる。

...

似非SEOに対抗するという意図だとしたら、「社内の限られた開発者で対策考えるより、世界中の人に考えてもらった方が良いアイディアが出る確率が高いよね」っていう話だと思う。でも、専門の研究をしている人を雇ってアイディアを出させるGoogle, Yahoo, Microsoftの方式に比べてどれだけ有利なのかなぁ。

あと、昨日の記事でも書いたように、似非SEOを検出するアルゴリズムを改良していっても、普通のサイトを誤検出したり、似非SEOをスルーする確率は0にはならない。 だから、間違いの率をできるだけ下げるようにパラメータを設定するのだけれど、 非公開のときはパラメータを探るために似非SEO屋が自爆（ブラックリストに記録される）覚悟でWeb上で行なっていた試行錯誤が、コードを読めば（あるいは自前のサーバでシミュレーションしてみれば）よくなってしまうので、似非SEO側に有利になっている気もする。コードは公開するけれども、運用時のパラメータは非公開、とかいう公開鍵暗号みたいな方式はありか。

今度はもう一つの可能性、いわゆる「Google八分」への対策と考えてみる。 コードを公開し、さらにWikipediaと同様に、削除やランキング操作のポリシーを公開して、削除にあたっては過程を記録するとする。
でも、全てのWebページを対象とするならば事典と違って検証可能性は確保しようがないので、ポリシーに沿った運用というのがすごく難しいと思う。
また、俗に言う「Google八分」は、例えばGoogle自体が自分のライバル会社であるYahooやMicrosoftのサイトをフィルタリングするとかいう無邪気な話ではなくて、国とか他の企業とか何かの組織・団体とかの要請でフィルタリングすることの危うさのことで、 それはポリシーを掲げるだけでは解決できない。
フィルタリングの要請は法律や訴訟の形でやって来ることもあるので、透明性は対策として機能しないと思う。アドバンテージがあるとすれば、「××国の法律に則ってフィルタリングします」「○○団体による名誉既存の訴えによりフィルタリングします」などの報告がしっかり行なわれるだろう、ということか。

さて最後に、原因不明のおかしな検索結果 (例) が生じた時に、原因究明を公開で行ない、陰謀説を防ぐことができて安心、という可能性。
残念ながら、アルゴリズムが公開されていても原因究明はできないことが多いだろうし、原因究明できても陰謀説を好む人達は信じない。
なぜなら、膨大な索引情報の中から問題の再現に必要な分だけデータを引っ張り出すなんてことは誰でも可能にはしないだろうし（そんなことしたらネットワークがパンクする）、自分で検証する力のない or 他人の検証報告を読んでも理解できない多くの利用者にとって、サービス提供者が「意図的な操作はしていません」と言うのと、 どこの誰だか知らない検証者が言うのとの間に大した違いはないから。

このように、3つの可能性の中では、検索結果の妥当性や信頼性が透明性によって確保できるというのが説明できないのですよ。もっと別の形の信頼性があるということですかね？

外部リンク

• 「Wikia Search」には完璧に落胆した @ TechCrunch Japanese
• 『処理の仕組みを公開すること、ユーザーからのフィードバックを受けて検索結果を改良していくことなどを特徴としています。 』 @ パソコン大好き
• Search WikiaについてGoogleが語る @ Buzzy Dizzy Biz
• 『サーチエンジン+Wiki+SNSという風情』@ Rauru Blog
• 『最初にプロジェクトが明るみに出たときは鳴り物入りだったが、1年経つと、状況は少し落ち着いてきたというところか。』@ B3 Annex