パープレキシティは、自社のAIにインターネットの基本ルールを破らせていると報じられている

パープレキシティはインターネットの使い方を変えたいと考えているが、ジェフ・ベゾス氏が支援するこのAI検索スタートアップは、そのためにルールを破っているのかもしれない。 開発者のロブ・ナイト氏が今週Wired誌に報じたところによると、同社は広く受け入れられているウェブ標準であるロボット排除プロトコルを無視し、ボットによるアクセスを望まないウェブ部分をスクレイピングしているようだ。

Perplexityのサービスはウェブ上の記事を要約し、「さまざまなリンクをクリックする必要がない」で「信頼できる回答」を提供すると主張していると、ブログ記事で述べられている。そのために、WiredとKnightは、Perplexityがウェブクローラーをブロックするために意図的に書かれたコード（robots.txtファイル）を無視していることを発見した。2つのレポートでは、Perplexityが非公開のIPアドレスを使用してこれらのrobots.txtファイルを回避し、とにかくウェブサイトをスクレイピングしていることがわかった。Wiredは、自社のウェブサイトが2024年の初めにPerplexityのウェブクローラーをブロックしたと主張しているが、このAI検索エンジンは依然として記事を詳細に要約することができる。

それにもかかわらず、Perplexity は自社のウェブサイトの文書で、ロボット排除プロトコルを尊重すると主張している。Perplexity の CEO である Aravind Srinivas 氏は Wired に対し、記者らは「Perplexity とインターネットの仕組みについて根本的に誤解している」と語ったが、調査結果に直接異議を唱えることはなかった。Gizmodo は Perplexity に連絡を取り、より詳細な回答を求めており、返答があれば記事を更新する予定だ。

これとは別に、Perplexityは現在、著作権侵害というインターネットのルール違反で法的脅威に直面している。Forbesは今週、AIスタートアップのPerplexityがForbesの報道を適切な出典を示さずに盗用したと非難し、法的措置を取ると脅したと報じられている。Forbesは元Google CEOのエリック・シュミットのAIドローンベンチャーについて独自に報道しており、PerplexityはForbesのテキストと画像を使用してAI生成の記事、ポッドキャスト、動画を作成した。Forbesの編集長は今月初め、XでPerplexityを非難した。

Perplexity の製品は便利ではあるが、インターネット上のトラフィックを迂回させる。Google もウェブページをインデックスし、短い AI 要約を提供しているが、トラフィックを情報の出所であるウェブページに直接誘導している。Perplexity は実質的に詳細な AI 記事を書いており、ユーザーがウェブサイトをクリックスルーしないようにしており、デジタル メディアのビジネス モデルを破壊している。

OpenAI はこの問題に対処するためにメディア企業と提携し 、コンテンツのライセンス料を前払いしている。また、Perplexity も同様のコンテンツ提携に取り組んでいると報じられているが、OpenAI のようにコンテンツに定額料金を支払うのではなく、Perplexity は収益の分配を目指している。しかし、こうした提携はまだ存在しないため、現時点では Perplexity はペイウォールを飛び越えてウェブサイトをスクレイピングし、AI の回答に必要なすべての情報を取得しているようだ。