RAYVEN DLP ルールの版 2026.11.16.1

どれくらい正しく見つけられるか

同じテスト用の文章を使い、よく使われる他社製品の検知ツールと点数を比べました。テストには、ルールの調整に使っていない確認専用の文章ルールの調整に一度も使っていない、確認専用の文章です。自分たちに有利な結果にならないように、こちらだけで点数を出しています。だけを使っています。

比較した日 2026-11-13日本語の業務文書ルールの版 2026.11.16.1

文章の種類ごとの総合点

外部で公開されている 5 種類の日本語の文章で比べました。棒が長いほど良い点で、1.00 が満点です。

RAYVEN DLPMicrosoft PresidioGLiNER
業務の書類
RAYVEN DLP0.99
Microsoft Presidio0.69
GLiNER0.78
AI へのプロンプト
RAYVEN DLP0.99
Microsoft Presidio0.73
GLiNER0.69
業務メール
RAYVEN DLP0.94
Microsoft Presidio0.61
GLiNER0.34
書類のひな形
RAYVEN DLP1.00
Microsoft Presidio0.70
GLiNER0.63
医療の記録
RAYVEN DLP0.84
Microsoft Presidio0.71
GLiNER0.60

テストに使ったデータ

上の 5 種類の文章は、自社で用意したものではなく、第三者が公開しているデータです。だれでも同じデータで確かめられます。

文章の種類公開元データ名ライセンス
業務の書類NVIDIANemotron-PII-JapanCC BY 4.0
AI へのプロンプトLLM-jpllm-jp-chatbot-arena-conversationsCC BY 4.0
業務メールPreferred Networksjapanese-mail-benchApache 2.0
書類のひな形NagaYu さんsumi-ja-pii-corpusCC BY-SA 4.0
医療の記録mama healthmama-deid-datasetCC BY 4.0

伏せる項目の判定

正しさ 0.95 以上・見逃しの少なさ 0.90 以上・テスト 300 件以上で「合格」。

  • 氏名
  • 住所
  • 電話番号
  • メールアドレス
  • 生年月日
  • 郵便番号
  • 銀行口座
  • 在留カード番号
  • 社外秘の表示

判定待ちは、外部の公開データに正解が無く、まだ判定できない項目です。自社で作ったデータでの参考値は、在留カード番号が合格の水準(正しさ・見逃しの少なさとも 1.00)、社外秘の表示は正しさ 0.99・見逃しの少なさ 0.89 です。

補足

  • 文章の中の名前でも 他社製品を上回りました(医療の記録 0.91・業務の文章 0.87。Microsoft Presidio 0.78・0.82)。
  • 英語の文章では GLiNER の方が上です(0.79 対 0.58)。日本語向けに作っているためです。