HN 日本語サマリー

← 一覧へ戻る
AI・機械学習

Launch HN: Parsewise (YC P25) – APIで文書全体にわたる推論を実現

Launch HN: Parsewise (YC P25) – Reason Across Documents with an API (news.ycombinator.com)

50 pointsby gergelycsegzi47 コメント

要約

Parsewiseは、非構造化データからスキーマ準拠のデータを抽出し、複数の文書にわたる値の来歴を保持するAPIを提供します。このサービスは、特にAIモデルが苦手とする多数のファイルを扱う際のシステム的な制約や、人間が結果を素早く検証できないという課題を解決します。保険証券のPDFや通話記録、メールなどから情報を抽出し、データポイントごとにではなく、文書全体を横断して推論し、必要な情報を解決・結合する強力なエージェント定義を特徴としています。

全文翻訳

皆さん、Parsewiseの創業者であるGregとMaxです (https://www.parsewise.ai/api)。Parsewiseは、非構造化データのバケットをスキーマ準拠のデータに変換し、ドキュメントを横断して解決された値のリネージ(来歴)を保持します。

Claudeに多数のファイルを渡してCSVやJSON出力を求める場面を想像してみてください。もし試したことがあるなら、システム上の制限(ファイル数、入力タイプ、コスト、レイテンシ)だけでなく、結果を迅速に検証する手段がないという人間側の課題もご存知でしょう。私たちは両方を解決します。私たちは、テックチームが非構造化データのETLを簡素化するのを支援し、ビジネス専門家を定義や即時検証のために巻き込みます。

いくつかのユースケースを紹介するビデオはこちらです: https://www.youtube.com/watch?v=dbRllnnh47w

Parsewiseについて、あるユーザーはこう述べています。「保険証券のPDF、文字起こしされた電話、メールなどから情報を抽出する必要があります。単にデータポイントごとに、ページごとに構造化された明確なスキーマに抽出するようなものではなく、ドキュメントを横断する情報があることを理解し、何を抽出するか推論できるような、よりエージェント的なものを求めています。」

私たちは、複雑なデータ変換とデータ分析/合成における10年間の経験(と苦労)に基づいて会社を設立しました。GregはPalantirで古典的なETLとAIワークフローの実装の両方を行っていました。Bainでは、Maxは金融セクターで非常に複雑なデータ分析を行っており、それは多くのお客様の状況と似ています。

Parsewiseは、データのバケット(数百または数千のPDF、Excelなど)を取り込み、バケット内の複数のドキュメントにわたる単語レベルの引用まで追跡可能なすべての値を持つスキーマ準拠のデータを出力することで機能します。APIのお客様には、独自のアプリケーションでリネージを表示する方法を提供するか、社内オペレーションのために当社のプラットフォームを使用できます。データ処理の中核には、自己改善型エージェントの定義があります。これらは、許容されるソース、値の解決または結合のロジック、およびエンドユーザーへの不確実性のハイライトルールの定義を行います。

基盤となる技術はモデルやクラウドに依存せず、プライベートネットワークにデプロイ可能です。視覚的推論にはGeminiモデルで最高の成果を確認しており、私たちが発見した中で最も強力なグラウンデッド推論ベンチマーク(Databricks OfficeQA)でSOTA(Claude Fableを上回る)を達成しました。特に、モデルのハーネスよりも「ヒューマンハーネス」に重点を置き、採用における実際の摩擦、つまり検証可能性に関する問題に注力しました。これは、結果を信頼するために必要な時間とクリック数を最適化することを意味します。解析にはvLLMsを使用し、その後、効率的な大規模網羅的検索のために小規模モデルを使用します。RAGとは異なり、サンプリングは行わず、クエリに対して関連するすべての値を網羅的に検索します。解決策の決定やユーザーへの不整合のフラグ付けには、より大規模なモデルを使用します。

この網羅性と明示的な値のソース追跡は、当社のプラットフォームに固有のものであり、多くの既存プロバイダーがカバーしているデータ解析の最初のステップを超えています。

複雑なドキュメントの課題にParsewiseを試していただけるビルダーやティンカーラーの皆さんを歓迎します。製品を拡張し、より良くするためのアイデアはたくさんありますが、コミュニティからのフィードバックやアイデアをいただけると幸いです!