Streamdalはストリーミングデータアーキテクチャの可視性を高めたいと考えている

ストリーミングアーキテクチャ（複数のソースから大量のデータを取り込んで処理するために構築されたソフトウェアコンポーネントのフレームワーク）の台頭により、信頼性とパフォーマンスの向上に対する需要が高まっています。エンジニアリングチームは、アプリのパフォーマンスを向上させるために、「メッセージエンベロープ」と呼ばれるものを使用してデータをエンコードすることがよくあります。しかし、これは複雑さを増し、デバッグが困難でコストがかかる傾向があります。

ダニエル・セランス氏とウスティン・ザルビン氏は、New Relic、InVision、DigitalOcean、Community.comで経験を積んだエンジニアです。彼らは、エンコードされたデータストリームにおける異常な挙動を検知する方法が必要だと考えました。ストリーミングデータフレームワークで問題に直面した後、彼らはStreamdalを共同設立しました。Streamdalは、ストリーミングの問題をユーザーに警告するだけでなく、転送中のデータを変換し、破損したデータをリアルタイムで再処理することもできます。 

「分散システムにおけるストリーミングデータについて、より実用的な洞察を得る必要があると感じていました」と、Selans氏はTechCrunchのメールインタビューで語った。「他のアプローチではストリーミングデータを分析できず、メタデータに基づく指標に頼らざるを得ません。さらに、ストリーミングを利用する企業のほとんどが何らかのデータエンコーディングも利用しているため、エンコードされたデータを読み取るツールは存在しません。」

Streamdalは、重要なデータ問題の監視に加え、自然言語処理アルゴリズムを含むAIを活用してストリーム内の個人情報を検出し、それに応じたアクション（例えば、編集）を実行します。また、同社はデータストリームを詳細に分析し、異なるストリーミングシステムを連携させることができるオープンソースパッケージ「Plumber」も提供しています。

将来の機能には、データ ストリーム全体にわたるより詳細な系統の提供や、スキーマ変更に関する実行中のデータの分析が含まれる可能性があると Selans 氏は言います。

セランズ氏は、Streamdalの競合相手は主に、企業向けに特注のソリューションを組み立ててきた社内エンジニアリングチームだと見ている。「契約上の理由」で多くの顧客名を挙げることはできなかったが、RechargeとParkMobileがStreamdalの有力な有料顧客であることを明らかにした。一方、Plumberは15万回以上ダウンロードされているとセランズ氏は主張する。

「当社は、リアルタイムのスキーマ変更など、顧客のサービス停止につながる可能性のあるデータ問題について、企業がイベント駆動型アーキテクチャ内の数十億のイベントを監視し、意味的に分析できるよう支援しています」とセランズ氏は述べた。