Acceldataは、データプラットフォームの新しいオープンソース版のリリースを発表しました。多くの従来のデータプラットフォームとは異なり、この新しいリリースは多層構造を採用しており、データパイプライン、データ品質ツール、データシステムからの統合的なインサイトを提供します。
参照: 知っておくべきオープンソースと Linux の用語 40 選 (TechRepublic Premium)
Acceldataの新しいオープンソース・プラットフォームにより、企業は最新のデータ観測ソリューションをより低コストで活用し、イノベーションを推進できるようになります。TechRepublicは、Acceldataのカスタマーエンジニアリング担当シニアディレクターであるチャンドラカント・シャルマ氏とAcceldataチームの他のメンバーにインタビューを行い、Acceldataのオープンソース・データ・プラットフォーム、その機能、潜在的な課題、そして潜在的なビジネスチャンスについて詳細を聞きました。
ジャンプ先:
- オープンソースとデータ観測市場
- Acceldataの新しいオープンソースプラットフォームでできること
- Acceldataのオープンソースデータプラットフォームを使用するメリット
- オープンソースデータプラットフォームの利点
- オープンソースデータ管理の課題と機会
- オープンソースデータ観測の未来
オープンソースとデータ観測市場
TechRepublicの最近の記事で、Ali Azhar氏は、データ観測性は組織においてますます価値を高め、広く利用されるようになってきていると説明しました。特に、「データバリューチェーン全体を通してデータの健全性を維持したい」と考えている組織では顕著です。観測性は、消費者、パートナー、意思決定者に正確なデータを提供し、データの活用と計画をコントロールすることを可能にします。
オープンソースソフトウェアの導入に対する企業の関心も同様に成長傾向にあります。データセットの増大と期待されるユースケースの拡大に伴い、多くの企業が柔軟性と低コストを理由にオープンソースソフトウェアに注目しています。
参照: Simple ML リリースとスプレッドシートユーザーへのビッグデータの影響 (TechRepublic)
「データ爆発は減速の兆しを見せていない」とシャルマ氏は述べた。Statistaのデータを引用し、シャルマ氏はさらに、世界で作成、収集、コピー、消費されるデータの総量は、2020年の64.2ゼタバイトから2025年には180ゼタバイト以上に増加すると予測されていると付け加えた。
しかし、このデータの増加とオープンソースのデータ管理ソフトウェアの需要の同時増加にもかかわらず、多くの企業はオープンソースのデータソリューションを活用するための知識、アクセス、開発者のスキルセットを持っていません。
「データ製品の構築と管理を継続している企業にとって、完全にオープンソースでコミュニティベースのデータプラットフォームに移行する選択肢は限られています」とシャルマ氏は指摘した。
Acceldataの新しいオープンソースプラットフォームでできること
Acceldata プラットフォームの新しいオープンソース バージョンは、データ プラットフォームとデータ観測ライブラリの安定したコミュニティ検証済みバージョンを提供し、パブリック、プライベート、ハイブリッド環境をサポートして、企業の変化する要件に対応します。
参照: オープンソースのデータ品質ソリューションを活用するメリット (TechRepublic)
Acceldataの新たな取り組みには、データプラットフォームと6つのプロジェクトが含まれており、Apacheライセンスバージョン2.0に基づいて無料でダウンロードできます。Acceldataによると、フィンテック、通信、データソリューションプロバイダーなどの大企業がこの新しいオープンソースプラットフォームに貢献し、検証を行い、既に導入済みです。
Acceldataのオープンソースデータプラットフォームを使用するメリット
ビッグデータ管理のさまざまな問題に対するソリューション
新しい Acceldata プラットフォームを使用すると、データ チームは次の問題を解決できます。
- 運用上のボトルネックを特定して、データと分析プラットフォームのスケーリングを最適化し、パフォーマンスの問題を早期に検出します。
- コストとリソースの超過を防ぐために、運用の可視性、ガードレール、プロアクティブなアラートを提供します。
- データ サプライ チェーン全体のデータの信頼性を監視して、データ品質を向上させ、データ停止の影響と頻度を軽減します。
オープンソース通貨と低コスト
この新リリースがオープンソースであるという事実自体が、ユーザーに多くのメリットをもたらします。まず第一に、このようなオープンソースソフトウェアにより、企業は定期的なソフトウェアアップデートを実行しながら、他のユーザーと協力して製品を改善していくことが可能になります。
「止まらないデータの氾濫により、エンタープライズ・データ・オブザーバビリティは新興の高成長市場であり続けています」と、Acceldataの共同創業者兼CTOであるアシュウィン・ラジーヴァ氏は述べています。「当社の創業チームは長年にわたり、Apacheプロジェクトに多大な貢献をしてきました。」
「最新のApacheオープンソースコードに準拠した、信頼性が高く低コストのデータプラットフォームは、データ観測性のイノベーションを推進するだけでなく、共通の使命を持つより大規模なコミュニティコラボレーションの恩恵も受けられると私たちは考えています。」
カスタマイズ性と柔軟性
新しいプラットフォームは、あらゆる環境で弾力性とオンデマンドサービスを実現するテクノロジーを柔軟に導入できます。また、デプロイメントも自動化されており、管理性、可観測性、パッケージ管理の運用が可能になります。
テナントは他のテナントに影響を与えることなく、サービスを利用およびアップグレードできます。効率的な運用と一貫性をサポートするため、当社は変更サイクルを通じてコンポーネントの安定性を確保しています。
オープンソースデータプラットフォームの利点
最新の Apache オープンソース コードに準拠したオープンソース データ プラットフォームにより、企業はデータ プラットフォームのライセンス コストを最適化し、大量のデータに対応するスケーラブルなオープンソース プラットフォームを活用できると Sharma 氏は説明しました。
さらに、データ プラットフォームの運用ではなくデータ製品の構築に重点を置きながら、追加のライセンス コストを負担することなくデータ フットプリントを拡張できます。
「オープンソースコミュニティは、これまで以上に強力であり続けており、Hive、Spark、Kafkaなど、多くの人気プロジェクトのApache Githubリポジトリに新しいコードが継続的に追加されています」とシャルマ氏は述べた。
参照: 商用ソフトウェアアプリケーションのオープンソースコードは広く普及しているが、リスクも存在する (TechRepublic)
データドリブンな企業は、データ管理をビジネスの優先事項と整合させ、高度にカスタマイズ可能なソリューション、透明性、そしてオーナーシップを求めています。当然のことながら、誰でもソースコードを検査、変更、拡張できるオープンソーステクノロジーは、高度なデータチームにとって魅力的です。
「オープンソース・データ・プラットフォームの夢は、これまで叶わなかった」と、アクセルデータの創業者兼CEOであるロヒット・チョードリー氏は述べた。「オープンソースの守護者には、保護主義に屈することなくオープンである責任があり、私たちはコミュニティへの参加、支援、そして発展を継続する中で、この役割を真剣に受け止めています。」
オープンソースデータ管理の課題と機会
オープンソースソフトウェアの最大の課題には、運用効率、セキュリティ、メンテナンスなどがあります。Acceldata社によると、新リリースはオープンソースブランチと定期的に同期し、最新のコードと新しい開発との整合性を確保しています。このアプローチにより、コミュニティや業界のイノベーションの進化に合わせて、新しいコンポーネントを柔軟に追加できるようになります。
Acceldata は最近、データ主導型企業の問題点について詳しく知るために、200 人を超える最高データ責任者、データ プラットフォーム担当副社長、データ エンジニア、その他のデータ リーダーを対象に調査を実施しました。
調査対象者のほぼ半数（45%）が、過去2年間にデータ品質の問題やエラーの発見が遅れたことによるデータパイプラインの障害を11～25回経験したと認めています。これらのインシデントは、63%のケースで顧客体験に影響を与えました。データ業界の専門家は、可視性が最も大きな問題であると指摘しました。
クロスプラットフォームソリューションの複雑さを管理する
今日のデータシステムとアーキテクチャは、クロスプラットフォーム環境の利点を最大限に活用しています。エッジクラウド、オンプレミス、ハイブリッドクラウド環境は、コスト削減、パフォーマンス向上、そして企業に最新テクノロジーへのアクセスを提供します。しかしながら、こうした複雑な環境におけるデータの管理と可視化には、セキュリティをはじめ、多くの課題が伴います。
参照: 組織のデータガバナンスチェックリスト (TechRepublic Premium)
Acceldata は、この新しいバージョンのプラットフォームが、大企業や中小企業で働く多くの人々で構成されるコミュニティの貢献を活用していることを保証しています。
「私たちは定期的にコードベースの脆弱性をスキャンしています」とシャルマ氏は述べた。「コミュニティは何が重要で、何に取り組むべきかを決定し、プロジェクトのタイムラインを作成します。私たちの役割は、オープンソースのデータプラットフォームとライブラリへのアクセスを提供するという理念を維持するために、プラットフォームを共同で維持することです。」
オープンソースデータ観測の未来
2023年を通して、多層的なデータ観測性はどのような役割を果たすのでしょうか？シャルマ氏によると、観測性はデータの無秩序な拡散、データツールの急増、そして人材不足を克服するために不可欠となるでしょう。
新たなソリューションを求めるデータリーダーは、データ、その品質、コスト、パイプラインの状況をより深く理解するために、オープンソースやデータ観測オプションを活用するケースが増えています。その主な目的は、パフォーマンスの向上、ビジネスクリティカルな運用の近代化、そして推進です。
次に読む: ビジネスに最適なデータ観測ツール (TechRepublic)
