IT用語帳
FEデータベース · データベース応用

ストリーミングデータ

Streaming Data

すとりーみんぐでーた

センサーやログのように、絶え間なく発生し続けるデータ。ためてから処理するのではなく到着した端から処理することで、異常検知や需要予測をほぼ即時に行える。

共有:

Related

関連キーワードの用語

NWビッグデータ

量(Volume)、多様性(Variety)、速度(Velocity)の点で従来の手法では扱いきれない大規模データ。IoT機器からの収集ではトラフィックが増大するため、エッジでの前処理や帯域制御が設計上の課題となる。

FEELT

データを抽出していったんそのまま格納し、格納先の処理能力を使って変換する方式。変換してから格納するETLと順序が逆で、クラウドのデータ基盤やデータレイクで採られることが多い。

FE構造化データ

行と列のように、あらかじめ決められた形式に整理されたデータ。表形式のデータベースやCSVが該当し、検索や集計がしやすい。企業が扱うデータのうち割合としては少数派とされる。

FE半構造化データ

厳密な表形式ではないが、タグや階層など一定の構造を持つデータ。XMLやJSONが該当する。項目の有無が案件ごとに違っても扱えるため、システム間のデータ交換に広く使われる。

FE非構造化データ

文章、画像、音声、動画のように、あらかじめ決まった形式を持たないデータ。企業に蓄積されるデータの大半を占め、AIやテキストマイニングを使って分析することで価値を引き出す。

FE分散ファイルシステム

複数のサーバのディスクをまとめ、1つのファイルシステムとして扱えるようにした仕組み。データを分割・複製して保持するため大容量と耐障害性を両立でき、ビッグデータ処理基盤の土台になる。