IT用語帳
IP2027データ分析・データ利活用 · データ基盤

データレイク

Data Lake

でーたれいく

構造化・非構造化を問わず、さまざまな形式のデータをそのままの形で蓄積する大規模ストレージ。IoTデバイスから収集したセンサデータ、ログ、画像データなどを一元管理し、後から分析やAI学習に活用する。AWS S3やAzure Data Lakeが代表的。

共有:

Related

他の資格での定義

SGデータレイク

構造化・半構造化・非構造化データをそのままの形式で大量に蓄積するストレージ基盤。データウェアハウスと異なり、事前のスキーマ定義なしにデータを格納し、必要時に加工・分析を行う。

FEデータレイク

構造化データ、半構造化データ、非構造化データを元の形式のまま一元的に蓄積する大規模ストレージ。データウェアハウスとは異なりスキーマを事前に定義せず、分析時に必要に応じてデータを整形する。

APデータレイク

構造化データ、半構造化データ、非構造化データを元の形式のまま大量に蓄積するストレージ基盤。データウェアハウスと異なり、格納時にスキーマを定義する必要がなく(スキーマオンリード)、多様なデータソースからの生データを柔軟に保持できる。

STデータレイク

構造化データ・非構造化データを問わず、生データをそのままの形式で大量に蓄積するストレージ基盤。データウェアハウスが事前にスキーマを定義して格納するのに対し、データレイクはスキーマオンリードの方式で柔軟な分析を可能にする。

DBデータレイク

構造化・半構造化・非構造化を問わず、あらゆるデータを元の形式のまま一元的に蓄積する大規模データストレージ。データウェアハウスと異なり、格納時にスキーマを定義する必要がなく、分析時にスキーマを適用する(スキーマオンリード)。

ESデータレイク

構造化・非構造化を問わず、さまざまな形式のデータをそのままの形で蓄積する大規模ストレージ。IoTデバイスから収集したセンサデータ、ログ、画像データなどを一元管理し、後から分析やAI学習に活用する。AWS S3やAzure Data Lakeが代表的。

DMデータレイク

構造化・非構造化を問わず、生データをそのままの形で大量に蓄積する保管領域。用途を決めずに貯められる反面、メタデータ管理を怠るとデータスワンプに陥る。

PD-Dデータレイク

構造化データに加え、ログ、JSON、画像、音声などの半構造化・非構造化データを、加工せずに元の形式のまま大量に蓄積するリポジトリ。スキーマオンリードで利用時に構造を解釈するため、用途を決めずに取り込めて機械学習の素材にもなるが、メタデータやデータカタログで管理しないと中身の分からないデータスワンプになる。

A-1データレイク

構造化データだけでなく、ログ、画像、文書などの半構造化データや非構造化データも、元の形式のまま大量に蓄積する保存基盤。利用時にスキーマを適用するスキーマオンリードを採り、機械学習や探索的な分析に向くが、メタデータ管理が不十分だと中身の分からないデータスワンプになる。

Past Exams

過去問での出題

過去問で 5 回出題(応用情報技術者試験 2・情報セキュリティマネジメント試験 1・データベーススペシャリスト試験 1・高度試験 午前Ⅰ 1)。うち 4 回は用語そのものを問う問題です。

出典: 独立行政法人情報処理推進機構(IPA)の過去問題。問題文は IPA のサイトの PDF で確認できます。「用語を問う問題」は、この用語の説明や特徴そのものを問う問題です。「選択肢」は、問題文ではなく選択肢に出たものです。用語名で照合しているため、関係の薄い問題が含まれることがあります。

ITパスポート試験の過去問によく出る用語

Related

関連キーワードの用語

ESSSD(ソリッドステートドライブ)

NANDフラッシュメモリを記録媒体とするストレージデバイス。HDDに比べて高速アクセス、低消費電力、耐衝撃性に優れる。ウェアレベリング、ガベージコレクション、TRIM等の管理技術が組み込まれている。組込みシステムではeMMCやUFSが利用される。

ESファイルシステム

データをファイルとディレクトリの階層構造で管理するソフトウェア。組込み向けにはFATFS、LittleFS(フラッシュメモリ向け、ウェアレベリング対応)、JFFS2/UBIFS(NANDフラッシュ向け)などがある。ログ保存やデータ記録に使用される。

IPデータ駆動型社会

あらゆる分野でデータの収集・分析・活用が意思決定や価値創出の基盤となる社会。ビッグデータやAIを活用して、社会課題の解決や新たなサービス創出を推進する。

IPクロス集計表

2つ以上の項目を縦横に配置し、それぞれの組み合わせごとのデータを集計した表。アンケート結果の分析などで、項目間の関係性を明らかにするために用いられる。

IPCSV

データをカンマで区切って記録するファイル形式。テキストベースのシンプルな構造で、表計算ソフトやデータベースなど異なるシステム間のデータ交換に広く使われる。

IPBI

企業が蓄積したデータを収集・分析・可視化し、経営の意思決定に活用する仕組みや手法の総称。ダッシュボードやレポートを通じて、経営状況をリアルタイムに把握できる。