與田 龍人– Author –
-
データ基盤Hadoopによる分散処理入門
近年、ビッグデータの処理はますます重要になっています。そこで登場するのがHadoopです。Hadoopは大量のデータを効率的に処...#hadoop #HDFS #MapReduce #Spark #YARN -
データ基盤Apache Beam (Dataflow) の基本用語とデータの流れ
ビッグデータ時代のデータ処理フレームワークとして、Apache Beamは非常に強力なツールです。Google Cloud Dataflowは、Apach...#Apache Beam #Cloud Dataflow -
ナレッジ【2週間で合格】情報セキュリティマネジメント試験の合格体験記
私は情報セキュリティマネジメント試験に、2週間の勉強時間で合格するしました。 本記事では、私の合格体験を基に、情報セキ...#IPA試験 #情報セキュリティマネジメント試験 -
データ基盤Google Cloud VMインスタンス上にAirbyteをデプロイする
この技術ブログでは、Google Cloud Platform (GCP)のCompute EngineインスタンスにAirbyteオープンソースをデプロイするため...#Airbyte #GCP #Google Cloud #SSH #VMインスタンス -
データ基盤Amazon Redshiftでのスキーマ移行の効率的な方法
Amazon Redshiftは、高性能なデータウェアハウスソリューションとして、多くの企業で採用されています。しかし、データベース...#AWS #Redshift #SQL -
ナレッジBigQueryでクラスタリングとパーティショニングを行う
データ分析において、大規模なデータセットを効率的にクエリすることは非常に重要です。Google BigQueryは、データウェアハウ...#BigQuery #Google Cloud #クラスタリング #パーテーショニング -
データ基盤BigQuery Dataform:基本的な使い方とメリットについて
近年、データ分析の重要性がますます高まっています。しかし、膨大なデータを収集し、分析するには、適切なツールが必要です...#BigQuery #Dataform #Google Cloud #データオーケストレーション #データモデリング -
データ基盤BigQueryでデータ分析をスマートに!Gemini in BigQuery 入門
近年、データ分析はビジネスにおいて必須のスキルとなりつつあります。しかし、複雑なSQLクエリを記述するスキルがないために...#BigQuery #Gemini #Google Cloud #SQL #データ分析 -
ナレッジOSSデータ統合ツールAirbyteの導入と始め方
データ統合は現代のビジネスにおいて不可欠な要素です。多くの企業が複数のデータソースを使用しており、これらを効率的に統... -
ナレッジGoogle BigQueryでウィンドウ関数を活用したリアルタイムデータの重複排除
Google BigQueryは、ビッグデータのリアルタイム分析に広く使用されており、その中でもデータのストリーミング中にしばしば重...#BigQuery #GCP #ウィンドウ関数
