データエンジニアリング実践シリーズ 第一回【データエンジニアリングとは】
データ活用の重要性が高まるなか、データを収集・整理し、分析しやすい形で活用する「データエンジニアリング」が注目されています。本記事では、データウェアハウスやデータレイクの役割を整理しながら、データ基盤を支える技術の全体像をわかりやすく紹介します。
記事を見る技術や情報、そして人々が集まる"港"
データ活用の重要性が高まるなか、データを収集・整理し、分析しやすい形で活用する「データエンジニアリング」が注目されています。本記事では、データウェアハウスやデータレイクの役割を整理しながら、データ基盤を支える技術の全体像をわかりやすく紹介します。
記事を見るAmazon FSx for NetApp ONTAPを検証したいとき、VPCや接続用EC2まで手作業で用意するのは手間がかかります。そこで本記事では、AWS CDK v2を使って、検証に必要な環境一式をIaCでまとめてデプロイする方法を紹介します。セキュアな構成や作成手順、注意点もあわせて解説します。
記事を見るWe think Nomad has the potential to become a very useful tool in your toolbox and therefore I would like to take this opportunity to introduce to you my thoughts alongside a guide on the basic setup.
記事を見る最近ログ分析という言葉をよく耳にしませんか?IoTやセキュリティ対策の需要が増える昨今、ログデータから不正アクセスなどを検知し、被害を最小限に抑えるためには、ログ分析は不可欠なソリューションとなります。SIEM on Amazon OpenSearch Serviceは、そのソリューションの1つです。基本的にはSIEM on Amazon OpenSearch Serviceが対応しているログであれば、比較的簡単に取り込むことができますが、Apacheログなどはデフォルトでは対応していません。今回は、カスタムで取り込む方法がありますので、共有させていただきたいと思います。初めて SIEM on Amazon OpenSearch Serviceを利用される方を対象としています。
記事を見るVMworld 2021 Japanでは、VMwareのマルチクラウド戦略とその次の課題が紹介されました。背景には、最適なクラウドを柔軟に活用したいという要望と、特定ベンダーへの依存を避けたいというニーズがあります。一方で、運用やセキュリティの複雑化、レガシーとモダンアプリの混在、ガバナンス統合の難しさといった課題も顕在化しています。これに対し、VMwareはマルチクラウド環境に一貫性をもたらす「VMware Cross-Cloud Services」を発表しました。
記事を見る先日開催されたKubecon NA 2021にオンライン参加しました!数々の興味深いセッションがありましたが、その中でも特に興味のあるKubernetes運用についてのセッション「GitOps+Jenkins-CI With Declarative Everything」を視聴しました。 何故GitOpsがKubernetes運用のベストプラクティスなのか、どのように導入すればよいのかをデモを交えて丁寧に説明されたセッションでした。本稿ではKubernetes Clusterを運用するベストプラクティスであるGitOpsの特徴とFluxでの実現方法を整理したいと思います。
記事を見る2021年10月11日 -15日に「KubeCon + CloudNativeCon North Ameraca 2021」がLos Angelesにて開催されました。今回もオンラインで視聴が可能でしたので、いくつかのセッションを視聴しました。興味深いセッションはたくさんありましたが、Kubernetes向けのサービスメッシュプロダクトである Linkerdのセッションがいくつかありましたのでそちらについての記事となります。
記事を見るKubernetesの導入は、柔軟性や拡張性の高さから多くの企業で注目されていますが、始め方を誤ると運用負荷やセキュリティリスクを招きかねません。本記事では、KubeCon + CloudNativeCon NA 2021で紹介された「How NOT to Start with Kubernetes」をもとに、実体験に基づく“やってはいけないこと”を整理します。これからKubernetesを導入する方に向けて、失敗を避けるための重要なポイントをわかりやすく解説します。
記事を見る10/11~10/15にかけてKubeCon + CloudNativeCon North America 2021が開催されました。CloudNativeが近年急速に広まり興味深いセッションが多数ありましたが、その中で興味深かった「What’s New With SIG-Windows」について紹介したいと思います。
記事を見るデータ活用の重要性が高まるなか、データを収集・整理し、分析しやすい形で活用する「データエンジニアリング」が注目されています。本記事では、データウェアハウスやデータレイクの役割を整理しながら、データ基盤を支える技術の全体像をわかりやすく紹介します。
記事を見るContact
Copyright © JTP Co., Ltd. All Rights Reserved.