「Apache Hadoop」関連の最新 ニュース・レビュー・解説 記事 まとめ

AI時代のプログラミング言語10選【第3回】
AI開発で選ばれる「定番のプログラミング言語」はこれだ
AIアプリケーションの開発を成功させる上で、プログラミング言語の選択は非常に重要な要素となる。AI分野で実績のあるプログラミング言語を紹介する。（2024/11/6）

「Gemini、分析資料を作って」が現実に：
Google Cloudの「AIによるAIのためのデータ探索基盤」機能強化　まとめ
DataCloudサービス群の新機能などが、Google Cloud Next Tokyo ’24に合わせて発表された。エンタープライズシステムでのAI活用を視野に入れた機能強化が目立つ。（2024/8/8）

米Uber、1エクサバイト超のデータ量を持つシステムをオンプレミスからGoogle Cloudへ移行
米Uberは、オンプレミス上に構築した数万台ものサーバによる1エクサバイト超のデータ容量を持つ世界最大級のHadoopエコシステムを、Google Cloudへ移行すると発表しました。（2024/6/19）

TechTargetジャパン　特選プレミアムコンテンツ：
枯れたはずのDWHが「クラウドDWH」で再び盛り上がる訳
「Hadoop」の普及によって一時期“守勢”に立たされたはずの「DWH」が、「クラウドDWH」へと形を変えて再び関心を集めるようになった。背景には何があるのか。（2024/5/19）

アナリストの“ちょっと寄り道”　調査データの裏側を覗こう：
トヨタやホンダ、日産の「データ活用人材」確保戦略は？ 自動車業界の“裏側”に迫る【後編】
車載ソフトウェア市場の潮流が大きく変わり、データ分析人材の不足が深刻になっている。自動車メーカーはどのように確保しようとしているのか、各社の戦略を見てみよう。（2024/4/19）

PR：データ活用に「データ仮想化」という“新戦略”　DX時代のデータマネジメント、その在り方を探る
（2024/1/16）

PR：データ活用に「データ仮想化」という“新戦略”　DX時代のデータマネジメント、その在り方を探る
（2023/12/21）

マスク氏の大改革が一時中断【後編】
「Twitterは危ない」と“GCP利用”さえ削らせるマスク氏は正しいのか
イーロン・マスク氏はTwitterのCEOに就任後、大規模なコスト削減策を発表した。その対象はクラウドサービス群「Google Cloud Platform」（GCP）の利用にも及んだ。その判断をどう見るべきなのか。（2023/4/6）

膨大なデータを生かすためには「ストレージの垣根をなくす」ことが重要：
PR：DXの推進で避けては通れない「データ管理」に求められる4つの要件
日々の業務や意思決定など企業活動と密接に関わっているデータ。DXやデジタル化の推進に伴い、多くの企業で扱うデータ量が増加の一途をたどっている。今後のストレージ戦略において、何を重視すればいいのか、どのような管理が有効なのか。デル・テクノロジーズに聞いた。（2023/3/29）

特選プレミアムコンテンツガイド
枯れたはずのDWHが「クラウドDWH」で再び盛り上がる訳
大規模データの蓄積や処理に使われる技術の中では「Hadoop」が優勢だった。だが最近は、一時期守勢に立たされたはずの「DWH」が「クラウドDWH」へと形を変え、再び関心を集めつつある。背景には何があるのか。（2023/3/17）

Go AbekawaのGo Global！〜Aaron Bramson（後）：
今日の気分を“スコアリング”できたらいいのに
グローバルに活躍するエンジニアを紹介する本連載。前回に引き続き、GAテクノロジーズのAaron Bramson（アーロン・ブラムソン）さんにお話を伺う。同氏が語る「サイエンス」と「エンジニアリング」との違いとは。（2023/1/6）

ITワード365：
マイクロサービスとは？　【ITワード365】公的個人認証サービス／Hadoop／インスタンス／NVIDIA／IMAP／C#
最新IT動向のキャッチアップはキーワードから。専門用語でけむに巻かれないIT人材になるための、毎日ひとことキーワード解説。（2022/11/4）

Gartner Insights Pickup（274）：
Hadoopに関する議論、今のテーマは「次は何か」だ
Gartnerには、「ビッグデータ」に関する問い合わせが継続して寄せられているが、「Apache Hadoop」についての問い合わせは多くない。本稿では、Hadoopの現状と今後の動向について考察する。（2022/9/30）

ジョージア工科大学、プレイリービューA＆M大学、滋賀大学が協力：
教員機関なら無償で利用できる「データサイエンス教育キット」を提供開始　NVIDIA
NVIDIAは、「DLIデータサイエンス教育キット」の日本語版を提供開始した。滋賀大学と協力して翻訳した。教育機関に所属する教員は無償でダウンロードし、データサイエンス教育に活用できる。（2022/9/9）

データサイエンス教育用の講義資料1000ページ、教員向けに無償公開　NVIDIAと滋賀大が連携
NVIDIAと滋賀大学は、データサイエンス教育用の講義資料「DLI データサイエンス教育キット」の日本語版の提供を始めた。NVIDIAが開発した講義資料で、滋賀大学が日本語に翻訳したもの。教育機関の教員向けに提供するという。（2022/9/8）

Gartner Insights Pickup（271）：
2021年のDBMS市場――非リレーショナル分野で独走するベンダーとは？
非リレーショナルのデータベース管理システム（DBMS）市場において、専業ベンダーのシェアは大きくない。1社のみが独走しているのが現状だ。今回は、各社の割合と今後の展開について考える。（2022/9/2）

小さく始めて大きく育てる：
PR：製造業のデータ分析を阻害する「システムのサイロ化」を解消できる方法とは？
データをビジネスで有効活用するには、複数のデータソースからデータを1カ所に蓄積し、組織横断で利用できる仕組みが望ましい。手頃にスモールスタートでき、将来的な拡張も見据えたデータ活用システムの理想像とは。（2022/7/29）

AWSがモダンなデータ分析環境に本腰　主要サービスをサーバレス提供
「ハイパースケーラー」として世界的にも高いシェアを誇るAWSが、モダンデータ分析環境の提供に本気を出す。主要なサービスをサーバレスで提供し、スケーラブルなデータ分析環境をオンデマンドで利用できるようになる見込みだ。（2022/7/20）

Rustの人気やDockerの普及が鮮明に：
最も愛される言語、最も報酬の高い技術が示す開発トレンドの不変と激変、Stack Overflow年次調査
Stack Overflowは2022年の年次ソフトウェア開発者調査の結果を発表した。よく使われている技術や愛されている技術、年収の高い技術、雇用や勤務形態などの最新動向が明らかになった。（2022/6/30）

リクルート事例で分かるIaaS→PaaS移行のコツ（2）：
ペットと家畜、KISSの原則、SREの導入――AWS上のシステムをクラウドネイティブ化する際に用いるべき原理原則
リクルートの情報検索組織において検索APIの基盤をどうやってPaaS中心のシステムに移行したかを紹介する連載。今回は、AWS上のシステムをクラウドネイティブ化する際に用いるべき原理原則について解説する。（2022/6/21）

リクルート事例で分かるIaaS→PaaS移行のコツ（1）：
リクルートの情報検索組織が検索APIの基盤をIaaSからPaaS中心にした理由
リクルートの情報検索組織において検索APIの基盤をどうやってPaaS中心のシステムに移行したかを紹介する連載。初回は、PaaS中心の世界観に至った歴史的いきさつ、理由について解説する。（2022/5/13）

3D実装技術でサーバのパフォーマンスが飛躍的に向上：
PR：AMDが“夢のある技術”を載せたサーバCPUを提供開始、企業はこれをどう使いこなせるか
AMDがサーバCPU「EPYC（エピック）」シリーズで、開発コードネーム「Milan-X」と呼んでいた新たな製品の出荷を開始した。これまで先駆的な取り組みを続けてきたAMDは、今回も最先端の「夢のある技術」をEPYCシリーズで投入したという。Milan-XはどのようなCPUなのか。（2022/4/15）

詳説探究！DBエンジニアが征く（3）：
企業が「NewSQL」を採用するメリットは？　PingCAP CTOに聞く「TiDB」開発の理由
分散SQLDB「TiDB」をOSSで公開し、開発を進めているPingCAPでCTOを務めるEd Huang氏と対談。TiDBの開発を始めたいきさつや、企業はRDBからNewSQLに移行すべきなのかなどについて聞きました。（2022/2/24）

データ分析戦略を支える、クラウド基盤の生かし方（3）：
データが保険の売り方を変えた　DX生かした新商品が好調、三井住友海上を支えるクラウド戦略
「データ分析導入でROIが取れるのか」。かつて高額なデータ分析の仕組み導入で辛酸をなめ、社内でもこんな言葉を投げかけられた担当者は、失敗を糧にした「無駄のないクラウド基盤戦略」で大規模なデータ分析を可能にし、販売手法の変革やヒット商品につなげた。その方法とは。（2022/2/17）

データウェアハウスの終わり【後編】
従来型データウェアハウスでは分析できない、次世代ツールの「分析対象」
データウェアハウスもデータレイクも限界が見えた今、各社は「次世代型データウェアハウス」で市場をリードしようとしている。最後に生き残るアーキテクチャとは？（2021/12/16）

Snowflakeで何ができる？　基礎情報解説（3）：
Snowflakeのアーキテクチャはどうなっているか　圧倒的なスケーラビリティを実現するクラウドネイティブ設計思想
過去2回の記事でSnowflakeとは何か、何ができるかを見てきました。今回はSnowflakeの特長を裏付ける実装とクラウドネイティブな設計思想を見ていきます。（2021/11/25）

SQL Server動的管理ビューレファレンス（56）：
PolyBaseのワーカーごとの処理に関する情報を出力する
「Microsoft SQL Server」が稼働するデータベースシステムを運用する管理者に向け、「動的管理ビュー」の活用を軸にしたトラブル対策のためのノウハウを紹介していきます。今回は、PolyBaseのワーカーごとの処理に関する情報の出力について解説します。（2021/11/1）

AutoML OSS入門（5）：
ノーコードでAutoMLを実現、Javaアプリと簡単に連携できる「H2O」
AutoML OSSを紹介する本連載第5回は、ノーコードでAutoMLが実行できるOSS「H2O」を解説します。H2Oは、最小限の時間で最適なモデルの構築を目指すだけでなく、分散処理フレームワークを活用した大規模なデータセットの高速処理や、Python以外の手法による機械学習の実現など、さまざまなニーズを満たす機能が実装されています。（2021/10/29）

SQL Server動的管理ビューレファレンス（55）：
PolyBaseでプッシュダウンした処理に関する情報を出力する
「Microsoft SQL Server」が稼働するデータベースシステムを運用する管理者に向け、「動的管理ビュー」の活用を軸にしたトラブル対策のためのノウハウを紹介していきます。今回は、PolyBaseでプッシュダウンした処理に関する情報の出力について解説します。（2021/10/26）

SQL Server動的管理ビューレファレンス（53）：
PolyBaseデータ移動サービスの状態を確認する
「Microsoft SQL Server」が稼働するデータベースシステムを運用する管理者に向け、「動的管理ビュー」の活用を軸にしたトラブル対策のためのノウハウを紹介していきます。今回は、PolyBaseデータ移動サービスの状態の確認について解説します。（2021/10/19）

Snowflakeで何ができる？　基礎情報解説（2）：
データ活用においてSnowflakeが解決する課題は何か
Snowflakeへの期待は前回解説した通りだが、実際にどんな場面でどう使えるのか、Snowflakeだけでは解決できない問題にはどんなものがあるかを整理してみていきます。自社プロジェクトのどこに適用できそうかをイメージしながら読んでみてください。（2021/10/13）

AWS、「Amazon QuickSight Q」正式リリース　自然言語でデータベースに問い合わせ可能に
Amazon Web Servicesは、インメモリBIツールの「Amazon QuickSight」の新機能として、自然言語で問い合わせができる「Amazon QuickSight Q」を正式リリースしたと発表した。（2021/9/27）

SQL Server動的管理ビューレファレンス（44）：
PolyBaseのノード状態やパフォーマンスに関する情報を出力する
「Microsoft SQL Server」が稼働するデータベースシステムを運用する管理者に向け、「動的管理ビュー」の活用を軸にしたトラブル対策のためのノウハウを紹介していきます。今回は、PolyBaseのノード状態やパフォーマンスに関する情報の出力について解説します。（2021/9/21）

「DXのためのデータ活用」を成功させる4カ条【後編】
DXのためのデータ活用を成功させるには「データ活用」だけ考えていてはいけない
クラウドサービスをはじめとするITは、DXのためのデータ活用を支える大事な要素だ。とはいえITを導入すればデータ活用が必ずうまくいくわけではない。ではどうすればよいのか。（2021/9/14）

「DXのためのデータ活用」を成功させる4カ条【中編】
自動化技術が期待外れだった企業こそ「プロセスマイニング」を試すべき理由
デジタルトランスフォーメーションに向けて自動化技術の導入を検討するのは一つの戦略だ。だが古い業務プロセスを自動化するだけでは効率化にはつながらない。効率が落ちた業務プロセスを見つけるには。（2021/9/7）

自社の「HPC」構築に必要な視点【中編】
「ハイパフォーマンスコンピューティング」（HPC）の利用可否を考える3つの要件
HPCが自社に適しているかどうかを判断するには、どのような要件を検討すればいいのだろうか。ハードウェア、ソフトウェア、施設の3つの視点で考える。（2021/9/2）

「DXのためのデータ活用」を成功させる4カ条【前編】
データドリブン企業になるための「データ活用」の秘策　まずやるべきことは？
データを経営に活用したくても、膨大なデータを前に「何から着手すべきか」を悩んでいる企業は珍しくない。データの整理に時間を奪われないための秘策は。（2021/8/30）

自社の「HPC」構築に必要な視点【前編】
「ハイパフォーマンスコンピューティング」（HPC）の理解に欠かせない分散処理の基本
複雑な計算処理や膨大なデータの活用手段に「ハイパフォーマンスコンピューティング」（HPC）がある。HPCが必要かどうかを判断するに当たって、まずはクラスタなどHPCの基本を知ることが欠かせない。（2021/8/26）

第一三共はデータ活用とデータガバナンスをどう実装？　製薬固有の課題とクラウド活用
大手製薬会社の第一三共は主力事業の大転換をきっかけに、データ分析基盤構築を本格化した。将来的にはデータの民主化も想定する。治験データなど配慮が求められるデータを多く扱う製薬会社のクラウド活用はどうなっているか。（2021/6/11）

機敏で使いやすくコスト効率の良いプラットフォームとは：
PR：拝見、隣の“すご腕”データ活用――先進企業はどうしているのかを語り合った
データをビジネスに活用する機運が高まっているが、データ分析の実現にはさまざまな課題と向き合う必要がある。これらを解決し、データの活用を推進するためには何から始めればいいのだろうか。複数の観点から語り合った。（2021/5/18）

データレイク構築のススメ【後編】
データレイク、オンプレ運用か？　クラウド利用か？
データレイクの構築を決断したとして、オンプレミスで運用するのが適切なのか。クラウドを利用すべきなのか。各社の製品とサービスを紹介する。（2021/4/14）

非データサイエンティスト向け機能を強化　オラクルのデータウェアハウス製品がアップデート
オラクルは、クラウド型データウェアハウス「Oracle Autonomous Data Warehouse」の機能を拡充した。企業のデータ解析に向けて、データウェアハウスやデータレイクなどのさまざまなデータソースからデータを取り込み、変換し、保管し、管理するための単一のデータプラットフォームを提供する。（2021/3/19）

TechTarget発　世界のITニュース
Next Pathway、オンプレミスDWHのクラウド移行を支援する「Crawler360」を発表
Next Pathwayは新たなツール「Crawler360」を発表した。「Netezza」「Teradata」などのオンプレミスのDWHやデータレイクからクラウドサービスへ移行する際の影響やコストなどを把握しやすくする。（2020/12/17）

TechTarget発　世界のITニュース
データレイクでSQLクエリを直接実行できる「SQL Analytics」　Databricksが発表
Databricksは、データレイクでSQLクエリを直接実行できるサービス「SQL Analytics」を発表した。データウェアハウスとデータレイクの特徴を兼ね備えた「レイクハウス」具現化の一環だ。（2020/12/4）

デル・テクノロジーズ株式会社提供ホワイトペーパー：
安全なデータレイクを簡単構築、ハイブリッドクラウド時代に最適なデータ基盤
ハイブリッド環境でセルフサービス型分析の需要が高まる中、データ基盤には高い要件が課せられている。そこで注目されるのが、データカタログやスキーマの統合でデータの扱いを簡素化し、安全なデータレイクを構築できるソリューションだ。（2020/12/4）

イレージャーコーディングの正しい使い方【後編】：
イレージャーコーディングの限界
多くのメリットがあるイレージャーコーディングだが、あらゆる課題を解決できるわけではない。イレージャーコーディングの適用が不適切なケースを紹介する。（2020/12/2）

「Red Hat OpenShift Service on AWS」発表　AWS上でのフルマネージドサービス　AWSとRed Hatが手を組む理由とは？
AWSとRed Hatが「Red Hat OpenShift Service on AWS」を発表。クラウドネイティブ基盤ソフトウェア「Red Hat OpenShift」を、AWS上でフルマネージドサービスとして提供する。両社はなぜ手を組むのか。（2020/11/19）

新体制でスタート：
トレジャーデータの4つの新戦略　「D2C」や「脱Cookie」でCDPに期待されることとは？
新生トレジャーデータの新戦略キーワードは「APAC」「人材育成」「エコシステム」「カスタマーサクセス」の4つ。（2020/11/9）

いまさら聞けないOSSの基礎知識（3）：
「自社の成果物をOSSとして公開しよう」――何に気を付けるべき？
自社の成果物をOSSとして公開する場合、どのようなことに気を付けなければいけないでしょうか？　OSS利用の変遷を振り返りつつ解説します。（2020/11/5）

PR：データから新たな価値を創造　スピードと柔軟性を併せ持つ、Microsoftのデータ活用プラットフォーム「Azure Synapse Analytics」の実力とは
（2020/10/19）