※2016年10月1日より、サービス名称が「Yahoo!ビッグデータインサイト」から「トレジャーデータサービス by IDCF」に変更となっております。
今回ご紹介することの概要とアウトプットのイメージは以下となります。 Yahoo!ビッグデータインサイト（以下「YBI」）へのデータアップロードからYBIでの集計、MariaDBへResultExportしてその結果をPentahoで閲覧する方法までをご紹介します！
IDCフロンティアのネットワークサービス(LB/WAF)を使った事例紹介
※WAFサービスの新規受付は終了いたしました(2018年3月時点)
今回はIDCフロンティアのネットワークサービス（以下「IDCFネットワークサービス」）を使用した事例紹介をさせていただきます。
IDCFネットワークサービスとは？
IDCFネットワークサービスについて簡単に説明しますと、ファイアウォール(以下「FW」)/ロードバランサー(以下「LB」)/ウェブアプリケーションファイアウォール(以下「WAF」)の機能を選択して使用できるサービスです。その他にDDoS対策、IPS/IDSの機能も選択可能ですが、今回はFW/LB/WAFを中心にご紹介します。
続きを読むデータ分析プラットフォーム(YBI)のよくある質問 - バルクインポート時の負荷
※2016年10月1日より、サービス名称が「Yahoo!ビッグデータインサイト」から「トレジャーデータサービス by IDCF」に変更となっております。
「Yahoo!ビッグデータインサイト」は、一言でいうとビッグデータ分析のためのクラウドサービスです。 そのサービス名がちょっと長いので、社内外で「YBI」と略称で呼んでます。(最初の訪問でYBIと呼び始めると、お客さまも「YBI」と呼んでくれるのがうれしくなるw) YBIでは分析のための環境を一通り用意しており、「生のデータ」を用意して、データをインポートし、あとはお好きなように分析！ というように明快なステップでビッグデータ分析を始める事ができます。
オープンデータ活用の課題に挑むチーム「AERIAL」
「エンジニアもすなるエンジニアブログというものを、非エンジニアもしてみむとてするなり」。こんにちは。サービスディベロップメントグループの渡邉です。非エンジニアです。読みにくい部分もあるかと思いますが、ご容赦ください。
さて、世の中、オープンデータ、オープンデータと騒がれて久しいですが、いざ何かしようとすると、「どこに何のデータが公開されているのかわからない」、「公開されいている形式がバラバラ」、「データが加工しにくい（罫線つきのExcelとか、PDFとか（！））」、など様々な壁が立ちはだかります。
先日、4/11(土),12(日)の2日間、北野武のCMでもおなじみ（！？）DMM.make AKIBAで、「International Space Apps Challenge（以下「ISAC」） Tokyo 2015」が行われました。このハッカソンは、NASAやJAXAが公開しているデータを活用しようというもの。早くも今年で4年目になるそうです。
今回のエンジニアブログでは、ISACでIDCFクラウドを活用し、JAXAのオープンデータを一般のウェブ開発者でも使えるように、JSON形式に変換したものをAPI経由で提供したり、ドキュメントの整備を行っている、チーム「AERIAL」の活動をご紹介します。
続きを読む不正ログインを防ぐ2段階認証をいますぐ設定しよう（画面つき）
今回はIDCFクラウドの2段階認証機能について、画面とともに紹介したいと思います。 想像してみてください。アカウントが不正利用されて、知らないうちに、月額179,000円のリッチな仮想マシンが20台起動していたら…？ 「今すぐに2段階認証を使いたい！」という人は、[よくあるご質問]のこちらを参考に、設定してみてください。
それでは始めましょう。
続きを読む巨大データセンターの電源管理
はじめまして。ファシリティエンジニアリング部の小林です。 私たちの部署では、データセンターの設計からラック間のLANケーブル1本の敷設工事まで、データセンターファシリティの管理を担当しています。
IDCフロンティアでは、首都圏、大阪、白河、北九州に合わせて9拠点のデータセンターを提供していますが、私の所属するチームでは、それら9拠点すべてのハウジング案件、主にラック周りの電源や通信線の敷設工事管理を担当しています。今回は、「巨大データセンターの電源管理」と題しまして、ラック内のサーバーやネットワーク機器の電源をどのように管理しているのかご紹介したいと思います。1部屋あたり約300ラックを連ねるデータセンターの電源管理には、家庭用と違ったノウハウがあるんです。
※白河データセンターの場合
■データセンター内の電気の流れ
管理方法をご紹介する前に、まずはデータセンター内ではどのような経路を経てラック内の機器に電気が供給されているのかご紹介します。一例として下記の図をご覧ください。
データセンターの特徴は、UPSと発電機を備えているということです。
UPSの正式名称はUninterruptible Power Supplyと呼ばれるもので、日本語では無停電電源装置と呼ばれる設備です。UPSの中にはたくさんのバッテリーが搭載されており、万が一停電が発生した際にはこのUPSに電源の供給元が切り替わり、一瞬たりとも途切れることなくラック内へ電気が供給されます。
しかしこのUPSはバッテリーであるが故、長時間の停電には耐えられません。
そこで登場するのが発電機です。 停電が発生するとまずはUPSから電気が供給され、同時に発電機が起動します。 発電機の起動が完了すると、自動的にUPSから発電機へ電気の供給元が切り替わり、長時間の停電でも電気を落とすことなく供給することができるのです。
さらに変電所からの受電系統を複数引くことで、送電系統のトラブルによる停電に備えているセンターもあります。
しかし、停電が起こらなくてもラック内への電気の供給が止まってしまうことがあります。
それはブレーカーが落ちてしまった時です。
■電源回路の管理
では、ここからは本題のハウジングにおける電源管理をご紹介します。
「電子レンジと電気ポットとエアコンを同時に使ったらブレーカーが落ちてしまった！」 みなさんもこのような経験が一度はあるのではないでしょうか。
データセンターも同じく、ラック内で電気を使いすぎてしまうとラックのコンセントに繋がれたブレーカーが落ちてしまい、電源供給がストップしてしまいます。
さて、一般家庭であれば10個前後、多くても20個程度のブレーカーで家の中の電源が管理されていますが、サーバーラックがたくさん並ぶデータセンターの場合はどうでしょうか。
白河データセンターの場合、サーバールーム1部屋に約300ラック立架することができます。それら各ラックに電源を供給するために設置されているブレーカーはなんと！1000個以上にもなります。
これはサーバールーム内にある分電盤と呼ばれる設備です。
中を開けるとご覧のようにブレーカーがたくさん収納されています。 このブレーカー一つ一つがラック内に設置されたコンセントに繋がっています。
これらブレーカー一つ一つに対して、どのくらいの電気を使用しているのか定期的に調べることで、電気を使い過ぎているラックを特定し、ブレーカーが落ちてしまうことを未然に防いでいます。
ブレーカーごとにどのくらいの電気を使用しているのか調べるときには、この「クランプメーター」と呼ばれる測定器を使用します。
ブレーカーに繋がれている配線をクランプメーターで挟み込むことで、どのくらいの電気が使用されているのか(電流値)を調べることが出来ます。
私たちはこのクランプメーターを使用して、定期的に分電盤のすべてのブレーカーの測定を行っています。
電流値が高いラックがあった場合にはお客さまへのご報告や電力供給の最適化を、また、北九州や白河のデータセンターでは、各ブレーカーの電流値をリアルタイムで計測できるシステムを導入しています。
また、北九州や白河のデータセンターでは、各ブレーカーの電流値をリアルタイムで計測できるシステムを導入しています。
これにより、複数のブレーカーの計測が一度にできるほか、サーバの負荷上昇による瞬間的な電流値上昇も即座に発見することが可能になっています。
■まとめ
このようにラックへの安定した電源供給のために私たちは日々、電気設備の管理をしています。 今回ご紹介した電源回路の管理は、一つ一つのブレーカーを手で計測するという地味な作業ではありますが、ラックへの電源供給を止めない為には必要不可欠な作業です。
これからも普段は見ることのできない、ハウジング管理の裏側をご紹介していきたいと思いますので、ご期待ください！
＜関連記事＞
結構使える！データセンターで活躍するカメラサーバー
シュールルルル・・・。静寂の中、遠くから聞こえてくる機械音。 ここは当社の北九州データセンターの廊下。 24時間休みなく稼働するデータセンターの広大な敷地を、ロボット掃除機が休みなく動き続けています。
Copyright © IDC Frontier Inc.
