タグ EMR
人気順 10 users 50 users 100 users 500 users 1000 users「電車内のあの人は今、何聞いてるのかなぁ……」――イヤフォンで聞いている音を1m先から盗聴する攻撃
「Periscope」と呼ばれるこの攻撃は、イヤフォン/ヘッドフォンを接続したモバイルが放出する電磁放射(EMR)を利用してユーザーのプライベートな音声を復元する。ここでは、物理的な配線を通じてオーディオ信号を伝送するため、無線ヘッドフォンよりも盗聴攻撃に対して堅牢であると考えられる、有線ヘッドフォンを対象... 続きを読む
AWSサービスのServerlessオプションの特徴・比較・まとめ・プロビジョニングとの違い -Aurora、Neptune、EMR、Redshift、MSK、SageMaker Inference- - NRIネットコムBlog
小西秀和です。 今回は「AWSサービスのServerlessオプション、オンデマンドモードの特徴・比較・まとめ・プロビジョニングとの違い」の記事の一部としてAWSサービスの一部でクラスターやインスタンスのプロビジョニングに対して用意されているServerlessオプションについて、主なAWSサービスごとに特徴、設定項目、料金... 続きを読む
AWSサービスのServerlessオプション、オンデマンドモードの特徴・比較・まとめ・プロビジョニングとの違い -Serverless(Aurora、Neptune、EMR、Redshift、MSK、SageMaker Inference)、オンデマンドモード(Dynam
小西秀和です。 従来ではプロビジョニングによる時間課金や容量課金が前提だったAWSサービスに近年相次いで機能追加が見受けられるServerlessオプション、オンデマンドモードについて特徴と比較のまとめをしたいと思います。 今回の記事の内容は次のような構成になっています。 プロビジョニングと比較したServerlessオ... 続きを読む
Google、Fitbitを約21億ドルで買収 - ITmedia NEWS
両社は昨年5月、FitbitがGoogleのヘルスケア関連API「Cloud Healthcare API」を同社のウェアラブル端末で採用し、ユーザーデータと電子カルテ(EMR)の連携などを実現することで提携した。 Googleのハードウェア担当上級副社長リック・オステルロー氏は公式ブログで「Wear OSにさらに投資し、Made by Googleウェアラブル... 続きを読む
Amazon Elastic MapReduce (EMR) ではじめる Presto 入門 - あらびき日記
Presto は日本語の入門書がなく、「Presto を運用することになったけど何から勉強すれば良いかわからない><」という人も多いのではないかと思います。そこで、Presto を運用する時にこの辺の内容を知っていれば、よりスムーズにキャッチアップできたかなぁと思うことをまとめてみました。 Hive connector を使いたいの... 続きを読む
Railsのフロントエンドのトレンドと実際〜事業を進めながら、レールに乗り続けるためのテクニック〜
Railsのフロントエンドのトレンドと実際〜事業を進めながら、レールに乗り続けるためのテクニック〜 1. Rails 2018/11/06 Hiroaki Ninomiya Ruby on Rails 2. • Hiroaki Ninomiya (@treby006) • Vue.js, AWS(ECS, EMR), Go • Repro • 3. ( ) • (2013 ) (PHP) • 2015 (Rails) • 2016 (Rails, Django) • 2017 Repro (Rails... 続きを読む
AWS CLIを利用してS3上のファイルをgrepする | Developers.IO
先日Hadoop Streamingを利用してS3上のファイル群にgrepコマンドを実行する方法を紹介しました。 grepコマンドをHadoop Streaming上で実行する とはいえ、ファイル数が少ない場合や時間が掛かってもいいからEMRを利用せずにローカルPC上でgrepコマンドを実行したいこともありますよね。ということで、今回用意したのがAWS CLIを利用してS3上のファイル群をローカル... 続きを読む
Amazon Web Services ブログ: Apache Spark on Amazon EMR
spark Amazon EMR上でApache Sparkがサポートされました!そのことについてEMRのプロダクトマネージャのJoh Fritzのブログを書いていますので、これを翻訳してみます。 今井 -- 本日、Amazon EMRはApache Sparkをサポートしたことを発表いたします。Amazon EMRはHiveやPig、HBase、Presto、ImpalaなどのHadoopエコシ... 続きを読む
Python + Hive on AWS EMR で貧者のログサマリ
Python + Hive on AWS EMR で貧者のログサマリ Presentation Transcript 1 Python + AWS EMR 貧者のログ集計 PyCon JP 2014, 09/14 Akira Chiku achiku(29) 2 Name: Akira Chiku Twitter: @_achiku GitHub: @achiku 趣味:炎舞(Akira Chik... 続きを読む
EMR上でMahoutを使ってレコメンデーション | Developers.IO
7月にAWS Big Data Blogというブログが始まったのですが、最初の記事がBuilding a Recommender with Apache Mahout on Amazon Elastic MapReduce (EMR)というタイトルでEMR上でMahoutを使ってレコメンデーションを行ってみるというものでした。EMR上でMahoutというと既にAmazon Elastic MapR... 続きを読む
新しく技術・知識を身に付けるためのやりかた - nigoblog
2014-04-30 新しく技術・知識を身に付けるためのやりかた 最近スキルの幅が広がったかなと思います。理由としては ビジネスで要件がでる。 -> とある技術を使わなければいけない。 -> その技術を理解する&使う。こういうフローが経営に近くなるほど起こりやすいのでスキルの幅がかなり広がっています。最近で身に付けた技術は fluentd Hadoop (EMR) Hive Bandit Algo... 続きを読む
Cloudera Impalaのアーキテクチャ | Tech Blog
Cloudera Impalaは一から開発されたHadoop上の分散クエリエンジンです。英語の資料はそれなりに公開されていますが、日本語の情報が少ないのでまとめてみました一人アドベントカレンダー25日目、最終日です。 最終日はCloudera Impala(以下Impala)について。Impalaは分散クエリエンジンです。最近EMRでも利用できるようになりました。 Hiveとは何が違うのか、なぜH... 続きを読む
はじめてのEMR/fluentdでS3にアップロードしたログをElastic MapReduceで検索・集計する | Developers.IO
今回解決したい課題 こんにちは植木和樹です。本日の課題はタイトルの通り「fluentdでS3のバケットにアップロードしたログを検索・集計する」です。EC2でサーバを構築した場合、インスタンスがTerminateした後もログが参照できるようfluentdを使ってS3にファイルをアップロードしておくのがAWSのベストプラクティスです。 「Amazon Recommends Fluentd as “Be... 続きを読む
ビックデータ可視化BIソフトTableau x AWS(Redshift & EMR)勉強会 - クラスメソッド株式会社 | Doorkeeper
この勉強会の概要 一昨年前からビッグデータという言葉が注目されており、テレビなど一般層むけのメディアでも頻繁に紹介されています。しかし、実際のところデータ分析をどう行えば良いのか? それにはどういう製品が必要なのか? その製品は高価ではないのか? などの疑問や課題をお持ちの方も多いのではないでしょうか。 それらの疑問や課題の解決に Tableau と AWS(Redshift & EMR)はいかが... 続きを読む
Amazon EMR セミナーの記録 - 急がば回れ、選ぶなら近道
Amazon EMR セミナーに行ってきたので、個人的にまとめておく http://kokucheese.com/event/index/34636/ 日時: 2012/5/18 14:00 – 17:00 会場: アマゾン目黒オフィス 東京都目黒区下目黒1-8-1アルコタワーアネックス16F メインスピーカーは、EMRのSenior Product Manager の Adam Gray氏 場所... 続きを読む
【AWS発表】 さらに値下げを発表、今回はEC2、RDS、EMR、ElastiCacheも - Amazon Web Services ブログ
AWSは運用コスト削減に常に努力しており、その節約分をお客様に値下げとして還元をおこなってきました。AWSにおいては、常に、ハードウェアのコスト削減、運用効率の向上、電気使用量の削減、ビジネス上のイノベーションを模索し、より効率化できるようにしています。実際に、過去6年間で、18回の値下げを行っており、今回の発表は、19回目の値下げを飾ることになりました!今回は、皆様からのご要望も多かった、Ama... 続きを読む