はてブログ

はてなブックマーク新着エントリーの過去ログサイトです。



タグ データ処理

新着順 人気順 5 users 10 users 50 users 100 users 500 users 1000 users
 
(1 - 18 / 18件)
 

「長年のサポートに感謝」県庁の電子計算機運用終了の催し|NHK 愛媛のニュース

2024/02/21 このエントリーをはてなブックマークに追加 101 users Instapaper Pocket Tweet Facebook Share Evernote Clip 県庁 演算装置 愛媛県庁 愛媛 税金

愛媛県庁でおよそ50年にわたって税金の計算や会計業務などに使われてきた大型の演算装置、電子計算機の運用が20日で終了となり県庁で催しが行われました。 愛媛県庁の機械室に設置されている電子計算機は、縦およそ1メートル80センチ、横およそ60センチで、複雑なデータ処理を高速で行うことができ、昭和48年... 続きを読む

ユニバーサル アナリティクスのサポートは終了します - アナリティクス ヘルプ

2022/03/16 このエントリーをはてなブックマークに追加 212 users Instapaper Pocket Tweet Facebook Share Evernote Clip アナリティクス プロパティ ヘルプ サポート 最終更新日

この記事では、2023 年 7 月 1 日(アナリティクス 360 プロパティの場合は 2023 年 10 月 1 日)をもってデータ処理が停止されるユニバーサル アナリティクス プロパティについて説明します。まだ使用していない場合は、Google アナリティクス 4 プロパティの使用を開始してください。 (最終更新日: 2022 年 3 月 16 ... 続きを読む

今すでに2人の研修中の新卒を受け持ってるんだけど差が酷い。 1人は商業高..

2020/03/18 このエントリーをはてなブックマークに追加 256 users Instapaper Pocket Tweet Facebook Share Evernote Clip 新卒 商業 word 研修中 ワード

今すでに2人の研修中の新卒を受け持ってるんだけど差が酷い。 1人は商業高校出身で入力速度もデータ処理も早いし 機能を理解しているから説明すれば気持ちいくらいすぐにできるようになる 対してもう1人 今までOffice自体をほとんど使ったことがないらしく、 「Wordを開いて」という指示さえ通じなかった。 「わーどって... 続きを読む

Pandasで行うデータ処理を100倍高速にするOut-of-CoreフレームワークVaex - フリーランチ食べたい

2019/04/13 このエントリーをはてなブックマークに追加 243 users Instapaper Pocket Tweet Facebook Share Evernote Clip pandas Panda tl;dr メソッド マルチコア

TL;DR アウトオブコア、かつマルチコアでデータ処理を行えるVaexの紹介です。 string関係のメソッドで平均して100倍以上の高速化が確認できました。(作者のベンチマークだと最大1000倍) 文字列処理以外でも数倍~数十倍の高速化が行えそうです。 この記事では性能の比較のみ行い、解説記事は別で書こうと思います。 panda... 続きを読む

東京新聞:裁量労働データ「時間取れず ずさんな調査に」 担当監督官が証言:政治(TOKYO Web)

2018/02/25 このエントリーをはてなブックマークに追加 278 users Instapaper Pocket Tweet Facebook Share Evernote Clip 証言 政治 内規 調査 TOKYO Web

裁量労働制に関する厚生労働省調査に不適切なデータ処理があった問題で、調査に当たった労働基準監督官の男性が二十四日までの共同通信の取材に「一社当たりの調査時間を約一時間半とする内規に従ったが、(私の場合)十分な時間が取れなかった。結果的に調査がずさんになってしまった」と証言した。 この調査を巡っては、これまで不自然な数値が二百件以上見つかっているが、実際に担当した監督官が調査手法の不備を証言するのは... 続きを読む

暗号通貨ブームの裏側で顕在化してきた、その基盤技術の「構造的な問題」|WIRED.jp

2018/01/21 このエントリーをはてなブックマークに追加 307 users Instapaper Pocket Tweet Facebook Share Evernote Clip 顕在化 WIRED.jp 基盤技術 裏側 問題

SHARE INSIGHT 2018.01.22 MON 08:00 暗号通貨ブームの裏側で顕在化してきた、その基盤技術の「構造的な問題」 ビットコインの価格は1月に入って暴落したとはいえ、まだ高い水準にある。そんななか、暗号通貨にまつわるデータ処理の遅さやそれに伴う売買手数料の高止まりなどの問題が改めて浮き彫りになっている。こうした基盤技術の構造的な問題は、いかに解決されていくものなのか。 TE... 続きを読む

Pythonで大量データ処理! PySparkを用いたデータ処理と分析のきほん // Speaker Deck

2017/09/08 このエントリーをはてなブックマークに追加 367 users Instapaper Pocket Tweet Facebook Share Evernote Clip PySpark キホン Python 分析 大量データ処理

All slide content and descriptions are owned by their creators. 続きを読む

Pandasによる実践データ分析入門 - Gunosyデータ分析ブログ

2017/05/11 このエントリーをはてなブックマークに追加 177 users Instapaper Pocket Tweet Facebook Share Evernote Clip pandas Python 米津玄師 テクニック データ集計

2017 - 05 - 11 Pandasによる実践データ分析入門 Python 時系列分析 Pandas こんにちは。データ分析部のオギワラです。最近は「NANIMONO (feat.米津玄師)」をよく聞いています。 今回はPythonのデータ分析ライブラリであるPandasについて、実践的なテクニックを「データ処理」「データ集計(Group By)」「時系列処理」の3カテゴリに分けてご紹介して... 続きを読む

AWSの無料枠についてまとめた - 食べられません

2016/05/21 このエントリーをはてなブックマークに追加 260 users Instapaper Pocket Tweet Facebook Share Evernote Clip AWS ごっちゃ 無料枠 毎月 12ヶ月間

2015 - 04 - 07 AWSの無料枠についてまとめた AWS 登録から12ヶ月間無料で使える枠と、その後も引き続き無料で使える枠がゴッチャになるのでまとめた 新規利用から12ヶ月間(毎月)無料の枠 EC2 t2.micro Linux 750時間 ELB 750時間 + 15GB分のデータ処理 EBS 30GB + 1GB分のスナップショットストレージ S3 5GBの標準ストレージ 20,... 続きを読む

初心者でもほぼ無料でR言語を勉強できるコンテンツ10選 - paiza開発日誌

2015/06/04 このエントリーをはてなブックマークに追加 767 users Instapaper Pocket Tweet Facebook Share Evernote Clip paiza開発日誌 R言語 谷口 プログラミング言語 初心者

2015-06-04 初心者でもほぼ無料でR言語を勉強できるコンテンツ10選 Photo by Alejandro Hurtadoこんにちは。谷口がお送りします。ITエンジニアの方の中には「R言語を学習したい」という方も多くいらっしゃるかと思います。R言語は、データ分析やデータ処理に特化したオープンソースのプログラミング言語です。システムを開発をする他のプログラムミング言語とは位置付けが異なり、統... 続きを読む

スタートアップのデータ処理・分析基盤、作るか、使うか | ツチノコブログ

2015/02/23 このエントリーをはてなブックマークに追加 318 users Instapaper Pocket Tweet Facebook Share Evernote Clip ツチノコブログ スタートアップ

初めまして、tagomorisといいます。今回縁あってゲストでエントリを書くことになりました。実に感慨深い気分です。 さて本題ですが、DMM.comを含めた多くのWebサービス・インターネットサービスでは、今やデータの収集・処理・分析といったタスクが非常に重要なものになっていることは多くの方に賛同をいただけるもの初めまして、tagomorisといいます。今回縁あってゲストでエントリを書くことになり... 続きを読む

統計屋のためのAWK入門 - あんちべ!

2014/09/15 このエントリーをはてなブックマークに追加 639 users Instapaper Pocket Tweet Facebook Share Evernote Clip アンチ awk FAIL 本稿 抽出

2014-09-15 統計屋のためのAWK入門 はじめに 本稿はAWKという言語を用いて、 ごく簡単にデータ分析用の前処理*1をするための解説記事です。AWKは短いコマンドを記述するだけで多様なデータ処理を可能にします。 特にデータの抽出に関して恐るべき簡易さを提供します。 具体的には、input.txtというファイルの中から "fail"という文字列を含む行を抽出したければ次のように書くだけです... 続きを読む

SSDのせいで現代の犯罪捜査が極めて困難になっている状況が判明、その原因をSSDの仕組みから解説 - GIGAZINE

2014/06/20 このエントリーをはてなブックマークに追加 518 users Instapaper Pocket Tweet Facebook Share Evernote Clip GIGAZINE ソリッドステートドライブ SSD Nam

By Jung-nam Nam 高速なデータ処理が可能なソリッドステートドライブ(SSD)の高性能化・低価格化・大容量化の勢いはとどまるところを知らず、2014年度中にもIntelは2TBの高速SSDをリリースする予定です。身近なストレージとして普及しつつあるSSDですが、犯罪捜査におけるデータ解析を困難にさせる存在であると指摘されています。 Belkasoft: Digital Evidence... 続きを読む

C#/Scala/Python/Ruby/F#でデータ処理はどう違うのか? - @IT

2011/07/22 このエントリーをはてなブックマークに追加 374 users Instapaper Pocket Tweet Facebook Share Evernote Clip Scala 岩永 Ruby Python プログラミング言語

特集:人気言語でのデータ処理の比較 C#/Scala/Python/Ruby/F#でデータ処理はどう違うのか? 岩永 信之 2011/07/22 ■概要 以前、C#でのデータ処理について解説した。今回は、同様のデータ処理を、C#以外のプログラミング言語ではどうしているのか、(C#も含めて)以下の5つの言語を比較しながら説明していく。 C# Scala Python Ruby F# 結果としてできる... 続きを読む

FacebookがHBaseを大規模リアルタイム処理に利用している理由(後編) - Publickey

2011/07/04 このエントリーをはてなブックマークに追加 130 users Instapaper Pocket Tweet Facebook Share Evernote Clip Facebook Publickey HBase 後編 基盤

Facebookは大規模なデータ処理の基盤としてHBaseを利用しています。なぜFacebookはHBaseを用いているのか、どのように利用しているのでしょうか? 7月1日に都内で行われた勉強会で、Facebookのソフトウェアエンジニアであるジョナサン・グレイ(Jonathan Gray)氏による解説が行われました。 この記事は、「FacebookがHBaseを大規模リアルタイム処理に利用してい... 続きを読む

FacebookがHBaseを大規模リアルタイム処理に利用している理由(前編) - Publickey

2011/07/04 このエントリーをはてなブックマークに追加 304 users Instapaper Pocket Tweet Facebook Share Evernote Clip Facebook Publickey HBase スライド

Facebookは大規模なデータ処理の基盤としてHBaseを利用しています。なぜFacebookはHBaseを用いているのか、どのように利用しているのでしょうか? 7月1日に都内で行われた勉強会で、Facebookのソフトウェアエンジニアであるジョナサン・グレイ(Jonathan Gray)氏による解説が行われました。 解説はほぼスライドの内容そのままでした。当日使われた日本語訳されたスライドが公... 続きを読む

クックパッドのデータ処理、たった5万円:日経ビジネスオンライン

2010/04/19 このエントリーをはてなブックマークに追加 179 users Instapaper Pocket Tweet Facebook Share Evernote Clip クックパッド 包丁 地位 月間ページビュー数 ウェブサイト

月間ユニークユーザー数、884万人、月間ページビュー数、4億6000万(2010年3月)を誇る国内ナンバーワンの料理レシピの投稿・検索サイト「クックパッド」。 日常的に料理をする人はもちろんのこと、たまにしか包丁を握らない人でもクックパッドのウェブサイトを一度は訪れたことがあるのではないか。 2ちゃんねるやTwitterを凌駕する それくらい、クックパッドはレシピの投稿・検索サイトとして不動の地位... 続きを読む

クックパッドのデータ処理、たった5万円:日経ビジネスオンライン

2010/04/19 このエントリーをはてなブックマークに追加 522 users Instapaper Pocket Tweet Facebook Share Evernote Clip クックパッド 包丁 地位 月間ページビュー数 ウェブサイト

月間ユニークユーザー数、884万人、月間ページビュー数、4億6000万(2010年3月)を誇る国内ナンバーワンの料理レシピの投稿・検索サイト「クックパッド」。 日常的に料理をする人はもちろんのこと、たまにしか包丁を握らない人でもクックパッドのウェブサイトを一度は訪れたことがあるのではないか。 2ちゃんねるやTwitterを凌駕する それくらい、クックパッドはレシピの投稿・検索サイトとして不動の地位... 続きを読む

 
(1 - 18 / 18件)