INFORMATION_SCHEMAを用いたBigQueryのストレージ無駄遣い調査 - ZOZO TECH BLOG

2021/11/24 9 users BigQuery ストレージコスト ZOZO 創刊 削減

こんにちは、『地球の歩き方ムー』創刊のニュースに心を踊らせている、データ基盤ブロックの塩崎です。 本記事では、データ基盤の管理者としてBigQueryのストレージコストの削減に取り組んだ事例を紹介します。 BigQuery費用はクエリ費用だけではない ZOZOのデータ基盤として利用されているBigQueryは、非常にパワフルな... 続きを読む

GCPの秩序を取り戻すための試み 〜新米GCP管理者の奮闘記〜 - ZOZO Technologies TECH BLOG

2021/09/07 43 users GCP owner ZOZOテクノロジーズ 秩序 今期

こんにちは。SRE部データ基盤チームの塩崎です。ZOZOテクノロジーズではGCPの管理を各プロジェクトのOwnerに任せていた時期が長く続いていましたが、今期から全社的なGCP管理者を立てることになりました。本記事では新米GCP管理者である僕が全社的なGCPの管理をする上で遭遇した事例を紹介します。時には泥臭い方法で、... 続きを読む

コンピュートとストレージの分離から紐解くBigQueryの権限モデル - ZOZO Technologies TECH BLOG

2021/09/02 9 users BigQuery コンピュート DWH ストレージ 分離

こんにちは。SRE部DATA-SREチームの塩崎です。Software Design誌の2021年9月号に弊社でのBigQuery活用事例を寄稿しましたので、書店などで見かけた際は購入していただけますと嬉しいです。 gihyo.jp さて、BigQueryはコンピュートとストレージを分離することで高いスケーラビリティを達成しているData WareHouse(DWH)で... 続きを読む

Amazon AuroraのデータをリアルタイムにGoogle BigQueryに連携してみた / Realtime data linkage from Amazon Aurora to Google BigQuery - Speaker Deck

2021/01/28 20 users Speaker Deck リアルタイム BigQuery

Transcript Amazon AuroraのデータをリアルタイムにGoogle BigQueryに連携してみた
 株式会社ZOZOテクノロジーズ
 SRE部
 塩崎 健弘 Copyright © ZOZO Technologies, Inc. © ZOZO Technologies, Inc. 株式会社ZOZOテクノロジーズ
 SRE部
 塩崎 健弘
 2年前にRedshiftをBigQueryにマイグレーションしたことが きっかけで... 続きを読む

Google Cloud Next '19で発表された新機能を紹介します！　(Cloud Run, BigQuery Storage API, Cloud Data Fusion) - ZOZO Technologies TECH BLOG

2019/04/12 189 users API Cloud Run ニシキアナゴ チンアナゴ 別種

こんにちは！ App EngineのスタンダードランタイムにRubyが追加されて喜んでいるバックエンドエンジニアのりほやん（高木）と、オレンジ色のチンアナゴは実はニシキアナゴという別種だったことに驚きを禁じ得ない塩ちゃん（塩崎）です。 4/9, 10, 11の期間で開催されたGoogle Cloud Next '19にZOZOテクノロジーズから高... 続きを読む

DigdagをHA構成にしてみた - Start Today Technologies TECH BLOG

2018/06/25 61 users Digdag ワークフローエンジン ha構成 Tips 続編

こんにちは、最近のマイブームはマヌルネコ動画な新事業創造部バックエンドエンジニアの塩崎です。 今回のテックブログでは、以前にDigdagを紹介した記事の続編として、DigdagをHA構成にするためのTipsなどを紹介します。 Digdagとは Digdagはワークフローエンジンと呼ばれるソフトウェアです。 複数個のタスク間の依存... 続きを読む

検索システムだって高可用性にしたい！SolrCloudを用いた高可用性構成の紹介 - VASILY DEVELOPERS BLOG

2018/01/23 20 users RubyKaigi matzさん 相撲 Blog 他人

2018 - 01 - 23 検索システムだって高可用性にしたい！SolrCloudを用いた高可用性構成の紹介 Solr こんにちは、バックエンドエンジニアの塩崎です。 最近のTECH BLOGではMatzさんのインタビュー記事を書いたり、RubyKaigiの発表まとめを書いたりして、他人の褌で相撲を取っていました。 今回は心を入れ替えて（？）、自分自身が取り組んだ内容について書きます。 VASI... 続きを読む

RubyKaigi2017参加レポート(全日分)とスライドまとめ - VASILY DEVELOPERS BLOG

2017/09/21 59 users VASILY DEVELOPERS Blog VASILY

2017 - 09 - 21 RubyKaigi2017参加レポート(全日分)とスライドまとめ こんにちは、VASILYのバックエンドエンジニアの塩崎です。 9/17〜9/20にかけて広島で開催されたRubyKaigi2017に、VASILYから4人が参加しました。 3日間で約50個の講演があり、参加者も数百人を超えるであろう大変大規模なカンファレンスでした。 たくさんの講演の中で、VASILYの... 続きを読む

RubyのパパMatzさんに、RubyKaigi2017の見所を聞いてみた - VASILY DEVELOPERS BLOG

2017/09/08 52 users Ruby 見所 VASILY DEVELOPERS Blog

2017 - 09 - 08 RubyのパパMatzさんに、RubyKaigi2017の見所を聞いてみた Ruby Ruby on Rails こんにちは、VASILYバックエンドエンジニアの塩崎です。 RubyKaigi2017の開催時期が間近に迫っていますが、皆さんの広島グルメ探訪の予定はいかがでしょうか？ 今年のRubyKaigiにはVASILYから4人が参加する予定で、そのうちの3人は初参... 続きを読む

インターン生がデータ転送基盤を一から設計する、VASILYバックエンドインターンの紹介 - VASILY DEVELOPERS BLOG

2017/04/14 35 users VASILY DEVELOPERS Blog インターン生

2017 - 04 - 14 インターン生がデータ転送基盤を一から設計する、VASILYバックエンドインターンの紹介 こんにちは、バックエンドエンジニアの塩崎です。 先日、VASILYバックエンドチームにインターン生が来てくれました。 この記事では彼がインターンで作ってくれた機能や、インターン中のスケジュールなどを紹介します。 インターンに来たのはこんな学生 インターンに来たのはこの春に大学4年生... 続きを読む

形態素解析とNgramを併用したハイブリッド検索をSolrで実現する方法 - VASILY DEVELOPERS BLOG

2017/02/16 113 users Solr Ngram iQON インデックス Blog

2017 - 02 - 16 形態素解析とNgramを併用したハイブリッド検索をSolrで実現する方法 こんにちは、バックエンドエンジニアの塩崎です。 今まではiQONの全文検索用のインデックスには形態素解析だけを用いていましたが、先日Ngramも併用することで検索を改善しました。 その結果、検索結果のヒット数が向上し、なおかつ検索ノイズの増加を軽微なものに抑えることができました。 この記事では、... 続きを読む

会社の新年会用に低温調理器具を作りました - VASILY DEVELOPERS BLOG

2017/01/12 113 users VASILY DEVELOPERS 低温調理器具 Blog

2017 - 01 - 12 会社の新年会用に低温調理器具を作りました IoT あけましておめでとうございます。 バックエンドエンジニアの塩崎です。 今年の抱負として「テクノロジー系の同人誌を書く！」と言ったら、「アニメの女の子が出てくる漫画」のことだと勘違いされてしまいました。 いつもはiQONに関することを書いているこのTECH BLOGですが、今回の記事はiQONには全く関係のない内容です。... 続きを読む

塩崎厚生労働大臣、「残業代ゼロ」法案は「ぐっと我慢して頂いてですね、まあとりあえず通す」と発言(佐々木亮) - 個人 - Yahoo!ニュース

2015/04/28 94 users 法案 塩崎厚生労働大臣 佐々木亮 Yahoo 発言

塩崎厚労相いわく「とりあえず通す」塩崎恭久厚生労働大臣が、いわゆる定額働かせ放題（＝残業代ゼロ）法案について「とりあえず通す」と言っていたことは数日前から話題となっていました。 厚労相「とりあえず通す」　残業代ゼロの労基法改正案　経営者向け会合でしかし、こうした発言について、言ったのか、言ってないのか、やや曖昧なところがありました。 ところが、録音されていたものがあったんですね。 テープ暴露…塩崎... 続きを読む

靖国参拝「米は理解」　日米議連の中曽根氏が認識　　：日本経済新聞

2014/01/11 39 users 靖国参拝 中曽根氏 各氏 中曽根 塩崎恭久氏

【ワシントン＝吉野直也】超党派の日米国会議員連盟（会長・中曽根弘文元外相）は10日、ワシントンで訪米日程を終え、記者会見した。中曽根氏は米国の上下両院議員や政府高官らとの会合で、昨年末の安倍晋三首相の靖国神社参拝について「理解を得られた」との認識を示した。塩崎恭久氏はオバマ米大統領の訪日は「予定通り４月の印象を受けた」と語った。　議連は８～11日の日程で自民党から中曽根、塩崎、小坂憲次の各氏が参加... 続きを読む

在日外国人の「日本人化」を図る国会議員 - NAVER まとめ

2013/05/02 26 users NAVER 国会議員 控え室 前原 シベリア上空

空の上から初ツイート。只今シベリア上空です。出発前の控え室では、前原、塩崎、小泉代議士と今後の我が国の社会保障制度の在り方で盛り上がりました。今後の課題は、子育て支援と在宅での看取り、そして在日外国人2世3世に対する「日本人化」教育の仕組みづくりが鍵を握っているという点で合意。 続きを読む

Twitter / nagashima21: 空の上から初ツイート。只今シベリア上空です。出発前の控え室で ...

2013/05/01 116 users Twitter 前原 控え室 我が国 シベリア上空

空の上から初ツイート。只今シベリア上空です。出発前の控え室では、前原、塩崎、小泉代議士と今後の我が国の社会保障制度の在り方で盛り上がりました。今後の課題は、子育て支援と在宅での看取り、そして在日外国人2世3世に対する「日本人化」教育の仕組みづくりが鍵を握っているという点で合意。 続きを読む