GCPで理想の構造化ログを出力する方法

2020/12/25 7 users GCP stdout stderr GKE Engine

はじめに GCP には Cloud Logging(旧Stackdriver Logging)というサービスがあり、Google App Engine[1] や Cloud Run、Cloud Functions、GKE といったマネージドサービス上に構築したアプリケーション内で標準入出力(stdoutやstderr)にログを出力するだけで専用のログビューアで見ることができます。 この Cloud Logging... 続きを読む

Ruby I/O 機構の改善 -stdio considered harmful-

2015/11/08 75 users 機構 改善 バッファリング stdio 本稿

Ruby I/O 機構の改善 — stdio considered harmful — 田中 哲 akr@m17n.org 産業技術総合研究所 情報技術研究部門 概要 Ruby は開発版 (1.9) において I/O のバッファリングを stdio でなく独自に行うようになった。本稿ではその理由 と効果を解説する。stdio は C の標準入出力ライブラリであり、バッファリングを行ってシステムコ... 続きを読む

【Amazon S3 Streaming】AWS CLIを使って標準入出力とS3を直接つなぐ【小ネタ】 ｜ Developers.IO

2015/04/21 74 users Developers.IO AWS CLI ＥＣ txt 都元

よく訓練されたアップル信者、都元です。ひさびさのブログになってしまいました。リハビリも兼ねて、小ネタにて。 ローカルファイルシステムと標準入出力 まずは基礎的過ぎる話から。linuxシェル上で、ローカルファイルシステム上のファイルを標準出力に書き出したい時、例えばこんなコマンドを使いますね。 $ cat foo.txt 次に、シェルからちょっとしたテキストファイルを作成したいとき、下記のようにec... 続きを読む

ZFS send/recvとnetcatを使ってネットワーク越しにZFSのデータを移行する - mteramotoの日記

2013/01/05 25 users ZFS tar send rsync netcat

FreeBSD今回のサーバ更新では、ZFSからZFSへデータ移行をする必要があった。一般的にはrsyncやtarを使うんだろうけど、せっかくなのでZFSの機能を使って移行してみたら、かなり高速で快適だったのでメモ。ZFSには、複製を作成するためのsend/recvという機能が用意されている。標準入出力を使ってデータをやりとりできるので、netcatを使ってネットワーク越しにつなぐことで、データを移... 続きを読む