FindyにおけるDataformの活用とその効果 - Findy Tech Blog

2024/07/01 14 users Findy Dataform ファインディ株式会社 構成 弊社

こんにちは。 2024/05よりファインディ株式会社にデータエンジニアとして入社した田頭(tagasyksk)です。本記事では、データ変換サービスであるDataformについてその活用方法や導入後の効果についてご紹介します。 弊社では、現在次のような構成でデータ基盤を構成しており、BigQuery内でのデータ変換にDataformを利用し... 続きを読む

Kinesis Firehose のデータ変換を Rust でやってみて速度向上が見込めた話 - ソモサン

2017/12/19 14 users rust Lambda ソモサン Python 概要 Rust

2017 - 12 - 20 Kinesis Firehose のデータ変換を Rust でやってみて速度向上が見込めた話 Programming Rust AWS 概要 Rust コードを Lambda 上で動かせたーと喜んだんですが、活用どころあるんだろうかと考えてみて検証してみました。 結果として Python 比較で1秒当たりで 15 倍ほど多く処理できました。 以下でつらつらと書いていっ... 続きを読む

「PDF→印刷→上司が判子→スキャン→PDF」　これ何かの儀式？ - 私の戦闘力は５３万マイクロです

2016/02/28 298 users スキャン 儀式 PDF 上司 判子

2016 - 02 - 28 「PDF→印刷→上司が判子→スキャン→PDF」　これ何かの儀式？ 仕事・働き方 こんにちは、意識低い系サラリーマンのKENです。 いまの会社ではなく、若い頃にいた会社のお話です。 記事タイトルのようなことが行われていました。 JUST PDF 3 [作成・編集・データ変換] 通常版 出版社/メーカー: ジャストシステム 発売日: 2013/03/08 メディア: CD... 続きを読む

徹底解説！ ITアーキテクトとは何か？（3）：大量データをスムーズに処理　失敗しないバッチ処理のアーキテクチャ設計、5つのポイント (1/2) - ＠IT

2014/09/10 102 users ITアーキテクト バッチ アーキテクチャ設計 バッチ処理 役割

徹底解説！ ITアーキテクトとは何か？（3）：大量データをスムーズに処理　失敗しないバッチ処理のアーキテクチャ設計、5つのポイント (1/2) ITアーキテクトの役割を、具体的かつ分かりやすく解説する本連載。今回は締め処理やデータ変換などで利用される、バッチ処理におけるアーキテクチャ設計のポイントを紹介する。 バッチ処理とは 前回はWebアプリのアーキテクチャ設計の基礎を解説しました。今回はバッチ... 続きを読む

文書整理にすごく便利！デジタル化・アナログ化が簡単にできるデジタル文具5選

2014/02/11 25 users デジタル文具 文書整理 アナログ化 デジタル化 文具

近年、シンプルでおしゃれな文具が話題になる中で、デジタル文具も増えてきています。 デジタル文具とは、電子文具とも呼ばれ、スマホやPCとの連携性を高めるデジタル技術を組み込んだ文具のことをさします。 特にメモ帳、文書入力、ラベル印刷、名刺管理などといったアナログ・デジタル間のデータ変換を行う機能を持つものが多いのが特徴です。 今回は、文書整理にすごく便利なデジタル文具を５つご紹介します。 クリップ専... 続きを読む

MessagePackをCHE.R.RYにのせてみた

2012/02/26 15 users CHE ｒｙ MessagePack YUI 替え歌

今日は非常にギークな話になる。 MessagePackという古橋貞之さんが書いたシリアライザがある。シリアライザというのは、コンピューター同士やプログラム間でのデータ通信のために行う一種のデータ変換を請け負うものだ。MessagePackはその一つで、これが異常に良くできている。今日なぜかMessagePackと、シンガーソングライターのYUIの話になったので、CHE.R.RYの替え歌を考えてみた... 続きを読む

【ハウツー】ワードもエクセルもPDFに変換、サーバサイドJavaで - JOOConverter | エンタープライズ | マイコミジャーナル

2006/07/20 79 users サーバサイドJava ODF ハウツー エンタープライズ 変換

OpenOffice.orgといえば、いわずと知れた統合オフィスアプリケーションだ。最近ではODFをめぐって話題にのぼることも多い。JOOConverterはJOOConverterはOpenOffice.orgを使ってデータ変換を実施するためのJavaライブラリで、JavaとOpenOffice.orgを結びつける面白いアプリケーションだ。 JOOConverter 2.0.0登場 Art of... 続きを読む