Linuxコマンドでテキストデータを自在に操る - じっくりコトコト煮込んだみかん

2010/09/16 1021 users コトコト Linuxコマンド みかん uniq sed

linuxLinuxでテキストデータを扱うときに、コマンドをパイプで繋げるだけでいろいろな処理ができて面白いのですが、綺麗に整理されていない気がするのでまとめてみます。ここでは、cat, paste, join, grep, head, tail, cut, sed, tr, sort, uniq, wc を取り上げます。ファイルを縦に結合ファイルを縦に結合します。コマンド説明cat file1 ... 続きを読む

日本のアニメ映画を米Pasteが厳選「歴代ベスト・アニメ映画 TOP100」発表 - amass

2021/05/03 899 users amass バケモノ 厳選 アニメ映画 米国

日本のアニメ映画を、米国のエンタテインメント系メディアPaste Magazineが厳選。「歴代ベスト・アニメ映画 TOP100」を発表しています。 Pasteは以前に、日本のTVアニメ・シリーズを厳選した「歴代ベスト・アニメ・シリーズ TOP30」を発表しています。詳しくはこちら 100. The Boy and the Beast (2015)　バケモノの子 9... 続きを読む

CSVの処理で使えそうなコマンドラインツール（column, textql, csvkit, xsv, visidata, csvtotable, daff, tabview） - もた日記

2018/07/25 465 users コマンドラインツール column join awk Sort

column textql csvkit xsv visidata csvtotable daff tabview CSV（またはTSV）を処理するときにはcut, sort, awk, paste, joinといったコマンドを使うことが多いが、CSVの処理で使えそうなコマンドラインツールを簡単に試してみる。 テスト用のCSVデータは下記ページで作成した。 Mockaroo - Random Data Generator and... 続きを読む

TCPパケットを解析して構造化ログでダンプするツール tcpdp を作った - Copy/Cut/Paste/Hatena

2018/09/24 365 users Cut Copy Hatena 構造化ログ

やっと形になってきました。 github.com 「データベースのクエリログを取得したい」 例えば、データベース（RDBMS）のクエリログを取得したいとき一番確実な方法は、そのRDBMSに備わっているログ機構を利用することです。 一方で、全てのクエリログを出力するとなるとそれなりにIO負荷がかかることが予想されるので、負... 続きを読む

AWSのリソース構成をServerspecのようにテストする "awspec" をつくった - Copy/Cut/Paste/Hatena

2015/08/05 321 users serverspec awspec Cut Copy AWS

2015-08-06 AWSのリソース構成をServerspecのようにテストする "awspec" をつくった AWS Ruby AWSのリソース構成をServerspecのようにテストできる "awspec" をつくりました。 k1LoW/awspecgithub.com 例えばEC2インスタンスであれば、以下のように書けます。 describe ec2('my-ec2') do it { s... 続きを読む

さくらVPSセットアップ用のシェルスクリプトを今話題の「Ansible」で書き直してみた - Copy/Cut/Paste/Hatena

2013/07/22 269 users Chef Ansible シェルスクリプト Cut Copy

2013-07-22 さくらVPSセットアップ用のシェルスクリプトを今話題の「Ansible」で書き直してみた 「Chef! Chef!」と叫ばれる昨今、そのChefに挫折した皆様、いかがお過ごしでしょうか？ Chefに挫折中のid:k1LoWです。 Ansibleいいよ。Ansible。 Chefに挫折したからといってプロビジョニングツールへの憧れは消えるわけもなく、時間を見つけてはいろいろいじ... 続きを読む

tail -Fなどの標準出力を一定時間ごとに指定のコマンドに渡し、その実行結果をシーケンシャルに出力するコマンド evry を作った - Copy/Cut/Paste/Hatena

2019/01/14 264 users サマリ nginx github.com 流量 tail

ログの流量やサマリを、カジュアルに、そしてリアルタイムに確認したかったので作ってみました。 github.com これはなに 標準入力の内容を、一定時間ごと（もしくは一定行ごと）にまとめて指定のコマンドに渡し、その実行結果をシーケンシャルに出力するコマンドです。 使い方 例えば、「NGINXの10秒あたりのリクエスト... 続きを読む

Ansible徹底入門は"今"のAnsibleの使い方を教えてくれる再入門書籍 - Copy/Cut/Paste/Hatena

2017/03/20 237 users Ansible Cut 単行本 Copy 翔泳社

2017 - 03 - 21 Ansible徹底入門は"今"のAnsibleの使い方を教えてくれる再入門書籍 Ansible Ansible徹底入門 クラウド時代の新しい構成管理の実現 作者: 廣川英寿,平初, 橋本直 哉,森田邦裕,渡辺一宏 出版社/メーカー: 翔泳社 発売日: 2017/02/17 メディア: 単行本（ソフトカバー） この商品を含むブログを見る Ansible徹底入門読了。会社... 続きを読む

快適にさくさく作れる、ワイヤーフレーム・モックアップがブラウザ上で作成できるHTML5アプリ -Moqups | コリス

2012/07/11 236 users コリス redo undo Cut エレメント

Moqupsの特徴 Moqupsの使い方 Moqupsの特徴 ドラッグ&ドロップでエレメントを簡単に配置できます。 約60種類のUIエレメントを用意。 PDF, PNGへの書き出し。 HTTPS対応。 自動保存。 スマートガイド。 カスタマイズ可能なグリッド。 オブジェクトはグリッドにスナップ。 オブジェクトのロックとグループ化。 右クリックで、Undo/Redo/Cut/Copy/Pasteなど... 続きを読む

tail -F /path/to/access.log のようなストリームに対して何度でもgrepを試行錯誤できるツール filt を作った - Copy/Cut/Paste/Hatena

2019/08/01 222 users tail Path grep Cut filt

filtというツールを作りました github.com これはなに まずは以下のスクリーンキャストをご覧ください tail -F /path/to/access.log のようなログの流れを止めてはgrepをして、止めてはgrepのコマンドを変更してしています。 その間、実は裏では実際のストリームは止めていません。 つまり、ストリームのパイプ先に まず... 続きを読む

Mac用クリップボード管理アプリ『Paste』が、内容を可視化して操作できるし使いやすい ｜ ライフハッカー［日本版］

2015/05/24 197 users ClipMenu 傍島康雄 MacOS,OS ライフハッカー

傍島康雄  - MacOS,OS,ソフトウェア,ツール  01:00 PM Mac用クリップボード管理アプリ『Paste』が、内容を可視化して操作できるし使いやすい クリップボード管理アプリはいくつかあります。たとえば、Macなら『ClipMenu』が定番です。クリップボードは空気や水のように当たり前の存在ですが、Macが登場した時から機能的に大きな変化はなく、履歴を取ったり、内容を管理したり、可... 続きを読む

楽しみにしているテック系Podcastまとめ - Copy/Cut/Paste/Hatena

2017/05/19 122 users Podcast Cut Rebuild.fm Copy 配信

2017 - 05 - 19 楽しみにしているテック系Podcastまとめ 未再生エピソードがもうありません。 半年以内に配信があった中で、配信を楽しみにしている Podcast をいくつかリストアップしてみます。 目的は「もっとエピソード配信が増える」「もっとテック系 Podcast が増える」です。 Rebuild.fm http://rebuild.fm/ 最近のテック系 Podcast ブ... 続きを読む

コピペで使えるCSS3ボタン６つのレシピ:phpspot開発日誌

2011/04/10 114 users phpspot開発日誌 コピペ レシピ カッコイ CSS

6 Useful CSS Button Recipes You Can Copy & Paste | Design Shack コピペで使えるCSS3ボタン６つのレシピ。 次のようなボタンのCSSとHTMLが掲載されています。 一昔前はオーサリングツール抜きに出来なかったこともCSSで出来るように。CSS4の時代にはどうなっているのだろうと少し楽しみです。 関連エントリ CSSスプライトでカッコイ... 続きを読む

メディカルAIコース オンライン講義資料 — メディカルAIコース オンライン講義資料<Paste> ドキュメント

2018/11/15 109 users 知識 最低限 大学院生 大学生 医療従事者

本講義資料について¶ 本ページは 日本メディカルAI学会公認資格：メディカルAIコースのオンライン講義資料（以下本資料） です． 本講料を読むことで，医療で人工知能技術を使う際に最低限必要な知識や実践方法を学ぶことができます． 想定受講者¶ 受講想定者として大学生，大学院生，医療従事者を想定しています． また... 続きを読む

ダーマの神殿に行った気持ちで頑張る - Copy/Cut/Paste/Hatena

2018/02/26 104 users GitHub Git Cut ダーマ Copy

2018 - 02 - 27 ダーマの神殿に行った気持ちで頑張る ex-fusic 2月末で株式会社Fusicを退職します。現在有給消化中になります。 気づけば11年目に突入していた 長いように思えますが、特に不満なくやってきていつの間にか勤続2桁に突入していました。 これがどれくらい長いかというと バージョン管理のツール（サービス）でいうと、 svn -> SVK -> GitHub (Git)... 続きを読む

メディカルAIコース オンライン講義資料 — メディカルAIコース オンライン講義資料<Paste> ドキュメント

2018/11/15 74 users 知識 最低限 大学院生 大学生 医療従事者

本講義資料について¶ 本ページは 日本メディカルAI学会公認資格：メディカルAIコースのオンライン講義資料（以下本資料） です． 本講料を読むことで，医療で人工知能技術を使う際に最低限必要な知識や実践方法を学ぶことができます． 想定受講者¶ 受講想定者として大学生，大学院生，医療従事者を想定しています． また... 続きを読む

やっとDocker for Macで開発用データベースの運用をはじめた - Copy/Cut/Paste/Hatena

2017/02/13 73 users Cut Copy PHPer Docker LAMP

2017 - 02 - 13 やっとDocker for Macで開発用データベースの運用をはじめた Docker 「Docker通り越して次の楽技術こないかなー」と思っていたのですが、やはり当分こなそうなので重い腰を上げてDockerを使いはじめました。 遅すぎですね。 前提 自分は「主にPHPer」ですが、 PHP なプロジェクトは大抵がごく普通の LAMP やLAPPなので（環境依存が少ない... 続きを読む

最速インターフェース研究会 :: Sledge::Plugin::DebugTemplateで開発効率が135倍になるデモ

2006/10/02 69 users Sledge results NoPaste Plugin

フォームポストでテンプレートを送りつけると、それを使ってページを表示してくれるSledge::Plugin::DebugTemplateというのを作った。これによりJavaScriptやCSSのみならず、HTMLテンプレートすらローカルファイルと差し替えて開発ができるようになった。 ソース(nopasteが24時間で消えるの知らんかった) http://rafb.net/paste/results... 続きを読む

pprofでCPU100%になる原因を特定する - Copy/Cut/Paste/Hatena

2018/09/30 64 users pprof Cut CPU Copy 本エントリ

tcpdpのprobeモードで、CPUが100%に張り付くという問題（結果、原因としてはしょうもないミス）がありました。 機能としては正しく動いているので、単純にテストケースを増やしてもどうにもならず、pprofを使って原因となっている箇所を絞り込んでみました。 本エントリはその記録です。なお、原因特定の問題としてはお... 続きを読む

GitHubのプライベートリポジトリをストレージとして活用したシンプルなメモサービスhubeditを作っている - Copy/Cut/Paste/Hatena

2017/07/13 64 users プライベートリポジトリ emacs GitHub Cut メモ

2017 - 07 - 13 GitHubのプライベートリポジトリをストレージとして活用したシンプルなメモサービスhubeditを作っている Serverless GitHub 個人で GitHub 有料プランの人しか使えないサービス作っている — k1LoW (@k1LoW) 2017年7月5日 スマートフォン のブラウザからでもメモが書けるサービス 自分はいつも簡単なメモ書きには Emacs ... 続きを読む

非インターネット世代のパスワード保存方法。またはEvernote的な何か - Copy/Cut/Paste/Hatena

2013/01/16 61 users アイコン サツキ 母親 父親 ウィンドウ

Google Chromeのリモートデスクトップ機能は便利ですね。 個人的に昨年末びっくりしたことをちょっと。 親のPCサポート さっきも仕事帰り途中で母親に電話でつかまり、「父親のメールアドレスの確認方法」を遠隔操作で説明していました。 そもそも非インターネット世代、というかPCをあまり触れない人たちは「ウィンドウ」とか「アイコン」と言っても通じません。 自分は何度か説明したのですが、結局挫折し... 続きを読む

Macのクリップボード管理アプリ Paste デカくて綺麗で見やすいのが使いやすい | ごりゅご.com

2018/02/14 55 users Copied 見やすい Mac iPhoneとMac ヤツ

最近新しくPasteというMacのクリップボード管理アプリを使い始めました。 こんな感じのやつです。 Paste 2 価格: 1200円(2018/02/14 9:22) クリップボードの管理アプリは結構いろいろなものがあって、今までにも結構いろいろなものを使ってきていました。 最近まで使ってたのはCopied。 iPhoneとMacでクリップボードの共有ができるアプリCopied 最近、Copi... 続きを読む

TCP Proxyを書いてMySQLの通信を覗いてみる - Copy/Cut/Paste/Hatena

2018/07/26 42 users Cut PostgreSQL クエリ MySQL Copy

お、MySQLの通信も見えそうだぞ？ pic.twitter.com/GVxBXqHEgA— k1LoW (@k1LoW) 2018年7月25日 "TCP Proxyを書いてPostgreSQLの通信を覗いてみる - Copy/Cut/Paste/Hatena" の続編です。 MySQLの通信を覗いてみる また簡単なクエリだけを対象にします（プリペアードステートメントなどは含みません）。 MySQLもしっかり... 続きを読む

サーバーレスアーキテクチャなエラートラッキングツール faultline - Copy/Cut/Paste/Hatena

2016/12/06 41 users Qiita Cut サーバーレスアーキテクチャ Copy

2016 - 12 - 07 サーバーレスアーキテクチャなエラートラッキングツール faultline AWS Serverless JavaScript 本エントリーは Serverless Advent Calendar 2016 - Qiita と Fusic Advent Calendar 2016 - Qiita の7日目の記事です。 今日は AWS re:Invent 2016 Ser... 続きを読む

utsusemiという静的サイト生成用クローラを作った（作っていた） - Copy/Cut/Paste/Hatena

2018/01/24 39 users ser Cut Copy サーバーレス ホスティング

2018 - 01 - 25 utsusemiという静的サイト生成用クローラを作った（作っていた） Serverless AWS github.com 昨年からサーバーレスな勉強会で何回か紹介していましたが、ちゃんとエントリを書いていなかったので書いておきます。 これは何？ 1つのオリジナルサイトをクロールしてS3上に（S3の静的ウェブサイト ホスティング 機能で）静的サイトを構築してしまうSer... 続きを読む