タグ パイプライン
人気順 5 users 10 users 100 users 500 users 1000 usersPowerShellで面倒なオブジェクトはPSCustomObjectに変換するのが早道
PSCustomObjectとはそもそもなんぞや PowerShellのパイプラインは、オブジェクトを流すようになっている。なので、複雑な情報はPowerShellのオブジェクトにすると、あとの処理が簡単になる。 そのためにあるのが、「PSCustomObject」と呼ばれる汎用のオブジェクトだ。このオブジェクトであれば、Format-*や*-Objectとい... 続きを読む
プログラマ視点での生成AIとの付き合い方
プログラミングについて、最近考えてることについてのポエム。 基本的に、 GPT-4 と Claude-3-Opus を使った経験を念頭に置いて話をする。機械学習エンジニアではないので、あくまで利用者に徹した視点での話。仕事で生成AIを使ったパイプラインを作ったりはしている。 生成AIの進化速度を予測しておく 今大事なことは、... 続きを読む
ノルドストリーム、3本のガスパイプラインが損傷 「前例ない」
9月27日、ロシアと欧州を結ぶ天然ガスパイプラインを運営するノルドストリームは、3つのパイプラインが同じ日に損傷したと発表した。写真は「ノルドストリーム1」の関連施設。ドイツ・ルプミンで3月撮影(2022年 ロイター/Hannibal Hanschke) [モスクワ 27日 ロイター] - ロシアと欧州を結ぶ天然ガスパイ... 続きを読む
ロシア ドイツに天然ガスを送る主要パイプラインの供給を停止 | NHK
ロシアからドイツに天然ガスを送る主要なパイプライン「ノルドストリーム」は、11日から定期的な点検を理由に供給を停止しました。 ロシア側が経済制裁を科すドイツに揺さぶりをかけるため、点検終了後も供給を再開しないのではないかとの懸念が広がっています。 ノルドストリームはロシアからバルト海の海底を通ってド... 続きを読む
GitHub ActionsにおけるStep/Job/Workflow設計論
この記事について GitHub Actionsには、以下3つの実行単位が存在します。 Workflow Job Step パイプラインを組む中で出てくる複数個の処理を、1つの実行単位でまとめてしまうか、それとも分割するのかというのは悩むポイントかと思います。 一つのstepのrunフィールドにコマンドを詰め込む?それともstepを分けた方がい... 続きを読む
米最大の石油パイプライン停止 サイバー攻撃で: 日本経済新聞
日経の記事利用サービスについて 企業での記事共有や会議資料への転載・複製、注文印刷などをご希望の方は、リンク先をご覧ください。 詳しくはこちら 【ニューヨーク=後藤達也、中山修志】米石油パイプライン最大手のコロニアル・パイプラインは7日、サイバー攻撃を受けて全ての業務を停止したと発表した。メキシコ湾岸... 続きを読む
聖水と間違えガソリン注がれた男性焼死、パイプラインに引火も ナイジェリア 写真11枚 国際ニュース:AFPBB News
ナイジェリア・ラゴスで、宗教儀式に端を発した火災により、炎上した石油パイプラインで消火活動にあたる消防士ら(2019年12月5日撮影)。(c)PIUS UTOMI EKPEI / AFP 【12月8日 AFP】ナイジェリア・ラゴス北部の教会で5日、癒しの儀式を執り行っていた牧師がガソリンを水と取り違え、男性に注いだところ、ろうそくの火が... 続きを読む
AWS Githubからソースを取得し、ESC(Fargate or EC2)にデプロイするパイプラインを作成する。(デプロイまで) - Qiita
version: 0.2 phases: pre_build: commands: - echo Logging in to Amazon ECR... - echo $AWS_DEFAULT_REGION - $(aws ecr get-login --no-include-email --region $AWS_DEFAULT_REGION) build: commands: - echo Build started on `date` - echo Building the Docker image... - docker build --no-cache -t $IMAGE_RE... 続きを読む
インフラエンジニアからSREへ ~クラウドとSaaS活用が変えるサービス運用のお仕事~ - 一休.com Developers Blog
2018年4月、データセンター完全クローズ 一休は、今年の4月にデータセンターを完全にクローズしました。現在、すべてのサービスをAWSを使って提供しています。 この過程で各種運用ツールやビルド/デプロイのパイプラインなどをすべて外部サービスを使うように変更しました。 これによって、インフラエンジニアやサービス... 続きを読む
[GDC 2018][西川善司の3DGE]DirectX Raytracingでゲームグラフィックスは何が変わるのか。「Quantum Break」のRemadyが示す,その方向性 - 4Gamer.net
[GDC 2018][西川善司の3DGE]DirectX Raytracingでゲームグラフィックスは何が変わるのか。「Quantum Break」のRemadyが示す,その方向性 ライター:西川善司 MicrosoftがDirectX 12にレイトレーシングのパイプラインを統合した「 DirectX Raytracing 」(略称DXR,以下略称表記)を発表し,大手ゲームエンジンが次々と対応表明... 続きを読む
JenkinsのUXをシンプルかつビジュアルにする「Blue Ocean」バージョン1.0がリリース。パイプラインの設定や実行状況などをGUIで実現 - Publickey
ビルドやテスト、デプロイなどの自動化ツール「Jenkins」のUXをシンプルかつビジュアルにする「Blue Ocean」が、正式版のバージョン1.0に到達。リリースが発表されました。 Blue OceanではJenkinsのUXが一新され、コードをリポジトリから取り出してテストを実行し、成功したらデプロイをする、といったパイプラインの設定を「Visual Pipeline Editor」によってビ... 続きを読む
CPUのアーキテクチャをトイレに例えると | Hinemosu
おもろい。たとえ方がうまいなぁ。 消え気味なのでコピペ。 155 :・良く分かるパイプライン :04/04/26 17:20 ID:B6tZVOSS 「おしっこをして手をあらってでてくる」。 トイレが一室しかないと混雑時は長蛇の列ができます。 1.おしっこをする 2.手を洗う。 二段のパイプにすると、手を洗ってる間に別の人が用を足せるようになります。 トイレ一室で二人が気持ちよくなれて、効率が倍に... 続きを読む
Go言語の並行性を映像化する | プログラミング | POSTD
Goというプログラミング言語の強みの1つは、Tony Hoare考案のCSPに基づくビルトインの並行性(Concurrency)です。Goは並行性を念頭にデザインされているため、複雑に並行したパイプラインの構築を可能にしています。でも、それぞれの並行性パターンがどのように見えるものなのか気になったことはありませんか。Goというプログラミング言語の強みの1つは、 Tony Hoare考案のCSP に... 続きを読む
Jenkinsでビルドのパイプラインを作るぞー!(2016年2月版) - Mitsuyuki.Shiiba
2016 - 02 - 24 Jenkinsでビルドのパイプラインを作るぞー!(2016年2月版) Jenkins Docker と思って色々見て回った。 Jenkinsでビルド・パイプラインを作る | Ryuzee.com Jenkinsのビルドパイプライン系plugin3種比較 - knjnameのブログ kakakikikekeのブログ: Jenkins の Workflow Plugin ... 続きを読む
Androidのパッチ・パイプラインは崩壊している? 「Stagefright」脆弱性でGoogleに批判集中 | サイバーインシデント・リポート
今年の「Black Hat USA 2015」で注目を集めたトピックのひとつに、AndroidのStagefrightで発見された脆弱性がある。これは世界のAndroid端末の95%(約9億5000万台)に影響を与える可能性がある問題として、開催前から話題となっていたものだ。8月6日ののステージでは、この脆弱性の発見者であるセキュリティ企業Zimperiumの研究者Joshua J. Drake氏... 続きを読む
NVMe SSDのベンチマークをとってみた (約70万IOPS/1台) - 元RX-7乗りの適当な日々
IT 手元にNVMe SSDがあったので、自分でベンチマークを取ってみたログ。NVMeってのは、ストレージデバイスを接続する際の規格で、従来でいうSATAインターフェースの仲間みたいなもの。NVMeの詳細は以下のリンク先に記載があるので読んでいただきたい。 NVMeは、SCSIやSATA(Serial ATA)と同じく、ストレージを接続するための規格だ。パイプラインやランダムアクセスなど、メモリー... 続きを読む
【翻訳】パイプとフィルタ ~ソフトウェア工学における有用なアーキテクチャ~ | POSTD
パイプラインは、最近のソフトウェアエンジニアリングにおいて、非常に便利な(そして驚くほど活用されていない)アーキテクチャパターンです。ソフトウェアでデータの流れを制御するためにパイプとフィルタを用いる考え方は、最初のUN […]パイプラインは、最近のソフトウェアエンジニアリングにおいて、非常に便利な(そして驚くほど活用されていない)アーキテクチャパターンです。ソフトウェアでデータの流れを制御するた... 続きを読む
HTTP/2 入門 - Yahoo! JAPAN Tech Blog
ストリームによる多重化 2つ目の特徴は「ストリーム」です。従来のHTTPでは、リクエストとレスポンスの組を1つずつしか同時に送受信できないことが、パフォーマンス上のボトルネックになっています。この問題を改善するべくHTTP/1.1では新たにパイプラインが導入されましたが、一部のレスポンスに時間がかかるような場面でレスポンスが詰まってしまう問題などがあり、広く使われてはいません。そこで、HTTP/2... 続きを読む
Droonga
Droongaについて Droongaは、ストリーム指向の処理モデルを採用したスケーラブルなデータ処理エンジンです。 検索、更新、集約などの多くの操作がパイプラインを通じて行われるこのモデルにより、Droongaは高い柔軟性と拡張性を備えています。 また、Droongaは既存操作の組み合わせによる複雑な操作にも対応しています。 ユーザーはRubyでプラグインを開発して、独自の操作をDroongaに... 続きを読む
CPUはオワコン - きしだのはてな
FPGAでCPUを組んでると、フェッチ部やデコーダ部で足し算や掛け算をしようとして、そんなことしたらCPUの意味ないなーと思ってしまうことがありました。で、よく考えたら、FPGAでロジックを組むならCPUの意味はないんです。だいたい、ひとつの処理実行するのに何クロックかかってんですか!と。 CPUでは、計算効率をよくするためにパイプラインという仕組みが使われています。最近では、18段とかのパイプラ... 続きを読む
CPUのアーキテクチャをトイレに例えると - Hinemosu
おもろい。たとえ方がうまいなぁ。 消え気味なのでコピペ。 155 :・良く分かるパイプライン :04/04/26 17:20 ID:B6tZVOSS 「おしっこをして手をあらってでてくる」。 トイレが一室しかないと混雑時は長蛇の列ができます。 1.おしっこをする 2.手を洗う。 二段のパイプにすると、手を洗ってる間に別の人が用を足せるようになります。 トイレ一室で二人が気持ちよくなれて、効率が倍に... 続きを読む
シェルを覚えた経緯を詳し目に書いてみる - zenpouの日記
perl - the best friend of find(1) 404 Blog Not Foundを見てて、シェルについて書いてみたくなりました。丁度、Linuxを学ぶための10個の効果的な方法で言及したシェルを覚えた経緯を詳しく書いてみたかったのでだらだらと書いてみる。 前回書いた内容がこちら。順を追って解説していきます。シェル覚えた経緯。 第一段階としてはパイプラインを覚える | 第二段... 続きを読む
シェルのリダイレクトを「こわいものなし」というくらい完全に理解しよう - 檜山正幸のキマイラ飼育記
雑記/備忘 | 16:21 | 「Java BlockingQueueで遊ぶ:パイプラインごっこ」でパイプラインの話をしたので、本来の、つまりUnixのパイプやリダイレクトを少し調べてみました。たまに話題となる some-command >file 2>&1 と some-command 2>&1 >fileの挙動の違いについて、「シェルはコマンドラインリダイレクトの指定を右から左に解釈実行する」... 続きを読む
404 Blog Not Found:書評 - あなたはコンピュータを理解してますか?
第1章 その味噌汁の塩分はいかほど? - 正味の情報量は意外と少ない インスタント味噌汁が商品として存在可能な理由 人間の手、ドラえもんの手、そしてコンピュータの手 1杯の味噌汁の中に塩を求めて たいへん「ありがたい」お話 言葉の塩分量を調べてみよう まとめ:データとは情報を入れる容器である Column アナログマンとデジタルマン 第2章 油田のパイプラインと伝言ゲームの連続 パイプが細けりゃ、... 続きを読む
odz buffer - shell のちょっとしたテクニック
後輩が cat README | tr ' ' '\n' | sort | uniq -c | sort -nr | head てなテクニックを見て、びっくりしたみたいな話をしていたのだが、こういうパイプラインを利用するテクニックを学んでいないのは色々損な気がする。ていうか、サーバで丸一日以上かかるような処理を実行するのもしょっちゅうなのに、GNU screen も nohup も知らないってのは... 続きを読む