ObjectSpace を利用して Ruby 製 worker のメモリ使用量を改善した - @watson1978 の日記

2023/08/02 6 users デプロイ Ruby グラフ watson1978 現象

現在、Ruby 製 worker を作成することを業務で行っているのですが、継続的にメモリ使用量が増加する現象に遭遇してました。 （グラフの値が下がったタイミングが数回ありますが、それぞれでデプロイが行われてリセットされただけ） ObjectSpace.allocation_sourcefile や ObjectSpace.allocation_sourceline を利用して... 続きを読む

オープンソースのWebAssemblyサーバレス基盤「Wasm Workers Server 1.3」リリース。Gitリポジトリからコードをロードして実行可能に

2023/07/05 28 users Gitリポジトリ サーバサイド WebAssembly 実行

オープンソースのWebAssemblyサーバレス基盤「Wasm Workers Server 1.3」リリース。Gitリポジトリからコードをロードして実行可能に VMware Wasm Labsは、WebAssemblyのWorkerをNode.jsやDenoのようにサーバサイドでイベントドリブンに実行できる「Wasm Workers Server」の最新版「Wasm Workers Server 1.3」をリリース... 続きを読む

オープンソースのWebAssemblyサーバレス基盤「Wasm Workers Server 1.0」正式リリース。RubyとPythonのWASMランタイムに対応し、Ruby/Pythonでの記述が可能に

2023/03/08 85 users Ruby Python サーバサイド WebAssembly

オープンソースのWebAssemblyサーバレス基盤「Wasm Workers Server 1.0」正式リリース。RubyとPythonのWASMランタイムに対応し、Ruby/Pythonでの記述が可能に VMware Wasm Labsは、Node.jsやDenoのようにWebAssemblyやJavaScriptで記述したWorkerをサーバサイドでイベントドリブンに実行できる「Wasm Workers Server」の... 続きを読む

Node.js にプロセスレベルの Permission が入りそうな話 - from scratch

2023/01/12 9 users permission Land github.com 解説

Node.js の Permission についての解説を行います。 Node.js に Permission 機能が入りそう。 すでに PR が出されており、 land も間近です。おそらく次かその次くらいのリリースで入ることになるでしょう。 github.com おそらく初期リリースでは experimental flag を付けた上で、 fs, child_process, worker のパーミ... 続きを読む

Wasm Labsが「Wasm Worker Server」をオープンソースで公開。Node.jsやDenoのようにWebAssemblyのWorkerをイベントドリブンに実行

2022/10/19 70 users サーバサイド WebAssembly deno インストール

Wasm Labsが「Wasm Worker Server」をオープンソースで公開。Node.jsやDenoのようにWebAssemblyのWorkerをイベントドリブンに実行 VMware Wasm Labsは、WebAssemblyのWorkerをNode.jsやDenoのようにサーバサイドでイベントドリブンに実行できる「Wasm Worker Server」をオープンソースで公開しました。 インストールも簡... 続きを読む

Cloudflare WorkersのJavaScript/WASMランタイム「workerd」がオープンソースで公開。NanoservicesやHomogeneous deploymentなど新技術を実装

2022/09/28 57 users deployment workerd dee 実装 新技術

Cloudflare WorkersのJavaScript/WASMランタイム「workerd」がオープンソースで公開。NanoservicesやHomogeneous deploymentなど新技術を実装 Cloudflareは、同社のCDNエッジでJavaScript/WebAssemblyを実行するサービス「Cloudflare Workers」のコアランタイム部分を「workerd」（読み方はワーカーディー：worker- dee... 続きを読む

partytown の Worker からの同期的メインスレッド操作を実装してみる

2021/10/09 7 users Sandbox Partytown GitHub mock

Partytown とは GitHub - BuilderIO/partytown: Relocate resource intensive third-party scripts off of the main thread and into a web worker. ? 今Partytownがヤバい。JavaScript Sandboxの未来はどっちだ？ 要は 3rd party script を安全に隔離するため、 WebWorker + DOM の mock で動かす。 GitHub - ampproje... 続きを読む

Web worker meets worker threads - threads.js

2021/05/23 9 users threads await spawn workers

Transparent API Write code once, run it everywhere – in web workers and node worker threads. Call workers transparently, await results. It's never been easier. // master.js import { spawn, Thread, Worker } from "threads" const auth = await spawn(new Worker("./workers/auth")) const hashed = await ... 続きを読む

クソな世界で、自由であれ：伝説の映画監督タル・ベーラinterview - i-D

2019/09/16 30 users I-D クソ 伝説 うわさ 世界

気難しい人物だ、とは風のうわさに聞いていた。「クソ」を意味する言葉をよく使う人である、ということも。実際に目の前に現れた彼は、自分の作品を当然のように「クソ（piece of shit）」だといいながら、自身を「労働者（worker）」だと呼んだ。不思議なチャーミングさと思慮深さをあわせ持ち、真摯に、論理的な言葉を... 続きを読む

TensorFlow.jsがChromeでWebWorker上でもWebGL backendで動く - すぎゃーんメモ

2019/08/01 67 users すぎゃー mizchi WebWorker Issue 処理

tensorflow.js は処理の重さ的に worker で動かしたいのだがまだ WebWorker で動かすと cpu backend に fallback してしまうので、この issue ずっとみてる https://t.co/KYGEQSFwq5— 無糖派層 (@mizchi) July 30, 2019 僕も以前にWebWorker上でTensorFlow.jsを使おうとして WebGL backendで動かないことに気付いて諦め... 続きを読む

t2.micro 1台でEKSを起動してみた - Qiita

2019/03/08 18 users Qiita EKS POD AWS t2.micro

AWSの無料枠といえばt2.microです。 ということで、EKSをWorkerがt2.micro 1台という構成で構築してみました。1 (2018/06/12) CloudFormationテンプレートのMaxPodsの設定が影響している可能性を考慮していなかったため、追記しました。 結論 EKSのWorkerは、t2.microでも特に問題なく構築でき、Podの起動も可能でした。... 続きを読む

redux-workerized で Redux と Vue を接続する - mizchi's blog

2018/11/12 57 users redux Vue mizchi postMessage

mizchi/redux-workerized 作った。 yarn add redux-workerize で入る。 元々は react-hooks で redux へのアダプタを書いていただけのライブラリだったが… TypeScript フレンドリーなAPIにする ReactRedux.Provider の異なるAPI表現だけじゃ面白くない じゃあ Redux.Store を worker に置いて postMessage で更新しよう ... 続きを読む

worker-dom-code-reading.md · GitHub

2018/10/04 18 users GitHub ampproject AMP 指標 実現

worker-dom-code-reading.md @ampproject/worker-dom Code Reading これはなに AMPがJS対応するのに、Worker だったらAMPの指標のパフォーマンス的に許容できるから、それに向けて頑張るという発表があった。 好きなJavaScriptをAMPで実行できるようになるかも。Web Workerで実現か？ | 海外SEO情報ブログ つい先日、そ... 続きを読む

Node.jsにworkerが入った - 技術探し

2018/06/26 185 users Cluster メッセージング node.js API制限

worker_threads とは？ 目的 child_process や cluster と違う部分 会話する方法 共有範囲 API制限 禁止 変更 歴史 使い方 複数のworkerを動かす スレッド間でメッセージングを行う パフォーマンス まだできないこと さいごに Node@10.5.0で入ったworkerの話です。 この記事は、Roppongi.js #4の登壇資料です。 5minで話... 続きを読む

Chromiumのプロセス構成と Worker/SharedWorker/ServiceWorkerのうごき - Qiita

2017/12/03 58 users Twitter Chromium Qiita 実装 なか

この記事は Chromium Browser Advent Calendar 2017 の3日目の記事になります。 今日の担当はamiq11( twitter , chromium )です。2016年の4月からBlink-WorkerチームでServiceWorkerの実装をしています。このadvent calendarに登録しているchromiumコミッターのなかでもChromium歴が浅いので... 続きを読む

Jesque を頑健に使うために RobustWorkerPool というのを書いた - その手の平は尻もつかめるさ

2015/08/17 11 users JobQueue Resque 表題 ハッカソン Java

2015-08-17 Jesque を頑健に使うために RobustWorkerPool というのを書いた java 8/16 (日) に京都でハッカソンが催されるとの事だったので遊びに行って，表題のものを作ってきました (実際には大部分は予め作っていた)．Jesque は Resque の Java 実装版で，今やっているやつではこれを使って JobQueue - Worker なシステムを組も... 続きを読む

Docker と SO_REUSEPORT を組み合わせてみる。おそらくその1 - blog.nomadscafe.jp

2015/01/07 165 users Docker Listener Prefork accept

SO_REUSEPORTはLinux Kernel 3.9からサポートされている機能で、複数のプロセス/Listenerから同じTCPポートをbind可能にして、Kernelが それぞれのプロセスに接続を分散してくれるという機能です。preforkなサーバはlistenしてからworkerをforkし、それぞれでacceptを行うという手順を踏みますが、SO_REUSEPORTを使えばそれとは関係... 続きを読む

nginx の worker_connections は worker 当たりの同時接続数だと思ってたけどどうも違うっぽい - noob

2014/12/15 95 users nginx 挙動 ベンチマーク 同時接続数 理解

2014-11-12 nginx の worker_connections は worker 当たりの同時接続数だと思ってたけどどうも違うっぽい nginx ベンチマークを取っている時にどうも違うような挙動をしたので確認してみた． worker_processes 8, worker_connections 256 のとき いままでの理解 nginx の同時接続数は worker_connecti... 続きを読む

Heroku上でProcletを使っていろいろ動かすと便利 - blog.nomadscafe.jp

2014/07/01 31 users Proclet WebUI Heroku上 module 生成

最近、Module::CoreListのWebUIと、perl-buildで使っているperlのリリースとアーカイブのリストの生成をHerokuに移動しました。両方とも、情報を更新するworkerとappサーバが必要になるので、Heroku上でProcletを使ってappサーバとworkerなどを動かしてみました。 HerokuでのProcletの使い方 まず、cpanfileとProcfileを... 続きを読む

AWSでジョブWorkerを構成するベストプラクティス 〜 Brianの巻 ｜ Developers.IO

2014/05/20 42 users Brian ベストプラクティス AWS SQS 中段

よく訓練されたアップル信者、都元です。ここまで「AWSでジョブWorkerを構成するベストプラクティス」と題して2本の記事を書いてまいりました。SQSの巻では、バックグラウンドジョブの実行にはSQSを使ってスケーラビリティを確保しようという、下図中の中段の話をしました。続いてBeanstalk worker tierの巻では、Workerの実装方法として、図中の下段の話をしました。今回は、上段の話... 続きを読む

プログラムを任意の秒数止めるWorkerのサンプル作った | ton-up blog - とんぶろ

2012/08/31 182 users ton-up blog サンプル プログラム Git 同期

はいタイトルの通りです Workerを使って、任意のコード中で任意の秒数だけプログラムをストップさせることができます Java分かる人は、Thread.sleep()と同じです Workerで何できるかなーって考えてたら唐突に思いついた Workerは非同期処理のためのものだけど、実は同期処理できるんです プロジェクト一式ははgitにあげました Flash Builder 4.7 でインポートして... 続きを読む

Perlでstrace -p pidして目的のシステムコールが来たら終了する - blog.nomadscafe.jp

2012/08/08 20 users perl GrowthForecast コネタ cron 目的

riywoさんの「Perlでssh tail -fして目的の行が来たら終了する」に便乗するコネタ。 ログをtailしながら(ほぼ)リアルタイムで解析していくworkerの処理がどれくらい遅延しているのか確認して、それをgrowthforecastでグラフ化したいなと思ったので以下のようなスクリプトを書いてcronで実行しているよという話 #!/usr/bin/perl use strict; us... 続きを読む

「Hello, Worker」 - KEI feat.巡音ルカ ‐ ニコニコ動画(原宿)

2011/09/01 32 users KEI Hello 原宿 巡音ルカ ニコニコ動画

働きたくないけど働かなきゃいけなかったり、働きたいのに働けなかったり。■music / KEIマイリスト→ mylist/5113852ブログ→ http://homingecho.blog84.fc2.com/twitterID→ homing_echo■オフボーカル音源→ http://homingecho.com/★9/4(日)開催のボーマス17参加します配置：【A63】　サークル名：【HO... 続きを読む

Node v0.5.0ででたforkを試してみる - ぽりぴぃすらいと

2011/07/08 7 users fork arguments options require

プログラム, node | 08:39 | require('child_process').forkはWorkerと同じAPIを使っているぽいです。 fork APIの定義 var worker = require('child_process').fork(modulePath, arguments, options); argumentsh: 配列で、生成された子プロセス側ではprocess... 続きを読む

Webアプリケーションにおける Job Queue システムの構成例と Worker を作る際に気をつけること - blog.nomadscafe.jp

2011/06/06 212 users 直列 MySQL キュー アプリケーション データベース

Webアプリケーション内で処理を直列に実行せずにJob Queueに回して非同期に実行することが多くなって来て久しいと思いますが、そのおすすめ構成と気をつけることについてつらつらと。 1) 既存のデータベースをキューとして使う構成例 １つ目はMySQLなどのデータベースをキューとして用いる例。既にアプリケーションで利用しているデータベースにキュー用のテーブルを作成して利用します。データベースを利用... 続きを読む