Go言語でag(The Silver Searcher)ライクな高速検索ツールをつくった。EUC-JP/Shift-JISも検索できマス。 - Thinking-megane

2014/01/16 293 users Thinking-megane Shift-JIS 改造

いまや高速パターン検索といえばag(The Silver Searcher)ですが、検索対象がUTF-8のテキストを前提としているため、EUC-JPやShift-JISといったファイルを検索するのに課題があります。 これまで、それらの日本語文字セットを検索できるようにするため、色々とagの改造、公開を行っていました。 ag(The Silver Searcher)でEUC-JP/Shift-JIS... 続きを読む

ssh接続先の文字コードが接続元と違うときの対処法 - 文字っぽいの。

2013/12/15 159 users 接続元 文字っぽい 文字コード 対処法 lang

2013-12-15 ssh接続先の文字コードが接続元と違うときの対処法 問題 自分の環境：UTF-8 SSH接続先：EUC-JP とかよくありますね。 $ export LANG=eucJP とか $ export LANG=ja_JP.UTF-8 してあげてもいいんですが、わざわざやるのも面倒ですし、「ログイン先とこっちのどっちで設定するといいんだ？」みたいに悩みます。 解決法 cocotとい... 続きを読む

日本語圏特化型ag -白金- の配備が完了しました - Thinking-megane

2013/09/24 45 users Thinking-megane 鳴り物入り 白金 配備 戦線

かねてより開発を続けていたパターンマッチ検索sg (日本語圏特化型ag) の配備が完了したので、その経緯と仕様を以下に記す。 開発経緯 パターンマッチ戦線に鳴り物入りで配備されたUTF8連合の誇るagだったが、極東戦線において、旧式日本語文字セットを散りばめ潜伏するEUC-JP/Shift-JIS軍の極東迷彩の前に、その索敵機能を充分に発揮できないことが判明するや一気に劣勢化。戦線から離脱しつつあ... 続きを読む

AquaSKK を使いはじめたあなたが設定すべきたった一つの変換ルールｗｗｗ - NaN days - subtech

2011/05/27 25 users subtech AquaSKK ｗz library 規則

~/Library/Application Support/AquaSKK/zw.rule に euc-jp で zw,ｗ,ｗ,zw,z という内容のファイルを保存し、[環境設定]→[かな規則] から zw.rule にチェックを入れる。(うまく効かない場合は AquaSKK のプロセスを殺すといいらしいです by cho45) こう設定しておくと zw と入力したときに ｗz (z は未確定) ... 続きを読む

いろんな日本語EUCについてのまとめ - Mac OS Xの文字コード問題に関するメモ

2011/03/31 88 users メモ まとめ - Mac OS X 文字コード問題 IANA

日本語EUC（EUC-JP）にはいろいろあって頭がこんがらがってきたので、サルにもわかるように（つまり、自分があとから見て理解できるように）まとめてみた*1。まず、EUC-JPにはどんな種類があるのだろうということで、わたしの環境で実装例を確認できるものをピックアップしてみた。下図のうちeucJP-openとIANAのEUC-JPについては身近な実装例を思いつかなかったが、これを外すわけにはいかな... 続きを読む

文字コード（UTF-8,Shift_JIS,EUC-JP,ISO-2022-JP）についての俺的まとめ - 今日もスミマセン。

2010/07/10 1081 users ザックリ すみません iso-2022-jp ベース 文字集合

「文字コード技術入門」を読んで自分なりに理解した点をザックリとまとめてみる。それほど正確性を求めて書いているわけではないので、間違ってる可能性大です。間違いなどあればコメントなど頂けるとありがたいです。 それぞれの文字コードはどう違うのか？日本語の文字コードは大きく以下の２つに分けられる JIS X 0208 文字集合をベースにしたもの Unicode文字集合をベースにしたものJIS X 0208... 続きを読む

プログラマのための文字コード技術入門を読んだ 2010-02-14 - 未来のいつか/hyoshiokの日記

2010/02/14 268 users hyoshiok サロゲートペア プログラマ SJIS UTF

例えば、次の言葉の意味を知りたい、聞いたことがあるけどよく分かっていないプログラマにとって、お勧めの書籍だ。Unicode/UTF-8/UTF-16/USC-2/JIS X0208/JIS X0212/JIS X0213/SJIS/EUC-JP/CP932/ISO-2022-JP/ASCII/Latin-1/ISO 10646/ISO 8859-1/サロゲートペア/文字化け/機種依存文字/半角カナ... 続きを読む

Mac OSX x zsh で日本語表示 & 入力 : Hasta Pronto.org

2006/10/02 143 users Mac OSX xterm 入力 日本語表示 zsh

散々悩んだんですが、Mac で zsh を使って日本語を表示 & 入力が出来るようになりました。zsh はバージョン 4.3 から UTF-8 に対応したとのことなので、とりあえず使ってみることにします。あと断っておきますが、Mac OSX のデフォルトの TERM は xterm なので EUC-JP じゃないと日本語を表示することはできません。ですのでここでは Screen を使うことを前提に... 続きを読む

シフトJIS / EUC-JPとUnicodeとの妥当な変換表: Netsphere Laboratories

2005/08/04 330 users unicode 加筆 Linux シフトJIS コンピュータ

2004.10.17 新規作成。2004.12.19 加筆。2005.04.02加筆。 最近、コンピュータで扱う文字列の文字コードがUnicodeでなければならない場面が増えてきた。UnicodeとシフトJIS、EUC-JPを変換する機会が多い。この変換は変換表で行うが、変換表が実際的なものでなければ、文字化けが発生することになる。 おかしな変換表は、これまでは、特にLinuxなどの上で動作するオ... 続きを読む

日本語処理・携帯絵文字処理関係のperlモジュール

2005/07/05 73 users CGI Kawa.netxp perlモジュール utf8

Kawa.netxp 日本語処理・携帯絵文字処理関係のPerlモジュール 日本語を含む多言語処理(主にUTF8、Shift_JIS、ISO-2022-JP。 その他にLatin1、EUC-JP、EUC-KR、Big5、GB2310などにも対応)や、 DoCoMo・SoftBank・au に対応した携帯絵文字処理関連のモジュール群です。 CGIparamJP.pm - CGI.pmのクエリ中の日本語... 続きを読む

多国語で書けるブログはどこ？ブログ124サービス【文字コード】全チェック [絵文録ことのは]2005/05/09

2005/05/11 52 users 絵文録こと 文字コード Shift-JIS CGI UTF-8

現在の日本のウェブサイトには、主要な文字コードが３種類ある。Shift-JIS、EUC-JP、そしてUTF-8である。 今までページ作成といえばShift-JISがメイン、CGIなどのスクリプトを使う場合はEUC-JPがメイン、という流れであったが、最近はUTF-8が勢力を伸ばしてきた。このブログもそうであるが、これは多国語を同時に扱える文字コードなのである。Shift-JISもEUC-JPも日本... 続きを読む