Windows上でユニコードを「見る」方法

2024/05/12 120 users ユニコード エンコー unicode ユニコード文字 フォント

Windowsでは、文字コードに「ユニコード」を使う。Windowsに搭載されているフォントはさまざまあるが、ユニコード文字を表示できるように、多数の文字の形が組み込まれている。 今回は、Windowsでユニコードを“見る”方法について解説する。なお、WindowsではUTF-16LEエンコードをUnicodeと表記する。ここでは、エンコー... 続きを読む

ZawgyiとUnicode: ミャンマーの文字の電子化について - にせねこメモ

2023/12/19 108 users unicode 混迷 ミャンマー にせねこメモ ビルマ語

まえがき ミャンマーでは公用語としてビルマ語が使われている。ビルマ語の表記にはビルマ文字を用いるのだが、このビルマ文字のインターネット上での使用は、混迷を極めていた。そしておそらく今もまだ…。なぜか？ それは、Unicodeという文字コードの標準がありながら、Zawgyiというものが広く使われていたためである。... 続きを読む

全ての開発者が知っておくべきUnicodeについての最低限の知識

2023/10/04 470 users unicode プレーンテキスト 解読 最低限 おかげ

2003年には「プレーンテキストなんてものは全く存在しない」と言われ、テキストの解読には文字コードの情報が必須となっていました。しかし、2023年になるまでの20年の間に絵文字などのおかげでUnicodeの利用率は98％へと到達し、再び文字コードを気にせずにすむ時代がやってきています。そんな時代において、正しくUnic... 続きを読む

話題の「Telnet」電子公告、「平文やんけ」という指摘に応えて「over SSL」版を追加／文字コードも「UTF-8」に、ただし超長文の反論付き【やじうまの杜】

2023/09/06 182 users Telnet やじうま UTF-8 電子公告 指摘

続きを読む

文字コード | 衆議院議員 河野太郎公式サイト

2023/05/10 1031 users

2023.05.10 官報に使われる「官報文字」というものがあります。 そこには渡辺さんの「辺」の異体字が１４０文字も登録されています。 日本語の常用漢字には２１３６文字ありますが、そこには邉や邊などは入っていません。 そこでＪＩＳの第四水準までを含むJIS X 0213という標準を定め、スマホやパソコンではここまでを... 続きを読む

JavaScript における文字コードの初歩 - 30歳からのプログラミング

2022/10/23 137 users 初歩 プログラミング サロゲートペア JavaScript

この記事では、 JavaScript で文字コードを扱う際に知っておくべき概念である Code Point や Code Unit、サロゲートペア、といったものについて説明していく。 また、具体的にそれらの概念を使ってどのようにコードを書いていくのかについても扱う。 この記事に出てくるコードの動作確認は以下の環境で行った。 Deno 1.2... 続きを読む

「HTMLでは環境依存文字（①や©など）を文字参照にしなければいけない」という誤解と、本当に置換すべき文字

2022/10/21 150 users 誤解 HTML UTF-8 特殊記号 ソフトウェア

HTMLファイルで特殊記号を使う際、① は ①、© は © のように置き換えて書かないといけないものだと思いこんでいないでしょうか。 現代ではそれは誤解です。 UTF-8では特殊記号の文字参照は不要 そもそも環境依存文字とは、データを扱う機種・ソフトウェアなどの違い（文字コードの割り当ての違い）により表示... 続きを読む

「ASCIIをUTF-8にして」それが『できない』ことを理解してもらえなかった話 - Qiita

2021/04/03 190 users 発端 Shift_JIS 拙者 Qiita ASCII

物語の始まり 事の発端は納品後。 先方からメッセージが届きました。 クライアント様「このファイルの文字コードがShift_JISになっておりますので、UTF-8で再納品をお願いいたします。」 拙者（あれ…UTF-8にしてたと思うんだけどな） 拙者「確認いたします。」 文字コードを確認する 本案件はいわゆる更新案件で、今回の... 続きを読む

「ASCIIをUTF-8にして」それが『できない』ことを理解してもらえなかった話 - Qiita

2021/04/03 539 users 発端 Shift_JIS 拙者 Qiita ASCII

物語の始まり 事の発端は納品後。 先方からメッセージが届きました。 クライアント様「このファイルの文字コードがShift_JISになっておりますので、UTF-8で再納品をお願いいたします。」 拙者（あれ…UTF-8にしてたと思うんだけどな） 拙者「確認いたします。」 文字コードを確認する 本案件はいわゆる更新案件で、今回の... 続きを読む

新元号「令和」と文字コード(主にUnicode)の問題 - Togetter

2019/04/01 328 users 事例 ケース Togetter unicode ところ

年号扱うシステムを運用しているところは、これから30日でテスト完了させなきゃいけないわけだけど、U+F9A8 U+548C (令和) のケースと、U+4EE4 U+548C (令和) のケースがあるみたいなのを想定していなかった…って事例はなんかすごくありそう。大丈夫かなぁ… 続きを読む

char8_tによせて - なるせにっき

2018/12/23 102 users せにっき グリフ Glyph 字形 字体

C++標準化委員会、ついに文字とは何かを理解する: char8_tという記事が話題だってので、つらつらと書いてみました。 「グリフ」について グリフ（glyph）という言葉の定義をめぐって でも触れられていますが、「グリフ」という言葉が「字体」を指すのか「字形」を指すのかってのは議論がありますね。文字コードの文脈で... 続きを読む

デイリーポータルZシステム移行インタビュー :: デイリーポータルZ

2018/11/09 233 users デイリーポータルZ デイリーポータ 総とっかえ ドメイン移転

こんにちは、編集部 石川です。 さる10/16、デイリーポータルZは裏側のシステムが総とっかえになりまして、現在あたらしいシステムの上で動いております。単なるシステム移行ではなく、15000本ほどの記事以降、ドメイン移転に文字コードの変更、SSL化など一気に実装した大手術でした。 くわしくはこちら⇒ デイリーポータ... 続きを読む

ㇹ゚ン゚'ㇳ̃ヴ゙ニ゙コ゚ヮヰ文̂字̠コ゚−ト゚ノ゙ㇵナ゚ㇱ(現在に至るまでの文字コードの軌跡と簡単な使い方について) - へっぽこびんぼう野郎のnewbie日記

2018/04/28 341 users びんぼう野郎 焼き直し newbie日記 深淵 軌跡

はじめに 社内の勉強会で発表した文字コードの話の焼き直しです。ところどころ適当なので話半分に読んでもらえると助かります。 これ以上闇の深さを知りたくないと思って、深淵に辿り着く前に文字コードの勉強を打ち切っています。文字コードの専門家でもないので雑です。 調査が甘いので間違ってることも多々あるかもし... 続きを読む

シフトJISを使い続ける上場企業をまとめてみた - megamouthの葬列

2017/10/19 389 users リテラル srad.jp megamouth UTF-8 ダコ

2017 - 10 - 20 シフトJISを使い続ける上場企業をまとめてみた srad.jp こういうニュースがあった。世界のWebサイトの90％が utf-8 を使用している、という。 昔、 シフトJIS で エンコード された PHP ファイルを編集させられた時、「表示」が表示できず（文字通りの意味である）バイナリ リテラル を書いてい たこ とを思い出す。 文字コード 断絶の歴史を乗り越え、... 続きを読む

MySQLの日本語コレーション - @tmtms のメモ

2017/06/19 217 users tmtms スライド MySQL メモ MySQL 8.0

2017 - 06 - 19 MySQLの日本語コレーション MySQL 4月にMySQLの日本語コレーションについて語り合う場に呼ばれていろいろ話を聞いてきました。すぐにブログを書こうと思ったんですが、はや2ヶ月経過…。 ときどき、自分がMySQLの文字コードに関して発表する際に、次のようなスライドをいれてるんですが、 MySQL 8.0 でとうとう日本語コレーションが入ることになったのに、なん... 続きを読む

macOS上のAPFSはUnicode Normalizationを行うのか? - なるせにっき

2017/03/28 142 users APFS MacOS 暗黙 HFS+ 界隈

2017 - 03 - 28 macOS上のAPFSはUnicode Normalizationを行うのか? iOS 10 .3がリリースされましたが、APFSへの移行が含まれていて話題です。特に 文字コード 界隈ではHFS+で搭載されていた暗黙の Unicode Normalizationがなくなっている点が指摘されています 1 。 では macOS ではどうなのでしょうか。Sierraならばす... 続きを読む

JavaScript における文字コードと「文字数」の数え方 | blog.jxck.io

2017/03/02 740 users jxck.io 数え方 JavaScript 文字数 UTF

created_at: 2017-03-02 updated_at: 2017-03-02 tags: [ utf-16 , unicode , javascript ] Intro <textarea> などに入力された文字数を、 JS で数えたい場合がある。 ここで .length を数えるだけではダメな理由は、文字コードや JS の内部表現の話を理解する必要がある。 多言語や絵文字対応なども... 続きを読む

MySQL で utf8 と utf8mb4 の混在で起きること - tmtms のメモ

2016/09/06 471 users tmtms MySQ MySQL 混在 utf8mb

2016 - 09 - 06 MySQL で utf8 と utf8mb4 の混在で起きること MySQL MySQL を UTF-8 で使おうと思ってハマりがちなのは charset utf8 を指定してしまうことです。 MySQL の UTF-8 には歴史的事情により utf8 と utf8mb4 の二つあります。 UTF-8 は1バイト〜4バイトで1文字が構成される文字コードですが、MySQ... 続きを読む

ASCIIコードの秘密 - ザリガニが見ていた...。

2015/02/09 512 users ザリガニ ASCIIコード エスケープシーケンス コマンド

コマンド, 雑記本当はエスケープシーケンスのことを調べていたのだが、その前にASCIIコードについて調べることになってしまった...。文字コードの基本として知っているつもりだったASCIIコードについて、あらためて見直してみると、実は本当の意味をよく分かっていなかったことに気づいた。ASCIIコード表ASCIIコードは、7ビット（2進数7桁）の文字コードであり、全部で128のコードが定義されている... 続きを読む

README のファイル名が大文字である理由 - clock-up-blog

2014/05/09 432 users README README.md GitHub 大文字 慣習

2014-05-08 README のファイル名が大文字である理由 慣習 文字コード README のファイル名は慣習的にすべて大文字（であることが多い） GitHub でプロジェクトを作るときに README を作成するオプションを入れておくと、README.md というファイルができる。それ以外の場所のプロジェクトでも README.txt や README など、ファイル名がすべて大文字にな... 続きを読む

アップル、絵文字の「多様性」拡充を求めてUnicode標準化団体と協議中 - Engadget Japanese

2014/03/26 204 users 拡充 Engadget Japanese アップル 多様性

アップル、絵文字の「多様性」拡充を求めてUnicode標準化団体と協議中 By Ittousai posted 2014年03月27日 00時15分 0 英語圏でもそのまま「Emoji」で通じるものの、ほとんどの人は「エモーション」もしくは「Emoticon」(顔文字:) から来た言葉だと思っている絵文字の話題。アップルが絵文字の「多様性」を拡充するため、絵文字を含む文字コードの規格化調整団体 U... 続きを読む

文字コードの脆弱性はこの3年間でどの程度対策されたか?

2014/02/25 299 users 脆弱性 ３年間 KCCS 徳丸 転籍

文字コードの脆弱性はこの3年間でどの程度対策されたか? Presentation Transcript 文字コードの脆弱性は この3年間でどの程度対策された か? 2014年2月19日 徳丸 浩 徳丸浩の自己紹介 • 経歴 – 1985年 京セラ株式会社入社 – 1995年 京セラコミュニケーションシステム株式会社(KCCS)に出向・転籍 – 2008年 KCCS退職、HASHコンサルティング株式... 続きを読む

【レビュー】ExcelのCSVインポート・エクスポート機能を強化する「Excel CSV I/O」 - 窓の杜

2014/02/14 383 users Excel CSVファイル 数値 標準 文字列

レビュー ExcelのCSVインポート・エクスポート機能を強化する「Excel CSV I/O」 数値を文字列として扱い、文字コードや区切り文字の指定も可能 （2014/2/14 10:27） 「Excel CSV I/O」v1.1 「Excel CSV I/O」は、CSVファイルのインポート・エクスポート機能を強化するExcel用アドイン。標準のインポート・エクスポート機能で気になる数値の扱いや... 続きを読む

ssh接続先の文字コードが接続元と違うときの対処法 - 文字っぽいの。

2013/12/15 159 users 接続元 文字っぽい 対処法 lang EUC-JP

2013-12-15 ssh接続先の文字コードが接続元と違うときの対処法 問題 自分の環境：UTF-8 SSH接続先：EUC-JP とかよくありますね。 $ export LANG=eucJP とか $ export LANG=ja_JP.UTF-8 してあげてもいいんですが、わざわざやるのも面倒ですし、「ログイン先とこっちのどっちで設定するといいんだ？」みたいに悩みます。 解決法 cocotとい... 続きを読む

UTF-8にもいろいろある - ザリガニが見ていた...。

2013/11/24 398 users ザリガニ UTF-8 ロケール ターミナル 改行コード

コマンド前回からの続き。改行コードの違いを体感してみる - ザリガニが見ていた...。文字エンコードとロケールを体感する - ザリガニが見ていた...。改行コードの違いも知った。文字コードとロケール、ターミナルの言語環境との関係も知った。これで文字にまつわる悩みとはおさらばできると思ったら、まだダメだった...。実験環境OSX 10.8 Mountain Lion以前*1ターミナル 言語環境：Un... 続きを読む