ファイルアップロードではNFC/NFD問題に気をつけろ！~MacファイルシステムにおけるUnicode正規化の闇~

2023/08/29 21 users ＮＦＣ NFD 半濁音 NFD問題 UTF-8

NFCではそのまま「パ」として表されますが、NFDでは「ハ」（基底文字）と「゜」（結合文字）の組み合わせとしての「パ(UTF-8でe3 83 8f e3 82 9a)」（合成文字）で表されます。試しにNFDで正規化された「パ(e3 83 8f e3 82 9a)」を任意のテキストエリアに貼り付けて削除してみると、半濁音のみが取れて「ハ」のみになる... 続きを読む

文字コード再入門 ─ Unicodeでのサロゲートペア、結合文字、正規化、書記素クラスタを理解しよう！ - エンジニアHub｜若手Webエンジニアのキャリアを考える！

2020/04/28 358 users サロゲートペア unicode エンジニアHub キャリア

ソフトウェア開発に携わる方の多くは、何らかの形で文字コードに触れることがあるでしょう。文字や記号をコンピュータ上でデータとして扱うには、文字コードの知識が必要不可欠です。 本稿では、書籍『プログラマのための文字コード技術入門』の著者である矢野啓介さんが、知っておきたい基礎知識を分かりやすく解説しま... 続きを読む

お前ら、最強のテキストエディターは「Mery」で異論はないよな？

2013/03/22 63 users テキストエディター IVS Mery 異論 ネイティブ

テキストエディター「Mery」v2.1.4.4600が公開、Windows 7/8にネイティブ対応 結合文字やIVSの描画ロジックを見直し フリーの高機能テキストエディター「Mery」の最新版v2.1.4.4600が、20日に公開された。本バージョンでの主な変更点は、Windows 7/8にネイティブ対応したこと。 また、結合文字およびIVSの描画ロジックが見直されたほか、ネットワーク上のファイル... 続きを読む