タグ「unicode」 - はてブログ

タグ unicode

新着順人気順 5 users 10 users 50 users 100 users 500 users 1000 users

(1 - 25 / 41件)

次の25件 »

Googleが変体仮名フォント「Noto Hentaigana」をリリース～蕎麦屋の看板などを再現可能／Unicodeに登録されている変体仮名286文字をカバー

2024/04/03 266 users 再現看板リリースカバー蕎麦屋

ZawgyiとUnicode: ミャンマーの文字の電子化について - にせねこメモ

2023/12/19 108 users 混迷ミャンマーにせねこメモビルマ語公用語

まえがきミャンマーでは公用語としてビルマ語が使われている。ビルマ語の表記にはビルマ文字を用いるのだが、このビルマ文字のインターネット上での使用は、混迷を極めていた。そしておそらく今もまだ…。なぜか？それは、Unicodeという文字コードの標準がありながら、Zawgyiというものが広く使われていたためである。... 続きを読む

「Tera Term 5.0」がリリース～18年ぶりのメジャーバージョンでUnicodeに全面対応／来年で30周年を迎える老舗のリモートログオンクライアント

2023/10/16 210 users リモートログオンクライアント Tera Term 老舗来年

全ての開発者が知っておくべきUnicodeについての最低限の知識

2023/10/04 470 users プレーンテキスト解読最低限おかげ知識

2003年には「プレーンテキストなんてものは全く存在しない」と言われ、テキストの解読には文字コードの情報が必須となっていました。しかし、2023年になるまでの20年の間に絵文字などのおかげでUnicodeの利用率は98％へと到達し、再び文字コードを気にせずにすむ時代がやってきています。そんな時代において、正しくUnic... 続きを読む

awkが新しくなる！？本家AwkがUnicode (UTF-8)とCSV対応に！ - Qiita

2023/09/16 147 users awk Qiita UTF-8 CSV Excel

はじめに 2023年、長い時を経て awk がとうとう Unicode (UTF-8) と CSV に対応しました 🎉🎉🎉 awk で日本語がうまく扱えない（場合がある）、Excel が出力する CSV ファイルが扱えない（場合がある）、といった問題が解決に向けて一歩に進みます。去年、本家 awk (One True Awk, nawk) に Unicode サポートが Brian K... 続きを読む

PHPからJavaScriptにデータを受け渡すときに考えること - Qiita

2023/01/01 123 users Qiita String Array JSON int

PHPのstringは任意のバイト列を扱えますが、JavaScript/JSONはUnicodeで扱える文字しか扱えません PHPのint / floatはプラットフォーム依存ですが、JavaScriptのnumberは整数と小数を型レベルで区別しません JSONのarrayに対応する型はPHPのarrayのうちリストであるものです PHPは配列(リスト)と連想配列を型レベルで区... 続きを読む

Slackはハイライト部分をU+E000とU+E001で囲って表していそう - hogashi.*

2022/10/06 164 users hogashi Description Glitch

Slack は、メッセージのどこからどこまでハイライトするかを、 Unicode の私用領域 *1の U+E000 と U+E001 を使って表しているらしく、こういう HTML を glitch とかで書いて、 <html> <head> <meta property="og:title" content="Slackでタイトルをハイライトする" /> <meta property="og:description"... 続きを読む

Unicode 版美乳テーブルを探せ

2021/04/03 357 users

美乳テーブルとは「美乳テーブル」という物がある。「EUC-JP の文章を Shift_JIS だと誤認識されない様に、EUC-JP 固有のバイト値を文章先頭付近に埋め込んでおく」という物。具体的に、Shift_JIS には 0xFD と 0xFE が現れず、EUC-JP にはそれが現れるので、その値を含む文字コードを書いておこうという事で、その文... 続きを読む

文字コード再入門 ─ Unicodeでのサロゲートペア、結合文字、正規化、書記素クラスタを理解しよう！ - エンジニアHub｜若手Webエンジニアのキャリアを考える！

2020/04/28 358 users サロゲートペアエンジニアHub 結合文字キャリア正規化

ソフトウェア開発に携わる方の多くは、何らかの形で文字コードに触れることがあるでしょう。文字や記号をコンピュータ上でデータとして扱うには、文字コードの知識が必要不可欠です。本稿では、書籍『プログラマのための文字コード技術入門』の著者である矢野啓介さんが、知っておきたい基礎知識を分かりやすく解説しま... 続きを読む

年号扱うシステムを運用しているところは、これから30日でテスト完了させなきゃいけないわけだけど、U+F9A8 U+548C (令和) のケースと、U+4EE4 U+548C (令和) のケースがあるみたいなのを想定していなかった…って事例はなんかすごくありそう。大丈夫かなぁ… 続きを読む

Unicode 12.0正式版が登場。日本語では小文字の「ゐ」「ゑ」「を」「ヰ」「ヱ」「ヲ」「ン」が追加。新元号が発表され次第、次の12.1で新元号キャラクタを追加－ Publickey

2019/03/06 218 users Publickey script 小文字言語新元号

Unicode 12では4つの言語（script）、554種類の文字が追加されました。これによりUnicodeに収録されている言語は150、文字は13万7292種類になりました。追加された文字には日本語の文字が7種類、小さな文字としての「ゐ」「ゑ」「を」「ヰ」「ヱ」「ヲ」「ン」が含まれています（通常の大きさの文字は以前からありまし... 続きを読む

円城塔「文字渦」は編集・営業・DTP・印刷、全ての人が泡吹いて死ぬ本→「電子化不可」「読者の限界が試される」「校閲者の気が狂う」と阿鼻叫喚 - Togetter

2018/08/15 493 users 揚げ足 Togetter int 阿鼻叫喚起源

文字の起源から未来をファンタジーで綴るという触れ込みなんですが、フックが弱そうなので補足情報として「日本語の揚げ足をとる」作家、円城塔の本気の「ことば遊び」｜WIRED.jp wired.jp/2015/12/28/int… Unicodeに縛られてるぞ人類、みたいな話続きを読む

絵文字がある種のUnicodeバグを世界から一掃しつつある件について｜Rui Ueyama｜note

2017/11/13 1446 users Rui Ueyama Note UTF 絵文字プログラム

UnicodeのUTF-16エンコーディングではほとんどの文字（コードポイント）は2バイトで表現されるが、Unicodeに後から追加収録された文字の多くは4バイトで表現される。4バイト文字がうまく扱えないプログラムというのはわりとよくある。しかし世界中で広く使われるようになった絵文字がよりによって4バイト文字であるせいで、そのような文字が扱えない問題がよいペースで解決に向かいつつある。それについて... 続きを読む

MySQL 8.0ではデフォルトで濁点半濁点を区別しなくなる - かみぽわーる

2017/06/21 351 users かみぽわーデフォルト懸念 MySQL 8.0 かなり

2017 - 06 - 22 MySQL 8.0ではデフォルトで濁点半濁点を区別しなくなる 4月に MySQL 8.0の Unicode と日本語対応についてManyi Luさんとディスカッションする会があって、かなりいろいろ話してとてもよい会だった。その後いろいろ考えて感じてる懸念を端的に書き記しておく。デフォルトのcollationがutf8mb4_0900_ai_ciになったこれに関して... 続きを読む

「ユニコード」で予期せぬ目に遭った話 - moriyoshiの日記

2017/03/12 703 users ユニコード moriyoshi moriyoshit 反響

2017 - 03 - 13 「ユニコード」で予期せぬ目に遭った話 unicode 自分の知らないCJK Ideographのバリエーションがまだあったことに戦慄している pic.twitter.com/kUlyRLDDTM — moriyoshit (@moriyoshit) March 9, 2017 などというツイートをしたところ、思ったより反響があったのでまとめておく。上記ではあいまいに... 続きを読む

Python 3誕生の理由　― つまり、なぜunicode/str/bytesの仕様は変更されたのか | プログラミング | POSTD

2016/01/26 283 users bytes puppy POSTD str Group

このブログの記事で、Python 3が存在する理由をわかりやすく説明します。後方互換性の全くないunicode/str/bytesの仕様変更は、Python 3のコードの移植の中でも本当に難解な部分ですので、私たちがその仕様変更を選択した理由を特に説明します。12月、私は PuPPy(the Puget Sound Python users group)の会合でQ&A セッションを行いました。そ... 続きを読む

Unicodeにあるハイフン/マイナス/長音符/波線/チルダのコレクション | hydroculのメモ

2015/06/09 182 users チルダ罫線長音記号カタカナ長音符

Unicodeにあるハイフン/マイナス/長音符/波線/チルダのコレクション 2014/11/08 Unicodeにある文字の中からハイフンのような横棒と波線を集めてみました。複数あるのはわかっていたつもりでしたが、こんなにたくさんあるとは思いませんでした。横線に関しては、ハイフンや長音符(カタカナの長音記号)、罫線など、線が横に延びているものです。縦方向や斜めの線は除きます。ほとんど横線だけどほ... 続きを読む

UnicodeのWAVE DASH例示字形が、25年ぶりに修正された理由 -INTERNET Watch

2015/03/07 660 users コロンボスリランカ INTERNET Watch 反対会議

特別企画 UnicodeのWAVE DASH例示字形が、25年ぶりに修正された理由（2015/3/7 10:00）はじめに 2014年9月29日から10月3日にかけて、スリランカのコロンボで国際文字コード規格を審議するWG2会議が開催された。この会議において、WAVE DASH（符号位置U+301C）の例示字形を変更をする提案、文書番号「N4606」[*1]（図1）が審議され、特に反対が出ない... 続きを読む

PHP7の現状 | yohgaki's blog

2015/01/26 232 users yohgaki's blog 現状 PHP7 PHP 多く

PHP7が今年の秋リリースされる予定です。まだまだ多くの変更が行われる予定ですが、現状を簡単にまとめてみたいと思います。代表的な物のみ取り上げています。ご存知ない方の為に書いておきます。現在リリースされているPHPはPHP5です。次のPHPはPHP7になり、PHP6はリリースされません。PHP6をUnicodeをネイティブ文字列としてサポートするバージョンとして開発されましたが、文字エンコーディ... 続きを読む

Twitter、872個の絵文字をオープンソース化 - ITmedia ニュース

2014/11/07 185 users Twitter チャットサービス GitHub iOS 無償

米Twitterが絵文字をオープンソース化し、GitHubでソースコードを無償公開した。Web版で使用している、Unicodeで規定された872個の絵文字を利用できる。日本のフィーチャーフォン文化に端を発する絵文字は、UnicodeによるサポートとiOSへの標準搭載などがきっかけに世界中で使われるようになっている。英語圏では絵文字だけのチャットサービス、SNSなども登場している。 Unicode... 続きを読む

「絵文字に平等をサポートしてください」人種差別の指摘にゆれるUnicode -INTERNET Watch

2014/10/07 630 users コロンボスリランカ ISO 改訂人種差別

特別企画「絵文字に平等をサポートしてください」人種差別の指摘にゆれるUnicode （2014/10/7 12:00）なにが問題になったのか 2014年9月29日から10月3日にかけて、スリランカのコロンボを会場にして、公的な文字コード国際規格「ISO/IEC 10646」の改訂を審議する国際会議（以下、コロンボ会議）が開催された。現在、我々が使うスマートフォン、タブレット端末、パソコン等は... 続きを読む

文字コード地獄秘話第1話：Unicodeにおける全角・半角 - ALBERT Engineering Blog

2014/04/21 660 users ALBERT 統廃合技量最初特技

ごあいさつ皆様はじめまして、文字コードおじさんです。細々とカメラ屋を営んでおりましたが、エンジニアとしての技量を評価され、ALBERTのシステム開発・コンサルティング部で働くことを許されました。特技はサーバーの統廃合です。今回は最初ということですが、Unicodeにおける全角・半角の取り扱いについて触れてみようと思います。なお、さも連載するかのように第1話と銘打っていますが、上層部の無慈悲な裁... 続きを読む

Unicodeを斬りたい - Yahoo! JAPAN Tech Blog

2014/04/16 284 users UTF-8 UTF-16 モチベーション文字符号化方式文字

ここではUTF-8をあげましたが、もちろんこれ以外にもUnicodeを実現する文字符号化方式はあります。（UTF-16とかUTF-32など）大事なことはこれらが「世界中にあるすべての文字を一つの一貫した方法で表現したい」というモチベーションに基いて定義されたということです。なんとも壮大で夢のある話ですね。 UTF-8とは？　私はWeb屋さんなのでUTF-8をよく見ます。実際今回の自分の開発してい... 続きを読む