公開日
最終更新
記事区分
日本語を含む実用上すべての文字は Unicode 表記できます。例を示します。
- 'あ' → \u3042
- '日' → \u65e5
- '本' → \u672c
- '語' → \u8a9e
Unicode 表記ではすべての文字を対等に扱います。そうではなく文字の使用頻度に応じてバイト数を変動させることによって、文字の集合である文章全体のバイト数を小さくできます。Shift_JIS は日本語の文字に小さなバイト数の符号を対応させています。UTF-8 は Web などで一般的な符号化方式です。ファイルに保存された文字は何らかの符号化方式でエンコーディングされています。これを ASCII 文字の範囲外についてその符号化方式でデコードして Unicode 表記に変換するコマンドが native2ascii です。JDK に含まれています。
ori.txt (UTF-8, 改行コードは DOS)
あ
ABCDE
日本語
デコーディングするためのコマンド実行例
$ native2ascii -encoding UTF-8 ori.txt ascii.txt
ascii.txt
\u3042
ABCDE
\u65e5\u672c\u8a9e
これを再度 Shift_JIS, UTF-8 でエンコーディングしてみます。
$ native2ascii -reverse -encoding Shift_JIS ascii.txt
$ native2ascii -reverse -encoding UTF-8 ascii.txt
あ
ABCDE
日本語
ターミナルのエンコーディング設定によって少なくともどちらかが文字化けするはずです。
0
学生（？）エンジニア
記事の執筆者にステッカーを贈る
有益な情報に対するお礼として、またはコメント欄における質問への返答に対するお礼として、 記事の読者は、執筆者に有料のステッカーを贈ることができます。
さらに詳しく →
Feedbacks
ログインするとコメントを投稿できます。
関連記事
- Spring Security フォームログインのサンプルコードSpring フレームワークによる Web アプリケーション開発で、ログイン処理を実装する際は Spring Security が便利です。ここでは特に Spring Boot で Web アプリケーションを開発する場合を対象とし、フォームによる ID/Password ログインを行うためのサンプルコードをまとめます。 公式ドキュメント [Spring Security チュートリアル](http...
- Java配列の宣言方法 (C/C++との違い)Javaの配列 Javaの配列宣言方法はC/C++と似ているようで若干異なる。 初期化しない場合 C/C++の int array[10]; はJavaでは int array[] = new int[10]; となる。同様にC/C++の int array[3][3]; はJavaでは int array[][] = new int[3][3]; となる。 初期化
- PlantUML による UML 図の描き方
PlantUML はテキスト形式で表現されたシーケンス図やクラス図といった UML (Unified Modeling Language) 図の情報から画像を生成するためのツールです。簡単な使い方をまとめます。 インストール方法の選択 Atom や Eclipse のプラグインをインストールしてエディタから利用する方法、JAR をダウンロードして Java コマンドで実行する方法、Redmine ... - Akka HTTP サンプルコード (Scala)
Akka アクターを用いて実装された汎用 HTTP フレームワークです。Spray の後継です。コアモジュールである akka-http-core は 2016/2/17 に experimental が外れました。akka-http などのいくつかのサブモジュールは 2016/3/1 現在 experimental のままですが、基本的な - Kestrel の使用例Kestrel は Message Queue (MQ) の実装のひとつです。一般に MQ はアプリケーション間やプロセス間、スレッド間で非同期に通信するために用いられます。メッセージの送信側は MQ に書き込めば受信側の応答を待たずに次の処理に非同期に進むことができます。Kestrel はわずか 2500 行程の Scala で実装されており JVM で動作します。MQ 自体はメモリ上に存在する...
