【IT】コンピューターで全漢字使用可に 6万字コード化

1ノチラ ★2017/12/25(月) 04:50:46.68ID:CAP_USER
日本語の漢字は、戸籍などに使われているものも含めると6万字あるのに対し、コンピューターは、実は1万字しか扱うことができません。これに対し、このほど15年越しの作業の末、6万字すべてが統一の規格にまとめられて、コンピューターがすべての漢字を扱えるようになり、ビッグデータの活用をはじめさまざまな効果が期待されています。

コンピューターで文字を扱うには、1つ1つの文字に、「コード」と呼ばれる世界共通の番号を割りふる必要がありますが、日本語の漢字で、コードが割りふられているのは1万字だけで、コードが無く、コンピューターが扱えない「外字」は、戸籍で使われているものをはじめおよそ5万字に上っています。

中には、メーカーなどが独自に対応した外字もありますが、コードが無いために、メーカーごとの互換性が無く、データを受け渡してもコンピューターが認識できずに「文字化け」してしまったり、ある人の名前に本名の外字を充てたものと略字を充てたものの2つのデータがあった場合、コンピューター上では、別の人と認識されてしまったりするなどの問題が起きていました。

このためIPA=情報処理推進機構は平成14年から、経済産業省とともに外字を含めたおよそ6万字の漢字1つ1つに、コードを割りつける作業を進めた結果、このほど15年越しでようやく完了し、国際規格として登録されました。

この結果「日本語の壁」の1つが取り払われ、外字が使われた名前を正確に表示できたり、地名を含むビッグデータを正確に分析できたりするなどの効果が期待されています。

IPAの田代秀一参与は「日本人にとって、名前は大事なアイデンティティーで、戸籍では尊重されているがコンピューターが追いついていなかった。文字を正確に扱えるようにすることは、今後ますます重要になる」と話しています。

漢字とコンピューターのこれまで
戸籍で使われている文字のうち例えば「渡辺」の「ベ」は「辺」「邊」「邉」など11種類、「斉藤」や「斎藤」の「サイ」は「斉」「斎」「齊」「齋」などおよそ60種類ありますが、このうちコンピューターが扱えるのは「べ」は3文字、「サイ」は15文字ほどです。

また「吉田」の「ヨシ」のつくりが「土」になっている漢字も外字です。日本で初めて漢字のコードが作られたのは昭和53年のことで、当時はコンピューターの能力が低く大量のデータを扱えないことなどから登録された漢字は、およそ6000字でした。

その後、昭和54年に世界初の日本語ワープロが発売されるなど家庭や企業でパソコンが普及して、さまざまな漢字を扱う必要が出てきましたが、コードの整備は進まず、コードのない漢字は、それぞれのメーカーがばらばらに作っていました。

現在は、およそ1万字の漢字にコードが付いていますが、いまだに特定のソフトでなければ表示できない漢字もあり、対応が急がれていました。
企業や自治体も一苦労
外字の問題は、さまざまな企業だけでなく自治体の課題としても浮かび上がっています。

東京・表参道にある手紙用品店では、結婚式の招待状や席次表の印刷を手がけていて、名前に外字があった場合は、手書きで紙に書いてもらい、市販のソフトが対応しているかどうか調べています。

対応していない漢字は、作画ソフトを使って一画一画を手作業で書いていて、これまでにおよそ240字をこうした方法で対応したということです。

手紙用品店の吉澤まどかさんは「結婚式は、お祝い事なので、誤字脱字がないのはもちろんお名前の一画一画を大切にして間違いがないように心がけています」と話しています。

一方、福島県相馬市では、東日本大震災のあと、「り災証明書」の発行に必要な被災の状況を迅速に把握するため住民基本台帳にある名前や住所を電子地図に取り込もうとしました。

ところが、外字が含まれていたため、地図上で文字化けして黒い点になってしまい、手作業でのデータの修正を迫られたということです。
https://www3.nhk.or.jp/news/html/20171224/k10011270111000.html

285名刺は切らしておりまして2018/01/30(火) 13:37:56.76ID:DsLrd57d
>>5
もう対処済み
APFSではファイル名の変換は行われないようになった
あとは各アプリの対応待ち

286名刺は切らしておりまして2018/01/30(火) 17:02:59.10ID:bjje4zK2
>>1
> 「渡辺」の「ベ」は「辺」「邊」「邉」など11種類、

「なべ」じゃねーのかよww
じゃあ「渡」は「わたな」か?そんなバナナwwwww

287名刺は切らしておりまして2018/01/30(火) 18:57:26.13ID:zPW/2FUj
そんなことするとますます書けなくてもういいのか

288名刺は切らしておりまして2018/01/30(火) 20:46:10.28ID:s10CFqni
いまWin10にインストールというか
ダウンロードして解凍後に、
フォントフォルダーに明朝とゴシックの二つを放り込むだけで使えるようになった。

以下がダウンロードサイト。
https://ipafont.ipa.go.jp/node17

289名刺は切らしておりまして2018/01/30(火) 20:50:55.39ID:s10CFqni

290名刺は切らしておりまして2018/01/30(火) 20:56:26.65ID:o+MFd3Va
これ規格化されたのか。
まあそれは良いので、今後は無駄文字は使用禁止にしろよ

291名刺は切らしておりまして2018/01/30(火) 21:00:51.63ID:PSWeoeTi
>>288
それ入れてない環境だと文字化けするんだろばかばかしい
余計なものは使わないほうが良い

292名刺は切らしておりまして2018/01/30(火) 21:01:00.87ID:s10CFqni
>>289
わたべ、だ。わたなべ、じゃない。
インストール出来た気がしたけど、出来てなかったみたい。うーん残念。

293名刺は切らしておりまして2018/01/31(水) 13:29:24.34ID:fon3mWNy
>>15
> そもそも1/3ぐらいは誤字なんだから
> 元の正しい漢字に戻せばいいんだよ

ほんと、これ。
手書き時代は、単なる書体や個人の癖のバリエーションだったものまで、
「違う字」ということにして、自己満足以外のメリットがない。

上の方で「文化」とか言ってる奴がいるが、
文化は、書体(字体)の違いとしてやっていればいい。

294名刺は切らしておりまして2018/01/31(水) 13:40:28.61ID:SorTWyF8
Unicodeが使えない昔の機械だと常用漢字外は略字しか出ないってのも多い
手書きが難しい例えである「醤」だって「將」でなく「将」に「酉」なら何ら難しくもない

295名刺は切らしておりまして2018/01/31(水) 18:45:37.23ID:71T+moG0
>>293
コンピュータ上で書体(字体)の違いを扱うにはどうすればよいのでしょうか。
文化もコンピュータで扱いたいのだけど。

296名刺は切らしておりまして2018/01/31(水) 20:08:20.88ID:bJNNsRmn
新しい一太郎には入るのかね?

297名刺は切らしておりまして2018/01/31(水) 20:12:40.86ID:aBUP0RNO
>>293
どの字が書き間違いで、どの字が意図的なものなのかが、今さら遡りようがないだろう。

298名刺は切らしておりまして2018/01/31(水) 20:15:29.96ID:6WPwcNcZ
>>279
根本的に理解できてない
過去に電子化したデータがあれば
そこで使えた文字はどういうものだったかデータベース化しないといけない
戸籍が電子化された時点で>>1は必然

いくら何でも多すぎだから
制限するにはどうすればいいか
それも既に終わってる
住基ネットで行われた

三周くらい遅れてる

299名刺は切らしておりまして2018/01/31(水) 21:03:35.19ID:GuB+lDaD
そして、収録されていない新しい漢字が発掘されて、再び仕事をつくる。
これが、IPAのデジタル詐欺という、永久機関。

300名刺は切らしておりまして2018/01/31(水) 21:42:45.45ID:y6GlPEhp
>>298
15年も無駄に掛けたこの文字コードは何週遅れてるんだよ

301名刺は切らしておりまして2018/01/31(水) 22:15:00.65ID:KfDMqnEo
>>273
欧米中心だと
ローカライズはあくまでアジアの括りでしかやってくれないよ
unicodeのCJKVとかがいい例

302名刺は切らしておりまして2018/02/01(木) 14:19:02.04ID:YuMDPy6W
>>278
諸橋の漢字はほとんど全て入っている。
http://kanji-database.sourceforge.net/dict/daikanwa/

303名刺は切らしておりまして2018/02/01(木) 14:24:20.37ID:YuMDPy6W
>>301
最終的には16bitじゃ収まらないんだから
16bitから始めて、サロゲートペア、異体字セレクタと進んできたのは、
今の視点で見れば、そう悪くなかったと思える
CJK統合はちょっとうまくない統合もあるけどね

304名刺は切らしておりまして2018/02/02(金) 18:58:55.01ID:c+M8cU4Y
>>295 >>297
「文化」は、役所の事務には要らない。
人名地名の管理は、文化なんて無視してやればいい。

305名刺は切らしておりまして2018/02/02(金) 19:20:39.09ID:nUxGrkOa
Civilizationですよ

306名刺は切らしておりまして2018/02/03(土) 02:00:23.51ID:k3JVevWM
>>304
役所のためにコンピュータがあるわけでは無い。

307名刺は切らしておりまして2018/02/03(土) 06:27:56.31ID:j8C2udUX
この程度で「全漢字」なんて言うのはNHKのバカ記者だろう

308名刺は切らしておりまして2018/02/03(土) 06:31:45.09ID:mUGos56d
>>1
漢字のほうを簡素にしろよ。
斎藤の斎の字だけでもたくさんあるし、
ツヨシ君の「草○」だって「ナギは〜」ってのまで書かなきゃでマスゴミも大変だろ。
「澤」も「沢」に統一すりゃ面倒がなくていいのに。

309名刺は切らしておりまして2018/02/03(土) 07:47:02.02ID:8y2qvveX
8000字登録で幽霊文字がいくつも出来たのに
六万字とか

31092018/02/04(日) 18:58:14.08ID:JcNMdVNx
ぎゃあぎゃあうるさい客を黙らせるには、こんなアプローチしかなかったんだよ
ちなみに、異体字セレクタで指定するように実装されているので、コードが増えたわけではない
心配なソートや検索には少し機能追加して、異体字区別オン/オフ機能を持たせればいい

311名刺は切らしておりまして2018/02/04(日) 20:03:36.68ID:5hDjzv22
>>310
ああ、フィルタリング出来るなら実害は無いか。
選択肢が多いってのも考えものではある。

312名刺は切らしておりまして2018/02/05(月) 07:30:08.11ID:mOHApqHK
役所を機械化して公務員減らせよ

313名刺は切らしておりまして2018/02/09(金) 08:24:16.87ID:Yu/B2YYx
>>295
そういうときは、テキストではなく、画像で表現するでしょう。

314名刺は切らしておりまして2018/02/09(金) 13:22:49.59ID:outVv24X
>>313
文字コードを与えられていないと文字として処理するのが不便です。
検索とかその文字を使って文章を書くとか。

315名刺は切らしておりまして2018/02/10(土) 03:15:29.88ID:XhMH2vhp
>>295
PDF使え

316名刺は切らしておりまして2018/02/10(土) 11:35:08.24ID:tYEqfiMq
>>315
各自が作ったファイルで共通の処理ができるの?

317名刺は切らしておりまして2018/02/10(土) 14:47:39.43ID:j8kRk1Ax
>>3
ちなみにこれの答えは「すすむ」

318名刺は切らしておりまして2018/02/10(土) 18:55:11.07ID:eCfYm3w2
>>316
異体字セレクタやフォント指定使えば問題なし

319名刺は切らしておりまして2018/02/12(月) 22:14:43.48ID:mxwM4RBX
昭和の映画や看板には誤字のままレタリングしたようなのが結構見られる

320名刺は切らしておりまして2018/02/13(火) 22:42:22.76ID:c+X15UHa
>>318
読み方もわからない漢字を探すとか苦行でしかない

321名刺は切らしておりまして2018/02/14(水) 01:11:36.46ID:DQtiuteu
読む?
書く必要のある人が書くだけ

322名刺は切らしておりまして2018/02/14(水) 01:46:16.20ID:CH673kzt
>>321
誰も手書きの話なんかしてないわこのアホウ

323名刺は切らしておりまして2018/02/14(水) 01:50:40.23ID:DQtiuteu
書くのは手だけじゃない

324名刺は切らしておりまして2018/02/14(水) 01:57:24.85ID:CH673kzt
>>323
お前もういいからバカは死んでろ

325名刺は切らしておりまして2018/02/14(水) 02:37:57.78ID:K1rEiGrr
>>1
おせーよ

326名刺は切らしておりまして2018/02/14(水) 06:25:29.82ID:36C4ixsm
>>9
バカ自慢しつつなぜかマウンティングw
底辺の無知蒙昧無敵wwwww

327名刺は切らしておりまして2018/02/15(木) 13:20:55.80ID:zgzNiz3M
>>322
アホ?

32892018/02/17(土) 21:54:24.42ID:07scXkde
>>326
解説よろしく

329名刺は切らしておりまして2018/02/17(土) 22:05:52.42ID:6gvEycLU
>>1
これで異字体を実質的に廃止する機会を失った
後世にまで残る極めて悪質な判断
こういう事に労力をかけるのは無駄!無駄!無駄!
こんな無駄な事してるから日本はいつまでたっても非効率なんだ

330名刺は切らしておりまして2018/02/17(土) 22:14:10.89ID:GZu+OoqD
>>329
開発してる当事者らは社会の役に立ってると思い込んでるから救いようが無い

331名刺は切らしておりまして2018/02/18(日) 00:03:12.66ID:eMoHPgaF
くだらん
むしろ無意味な字体をなくせ

332名刺は切らしておりまして2018/02/18(日) 10:40:12.04ID:ujntBjSB
http://www.chokanji.com/ckk/images/press/ckkvar03.png

コンピューターで異字体の検索が困難にならないように異字体同一視検索出来る様にするのは本末転倒
意味が同一であるなら表記も一つにすべき

文字の本来の意義は伝達である
伝達を困難にする文字の個性はいらない
個性を出したいならフォントで出せ

それが情報化社会における漢字のありかただと考える

333名刺は切らしておりまして2018/02/18(日) 15:07:35.79ID:3qTyF6oa
>>332
正気の沙汰じゃないわな

334名刺は切らしておりまして2018/02/18(日) 15:54:03.26ID:VivRxnPg
>>332
40年位考えが遅れてる

335名刺は切らしておりまして2018/02/18(日) 17:14:31.55ID:fblcc3db
公的文書に誤字を残す必要はない。

新着レスの表示
レスを投稿する