nkfってなんだ

ttp://sourceforge.jp/projects/nkf/document/nkf-man-2_0_6-ja/ja/4/nkf-man-2_0_6-ja.txt

このツールで大量のテキストのエンコードを一括変換させるにはどのようにすればいいのでしょうか？
Windows　ｘｐ
フォルダー内にはEUCのものとUTF-8のものとがあります
これらのファイルを一括でS-JISに変更させる方法を教えて下さい
オプションの説明ばかりでもしかして1ファイルづつの操作なのでしょうか？
一括変換の方法も書いてあるのかもしれないけど
疲れて最後までよめませんでした
どなたかわかるかたお願いします

230

： 名無しさん＠お腹いっぱい。 [sage] 2008/04/12(土) 03:27:29

悪いこといわんから、Windows用の専用ツール使いなよ。
窓の杜行けばあるでしょ。

231

： 名無しさん＠お腹いっぱい。 [sage] 2008/04/12(土) 03:37:34

>>230

えっそうなんですか
もうひとつ漢字とらんさーというツールも教えてもらったんだけど
フォルダーごとエンコードしてみたら2割くらいはバイナリかもしれないと
エンコード出来なかった表示がでてきた
それでファイルを1枚づつ確認してみたら
見事に1枚もエンコード変換できていませんでした
nkfに期待してるのですが
使い方わかんないよ
レスありがと
気が向いたら使用方法教えて下さいね
おやすみ

232

： 名無しさん＠お腹いっぱい。 [sage] 2008/04/12(土) 03:50:01

nkfの自動判別使った奴があるから探して使いなよ。

nkfでやりたかったら、↓のシェルスクリプト使いな。

#! /bin/sh
for i in "$@"; do
mv "$i" "$i.org"
nkf -s "$i.org" > "$i"
done

けどツール探した方が速いと思うよ、あなたの場合。

233

： 名無しさん＠お腹いっぱい。 [sage] 2008/04/12(土) 04:16:15

>>232

さん
お疲れのところ本当にありがとうございます

>>232

さんがおっしゃるとおり
簡単操作のツールでなければ使えないかもしれないです^^;
でもせっかく教えてくれたスクリプトなので頑張ってみます
ありがとうございました
おやすみなさい^^

234

： 名無しさん＠お腹いっぱい。 [sage] 2008/08/28(木) 02:12:18

最近 nkf のリリース無いね。
SourceForge 見る限りではメンテはされているみたいだけど。
そろそろ 2.0.9 とかが出てもいい頃だと思うんだけど。

235

： 名無しさん＠お腹いっぱい。 [sage] 2008/08/29(金) 06:02:01

どのような変更を期待なさっているので

236

： 名無しさん＠お腹いっぱい。 [sage] 2008/11/05(水) 21:10:48

>>234

Rubyの方で忙しいもので。
まぁ、さすがに放置が過ぎるので、Ruby1.9.1リリースあたりのタイミングで、
Ruby添付と同じものをリリース版として置こうかなと思ってます。

237

： 名無しさん＠お腹いっぱい。 [sage] 2009/01/22(木) 04:32:00

というわけで nkf 2.0.9 を出しました。
Perl モジュール部分が壊れていたので、Perl で使い方は Git から最新版を落としてくださいまし

238

： 名無しさん＠お腹いっぱい。 [sage] 2009/01/22(木) 09:17:01

いやがらせですねw

239

： 名無しさん＠お腹いっぱい。 [sage] 2009/02/02(月) 12:20:33

2.0.10マダー

240

： 名無しさん＠お腹いっぱい。 [sage] 2009/02/05(木) 00:19:53

入力がUTF-16の時にASCIIって判定されるね
-W16とか付けても効かないし

241

： 名無しさん＠お腹いっぱい。 [sage] 2009/02/21(土) 15:20:23

>>238

まぁ、Ruby寄り・・・というか、Rubyも組み込み変換があるのでコマンドがメインかな。
というか、PerlならEncodeがあるじゃないですか。

>>239

Ruby 1.9.1の最初のパッチリリースが出る頃には出そうかなと。
っと、バージョンナンバー二桁にして大丈夫なのかな?
だめそうなら2.1.0にしてしまうのでお早めに。

>>240

commit a6a715f3686cb70d38c6616c8e03830ef34d9478
にて修正しました

242

： 名無しさん＠お腹いっぱい。 [sage] 2009/03/18(水) 18:53:38

DLL だと、判定は UTF-16 になるのに lpBytesReturned に 0 が返ってきます。。。

HINSTANCE dll = ::LoadLibrary("nkf32.dll");
funcSetNkfOption *setopt = (funcSetNkfOption *) ::GetProcAddress(dll, "SetNkfOption");
funcNkfConvertSafe *conv = (funcNkfConvertSafe *) ::GetProcAddress(dll, "NkfConvertSafe");
funcNkfGetKanjiCode *getkc = (funcNkfGetKanjiCode *) ::GetProcAddress(dll, "NkfGetKanjiCode");
setopt("-xs");
conv(out, sizeof(out), &bytesReturned, in, sizeof(in));
int charcode = getkc();
::FreeLibrary(dll);
printf("%d %d %s\n", charcode, bytesReturned, out);

2.0.8 だと「4 6 UTF-16」みたいになるのに、2.0.9 だと「4 0」。
git は確認してないけど、

>>241

で解決してるのかなぁ

243

： 名無しさん＠お腹いっぱい。 [sage] 2009/07/09(木) 15:58:30

マイナーな要望かもしれないけど UTF-7 や Modified UTF-7 の変換機能が欲しいなあ。

244

： 名無しさん＠お腹いっぱい。 [sage] 2009/08/21(金) 12:01:49

NKF 2.0.9 のマニュアルの --ic, --oc の CP932 の説明には、
「-x が暗黙のうちに指定される」と書かれていますが、
これが実際には効いていないように思います。

nkf コマンドの 2.0.8 が手元に無くなっちゃったので Ruby での比較になりますが、
2.0.8 → 2.0.9 で挙動が変わってしまっており、
2.0.8 ではマニュアルの通りに動作していたように見えます。

% ruby -rnkf -e 'puts NKF::VERSION; puts NKF.nkf("--ic=CP932 --oc=UTF-8", File.read("hello"))'
2.0.8 (2008-11-08)
ｺﾝﾆﾁﾊ

% ruby_trunk -rnkf -e 'puts NKF::VERSION; puts NKF.nkf("--ic=CP932 --oc=UTF-8", File.read("hello"))'
2.0.9 (2009-01-20)
コンニチハ

245

： 名無しさん＠お腹いっぱい。 [sage] 2009/09/02(水) 20:15:12

>>242

手元にDLL用の環境がないので確認できてないんですが、今でもそうなりますかね。
しばらく大きな更新の予定もないので、ここらで2.1.0でも出そうかと思いつ。

>>243

要望があれば検討しますよ、というわけでそのうちには。
Ruby/transcode じゃなくて nkf に欲しいんですよね？

>>244

これはバグですね、直します。

246

： 名無しさん＠お腹いっぱい。 [sage] 2009/09/03(木) 00:23:30

そうですね、 Ruby/transcode にも要る
(現状だと net/imap などは自前で実装してますね) と思いますが、
nkf にも欲しいところです。

247

： 名無しさん＠お腹いっぱい。 [sage] 2009/11/17(火) 12:24:05

# nkf -v
Network Kanji Filter Version 2.1.0 (2009-11-17)

248

： 名無しさん＠お腹いっぱい。 [sage] 2009/11/17(火) 12:35:27

おぉ!!

249

： 名無しさん＠お腹いっぱい。 [sage] 2009/11/27(金) 17:33:39

win板のバイナリ来ない (T-T

250

： 名無しさん＠お腹いっぱい。 [] 2009/12/29(火) 17:24:35

64bit版てあるのかな?

251

： 名無しさん＠お腹いっぱい。 [sage] 2010/01/05(火) 13:38:40

環境変数LANGで設定した文字コードへ変換するオプションが欲しいです。

252

： 名無しさん＠お腹いっぱい。 [sage] 2010/02/12(金) 23:33:02

skfを使え

253

： efialtes [sage] 2010/02/14(日) 21:37:04

skf にそういう機能はないです。nkf の方は対応したことになっているらしいんですけど、もともとロカールからエンコーディングを抽出するのは POSIX 仕様上困難なので、なにか上手い方法が見つかったら考えます。

254

： 名無しさん＠お腹いっぱい。 [] 2010/05/23(日) 12:34:07

nkfで2ch内のスレタイ検索してここに来ました。（ここだけでした）
ウインドウズ環境でnkf32.exeを使ってみた（nkf32.exe -w16L --overwrite）の
ですが、全角の―（ダッシュ）がハイフンだかマイナスだかに変わってしまいます！
これは滅茶苦茶困ります。もう泣きそうです。
誰に言えばいいのか分からないからここに書きます、何とかしてください！！

255

： 名無しさん＠お腹いっぱい。 [sage] 2010/05/23(日) 14:55:05

>>254

--cp932 オプションを付けてみると？

256

： 名無しさん＠お腹いっぱい。 [sage] 2010/05/23(日) 15:18:36

>>255

ぎゃー、上手くいきました！
嬉しいです、どうもありがとう。
ショックで良く調べもせず騒いですみませんでした。
本当にありがとう！

257

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/02(水) 02:21:14

manが化けるのって嫌がらせ？

258

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/02(水) 19:19:21

うん。

259

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/03(木) 02:11:37

manコマンド

260

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/03(木) 05:28:05

manドマンコ

261

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/10(木) 11:55:58

> echo 60_byte_ijou_no_ascii_dake_no_mojiretsu_de_-M_shitemiru_test_ | nkf -M
=?EUC-JP?B?60_byte_ijou_no_ascii_dake_no_mojiretsu_de_-M_shitemiru_test_?=

262

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/10(木) 19:01:08

>>261

バージョン上げるよろし

263

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/28(月) 22:38:56

nkf.exeの64bitOSに対応したバージョンって、ないでしょうか？

XP-32bitからWin7-64bitに移行したところ、

[サポートされていない16ビットアプリケーション]

と出て、とまってしまいます。バッチで組み込んで使っているnkf.exeが唯一、
起動しないアプリになってしまいました。

コマンドラインから

c:\>コマンド名.exe　入力ファイル　出力ファイル

という手順（順番やオプションは不問）で呼び出しができて、
変換さえできれば、別のソフトでも全くかまいません。

なにか打開策ないでしょうか。

264

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/29(火) 02:11:49

>>263

64bitバージョンのnkf使えてるよ
FreeBSD 8.0 amd64

OS入れ直すだけだね

265

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/29(火) 02:34:01

>>264

マジすか！
挑戦してみます

266

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/29(火) 11:09:36

>>257

歴史的経緯です。
nkfで変換して適当なところに突っ込んでください。

>>263

とりあえず 32bit 版の nkf.exe を使えば動くと思います。
外部リンク

ttp://http://www.geocities.jp/va007219/index.html#win95utilnkf

267

： 名無しさん＠お腹いっぱい。 [sage] 2010/06/29(火) 14:44:25

Windowsの文字コードだと、変換できないことが多々あるな・・・。
ファイル名とか。

仕方ないので、find -inum -exec mvで変更してるけど
なんか別の方法はないんだろうか。

268

： 名無しさん＠お腹いっぱい。 [sage] 2010/07/07(水) 22:11:55

mimeエンコードすると、行末の方だけ US-ASCII に成るのは、こういう仕様なんですかね。

$ echo 'aiueo kakikukeko さしすせそたちつてと naninuneno' | nkf -Mj
aiueo kakikukeko さしすせそたちつてと
naninuneno
$ nkf --version
Network Kanji Filter Version 2.1.0 (2009-11-17)

ちなみにもう少し古い 2.0.9 とかも同様。

269

： 名無しさん＠そうだ選挙に行こう [sage] 2010/07/10(土) 14:16:26

>>267

--ic=CP932 って話?

270

： 名無しさん＠そうだ選挙に行こう [sage] 2010/07/10(土) 14:18:31

>>268

折り返し対策で仕様です

271

： 名無しさん＠お腹いっぱい。 [sage] 2010/07/19(月) 15:38:09

下をデコードしてみるとダメな理由がわかるかと思います。
このあたり MIME encode って難しいんですよねぇ。

リポジトリ内のバージョンはリリース後の次のコミットで上がります。
ちなみに、2.1.1 は Ruby 1.9.2 がリリースされるころに出ます。

272

： 名無しさん＠お腹いっぱい。 [sage] 2010/07/19(月) 18:33:50

8月初旬か・・

273

： 名無しさん＠お腹いっぱい。 [sage] 2010/09/13(月) 21:14:57

nkf-2.1.1.tar.gz　日付: 2010-09-13, サイズ: 153.8 KB

274

： 名無しさん＠お腹いっぱい。 [sage] 2010/09/13(月) 23:24:00

あらま。
19:30にsourceforgeを覗いたときはまだ2.1.0が最新だったのに、生き馬の目を抜くような。

275

： 名無しさん＠お腹いっぱい。 [sage] 2010/09/22(水) 08:50:07

make testでtest_data/ruby-dev:39722がFailになるよ

276

： 名無しさん＠お腹いっぱい。 [sage] 2010/09/22(水) 10:29:42

それ、もう報告されて直ってるよ

277

： 278 [sage] 2010/09/22(水) 13:23:20

ありがとう。解決しました。

278

： 名無しさん＠お腹いっぱい。 [sage] 2010/12/21(火) 21:31:44

nkfは、linux用に nkf.dll を導入すべき。

279

： 名無しさん＠お腹いっぱい。 [sage] 2010/12/22(水) 08:01:59

他のプログラムから利用できるライブラリがあるといいね。

280

： 名無しさん＠お腹いっぱい。 [sage] 2010/12/22(水) 21:22:41

nkf はもう、Ruby のためだけにメンテされてるのではなかろうか。

281

： 名無しさん＠お腹いっぱい。 [sage] 2011/04/02(土) 20:06:05.51

DOSでUTF-8 -> SJIS変換に役立っています。(^^)/

282

： 名無しさん＠お腹いっぱい。 [sage] 2011/04/02(土) 22:17:57.57

そういえば、デフォルト出力コードがsjisになったことなかったけ。

283

： 名無しさん＠お腹いっぱい。 [age] 2011/05/22(日) 09:15:15.72

いつになったら'%EF%BC%AE%EF%BC%AB%EF%BC%A6'を小細工なしでデコードできるようになるの?

284

： 名無しさん＠お腹いっぱい。 [sage] 2011/05/22(日) 09:45:16.35

echo '%EF%BC%AE%EF%BC%AB%EF%BC%A6' | nkf --url-input
じゃだめなん？

285

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/10(日) 22:36:45.24

いつになったら'%EF%BC%AE%EF%BC%AB%EF%BC%A6'へ小細工なしでエンコードできるようになるの?

286

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/11(月) 07:35:15.20

スクリプト言語使えよ

287

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/11(月) 10:30:27.07

>>288

ttp://http://sourceforge.jp/forum/forum.php?forum_id=1007
に要望出してみ。

288

： 名無しさん＠お腹いっぱい。 [] 2011/07/27(水) 20:05:47.10

全角ハイフン「―」(EUC-JPで a1 bd)のUTF-8って
nkf -Ew で変換すると e2 80 94
iconvで変換すると e2 80 95
どちらが正しいの?

UTF-8の e2 80 94をiconvでEUC-JPとに変換すると
iconv: illegal input sequence
ってエラーで中断。

nkf -We なら e2 80 94も e2 80 95も a1 bd に変換される。

289

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/27(水) 20:52:24.85

291です。自己解決しました。スレ汚しスマソ

290

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/27(水) 22:39:32.22

どう解決したのよ。

291

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/28(木) 19:01:59.52

>>292

どう解決したのよ。

292

： 名無しさん＠お腹いっぱい。 [sage] 2011/07/28(木) 20:03:31.55

> nkf -Ew で変換すると e2 80 94

EM DASHか

> iconvで変換すると e2 80 95

HORIZONTAL BARかって違いだよね。

293

： 名無しさん＠お腹いっぱい。 [sage] 2011/09/08(木) 22:06:27.11

新版来たけど、まだ

>>288

には対応してくれないよー。

294

： 名無しさん＠お腹いっぱい。 [sage] 2011/09/08(木) 22:50:40.67

perl -ane 's/([^\000-\040a-zA-Z0-9$-_.+])/sprintf("%%%X", ord($1))/ge; print $_'
これで我慢しとけ

295

： アンネ [] 2011/12/10(土) 00:00:22.89

やぁ(笑)

296

： 名無しさん＠お腹いっぱい。 [sage] 2011/12/27(火) 00:45:53.12

test

297

： 名無しさん＠お腹いっぱい。 [sage] 2012/03/04(日) 17:13:02.30

300

298

： 名無しさん＠お腹いっぱい。 [] 2012/03/16(金) 11:19:06.84

“--windows“ に “-x“ も加えてくだしa
つか、半角カナのある文字種に変換するときは、わざわざ全角に直さんでも（デフォルト）ええのでは

299

： 名無しさん＠お腹いっぱい。 [sage] 2012/03/18(日) 15:37:24.76

nkfぐらいの規模のソースすら改変できないユトリって多いね。

300

： 名無しさん＠お腹いっぱい。 [] 2012/04/30(月) 15:03:54.47

$ echo '%a3%c5%a3%d5%a3%c3' | nkf --url-input -g
ASCII
となるのは重々理解できるが、
$ echo 'ＥＵＣ' | nkf -g
EUC-JP
と同じ結果になってくれんですかー。

301

： 名無しさん＠お腹いっぱい。 [sage] 2012/04/30(月) 15:33:24.96

echo '%a3%c5%a3%d5%a3%c3' | nkf --url-input | nkf -g

302

： 名無しさん＠お腹いっぱい。 [] 2012/04/30(月) 17:44:59.84

何を入力しても、一つ目のnkfのデフォルト出力コードが表示されるだけでは。

303

： 名無しさん＠お腹いっぱい。 [sage] 2012/07/25(水) 05:47:45.79

そろそろ UTF8-MACに対応してくれないかな..

304

： 名無しさん＠お腹いっぱい。 [sage] 2013/07/08(月) NY:AN:NY.AN

成瀬どこいった

305

： 名無しさん＠お腹いっぱい。 [sage] 2013/07/09(火) NY:AN:NY.AN

まだ何か実装しないといけないことってあるんかな。
正直nkfのコードってかなり読みにくいしメンテするのも辛そう

306

： 名無しさん＠お腹いっぱい。 [] 2013/09/20(金) 05:15:16.91

nkfでコード変換のついでに全角スペースを半角スペース2個に変換したかったので
man見たら -Z2 っていうオプションがあったので使ったら、、
全角スペースだけじゃなく、全角英数記号まで半角に変換されるｗ
全角スペース→半角スペース2個の変換だけをやるオプションないの?
そのためだけにパイプでsedかますの無駄っぽいので。

307

： 名無しさん＠お腹いっぱい。 [sage] 2013/09/20(金) 07:07:15.34

sedでいいじゃん。

308

： 名無しさん＠お腹いっぱい。 [sage] 2013/09/21(土) 10:33:16.92

sedで全角処理させたらバグがあるからなぁ… (setlocale()不完全)

309

： 名無しさん＠お腹いっぱい。 [sage] 2013/09/22(日) 00:53:40.12

nkfがknifeに見えた

310

： 名無しさん＠お腹いっぱい。 [sage] 2013/09/30(月) 22:51:53.86

sed nkfがsenno knifeに見えた