Metadata-Version: 2.4
Name: bin-fixedrec
Version: 1.0.1
Summary: 固定長バイナリレコードをフィールドごとに分割して区切りテキスト形式で出力するツール。フィールドのバイト列はそのまま保持します。
Author: tsuutar
License: MIT
Project-URL: Homepage, https://github.com/tsuutar/fixedrec
Keywords: fixed-length,binary,record,parser,cli
Classifier: Programming Language :: Python :: 3
Classifier: Programming Language :: Python :: 3.10
Classifier: Programming Language :: Python :: 3.11
Classifier: Programming Language :: Python :: 3.12
Classifier: License :: OSI Approved :: MIT License
Classifier: Operating System :: OS Independent
Requires-Python: >=3.10
Description-Content-Type: text/markdown
License-File: LICENSE
Provides-Extra: dev
Requires-Dist: pytest>=7.0; extra == "dev"
Requires-Dist: pytest-cov>=4.0; extra == "dev"
Dynamic: license-file

# fixedrec - 固定長バイナリレコードをフィールドごとに分割して区切りテキスト形式で出力するツール

固定長バイナリレコードをフィールドごとに分割して区切りテキスト形式で出力するツール。
**C 言語風の struct 設定ファイル**でレイアウトを定義し、**フィールドはバイナリのまま**出力（区切りや行末だけを整形）します。
(バイナリではなく 16 進数出力も可能)

## ✨ 特徴

- **バイト列を一切変換せず**、そのまま出力（デコードしない）
- 入力終端は **CRLF / LF / CR / なし / 任意バイト列** を指定可能（`--in-term`）
- 出力行末は **CRLF / LF / CR / なし / 任意バイト列** を指定可能（`--out-term`）
- フィールド区切りは **任意**（デフォルト TAB、`--sep` で変更）
- **複数 struct** の定義／**拡張子マッピング**／`/* ... */` **ブロックコメント**対応
- 可視化用の **エスケープ**（`--escape hex --prefix %` など）に対応
- 巨大ファイル OK（**ストリーム処理**）

---

## 📖 目次

- [使い方（クイック）](#使い方クイック)
- [設定ファイルの書き方](#設定ファイルの書き方)
- [主なオプション](#主なオプション)
- [使用例](#使用例)
- [動作仕様](#動作仕様)
- [トラブルシュート](#トラブルシュート)

---

## 使い方（クイック）

```bash
# BMPファイルのヘッダ出力(16進数の場合)
fixedrec -i input.bmp -o out.tsv -c layout.struct --struct BMP_HEADER --in-term none --sep "\t" --escape hex --max-rows 1 --header-structs

# BMPファイルのヘッダ出力(生バイトの場合)
fixedrec -i input.bmp -o out2.tsv -c layout.struct --struct BMP_HEADER --in-term none --sep "\t" --max-rows 1
```

- デフォルト: 入力終端=CRLF、出力行末=CRLF、区切り=TAB
- フィールドは**生バイト**で出力（文字エンコード変換なし）

---

## 設定ファイルの書き方

`layout.struct`（UTF-8 推奨。`//` と `/* ... */` コメント可）

```c
/* 例: 閉じカッコ後に拡張子を列挙してマッピング */
struct FIX47 {
  BYTE Title[10];
  BYTE COL_A[15];
  BYTE COL_B[20];
} txt, dat, csv;   // .txt / .dat / .csv に適用（ドット有無どちらでもOK）

struct FIX32 {
  BYTE Foo[8];
  BYTE Bar[8];
  BYTE Baz[16];
} bin;             // .bin に適用

struct BMP_HEADER {
  BYTE Signature[2];        // "BM" 固定 (0x42 0x4D)
  BYTE FileSize[4];         // ファイル全体のサイズ (リトルエンディアン)
  BYTE Reserved1[2];        // 予約領域1 (通常 0)
  BYTE Reserved2[2];        // 予約領域2 (通常 0)
  BYTE PixelOffset[4];      // 画像データ先頭までのオフセット (例: 54)
} bmp;
```

- **構造体名**は必須（複数定義する場合、無名は不可推奨）
- フィールドは `BYTE Name[Len];` のみ（Len は > 0）
- `} txt, dat;` のように拡張子をカンマ区切りで列挙（小文字で照合）

---

## 主なオプション

```text
-i,  --input PATH        入力バイナリ（固定長 + 入力終端 の繰返し）
-o,  --output PATH       出力テキスト（バイナリ書込）
-c,  --config PATH       struct定義ファイル（UTF-8/UTF-8(BOM)/CP932 対応）
     --struct NAME       使用するstruct名（未指定時は拡張子で自動選択）

     --in-term  VAL      入力終端: crlf|lf|cr|none|hex:0a|"\\x1e\\x1f" など（既定: crlf）
     --out-term VAL      出力行末: 同上（既定: crlf）
     --sep      VAL      フィールド区切り: "," / "\\t" / " | " / hex:1f 等（既定: "\\t"）

     --escape none|hex   可視化エスケープ（既定: none=生バイト）
     --prefix STR        --escape hex時の接頭辞（既定: "\\x", 例: "%", "\\u", "$"）

     --max-rows N        先頭Nレコードのみ処理（0=全件）
     --lenient           入力終端の不一致/欠落時も警告して継続（既定は厳格エラー）
     --dump-layout       レイアウトと推定レコード数を表示して終了
  --header-structs    設定ファイルに定義された struct 名を出力ファイル先頭にヘッダ行として出力
     --summary           サマリのみ表示
```

**メモ**

- `hex:...` は偶数桁の 16 進（例: `hex:0d0a`）
- `"\t"`, `"\\x1f"` のような **バックスラッシュエスケープ**も使用可

---

## 使用例

### 1) 基本（CRLF 終端 →TSV）

```bash
fixedrec -i data.dat -o out.tsv -c layout.struct
```

### 2) 入力が LF 終端、出力も LF に

```bash
fixedrec -i data.lf -o out_lf.tsv -c layout.struct \
  --in-term lf --out-term lf
```

### 3) 入力が「終端なし（生固定長）」、出力は CRLF

```bash
fixedrec -i data.raw -o out.tsv -c layout.struct \
  --in-term none --out-term crlf
```

### 4) 区切りを US(0x1F)、非 ASCII を `%NN` で可視化

```bash
fixedrec -i data.bin -o out.txt -c layout.struct \
  --sep hex:1f --escape hex --prefix %
```

### 5) 複数 struct がある設定で、**拡張子から自動選択**

```bash
fixedrec -i sample.txt -o out.tsv -c layout.struct
# -> .txt にマッピングされた struct を自動選択
```

### 6) 明示的に struct 指定

```bash
fixedrec -i some.bin -o out.tsv -c layout.struct --struct FIX47
```

### 7) レイアウト確認（レコード長/推定件数）

```bash
fixedrec -i data.dat -c layout.struct --dump-layout
```

---

## 動作仕様

- **入力**
  1 レコード = **合計バイト長**（`BYTE` フィールドの総和） + **入力終端**（`--in-term`）
  ※ファイルサイズがレコード長の倍数でない場合は警告します。

- **出力**
  各フィールドは **バイナリのまま**出力（文字コードに一切触れません）。
  フィールドは `--sep` で結合し、行末に `--out-term` を付与します。

- **エスケープ**
- **エスケープ**
  `--escape hex` のとき、**すべてのバイト**を `--prefix` と 2 桁の 16 進で表記します（例：`%41%42%0a`、`\x41\x42\x0a`）。

- **メモリ/性能**
  レコード単位の**ストリーム処理**です。数 GB 級でも動作（I/O 帯域依存）。

- **終了コード**

  - `0` 正常終了
  - `1` 入力が空など軽度エラー
  - `2` 設定/引数/整合性エラー、I/O 例外 など

---

## トラブルシュート

- **「構造体が見つからない」**

  - `--struct` を指定するか、設定の `} txt, dat;` など拡張子マッピングを確認。

- **「hex 指定エラー」**

  - `hex:` の後は **偶数桁**の 16 進のみ。例：`hex:1f`（OK）、`hex:1`（NG）

- **「出力が文字化けに見える」**

  - 本ツールは**変換しません**。可視化したい場合は `--escape hex` を使うか、
    後段で適切なエンコード（UTF-8 等）として解釈できるツールで確認してください。

- **「末尾不完全/終端不一致」**

  - 既定はエラー停止。継続したい場合は `--lenient` を付けると警告して出力を続けます
    （出力行末は常に `--out-term` で正規化）。
