เริ่มต้นใช้งาน

[dependencies]
kham-core = "0.8"

use kham_core::Tokenizer;

fn main() {
    let tok = Tokenizer::new();

    // ตัดคำเป็น &str slice (zero-copy)
    let tokens = tok.segment("กินข้าวกับปลา");
    println!("{:?}", tokens);
    // ["กิน", "ข้าว", "กับ", "ปลา"]

    // Token รายละเอียด พร้อม kind + byte/char span
    for t in tok.segment("Hello กรุงเทพ 2024") {
        println!("{:?}  kind={:?}  chars={}..{}", t.text, t.kind, t.char_span.start, t.char_span.end);
    }
}

pip install kham

import kham

# ตัดคำเป็น list ของ string
words = kham.segment("กินข้าวกับปลา")
print(words)
# ['กิน', 'ข้าว', 'กับ', 'ปลา']

# Token object รายละเอียด
for tok in kham.segment_tokens("Hello กรุงเทพ 2024"):
    print(tok.text, tok.kind, tok.char_start, tok.char_end)

npm install kham-wasm

import init, { segment, segment_tokens } from 'kham-wasm';

// เรียกครั้งเดียวตอน load (ดาวน์โหลด .wasm)
await init();

const words = segment("กินข้าวกับปลา");
console.log(words);
// ["กิน", "ข้าว", "กับ", "ปลา"]

const tokens = segment_tokens("Hello กรุงเทพ 2024");
tokens.forEach(t => console.log(t.text, t.kind, t.char_start, t.char_end));

cargo install kham-cli

# ตัดคำภาษาไทย
kham "กินข้าวกับปลา"
# กิน|ข้าว|กับ|ปลา

# แสดง kind และ confidence score
kham --kind --confidence "กินข้าวกับปลา"
# กิน:Thai:conf=0.92|ข้าว:Thai:conf=0.98|…

# โหมด FTS — kind, POS, NE, stop, syn ต่อ token
kham --fts "กินข้าวกับปลา"

# ตรวจสอบการสะกด
kham --spell "กีนข้าว"

# ดึงคำสำคัญ
kham --keywords "นักวิทยาศาสตร์ค้นพบดาวเคราะห์ใหม่"

# แปลงเป็น RTGS
kham --romanize "กินข้าวกับปลา"
# kin khao kap pla

# Build และติดตั้ง (ต้องมี pg_config ใน PATH)
cargo build -p kham-pg --release
make -C kham-pg install

-- โหลด extension
LOAD 'kham';

-- สร้าง text search configuration
CREATE TEXT SEARCH CONFIGURATION kham_cfg (PARSER = kham);
ALTER TEXT SEARCH CONFIGURATION kham_cfg
  ADD MAPPING FOR thai WITH simple;

-- Index และค้นหา
CREATE TABLE docs (id SERIAL, body TEXT, tsv TSVECTOR);
UPDATE docs SET tsv = to_tsvector('kham_cfg', body);
CREATE INDEX docs_tsv ON docs USING GIN(tsv);

SELECT id, ts_headline('kham_cfg', body, query) AS snippet
FROM docs, to_tsquery('kham_cfg', 'ข้าว') query
WHERE tsv @@ query;

# Build (ต้องมี SQLite headers)
cargo build -p kham-sqlite --release
# macOS: brew install sqlite  (system sqlite3 ปิด load_extension)

.load ./target/release/libkham_sqlite

CREATE VIRTUAL TABLE docs USING fts5(
  body,
  tokenize = 'kham'
);

INSERT INTO docs VALUES ('กินข้าวกับปลา');
INSERT INTO docs VALUES ('กรุงเทพมหานครเป็นเมืองหลวง');

SELECT * FROM docs WHERE docs MATCH 'ปลา';