my-thai-utils (MySQL User-Defined Functions (UDF) for Thai language processing)

[Thawatchai Piyawat]

สวัสดีครับ

ผมพึ่งทำ my-thai-utils เสร็จ ซึ่งเป็น User-Defined Function (UDF) library สำหรับ MySQL โดยตอนนี้มีหนึ่งฟังก์ชั่นคือ THAI_SPACE_SPLIT() เพื่อแยกคำภาษาไทยส่งให้ full-text search engine อาทิเช่น Sphinx หรือ Zebra ครับ หากใครพบว่าซอฟต์แวร์นี้มีประโยชน์จะนำไปใช้หรือสนใจจะร่วมพัฒนาผมก็ยินดีครับ ซอฟต์แวร์นี้ใช้ GPL v2 ครับ

สามารถดูรายละเอียดเพิ่มเติมได้ที่ http://code.google.com/p/my-thai-utils/

ขอบคุณครับ

ธวัชชัย ปิยะวัฒน์

[Dome Charoenyost]

UDF ของ Mysql นี่เอามา select แบบ full-text ตรงๆ ได้ไหมครับ ?

เมื่อ ตุลาคม 20, 2009 6:51 ก่อนเที่ยง, Thawatchai Piyawat
<thawa...@gmail.com> เขียนว่า:

[Thawatchai Piyawat]

UDF เพียงแค่เพิ่มฟังก์ชั่นใน MySQL ครับ แต่ไม่ได้เป็นการช่วยให้ full-text indexer สามารถจัดการกับภาษาไทยได้ครับ แต่ MySQL มีวิธีการเขียน full-text parser เพิ่มเข้าไปได้ครับ ผมตั้งใจว่าจะหาโอกาสทำอยู่เหมือนกันครับ

ธวัชชัย

2009/10/20 Dome Charoenyost <do...@tel.co.th>

[Arthit Suriyawongkul]

ขอบคุณมากครับ
เดี๋ยวต้องลองดูหน่อย

อาท

[Pattara Kiatisevi (list)]

ถ้าสมมติเรามี column name แล้วเราสร้างอีก column อัน เช่น name_split แล้วใช้ UDF
นี้สร้าง content ให้ name_split จาก name (กล่าวคือ มันคือเนื้อหาตาม name
แต่มีตัดคำไทย) แล้วทำ full text index บน column name_split นี่มันจะ work ไหมครับ

Ott

Thawatchai Piyawat wrote:
> UDF เพียงแค่เพิ่มฟังก์ชั่นใน MySQL ครับ แต่ไม่ได้เป็นการช่วยให้ full-text indexer
> สามารถจัดการกับภาษาไทยได้ครับ แต่ MySQL มีวิธีการเขียน full-text parser
> เพิ่มเข้าไปได้ครับ ผมตั้งใจว่าจะหาโอกาสทำอยู่เหมือนกันครับ
>
> ธวัชชัย
>
>
>

> 2009/10/20 Dome Charoenyost <do...@tel.co.th <mailto:do...@tel.co.th>>

>
> UDF ของ Mysql นี่เอามา select แบบ full-text ตรงๆ ได้ไหมครับ ?
>
> เมื่อ ตุลาคม 20, 2009 6:51 ก่อนเที่ยง, Thawatchai Piyawat

> <thawa...@gmail.com <mailto:thawa...@gmail.com>> เขียนว่า:

[Thawatchai Piyawat]

ผมคิดว่าได้เลยครับ การเก็บอย่างนั้นแม้เป็นการเก็บข้อมูลซ้ำซ้อน แต่ disk space เดี๋ยวนี้ไม่ใช่ปัญหาอีกต่อไป column name_split ถือว่าเป็นส่วนหนึ่งของ full-text indexes ของเราเอง และด้วยวิธีนี้ก็เรียกได้ว่าเราได้ full-text search ภาษาไทยด้วย MySQL แล้วครับ

ธวัชชัย

2009/10/20 Pattara Kiatisevi (list) <pattar...@mm.co.th>

[Dome Charoenyost]

เมื่อ ตุลาคม 20, 2009 11:47 ก่อนเที่ยง, Thawatchai Piyawat
<thawa...@gmail.com> เขียนว่า:

> ผมคิดว่าได้เลยครับ การเก็บอย่างนั้นแม้เป็นการเก็บข้อมูลซ้ำซ้อน แต่ disk
> space เดี๋ยวนี้ไม่ใช่ปัญหาอีกต่อไป column name_split ถือว่าเป็นส่วนหนึ่งของ
> full-text indexes ของเราเอง และด้วยวิธีนี้ก็เรียกได้ว่าเราได้ full-text
> search ภาษาไทยด้วย MySQL แล้วครับ
>

น่าสนใจครับ ใครลองแล้วแจ้งผลให้ทราบหน่อยนะครับ
ถ้ามีเวลาลองผมก็จะแจ้งผลให้ทราบครับ

โดม