Filtering Kalimat [PHP]

Setelah sekian lama tidak posting karena kesibukan yang menyita waktu, akhirnya.....

Sudah hampir seminggu lebih, 2 pasienku menginap di kontrakan, minta ditemani mengerjakan project skripsi mereka :D. Satu pakai PHP, yang satu pakai J2ME.

Nah, yang PHP ini (project skripsinya Salmuasih), ceritanya mau bikin pendeteksian plagiat naskah, disana ada satu rangkaian proses, yaitu tokenizing, filtering, dan stemming (dan sungguh, aku baru tau materi tentang tokenizing dan kawan-kawannya itu. Agak pusiang juga kalau mau kasih sentuhan kerusakan pada sintaks PHP nya kalo gak belajar materinya dulu, hehe).

Dan di bawah ini adalah salah satu sintaks untuk melakukan proses filtering (dengan catatan, kata-kata yang dihapuskan sudah tersimpan dalam database, disini sebagai contoh adalah menghilangkan stopword)

$query = mysql_query("SELECT * FROM stopword");

while ($row = @mysql_fetch_array($query)) {
    $stopword[] = trim($row['stopword']);
}
$pieces = explode(" ", $teksTemp);

$jml = count($pieces) - 1;
for ($i = 0; $i <= $jml; $i++) {
    if (in_array($pieces[$i], $stopword)) {
        unset($pieces[$i]);
    }
}
$removal = implode(" ", $pieces);

$teksTemp merupakan string kalimat yang akan di filter. Ia diubah ke dalam array, kemudian di-cek, apakah dalam array tersebut memiliki stop words, jika iya, maka ia akan dihapuskan.

Setelah selesai di filter, array kalimat tersebut dikembalikan menjadi bentuk string dengan function implode.

Sekian, semoga bisa bermanfaat.