2007-01-02から1日間の記事一覧

Wikipediaのデータを自然言語処理の実験に使うのはやめておけ

今はWikipediaのデータを使って実験をしているが、これはおすすめできない。素直に新聞とかのデータを買った方が良い。 理由その1。日本語じゃないデータが入ってる。外人の名前とかはUnicodeを駆使して表記されていたりする。 理由その2。プレーンテキスト…