« skkime + mecab-skkserv | メイン | migemo風インクリメンタル検索 »

2005年03月21日

ソフト分かち書きに対する返答

興味を持っていただいてとてもうれしいです。

oka さんの質問にお答えします。

(1)各要素(形態素から文字)の出現回数を期待値としてみてしまった場合に、df/idfってどのように計算される(べき)でしょうか?(たとえば、出現期待回数が0より大きい時、df++と単純にしてしまってよいのでしょうか?)

そうですね。tf の定義は簡単なのですが、idf の定義は厳密にはできません。
いまのところ明確な答えはありません。 tf/idf には、理論的な説明付けが
いくつかあるので、その枠組みの上だと説明できるかもしれません。

(2)この場合、辞書に「宮崎空港」と入っていなければ、宮崎空港という固まりは発生できませんよね?(あくまで分割の単位は辞書によりものと、文字単位のもののみからなる)

今回の話だとそうなります。ただし、lattice の作り方には依存しない方法なので、
lattice の作り方を辞書ではなく別の方法で作成すれば可能となります。

投稿者 taku : 2005年03月21日 23:09

トラックバック

このエントリーのトラックバックURL:
http://chasen.org/~taku/blog/mt-tb.cgi/123

このリストは、次のエントリーを参照しています: ソフト分かち書きに対する返答:

» Mortgage Refinance Information from Refinance Home Mortgage Loans
So! So! [続きを読む]

トラックバック時刻: 2006年11月06日 09:44

» free music download from free music
free mu... [続きを読む]

トラックバック時刻: 2006年11月07日 23:06

» free mp3 from free mp3
free mp3 =... [続きを読む]

トラックバック時刻: 2006年11月08日 04:58

» free mp3 from free mp3
free mp3 =... [続きを読む]

トラックバック時刻: 2006年11月08日 05:11

» Poker from Blackjack
o9 Poker 5... [続きを読む]

トラックバック時刻: 2006年11月08日 21:52

» music download from music download
music download... [続きを読む]

トラックバック時刻: 2006年11月09日 19:07

» Cell Phone Ringtone from Cell Phone Ringtone
Cell Phone Ringtone [続きを読む]

トラックバック時刻: 2006年11月09日 19:34

» generic viagra from generic viagra
generic viagra [続きを読む]

トラックバック時刻: 2006年11月10日 19:24

» 100 cingular free ringtone from 100 cingular free ringtone
[続きを読む]

トラックバック時刻: 2006年11月11日 15:35

» anime icon from sexy anime
hot anime gir... [続きを読む]

トラックバック時刻: 2006年11月12日 19:36

» verizon phone ringtones from verizon phone ringtones
verizon... [続きを読む]

トラックバック時刻: 2006年11月14日 10:49

» 2007 prom dress from emmy dresses
demmy dressesii[続きを読む]

トラックバック時刻: 2006年11月15日 10:51

» vera wang wedding dress from vera wang wedding dress
svera wang wedding ... [続きを読む]

トラックバック時刻: 2006年11月15日 15:20

» sabin car donation network from sabin car donation network
sabin ... [続きを読む]

トラックバック時刻: 2006年11月15日 16:18

» Basketball Court Dimension from Basketball Court Dimension
Basketball Court Dimension [続きを読む]

トラックバック時刻: 2006年11月16日 09:07

» www rasta from www rasta
www rasta [続きを読む]

トラックバック時刻: 2006年11月16日 14:31

» FREE MUSIC DOWNLOADS from music downloads
8rfdsog mu... [続きを読む]

トラックバック時刻: 2006年11月18日 10:59

» ics payday loan from ez payday loan
eez payday loanz z [続きを読む]

トラックバック時刻: 2006年11月18日 13:10

» Motorola Ringtones from Free Sprint Ringtones
So1 Motorola Ringtones i2us1 i2us1 [続きを読む]

トラックバック時刻: 2006年11月22日 16:36

» sonic payday loan from sonic payday loan
linstant faxless payday loanoo[続きを読む]

トラックバック時刻: 2006年11月23日 12:05

» incest sex from incest sex
incest sex [続きを読む]

トラックバック時刻: 2006年11月24日 10:49

» mp3 downloads from free mp3
32v fr... [続きを読む]

トラックバック時刻: 2006年11月26日 07:22

» Free mp3 downloads from mp3 downloads
32v fr... [続きを読む]

トラックバック時刻: 2006年11月26日 07:32

» free limewire from FREE LIMEWIRE
54 LIMEWIRELIMEWIRE [続きを読む]

トラックバック時刻: 2006年11月27日 07:11

» music downloads from free music download
4 vfgd ... [続きを読む]

トラックバック時刻: 2006年11月28日 03:41

» money tree payday loan from savings account payday loan
amoney tree payday loanee[続きを読む]

トラックバック時刻: 2006年11月29日 23:18

» No Fax Payday Loans from Payday Cash Loan
Power Power [続きを読む]

トラックバック時刻: 2006年12月01日 02:11

» Mini Forex Trading from Forex Trading Platform
9m Mini Forex Trading 5l 5l [続きを読む]

トラックバック時刻: 2006年12月05日 08:54

» carpet steam cleaning from carpet steam cleaning
arecarpet steam cleaning you [続きを読む]

トラックバック時刻: 2006年12月06日 11:24

» instant faxless payday loan from loan till payday
tinstant faxless payday loan ii[続きを読む]

トラックバック時刻: 2006年12月07日 12:18

» amphitheater verizon wireless from amphitheater verizon wireless
aqwamphitheater verizon wirelessdss [続きを読む]

トラックバック時刻: 2006年12月08日 03:37

» guitar lesson online from FREE GUITAR LESSON
a1 a1 [続きを読む]

トラックバック時刻: 2006年12月08日 03:50

» buy tramadol from buy tramadol
Trackback [続きを読む]

トラックバック時刻: 2006年12月09日 07:51

» Valium from Valium
Valium | | [続きを読む]

トラックバック時刻: 2006年12月11日 19:47

» effects phentermine side from buy phentermine
phentermine | | [続きを読む]

トラックバック時刻: 2006年12月13日 00:49

» free music download from free music download
v // <... [続きを読む]

トラックバック時刻: 2006年12月13日 03:19

» kitchen cabinet refacing from kitchen cabinet refacing
kitchen cabinet kitchen cabinet refaci... [続きを読む]

トラックバック時刻: 2006年12月14日 00:47

» MUSIC DOWNLOADS from MUSIC DOWNLOADS
musi... [続きを読む]

トラックバック時刻: 2006年12月15日 21:46

» FREE MUSIC DOWNLOAD from FREE MUSIC DOWNLOAD
free... [続きを読む]

トラックバック時刻: 2006年12月16日 14:11

» MP3 DOWNLOADS from MP3 DOWNLOADS
X: mp3 d... [続きを読む]

トラックバック時刻: 2006年12月16日 14:25

» MUSIC DOWNLOADS from MUSIC DOWNLOADS
dw m... [続きを読む]

トラックバック時刻: 2006年12月19日 16:24

» mp3 downloads from mp3 downloads
d [続きを読む]

トラックバック時刻: 2006年12月21日 11:04

» love softener from love softener
love love softener softener [続きを読む]

トラックバック時刻: 2006年12月23日 07:26

» buy valium diazepam from buy valium online without a prescription
buy valium | | [続きを読む]

トラックバック時刻: 2006年12月26日 09:16

» no teletrack payday loan from no teletrack payday loan
no teletrack no teletrack payday loanpa... [続きを読む]

トラックバック時刻: 2006年12月27日 02:08

» sprint pcs from sprint pcs
sprint sprint pcs pcs [続きを読む]

トラックバック時刻: 2006年12月28日 00:22

» ics payday loan from ics payday loan
ics payday ics payday loan loan [続きを読む]

トラックバック時刻: 2006年12月30日 03:22

» free ringtone and wallpaper for nextel i730 from download free i730 nextel ringtone
free nextel ... [続きを読む]

トラックバック時刻: 2006年12月31日 00:23

» installing laminate flooring from installing laminate flooring
installing installing laminate flooring lamin... [続きを読む]

トラックバック時刻: 2007年01月02日 21:55

» dupont laminate flooring from dupont laminate flooring
dupont laminate dupont laminate flooring f... [続きを読む]

トラックバック時刻: 2007年01月03日 02:44

» armstrong laminate flooring from armstrong laminate flooring
al armstrong laminate flooring e [続きを読む]

トラックバック時刻: 2007年01月03日 21:59

» wilsonart laminate flooring from wilsonart laminate flooring
wwilsonart laminate flooringe [続きを読む]

トラックバック時刻: 2007年01月05日 18:37

» giocattolo bambino bambina from giocattolo bambola cicciobello
cucine giocattolocucine giocattolo [続きを読む]

トラックバック時刻: 2007年01月08日 19:51

» londra old goat tavern the from londra old goat tavern the
shaved goat [続きを読む]

トラックバック時刻: 2007年01月09日 16:37

» puma shoes tennis womens from puma shoes tennis womens
pupuma shoes tennis womensma [続きを読む]

トラックバック時刻: 2007年01月11日 22:04

» water softener salt from water softener salt
sawater softener salt lt [続きを読む]

トラックバック時刻: 2007年01月14日 11:23

» buy hydrocodone from buy hydrocodone
I love it! sxVqPa8VfY [続きを読む]

トラックバック時刻: 2007年01月26日 22:25

» ambien from ambien
Nice post! Many thanks for your work. QcCYRuOWkj [続きを読む]

トラックバック時刻: 2007年01月27日 10:29

» cingular ringtones from cingular ringtones
Very useful, thanks! yAa4aQ1PIG [続きを読む]

トラックバック時刻: 2007年01月28日 08:08

» free nokia ringtones from free nokia ringtones
Nice post! Many thanks for your work. izE5yKeOQg [続きを読む]

トラックバック時刻: 2007年01月31日 22:44

» tuta ginnastica nike from tuta ginnastica nike
tuta ginnastica nike [続きを読む]

トラックバック時刻: 2007年02月01日 23:49

» adult friend finder from adult friend finder
adult friend finder [続きを読む]

トラックバック時刻: 2007年02月03日 07:19

» Discount phentermine. from Discount phentermine prescription.
Discount phentermine. [続きを読む]

トラックバック時刻: 2007年02月08日 01:08

» Generic Viagra from Generic Viagra
Generic Viagra [続きを読む]

トラックバック時刻: 2007年02月08日 20:07

» caloria nuoto from caloria nuoto
caloria nuoto [続きを読む]

トラックバック時刻: 2007年02月13日 17:35

» 会社員&OL&主婦の皆さんへ!すごいの見つけた(>0<)~♪ from やりくり上手
家計・生活を少しでも楽にしたいと思っているあなたへ!!絶対!お勧めですよ~ ■値段だけ見ると高価ですが、コストパフォーマンスが非常に高い商品です。 [続きを読む]

トラックバック時刻: 2007年02月26日 00:18

» breast enhancement from breast enhancement
cool design. i like it! [続きを読む]

トラックバック時刻: 2007年03月10日 19:10

» soma from soma
revolutionary. breathtaking. awesome post dude. [続きを読む]

トラックバック時刻: 2007年03月11日 20:57

» viagra from viagra
cool design. i like it! [続きを読む]

トラックバック時刻: 2007年03月14日 14:44