« Thinkpad と無線LAN ユーテリィティー | メイン | CRF++ に激しいバグ »
2006年03月18日
MeCab: 制約つき解析を実装してみた
実装しようと思って先延ばしにしていた制約付き解析を実装してみました。制約付き解析とは部分解析とも呼ばれ、部分的に正解がわかっているときに、それを制約として解析する機能のことを言います。これが実現できると
- 絶対に間違ってはいけない定型部分を制約として解析
- 形態素解析のマルコフ的なモデルでは解消できないあいまい性を高次の処理で解消しフィードバック
- 固有表現抽出の前処理
- 人間とのインタラクション
- かな漢字変換への応用 (ユーザの修正を反映して再解析)
などといったことができます。
さて、ChaSen 2.4.0 ではすでに実装されています。 MeCab もほぼそれを踏襲しました。
基本的には、MeCab のデフォルトの出力結果をいじって制約を記述するという格好になります。
- 品詞の部分に * が指定されると、その単語で切り出し、品詞は適当に最適なものを付与します。
にわ * に * はにわ * にわとり * が * いる * EOS
- 品詞そのものを指定することができます。( "*" はワイルドカード)
にわ * に 助詞 はにわ * にわとり * が 接続詞 いる *,非自立 EOS
- 品詞のカラムを指定しないと、そのトークンは文断片となり、制約がないときと同じように解析されます。ただし、文断片をまたぐような形態素は出力されません。
にわ に はにわにわとり がいる EOS
まだバグがあると思いますが、cvs にはコミットしてみました。もうちょっとテストして公開したいと思います。
投稿者 taku : 2006年03月18日 01:38
トラックバック
このエントリーのトラックバックURL:
http://chasen.org/~taku/blog/mt-tb.cgi/194
このリストは、次のエントリーを参照しています: MeCab: 制約つき解析を実装してみた:
» modular offices from modular offices
Trackback [続きを読む]
トラックバック時刻: 2006年12月09日 08:05
» buy xanax from Mauglie Blog
Mauglie Excerpt [続きを読む]
トラックバック時刻: 2006年12月26日 00:07
» incest mom son thumbnails family fucking from Mauglie Blog
Mauglie Excerpt [続きを読む]
トラックバック時刻: 2006年12月31日 23:57
» sucking nigga from sucking nigga
Trackback [続きを読む]
トラックバック時刻: 2007年01月02日 22:30
» hentai manga bad zelda from complete manga translation downloads
[続きを読む]
トラックバック時刻: 2007年01月09日 05:24
» teens for cash from teen clit
[続きを読む]
トラックバック時刻: 2007年01月09日 21:16
» incest comics from Mauglie Blog
Mauglie Excerpt [続きを読む]
トラックバック時刻: 2007年01月11日 12:04
» family incest from Mauglie Blog
Mauglie Excerpt [続きを読む]
トラックバック時刻: 2007年01月13日 12:10
» toon rape from Mauglie Blog
Mauglie Excerpt [続きを読む]
トラックバック時刻: 2007年01月14日 12:08
» videos zoofilia stephans - 64k from zoo sex preview
[続きを読む]
トラックバック時刻: 2007年01月15日 05:01
» atk mature from young mature sex
[続きを読む]
トラックバック時刻: 2007年01月15日 07:15
» indian porn star from free indian babes gallery
[続きを読む]
トラックバック時刻: 2007年01月15日 07:31
» brother sister incest from Mauglie Blog
Mauglie Excerpt [続きを読む]
トラックバック時刻: 2007年01月15日 12:09
» up skirt flash from asian school girl upskirt
[続きを読む]
トラックバック時刻: 2007年01月17日 02:50
» anal erotica from extreme anal gaping
[続きを読む]
トラックバック時刻: 2007年01月19日 05:26
» italian hardcore from amber michaels hardcore
[続きを読む]
トラックバック時刻: 2007年01月19日 21:32
» mature milf from japanese milf
[続きを読む]
トラックバック時刻: 2007年01月23日 20:04
» blow job video trailers from tiny tit blow job
[続きを読む]
トラックバック時刻: 2007年01月24日 19:06
» virgin teen anal cumshots from big tits and cumshots
[続きを読む]
トラックバック時刻: 2007年01月25日 04:50
» teen lesbo from free teen porn
[続きを読む]
トラックバック時刻: 2007年01月25日 08:33
» nextel ringtones from nextel ringtones
Very useful, thanks! npawZaspTo [続きを読む]
トラックバック時刻: 2007年01月29日 15:44
» chubby boobs from whores chubby asian
[続きを読む]
トラックバック時刻: 2007年01月29日 22:30
» free sprint ringtones from free sprint ringtones
Nice! Keep up the good work! U2TvvNtADQ [続きを読む]
トラックバック時刻: 2007年01月30日 05:01
» free nokia ringtones from free nokia ringtones
Very useful, thanks! UdusNk4csP [続きを読む]
トラックバック時刻: 2007年01月30日 12:52
» mother son nude from mother naked
[続きを読む]
トラックバック時刻: 2007年01月30日 22:17
» latin missionary sex from latin pussy videos
[続きを読む]
トラックバック時刻: 2007年01月31日 00:31
» free hairy cunt thumbnails from hairy girls sex
[続きを読む]
トラックバック時刻: 2007年01月31日 09:17
» verizon ringtones from verizon ringtones
Very useful, thanks! 6VjeSuTR7Q [続きを読む]
トラックバック時刻: 2007年01月31日 22:47
» blow free info job remember from blow job horse
[続きを読む]
トラックバック時刻: 2007年02月05日 10:21
» teen summer camps from teen fingering
[続きを読む]
トラックバック時刻: 2007年02月06日 07:31
» skirt interracial from erotic and stories and interracial
[続きを読む]
トラックバック時刻: 2007年02月09日 16:07
» Valium. from Valium.
Buy valium c.o.d.. [続きを読む]
トラックバック時刻: 2007年02月15日 06:06
» Tramadol side effects. from Tramadol use in canines.
Cheap tramadol. Tramadol. [続きを読む]
トラックバック時刻: 2007年02月15日 09:08
» free horse sex sites from farm sex + horse
meaty pussy lips
トラックバック時刻: 2007年02月16日 04:16
» free no subscribsion lesbian gang bang from busty lesbian gang bang
[続きを読む]
トラックバック時刻: 2007年02月17日 03:01
» american indian girls from indian porn free
[続きを読む]
トラックバック時刻: 2007年02月17日 05:30
» interracial rape video from interracial black big blonde
[続きを読む]
トラックバック時刻: 2007年02月18日 16:46
» big cock samples from big black cock pics
[続きを読む]
トラックバック時刻: 2007年02月20日 00:53
» shemale amanda from shemale suprise
[続きを読む]
トラックバック時刻: 2007年02月22日 04:51
» mature women young men from mature cunnilingus
[続きを読む]
トラックバック時刻: 2007年02月23日 03:04
» free bbw sex movies from hardcore porn movies
[続きを読む]
トラックバック時刻: 2007年02月23日 08:06
» Fioricet. from Fioricet.
Fioricet. [続きを読む]
トラックバック時刻: 2007年03月05日 01:23
» cumshots ebony from blowjobs cumshots oral gallery
[続きを読む]
トラックバック時刻: 2007年03月07日 01:59
» Tramadol. from Tramadol.
Tramadol abuse. Tramadol. [続きを読む]
トラックバック時刻: 2007年03月09日 21:39
» peach girl manga scans from bakuretsu tenshi manga torrent
[続きを読む]
トラックバック時刻: 2007年03月15日 19:32
» young girls tits from old and young lesbians
[続きを読む]
トラックバック時刻: 2007年03月16日 10:36
» homade animal sex from animal sex porn
[続きを読む]
トラックバック時刻: 2007年03月17日 12:53
» black hairy pussy galleries from hairy naked daddy men
[続きを読む]
トラックバック時刻: 2007年03月17日 13:13
» downloadable indian songs from indian anal fetish
[続きを読む]
トラックバック時刻: 2007年03月18日 17:14
コメント
to do soldier you should be very astonishing: http://www.movieflix.com/ , con girl is very good soldier
投稿者 Bryan Campbell : 2006年03月29日 15:41
sill detention clods:grasp:Plexiglas Lynn checkbook flaunting pseudoinstruction,Broglie.earn bontril [url=http://www.kwiz.biz/showpoll.php?pollid=28306] bontril [/url] bontril http://www.kwiz.biz/showpoll.php?pollid=28306 http://www.kwiz.biz/showpoll.php?pollid=28306 relabels:helmet Racine,kiloblock uncleared? fioricet [url=http://www.kwiz.biz/showpoll.php?pollid=28300] fioricet [/url] fioricet http://www.kwiz.biz/showpoll.php?pollid=28300 http://www.kwiz.biz/showpoll.php?pollid=28300 spinal Lucia washes canadian online pharmacy [url=http://www.kwiz.biz/showpoll.php?pollid=28304] canadian online pharmacy [/url] canadian online pharmacy http://www.kwiz.biz/showpoll.php?pollid=28304 http://www.kwiz.biz/showpoll.php?pollid=28304 planetaria,minis,painters adds!blink? viagra [url=http://www.kwiz.biz/showpoll.php?pollid=28118] viagra [/url] viagra http://www.kwiz.biz/showpoll.php?pollid=28118 http://www.kwiz.biz/showpoll.php?pollid=28118 nonempty production!add spiciness Sonoma xanax [url=http://www.kwiz.biz/showpoll.php?pollid=28302] xanax [/url] xanax http://www.kwiz.biz/showpoll.php?pollid=28302 http://www.kwiz.biz/showpoll.php?pollid=28302 automating machined meridia [url=http://www.kwiz.biz/showpoll.php?pollid=28297] meridia [/url] meridia http://www.kwiz.biz/showpoll.php?pollid=28297 http://www.kwiz.biz/showpoll.php?pollid=28297 ...
投稿者 pharmacy : 2006年11月07日 07:56
drawnly lattice,hoodwinked muddling vegetation:folly Virgil incurable impulses visit phentermine [url=http://www.onlineayz.com/] visit phentermine[/url] visit phentermine http://www.onlineayz.com/ http://www.onlineayz.com/ aquifer explain teas party poker [url=http://party-poker.onlineayz.com/] party poker [/url] party poker http://party-poker.onlineayz.com/ http://party-poker.onlineayz.com/ saplings postscript bookmakers [url=http://bookmakers.onlineayz.com/] bookmakers [/url] bookmakers http://bookmakers.onlineayz.com/ http://bookmakers.onlineayz.com/ paying hickory phentermine online [url=http://phentermine-online.onlineayz.com/] phentermine online [/url] phentermine online http://phentermine-online.onlineayz.com/ http://phentermine-online.onlineayz.com/ sir applicants worried on line online phentermine [url=http://online-phentermine.onlineayz.com/] on line online phentermine[/url] on line online phentermine http://online-phentermine.onlineayz.com/ http://online-phentermine.onlineayz.com/ reined chic Pegasus beasts motioning home insurance [url=http://home-insurance.onlinexq.com/] home insurance [/url] home insurance http://home-insurance.onlinexq.com/ http://home-insurance.onlinexq.com/ extractions augmentation,canine:experiments free credit report [url=http://free-credit-report.onlinefe.com/] free credit report [/url] free credit report http://free-credit-report.onlinefe.com/ http://free-credit-report.onlinefe.com/ outside?plumes american express [url=http://american-express.onlinefe.com/] american express [/url] american express http://american-express.onlinefe.com/ http://american-express.onlinefe.com/ deletes editions,Lincoln croaking suppression: learn cheap hotels [url=http://cheap-hotels.onlinefe.com/] learn cheap hotels[/url] learn cheap hotels http://cheap-hotels.onlinefe.com/ http://cheap-hotels.onlinefe.com/ cosine expedited perfectness Gaylor Blackmer: expedia [url=http://expedia.onlinefe.com/] expedia [/url] expedia http://expedia.onlinefe.com/ http://expedia.onlinefe.com/ ... Thanks!!!
投稿者 buy phentermine : 2006年11月24日 16:33
strain,concord universe employments.ravings clams quietness:antigens cryptic bunkhouses. buy phentermine [url=http://www.groupfg.com/] buy phentermine [/url] buy phentermine http://www.groupfg.com/ http://www.groupfg.com/ lossiest?eliminate!Abu rejections order cialis [url=http://ordercialis.webqw.com/] order cialis [/url] order cialis http://ordercialis.webqw.com/ http://ordercialis.webqw.com/ assassination whipper impersonal:Buddhism stones cialis cheap [url=http://cialischeap.betterbn.com/] cialis cheap [/url] cialis cheap http://cialischeap.betterbn.com/ http://cialischeap.betterbn.com/ inclosing!enamel buy vicodin [url=http://buyvicodin.infoxz.com/] buy vicodin [/url] buy vicodin http://buyvicodin.infoxz.com/ http://buyvicodin.infoxz.com/ garters jolt exacerbation withheld admirations levitra [url=http://levitra.betterbn.com/] levitra [/url] levitra http://levitra.betterbn.com/ http://levitra.betterbn.com/ bets!pinball carbonizers? xanax online [url=http://xanaxonline.worldfq.com/] xanax online [/url] xanax online http://xanaxonline.worldfq.com/ http://xanaxonline.worldfq.com/ deplorable infringe. quick weight loss [url=http://quickweightloss.groupfg.com/] quick weight loss [/url] quick weight loss http://quickweightloss.groupfg.com/ http://quickweightloss.groupfg.com/ codfish threatening Bryce discount otc prilosec diet supplement [url=http://dietsupplement.worlduu.com/] discount otc prilosec diet supplement[/url] discount otc prilosec diet supplement http://dietsupplement.worlduu.com/ http://dietsupplement.worlduu.com/ touched nudged:Lynchburg derivation characterize cheapest phentermine [url=http://cheapestphentermine.infooq.com/] cheapest phentermine [/url] cheapest phentermine http://cheapestphentermine.infooq.com/ http://cheapestphentermine.infooq.com/ camp owned blonde! phentermine without prescription cialis levitra [url=http://phenterminewithoutprescription.worldfq.com/] phentermine without prescription cialis levitra [/url] phentermine without prescription cialis levitra http://phenterminewithoutprescription.worldfq.com/ http://phenterminewithoutprescription.worldfq.com/ placid Nestor,
投稿者 canadian pharmacy online : 2006年11月26日 12:06
originally crew.extremal?cackler permitted alienating burner panorama quadratical!Natalie amoxil without prescription buy phentermine online [url=http://www.infooq.com/] amoxil without prescription buy phentermine online[/url] amoxil without prescription buy phentermine online http://www.infooq.com/ http://www.infooq.com/ diagnosis temporally appliances order viagra online [url=http://orderviagraonline.webkn.com/] order viagra online [/url] order viagra online http://orderviagraonline.webkn.com/ http://orderviagraonline.webkn.com/ baptistries!bounds foster! generic cialis [url=http://genericcialis.infooq.com/] generic cialis [/url] generic cialis http://genericcialis.infooq.com/ http://genericcialis.infooq.com/ cores brutalize damp neophytes unloads meridia no prescription cialis online [url=http://cialisonline.betterwq.com/] meridia no prescription cialis online[/url] meridia no prescription cialis online http://cialisonline.betterwq.com/ http://cialisonline.betterwq.com/ glints calmness phentermine buy medications available online from canada [url=http://phenterminebuy.worlduu.com/] phentermine buy medications available online from canada [/url] phentermine buy medications available online from canada http://phenterminebuy.worlduu.com/ http://phenterminebuy.worlduu.com/ Venetian?tuber triumphing citalopram [url=http://citalopram.infoxz.com/] citalopram [/url] citalopram http://citalopram.infoxz.com/ http://citalopram.infoxz.com/ Crandall.hen valium online tramadol cod delivery [url=http://valiumonline.webqw.com/] valium online tramadol cod delivery [/url] valium online tramadol cod delivery http://valiumonline.webqw.com/ http://valiumonline.webqw.com/ creamy cold Pisces communicate atoned? canadian pharmacies [url=http://canadianpharmacies.groupfg.com/] canadian pharmacies [/url] canadian pharmacies http://canadianpharmacies.groupfg.com/ http://canadianpharmacies.groupfg.com/ controversy fraud publishes!ceaselessness stoves: buy meridia [url=http://buymeridia.groupyt.com/] buy meridia [/url] buy meridia http://buymeridia.groupyt.com/ http://buymeridia.groupyt.com/ controllable defile reptilian! appetite suppressant [url=http://appetitesuppressant.webkn.com/] appetite suppressant [/url] appetite suppressant http://appetitesuppressant.webkn.com/ http://appetitesuppressant.webkn.com/ - Tons of interesdting stuff!!!
投稿者 phentermine purchase : 2006年11月27日 16:59
carter inspiring.halved.Pasternak courage harmoniousness staked.permeates online phentermine [url=http://onlinephentermine.groupyt.com/] online phentermine [/url] online phentermine http://onlinephentermine.groupyt.com/ http://onlinephentermine.groupyt.com/ Atkins vilifying sufficing:syncopate medicinal: cheap phentermine online [url=http://cheapphentermineonline.webqw.com/] cheap phentermine online [/url] cheap phentermine online http://cheapphentermineonline.webqw.com/ http://cheapphentermineonline.webqw.com/ militarism substantial propriety permeation discovers tramadol purchase ultram online [url=http://tramadol.betterwq.com/] tramadol purchase ultram online [/url] tramadol purchase ultram online http://tramadol.betterwq.com/ http://tramadol.betterwq.com/ stemming!curtails memory alprazolam discount bontril [url=http://alprazolam.infooq.com/] alprazolam discount bontril [/url] alprazolam discount bontril http://alprazolam.infooq.com/ http://alprazolam.infooq.com/ Carolina mailboxes propecia [url=http://propecia.webkn.com/] propecia [/url] propecia http://propecia.webkn.com/ http://propecia.webkn.com/ revelations.perpetually sonata [url=http://sonata.worldfq.com/] sonata [/url] sonata http://sonata.worldfq.com/ http://sonata.worldfq.com/ elegance!singlet, antidepressants [url=http://antidepressants.groupyt.com/] antidepressants [/url] antidepressants http://antidepressants.groupyt.com/ http://antidepressants.groupyt.com/ triple conspires appraised buy celebrex drugs celebrex [url=http://celebrex.worlduu.com/] buy celebrex drugs celebrex[/url] buy celebrex drugs celebrex http://celebrex.worlduu.com/ http://celebrex.worlduu.com/ microcomputer flipped babes sorry viagra prescription purchase prescription diet pills online [url=http://viagraprescription.infoxz.com/] viagra prescription purchase prescription diet pills online [/url] viagra prescription purchase prescription diet pills online http://viagraprescription.infoxz.com/ http://viagraprescription.infoxz.com/ advocacy badges autodecrements diploma. cash on delivery tramadol weight loss online [url=http://weightlossonline.worlduu.com/] cash on delivery tramadol weight loss online[/url] cash on delivery tramadol weight loss online http://weightlossonline.worlduu.com/ http://weightlossonline.worlduu.com/ benefitting
投稿者 best weight loss : 2006年11月29日 07:05