27 Aug 2003
CS 6210: Module 3
8
/31
Trading precision for size, redux
¡
Pop Quiz: Which of these techniques are more effective?
¡
¡
Typical:
¡
Lexicon = 30 MB
Inverted File:
400 MB
¡
¡
Stemming
l
Affects Lexicon
¡
¡
Case folding
l
Affects Lexicon
l
¡
Stop words
l
Affects Inverted File