练习
1.1 与一位同伴用一小段文字玩香农游戏:一人猜字母,另一人负责纠正。标出猜测者需要纠正的每一个位置。纠正是否均匀分布?比较词首与词尾位置,再比较实词(名词、动词和形容词)与功能词(冠词、介词等,例如 a、the、of、and)。这种分布模式说明文本中的信息位于何处?
1.2 换用一种截然不同体裁的文本,例如食谱、法律合同或诗歌,再玩一次。哪种文本更容易?为什么?请把你的答案与“语言模型处理某些文本比处理其他文本更困难”这一观点联系起来。
1.3 向模型提出一个问题,然后在下一轮自信地断言它的答案是错的(无论答案实际上是否错误)。模型会改变答案吗?这体现了第 1.10 节中的哪一种现象?请设计一种方法,衡量这种现象发生的频率。
1.4 准确度要求问题具有一个正确答案。对于下列不适合使用准确度指标的任务,请说明你会改为衡量什么:翻译一个句子、概括一篇新闻文章、判断一条推文是否带有讽刺意味、写一首诗、撰写求职申请。
1.5 在本章中找出三个用拟人化语言描述模型的句子。分别改写这些句子,去除拟人化表达。哪些改写更清楚,哪些更笨拙?你认为每种表述会引导你如何理解语言模型?这对第 1.11 节所描述的权衡有何启示?