人工智能助力 高级 N-gram 分析器

什么是 N-gram？

N-gram 是从给定文本或语音样本中抽取的 n 个连续项的序列。根据具体应用，这些项可以是音素、音节、字母、单词或碱基对。

对于文本分析，n-gram 通常指的是一系列单词：

• 一元语法 (1-grams): Single words (e.g., "the", "cat")
• 二元语法 (2-grams): Two consecutive words (e.g., "the cat")
• 三卦 (3-grams): Three consecutive words (e.g., "the black cat")

N-gram 适用于语言建模、文本分析以及预测文本、自动完成和语言生成等应用。

使用此工具

1. 在输入区域输入或粘贴文本，或上传文本文件
2. 调整 n-gram 大小（单词为 1，对为 2，等等）
3. 配置其他设置，例如区分大小写和删除停用词
4. 点击“分析文本”来处理输入
5. 以您喜欢的可视化格式查看结果
6. 将结果导出为 CSV、JSON 或图像以供进一步分析

提示: 对于大型文本，该工具会分块处理数据以保持性能。“比较”选项卡可用于分析两段文本之间的差异。

高级功能

• 正则表达式: 使用模式匹配来过滤特定类型的 n-gram
• 自定义停用词: 添加特定领域的词汇以排除在分析之外
• 比较分析: 比较两个不同文本的 n-gram 分布
• 可视化选项: 在不同的可视化类型之间切换以获得不同的见解
• 频率滤波: 关注出现次数超过指定次数的 n-gram
• 离线支持: 初始加载后，应用程序无需互联网连接即可运行
• GPU加速: 使用设备的图形功能实现更快的渲染