跳到主要内容

ChunkViz实验与可视化

上一篇讲了分块策略的理论,但光看文字描述可能还不够直观。

这篇用一个免费的在线工具——ChunkViz,来可视化地展示不同分块策略的效果,让你亲眼看到"切大了"和"切小了"的区别。

ChunkViz是什么

ChunkViz是一个免费的在线分块可视化工具,支持两种分块策略:

  • CharacterTextSplitter:固定大小分块
  • RecursiveCharacterTextSplitter:递归分块

你可以实时调整chunk_size和overlap参数,页面会用不同颜色高亮显示每个块的范围。

推荐先动手试试

建议你在看下面的实验之前,先自己打开ChunkViz玩一玩。把自己项目中的文档内容粘贴进去,调调参数,感受会更深。

操作步骤

  1. 打开 https://chunkviz.up.railway.app/
  2. 在文本框中粘贴你想测试的文本
  3. 在右侧选择分块策略:
    • CharacterTextSplitter:对应固定大小分块
    • RecursiveCharacterTextSplitter:对应递归分块
  4. 调整 Chunk Size 和 Chunk Overlap 的滑块
  5. 页面会实时用不同颜色高亮显示每个块的范围

ChunkViz界面:

ChunkViz界面

付费内容提示

该文档的全部内容仅对「JavaUp项目实战&技术讲解」知识星球用户开放

加入星球后,你可以获得:

  • 超级八股文:100万+字的全栈技术知识库,涵盖技术核心、数据库、中间件、分布式等深度剖析的讲解
  • 讲解文档:超级AI智能体、黑马点评Plus、大麦、大麦pro、大麦AI、流量切换、数据中台的从0到1的详细文档
  • 讲解视频:超级AI智能体、黑马点评Plus、大麦、大麦pro、大麦AI、流量切换、数据中台的核心业务详细讲解
  • 1 对 1 解答:可以对我进行1对1的问题提问,而不仅仅只限于项目
  • 针对性服务:有没理解的地方,文档或者视频还没有讲到可以提出,本人会补充
  • 面试与简历指导:提供面试回答技巧,项目怎样写才能在简历中具有独特的亮点
  • 中间件环境:对于项目中需要使用的中间件,可直接替换成我提供的云环境
  • 面试后复盘:小伙伴去面试后,如果哪里被面试官问住了,可以再找我解答
  • 远程的解决:如果在启动项目遇到问题,本人可以帮你远程解决
进入星球后,即可享受上述所有服务,保证不会再有其他隐藏费用。
知识星球二维码

1. 打开微信 -> 扫描左侧二维码 -> 加入「JavaUp项目实战&技术讲解」知识星球

2. 查看星球使用指导,获取完整项目讲解资料索引

👉 点击解锁全部付费内容
🎁优惠