阅读历史 |

第297章 睡了睡了(2 / 2)

加入书签

结构化处理:将信息精细化拆解与清洗,将各种元素进行转换,形成结构化数据形式,拆分成

标题与内容。

分割部分关键代码:

对于其中的每个元素,如果是CopositeElent类型,就提取其中的文本并将其添加到

text_list中;如果是Table类型,就将表格的文本表示(可能是HTML格式)添加到

text_list中。

将图3.8的提取的数据进行拆分,添加到text_list中,输出结果如图3.11所示。

非结构化文本数据通常非常稀疏,即包含大量的词汇但每个文档只使用其中的一小部分。而结

构化数据则可以通过合并相似信息来降低数据的稀疏性,这有助于生成更加紧凑和有效的嵌入向

量。

结构化数据可以实现更高效的特征提取。结构化数据通常已经按照特定的模式或结构进行了组

织,这使得我们可以更加高效地从中提取有用的特征(如标题、作者、摘要、关键词等)。这些特

征可以作为后续Ebeddg的输入,帮助生成具有更强区分性和泛化能力的嵌入向量。结构化数据

中的元素(如主题、类别、属性等)通常具有明确的含义,这些含义可以在Ebeddg过程中被保

留下来。因此,基于结构化数据的嵌入向量往往具有更强的解释性,有助于我们更好地理解模型的

预测结果和内部机制。最近转码严重,让我们更有动力,更新更快,麻烦你动动小手退出阅读模式。谢谢

↑返回顶部↑

书页/目录

其他类型相关阅读: 龙魂传 第五人格:我将救赎一切 轮回印 血脉剑神 国运之战:我以神明镇诸天 山水行记 烟雨神界 生命最后三年,高冷总裁妻子疯狂报复我! 重生的夫君儿子每天都在想怎么弄死我 厨神,妖兽:不好,我们成食材了 掐指一算,你是逃犯! 陈年诡事 穿宋,我反了 一条狗的漫漫修行路 女帝痛哭,她杀死了自己最爱的人 穿越海贼,开局就把卡普气炸 第四天灾,但柯学世界 玄幻,从码头开启超凡之路 我在天牢,长生不死 金串子的新书 我是你爸 大唐:开局碰瓷长乐公主 金戈丽人行:天命之魁 村滥 重生88,从大山挖参开始! 龙珠:守护绝望未来 我杜卡雷一定会成为MVP的!! 御兽,从银月天狼开始 无限分身:诸天都有我小号 错嫁:鬼眼王妃 觉醒了异能,怎么战斗更烧脑了? 大唐十万里 游戏入侵:我的血能毒杀异界神魔 天才与废材 御兽:我能不断进化兽娘 高武独行 神奇宝贝:系统开局 符道之祖 重生后,四岁萌娃横扫末世! 变成龙的我,今天该干什么 木叶骑士王 HP:失色魂灵 凡人修仙:开局看守草药场 重回七零,与病娇老公举案齐眉 重生:校花姐姐别追我 砍树爆装备?我爆的全是修仙法宝 小松的爱情保卫战 魔鬼部队 重生:校花不甜,我为什么要舔? 妹妹别怕,哥哥超护短 我们牺牲的,会是自己 借我一缕阳光 放肆,沉沦 全球丧尸:我在末世组建生存团队 族咒:山隐卷 沙雕小福宝四仰八叉 我和柯南,才不是你想的那样! 凤舞九天【传奇商后妇好】 高武:睡觉两年半,有系统过分吗 羽化飞仙