More than code

未分类
未分类

ToG2

前几天看了港中深的graphrag,看到ToG实现的还相对挺复杂的,所以有兴趣再重新读一下ToG2的代码 基本思路从这里就可以看出来: * ToG1是让模型在图上自行探索,每次探索一跳的子图,然后让模型做prune实体/关系,最终得到结果 * ToG2相比于ToG1的点在于做entity prune的时候,会加上context来对entity打分。然后在每次reason的时候,也会带上这次得分高的chunk context 看实现的话,核心在: * para_rank_topk中,这里会把每个实体对应的chunk,…

2025年3月11日 0条评论 235点热度 0人点赞 sheep 阅读全文
未分类

2024年度总结

现在是25年的2月14号,正好是情人节。趁着单身不便出行的时候,来写一写24年的年终总结 这次写的应该会比较随意一些,整体的思考更偏向我最近的一些思考,而非全年的。并且因为工作相对比较忙的原因,我没有腾出来很多时间给自己做一些回顾,这里也有一个原因是我感觉没必要了。 首先是一些可以看到的成果吧,整体进度虽然不符合我23年当时的规划,但是还是符合后面半年review的预期的。 * 读书线上200+小时,还有一些线下的就先不算上了 * 减肥,其实本来想减到150的,现在是160~170之间徘徊中 * 技术学习 * 数据…

2025年2月14日 1条评论 404点热度 2人点赞 sheep 阅读全文
未分类

HippoRAG

这篇论文介绍了一种名为HippoRAG的新型检索框架,旨在解决大语言模型(LLMs)在整合新知识时的效率问题。以下是文章的核心内容概述: 核心创新:受神经生物学启发的长期记忆机制 HippoRAG的灵感来源于人类大脑的海马索引理论。人脑通过海马区(负责关联索引)和新皮质(负责存储具体记忆)的协作实现高效记忆整合。HippoRAG模仿这一机制: - 海马索引的模拟:构建一个开放式的知识图谱(KG),存储文本中的实体和关系。 - 新皮质的模拟:利用LLM解析文本并提取知识。 - 个性化PageRank(PPR)算法:模…

2025年2月9日 0条评论 252点热度 0人点赞 sheep 阅读全文
未分类

AI is Creating a Generation of Illiterate Programmers 一些想法

AI is Creating a Generation of Illiterate Programmers https://nmn.gl/blog/ai-illiterate-programmers 这篇文章,下面可以看我和ds的对话 帮我总结一下这篇文章 以下是文章的总结: 核心论点 AI工具虽提升开发效率,但导致程序员技能退化,形成过度依赖,威胁行业长期发展。 关键问题与影响 技能衰退过程 文档阅读消失:依赖AI即时解释,失去自主查阅能力。 调试能力弱化:错误日志直接抛给AI,不再分析堆栈跟踪。 浅层理解:机械…

2025年2月7日 0条评论 282点热度 0人点赞 sheep 阅读全文
未分类

代码编制者

用deepseek生成的,感觉挺有意思的 好的,我将以统一的克苏鲁式神秘学风格重新构建完整序列体系,融入更强烈的认知异化与数字炼金术元素: 序列9:调试学徒 别称:漏洞牧羊人 象征烙印:龟裂屏幕上跳动的血色光标 能力具现: - 断点凝视(在视网膜投射蓝屏死光,冻结目标的逻辑流动) - 咖啡因通灵(从冷萃残渣中读取未成形的错误预兆) - 异常献祭(将三个warning炼成可投掷的运行时炸弹) 晋升仪式: "在七次月相轮回间,收集同事的叹息凝成固态日志。于午夜零误差时刻,用未保存的代码作祭坛,以左手小指蘸取NaN(非存…

2025年1月31日 0条评论 340点热度 1人点赞 sheep 阅读全文
未分类

GPT1, GPT2, GPT3

Improving Language Understanding by Generative Pre-Training Language Models are Unsupervised Multitask Learners Language Models are Few-Shot Learners 对应这三篇paper https://zhuanlan.zhihu.com/p/609367098 知乎上有对应的讲解 GPT1的核心思路是,通过language model做预训练,然后再针对下游的任务做fine tu…

2025年1月31日 0条评论 205点热度 0人点赞 sheep 阅读全文
未分类

cook notes 06

意面+牛排 牛排我还是搞了个平底锅,效果确实比圆形的好一些 牛排提前解冻很关键 试了试用牛油,效果还不错,切一块放到锅里化开 牛排放锅里定时就行。2cm厚的西冷,一面1m30s,全程大火 最后关了火简单翻一下,醒肉就行。 如果要放百里香,黄油什么的,就最后小火把其他的料放一放 意面,先煮开水,放一些油和盐 放意面,大火慢慢煮 熟度我一般是靠自己尝一尝,感觉软了就可以拿出来了 过两遍冷水,把意面上的淀粉洗一洗。这样可以让意面更劲道一些,不会粘 小火放点油,把意面的酱挤进去,化开,然后放意面搅合一下就行 葱爆羊肉 羊肉…

2025年1月20日 0条评论 188点热度 0人点赞 sheep 阅读全文
未分类

medical graphrag

https://github.com/SuperMedIntel/Medical-Graph-RAG 这里的文章,简单看了一下: 是针对医疗数据做的GraphRAG。核心目的是为了提高生成内容的准确性,即不能让大模型胡说。 为了做到这一点,MedGraphRAG在graphrag上做了两点改进: * 在实体提取的时候,会把实体和可信医疗源,以及受控词汇表连接起来 * 针对医疗标签做总结,而非使用通用的社区总结 具体来说: 会有一些置信程度比较高的资料,在RAG的时候,会把实体和这些置信程度比较高的资料链接到一起。 …

2025年1月19日 0条评论 176点热度 0人点赞 sheep 阅读全文
未分类

cook notes 05

排骨,小炒肉什么的之前说过了就不说了。 干煸豆角这次焯水太过头了,成炖豆角了。下次还是要试试油炸 油淋生菜 烧开水,放点油和盐。生菜焯水。不要放过久,一下就可以 蒜末,红椒丝,葱段。热油浇一下 加蒸鱼豉油,芝麻油,陈醋。香醋/生抽啥的也可以自己加点,调成自己喜欢的味道就行。这里和调火锅料差不多 淋到生菜上就行 排骨面 放一锅水,放挂面 等开锅,打一个鸡蛋 然后放排骨,排骨汤 稍微煮一煮就可以关火了,关火之前放点菜叶子就行 根据喜好可以加点葱花,香油啥的就好 辣炒花蛤 买蛤蜊,这次我买的是无沙的,如果有沙子的话,可以…

2025年1月5日 0条评论 223点热度 0人点赞 sheep 阅读全文
未分类

Pandas 简单看看

最近在用python处理一些大数据相关的工作,就无可避免的涉及到了pandas。迟早还是要学一下的,就在这里简单看一看。 pandas的核心数据结构: * DataFrame,二维表格,由Series组成。和关系表一样。行列组成,列是有相同的schema * Series:一维表格 在此之上提供了: * 数据对齐,用来做数据的合并和join * 数据清洗:做数据类型转化,异常值处理,处理缺失数据 * 可视化:与Matplotib等库无缝集成 * 性能:内部使用numpy,性能比较好 * 生态:与其他数据科学相关的库…

2024年12月29日 0条评论 247点热度 1人点赞 sheep 阅读全文
12345…10
分类
  • Agent/RAG
  • ARTS
  • C++
  • CSAPP
  • daily
  • database
  • leetcode
  • linux
  • ml
  • nlp
  • paper
  • RL
  • rocksdb
  • rust
  • ScummVM
  • tech
  • 其他
  • 周报
  • 未分类
  • 笔记
  • 算法
  • 计算机图形学
归档
  • 2025 年 9 月
  • 2025 年 8 月
  • 2025 年 7 月
  • 2025 年 5 月
  • 2025 年 4 月
  • 2025 年 3 月
  • 2025 年 2 月
  • 2025 年 1 月
  • 2024 年 12 月
  • 2024 年 10 月
  • 2024 年 9 月
  • 2024 年 8 月
  • 2024 年 7 月
  • 2024 年 6 月
  • 2024 年 5 月
  • 2024 年 4 月
  • 2024 年 3 月
  • 2024 年 2 月
  • 2023 年 12 月
  • 2023 年 11 月
  • 2023 年 9 月
  • 2023 年 7 月
  • 2023 年 6 月
  • 2023 年 5 月
  • 2023 年 4 月
  • 2023 年 2 月
  • 2023 年 1 月
  • 2022 年 9 月
  • 2022 年 7 月
  • 2022 年 6 月
  • 2022 年 5 月
  • 2022 年 4 月
  • 2022 年 3 月
  • 2022 年 2 月
  • 2022 年 1 月
  • 2021 年 12 月
  • 2021 年 11 月
  • 2021 年 10 月
  • 2021 年 9 月
  • 2021 年 8 月
  • 2021 年 7 月
  • 2021 年 6 月
  • 2021 年 5 月
  • 2021 年 4 月
  • 2021 年 3 月
  • 2021 年 1 月
  • 2020 年 12 月

COPYRIGHT © 2021 heavensheep.xyz. ALL RIGHTS RESERVED.

THEME KRATOS MADE BY VTROIS