本文分类:news发布日期:2025/1/20 5:50:30
相关文章
mac m1芯片 pytorch安装及gpu性能测试
pytorch 使用mac的m1芯片进行模型训练。
#小结:在数据量小和模型参数少,batch_size小时,cpu训练更快(原因:每次训练时数据需要放入GPU中,由于batch_size小。数据放入gpu比模型计算时间还长) 在…
建站知识
2025/1/20 5:44:30
基于llama-index对embedding模型进行微调
QA对话目前是大语言模型的一大应用场景,在QA对话中,由于大语言模型信息的滞后性以及不包含业务知识的特点,我们经常需要外挂知识库来协助大模型解决一些问题。在外挂知识库的过程中,embedding模型的召回效果直接影响到大模型的回答…
建站知识
2025/1/12 9:20:03
项目记录:RabbitMq+Redis配置消息队列
目录 一、思路简述
二、配置依赖
三、RabbitMq配置类
四、增加操作 一、思路简述
这里主要配置的是增加操作,生产者部分负责将增加的数据存入redis,消费者部分负责将redis数据存入mysql。
二、配置依赖
配置RabbitMq的Maven: <depen…
建站知识
2025/1/14 10:27:56
[python] 基于Dataset库操作数据库
dataset库是Python中一个用于操作数据库的简单库,它提供了一种简洁的方式与各种关系型数据库进行交互,例如SQLite、MySQL、PostgreSQL 等。你可以使用dataset库来执行查询、插入、更新和删除操作,而无需编写复杂的SQL语句。dataset库适用于小…
建站知识
2025/1/9 3:13:16
TVS 管选型与 ESD 防护设计
文章目录 ESD 防护设计 TVS管的基础特性 TVS管的选型方法 TVS管布局细节 参考文献 ESD 防护设计 静电防护设计是让电路板外接的各类金属按钮开关在接触到外界空气放电或接触放电时,在这种瞬间出现的大能量注入到电路板后,能够通过某种设计好的通道泄…
建站知识
2025/1/9 3:13:12
[spark] DataFrame 的 checkpoint
在 Apache Spark 中,DataFrame 的 checkpoint 方法用于强制执行一个物理计划并将结果缓存到分布式文件系统,以防止在计算过程中临时数据丢失。这对于长时间运行的计算过程或复杂的转换操作是有用的。
具体来说,checkpoint 方法执行以下操作&…
建站知识
2025/1/9 3:13:21