技术栈
调优
在未来等你
22 天前
java
·
jvm
·
性能优化
·
虚拟机
·
调优
JVM调优实战 Day 15:云原生环境下的JVM配置
jvm调优, 云原生, Java性能优化, JVM参数配置, 容器化部署, Kubernetes, Docker, JVM在云原生中的应用
一名小码农
1 个月前
java
·
gc
·
调优
·
线上问题
·
死循环
·
线上
线上GC count突增问题排查及修复记录
1、首先是收到系统GC count报警2、一分钟后,收到系统机器各项指标异常报警:gc count、gc time 、cpu load升高,cpu idle 变低
人工智能培训咨询叶梓
4 个月前
人工智能
·
语言模型
·
自然语言处理
·
性能优化
·
调优
·
大模型微调
·
llama factory
LLAMAFACTORY:一键优化大型语言模型微调的利器
想要掌握如何将大模型的力量发挥到极致吗?叶梓老师带您深入了解 Llama Factory —— 一款革命性的大模型微调工具(限时免费)。
小猫猫猫◍˃ᵕ˂◍
4 个月前
jvm
·
调优
调优案例一:堆空间扩容提升吞吐量实战记录
进程定位GC监控日志分析🌟 调优真谛:用数据说话!通过量化指标验证每次调整的合理性,才是JVM调优的正确姿势~
小技工丨
5 个月前
大数据
·
spark
·
调优
SparkStreaming之04:调优
深入理解案例演示:batchInterval : 触发批处理的时间间隔 blockInterval :将接收到的数据生成Block的时间间隔,spark.streaming.blockInterval(默认是200ms),那么,BlockRDD的分区数 = batchInterval / blockInterval,即一个Block就是RDD的一个分区,就是一个task 比如,batchInterval是2秒,而blockInterval是200ms,那么task数为10,如果task的数量太少,比一个e
小技工丨
5 个月前
数据仓库
·
hive
·
hadoop
·
调优
Hive-07之企业级调优
Fetch抓取是指,Hive中对某些情况的查询可以不必使用MapReduce计算在hive-default.xml.template文件中 hive.fetch.task.conversion默认是more,老版本hive默认是minimal,该属性修改为more以后,在全局查找、字段查找、limit查找等都不走mapreduce。
是小崔啊
7 个月前
java
·
jvm
·
调优
JVM - JVM调优
-Xms堆最小值-Xmx堆最大堆值-Xms与-Xmx 的单位默认字节都是以k、m做单位的。通常这两个配置参数相等,避免每次空间不足,动态扩容带来的影响。减少内存的交换
码农爱java
8 个月前
jvm
·
原理
·
调优
·
jvm 调优
·
gc 日志
·
gc 分析
JVM 性能调优 -- JVM 调优常用网站
前言:上一篇分享了 JDK 自带的常用的 JVM 调优命令和图形化界面工具,本篇我们分享一下常用的第三方辅助 JVM 调优网站。
java_heartLake
8 个月前
数据库
·
postgresql
·
调优
PostgreSQL数据库参数调优实践
PostgreSQL(简称PG)数据库的性能调优是一个复杂但至关重要的过程,特别是在处理大量数据和复杂查询时。通过合理设置和调整数据库参数,可以显著提升数据库的性能和响应速度。本文将从多个方面详细介绍PostgreSQL数据库参数调优的实践,涵盖大小、存储、并发连接数等主要参数,并提供具体例子和解释。
人工智能培训咨询叶梓
9 个月前
人工智能
·
语言模型
·
自然语言处理
·
性能优化
·
调优
·
大模型微调
·
指令微调
探索开放资源上指令微调语言模型的现状
人工智能咨询培训老师叶梓 转载标明出处开放模型在经过适当的指令调整后,性能可以与最先进的专有模型相媲美。但目前缺乏全面的评估,使得跨模型比较变得困难。来自Allen Institute for AI和华盛顿大学的研究人员们进行了一项全面的研究,探索了不同公开指令数据集对语言模型性能的影响。
大数据AI人工智能培训专家培训讲师叶梓
9 个月前
人工智能
·
自然语言处理
·
性能优化
·
大模型
·
微调
·
调优
·
检索增强型生成
基于模型内部的检索增强型生成答案归属方法:MIRAGE
人工智能咨询培训老师叶梓 转载标明出处在自然语言处理(NLP)中,确保模型生成答案的可验证性是一个重要挑战。特别是在检索增强型生成(RAG)用于问答(QA)领域时,如何验证模型答案是否忠实于检索到的来源是一个关键问题。近期一种名为自引用提示的方法被提出,以使大型语言模型(LLMs)在生成答案的同时生成对支持文档的引用。然而,自引用的LLMs经常难以匹配所需格式,引用不存在的来源,并且未能忠实反映LLMs在生成过程中对上下文的使用。针对这一问题,荷兰格罗宁根大学和阿姆斯特丹大学的研究者们提出了一种名为MIR
人工智能培训咨询叶梓
9 个月前
人工智能
·
深度学习
·
语言模型
·
自然语言处理
·
性能优化
·
调优
·
1024程序员节
·
大模型微调
语言模型微调:提升语言Agent性能的新方向
人工智能咨询培训老师叶梓 转载标明出处大多数语言Agent依赖于少量样本提示技术(few-shot prompting)和现成的语言模型。这些模型在作为Agent使用时,如生成动作或自我评估,通常表现不佳,且鲁棒性差。
人工智能培训咨询叶梓
9 个月前
人工智能
·
语言模型
·
自然语言处理
·
性能优化
·
调优
·
大模型微调
·
指令微调
自我指导:提升语言模型自我生成指令的能力
人工智能咨询培训老师叶梓 转载标明出处传统的语言模型,尤其是经过指令微调的大型模型,虽然在零样本(zero-shot)任务泛化上表现出色,但它们高度依赖于人类编写的指令数据。这些数据往往数量有限、多样性不足,且缺乏创造性,限制了模型的泛化能力。为了解决这一问题,由华盛顿大学、德黑兰理工大学、亚利桑那州立大学、约翰霍普金斯大学以及艾伦人工智能研究所的研究人员联合提出了一种名为“SELF-INSTRUCT”的框架,旨在通过自举(bootstrapping)的方式,利用预训练语言模型自身的生成能力,提升其遵循指
人工智能培训咨询叶梓
9 个月前
人工智能
·
语言模型
·
性能优化
·
llama
·
调优
·
大模型微调
·
llama-factory
使用LLaMA-Factory快速训练自己的专用大模型
转自:萤火架构本文聊聊 LLama-Factory,它是一个开源框架,这里头可以找到一系列预制的组件和模板,让你不用从零开始,就能训练出自己的语言模型(微调)。不管是聊天机器人,还是文章生成器,甚至是问答系统,都能搞定。而且,LLama-Factory 还支持多种框架和数据集,这意味着你可以根据项目需求灵活选择,把精力集中在真正重要的事情上——创造价值。
王小二(海阔天空)
1 年前
jvm
·
调优
JVM:浅谈JVM调优策略
多数的Java应用不需要在服务器上进行GC优化,虚拟机内部已有很多优化来保证应用的稳定运行,所以不要为了调优而调优,不当的调优可能适得其反。在应用上线之前,先考虑将机器的JVM参数设置到最优(适合)。
哎 你看
1 年前
java
·
jvm
·
测试工具
·
调优
Java虚拟机(JVM):深入理解与性能调优
Java虚拟机(JVM)是Java平台的核心组件,它使得Java程序具有跨平台运行的能力。JVM不仅负责执行Java字节码,还管理着内存分配、垃圾回收等关键任务。深入理解JVM的工作原理对于进行有效的性能调优至关重要。本文将详细介绍JVM的工作原理,包括内存模型、垃圾回收机制,并分享一些实用的JVM性能调优技巧。
孤城286
1 年前
网络
·
ansible
·
调优
·
pipelining
·
任务流水线
·
requiretty
Ansible调优之 Pipelining(任务流水线)详解
在 Ansible 中,Pipelining 是一种优化技术,旨在减少远程主机上命令执行的开销,从而加快 Playbook 的执行速度。具体来说,Pipelining 可以减少 SSH 连接中的操作步骤,降低网络延迟,提高整体性能。
大数据AI人工智能培训专家培训讲师叶梓
1 年前
人工智能
·
语言模型
·
性能优化
·
开源
·
llama
·
gpu算力
·
调优
DLRover:蚂蚁集团开源的AI训练革命
在当前的深度学习领域,大规模训练作业面临着一系列挑战。首先,硬件故障或软件错误导致的停机时间会严重影响训练效率和进度。其次,传统的检查点机制在大规模训练中效率低下,耗时长且容易降低训练的有效时间。资源管理的复杂性也给训练作业带来了瓶颈,包括节点落后、工作负载不均衡、CPU核心不足以及节点数量不足等问题。最后,数据管理的效率也直接影响到训练的弹性和稳定性。近日,蚂蚁集团AI创新研发部门NextEvo开源了一项名为DLRover的AI Infra技术,为这些问题提供了突破性的解决方案。
EmotionFlying
1 年前
开源
·
无人机
·
copter
·
ardupilot
·
调优
(7)快速调优
文章目录前言1 安装脚本2 运行 QuikTune3 高级配置VTOL QuikTune Lua 脚本简化了为多旋翼飞行器的姿态控制参数寻找最佳调整的过程。
Fang_Qianling
1 年前
linux
·
调优
Linux系统优化及性能调优
目录一、基本优化1. SELinux和防火墙优化1.1 selinux概述1.2 selinux三种工作模式