标签: linux

系统运维之日志管理审计

简介随着机房内的服务器和网络设备增加,日志管理和查询就成了让系统管理员头疼的事。 系统管理员遇到的常见问题如下1、日常维护过程中不可能登录到每一台服务器和设备上去查看日志 2、网络设备上的存储空间有限,不可能存储日期太长的日志,而系统出现问题又有可能是很久以前发生的某些操作造成的 3、在某些非法侵入的情况下,侵入者一般都会清除本地日志,清除侵入痕迹 4、zabbix等监控系统无法代替日志管理,无

大模型部署

前言大模型越发成熟,很多企业会尝试找到自己合适的模型进行微调和训练,最终生成一个企业AI机器人,能够帮助企业大幅提升竞争力和生产力。未来通过更好的算法研发出新的基础模型这类算法程序员固然吃香,而学习如何利用基础模型结合企业内部数据进行微调和训练的能力也显得尤为重要。 关于微调和向量在如今的数据驱动时代,大型语言模型(LLM)如GPT等已经在各种应用场景中显示出其强大的能力,从聊天机器人到自动文本

CentOS实体机救援和虚拟化

服务器磁盘坏救援场景生产环境上有一台服务商提供的mini pc做服务器,安装了CentOS 7,提供中转服务,该PC使用单个64G msata的固态硬盘做系统盘和数据盘,最近发现硬盘有坏道,导致服务有问题,不想花钱修只能自己想办法搞定。目前有两种方法补救,趁磁盘还没完全挂,把数据和服务安装包备份新建一台虚拟机重新部署,没有部署文档,这个方法比较耗时;另外一种方法是先硬盘对拷,把系统备份一份,再虚

jenkins+svn持续集成

环境:kettle设计软件,windows平台,svn客户端使用tortoisesvn客户端 svn服务器:192.168.1.185,使用visual svn软件做服务器 kettle软件和调度平台在同一服务器:192.168.1.200 jenkins服务器:192.168.1.200 最近有个数据仓库的项目,需要使用ETL工具kettle来进行,而kettle的调度任务平台可以提供直接读取

oracle 18c静默安装

Oracle 18c其实就是12.2.0.2,19c就是12.2.0.3。db_home.zip 安装包大概4.25G,解压后有8.9G,数据库软件安装完成后有9.4G,创建完数据库后有13G。注:安装18c时需要把压缩文件解压到ORACLE_HOME路径下,在此目录下运行./runInstaller 检查oracle 18c所需依赖包rpm -q binutils compat-libstdc

oracle 19c

介绍Oracle 19c,或者说是Oracle 12.2.0.3,是12c中稳定的版本,就像Oracle 11.2.0.4,是值得让客户做出升级决策,从Oracle支持的版本序列图中,就可以看出Oracle 19c所处的地位,Oracle 19c将稳定性作为此版本的核心目标,开发人员专注于修复已知问题,而不是添加新功能,这可能是让19c更加可靠以及让客户决定升级的关键因素 ORACLE 19C

使用docker搭建kettle调度监控平台项目

最近有有个kettle的项目需求,要求能快速转移和部署,那只能使用docker来做了。 准备和测试kettle是一个开源的项目,已经有人把它打包成web项目,项目地址为:https://gitcode.net/mirrors/zhaxiaodong9860/kettle-scheduler/-/tree/master项目创建人使用的是windows,需要把项目转移到Linux上使用。 环境操作系

代理服务之squid+sarg

代理服务器软件最近有个需求要用到代理服务器,搜索了一番,用得比较多的是windows平台上的ccproxy,不过反应软件不太靠谱,软件经常会崩溃,比较靠谱的是linux平台下的squid。其实还有比较优秀的代理软件如轻量级的tinyproxy,privoxy,还有重量级的vanish和nginx。轻量级的软件不支持缓存,故选择squid。 Varnish与Nginx缓存服务器 1、高性能缓存服务

使用denyhosts防止暴力破解ssh

下载安装denyhostsgithub上有软件及安装说明,使用python开发的:https://github.com/denyhosts/denyhosts当前最新版提供deb包和rpm包,方便debain/ubuntu和redhat/centos系统安装这里我使用deb包:wget https://github.com/denyhosts/denyhosts/releases/downloa

PVE和LINUX使用日志

安装1.下载proxmox 6.2镜像,基于dabain 10.5 buster(清华大学镜像站): https://mirrors.tuna.tsinghua.edu.cn/proxmox/iso/ 2.使用rufus软件写入ISO镜像到U盘,使用DD方式写入 默认LVM分区处理pve删除lvm扩容根目录先备份虚拟机 删除虚拟机 删除local-lvm:lvremove pve/data 查看