1.私有化代码仓库Gitlab的源码落地与应用(一)
2.Django实现crontab远程任务管理系统
3.在Linux系统中安装使用恶意软件扫描工具及杀毒引擎的教程
4.linux内存分析工具linux内存工具
5.盲盒商城源码开源完整版附搭建教程UNIAPP·HashMart
私有化代码仓库Gitlab的落地与应用(一)
前段时间,我接到任务:尝试搭建一个私有化的源码代码仓库给前端团队使用。之前我用Docker搭建过一个Gitlab,源码但使用过程中遇到了很多问题,源码维护起来也比较复杂,源码所以我决定按照传统方法重新搭建。源码源码编辑器教程飞镖到目前为止,源码服务已经平稳运行了数月。源码本文主要记录《私有化代码仓库Gitlab的源码落地与应用》系列(一):Gitlab传统搭建方式及后台维护,内容主要分为以下几个部分:
一、源码Gitlab简介
GitLab是源码一个由GitLabInc.开发的开源应用程序,使用Ruby on Rail开发,源码主要用于实现一个自托管的源码Git项目仓库。用户可以通过web界面访问公开或私人项目。源码它使用Git作为代码管理工具,源码并在此基础上搭建web服务。GitLab的功能与GitHub类似,包括浏览源代码、bochdbg源码管理缺陷和注释,以及管理团队对仓库的访问。GitLab专门为Unix操作系统开发,不能在Windows操作系统上运行,因此需要在Linux虚拟机或Docker上安装。GitLab分为社区版(Community Edition)和企业版(Enterprise Edition)。
二、Gitlab搭建步骤
1. 安装依赖
2. 下载镜像文件并上传至服务器
国内镜像地址:mirrors.tuna.tsinghua.edu.cn...
3. 安装Gitlab
4. 配置Gitlab
编辑配置文件:
主要涉及两处改动:
5. 启动Gitlab
6. 访问Gitlab
..1.:
三、常见问题及解决
1. 前端页面访问出现
出现可能有以下原因:
通过后台运行日志,排查如果是因为端口被占用引起的,可以按照上述修改配置文件方法,将配置文件中的端口号修改即可,修改后需要按照第4步重新加载配置文件、重启服务。更多配置信息,可以在 /opt/gitlab/embedded/service/gitlab-rails/config/gitlab.yml 中进行查看。
四、德阳源码Gitlab配置信息及常用操作命令
1. 常见配置
默认安装的gitlab,主要有四个目录:
◆ /opt/gitlab/ # 主目录
◆ /etc/gitlab/ # 放置配置文件
◆ /var/opt/gitlab/ # 各个组件
◆ /var/log/gitlab/ # 放置日志文件
2. 常用命令
◆ gitlab-ctl start # 启动所有 gitlab 组件;
◆ gitlab-ctl stop # 停止所有 gitlab 组件;
◆ gitlab-ctl restart # 重启所有 gitlab 组件;
◆ gitlab-ctl status # 查看服务状态;
◆ vim /etc/gitlab/gitlab.rb # 修改gitlab配置文件;
◆ gitlab-ctl reconfigure # 重新编译gitlab配置;
◆ gitlab-ctl tail # 查看日志;
◆ gitlab-ctl help # 查看相关的帮助
五、代码仓库数据迁移
1. 旧服务器数据手动备份
先停掉gitlab,然后执行备份命令
生成的备份文件会存在/var/opt/backups/目录下,生成的文件名如____.0.6_gitlab_backup.tar,其中.0.6是当前gitlab的版本号,恢复时使用的gitlab必须是同样的版本号,否则没法进行恢复。该文件里面包含了所有user、group、git repository数据。
2. 新服务器上恢复数据
将备份文件复制到新服务器的/var/opt/backups/目录下,停掉gitlab的puma、sidekiq两个服务,然后执行恢复操作
特别注意:
六、代码仓库自动备份方式一:使用gitlab配置文件设置自动备份
1. 编辑 /etc/gitlab/gitlab.rb文件,找到以下内容并按照如下配置:
2. 更新配置
方式二:使用Linux系统crondtab服务自动备份
1. 配置定时任务:crontab -e
查看定时任务:crontab -l
0 2 * * * /opt/gitlab/bin/gitlab-rake gitlab:backup:create 表示每天凌晨两点执行备份命令
设置cron服务开机自启:systemctl enable crond.service
修改后重启cron服务:systemctl restart crond
tips:
2. 自动上传gitlab的pincache源码备份文件到另一台服务器
1)设置两台服务器免密登录
2)编写自动上传备份文件shell脚本:gitlab-upload.sh,内容如下:
编写完成后要对文件赋予执行权限:chmod +x gitlab-upload.sh
3)设置crondtab定时任务
执行crondtab -e命令,设置为每天凌晨三点执行远程传输备份文件任务,内容如下,
保存后要重载crond服务:systemctl reload crond.service
七、小结
总的来说,Gitlab的搭建过程比一般软件的搭建要繁琐,另外像数据自动备份、数据迁移所用到的Linux技能也较多,可以按需配置和操作。最后,总结一下本次用到的Linux技能:
Django实现crontab远程任务管理系统
在之前的文章中,我们已经探讨了如何使用 django-crontab 和 apscheduler 在Django应用内部管理定时任务,这些模块主要用于处理应用自身的任务调度。 然而,本文将转向一个不同的场景,类似于Java的xxl-job,我们构建了一个系统,beibq源码能够通过Ansible API,远程管理不同Java项目中Task的定时任务。这个系统是ansible cron模块的可视化界面,允许你便捷地在Django后台添加、修改和删除Linux主机上的crontab任务。 核心技术实现涉及创建一个crontab模型,并将其集成到Django Admin中。每当模型发生变化时,会触发post_save信号,进而通过celery执行Task。这个Task调用ansible-runner的playbook接口,将crontab命令发送到指定主机。 模型设计和celery task的ansible-playbook执行是关键部分。在编写Task函数时,我们注意到增加了一个未实际使用的update_time参数,以确保每次更新都会生成新的Task实例。同时,使用mark_safe函数处理crontab命令中的特殊字符,render_to_string用于根据模型数据动态生成playbook模板,os.environ设置ansible的环境变量。 配置celery和信号处理,包括celery任务注册、异步任务日志独立存放以及信号机制的理解,都构成了技术栈的一部分。同时,我们还讨论了logging配置,以及在Django Admin后台记录操作的问题,特别是关于用户身份识别的挑战。 源代码已发布在gitee上,dj_cronjobs[6],并提供了详细的Readme.md指南供读者参考。如果你觉得这个系统有用,请通过我的个人公众号(搜索全栈运维 或者 DailyJobOps)获取更多信息,也可以直接在公众号中找到Django获取当前登录用户的方法[5]。 相关链接如下:[6] dj_cronjobs: gitee.com/colin/dja...
在Linux系统中安装使用恶意软件扫描工具及杀毒引擎的教程
恶意软件是指任何旨在干扰或破坏计算系统正常运行的软件程序。虽然最臭名昭著的几种恶意软件如病毒、间谍软件和广告软件,但它们企图引起的危害不一:有的是窃取私密信息,有的是删除个人数据,有的则介于两者之间;而恶意软件的另一个常见用途就是控制系统,然后利用该系统发动僵尸网络,形成所谓的拒绝服务(DoS)攻击或分布式拒绝服务(DDoS)攻击。
换句话说,我们万万不可抱有这种想法“因为我并不存储任何敏感数据或重要数据,所以不需要保护自己的系统远离恶意软件”,因为那些数据并不是恶意软件的唯一目标。
由于这个原因,我们将在本文中介绍在RHEL 7.0/6.x(x是版本号)、CentOS 7.0/6.x和Fedora -中,如何安装并配置Linux恶意软件检测工具(又叫MalDet,或简称LMD)和ClamAV(反病毒引擎)。
这是采用GPL v2许可证发布的一款恶意软件扫描工具,专门为主机托管环境而设计。然而,你很快就会认识到,无论自己面对哪种环境,都会得益于MalDet。
将LMD安装到RHEL/CentOS 7.0/6.x和Fedora -上
LMD无法从在线软件库获得,而是以打包文件的形式从项目官方网站分发。打包文件含有最新版本的源代码,总是可以从下列链接处获得,可使用下列命令来下载:
代码如下:
# wget /new/download.html 下载宝塔安装文件,按照提示完成安装。确保服务器环境为Linux CentOS,安装PHP扩展fileinfo和redis。域名解析应指向服务器IP。
准备前端环境:安装HBuilder X 3.7.6和微信开发者工具。Node.js版本需更新至v..0以上。
下载并安装源码:从码云下载源码至api目录,解压后上传至服务器。通过浏览器访问安装页面,按照提示填写协议、数据库信息,并检查安装。安装完成后,删除安装目录,使用管理员密码登录后台。
配置定时任务:为自动处理超时订单,需在supervisor管理器中设置定时任务,以确保ThinkPHP的crontab定时运行。
小程序编译:使用HBuilderX打开uniapp文件夹,配置微信小程序AppID和接口地址。确保uniCloud文件夹在运行时可用。
App编译设置:为uni-app应用设置标识和图标。配置云函数、云空间关联,完成后可发行并发布到App Store或Google Play。
基础配置检查:仔细设置存储引擎、支付参数、小程序和uniapp配置。确保所有配置正确无误,以保证盲盒商城系统正常运行。