ubuntu获取离线安装包 运维部署 工作经常会遇到需要离线安装软件的情况，特此记录下来，避免每次都得去翻笔记。一 构造运行环境1 使用docker提供目标操作系统在本地创建data目录并挂载到容器里，方便将生成的依赖取出。centos7mkdir -p /home/lin/ubuntu22/datadocker rm -f ubunt
我的服务器系列：clash-docker使用并实现订阅链接自动更新 我的服务器系列 clash docker镜像使用笔记，以及常用代理配置方法。2023.5月更新：使用filter实现自定义分组2022.9月更新：提供自部署proxy-provider-converter容器及国内部署链接，解决因vercel被墙而无法访问的问题2022.8月更新：使用clash-premium，并
PySpark自定义Transformer 机器学习 使用python实现自定义Transformer以对pyspark的pipeline进行增强一 示例from pyspark import keyword_onlyfrom pyspark.ml import Transformerfrom pyspark.ml.param.shared impor
PySpark学习笔记 机器学习 pyspark使用笔记，含1.jupyter-docker环境搭建 2.dataframe2jdbc,jdbc2dataframe 3.模型训练及保存 4.模型导入及使用 等。一 环境部署执行以下命令，访问 ip:18804即可，密码为：my-password镜像使用参考：https://jupyt
vbs实现wincc或mysql数据导出成csv 后端开发 工作要求，需要编写vbs实现将wincc数据导出，估计以后也没机会再接触这门古董语言了，所以就记录一下。因为wincc用得太少了，测试中会使用mysql代替。业务逻辑读取sql.txt文件，文件中每一行的格式为 id:select语句。连接数据库，按行遍历执行查询，查询到的结果输出到指定文件夹下，得
基于hdfs的ftp服务器的设计与实现 后端开发 本文主要记录hdfs-ftp-server的设计思路、实现过程，使用的话直接看github项目文档即可。项目地址：https://github.com/linshenkx/hdfs-ftp-server第一版hdfs-ftp-server这个项目我在20年的时候就开源过一版了，先做一下前提介绍。1
基于kube-prometheus的大数据平台监控系统设计 Kubernetes 本文介绍了如何基于kube-prometheus设计一个监控系统， 以灵活简单的方式对kubernetes上的应用进行指标采集，并实现监控报警功能。本文提供了作者的应用示例，另外还记录了作者在学习、使用Prometheus过程中的一些笔记，如arm版镜像获取、一些工具的使用等。零 前言众所周知，大数
centos7配置wifi 运维部署 自用笔记：笔记本当服务器时配置连接WiFi和关闭合盖休眠操作准备查看 NetworkManager-wifi 是否安装rpm -q NetworkManager-wifi未安装则先进行临时wifi连接临时连接# 1. 查看联网信息 ip addr# 能看到有个 wlp1s0 的无线网卡（也
基于k8s的家用大数据集群设计与实现 大数据 使用3台废旧笔记本搭建k8s集群，部署大数据组件，利用路由器进行异地组网，配合wsl作为管理和客户端，实现随时随地，在工作笔记本上以本地访问的体验使用自建家庭大数据平台进行学习、开发、测试。前言起因最近换了电脑，之前的机器闲置着浪费，又刚好看到了https://github.com/geekyout
个人博客系统设计(支持hexo和halo同步) 程序员杂记 本文主要介绍自己的博客系统是如何设计的，并使用Halo博客同步器 将hexo（git pages: https://linshenkx.github.io ）文章自动同步到halo( http://linshenkx.cn )。实现一次编写、两套博客系统并存、多个网址访问的效果。2022.11 更新
