文章列表

K3s安装注意事项

k3s自带了containerd作为CRI实现,不过我们一般习惯上还是使用docker作为运行时。但是两者结合使用有一些坑,这里做一下记录。 不用containerd的主要原因是它的命令太难记,ctr/ctictl做的什么jb玩意儿。还有一个原因是,如果只想用容器不想用k8s,docker的功能是最完善的。
2024-02-19
9分钟阅读时长

Python技术栈更新

有段时间没用Python写工程了,基本都是写脚本,最近接了个活帮忙搞个爬虫相关项目,需要更新一下技术栈,做个笔记。 web开发:fastapi, 其实还可以接着用flask,不过前者对asyncio支持更完善一些,顺便学一下新东西;至于django还是太重了,写单体估计有点用; 数据库ORM:仍然可以继续使用sqlalchemy,最新的是2.0版本,已经支持asyncio; 爬虫:爬虫相关的技术栈变化不大…scrapy其实不太好用,封装的太厚,而且twisted早就过时了。自己写的话就: 用aiohttp做网络请求; dom解析:仍然是基于lxml的技术栈,主要还是xpath和css-selector来获取元素; 浏览器模拟(动态网页):Playwright代替了Selenium等古早的框架; 打包:用docker就行; 验证码破解:这个相关的网站蛮多的,但是好不好使需要测试一下才知道。包括:yesCapture, 2Capture和穿云等; 其他反爬技术:这个只能随机应变了,现在很多网站都做了反爬,具体手段不一,需要尝试解决; FastAPI fastapi顾名思义,专注于提供API框架,不关心模版引擎、ORM之类的东西,但是自带了API文档(即swagger集成)。所以代码非常简单,不需要Django那套复杂的框架:
2024-01-09
4分钟阅读时长

Jinja2小结

之前写Python的时候其实有接触过一些jinja2,不过没有怎么用过实际上。毕竟前后端分离之后,这些模板语言在web开发上用处并不大。不过ansible选用了它做渲染模板,所以还是需要深入学习一下。比较蛋疼的是,k8s这边因为都是golang生态,所以用的是go template,那就是另外一套东西了。
2024-01-05
2分钟阅读时长

Ansible速成

虽然iac(infracture as code)流行以来,新的技术栈层出不穷,但是一般都是面向k8s或者云服务商的。传统的部署还是用ansible这种仅依赖ssh的最简单。
2024-01-04
6分钟阅读时长

Kcl试用

kcl是蚂蚁金服开源的配置DSL,诞生比较晚,所以吸纳了已有的jsonnet、hcl、cue等方案的优点。 安装 对于linux: wget -q https://kcl-lang.io/script/install-cli.sh -O - | /bin/bash 这个脚本本质上还是从github中下载发行版,所以也需要翻墙。
2024-01-02
4分钟阅读时长