All Posts

本篇主要记录消息队列在项目中的应用及部分调用代码。 --- 入门 消息队列的作用：https://mp.weixin.qq.com/s/2998ryj46sLNbAsK4IwZXA 为什么每一个爬虫工程师都应该学习 Kafka：https://mp.weixin.qq.com/s/NtBPMRhmtcI3JgMQ5oqaVQ --- 选型 常用消息中间件17...

记录一些常用的库，方便想不起名字的时候找！ --- mysqlclient 这货在mac上安装会遇到很多困难！！！ 在使用SQLAlchemy时依赖此库；如果系统里没有mysqlconfig；可以brew install mysql。 但是太臃肿里；可以用代替的方法： 参考资料： https://github.com/PyMySQL/mysqlclient-...

无服务、函数计算（云函数）在几年前就被炒的很多，但真正去使用的人并不多，受限于整体架构设计，轻量化不足以满足需求等等。本篇记录一些Demo，平时玩玩还是很有趣的。 目前国外云，Google Cloud，Amazon，Azure等云函数支持语言都比较全面；python也支持requirements.txt安装依赖。 国内云支持语言比较全面的是腾讯云，pytho...

curl 统计接口时间 --- 测试数据生成 别再造假数据了，来试试 Faker 这个库吧！https://mp.weixin.qq.com/s/iLjr95uqgTclxYfWWNxrAA 官方文档：https://faker.readthedocs.io/en/master/locales/zhCN.html --- Pyppeteer Puppetee...

简单的过了一遍，有空来一份Python实现。 --- 你好 Redis，能回答我 7 个问题吗？ Redis 的通讯协议是什么 Redis 究竟有没有 ACID 事务 Redis 的乐观锁 Watch 是怎么实现的 Redis 是如何持久化的 Redis 在内存使用上是如何开源节流 Redis 是如何实现主从复制 Redis 是怎么制定过期删除策略的 htt...