目标： 将默认的/var/lib/docker数据目录迁移到/data/docker-files之中 步骤： 前期准备 进入root: sudo -i 准备目录： mkdir -p /data/docker-files 修改docker的配置文件: 仅针对17.06-ce之后的版本 [crayon-6982943ee949a195871755/] 重启Docker Servicer [crayon-6982943ee94a0903914635/] 检查设置是否生效： [crayon-6982943ee94a1481…

首先进入root sudo -i 使用fdisk 命令查看磁盘label， 因为我们创建的时候用的是200G， 所以可以用200来加速 fdisk -l | grep 200 输出： [crayon-6982943ee9994442432282/] 格式化磁盘 [crayon-6982943ee9999653053189/] mount这个磁盘到/data目录 [crayon-6982943ee999a630507414/] 这个时候已经可以使用挂载上去的磁盘了 使用blkid命令查看磁盘ID [crayon-69…

前言 LibFFM 在之前的好几界CTR比赛之中都取得了非常不错的成绩。但是在使用上， 最大的问题莫过于其特殊的libffm格式了。下面会覆盖两个问题： * 简述libffm数据格式 * 单机将pandas DataFrame 转成libffm 的实现（已优化） 什么是libffm格式 这部分内容主要参考： https://www.jianshu.com/p/9c2c2421ef2e 假设有下面数据： 其中： User / Movie / Genre 是类别， 可以进行One Hot Encoder Price是连…

作为萌新， 感觉这次读的论文在业界影响力还蛮大的样子。 Google显示引用数200+， 同时还有一些大神已经做了翻译。 太感谢他们了！ 原文Paper: PDF: Practical Lessons from Predicting Clicks on Ads at Facebook 翻译文章： https://note.youdao.com/ynoteshare1/index.html?id=866cda0a11142307c27b6c072a79d3eb&type=note#/ 自我总结的要点： Fea…

前言 笔者主要的后端项目都是使用Flask。 在使用Python写代码的时候， 最喜欢的打印日志方式， 应该就是使用print了吧。 这种方式最简单， 但是也有一些天生无法克服的缺点。 比如： python2 跟 python3 不兼容 只能打印出消息， 相关的附加信息都没有。 在定位问题的时候， 可能缺少关键信息。 特别是在中大型项目里面， 想构建一个稳定的系统， 日志必不可少。 笔者尝试根据自己实践的经验，基于Flask这个框架，讲清楚以下几个问题： 日志在Flask之中的基础使用方法 如何在Flask之中配置…

今年无论是阿里云还是腾讯云，双十一的活动力度都不小。 不过阿里云依然是新用户是上帝， 老用户不如狗。。。 这一点腾讯云对我等老用户还是很友好的！ 太长，不想读？直接看结论： 阿里云新用户 点这里： https://m.aliyun.com/act/team1111/#/share?params=N.9g4CZ2TwSh.stfe5wwz 备选：腾讯云秒杀 https://cloud.tencent.com/redirect.php?redirect=10172&cps_key=5dbcfb42d5d5464…

前言 写了很多很多Flask的API， 但是一直偷懒， 没有使用Gunicorn来作为Web Server 来运行成。 后来因为某个线上服务， 经常出现timeout的情况。 在已经采用了好一些措施的情况还是无法完全避免的情况下， 想到了Gunicorn。 下面是迁移之前进行的一些简单的性能测试。 真正迁移其实比下面的脚本要复杂一些。 Gunicorn安全与测试命令 安装Gunicorn 安装与运行很简单，直接pip命令即可： [crayon-6982943eea635617635479/] 性能测试工具： wrk…

目标 将基础指标（机器资源、API响应）的监控最大化的简化部署与维护工作。 目标机器： 适用于20~30台机器或者API进行监控。 其报警标准也适当简化。 目前对于机器， 仅支持*NIX类型的机器。 因为小团队， 可能管理的机器数量也并不大， 但是又需要监控。 目标用户： 全栈开发团队， 需要花费更多的时间与精力在业务开发， 对监控要求不高， 但是又有基础的监控需求。 方案特点 1. 极简部署与运行 通过docker的方式， 只需要一个命令就可以把这一套系统搭建运行起来。 2. 可视化、傻瓜化的配置 无论是Zabb…

前言 Docker安装的文章很多了， 但是我心中最理想的安装方式并没有记录。 或者说记录了但是搜索引擎没有找出来。 在这里多记录一次， 希望能让更多的人看到 首先卸载之前的版本 以前曾经出现过的版本或者名称： * docker-io * docker-engine 现在统称： docker-ce。 为了能够安装最新版， 需要将之前的版本完全卸载： [crayon-6982943eea9c3805977837/] 使用安装脚本直接安装 官网记录了几种安装方式， 个人觉得使用脚本自动安装是最方便快速的。 因为Ubunt…

前言 所谓的MGR， 全称： MySQL Group Replication, 是一种MySQL的主从架构。 因为之前的MySQL已经没有办法恢复起来， 实在没办法， 采取的方法是完全删除， 并重新安装、加入MGR 首先完整删除之前的MySQL [crayon-6982943eeaca2134913557/] 然后安装完整版的MySQL 参考文章Ubuntu 16.04安装MySQL官方最新“非阉割”版 注意： 如果安装的不是完整版的， 在最后安装MGR插件就会遇到绕不过去的坑。 主要步骤： 到 MySQL官方的 …