0X00 就算只有一节我也要写标题 众所周知Dockerfile是构建Docker镜像的优良方式,而使用Dockerfile构建镜像最重要的就是为数不多的几个命令,而本次的主题COPY和ADD就是其中两个。我们知道这两个命令都是将文件搞到Docker镜像里用的,那究竟有没有区别,有什么区别呢? 首先我们看一下当前这个目录: 我们有着么一个Dockerfile,可以看到是基于fedora的一个镜像,并且将目录下的excited.tar放进了创建好的shawn目录中 我们可以看到工作目录下已经存在了一个excited.tar了,也就意味着我们成功将这个文件搞进去了。 如果同样的操作用ADD呢?看上去是类似的操作实际上并不是 我们进到容器里可以看到打包文件被拆解了(压缩文件也会被解压) 其实不止这样,ADD 命令还能下载文件:ADD https://too.young/too/simple.pdf /hello就能将文件下载下来并且命名为hello;如果是ADD https://too.young/too/simple.pdf…
0X00 Redis的分库 使用过MySQL或者类似的数据库都应该知道,一个数据库内部是可以分成多个库的。比如MySQL从上到下是MySQL service -> database -> table -> field,但是一开始使用redis的时候好像是没有database这一层的呢?其实是存在这么一层的,redis默认是存在编号0到15这总共16个库的,每个库除了命名空间不同以外都是相同的。也就是说在编号为0的库里set name shawn之后跑到编号为1的库里get name是拿不到的。 那这么说来这个分库究竟有什么用呢?其实很少用的到,甚至就连redis的设计者自己都说搞这个是较蠢的操作。我们日常用到的唯一一处地方就是在测试服务器上,因为一台机器部署了太多服务,而且每个服务又都要用redis所以就每个服务分开使用0~15这些数据库。 因为开一个完整redis实例的资源消耗本身就很小,所以分库这个操作就更显的不太用的到了,毕竟我们完全可以在一台机器上开多个redis实例从而实现相同的效果,而且又方便管理。…
0X00 最常见的两种构建方式 构建Docker镜像的方式并不多,最常用的也就只有:编写Dockerfile和使用docker commit这两种。既然方式分为两种那么肯定是有区别的(废话),那我们来看看吧。 首先来介绍一下这两种构建方式,假设打算使用docker部署我们的服务,那么我们来使用两种方式来构建一下这个镜像吧。 0X01 docker commit 像我们这种新手平时用的比较多的应该就是docker commit xxxxx hub.xxx.xxx/xxx:xxx这种方式了,我们称之为docker commit。这种方式比较好操作,比较好理解,操作也比较容易。如果掌握了git的工作流程,那么使用docker commit方式来构建镜像简直是小菜一碟。 1. 我们搞一个基础镜像比如fedora,那我们把它搞下来:docker pull fedora 2. 运行并进入到容器里docker run --name our_container -it fedora /bin/bash,此时shell已经接入到容器里了 3. 我们来安装吧 dnf install…
0X00 前言 不论多初级的后端程序员,只要认可自己是“后端程序员”那最起码也是听过“数据库索引”这个东西的,应该也直到这东西能让数据库变快。但是具体“数据库索引”是个什么东西,怎么用,为什么能让数据库变快可能就不一定清楚了。 这篇博客仅仅是简述了“数据库索引”的最基础内容,不涉及内部原理(其实我也还没搞懂)。阅读了本篇博客可以(也许)搞清楚怎么给一张表添加索引,索引加在哪儿,以及为什么不能给所有字段加索引。 0X01 一个业务场景 假设我们搞了一个电商平台“并夕夕”,现在有超多用户大概几百万,很多人都在我们系统里买了东西,大概下了1000W单。那么我们用来存储订单的表就有大概1000W条数据了,那么我们这个没有进行过任何优化的数据库就已经顶不住了,我们每次在后台查看订单列表的时候一个查询就要快20s,显然是一个接受不了的速度了。 那么我们来看一下这个列表都干了什么:“根据 订单状态(下单待支付/已支付/配送中/已收货/退货中/已完成),订单类型(直接购买/拼单购买/分享白拿)等状态筛选,并取出前20条展示出来”。后台SQL是这个样子的SELECT * FROM bxx_order…
0X00 给一个方法计时 现在我们有一个需求,需要给程序中的一部分方法计时,以监控他们执行完具体用了多久。那么在没有装饰器的情况下我们会写出类似这样的代码: 0X01 引入装饰器 如果只是临时给一个方法使用也不是不行,但是如果我们需要监控大量的方法呢?众所周知Python中function也是可以作为参数传递的,那来看一下下面这种写法呢 因为上面timer(foo)返回的结果是一个func,所以后面需要再加一对括号来调用这个方法 这种方法只写了一次计时的逻辑,但是可以给任意一个方法使用,其实这时候def timer(func)已经是装饰器了,下面调用的方法timer(foo)/timer(bar)也是正确的装饰器使用方法。那是不是觉得和常见的装饰器使用不太一样呢?其实常见的@timer用法是Python中提供的一种语法糖。 0X02 @语法糖 其实上面的代码就可以直接使用@语法糖了,具体用法是这样:…
0X00 什么是可迭代对象 我们平时用到的list/set/tuples是最常见的可迭代对象,简单判断就是说当可以for item in this_obj的时候this_obj就是可迭代对象。所以不只是list/set/tuples,打开的文件或是Django中的queryset也都是可迭代对象。 使用iter()可以将列表变为一个迭代器,然后使用next方法访问下一个元素。实际上iter(this_obj)方法和next(this_obj)方法分别调用的是this_obj.__iter__()和this_obj.__next__(),所以我们如果想要自己实现迭代器的话就需要实现这两个方法。 0X01 迭代器 那我们来实现实现一个计算斐波纳契数列的迭代器吧。 运行起来: 这里没有中断的判定,如果需要中断的话就抛出一个StopIteration异常就好了,就像这样: 0X02 生成器 生成器是一类特殊的迭代器 ,将我们平时写的这种[i for i in range(100)]列表生成式的方括号换成小括号,就是将结果从列表变成生成器了(i for i in range(100))。…
0X00 前言 没有什么前言,只有一个数据库模型,下面的代码使用这个模型拿来测试。 我们先假设Major表存在10条数据,而Student表存在1万条数据。 0X01 使用select_related 如果我们要得到所有的学生和他们所学专业的名字,那么我们可以轻松写出下面的代码 这样就能得到所有学生姓名和他们所学的专业名了,但是重点在于这次查询其实是一个很低效的查询,因为在Student.objects.all()的时候查询了一次数据库,而且每次访问student.selected_major.name的时候都会再查询一次数据库,基于上述条件这两行代码将会查询10001次数据库,是一个比较夸张的数字了。那么如何用select_related来优化这次查询呢? 其实就是在all()之后添加了select_related('major'),这次就只需要对数据库进行一次查询。在我本地的类似环境下测试结果是不使用select_related消耗的时间是优化后的400%左右。…
0X00 没有什么用的开头 众所周知https是安全加密的协议,那么https究竟是如何保证数据传输的安全性的呢?这里来简单介绍一下https的安全机制。 0X01 简介 HTTPS全称是 _Hypertext Transfer Protocol Secure_ 也就是传统的HTTP加上了S _Secure_ ,也可以叫 _HTTP over TLS_ ,总之就是加了密的HTTP嘛。 最常见的加密就是通信双方共有一个密钥,使用这个密钥对原文进行加密和解密,简单粗暴。但是万一密钥泄露了,那么任何人都可以用这个密钥解密你们通信的所有内容,甚至通信双方都是无感知的。(想象一下你和小姐姐的聊天记录被一个扣脚大汉一行行的看完还嘿嘿傻笑是不是贼恐怖)…
编辑器之神可不是浪得虚名 0X00 遇到了一些问题 如果你看到了这篇文章那么我可以认为你至少已经掌握了vim基本用法。在我个人使用vim的过程中遇到了一些问题,这次就挑“寄存器”这部分出来说一下吧。 我这里贴一段代码过来,这段代码出自我在学校时写的一个小项目open_disframe 现在我们在编辑编辑这段代码的时候需要将其中的部分内容替换掉,比如将第一个if中的slave_socket.send.....和第二个if中的process_heartbeatxxx和第三个if中的continue替换成break。虽然这么做可能有点诡异,不过这里实在没找到完美的适用场景,公司的代码也不能贴出来,又懒得编造一个完美适用场景,就先这样看吧。 通常我们与到这种情况都会是下面的操作流 1. 手动替换第一处的break 2. 复制break 3. 找到下一处需要替换的地方选中 4. p粘贴过去 5. 找到下一处需要替换的地方选中 6. p粘贴过去 7. 发现“剪贴板”被上面那次被替换掉的数据覆盖了,以至于将上次删掉的内容贴过来了,而不是自己想要的break 8. 沮丧中。。一个个复制粘贴替换过来…
0X00 何为正版 正版的即“正确地使用版权”。而版权是属于版权所有人的,版权所有人提出使用条件,使用者只要符合条件,就算是正确地使用,就不违反版权法。 以上来自维基百科:“正版”词条 0X01 我的正版观念 正确的版权观念当然应该是在任何情况下都要“正确的使用版权”。但是几乎不会有人能做到这一点,我这里不谈政治正确,只是说一下我个人的正版观念。我的正版观念简单说来就是“在自己条件允许的情况下尽可能的使用正版”,当然这里的条件允许不只是指的经济条件,还有各种其他的因素。 比如说电影,按照最正确的正版意识来说应该是在上映时在电影院观看,院线下映后在各个视频网站观看或单独购买光盘/数字授权等。我个人只做到一部分,电影还在院线时我要么去电影院观看要么就等下映后在线观看,从来不下载观看“枪版”和“泄漏版”,不过下映比较久后也有可能会通过“torrent(也就是种子)”下载到本地观看。 音乐也是类似。我一般都是使用本地音乐播放器听歌,不论是在电脑还是手机上。不过每次发现新音乐都是通过在线播放器,当喜欢的新音乐达到了一定数量后就充值对应平台的会员把他们下载下来,继续使用本地播放器播放。…