0X00 *args是什么 我们知道Python3中的print从一个关键字变成了一个函数，那么调用的时候我们可以这样调用这个函数，可以随便接受几个参数。 那么如果我们想自己实现类似这样‘变态’的函数该怎么实现呢？这就需要用到*args了，可以将一个非键值对的可变数量的参数列表传给一个函数（换个书佛啊：可以传n个参数给函数，而且n不是固定的），举个例子就容易理解多了。 运行这个例子的输出就是这样的 还有一个更棒的例子来自Gitbook 输出是这样的 这个例子完整的说明了\args的用法，我们传入的第一个参数被函数指定的f_arg接收到了，其余的都被args接收到了。 0X01 **kwargs是什么 写代码的时候还会有一种函数调用，大概是这个样子json.dumps(dict_data)和json.dumps(dict_data, indent=4)。当然，实现这种的方式有一个最简单的方案就是def dumps(input_data,…
0X00 安装环境 我们在Python开发和学习过程中需要用到各种库，然后在各个不同的项目和作品里可能用的版本还不一样，正因为有这种问题的存在才催生了virtualenv的诞生。virtualenv可以在电脑上创建一个虚拟环境，可以针对每一个项目创建一个虚拟环境，这样就不用担心各个不同的项目用不同版本的库的时候出现的冲突了。 下面的内容只适用于Linux/OSX，未经Windows环境测试 要使用这个功能还是需要安装，安装virtualenv肯定就得直接用pip安装了，pip install virtualenv就可以轻松装上了。装好之后我们就可以来测试一波了。 0X01 初始化一个空的工作环境 首先在一个空的环境中执行virtualenv --no-site-packages…
内容参考自python - 操作RabbitMQ 0X00 安装环境 首先是在Linux上安装rabbitmq 然后用pip安装Python3的开发包 安装好软件之后可以访问http://115.xx.xx.xx:15672/来访问自带的web页面来查看和管理RabbitMQ。默认管理员的用户密码都是guest 0X01 简单的向队列中加入消息 0X02 简单的从队列中获取消息 0X03 万一消费者掉线了 想象这样一种情况： 消费者从消息队列中获取了n条数据，正要处理呢结果宕机了，那该怎么办？在RabbieMQ中有一个ACK可以用来确认消费者处理结束。就有点类似网络中的ACK，消费者每次从队列中获取了数据之后队列不会立刻将数据移除，而是等待对应的ACK。消费者获取到数据并处理完成之后会向队列发送一个ACK包，通知RabbitMQ这堆消息已经处理妥当了，可以删除了，这时候RabbitMQ才会将数据从队列中移除。所以这种情况下即使消费者掉线也没有什么问题，数据依旧会在队列中存在，留给其他消费者处理。 在Python中这样实现：…
0X00 什么是REST风格的API 众所周知http协议有GET/PUT/POST/PATCH/DELETE等众多方法，还能在提交请求和发送响应的时候携带数据。REST风格的API就是使用了这些HTTP特性的API。针对一个URL可以有多种动词(方法)来表示不同的操作。 更多详细的内容可以点击查看阮一峰的博客：理解RESTful架构 0X01 怎么选用HTTP动词 常见的动词有这五种，可以对应自己的需求选用 | 动词 | 类似的SQL关键字 | 功能 | | |: :|: :| | GET | SELECT | 获取资源 | | POST | CREATE | 创建资源 | | PUT | UPDATE | 更新资源（需要提供改变后的完整资源） | | PATCH | UPDATE | 更新资源（需要提供改变的属性） | | DELETE | DELETE | 删除资源 | 0X02 设计URL REST风格的API因为可以用HTTP的动词，所以URL中是不带有动词的，如果我要获取某个学生的信息应该是[GET]…
在写一些系统脚本或者自动化运维脚本的时候经常会用到os库，这里做个整理，方便查找 os.sep 获得当前操作系统使用的目录分隔符，比如Windows就会得到\而Linux/Unix就会得到/ os.name 获得当前使用的操作系统，Windows是NT内核，所以会得到nt，而Linux/Unix用户则会得到posix os.getcwd() 获得当前工作目录，即当前Python脚本工作的目录路径。 os.getenv() 用来获得环境变量 os.getenv('PATH') os.environ 可以获取并修改环境变量 os.listdir() 列出某目录下所有的目录和文件 print(os.listdir()) os.remove() 删除文件 os.remove('D:/test.file') os.system() 运行Shell或者CMD命令 os.system('ifconfig') os.linesep 获取当前平台使用的行终止符。例如，Windows使用\r\n，Linux使用\n而Mac使用\r。 os.path.split()…
0X00 HDFS的设计 HDFS作为GFS的开源实现，和GFS是高度一致的。在HDFS中有着下面的优点 1. 对超大文件支持良好，由于其分布式实现，可以存储超大文件，甚至单个文件大小可以超过集群中任意一台机器的磁盘大小 2. 采用流式数据访问，一次写入、多次读取是最高效的访问模式。因为Hadoop作为一个大数据处理平台，并没有频繁的写入操作，只是在需要的时候一次将大量的数据写入然后在对这些数据进行读操作 3. Hadoop并不需要运行在昂贵且高可靠的硬件之上，单个节点可能性能可靠性都参差不齐，但是由于其高可靠性的设计，使之能在遇到节点故障时继续运行且不让用户察觉到明显的终端 但是HDFS也不是适用于各种场景，一下的几种场景就不适 1. 低时间延迟的数据访问，因为HDFS是以时间延迟为代价针对高数据吞吐量优化的，所以HDFS不适用与低延迟的数据访问 2. 大量的小文件，因为Namenode的设计是将文件系统的元数据存储在内存中的，所以理论上HDFS中的文件最大数量受限于Namenode的内存容量，因此大量的小文件会占用Namenode大量的内存 3.…
String类中每一个看起来会修改String值得方法，实际上都是创建了一个全新的String对象，以包含修改后的字符串内容。而最初的String对象则丝毫未动。 《Java编程思想》第13章 0X00 String常量池 如果使用常用的方式定义两个内容完全一样的字符串，那么Java使用常量的方式，也就是说第二个字符串并没有生成一个对象而是引用了之前的字符串，导致他们的本质是一样的，所以当使用==判断两个字符串对象是否是同一个对象的时候，会显示是同一个对象。但是如果我们每次声明一个字符串的时候使用new String()的方式，则会每次创建一个String对象，两者就不是同一个对象了。 0X01 StringBuilder 字符串的拼接在Java中非常方便，但常用的使用+来拼接字符串效率很低，在需要拼接的次数不是很多的时候不会影响多少效率，但当需要拼接的字符串数量很多的时候就需要使用StringBuilder来拼接。该类中有一个append()的方法，就是将一个字符串连接到本对象的字符串后面。下面我们来对比一下这两个拼接方法的速度差异。 执行结果如下 使用+连接耗时: 850…
文章中的代码仅在Python3中测试成功，没有在Python2中测试。 0X00 退出程序，显示错误信息 写脚本的时候经常会有执行出错，出错的时候可以用一句话把程序退出并且打印错误信息 raise SystemExit('error message') 0X01 输入密码 有的时候需要输入用户名和密码，使用input()输入用户名自然没有问题，但是用相同的方法输入密码的时候时使用明文的。长期用Linux的可能对Linux中密码的输入比较有印象，输入密码的时候是密文，且没有任何提示，包括星号，所以用这种方法输入密码是非常安全的。使用petpass库可以简单的输入用户名和密码，输入用户名最简单还是input()，如果要获取当前登录的用户名就可以使用getpass.getuser()，输入密码就可以使用getpass.getpass()来实现Linux中的那种密码输入。 如果测试的时候有问题可以在命令行下测试，比如Windows的CMD或者Linux的终端 0X03 执行命令…
文章中的代码仅在Python3中测试成功，没有在Python2中测试。 0X00 指定编码 每个文本文件都是以某一编码格式保存的，如果解码格式和文本格式不同就会出现乱码，在Python中可以简单的控制用什么编码来打开文件以读写文件。使用open打开文件的时候指定一个encoding参数就可以使用其他而非默认编码打开文件了。这里用到了一个打开文件的方式是with open() as f:这样，这样做的话在这个with下面的代码块中可以直接调用f这个文件对象，并且执行到with代码块之外的时候会自动关闭文件，不需要再手动关闭文件。 0X01 输出重定向 在Linux中可以对命令的输出进行重定向，将本应该输出到屏幕的东西输出到指定的文件里，在Python中也是可以简单做到这一点的。假设一个已经用写入模式打开的文件对象f，在输出文字的时候就可以直接这样调用print('hello,world', file=f)就可以直接将输出的内容重定向到文件中。这里需要注意的就是文件必须已经用可写模式打开，且是文本模式。 0X02 指定分隔符和结尾…
文章中的代码仅在Python3中测试成功，没有在Python2中测试。 0X00 任意个参数 Python中一般定义函数是这样的def add(a, b)，参数的个数是固定的，那么怎么才可以接收任意多个参数就像rm 1.txt 2.jpg 3.mp3 4.cpp这样？很简单，使用`和就可以。下面代码里第一个参数a接收到了hello,world而b`则接收到了其余所有的参数，将其作为一个元组。 0X01 添加注解 在Python中定义函数的同时可以也给函数添加注解，注解可以帮助我们在调用函数的时候起到一个提醒的作用。虽然几十行的代码不会遇到看不懂的情况，但是在修改别人代码或者编写一个大项目的时候必然会有这种问题。我们可以直接在代码中加注释来解释说明，但是使用注解还是要比注释来得简单方便。不过通过注解注解指定的类型不像是C语言那样有实际意义，就算是你传入的参数和返回的值不是按照注解来的也不会报错。 0X02 默认参数…