ossfs的使用
阿里云的oss对象存储是公司常用的文件服务，也是和cdn配合的最好的方式。oss的同步可以通过java 和php客户端来执行，也可以通过ossutil这样的用go写的客户端来进行，但是最无缝的方式是将oss mout成linux下的一个目录，从而对应用程序无感，这就是fues技术。用户空间文件系统（Filesystem in Userspace，简称FUSE）是一个面向类Unix计算机操作...
容器和编排开篇之基本操作
这个系列的文章是准备深入学习和研究容器和容器编排相关技术的，当然不能免俗的先写写docker的基本操作。上一篇介绍了docker基本的启动和获取对象，这里深入的说下镜像、dockerfile、提交等相关操作吧。首先是docker镜像的概念，第一篇文章已经介绍过关于容器的概念，docker的创新就是除了Linux基本提供的隔离等技术外带来的容器镜像的概念，容器镜像可以简单的看成一个模板，一个...
容器和编排开篇之容器是什么
容器技术应该是时下最最火的技术之一了，应该说用容器非常早，可以追溯到20132014年的那段时间，关注容器和容器编排也非常非常久了，因为个人比较懒惰的原因，一直没有写过关于容器关于蓝色鲸鱼的什么文章，我想2019年开篇的文章就写关于容器的一些什么东西做为开篇和第一个系列文章吧。首先谈下个人对容器的理解，容器就是一种轻量化的虚拟化技术，基于linux的cgroups、namespaces c...
2019技术展望和方向
2018年的最后几天在三亚渡过，今天回到上海了，已经2018年的最后一天，写点什么东西算是对今年技术工作的总结和明年新的展望吧。应该说整个2018年是带领整个上海魅客招投标项目相关开发人员彻底转向Java转向Springboot构建的微服务的一年，只能说工作仅仅完成了一部分，Java的转型和实践还算顺利，下阶段的工作主要会朝着整个团队的Devops和微服务化继续努力的行进吧。稳定基础架构和前后...
基于Rsync和inotify的来实现Linux服务器文件同步备份
使用场景：实时同步服务器见得文件变化。使用的技术：Rsync和inotify操作过程： 在远程服务器搭建rsync server 打开防火墙相应设置开发rsync server的相关端口 先同步一次，在需要同步的服务器上执行命令：/usr/bin/rsync vzrtopg delete progress passwordfile=/etc/rsyncd.pw...
利用maxwell读取mysql binlog来同步数据库
应用场景：在工作中需要同步两个机房间的mysql数据库，但是不想通过使用类似mysql自带的主从同步这样的技术，这里做的同步仅仅是将远程数据库同步下来。原理上如同mysql自带的replication技术，同样也是对于mysql自带的binlog的读写。通过搜索google有些开源的解决方案可以使用，本文介绍的是使用一款基于java开发的软件maxwell来实现的。maxwell是一个...
Springboot实现Streaming Upload基本篇
近期忙于各种各样的的项目开发，难得有时间来更新文章，话说最近其实因为项目的原因做过和实践过各种各样的技术，这个新主机和域名算起来也一年多了，忙于各种事务一直没有好好的更新文章，从今日开始应该告诉自己需要勤奋一点，尽量多更新这里的文章。今天先总结下近期因为项目需求在项目内使用的streaming file upload技术。首先说下什么是streaming upload。Http strea...
Mysql 开启bin-log并实现自动化增量和全量备份
思路：开启 binlog 来做增量，用 Mysqldump 做全量开启之后，使用本文的两个脚本 即可全量和增量备份开启 binlog查看是否开启 binlog进入mysql命令行界面，show variables like '%log_bin%'; 如果 logbin 是 OFF 则表示没有开启，需要开启。备份目录看到 备份目录，也是没有 binlog 文件...
