Pages:  1 2 3 4 5 6 7 ... 21 22
lytsing's Blog – 从事Linux/Android嵌入式系统研究,Web Developer,现在致力于移动支付。

Blog

  • 再见,Bluehost,省下一年一千块

    2010 年,我还是一个有追求的程序员。在境外买了台虚拟主机,用来部署个人网站和 WordPress 技术博客,当然,还有些别的用途,你懂的。

    后来工作是越来越忙,我也再没心思去打理。每年都要续费 225 美刀,折合一千多人民币,哎,咬咬牙续了,不忍心把网站关掉。

    再说了,这年头也没人去写技术博客了,真要写,也是奔着知识付费去的。

    看了阿里云的轻量级服务器,2 核 1 GB 内存,一年也才 400 多块,能省一千块钱。这年头,钱难赚,蚊子腿那也是肉啊!

    于是,我在印象笔记里用 AI 帮我写了一篇文章:《WordPress 迁移 Bluehost 到阿里云 ECS 流程指南》。

    当我吭哧吭哧地迁移完,发现大家早都不玩 WordPress 了,改用 Hexo。

    以前我用 Emacs Muse 搭建一个 wiki,现在流行用 Outline 做私有部署。

    以前在 Bluehost 上折腾 Rails 应用,部署很麻烦,最终放弃。现在阿里云主机,装啥都行,一个 Nginx 前置代理服务器,可以配置许多域名,然后转发到 Rails、Node.js 后台应用,简直不要太爽了。

    有 AI 加持,整个迁移比较顺利,就是编译 Ruby 卡了很久,折腾了一个晚上才算搞定,特记录一下。

    下面几段是排障记录,想自己折腾的朋友可以直接照抄,不感兴趣的跳过。

    先确认是不是真的被 OOM 杀了,另开一个终端,运行:

    dmesg -T | grep -i -E 'oom|killed process'

    如果输出里有类似 Killed process ... (cc1) 的记录,就证实了是内存问题。

    轻量服务器内存如果不到 2 GB,编译 Ruby 时会失败。先看剩余内存:

    free -h

    可用内存低于 1 GB 时加上 2 GB 交换分区:

    fallocate -l 2G /swapfile
    chmod 600 /swapfile
    mkswap /swapfile
    swapon /swapfile
    grep -q '/swapfile ' /etc/fstab || echo '/swapfile none swap sw 0 0' >> /etc/fstab

    创建之后确认它已经挂上:

    swapon --show
    free -h

    swapon --show 应列出 /swapfile,大小约 2 GB。输出为空就再执行一次 swapon /swapfile。

    交换分区挂上之后,编译 Ruby 仍可能被系统杀掉,同时 free -h 里 Swap 的已用一直是 0。这通常是 vm.swappiness 为 0 或很低,内核不肯把内存换出去。查看当前值,改成 60,并让重启后仍然生效:

    cat /proc/sys/vm/swappiness
    sysctl vm.swappiness=60
    echo 'vm.swappiness=60' > /etc/sysctl.d/99-swappiness.conf

    编译期间再看 free -h。Swap 的已用开始增加,交换分区才算真正生效。

    有了 AI,做运维的门槛低多了。以前得准备很久才敢动手,现在可以跟 AI 共创:先做一个详细的计划,再照着实施。遇到问题,直接复制给 AI,让它帮你解决,不用像以前那样 Google 到处搜。

    哎,时代已经大变样了!

  • 黄家《班序诗》

    广西平果旧城黄家《班序诗》:
    福宝应才庆,
    忠喜日月明,
    存心宜笃厚,
    立品尚纯诚,
    秉德欣光彩,
    安常定显荣,
    天衢登一步,
    英俊乐功成。
  • 我的十年 Linux 之路

    周末在整理电脑文件以及老的移动硬盘,发现好多东西,引起许多回忆。掐指一算应该是使用了十年的Linux,说来惭愧,在这么长的时间里,没有开发出像样的Linux软件,没有什么值得大书特书,但确实是走了不少弯路,做个总结。

    2005年暑假,正好大二结束,到厦门岛内找到一份维护电子商务网站的暑假工,在学校本部跟2002级的师兄住一块,看到宿舍里师兄们热火朝天在学习Linux,他们说懂Linux好找到工作。于是从鸟江借来了红帽子7.3,研究硬盘分区,装N次双系统,折腾很久呢,经常把windows硬盘数据搞没,痛恨!在图书馆找到了一本RedHat的书,没花多久,就把常见的命令学会。然后折腾服务器LAMP,对系统参数配置了如指掌,顺带学习了网页编程语言php。常奔跑于各种论坛Linux版,水木清华BBS、一塌糊涂BBS、Linux公社搞vim,shell配置,研究gcc/g++所有编译选项,Makefile文件。我将绝大部分的时间手工安装编译各种软件,比如mplayer,apache,php,mysql等,各种依赖包缺失,版本问题,经常折腾到凌晨两三点,搞定了并引以为豪。现在回想起来,真是愚蠢至极,浪费生命。

    Redhat 开始做企业版本收费,免费的个人版本是Fedora 系列。缪克华老师带领的足球机器人实验室使用的是Suse 9.2,KDE界面华丽,使用一段时间就放弃了,因为发现了斜对面计算机系ACM实验室使用Ubuntu,更胜一筹,界面更漂亮。从此在 http://wiki.ubuntu.org.cn/ http://forum.ubuntu.org.cn/ 泡wiki,论坛。心血来潮时,还看了kernel的代码,只是没有系统化的学习。大四业余时间在维护新糊涂BBS的代码。中间受到王垠鼓吹的「完全用 linux 工作」影响,基本不怎么使用windows。

    毕业后在厦门网宿科技工作,本来是应聘软件工程师,上班第一天老板说运维人手不够,让我转做一段时间的运维。公司一千多台服务器都是装RHEL,运维的工作大约是做系统监控,配置服务器上线。那时运维同事学习氛围很浓,几乎人手一本《UNIX Shells by Example》,挺厚的一本书,一些同事时不时秀sed、awk奇技淫巧。做到第三个月,要转正了,跟老板说要转到软件部,老板说等会再转。我又再等一个月,还是没有希望。运维要上倒班,周末的是晚上10点上到第二天早上10点共12个小时。每每到凌晨5点天快要亮的时候,看楼下车来车往,觉得特别失落,我的能力不仅如此啊,这样下去离自己的梦想越来越来,我就是想写点代码而已。冒着很大的勇气跟师兄们说离职,骗说是去重庆找女朋友。厦门是呆不下去了,北京、上海又离家太远,广州治安乱,上学是在广州东站被骗过,有心里阴影,自然深圳是我的下一站。

    在深圳找了一个月的工作,最后加入了broncho团队。broncho Linux手机平台是构建在linux 2.6 之上,采用GTK+/DirectFB作为GUI的手机平台。团队工作统一安装Fedora,那为什么没有使用ubuntu呢?主要是考虑稳定性。我的工作主要是做RIL(Radio Interface Layer),那几年工作都是使用vim,gcc,是我比较理想的工作环境。2008年10月22日,世界上第一款使用Google Android操作系统的手机HTC G1发布。Android一出来,几乎把Linux手机解决方案的厂家一棒子打死。09年4月,老板老魏根据自己的判断以及参考朋友的建议,果断宣布放弃自主研发的手机操作系统,转战Android。由于团队有很深的Linux开发功底,到12月份,就正式推出Broncho A1手机。产品出来了,要推广宣传,公司的网站、论坛落到我头上开发,php复习一下,选择 phpbb 搭建论坛,整合一下搞个订购系统。

    那些年搞Android的design house,自己不搞个android market,出门都不好意思说自己公司是搞Androd的。这个事又落在我头上,于是反编译android market(现在改名为Google Play)作为参考,一个人花6个月时间搞了一个app以及后台。收尾工作还没做完,就离开了broncho团队。11年移动互联网迅速发展,基本上知名公司经理级别的,带四五个人出来创业,都能拿到投资,于是我来到了盒子支付。盒子支付最早的技术团队,是我招聘组建的,因此也脱离了一线的软件开发,转为技术管理。Linux用来做办公室越来越少,转到了mac。

    总结一下,几点建议:

    1. 想要学好Linux,别在windows装个虚拟机,最好当作日常办公使用。
    2. 切勿去研究各种工具、命令行的奇技淫巧,少折腾各种配置,掌握二八原则。
    3. Linux只是工具,应该花更多时间去掌握编程思想以及软件系统的构建。

  • 遗憾!mytget 无法加入 homebrew

    mytget 是什么?

    Linux下的下载工具,大家使用比较多的是wget,curl,而他们不支持多线程下载,所以产生了mytget,开始是由南开大学的xiaosuo写的,放在sf上。第一次知道这工具,是2007年在厦门网宿科技工作时同事介绍,用得很爽的一点是在不同的机房拷贝文件很快。

    我觉得一个软件要有生命力,就需要不断的更新。似乎过了几年,mytget一直没有更新过,在新版本的Linux gcc高版本编译不通过,Linux新手一般遇到也不知道从何下手,也就放弃了尝试使用这个软件的机会。所以11年我就接手过来维护,放在github上,原作者也过来参与,时不时贡献点代码。

    最近几年都在mac下工作,下载软件都是brew install,那干脆把 mytget 放入 homebrew。

    git clone https://github.com/iboxpay/homebrew.git
    brew create https://github.com/lytsing/mytget/archive/v1.1.2.tar.gz
    git checkout -b mytget
    brew audit --strict mytget
    brew edit mytget
    cp /usr/local/Library/Formula/mytget.rb  Library/Formula/
    git add Library/Formula/mytget.rb
    git commit -m "add Library/Formula/mytget.rb"
    git push origin mytget

    文件的sha256 通过 shasum -a 256 v1.1.2.tar.gz 获得,然后迫不及待的 创建 pull request。dunn review 代码,说要先去掉注释,以及增加 test 功能。brew create 生产的 mytget.rb 头部有说明:

    PLEASE REMOVE ALL GENERATED COMMENTS BEFORE SUBMITTING YOUR PULL REQUEST!

    没注意看,就提交 pull request了。最后还是被拒绝,说是小众工具,fork、star的数量都不超过10人。详情:https://github.com/Homebrew/homebrew/pull/42785

    由此可见,搞开源对代码质量要求非常高,多个空格,空行都不行,review的结果就是:

    “Remove all the comments, please!”
    “Please remove this empty line.”
    “Please remove the trailing space.”

    事前跑一下 brew audit –strict mytget 检查配置文件。

  • LDAP 使用备忘录

    我们的运维工程师搭建了一个AD, windows下的,公司工作的wifi 帐号密码接入了 LDAP,很方便实用。最近一段时间,总结了上班工作时间消耗分布,发现很多人都是给我发消息,svn密码忘记了,新员工开个git/svn 帐号,烦得不得了。幸好代码及时从svn转为git,有了gitlab,管理确实方便。本周一口气把研发的几个内部系统接入LDAP:

    • gitlab
    • svn
    • redmine
    • jenkins
    • zentao

    我们使用windows  AD, 登录名属性是 sAMAccountName,如果使用openLDAP,则是uid。

    配置jenkins才发现,root DN不能带有空格,否则死活连不上。jenkins 使用ldap后,超级管理员的帐号老是登录不上,后面干脆在 config.xml 配置文件,将 admin改为我自己的帐号。

    禅道开源版有个 LDAP插件,一年没更新也是使用不了,fork 他的代码修改,见https://github.com/iboxpay/ldap ,主要是修改 系统管理员帐号admin跳过LDAP 认证,不影响正常管理使用。

    搞配置管理一定要细心、耐心,出现问题,优先从系统日志查找审断并适当Google。禅道是其他同事管理的,他自己折腾了很久搞不定,找了半天,原来是  sAMAccountName 单词写错成 sAMAcountName。手动敲字不要太自信,很容易笔误 ,要ctrl+c,ctrl+ v 才行。