技术文字和代码搜索

问题 我待过国内外大小公司,做过保险,零售,物流,金融,电商,电力等行业,用过 java, nodejs, ruby 等语言。 我发现写代码取名字是一个不大不小的问题,好的命名可以大大增加代码的可读性,帮你理解逻辑和业务,减少 bug。 但取一个合适的名字,并不总是一个简单的事。 你不懂业务,一些名词,专业术语,你想不到合适的词。 你很难看懂其它人写的代码。那些代码可能是另一个不太懂的人当时尽最大努力想到的一个合适的词。 在某个小圈子有较好的命名规范,但和其他圈子没统一。如是否为类添加后缀。 多音多义字的翻译。一个中文对应多个英文,或者一个英文对应多个中文。哪个更合适? 通用简写,对某些人是常识,对其他人是疑问 规范 可读性大于简洁, schoolName 远远好于 schName restful api springboot, rails 软件词典 中文, 英文互搜,主要是中文翻译英文 与该词对应的业务场景,有简单介绍 搜已有代码库 tag,评论,点赞 建议,可选,警告,搜索次数 参考 分词 中华字典,牛津词典,翻译软件 wiki,百度百科 其他代码 https://unbug.github.io/codelf/ 阿里巴巴java开发手册 Airbnb JavaScript Style Guide serverless 架构

March 1, 2021 · 1 分钟 · ming

rust 和 go 语言调研

java 的弊端 做软件开发已经 10 多年了,主要是偏业务的 web 应用开发, 主要语言是 java, js(typescript),ruby,shell, sql等, 主要框架为 springboot, jquery, vue, rails 等。 随着微服务和云原生的发展,容器成为新一代的虚拟单元,传统 java 技术栈在这一块的不足越发明显: 镜像大 内存占用高 启动慢,跟语言和框架层面都有关系 运行慢 高并发不容易 分发不方便 这些不足跟 java 的虚拟机,面向对象,反射,垃圾回收等语言特性有关。这些特性并不都是坏处, 但随着外部环境的变化,有些特性变的不适用或者不再有优势。 java 社区也在做一些改进,如 java 的反应式编程框架 vertx, 可直接将 java 代码编译成可执行文件的 GraalVM 虚拟机等,但总归是有不少历史包袱,只能在某一些方面做有限改进。 新兴语言 反观一些新兴语言,在运行速度, 资源占用,分发便利性等方面有全面的优势,比较典型的就是 go 和 rust。 go 在网络领域有惊人的表现, 出现了一大堆优秀框架,如 docker, k8s, traefik, canddy 等。 rust 知名项目少一点,有 deno, tikv,libra,ripgrep 等 其中 tidb 作为 new sql 的代表数据库产品之一获得了巨大的成功,它使用 rust 作为存储引擎开发语言, go 作为解析执行引擎开发语言,是两种语言使用的集大成者。...

February 10, 2021 · 1 分钟 · ming

我的一些小点子  [draft]

服装店版本 日历功能: 显示接下来的大事件,比如圣诞节,双11等,合理安排货品和库存,或换机。 2.显示接下来的天气,自动上架和调整显示权重。 ## 简书文章导出备份 来到简书后写了几篇文章,然后意识到备份文章及转换成不同的格式,是一个较普遍的需求,研究了一下简书自带的导出功能较简单,于是打算练练手,完成这么一个小产品。 tidb 学习系列 coprocessor on unistore https://docs.google.com/document/d/1LIMuHv1wcI1VgfWo8KQK9RPlPXzoAuJHNy4Est1paF4/edit?pli=1#heading=h.efxhx09hxyyo statistics https://github.com/pingcap/tidb-dev-guide/pull/70 博客联盟 最近整理自己的博客, 主要使用 hugo 等静态生成器方案, 发现还是欠缺一些基础服务, 或者不太好用: 计数和统计, 可以在页面展示的. 只发现了不蒜子计数器. 评论. 可以整合 disqus, gitalk 等. 博客的发现和互访. 目前只能通过搜索引擎, 但是个人站点权重会很低. 所以想做个类似微服务服务注册和发现或者 p2p 似的可以互相发现, 访问的东西. rss (简易信息聚合)? 可以支持文件(markdown) 或 数据库生成页面, 且 seo 友好, 即 url 和页面静态化 可以对外提供 api....

February 1, 2021 · 1 分钟 · ming

2021年小公司技术架构选型

企业web应用技术讨论 基于兴趣和职业发展的考虑,我参加了上次关于“增量配网产品”架构的讨论会议,对公司现有的产品,人员,技术储备有了一定的了解。 会上对未来几年公司使用的技术栈有了指导性的意见,但候选项只有项目中已经使用的几个非常成熟的技术,个人认为欠缺广度和深度。 仅有限的几个同事参与,意味着可能公司有人掌握了某项技术,但没有成为一个候选项。 除了手边会用的工具, 也应该到市面上找更合适的工具。 一定的技术预研和储备是非常必要的 故写了这篇文章,抛出我的观察和思考,然后看看“沉默的大多数"中有没有志同道合的人,可以将一些更先进(合适)的技术引入公司业务, 助力公司发展。 由于我们讨论的是企业web应用,所以需要关心的问题大概有下面几类,我们依次讨论。 web, 即前端 一些传统的企业开发不重视前端,觉得能用就行,分工上也没有专门的前端工程师,而是由后端工程师一把梭。 但前端的工作量并不小,开发维护成本很高,且易用性美观度等也大大影响用户对软件的整体印象。 如果有多端显示,小程序等需求,则难度和成本更是直线上升。 传统的 js 和 jquery 应用缺乏模块管理,依赖管理,组件化支持等关键特性, 为了解决这些问题,前端的生态发展很快,工程化和模块化水平已经不输后端,出现了 angular, reactjs, vue, svelet 等优秀的 mvvm 框架, 以及 typescript 这样的强类型编译语言,解决了前端大代码量下的开发效率问题。 对于需要 seo 的应用, 纯静态页面和后台生成页面还有一定市场,但对于企业开发,mvvm是完美的解决方案, 也就意味着前后端的完全分离, 后端只提供数据,展示和交互逻辑完全由前端负责。下面简单介绍一下几个 mvvm 框架的特点。 相同点 组件化 响应式数据绑定 状态和路由管理 不同点 reactjs,facebook 出品,生态丰富,使用 jsx 抽象程度高,学习成本高,大公司使用较多。 vue,华人出品,生态较丰富,使用模板抽象程度较高,学习成本低,中小公司和国内使用较多。 svelet 较新,基于一种新的思路,即将运行时的问题提前到编译器解决,目前在前后端均出现了这样的案例。优势是没有运行时,代码小,性能高,很适合做组件开发。 应用层,即后端 移动互联网的发展催生了很多高并发和大数据量的业务,也造就了云厂商的繁荣和容器技术的发展,devops 和云原生等技术被提出,用于解决后端日益复杂的开发运维问题。以 k8s 的出现为标志,基本解决了云环境下的cpu,内存,网络,存储这些计算资源管理和分配问题,有人说 k8s 是云环境下的操作系统,所以后端的开发不得不考虑基础设施到底是啥的问题。...

February 1, 2021 · 1 分钟 · ming

git 读取对象 XXX 失败: 错误的消息

今天早早来到办公室,准备大干一场,谁知道git出现问题。 准备更新代码 准备切换到公共分支更新代码 ❯ git checkout dev M dev.properties 切换到分支 'dev' fatal: 读取对象 c72f18fb5b1c2780f18afd7b2a0ce15d15984a47 失败: 错误的消息 ❯ git status 位于分支 dev fatal: 读取对象 c72f18fb5b1c2780f18afd7b2a0ce15d15984a47 失败: 错误的消息 切换成功,但是 git 提示 fatal: 读取对象 c72f18fb5b1c2780f18afd7b2a0ce15d15984a47 失败: 错误的消息,用了好多年 git 第一次碰到这个错误。用 git log看历史记录,只能看到最近的7, 8个提交,然后也是上面这个错误。 定位问题 网上找了一通,似乎没有人碰到过这个问题 ❯ git fsck --full error: 不能 mmap .git/objects/82/27d7402106a51b5fedad7bcb2fba73ba6d7e3f: 错误的消息 error: 8227d7402106a51b5fedad7bcb2fba73ba6d7e3f:对象损坏或丢失:.git/objects/82/27d7402106a51b5fedad7bcb2fba73ba6d7e3f error: 不能 mmap .git/objects/84/97288737064b6239b8c3029db78fa60e228286: 错误的消息 error: 8497288737064b6239b8c3029db78fa60e228286:对象损坏或丢失:.git/objects/84/97288737064b6239b8c3029db78fa60e228286 error: 不能 mmap .git/objects/98/26f8edc0708b4da83e0ef11c7d2067c0de43b3: 错误的消息 error: 9826f8edc0708b4da83e0ef11c7d2067c0de43b3:对象损坏或丢失:.git/objects/98/26f8edc0708b4da83e0ef11c7d2067c0de43b3 error: 不能 mmap .git/objects/c7/2f18fb5b1c2780f18afd7b2a0ce15d15984a47: 错误的消息 error: c72f18fb5b1c2780f18afd7b2a0ce15d15984a47:对象损坏或丢失:....

November 5, 2020 · 2 分钟 · ming

微服务:难民-单体架构的边界在哪里

下面的文章是微博上某博主探讨微服务架构时的看法,大意是单体架构的边界比想象中宽广的多,和我的有些想法很契合,特转发至此。 Martin Fowler 开的公司是做技术咨询和外包服务的,最热衷这种新名词了 (不搞点新概念怎么开展新业务)。还有现在的云厂商也很乐于推微服务架构,多好的卖机器卖服务的机会啊,一个原本只用单机部署的系统鼓吹一下搞成微服务拆成 N 个系统后又可以多赚几倍的钱了。 我在传统行业做了 10 几年的企业应用,从地市级到省级系统,只要是面向内部用户的,就没有一个是单体系统满足不了的。微服务架构更适合那种用户规模起来之后的互联网企业,从阿里辞职出来之后,过去 8 年,我再也没参与过基于微服务架构的系统了,因为没有真实的需求。 我当初就是在阿里的中间件团队工作,微服务架构的系统所需要的三架马车全在我们组,包括服务框架、分库分表中间件、消息中间件。这三架马车我就参与了其中两架: 服务框架、分库分表中间件。 服务框架当初阿里的叫 HSF,除了最基本的 RPC 功能也有软负载,然后还得有 config server 做服务的注册与发现,搞到后面你还得做一个分布式调用链跟踪系统,为了存储分析调用链中的日志又得引入一整套的大数据领域的技术栈 (当年我们全网每天的调用量是 2000 亿起步)。 现在开源的微服务技术栈可以选用 Apache Dubbo 做 RPC 框架,但是服务注册与发现你还得配合其他的 (比如 Apache Dubbo 官方推荐用 zookeeper)。顺便说个八卦: Apache Dubbo 就是当年在阿里内部跟我们组的 HSF 竞争失败后开源出来的,现在能流行也是无心插柳。自从阿里云这家子公司做成了之后,发现微服务可能是门好生意,Dubbo 这个弃儿居然还有不少用户,然后又把 Dubbo 捡起来了,至于阿里云上面是套 Dubbo 的壳卖 HSF 的企业版还是别的动机我就不多猜了。 除了 Apache Dubbo,现在 java 平台上的微服务技术栈还有比较火的 Spring Cloud 全家桶,我只看过,但没有用过。vert.x 也有微服务的套件,我也没有用到真实的商业系统中。说白了就是没有几个系统需要上微服务。 以上说的还只是解决 API 层面的调用问题,你以为一个采用微服务架构的系统有了 Dubbo 和 Spring Cloud 就够了吗?错错错,session 管理在阿里都需要一个专门的小中间件,为了解决不同系统的消息传递问题,又得引入消息中间件。 还有最难的,数据层的问题怎么搞?你告诉我拆成了 N 个系统后还搞一个共享数据库?逗我玩呢。微服务架构的系统在数据库的层面基本上多是 OLTP 类型的,现在开源成熟的面向 OLTP 的分布式数据库可以说没有,别跟我提国内某司的 NewSQL 数据库,那东西在 OLTP 场景下的性能简直不能看,所以现在还是会用 MySQL 这样的传统关系数据库,然后搭配分库分表中间件来解决微服务架构系统的后端存储问题,拆分后的子系统都有自己的数据库集群。...

November 4, 2020 · 1 分钟 · ming

微服务:雄伟巨石可以成为城堡

DHH 在 2020.04.08 发表了一篇最新博客 “The Majestic Monolith can become The Citadel”,继续讨论对微服务的一点看法,提出了一种与微服务相对的 “城堡” 模式。在推上也引发了不少关注,搜关键字 “The Majestic Monolith” 就能看到很多。这是原文链接:https://m.signalvnoise.com/the-majestic-monolith-can-become-the-citadel/ 我按照个人理解,粗略翻译了一下。大家可以对照原文来看,如有翻译不准确的地方,请在回复中提出来。 大多数的 Web 应用应该都是从一块 “雄伟巨石” 开始其生涯的:一个单一代码库做其所需的所有事儿。与之相对的是一群 Service,不管这些 Service 是 “微” 还是 “大一点” 的,都试图把应用切成孤岛,每个仅做整体工作的一小片而已。 大多数的 Web 应用都将以 “雄伟巨石” 形态在其一生中都能持续提供很好的服务。这种模式的上限很高,比大部分人幻想成为架构师时所能想象的要高得多。 但是,尽管如此,“雄伟巨石” 仍然会有需要一些帮助的那一天。也许你正在与庞大的团队打交道,其中的人们相互磕磕绊绊(即使这样,别忘了有很多非常大的组织依然在使用 monorepo 模式!)。或者你终究会遇到极端负载下的性能或可用性问题,这在 “雄伟巨石” 的技术选择范围内无法轻松解决。你的第一直觉将是改进 “雄伟巨石” 直到其能够应对问题,做了这一切而没成功时,你才会考虑下一步。 下一步就是 “城堡”,保持 “雄伟巨石” 在中心位置,但用一系列的 “基地” 对其支援,每个分离出应用程序职能一个小的子集。“基地” 使得 “雄伟巨石” 得以卸下其不同行为的一个切片,(这些不同行为)要么是出于组织原因,要么是出于性能或实现的原因。 一个在 Basecamp 的这种例子是我们的旧 chat 应用 Campfire。它是在 2005 年构建的,那时 Ajax 和其他 JavaScript 技术都还很新颖,所以它基于 polling 而不是现代 chat app 目前使用的长连接。这意味着每个客户端连接到系统都会每三秒触发一个请求来询问 “是否有我的新消息?”。大多数这些请求都会回答 “不,没有”,但为了获取这个答案,你仍然不得不对请求进行身份验证,查询数据库,等等。...

November 4, 2020 · 1 分钟 · ming

vmware中manjaro与宿主机window10不共享目录的解决办法

买了新电脑 r7000后,我在 VMware 中装了 manjaro 作为日常开发, 这样我即可以同时使用 windows 和 linux 下面的软件,挺好,满足我的需求。 但碰到一个问题,在 VMware 设置了共享目录不工作,网上有人说是原生 vmware-tools 对 manjaro 支持不好,需要打 patch;也有人说用自带的 open-vm-tools 即可,但我试了各种方案都不行。最后只能用在 windows 中用 ftp 软件往 manjaro 中读写文件。 今天有时间又折腾了一下,这次ok了,我们只需要如下设置就可以使用挂载的共享文件 manjaro 中获得宿主机共享目录名 /usr/bin/vmware-hgfsclient # 下面是我这里的输出,你那可能不同 vmwareShare manjaro 创建挂载目录 mkdir -p /mnt/hgfs 将宿主机共享目录挂载到虚拟机中 sudo ./vmhgfs-fuse -o allow_other -o auto_unmount .host:/vmwareShare /mnt/hgfs 我这边就ok,我的相关软件版本分别是: window 10 VMware 15.5.6 build-16341506 Manjaro 20.1.1 Mikah 参考 VMware-tools安装以及找不到共享文件夹的解决办法

October 25, 2020 · 1 分钟 · ming

数据库变更管理工具 flyway

Flyway的工作模式 Flyway可以对数据库进行升级,从任意一个版本升级到最新的版本。但是升级的依据是用户自己编写的sql脚本,用户自己决定每一个版本的升级内容。 Flyway不限定脚本里面的内容,但是对脚本文件的名称有一定的要求: V1__Initial_Setup.sql V2__First_Changes.sql V2.1__Refactoring 其中的文件名由以下部分组成,除了使用默认配置外,某些部分还可自定义规则: prefix: 可配置,前缀标识,默认值V表示Versioned,R表示Repeatable version: 标识版本号,由一个或多个数字构成,数字之间的分隔符可用点.或下划线_; 不允许多个脚本文件有相同的版本号。 separator: 可配置,用于分隔版本标识与描述信息,默认为两个下划线__ description: 描述信息,文字之间可以用下划线或空格分隔 suffix: 可配置,后续标识,默认为.sql 使用Flyway升级,flyway会自动创建一张历史记录表: flyway_schema_history。 这张表记录了每一次升级的记录,包括已经执行了哪些脚本,脚本的文件名,内容校验和,执行的时间和结果: flyway在升级数据库的时候,会检查已经执行过的版本对应的脚本是否发生变化,包括脚本文件名,以及脚本内容。 如果flyway检测到发生了变化,则抛出错误,并终止升级。 如果已经执行过的脚本没有发生变化,flyway会跳过这些脚本,依次执行后续版本的脚本,并在记录表中插入对应的升级记录。 所以,flyway总是幂等的,而且可以支持跨版本的升级。 如果你好奇,flyway如何检查脚本文件的内容是否有修改。 你可以注意以下记录表中有一个字段checksum,它记录了脚本文件的校验和。flyway通过比对文件的校验和来检测文件的内容是否变更。 使用上面的方式,升级一个空的数据库,或者在一直使用flyway升级方案的数据库上进行升级,都不会又问题。 但是,如果在已有的数据库引入flyway,就需要一些额外的工作。 flyway检测数据库中是否有历史记录表,没有则代表是第一次升级。此时,flyway要求数据库是空的,并拒绝对数据库进行升级。 你可以设置baseline-on-migrate参数为true,flyway会自动将当前的数据库记录为V1版本,然后执行升级脚本。 这也表示用户所准备的脚本中,V1版本的脚本会被跳过,只有V1之后的版本才会被执行。 h2 控制台 maven clean package java -cp target/demo-0.0.1-SNAPSHOT/WEB-INF/lib/h2*.jar org.h2.tools.Server # 看到图形界面后 http://127.0.1.1:8082 改变jdbc url 为 jdbc:h2:file:/home/ming/learn/https_demo/h2data # 用户名 sa, 秘密为空 命令 所有的命令,以如下的格式执行: mvn flyway:{flyway-command} migrate mvn flyway:migrate 这个命令会搜索默认的脚本目录,检测并根据结果选择执行升级脚本。 clean mvn flyway:clean 这个命令会清除指定schema下所有的对象,包括table、view、triggers…,让schema变成空的状态。 info mvn flyway:info 这个命令显示指定schema的升级状态,当前的数据库的版本信息。...

October 18, 2020 · 2 分钟 · ming

Springboot项目的nginx_https配置研究

近期研究了一下 springboot jsp web 项目的 https 部属,分享一下成果,代码见 https://gitee.com/feitian124/https_demo 准备工作 clone 并打包该项目, 以 war 包方式在 tomcat 中运行,访问 “http://localhost:8080/”, 可以看到网页内容 “welcome, now:14:05:23.489”。 新装 nginx, 访问 “http://localhost/", 可以看到 nginx 的欢迎页面。 80 端口访问项目首页 修改 nginx 如下配置, 可以 http 正常 80 端口访问项目首页了, 但 https 仍然不行。 location / { proxy_pass http://127.0.0.1:8080; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; } Nginx 配置 HTTPS Nginx 配置 HTTPS 并不复杂,主要有两个步骤:签署第三方可信任的 SSL 证书 和 配置 HTTPS...

September 24, 2020 · 2 分钟 · ming