郑剑峰的个人博客

Apache Atlas介绍

Apache Atlas是托管于Apache旗下的一款元数据管理和治理的产品，Apache Atlas提供api和一系列插件可以方便将数据库元数据信息导入到atlas中进行分析，atlas也提供web界面对元数据进行管理，通过atlas，企业可以对数据库元数据建立资产目录，并对这些资产进行分类和治理，为数据分析，数据治理提供高质量的元数据信息。

什么是元数据

企业内部可能运行多种类型数据库，从大类上可以分，大数据平台，sql数据库，nosql数据库，图数据库等，从具体的数据库类型可能是mysql，oracle，mongodb等，不管是什么类型的数据库，终归都是一个目的，存储数据，对怎么管理数据每个数据库有每个数据库的方式，以oracle为例

• schema是一组数据库对象的集合
• table是存储数据的实体
• column列表示数据库的每个属性
• view视图表示虚拟表，表示一组查询的逻辑集合
• materialview物化视图则是对视图的实体化
• 同义词表示数据库对象的别名
• …等等

Read the rest of this entry

atlas

背景

某项目接口采用plsql开发，接口返回用户密码，但要求密码不能是明文返回，因为程序内部需要用到明文密码，所以只能在plsql中对密码进行对称加密，在程序内部进行解密，程序采用java开发。

实现

dbms_crypto是oracle自带的加密包，包含多种加密解密方法，非dba用户需要授权才能进行使用

grant execute on dbms_crypto to xxx;

下面是一个通过DES算法加密的function

function encrypt_password(p_password in varchar2) return varchar2 is
   v_key           varchar2(32) := 'TucM2fYDaxnd1UeRL7HVvyshXvXaMKO9';
   v_encrypted_raw RAW(256);
 begin
   v_encrypted_raw := dbms_crypto.Encrypt(src => UTL_RAW.CAST_TO_RAW(p_password),
                                          typ => DBMS_CRYPTO.DES_CBC_PKCS5,
                                          iv=>UTL_RAW.CAST_TO_RAW('12345678'),
                                          key => UTL_RAW.CAST_TO_RAW(v_key));
   return utl_raw.cast_to_varchar2(utl_encode.base64_encode(v_encrypted_raw));
  end;

Read the rest of this entry

DES

背景

某项目流程使用activiti开发，现需要开发一个流程预测的功能，流程预测，也称流程预跑，是指用户在发起流程或者执行审批动作时希望看到流程后续流转的节点，方便用户跟踪流程。Activiti本身不提供流程预测的功能，实际上流程在运行时每一个变量的变化，比如审批结果，表单数据等，都会影响流程的走向，而这些变化是无法进行预见的，所以流程预测的前提条件就是，我们需要假设一些变量的值，比较典型的就是审批结果，我们需要假设审批结果都是通过的，基于这个前提，我们才能完成一个可以提供参考价值的预测数据。

实现

如果要看懂本文，你必须对activiti开发有基本的了解，对一些基本的概念熟悉，建议先阅读之前发表的Activiti教程

流程模型

这边准备了一个简单的报销流程模型示例

Read the rest of this entry

activiti, activiti6

背景

在windows中，有诸如XShell，SecureCRT等ssh连接神器，但在Mac中，可选择的工具并不多，ITerm2被一众程序员吹上了天，但自己实际用下来并不好用，对终端的执念让我基本上尝试了所有在Mac上能找得到的终端工具，最终选择了termius，该工具界面有点极客风，设计简洁，连接速度快，可惜的是如果用户退出所有记录将被清除，在被清除两次后终于无奈的放弃了Mac下唯一上手的终端工具，放弃termius后却很难再找一个满意的终端，mac自带的终端其实还行，就是不大好用，理想中的终端应该满足以下功能

• 能够发送心跳包，不至于因为断网或者闲置时间过长连接断开需要重连
• 能够有一定的管理功能，记住密码，不用每次输入地址和账号，这个也是最重要的需求
• 支持tab页，支持分屏
• 能够上传下载文件
• 颜值要高
• 可以选择复制，因为在终端经常需要复制，大部分终端都可以选择即可复制，无需手动ctrl+c

如果mac自带终端能够满足以上需求，就完全可以用于日常开发，那么接下来我们就一步步改造终端

Read the rest of this entry

mac

hadoop环境

hadoop版本为

hadoop version
Hadoop 2.10.1
Subversion https://github.com/apache/hadoop -r 1827467c9a56f133025f28557bfc2c562d78e816
Compiled by centos on 2020-09-14T13:17Z
Compiled with protoc 2.5.0
From source with checksum 3114edef868f1f3824e7d0f68be03650

客户端开发

• 引入依赖（使用maven）

Read the rest of this entry

hadoop

背景

某项目中间件环境部署应用时出现错误，错误日志如下：

<2020-12-7 下午04时04分48秒 CST> <Error> <Management> <BEA-141244> <Schema validation errors while parsing config/config.xml - Expected elements 'staging-mode@http://xmlns.oracle.com/weblogic/domain alt-descriptor-path@http://xmlns.oracle.com/weblogic/domain alt-wls-descriptor-path@http://xmlns.oracle.com/weblogic/domain application-identifier@http://xmlns.oracle.com/weblogic/domain application-name@http://xmlns.oracle.com/weblogic/domain' instead of 'cache-in-app-directory@http://xmlns.oracle.com/weblogic/domain' here in element app-deployment@http://xmlns.oracle.com/weblogic/domain> 
Caused By: java.io.IOException: [Management:141245]Schema Validation Error in config/config.xml see log for details. Schema validation can be disabled by starting the server with the command line option: -Dweblogic.configuration.schemaValidationEnabled=false
	at weblogic.management.provider.internal.EditAccessImpl.checkErrors(EditAccessImpl.java:2340)
	at weblogic.management.provider.internal.RuntimeAccessDeploymentReceiverService.handleConfigTreeLoad(RuntimeAccessDeploymentReceiverService.java:968)
	at weblogic.management.provider.internal.RuntimeAccessDeploymentReceiverService.updateDeploymentContext(RuntimeAccessDeploymentReceiverService.java:599)
	at weblogic.deploy.service.internal.targetserver.DeploymentReceiverCallbackDeliverer.doUpdateDeploymentContextCallback(DeploymentReceiverCallbackDeliverer.java:147)
	at weblogic.deploy.service.internal.targetserver.DeploymentReceiverCallbackDeliverer.updateDeploymentContext(DeploymentReceiverCallbackDeliverer.java:28)
	Truncated. see log file for complete stacktrace

Read the rest of this entry

背景

某项目在weblogic升级失败后进行回滚，回滚后环境接口无法访问，报500异常，接口为BPM Service客户端程序，错误如下：

SEVERE: <.> getTokenType: invalid token: e0FFU31EbGdrK0IxSlV1WkFMM0doc2dlMUJxdWpjQmEza0tzZGNncnlOSUlLdnFaT0QrY1pyanBBa0d0MTdURHhqbmx4SWJ1d3hvMGsxNmZyaUJFcDIvbGd3MkFWUjRCUXVZdFhvemcxZmprQm83akFoS3pMSWVxeG1DT213VkJpUW5rUWhzQ3lVSmRUT204dXdUUmI2bnlsdEg4bTducTFBWVd0eDVKWjdVSHRiRndsRkRxcjQrZnBVKzBoV0lkc1lRZXQ2VlZkSDRtNUp0V05LYW1SdGNMNWZOUE0rVTVtaEhYYWU5czg4c1VLNHIvenFDN05GTXFieGl6YXJubkd6ZHhTSEZRcUxiRTlmK3ZaNzlLMVlCNExmbkJhL0pSY2hvanlHZ0ZyQWJLdVhJbz0=
SEVERE: <.> Invalid Token Error in Verification Service.
Invalid Token Error in Verification Service. Received invalid token in getTokenType.
Verify that correct token is passed.
ORABPEL-30503
Invalid Token Error in Verification Service.
Invalid Token Error in Verification Service. Received invalid token in getTokenType.
Verify that correct token is passed.
	at oracle.bpel.services.workflow.verification.impl.Token.getTokenType(Token.java:545)
	at oracle.bpel.services.workflow.verification.impl.Token.isSameValue(Token.java:314)
	at oracle.bpel.services.workflow.verification.impl.VerificationService.isInternalWorkflowContext(VerificationService.java:689)

Read the rest of this entry

bpm, weblogic

背景

我的强项是后端开发，很少涉及前端开发，一个很重要的原因是前端布局太妖，要实现一个居中需要各种奇技淫巧，而且每个浏览器实现还不一样，前端的布局就像谜一样，你都不知道为啥就可以了，也不知道为啥就不行。直到Flex布局的出现前端的布局终于有点章法了，第一次接触Flex布局是从阮一峰的博客Flex 布局教程，阮一峰写博客的能力确实厉害，通俗易懂又直击要害，建议想要入门Flex都去拜读一下。那么写这篇文章的目的是从一个后端的角度去看Flex布局，如果你看完阮一峰的博客后仍然有一些疑问，那么可以读一读这篇文章。

Flex基本概念

• 容器和项目

Flex布局包括容器(flex container)和项目(flex item)，比如下面这段代码

<div class="content">
    <div class="block"></div>
    <div class="block"></div>
</div>

content这个div就是容器，block的div就是项目

• 两轴两个方向

Flex核心就是靠两根轴进行布局的调整，其实就是水平和垂直两个方向，只不过在Flex中水平方向称为主轴，垂直方向称为交叉轴，每个方向各有start center end三个方位，其实就是左边中间和右边三个方位。

Read the rest of this entry

flex

介绍

grapesjs是一个开源的网页设计器，你可以理解为在线低配版Dreamweaver，和Dreamweaver不同的是，grapesjs可以灵活的进行二次开发，实际上grapesjs只是构建了设计器最基础的部分，没有二次开发grapesjs也没有意义，如果你恰好有以下需求，那么grapesjs将非常适合你

• 页面在线设计编辑，并且能自定义组件
• 可以导出源码
• 提供属性配置
• 灵活的二次开发机制

使用

grapesjs使用方法很简单，如果是html页面，可以直接通过导入js和css即可

Read the rest of this entry

背景

某项目接口采用jersey开发，部署在weblogic上，升级JDK至jdk1.7.0_191后所有接口无法访问，返回404 Not Found。

测试

首先怀疑是JDK升级后部分java类初始化失败导致404，但重启服务器，重启应用，重新部署应用都未报错，说明应用启动是成功的，一开始也没怀疑到jersey框架上，因此走了很多弯路，这里就不赘述。到后面所有的猜测都验证后，还是没有解决，于是决定本地用jersey写一个最简单的接口部署上去看下结果。

• 接口部署到线上weblogic访问404
• 接口部署到本地tomcat，访问正常
• 接口部署到其他weblogic环境，访问正常，jdk版本为jdk1.7.0_80
• 正常的环境将jdk切换至jdk1.8.0_171，访问404

基于以上实验可以看出，**jersey在weblogic环境下，高版本的jdk会报404，tomcat没有这问题**，确定了问题后排查方向就比较清楚，就是搞清楚为什么高版本的jdk会报错。

Read the rest of this entry

jersey