荣锋亮 - 博客园

elixir mix observer 工具的使用

摘要：默认elixir mix 没有添加observer 工具的依赖直接运行会提示找不到方法解决方法添加几个额外的依赖主要是observer,:wx,:runtime_tools 这几个 def application do [ extra_applications: [:logger,:obser 阅读全文

posted @ 2024-01-04 12:02 荣锋亮阅读(43) 评论(0) 推荐(0)

elixir defdelegate 使用

摘要： delegate 模式，在不少语言都支持，有些是隐式的（一些早期语言），有些是显式的（新语言，kotlin，swift等） elixir 也支持delegate 处理，还是比较方便的，以下是一个简单的使用定义原始方法 default.ex defmodule Default do def logi 阅读全文

posted @ 2024-01-04 09:25 荣锋亮阅读(32) 评论(0) 推荐(0)

absinthe dataloader 简单说明

摘要： dataloader 核心是为了解决graphql 对于后段服务的频繁调用，absinthe 基于graphql的dataloader 实现了elixir 版本的参考使用代码 source = Dataloader.Ecto.new(MyApp.Repo) # setup the loader 阅读全文

posted @ 2024-01-03 19:45 荣锋亮阅读(26) 评论(0) 推荐(0)

absinthe elixir 的graphql 框架简单试用

摘要： absinthe elixir 的graphql 框架包含的特性 graphql 草案的完整实现插件化设计异步字段解析以及批量解析，同时支持插件化的解析支持安全包含了基于GraphiQL 的playground 项目测试基于了phoenix 框架创建phoenix 项目 mix phx 阅读全文

posted @ 2024-01-03 19:15 荣锋亮阅读(41) 评论(0) 推荐(0)

elixir macro defoverridable 功能

摘要：基于macro 的包装函数可以使用defoverridable 可以方便进行方法的重写参考使用 app.ex defmodule App do defmacro __using__(_options) do quote do def init do IO.puts "do init" end de 阅读全文

posted @ 2024-01-03 17:47 荣锋亮阅读(27) 评论(0) 推荐(0)

elixir apply 结合 macro 一个方便的开发技巧

摘要：此玩法实际在Phoenix elixir 项目中使用比较多，以下是一个简单的示例示例代码 login.ex defmodule Login do def demoapp do quote do import unquote(__MODULE__) end end def dalong do IO. 阅读全文

posted @ 2024-01-03 15:08 荣锋亮阅读(46) 评论(0) 推荐(0)

nova erlang web 框架

摘要： nova erlang web 框架，提供了cli ，使用比较方便，web 处理基于了 cowboy （erlang 常用）依赖的三方包可以看出，依赖了cowboy（web 处理） {deps, [ {cowboy, "2.10.0"}, {uuid, "2.0.7", {pkg, uuid_e 阅读全文

posted @ 2024-01-03 09:42 荣锋亮阅读(44) 评论(0) 推荐(0)

wasmex webassenbly elixir 运行时

摘要： wasmex 是基于wasmtime 以及rust nif 开发的方便elixir 运行webassembly 的框架与rust 的集成与rust 集成使用的三方包与mjml 工具类似使用了rustler_precompiled 以及rustler rust 使用的三方包前边也说了是基于了w 阅读全文

posted @ 2024-01-02 14:19 荣锋亮阅读(40) 评论(0) 推荐(0)

oban简单学习试用

摘要：以前简单介绍过oban 一个强大的elixir任务框架，支持不少类型模式的job 处理，以下是一个简单的试用环境准备数据库使用了pg，oban 使用了ecto 这个强大的orm 框架，添加了oban 依赖之后就可以使用包含的mix ecto 命令进行表的创建了，数据库使用docker-comp 阅读全文

posted @ 2024-01-02 11:12 荣锋亮阅读(63) 评论(0) 推荐(0)

oban elixir 强大的任务处理框架

摘要： oban elixir 强大的任务处理框架，后端存储基于了sqlite 或者pg 包含的特性 Isolated Queues Queue Control Resilient Queues Job Canceling Triggered Execution Unique Jobs Scheduled 阅读全文

posted @ 2024-01-01 13:57 荣锋亮阅读(73) 评论(0) 推荐(0)

johnny-five 开发框架

摘要： johnny-five 是一个支持机器人以及IOT编程的开发框架，基于nodejs，核心是支持对于arduino兼容的设备，但是对于其他非arduino 的设备可以通过IO Plugins 解决说明对于想使用nodejs 开发arduino硬件的同学来说是一个不错的选择，同时还有一些相关的参考书阅读全文

posted @ 2023-12-31 10:58 荣锋亮阅读(53) 评论(0) 推荐(0)

dremio nessie 集成玩法

摘要：昨天我简单写了dremio 集成nessie 的玩法，实际上dremio 与nessie 的集成可以分为两大类，一类是使用nessie 做为catalog 服务（当然也是支持写入iceberg 的），一类是基于外部工具（spark，flink）使用nessie 做为metadata stora 阅读全文

posted @ 2023-12-30 13:55 荣锋亮阅读(180) 评论(0) 推荐(0)

dremio nessie数据源集成简单说明

摘要： nessie 是一个强大的支持类似git 分之特性的apache iceberg 智能元数据存储, 主要测试下基于nessie dremio 元数据存储（catalog）集成参考架构环境准备 docker-compose 文件 version: "3" services: minio: imag 阅读全文

posted @ 2023-12-29 20:04 荣锋亮阅读(117) 评论(0) 推荐(0)

rustler-precompiled rustler 扩展工具简单说明

摘要：已经简单说过mjml_nif使用了rustler+rustler-precompiled 进行nif 的构建，同时官方也写了一篇相关的博客进行介绍使用说明配置依赖 def deps do [ {:rustler_precompiled, "~> 0.7"} ] end 配置native 使用可阅读全文

posted @ 2023-12-29 11:12 荣锋亮阅读(27) 评论(0) 推荐(0)

rustler 简单试用

摘要：昨天简单说了基于mrml 包装的elixir mjml_nif 模块，其中使用了rustler 进行elixir 与rust 的构建集成（基于了nif）以下是一个简单的rustler 学习试用项目准备基于mix 初始化初始化项目 mix new dalong 添加依赖 mix.exs def 阅读全文

posted @ 2023-12-29 10:49 荣锋亮阅读(44) 评论(0) 推荐(0)

java调用rust 共享库的一些方法简单说明

摘要： java 与rust 的调用，核心还是基于jni 进行处理，rust社区实现了不少方便的工具可以提供rust 到c 的处理（比如生成头文件）以下是整理的一些资料，方便学习几个不错的包 jni-rs 目前还在活跃更新中，同时github 的start 也比较多，同时不少开源软件在用，比如questd 阅读全文

posted @ 2023-12-29 10:17 荣锋亮阅读(301) 评论(0) 推荐(0)

mrml 使用中的一些问题

摘要： mrml 对于mjml 的兼容还是很不错的，目前是一些问题问题 mjml version 问题这个属于早期版本的问题了，目前使用方法已经不包含此参数了 <mjml version="3.3.3"> 应该去掉version 其他配置参数 mrml 的实现与mjml 的配置参数基本一致，有几个参数我阅读全文

posted @ 2023-12-28 21:20 荣锋亮阅读(28) 评论(0) 推荐(0)

elixir mjml_nif 试用

摘要： mjml_nif 是使用rustler 包装的mrml 基于了erlang 的nif 接口实现的elixir 模块，同时为了方便预编译nif的使用，使用了 rustler_precompiled，以下是一个简单的试用项目试用添加依赖 defp deps do [ {:mjml, "~> 3.0" 阅读全文

posted @ 2023-12-28 20:35 荣锋亮阅读(44) 评论(0) 推荐(0)

mrml python 以及webassembly 实现简单说明

摘要：简单说明下mrml python 以及webassembly 的实现 python python 是基于了pyo3，利用pyo3 提供的能力，暴露了python 模块参考处理 // 暴露的mrml 模块 #[pymodule] #[pyo3(name = "mrml")] fn register( 阅读全文

posted @ 2023-12-28 13:17 荣锋亮阅读(72) 评论(0) 推荐(0)

mrml mjml 的rust 实现

摘要： mrml 是mjml 的rust 实现，同时还提供了webassembly 的支持，当然比较强大的是mrml 同时也实现了python binding webassembly 使用代码 const { Engine } = require("mrml"); const engine = new E 阅读全文

posted @ 2023-12-28 11:39 荣锋亮阅读(24) 评论(0) 推荐(0)

rebar3 引用本地elixir 模块

摘要：前边简单说过基于rebar_mix 使用elixir模块，但是使用的模块是三方的，如果时候我们可以需要使用自己的就可以使用本地git 项目，或者搭建自己的私服git，以下是一个简单使用项目准备本地elixir mix 项目一个基于mix cli 创建的项目，同时进行git init mix 阅读全文

posted @ 2023-12-27 09:54 荣锋亮阅读(67) 评论(0) 推荐(0)

elixr 本地模块引用

摘要： elixir 的mix 支持引用本地模块，以下是一个简单的学习参考使用项目结构 ├── app │ ├── README.md │ ├── lib │ │ └── app.ex │ ├── mix.exs │ └── test │ ├── app_test.exs │ └── test_help 阅读全文

posted @ 2023-12-27 09:32 荣锋亮阅读(28) 评论(0) 推荐(0)

rebar3 集成elixir 模块

摘要：社区包含了一个rebar3 的elixir mix 插件，可以方便rebar 使用elixir 模块参考使用 rebar.config 配置 {erl_opts, [debug_info]}. {deps, [ % 添加引用 {decimal, "2.0.0"} ]}. {shell, [ {ap 阅读全文

posted @ 2023-12-27 09:15 荣锋亮阅读(44) 评论(0) 推荐(0)

eqwalizer WhatsApp 开源的erlang类型检查工具

摘要：可能大家都听说过WhatsApp 对于erlang 使用是比较多的，WhatsApp 的IM 系统就是基于erlang 开发的，同时WhatsApp 也开源了一些erlang周边的工具eqwalizer 是一个类型检查的，可以与rebar 以及非rebar 项目集成参考使用基于rebar的项目阅读全文

posted @ 2023-12-26 16:31 荣锋亮阅读(80) 评论(0) 推荐(0)

dremio hive jdbc arp date 类型问题记录

摘要：简单记录下碰到的一些问题分析 arthas stack 查看调用对于hive 是类似的，我测试的是mysql 的 stack com.mysql.cj.jdbc.result.ResultSetImpl getDate 效果 ffect(class count: 2 , method count 阅读全文

posted @ 2023-12-26 15:26 荣锋亮阅读(46) 评论(0) 推荐(0)

pdm符合最新PEP标准的现代python 包以及依赖管理工具

摘要： pdm符合最新PEP标准的现代python 包以及依赖管理工具支持的特性简单快速的维护依赖解析，主要为了构建大的二进制分发 PEP 517 构建后端 PEP 621 项目元数据灵活强大的插件系统多功能用户脚本类似pnpm 的中心化安装优化安装命令使用过的mac 系统的 brew in 阅读全文

posted @ 2023-12-25 18:42 荣锋亮阅读(163) 评论(0) 推荐(0)

mqtt 共享订阅简单说明

摘要： mqtt 是一个比较常用的iot 协议，5.0 支持共享订阅，共享订阅是一个特别方便的功能，可以实现业务的高可用，以及提升消息的处理参考格式共享订阅格式 $share/{Share Name}/{Topic Filter} Share Name 是一个共享名称，可以实现业务组的能力，Topic 阅读全文

posted @ 2023-12-24 19:50 荣锋亮阅读(499) 评论(0) 推荐(0)

riak_cs elrang 的s3 存储服务

摘要： riak_cs是riak团队开发的s3兼容存储，基于了riak kv，目前似乎缺少维护了（毕竟已经有不少开源而且更加强大的s3实现了）riak_cs 基于erlang 开发，对于学习下设计还是比较有帮助的，同时也能学习下erlang 项目开发说明当然riak 做为一个分布式的no-sql 数据库阅读全文

posted @ 2023-12-24 11:40 荣锋亮阅读(45) 评论(0) 推荐(0)

erlang -type 以及-spec 使用

摘要：很多时候我们编写的模块方法需要明确的参数类型，方便使用，-type 以及-spec 就提供了此能力参考使用 app.erl -module(app). -export([myadd/1,mydemo/1]). -type add() :: {integer(), integer()}. -spec 阅读全文

posted @ 2023-12-23 11:33 荣锋亮阅读(78) 评论(0) 推荐(0)

fugue 分布式计算通用接口

摘要： fugue提供了通用方便分布式计算的接口，可以高效的访问大数据项目，提供了python，pandas，sql 等模式如下图从上图可以看出fugue 提供了一个语义层，我们的计算任务可以运行在ray，dask，spark，以及duckdb 中参考架构可以看出fugue 提供了不少方便的能力，比如阅读全文

posted @ 2023-12-23 10:16 荣锋亮阅读(72) 评论(0) 推荐(0)

rebar3 cmake 项目学习

摘要： erlang 与c 的通信方式，包含了port 以及nif，以下是使用nif 的测试创建项目一个lib 一个cmake 命令 rebar3 new lib myapp cd myapp rebar3 new cmake 项目结构 ├── LICENSE.md ├── README.md ├── 阅读全文

posted @ 2023-12-22 15:40 荣锋亮阅读(66) 评论(0) 推荐(0)

erlang.mk erlang 应用构建工具

摘要： erlang.mk erlang 应用构建工具，主要以来了make 进行erlang 应用的构建安装使用核心是一个依赖工具，如果安装了xcode，git 以及make 都是包含了的基础安装 brew install erlang git make 安装erlang.mk wget https: 阅读全文

posted @ 2023-12-22 14:16 荣锋亮阅读(74) 评论(0) 推荐(0)

rebar3 参考工作流

摘要：内容来自官方文档，主要是一个简单的记录，rebar3 包含了比较丰富的工具支持，可以方便erlang 应用开发选择正确的项目类型小的工具或者脚本可以选择escript 完整，自包含的执行系统选择release 或者umbrella 在其他系统使用的库可以选择lib或者app 多个库选择umbre 阅读全文

posted @ 2023-12-22 13:43 荣锋亮阅读(79) 评论(0) 推荐(0)

rebar3 erlang 项目管理工具

摘要： rebar3 是erlang 提供的构建，测试以及发布工具安装下载 wget https://s3.amazonaws.com/rebar3/rebar3 && chmod +x rebar3 安装 ./rebar3 local install 之后配置环境变量使用提供的命令 as High 阅读全文

posted @ 2023-12-22 13:07 荣锋亮阅读(226) 评论(0) 推荐(0)

keto ory 团队开源的google zanzibar 实现

摘要： ory 公司在认证以及授权方面开源了不少东西，keto 就是一个google zanzibar 的开源实现代码基于golang 开发，同时也是提供了rest api 以及grpc 能力，同时还支持一个OPL 的权限模型语言说明类似的开源实现有不少，permify 也是一个，还有openfga，都阅读全文

posted @ 2023-12-21 21:38 荣锋亮阅读(241) 评论(0) 推荐(0)

基于pg driver 的dremio cratedb arp 扩展

摘要：实际上pg 驱动是可以直接链接cratedb 的但是因为默认实现会自动添加一个编码造成生成的sql 在cratedb 运行异常参考代码核心是arp 方言处理上，移除了关于编码的处理，实际上与mssql server 处理是一样的,主要代码实际上来自ce 版本的pg 扩展 public SqlCo 阅读全文

posted @ 2023-12-21 21:31 荣锋亮阅读(29) 评论(0) 推荐(0)

以前开发的一些dremio arp 扩展24.3 更新

摘要：以前开发过一些简单的arp 扩展（核心还是修改的ce 版本的），dremio 发布24.3版本了，但是有不少调整，造成以前的不能使用了目前已经将以前开发的都更新了 my-dremio-mssql-connector 主要是解决中文乱码问题 cratedb-dremio-connector 支持链接c 阅读全文

posted @ 2023-12-21 17:23 荣锋亮阅读(26) 评论(0) 推荐(0)

dremio 24.3 版本构建的一些问题

摘要： dremio 24.3 社区版代码提供了，从官方文档来看，构建与以前不太一样了，以下是构建中一些问题说明主要问题 jdk 需要同时包含jdk8 以及jdk11, maven 配置toolchains WARNING: Failed to export metrics.Server responde 阅读全文

posted @ 2023-12-21 14:51 荣锋亮阅读(107) 评论(0) 推荐(0)

maven toolchains 简单说明

摘要：很多时候我们项目可以会包含需要不同jdk 构建，比如有些只能使用jdk8，有些需要使用jdk11，toolchains 可以帮助我们解决此问题一般玩法创建一个toolchains.xml 目录，放到home 目录下，里边配置实际需要的jdk 版本（我们的环境可以安装多jdk）项目构建的时候（使阅读全文

posted @ 2023-12-21 14:42 荣锋亮阅读(598) 评论(0) 推荐(0)

permify google zanzibar 类似的开源授权服务实现

摘要： permify google zanzibar 类似的开源授权服务实现，openfga 也是一个类似的开源实现参考架构从下图可以看出permify主要包含了四个组件，Permission Server，Relationship Server，Schema Server，Watch Server 阅读全文

posted @ 2023-12-21 12:56 荣锋亮阅读(181) 评论(0) 推荐(0)

导航

公告