Hive 集成 Hudi 实践（含代码）| 可能是全网最详细的数据湖系列
公众号后台越来越多人问关于数据湖相关的内容，看来大家对新技术还是很感兴趣的。关于数据湖的资料网络上还是比较少的，特别是实践系列，对于新技术来说，基础的入门文档还是很有必要的，所以这一篇希望能够帮助到想使用Hudi的同学入门。 本篇的Hudi使用的是孵化版本 0.5.2；其他依赖 Spark-2.4. ...
用非常硬核的JAVA序列化手段实现对象流的持久化保存
背景 在OOP（面向对象编程）中处处是对象，我们当然希望可以有一种数据格式来存储这种对象的集合，以实现持久化。比如部门类所形成的部门对象集合，员工类所形成的员工对象集合，甚至是这样一个类所形成的对象：公司中有多个部门，每个部门有多个员工，我们希望将这样一个对象以文件的方式实现持久化保存。 对象流的概 ...
Redis详解（九）------ 哨兵(Sentinel)模式详解
Redis详解（九）------ 哨兵(Sentinel)模式详解 ...
微软：正式发布针对 .NET Core的 Winform 设计器
转载请注明出处：葡萄城官网，葡萄城为开发者提供专业的开发工具、解决方案和服务，赋能开发者。 原文出处：https://devblogs.microsoft.com/dotnet/windows-forms-designer-for-net-core-released/ 作为微软最引以为傲的IDE编辑 ...
基于 abp vNext 和 .NET Core 开发博客项目 - 用AutoMapper搞定对象映射
上一篇文章(https://www.cnblogs.com/meowv/p/12961014.html)集成了定时任务处理框架Hangfire，完成了一个简单的定时任务处理解决方案。 本篇紧接着来玩一下AutoMapper，AutoMapper可以很方便的搞定我们对象到对象之间的映射关系处理，同时a ...
《HelloGitHub》第 50 期
兴趣是最好的老师，HelloGitHub 就是帮你找到兴趣！ 简介 分享 GitHub 上有趣、入门级的开源项目。 这是一个面向编程新手、热爱编程、对开源社区感兴趣 人群的月刊，月刊的内容包括：各种编程语言的项目、让生活变得更美好的工具、书籍、学习笔记、教程等，这些开源项目大多都是非常容易上手，而且 ...
用Linux感觉低效吗？来看看这几个技巧！
Linux已经成为目前最火的操作系统之一，尽管现在的Linux用户很多，但很多使用Linux的同学发现，他们在Linux下的工作效率并不高，那么这是为什么呢？其实使用Linux也可以很舒适，通过一些技巧，也可以让工作效率大大提升。本文将介绍一些有助于提高Linux工作效率的技巧，让我们的工作变得变得... ...
在 Linux 系统中如何管理 systemd 服务
在上一篇文章《Linux的运行级别与目标》中，我介绍过 Linux 用 systemd 来取代 init 作为系统的初始化进程。尽管这一改变引来了很多争议，但大多数发行版，包括 RedHat、Fedora、CentOS、Debian、Ubuntu、openSUSE、Arch 等等都已经做出了调整。不 ...
阿里巴巴编码规范（Java）证明
背景 阿里云上有个阿里巴巴编码规范认证，我估算一下时间成本很低，多个认证也没什么坏处，就花了1分钱报了个名。这个认证报名后就可以下载链接下的编码规范，然后参加个考试应该就OK了。 共48页的规范实际上每读一遍都是要花一些时间的，因为每读一遍就会发现上面有些东西我不信。我需要去证明。过去证明过的因为J ...
DQN（Deep Q-learning）入门教程（三）之蒙特卡罗法算法与Q-learning算法
蒙特卡罗法 在介绍Q-learing算法之前，我们还是对蒙特卡罗法（MC）进行一些介绍。MC方法是一种无模型（model-free）的强化学习方法，目标是得到最优的行为价值函数$q_*$。在前面一篇博客中，我们所介绍的动态规划算法则是一种有模型的算法。那么问题来了，什么是模型（model）？模型其实 ...
.NET Core 反射获取所有控制器及方法上特定标签
.NET Core 反射获取所有控制器及方法上特定标签 有个需求，就是在. NET Core中，我们想在项目 启动时，获取LinCmsAuthorizeAttribute这个特性标签所有出现的地方，把他的参数，放入一个集合并缓存起来，以便后面使用此数据用于权限验证。 我们通过反射获取所有控制器下及方 ...
[推荐]大量 Blazor 学习资源（二）
继上一篇《[推荐]大量 Blazor 学习资源（一）》之后，社区反应不错，但因个人原因导致这篇文章姗姗来迟，不过最终还是来了！这篇文章主要收集一些常用组件、书籍和电子书。 资料来源：https://github.com/AdrienTorris/awesome-blazor/ 并非完全翻译原文，会从 ...
Golang源码学习：调度逻辑（四）系统调用
Linux系统调用 概念：系统调用为用户态进程提供了硬件的抽象接口。并且是用户空间访问内核的唯一手段，除异常和陷入外，它们是内核唯一的合法入口。保证系统的安全和稳定。 调用号：在Linux中，每个系统调用被赋予一个独一无二的系统调用号。当用户空间的进程执行一个系统调用时，会使用调用号指明系统调用。 ...
如何理解Java中的自动拆箱和自动装箱？
小伟刚毕业时面的第一家公司就被面试官给问住了... 如何理解Java中的自动拆箱和自动装箱？ 自动拆箱？自动装箱？什么鬼，听都没听过啊，这...这..知识盲区... 回到家后小伟赶紧查资料，我透，这不就是问基本类型跟封装类型吗，面试官整啥名词呢... 别问结果，问就是没过。 1、 什么是自动装箱，自 ...
使用websocket开发智能聊天机器人
前面我们学习了异步web框架（sanic）和http异步调用库httpx，今天我们学习websocket技术。 websocket简介 我们知道HTTP协议是：请求->响应，如果没有响应就一直等着，直到超时；但是有时候后台的处理需要很长时间才能给到结果，比如30分钟，那HTTP的请求不可能等这么久， ...
实时数据订阅与分发系统概述
实时数据订阅与分发系统可以将业务数据源变更实时分发分发到消息总线上，并维护消息的统一格式，提供通用的客户端框架供消息生产者与下游业务接入。 一般能用于以下场景： 索引构建：MySQL到ES 缓存管理：MySQL到Redis或本地cache 数据库镜像 实时备份 价格变化等重要业务信息订阅 实时数据订 ...
Python 为什么不用分号作终止符？
一般而言，编程语言中使用分号“;”来实现两种目的： 作为语句分隔符：使用分号来分隔语句（statement），这样就能在一行代码中书写多条语句（一行多句） 作为语句终止符：使用分号来终止语句，这样就能把多行代码识别为一条语句（一句多行） 单纯看“分隔符”与“终止符”，它们都是必须的，然而是否都要用分 ...
深入理解JS：执行上下文中的this（二）
目录 序言 Function.prototype.bind() 方法 箭头函数 参考 1.序言 在 深入理解JS：执行上下文中的this（一） 中，我们主要深入分析全局环境和函数环境中函数调用的 this，还留下 bind 方法以及箭头函数的 this 尚未分析，因此我们将在这篇文章进行讲解。 2. ...