ludengke95 - 链滴

发布了回帖非程序员也可以用上 pipe 么

费用成本：（288 RMB / 年 ~ 296 RMB / 年）阿里云轻量云服务器（最便宜套餐：24 RMB / 月，目前为止我知道的最便的云服务器）域名（一次性付费，最便宜的是 namesilo，8 RMB / 年）（非必须） ssl 证书（acme.sh 免费申请，自动续期）（非必须）推荐用 solo，感觉 ..

1 年前

发布了帖子 Leetcode 每日抑题 (LCP 03. 机器人大冒险)

[图片] LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. PS: 最近几天的每日抑题都好水,我就不写了,最近的每日抑题是我自己找的中等难度的题,因为比赛的时候中等难度的题都有好多做不出来,困难题就更别说了. 题目链接题 ..

3 年前

发布了回帖已删除的帖子

是我的错觉么,发量感觉稀少了好多[图片]

3 年前

打赏了帖子已删除的帖子

已经太多年前了，但是还是有很多人打赏，想把帖子删了，但是告知已经有回帖，不能删除，所以删除了所有内容。 ps：为啥打赏区的内容删除不了，好像只能编辑正文了？？？

3 年前

发布了回帖 20200925 TGIF

可能几年后就开放三胎,四胎政策了.那是不是产假就能变多了.

3 年前

关注了用户 GimpelZhang

3 年前

发布了帖子 Leetcode 每日抑题 (106. 从中序与后序遍历序列构造二叉树)

[图片] LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. 题目链接题名通过率难度 106. 从中序与后序遍历序列构造二叉树 70.6% 中等根据一棵树的中序遍历与后序遍历构造二叉树。注意: 你可以假设树中没有重 ..

3 年前

发布了帖子 Leetcode 每日抑题 (617. 合并二叉树)

[图片] LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. 题目链接题名通过率难度 617. 合并二叉树 78.2% 简单给定两个二叉树，想象当你将它们中的一个覆盖到另一个上时，两个二叉树的一些节点便会重叠。你需 ..

3 年前

发布了帖子 Leetcode 每日抑题 (968. 监控二叉树)

[图片] LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. 题目链接题名通过率难度 968. 监控二叉树 47.1% 困难给定一个二叉树，我们在树的节点上安装摄像头。节点上的每个摄影头都可以监视其父对象、自身及其 ..

3 年前

发布了帖子 Leetcode 每日抑题 (538. 把二叉搜索树转换为累加树)

[图片] LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. 题目链接题名通过率难度 538. 把二叉搜索树转换为累加树 64.0% 简单 1038. 从二叉搜索树到更大和树 77.4% 中等给定一个二叉搜索树（Bi ..

3 年前

关注了标签 LeetCode

3 年前

发布了评论社区彻底转变为生活区，来个起名帖

余罪中名义上的大反派,就是我头像的那个人

3 年前

发布了帖子 Leetcode 每日抑题 (47. 全排列 II)

[图片] LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. 这次为什么使用 java 呢,是因为 java 版本使用的内存少,写起来方便,如果是 scala 的话,需要写大量的 ListBuffer [图片] 题目链接题 ..

3 年前

发布了回帖做了一个内网穿透, 可以共享你的闲置服务器带宽

感觉你这是做了个机场呀,小心点

3 年前

发布了回帖社区彻底转变为生活区，来个起名帖

傅国生[图片]

3 年前

发布了回帖 Leetcode 每日抑题 (685. 冗余连接 II)

谢大佬,启用了 lute-http,好了.

3 年前

关注了用户 88250

3 年前

发布了回帖 Leetcode 每日抑题 (685. 冗余连接 II)

@88250 大佬 , 不知道为啥,表格在社区就好好的 , 在我博客里面就是 md 源码 , 我更新 solo 镜像了.

3 年前

发布了帖子 Leetcode 每日抑题 (685. 冗余连接 II)

[图片] 今天开启 LeetCode 的每日抑题系列 , LeetCode 会每天随机一道题作为签到题.我也是菜鸡,如果今天没 A 掉,那只能证明我离大神又进了一步. 或许有兴趣的小朋友就问了:'你用 scala 刷题 ? scala 不适合呀' 'scala 刷题对于我来说只是熟悉 scala 基本操作 , 或许没几 ..

3 年前

关注了标签黑客派

3 年前

发布了回帖云南腾云信息产业有限公司（一部手机游云南）招聘大数据岗位

熟悉 Hive, Spark，不会 python 和 Golang，行么

3 年前

关注了用户 Vanessa

3 年前

关注了用户 RustFisher

3 年前

发布了帖子 spark-sql 窗口函数

[图片] count(...) over(partition by ... order by ...)--求分组后的总数。 sum(...) over(partition by ... order by ...)--求分组后的和。 max(...) over(partition by ... order by ...) ..

3 年前

发布了帖子 Java 接口继承使用（什么？接口还能继承接口，好吧第一次见）

[图片] Java 接口继承使用（多数据库源类似查询的封装）场景描述我是因为一个中间件的项目（由用户维护多个数据库链接信息，系统从多数据源中读取库中的全部表）发现的这个东西。为了让扩展数据库类型比较方便，所以这个地方需要抽象出一个数据库基类，每次新增数据库类型的时候，只是写新类继承基类就可以了，通过反射呀，或者简单 ..

3 年前

发布了帖子 Spark SQL 操作 hive 过程 rename 过程时间长

[图片] Spark SQL 操作 hive 过程 rename 过程时间长情况简介 hive 版本：1.2.1，spark 版本：2.3.0 2 亿数据去重 spark 任务时间：12.5h（4h（去重）+2.5h（不知道 spark 在干嘛，driver 端没有日志，executor 也没有日志）+6h（Rnam ..

4 年前

发布了帖子 Msyql 创建 event 的代码块问题

[图片] Mysql 创建 Event 最近需要给 mysql 数据库加个 Event 发现写好的代码块被分割不像话，和被五马分尸一样。遇到分号就执行。 [图片] 折腾了好久，才发现 DELIMITER。 DELIMITER// 是修改结束符为// ,创建完 event 之后再 DELIMITER; 修改结束符为; ..

4 年前

发布了帖子 Spark Streaming 实时统计数据（累加器的应用）

[图片] Spark Streaming 实时统计数据（累加器的应用）如果代码缺失导致无法运行，请留言标识，我会补全的 ❤️ 场景描述从 kafka 中取实时数据，对数据进行清洗过滤，然后和当天的历史数据进行合并去重，对合并后的数据集进行汇总。将汇总结果写入 HBase，当时间到第二天的时候清除前一天历史数据，重新 ..

4 年前

发布了帖子 Centos7 安装 ambari 2.6.2.2 和 HDP 2.6.5 的艰苦历程

[图片] Centos7 安装 ambari 2.6.2.2 和 HDP 2.6.5 的艰苦历程安装前的准备 VM 虚拟机三台（切记别吝啬，硬盘大点，不然安装的时候突然机器写满，centos 连机都开不开） HDP 地址: http://public-repo-1.hortonworks.com/HDP/centos ..

4 年前

发布了回帖使用 spark 从 kafka 消费数据写入 hive 动态分区表（二）

我写着两篇博客主要是看到网上都是啥也不说了，直接贴代码，代码全是一样的，一点原创精神都没有。我是真的讨厌，百度一下全是 cv 大师。我为什么不贴全部代码，如果我贴全部代码还要你干嘛，我只是提供一个思路，我不敢说你看完这两篇博客之后你一定能够会了这块，起码这块遇到的问题有一种思路可以帮你，如果你有更好的办法可以联系我，大 ..

4 年前

发布了回帖使用 spark 从 kafka 消费数据写入 hive 动态分区表（一）

我写着两篇博客主要是看到网上都是啥也不说了，直接贴代码，代码全是一样的，一点原创精神都没有。我是真的讨厌，百度一下全是 cv 大师。我为什么不贴全部代码，如果我贴全部代码还要你干嘛，我只是提供一个思路，我不敢说你看完这两篇博客之后你一定能够会了这块，起码这块遇到的问题有一种思路可以帮你，如果你有更好的办法可以联系我，大 ..

4 年前

发布了帖子使用 spark 从 kafka 消费数据写入 hive 动态分区表（二）

[图片] 使用 spark 从 kafka 消费数据写入 hive 动态分区表（二）上次咱们说到数据从 kafka 到 hive，也从 hive 非分区表到分区表的迁移。经过测试发现曲线救国的方法虽然 kafka 到 hive 快了，但是 hive 非分区表到分区表贼慢，再一次难受，不着急咱们慢慢来分析原因。分析日 ..

4 年前

关注了标签 JavaScript

4 年前

发布了回帖使用 spark 从 kafka 消费数据写入 hive 动态分区表（一）

心疼自己 by ludengke95

4 年前

发布了帖子使用 spark 从 kafka 消费数据写入 hive 动态分区表（一）

[图片] 使用 spark 从 kafka 消费数据写入 hive 动态分区表最近因为业务需求，需要把 kafka 内的数据写入 hive 动态分区表，进入 kafka 的数据是保证不会重复的，同一条业务数据仅会进入 kafka 一次。这就保证数据到了 hive 基本不会发生 update 操作，可以对 hive 进 ..

4 年前