第十一次作业
Azure Data Factory（十一）Data Flow 的使用解析
一，引言 上一篇文字，我们初步对 Data Flow 有个简单的了解，也就是说可以使用 Data Flow 完成一些复杂的逻辑，如，数据计算，数据筛选，数据清洗，数据整合等操作，那我们今天就结合 Data Flow 中的常用数据转换逻辑拉演示在实际场景中如何实现。 Task1：将数据源的数据进行分组 ......
大话 JavaScript（Speaking JavaScript）：第三十一章到第三十三章
第三十一章：模块系统和包管理器 原文：31. Module Systems and Package Managers 译者：飞龙 协议：CC BY-NC-SA 4.0 JavaScript 没有内置模块支持，但社区已经创建了令人印象深刻的解决方法。要管理模块，可以使用所谓的包管理器，它们处理发现、安 ......
大话 JavaScript（Speaking JavaScript）：第十八章到第二十章
第二十一章：数学 原文：21. Math 译者：飞龙 协议：CC BY-NC-SA 4.0 Math对象用作多个数学函数的命名空间。本章提供了一个概述。 数学属性 Math的属性如下： Math.E 欧拉常数（e） Math.LN2 2 的自然对数 Math.LN10 10 的自然对数 Math.L ......
大话 JavaScript（Speaking JavaScript）：第十一章到第十五章
第十一章：数字 原文：11. Numbers 译者：飞龙 协议：CC BY-NC-SA 4.0 JavaScript 对所有数字都使用单一类型：它将它们全部视为浮点数。但是，如果小数点后没有数字，则不显示小数点： > 5.000 5 在内部，大多数 JavaScript 引擎都会优化并区分浮点数和整 ......
大话 JavaScript（Speaking JavaScript）：第十六章到第二十章
第十六章：变量：作用域、环境和闭包 原文：16. Variables: Scopes, Environments, and Closures 译者：飞龙 协议：CC BY-NC-SA 4.0 本章首先解释了如何使用变量，然后详细介绍了它们的工作方式（环境、闭包等）。 声明变量 在 JavaScrip ......
一次生产 KubeSphere 日志无法正常采集事件解决记录
作者：宇轩辞白，运维研发工程师，目前专注于云原生、Kubernetes、容器、Linux、运维自动化等领域。 前言 2023 年 11 月 7 号下午，研发同事反馈，项目线上日志平台某个服务无法查看近期的日志。我登上 KubeSphere 平台进行查看，发现日志收集展示停留在 10 月 15 号那天 ......
Java版Flink（十一）时间语义和watermark
Java版Flink（十一）时间语义和watermark 一、时间语义 在Flink 中涉及到三个重要时间概念：EventTime、IngestionTime、ProcessingTime。 1.1、EventTime EventTime 表示日志事件产生的时间戳，每一条数据都会记录自己生产的时间。 ......
我对星际迷航的第一次接触
我的第一次接触应该是在小学五年级的时候，我觉得应该是星际迷航:航海家号。老实说，她确实惊艳到我了。 无论是人物形象的塑造、特效的制作、细节的到位，我觉得可以说是没有瑕疵。 论我最喜欢剧中哪一位角色，我只能说是：“珍妮微舰长”！剧中从多个角度对她描写，虽说她是舰长，可她却和船上的大多数船员一样，有真实 ......
作业帮基于 DolphinScheduler 的数据开发平台实践
摘要 随着任务数量、任务类型需求不断增长，对我们的数据开发平台提出了更高的要求。本文主要分享我们将调度引擎升级到 Apache DolphinScheduler 的实践经验，以及对数据开发平台的一些思考。 1. 背景 首先介绍下我们的大数据平台架构： 数据计算层承接了全公司的数据开发需求，负责运行各 ......
Unity3D 最后一次drawcall 如何避免详解
Unity3D是一款广泛使用的游戏开发引擎，它基于C#编程语言，可以实现跨平台的游戏开发。在Unity3D中，drawcall是一个非常重要的概念，它指的是渲染引擎每次渲染物体时所调用的函数。过多的drawcall会导致游戏性能下降，因此我们需要采取一些措施来避免过多的drawcall。 对啦！这里 ......
编写一个函数，计算字符串中含有的不同字符的个数。字符在 ASCII 码范围内( 0~127 ，包括 0 和 127 )，换行表示结束符，不算在字符里。不在范围内的不作统计。多个相同的字符只计算一次 例如，对于字符串 abaca 而言，有 a、b、c 三种不同的字符，因此输出 3 。
描述 编写一个函数，计算字符串中含有的不同字符的个数。字符在 ASCII 码范围内( 0~127 ，包括 0 和 127 )，换行表示结束符，不算在字符里。不在范围内的不作统计。多个相同的字符只计算一次 例如，对于字符串 abaca 而言，有 a、b、c 三种不同的字符，因此输出 3 。 数据范围： ......
构建安全可靠的系统：第二十一章到附录 A
第二十一章：建立安全和可靠性文化 原文：21. Building a Culture of Security and Reliability 译者：飞龙 协议：CC BY-NC-SA 4.0 作者：Heather Adkins 与 Peter Valchev，Felix Gröbert，Ana Op ......
构建安全可靠的系统：第十六章到第二十章
第四部分：维护系统 原文：Part IV. Maintaining Systems 译者：飞龙 协议：CC BY-NC-SA 4.0 准备应对不舒适情况的组织有更好的机会处理关键事件。 尽管不可能为可能扰乱您组织的每种情况制定计划，但作为综合灾难规划策略的第一步，正如第十六章中所讨论的那样，是务实和 ......
构建安全可靠的系统：第十一章到第十五章
第三部分：实现系统 原文：Part III. Implementing Systems 译者：飞龙 协议：CC BY-NC-SA 4.0 一旦您分析并设计了您的系统，就该是实现计划的时候了。在某些情况下，实现可能意味着购买现成的解决方案。第十一章提供了谷歌在决定构建定制软件解决方案时的思考过程的一个 ......
递归的递归之书：第十章到第十四章
十、文件查找器 原文：Chapter 10 - File Finder 译者：飞龙 协议：CC BY-NC-SA 4.0 在本章中，你将编写自己的递归程序，根据自定义需求搜索文件。你的计算机已经有一些文件搜索命令和应用程序，但通常它们只能根据部分文件名检索文件。如果你需要进行奇特、高度特定的搜索怎么 ......
记一次有抽奖次数但是无法抽奖的问题
一、问题背景 测试那边现象是：登录手机银行打开抽奖活动界面，能查询到抽奖次数，但是点击抽奖提示：没有满足参与条件。 我查了一些日志，然后本地试是没有问题的。飞哥也一直在查日志。然后我找到原因是因为客群匹配时候，设置的cifGroupIdList是从登录中获取的。然后我就怀疑，是不是登录了很久之后断开 ......
记录一次不太成功的人脸识别测试
本意是想找一个在 C# 中方便直接调用的人脸识别模型代码，原来用过 python 的，但是转到 C# 中很麻烦，最近发现一个项目 FaceRecognitionDotNet（开源地址：https://github.com/takuya-takeuchi/FaceRecognitionDotNet） ......
[集训队作业2013] 城市规划（NTT）
一周一博客二专题计划 题面 n 个点的简单 (无重边无自环) 有标号无向连通图数目。 看着就很典 思路 设\(f(n)\)为n点连通图数目。设\(g(n)\)为n点不一定联通图数目，显然直接枚举每条边是否存在，\(g(n)=2^{\frac{n*(n-1)}{2}}\) \[g(n)=\sum_{i ......
"mysql : 无法将“mysql”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。请检查名称的拼写，如果包括路径，请确保路径正确，然后再试一次。"错误以及"Can't connect to MySQL server on 'localhost' (10061) after Installation"错误解决办法
在mysql的安装路径的bin目录下执行命令 mysqld --install, 在windows上安装mysql服务 mysqld --initialize, 初始化数据目录. 然后在windows中使用win+r service.msc 命令打开windows服务, 找到并手动启动mysql的服 ......
InternLM实战营 第三次作业
基础作业 这一部分在第三次笔记中可以找到详细的 这里就给一个结果展示 运行结果 进阶作业 收集数据 这里我只收集了法律相关的三个数据，构造了对应的向量数据库 这里不放代码了，代码会放到最后的最后的github对应的项目中 创建应用 这里我现在自己机器上跑了一下效果 对应的知识库的内容 可能本来模型就 ......
第十一节：平衡树、AVL树、红黑树详解
一. 二. 三. ! 作 者 : Yaopengfei(姚鹏飞) 博客地址 : http://www.cnblogs.com/yaopengfei/ 声 明1 : 如有错误，欢迎讨论，请勿谩骂^_^。 声 明2 : 原创博客请在转载时保留原文链接或在文章开头加上本人博客地址，否则保留追究法律责任的权 ......
作业8 流计算&Flink
一. 多选题（共5题，62.5分） 1. (多选题)典型的事件驱动型应用包括： A. 异常检测 B. 基于规则的报警 C. 反欺诈 D. 业务流程监控 我的答案: ABCD:异常检测; 基于规则的报警; 反欺诈; 业务流程监控;正确答案: ABCD:异常检测; 基于规则的报警; 反欺诈; 业务流程监 ......
作业7 Spark
一. 多选题（共5题，71.4分） 1. (多选题)Spark具有的主要特点包括： A. 容易使用 B. 运行模式多样 C. 运行速度快 D. 通用性 我的答案: ABCD:容易使用; 运行模式多样; 运行速度快; 通用性;正确答案: ABCD:容易使用; 运行模式多样; 运行速度快; 通用性; 1 ......
作业6 数据仓库Hive
一. 单选题（共3题，9分） 1. (单选题, 3分)下面关于Hive的描述错误的是： A. Hive是一个构建在Hadoop之上的数据仓库工具 B. Hive是由Facebook公司开发的 C. Hive在某种程度上可以看作是用户编程接口，其本身并不存储和处理数据 D. Hive定义了简单的类似S ......
作业5 MapReduce
一. 单选题（共8题，16分） 1. (单选题, 2分)下列传统并行计算框架，说法错误的是哪一项？ A. 刀片服务器、高速网、SAN，价格贵，扩展性差上 B. 共享式(共享内存/共享存储)，容错性好 C. 编程难度高 D. 实时、细粒度计算、计算密集型 我的答案: B:共享式(共享内存/共享存储)， ......
作业4 NoSQL数据库
二. 多选题（共3题，6分） 2. (多选题, 2分)关系数据库已经无法满足Web2.0的需求，主要表现在以下几个方面？ A. 无法满足海量数据的管理需求 B. 无法满足数据高并发的需求 C. 无法满足高可扩展性和高可用性的需求 D. 使用难度高 我的答案: ABC:无法满足海量数据的管理需求 ; ......
作业2 分布式文件系统HDFS
一. 单选题（共10题，20分） 1. (单选题, 2分)分布式文件系统指的是什么？ A. 把文件分布存储到多个计算机节点上，成千上万的计算机节点构成计算机集群 B.用于在Hadoop与传统数据库之间进行数据传递 C. 一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统 D. 一种高吞吐 ......
作业3 分布式数据库HBase
一. 单选题（共7题，14分） 1. (单选题, 2分)下列选项中，关于HBase和BigTable的底层技术对应关系，哪个是错误的？ A. GFS与HDFS相对应 B. MapReduce与Hadoop MapReduce相对应 C. GFS与Zookeeper相对应 D. Chubby与Zook ......
作业1 大数据概述
一. 单选题（共2题，4分） 1. (单选题, 2分)下列哪一个不属于第三次信息化浪潮中新兴的技术？ A. 互联网 B. 云计算 C. 大数据 D. 物联网 正确答案: A:互联网 ; 2. (单选题, 2分) 下列哪项不属于大数据的发展历程？ A. 成熟期 B. 萌芽期 C. 大规模应用期 D. ......
记一次Thrift+swift踩坑经历
最近来了个thrift+swift的分布式架构项目、所以就研究了一下这套远程调度框架的使用、中间踩了很多坑 首先介绍一下用到的几个插件和jar包 <plugin> <groupId>com.facebook.mojo</groupId> <artifactId>swift-maven-plugin< ......