开发工具 机器 环境 工具
作业帮基于 DolphinScheduler 的数据开发平台实践
摘要 随着任务数量、任务类型需求不断增长，对我们的数据开发平台提出了更高的要求。本文主要分享我们将调度引擎升级到 Apache DolphinScheduler 的实践经验，以及对数据开发平台的一些思考。 1. 背景 首先介绍下我们的大数据平台架构： 数据计算层承接了全公司的数据开发需求，负责运行各 ......
创新工具：2024年开发者必备的一款表格控件
前言 在现代工作环境中，信息的处理和管理是至关重要的。表格是一种常见的数据呈现和整理工具，被广泛应用于各行各业。然而，随着技术的不断发展，市场对表格控件的需求也越来越高。随着工作效率的重要性日益凸显，一款高效的表格控件成为了开发者们的首选，因此本文小编将从葡萄城公司的纯前端表格控件——SpreadJ ......
【工具使用】【WebService】WebService 是什么以及如何调试、如何对接开发
1 前言 今儿对接外部系统，莫名的有两个 WebService 的接口，很是纳闷。琢磨了会儿，来捋捋。 首先看下什么是 WebService 呢？ WebService 是一种基于网络的技术，它允许不同的应用程序在互联网上相互通信。具体来说，WebService 是一种基于标准化协议和格式的应用程序 ......
辅助思考的工具有很多，以下是一些常用的辅助思考工具
辅助思考的工具有很多，以下是一些常用的辅助思考工具： 思维导图：思维导图是一种用图形方式呈现信息和关系的工具。通过将主题放在中心，然后用分支表示相关的子主题和关联信息，可以帮助我们组织思维、展示思路和发现新的观点。 SWOT 分析：SWOT 分析是一种评估一个项目、产品或个人的优势、劣势、机会和威胁 ......
随笔-开发-Window10家庭版启用远程桌面功能 RDPwrap
参考：Window10家庭版启用远程桌面功能 RDPwrap： 配置文件 rdpwrap.ini ： [10.0.19041.3636] LocalOnlyPatch.x64=1 LocalOnlyOffset.x64=92AF1 LocalOnlyCode.x64=jmpshort SingleU ......
安装篇 —— 安装一个好用的截图小工具Snipaste
下载Snipaste 1、可以从网页下载，下载地址：https://zh.snipaste.com/download.html 2、可以从我的网盘获取：链接：https://pan.baidu.com/s/1wivcN--PMvNJE2TcLYYXzg 提取码：gci4 解压文件，执行exe应用程序 ......
逻辑脚本开发
1.安装lnmp/lamp脚本开发： 1.1 模拟创建出两个安装脚本：lnmp.sh和lamp.sh 1.2 创建lamp_or_lnmp.sh脚本，用来调用执行lamp.sh和lnmp.sh文件 总结： ......
【APP逆向02】抓包工具的选择及配置
抓包工具的选择 Wireshark：Wireshark 是一个开源的网络抓包工具，可以在多个平台上运行，支持多种协议的抓取和分析。 Fiddler：Fiddler 是一个跨平台的抓包工具，可以用于捕获和分析 HTTP 和 HTTPS 流量。它提供了强大的调试和排查功能。 Charles Proxy： ......
2024年第 5 期《Python 测试平台开发》进阶课程（2月22号开学）
2024年第 5 期《Python 测试平台开发》进阶课程 主讲老师：上海-悠悠 上课方式：微信群视频在线教学，方便交流 本期上课时间：2月22号 （周二、四晚上21:00-22:30, 周六周日晚上20：30-22:30） 报名费：报名费3800一人（之前学过《python接口+测试开发》课程的同 ......
【Azure App Service】如何来停止 App Service 的高级工具站点 Kudu ？
问题描述 如何来停止 App Service 的高级工具站点 Kudu ？ kudu 介绍 Kudu 提供了一组面向开发人员的工具和扩展点，用于您的应用服务应用程序. Kudu (Advanced Tools) provides a collection of developer oriented ......
介绍一个prometheus监控数据生成工具
prometheus-data-generator Prometheus数据模拟工具旨在通过配置文件模拟Prometheus数据，用于测试和开发目的。该工具允许您生成用于测试和开发的合成数据。 配置 工具的配置信息存储在一个YAML文件中。以下部分描述了可用的选项： template_dir: ./ ......
机器学习-梯度下降法
1、名称解释 （1）什么是无约束优化问题？ 无约束优化问题是指在给定目标函数的情况下，寻找使目标函数取得最大值或最小值的变量取值，而不受任何约束条件限制的优化问题。 具体来说，无约束优化问题可以形式化地表示为以下形式： 最小化 f(x)，其中 x 是 n 维向量，f(x) 是一个实值函数，称为目标函 ......
机器学习-半正定规划
1、概念解释 （1）什么是半正定规划？ 半正定规划(Semi-Definite Programming，简称SDP) 是一类凸优化问题，其中的变量可组织成半正定对称矩阵形式，且优化问题的目标函数和约束都是这些变量的线性函数。 （2）什么是对称矩阵？ 对称矩阵是指一个矩阵的元素关于主对角线对称。换句话 ......
机器学习-二次规划
1、概念解释 （1）什么是半正定矩阵？ 半正定矩阵是指一个方阵（即行数等于列数的矩阵），满足以下条件之一： 对于任意非零向量x，都有x^T * A * x ≥ 0，其中 A 表示该矩阵的转置。 所有特征值（eigenvalue）都大于或等于零。 简单来说，一个半正定矩阵的特点是它的所有特征值非负，或 ......
机器学习-拉格朗日乘子法
1、概念解释 （1）什么是拉格朗日乘子法？ 拉格朗日乘于法(Lagrange multipliers) 是一种种寻找多元函数在一组约束下的极值的方法。通过引入拉格朗日乘子，可将有d个变量与k个约束条件的最优化问题转化为具有d+k个变量的无约束优化问题求解。 2、基本演算 ......
【APP-逆向原理与反编译工具】
APP正向开发 安卓开发工程师 》Java语法+安卓框架 》实现功能（java+C） 》写的代码 打包 》xx.apk(资源文件:图片，音频 java: .dex) APP逆向 拿到 xx.apk >反编译（加壳，混淆） 》java+c 代码 》hook技术(验证代码) 》python还原逻辑--》 ......
机器学习-奇异值分解
1、概念介绍 （1）什么是线性无关的行？ 线性无关的行指的是矩阵中不可由其中一个或多个行的线性组合表示的行。换句话说，如果一个矩阵中有两个或多个行，且它们不能通过某些系数相乘和相加得到一个零向量，则这些行就是线性无关的。 例如，考虑一个包含三行的3x3矩阵： 1 2 3 4 5 6 7 8 9 我们 ......
vscode使用anaconda虚拟环境
问题分析： 当我们第一次使用vscode+anaconda虚拟环境来运行项目时，一般会报错no module name 'torch'这样的错误，尽管我们已经切换vscode使用的环境为正确的环境也还是不行。这个问题是因为我们在vscode中运行项目是在终端运行的，但如果这个终端是powershel ......
iMessage群发,iMessage群发软件,iMessage群发软件开发(程序编码篇)
在当今数字化高速发展的时代，通信软件的功能和便捷性成为我们日常生活中不可或缺的一部分，其中，iMessage作为苹果设备间的独特通信方式，拥有着广大的用户群体。 那么，如何利用编程技术开发一款能够实现iMessage群发的软件呢?本文将为你揭秘这个神秘的面纱，带你深入了解iMessage群发软件开发 ......
软件测试/测试开发全日制培训|Pytest跳过用例和失败重试
前言 在我们日常进行自动化测试时，经常会遇到功能阻塞，未实现或者环境有问题等等原因，一些用例执行不了，如果我们注释掉或删除掉这些测试用例，后面可能还要进行恢复操作，这个时候pytest的跳过测试功能就能帮助我们，先跳过，等到问题解决时，恢复执行即可；同时我们还有可能会遇到需要对失败用例重新运行进行测 ......
PolarDB-X 配套工具之 batch-tool
Batch Tool 工具是 PolarDB-X 团队开发的专门为 PolarDB-X 数据库提供数据导入导出服务的工具。 Batch Tool 工具采用 Java 语言实现，基于生产者消费者模型并结合分布式数据库特点，实现了一站式且高效地从文件导入、导出到文件以及跨库的离线数据迁移（MySQL、P ......
软件测试/测试开发/全日制|pytest如何标记测试用例
前言 在pytest中，有时候我们并不需要对所有的用例全部执行。pytest提供了一种机制：有选择的挑选用例去执行，即标记测试函数。下面详细介绍几种方法给函数标记。 使用pytest.mark在函数上进行标记 标记格式 @表示这是一个装饰器，pytest.mark是pytest固定的写法,mark_ ......
软件测试/测试开发/全日制|Pytest参数化神器，pytest.mark.parametrize()使用
前言 当我们要使用pytest输入多个数据对一个功能进行测试时，如果写多个测试用例的话，那就完全体现不出通过代码来执行测试的优势了，这个时候，就轮到pytest的参数化功能闪亮登场了。所谓参数化，就是就是把测试过程中的数据提取出来，通过参数传递不同的数据来驱动用例运行。其实也就是数据驱动的概念。本文 ......
测试驱动的Spring Boot应用程序开发数据层示例
前言 在敏捷开发中，学会纵向划分产品需求，可以在构建软件时节省大量时间。这意味着不需要等待一个完整的层完成后再进行下一层的开发，而是要进行多层开发确保业务功能可正常运行。这种开发方式也有助于构建更好的产品或服务。 通过前面的前后端开发，完成了用户猜数游戏，可以进行试用，那么，就可能得到更进一步的需求 ......
一个 python 拆解文本文件的工具
背景 你是否有遇到过文本文档太大无法打开的情况？比如说压测了好几天，生成了一个十几 G 的日志文件。 下面这个脚本可以帮助你将一个大文件分解成一个小文件。 假设文件名位：splitfile.py 使用方法位：python splitfile.py log 20 该文件将会将 log 文件拆分成 lo ......
Helix QAC—软件静态测试工具
Helix QAC是Perforce公司（原PRQA公司）产品，主要用于C/C++代码的自动化静态分析工作，可以提供编码规则以及信息安全相关检查、代码质量度量、软件结构分析、测试结果管理等功能。Helix QAC能够准确地发现软件中潜在的问题，自身符合ISO26262功能安全标准认证。适用于自动驾驶... ......
安装Linux-CentOS7.9操作系统虚拟机环境（适用于学习、测试环境）
1.前期环境准备 1.1.创建安装目录 具体名称以及路径根据自己的实际情况在个人pc或者其他的设备上进行创建。 1.2准备虚拟机操作系统iso镜像文件 阿里云开源镜像站地址 https://developer.aliyun.com/mirror/ 清华大学开源镜像站地址 https://mirror ......
1，一个测试驱动的Spring Boot应用程序开发
系统任务 用户每次访问页面时，系统显示一道两位数的乘法题。用户输入别名（简称）并对计算结果进行猜测。这是基于他们只能进行心算的假设。用户发送数据后，Web页面将显示猜测是否正确。 另外，希望能保持用户的积极性，引入游戏机制。对每个正确的猜测结果，系统会给出评分，用户能在排名中看到分数，这样就可以与他 ......