分析师 笔记 数据python
分布式代码执行分析
SparkContext对象的构建 以及 Spark程序的退出, 由 Driver 负责执行 具体的数据处理步骤, 由Executor在执行. 其实简单来说就是: 非数据处理的部分由Driver工作 数据处理的部分(干活)由Executor工作 要知道: Executor不仅仅是一个, 视集群规模, ......
养老数据监控大屏：科技赋能，让智慧养老触手可及
养老数据监控大屏作为智慧养老领域的一大创新成果，为提升养老服务水平、保障老年人生活安全发挥了重要作用。未来随着技术的不断进步和应用场景的不断拓展，可视化大屏技术将在更广泛的范围内得到应用和推广，为构建更加和谐、美好的老龄化社会贡献力量。 ......
学习如何使用 Python 连接 MongoDB: PyMongo 安装和基础操作教程
Python 可以用于数据库应用程序。最流行的 NoSQL 数据库之一是 MongoDB MongoDB MongoDB 将数据存储在类似 JSON 的文档中，使数据库非常灵活和可扩展。 您可以在 MongoDB 官网 上下载免费的 MongoDB 数据库 PyMongo Python 需要一个 M ......
Python中出现"No module named 'requests'"的图文解决办法
第一步 找到pycharm中的虚拟环境的位置 第二步 打开虚拟环境位置的文件夹 找到Scripts的这个文件夹 然后复制该文件夹的地址 第三步 打开“运行”（可以用快捷键WIN+R键打开） 然后输入 cmd 第四步 切换目录到虚拟环境的盘符 输入“D：”（我的虚拟环境在D盘所以切换到D盘） 第五步 ......
ACCESS 快速构建修改数据的窗体
有个客户表: 现在需要创建一个可以修改客户数据的窗体,我们一般的做法是: 1.选中数据表: 客户列表 2.在菜单中选择 "创建" --> "窗体". 3.调整一下格式,和添加一下按钮,就变成了这样,初始状态下,它会自动绑定字段值.此时如果用户对某个值做了修改,会直接修改数据表中的值,这不是我们想要的 ......
删除的数据恢复
1回收站恢复 1.1回收站删除 新手删除是通过del键或者鼠标右键删除,这种删除是并不是真正的删除,而是放到了回收站 1.2回收站的数据恢复 回收站的数据,你要恢复那个直接右键还原即可,删除到回收站的数据并不能称得上是删除,回收站的本质也是一个文件夹,只不过是个特殊的文件夹 2永久删除数据恢复 我们 ......
读元宇宙改变一切笔记06_虚拟世界引擎
1. 一棵虚拟的树在虚拟森林里倒下了! 1.1. 它们都是数据和代码 1.2. 数据可以描述虚拟对象的属性 1.2.1. 尺寸或颜色 1.3. 为了让我们的树由CPU处理并由GPU渲染，这些数据需要通过代码运行 1.4. 该代码必须是运行虚拟世界的更广泛代码框架的一部分 2. 现实世界 2.1. 现 ......
简易机器学习笔记（十一）opencv 简易使用-人脸识别、分类任务
前言 前段时间摸了下机器学习，然后我发现其实openCV还是一个很浩瀚的库的，现在也正在写一篇有关yolo的博客，不过感觉理论偏多，所以在学yolo之前先摸一下opencv，简单先写个项目感受感受opencv。 流程 openCV实际上已经有一个比较完整的模型了，下载在haarcascades 这里 ......
银行业数据架构的前世今生
分享大纲： 1. 银行信息系统架构 2. 数据架构的主要内容 3. 数据架构的未来 银行信息系统架构 （一）银行信息化发展历程 银行信息化发展历程包括四个阶段：20世纪70年代的信息孤岛阶段、20世纪80-90年代的互联互通阶段、20世纪90年代至2012年的信息化阶段、2012年至今的数字化阶段。 ......
UCB Data100：数据科学的原理和技巧：第十一章到第十五章
十一、恒定模型、损失和转换 原文：Constant Model, Loss, and Transformations 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 推导出在 MSE 和 MAE 成本函数下恒定模型的最佳模型参数。 评估 MSE 和 MAE 风险之间的差异。 理解变量线性 ......
UCB Data100：数据科学的原理和技巧：第十六章到第二十章
十六、交叉验证和正则化 Cross Validation and Regularization 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 认识到需要验证和测试集来预览模型在未知数据上的表现 应用交叉验证来选择模型超参数 了解 L1 和 L2 正则化的概念基础 在特征工程讲座结束时（ ......
Dating Java8系列之用流收集数据
给我馍馍/文 收集器简介 1.收集器介绍 Java 8中流支持两种类型的操作:中间操作(如filter或map)和终端操作(如count、findFirst、forEach和reduce)。 中间操作可以链接起来，将一个流转换为另一个流。这些操作不会消耗流，其目的是建立一个流水线。与此相反，终端操作 ......
Dating Java8系列之并行数据处理
翎野君/文 分支合并框架 分支合并框架介绍 分支/合并框架的目的是以递归的方式将可以并行的任务拆分成更小的任务，然后将每个子任务的结果合并起来生成整体结果。 它是ExecutorService接口的一个实现，它把子任务分配给线程池(称为ForkJoinPool)中的工作线程。把任务提交到这个池，必须 ......
UCB Data100：数据科学的原理和技巧：第一章到第五章
一、引言 原文：Introduction 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 了解 Data 100 的总体目标 了解数据科学生命周期的阶段 数据科学是一个跨学科领域，具有各种应用，并且在解决具有挑战性的社会问题方面具有巨大潜力。通过建立数据科学技能，您可以赋予自己参与和引领 ......
UCB Data100：数据科学的原理和技巧：第六章到第十章
六、正则表达式 原文：Regular Expressions 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 了解 Python 字符串操作，pandas Series方法 解析和创建正则表达式，使用参考表 使用词汇（闭包、元字符、组等）描述正则表达式元字符 这些内容在第 6 和第 7 ......
【opencv学习笔记】028之模板匹配——matchTemplate函数详解
目录 一、前言 二、模板匹配 1、模板匹配是个啥 2、常用匹配算法 1.平方差匹配-CV_TM_SQDIFF 2.标准平方差匹配-CV_TM_SQDIFF_NORMED 3.相关匹配-CV_TM_CCORR 4.标准相关匹配 ......
mybatis-generator:generate生成器将另外的数据库内同名表生成
问题： 在使用mybatis-generator:generate生成器时，会生成别的数据库内同表名； 因为是相同表名。 解决： 在生成器的配置文件中的数据库连接地址内添加： <!--放置生成其他库同名表--> <property name="nullCatalogMeansCurrent" val ......
python 里面的eval exec 还有compile
一、简介 二、操作 三、问题 一、简介 eval exec 方法是python里面内置的方法，用于将字符串代码或者code对象，进行执行的方法。 参考至：这里 二、操作 1 eval 计算指定表达式的值。也就是说它要执行的python代码只能是单个表达式（注意eval不支持任何形式的赋值操作），而不 ......
学习笔记3
RDD概念/特性许多迭代式算法（比如机器学习、图算法等）和交互式数据挖掘工具，共同之处是不同计算阶段之间会重用中间结果， MapReduce框架把中间结果写入到稳定存储（如磁盘）中，带来大量的数据复制、磁盘IO和序列化开销。 RDD就是为了满足这种需求而出现的，它提供了一个抽象的数据架构，开发者不必 ......
荣耀笔记本锐龙版 网络连接不上怎么办？
我的电脑型号： 荣耀MagicBook Pro 2020 锐龙版 R5 集显 16GB+512GB (HYLR-WFQ9) 背景： 我的电脑是荣耀锐龙版的，本来是买了个网线的转接口连接有线的，但是一种连接不上。 于是想下载一个鲁大师来更新下驱动，怀疑是驱动问题。 升级的时候，不小心把wifi的网线升 ......
Python第一天学习笔记
今日学习内容 1.什么是编程 2.计算机组成原理 3.计算机操作系统 4.编程语言是什么 什么是编程 什么是编程语言 编程语言是什么：人与计算机交流的介质 什么是编程 编程：利用编程语言写出一个个文件，这堆文件会达到一个目的 编程有什么用 就像近代奴隶主奴役黑奴干活一样，我们的目的是奴役计算机为我们 ......
基于 Aidlux的智慧教育版面分析场景下的实践
基于 Aidlux的智慧教育版面分析场景下的实践 基于 Aidlux的智慧教育版面分析应用 一、Aidlux环境介绍 所有代码均可通过加课程小助手wx获得:AidLux_Me 官网：https://aidlux.com/ 1.产品优势 AidLux是基于ARM架构的跨生态（Android/鸿蒙+Li ......
学习进度笔记三
实验五：Spark SQL编程初级实践 实验六：Spark Streaming编程初级实践 实验七：Spark机器学习库Mtlib编程实践 今日总结 完成了全部的实验内容，之后就回归正轨啦~~~ ......
读元宇宙改变一切笔记06_虚拟世界引擎
1. 一棵虚拟的树在虚拟森林里倒下了 1.1. 它们都是数据和代码 1.2. 数据可以描述虚拟对象的属性 1.2.1. 尺寸或颜色 1.3. 为了让我们的树由CPU处理并由GPU渲染，这些数据需要通过代码运行 1.4. 该代码必须是运行虚拟世界的更广泛代码框架的一部分 2. 现实世界 2.1. 现实 ......
Python面向对象之反射
【一】反射 【1】什么是反射 反射是一种程序可以访问、检测和修改其本身状态或行为的能力。 在 Python 中，反射主要指通过字符串的形式操作对象的属性。 【2】Python中的反射 通过字符串的形式操作对象相关的属性。 python中的一切事物都是对象（都可以使用反射） 【二】反射方法 反射方法介 ......
开发医疗保险欺诈识别监测模型如何进行数据集分析与预处理
数据集加载： 使用工具如Pandas库加载数据。使用pd.read_csv()等函数加载数据集到DataFrame。 初步数据探索： 使用head()、info()、describe()等方法查看数据的前几行、基本信息和统计摘要。 使用shape属性获取数据集的大小。 处理缺失值： 使用isnull ......
医疗保险欺诈识别监测模型分析
以下是开发医疗保险欺诈识别监测模型的一般性步骤： 数据集分析与预处理： 对给定的16000条数据集进行初步分析，了解数据的结构、特征。 进行数据清洗，处理缺失值、异常值等。 进行多维特征信息分析，以了解医疗保险欺诈的潜在特征。 特征工程： 提取能够描述医疗保险欺诈的特征因子集合。这可能需要领域专业知 ......
Python面向对象之派生
派生 【一】概要 "派生"（Derivation）是指在面向对象编程中，通过创建新的类，基于已有的类（通常称为父类或基类）来构建新的类，以获取和扩展父类的属性和方法。在这个过程中，新创建的类称为子类或派生类。 通俗来讲，派生是指，子类继承父类,派生出自己的属性与方法，并且重用父类的属性与方法 【二】 ......