当前位置： 首页 > news >正文

机器学习基础-Pandas学习笔记

news 2025/11/30 23:57:32
  1. Pandas Python的数据分析库，与Numpy配合使用，可以从常见的格式如CSV、JSON等中读取数据。可以进行数据清洗、数据加工工作。
  2. 数据结构Series，Pandas.Series(data,index,dtype,name,copy)
    data类型是Numpy的ndarray类型，index指定下标，如果不给默认从0开始，name给series名字
  3. 数据类型DataFrame，Pandas.DataFrame(data,index,columns,dtype,copy)
  4. 利用Pandas读取CSV，以逗号或其他字符分隔，可以用Excel打开
  • Pandas.read_csv(“路径”)，可以指定显示的行
  • Pandas.info获取读取文件的信息
  1. 利用Pandas读取JSON，\转义，,分隔，{}保存对象，[]保存数组
  • Pandas.read_json(”路径“)
  • 可以直接将Python的字典以Json格式读入，字典里放字典
  • 如果Json套Json，需要用Pandas.json_normalize(哪个Json，Json里的哪一类需要展平，需要将没展平的哪些列加以展示)进行展平
  1. 数据清洗，是数据预处理的一步
    Pandas文档
  • 不用背API，用到了去查文档
  • DataFrame.duplicated()查看数据是否重复
  1. 打一下老师博文里的内容
    Pandas博客资料

补充一点Pytorch基础
8. cafe,keras(合并到tensorflow)古老，没人用。tensorflow(Google 工业),pytorch(facebook 学业)
9. Pytorch的基本数据类型：张量，标量，向量，矩阵是特殊的张量。Pytorch可以在GPU上运行，Numpy不行。
Pytorch官方文档
10. Numpy和Pytorch。一个在CPU上运行，一个在GPU上运行，所以要互相转化。
PyTorch博客资料
11. 要在Jupyter中使用Pytorch，需要创建带有Pytorch的Conda环境，然后在该core下打开Jupyter创建文件

相关文章：

机器学习基础-Pandas学习笔记

Pandas Python的数据分析库，与Numpy配合使用，可以从常见的格式如CSV、JSON等中读取数据。可以进行数据清洗、数据加工工作。数据结构Series，Pandas.Series(data,index,dtype,name,copy) data类型是Numpy的ndarray类型，index指定下…...

编程日记 2023/10/8 0:54:08

【GIT版本控制】--协作流程

一、Fork与Pull Request Git协作流程中的关键概念包括Fork和Pull Request，它们允许多人在项目中协作并贡献代码。以下是关于Fork和Pull Request的简要总结： 1. Fork： Fork是指复制一个Git仓库，通常是一个开源项目的仓库&#xf…...

编程日记 2023/10/8 0:53:07

简析Cookie、Session、Token

手打不易，如果转摘，请注明出处！ 注明原文：https://zhangxiaofan.blog.csdn.net/article/details/133498756 文章目录 简析Cookie、Session、Token什么是 Cookie ？什么是 Session ？Cookie 和 Session 到底是…...

编程日记 2023/10/8 0:52:06

加速attention计算的工业标准：flash attention 1和2算法的原理及实现

transformers目前大火，但是对于长序列来说，计算很慢，而且很耗费显存。对于transformer中的self attention计算来说，在时间复杂度上，对于每个位置，模型需要计算它与所有其他位置的相关性，这样的计…...

编程日记 2023/10/8 0:51:05

小程序获取用户手机号

在小程序中获取用户手机号需要以下步骤： 首先需要授权用户手机号，即在小程序中调用 wx.login() 方法获取用户的登录凭证，在回调函数中调用 wx.getUserInfo() 方法获取用户的个人信息，并且设置 withCredentials 参数为 true。 在获…...

编程日记 2023/10/8 0:49:02

Zama的fhEVM：基于全同态加密实现的隐私智能合约

1. 引言 Zama的fhEVM定位为： 基于全同态加密实现的隐私智能合约 解决方案 开源代码见： https://github.com/zama-ai/fhevm（TypeScript Solidity） Zama的fhEVM协议中主要包含： https://github.com/zama-ai/tfhe-…...

编程日记 2023/10/8 0:45:59

Mac M1安装ROS1或ROS2

1.首先进入Anaconda官网，安装Anaconda 2.创建、激活并配置环境 #创建环境 conda create -n ROS #激活环境 conda activate ROS #配置环境 conda config --add channels conda-forge conda config --add channels robostack conda config --set channel_priority st…...

编程日记 2023/10/8 0:44:58

[NISACTF 2022]popchains - 反序列化+伪协议

[NISACTF 2022]popchains 一、解题流程二、小小疑惑 一、解题流程 1、链条：Road_is_Long（construct->wakeup【page$r】-> toString【string$m】）-> Make_a_Change（construct->get【effort$t】）-> Try_W…...

编程日记 2023/10/8 0:43:57

分贝定义简介

一、什么是分贝 辅助单元Bel表示任何给定部件、电路或系统的输入和输出之间的对数比L，并且可以用电压、电流或功率来表示： 如果使用场量（电压或电流）代替功率量，则： 我们可以将增益或损耗因子相加为正或负dB值，而不是将其乘以比率。 分贝与功率转化的速读表如下所示：…...

编程日记 2023/10/8 0:42:56

socket简介

套接字（Socket）实质上就是对网络中不同主机上的应用进程之间进行双向通信的端点的抽象。一个套接字就是网络上进程通信的一端，为应用层进程利网络协议交换数据提供了相应机制。套接字出于承上启下的作用，向上连接应用进程&#xf…...

编程日记 2023/10/8 0:41:55

【AI视野·今日Robot 机器人论文速览 第四十九期】Fri, 6 Oct 2023

AI视野今日CS.Robotics 机器人学论文速览 Fri, 6 Oct 2023 Totally 29 papers 👉上期速览✈更多精彩请移步主页 Interesting: 📚ContactGen, 基于生成模型的抓取手势生成，类人五指手。(from 伊利诺伊大学 香槟) 数据集：GRAB da…...

编程日记 2023/10/8 0:40:55

七、互联网技术——SQL查询

文章目录 一、基础查询二、高级查询三、SQL视图一、基础查询 某学校的教学信息关系数据库中有如下两个表(表的名字和字段均用中文名字)学生表(学号，姓名，性别，专业)成绩表(学号，课程名，分数)用SQL语句表达下述查询:[问题1]检索分数高于80分的所有学生的学号和分数select 学…...

编程日记 2023/10/8 0:39:53

1.6 计算机网络的性能

思维导图： 1.6.1 计算机网络的性能指标 前言： 我的理解： 这段前言主要介绍了关于计算机网络性能的两个方面的讨论。首先，计算机网络的性能可以通过一些重要的性能指标来衡量。但除了这些指标之外，还有一些非性能特征…...

编程日记 2023/10/8 0:38:51

小程序中如何核销订单和优惠券

小程序已成为许多商家线上线下开展业务的重要渠道。客户在小程序中下单/领券后，可能需要商家现场扫码核销，例如超市购物、卖票、游乐园等线下场景。下面就介绍小程序中如何核销订单和优惠券。 一、订单核销 订单核销是指商家在小程序中确认顾客已经支付…...

编程日记 2023/10/8 0:36:48

211 毕业就入职 30 人的小公司是什么体验

为什么“选择”了 30 人的小公司？ 作为一个 211 毕业的学生，进入 30 人的小公司不管是 8 年前还是现在，应该都是比较稀少的，但是当面的我阴差阳错进了这样一个小公司。 为什么我选择进入这样一个 30 人的小公司呢？主…...

编程日记 2023/10/8 0:34:46

aardio 读取 Excel文件，显示在 listview 中

编写 main.aardio 如下 import win.ui; /*DSG{{*/ winform win.form(text"excel1";right801;bottom500) winform.add( button1{cls"button";text"读取Excel文件";left19;top14;right126;bottom44;z1}; button2{cls"button";text&quo…...

编程日记 2023/10/8 0:33:45

Web：前端常用的几种Http请求GET和POST样例

1、简述 在Web开发过程中，少不了发起Http请求服务端的接口数据，在不同的框架中使用了不同的Http请求方式，常用的请求有fetch、 ajax、 axios、XMLHttpRequest、request，以下样例仅供参考。 2、Fetch Fetch API 是一种 JavaScr…...

编程日记 2023/10/8 0:31:44

clickonce 发布的winform 如何CA认证？

要为使用ClickOnce发布的WinForms应用程序启用CA（证书颁发机构）认证，您可以按照以下步骤进行操作： 1. **获取数字证书**： - 首先，您需要获得一个数字证书，通常从受信任的CA购买。这个数字证…...

编程日记 2023/10/8 0:29:42

#力扣：13. 罗马数字转整数@FDDLC

13. 罗马数字转整数 一、Java import java.util.HashMap;class Solution {public int romanToInt(String s) {HashMap<Character, Integer> m new HashMap<>() {{put(I, 1);put(V, 5);put(X, 10);put(L, 50);put(C, 100);put(D, 500);put(M, 1000);}};char[] a …...

编程日记 2023/10/8 0:28:41

React18入门（第一篇）——JSX、TSX语法详解

文章目录 一、JSX 语法简介二、和 HTML 标签的几点不同三、JSX 属性四、JSX 事件4.1 简单点击事件4.2 类型限制4.3 带参数&#xff0c;箭头函数 五、插入 JS 变量六、JSX 中使用条件判断七、循环 一、JSX 语法简介 JSX - 是 JS 的扩展&#xff0c;写在 JS 代码里面&#xff0c…...

编程日记 2023/10/8 0:27:40

CentOS下的分布式内存计算Spark环境部署

一、Spark 核心架构与应用场景 1.1 分布式计算引擎的核心优势 Spark 是基于内存的分布式计算框架&#xff0c;相比 MapReduce 具有以下核心优势&#xff1a; 内存计算&#xff1a;数据可常驻内存&#xff0c;迭代计算性能提升 10-100 倍&#xff08;文档段落&#xff1a;3-79…...

编程新知 2025/11/21 7:50:15

DBAPI如何优雅的获取单条数据

API如何优雅的获取单条数据 案例一 对于查询类API&#xff0c;查询的是单条数据&#xff0c;比如根据主键ID查询用户信息&#xff0c;sql如下&#xff1a; select id, name, age from user where id #{id}API默认返回的数据格式是多条的&#xff0c;如下&#xff1a; {&qu…...

编程新知 2025/11/25 6:16:06

Fabric V2.5 通用溯源系统——增加图片上传与下载功能

fabric-trace项目在发布一年后，部署量已突破1000次，为支持更多场景，现新增支持图片信息上链，本文对图片上传、下载功能代码进行梳理，包含智能合约、后端、前端部分。 一、智能合约修改 为了增加图片信息上链溯源，需要对底层数据结构进行修改，在此对智能合约中的农产品数…...

编程新知 2025/9/27 12:03:43

免费PDF转图片工具

免费PDF转图片工具 一款简单易用的PDF转图片工具&#xff0c;可以将PDF文件快速转换为高质量PNG图片。无需安装复杂的软件&#xff0c;也不需要在线上传文件&#xff0c;保护您的隐私。 工具截图 主要特点 &#x1f680; 快速转换&#xff1a;本地转换&#xff0c;无需等待上…...

编程新知 2025/11/27 23:45:46

JS手写代码篇----使用Promise封装AJAX请求

15、使用Promise封装AJAX请求 promise就有reject和resolve了&#xff0c;就不必写成功和失败的回调函数了 const BASEURL ./手写ajax/test.jsonfunction promiseAjax() {return new Promise((resolve, reject) > {const xhr new XMLHttpRequest();xhr.open("get&quo…...

编程新知 2025/8/24 18:47:31

08. C#入门系列【类的基本概念】：开启编程世界的奇妙冒险

C#入门系列【类的基本概念】&#xff1a;开启编程世界的奇妙冒险 嘿&#xff0c;各位编程小白探险家&#xff01;欢迎来到 C# 的奇幻大陆&#xff01;今天咱们要深入探索这片大陆上至关重要的 “建筑”—— 类&#xff01;别害怕&#xff0c;跟着我&#xff0c;保准让你轻松搞…...

编程新知 2025/10/31 20:37:10

Linux系统部署KES

1、安装准备 1.版本说明V008R006C009B0014 V008&#xff1a;是version产品的大版本。 R006&#xff1a;是release产品特性版本。 C009&#xff1a;是通用版 B0014&#xff1a;是build开发过程中的构建版本2.硬件要求 #安全版和企业版 内存&#xff1a;1GB 以上 硬盘&#xf…...

编程新知 2025/11/3 8:50:43

AD学习（3）

1 PCB封装元素组成及简单的PCB封装创建 封装的组成部分&#xff1a; &#xff08;1&#xff09;PCB焊盘&#xff1a;表层的铜 &#xff0c;top层的铜 &#xff08;2&#xff09;管脚序号&#xff1a;用来关联原理图中的管脚的序号&#xff0c;原理图的序号需要和PCB封装一一…...

编程新知 2025/11/26 2:11:24

怎么开发一个网络协议模块（C语言框架）之(六) ——通用对象池总结(核心)

+---------------------------+ | operEntryTbl[] | ← 操作对象池 (对象数组) +---------------------------+ | 0 | 1 | 2 | ... | N-1 | +---------------------------+↓ 初始化时全部加入 +------------------------+ +-------------------------+ | …...

编程新知 2025/8/28 4:17:05

CppCon 2015 学习:REFLECTION TECHNIQUES IN C++

关于 Reflection&#xff08;反射&#xff09; 这个概念&#xff0c;总结一下&#xff1a; Reflection&#xff08;反射&#xff09;是什么&#xff1f; 反射是对类型的自我检查能力&#xff08;Introspection&#xff09; 可以查看类的成员变量、成员函数等信息。反射允许枚…...

编程新知 2025/11/21 19:34:17