EchoYu's blog
  • 首页
  • 归档
  • 分类
  • 标签
  • books
  • 关于
  •   
  •   

PyTorch框架-TensorDataset

在学习深度学习前有必要先学习下当下深度学习的主流框架PyTorch、tensorflow、MXnet,但本篇文章主要介绍PyTorch的TensorDataset和DataLoader。我目前接触的框架也只有PyTorch,其他框架自己按需学习吧 :) 先看下面的代码,就能大致知道TensorDataset和DataLoader是干什么的了 TensorDataset123456789101112
2022-07-27
Deep Learning
#PyTorch

deep_learning_1.线性回归的从零实现

线性回归回归(regression)是能为一个或多个自变量与因变量之间关系建模的一类方法。 在自然科学和社会科学领域,回归经常用来表示输入和输出之间的关系。 在机器学习领域中的大多数任务通常都与预测(prediction)有关。 当我们想预测一个数值时,就会涉及到回归问题。 常见的例子包括:预测价格(房屋、股票等)、预测住院时间(针对住院病人等)、 预测需求(零售销量等)。 但不是所有的预测都是回
2022-07-25
Deep Learning
#Deep Learning

Apache Doris在橙联的应用实践

1. 背景1.1 公司介绍橙联(Orange Connex)是一家服务全球跨境电商的科技公司,致力于通过市场分析、系统研发及资源整合,为客户提供物流、金融、大数据等多方面的服务产品,为全球跨境电商提供高品质、全方位的服务解决方案。橙联股份由中信产业基金和 eBAY 联合成立,拥有非常丰富的物流服务经验和客户市场资源,旨在为卖家客户提供快捷 、稳定 、成本领先 、可视及可持续的物流服务,让买家客户享
2022-07-24
#Doris

python导入模块和包

python导入模块模块就是 Python 程序。换句话说,任何 Python 程序都可以作为模块 python导入模块的2种方式 import 导入模块的语法: 1.import 模块名1 [as 别名1], 模块名2 [as 别名2],… 使用这种语法格式的 import 语句,会导入指定模块中的所有成员(包括变量、函数、类等)。 不仅如此,当需要使用模块中的成员时,需用该模块名(或别名)作为
2022-07-23
Python
#Python

python包源码安装

比如我们在要用numpy这个库的时候,我们通常的下载方法是pip install numpy 但本文提供另外一种下载python包的方法,下载源码安装。 一般使用的场景是pip在线下载很慢,或者在GitHub上看到好玩的程序,拿到源码来安装。 python包源码安装方法一:pip install .下载到源码包后,进入包内,例如我们下载了requests的源码包,cd包内,然后进行pip inst
2022-07-23
Python
#Python

anaconda创建多个python环境

本文旨在讲怎么用anaconda创建多个python环境,主要是因为在github上看到好玩的项目非得要用python3.10版本,我之前装的python版本比这个低,不然才不会折腾环境的安装呢 :( conda查看目前已有的环境关于anaconda的安装可以自己去百度安装下,这里就不赘述安装的过程了。 当安装完成并设置环境变量之后,就可以在命令行终端查看conda的环境了。 运行命令conda
2022-07-23
Python
#Python

python实现配置文件传参的多线程爬虫

迷你定向网页抓取器明确要求这个迷你定向网页抓取器是基于如下需求来实现的网络爬虫的功能,实现对种子链接的广度优先抓取,并把URL格式符合特定pattern的网页保存到磁盘上。 要求: 需要支持命令行参数处理。具体包含: -h(帮助)、-v(版本)、-c(配置文件) 需要按照广度优先的顺序抓取网页 单个网页抓取或解析失败,不能导致整个程序退出。需要在日志中记录下错误原因并继续 当程序完成所有抓
2022-07-15
Python
#Python

微博超话自动签到程序-SpringBoot注解

微博超话自动签到程序与世界交手的这二十几年来,我没追过星,专业领域里的偶像倒是有几个,但都不是歌手或演员,这次看浪姐3是粉上于文文了,直给的酷酷的性格,再深扒她在音乐领域也很能打,烟嗓配摇滚开嗓即巅峰哈哈哈哈。后面基本天天泡在三文鱼超话里面,有一天是看到一个文文粉丝挂了一个微博自动签到的程序。 这不巧了吗,同行啊,正好看看学习下这个签到程序,里面用到的是java的SpringBoot框架,web程
2022-07-14
Java
#Java

Doris写入数据报错err=-235

问题描述: Flinkcdc抽取数据写入到doris报错,err: tablet writer write failed, tablet_id=8165971, txn_id=122211550, err=-235, see more in null 具体截图如下: 问题查询和解决通过网上查询一圈,发现该问题还挺普遍的,而且还已经记录在了doris官网 [htt
2022-07-11
Doris
#Doris

flinkCDC抽取mysql数据问题记录

情景描述利用flinkcdc抽取mysql数据到kafka,再从kafka消费数据到Doris。 上游mysql的delete操作,在下游Doris做成逻辑删除,即表增加一列is_delete_flg做为是否删除的标志。Doris表设置为unique模型,保证端对端的幂等性,保证数据不会重复。其中Doris的unique模型表需要设置sequence列。 flinkcdc官网介绍的op_ts操作时
2022-06-19
Flink
#Flink
1…678910…14

搜索

Hexo Fluid
总访问量 次 总访客数 人