EchoYu's blog
  • 首页
  • 归档
  • 分类
  • 标签
  • books
  • 关于
  •   
  •   

python导入模块和包

python导入模块模块就是 Python 程序。换句话说,任何 Python 程序都可以作为模块 python导入模块的2种方式 import 导入模块的语法: 1.import 模块名1 [as 别名1], 模块名2 [as 别名2],… 使用这种语法格式的 import 语句,会导入指定模块中的所有成员(包括变量、函数、类等)。 不仅如此,当需要使用模块中的成员时,需用该模块名(或别名)作为
2022-07-23
Python
#Python

python包源码安装

比如我们在要用numpy这个库的时候,我们通常的下载方法是pip install numpy 但本文提供另外一种下载python包的方法,下载源码安装。 一般使用的场景是pip在线下载很慢,或者在GitHub上看到好玩的程序,拿到源码来安装。 python包源码安装方法一:pip install .下载到源码包后,进入包内,例如我们下载了requests的源码包,cd包内,然后进行pip inst
2022-07-23
Python
#Python

anaconda创建多个python环境

本文旨在讲怎么用anaconda创建多个python环境,主要是因为在github上看到好玩的项目非得要用python3.10版本,我之前装的python版本比这个低,不然才不会折腾环境的安装呢 :( conda查看目前已有的环境关于anaconda的安装可以自己去百度安装下,这里就不赘述安装的过程了。 当安装完成并设置环境变量之后,就可以在命令行终端查看conda的环境了。 运行命令conda
2022-07-23
Python
#Python

python实现配置文件传参的多线程爬虫

迷你定向网页抓取器明确要求这个迷你定向网页抓取器是基于如下需求来实现的网络爬虫的功能,实现对种子链接的广度优先抓取,并把URL格式符合特定pattern的网页保存到磁盘上。 要求: 需要支持命令行参数处理。具体包含: -h(帮助)、-v(版本)、-c(配置文件) 需要按照广度优先的顺序抓取网页 单个网页抓取或解析失败,不能导致整个程序退出。需要在日志中记录下错误原因并继续 当程序完成所有抓
2022-07-15
Python
#Python

微博超话自动签到程序-SpringBoot注解

微博超话自动签到程序与世界交手的这二十几年来,我没追过星,专业领域里的偶像倒是有几个,但都不是歌手或演员,这次看浪姐3是粉上于文文了,直给的酷酷的性格,再深扒她在音乐领域也很能打,烟嗓配摇滚开嗓即巅峰哈哈哈哈。后面基本天天泡在三文鱼超话里面,有一天是看到一个文文粉丝挂了一个微博自动签到的程序。 这不巧了吗,同行啊,正好看看学习下这个签到程序,里面用到的是java的SpringBoot框架,web程
2022-07-14
Java
#Java

Doris写入数据报错err=-235

问题描述: Flinkcdc抽取数据写入到doris报错,err: tablet writer write failed, tablet_id=8165971, txn_id=122211550, err=-235, see more in null 具体截图如下: 问题查询和解决通过网上查询一圈,发现该问题还挺普遍的,而且还已经记录在了doris官网 [htt
2022-07-11
Doris
#Doris

flinkCDC抽取mysql数据问题记录

情景描述利用flinkcdc抽取mysql数据到kafka,再从kafka消费数据到Doris。 上游mysql的delete操作,在下游Doris做成逻辑删除,即表增加一列is_delete_flg做为是否删除的标志。Doris表设置为unique模型,保证端对端的幂等性,保证数据不会重复。其中Doris的unique模型表需要设置sequence列。 flinkcdc官网介绍的op_ts操作时
2022-06-19
Flink
#Flink

计算机统考专业课(408)笔记

每门学科其实都有自己的底层逻辑,如果说高屋建瓴,搭好一个好房子最重要的是地基,那么计算机学科的地基就是408,即计算机组成原理(CO)、数据结构(DS)、操作系统(OS)、计算机网络(CN)。这也是计算机很多优秀学校的考研专业课,算得上是工科考研难度天花板。 下面👇分别整理了四门课程的思维导图,在这里做个整理😄 计算机网络 计算机组成原理​ 操作系统 数据结构数据结构部分为手写,可以从线性到
2022-06-11
#计算机基础专业课

Doris大表关联优化

记一次Doris大表关联优化场景: 有两张大表,数据量分别为5kw+和接近7kw,表空间占用约等于6.26GB和7.77GB ![](https://raw.githubusercontent.com/YUTING0907/PicGo/main/img截屏2022-06-08 下午9.58.01.png) 历史数据上游提供的全部为同一天的数据,所以没办法进行分区,只能进行分桶,按照大概每个桶10w
2022-06-08
Doris
#Doris

工作中常用的Java集合类有哪些?

工作中常用到的Java集合有哪些,应用场景是什么? 下图是java集合的全家福,可以看到分为两大类,第一类是collection,第二类是map。下面分别介绍:其中List,Set,Queue都是Collection(集合),其每个元素都是单独的一个对象,如List,Set等,String和Integer就是单独的一个对象 JAVA SE 8官方文档 List集合List集合下最常见的集合
2022-06-05
Java
#JAVA
1…678910…14

搜索

Hexo Fluid
总访问量 次 总访客数 人