自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

sowhat

公众号:sowhat1412

  • 博客(13)
  • 资源 (84)
  • 论坛 (1)
  • 收藏
  • 关注

原创 SpringBoot 10、拦截器 跟 WebServer的个性化配置之整合( Servlet、Filter、Listener)

拦截器 跟 WebServer的个性化配置之整合( Servlet、Filter、Listener)

2019-12-27 15:10:22 657 2

原创 有意思的程序员资源与工具

1、表情包资源表情包用得好,女朋友不用找,以下资源汇集了我们常用的 1000 多个表情包。Github: https://github.com/getActivity/EmojiPackage/2、代码图片生成器Carbon 可以把你的代码转成一张精美海报的工具,我常用。Carbon 官网地址:https://carbon.now.sh/3、文档整合工具官网地址:http://dev...

2019-12-26 11:30:02 17511 4

转载 python 最新方案-解决编码错误问题:UnicodeEncodeError: 'ascii' codec can't encode characters in position

文章目录问题描述:问题原因查找:1-定位str.decode(‘utf-8’)2-定位字符编码问题3-定位print问题-就是这个问题!解决问题方法参考问题描述:相同代码在一台服务器上跑是OK的另外一个台跑则报错如下 File "/data/soft/knowledge_etl/databus-gedai-v1/schedule_job/main.py", line 270, in &lt...

2019-12-23 14:42:35 1098 1

原创 RabbitMQ Python端发送消息给Java端 接受消息全数字问题

文章目录RabbitMQ接受一堆数字Bug参考RabbitMQ接受一堆数字BugPython发送端用 pika 发送消息发送代码是这样的:#!/usr/bin/python# -*- coding:utf-8 -*-import pikaimport jsoncredentials = pika.PlainCredentials('ding', 'ding')connectio...

2019-12-18 17:11:24 1269 6

原创 【Hadoop】第六天 Hive

HiveHive 是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL ),这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。Hive 定义了简单的类 SQL 查询语言,称为 QL ,它允许熟悉 SQL 的用户查询数据。同时,这个语言也允许熟悉 MapReduce 开发者的开发自定义的 mapper 和 re...

2019-12-14 16:42:34 2083 10

原创 【Hadoop 】第五天 Hadoop-HA 搭建

问题Hadoop 1.0存在的问题:单点故障和内存受限NameNode单点故障:NameNode只有一个,一旦宕机了,则数据就会丢失,虽然有配置SecondaryNameNode,但是SecondardyNameNode合并元数据和日志文件需要时间的,所有还是会有部分数据会丢失(edits)NameNode压力大:单节点只有一个NameNode,所有的请求都访问一个NameNodeHa...

2019-12-13 18:24:32 472 16

原创 Redis面试常问点

文章目录zookeeper文件系统监听通知机制Zookeeper能做什么自己的一些理解:ZooKeeper安装下载安装包然后解压默认文件重命名修改zoo.cfg配置文件新建myid文件ZooKeeper端口解释启动zookeeper服务启动zookeeper客户端检验服务是否可用参考zookeeper官网:http://zookeeper.apache.org/ZooKeeper: 是一个开...

2019-12-13 10:42:48 371 1

原创 python md5 salt 摘要算法

摘要算法Python的hashlib提供了常见的摘要算法,如MD5,SHA1等等。别的语言也都是通用的加密算法。摘要算法:通过摘要函数f()对任意长度的数据data计算出固定长度的摘要digest,目的是为了发现原始数据是否被人篡改过。MD5什么是摘要算法呢?摘要算法又称哈希算法、散列算法。它通过一个函数,把任意长度的数据转换为一个长度固定的数据串(通常用16进制的字符串表示)。举个例子...

2019-12-12 17:26:05 352 1

原创 【Hadoop】第四天 Shuffle MapReduce组件全貌

shuffle过程shuffle概念shuffle的本意是洗牌、混洗的意思,把一组有规则的数据尽量打乱成无规则的数据。而在MapReduce中,shuffle更像是洗牌的逆过程,指的是将map端的无规则输出按指定的规则“打乱”成具有一定规则的数据,以便reduce端接收处理。其在MapReduce中所处的工作阶段是map输出后到reduce接收前,具体可以分为map端和reduce端前后两个部...

2019-12-11 17:37:50 1516 3

原创 【Hadoop】第三天 mapreduce的原理和编程

文章目录MapReduce概述MapReduce 原理MapperReducerWorkerMR 任务的本地运行模式YARNyarn的重要概念Yarn进程Job 提交流程图1.执行MR的命令2. MR执行流程Job 任务提交源码分析MR程序的几种提交运行模式本地模型运行集群模式运行MapReduce概述最简单的单机问题一旦涉及到大体量级迁移到分布式系统中的时候都会涉及到方方面面的各种编程,需要...

2019-12-10 13:43:28 1564 7

原创 【Hadoop 】第二天 hdfs的原理和使用操作、编程

文章目录hadoop-shellNameNodeNameNode 工作特征SecondaryNameNode元数据数据的存入跟读出时候大概步骤NameNode 之 元数据操作细节什么时候checkpiont(hdfs-site.xml)元数据合并(checkpoint)细节DataNodeHDFS Java编程自我理解总结FileSystem涉及思想PRC(Romote Procedure Cal...

2019-12-08 11:18:07 1537 4

原创 【Hadoop】第一天 Hadoop基本概念跟原理以及安装

文章目录Hadoop集群按照,HDFS跟MapReduce自带demo演示Hadoop的由来Hadoop 干什么Hadoop在淘宝中的应用框架Hadoop 生态系统Hadoop 版本Hadoop 核心组件海量数据的存储用HDFS海量数据任务的分析MapReduce海量任务的调度 YARNHadoop 特点Hadoop 1.0跟2.0差别Hadoop 部署方式Hadoop 伪分布式搭建Hadoop...

2019-12-07 10:02:18 1711 6

转载 ROW_NUMBER() OVER() 函数用法详解 分组排序

语法格式:row_number() over(partition by 分组列 order by 排序列 desc)row_number() over()分组排序功能:在使用 row_number() over()函数时候,over()里头的分组以及排序的执行晚于 where 、group by、 order by 的执行。例一:表数据:...

2019-12-04 09:48:41 14214 4

丁奇Mysql45.zip

丁奇Mysql45.zip

2020-08-31

RabbitMQ课件_V1.0.docx

RbbitMQ 开源讲解案例

2021-01-22

spark全套学习资料.zip

Spark学习全套技术

2020-06-30

狂神docker笔记.zip

狂神Docker笔记,相对来说比较全面 狂神Docker笔记,相对来说比较全面 狂神Docker笔记,相对来说比较全面

2020-09-17

刷网页访问量.zip

IP代理实现 网页访问量的增加

2019-11-25

Anaconda3-4.3.1-Linux-x86_64.sh

Anaconda3-4.3.1-Linux-x86_64.sh

2020-06-08

zookeeper.zip

zookeeper学习资料汇总,zookeeper学习资料汇总,zookeeper学习资料汇总,zookeeper学习资料汇总,zookeeper学习资料汇总

2020-09-28

Spring Boot整合Shiro.zip

Spring Boot整合Shiro.zip

2020-08-30

my-site.zip

springboot+mybatis+thymeleaf+docker构建的个人站点开源项目(集成了个人主页、个人作品、个人博客)

2020-08-27

selfstarter.zip

自定义Starter

2020-08-19

ssmdemo.zip

SSM整合,

2020-08-15

mysql5.7 安装教程

mysql5.7 安装教程

2020-08-11

mybatislearn.zip

Spring教程 及整合Mybatis

2020-08-06

mybatislearn.zip

MyBatis急速入门

2020-08-03

rabbitMQ 代码.zip

RabbitMQ开发代码demo,

2020-07-20

Hue安装配置教程.zip

hue教程

2020-07-20

RabbitMQ极速入门.zip

RabbitMQ极速入门

2020-07-19

rabbitmq.zip

MQ安装跟SpringBoot整合,MQ安装跟SpringBoot整合,MQ安装跟SpringBoot整合

2020-07-19

redisgeo.zip

SpringBoot+Geo实战

2020-07-17

Flink学习资料.zip

Flink学习全套代码

2020-07-16

Kafka全套学习笔记.zip

Kafka全套学习笔记

2020-06-28

HBase学习.doc

HBase学习日记,

2020-06-22

2.7 winutils 跟 NativeIO源码.zip

Hadoop2.7*本地运行所需要的各种资源

2020-06-20

HBase配置文件若干配置.zip

HBase配置文件若干配置.zip

2020-06-19

HBaseApi.java

HBase-APi操作demo

2020-06-19

hbase-default.xml

HBase配置讲解

2020-06-18

IDEA使用教程 - v1.0.pdf

IDEA 教程IDEA

2020-06-07

idea教程.zip

idea教程.zip

2020-06-06

IDEA教程.doc

IDEA 教程

2020-06-06

大数据技术之Hive.zip

Hive 讲义

2020-06-06

scala配套代码.zip

Scala入门

2020-05-25

Nginx学习笔记.zip

Nginx教程

2020-05-12

Java面试题.zip

Java面试题.zip

2020-05-09

2500页​大厂面试题.rar

2500页大厂面试题

2020-05-08

Servlet和JSP(JAVAEE基础).zip

Java Servlet讲解

2020-04-22

Spring笔记.md

Spring快速入门

2020-04-17

大数据技术之Hadoop.xmind

Hadoop思维导图

2020-04-14

大数据技术之Hadoop.pptx

Hadoop文档

2020-04-14

大数据技术之Hadoop(MapReduce).docx

MapReduce学习,

2020-04-14

大数据技术之Hadoop(HDFS).docx

HDFS学习笔记,

2020-04-14

电脑版跟ios手机版 内容不同步什么情况

发表于 2017-03-24 最后回复 2019-08-15

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除