LiuCe's Blog

LiuCe's Blog

    • Home
    • Archives
    • About

安装linux系统

很久没装过系统了,最近组装台式机安装linux mint系统碰到一点问题: 用u盘做引导安装过程中所有配置选项做好后点击“继续”出现“无法将grub-efi-amd64-signed软件包安装到/target/中。如果没有GRUB启动引导器,所安装的系统将无法启动”出现这个问题

2017-09-17

hadoop demo程序

Map/Reduce介绍hadoop主要利用Map/Reduce框架进行快速数据处理,就是将上传到hadoop集群的文件进行分片保存在HDFS上(64M),之后利用Map框架进行预处理后交由Reduce框架处理输出结果,如下图(简易图): 工程构建利用idea建立maven工程

2017-09-04

hadoop单机搭建

Hadoop 安装系统macos 10.12.4,linux系统大体与此相似 1brew insall hadoop 该命令安装是是最新版(2.8.0) 配置JAVA_HOME(之前已经配置过,java版本1.8) 配置ssh免密码登录1、生成公钥,加入authorized_ke

2017-09-04

存储知识记录

平时工作是做云计算相关的,最近在学习hadoop的知识看到hadoop的文件存储方式结合用过的ceph,elasticsearch做下存储相关知识的记录。 块存储、文件存储、对象存储介绍:块存储:是以扇区为基础的,一个或连续的扇区组成一个块,概念来自于物理存储。 文件储存:是多个

2017-09-03

感知机算法

上节说了下Sigmoid函数做分类器,来做感知机学习(<<李航.统计学习方法>>) 什么是感知机感知机是二分类的线形分类模型,其输入为实例的特征向量,输出为实例的类别,取+1和-1二值。 定义:假设输入空间(特征空间)是$x \subseteq R^n $

2017-09-02

Logistic回归和Sigmoid函数的理解

看《机器学习实战》一书的Logistic回归记录下自己的理解,书上的例子用的是二维向量;该方法预测用的是Sigmoid函数(信号与系统的阶跃函数)。$$\sigma(z) = \cfrac{1}{1 +e^{-z}}$$ Sigmoid函数的输入记为z,下面公式用于确定z:$$

2017-09-01

opentack节点扩容后热迁移异常

扩容完成后旧计算节点上的虚机无法正常热迁移到新计算节点上 故障原因为:新旧节点的qemu版本存在差异。 1rpm -qa | grep kvm qemu-kvm-2.5.1-1.1.el7.x86_64 libvirt-daemon-kvm-1.3.1-1.el7.centos.

2017-09-01

python 发送邮件出现Connection reset by peer解决

​ 利用python自带的stmp模块发送邮件成功,但是在添加附件后发送失败。运行代码后提示出现connection reset by peer错误,查看后台服务器发现邮件服务器直接关闭了链接。 ​ 网上查找发现对于此问题的解释多是因为socket,web

2017-08-31

Hello World

用hexo和github搭建了一个静态博客,程序员惯用helloworld例程那就拿之前在知乎写简单写的一个回答放在这里吧,当作熟悉hexo博客和markdown语法了;后续会将开源中国上的和笔记软件记录的内容放上来。 韩国灾难电影推荐最近在腾讯视频上看了部韩国电影《铁线虫入侵》

2017-08-30

ELK排障记录

背景介绍:之前公司安全团队用ELK来收集ngnix,tomcat,防火墙等的接入日志来做一些安全风控的告警操作,接手后有次报告说有个IP的机器一直没有产生日志出来,因此做了简单的排查顺便在熟悉下架构。 公司用的审计接入日志的ELK架构图如下: 架构基本属于主流的应用不过logs

2017-04-08
Prev123Next

Github 名片

分类

  • 杂记1

标签

  • bigdata5
  • cloud4
  • 机器学习3
  • 日志2
  • python2
  • linux2
  • 影视1
  • java1
  • web, python1

友情链接

  • 码农圈
  • Jark's Blog
RSS 订阅

新浪微博

Hello ,I'm Larry Page in Google.
This is my blog,believe it or not.

Powered by hexo and Theme by Jacman © 2020 LiuCe