喵星人_Cat

未归档

Hadoop Yarn(1) Python爬虫(1) 博客(1) 操作系统(4) 数据库(5) 机器学习(24) 海量数据处理(2) 编程语言(16) 网络(4) 网络安全(1)

/ 注册

全部文章 / 未归档（共98篇）

更改引用高版本glibc的程序到引用低版本的glibc

1：问题背景描述在拥有高版本glibc的机器上编译分布式xgboost程序，结果在拥有低版本glibc版本的集群机器上无法运行，总是报错，显示缺少glibc_2.14，为了解决整个问题，google查阅了很多资料，大体给出了两种方案：方案一：升级集群所有机器的glibc版本以满足程序运行要求...

2018-10-17

0 1574

机器学习中常用的损失函数你知多少？

转自机器之心公众号！本文作者将常用的损失函数分为了两大类：分类和回归。然后又分别对这两类进行了细分和讲解，其中回归中包含了一种不太常见的损失函数：平均偏差误差，可以用来确定模型中存在正偏差还是负偏差。机器通过损失函数进行学习。这是一种评估特定算法对给定数据建模程度的方法。如果预测值与实...

2018-09-12

0 780

在eclipse中使用git

这是在eclipse中对git的一般用法下载与安***r> Eclipse Java EE IDE中已经包含了git，所以，就不用再额外安装了。将eclipse中的工程用git来控制 1：选中工程的名字，右键选中“Team” --> Share Project...

2018-08-03

0 467

Shell脚本中调用其他Shell脚本

在Linux平台上开发，经常会在console(控制台)上执行另外一个脚本文件，经常用的方法有：./my.sh 或 source my.sh 或 . my.sh；这三种方法有什么不同呢？我们先来了解一下在一个shell脚本中如何调用另外一个shell脚本，其方法有 fork exec s...

2018-07-26

0 1326

Apache Hadoop YARN

Apache Hadoop YARN - 概念和应用程序本系列的其他文章：Apache Hadoop简介YARN Apache Hadoop YARN - 背景和概述Apache Hadoop YARN - 概念和应用程序Apache Hadoop YARN - ResourceManager ...

2018-07-20

0 562

Hadoop Yarn详解

一、Yarn简介 Yarn是Hadoop集群的资源管理系统。Hadoop2.0对MapReduce框架做了彻底的设计重构，我们称Hadoop2.0中的MapReduce为MRv2或者Yarn。在介绍Yarn之前，我们先回头看一下Hadoop1.x对MapReduce job的调度管理方式（可参考：...

2018-07-20

1 1383

Scala中object、class与trait的区别

今天在学习Scala时，突然想用Idea来创建一个学习类（cmd撸代码太痛苦），直接创建了一个class： class Test { def main(args: Array[Strin...

2018-07-02

0 911

二叉树的后序非递归遍历（巧妙思想）

大家都知道二叉树的前序非递归遍历非常好写： //二叉树的结构 public class TreeNode { TreeNode left; TreeNode right; int val; TreeNode(int val) { this.val =...

2018-05-06

0 462

Windows10中使用Anaconda安装keras-gpu版本【入坑经验总结】

【注】本教程是在已经安装tensorflow-gpu1.7.0基础上，安装keras-gpu版本的一些经验！第一次安装keras的时候，也不清楚什么cpu版本的还有gpu版本的，就百度按照别人的方法直接使用命令conda install keras进行安装，结果。。。它弹出来了提示说还需要附带安装...

2018-04-26

0 741

windows10 64位 Tensorflow安装--CUDA 9.1+cuDNN7.1+python3.6.4+tensorflow-GPU1.7.0安装详解

一、前言 vs2017安装请见博主文章：vs2017安装和使用教程（详细） Anaconda安装可见博主文章：Anaconda安装二、改动 1.我在Anaconda文章里写的Tensorflow是针对于CUDA8.0来说的，因此安装的是py3.5 2.CUDA9.0是官方Tensorflow的最...

2018-04-25

0 707