sparklyr包--实现R与Spark接口

2017年02月05日 14 阅读

1.sparklyr包简介 Rstudio公司发布的sparklyr包具有以下几个功能：实现R与Spark的连接；sparklyr包提供了一个完整的dplyr后端，可筛选并聚合Spark数据集，接着在R中实现分析与可视化；利用Spark的MLlib机器学习库在R中实现分布式机器学习算法；可以创建一个扩展，用于调用Spark API，并为Spark的所有包集提供了一个接口。2.RStudio Server安装sparklyr包 Linux版本：Ubunt...

图解RAID 0, RAID 1, RAID 5, RAID 10

2017年02月05日 15 阅读

RAID（Redundant Array of Independent Disk 独立冗余磁盘阵列）技术是加州大学伯克利分校1987年提出，最初是为了组合小的廉价磁盘来代替大的昂贵磁盘，同时希望磁盘失效时不会使对数据的访问受损 失而开发出一定水平的数据保护技术。RAID就是一种由多块廉价磁盘构成的冗余阵列，在操作系统下是作为一个独立的大型存储设备出现。RAID可以充分发 挥出多块硬盘的优势，可以提升硬盘速度，增大容量，提供容错功能够确保数据安全性，易于管理...

Spring MVC版本和JDK版本不匹配造成的问题

2017年02月05日 14 阅读

一个简单的例子项目，使用springMVC的版本是3.2，jdk的版本是1.7，使用的是注解的处理器适配器和处理器映射器。spring的xml配置文件中单独配置每个handler，可以正常的使用，如果使用context:component-scan（组件扫描）的方式自动注册handler，在浏览器中输入访问url的时候，服务器报一下错误。经过搜索查看是因为jdk的版本过高导致的，因此升级springMVC到4.2版本，可以正常使用。java.lang.Il...

Kali Linux 忘记登录密码后的重置方法

2017年02月05日 14 阅读

Kali Linux 忘记登录密码后重置的方法首先启动你的Kali Linux系统，等出现引导界面时选择恢复模式。如下图：再出来一个界面时，选择第二个并按E键进入编辑模式。如下图：进入编辑模式后找到如下图的代码：把ro改为rw，并且在.gz 后面写上init=/bin/bash，如下图：改完后按F10或Ctrl+X继续启动。启动后的界面如下图：这时输入命令passwd就可以修改密码了。修改完后重启系统就可以用新密码登录Kali Linux了。本文永久更新链...

U盘安装CentOS7全程笔记

2017年02月05日 14 阅读

终于将CentOS7装上笔记本了，过程无比艰辛，因为我发现网上大家提到的所有U盘安装CentOS7时碰到的问题几乎都被我碰到了，像什么：1.刻录镜像的时候只能刻录一个6MBEFI文件夹到U盘，U盘变成只有6MB容量;2.开机卡在Press thekey to begin the installation process界面;3.不能识别NTFS分区;4.不能挂载U盘/光驱;5.安装进行到图形化配置界面时提示错误退出;等等问题，虽然最终都在网上找到解决办法了...

Ubuntu下安装PyQt 5

2017年02月05日 14 阅读

在网上看了很多Ubuntu系统中安装PyQt5，感觉有些麻烦。主要的库只有一个：python3-pyqt5可通过新立得安装，也可通过shell命令安装sudo apt-get install python3-pyqt5安装完就可以用了。设计窗体，就再下个qt4-desinger.一个最简单的小例子：显示一个窗体#！/bin/env python3# -*- coding: utf-8 -*-import sysfrom PyQt5.QtWidgets im...

pyqt5和qt-designer结合

2017年02月05日 15 阅读

我们在Ubuntu中安装了python3-pyqt5这个包后就可以用pyqt5编程了，但是只能用纯代码写窗体，很麻烦。我们要用qt-designer来设计窗体。Ubuntu下安装PyQt 5 http://www.linuxidc.com/Linux/2016-07/133666.htm我们通过新立得安装qt4-designer这个包即可，通过shell命令apt-get install也可。界面如下：通过这个软件设计窗体完成后，会保存为ui文件。我们要把...

Linux IO实时监控iostat命令详解

2017年02月05日 16 阅读

简介iostat主要用于监控系统设备的IO负载情况，iostat首次运行时显示自系统启动开始的各项统计信息，之后运行iostat将显示自上次运行该命令以后的统计信息。用户可以通过指定统计的次数和时间来获得所需的统计信息。语法iostat[-c][-d][-h][-N][-k|-m][-t][-V][-x][-z][device[...]|ALL][-p[device[,...]|ALL]][interval[count]]入门使用iostat-d-k2参数...

Shell终端字符颜色设置

2017年02月05日 15 阅读

我们在编写程序的时候，通常需要终端对输出显示红色或者绿色等各种颜色，以便更加清楚的对用户做出提示。下面是Shell系统终端颜色的设置方式：终端的字符颜色是用转义序列控制的，是文本模式下的系统显示功能，和具体的语言无关，shell，python，perl, C,C++等均可以调用。转义序列是以 ESC 开头,可以用 33 完成相同的工作（ESC 的 ASCII 码用十进制表示就是 27， 等价于用八进制表示的 33）。显示格式： 33[显示方式;前景色;背景...

Linux文件与文件系统的压缩与打包

2017年02月05日 14 阅读

进来在学习Linux了，不过Linux的命令太多了，怕记不住所以使用博客记录的方式来写下自己的学习过程，以后忘记了还可以翻阅自己写下的博客来查查：Linux系统常见的压缩命令Compressgzip,gcatbzip2,bzcat打包命令:tarLinux系统常见的压缩命令Linux的环境下，压缩文件大多扩展名是*.tar, *.tar,*.gz, *.tgz, *.gz, *.Z, *.bz2,下面我们列出常见的压缩文件扩展名： *.Z—&m...

Windows10与CentOS 双系统共存完美教程

2017年02月05日 15 阅读

因为最近在学习Linux，觉得Linux非常好用，但是因为之前系统安装了Windows10，所以不得不重新划分磁盘让Linux与Windows系统能与之共存：Windows10安装Windows10磁盘划分U盘安装CentOS7系统设置U盘启动初遇CentOSCentOS安装引导修复总结Windows10安装由于Windows10的安装比较简单，所以小编在此就不长篇大论了，以免耽误大家的时间，具体安装过程可以参考提供的连接，以获得相关帮助。Windows1...

在UEFI+GPT下使用rEFind实现Win10 + Kali2.0 双引导

2017年02月05日 14 阅读

一、Win10和Kali2.0的安装：1.Win10安装以及激活： 关于Win10的安装我就不再这里赘述，激活工具呢，kms之类的也有很多。2.Kali2.0安装： a.这个是kali2.0官网的下载地址：https://www.kali.org/downloads/，我下载的是64位的完整版。 b.然后我使用了UltraISO的写入硬盘映像功能，将kali2.0的ISO写入到U盘中 c.插上做好的启动U盘，调整启动首选项为USB，不同的电脑，会有...

Windows10+CentOS7双系统（UEFI+GPT）

2017年02月05日 15 阅读

前言很想安装Windows10+CentOS7双系统，然而之前安装失败格盘的惨痛教训历历在目。这几天闲着没事查阅了好多资料，怂了一个星期，终于决定再来一次尝试。总的来说安装过程还是挺顺利的，但是后期Windows引导的问题折腾了三天。技术不好，最终搞出个另类的双系统：默认启动Windows10，同时支持Windows Quick Boot；BIOS下切换到CentOS。设备信息PC： Thinkpad E431，Microsoft Windows10 Pr...

UEFI的两种启动模式

2017年02月05日 16 阅读

UEFI启动模式和传统的Lagency启动模式完全不同，因此很有必要先了解一下UEFI BIOS和UEFI启动模式1 必须搞清的几个UEFI问题（1） UEFI启动模式 与 legacy启动模式legacy启动模式: 就是这么多年来PC一直在使用的启动方式（从MBR中加载启动程序），UEFI BIOS作为一种新的BIOS自然也应该兼容这种老的启动方式；UEFI启动模式: UEFI BIOS下新的启动技术。如果你的PC在UEFI启动模式下预装了Win8，你会...

Linux 虚拟机通过NAT模式访问外网

2017年02月05日 14 阅读

Linux 虚拟机通过NAT模式访问外网1、配置本地VM8地址2、配置虚拟机NAT网卡：设置VM8网卡地址和Linux主机相同网段地址，网关随便设置3、编译网卡文件vim /etc/sysconfig/network-scripts/ifcfg-eth0主要配置如下：12345IPADDR=192.168.200.5 //IP地址和VMnet8的IP地址在同一个网段NETMASK=255.255.255.0 //子网掩码GATEWAY=192.168.20...

Ubuntu 16.04上安装SkyEye及测试

2017年02月05日 14 阅读

说明一下，在Ubuntu 16.04上安装SkyEye方法参考自互联网，仅供学习。一、检查支持软件包gcc,make,vim（optional）,ssh,subversionbinutils-dev （bfd）atk-dev （libatk1.0-dev）gtk+-2.0-dev （libgtk2.0-dev）pkg-configpango-dev （libpango1.0-dev）freetype2-dev （libfreetype6-dev）glib-...

Ubuntu 16.04上安装arm-linux-gcc-4.4.3

2017年02月05日 16 阅读

Ubuntu 16.04上安装arm-linux-gcc-4.4.3一、首先下载arm-linux-gcc-4.4.3.tar.gz安装包，安装包地址：http://www.linuxidc.com/Linux/2011-05/35906.htm二、解压安装包：sudo tar -zxvf arm-linux-gcc-4.4.3.tar.gz -C /注意C后面有一个空格，这样解压完成后的文件在：/opt/FriendlyARM/toolschain/4....

CentOS设置系统时间与网络时间同步

2017年02月05日 15 阅读

Linux的时间分为System Clock（系统时间）和Real Time Clock （硬件时间，简称RTC）。系统时间：指当前Linux Kernel中的时间。硬件时间：主板上有电池供电的时间。查看系统时间的命令： #date设置系统时间的命令： #date –set（月/日/年 时：分：秒）例：#date –set “10/11/10 10:15”查看硬件时间的命令： # hwclock设置硬件时间的...

Ubuntu 16.04下安装Matlab

2017年02月05日 15 阅读

最近一直在用Ubuntu16.04作业，最近又要用到Matlab，所以打算在Ubuntu平台安装Matlab。在网上找到了一些教程，最终完成了安装，这里做个笔记。下载Matlab2014的Linux版本及相关文件。下载地址：链接：http://pan.baidu.com/s/1nvrSiuP 密码：inwa。包含三个文件：MATHWORKS_R2014A.part1.rar, MATHWORKS_R2014A.part2.rar, 相关文件，共7G多，都要...

利用Sublime Text 2 来运行Matlab

2017年02月05日 15 阅读

本文将介绍如何在Sublime Text2文本编辑器中搭建MATLAB开发环境。当然，在Notepad++之类的编辑器上应该能以类似的方式实现。1.舍去笨重的GUI，以命令行的方式运行MALTABMatlab能以命令行的方式运行（我打赌很多人都不知道），方法如下：点击开始，运行，输入cmd.exe进入命令行窗口输入 matlab -nosplash -nodesktop -r 文件名，即可运行脚本。注意，文件名是不包含.m后缀的，而且该m文件要么位于MAT...