最近想要给自己的个人脚本加上邮件提醒, 尝试一下 Manjaro 下安装 sendmail . 安装yay -S sendmailsudo vim /etc/hosts , 把 myhostname 追加到 127.0.0.1 后边sudo touch /etc/mail/local-host-n ...

有句名言: "计算机科学领域的许多问题都可以通过增加一个间接的中间层来解决",在互联网业务中, 数据仓库也有比较通用的分层, 那么就从最底层开始看看有哪些, 以及为什么. 主要的数据分层可以参考 阿里云的这张图 的绿色部分: 一. ODS (Operation Data Sto ...

语法case word in [ [(] pattern [| pattern]…) command-list ;;]…esac command-list 后面的 ;; 其实还可以换成 ;& 和 ;;&, 它们有什么区别呢 ? 实例 ;&;& 是在匹配到 pat ...

今天以 LogisticRegression 为例, 梳理一下 Spark ML 的主体流程: val lr = new LogisticRegression() .setMaxIter(10) .setRegParam(0.3) .setElasticNetParam(0.8)val lr ...

常见指标 error rate (E): 假设有 m 个样本, 其中 a 个样本分类错误, 那么 E=a/m accuracy (classification 领域) : 等于 1 - a/m precision 和 recall这两个是 information systems 领域的定义, 比如 ...

基本定义error (误差): 学习器的预测输出和样本的真实输出之间的差异training/empirical error: 学习器在训练集上的误差.generalizasion error: 新样本上的误差. 测试, 评估 testing set(hold-out set): 评估一个最终模型时, ...

环境Python 3.6, matplotlib 3, Linux 方法1: 查找或拷贝字体文件到 matplotlib 库的 fonts 目录.例如微软雅黑字体: /.../python3.6/site-packages/matplotlib/mpl-data/fonts/ttf/msyh.ttf ...

因为有一个台式机, 用来打游戏用的, 装着 windows 系统,而每次睡觉时都会进行睡眠操作, 对于平时使用 Linux 系统的人来说,过多的鼠标操作实在繁琐, 于是找了一下 "一键睡眠" 的实现方法. bat 脚本首先新建 sleep_win10.bat 文件, 写入以下内容 ...

前面用 Pregel API 实现 sssp 的例子可能比较简单, 但用 Pregel 也可以实现 PageRank. PageRank 是什么PageRank 是早期 Google 搜索引擎中对网页排名的一种算法, 该算法以 Google 创始人之一的 Larry Page 的名字来命名.其核心 ...

介绍完前面的图计算, 终于到了 GraphX, 那么它就如何实现的呢 ? Graph 对象假设有这么一个图, 描述的是大学的人际关系: vertexTable 的数据我们用一个 RDD vertices 来保存, edgeTable 的数据我们同样也用一个 RDD edges 来保存, 这两个 ...