大数据技术原理与应用华为云实验实时分析
1.实验目的l 掌握大数据相关服务的购买及基础配置 l 掌握使用Flume采集数据 l 掌握Flink SQL代码的编写 l 掌握使用DLV进行数据可视化 l 掌握实时流数据的处理流程 2.实验平台与服务l MRS (MapReduce Service) MapReduce服务是一个在华为云上部署和管理Hadoop系统的服务,一键即可部署Hadoop集群。 l DLI (Data Lake Insight) 数据湖探索是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。 l RDS (Relational Database Service) 华为云关系型数据库是一种基于云计算平台的即开即用、稳定可靠、弹性伸缩、便捷管理的在线关系型数据库服务,支持单机和主备部署模式,支持MySQL、PostgreSQL、SQL Server等主流的关系型数据库引擎。 l CDM (Cloud Data...
NEU计算机体系结构速通
NEU计算机体系结构速通本文记载了本人速通NEU计算机体系结构期末考试的一些方法和心得以及一些自己的关于类似现象的思考。话说在前头,这不是什么了不起的事情,因为考的非常简单而且考试题型固定,完完全全可以对症下药。我的同学大多都是速通的,甚至有个室友在我们的帮助下就复习了半天。仅仅是我的一些思考,如果与你的想法有分歧,那就是我错了。最后感谢上课的老师,他的课讲得非常好,但是大家都大三下了,已经没有人会听课了。老师也非常豁达通情达理,完全没有为难我们。毕竟取舍是必须的。 ...
大数据技术原理与应用华为云实验实时检索
1.实验介绍1.1.实验概述本实验基于华为云服务。通过模拟开发流程,包括数据导入库,组件应用开发,构建搜索服务,最终完成实时检索功能。 1.2.实验目的l 掌握大数据相关服务的购买及基础配置 l 掌握HBase应用开发的基本语法 l 掌握ElasticSearch应用开发的基本语法 l 掌握实时检索的功能实现 1.3.实验规划在同一VPC内的ECS通过内网访问MRS HBase和CSS各自的网络地址,并通过各自网络地址完成数据导入和数据查询。 1.4.实验思路(1)通过配置和申请华为云服务VPC,ECS,MRS和CSS作为基础配置。 (2)ECS在同一VPC内通过安全组规则访问MRS和CSS服务。 (3)在ECS上搭建基本应用开发环境。 (4)在ECS上建工程项目,开发基于MRS和CSS的应用程序。 (5)服务使用完毕,进行释放资源。 1.5.实验流程 2.实验平台与服务l ECS (Elastic Cloud...
大数据技术原理与应用实验5MapReduce初级编程实践
实验5 MapReduce初级编程实践1. 实验目的(1) 通过实验掌握基本的 MapReduce 编程方法; (2) 掌握用 MapReduce 解决一些常见的数据处理问题,包括数据去重、数据排序和数据挖掘等。 2.实验平台(1) 操作系统: Linux(Ubuntu22.04); (2) Hadoop 版本: 3.1.3; 3.实验步骤与结果(一)编程实现文件合并和去重操作 对于两个输入文件,即文件 A 和文件 B,请编写 MapReduce 程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新的输出文件 C。下面是输入文件和输出文件的一个样例供参考。 输入文件 A 的样例如下: 123456789101120170101 x 20170102 y 20170103 x 20170104 y 20170105 z 20170106 x 输入文件 B 的样例如下: 12345678920170101 y 20170102 y 20170103 x 20170104 z 20170105 y 根据输入文件 A 和 B 合并得到的输出文件 C...
文章发布规划2
文章发布规划2每次美化博客都要花好长时间,有点得不偿失了。 之后我会停滞一段时间,也可能再也不美化博客了。 但是我会更加积极为大家提供更高质量的文章的。 新计划是开展 考研笔记速过专栏 PAT刷题专栏 acwing专栏 操作系统实验和课设专栏 也许还会有CMU15445专栏 有最后一个的话,估计就说明我只会发技术文章,再也没空维护美化博客了把。
Hexo博客添加Live2D小人
摘要通过hexo-helper-live2d插件给自己的博客添加一个小人。 小白入门:hexo 的官方是支持看板娘的,已经封装好了插件,但只是模型,不能说话、不能换装、功能较少。 大神水平:功能齐全。能说话、能换装、能玩游戏、能拍照、还能自定义。 Hexo博客添加Live2D小人通过hexo-helper-live2d插件给自己的博客添加一个小人,最后的成果图如下 小白入门首先安装插件1npm install --save hexo-helper-live2d 如果你的npm出现依赖问题 vulnerabilities...
Hexo博客进阶:为Next主题添加评论系统
一个好的博客怎么能没有评论功能呢,拖了几天终于能把评论模块安排上了o( ̄︶ ̄)o 摘要为Next主题添加Valine评论系统以及添加Waline评论系统的注意事项和推荐参考博客。 Hexo博客进阶:为Next主题添加评论系统博客评论模块选择我的选择:Valine关于评论模块有很多选择,因为博主也没有一一用过,只能通过网络搜索来寻找一个简单好用的,以下网络上对于一些评论模块的评价: 静态博客无法直接构建评论系统,需要借助第三方平台的后端。NexT 主题支持 Disqus、Valine、Gitalk 等多种第三方评论系统。我推荐使用 Valine 或者 Disqus(加载评论需科学上网)。Valine 评论系统借助于 LeanCloud 存储数据,LeanCloud 的国内版本需要绑定域名和备案,这对于很多人来说不太方便,所以可以选择使用国际版。目前 NexT 主题支持多评论系统,不过我认为这项功能有些多余,有谁会无聊使用多种评论系统呢?不方便管理评论,将简单的管理变得更加复杂。 调研了一下可用的评论系统,简单总结: Disqus:...
Hexo个人博客添加APlayer音乐播放器功能
还来不及,仔仔细细写下你的关于,描述我如何爱你,你却微笑的离我而去。 ...
Next主题(Hexo)字体相关配置
摘要最近想修改了一下 NexT 主题的字体配置,网上大多都是2020年的相关文章,我几乎baidu以及google了全部的相关文章,都或多或少的出现了问题。前前后后捣鼓了大概10小时,终于成功修改。这不发一篇博客记录我的痛苦经历都对不住我。呜呜呜😭😭😭。每次弄博客美化博客都花好长时间,感觉有点累了💔。 Next主题(Hexo)字体相关配置背景Google Fonts 分别在 2018年的11 月 18 日和 12 月 07 日提供了思源黑体和思源宋体的简繁支持,而且高达 6 种字重支持,其中思源宋体更是高达 7 种字重。这可了不得啊!更重要的是:它支持了目前电子显示屏上稀缺的宋体,这将会是一个伟大的进步!要知道,对于中文书籍,宋体一直是正文印刷的标准字体,而不是目前电子显示屏上普遍的黑体,因为宋体的衬线更适合长时间阅读。 优势都说衬线字体(宋体)较无衬线字体(黑体)更适合阅读!=================================在西方国家罗马字母阵营中,字体分为两大种类:Sans Serif和 Serif,打字机体虽然也属于 Sans...