文章浏览阅读551次。文章目录一、why is Scala语言?二、Scala语言的特点三、Windows下搭建Scala开发环境四、配置 IDEA五、Scala语言快速开发入门一、why is Scala语言?Spark—新一代内存级大数据计算框架,是大数据的重要内容。Spark就是使......
admin 2024-01-21
Spark安装部署:Standalone模式1、实验描述以spark Standalone的运行模式安装Spark集群实验时长:45分钟主要步骤:解压安装Spark添加Spark 配置文件启动Spark 集群运行测试用例2、实验环境虚拟机数量:3(一主两从,主机名分别为:master、s......
admin 2023-10-10
文章浏览阅读7.7k次,点赞5次,收藏78次。准备Java环境1.安装JDK:2.解压tar -zvxf jdk-8u161-linux-x64.tar.gz -C /home/bcf/soft/3.配置java环境4.使配置文件生效,并使用java –version进行验证准备Tomcat环境1.安装Tomcat8.5_如何把javaweb项目部署到服......
admin 2024-02-01
本课程由目前是国内完整和系统讲授PXC集群架构的第一人黄老师主讲,课程整体以精通PXC集群为课程体系,通过丰富操作经验为主,结合PXC集群和架构原理,融合运维实践和丰富经验。...
admin 2023-11-11
文章浏览阅读358次。Traefik1.7 转发marathon上的服务1、准备docker-compose启动文件注:假设你的主机ip为:10.11.0.0,后面皆以此为假设部署traefik-docker-compose.ymlversion: '3.3'services: reverse-proxy: image: traefik:v1.7-alpine command: --api --docker ......
admin 2024-01-12
文章浏览阅读288次。一.前端配置及打包部署1.统一url前缀2.打包npm run build将打好的文件甩到nginx下:3.配置nginxserver { listen 80 default_server; listen [::]:80 default_server; # Add index.php to the list if you are using PHP index index.html index.htm index.nginx-de......
admin 2024-01-24
文章浏览阅读814次。独立部署(Standalone)模式由Spark自身提供计算资源,无需其他框架提供资源。这种方式降低了和其他第三方资源框架的耦合性,独立性非常强。但是你也要记住,Spark主要是计算框架,而不是资源调度框架,......
admin 2024-01-24
文章浏览阅读2.4k次。一、服务端部署第一步:到Github中(https://github.com/dongyusheng/cloud-disk)将服务端的代码下载下来放到ubuntu中,如下图所示(只需要server目录就行了)把服务端代码下载之后,还需要修改一些地方 第二步:修改con......
admin 2023-11-11
文章浏览阅读1.2k次。目录服务器规划部署包下载服务器初始化(所有节点都要操作)内核参数修改/etc/security/limits.conf修改/etc/sysctl.conf文件修改禁用selinux关闭防火墙创建es用户安装jdkes部署单节点(节点1)部署部署包上传解压配置文......
admin 2024-01-24
文章浏览阅读398次。一、概述1.1 为什么学习scalaSpark就是使用Scala编写的,为了更好的学习Spark,需要掌握Scala这门语言 Spark的兴起,带动了Scala语言的发展1.2 Scala与Java的关系Scala是基于Java的1.3Scala语言的特点Scala是一门以Java虚拟......
admin 2024-01-21
文章浏览阅读6.4k次。1.Local模式Local模式就是运行在一台计算机上的模式,通常用于在本机上测试,当不设置master参数的值时,默认此模式,具体有以下几种设置master的方式。local:所有计算都运行在一个线程当中,没有任何并行......
admin 2024-01-24
文章浏览阅读1.2k次。如果机器有多个IP,需要配置priority_networks1、启动Broker[root@node1 ~]# cd /app/doris-0.14.13/apache_hdfs_broker/[root@node1 apache_hdfs_broker]# sh bin/start_broker.sh --daemon[root@node1 apache_hdfs_broker]# jps10400 PaloFe12744 Worker14153 BrokerBootstra......
admin 2024-01-24
本文章只为帮助大家学习项目的发布,为基础篇,在此给大家示范在window环境下的项目部署及运维。以下版本为讲解示例,可自行改至匹配版本。服务器:window service2008 R2 Standard(提前准备好服务器,可以在服务器商家租服务器......
admin 2023-10-10
文章浏览阅读1.9k次。安装PXC集群软件包PXC实验环境说明系统使用CentOS7.6以上,关闭防火墙,关闭selinux,配好ip,配好网络yum源环境说明如下Node Host IP Addr DescpritionNode1 xuegod63.cn 192.168.1.63/24 集群节点1Node2 xuegod64.cn 192.168.1.64/24 集......
admin 2023-11-12
文章浏览阅读9.4k次,点赞34次,收藏30次。1 Python简介Python 于20世纪90年代初由Guido van Rossum设计,一种作为计算机编程语言及一组配套的软件工具和功能库,当前由世界各地的数百位程序员负责维护。先来聊一聊Python这个名字的......
admin 2024-01-22
文章浏览阅读147次。概述:Kafka是一个分布式消息队列。Kafka对消息保存时根据Topic进行归类,发送消息者称为Producer,消息接受者称为Consumer,此外kafka集群有多个kafka实例组成,每个实例(server)称为broker。Kafka架构图:详解:1)Pr......
admin 2024-01-23
文章浏览阅读974次。一:摘要概述是什么:ElasticSearch为目前比较流行的全文搜索引擎,底层技术封装Apache Lucene实现扩展点:相对于Apache Luence而言ES还实现分布式文件存储、实时数据分析、通过服务器扩展可以达到PB级别结构化/......
admin 2024-01-24
友情链接申请要求: 不违法不降权 权重相当 请联系QQ:737597453