×

scala

Spark编写独立应用程序实现数据去重(spark 去重)

零度 零度 发表于2024-05-17 浏览5358 评论0
题目要求 对于两个输入文件A和B,编写Spark独立应用程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新文件C。下面是输入文件和输出文件的一个样例,供参考。 输入文件A的样例如下: 20170101 x 20170102 y 20170103 x 20170104 y 20170105 z 20170106 z 输入文件B的样例如下: 20170101 y 20170102 y 20170103 x 20170104 z 20170105 y 根据输入的文

rabbitmq

简述RabbitMQ的架构设计(rabbitmq 架构)

零度 零度 发表于2024-05-17 浏览6271 评论0
Broker:rabbitmq的服务节点 Queue:队列,是RabbitMQ的内部对象,用于存储消息。RabbitMQ中消息只能存储在队列中。生产 者投递消息到队列,消费者从队列中获取消息并消费。多个消费者可以订阅同一个队列,这时队列中的 消息会被平均分摊(轮询)给多个消费者进行消费,而不是每个消费者都收到所有的消息进行消费。(注 意:RabbitMQ不支持队列层面的广播消费,如果需要广播消费,可以采用一个交换器通过路由Key绑 定多个队列,由多个消费者来订阅这些队列的方式。 Exch

rabbitmq

【RabbitMQ基本概念】(rabbitmq 概念)

零度 零度 发表于2024-05-16 浏览3877 评论0
RabbitMQ基本概念 RabbitMq简介 AMQP,即Adcanced Message Queuing Protocol(高级消息队列),是一个网络协议,是应用层协议的一个开放标准,为面向消息的中间件设计,基于此协议的客户端与消息中间件可传递消息,并不受客户端/中间件不同的产品,不同的开发语言等条件限制。 RabbitMq基础架构 Borker:接收和分发消息的应用,RabbitMq server就是MessageBorker Virtual host:出于多租户和安全因素

scala

【Scala】match——模式匹配总结

零度 零度 发表于2024-05-16 浏览4373 评论0
一、基本语法 Scala 中的模式匹配 类似于 Java 中的 switch 语法   模式匹配语法中,采用 match 关键字声明,每个分支采用 case 关键字进行声明,当需要匹 配时,会从第一个 case 分支开始,如果匹配成功,那么执行对应的逻辑代码,如果匹配不成功,继续执行下一个分支进行判断。 如果所有 case 都不匹配,那

django

Django 用户权限(django用户权限管理)

零度 零度 发表于2024-05-16 浏览6260 评论0
1. 权限简介 用户权限,指的是一个帐户登录后,有些功能可以使用,有些功能无法使用,这就是管理员对其设置的权限,只有附合权限的人才可以使用对应的功能。权限就是权利的限制范围。比较常见的是VIP用户和非VIP用户之间的权限差距。 2. Django 实现权限管理 用户的权限其实也可以理解为用户对路由访问的权限。我们设定一个用户不能访问某一个路由就相当于限制了用户的权限。那么如何限制用户访问路由,可以创建一个用户可以访问的路由表,查看用户请求的路由是否在该列表内即可。 权限表设

tomcat

沙箱-简单实现支付宝网页支付功能(沙箱支付宝支付是怎么实现的)

零度 零度 发表于2024-05-15 浏览4532 评论0
1.在实现前我们得先了解支付宝支付功能-他是需要一个真实的软件 但我们没有真实的应用软件,所以支付宝给我们提供了一个沙箱的功能。沙箱就是一个虚拟的假的应用软件。了解沙箱可以看支付宝文档中心。----沙箱环境 | 开放平台  2.我们创建自己的沙箱账号 根据文档的操作我们进去沙箱环境,使用自己的支付宝登录 我们可以看到APPID  点击公钥的查看  查看 应用私钥 和 支付宝公钥 右侧沙箱账号  里面 的买家账号和密码 就是我们支付的时候使用的账号,金钱不够可以充值,里面还可

flask

学了Python之后,都能干点啥?(学完python能干什么)

零度 零度 发表于2024-05-15 浏览10817 评论0
Python是一种全栈的开发语言,你如果能学好Python,前端,后端,测试,大数据分析,爬虫等这些工作你都能胜任,这样说应该比较好理解吧。 当下Python有多火我不再赘述,Python有哪些作用呢? 就目前Python发展而言,Python主要有以下五大主要应用: 网络爬虫 数据分析 网站开发 人工智能 自动化运维 接下来和大家一一聊聊这几个方面: 一、网络爬虫 首先,什么叫网络爬虫? 网络爬虫又称网络蜘蛛,是指按照某种规则在网络上爬取所需内容的脚本程序。众所周知,

HTML/Xhtml

如何用html制作一个简单的网页(如何用html制作一个简单的网页)

零度 零度 发表于2024-05-14 浏览16680 评论0
        哈喽,大家好!我是小张。大家在浏览网页的时候有没有好奇过这个网页是怎么制作,其实只是制作一个简单的网页是很简单的。今天我就教一下大家如何用HTML制作一个简单的网页。         了解html        1. 学习html之前先要知道html是什么         HTML的全称为超文本标记语言,是一种标记语言。它包括一系列标签.通过这些标签可以将网络上的文档格式统一,使分散的Internet资源连接为一个逻辑整体。HTML文本是由HTML命令组成的描述性文本,HT