-
大数据之什么是Hash表
所属栏目:[教程] 日期:2019-10-06 热度:132
大数据之什么是Hash表,Hash,一般翻译做散列,也有直接音译为哈希的,它是基于快速存取的角度设计的,也是一种典型的空间换时间的做法。顾名思义,该数据结构可以理解为一个线性表,但是其中的元素不是紧密排列的,而是可能存在空隙。 1.散列表(Hash tabl[详细]
-
Apache Spark Delta Lake写数据使用及实现原理代码解析
所属栏目:[教程] 日期:2019-10-06 热度:150
Delta Lake 写数据是其最基本的功能,而且其使用和现有的 Spark 写 Parquet 文件基本一致,在介绍 Delta Lake 实现原理之前先来看看如何使用它,具体使用如下: df.write.format(delta).save(/data/yangping.wyp/delta/test/) //数据按照dt分区 df.write.f[详细]
-
Linux TCP/IP协议栈,数据发送接收流程,TCP协议特点
所属栏目:[教程] 日期:2019-10-06 热度:89
可以毫不夸张的说现如今的互联网是基于TCP/IP构建起来的网络。弄懂协议栈的原理,无论对调试网络IO性能还是解决网络问题都是有很大帮助的。本片文章就带领大家来看看内核是如何控制网络数据流的。 TCP特点 我们都非常清楚TCP协议设计的初衷,就是保证数据[详细]
-
苹果野心获支持 无人驾驶获路测许可
所属栏目:[教程] 日期:2019-10-06 热度:136
【51CTO.com原创稿件】Business Insider带来了***的消息:苹果公司今日获得加州车辆管理部门DMV的许可证,这意味着苹果可以在加州公路上测试无人驾驶汽车。苹果这次要测试的是2015款雷克萨斯RX450h,同时,有6名驾驶员获得此次智能驾驶测试操作资格。 苹果[详细]
-
本文踩坑之k8s网络不通的问题排除
所属栏目:[教程] 日期:2019-09-30 热度:171
首先找出来保存很久的跨主机pod通信流程图。 简单解读下: 数据从源容器中发出后,经由所在主机的Docker0虚拟网卡转发到flannel0虚拟网卡,这是个P2P的虚拟网卡,flanneld服务监听在网卡的另外一端。 Flannel通过Etcd服务维护了一张节点间的路由。 源主机[详细]
-
5G无线网络信令流程
所属栏目:[教程] 日期:2019-09-30 热度:127
一、5G初始接入 1. 开机入网概述 初始无线接入:当UE开机后,它的首要任务就是要找到无线网络并与无线网络建立连接,需要如下步骤; 获得上下行同步:侦听网络获得下行同步;随机接入,获取上行同步; 收发消息,建立连接 ATTACH: 建立UE与核心网之间相同的[详细]
-
详解:VLAN、三层交换机、网关、DNS、子网掩码、MAC地址
所属栏目:[教程] 日期:2019-09-30 热度:130
一、什么是VLAN VLAN中文是虚拟局域网。LAN可以是由少数几台家用计算机构成的网络,也可以是数以百计的计算机构成的企业网络。VLAN所指的LAN特指使用路由器分割的网络也就是广播域。 听上面的概念,肯定有不少朋友是一头雾水的,什么是虚拟局域网?好好的,[详细]
-
理解了异地恋,就理解如何配置交换机,一文了解清楚
所属栏目:[教程] 日期:2019-09-30 热度:125
前面我们多次了交换机的配置, 有朋友反映太难了,看不懂,有弱电vip技术群也不断的有朋友在问交换机的相关配置,今天我们来以步步深入的方式来讲解交换机的配置。以通俗的方式来讲解交换机的配置方式。 案例一、划分vlan,实现同交换机下pc1与pc2不通信[详细]
-
SD-WAN与VPN如何比较?
所属栏目:[教程] 日期:2019-09-30 热度:143
企业在比较SD-WAN与VPN服务时,在两种技术之间进行选择应该考虑成本、云计算使用和应用意识等因素。 软件定义的WAN有时作为全球互联网上虚拟专用网络的升级版,许多IT团队都对SD-WAN与VPN服务的根本区别和相似之处感到疑惑。 尽管SD-WAN平台的首选连接选项[详细]
-
5G、边缘计算和物联网有望重组网络
所属栏目:[教程] 日期:2019-09-30 热度:118
比上一代蜂窝服务(4G)相比,5G提供的无线蜂窝连接性具有更高的带宽、更低的延迟和更高的设备密度。除10 Gbps的速度和1毫秒的延迟外,5G还可以在每平方公里支持数千台设备。 5G还支持网络切片,这使运营商可以将5G无线电访问网络划分为虚拟网段,每个网段都[详细]
-
带你认识HDFS和如何创建3个节点HDFS集群
所属栏目:[教程] 日期:2019-09-28 热度:139
在本文中,大数据专家将为您介绍如何使用HDFS以及如何利用HDFS创建HDFS集群节点。 我们将从HDFS、Zookeeper、Hbase和OpenTSDB上的系列博客开始,了解如何利用这些服务设置OpenTSDB集群。在本文中,我们将探究HDFS。 HDFS Hadoop分布式文件系统(HDFS)是一种[详细]
-
5G发牌百日,浪潮云海推动“高新视频”从概念走向落地
所属栏目:[教程] 日期:2019-09-28 热度:200
日前,基于5G的高新视频新概念被提出。对于高新视频业务,浪潮云海在实施广电互联互通融合媒体云平台项目时已有一定了解,未来浪潮云海将发挥在大规模行业云方面的积累,推动高新视频产业从概念走向落地。 2019年6月6日,中国广电获得5G商用牌照,距今已百[详细]
-
如何保护5G基础设施
所属栏目:[教程] 日期:2019-09-28 热度:152
使用电子访问控制可以对5G基础设施进行物理安全管理。 如今,移动计算和通信的5G时代正在迅速向前发展。5G代表了第五代无线基础设施,这是大规模的网络技术。它可以提供更快的数据传输速率,甚至可以减少需要大量数据的应用程序的延迟、高带宽以及更多的连[详细]
-
如何高效地进行数据建模
所属栏目:[教程] 日期:2019-09-28 热度:181
理解数据是控制任何企业的先决条件。但只有当这些知识能够被分享和传播时,理解才是有用的。有效的数据建模应该是任何企业架构师的首要关注点。 在我的上一篇文章中,我认为理解一个企业的数据是指导一个企业的核心。但理解只是问题的一半。另一半是能够记[详细]
-
5G时代可能才是最难的时代
所属栏目:[教程] 日期:2019-09-28 热度:122
当我们谈5G营销的时候,我们在谈论什么? 由于今年的整体大环境不好,正好现在处于4G转5G的前期节点上,不少人把营销的希望寄托在5G上,但可惜的是,5G救不了营销,甚至会让营销变得越来越难做。 5G无疑会让广告行业和广告表现形式发生巨大的变化,有一些观[详细]
-
Wi-Fi 6无需再观望 此前遭遇“四无”阻碍普及
所属栏目:[教程] 日期:2019-09-28 热度:115
尽管Wi-Fi 6无线技术已出现了两年多,当时它还遵循着802.11ax的习惯叫法,但似乎相比Wi-Fi 5(802.11ac)的持续增长,人们对于Wi-Fi 6的设备仍持谨慎的观望态度。直到本月中旬行业联盟启动了Wi-Fi 6无线标准的认证工作,一时间才让这个新标准再度赢回了不少[详细]
-
Wi-Fi 6:千兆带宽接入势在必行
所属栏目:[教程] 日期:2019-09-27 热度:90
作为最重要的基础设施之一,光纤宽带已经走进亿万家庭,截止2019年7月,光纤宽带用户数量超过4亿,百兆以上光纤宽带用户占比78.3%,200M宽带正在成为主流套餐。然而,家里的Wi-Fi 体验却不如无线连网速度快。 实际上,运营商的光纤宽带入户只是到了门口的[详细]
-
一文讲弄懂什么是vlan、三层交换机、网关、DNS、子网掩码、MAC地址
所属栏目:[教程] 日期:2019-09-27 热度:114
上次我们发布了什么是arp地址?什么是arp攻击?如何利用arp命令解决网络故障,很多朋友多次问到什么是网关、dns、子网掩码,三层交换机,它们定位的用途;确实,因为网络技术在弱电中确实应用非常广泛,我们平时在vip技术群中也是不断的讨论到网关、vlan、三[详细]
-
深度分析IOT的七大通信协议
所属栏目:[教程] 日期:2019-09-27 热度:119
在物联网协议中,一般分为两大类,一类是传输协议,一类是通信协议。传输协议一般负责子网内设备间的组网及通信;通信协议则主要是运行在传统互联网TCP/IP协议之上的设备通讯协议,负责设备通过互联网进行数据交换及通信。那么物联网都有哪些通信协议呢? 一[详细]
-
FTP与SFTP两者有什么区别
所属栏目:[教程] 日期:2019-09-27 热度:184
在实际项目开发中最常使用的文件传输的方式有ftp和sftp两种,但是这两个传输方式各有什么特点呢?本文接下来将讨论SFTP、FTP的区别。 一、FTP协议 FTP是TCP/IP协议组中的协议之一,TP协议由两个部分组成: FTP服务器(用来存储文件) FTP客户端(用户可以使用F[详细]
-
中国移动黄宇红:中国移动要做5G赋能各行业的开拓者
所属栏目:[教程] 日期:2019-09-27 热度:173
8月8日,中国移动研究院副院长黄宇红在新动能陕耀5G智慧城市论坛暨5G专网创新成果发布活动上表示,中国移动从需求定义、标准制定、技术创新、产业构建、垂直行业应用拓展五个方面做了大量的工作,有效推动了5G端到端产业的成熟与发展。 01中国移动成为全球[详细]
-
数据科学领域的核心技能和新兴技能分别有哪些?
所属栏目:[教程] 日期:2019-09-27 热度:107
近年来随着大数据的迅速发展,各种各样的数据分析技能也逐渐大热,为了找到数据科学领域目前最常用的技能和未来最流行的应用趋势,我们进行了一项调查。 我们确定了数据科学技能的两个主要类别:一个是大多数受访者拥有的13种核心技能,另一个是大多数还没[详细]
-
IPv6如何逐步取代IPv4
所属栏目:[教程] 日期:2019-09-26 热度:75
不知道大家有没有注意到,现在很多APP打开的起始页下面会有一行小字XXX支持IPv6网络或者IPv6字样,有的则没有,这是怎么回事呢? 原来是表示这些APP已经支持IPv6服务,正在为将来全面切换到IPv6网络做准备呢。随着5G时代的到来,终端设备越来越多,IPv4地址[详细]
-
Hadoop 之 NameNode 元数据原理
所属栏目:[教程] 日期:2019-09-26 热度:140
在对NameNode节点进行格式化时,调用了FSImage的saveFSImage()方法和FSEditLog.createEditLogFile()存储当前的元数据。Namenode主要维护两个文件,一个是fsimage,一个是editlog。 fsimage :保存了最新的元数据检查点,包含了整个HDFS文件系统的所有目录[详细]
-
5G共建共享:简单“省钱”思维不可取
所属栏目:[教程] 日期:2019-09-26 热度:165
6月6日,中国5G商用牌照发放后,工信部信息通信管理局副局长鲁春丛在接受记者采访时表示:5G高科技、高投入、高回报,溢出效应显著,每投入1个单位,将带动6个单位的经济产出。代表通信行业主管机构发言的鲁局长将5G比喻成数字经济的聚宝盆,对于5G投资拉[详细]