-
TCP/IP协议栈之数据包如何穿越各层协议
所属栏目:[教程] 日期:2019-08-22 热度:86
所有互联网服务,均依赖于TCP/IP协议栈。懂得数据是如何在协议栈传输的,将会帮助你提升互联网程序的性能和解决TCP相关问题的能力。 我们讲述在Linux场景下数据包是如何在协议层传输的。 1. 发送数据 应用层发送数据的过程大致如下: 我们把上述处理过程的[详细]
-
人工智能——一种改进数据控制和处理的好方法
所属栏目:[教程] 日期:2019-08-22 热度:53
早期的人工智能机器不够完善,只能按照定义明确的指令运行。但是,随着计算机和处理网络功能的不断增强,现在可以创建和执行可以在每次迭代时改进其功能的算法。这种现象被称为人工智能(AI),尽管称之为机器智能可能会更好。 定义人工智能 人工智能难以完[详细]
-
4G网络偷偷降速为保5G?你真的冤枉他们了
所属栏目:[教程] 日期:2019-08-22 热度:63
最近4G网络降速的问题闹得沸沸扬扬,很多人都把目标指向了运营商,认为运营商是故意降低4G网络速度,目的是给保证5G网络。对于这一问题,联通方面予以否认,表示不会降低4G网速,反而会提高网速。 关于4G降速问题,有人指出4G网络降速的原因与不限流量业务[详细]
-
企业内部网中的IP地址规划方案,这6个点你必须掌握!
所属栏目:[教程] 日期:2019-08-20 热度:115
Intranet是 Internet技术在企业内部或闭合用户群内的实现,它的基本通信协议是TCP/IP协议,其中TCP使得内部网上的数据有序可靠地传输,IP 使内部网中的各个子网互联起来。 内部网中的每一台设备都是以IP地址标识网络位置的。 因此在组建内部网之前,要为网[详细]
-
5G改变社会?先要问问千行百业的利益群体答不答应
所属栏目:[教程] 日期:2019-08-20 热度:158
天下熙熙,皆为利来;天下攘攘,皆为利往,2000多年前司马迁在《史记货殖列传》中道出了市场经济核心规律。5G目前是社会热点,原信产部部长吴基传曾形象比喻5G现在比开水都热,喝的话烫嘴,但再火爆的热点落地时也必须符合市场规律。5G改变社会成为一个共识[详细]
-
穿越NAT的迷雾:深入理解网络地址转换和NAT穿透,以及STUN、TURN、ICE的关系
所属栏目:[教程] 日期:2019-08-20 热度:189
NAT是什么? NAT是Net Address Translation的缩写,即网络地址转换。 NAT部署在网络出口的位置,位于内网跟公网之间,是连接内网主机和公网的桥梁,双向流量都必须经过NAT,装有NAT软件的路由器叫NAT路由器,NAT路由器拥有公网IP。 你的家庭和办公网络环境[详细]
-
大数据时代,如何避免陷入“算法崇拜”?
所属栏目:[教程] 日期:2019-08-20 热度:90
数据在今天从来没有如此被广泛关注,以往我们毫不在意地填写手机号码等信息,如今却变得谨慎起来,原因是怕自己的隐私泄露,一个手机号码可以关联到自己诸多的数据。但现实当中,一方面大众对数据被过度使用而烦恼,但另一方面我们可能陷入了算法崇拜之中[详细]
-
如何跨历史数据和实时数据进行实时分析?
所属栏目:[教程] 日期:2019-08-20 热度:67
当下的数据分析需求给现有的数据基础设施带来了前所未有的压力。跨操作和存储数据执行实时分析通常是成功的关键,但这些操作实现起来却充满挑战。 比如一家航空公司,它希望收集和分析来自其喷气发动机的连续数据流,以实现可预测的维护以及迅速发现解决方[详细]
-
深度解析 Flink 是如何管理好内存的?
所属栏目:[教程] 日期:2019-08-20 热度:136
前言 如今,许多用于分析大型数据集的开源系统都是用 Java 或者是基于 JVM 的编程语言实现的。最着名的例子是 Apache Hadoop,还有较新的框架,如 Apache Spark、Apache Drill、Apache Flink。基于 JVM 的数据分析引擎面临的一个常见挑战就是如何在内存中[详细]
-
面试系列:十个海量数据处理方法大总结
所属栏目:[教程] 日期:2019-08-20 热度:59
本文将简单总结下一些处理海量数据问题的常见方法。当然这些方法可能并不能完全覆盖所有的问题,但是这样的一些方法也基本可以处理绝大多数遇到的问题。下面的一些问题基本直接来源于公司的面试笔试题目,方法不一定最优,如果你有更好的处理方法,欢迎讨[详细]
-
网络流量如何压测?
所属栏目:[教程] 日期:2019-08-20 热度:130
网络测试软件很多,今天就介绍2款大家常用的。分别为iptraf3和netperf 。网络测试关注的指标:PPS和内网带宽峰值。 iptraf 软件 yum-yinstallgccgcc-c++autoconfglibcglibc-develsysstatnload yuminstall-yiptraf3 (1) iptraf3 部分参数说明: (2) 查询带[详细]
-
影响TCP连接吞吐量的致命因素:HOL (干货)
所属栏目:[教程] 日期:2019-08-20 热度:57
一、什么是HOL HOL是Head of line blocking的意思,在互联网领域,包括HTTP head of line blocking和 TCP head of line blocking。 1. HTTP Head of line blocking Wikipedia对HTTP HOL的解释如下: 虽然HTTP/2解决了HTTP/1.1的HOL问题,但由于是建立在TCP[详细]
-
TCP传输协议中如何解决丢包问题
所属栏目:[教程] 日期:2019-08-17 热度:150
一、回答这个问题之前,要考虑TCP协议为什么会丢包,在什么样的情况下会丢包。 1. TCP协议定义(Transimission Control Protocol)是以一种面向连接的、可靠的、基于字节流的传输层通信协议。 2. TCP是基于不可靠的网路实现可靠传输,肯定会存在丢包问题。 3[详细]
-
从全球大数据市场看未来发展趋势
所属栏目:[教程] 日期:2019-08-17 热度:134
近年来,全球大数据储量呈现爆炸式增长,其中中国数据产生量增长最为迅速,平均每年增长速度比全球快3%,预计到2025年中国将成为全球最大的数据圈。 中国数据圈将受到来自物联网设备信号、元数据、娱乐相关数据、云计算和边缘计算增长的驱动,中国生产力数[详细]
-
云数据管理会成为DataOps的未来吗?
所属栏目:[教程] 日期:2019-08-17 热度:192
如今,现代化的数据管理平台正在成为企业的首先,而传统的数据运维应用平台则逐渐被边缘化。尤其在AI和机器学习技术的推动下,企业数据正在走向以云为核心的数字化征程。 根据思科的一份数据显示:到2021年,企业4%的工作负载将托管在云数据中心。尽管很多[详细]
-
UDP协议-看这篇就够了
所属栏目:[教程] 日期:2019-08-17 热度:115
每一个程序员应该都知道TCP,UDP协议。UDP是用户数据报文协议,属于OSI模型中的传输层。它是一种无连接的协议,也就说上一报文和下一报文在协议层没有任何联系,同时提供了简单的不可靠的传输服务。 也就是说UDP是不可靠的,如果要想让数据可靠,就需要在业[详细]
-
身为网络工程师,你能说清楚网络的概念吗?
所属栏目:[教程] 日期:2019-08-17 热度:178
一、计算机网络的定义 定义:能够相互共享资源的方式互连起来的自治计算机系统的集合。 自治的计算机是指计算机之间没有明显的主从关系,一台计算机不能强制地启动、停止或者控制网络中的其他计算机。 计算机网络的基本特征:资源共享。资源主要包括硬件、[详细]
-
以太网数据传输原理是这样的,值得收藏
所属栏目:[教程] 日期:2019-08-17 热度:127
首先我们来回顾一下路由的基本概念,什么是路由?所谓路由就是当一台路由器(或其他三层设备)收到一个IP数据包时,路由器查看IP数据包的IP头部,将IP头部中的目的IP地址拿到路由表中进行查找,找到匹配的条目后,依照条目所指示的下一跳IP地址及出接口信息将[详细]
-
缺失数据别怕!这里有份强大的初学者指南
所属栏目:[教程] 日期:2019-08-17 热度:77
实际上,数据科学家80%到90%的工作是数据清理,而这项工作的目的是为了执行其余10%的机器学习任务。没有什么比完成数据集分析后的收获更让人兴奋的了。如何减少清理数据的时间?如何为至关重要的10%的工作保留精力? 根据很多专业人士的经验,对数据清理涉及[详细]
-
民生银行数据中台体系的构建与实践
所属栏目:[教程] 日期:2019-08-17 热度:56
在大数据、人工智能、区块链等新兴技术的驱动下,各家银行纷纷利用新技术制定数字转型改革战略,寻找差异化经营的可行模式。 民生银行积极推进改革转型,2018年在民营企业的银行、科技金融的银行、综合服务的银行战略指导下,民生银行从科技视角制定了技术[详细]
-
真正的大数据问题以及为什么只有机器学习才能解决它
所属栏目:[教程] 日期:2019-08-17 热度:59
为什么很多公司仍在努力构建从采集数据到获得洞察力的平稳运行的管道?他们希望投资和采用机器学习算法来分析数据,并做出商业预测。 但是,不可避免的是,他们应该意识到算法并不是魔法:如果采用的是垃圾数据,得出的就不会是一流的见解。因此,他们雇佣[详细]
-
聊一聊IPv4转IPv6隧道
所属栏目:[教程] 日期:2019-08-17 热度:189
什么情况下要用到IPv6隧道? 连上纯IPv6的网络,比如某些校园网PT站 用在服务器上面可以直接给你的服务器加AAAA记录,用纯IPv6的用户(比如国内的教育网)就可以直接访问你的服务器 内网穿透,别人可以直接用IPv6地址穿透到内网里面 教程 1、注册Tunnel Broke[详细]
-
Iperf网络吞吐量/带宽测试的考虑和总结
所属栏目:[教程] 日期:2019-08-15 热度:106
Iperf测试:使用udp设定带宽2M,5M,10M,同时观察对正进行的ping测试的影响。证明iperf使用udp测试/使用一定或最大带宽时,同样能影响tcp协议的流量。 任务 (1) (使用UDP,参数-u -b 2M)设定不同带宽 #iperf3-c192.168.199.18-p54321-i1-t1800-u-b1M (2) 双[详细]
-
网络智能化有四误区
所属栏目:[教程] 日期:2019-08-15 热度:124
茶余饭后不聊个AI人工智能啥的都觉得自己不是社会人儿,可是对于网络智能化你真的了解吗?你的企业网络是自动化阶段还是智能化阶段,下面一些对于网络智能化的认知有以下误区: 以为工具智能化是网络智能 有人以为使用个智能化工具管理网络,网络就智能化了[详细]
-
大数据核心框架MapReduce过程解析
所属栏目:[教程] 日期:2019-08-15 热度:143
首先MapReduce很明显是分为Map阶段和Reduce阶段。两个阶段分别做什么呢? 小编自己画了个图,大家共勉一下 图中1-2过程为map过程,3为Reduce过程,接下来看一张专业图片,两张对比一起看 在整个mapReduce过程包含很多复杂的处理过程,而我们要学习的就是其[详细]