互联网科技列表
-
大数据零基础学习路线,新人记得保存收藏哦
有很多人对这个东西感兴趣，但是对编程语言也不太了解不过大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。我个人总结了一下 零基础学习大数据的话大概分为
-
kafka故障排查-consumer处理超时导致的异常
最近遇到一个kafka方面的问题，大致就是由于consumer处理业务超时，导致无法正常提交Offset，进而导致无法消费新消息的问题。下面我想从以下几个方面对此次故障排查进行复盘分析：业务背景、问题
-
openstack和Hadoop区别
openstack是一个开源的云计算框架，而Hadoop是一个开源的大数据框架，二者的侧重点不同。区别：云计算是在云平台上提供存储和计算资源。而以Hadoop为模型的大数据是提供了一种分布式的存储（H
-
神器：REST测试工具[wiztools.org restclient]客户端Jar依赖Java安装环境
![神器：REST测试工具[wiztools.org restclient]客户端Jar依赖Java安装环境](https://www.492034.com/uploadfile/thumb/30/db7a8884.jpg)
背景使用Spring Boot开发集群应用，架构风格启用RestFul之后表单Post请求无法Url测试，必须使用专用工具测试主题经过亲身感受，测试发现最靠谱的工具非[wiztools.org res
-
纺织行业管理系统软件_毛织ERP_指点纺织ERP
深圳市指点科技有限公司成立于2011年6月，致力于为纺织行业提供专业纺织贸易ERP信息管理系统及一站式运营服务，助力中国纺织企业实现信息化、智能化发展，推动纺织企业智能化转型升级。指点科技自成立以来，
-
国内电脑ip地址如何隐藏，切换本地网络IP地址
国内电脑ip地址如何隐藏，切换本地网络IP地址
-
区块链快速入门（四）——BFT（拜占庭容错）共识算法
区块链快速入门（四）--BFT（拜占庭容错）共识算法一、BFT简介1、拜占庭将军问题简介拜占庭将军问题（Byzantine Generals Problem）是Leslie Lamport（2013年
-
架构设计杂谈001-软件开发人员的成长之路
软件开发人员的成长路线-1从技术方面来看，基本上就三条主要路线：1、纯技术路线：高级开发人员 →系统设计人员→架构师→资深技术专家／资深架构师2、技术管理路线：研发型技术管理高级开发人员→ 系统设计人
-
hdfs namenode HA高可用方案
2019/2/18 星期一hdfs namenode HA高可用方案1、hadoop-ha 集群运作机制介绍所谓HA，即高可用（7*24 小时不中断服务） //hadoop 2.x 内置了 HA 方案
-
Apache Flink官方文档中文版--Flink是什么？
架构原文链接 Apache Flink是一个用于对无边界和有边界数据流进行有状态计算的框架和分布式处理引擎。Flink设计为运行在所有常见的集群环境中，并且以内存速度和任意规模执行计算。 在这里，
-
MMJ-Spring Boot(Java)获取小程序Openid
背景开发小程序，想使用微信账号唯一码，API是这么说的wx.login...code 换取 session_key接口地址：https://api.weixin.qq.com/sns/jscode2s
-
Spark笔记整理（十二）：日志记录与监控
1 Standalone模式下按照香飘叶子的文档部署好完全分布式集群后，提交任务到Spark集群中，查看hadoop01:8080，想点击查看某个已完成应用的历史情况，出现下面的提示：Event lo
-
大数据分布式平台Hadoop2.7.7 + Spark2.2.2搭建
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapRedu
-
hadoop install
1.Hadoop安装步骤将Hadoop文件拷贝到/usr/local目录下并解压Tar -zxvf hadoop-3.0.0.tar.gz将解压后文件重命名hadoop mv hadoop-3.0.0
-
Git 代码管理以及问题
libcdio: Existing folder found. Checking for updates...fatal: unable to access 'https://github.com/S
-
数平精准推荐 | OCR技术之系统篇
导语：如果说算法和数据是跑车的发动机和汽油，那么系统则是变速箱，稳定而灵活的变速箱，是图像识别服务向前推进的基础。算法、数据、系统三位一体，随着算法的快速发展和数据的日益积累，系统也在高效而稳定地升级
-
Citrix XenDesktop
Citrix XenDesktopCitrix®XenDesktop®是一种桌面虚拟化解决方案，可将Windows桌面转变为任何用户随时随地可通过任何设备访问的按需服务，同时实现无与伦比的简便性和可扩
-
hadoop-2.7.4编译安装
1.protobuf编译安装[root@hadoop1 ~]# yum install svn autoconf automake libtool cmake ncurses-devel openss
-
【总结】一不小心的Map端数据倾斜
MapReduce任务的数据倾斜一般指的是Reduce端数据倾斜，Map端怎么还会出现数据倾斜呢。~~Mapper任务如下图所示，其中一个map任务耗时特别长跑了一个ETL程序，两个Map分别读取两类
-
Elasticsearch重启前禁止分片移动的方法
重启集群前，先设置集群停止分片移动：curl -XPUT http://localhost:9200/_cluster/settings -d '{"transient" : {"cluster.ro