互联网科技列表
-
爬虫之header
有些网站不会同意程序直接用上面的方式进行访问，如果识别有问题，那么站点根本不会响应，所以为了完全模拟浏览器的工作，我们需要设置一些Headers 的属性。首先，打开我们的浏览器，调试浏览器F12，我用
-
10款超好用的工具助力大数据与分析技术
考虑到现有技术解决方案的复杂性与多样化，企业往往很难找到适合自己的收集与分析工具。然而，混乱的时局之下已经有多种方案脱颖而出，证明其能够帮助大家切实完成大数据分析类工作。下面我们将整理出一份包含十款工
-
前端性能优化点（笔记）
1、减少HTTP请求（合并请求）。2、使用CDN数据加速（各地独立的内容分发机制）。3、合理使用Expires头来增加缓存效果。4、使用动态或静态压缩技术，并且压缩JS或HTML等文本格式中的字符数，
-
微信提示浏览器打开代码——遮罩层提示代码实现！
微信中打开链接时，弹出遮罩提示用户，请点击右上角在浏览器中打开如何实现？经搜集整理并且验证可用后总结出可用版本，给有需要的猿友以下是代码部分：第一步：判断微信的UA。var ua = navigato
-
yum安装报错“Error: xz compression not available”
在测试服务器进行docker学习，有些centos7软件安装上和自己的服务器不兼容所以导致yun下载软件时报错：Error: xz compression not available对于报错解决办法：
-
python基础知识 04 数学的基础知识
课程三 数字的基础知识python控制台可以执行的当做计算器去执行算数比如在python控制台执行执行[root@flink-slave5 ~]# ipythonPython 3.7.4 (defau
-
Shell中通过机器人发送钉钉群消息
场景:在平时的工作中，经常需要执行一些定时任务，并且当定时任务执行失败后需要告警出来到钉钉群，使用[钉钉机器人]可以简单快速的帮我们完成这件事情。简单使用curl 'https://oapi.ding
-
敏捷开发Scrum方法的介绍
敏捷开发Scrum是什么？一般大家对敏捷开发Scrum的了解可能停留在概念的层面上，而对于Scrum的使用方法了解相对较少。今天就跟大家聊聊Scrum的运用。1.Scrum简介Scrum是一个增量的、
-
黑盒测试之边界值分析
首先，为什么使用边界值分析法？答：历史经验证明，大量的错误发生在输入或输出范围的边界值上，而不是在输入范围的内部。边界：1、测试对象规格说明中明确的定义输入域的边界值。2、开发人员容易对边界理解错误。
-
conftest.py文件的使用方法
本文以Python的conftest.py文件为例，为大家分析conftest.py文件的使用方法。阅读完整文相信大家对conftest.py文件的使用方法有了一定的认识。1.conftest.py与
-
Spark 系列（八）—— Spark SQL 之 DataFrame 和 Dataset
一、Spark SQL简介Spark SQL 是 Spark 中的一个子模块，主要用于操作结构化数据。它具有以下特点：能够将 SQL 查询与 Spark 程序无缝混合，允许您使用 SQL 或 Data
-
九、HDFS安全模式，快照，回收站，配额管理的用法
一、安全模式hdfs最开始开始开启集群的时候，会处于安全模式下，此时内部正检查集群中的副本率是否满足配置文件中所配置的副本率1、如果不满足就需通过节点间的复制满足副本率后才会退出安全模式。2、如果大于
-
robot自动化测试环境安装
简单说下安装思路，先装语言（python3)，再安装包管理工具（pip），然后才是自动化框架(robot)和lib插件（requests等）。对于一些基本的概念，不过多解释，例如什么是python，什
-
libcurl第十课 HTTPS交互
场景跟乐橙云访问，需要使用HTTPS协议额外配置，否则执行返回CURLE_UNSUPPORTED_PROTOCOL错误1）libcurl版本升级到7.61.0版本2）libcurl项目属性中预编译器添
-
基于cdh的Kafka配置及部署（详细，成功运行）
一、下载http://archive.cloudera.com/kafka/parcels/2.2.0/wget http://archive.cloudera.com/kafka/parcels/2
-
深入探讨为什么hbase读数据（scan）性能底下
2019/3/7 星期四深入探讨为什么hbase读数据（scan）性能底下简述：和写流程对比起来，HBase读数据是一个更加复杂的操作流程，这主要基于两个方面的原因：其一是因为整个HBase存储引擎基
-
docker预告-命令与安装包
docker 预告############1yum install --installroot=/home/chen/vhost bashyum install --installroot=/hom
-
skyline应用-加载wms图层
1、发布mxd工程将mxd用arcgis server进行发布，发布的时候，要勾选上支持WMS服务和WFS服务；2、TE加载wms在图层工具栏上加载影像图层，选择加载wms图层，设置wms服务的地址，
-
kylin build cube #3 Step Name: Extract Fact Table Distinct Columns
java.lang.NoSuchMethodError: org.apache.hadoop.yarn.proto.YarnProtos$LocalResourceProto.hashLong(J)I
-
符合skyline的3dml网络发布服务
技术交流群：665060698使用java web实现；接口符合skyline的3dml模型形式；通过简单的发布界面，直接发布3dml模型；实现te pro在客户端读取数据；实现在te pro客户端的