热门IT资讯网

互联网科技列表

  • java转大数据的学习路线

    java转大数据的学习路线

    一、大数据相关的工作介绍二、大数据工程师的技能要求三、大数据学习规划大数据介绍针对以上主要的4个特征我们需要考虑以下问题:数据来源广,该如何采集汇总?,对应出现了Sqoop,Cammel,Datax等

  • 手动添加用户

    手动添加用户

    需求:手动添加用户hive,基本组为hive ,id为5000,vi /etc/group:hive:x:5000:vi /etc/passwd:hive:x:5000:5000:Hive:/home

  • Spark Streaming写数据到Redis

    Spark Streaming写数据到Redis

    Spark Streaming写数据到Redis参考2篇文章:1、Kafka+Spark Streaming+Redis实时系统实践https://www.iteblog.com/archives/1

  • 查看端口是否被占用

    查看端口是否被占用

    查看本机端口是否被占用:netstat -ano | findstr "端口号"找到该端口,看一下最后一列,是进程号pid然后,tasklist | findstr "pid"如果要杀掉,taskki

  • 数字比较大小脚本

    数字比较大小脚本

    用if语句的两种方法来判断两个数字的大小。第一种:#!/bin/basha=$1b=$2#参数的个数不等于2的情况下[ $# -ne 2 ]&&{ echo "USAGE:$0 NUM1

  • java面向对象三大特性之封装

    java面向对象三大特性之封装

    其实以前一直在做Java开发的过程中或者刚开始初学的时候没有想那么多,都是单纯的一直去做,但是自从做了某个项目之后也慢慢发现很多时候,人的精力和脑力是有限的,总是会忘记以前做过或者学过的东西,慢慢就开

  • Flash持续集成自动化单元测试

    Flash持续集成自动化单元测试

    本文关注于宏观上的CI和单元测试技术,某些技术上的具体细节会略过,更多细节请参考最后部分的"参考资料"及文中的链接。作者:杜明坦本文包括:持续集成、单元测试、Mock技术、Case选取策略和示例等五部

  • 【Android】SDK 版本

    【Android】SDK 版本

    Android VersionAPIVersion CodeAndroid 1.01BASEAndroid 1.12BASE_1_1Android 1.53CUPCAKEAndroid 1.64DON

  • No module named 'sklearn.model_selection'问题解决

    No module named 'sklearn.model_selection'问题解决

    想学习一下GridSearchCV,但是报错:No module named 'sklearn.model_selection'后来在Anaconda Prompt里输入:conda list,发现s

  • SpringCloud之Eureka

    SpringCloud之Eureka

    【前面的话】SpringCloud为开发人员提供了快速构建分布式系统的一些工具,包括配置管理、服务发现、断路器、路由、微代理、事件总线、全局锁、决策竞选、分布式会话等等。它配置简单,上手快,而且生态成

  • 让Birt报表脚本数据源变得既简单又强大

    让Birt报表脚本数据源变得既简单又强大

    概述:运行在 JVM 上的 SQL 函数和存储过程总所周知,有些数据库没有强大的分析函数(eg. Mysql), 有些数据库没有存储过程(eg. Vertica),当遇到复杂的数据计算,往往只能通过

  • 报表如何实现特殊分组统计功能?

    报表如何实现特殊分组统计功能?

    报表工具一般都会提供按某个字段分组的表达式,如按自然月分组统计,但有时候需要按不规则月份来分组,例如,某企业从 1 月 16 日开始实行某种特殊的价格策略或营销活动,因此以后都想以每月 16 号为界来

  • Hadoop启动脚本概览

    Hadoop启动脚本概览

    启动脚本概览:1、{sbin}start-dfs.sh①hdfs-config.sh ---> {libexec}hadoop-dfs.sh②hadoop-daemons.sh --hostnames

  • 批量随机键值查询测试

    批量随机键值查询测试

    当数据量巨大时,使用大批量随机键值集获取对应记录集合,不仅仅考验数据库软件本身,更在于程序员对数据的理解!如何在硬件资源有限的情况下将性能发挥到极致?本次测试主要针对集算器组表索引实现的批量键值取数性

  • 手机网络抓包步骤,用于分析通信协议、流量

    手机网络抓包步骤,用于分析通信协议、流量

    adb rootadb remountadb push d:\tcpdump /system/bin/tcpdumpadb shell chmod 6755 /system/bin/tcpdumpad

  • Hadoop分布式处理框架

    Hadoop分布式处理框架

    【简介】Hadoop是一个由Apache基金会所开发的分布式系统基础架构。1、解释下什么是Apache基金会?答:Apache软件基金会(也就是Apache Software Foundation,简

  • Spring Boot调用SOAP Web Service

    Spring Boot调用SOAP Web Service

    Spring Boot项目中,调用遗留的SOAP Web Service,方法很简单,仅需引入spring-boot-starter-web-services。 org.springframew

  • SpringBoot学习(三)—— springboot快速整合swagger文档

    SpringBoot学习(三)—— springboot快速整合swagger文档

    @[toc]简介优点后端根据swagger语法,自动生成漂亮规范的接口文档。做交互测试。劣势侵入式的,影响程序运行,尤其是传参的时候。注意swagger 分1.2版本和2.0版本,差异较大。swagg

  • 【hadoop】hive 安装实践

    【hadoop】hive 安装实践

    1.下载Hive安装包:官网下载:http://hive.apache.org/downloads.html2.上传Hive的tar包,并解压:建议和hadoop目录在一级,方便后续使用;解压:tar

  • Deploy Apache Flink Natively on YARN/Kubernetes

    Deploy Apache Flink Natively on YARN/Kubernetes

    作者:任春德Apache Flink作为下一代大数据计算引擎,在迅速发展强大中,其内部架构也在不断优化重构,以适应更多运行时环境和更大计算规模,Flink Improvement Proposals-