• Hadoop、Spark等5种大数据框架比照,你的项目该用哪种?

    2018-10-15 2
    Hadoop、Spark等5种大数据框架比照,你的项目该用哪种?大家还在纠结用哪个框架合适?一篇文章帮你快速分辨Hadoop、Spark、Storm、Samza和Flink这五种大数据框架的优势和局限大数据是收集、整理、解决大容量数据集,并从中取得见地所需的非传统战略和技术的总称。尽管解决数据所需的
  • 「Linux」Apache2.2.32 + MySQL5.7.16 + PHP5.6.34

    2018-10-15 2
    OS: 6.8 x64 基本服务安装http: 2.2.32mysql: 5.7.16php: 5.6.34# 需要的软件包:autoconf2.63自带freetype2.3.11自带libjpeg1.2.1自带libpng1.2.49自带gd2.0.35自带libxml22.7.6自带zlib1
  • 使用Apache Kafka和KSQL实现流解决普及化(2)

    2018-10-15 2
    本文要点针对用户操作、操作仪表板、在线分析等应用场景,使用Apache Kafka和KSQL构建数据集成和解决应用程序。流解决的主要好处包括:数据加强一次性完成、低推迟解决、向用户Ops团队实时发送通知。你可以使用变化数据捕获(CDC)工具把数据库的数据以及任何后续的变化镜像到Kafka主题。使用K
  • Java开发小技巧:使用Apache POI读取Excel

    2018-10-15 2
    前言在数据仓库中,ETL最基础的步骤就是从数据源抽取所需的数据,这里所说的数据源并非仅仅是指数据库,还包括excel、csv、xml等各种类型的数据接口文件,而这些文件中的数据不肯定是结构化存储的,比方各种各样的报表文件,往往是少量复杂的表格结构,其中不仅有我们需要的数据,还有少量冗余的、无价值的数
  • 使用Apache Kafka和KSQL实现普及化流解决(1)

    2018-10-15 2
    本文要点大多数的流解决技术,需要开发人员使用Java或者Scala等编程语言编写代码。KSQL是Apache Kafka的数据流SQL引擎,它使用SQL语句替代编写大量代码去实现流解决任务。KSQL基于Kafka的Stream API构建,它支持过滤、转换、聚合、连接、加窗操作和Sessioniza
  • shell日常实战——nginx日志分析

    2018-10-15 2
    统计2018/8/6 PV量grep "06/Aug/2018" access.log|wc -l统计当天8:00 到9:00的PVawk '$4>="[06/Aug/2018:21:59:57" && $410){print i ,ips[i]}}}' acce
  • 「系统架构」BIND结合NGINX+PHP实现DNS服务器URL转发

    2018-10-15 2
    前几天在公司分享会偶尔说起DNS,忽然提到域名经营商提供的URL转发功能,即将指定的域名转发到相关域名,且可以在地址栏显示或者隐藏目标URL。争论了很久,很多同学都认为是DNS服务器自身提供了这个功能。众所周知,DNS服务器只提供域名的解析功能,而URL转发是HTTP范畴,以下详细说明下我自己的实现
  • 树莓派3B+安装Nginx+MySQL+PHP

    2018-10-15 2
    在树莓派搭建WordPress已经不足为奇,其余教程也只是以LAMP为主,不过Nginx已经可以称为取代Apache的高性能Web服务器,占用内存低而且能取得更高的并发访问数,所以也成为树莓派建站的首选web服务器。lnmp的安装与配置安装nginx1sudo apt-get -y install
  • Nginx 的正向代理商、反向代理商、负载均衡介绍

    2018-10-15 2
    一、原理概述1 正向代理商正向代理商浅显的讲就是通过Nginx服务器,让用户端去访问本来访问不到的服务器。例如我们常见的翻墙去访问国外的网站。此时Nginx服务器就是作为一个中介。这种代理商方式中,服务器清楚的知道需要访问的目标网站,但是屏蔽了请求的来源,我们只知道请求从哪个代理商服务器过来,但是不
  • Nginx可以做什么?看完这篇你就懂了

    2018-10-15 2
    本文只针对Nginx在不加载第三方板块的情况能解决哪些事情,因为第三方板块太多所以也详情不完,当然本文本身也可能详情的不完整,毕竟只是我个人使用过和理解到过得,欢迎留言交流。Nginx能做什么——反向代理商——负载均衡——HTTP服务器(动静分离)——正向代理商以上就是我理解到的Nginx在不依赖第
  • 聊聊storm的GraphiteStormReporter

    2018-10-14 4
    序本文主要研究一下storm的GraphiteStormReporterGraphiteStormReporterstorm-core-1.2.2-sources.jar!/org/apache/storm/metrics2/reporters/GraphiteStormReporter.javap
  • Wordpress建站:如何在自己电脑上本地环境调试wordpress网站?

    2018-10-14 3
    wordpress网站需要的运行环境是lamp或者者是lnmp的,我们可以在本地的电脑上安装一个环境包,WampServer。WampServer就是Windows 下的Apache +Mysql +PHP集成安装环境,即在window下的apache、php和mysql的服务器软件。Wordpre
  • Linux社区-搭建高可用的web群集(全过程)

    2018-10-14 3
    本章技术点:群集架构篇 大家好,今天给大家带来web高可用,其中服务包括(Nginx,PHP,MySQL,Memcached,zabbix,keepalived以及Xcahce插件等;其中包含: Nginx (Nginx的安装及Nginx反向代理商配置,对Nginx进行优化)MySQL(对Mysql
  • 秒懂Hadoop和Spark联络与区别

    2018-10-14 4
    谈到大数据,相信大家对Hadoop和Apache Spark这两个名字并不陌生。但我们往往对它们的了解只是提留在字面上,并没有对它们进行深入的思考,下面不妨跟我一块看下它们到底有什么异同。处理问题的层面不一样首先,Hadoop和Apache Spark两者都是大数据框架,但是各自存在的目的不尽相同。
  • springcloud和Dubbo的比照

    2018-10-14 4
    1:背景Dubbo,是阿里巴巴服务化治理的核心框架,并被广泛应用于阿里巴巴集团的各成员站点。阿里巴巴近几年对开源社区的贡献不管在国内还是国外都是引人注目的,比方:JStorm捐赠给Apache并加入Apache基金会等,为中国互联网人争足了面子,使得阿里巴巴在国人眼里已经从电商更新为一家科技公司了。
  • 构建高可用ZooKeeper集群

    2018-10-14 4
    作者:cyfonly;链接:cnblogs.com/cyfonly/p/5626532.htmlZooKeeper 是 Apache 的一个顶级项目,为分布式应用提供高效、高可用的分布式协调服务,提供了诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知和分布式锁等分布式基础服务。因为 ZooK
  • 以集成Redis为例来讲解Storm与外部系统,以及其它库的集成

    2018-10-14 4
    一、详情我们先看下官网上的详情:storm官方已经给我们封装了以下外部系统的集成,我们直接引用相关jar包,即用http://storm.apache.org/releases/1.1.2/index.htmlApache Kafka 集成, 新的 Kafka Consumer(消费者)集成Apac
  • 在机器学习、大数据等领域工作,该学Hadoop还是Spark?

    2018-10-14 4
    相信看这篇文章的你们,都和我一样对Hadoop和Apache Spark的选择有肯定的疑惑,今天查了不少资料,我们就来谈谈这两种 平台的比较与选择吧,看看对于工作和发展,究竟哪个更好。一、Hadoop与Spark1.SparkSpark是一个用来实现快速而通用的集群计算的平台。速度方面,Spark扩
  • 掌握HTTPClient的一系列相关问题,让你恍然大悟(六)

    2018-10-14 4
    HTTPClient相关问题1. 什么是httpClient?HttpClient 是Apache Jakarta Common 下的子项目,可以用来提供高效的、最新的、功能丰富的支持 HTTP 协议的用户端编程工具包,并且它支持 HTTP 协议最新的版本和建议。2. 什么是HttpClient不能
  • Nginx进阶ssl、fpm、rewrite、cache配置

    2018-10-14 3
    一、配置https网站1、自建CA(1)生成私钥文件mkdir -p /etc/pki/CA/private #创立私钥保存的目录(umask 077;openssl genrsa -out /etc/pki/CA/private/cakey.pem 4096) #创立私钥ll /etc/pki/C
手机二维码手机访问领取大礼包
返回顶部