宏观上； 模块调用关系图复杂问题简单化; 清晰数据结构; 1天数据1层 1. 数据仓库DW 数据来源：　　爬虫 日志采集系统 业务数据 财务系统 数据去向：　　报表系统、用户画像、推荐系统、机器学习、风控系统 项目需求分析 ① 数据采集平台搭建　　…

DNS是什么大家已经很清楚了，就不多做累述了。 一、DNS解析过程 1.1 DNS解析的顺序 linux进行DNS解析的顺序，先查找/etc/hosts文件，如果没有再通过配置/etc/resolv.conf里面设置的DNS服务器进行DNS解析。 Centos6的文件设置： # cat…

目录 前言 一、SQL Server基础 1. SQL Server 2012安装启动 navicat远程连接 2. SQL Server概念 数据库的组成 数据库中常用对象 默认库介绍 3. T-SQL语言 创建数据库 创建表 插入数据 基础语法总结 4. sqlserver权限 新建用户并赋予权限 权限总结 二、Sqlser…

SQLSERVER监控复制并使用数据库邮件功能发告警邮件 正题 上个月月底的时候因为要搬迁机房，需要将一个数据信息数据库先搬到我们的机房，然后将客户的数据库 从原来的机房A搬到机房B，原来我们的数据信息库（DataInfo）是放…

文章目录 采集通道系统架构集群规划准备工作1 虚拟机准备(克隆3台虚拟机)1.1 创建用户1.2 给用户增加ROOT权限1.3 修改主机名1.4 修改网卡信息1.5 关闭防火墙1.6 配置域名映射1.7 文件夹准备1.8 修改windows的hosts 2 免密登陆2.1 生成密钥2.1 拷贝密钥至其它机器 3 安装JDK配置…

学习任何的区块链，首先就需要了解其中的基本功能，而要了解基本功能当然是动手尝试一遍，但是在正式网中，很多功能是没办法测试的，或者测试成本比较高，所以就需要搭建一个测试网，可以对该测试网任…

概况 技术选型 图片来自尚硅谷。 服务器规划 服务名称子服务hadoop102hadoop103hadoop104HDFSNameNode+HDFSDataNode+++HDFSSecondaryNameNode+YarnNodeManager+++YarnResourceManager+ZookeeperZookeeper Server+++Flume（日志）Flume++KafkaKafka+++Flume（消费）Flume+Hiv…

1 数据仓库概念 数据仓库（ Data Warehouse ），可简写为DW或DWH。数据仓库，是为企业所有决策制定过程，提供所有系统数据支持的战略集合。 通过对数据仓库中数据的分析，可以帮助企业，改进业务流程…