今天阳光很暖
  文章分类
yarn 13 airflow 7 others 26 ambari 16 dolphinScheduler 2 flink 23 ClickHouse 42 greenplum 7 hadoop 4 mapreduce 2 sqoop 2 flume 1 hbase 14 hdfs 9 hive 22 hudi 15 java 31 kafka 11 langchain 9 langgraph 16 mcp 5 zookeeper 2 python 18 phoenix 11 rag 9 redis 16 Scala 16 spark 58 prometheus 6

others

收录开发工具、Linux、网络、文档与通用工程实践笔记。

hexo中绘制思维导图的方式 hexo中绘制思维导图的方式
1. 插件的使用首先进入到 Hexo 博客的根目录，执行 npm install hexo-simple-mindmap 安装插件。 写新文章时，在需要脑图的地方，按以下格式添加内容。插件会自动将 pullquote 中包裹的内容按照层级顺
2020-04-26 others
hexo
Could not locate executable null\bin\winutils.exe in the Hadoop binaries Could not locate executable null\bin\winutils.exe in the Hadoop binaries
1. 背景在windows环境下运行hadoop或者Spark相关程序经常能遇见下面这样的问题： java.io.IOException: Could not locate executable null\bin\winutils.exe
2019-11-03 others
Hadoop exception
CentOS 安装 rz sz lrzsz CentOS 安装 rz sz lrzsz
服务器版本： [root@node3 ~]# lsb_release -a LSB Version: :core-4.1-amd64:core-4.1-noarch:cxx-4.1-amd64:cxx-4.1-noarch:desktop-
2019-10-08 others
centos linux
使用hexo 搭建Github pages 个人博客 使用hexo 搭建Github pages 个人博客
下面介绍本博客使用hexo搭建github pages的过程。 一、流程介绍安装Homebrew –> 安装nodejs –> 安装hexo、npm –> 本地测试 –> 配置Github ssh key链接 –
2019-07-21 others
hexo
特征工程技术与方法 特征工程技术与方法
原文地址: https://blog.csdn.net/jasonding1354/article/details/47171115 1. 引言在之前学习机器学习技术中, 很少关注特征工程(Feature Engineering), 然而单
2019-04-02 others
others
倒排索引 倒排索引
1. 介绍倒排索引源于实际应用中需要根据属性的值来查找记录。 这种索引表中的每一项都包括一个属性值和具有该属性值的各记录的地址。 由于不是由记录来确定属性值， 而是由属性值来确定记录的位置， 因而称为倒排索引（inverted index）
2018-05-29 others
others
构建数据仓库的分层设计 构建数据仓库的分层设计
1. 前言数据仓库代表的是一套全面的数据管理和使用策略，包含了诸如ETL、调度和建模等完整的理论体系。而现在的“大数据”更多的是指数据量的增加和工具的更新。这两者并没有冲突，实际上，它们可以更好地结合起来。单纯使用Hadoop、Spark、
2018-05-03 others
实例详解机器学习如何解决问题 实例详解机器学习如何解决问题
转载美团文档，原文地址为：https://tech.meituan.com/mt-mlinaction-how-to-ml.html 1. 前言随着大数据时代的到来，机器学习成为解决问题的一种重要且关键的工具。不管是工业界还是学术界，机器学
2018-03-30 others
others
人工智能在线特征系统中的数据存取技术 人工智能在线特征系统中的数据存取技术
转载美团文档，原文地址为：https://tech.meituan.com/online-feature-system.html 1. 在线特征系统主流互联网产品中，不论是经典的计算广告、搜索、推荐，还是垂直领域的路径规划、司机派单、物料智
2018-03-25 others
others
机器学习中的数据清洗与特征处理综述 机器学习中的数据清洗与特征处理综述
转载美团文档，原文地址为： https://tech.meituan.com/machinelearning-data-feature-process.html 1. 背景随着美团交易规模的逐步增大，积累下来的业务数据和交易数据越来越多，这
2018-03-21 others
others
Flume ElasticSearch Sink 配置参数与Agent配置文件示例 Flume ElasticSearch Sink 配置参数与Agent配置文件示例
1. ElasticSearch Sink 介绍ElasticSearchSink 可以向elasticsearch 集群中写入数据。默认情况下写入event类型数据以便 Kibana 能够以图形化方式展示他们，就像 logstash 那样
2017-05-20 others
flume
Datenode 无法启动clusterID = . . . Datenode 无法启动clusterID = . . .
1. 异常日志2016-12-22 12:08:27,264 INFO org.mortbay.log: Started HttpServer2$SelectChannelConnectorWithSafeStartup@0.0.0.0:5
2016-12-22 others
exception hdfs
2 / 3