加载中…
个人资料
孙成子子
孙成子子
  • 博客等级:
  • 博客积分:0
  • 博客访问:544,084
  • 关注人气:31
  • 获赠金笔:0支
  • 赠出金笔:0支
  • 荣誉徽章:
搜博主文章
访客
加载中…
博文
(2021-01-01 00:00)
标签:

life

杂谈

分类: life


welcometo2021,man
你好,2021
 转眼一年又过去了。 




2020,无论你是得到许多,还是失去不少,它终将过去。
2021,无论你是满怀信心,还是不敢向前,它终将到来。
阅读  ┆ 评论  ┆ 转载 ┆ 收藏 
标签:

flume

sink

mysql

maven

分类: bigdata



由于篇幅美观性,将flume实现mysql写入的自定义sink单独一篇文章。


引用sink2的配置
#####发送到本地文件#####
# 订阅Sink
agent2.sinks.k2.type = org.flume.sink.mysql.MysqlSink
agent2.sinks.k2.hostname = 10.19.138.232
agent2.sinks.k2.port = 3306
agent2.sinks.k2.databaseName = internet
agent2.sinks.k2.tableName = i_intelligentcustservice
agent2.sinks.k2.username = username
agent2.sinks.k2.password = password
agent2.sinks.k2.batchSize = 20



吐槽下,IDEA使用MAVEN开发简直不要太好用, 比之前的eclipse好用,应用第三方包,直接在pom.xml里配置,自动下载。
新建项目的话需要设置下mavent仓库的位置。
阅读  ┆ 评论  ┆ 转载 ┆ 收藏 
标签:

flume

sink

kafka

kerberos

mysql

分类: bigdata


首先,好久没更新博客,原因是自己太懒,最近在搞接口的开发,本人开发水平属于小白级别。本次需要搭建一个HTTP POST接口,接受JSON类型的传参,能够发送数据给kafks服务端和写入mysql数据库,原来想自己编写一个JAVA程序来实现,咨询同事后,得知flume可以实现对应的功能。

本文介绍flume的http source配置,配置两个sink,分别发送数据给kafka和mysql。



1、####配置/etc/hosts,添加kafka和zookeeper地址
##(kafka:TCP 6667    zookeeper:TCP 2181       x3/x4 : TCP/UDP    88)
##kafka
11.11.11.51   c6h551 h551
##zookeeper
11.11.11.201  c6x1   x1


2、##### 设置环境变量


阅读  ┆ 评论  ┆ 转载 ┆ 收藏 
(2020-01-01 00:00)
标签:

life

2019

2020

分类: life
阅读  ┆ 评论  ┆ 转载 ┆ 收藏 
(2019-01-01 00:00)
标签:

life

目标

长远

投资自己

价值观

杂谈

分类: life
时间这个词语,真的是不得了, 转眼间已经到了而立之年。

2018,无论你是得到许多,还是失去不少,它终将过去。
2019,无论你是满怀信心,还是不敢向前,它终将到来。

基于这个信念,他就不再把精力放在金钱上,而是放在未来发展的战略上,提升自己的能力价值,让自身的高价值来吸引金钱流向自己,而他后续的行动上
阅读  ┆ 评论  ┆ 转载 ┆ 收藏 
标签:

sqlt

分类: oracle


从本文开始我们来一步步学习ORACLE的SQL优化工具,做优化很久一直以来想好好研究研究这套脚本,择日不如撞日现在就开始吧。

本文是介绍环节,先从整体上认识一下, SQLTXPLAN工具是用于做SQL优化使用, 包括基本和高级方法如下:
主要方法:
    XTRACT
    XECUTE
    XTRXEC
    XPLAIN
    XTRSBY
    XPREXT
    XPREXC
特殊方法:
    COMPARE
    TRCANLZR
    TRCAXTR
    TRCASPLIT
    XTRSET
高级方法和模块:
    PROFILE
    XGRAM
    XPLORE
  &nbs
阅读  ┆ 评论  ┆ 转载 ┆ 收藏 
  

新浪BLOG意见反馈留言板 欢迎批评指正

新浪简介 | About Sina | 广告服务 | 联系我们 | 招聘信息 | 网站律师 | SINA English | 会员注册 | 产品答疑

新浪公司 版权所有