V2Ray配置常见问题 1. 打开客户端闪退 可能原因：客户端的配置文件上不正确。 修正方法：请仔细检查配置文件并修改正确。 2. 客户端提示 Socks: unknown Socks version: 可能原因：客户端配置的 inboud 设置成了 socks 而浏览器的代理协议设置为 http。 修正方法：修改配置文件使客户端的 inboud 的 protocol 和浏览器代理设置的协议保持一致。 3. 客户端提示 Proxy|HTTP: failed to read http request > malformed HTTP request "\x05\x01\x00" 可能原因：客户端配置的 inboud 设置成了 https 而浏览器的代理协议设置为 socks4 或者 socks...阅读全文
###引言： java接入三方运营商服务接口，需要可供回调的公网接口，并在本地两台（及以上）调试接口服务，于是使用开源frp进行穿透，nginx搭配负责分发请求到不同机器。 ###安装环境： 1. ubuntu 16.04 LTS 一台服务器 两台客户机 2. 已安装好nginx ###frp配置过程： 参考我之前博文[http://blog.csdn.net/yan_chou/article/details/53406095](http://blog.csdn.net/yan_chou/article/details/53406095) 并分端口配置两份 ###一台客户机中nginx配置过程： 修改nginx.conf sudo vim /etc/nginx/nginx.conf 修改ht...阅读全文
问题场景： 1、国内访问maven默认远程中央镜像特别慢 2、用阿里的镜像替代远程中央镜像 3、大部分jar包都可以在阿里镜像中找到，部分jar包在阿里镜像中没有，需要单独配置镜像 我想达到的目标： 在maven中配置一主一副两个镜像，大部分jar直接通过主镜像可以找到，部分特殊jar在主镜像中找不到时，自动去副镜像中寻找。 我所处的阶段： 修改了maven的全局配置文件setting.xml(其所处位置maven的安装目录maven/apache-maven-3.3.9/conf/setting.xml)： 1、配置了本地仓库：
自——找不到出处了。。ref->这里 简介 SolrCloud是Solr4.0版本以后基于Solr和Zookeeper的分布式搜索方案。SolrCloud是Solr的基于Zookeeper一种部署方式。Solr可以以多种方式部署，例如单机方式，多机Master-Slaver方式。 特色功能 集中式的配置信息使用ZK进行集中配置。启动时可以指定把Solr的相关配置文件上传Zookeeper，多机器共用。这些ZK中的配置不会再拿到本地缓存，Solr直接读取ZK中的配置信息。配置文件的变动，所有机器都可以感知到。另外，Solr的一些任务也是通过ZK作为媒介发布的。目的是为了容错。接收到任务，但在执行任务时崩溃的机器，在重启后，或者集群选出候选者时，可以再次执行这个未完成的任务。 自动容错SolrC...阅读全文
文地址： http://www.111cn.net/sys/linux/65797.htm linux中有很多命令已经存在了N多年，渐渐一些已被一些新命令所代替，不过由于习惯的原因，很多时候我们并不能一下子适应过来 ，例如ifconfig之于ip命令。该命令是用来替代service和chkconfig两个命令的 — 尽管个人感觉还是后者好用。 为了顺应时间的发展，这里总结下。在目前很多linux的新发行版本里，系统对于daemon的启动管理方法不再采用SystemV形式，而是使用了sytemd的架构来管理daemon的启动。 一、runlevel 到 target的改变 在systemd的管理体系里面，以前的运行级别（runlevel）的概念被新的运行目标（target）所取代。tartge...阅读全文
ubuntu16.04 自动挂载新分区到指定目录下 Author anteoy@gmail.com | Posted 2016-12-28 23:08:00 ###引言： 起因：ubuntu系统使用固态硬盘120G不够使用，如今已无法满足日常需要，于是增加了一枚机械硬盘，分别分了两个空闲分区，依次使系统自启时挂在到/home/和/usr/指定目录下 ###安装环境： 1. ubuntu 16.04 LTS 2. 有剩余未分配空间的硬盘 ###安装过程： 1. 查看硬盘所有分区并记录下待挂在分区（主要以硬盘，分区大小和格式确定） fdisk -l 2. 格式化分区为ext4 mkfs.ext4 /dev/sda7 3. 查看分区UUID sudo blkid 4. 编辑系统挂载配置文件/etc...阅读全文
目地 为k8s的docker服务提供http/https代理,解决docker无法pull gcr.io/google_containers 谷歌镜像问题 环境 GCE ubuntu 16.04 k8s集群机器 ubuntu16.04 简要步骤 GCE 搭建squid正向http/https代理服务器 直接使用apt-get install 安装 apt-get install squid3 -y 注意:配置文件在/etc/squid或/etc/squid3下,根据系统不同可能会有一点差异,由于这里进行快速安装,不需要暴露端口给外部使用,也不需要密码,所以配置文件我这里保持默认 GCE 安装stunnel代理服务器 stunnel主要用来在GCE和k8s机器上代理的数据传输进行加密,否则明文...阅读全文
Kiali 为网格管理和可观察性提供了良好的用户体验的可视化工具;Kiali 为我们提供了查看相关服务与配置提供了统一化的可视化界面，并且能在其中展示他们的关联；同时他还提供了界面让我们可以很方便的验证 istio 配置与错误提示;官方功能介绍大致如下：目前官方没有提供能够方便用户一键部署的 yaml 配置文件，需要 clone 项目代码并运行 make k8s-deploy进行部署，为了部署方便我整理了一份部署 yaml 如下；将该配置复制保存为文件然后运行 kubectl apply -f deploy-kiali.yaml -n istio-system即可；(注意，一定修改配置里 Secret 里面的用户名密码配置，不然就只是简单的 admin，admin); 注:目前(18-08-...阅读全文
tags: ip_local_port_range 端口范围 sysctl Linux中有限定端口的使用范围，如果我要为我的程序预留某些端口，那么我需要控制这个端口范围， 本文主要描述如何去修改端口范围。 1 2 /proc/sys/net/ipv4/ip_local_port_range的原文解释： The /proc/sys/net/ipv4/ip_local_port_range defines the local port range that is used by TCP and UDP traffic to choose the local port. You will see in the parameters of this file two numbers: The fir...阅读全文
前言 let’s encrypt 是免费的ssl/tls 证书颁发的机构，致力于实现整个Web的TLS/SSL认证。https可降低网站被劫持的风险，并具有更好的加密性能，避免用户信息泄露，增强网站的安全性。 准备 已解析正确的域名 www.anteoy.me A记录所指向的服务器 nginx 环境 GCE ubuntu16.04 let’s encrypt认证过程 certbot是let’s encrypt的官方客户端工具，客户端在认证过程中会在host上生成自己的加密文件，let’s encrypt服务端访问客户端提供的域名并尝试去获取这个文件，如果成功获取并确认是客户端生成的正确文件，则确认客户端所在主机的域名控制权，然后开始为此域名颁发CA证书。 部署过程 使用nginx以便let’...阅读全文
接着前一次的文章，继续介绍SSH的用法。 ======================================= SSH原理与运用（二）：远程操作与端口转发 作者：阮一峰 （Image credit: Tony Narlock） 七、远程操作 SSH不仅可以用于远程主机登录，还可以直接在远程主机上执行操作。 上一节的操作，就是一个例子： $ ssh user@host 'mkdir -p .ssh && cat >> .ssh/authorized_keys' < ~/.ssh/id_rsa.pub 单引号中间的部分，表示在远程主机上执行的操作；后面的输入重定向，表示数据通过SSH传向远程主机。 这就是说，SSH可以在用户和远程主机之间，建立命令和数据的传输通道，因此很多事情都可以通...阅读全文
$ sudo netstat -natl | grep ":8080" | awk '{print $6}' | sort | uniq -c | sort -nr 2 ESTABLISHED 1 LISTEN ...阅读全文
我们做弱电监控系统的时候，都避免不了要跟IP地址打交道，比如摄像头、NVR、服务器等这些设备安装好之后，就需要给它们配上IP，那这个IP地址你了解嘛?今天我们就一起来聊聊什么是内网、公网和NAT地址转换? 1、内网、公网和NAT的定义 内网也叫局域网，从范围上来讲内网就是小部分的网络，一般指的是特定环境下组成网络，比如某一个家庭多台计算机互联成的网络，也可以学校和公司的大型局域网，内网的IP一般都是192.168.1.100，192.168.0.100,172.16.1.100……这些都是内网IP，内网是不能直接连接外网，比较封闭，但在内网里面可以实现文件管理，应用软件共享、打印机共享等服务。 家庭局域网 外网又被叫做互联网，是连接不同地区局域网或者城域网计算机的通信的远程网络。通常可以跨接...阅读全文
Spring CloudSpring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具（例如配置管理，服务发现，断路器，智...卡卡罗2017阅读 89,952评论 13赞 12...阅读全文
Spring CloudSpring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具（例如配置管理，服务发现，断路器，智...卡卡罗2017阅读 104,206评论 12赞 12...阅读全文
概要 settings.xml有什么用？ 如果在Eclipse中使用过Maven插件，想必会有这个经验：配置settings.xml文件的路径。 settings.xml文件是干什么的，为什么要配置它呢？ 从settings.xml的文件名就可以看出，它是用来设置maven参数的配置文件。并且，settings.xml是maven的全局配置文件。而pom.xml文件是所在项目的局部配置。 Settings.xml中包含类似本地仓储位置、修改远程仓储服务器、认证信息等配置。 settings.xml文件位置 settings.xml文件一般存在于两个位置： 全局配置: ${M2_HOME}/conf/settings.xml 用户配置: \({user.home}/.m2/settings.x...阅读全文
通常情况下，namespace对应的URI是一个存放XSD的地址，尽管规范没有这么要求。如果没有提供schemaLocation，那么Spring的XML解析器会从namespace的URI里加载XSD文件。我们可以把配置文件改成这个样子，也是可以正常工作的：[html] view plain copy
ICMP端口号的深思朋友面试的时候回来问我：小温，说一下ICMP的端口号是多少呢？当时我也懵了，我是这样回答的：ICMP是Internet控制报文协议，没有端口号吧？这个不太清楚啊。呵呵，一个常见的协议问题，很纠结：所以稍作总结：ICMP简介：ICMP是（Internet Control Message Protocol）Internet控制报文协议。它是TCP/IP协议族的一个子协议，用于在IP主机、路由器之间传递控制消息。控制消息是指网络通不通、主机是否可达、路由是否可用等网络本身的消息。这些控制消息虽然并不传输用户数据，但是对于用户数据的传递起着重要的作用。ICMP功能：从技术角度来说，ICMP就是一个“错误侦测与回报机制”，其目的就是让我们能够检测网路的连线状况﹐也能确保连线的准确性...阅读全文
luotuo44的专栏 05-12 5343 Linux安装软件时，/etc/profile、/etc/bash.bahsrc、~/.profile、~/.bashrc的用途 之前安装Linux的一些软件时，总要修改Linux的配置文件。当时也是一知半解。而且，网上有些安装教程，会说，修改配置文件后要重启Linux。但事实上是不需要重启的。 Linux安装时可能要修改的配置文件：/etc/profile、/etc/bashrc(ubuntu没有这个文件，对应地，其有/etc/bash.bashrc文件。我用的是ubuntu系统，所以下面将一律使用... 陈光泉的博客 07-13 324 Centos6 系统配置文件 /etc/profile, ~/.bash_profile 等区别 各环境变...阅读全文
今天和两个同事讨论Log4j，他们都需要解决一个问题，怎么分开输出Logger。这么讲不清楚，举个例子： Java代码 package com.gmail.at.ankyhe.log4jtest; import org.apache.log4j.Logger; public class ClassA { private static Logger logger = Logger.getLogger(ClassA.class.getName()); public ClassA() { logger.info("ENTER ClassA()"); } public void foo() { logger.info("foo()"); bar(); } public void bar() { Lo...阅读全文
一般查看一台服务器，为了查看一台机器上运行的端口及监听的服务，常会用到netstat -luntp这个命令。 但是不是每一个运行的进程都能有pid显示，今天就遇到如下情况： 1、通过netstat 中加入一个e得参数查看，启动对应端口的用户。 netstat -letnp|grep 2049 tcp 0 0 0.0.0.0:2049 0.0.0.0:* LISTEN 0 109911170 - tcp6 0 0 :::2049 :::* LISTEN 0 109911174 - 2、通过lsof -i:port 查看出，占用端口中启动的程序。 root@iZ239fkpuw4Z:~# lsof -i:2049 root@iZ239fkpuw4Z:~# 3、另一种可能是,这是一个内核线程,这没...阅读全文
网上有一些maven-shade-plugin替代maven-assembly-plugin的文章，原因是代maven-assembly-plugin打出的jar包中要么是不能设置Main-Class，要么spring的META-INF/spring.*文件相互覆盖了。对于这两个问题，maven-assembly-plugin在当前的版本(3.1.0)中都可以解决了(方法见https://my.oschina.net/u/2377110/blog/1584205)。 实际上这两个插件所针对的用途其实是有差异的，而它们与maven默认的maven-jar-plugin都是打包插件，简单的区别如下： plugin function maven-jar-plugin maven 默认打包插件，用来...阅读全文
TaskManger与Slots Flink中每一个worker(TaskManager)都是一个JVM进程，它可能会在独立的线程上执行一个或多个subtask。为了控制一个worker能接收多少个task，worker通过task slot来进行控制（一个worker至少有一个task slot）。 每个task slot表示TaskManager拥有资源的一个固定大小的子集。假如一个TaskManager有三个slot，那么它会将其管理的内存分成三份给各个slot。资源slot化意味着一个subtask将不需要跟来自其他job的subtask竞争被管理的内存，取而代之的是它将拥有一定数量的内存储备。需要注意的是，这里不会涉及到CPU的隔离，slot目前仅仅用来隔离task的受管理的内存。...阅读全文
log4j logback logger和root的关系 Log4j或logback的配置文件中，root和logger是父子的关系。Logger的appender根据参数additivity决定是否要叠加root的appender，logger的级别是其自身定义的级别，和root的级别没什么关系。判断一个类的日志输出情况，首先找到这个类所在的logger（如果特别定义了一个类的logger,那么则为这个定义的logger,没有特别定义则默认为roo... 复制链...阅读全文
> 编程乐园 > 编程内功 > 架构&设计模式 > ElasticSearch备份快照到HDFS-2.6(CDH5.6.0) ElasticSearch备份快照到HDFS-2.6(CDH5.6.0) 架构&设计模式 water 5年前 (2017-03-29) 3348℃ 0评论 repository-hdfs安装包的下载地址: https://oss.sonatype.org/content/repositories/snapshots/org/elasticsearch/elasticsearch-repository-hdfs/ 背景说明 由于业务需要将ES-2.2.1版本升级到ES-2.3.2版本，需要将index迁移过去，查了很多资料，最后决定用es的快照/恢复模块来实现索引迁移。...阅读全文
一次偶然事件，我检查某台服务器系统时发现一个从来没见过的端口处于监听（LISTEN）状态，于是开始仔细检查系统。 [root@db097 ~]# netstat -lnpt | grep 7979 tcp 0 0 0.0.0.0:7979 0.0.0.0:* LISTEN - 进程里什么都没有，试了多种办法试着去找一下，都是一样的结果。 [root@db097 ~]# lsof -i:7979 google了半天，最后一段话提示了我： I realized it’s an port opened by kernel, that’s why it won’t show up with program name. For the port like this, it may relate to ...阅读全文
前面我们了解了 Prometheus 中 Relabeling 重新标记的使用，本文我们将学习 Prometheus 中是如何使用服务发现来查找和抓取目标的。我们知道在 Prometheus 配置文件中可以通过一个 static_configs 来配置静态的抓取任务，但是在云环境下，特别是容器环境下，抓取目标地址是经常变动的，所以用静态的方式就不能满足这些场景了。所以我们需要监控系统能够动态感知这个变化，不可能每次变动都去手动重新配置的，为了应对复杂的动态环境，Prometheus 也提供了与基础设施中的服务发现集成的功能。Prometheus 已经支持多种内置的服务发现机制：发现云服务商的 VM 虚拟机Kubernetes 上的自动发现通用的服务查找，例如 DNS、Consul、Zooke...阅读全文
目录 1、根节点包含的属性 2、根节点的子节点 2.1、设置上下文名称： 2.2、设置loger、root 正文 回到顶部 1、根节点
系统学习大数据技术：大数据高级工程师学习路线 写在前面 如果你想通过这篇博客在本地成功搭建 Hadoop 集群的话，你需要先跟着视频课程 三天入门大数据实操课程 在本地搭建集群环境，在这个视频课程中你需要学习的章节是： 课程目标 VMWare WorkStation 安装 创建虚拟机 安装 Centos 7 操作系统 Centos 7 网络配置方式说明 Centos 7 网络配置 使用客户端登录操作虚拟机 克隆三台虚拟机 修改主机名 ip 映射主机名 配置无密钥登录 虚拟机的文件上传和下载 关闭防火墙 安装 Java 请在看本篇博客之前务必学习完上面视频课程中章节，如果你能学习完 三天入门大数据实操课程 所有的章节的话就更好，因为你学完这个课程可以有以下三大收获： 搭建一个属于自己的大数据集...阅读全文
MySQL调优之innodb_buffer_pool_size大小设置 相关查看命令 sql> show global variables like 'innodb_buffer_pool_size'; sql> show global status like 'Innodb_buffer_pool_pages_data'; sql> show global status like 'Innodb_page_size'; 或 sql> use mysql; sql> select @@innodb_buffer_pool_size; .... MariaDB [(none)]> show global variables like 'innodb_buffer_pool_size'; +--...阅读全文
本文分享自天翼云开发者社区《创建本地yum仓库》，作者: zzzzgj；背景有的部署环境不通外网，但希望继续使用yum命令下载依赖包而不修改部署脚本逻辑。因此记录一个本地repo的建立方法。1、获取依赖包# 如在通网的机器上下载openssl-devel所有依赖yumdownloader --resolve --alldeps openssl-devel2、创建仓库创建一个（本地）存储库并用yum它来解决您的依赖关系。CentOS wiki提供了一个如何做到这一点。CentOS wiki HowTos / CreateLocalRepos。简要操作如下：1.为本地存储库创建一个目录，例如/home/teledb/repo。2.将RPM放置到该目录中：cd /home/teledb/repoy...阅读全文
前言 Nacos最近项目一直在使用，其简单灵活，支持更细粒度的命令空间，分组等为麻烦复杂的环境切换提供了方便；同时也很好支持动态路由的配置，只需要简单的几步即可。在国产的注册中心、配置中心中比较突出，容易上手，本文通过gateway、nacos-consumer、nacos-provider三个简单模块来展示：Nacos下动态路由配置。 博文中源码已上传至github(https://github.com/Jian0110/learning-cloudalibaba)，欢迎小伙伴们star 一、Nacos环境准备 1、启动Nacos配置中心并创建路由配置 具体的Nacos怎么配置就不介绍了，可以参考阿里巴巴的官方介绍，这里通过windows直接本地启动开启单机模式，登录Nacos Conso...阅读全文
感想：学习IT有前途吗？ 今天看到QQ群里有人发一张很有意思的图片。就是一群农民工，在路边等活的那种，上面摆着牌子，说可以做网站，写程序。虽说搞笑，也反应出了，很多IT从业者，生活状态并不是太好。其实对这个问题，我是这样看的：伴随着互联网的发展。IT人才的短缺现象将会越来越严重。据保守估计，目前中国市场对IT软件人才的需求每年超过150万人。IT技术人员的极度短缺，迫使许多公司不得不提供高薪才能聘请到符合要 职场 IT 休闲 IT职...阅读全文
本文分享自天翼云开发者社区《Nginx工作原理》，作者：王****秀Nginx的进程模型Nginx服务器由一个Master进程和多个Worker进程组成：Master进程：管理Worker进程。对外接口：接收外部的操作（信号）；对内转发：根据外部操作的不同，通过信号管理Worker；监听：监控Worker进程的运行状态，Worker进程异常终止后，自动重启Worker进程。Worker进程：所有Worker进程都是平等的，用于处理网络请求。进程数量：在nginx.conf中配置，一般设置为核心数，充分利用CPU资源，同时，避免进程数量过多，避免进程竞争CPU资源，增加上下文切换的损耗。HTTP连接建立和请求处理过程Nginx启动时，Master进程加载配置文件。Master进程，初始化监听的...阅读全文
本文分享自天翼云开发者社区《弹性云主机支持多种规格》，作者：每日知识小分享随着云计算技术的快速发展，弹性云主机已经成为了一种广泛使用的云计算服务。弹性云主机是一种可动态调整的计算资源，可以根据用户的需求进行灵活配置。其中，支持多种规格是弹性云主机的一项重要特性，它可以让用户根据实际需求选择合适的规格，以满足不同的应用场景。一、弹性云主机简介弹性云主机是一种基于云计算技术的虚拟化平台，它可以为用户提供独立的、可动态调整的计算资源。弹性云主机可以根据用户的需求进行灵活配置，包括CPU、内存、存储等方面。这种服务可以帮助用户降低IT成本，提高工作效率，同时还可以提供高可用性和灵活性。二、多种规格支持弹性云主机支持多种规格，包括不同的CPU、内存和存储配置。用户可以根据自己的需求选择合适的规格，以满...阅读全文
通过上篇文章我们已经对JDBC的基本概念和工作原理都有了一定的了解，本篇文章我们继续来探索如何从零开始，一步步搭建开发环境，编写代码，最后实现数据库的增删改查操作。 ## 一、开发环境搭建 首先，我们需要准备的开发环境有：Java开发工具包（JDK）、数据库（如MySQL）、数据库驱动（如MySQL Connector/J）。 #### 安装JDK： 你可以从Oracle官网下载适合你操作系统的JDK版本，按照提示进行安装即可。相信这个大家早已经安装过了，在这里就不再多说了。 #### 安装数据库： 同样在官网下载MySQL安装包，按照提示进行安装。安装完成后，需要创建一个数据库和表，用于后续的测试。 #### 下载数据库驱动： 在MySQL官网下载对应版本的MySQL Connector/...阅读全文
我们已经知道JDBC是Java语言中用来规范客户端程序如何访问数据库的应用程序接口，也是大多数Java开发者与数据库打交道的必备工具。但是，你是否知道，JDBC在处理大量并发请求时，可能会遇到一些问题？这就是我们今天要讨论的主题——JDBC数据库连接池。 首先，让我们来了解一下什么是数据库连接池。 ## 一、数据库连接池简介 JDBC连接池，全称为Java多线程数据库连接池，是一种用于管理数据库连接的技术。其主要作用是减少每次请求时创建和释放数据库连接的开销，以此提高系统性能。 在应用程序和数据库之间，JDBC连接池会建立一个连接池，当需要访问数据库时，无需每次都重新创建连接，而是直接从池中获取已有的连接。  **1、读取MyBatis配置文件** mybatis-config.xml为MyBatis的全局配置文件，配置了MyBatis的运行环境等信息，例如数据库连接信息。 **2、加载映射文件（SQL映射文件，一般是XXXMapper.xml）** ...阅读全文
 一、什么是Kuberentes？ kubernetes，简称K8s，是用8代替名字中间的8个字符“ubernete”而成的缩写。是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes提供了应用部署，规划，更新，维护的一种机制。 Kubernetes是一个轻便的和可扩展的开源平台，用于管理容器化应用和服务。通过Kubernetes能够进行应用的自动化部署和扩缩容。在Kubernetes中，会将组成应用的容器组合成一个逻辑单元...阅读全文
本文分享自天翼云开发者社区《Linux Bridge和Tap关系详解》，作者:x****nLinux Bridge介绍Bridge（桥）是Linux上用来做TCP/IP二层协议交换的设备，与现实世界中的交换机功能相似。Bridge设备实例可以和Linux上其他网络设备实例连接，既attach一个从设备，类似于在现实世界中的交换机和一个用户终端之间连接一根网线。当有数据到达时，Bridge会根据报文中的MAC信息进行广播、转发、丢弃处理。如图所示，Bridge的功能主要在内核里实现。当一个从设备被attach到Bridge上时，相当于现实世界里交换机的端口被插入了一根连有终端的网线。这时在内核程序里，netdev_rx_handler_register()被调用，一个用于接受数据的回调函数被...阅读全文
1.临时生效 # 查看默认设置的过期时间 show variables like "%expire_logs%"; # 设置保留15天 set global expire_logs_days=15 # 刷新日志 flush logs； #查看新生成的binlog日志 show master status\G: 注意：以上命令在数据库执行会立即生效，请确定设置数据的保留日期，以免误删 2.永久生效 # 修改配置文件 vim /etc/my.cnf [mysqld]模块 expire_logs_days=15 注意：在配置文件修改后，需要重启才能永久生效。另，0表示永不过期，单位是...阅读全文
本文分享自天翼云开发者社区《linux各个目录的作用》，作者：技术小白/bin/：存放系统命令的目录,普通用户和超级用户都可以执行，不过放在/bin下的命令在单用户模式下也可以执行；/sbin/：保存和系统环境设置相关的命令，只有超级用户可以使用这些命令进行系统环境设置，但是有些命令可以允许普通用户查看；/usr/bin/：存放系统命令的目录，普通用户和超级用户都可以执行，这些命令和系统无关，在单用户模式下不能执行；/usr/sbin/：存放根文件系统不必要的系统管理命令，例如多数服务程序，只有超级用户可以使用；/boot/：系统启动目录，保存系统启动相关文件，如内核文件和启动引导程序；/dev/：设备文件保存位置；/etc/：配置文件保存位置，系统内所有采用默认安装(rpm安装)的服务的配...阅读全文
步骤1： 设置HBase环境与连接确保已经正确配置了HBase的客户端依赖（如hbase-client、hbase-common等），并设置了HBase的ZooKeeper地址。以下是一个简化的示例，假设您已经有了一个配置好的Configuration对象（conf）和表名（tableName）：import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.TableName;import org.apache.hadoop.hbase.client.Connection;import org.apache.hadoop.hbase.client.ConnectionFactory;// 创建...阅读全文
本文分享自天翼云开发者社区《谈谈天翼云VPCE》，作者:天枫霁月一、VPCE产品出现的背景跨VPC通信，且能够严格限制访问，任意两个租户之间都能互通，性能高，花费少，通过VPCE产品实现安全、灵活、高效的跨VPC访问。二、VPCE产品简介VPC终端节点（VPC Endpoint）：能够将VPC私密地连接到终端节点服务（云服务、用户私有服务等），使VPC中的云资源无需弹性公网IP就能够访问服务提供方的服务，提高了访问效率，提供了更加灵活、安全的组网方式。三、VPCE产品相关概念终端节点服务（Endpoint Service）：用户或服务提供商可将VPC内的资源作为服务端，创建为一个终端节点服务，可以被终端节点连接并访问。终端节点（Endpoint）：连接到终端节点服务，作为服务使用方访问服...阅读全文
业务情景 两台服务器，一台阿里云ECS云服务器（专用网络），另一台是阿里云数据库MongoDB，处于安全考虑MongoDB是不运行外网连接的，那接下来就看怎么实现公网访问。 看到上面红色的网络类型描述，有些人可能已经看出问题所在了，小小的提示：问题出现在开放端口上！ 专用网络和经典网络的大致区别可以用一句话讲明白：专用网络更安全，需要设置和配置的东西比较多，适合精通网络的高手；经典网络使用更方便，适合更适合小白用户，使用起来更简单方便，不用繁杂的配置； 思路分析 既然无法直接使用公网（俗称的外网都是一个意思），那就使用端口转发的形式，把可以访问的一台服务器的公网ip和端口转到MongoDB的服务器即可，接下来我们使用rinetd的方式实现端口转发。 具体步骤 rinetd的安装方式有两种，如...阅读全文
在2024年的AI领域，Meta发布的Llama 3.1模型无疑成为了研究者和开发者的新宠。我有幸通过魔乐社区提供的资源，对这一模型进行了深入的学习和实践。在这个过程中，魔乐社区的资源和支持给我留下了深刻的印象。环境准备的便捷性魔乐社区提供的实践指导非常详尽，从安装Ascend CANN Toolkit和Kernels到openMind Library以及openMind Hub Client的安装，每一步都有清晰的命令和说明。这大大简化了环境搭建的过程，即使是对于新手来说，也能够快速上手。模型下载与推理的直观体验通过魔乐社区提供的链接，用户能够轻松下载Llama 3.1模型，并使用openMind Library和LLaMa Factory进行模型推理。实践指导中的示例代码和配置文件非常...阅读全文
摘要：本文整理自阿里云计算平台事业部，实时计算&托管生态 SRE 团队的许雷力（阿里云技术专家）和张韦杰（阿里云开发工程师），在 Flink Forward Asia 2022 生产实践专场的分享。本篇内容主要分为三个部分： 业务背景与挑战 成本优化 - 热点处理 整体规划和未来方向 点击查看原文视频 & 演讲PPT 一、业务背景与挑战 1.1 实时计算集群现状 关于热点机器处理一直是阿里云 Flink 集群运维的一大痛点，不管在日常还是大促都已经是比较严重的问题，同时这也是分布式系统的老大难问题。而在今年整个阿里云成本控制的背景下，随着集群水位的逐步抬升，热点问题愈发严重。日均有上千次的热点机器出现，并且在晚上业务高峰期，整个热点持续时间会超过 60min，对于业务以及对于平台影响是比较大...阅读全文
我使用的安装文件是 flink-1.9.3-bin-scala_2.12.tgz ，以下内容均以此版本进行说明。 说明 搭建集群首先要进行集群的规划【哪台做主节点，哪些做从节点】，这里简单搭建一个 3 节点的 Flink Standalone 集群，其中三台主机Flink01、Flink02、Flink03 均为 worker 节点，Flink01 为 master 节点。 1. 配置免密登录【每台服务器】 Flink 组件之间需要基于 SSH 进行通讯。 1.1 配置映射 配置 ip 地址和主机名映射：==很关键==通过ifconfig查询本机的ip地址，这个地方没有配置正确的话节点会有问题。 vim /etc/hosts xxx.xx.x.x flink01 flink01 xxx.xx...阅读全文
