积少成多, 聚沙成塔

Kiritow's Homepage

Posted on Edited on Disqus:

需要两个配置文件

消费远端消息 mirrormaker-consumer.config (注: remote-kafka 需要在 /etc/hosts 里添加配置, 下同)

1
2
bootstrap.servers=remote-kafka:9092
group.id=mirrormaker-mirror-1

投递到本地的Kafka集群 mirrormaker-producer.config

1
2
bootstrap.servers=local-kafka:9092
acks=1

启动 Kafka Mirror Maker

1
2
#!/bin/bash
kafka-mirror-maker --consumer.config mirrormaker-consumer.config --producer.config mirrormaker-producer.config --include 'topic1|topic2'

mirror-maker虽然不被confluent看重(可能是因为他们有专门的同步工具), 不过还是非常好用的. 在线上实际跑了将近三个月的时间, 其自带的重试功能可以保证同步意外断开之后无人值守地自动恢复.

参考

retention.ms - Kafka topic configuration reference | Confluent Documentation 配置消息过期时间

Docker Configuration Parameters for Confluent Platform

Migrating clusters using Apache Kafka’s MirrorMaker

Kafka MirrorMaker

Kafka mirroring (MirrorMaker)

Posted on Edited on Disqus:

然后把脚本放到Stream Deck上配置个按键, 就可以实现一键调整Chrome的音量大小了. 这样打游戏的时候可以很方便的调整Youtube的音量.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
import time
from pycaw.pycaw import AudioUtilities, ISimpleAudioVolume


def get_audio_volume(process_name):
    sessions = AudioUtilities.GetAllSessions()
    for session in sessions:
        volume = session._ctl.QueryInterface(ISimpleAudioVolume)
        print(session.Process)
        if session.Process and session.Process.name().lower() == process_name:
            print("{} current volume: {}".format(session.Process.name(), volume.GetMasterVolume()))
            return volume.GetMasterVolume()
    
    return None


def set_audio_volume(process_name, target_volume):
    sessions = AudioUtilities.GetAllSessions()
    for session in sessions:
        volume = session._ctl.QueryInterface(ISimpleAudioVolume)
        print(session.Process)
        if session.Process and session.Process.name().lower() == process_name:
            print("{} current volume: {}".format(session.Process.name(), volume.GetMasterVolume()))
            volume.SetMasterVolume(target_volume, None)
            return

参考

python能否调用windows系统的音量合成器？

Trouble accessing an my DefaultAudioEndpoint.

Volume Controls - Win32 apps | Microsoft Learn

Posted on Edited on Disqus:

怀念老歌专场了属于是

罗百吉 - I Miss You

据说这首歌能勾起很多人回忆?－《哎呀》

这才是《不是因为寂寞才想你》的原唱，很多80、90后的青春回忆！

汤潮 - 狼爱上羊

【怀旧经典】庞龙《两只蝴蝶》超级王炸神曲！火遍大江南北的神曲！

【4K 无损+伴奏】马天宇 - 《该死的温柔》

【怀旧经典】王强《秋天不回来》超级王炸神曲！火遍大江南北的神曲！

【怀旧经典】誓言《求佛》超级王炸神曲！火遍大江南北的神曲！

【怀旧经典】徐誉滕《等一分钟》王炸神曲！铃声真的动了！

这才是《老鼠爱大米》的原版，听了好像回到童年。

【4K 童年神曲】郭美美 - 不怕不怕 MV 修复版

【回忆杀】-胡杨林《香水有毒》，经典永流传！

【怀旧经典】刀郎《2002年的第一场雪》王炸神曲！2004年华语乐坛系列！

Imagine Dragons - Bones (Official Lyric Video) 阿姨压一压

崔子格 - 卜卦「 祈求別再變卦 」♪Karendaidai♪

Neil Cicierega - Daft Mouth

Bật Tình Yêu Lên Remix (Deep House)

#古風 殘雪、林玉涵-苦海邊◖夢回千年，最後你成了我一生心魔◗ [Official Lyric Video] 官方動態歌詞版

Tiësto vs Diplo - C’Mon

[for Orzmic] MYUKKE. - BiBiC HEART

FlyBoy & The Onyx Twins - I Will Be Ok (ft. Coby Grant)

Mae Stephens - If We Ever Broke Up (Official Video)

「Cyberangel」——《崩坏3》印象曲（演唱者：Hanser）

往期优秀作品推荐

2023年5-6月

Posted on Disqus:

经过接近7个月的测试, 目前两级存储中共有5.1亿条数据, 总数据量约230GB. SSD中热数据量约为10%

背景: 因为SSD存储太贵, 而且一般只有最近14天的数据需要经常查询, 因此把14天外的数据送到HDD里保存节约成本.

  1. 需要新增存储配置文件 storage.xml 其中 cold_disk 为HDD存储配置, cold_volume为HDD存储策略
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
<clickhouse>
    <storage_configuration>
        <disks>
            <default>
            </default>
           <cold_disk>
              <path>/var/lib/clickhouse-hdd/</path>
           </cold_disk>
        </disks>
        <policies>
            <default>
                <volumes>
                    <default>
                        <disk>default</disk>
                    </default>
                    <cold_volume>
                        <disk>cold_disk</disk>
                    </cold_volume>
                </volumes>
            </default>
        </policies>
    </storage_configuration>
</clickhouse>
  1. 给数据表添加TTL策略, 默认去default, 15天以上的去cold_volume
1
alter table database_name.table_name modify TTL create_time TO VOLUME 'default', create_time + INTERVAL 15 DAY TO VOLUME 'cold_volume'
  1. 刷新TTL策略, 强制冷数据移动
1
alter table database_name.table_name materialize ttl

参考资料

ClickHouse 单机docker多盘搭建教程

Amplifying ClickHouse Capacity with Multi-Volume Storage (Part 1)

Amplifying ClickHouse Capacity with Multi-Volume Storage (Part 2)

Putting Things Where They Belong Using New TTL Moves 中文翻译,但是水平一般: 【ClickHouse 技术系列】- 使用新的 TTL move，将数据存储在合适的地方

Manage Data with TTL (Time-to-live)

Posted on Edited on Disqus:

TrueNAS SCALE 22.04.3 运行一直很稳定, 有一天开始突然报错CRITIAL:

1
Error: (401) Reason: Unauthorized HTTP response headers: < CIMultiDictProxy('Audit-Id': '7b4e8f99-ae3e-415e-b80b-d5ab72dadd85', 'Cache-Control': 'no-cache, private', 'Content-Type': 'application/json', 'Date': 'Sun, 28 May 2023 07:27:45 GMT', 'Content-Length': '129') > HTTP response body: {"kind":"Status","apiVersion":"v1","metadata":{},"status":"Failure","message":"Unauthorized","reason":"Unauthorized","code":401}

当时没太当回事, 以为是官方仓库挂了. 一个多月后再检查还是这样, 进shell看了一下journal发现是x509证书过期了:

1
May 29 03:23:29 truenas k3s[11305]: E0529 03:23:29.178174   11305 authentication.go:63] "Unable to authenticate the request" err="[x509: certificate has expired or is not yet valid: current time 2023-05-29T03:23:29+08:00 is after 2023-04-16T16:35:58Z, verifying certificate SN=..., SKID=, AKID=... failed: x509: certificate has expired or is not yet valid: current time 2023-05-29T03:23:29+08:00 is after 2023-04-16T16:35:58Z]"

shell直接运行k3s kubectl get node也会报错提示 Unauthorized.

解决方法很简单, 重启k3s和docker服务就行 (当然重启主机也可以, 只是会中断当前的读写):

1
2
systemctl stop k3s docker
systemctl start docker k3s

参考

Truecharts: Docker pull error x509: certificate valid for…

Posted on Edited on Disqus:

沉迷越南土嗨

Đau Ở Đây Này (Orinn Remix) - NAL | Ta Như Làn Mây Trôi Về Cuối Bầu Trời Remix TikTok Hay Nhất 2022

Khuất Lối (Orinn Remix) - H Kray | Anh Đi Về Bóng Tối Khuất Lối | Nhạc Trẻ Remix Hot Tiktok 2022

Anh Đã Lạc Vào Remix VER 2 - (Green, Đại Mèo Remix)anh đã lạc vào cả một bầu trời yêu dấu này remix

BIẾT ÔNG THƯƠNG KHÔNG? Thương cho Tấm Thân Cơ Hàn HOT TIK TOK, Tấm Lòng Son Remix -H-Kray x Đại Mèo

Thôi Quên Đi (Orinn Remix) - TVk x PHÁT HUY T4 | Nhạc Trẻ Remix Căng Cực Gây Nghiện Hay Nhất 2022

Chỉ Bằng Cái Gật Đầu Remix - (Yan Nguyễn x Đại Mèo) Có lẽ cần một cái gật đầu xin cha mẹ về bên anh

Tấm Lòng Son Remix - H-Kray x Đại Mèo Remix I giọt buồn vương trên màu mắt ai remix hot TIKTOK

Hoa Cưới (H2O Remix) - Đạt Long Vinh | Rồi Người Rời Bước Thật Mau Mặc Vào Tà Áo Nàng Dâu Remix

Vương Vấn Remix - Qinn Remix x TVk x Hana Cẩm Tiên - Chắc Chỉ Mỗi Anh Vẫn Còn Thương Remix TikTok

Nặng Tình Hay Nhẹ Lòng - WRC REMIX - Tống Gia Vỹ

Trót Trao Duyên (H2O Remix) - NB3 Hoài Bảo | Và Anh Biết Duyên Mình Đã Lỡ Hot TikTok Remix

CÔ BỎ ĐI HẾT BAO NHIÊU MỘNG MƠ - Phận Tàn REMIX - TVk x Phát Lee (Đại Mèo Remix)

Thuyền Quyên (AIR Remix) - Diệu Kiên ♫ Dặm Ngàn Thiên Lý Tiễn Người Đi Remix | Hot Trend TikTok

Xin Má Rước Dâu (AIR Remix) - Diệu Kiên ♫ Anh Ơi Nắng Mưa Dãi Dầu Về Nhà Xin Má Rước Con Dâu Remix

♬ PHẬN DUYÊN LỠ LÀNG - PHÁT HUY T4 X TRUZG ( KAINE X HHD REMIX ) | @hhdmusicofficial

♬ CHẠNH LÒNG THƯƠNG CÔ 2 - Huy Vạc ( WinT Remix ) | Nhớ Đeo Tai Nghe @hhdmusicofficial

THÔI EM ĐỪNG NẶNG LÒNG ANH TA REMIX VINAHOUSE / EM NÊN DỪNG LẠI - KHANG VIỆT X KONIS WILLIAMS

Đào Nương (Ciray Remix) - Hoàng Vương | Gặp lại cô ta còn đau đáu rỏ thêm máu lên trang thơ nhàu…

Lý Do Là Gì (AIR Remix) - Nguyễn Vĩ ♫ Nước Mắt Anh Tuôn Theo Màn Đêm Buông Xuống Remix TikTok

Da Da Da (Remix by Mikis)

黄梅戏 Remix 慕容晓晓 DJ版 | 抖音 || 我的公子又在何方 《女驸马》 为救李郎离家园

往期优秀作品推荐

2023年3-4月

Posted on Edited on Disqus:

卸载主机安全、监控等组件

1
2
3
/usr/local/qcloud/stargate/admin/uninstall.sh
/usr/local/qcloud/YunJing/uninst.sh
/usr/local/qcloud/monitor/barad/admin/uninstall.sh

卸载自动化助手, 参考 下载之后运行uninstall.sh

卸载新的一键登录等组件 (参考用, 主要需要识别出哪些是腾讯的组件)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
#!/bin/bash 
#fuck tx process 
rm -rf /usr/local/sa 
rm -rf /usr/local/agenttools 
rm -rf /usr/local/qcloud 
process=(sap100 secu-tcs-agent sgagent64 barad_agent agent agentPlugInD pvdriver ) 
for i in ${process[@]} 
do
for A in $(ps aux |grep $i |grep -v grep |awk '{print $2}') 
do
kill -9 $A 
done 
done 
chkconfig --level 35 postfix off 
service postfix stop 
echo ''>/var/spool/cron/root 
echo '#!/bin/bash' >/etc/rc.local

参考

完整优雅的卸载腾讯云云服务器安全监控组件云镜

Posted on Edited on Disqus:

情歌对唱《敖包相恋》你爱我嘛, 当然爱啦

《Yesterday Once More》《昨日重現》英文歌中文譯

Lemaitre - Closer ft. Jennie A. (UK Version)

Lemaitre - Smoke (Lyric Video)

【imase】NIGHT DANCER（MV）

TONES AND I - DANCE MONKEY (OFFICIAL VIDEO)

Klaypex ft. GRÉTA - Robot Love

Brothers - The Moon

Funky Russian Train/Maxwells song for 2 minutes and 40 seconds

DuckTales Music (NES) - The Moon Theme

难得真兄弟 (DJ小鱼儿版)

往期优秀作品推荐

2023年1-2月