V2EX › ayogo 的所有回复 › 第 2 页 / 共 5 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5

❮

❯

2023 年 5 月 5 日

回复了 Tearia 创建的主题 › Linux › 配置个 ubuntu 的 VNC 花了一下午还没弄好

@miv 我目前两个都用，个人觉得 win 的远程桌面非常强而且方便，但是没法用 ssh 调用我 win 下面的 Python 环境。Linux 的更适合开发。

2023 年 5 月 5 日

回复了 rizon 创建的主题 › 程序员 › 有点冷的难题：谁会写 obs 推流软件的 Python 脚本啊

我之前用 mss 做过屏幕录制，然后对视频进行处理，切割和内容识别，然后制作那种直播场景布局。也许你可以考虑用 numpy 去处理图像，然后把生成的视频推流到 obs 中去？

2023 年 5 月 4 日

回复了 auxten 创建的主题 › 数据库 › 基于 ClickHouse 引擎的 Python 嵌入式数据库 chDB

@auxten 我是指 duckdb 和大佬做的都是这种基于文件的进程内 SQL 引擎。我对 spark 不是很清楚，我们目前主要是 ray+pandas+clickhouse/citus 这样做一些 olap 场景的数据分析。最近也在关注类似于 duckdb 和大佬这种 chdb 的这种嵌入式处理模式，想把数据源从 clickhouse 切到 s3 的 parquet 文件上。很早之前也看了大佬的项目，已 star 加油(›´ω`‹ )

2023 年 5 月 2 日

回复了 auxten 创建的主题 › 数据库 › 基于 ClickHouse 引擎的 Python 嵌入式数据库 chDB

有种东西叫做 duckdb ，和你做的这个功能基本上一样

2023 年 4 月 18 日

回复了 paranoiagu 创建的主题 › Linux › 推荐 Linux 下内网的聊天沟通工具

rocketchat

2023 年 4 月 18 日

回复了 hhhhhh123 创建的主题 › 程序员 › 知乎挂了吗？

挂了，刚上厕所摸鱼就挂了

2023 年 2 月 15 日

回复了 759648397 创建的主题 › Windows › 公司内网通过 RDP 远程桌面回家摸鱼失败，求解

我们用的山石网科，我平时也是 rdp 连回去的。你可以先看一下你家里设备的 IP ，然后再在你本机 nmap 扫描一下那个网段。

2023 年 2 月 10 日

回复了 giveafxxk 创建的主题 › 信息安全 › 正经讨论不扯别的： QQ 一个聊天软件为什么要安装驱动？

@newmlp 我 07 年创的，到现在都没被盗过，倒是忘了不少 QQ 号_(:з」∠)_

2023 年 1 月 27 日

回复了 ayogo 创建的主题 › 赛博朋克 2077 › 边缘行者后三集哪一集有大刀

@zthreefires 重锤的设定也不过是保安大队队长罢了。还是得叫上夜之城活阎王来🌚

2023 年 1 月 27 日

回复了 ayogo 创建的主题 › 赛博朋克 2077 › 边缘行者后三集哪一集有大刀

@exploreexe @anoninz 已经看完了，刀太多了🕶️😭。就是结尾结束的太快，特别是莉贝卡直接被重锤一脚踩死可太草率了。有点赶工的感觉。亚当重锤！我要杀你，一千遍！也不够！！！

2023 年 1 月 27 日

回复了 ayogo 创建的主题 › 问与答 › 求教一个 Citus 数据库集群的磁盘 io 优化问题

@litguy 是的，我们前几天已经把 pg_wal 转移到了 SSD 上。性能优化了很多。下一步计划就是把数据盘换成本地的 SSD 。这些测试前几天我们都做过了，确实像大佬说的那样。数据库这块确实很吃经验，要学的东西还很多。感谢大佬的悉心指导！

2023 年 1 月 23 日

回复了 ayogo 创建的主题 › 问与答 › 求教一个 Citus 数据库集群的磁盘 io 优化问题

@litguy 我们目前发现的一个问题，因为全部的服务器的数据盘都挂载在集中存储服务器上，然后 pg_wal 缓冲区也被设在了数据盘上。我们估计应该是缓冲区被放到了集中式存储服务器上导致的读写 io 爆炸。另外，事后看了相关监控，发现实际上在生产中记录到的磁盘阵列的 IOPS 不是很低，读写都能到 10w 左右。没有之前提到的那么低。

2023 年 1 月 16 日

回复了 ayogo 创建的主题 › 问与答 › 求教一个 Citus 数据库集群的磁盘 io 优化问题

@litguy 感谢大佬能花时间给我答复！我们刚刚还发现了一个问题，就是针对这个数据库进行入库的时候磁盘 io 就暴涨，但是这个数据库的数据总量远远没有其它数据库多。我们下一步修改跟磁盘优先级有关的参数，要是再不行就寄了。明天晚上老板就要刀了我了_(:з」∠)_。话说回来我想问一下，50 亿行数据入到数据库集群一般需要花多久，我们公司没有 dba ，所以这一块一直是我在挑挑弄弄，之前我们跑 87 亿数据跑了 12 个小时，但是后来就再也没有那么快了。

2023 年 1 月 16 日

回复了 ayogo 创建的主题 › 问与答 › 求教一个 Citus 数据库集群的磁盘 io 优化问题

@v2wtf 是的，我之前也是很努力的在把写入磁盘的粒度调大，频率降低，然而还是遭不住。我其实很早之前反应过这个问题，也是按照大佬你的思路去汇报，但是没被接受。上级给出的答复是我们的数据中心换磁盘的成本太高(／_＼)。我已经摆烂了。

2023 年 1 月 16 日

回复了 panyang 创建的主题 › 程序员 › 大家的年终奖是如何发放的？

谈话，然后说项目没做完，不好跟投资人交代。老板说自己亲自掏腰包给我们包了个红包，然后一瓶红酒一箱苹果。_(:з」∠)_，老员工说去年也都一样。

2023 年 1 月 16 日

回复了 ayogo 创建的主题 › 问与答 › 求教一个 Citus 数据库集群的磁盘 io 优化问题

@litguy 是有关语言处理模型的一些文本信息和数字编号，目前在处理的一张表里面有 9 行，40 亿数据，大部分编号长度都在 20 位以下。文本部分的长度基本上都在 20-60 字左右。

2023 年 1 月 16 日

回复了 ayogo 创建的主题 › 问与答 › 求教一个 Citus 数据库集群的磁盘 io 优化问题

@litguy @v2wtf 不好意思的大佬们，我没描述清楚。我们目前的磁盘配置是使用集中式存储，是 SSD 混合 HHD ，走的是 hba 卡的光纤。目前我们遇到的问题就是 copy 写入数据一个小时到两个小时之后，数据库磁盘的写入等待时间会从 200-1000ms 急剧飙升到 20000ms+，平均每台机器的写 IOPS 在 200 左右。固态和机械的比例我不知道，我个人觉得很可能是集中式存储的磁盘缓存被写满了。但是运维那也没给我太对有用的信息。(／_＼)

2022 年 12 月 23 日

回复了 linuxgo 创建的主题 › Windows › windows 越来越霸道了，竟然半夜自动开机

@findex 我当时在睡觉，迷迷糊糊真以为是电脑被黑了或者里面的模型觉醒了接管了我的电脑，直接一激灵

2022 年 12 月 22 日

回复了 linuxgo 创建的主题 › Windows › windows 越来越霸道了，竟然半夜自动开机

@NoAnyLove 国庆那会我也遇到过！而且我电脑还有 wallpaper engine ，这玩意重启之后解除了静音，然后凌晨三点我迷迷糊糊听到 USB 重新加载的提示音，而且还听到客厅有小女孩在唱歌的声音。给我吓得魂都出去了。

2022 年 12 月 20 日

回复了 edis0n0 创建的主题 › 程序员 › ChatGPT 比 Copilot 有用多了， Copilot 就算补全微软自家的 C#也经常弄不懂我在干嘛，补全的全是错的，也就帮我自动输入{get;set;}效果不错， ChatGPT 告诉他要用什么算法做什么就全帮我写好了，一行不用改

@xuyang2 因为我们老板要求把代码拆分的越简洁越好，写的越清楚越好。其实挺方便的。除了 debug 的时候遇到底层函数出问题有点折磨。

1 2 3 4 5

❮

❯