2025年04月13日瀏覽 345 大數據

【Hadoop仿真】如何在仿真NodeManager中實(shí)現心跳

Hadoop自帶的hadoop-sls只能用于壓測調度器，可在實(shí)際中影響ResourceManager性能的因素比較多，不能只看調度器。當前項目可構造海量的Fake NM節點(diǎn)，用于模擬線(xiàn)上RM的巨大壓力場(chǎng)景，進(jìn)行優(yōu)化。首先需要對NM進(jìn)行仿真。

2025年04月13日瀏覽 10 大數據

Hadoop Yarn的ResourceManager壓測指南

Hadoop自帶的hadoop-sls只能用于壓測調度器，可在實(shí)際中影響ResourceManager性能的因素比較多，不能只看調度器。當前項目可構造海量的Fake NM節點(diǎn)，用于模擬線(xiàn)上RM的巨大壓力場(chǎng)景，進(jìn)行優(yōu)化。詳細參見(jiàn)：https://gith ......

2023年08月08日瀏覽 1.25K 其他

Idea 運行Test報錯：scala: No scalac found to compile scala sources

背景在Idea當中運行Test的時(shí)候發(fā)現報錯如下： scala: No scalac found to compile scala sources 但是在操作系統上面安裝了scala，在idea當中也安裝了原因雖然在操作系統上面安裝了scala，但 ......

2022年02月27日瀏覽 1.7K 數據庫

Redis集群主備緩存區滿(mǎn)了導致主備頻繁倒換

問(wèn)題現象：Redis 頻繁進(jìn)行主備倒換，通過(guò)查看主實(shí)例的日志：redis.log發(fā)現下面報錯： Client id=1317049445 addr=192.168.2.45:8004 fd=40 name= age=314 idle=0 flags=S d ......

2021年12月29日瀏覽 3.08K 編程語(yǔ)言

如何正確執行Jedis單元測試

引用官方的介紹： Jedis is a Java client for Redis designed for performance and ease of use. 本文主要講如何在修改完Jedis代碼之后完成單元測試。

2021年11月13日瀏覽 3.07K 數據庫

Redis邏輯集群創(chuàng )建

Redis從3.0開(kāi)始引入集群模式的概念。集群由多個(gè)節點(diǎn)(Node)組成，Redis的數據分布在這些節點(diǎn)中。集群中的節點(diǎn)分為主節點(diǎn)和從節點(diǎn)：只有主節點(diǎn)負責讀寫(xiě)請求和集群信息的維護；從節點(diǎn)只進(jìn)行主節點(diǎn)數據和狀態(tài)信息的復制。 Redis集群模式的作用主要分為 ......