Aatish's Data blog

Hadoop Namenode Failure Management

Aug 3, 20232 min read

Let's #hadoop šŸ“Œ Some insights on Namenode failure management in Hadoop šŸ“¢ āœ” Managing NameNode failures in Hadoop is crucial to ensure high...

Hadoop Namenode Failure Management

Hadoop #Split-Brain Scenario & #Fencing

Aug 1, 20232 min read

Let's #hadoop šŸ“Œ š–š”ššš­ š¢š¬ #š’š©š„š¢š­ šš«ššš¢š§ š’šœšžš§ššš«š¢šØ ššš§š #šŸšžš§šœš¢š§š  š¢š§ š‡ššššØšØš©? āœ” š˜š˜Æ š˜µš˜©š˜¦ š˜¤š˜°š˜Æš˜µš˜¦š˜¹š˜µ š˜°š˜§...

Hadoop #Split-Brain Scenario & #Fencing

SCD (š’š„šØš°š„š² š‚š”ššš§š š¢š§š  šƒš¢š¦šžš§š¬š¢šØš§) in hive

Jul 26, 20232 min read

Let's #hive šŸ“Œ What is SCD and wš”ššš­ ššš«šž š­š”šž š­š²š©šžš¬ šØšŸ #š’š‚šƒ š¢š§ š‡š¢šÆšž? āœ” In the context of Hive (a data warehousing and SQL-like...

SCD (š’š„šØš°š„š² š‚š”ššš§š š¢š§š  šƒš¢š¦šžš§š¬š¢šØš§) in hive

Limitations of Broadcast Join in spark

Jul 25, 20232 min read

Let's #spark šŸ“Œ š–š”ššš­ ššš«šž š­š”šž š„š¢š¦š¢š­ššš­š¢šØš§š¬ šØšŸ #šš«šØššššœššš¬š­ š‰šØš¢š§? āœ” Broadcast join is a powerful #optimization...

Limitations of Broadcast Join in spark

Spark #šœššš­ššš„š²š¬š­_šŽš©š­š¢š¦š¢š³šžš«

Jul 24, 20232 min read

Let's #spark šŸ“Œ š–š”ššš­ š¢š¬ šš #šœššš­ššš„š²š¬š­_šŽš©š­š¢š¦š¢š³šžš« ššš§š š°š”ššš­ ššš«šž š­š”šž šÆššš«š¢šØš®š¬ šŖš®šžš«š²...

Spark #šœššš­ššš„š²š¬š­_šŽš©š­š¢š¦š¢š³šžš«