Opération et maintenance
exploitation et maintenance Linux
Comment afficher les journaux Debian Hadoop
Comment afficher les journaux Debian Hadoop
Cet article présente comment afficher efficacement les journaux Hadoop dans le système Debian. La fonction d'agrégation de journaux de Hadoop stocke les journaux de chaque nœud pour une gestion facile. Les étapes suivantes vous guideront sur la façon de voir ces journaux:
Étape 1: Assurez-vous que l'agrégation du journal est activée
Tout d'abord, confirmez que l'agrégation de journaux est activée pour tous les nœuds du cluster Hadoop. Ceci est généralement configuré dans yarn-site.xml :
<property> <name>yarn.log-agregation-inable</name> <value>vrai</value> </property> <property> <name>yarn.log-agregation.</name> <value>172800</value> </property> <property> <name>yarn.nodeManager.remote-app-lig-dir</name> <value>/ tmp / journaux</value> </property> <property> <name>yarn.nodeManager.remote-app-log-dir-suuffix</name> <value>bûches</value> </property> <property> <name>yarn.log.server.url</name> <value>http: // hadoop-node0: 19888 / jobhistory / journaux</value> </property>
Étape 2: Accédez aux journaux via l'interface utilisateur Web
Après l'agrégation de journaux, vous pouvez afficher les journaux via l'interface utilisateur Web ResourceMeager de Hadoop ou l'interface utilisateur du serveur d'historique de travail:
- ResourceManager Web UI: L'adresse par défaut est
http://<resourcemanager-hostname> :8088/cluster/apps/FINISHED</resourcemanager-hostname>. - Interface Web de serveur d'historique de travail: L'adresse par défaut est
http://<jobhistory-server-hostname> :19888/jobhistory</jobhistory-server-hostname>.
Étape 3: Utilisez l'outil de ligne de commande pour afficher le journal
Si vous avez besoin de lire les journaux directement à partir de HDFS, vous pouvez utiliser la commande hdfs dfs :
HDFS DFS -CAT / PATH / TO / LOGS / *
Étape 4: Utilisez un éditeur de texte pour afficher le journal
Vous pouvez ouvrir et afficher les fichiers journaux à l'aide de n'importe quel éditeur de texte (comme nano , vim ):
sudo nano / path / to / logs / application-<application-id> -récipient-<container-id> .enregistrer</container-id></application-id>
Notez que les chemins de bord journalière et les URL peuvent varier en fonction de la configuration du cluster Hadoop. Veuillez vous référer à votre fichier de configuration de cluster Hadoop pour le chemin exact.
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!
Outils d'IA chauds
Undresser.AI Undress
Application basée sur l'IA pour créer des photos de nu réalistes
AI Clothes Remover
Outil d'IA en ligne pour supprimer les vêtements des photos.
Undress AI Tool
Images de déshabillage gratuites
Clothoff.io
Dissolvant de vêtements AI
Video Face Swap
Échangez les visages dans n'importe quelle vidéo sans effort grâce à notre outil d'échange de visage AI entièrement gratuit !
Article chaud
Outils chauds
Bloc-notes++7.3.1
Éditeur de code facile à utiliser et gratuit
SublimeText3 version chinoise
Version chinoise, très simple à utiliser
Envoyer Studio 13.0.1
Puissant environnement de développement intégré PHP
Dreamweaver CS6
Outils de développement Web visuel
SublimeText3 version Mac
Logiciel d'édition de code au niveau de Dieu (SublimeText3)
Sujets chauds
Comment utiliser la bibliothèque Chrono en C?
Apr 28, 2025 pm 10:18 PM
L'utilisation de la bibliothèque Chrono en C peut vous permettre de contrôler plus précisément les intervalles de temps et de temps. Explorons le charme de cette bibliothèque. La bibliothèque Chrono de C fait partie de la bibliothèque standard, qui fournit une façon moderne de gérer les intervalles de temps et de temps. Pour les programmeurs qui ont souffert de temps et ctime, Chrono est sans aucun doute une aubaine. Il améliore non seulement la lisibilité et la maintenabilité du code, mais offre également une précision et une flexibilité plus élevées. Commençons par les bases. La bibliothèque Chrono comprend principalement les composants clés suivants: std :: chrono :: system_clock: représente l'horloge système, utilisée pour obtenir l'heure actuelle. std :: chron
Comment mesurer les performances du fil en C?
Apr 28, 2025 pm 10:21 PM
La mesure des performances du thread en C peut utiliser les outils de synchronisation, les outils d'analyse des performances et les minuteries personnalisées dans la bibliothèque standard. 1. Utilisez la bibliothèque pour mesurer le temps d'exécution. 2. Utilisez le GPROF pour l'analyse des performances. Les étapes incluent l'ajout de l'option -pg pendant la compilation, l'exécution du programme pour générer un fichier gmon.out et la génération d'un rapport de performances. 3. Utilisez le module Callgrind de Valgrind pour effectuer une analyse plus détaillée. Les étapes incluent l'exécution du programme pour générer le fichier callgrind.out et la visualisation des résultats à l'aide de Kcachegrind. 4. Les minuteries personnalisées peuvent mesurer de manière flexible le temps d'exécution d'un segment de code spécifique. Ces méthodes aident à bien comprendre les performances du thread et à optimiser le code.
Comment optimiser le code
Apr 28, 2025 pm 10:27 PM
L'optimisation du code C peut être réalisée grâce aux stratégies suivantes: 1. Gérer manuellement la mémoire pour l'utilisation d'optimisation; 2. Écrivez du code conforme aux règles d'optimisation du compilateur; 3. Sélectionnez les algorithmes et structures de données appropriés; 4. Utiliser les fonctions en ligne pour réduire les frais généraux d'appel; 5. Appliquer la métaprogrammation du modèle pour optimiser au moment de la compilation; 6. Évitez la copie inutile, utilisez la sémantique mobile et les paramètres de référence; 7. Utilisez Constir correctement pour aider à l'optimisation du compilateur; 8. Sélectionnez des structures de données appropriées, telles que STD :: Vector.
Comment comprendre les opérations DMA en C?
Apr 28, 2025 pm 10:09 PM
DMA IN C fait référence à DirectMemoryAccess, une technologie d'accès à la mémoire directe, permettant aux périphériques matériels de transmettre directement les données à la mémoire sans intervention CPU. 1) L'opération DMA dépend fortement des dispositifs matériels et des pilotes, et la méthode d'implémentation varie d'un système à l'autre. 2) L'accès direct à la mémoire peut apporter des risques de sécurité et l'exactitude et la sécurité du code doivent être assurées. 3) Le DMA peut améliorer les performances, mais une mauvaise utilisation peut entraîner une dégradation des performances du système. Grâce à la pratique et à l'apprentissage, nous pouvons maîtriser les compétences de l'utilisation du DMA et maximiser son efficacité dans des scénarios tels que la transmission de données à grande vitesse et le traitement du signal en temps réel.
Qu'est-ce que la programmation du système d'exploitation en temps réel en C?
Apr 28, 2025 pm 10:15 PM
C fonctionne bien dans la programmation du système d'exploitation en temps réel (RTOS), offrant une efficacité d'exécution efficace et une gestion du temps précise. 1) C répond aux besoins des RTO grâce à un fonctionnement direct des ressources matérielles et à une gestion efficace de la mémoire. 2) En utilisant des fonctionnalités orientées objet, C peut concevoir un système de planification de tâches flexible. 3) C prend en charge un traitement efficace d'interruption, mais l'allocation de mémoire dynamique et le traitement des exceptions doivent être évités pour assurer le temps réel. 4) La programmation des modèles et les fonctions en ligne aident à l'optimisation des performances. 5) Dans les applications pratiques, C peut être utilisé pour implémenter un système de journalisation efficace.
Un moyen efficace d'inserter les données dans MySQL
Apr 29, 2025 pm 04:18 PM
Méthodes efficaces pour les données d'insertion par lots dans MySQL Incluent: 1. Utilisation d'inserto ... Syntaxe des valeurs, 2. Utilisation de la commande chargedatainfile, 3. Utilisation du traitement des transactions, 4. Ajuster la taille du lot, 5. Désactiver l'indexation, 6. Utilisation de l'insertion ou de l'insert ... onduplicatekeyupdate, ces méthodes peuvent améliorer considérablement l'efficacité du fonctionnement de la base de données.
Comment gérer un écran DPI élevé en C?
Apr 28, 2025 pm 09:57 PM
La gestion de l'affichage DPI élevé en C peut être réalisée via les étapes suivantes: 1) Comprendre le DPI et la mise à l'échelle, utiliser l'API du système d'exploitation pour obtenir des informations DPI et ajuster la sortie graphique; 2) Gérer la compatibilité multiplateforme, utilisez des bibliothèques graphiques multiplateformes telles que SDL ou QT; 3) Effectuer une optimisation des performances, améliorer les performances par le cache, l'accélération matérielle et le réglage dynamique du niveau de détails; 4) Résoudre des problèmes communs, tels que le texte flou et les éléments d'interface, sont trop petits et résolvent en appliquant correctement la mise à l'échelle DPI.
Étapes pour ajouter et supprimer les champs aux tables MySQL
Apr 29, 2025 pm 04:15 PM
Dans MySQL, ajoutez des champs en utilisant alterTableTable_namEaddColumnNew_Columnvarchar (255) AfterExist_Column, supprimez les champs en utilisant alterTableTable_NamedRopColumnColumn_to_drop. Lorsque vous ajoutez des champs, vous devez spécifier un emplacement pour optimiser les performances de la requête et la structure des données; Avant de supprimer les champs, vous devez confirmer que l'opération est irréversible; La modification de la structure de la table à l'aide du DDL en ligne, des données de sauvegarde, de l'environnement de test et des périodes de faible charge est l'optimisation des performances et les meilleures pratiques.
