Maison base de données tutoriel mysql 利用ruby通过Thrift接口批量插入HBase

利用ruby通过Thrift接口批量插入HBase

Jun 07, 2016 pm 05:28 PM
hbase ruby

因为工作中使用fluentd采集日志,需要使用ruby通过thrift接口插入数据到hbase中,网上搜索了一下,发现很多都是插入单个数据,没

因为工作中使用fluentd采集日志,,需要使用ruby通过thrift接口插入数据到hbase中,网上搜索了一下,发现很多都是插入单个数据,没办法只好参考python语言写的批量插入修改了代码,终于搞定。

$:.unshift File.expand_path('gen-rb', File.dirname(__FILE__))
require 'thrift'
require File.expand_path('gen-rb/hbase', File.dirname(__FILE__))
transport = Thrift::BufferedTransport.new(Thrift::Socket.new("localhost", "9090"))
transport.open
client = Apache::Hadoop::Hbase::Thrift::Hbase::Client.new(Thrift::BinaryProtocol.new(transport))

## Get Table meta data

def newpass( len )
    chars = ("a".."z").to_a + ("A".."Z").to_a + ("0".."9").to_a
    newpass = ""
    1.upto(len) { |i| newpass     return newpass
end
columnvalue = "v"*10
batchmutations = []
starttime=Time.now
1000.times do |x|

  mutations=[]
  rowkey ="RK_"     5.times do |i|
        mutations "f1:" columnvalue)
    end
    batchmutations rowkey,:mutations => mutations)
end
client.mutateRows("testdb2", batchmutations)

linux

Déclaration de ce site Web
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn

Outils d'IA chauds

Undresser.AI Undress

Undresser.AI Undress

Application basée sur l'IA pour créer des photos de nu réalistes

AI Clothes Remover

AI Clothes Remover

Outil d'IA en ligne pour supprimer les vêtements des photos.

Undress AI Tool

Undress AI Tool

Images de déshabillage gratuites

Clothoff.io

Clothoff.io

Dissolvant de vêtements AI

AI Hentai Generator

AI Hentai Generator

Générez AI Hentai gratuitement.

Article chaud

R.E.P.O. Crystals d'énergie expliqués et ce qu'ils font (cristal jaune)
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Meilleurs paramètres graphiques
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Comment réparer l'audio si vous n'entendez personne
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25: Comment déverrouiller tout dans Myrise
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌

Outils chauds

Bloc-notes++7.3.1

Bloc-notes++7.3.1

Éditeur de code facile à utiliser et gratuit

SublimeText3 version chinoise

SublimeText3 version chinoise

Version chinoise, très simple à utiliser

Envoyer Studio 13.0.1

Envoyer Studio 13.0.1

Puissant environnement de développement intégré PHP

Dreamweaver CS6

Dreamweaver CS6

Outils de développement Web visuel

SublimeText3 version Mac

SublimeText3 version Mac

Logiciel d'édition de code au niveau de Dieu (SublimeText3)

Utilisation de Hadoop et HBase dans Beego pour le stockage et les requêtes Big Data Utilisation de Hadoop et HBase dans Beego pour le stockage et les requêtes Big Data Jun 22, 2023 am 10:21 AM

Avec l'avènement de l'ère du Big Data, le traitement et le stockage des données sont devenus de plus en plus importants, et la gestion et l'analyse efficaces de grandes quantités de données sont devenues un défi pour les entreprises. Hadoop et HBase, deux projets de la Fondation Apache, proposent une solution de stockage et d'analyse du Big Data. Cet article explique comment utiliser Hadoop et HBase dans Beego pour le stockage et les requêtes Big Data. 1. Introduction à Hadoop et HBase Hadoop est un système informatique et de stockage distribué open source qui peut

Analyse approfondie des similitudes et des différences entre Golang et Ruby Analyse approfondie des similitudes et des différences entre Golang et Ruby Jun 01, 2024 pm 08:46 PM

La principale différence entre Go et Ruby est que Go est un langage compilé à typage statique qui prend en charge un parallélisme léger et une gestion efficace de la mémoire, et convient à l'écriture d'applications à haute concurrence ; Ruby est un langage interprété à typage dynamique qui prend en charge le véritable parallélisme mais la gestion de la mémoire. nécessite un contrôle manuel et convient à l’écriture d’applications Web flexibles.

Pourquoi Python, Ruby et d'autres langages ont-ils rendu obsolète l'opérateur d'incrémentation ? Pourquoi Python, Ruby et d'autres langages ont-ils rendu obsolète l'opérateur d'incrémentation ? May 11, 2023 pm 04:37 PM

Beaucoup de gens peuvent remarquer un phénomène, c'est-à-dire que dans certains langages de programmation modernes (bien sûr, sans faire référence aux langages de programmation "récents"), les opérateurs d'incrémentation et de décrémentation ont été annulés. En d'autres termes, il n'existe pas d'expression telle que i++ ou j-- dans ces langages, mais seulement i+=1 ou j-=1. Cette réponse explorera le contexte et les raisons de ce phénomène du point de vue de la philosophie du design. À proprement parler, il peut être biaisé de dire "i++ est en train de disparaître", car il semble que seuls Python, Rust et Swift parmi les langages de programmation traditionnels ne prennent pas en charge les opérateurs d'incrémentation et de décrémentation. Quand je suis entré en contact avec Python pour la première fois, c'était aussi

Comment Ruby utilise-t-il la connexion Mysql2 pour faire fonctionner MySQL ? Comment Ruby utilise-t-il la connexion Mysql2 pour faire fonctionner MySQL ? Apr 17, 2023 pm 10:07 PM

Ruby exploite MySQL en utilisant mysql2 pour se connecter à mysql et faire fonctionner mysql. geminstallmysql2 se connecte à mysql pour établir une connexion : require'mysql2'conn=Mysql2::Client.new({host:'192.168.200.73',username:'root',password:'P@ssword1!'}) La connexion acceptée les options incluent : Mysql2 ::Clie

Comment utiliser MySQL et Ruby pour implémenter une fonction simple de rapport d'analyse de données Comment utiliser MySQL et Ruby pour implémenter une fonction simple de rapport d'analyse de données Sep 20, 2023 pm 05:09 PM

Comment utiliser MySQL et Ruby pour implémenter une fonction simple de rapport d'analyse de données Introduction : À l'ère actuelle axée sur les données, l'analyse des données joue un rôle crucial dans la prise de décision et le développement de l'entreprise. En tant qu'élément important de l'analyse des données, les rapports d'analyse des données revêtent une grande importance pour l'organisation, la visualisation et l'interprétation des données. Cet article expliquera comment utiliser MySQL et Ruby pour implémenter une fonction simple de rapport d'analyse de données et fournira des exemples de code correspondants. 1. La conception de la base de données et la création de tableaux doivent réaliser des fonctions d'analyse des données et de reporting

Comment implémenter une fonction simple de conversion de données à l'aide de MySQL et Ruby Comment implémenter une fonction simple de conversion de données à l'aide de MySQL et Ruby Sep 21, 2023 am 08:07 AM

Comment utiliser MySQL et Ruby pour implémenter une fonction de conversion de données simple. Dans le travail de développement réel, la conversion de données est souvent nécessaire pour convertir un format de données en un autre. Cet article explique comment utiliser MySQL et Ruby pour implémenter une fonction de conversion de données simple et fournit des exemples de code spécifiques. Tout d’abord, nous devons installer et configurer les environnements MySQL et Ruby. Assurez-vous qu'une base de données MySQL est installée et que vous pouvez vous connecter à la base de données via la ligne de commande ou d'autres outils. De plus, vous devez installer

Comment implémenter une simple fonction de planification de tâches asynchrones à l'aide de MySQL et Ruby Comment implémenter une simple fonction de planification de tâches asynchrones à l'aide de MySQL et Ruby Sep 20, 2023 am 10:48 AM

Comment utiliser MySQL et Ruby pour implémenter une simple fonction de planification de tâches asynchrones La plupart des applications Web précédentes utilisaient une méthode synchrone pour traiter les demandes, c'est-à-dire qu'une fois que l'utilisateur envoie une demande, le serveur traitera immédiatement la demande et renverra le résultat. . Cependant, à mesure que la complexité des applications augmente, l'efficacité du traitement des méthodes synchrones devient progressivement inefficace, de sorte que la planification asynchrone des tâches est devenue une exigence courante dans les applications Web modernes. Cet article explique comment utiliser MySQL et Ruby pour implémenter une simple fonction de planification de tâches asynchrones, y compris des tâches

Comment créer des applications Web évolutives à l'aide de Vue.js et Ruby Comment créer des applications Web évolutives à l'aide de Vue.js et Ruby Aug 03, 2023 pm 02:27 PM

Comment utiliser le langage Vue.js et Ruby pour créer des applications Web évolutives Ces dernières années, avec le développement et les besoins croissants des applications Web, la création d'applications Web évolutives est devenue un sujet important. En tant que framework frontal JavaScript léger, Vue.js fournit une solution flexible, efficace et évolutive. Dans le même temps, Ruby, en tant que langage de programmation concis et facile à lire, peut être utilisé pour construire de puissants systèmes back-end. Cet article expliquera comment combiner le langage Vue.js et Ruby pour construire

See all articles