Heim Datenbank MySQL-Tutorial 利用ruby通过Thrift接口批量插入HBase

利用ruby通过Thrift接口批量插入HBase

Jun 07, 2016 pm 05:28 PM
hbase ruby

因为工作中使用fluentd采集日志,需要使用ruby通过thrift接口插入数据到hbase中,网上搜索了一下,发现很多都是插入单个数据,没

因为工作中使用fluentd采集日志,,需要使用ruby通过thrift接口插入数据到hbase中,网上搜索了一下,发现很多都是插入单个数据,没办法只好参考python语言写的批量插入修改了代码,终于搞定。

$:.unshift File.expand_path('gen-rb', File.dirname(__FILE__))
require 'thrift'
require File.expand_path('gen-rb/hbase', File.dirname(__FILE__))
transport = Thrift::BufferedTransport.new(Thrift::Socket.new("localhost", "9090"))
transport.open
client = Apache::Hadoop::Hbase::Thrift::Hbase::Client.new(Thrift::BinaryProtocol.new(transport))

## Get Table meta data

def newpass( len )
    chars = ("a".."z").to_a + ("A".."Z").to_a + ("0".."9").to_a
    newpass = ""
    1.upto(len) { |i| newpass     return newpass
end
columnvalue = "v"*10
batchmutations = []
starttime=Time.now
1000.times do |x|

  mutations=[]
  rowkey ="RK_"     5.times do |i|
        mutations "f1:" columnvalue)
    end
    batchmutations rowkey,:mutations => mutations)
end
client.mutateRows("testdb2", batchmutations)

linux

Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn

Heiße KI -Werkzeuge

Undresser.AI Undress

Undresser.AI Undress

KI-gestützte App zum Erstellen realistischer Aktfotos

AI Clothes Remover

AI Clothes Remover

Online-KI-Tool zum Entfernen von Kleidung aus Fotos.

Undress AI Tool

Undress AI Tool

Ausziehbilder kostenlos

Clothoff.io

Clothoff.io

KI-Kleiderentferner

AI Hentai Generator

AI Hentai Generator

Erstellen Sie kostenlos Ai Hentai.

Heißer Artikel

R.E.P.O. Energiekristalle erklärten und was sie tun (gelber Kristall)
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Beste grafische Einstellungen
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. So reparieren Sie Audio, wenn Sie niemanden hören können
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25: Wie man alles in Myrise freischaltet
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌

Heiße Werkzeuge

Notepad++7.3.1

Notepad++7.3.1

Einfach zu bedienender und kostenloser Code-Editor

SublimeText3 chinesische Version

SublimeText3 chinesische Version

Chinesische Version, sehr einfach zu bedienen

Senden Sie Studio 13.0.1

Senden Sie Studio 13.0.1

Leistungsstarke integrierte PHP-Entwicklungsumgebung

Dreamweaver CS6

Dreamweaver CS6

Visuelle Webentwicklungstools

SublimeText3 Mac-Version

SublimeText3 Mac-Version

Codebearbeitungssoftware auf Gottesniveau (SublimeText3)

Verwendung von Hadoop und HBase in Beego für die Speicherung und Abfrage großer Datenmengen Verwendung von Hadoop und HBase in Beego für die Speicherung und Abfrage großer Datenmengen Jun 22, 2023 am 10:21 AM

Mit dem Aufkommen des Big-Data-Zeitalters sind Datenverarbeitung und -speicherung immer wichtiger geworden und die effiziente Verwaltung und Analyse großer Datenmengen ist für Unternehmen zu einer Herausforderung geworden. Hadoop und HBase, zwei Projekte der Apache Foundation, bieten eine Lösung für die Speicherung und Analyse großer Datenmengen. In diesem Artikel wird erläutert, wie Sie Hadoop und HBase in Beego für die Speicherung und Abfrage großer Datenmengen verwenden. 1. Einführung in Hadoop und HBase Hadoop ist ein verteiltes Open-Source-Speicher- und Computersystem, das dies kann

Eingehende Analyse der Ähnlichkeiten und Unterschiede zwischen Golang und Ruby Eingehende Analyse der Ähnlichkeiten und Unterschiede zwischen Golang und Ruby Jun 01, 2024 pm 08:46 PM

Der Hauptunterschied zwischen Go und Ruby besteht darin, dass Go eine statisch typisierte kompilierte Sprache ist, die leichte Parallelität und effiziente Speicherverwaltung unterstützt, und sich zum Schreiben von Anwendungen mit hoher Parallelität eignet. Ruby ist eine dynamisch typisierte interpretierte Sprache, die echte Parallelität, aber Speicherverwaltung unterstützt erfordert eine manuelle Steuerung und eignet sich zum Schreiben flexibler Webanwendungen.

Warum haben Python, Ruby und andere Sprachen den Inkrementoperator abgelehnt? Warum haben Python, Ruby und andere Sprachen den Inkrementoperator abgelehnt? May 11, 2023 pm 04:37 PM

Vielen Menschen ist möglicherweise ein Phänomen aufgefallen, nämlich dass in einigen modernen Programmiersprachen (natürlich nicht in Bezug auf „neue“ Programmiersprachen) die Inkrementierungs- und Dekrementierungsoperatoren abgeschafft wurden. Mit anderen Worten, es gibt in diesen Sprachen keinen Ausdruck wie i++ oder j--, sondern nur i+=1 oder j-=1. Ein solcher Ausdruck. In dieser Antwort werden die Hintergründe und Gründe für dieses Phänomen aus der Perspektive der Designphilosophie untersucht. Streng genommen könnte die Aussage „i++ verschwindet“ voreingenommen sein, da es den Anschein hat, dass nur Python, Rust und Swift unter den Mainstream-Programmiersprachen die Inkrement- und Dekrementoperatoren nicht unterstützen. Als ich zum ersten Mal mit Python in Kontakt kam, war dies auch der Fall

Wie nutzt Ruby die MySQL2-Verbindung, um MySQL zu betreiben? Wie nutzt Ruby die MySQL2-Verbindung, um MySQL zu betreiben? Apr 17, 2023 pm 10:07 PM

Ruby betreibt MySQL mit MySQL2, um eine Verbindung zu MySQL herzustellen und MySQL zu betreiben. geminstallmysql2 stellt eine Verbindung zu MySQL her, um eine Verbindung herzustellen: require'mysql2'conn=Mysql2::Client.new({host:'192.168.200.73',username:'root',password:'P@ssword1!'}) Die akzeptierte Verbindung Zu den Optionen gehören: Mysql2::Clie

So implementieren Sie eine einfache Datenkonvertierungsfunktion mit MySQL und Ruby So implementieren Sie eine einfache Datenkonvertierungsfunktion mit MySQL und Ruby Sep 21, 2023 am 08:07 AM

So implementieren Sie mit MySQL und Ruby eine einfache Datenkonvertierungsfunktion. In der tatsächlichen Entwicklungsarbeit ist häufig eine Datenkonvertierung erforderlich, um ein Datenformat in ein anderes zu konvertieren. In diesem Artikel wird erläutert, wie Sie mithilfe von MySQL und Ruby eine einfache Datenkonvertierungsfunktion implementieren, und es werden spezifische Codebeispiele bereitgestellt. Zuerst müssen wir die MySQL- und Ruby-Umgebungen installieren und konfigurieren. Stellen Sie sicher, dass Sie eine MySQL-Datenbank installiert haben und über die Befehlszeile oder andere Tools eine Verbindung zur Datenbank herstellen können. Darüber hinaus müssen Sie installieren

So implementieren Sie mit MySQL und Ruby eine einfache Datenanalyse-Berichtsfunktion So implementieren Sie mit MySQL und Ruby eine einfache Datenanalyse-Berichtsfunktion Sep 20, 2023 pm 05:09 PM

So implementieren Sie mit MySQL und Ruby eine einfache Datenanalyse-Berichtsfunktion. Einführung: Im heutigen datengesteuerten Zeitalter spielt die Datenanalyse eine entscheidende Rolle bei der Entscheidungsfindung und Entwicklung von Unternehmen. Als wichtiger Bestandteil der Datenanalyse sind Datenanalyseberichte von großer Bedeutung für die Organisation, Visualisierung und Interpretation von Daten. In diesem Artikel wird erläutert, wie Sie mithilfe von MySQL und Ruby eine einfache Datenanalyse-Berichtsfunktion implementieren, und entsprechende Codebeispiele bereitstellen. 1. Datenbankdesign und Tabellenerstellung müssen Datenanalyse- und Berichtsfunktionen realisieren

So implementieren Sie eine einfache asynchrone Aufgabenplanungsfunktion mit MySQL und Ruby So implementieren Sie eine einfache asynchrone Aufgabenplanungsfunktion mit MySQL und Ruby Sep 20, 2023 am 10:48 AM

So implementieren Sie mit MySQL und Ruby eine einfache asynchrone Aufgabenplanungsfunktion. Die meisten früheren Webanwendungen verwendeten eine synchrone Methode zum Verarbeiten von Anforderungen. Das heißt, nachdem der Benutzer eine Anforderung gesendet hat, verarbeitet der Server die Anforderung sofort und gibt das Ergebnis zurück . Mit zunehmender Komplexität von Anwendungen wird jedoch die Verarbeitungseffizienz synchroner Methoden allmählich ineffizient, sodass die asynchrone Aufgabenplanung zu einer häufigen Anforderung in modernen Webanwendungen geworden ist. In diesem Artikel wird erläutert, wie Sie mithilfe von MySQL und Ruby eine einfache asynchrone Aufgabenplanungsfunktion einschließlich Aufgaben implementieren

So erstellen Sie skalierbare Webanwendungen mit Vue.js und Ruby So erstellen Sie skalierbare Webanwendungen mit Vue.js und Ruby Aug 03, 2023 pm 02:27 PM

So verwenden Sie Vue.js und die Ruby-Sprache zum Erstellen skalierbarer Webanwendungen. In den letzten Jahren ist die Erstellung skalierbarer Webanwendungen mit der Entwicklung und den wachsenden Anforderungen an Webanwendungen zu einem wichtigen Thema geworden. Als leichtes JavaScript-Frontend-Framework bietet Vue.js eine flexible, effiziente und skalierbare Lösung. Gleichzeitig kann Ruby als prägnante und leicht lesbare Programmiersprache zum Aufbau leistungsfähiger Backend-Systeme genutzt werden. In diesem Artikel wird erläutert, wie Sie Vue.js und die Ruby-Sprache zum Erstellen kombinieren

See all articles