- Linux - LUG OWL

"Echtzeit"-Darstellung von Daten im Browser
by Dominik Echterbruch 11 Sep '07

11 Sep '07

Hallo zusammen, ich habe die Aufgabe, sich unregelmäßig ändernde Daten möglichst in Echtzeit (oder wenigstens nah dran) in einem Browser darzustellen. Leider kann ich aufgrund eines NDAs nicht alle Details dazu erläutern, aber ich versuche mal, es so gut es geht zu beschreiben und möglichst viele Fragen zu beantworten. Dazu erst mal eine kurze Beschreibung der Situation: Irgendwo im Internet steht ein Server, der sowohl aktiv (bei einer Zustandsänderung), als auch auf Anfrage Daten für bestimmte Clients liefert. Diese Daten müssen bis zur nächsten Datenlieferung für den gleichen Client gecached werden und in einem Browser (der sich wiederum überall befinden kann, also auch hinter einem Proxy, einer Firewall, NAT und was weiß ich noch alles) dargestellt werden. Das zu implementierende System (also der Cache, der Webserver usw.) wird auf amtlicher Hardware (Größenordnung HP ProLiant DL 360/380 oder IBM xSeries) laufen. OS wird Debian 4 sein, Webserver Apache mit PHP 5, Datenbankserver MySQL 5. Tools, die nicht direkt mit der Auslieferung von Inhalten an den Browser beschäftigt sind, werden in C++ entwickelt. Die Probleme: ich kann nicht aktiv Daten verschicken, wenn sich etwas ändert, sondern der Client muß regelmäßig nachfragen. Soweit jedenfalls meine Meinung; wenn ich mich da irre, bin ich für einen Hinweis dankbar. Für annähernd Echtzeit wäre also z.B. eine Anfrage pro Sekunde nötig. Das ist aber nicht mit vernünftigem Hardwareaufwand realisierbar, weil bis zu 200.000 Clients bedient werden sollen. Das hieße also 200.000 Requests pro Sekunde, die von einigen hundert Apachen bedient werden müßten. Erschwerend kommt hinzu, daß ich so kompatibel wie irgend möglich sein muß. Also im Idealfall nur einfaches HTML. Klar, das ist nicht machbar, deswegen werde ich auf jeden Fall JavaScript bzw. Ajax beim Kunden durchboxen. Aber Java Applets, Flash oder gar eine eigene Anwendung wird nicht drin sein. Meine derzeitige Idee: Um die Last vom Webserver weg zu bekommen, schreibe ich einen kleinen Server, der nichts anderes tut, als die regelmäßigen Anfragen anzunehmen, im RAM nachzusehen, ob ein "Geändert"-Flag für diesen Client vorhanden ist und eine entsprechende Antwort liefert. Ist das Flag gesetzt, fragt die Anwendung den Webserver, was sich wie geändert hat, erhält die Daten und zeigt sie an. Für die Ausfallsicherheit würde ich mehrere Abfrage- und Webserver in der Anwendung hinterlegen, die bei nicht rechtzeitiger bzw. fehlender Antwort abgeklappert werden. Diese Liste wird jeweils aktualisiert, wenn die Anwendung neue Daten von einem Webserver erhält. Offene Fragen: - Gibt es eine geschicktere Lösung für das Echtzeitproblem, als ständig nachzufragen? - Könnte es evtl. aufgrund der Requestmassen Probleme mit ISPs geben? - Wenn z.B. 500 Clients hinter der gleichen Firewall hängen, bekommt die dann Probleme mit den offenen Sessions oder werden die sofort beendet, wenn die Antwort da ist? - Hilft es, UDP statt TCP zu verwenden? - Wie organisiere ich die Datenablage im RAM? Einfach /proc verwenden? Oder doch lieber etwas selbst geschraubtes? Ihr seht, es gibt genug zu klären. Über ein paar Anregungen würde ich mich sehr freuen. Danke und Grüße, Dominik Grüße, Dominik -- Wo kämen wir denn hin, wenn jeder sagen würde wo kämen wir hin, aber niemand gehen würde um zu sehen, wohin wir kämen, wenn wir gingen? (Autor unbekannt)

6 11

Textconverter
by Thomas Findeisen 09 Sep '07

09 Sep '07

Gibt es bereits ein Paket oder ein standalone-tool um aus binärdaten ein CSV-File (o.ä.) erzeugen zu können? Es müsste ein beliebiges Memorydumpfile in eine Textdatei exportieren können. Dabei sollten die Werte durch Leerzeichen oder Komma getrennt einfach nur nacheinander geschrieben werden. Wichtig ist hierbei die Ausgabe in Dezimalzahlen. Sowas wie ein bin2txt o.ä. hat in google nix brauchbares ausgespuckt ;( Thomas -- If your VCR is still blinking 12:00, you don't want Linux!

3 3

Message of the day NUR für root
by Marco Wiese 08 Sep '07

08 Sep '07

Hi, gibt es eine Möglichkeit, nach dem Einloggen eine Meldung anzuzeigen? Diesen Umstand alleine könnte man ja mit dem "motd"-File im /etc Verzeichnis bewerkstelligen. Bei mir soll diese Message allerdings nur root betreffen, alle anderen User die sich am System anmelden, sollen nichts von dieser Meldung mitbekommen. Umgesetzt werden soll das auf SuSE SLES8/9/10, möglich oder nicht? Danke und Gruß Marco

4 3

Canon EOS 400D und Linux
by Maximilian Wilhelm 06 Sep '07

06 Sep '07

Hi! Ich liebäugle aktuell damit, mit ein neues Spielzeug zuzulegen. :) Laut Doku ist Linux kein kompatibles Betriebssystem für die Kamera und es scheint auf den ersten Blick auch von der Kamera auf einen Rechner kompiert zu werden, wenn es um die Bilderübertragung geht. Hat hier wer schonmal eine EOS 400D in der Hand gehabt und möglichst mit usb-storage die Bilder von der Kamera gelutscht? Ciao Max, vielleicht einfach nur nicht das passende findend -- Follow the white penguin.

5 4

kein DVB-S nach Kernelupdate
by ACushion＠web.de 05 Sep '07

05 Sep '07

Hallo zusammen, ich stehe immer wieder vor einem Problem bei zwei Rechnern. Auf beiden ist Kubuntu Feisty Fawn. Beide Rechner verfügen über eine TV-Karte Sat-Anschluss. Bei einer Neuinstallation läuft alles bestens mit Kaffeine. Aber sobald es ein Kernel-update gibt und auch geupdatet wird, dann findet Kaffeine kein DVB-S mehr. Auch eine Neuinstallation des Treibers funktioniert nicht. Ich denke, dass ich im System nur eine Kleinigeit ändern muss um auf die DVB-S Daten zugreifen zu können. Immer wieder eine komplette Neuinstallation kann ja keine Lösung sein. Viele Grüsse, Andreas

2 1

RE: Tag der freien Software 15.9.
by Frank Starkenburg 02 Sep '07

02 Sep '07

Hallo Kurt, was habt ihr denn genau vor? Ich habe an dem Tag Urlaub und deswegen auf jedenfall Zeit. Soll das eine Veranstaltung wie der Linuxtag werden, oder wie stellt ihr euch das vor? cu Frank > -----Original Message----- > From: lug-announce-bounces(a)lug-owl.de > [mailto:lug-announce-bounces@lug-owl.de] On Behalf Of Kurt Gramlich > Sent: Saturday, September 01, 2007 12:00 PM > To: lug-announce(a)lug-owl.de > Subject: Tag der freien Software 15.9. > > > hallo lug-owl > > Skolelinux wuerde sich ueber eine Beteiligung von Euch > am Tag der freien Software freuen. Wir haben in Berlin und in > Guetersloh dazu etwas geplant. Wir freuen uns ueber persoenliche > und materielle Beteiligungen: > DVDs, CDs, USB-Sticks, Werbemateriel fuer Debian und Freie > Software ... > > Wer hat Lust wieder mal im TestZentrum in Guetersloh > vorbeizukommen? > > Wer sich beteiligen moechte, trage sich bitte in die Wiki Seite > ein: > http://wiki.skolelinux.de/SoftwareFreedomDay2007 Vielen Dank, ich wuerde mich freuen, Euch wieder einmal zu sehen. Am Montag komme ich erst sehr spaet zum Treffen in die Weberei, vielleicht koennen wir dort noch Details besprechen. Viele Gruesse/Regards Kurt -- kurt.gramlich(a)lugrav.de GnuPG Key ID E263 FCD4 -- LUG-Announce mailing list LUG-Announce(a)lug-owl.de subscribe/unsubscribe: http://lug-owl.de/mailman/listinfo/lug-announce

1 0

DVB-T USB Stick
by Marcus Sobchak <lists＠localguru.de> 29 Aug '07

29 Aug '07

Hei, kann jemand einen DVB-T USB Stick empfehlen, der unter Linux rennt. Habe schon die einschlägigen Hardwareseiten durchgelesen, dort wird aber meist nur berichtet, ob das Gerät grundsätzlich unterstützt wird, nicht ob der Empfang (ist natürlich vom Standort abhängig) und Bildqualität gut sind. Mein derzeitiger Favorit ist ein Terratec Cinergy T2 USB oder - weil nicht ganz so groß - ein Terratec Cinergy T USB XE. Vielleicht hat der ein oder andere ja noch einen besseren Hinweis. Ciao!

1 2

Auslandserfahrung
by A. Dreyer 27 Aug '07

27 Aug '07

Hallo, Wie vielleicht einige von euch mitbekommen haben arbeite ich nun schon fast 2 Jahre in UK. Falls jemand von euch gerne ein paar Jahre Auslandserfahrung sammeln möchte und sich in Englisch halbwegs verständlich ausdrücken kann, sollte er sich evtl. mal bei mir melden. Ich habe mittlerweile einige Anfragen von verschiedenen Firmen hier die in den Bereichen * Unix/Linux (Server) * Netzwerke (Infrastruktur: Router, Routing Protokolle, Switches,..) * Linux/Netzwerk/Security (Firewalls, Content-Filter, SSL,..) suchen. Meist werden Support Mitarbeiter mit mind. 2 Sprachen (DE+EN) gesucht aber je nach Qualifikation kann dies auch schon mal 3rd Level Support, Consulting oder R&D sein. (Die Firma für die ich arbeite ist nur eine von den Suchenden..) Regards, Achim Dreyer -- Achim Dreyer || http://www.adreyer.com/ Senior Unix & Network Admin || RHCE, RHCA, CCNA, CCSA, CACert assurer Internet Security Consultant || Phone: +44 7756948229

1 0

XML parsen mit perl
by Cord Beermann 27 Aug '07

27 Aug '07

Hallo. Ich versuche gerade eine xml-Datei einzulesen, Format: --------------------------------------------------------------------------- <oc11xml version="1.1" date="2007-08-23 17:27:17" since="2007-01-01 00:00:00"> <cache> <id id="103013" node="1">E1B384F9-C7AD-09DF-95D6-0523683E4C82</id> <name><![CDATA[Lupfen]]></name> <waypoints gccom="GCGQ6G" nccom="N01082" oc="OC0ED3" /> </cache> <cache> <id id="103014" node="1">35D59600-93C5-C4B6-05AF-18A09D6CDB4D</id> <name><![CDATA[Udilhild´s Heiratsgut]]></name> <waypoints gccom="GCGQ6V" nccom="N01085" oc="OC0ED4" /> </cache> </oc11xml> --------------------------------------------------------------------------- Beispiel für Aufbau, <name></name> ist nicht eindeutig. Die eigentliche Datei enthält etwa 10000 Datensätze. dafür benutze ich XML::Simple: --------------------------------------------------------------------------- #!/usr/bin/perl -w use XML::Simple; $xml = new XML::Simple; $data = $xml->XMLin("$ARGV[0]", ForceArray => 0 ); foreach $name (keys %{$data->{cache}} ) { print $data->{cache}{$name}{waypoints}{oc} . "\n"; } --------------------------------------------------------------------------- Relevanter Teilcode. Damit habe ich <name> als 'Handle' um auf die anderen Werte zugreifen zu könnnen. Da aber <name> eben nicht eindeutig wirft mir perl Fehlermeldungen aus: Warning: <cache> element has non-unique value in 'name' key attribute: HCC at /home/cord/bin/gps-import-ocxml line 33 wie mache ich, das ich die unique-ids in 'waypoints => oc' oder 'id => id' als Handles bekomme? Vielen Dank, Cord

2 1

nss-ldapd
by Maximilian Wilhelm 27 Aug '07

27 Aug '07

Hi! Ich vermute mal, dass hier doch einige LDAP als zentrale Usersammlungsstelle laufen haben und demnach auch libnss-ldap nutzen, damit die lieben User alle über NSS auf den Linuxsysteme rauspurzeln. Ich vermute weiter, dass einige, die solch ein Setup haben, schonmal über die ein oder andere Hürde gefallen sind (kaputte tcsh, udev, ...). Ich bin gerade über nss-ldapd[1] gestolpert (worden). Die grobe Idee ist, auf jedem Client nen Daemon laufen so lassen, der mit dem LDAP-Server redet und einen Client, der von NSS befragt wird. Die Kommunikation des nss-ldap-Server und -Clients läuft über einen lokalen Socket. Die behaupten, dass man damit weniger Schmerzen haben soll... Hat irgendjemand hier das Ding laufen? Wenn ja, in welchem Umfeld (wieviele Maschinen) und mit welchen Erfahrungen? [1] http://ch.tudelft.nl/~arthur/nss-ldapd/docs.html Ciao Max -- | | Follow the white penguin. | |\/| | |-----------------------------------------------------------. | | |/\| | Rechnerbetrieb Mathematik | Meine Baustellen: TSM | | | Universitaet Paderborn | Hostmaster, Linux, LDAP |

1 0