[Adapter] Neuer radar2-Adapter

[frankjoke]

@steimi
Wenn arp-scan ihn findet dann sagt radar er ist da. Wie gesagt, wenn das ein server ist dann wird er wohl irgend eine url haben die du abfragen kannst.

[smarti2015]

Ich hab jetzt den 1.2.0 installiert, er läuft immer so 1-2 Tage dann muss ich das Asus Tinkerbaord rebooten. Manchmal reicht auch ein Adapter-Neustart. Wenn ich nun den Haken in HCI Only reinmache, dann läuft der Adpater und crasht gleich wieder. Habt ihr da ne Lösung? auf HCI sollte mein USB BT Stick laufen.

radar2.0	2019-05-03 19:52:52.620	info	debug: radar2 found uBT's: [ '04:b1:67:0a:ca:dd' ]
radar2.0	2019-05-03 19:52:52.619	info	debug: and not here (Rene, Samira, Kian)
radar2.0	2019-05-03 19:52:52.619	info	debug: and who here ()
radar2.0	2019-05-03 19:52:52.618	info	debug: radar2 found here ()
radar2.0	2019-05-03 19:52:23.403	info	debug: ScanCmd err: 'Set scan parameters failed: Operation not permitted'
radar2.0	2019-05-03 19:52:23.382	info	debug: started #46 hcitool -i hci0 scan --flush --length=19
radar2.0	2019-05-03 19:52:23.380	info	debug: started #45 hcitool -i hci0 lescan --duplicates
radar2.0	2019-05-03 19:52:23.355	info	debug: ScanCmd err: 'Can\'t init device hci0: Operation not permitted (1)'
radar2.0	2019-05-03 19:52:23.335	info	debug: started #44 hciconfig hci0 up
radar2.0	2019-05-03 19:52:23.222	info	debug: ScanCmd err: 'Can\'t down device hci0: Operation not permitted (1)'
radar2.0	2019-05-03 19:52:23.205	info	debug: radar2 found uIP's: []
radar2.0	2019-05-03 19:52:23.204	info	debug: started #43 hciconfig hci0 down
radar2.0	2019-05-03 19:51:51.190	info	debug: radar2 found uBT's: [ '04:b1:67:0a:ca:dd' ]
radar2.0	2019-05-03 19:51:51.190	info	debug: and not here (Rene, Samira, Kian)
radar2.0	2019-05-03 19:51:51.190	info	debug: and who here ()
radar2.0	2019-05-03 19:51:51.189	info	debug: radar2 found here ()
radar2.0	2019-05-03 19:51:23.382	info	debug: ScanCmd err: 'Set scan parameters failed: Operation not permitted'
radar2.0	2019-05-03 19:51:23.367	info	debug: started #42 hcitool -i hci0 scan --flush --length=19
radar2.0	2019-05-03 19:51:23.367	info	debug: started #41 hcitool -i hci0 lescan --duplicates
radar2.0	2019-05-03 19:51:23.366	info	debug: ScanCmd err: 'Can\'t init device hci0: Operation not permitted (1)'
radar2.0	2019-05-03 19:51:23.317	info	debug: started #40 hciconfig hci0 up
radar2.0	2019-05-03 19:51:23.207	info	debug: ScanCmd err: 'Can\'t down device hci0: Operation not permitted (1)'
radar2.0	2019-05-03 19:51:23.189	info	debug: radar2 found uIP's: []
radar2.0	2019-05-03 19:51:23.188	info	debug: started #39 hciconfig hci0 down

[frankjoke]

@smarti2015 ,

Wäre interessant welche Fehler dich Zwingen den Rechner zu rebooten?

mit

rfkill block bluetooth
rfkill unblock bluetooth

und/oder

 hciconfig hci0 down
 hciconfig hci0 up

Das letzte macht der Adapter im hcimode automatisch, aber du scheinst den Initscript nicht ganz durchgeführt zu haben da er nicht die Rechte dazu hat (ScanCmd err: 'Can\'t init device hci0: Operation not permitted (1)')!
Bitte zumindest die letzten 2 Zeilen ausführen!

sudo apt-get install libcap2-bin arp-scan bluetooth bluez libbluetooth-dev libudev-dev net-tools
sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which arp-scan`)
sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which node`)
sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which arp`)
sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which hcitool`)
sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which hciconfig`)

[smarti2015]

@frankjoke

Danke, jetzt läuft es mit dem HCI Only Mode. Mal sehen ob es stabil bleibt.
Einen schönen Abend

[Diginix]

@frankjoke
Ich habe heute noch mal hcionly getestet und dazu 2 debug logs erstellt.
Die schick ich dir im Chat.
Wenn ich hcitool lescan in der Konsole starte sieht das so aus:

iobroker@BT3-PRO:/opt/iobroker$ hcitool lescan
LE Scan ...
F0:65:9D:F9:60:11 TLC120-d1000a51
F0:65:9D:F9:60:11 (unknown)
00:1A:22:09:81:8D KEY-BLE
00:1A:22:09:81:8D KEY-BLE

An dem KEY-BLE bleibt er ewig hängen, nach gefühlten 2 Minuten kommt dann das Prompt.
Key-ble nutze ich für mein BLE Türschlossantrieb.
https://github.com/oyooyo/keyble

Warum existiert da so ein "virtuelles" BLE Gerät an dem der hcitool lescan ewig hängt?
Key-ble selbst nutzt noble und solange radar2 nicht auf hcionly steht, konnte ich die Software auch nicht verwenden, weil der Adapter noble blockiert hat.

Genial wäre nun wenn hcionly im Adapter erfolgreich funktioniert und ich so parallel in der Konsole mit key-ble inkl noble den Türschlossantrieb steuern und auslesen könnte.

Wenn radar2 nicht auf hcionly steht, also noble verwendet bekomme ich selbst mit 40 Sekunden Scanintervall den "BT already scanning" Fehler.

Also radar2 mit noble läuft ok und findet die BLE Geräte, verhindert aber die key-ble Nutzung.
radar2 mit hcionly scheint beim LE Scan zu hängen und findet so weder meine Smartwatch noch den Türschlossantrieb zuverlässig.

Es muss doch möglich sein key-ble mit noble verwenden zu können und hcitool lescan für radar2 ohne dass der ewig hängt wegen dem key-ble.
Wobei nicht klar ist, ob das key-ble "Gerät" den lescan stört. Denn diese Geräte erscheinen ja sofort, nur keine weiteren, die aber existieren.

Irgendwelche Ideen was man beim LE Scan mit hcitool machen könnte?

[frankjoke]

@Diginix ,
Hab's mir kurz angeschaut, einige Observations:

1. net-ping not available! Will try to use normal ping!, hast du die Installationsroutinen nicht durchgeführt 'BEVOR' du den Adapter installiert hast? Wenn nicht, alles nochmal durchlaufen lassen und von git installieren (nicht mit beliebig!).

2. Die BT-LE-Adapter können während eines LE-scans (egal ob noble ode hcitool) kein weiteren LE-Befehl ausführen! Brauchst separaten stick wenn du gleichzeitig scannen und was anderes machen willst.

3. Habe gesehen dass dein 1. scan 38 Sekunden gedauert hat, Bei diesem Startwert würd ich eher zur Sicherheit auf 1 Minute gehen

4. Der BLe-scan läuft ewig (ich habe nie so lange warten wollen bis er selbst abbricht), im Adapter wird er aber nach 85% der scan-Zeit gestoppt um das Problem des noch laufenden scans zu verhindern. Bei Noble kann man die maximale scan-zeit durch scan-stop abbrechen aber bei hcitool geht nur ein ^C.

LG Frank

[Diginix]

@frankjoke
Wird net-ping bei diesem Befehl mit installiert? Wenn ja, dann habe ich das so durchgeführt.

sudo apt-get install libcap2-bin arp-scan bluetooth bluez libbluetooth-dev libudev-dev net-tools

Alle deine Befehle aus dem Install Spoiler werden bei mir nach jedem Systemupdate wieder mit ausgeführt. Und deine letzten 2 Updates wurden ja über GIT von mir installiert nachdem schon mehrfach zuvor Systemupdates gemacht wurden und somit deine Spoiler Befehle auf jeden Fall mehrfach ausgeführt wurden. Daher wird net-ping wohl einfach nicht existieren...

Selbst wenn ich bei hcionly den Scanintervall auf 60 Sekunden setze, werden die BLE Geräte nicht erkannt. In der Konsole taucht die Smartwatch bei hcitool lescan mit auf, aber der Türschlossantrieb nicht. Bei Verwendung von noble werde beide innerhalb von 30 Sekunden Scanintervall immer gefunden.

Wahrscheinlich werde ich mal noch ein BT Stick an den Rechner stecken und eines der beiden BT Modulen dann für radar2 nutzen und das andere für den Türschlossantrieb. Das funktioniert dann auch wenn beide mit noble arbeiten?

[frankjoke]

@Diginix ,
<Net ping wird mittels npm kompilirt und instlliert wenn der adapter installiert wird. Es verwendet was von den libudev-dev aber wenns nicht geht dann verwend ich eh normales ping welches nur um ein paar ms langsamer ist...

Sonst sollten 2 BT module funktionieren, auch unter noble. Keine Ahnung warum hci-tool weniger findet, aber es kann damit zusammenhngen dass noble eigene routinen hst um auf das innerste des Treibers direkt zuzugreifen,

[dondaik]

.... ach wäre das leben ohne edv schön ....
ich würde mich schon freuen wenn radar mal alle IP geräte auflisten würde die sie sich im netzt rumtreiben ( und von ping als anwesend gefunden werden )
das da wohl BT geräte sind die ich noch nie gesehen habe geschweige den wüsste wo sie sind ist ja nicht so schlimm ...

[Diginix]

@frankjoke Danke für die Erläuterungen. Dann werde ich wohl bei noble bleiben und einen zusätzlichen BT Stick anschließen um das Türschloss steuern zu können.

Wird net-ping auch bei einem Adapter Update gebaut oder nur bei Erstinstallation?
Will ungern den Adapter komplett deinstallieren und somit alle Datenpunkte inkl. deren History Einstellungen verlieren nur um es zu testen.

[frankjoke]

@Diginix
Auch beim git-install, nicht beliebig, schliesse fenster nicht und schau auf details welche Fehler npm ausspuckt.

Ich habs auf optional gesetzt, also wenn ein Fehler kommt dann wird trotzdem installiert da ja normales Ping im Hintergrund ist.

[helfi9999]

@frankjoke
Hallo habe auf node 8.16 upgrade gemacht seitdem bekomme ich folgende Fehlermeldung und Adapter läuft nicht nicht:

Spoiler

host.ioBroker-Rock 2019-05-06 19:27:08.771 info Restart adapter system.adapter.radar2.0 because enabled
host.ioBroker-Rock 2019-05-06 19:27:08.771 error instance system.adapter.radar2.0 terminated with code 0 (OK)
host.ioBroker-Rock 2019-05-06 19:27:08.771 error Caught by controller[0]: port: 67 }
host.ioBroker-Rock 2019-05-06 19:27:08.771 error Caught by controller[0]: address: '0.0.0.0',
host.ioBroker-Rock 2019-05-06 19:27:08.771 error Caught by controller[0]: syscall: 'bind',
host.ioBroker-Rock 2019-05-06 19:27:08.770 error Caught by controller[0]: code: 'EACCES',
host.ioBroker-Rock 2019-05-06 19:27:08.770 error Caught by controller[0]: errno: 'EACCES',
host.ioBroker-Rock 2019-05-06 19:27:08.770 error Caught by controller[0]: at process._tickCallback (internal/process/next_tick.js:181:9)
host.ioBroker-Rock 2019-05-06 19:27:08.770 error Caught by controller[0]: at _combinedTickCallback (internal/process/next_tick.js:142:11)
host.ioBroker-Rock 2019-05-06 19:27:08.769 error Caught by controller[0]: at _handle.lookup (dgram.js:266:18)
host.ioBroker-Rock 2019-05-06 19:27:08.769 error Caught by controller[0]: { Error: bind EACCES 0.0.0.0:67
radar2.0 2019-05-06 19:27:08.686 info found '@abandonware/noble'
radar2.0 2019-05-06 19:27:08.085 info debug: mtime of /opt/iobroker/node_modules/iobroker.radar2/lib/vendors.json is Sun May 05 2019 00:57:10 GMT+0200 (CEST) stats are 0.059027038966049376
radar2.0 2019-05-06 19:27:08.078 info radar2 initialization started...
radar2.0 2019-05-06 19:27:08.077 info debug: radar2 received undefined objects and 124 states, with config devices,scandelay,arp_scan_cmd,btadapterid,printerdelay,removeEnd,knownIPs,knownBTs,external,delayaway,delayuwz,numuwz,longuwz,deb
radar2.0 2019-05-06 19:27:07.499 info starting. Version 1.2.0 in /opt/iobroker/node_modules/iobroker.radar2, node: v8.16.0

Weiß nicht weiter

Gruß Helfi

[steimi]

@frankjoke sagte in [Adapter] Neuer radar2-Adapter:

Ok, danke an alle die inzwischen einige Aufklärungsarbeit geleistet haben!

Eine Zusammenfassung kurz:

1. Wenn ein neues node (V8->V10) installiert wird sollten auch die node-tools (node-gyp, u.s.w) neu installiert werden
2. Wenn ein neues node (V8.x auf V8.y oder V8 auf V10 ...) installiert wird muss müssen auch die Berechtigungen neu vergeben werden:

sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which node`)

3. Wenn andere updates am System vorgenommen werden die neue BT-Treiber oder utilities installieren müssen alle im Install spoiler stehenden Installationsbefehle neu ausgeführt werden. Fehler wie { Error: bind EACCES 0.0.0.0:67 deuten darauf hin dass sich was geändert hat da keine Berechtigung zum Aufbau einer dhcp-Verbindung besteht.

War wieder im Spital (diesmal mit Notebook, habe neuen Gips aus Kunststoff und keine Fäden von der OP mehr ) und hab etwas dazuprogrammiert aber erst heute zu Hause nach der Rückkehr testen können:

V1.2.0 steht auf git!
Die Änderungen in Kürze:

1. Möglichkeit zur Verwendung von hcitool anstatt noble unter linux geschaffen (default).
2. _LastHere wird bei Adapterrestart nicht geändert
3. Default Abfragezyklus auf 30 Sekunden geändert

Bei 1) ist es möglich ohne noble auszukommen, ich verwende dann ausschließlich hcitool scan und hcitool lescan! Für normales BT ist das besser da länger gescannt wird, für BT-LE sollte es egal sein da beide Module das selbe machen.
Ich habe dies deshalb als default angegeben welche unter linux auch so verwendet werden soll. Wenn ihr umsteigt müsst ihr nun auch

sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which hcitool`)
sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f `which hciconfig`)

eingeben (ist in der readme/install-Liste aufgenommen worden).

Die 2) bedeutet dass _lastHere das letzte Datum wenn das Gerät gesichtet wurde bleibt. Einziger Nachteil: Währen Adapterstart kann es vorkommen dass Geräte als abwesend gezeigt werden wenn der Adapter längere Zeit still steht.

Die 3) wurde umgestellt da viele Nutzer den Default von 20 Sekunden beibehalten haben aber die Scanzeit zu kurz war um viele BT-Geräte zu finden. Mit dem neuen hcitool-Verfahren wird 85% der Zeit gescannt, und zwar beide BT-Methoden gleichzeitig. Allerdings darf sonst am gleichen BT-Controller kein anderes BT-Programm laufen, auch nicht auf der Kommandozeide. Erst wieder nachdem radar2 gestoppt wird! Vorteil: Einige Geräte die unter Radar1 gefunden wurden und unter radar2 nicht mehr sollten jetzt wieder gefunden werden!

p.s.: Hab die Version noch nicht auf npm und ins repo gegeben da ich hoffe mit eurem Feedback mögliche bugs noch auszukurieren! Von git aber nicht mittels 'beliebig' installieren!

Punkt 2 mal ausführen...

[helfi9999]

@steimi sagte in [Adapter] Neuer radar2-Adapter:

sudo setcap cap_net_admin,cap_net_raw,cap_net_bind_service=+eip $(eval readlink -f which node)

super danke das hat geholfen
Herzlichen Dank ein Problem weniger

P.S. Kennst du dich auch mit dem tr-064 Adapter aus

[frankjoke]

@helfi9999 , @steimi

Danke an @steimi für die schnelle Hilfe, besser hät ichs auch nicht sagen können!

Früher als ioBroker noch als root lief war das alles nicht notwendig, jetzt müssen solche Bewilligungen her damit ioBroker oder die Adapter & Programme ohne sudo auskommen.

Aus Sicherheitsgründen gelten die Bewilligungen nur für das aktuelle binary, also überschreibst du es mit einer neuen Version ist sie futsch. Das soll verhindern dass schadcode eingeschleust wird aber zieht mehr administrationsaufwand mit sich.

[MathiasJ]

@frankjoke
Sag mal, dürfen wir wissen, was Du ausgefressen hast?
Klingt ja ziemlich gefährlich
Ich wünsche Dir gute Genesung!

Nicht um in's OT zu verfallen.......
Radar getestet mit USB-Extender und 15m LAN-Kabel:
Radar stürzt laufend ab, wenn man alles durchlaufen läßt.
Radar läuft zuverlässig durch, wenn man only hci markiert.
Egal ob mit 1200 mA oder 600 mA.
Vielleicht braucht das ja der ein oder andere.
ich habe diese USB-Extender genommen.
Gruß,
Mathias

[frankjoke]

@MathiasJ
Danke für die Info Matthias! Kannte die Dinger noch gar nicht, ist aber gute Idee, kann man ja such verwenden um an 2 Stellen mit 2 Instanzen zu fahren!

Ich habe einen BT-OBD im Auto stecken welches unter dem Carport stehen habe. Vom Arbeitszimmer sehe ich das nicht, im nächsten Raum schon. Mal kaufen/testen ob ich einen besseren Platz finde!

Was stürzt mit noble wie ab?

p.s.: Habe doppelten Knöchelbruch und bin jetzt mit 6 Schrauben und einer Platte auf der einen Seite und 2 Schrauben auf der anderen Seite zusammengeflickt. Schaut am Röntgen aus wie meine Werkzeugkiste... Noch 2 Wochen Liegegips und dann hoffentlich den ersten Gehgips. Das andere ist alles schon verheilt.

[SBorg]

Gute Besserung @terminator 0.6 ^^

OT:
@MathiasJ sagte in [Adapter] Neuer radar2-Adapter:

Egal ob mit 1200 mA oder 600 mA.

Dir ist aber schon bewusst, dass >=PI3 sowieso 1.2A auf den USB-Ports liefert, unabhängig von der Einstellung? Nur 1+2 liefern standardmäßig ohne "boost" 600mA

[MathiasJ]

@SBorg
Nein das wußte ich jetzt nicht.
Weiß jemand wie es beim Rock64 ist?
Wie viel liefert der?
Gruß
Mathias

[MathiasJ]

@frankjoke
Dann wünsche ich Dir weiter gute Besserung und auf eine baldige Genesung.

Dieses Resultat habe ich nur mit USB-Extendern und 15m LAN-Kabel:
Noble läßt Radar immer wieder abstürzen, das heißt es kommt kein Scan mehr.
ich habe nicht im logfile geschaut.
Danach habe ich only hci enabled. Dann ging Radar 2 Tage ohne Probleme durch.
Beim erneutem disable ging Radar wieder nur für 2 Stunden, dann mußte ich wieder einen Neustart des Adapters machen.
Dann ließ ich only hci ein zweites mal enabled und ließ Radar wieder 2 Tage ohne Probleme durchsausen.

Ohne USB-Extender, also BT-Dongle direkt angeschlossen:
Da spielt es keine Rolle, ob only hci enabled ist oder nicht.
Da rennt Radar2 durch wie nichts.

Aber es spielt ja keine Rolle, wie es funktioniert. Hauptsache es geht.
ich warte jetzt noch auf eine anderes LAN-Kabel (7m) damit ich das ganze fest installieren kann.