https://www.raspibo.org/wiki/api.php?action=feedcontributions&feedformat=atom&user=Dariomas raspibo - Contributi utente [it] 2026-05-07T19:14:00Z Contributi utente MediaWiki 1.35.5 https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5597 Gruppo Meteo/HowTo/server 2016-06-21T14:40:31Z <p>Dariomas: /* graphite */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializzare il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> &lt;del&gt;arkiweb.conf&lt;/del&gt;<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * &lt;del&gt;'''TODO''' aggiungere dal repo svn il file&lt;/del&gt;<br /> &lt;del&gt;'''''/etc/arkimet/scan-bufr/generic.lua'''''&lt;/del&gt;<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }&lt;/nowiki&gt;<br /> <br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/RemoteProcedure&diff=5560 Gruppo Meteo/RemoteProcedure 2016-05-31T08:58:19Z <p>Dariomas: /* configure */</p> <hr /> <div>= r-map implementation overview =<br /> <br /> === Remote procedure supportate ===<br /> <br /> Ogni comando/risposta Jsonrpc sarebbe meglio rimanesse entro i 144 caratteri.<br /> <br /> ==== configure ====<br /> configura il modulo.<br /> <br /> parametri:<br /> * bool reset: riporta le configurazioni ai valori di default<br /> * char mqttrootpath: prima parte del path di pubblicazione su MQTT<br /> * int mqttsampletime: intervallo tra le minure in secondi<br /> * char mqttserver: server MQTT<br /> * char mqttuser: MQTT user<br /> * char mqttpassword: MQTT password<br /> * int[16] key: AES key<br /> * int[16] iv: AES CBC iv<br /> * char ntpserver: server MQTT<br /> * int[6] date: set date and time [2014,2,10,18,45,18]<br /> * long int thisnode: RF24Network node address<br /> * int channel: RF 24 channel<br /> * byte mac[6]= ethernet mac address; use (0,0,0,0,0,1) for master1, use (0,0,0,0,0,2) for master2<br /> * bool save: save configuration into EEPROM<br /> <br /> relativi a un sensore (aggiunge un sensore):<br /> * char mqttpath: seconda parte del path di pubblicazione su MQTT<br /> * char driver: driver locale del sensore<br /> * int node: RF24Network node<br /> * char type: driver remoto<br /> * int address: address I2C<br /> <br /> ==== prepare ====<br /> prepare sensors for successive read<br /> return waittime in ms; the time to wait before read the data from sensor<br /> <br /> parametri:<br /> * char driver: driver locale del sensore<br /> * int node: RF24Network node<br /> * char type: driver remoto<br /> * int address: address I2C<br /> <br /> ==== prepandget ====<br /> get the measure from sensor<br /> <br /> parametri:<br /> * char driver: driver locale del sensore<br /> * int node: RF24Network node<br /> * char type: driver remoto<br /> * int address: address I2C<br /> <br /> ==== getjson ====<br /> return json with btable and values<br /> torna i valori di una o più osservazione/campionamento.<br /> <br /> parametri:<br /> * char driver: driver locale del sensore<br /> * int node: RF24Network node<br /> * char type: driver remoto<br /> * int address: address I2C<br /> <br /> ==== rf24rpc ====<br /> Esegue una procedura remota su un altro nodo tramite trasporto RF24Network.<br /> In pratica incapsula una RPC in una RPC.<br /> * node&quot;: nodo su cui eseguire la remote call procedure<br /> * tutti parametri standard di una json-rpc del tipo <br /> &quot;jsonrpc&quot;:&quot;2.0&quot;,&quot;method&quot;:&quot;configure&quot;,&quot;params&quot;:{&quot;reset&quot;:true},&quot;id&quot;:0},&quot;id&quot;:0<br /> <br /> ==== togglepin ====<br /> Attuatore che accende/spegne uno o più pin.<br /> <br /> parametri:<br /> * integer n: pin number (pins 4,5,6,7 are supported)<br /> * bool s: true=on; false=off<br /> {&quot;jsonrpc&quot;: &quot;2.0&quot;, &quot;method&quot;: &quot;togglepin&quot;, &quot;params&quot;: [{&quot;n&quot;:4,&quot;s&quot;:true},{&quot;n&quot;:5,&quot;s&quot;:false}], &quot;id&quot;: 0}</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5555 Gruppo Meteo/HowTo/server 2016-05-11T12:32:10Z <p>Dariomas: /* mosquitto */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializzare il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> &lt;del&gt;arkiweb.conf&lt;/del&gt;<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * &lt;del&gt;'''TODO''' aggiungere dal repo svn il file&lt;/del&gt;<br /> &lt;del&gt;'''''/etc/arkimet/scan-bufr/generic.lua'''''&lt;/del&gt;<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5554 Gruppo Meteo/HowTo/server 2016-05-11T12:29:29Z <p>Dariomas: /* arkimet */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializzare il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> &lt;del&gt;arkiweb.conf&lt;/del&gt;<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * &lt;del&gt;'''TODO''' aggiungere dal repo svn il file&lt;/del&gt;<br /> &lt;del&gt;'''''/etc/arkimet/scan-bufr/generic.lua'''''&lt;/del&gt;<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5542 Gruppo Meteo/HowTo/server 2016-05-05T07:44:38Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializzare il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> &lt;del&gt;arkiweb.conf&lt;/del&gt;<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5541 Gruppo Meteo/HowTo/server 2016-05-05T07:43:53Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializzare il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> &lt;del&gt;arkiweb.conf&lt;/del&gt;<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5540 Gruppo Meteo/HowTo/server 2016-05-05T07:43:20Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializzare il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5539 Gruppo Meteo/HowTo/server 2016-05-05T07:42:34Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> *&lt;del&gt; Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5538 Gruppo Meteo/HowTo/server 2016-05-05T07:41:55Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> &lt;del&gt;* Copiare http2mqtt in /var/www/html/http2mqtt&lt;/del&gt;<br /> &lt;del&gt; http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/&lt;/del&gt;<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5534 Gruppo Meteo/HowTo/server 2016-05-03T10:57:17Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm<br /> yum install http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5533 Gruppo Meteo/HowTo/server 2016-05-03T10:56:28Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> https ://github.com/r-map/rmap/blob/master/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5532 Gruppo Meteo/HowTo/server 2016-05-03T10:55:25Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> <br /> rabbitmq-server per il server<br /> <br /> rpm --import https ://www.rabbitmq.com/rabbitmq-signing-key-public.asc<br /> yum install http ://www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm http ://www.rabbitmq.com/releases/rabbitmq-server/v3.6.1/rabbitmq-server-3.6.1-1.noarch.rpm<br /> <br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5531 Gruppo Meteo/HowTo/server 2016-05-03T10:02:08Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> <br /> * tuning<br /> <br /> ecco solo alcuni suggerimenti:<br /> <br /> <br /> ''file rabbitmq.config''<br /> <br /> '''disk_free_limit'''<br /> <br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> '''Controlling System Limits on Linux'''<br /> <br /> The main setting that needs adjustment is the max number of open files, also known as ulimit -n. <br /> The default value on many operating systems is too low for a messaging broker (eg. 1024 on several Linux distributions). <br /> We recommend allowing for at least 65536 file descriptors for user rabbitmq in production environments. <br /> 4096 should be sufficient for most development workloads.<br /> <br /> ''file /etc/security/limits.d/50-rabbitmq.conf''<br /> #<br /> #&lt;domain&gt; &lt;type&gt; &lt;item&gt; &lt;value&gt;<br /> #<br /> <br /> rabbitmq soft nofile 4096<br /> rabbitmq hard nofile 65536<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5527 Gruppo Meteo/HowTo/server 2016-04-28T14:27:40Z <p>Dariomas: /* graphite */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * cambiare i permessi di /var/log/graphite-web<br /> chown rmap /var/log/graphite-web<br /> chmod g+w /var/log/graphite-web<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5499 Gruppo Meteo/HowTo/server 2016-04-19T14:54:05Z <p>Dariomas: /* graphite */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> * In /etc/graphite-web/local_settings.py<br /> configurare<br /> DATABASES = {}<br /> come in rmap<br /> ed eventualmente configurare anche la sezione EMAIL<br /> poi:<br /> <br /> /usr/bin/graphite-manage migrate<br /> Al un seccessivo httpd restart i db di rmap e graphite dovrebbero essere unificati.<br /> <br /> &lt;nowiki&gt;<br /> DATABASES = {<br /> 'default': {<br /> 'NAME': 'rmapadmin',<br /> 'ENGINE': 'django.db.backends.mysql',<br /> 'USER': 'rmapadmin',<br /> 'PASSWORD': 'rmapadmin',<br /> 'HOST': '',<br /> 'PORT': ''<br /> }<br /> }<br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5498 Gruppo Meteo/HowTo/server 2016-04-19T13:30:51Z <p>Dariomas: /* graphite */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> UDP_RECEIVER_INTERFACE = 127.0.0.1<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5497 Gruppo Meteo/HowTo/server 2016-04-19T10:55:22Z <p>Dariomas: /* mosquitto */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/aclfile<br /> /etc/mosquitto/pwfile<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5496 Gruppo Meteo/HowTo/server 2016-04-19T09:40:52Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5495 Gruppo Meteo/HowTo/server 2016-04-19T09:39:28Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5494 Gruppo Meteo/HowTo/server 2016-04-19T09:18:23Z <p>Dariomas: /* mariaDB */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> mysql_secure_installation<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5489 Gruppo Meteo/HowTo/server 2016-04-18T11:58:32Z <p>Dariomas: /* mariaDB */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> mkdir -p /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl start mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5488 Gruppo Meteo/HowTo/server 2016-04-18T11:52:45Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare Apache HTTP Server: pacchetti httpd mod_wsgi<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5487 Gruppo Meteo/HowTo/server 2016-04-18T11:50:57Z <p>Dariomas: /* mariaDB */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare il pacchetto httpd (Apache HTTP Server)<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server mariadb-libs<br /> <br /> * copiare in /etc/my.cnf.d il file rmap.cnf<br /> [mysqld]<br /> <br /> datadir = /rmap/mysql<br /> skip-networking<br /> server-id = 1<br /> default-storage-engine = InnoDB<br /> innodb_file_per_table<br /> innodb_data_home_dir = /rmap/mysql<br /> innodb_data_file_path = ibdata1:10M:autoextend<br /> innodb_log_group_home_dir = /var/lib/mysql<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5486 Gruppo Meteo/HowTo/server 2016-04-18T11:33:35Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare il pacchetto httpd (Apache HTTP Server)<br /> * Installare [[#mariaDB|MariaDB]]<br /> * Installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5485 Gruppo Meteo/HowTo/server 2016-04-18T10:32:58Z <p>Dariomas: Annullata la modifica 5484 di Dariomas (discussione)</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=5484 Gruppo Meteo/HowTo/server 2016-04-18T10:27:12Z <p>Dariomas: /* RMAP */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * Installare rmap.noarc<br /> * Installare mariadb-server mariadb-libs (se il DB è sullo steso server di rmap)<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> <br /> modificare:<br /> /usr/lib/python2.7/site-packages/tagging/forms.py<br /> inserendo:<br /> fields = &quot;__all__&quot;<br /> dopo:<br /> model = Tag<br /> <br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=4422 Gruppo Meteo/HowTo/server 2015-07-17T14:55:43Z <p>Dariomas: /* rabbitmq_auth_backend_http */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> Riavviare il servizio<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=4421 Gruppo Meteo/HowTo/server 2015-07-17T14:54:58Z <p>Dariomas: /* rabbitmq_auth_backend_http */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> <br /> Risulterà, per esempio:<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=4420 Gruppo Meteo/HowTo/server 2015-07-17T14:50:26Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> [<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> {rabbitmq_auth_backend_http,<br /> [{user_path, &quot;http://localhost:8000/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost:8000/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost:8000/auth/resource&quot;}]}<br /> ].<br /> <br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowTo/server&diff=4419 Gruppo Meteo/HowTo/server 2015-07-17T10:46:04Z <p>Dariomas: /* rabbitmq-server */</p> <hr /> <div>= Installazione = <br /> == repo rmap ==<br /> * copiare in /etc/yum.repos.d/ il file dal link<br /> http://rmapv.rmap.cc/repo/rmap/rmapcentos.repo<br /> oppure <br /> http://rmapv.rmap.cc/repo/rmap/rmap.repo<br /> <br /> * installare rmap con le dipendenze<br /> yum groupinstall rmap<br /> * installare monit<br /> yum install monit<br /> * configurare monit<br /> /etc/monit.d/rmap<br /> /etc/monitrc<br /> <br /> == RMAP ==<br /> <br /> * Installare il pacchetto MySQL-python<br /> * installare rmap.noarc<br /> * Inizializza il DB di rmap (file di configurazione in /etc/rmap )<br /> rmapctrl --syncdb<br /> '''rmap:pamr'''<br /> * Modificare /etc/httpd/conf/httpd.conf<br /> User rmap<br /> Group rmap<br /> * installare PHP <br /> <br /> per aggiungere il modulo HTTP2MQTT<br /> <br /> <br /> * aggiungere in /etc/httpd/conf.d<br /> arkiweb.conf<br /> graphite-web.conf<br /> http2mqtt.conf<br /> rmap.conf<br /> * agiungere la directory per i socket WSGI<br /> mkdir /run/wsgirmap/<br /> chown rmap:rmap /run/wsgirmap/<br /> * Cambiare le impostazioni di invio SMTP<br /> /etc/rmap/rmap-site.cfg<br /> <br /> * Copiare http2mqtt in /var/www/html/http2mqtt<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/php/<br /> <br /> == mariaDB ==<br /> <br /> yum install mariadb-server<br /> <br /> * copiare in /etc/my.cnf.d il file<br /> rmap.cnf<br /> <br /> * creare la directory /rmap/mysql<br /> chown mysql:mysql /rmap/mysql<br /> <br /> * far partire il DB server<br /> systemctl status mariadb.service<br /> <br /> * creare il DB<br /> mysql -u root -p<br /> create database rmap;<br /> CREATE USER 'rmap'@'%' IDENTIFIED BY 'rmap';<br /> GRANT ALL PRIVILEGES ON rmap.* TO 'rmap'@'%' with GRANT option;<br /> <br /> CREATE USER 'rmapadmin'@'%' IDENTIFIED BY 'rmapadmin';<br /> create database rmapadmin;<br /> GRANT ALL PRIVILEGES ON rmapadmin.* TO 'rmapadmin'@'%' with GRANT option;<br /> <br /> FLUSH PRIVILEGES;<br /> <br /> == rabbitmq-server ==<br /> <br /> * è necessario installare due pacchetti<br /> python-pika per i client<br /> rabbitmq-server per il server<br /> <br /> * attivazione server e plugin<br /> chkconfig rabbitmq-server on<br /> service rabbitmq-server restart<br /> <br /> rabbitmq-plugins enable rabbitmq_management<br /> rabbitmq-plugins enable rabbitmq_shovel<br /> rabbitmq-plugins enable rabbitmq_shovel_management<br /> <br /> * cambio password amministrazione:<br /> rabbitmqctl change_password guest 123456<br /> <br /> * verifica risoluzione nome; nel caso fare:<br /> The next thing to do is add the hostname’s short names in<br /> your /etc/hosts file. Why? Because RabbitMQ does not like FQDN<br /> (Attempting to do this will result in the following error: ** System NOT<br /> running to use fully qualified hostnames **).<br /> <br /> * gestione porta TCP<br /> la porta dedicata a AMQP è la 15672<br /> grantire l'accesso dove e come necessario<br /> <br /> * gestione porta interfaccia grafica management<br /> The web UI is located at: http://server-name:15672/ <br /> on a fresh installation the user &quot;guest&quot; is created with password<br /> &quot;guest&quot;, ma noi la password l'abbiamo cambiata.<br /> attenzione ci si collega di default solo da localhost<br /> se non va bene bisogna cambiare la conf di loopback_users in<br /> /etc/rabbitmq/rabbitmq.config<br /> &lt;pre&gt;<br /> [<br /> {rabbit,<br /> [<br /> %% Uncomment the following line if you want to allow access to the<br /> %% guest user from anywhere on the network.<br /> {loopback_users, []},<br /> <br /> {auth_backends, [rabbit_auth_backend_internal, rabbit_auth_backend_http]}<br /> ]<br /> },<br /> <br /> {rabbitmq_auth_backend_http,<br /> [<br /> {user_path, &quot;http://localhost/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost/auth/resource&quot;}<br /> ]<br /> <br /> }<br /> ].<br /> &lt;/pre&gt;<br /> <br /> * configurazione<br /> <br /> Dal menù &quot;Overview&quot; selezionare la voce &quot;Import / export definitions&quot; e &quot;upload broker definition&quot;<br /> http://sourceforge.net/p/r-map/code/HEAD/tree/trunk/rabbitmq/rabbit_server.json<br /> <br /> * tuning<br /> ecco solo alcuni suggerimenti:<br /> file rabbitmq.config<br /> <br /> disk_free_limit<br /> Disk free space limit of the<br /> partition on which RabbitMQ is<br /> storing data. When available disk<br /> space falls below this limit, flow<br /> control is triggered. The value may<br /> be set relative to the total amount<br /> of RAM (e.g. {mem_relative, 1.0}).<br /> The value may also be set to an<br /> integer number of bytes. By default<br /> free disk space must exceed 50MB.<br /> See the memory-based flow control<br /> documentation. <br /> <br /> Default: 50000000<br /> <br /> <br /> === rabbitmq_auth_backend_http ===<br /> <br /> fare riferimento a https://github.com/simonmacmullen/rabbitmq-auth-backend-http<br /> <br /> Sacricare il plugin da qui<br /> http://www.rabbitmq.com/community-plugins.html<br /> e metterlo in:<br /> /usr/lib/rabbitmq/lib/rabbitmq_server-3.3.5/plugins/<br /> <br /> attivarlo con:<br /> rabbitmq-plugins enable rabbitmq_auth_backend_http<br /> <br /> aggiungere in /etc/rabbitmq/rabbitmq.config<br /> [<br /> {rabbit, [{auth_backends, [rabbit_auth_backend_http]}]},<br /> {rabbitmq_auth_backend_http,<br /> [{user_path, &quot;http://localhost:8000/auth/user&quot;},<br /> {vhost_path, &quot;http://localhost:8000/auth/vhost&quot;},<br /> {resource_path, &quot;http://localhost:8000/auth/resource&quot;}]}<br /> ].<br /> <br /> service rabbitmq-server restart<br /> <br /> === showel configuration ===<br /> <br /> in /etc/sudoers.d/rmap<br /> Defaults:rmap !requiretty<br /> rmap ALL= NOPASSWD: /sbin/rabbitmqctl<br /> <br /> == DB-All.e ==<br /> * installare il pacchetto mysql-connector-odbc<br /> * aggiungere il DSN in /etc/odbc.ini<br /> <br /> <br /> [rmap]<br /> Description = MySQL rmap database<br /> Trace = Off<br /> TraceFile = stderr<br /> Driver = MySQL<br /> SERVER = localhost<br /> USER = rmap<br /> PASSWORD = rmap<br /> PORT = 3306<br /> DATABASE = rmap<br /> <br /> * inizializza il DB<br /> dbadb wipe --dsn=rmap<br /> <br /> <br /> == arkimet ==<br /> * aggiungere alias arkiserver al hostname in /etc/hosts <br /> * creare utente rmap<br /> useradd -r -s /sbin/nologin rmap<br /> * '''TODO''' aggiungere dal repo svn il file<br /> '''''/etc/arkimet/scan-bufr/generic.lua'''''<br /> <br /> * editare /etc/default/arki-server<br /> &lt;nowiki&gt; #echo &quot;ERROR - Please configure /etc/defaults/arkimet&quot;<br /> #exit 1<br /> # Remove above lines after setting configuration below.<br /> <br /> DATASET_CONFIG=/rmap/arkimet/arkimet.conf<br /> DAEMONUSER=rmap<br /> LOGDIR=/var/log/arkimet<br /> SERVER_OPTIONS=&quot;--url=http://arkiserver:8090 --port=8090 --accesslog=$LOGDIR/server-access.log --errorlog=$LOGDIR/server-error.log $DATASET_CONFIG&quot;<br /> &lt;/nowiki&gt;<br /> * creare la directory per i dati<br /> mkdir /rmap/arkimet<br /> chown rmap:rmap /rmap/arkimet<br /> * configurare arkimet scompattando la struttura del file <br /> arkimetconf.tgz <br /> chown -R rmap:rmap /rmap/arkimet<br /> <br /> == mosquitto ==<br /> * modificare<br /> /etc/mosquitto/mosquitto.conf<br /> /etc/mosquitto/conf.d/rmap.conf<br /> * '''per systemd modificare il file''' /usr/lib/systemd/system/mosquitto.service<br /> [Service]<br /> ExecStart=/usr/sbin/mosquitto ''' -c /etc/mosquitto/mosquitto.conf '''<br /> User=mosquitto<br /> ''''segnalare BUG''''<br /> <br /> === mosquitto-auth-plug ===<br /> Riferirsi a:<br /> https://github.com/jpmens/mosquitto-auth-plug<br /> <br /> copiare i sorgenti in locale<br /> <br /> creare config.mk come segue:<br /> <br /> # Select your backends from this list<br /> BACKEND_CDB ?= no<br /> BACKEND_MYSQL ?= no<br /> BACKEND_SQLITE ?= no<br /> BACKEND_REDIS ?= no<br /> BACKEND_POSTGRES ?= no<br /> BACKEND_LDAP ?= no<br /> BACKEND_HTTP ?= yes<br /> <br /> # Specify the path to the Mosquitto sources here<br /> MOSQUITTO_SRC =<br /> <br /> # Specify the path the OpenSSL here<br /> OPENSSLDIR = /usr<br /> <br /> poi:<br /> <br /> make<br /> mkdir /var/lib/mosquitto/plugins<br /> cp auth-plug.so /var/lib/mosquitto/plugins/<br /> <br /> <br /> creare il file /etc/mosquitto/conf.d/rmap.conf<br /> <br /> auth_plugin /var/lib/mosquitto/plugins/auth-plug.so<br /> auth_opt_backends http<br /> auth_opt_http_hostname localhost<br /> auth_opt_http_ip 127.0.0.1<br /> auth_opt_http_port 80<br /> auth_opt_http_getuser_uri /auth/auth<br /> auth_opt_http_superuser_uri /auth/superuser<br /> auth_opt_http_aclcheck_uri /auth/acl<br /> <br /> Modificare il file /etc/mosquitto/aclfile<br /> &lt;nowiki&gt;<br /> # This affects access control for clients with no username.<br /> #topic read $SYS/#<br /> topic read #<br /> topic write test/#<br /> <br /> # This only affects clients with username &quot;rmap&quot;.<br /> user rmap<br /> topic #<br /> <br /> # This affects all clients.<br /> #pattern write $SYS/broker/connection/%c/state<br /> <br /> pattern write rmap/%u/#<br /> pattern write report/%u/#<br /> pattern write mobile/%u/#<br /> &lt;/nowiki&gt;<br /> <br /> Aiungere la password del amministratore in /etc/mosquitto/pwfile<br /> mosquitto_passwd<br /> <br /> restart server:<br /> <br /> service mosquitto restart<br /> <br /> == server ports ==<br /> <br /> * 22 ssh<br /> * 80 webserver<br /> * 443 monit web server<br /> * 1883 8883 MQTT<br /> * 5672 amqp<br /> * 2003 carbon-cache<br /> * 5925 borinud<br /> * 15672 rabbitmq_management<br /> * 8090 arkimet<br /> <br /> == graphite ==<br /> * installare python-django-1.5.8<br /> * installare graphite-web<br /> * installare python-carbon<br /> * editare /etc/carbon/carbon.conf<br /> LINE_RECEIVER_INTERFACE = 127.0.0.1<br /> ENABLE_UDP_LISTENER = True<br /> * editare /etc/carbon/storage-schemas.conf<br /> &lt;nowiki&gt;<br /> # Schema definitions for Whisper files. Entries are scanned in order,<br /> # and first match wins. This file is scanned for changes every 60 seconds.<br /> #<br /> # [name]<br /> # pattern = regex<br /> # retentions = timePerPoint:timeToStore, timePerPoint:timeToStore, ...<br /> <br /> # Carbon's internal metrics. This entry should match what is specified in<br /> # CARBON_METRIC_PREFIX and CARBON_METRIC_INTERVAL settings<br /> [carbon]<br /> pattern = ^carbon\.<br /> retentions = 60:7d<br /> <br /> [rmap_10sec_for_10day]<br /> #pattern = .*<br /> pattern = ^rmap\.<br /> retentions = 10s:10d<br /> <br /> [report_60sec_for_60day]<br /> #pattern = .*<br /> pattern = ^report\.<br /> retentions = 60s:30d<br /> <br /> [default_1min_13months]<br /> pattern = .*<br /> retentions = 1m:395d<br /> <br /> &lt;/nowiki&gt;<br /> <br /> == graphite Fedora 20 fast start ==<br /> <br /> yum install graphite-web python-carbon<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py syncdb<br /> <br /> chown -R rmap:rmap /var/lib/graphite-web<br /> <br /> service carbon-cache start<br /> <br /> python /usr/lib/python2.7/site-packages/graphite/manage.py runserver<br /> <br /> python /usr/share/doc/graphite-web/example-client.py<br /> <br /> firefox http://127.0.0.1:8000/dashboard/<br /> <br /> === Start and test graphite interface ===<br /> <br /> Start mqtt2graphite and view the graphite graphs on http://server_ip/<br /> <br /> mqtt2graphited run<br /> <br /> 2014-07-08 23:28:08,051 Starting MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,055 INFO MODE<br /> 2014-07-08 23:28:08,084 DEBUG MODE<br /> 2014-07-08 23:28:08,213 Connected to broker at localhost as MQTT2Graphite_5966-localhost.localdomain<br /> 2014-07-08 23:28:08,253 Subscribing to topic meteo/#<br /> 2014-07-08 23:28:08,312 pubblish {'carbon_port': 2003, 'map': {'meteo/#': ('j', None)}, 'sock': &lt;socket._socketobject object at 0xb6a9e9d0&gt;, 'carbon_server': '127.0.0.1'} with id 1<br /> 2014-07-08 23:28:08,363 Subscribed: 2 (0,)<br /> 2014-07-08 23:28:08,409 CARBONKEY is [meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,834 meteo.-.1012345_4412345.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854888<br /> 2014-07-08 23:28:09,863 CARBONKEY is [meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030]<br /> 2014-07-08 23:28:09,926 meteo.-.1137637_4449216.generic.-_-_-.-_-_-_-.B07030.v 400.000000 1404854889<br /> 2014-07-08 23:28:11,133 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:11,155 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30115.000000 1404854891<br /> 2014-07-08 23:28:16,687 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:16,733 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854896<br /> 2014-07-08 23:28:24,895 CARBONKEY is [meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101]<br /> 2014-07-08 23:28:24,933 meteo.-.1137637_4449216.generic.254_0_0.103_3000_-_-.B12101.v 30121.000000 1404854904</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/HowToOld&diff=4418 Gruppo Meteo/HowToOld 2015-07-13T08:32:04Z <p>Dariomas: /* Creazione della SD */</p> <hr /> <div><br /> = HowTo =<br /> <br /> Di seguito tutti i passaggi (o quasi) per rendere funzionante un sistema rmap che comprenda uno modulo base, un modulo master ed un modulo satellite.<br /> <br /> <br /> == Sensori ==<br /> <br /> Utilizzeremo per cominciare sensori I2C.<br /> Oltre alla versatitilità e ampia diffusione di questo bus, su Raspberry e microcontroller AVR la gestione di i2c e' fatta a livello hardware e non comporta carichi rilevanti per la cpu.<br /> <br /> === Iniziamo misurando la temperatura ===<br /> <br /> La sensoristica prevede sue sensori di temperatura i2c della serie tmp della TEXAS INSTRUMENTS nello specifico tmp102 o tmp275 e uno Analog Device.<br /> * Dato che il sensore tmp102 e' di tipo smd si puo' acqusitare anche gia' saldato su basetta lo vende ad esempio [https://www.sparkfun.com/products/9418 sparkfun]; questi i dati del tmp275 http://www.ti.com/lit/ds/symlink/tmp275.pdf<br /> * [http://www.analog.com/static/imported-files/data_sheets/ADT7420.pdf ADT7420] un sensore di precisione anche questo smd e prodotto da Analog; anche questo disponibile su basetta, ma un po' costosa: http://au.element14.com/digilent/pmodtmp2/adt7420-temp-sensor-16bit-pmod/dp/2290114<br /> <br /> === Pressione ===<br /> <br /> Per ora è gestito un solo tipo si sensore di pressione:<br /> <br /> * Bosch's BMP085 is a rock-solid barometric pressure sensor (DISCONTINUED replaced with the BMP180 which is a drop-in replacement) diffusamente disponibile premontato su un modulo<br /> <br /> === Umidità ===<br /> <br /> Per ora il sensore di umidità gestito dalle librerie è il seguente:<br /> <br /> * Honeywell HumidIcon Digital Humidity/Temperature Sensors HIH6100 Series±4.0 %RH Accuracy Available with hydrophobic filter and<br /> condensation-resistance, allowing for use in many condensing environments, or without hydrophobic filter, non-condensing<br /> http://sensing.honeywell.com/honeywell-sensing-humidicon-hih6100-series-product-sheet-009059-6-en.pdf<br /> <br /> == Modulo base ==<br /> <br /> === Hardware ===<br /> <br /> {|width=&quot;100%&quot;<br /> |- valign=&quot;top&quot;<br /> |<br /> * raspberry B<br /> * sdcard<br /> * alimentatore<br /> * connettore gpio<br /> * breadboard<br /> * sensori<br /> * hub usb alimentato<br /> * chiavetta wifi<br /> * hard disk usb (opzionale, ma consigliato), con una partizione etx4 ed etichetta &quot;rmap&quot;<br /> * RTC (opzionale ma consigliato)<br /> |[[File:Rmap_base_01.jpg|300px|thumb|Modulo base]]<br /> |}<br /> <br /> === Creazione della SD ===<br /> Attualmente è possibile scaricare una immagine già pronta di scheda SD nel sito [http://rmap.cc/download/ download].<br /> Scaricate l'ultima immagine disponibile etichettata AAAAMMGG-production.img<br /> <br /> Una volta scaricata decomprimete l'immagine:<br /> bunzip2 AAAAMMGG-production.img.bz2<br /> <br /> Ora vi serve una scheda SD preferibilmente di classe 10: la dimensione minima richiesta è di 8 giga.<br /> <br /> Inserite la vostra Card nel lettore del vostro PC, se avete dubbi sul nome di periferica che il sistema ha assegnato, un comando<br /> &lt;pre style=&quot;color:blue&quot;&gt;<br /> dmesg<br /> &lt;/pre&gt;<br /> dovrebbe fugarli (guardate nelle ultime righe se l'avete appena inserita), ad esempio:<br /> &lt;pre style=&quot;color:green&quot;&gt;<br /> [1680280.085043] usb 5-1: new full speed USB device using uhci_hcd and address 61<br /> [1680280.343101] usb 5-1: New USB device found, idVendor=2341, idProduct=0043<br /> [1680280.343109] usb 5-1: New USB device strings: Mfr=1, Product=2, SerialNumber=220<br /> [1680280.343115] usb 5-1: Manufacturer: Arduino (www.arduino.cc)<br /> [1680280.343119] usb 5-1: SerialNumber: 74132343430351715131<br /> [1680280.343305] usb 5-1: configuration #1 chosen from 1 choice<br /> [1680280.346250] cdc_acm 5-1:1.0: ttyACM0: USB ACM device<br /> [1680317.456102] usb 5-1: USB disconnect, address 61<br /> [1680328.069023] mmc0: new SD card at address e7c6<br /> [1680328.069220] mmcblk0: mmc0:e7c6 SD256 246 MiB <br /> [1680328.069311] mmcblk0: p1<br /> [1680328.326222] FAT: utf8 is not a recommended IO charset for FAT filesystems, filesystem will be case sensitive!<br /> &lt;/pre&gt;<br /> <br /> il sistema probabilmente 'montera`' la periferica, smontatela (comando &quot;mount&quot; senza parametri per verificare se e` montata ed il percorso, per smontare: &quot;umount &lt;percorso di mount&gt;&quot;), questo perche` dobbiamo 'copiare' l'immagine, ma '''ATTENZIONE, Il comando seguente eliminera` tutti i dati della SD Card''', inoltre '''rileggete due volte (anche tre) il comando prima di dare il return. Se mettete per errore il device del vostro disco rigido il comando cancellera' tutti i vostri dati''':<br /> &lt;pre style=&quot;color:red&quot;&gt;<br /> # ATTENZIONE QUESTO COMANDO ELIMINA IN MODO PERMANENTE IL CONTENUTO DI DEVICEtrovato<br /> dd if=aaaammgg-production.img of=/dev/DEVICEtrovato <br /> &lt;/pre&gt;<br /> <br /> === Connessioni hardware ===<br /> <br /> * modulo RTC<br /> {|<br /> | rtc connettore P2 || arduino mega<br /> |-<br /> | gnd || gnd<br /> |-<br /> | vcc || vcc 5V (5v non 3.3)<br /> |-<br /> | sda || sda<br /> |-<br /> | scl || scl<br /> |-<br /> | ds || scollegato<br /> |}<br /> <br /> * switch di power off normalmente aperto<br /> <br /> {|<br /> | switch || arduino mega<br /> |-<br /> | pin 1 || gnd<br /> |-<br /> | pin2 || pin 18<br /> |}<br /> <br /> * Sensori I2c<br /> {|<br /> | sensore || arduino mega<br /> |-<br /> | gnd || gnd<br /> |-<br /> | vcc || vcc 3.3V (dipende dal sensore)<br /> |-<br /> | sda || sda<br /> |-<br /> | scl || scl<br /> |}<br /> <br /> <br /> === Configurazione ===<br /> <br /> Con un browser puntare all'indirizzo:<br /> <br /> http://rmap.cc/registrazione/register/<br /> <br /> e registrarsi come nuovo utente; poi con il proprio bowser:<br /> <br /> http://base/wizard/<br /> <br /> autenticarsi con<br /> user: rmap<br /> password: rmap<br /> e nel wizard di configurazione immettere i propri dati: utente e password con cui ci si è registrati sul server e le coordinate accurate della stazione; nella scermata successiva inserire i dati per l'eventuale accesso alla rete wifi<br /> <br /> === Gestione avanzata ===<br /> ==== Connessione in rete ====<br /> Per il collegamento in rete è consigliabile utilizzare uno switch a cui collegare sia il modulo base, che il modulo master, che eventualmente un portatile per connettersi a Raspberry.<br /> <br /> Il modulo base si collega ad internet con una chiavetta wifi o GSM/GPRS o ethernet. Per ognuna di queste è necessario effettuare apposite configurazioni per impostare la rete.<br /> <br /> Il raspberry ha attivo anche un dhcp e fa anche da dns. <br /> <br /> Al rspberry risponde al nome &quot;base&quot; mentre le board master ai nomi:<br /> * master<br /> * master2<br /> * master3<br /> * master4<br /> <br /> ===== Prima connessione =====<br /> <br /> Info utili per l'accesso a Raspberry:<br /> <br /> * hostname: base<br /> * user: rmap - password: rmap<br /> * user: root - password: cambiami<br /> <br /> ssh root@base<br /> <br /> ===== Configurazione scheda di rete wireless =====<br /> <br /> La chiavetta permette la sincronizzazione ntp da internet e l'upload dei dati su internet inoltre il raspberry è gia configurato come gateway e permette il collegamento ad internet anche degli altri dispositivi collegati allo switch perciò il primo passo da effettuare è la configurazione della rete.<br /> <br /> Da riga di comando:<br /> <br /> nmcli device wifi list<br /> nmcli device wifi connect &lt;SSID&gt; password &lt;password&gt;<br /> <br /> Per configurare altre interfacce di rete consultare la documentazione di nmcli<br /> <br /> Consultare [[Gruppo_Meteo/Troubleshooting#Configurazione_ip_statico_su_interfaccia_wifi]] per un appunto sulla configurazione di IP statico di wlan0<br /> <br /> ==== Aggiornamento del software ====<br /> <br /> Da utente root<br /> <br /> yum upgrade --skip-broken -y<br /> <br /> Verificare se vanno applicate patch all'immagine [http://www.raspibo.org/wiki/index.php/Gruppo_Meteo/ToDo qui.]<br /> <br /> fare reboot del raspberry:<br /> reboot<br /> <br /> ==== Connessione al modulo base via web ====<br /> <br /> Con un browser puntare all'indirizzo: <br /> <br /> http://base/<br /> <br /> <br /> {|<br /> |[[File:Base Home.png|400px|thumb|right|Monitoraggio processi]]<br /> |}<br /> <br /> Verificare che tutti i processi salvo stationd siano attivi cliccando &quot;verifica processi&quot;.<br /> <br /> A questo punto si passa alla fase di configurazione: cliccare &quot;Configurazione&quot;. (Per l'accesso: rmap/rmap)<br /> <br /> {|<br /> |[[File:Base Monit.png|400px|thumb|right|Monitoraggio processi]]<br /> |}<br /> <br /> ==== Configurazione avanzata ====<br /> <br /> Sono presenti alcune pagine per la configurazione dei dati sia dei sensori che dei dati della stazione vera e propria.<br /> <br /> Cliccare :<br /> '''configurazione'''<br /> <br /> Immettere le credenziali (di default: rmap/rmap).<br /> <br /> Cliccare:<br /> <br /> '''Stations'''<br /> <br /> * Aggiornare i dati di posizione di home (latitudine, longitudine) (Mantenere slug &quot;home&quot;) e il proprio identificativo di stazione (ident) al massimo di 9 caratteri concordato con lo staff di RMAP. <br /> <br /> Salvare, ed eventualmente procedere con le altre personalizzazioni tramite l'interfaccia web.<br /> Questa operaione è opzionale:<br /> <br /> * Hardware boards<br /> * attivare/disattivare/modificare la configurazione in base alle board che si vorranno collegare<br /> <br /> * sensor<br /> * attivare/disattivare/modificare la configurazione in base ai sensori che si vorranno collegare<br /> <br /> Come ultima operaione attivare la station '''home''' sempre dal menu '''Station'''<br /> <br /> Stationd dovrebbe ora partire iniziando ad rilevare i dati del modulo base.<br /> Verificare quindi che tutti i processi siano attivi cliccando &quot;verifica processi&quot;.<br /> <br /> {|<br /> |[[File:Base config 01.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 02.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 03.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 04.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 05.png|300px|thumb|right|Configurazione]]<br /> |-<br /> |[[File:Base config 06.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 07.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 08.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 09.png|300px|thumb|right|Configurazione]]<br /> |[[File:Base config 10.png|300px|thumb|right|Configurazione]]<br /> |}<br /> <br /> == Modulo master ==<br /> Il modulo B richiede cavo ethernet con power over ethernet.<br /> <br /> Funzionamento generale:<br /> all'accesione viene verificata la presenza di una configurazione di<br /> versione corrispondente al firmware, si configura la rete con dhcp, si<br /> interroga ntp server e si sincronizza l'orologio; se presente rtc viene<br /> impostato il time su rtc. Ci si connette al broker mqtt e tramite una<br /> temporizzazione di Alarm vengono inviati ogni sampletime i dati al<br /> broker. Contemporaneamente è possibile colloquiare su porta seriale<br /> tramite jsonrpc configurando, interrogando i sensori o attivando<br /> attuatori.<br /> Il sistema dovrebbe essere fault tollerant a:<br /> fault del ntp server (con caduta su rtc)<br /> fault del brocker mqtt (con riconnessione)<br /> rinnovo periodico dei dati del dhcp<br /> <br /> === Hardware ===<br /> <br /> {|width=&quot;100%&quot;<br /> |- valign=&quot;top&quot;<br /> |<br /> * arduino mega 2560 <br /> * cavo USB tipo B<br /> * breadborad <br /> * modulo RTC<br /> * modulo mini ethernet ENC60<br /> * modulo radio RF24<br /> * cavo power over ethernet<br /> * stabilizzatore dcdc switched<br /> * sensori<br /> * eventualmente relays attuatori<br /> <br /> cosa bisogna collegare:<br /> * arduino mega2560<br /> * nRF24L01P http://www.nordicsemi.com/eng/Products/2.4GHz-RF/nRF24L01P (con un condensatore sull'alimentazione)<br /> * ENC28J60 Ethernet LAN / Network Module http://hobbycomponents.com/index.php/enc28j60-ethernet-lan-network-module-for-arduino.html?SID=4553643ad13151d3fce1062a1f877f32<br /> * Tiny RTC I2C AT24C32 DS1307 Real Time Clock Module with EEPROM ARM PIC<br /> http://hobbycomponents.com/index.php/tiny-rtc-i2c-at24c32-ds1307-real-time-clock-module-with-eeprom-arm-pic.html<br /> http://www.hobbyist.co.nz/sites/default/files/docs/RTC/Tiny_RTC_schematic.pdf<br /> * connettore I2C (4 fili)<br /> * connettore Jtag http://www.raspibo.org/wiki/index.php/Gruppo_Meteo/HowTo/DebugAVR#Collegamenti<br /> <br /> <br /> |[[File:Rmap_master_01.jpg|400px|thumb|Modulo master]]<br /> |[[File:R-map schema.png|400px|thumb|Modulo master, schema]]<br /> |}<br /> <br /> ==== Breadboard ====<br /> <br /> '''Connessioni'''<br /> <br /> {|<br /> | pin nrf24 || pin arduino mega<br /> |-<br /> | 1 || gnd<br /> |-<br /> | 2 || 3.3<br /> |-<br /> | 3 || dio9<br /> |-<br /> | 4 || dio10<br /> |-<br /> | 5 || dio52<br /> |-<br /> | 6 || dio51<br /> |-<br /> | 7 || dio50<br /> |-<br /> | 8 || dio18<br /> |}<br /> <br /> {|<br /> | Enc28j60 || Arduino Mega 2560<br /> |-<br /> | GND || GND<br /> |-<br /> | 3.3 || 5V (funziona anche a 3.3, ma assorbe troppo)<br /> |-<br /> | SO || Pin50<br /> |-<br /> | SI || Pin51<br /> |-<br /> | SCK || Pin52<br /> |-<br /> | CS || Pin53<br /> |}<br /> <br /> {|<br /> | rtc connettore P2 || arduino mega<br /> |-<br /> | gnd || gnd<br /> |-<br /> | vcc || vcc 5V (5v non 3.3)<br /> |-<br /> | sda || sda<br /> |-<br /> | scl || scl<br /> |-<br /> | ds || scollegato<br /> |}<br /> <br /> * Sensori I2c<br /> {|<br /> | sensore || arduino mega<br /> |-<br /> | gnd || gnd<br /> |-<br /> | vcc || vcc 3.3V (dipende dal sensore)<br /> |-<br /> | sda || sda<br /> |-<br /> | scl || scl<br /> |}<br /> <br /> ==== Cicuito stampato ====<br /> <br /> * [https://sourceforge.net/p/r-map/code/HEAD/tree/trunk/kicad/ Qui] si trova il progetto del circuito stampato con Kicad.<br /> <br /> * Su [https://oshpark.com/shared_projects/IVVkMYHf OSH Park shared project] invece puoi trovare i gerber e tutto quanto pronto per la stampa del pcb oppure ordinarli direttamente a OSH Park<br /> <br /> === Aggiornamento bootloader ===<br /> E' necessario aggiornare il bootloader di arduino mega in quanto alcuni vecchi bootloader non sono in grado di gestire il riavvio dopo l'intervento del watchdog richiedendo un distacco dell'alimentazione forzato.<br /> <br /> In questo esempio abbiamo utilizzato una board '''dragon''' dell'AVR ma è possibile utilizzare altri metodi: [http://arduino.cc/en/Tutorial/ArduinoISP]<br /> <br /> avrdude -c dragon_isp -P usb -p atmega2560 -e -u -U lock:w:0x3F:m -U efuse:w:0xFD:m -U hfuse:w:0xD8:m -U efuse:w:0xFF:m<br /> avrdude -c dragon_isp -P usb -p atmega2560 -V -U flash:w:/usr/share/arduino/hardware/arduino/bootloaders/stk500v2/stk500boot_v2_mega2560.hex<br /> avrdude -c dragon_isp -P usb -p atmega2560 -U lock:w:0x0F:m<br /> <br /> The first command unlocks the bootloader section and sets the fuses.<br /> The second writes the bootloader to the flash memory.<br /> And the third locks the bootloader section again.<br /> <br /> === Programmazione ===<br /> <br /> Utilizzare il modulo A, accedere con l'utente rmap (pass rmap).<br /> ssh rmap@base<br /> <br /> E' presente sulla home una dir svn che contiene tutto il software:<br /> <br /> cd /home/rmap/svn/r-map-code/trunk<br /> svn up<br /> cd arduino/ino/rmap<br /> ino clean<br /> cd src <br /> ln -sf rmap_master.h rmap_config.h<br /> cd ..<br /> ino build -m mega2560<br /> ino upload -m mega2560<br /> ino serial<br /> <br /> un pò di spiegazione: nella home dell'utente rmap è presente tutto l'archivio software<br /> <br /> con il comando svn up si aggiorna l'archivio scaricando l'utima versione dal repository<br /> <br /> ino clean pulisce l'ambiente per la compilazione<br /> <br /> linkiamo nello skecth la configurazione per il modulo master dato, l'unica cosa che cambia tra lo sketch del modulo master e quella del modulo satellite è questa e viene gestita cambiando il puntamento al file di configurazione<br /> <br /> ino build compila il software per la piattaforma mega 2560<br /> <br /> ino upload carica lo sketch su arduino<br /> <br /> ino serial attiva il monitor seriale<br /> <br /> === Configurazione ===<br /> aggiornare le info sul file usando l'interfaccia web<br /> <br /> http://base<br /> <br /> Se non è la prima volta che si configura la board per forzare il caricamento della configurazione avviare arduino con il pin 8 collegato a massa<br /> <br /> rmap-configure --help<br /> <br /> solitamente il comando da utilizzare è:<br /> rmap-configure --board master<br /> <br /> == Modulo satellite ==<br /> Il modulo C richiede batterie con stabilizzatore (e pannellino solare con regolatore di corrente)<br /> <br /> [http://tmrh20.github.io/RF24Network/Tuning.html Performance and Data Loss: Tuning the Network]<br /> <br /> === Hardware ===<br /> <br /> {|width=&quot;100%&quot;<br /> |- valign=&quot;top&quot;<br /> |<br /> * moulo microduino core+ (ATmega644p@5V 16MHz)<br /> * modulo microduino RF24 con antenna<br /> * modulo microduino seriale USB FT232R<br /> * cavo micro USB<br /> * sensori<br /> |[[File:Rmap_satellite_01.jpg|300px|thumb|Modulo satellite]]<br /> |}<br /> <br /> === Programmazione ===<br /> <br /> E' simile a quella del modulo master si cambia solo il link al file di configurazione con un link simbolico ed il modello della scheda per compilazione ed upload<br /> <br /> cd /home/rmap/svn/r-map-code/trunk<br /> svn up<br /> cd arduino/ino/rmap<br /> ino clean<br /> cd src<br /> ln -sf rmap_satellite.h rmap_config.h<br /> cd ..<br /> ino build -m 644pa16m<br /> ino upload -m 644pa16m<br /> ino serial<br /> <br /> === Configurazione ===<br /> <br /> Per la configurazione si usa il comando rmap-configure.<br /> <br /> rmap-configure --help<br /> <br /> Solitamnete si puo' utilizzare questo comando:<br /> <br /> rmap-configure --board satellite<br /> <br /> E' possibile collegare tutte le board contemporaneamente e dare un unico comando per configurarle tutte:<br /> <br /> [rmap@pidora ~]$ rmap-configure <br /> django_extensions is not installed; I do not use it<br /> STATION:<br /> home<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt; configure board: my master<br /> start configuration<br /> Serial Transport /dev/ttyACM0<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt; reset config<br /> save {'reset': True}<br /> TCP/IP Transport master<br /> mqttserver: {'mqttsampletime': 5, 'mqttserver': 'mqttserver'}<br /> mqtt user and password: {'mqttpassword': u'', 'mqttuser': u''}<br /> ntpserver: {'ntpserver': 'ntpserver', 'mac': 'OK'}<br /> RF24Network Transport 0<br /> thisnode: {'thisnode': 0, 'channel': 93}<br /> key: {'key': 'OK'}<br /> iv: {'iv': 'OK'}<br /> &gt;&gt;&gt;&gt; sensors:<br /> remote sensor tmp-True-RF24-TMP-72-254,0,0-105,2000,-,--my-master<br /> add driver: {'id': 0}<br /> my sensor-True-TMP-TMP-72-254,0,0-105,4000,-,--my-master<br /> add driver: {'id': 1}<br /> mqttrootpath: {'mqttrootpath': 'rmap/-/1137617,4449221/rmap/'}<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt; save config<br /> save {'save': True}<br /> ----------------------------- board configured ---------------------------------------<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt; configure board: my microduino<br /> start configuration<br /> Serial Transport /dev/ttyUSB0<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt; reset config<br /> save {'reset': True}<br /> transport tcpip not present<br /> RF24Network Transport 1<br /> thisnode: {'thisnode': 1, 'channel': 93}<br /> key: {'key': 'OK'}<br /> iv: {'iv': 'OK'}<br /> &gt;&gt;&gt;&gt; sensors:<br /> my sensor-True-TMP-TMP-72-254,0,0-105,10000,-,--my-microduino<br /> add driver: {'id': 0}<br /> mqttrootpath: {'mqttrootpath': 'rmap/-/1137617,4449221/rmap/'}<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt; save config<br /> save {'save': True}<br /> ----------------------------- board configured ---------------------------------------<br /> &gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt; configure board: my raspberry<br /> start configuration<br /> transport serial not present<br /> <br /> == Shutdown del modulo base ==<br /> <br /> Sul modulo base è presente il software [[http://raspdbusgpiopy.sourceforge.net/ raspdbusgpiopy]] sviluppato nei mesi precedenti che monitora lo stato del pin18 sul gpio.<br /> <br /> Quando il pin 18 viene collegato a massa, il software invia un segnale su dbus ed il sistema va in shutdown, questo risulta estremamente utile quando il modulo base e` installato ''headless'', cioè senza tastiera e video collegati.</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4404 Gruppo Meteo/StimaOverview 2015-06-17T08:08:09Z <p>Dariomas: /* board ft232 */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> È possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> È necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> È necessaria per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4403 Gruppo Meteo/StimaOverview 2015-06-17T08:07:46Z <p>Dariomas: /* board radio RF24 */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> È possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> È necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4402 Gruppo Meteo/StimaOverview 2015-06-17T08:07:32Z <p>Dariomas: /* board RTC */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> È possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4401 Gruppo Meteo/StimaOverview 2015-06-17T08:06:15Z <p>Dariomas: /* JsonRPC over different transports */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> È possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4400 Gruppo Meteo/StimaOverview 2015-06-17T08:04:55Z <p>Dariomas: /* NRF24 */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4399 Gruppo Meteo/StimaOverview 2015-06-17T08:04:16Z <p>Dariomas: /* NRF24 */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * IV<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4398 Gruppo Meteo/StimaOverview 2015-06-17T08:03:54Z <p>Dariomas: /* TCP/IP */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il TCP/IP; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * NTPserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4397 Gruppo Meteo/StimaOverview 2015-06-17T07:59:22Z <p>Dariomas: /* Integrazione con la domotica */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> Per quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4396 Gruppo Meteo/StimaOverview 2015-06-17T07:58:43Z <p>Dariomas: /* Modularità hardware e software */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware maggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4395 Gruppo Meteo/StimaOverview 2015-06-17T07:57:08Z <p>Dariomas: /* Salvataggio locale dei dati */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> È previsto un meccanismo di salvataggio dei dati su SD formattata FAT; i file<br /> vengono frammentati a una dimensione prefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno un flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo la SD<br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4394 Gruppo Meteo/StimaOverview 2015-06-17T07:54:44Z <p>Dariomas: /* Software utente multipiattaforma */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni CentOS e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, Android, ma portabile su Windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4393 Gruppo Meteo/StimaOverview 2015-06-17T07:53:06Z <p>Dariomas: /* Differenti tipologie di rete */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica configurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4392 Gruppo Meteo/StimaOverview 2015-06-17T07:52:27Z <p>Dariomas: /* Differenti tipologie di rete */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La configurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4391 Gruppo Meteo/StimaOverview 2015-06-17T07:52:09Z <p>Dariomas: /* Differenti tipologie di rete */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> La consfigurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4390 Gruppo Meteo/StimaOverview 2015-06-17T07:50:42Z <p>Dariomas: /* Stazioni fisse o mobili */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> È possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> la consfigurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4389 Gruppo Meteo/StimaOverview 2015-06-17T07:49:56Z <p>Dariomas: /* Orologio di riferimento */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerata stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> E' possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> la consfigurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4388 Gruppo Meteo/StimaOverview 2015-06-17T07:47:55Z <p>Dariomas: /* Operazioni di mantenimento */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al DHCP o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerato stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> E' possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> la consfigurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4387 Gruppo Meteo/StimaOverview 2015-06-17T07:47:12Z <p>Dariomas: /* Interrogazione dei sensori */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono impostati e configurati all'accensione poi periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al dhcp o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerato stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> E' possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> la consfigurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas https://www.raspibo.org/wiki/index.php?title=Gruppo_Meteo/StimaOverview&diff=4386 Gruppo Meteo/StimaOverview 2015-06-17T07:45:22Z <p>Dariomas: /* Collegamento su bus I2C */</p> <hr /> <div>= Stima Overview =<br /> Stazione modulare per la misura di parametri ambientali.<br /> <br /> == Premesse ==<br /> * Aderisce alla Rete di Monitoraggio Ambientale Partecipativo (R-MAP)<br /> * Open hardware e open software<br /> * al momento vengono gestiti parametri meteorologici<br /> <br /> == Funzionalità ==<br /> <br /> === Sensori ===<br /> <br /> ==== Collegamento su bus I2C ====<br /> I sersori devono essere compatibili con il bus I2C. Quando sensori I2C non siano disponibili il problema viene risolto con un microcontrollore che adatta le letture (analogiche o digitali) e le elaborazioni (contatori, medie etc.) rendendole disponibili su registri interrogabili tramite I2C. <br /> <br /> Il protocollo I2C prevede l’utilizzo di un bus formato da due linee bidirezionali. Le due linee, chiamate “scl” e “sda”<br /> rispettivamente, trasportano la tempistica di sincronizzazione (chiamata anche “clock”) e i dati.<br /> Abbiamo scelto il bus I2C in quanto:<br /> * È diventato lo standard di fatto per una serie di integrati tra cui i sensori<br /> * Si possono collegare fino a 127 dispositivi<br /> * La comunicazione è bidirezionale (read e write) con velocità assolutamente sufficienti per i nostri scopi<br /> * la lunghezza operativa dei cavi è adeguata al nostro utilizzo (anche alcune decine di metri)<br /> <br /> ==== Interrogazione dei sensori ====<br /> I sensori possono venire interrogati a richiesta tramite remote call procedure oppure ad intervalli regolari.<br /> Quando interrogati a intervalli regolari tutti i sensori vengono interrogati &quot;in parallelo&quot; ossia tutti i sensori vengono mpostati e configurati all'accensione po periodicamente vengono attivati e impartita la richiesta di lettura; il driver del sensore torna il tempo di attesa necessario per avere la misura disponibile; si attente il tempo necessario per il sensore più lento; si effettuano tutte le letture.<br /> In questo modo si riescono a campionare tutti i sensori solitamente entro i 3 secondi e considerando i tempi per la loro pubblicazione sul server generalmente viene utilizzata una frequenza di campionamneto pari a una ogni 5 secondi.<br /> Tenendo i sensori normalmente in sleep si riducono anche i consumi.<br /> <br /> Ogni sensore può restituire volori multipli (ad esempio temperatura e umidità).<br /> <br /> === Operazioni di mantenimento ===<br /> Il software effettua periodicamente tutte le funzioni di mantenimento necessarie a un corretto funzionamento quali quelle relative al dhcp o alla sincronizzazione dell'orologio interno con una sorgente esterna.<br /> Tutti i firmware hanno attivo un watchdog hardware che evita blocchi permanenti dovuti a malfunzionamenti su eventi improbabili.<br /> <br /> === Orologio di riferimento ===<br /> Una base dei tempi precisa è richiesta nel caso in cui sia necessario salvare i dati localmente (su SD) nel caso la connessione utilizzata per pubblicare i dati sul server (broker) non sia considerata stabile. Se invece la connessione (trasporto) viene considerato stabile (o non sia necessario recuperare i dati in caso di fault) un preciso orologio di riferimento non è necessario e il tempo di riferimento verrà aggiunto automaticamente dal server alla pubblicazione in tempo reale del dato. Ci sono diversi sistemi per avere un orologio di riferimento preciso sui moduli Stima.<br /> <br /> === Stazioni fisse o mobili ===<br /> E' possibile installare sia stazioni fisse, la cui posizione non cambia nel tempo, sia stazioni mobili, sia terrestri che marine. Per aggiornare la posizioni delle stazioni mobili viene utilizzato un GPS che può essere o a bordo del modulo Stima o a bordo di un dispositivo android.<br /> <br /> === Attenzione ai consumi energetici ===<br /> Attenzione è stata posta alla limitazione dei consumi. Quando possibile i microcontrollori e i sensori vengono messi in sleep e sono alcuni interrupt a risvegliare il sistema. Questo agevola l'utilizzo con batterie dei sistemi a basso consumo quali il modulo satellite che funziona con un modulo radio.<br /> <br /> === Differenti tipologie di rete ===<br /> la consfigurazione della rete può essee differente a seconda delle esigenze; oltre alla classica consigurazione a stella (moduli master e base) con un broker al centro è disponibile la configurazione ad albero sia via cavo (modulo master + base) che via radio: con la possibilità di utilizzare moduli radio di maggiore potenza (~1Km in aria libera) è possibile prevedere coperture di un terriotorio con ampia superficie.<br /> <br /> === Software utente multipiattaforma ===<br /> Il software che l'utente può utlizzare per la pubblicazione e visualizzazione dei dati è multipiattaforma.<br /> Fatti salvi i moduli basati su microcontrollore e vincolati all'ambiente Atmel e alcune funzioni sul server di raccolta dei dati sviluppati in ambiente Linux (distribuzioni Centos e Fedora) la visulizzazione e il monitoraggio sono multipiattaforma. Anche l'interfaccia utente grafica che permette la geolocalizzazione, autenticazione e pubblicazione dei dati sia automatica che manuale anche di dati rilevati manualmente e a vista è multipiattaforma (attualmente testata su Linux, android, ma portabile su windows, OS X, iOS<br /> <br /> === Salvataggio locale dei dati ===<br /> <br /> I dati possono essere pubblicati in real time e/o salvati localmente.<br /> E' previsto un meccanismo di salvataggio dei dati su SD formattata fat; i file<br /> vengono frammentati a una dimensione frefissata per farne circa uno al<br /> giorno e numerati da 000 a 999; i dati salvati hanno una flag che indica<br /> se i dati sono stati già pubblicati correttamente su MQTT; i file che<br /> devono essere controllati per possibili reinvii hanno postfisso .que e<br /> quelli che hanno tutti i dati già inviati hanno postfisso .don<br /> <br /> In questo modo si ottengono queste funzionalità:<br /> * salvataggio dati su SD almeno per due anni con campionamenti ogni 5s<br /> * reinvio automatico al server dei dati salvati ma non pubblicati correttamente sul server<br /> * ottimizzazione dei tempi in quanto solo i file che contengono dati da inviare vengono letti per selezionare i dati da reinviare<br /> * i dati possono essere riletti su un normale PC estraendo l'SD<br /> <br /> <br /> === Messagistica di diagnostica ===<br /> C'è la possibilità di ottenere una ampia messaggistica di diagnostica per la soluzione dei problemi<br /> <br /> === Configurazione ===<br /> Le versioni delle configurazioni vengono verificate e quando il firmware non è retrocompatibile il modulo resta in attesa di una nuova configurazione.<br /> Le configurazioni vengono subito verificate: non è possibile configurare un modulo con dei sensori non corretti o non funzionanti.<br /> <br /> === Modularità hardware e software ===<br /> Le configurazioni hardware sono molteplici e possono essere utilizzate differenti board; sono compatibili i moduli hardware mqggiormente diffusi e conosciuti dai makers oltre ad essere generalmente a basso costo.<br /> <br /> === Crittografia ===<br /> Qualora il trasporto non sia considerato sicuro (via radio) viene utilizzata la crittografia per garantire riservatezza e autenticità.<br /> <br /> === Integrazione con la domotica ===<br /> PEr quello che è stato possibile si è cercato di integrarsi con gli standard della domotica (MQTT). Tutti i moduli possono essere utilizzati anche da attuatori on/off (fino a 4 relay) ma è molto semplice aggiungere altre funzionalità tramite remote procedure in formato json su tutti i trasporti o tramite MQTT.<br /> <br /> == Concetti base ==<br /> La modularità della stazione è stata ottenuta astraendo alcuni concetti e funzioni e implementandoli nei differenti moduli hardware e software.<br /> <br /> === Trasporti ===<br /> Il concetto di trasporto in Stima è simile ma non rigidamente aderente ai concetti del modello ISO-OSI. Nel caso dei trasporti passivi il suo compito è fornire un canale logico-affidabile di comunicazione end-to-end per fornire servizi al soprastante livello che in Stima è JsonRPC.<br /> Nel caso dei trasporti attivi corrisponde al protocollo (Session Layer) per la pubblicazione dei dati su un server (broker).<br /> <br /> === Passivi o attivi ===<br /> In pratica i trasporti &quot;passivi&quot; permettono di eseguire procedure remote codificate in formato json specifiche dell'implementazione Stima; quelli attivi permettono la pubblicazione su server (broker) dei messaggi aderenti allo standard R-MAP.<br /> <br /> ==== Passivi ====<br /> ===== Seriale =====<br /> Collegamento punto a punto tramite porta seriale.<br /> * Principalmente per configurazione e debug<br /> * Piccole distanze via cavo<br /> <br /> caratterizzato da:<br /> * Baud rate<br /> * Device<br /> <br /> ===== TCP/IP =====<br /> Trasporto che utilizza il tcp/ip; i supporti fisici supportati sono:<br /> * ethernet: collegamenti tramite cavo ethernet a breve e media distanza<br /> * GSM/GPRS: installazioni con problemi per le cablature di alimentazione e collegamento di rete<br /> <br /> caratterizzato da:<br /> * Name (Nome risolto dal DNS)<br /> * Ntpserver<br /> <br /> ===== Bluetooth =====<br /> caratterizzato da:<br /> * Bluetooth Name<br /> <br /> ===== NRF24 =====<br /> <br /> * OSI Network Layer using nRF24L01(+) radios 2.4GHz ISM 50/150m in aria libera<br /> * Host Addressing. Each node has a logical address on the local network.<br /> * Message Forwarding. Messages can be sent from one node to any other, and this layer will get them there no matter how many hops it takes.<br /> * Ad-hoc Joining. A node can join a network without any changes to any existing nodes.<br /> <br /> RF24Network Addressing and Topology<br /> <br /> Each node must be assigned an 15-bit address by the administrator. This address exactly describes the position of<br /> the node within the tree. The address is an octal number. Each digit in the address represents a position in the tree further from the base.<br /> * Node 00 is the base node.<br /> * Nodes 01-05 are nodes whose parent is the base.<br /> * Node 021 is the second child of node 01.<br /> * Node 0321 is the third child of node 021, an so on.<br /> * The largest node address is 05555, so 3,125 nodes are allowed on a single channel.<br /> <br /> Alla libreria distributia è stata aggiunta la crittografia e<br /> frammentazione e ricomposizione del payload<br /> <br /> caratterizzato da:<br /> * Node (Node ID for RF24 Network)<br /> * Channel (Numero canale per RF24) <br /> * Key (AES key) <br /> * Iv<br /> <br /> ==== Attivi ====<br /> ===== MQTT =====<br /> MQTT (Message Queue Telemetry Transport) è un protocollo<br /> publish/subscribe particolarmente leggero, adatto per la<br /> comunicazione M2M tra dispositivi con poca memoria o<br /> potenza di calcolo e server o message broker.<br /> <br /> caratterizzato da:<br /> * Mqttsampletime (intervallo in secondi per la pubblicazione) <br /> * Mqttserver (MQTT server)<br /> * Mqttuser (MQTT user)<br /> * Mqttpassword (MQTT password)<br /> <br /> ===== AMQP =====<br /> AMQP (Advanced Message Queuing Protocol) è protocollo per<br /> comunicazioni attraverso code di messaggi. Sono garantite<br /> l'interoperabilità, la sicurezza, l'affidabilità, la persistenza. <br /> <br /> caratterizzato da:<br /> * Amqpserver (Server AMQP)<br /> * Exchange (Nome dell'exchange remoto AMQP)<br /> * Queue (Nome della coda locale AMQP )<br /> * Amqpuser (User AMQP)<br /> * Amqppassword<br /> <br /> === JsonRPC ===<br /> <br /> La chiamata di procedure remote in formato json è l'unico metodo per poter eseguire funzioni su un modulo dalla configurazione al campionamento dei sensori.<br /> <br /> La documentazione delle procedure remote è disponibile qui [[Gruppo_Meteo/RemoteProcedure]]<br /> <br /> ==== JsonRPC over different transports ====<br /> E' possibile fare richiesta di una procedura remota che a sua volta richiede una procedura remota; in questo modo è possibile utilizzare due trasporti differenti e usare un modulo come gateway.<br /> Ad esempio il modulo base non dispone al momento del trasporto radio RF24 ma puo' richiedere a un modulo master tramite trasporto seriale o TCP/IP di eseguire una procedura remota su un modulo satellite raggiungibile tramite trasporto RF24.<br /> Queste funzionalità sono ampiamente da testare.<br /> <br /> <br /> == Elementi hardware ==<br /> <br /> === board microcontroller ===<br /> ==== atmel 328p ====<br /> Il più piccolo della serie può essere utilizzato per:<br /> * modulo i2c-gps<br /> * modulo i2c-wind<br /> * modulo i2c-rain<br /> <br /> implementazioni on board:<br /> * arduino uno<br /> * arduino nano<br /> * microduino core<br /> <br /> ==== atmel 644p ==== <br /> Il medio della serie può essere utilizzato per:<br /> * modulo satellite<br /> * modulo bluetooth<br /> * tutti i moduli relativi al 328p<br /> <br /> implementazioni on board:<br /> * microduino core+ 644p<br /> <br /> ==== altmel mega 2560/1284p ====<br /> Il grande della serie può essere utilizzato per:<br /> * modulo master<br /> * modulo GPS/GPRS<br /> * tutti i moduli relativi al 644p<br /> <br /> implementazioni on board:<br /> * arduino mega2560<br /> * microduino core+ 1284p<br /> <br /> === board RTC ===<br /> Il real time clock deve utilizzato quando quando non è possibile avere un'altra sorgente affidabile per il tempo di riferimento e al tempo stesso la pubblicazione dei dati può avvenire con tempo differito ad esempio tramite la memorizzazione su scheda SD.<br /> <br /> === board radio RF24 ===<br /> E' necessaria per supportare il trasporto NRF24<br /> <br /> === board ft232 ===<br /> E' necessario per programmare, debuggare, a volte configurare il modulo e per supportare il trasporto seriale.<br /> <br /> === board ENC28J60 ===<br /> Ethernet module a basso costo; è necessario lo stack tcp/ip software su microcontrollore.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board wiznet<br /> <br /> === board wiznet W5500 ===<br /> Ethernet module completa dello stack tcp/ip.<br /> Serve per supportare il trasporto TCP/IP.<br /> Alternativa alla board ENC28j60<br /> <br /> === board display I2C LCD 4 linee 20 caratteri ===<br /> Utilizzabile per visualizzare messaggistica di diagnostica e alcune misure quando non è disponibile un PC per debug e altre visualizzazioni.<br /> <br /> implementazioni on board:<br /> * YwRobot Arduino LCM1602 IIC V1<br /> <br /> === board 5V relay ===<br /> 5V 4/2-Channel Relay interface board; Equipped with high-current relay, AC 250V 10A / DC 30V 10A<br /> Opticalcoupler Protection<br /> Utilizzabile per aggiungere a un modulo la funzionalità di attuatore. Ogni relay può essere attivato singolarmente.<br /> <br /> <br /> === board SD ===<br /> Microduino-SD aims to read and write data of a memory card.<br /> Utilizzata per memorizzare i dati in loco; necessaria quando non ci siano trasporti utili o la stabilità dei trasporti utilizzati è messa in dubbio e i dati hanno valore anche in tempo differito.<br /> <br /> === board GSM/GPRS sim800/sim900 ===<br /> Adopt SIM800L module to support four-band GSM/GPRS, whose working band is：GSM850, EGSM900, DCS1800 and PCS1900MHz.<br /> Utilizzabile per avere il trasporto TCP/IP quando non è disponibile una connessione ethernet.<br /> Questo modulo può funzionare sul trasporto TCP/IP in due modalità: una con delle get http tramutate dal server in publish MQTT e l'altra in una vera connessione MQTT.<br /> E' possibile utilizzare questo modulo anche cone Real Time Clock per ottenere una tempo di riferimento stabile.<br /> Si può quindi ottenere dal server rmap il tempo di riferimento e impostarlo nell'RTC di questo modulo per poi rileggerlo al bisogno in caso di non disponibilità del trasporto TCP/IP; tutto questo a scapito di stabilità e continuità di servizio.<br /> Nel caso sia importante avere un RTC affidabile si consiglia l'aggiunta di un modulo RTC o ancora meglio del modulo GPS.<br /> <br /> === board GPS Neo 6M ===<br /> Questa board insieme a una board microcontrollore possono creare un modulo i2c-gps.<br /> Il modulo i2c-gps fornisce a richiesta la posizione (lat, lon, altezza) e il tempo di riferimento.<br /> Serve per istallazioni mobili o che necessitano di un tempo di riferimento particolarmente stabile.<br /> <br /> == Guida per la composizione di un modulo Stima ==<br /> TODO</div> Dariomas