Cloud Hosting Seeweb: MySQL has Gone e Unable to connect MySQL

[RedFoxy]

Ciao a tutti!
Come da titolo, ho un Cloud Hosting su SeeWeb, ho scelto la versione hosting perché mi intriga la possibilità di avere su server indipendenti, web e database, fatto questo parto da una premessa: Principalmente su questo hosting ho spostato 2 comunità, una grossa con quasi 24.000 iscritti ( SoftAir Mania - Prima pagina ) e una piccola ( http://www.furryitalia.it ) più un paio di siti con traffico irrisorio. La somma di tutti i DB si attesta sui 5gb, di cui, SAM detiene il DB più grosso, seguito dal servizio openx, questi due database sono circa il 90% dello spazio e delle risorse DB utilizzate.
Prima di spostarmi su SeeWeb ero su un server dedicato Dell R200 Xeon Quad con 8 Gb di ram con su montato FreeBSD, iniziavo a sentire la fatica ma andava tutto alla grande.
Mi sono spostato per problemi all'hardware (il server era mio) e perché il costo ormai era diventato eccessivo per le mie tasche.

Risultato con seeweb:
Inizialmente disastroso, non si aspettavano (Anche se li avevo avvertiti) di un trasloco di tale massa, a tal punto che non potevo spostare nemmeno gli archivi, o se li copiavo da un server a seeweb poi non potevo scompattarli per il poco spazio.

Superato il primo stadio ed entrati a regime, inizio ad avere problemi di rallentamenti, server error (errore 500 o 503) e tanti problemi database: Mi riconfigurano apache e mysql.

Il traffico a poco a poco ritorna e tornano rallentamenti, server error (errore 500 o 503) e problemi a mysql: Riconfigurano pesantemente.

Raggiungo quota 1200 SPU totali, tra le 300 base e le 900 acquistate, divise tra web e db, niente alla posta, dando 190 SPU al db e 1000 al web.
I problemi diminuiscono ma non spariscono del tutto, ma tra le altre siamo ad agosto è normale che il carico diminuisca... Fatto sta che attualmente abbiamo 1300 SPU, usate 1328! Web 1057/1000, Database 260/290 SPU e ricevo ancora segnalazioni riguardanti MySQL.

Tra le altre, gli errori di MySQL sono o "MySQL has gone" o "Unable to connect MySQL", stando a seeweb uso troppe risorse e non ne ha a sufficenza per collegarsi al db...

La cosa è strana visto che loro dicono che la cloud machine web ha 6 CPU assegnate e 8Gb di ram ma tuttoi questi problemi con il server fisico non li avevo (e aveva solo 4 core e 8gb e doveva gestire anche DB in quelle risorse!)

Ho provato anche a fare un po' di test con siege per vedere quanto regge, purtroppo i test non posso farli su una pagina pesante come quella riguardante la ricerca (tabelle innodb) ma li faccio comunque caricando la pagina con l'elenco dei forum di SAM che è alquanto pesante.

Ci tengo a precisare che per tutta la durata dei test con siege NON si è mai verificato un errore DB (o almeno non ho mai ricevuto un errore in merito da parte di vbulletin)

Risultati di siege su test da 1 minuto:

-c 10

Lifting the server siege... done.
Transactions: 637 hits
Availability: 100.00 %
Elapsed time: 59.81 secs
Data transferred: 17.88 MB
Response time: 0.45 secs
Transaction rate: 10.65 trans/sec
Throughput: 0.30 MB/sec
Concurrency: 4.75
Successful transactions: 637
Failed transactions: 0
Longest transaction: 1.00
Shortest transaction: 0.35

-c 50

Lifting the server siege... done.
Transactions: 850 hits
Availability: 100.00 %
Elapsed time: 59.07 secs
Data transferred: 23.91 MB
Response time: 2.87 secs
Transaction rate: 14.39 trans/sec
Throughput: 0.40 MB/sec
Concurrency: 41.23
Successful transactions: 850
Failed transactions: 0
Longest transaction: 8.39
Shortest transaction: 0.50

-c 100

Lifting the server siege... done.
Transactions: 824 hits
Availability: 100.00 %
Elapsed time: 59.69 secs
Data transferred: 18.84 MB
Response time: 6.20 secs
Transaction rate: 13.80 trans/sec
Throughput: 0.32 MB/sec
Concurrency: 85.59
Successful transactions: 824
Failed transactions: 0
Longest transaction: 19.16
Shortest transaction: 0.12

-c 200

Lifting the server siege... done.
Transactions: 925 hits
Availability: 95.95 %
Elapsed time: 60.04 secs
Data transferred: 25.94 MB
Response time: 9.30 secs
Transaction rate: 15.41 trans/sec
Throughput: 0.43 MB/sec
Concurrency: 143.32
Successful transactions: 925
Failed transactions: 39
Longest transaction: 42.81
Shortest transaction: 0.47

-c 300

Lifting the server siege... done.
Transactions: 815 hits
Availability: 83.42 %
Elapsed time: 59.78 secs
Data transferred: 23.06 MB
Response time: 9.80 secs
Transaction rate: 13.63 trans/sec
Throughput: 0.39 MB/sec
Concurrency: 133.60
Successful transactions: 815
Failed transactions: 162
Longest transaction: 37.45
Shortest transaction: 3.96

-c 400

Transactions: 950 hits
Availability: 76.37 %
Elapsed time: 60.05 secs
Data transferred: 26.87 MB
Response time: 10.62 secs
Transaction rate: 15.82 trans/sec
Throughput: 0.45 MB/sec
Concurrency: 168.04
Successful transactions: 950
Failed transactions: 294
Longest transaction: 35.34
Shortest transaction: 0.47

-c 500

Transactions: 1044 hits
Availability: 75.32 %
Elapsed time: 60.03 secs
Data transferred: 29.52 MB
Response time: 10.34 secs
Transaction rate: 17.39 trans/sec
Throughput: 0.49 MB/sec
Concurrency: 179.78
Successful transactions: 1044
Failed transactions: 342
Longest transaction: 46.56
Shortest transaction: 0.42

[CoolNetwork]

mi sono perso.. e la domanda quale sarebbe?

[WizOfOz]

probabilmente è uno sfogo.... starà rimpiangendo il dedicato

[Antonio]

Se non lo hanno ancora fatto:

-Fatti sostituire Apache con nginx
- Fatti installare APC per PHP

Ovviamente sistemati le regole di rewrite (se usi vbseo, cerca con google che le trovi già fatte, vanno inserite nel file di configurazione del vhost di nginx) se ne fai uso.

Così facendo dovresti essere apposto con il nodo web.

Per il nodo database: devi vedere se hanno anche sistemato la configurazione di mysql, perché se quadruplichi pure cpu/ram ma non riconfiguri mysql il tutto è inutile.

Prova ad installare questo: http://www.hostingtalk.it/forum/gest...-di-mysql.html e dai una occhiata a quel che ti restituisce (e postacelo anche qui, visto che ci sei )

[WizOfOz]

Se non lo hanno ancora fatto:
...

Antonio... tu sei troppo avanti.... rispondi anche alle domande che devono ancora essere fatte

[Antonio]

Antonio... tu sei troppo avanti.... rispondi anche alle domande che devono ancora essere fatte

Purtroppo si è capito che il cloud hosting non è altro che un cloud server "managed" . Ma con la questione delle SPU ho la sensazione che o gli si dice cosa fare o l'unica cosa che ti suggeriscono è di aumentare le SPU.

L'offerta andava probabilmente strutturata in maniera diversa, ma forse sono io che ho un'altra visione del segmento di mercato in cui si inserisce quell'offerta.

[CoolNetwork]

visto che usi vbulletin fatti mettere memcached

[GrG]

Purtroppo si è capito che il cloud hosting non è altro che un cloud server "managed" .

Più che altro è un cloud server con remote hands che alla fine è un dedicato con remote hands, perchè se non sai fare le domande giuste al supporto con la configurazione di default su un altix uv da 2048 core fa fatica a girare blog.grg-web.eu

[RedFoxy]

Dunque, naturalmente rompendo le palle all'assistenza ho ottenuto le seguenti cose gia' da parecchio tempo:

1) Configurazione di APC in modo indipendente per ogni child di apache in modo da essere più performante
2) memcache lo sto' già usando pesantemente (non potevo attivare i siti senza APC e memcache)
3) il passaggio a lighttpd (non nginx) è più problematico visto che ho tonnellate di rewrite da configurare e testare per questo ci sto andando con i piedi di piombo e non rapidamente.

Quali sono le mie domande: Come faccio a risolvere o almeno a capire da dove vengono i problemi relativi a mysql? e com'e' possibile che già a 200 siege mi segnali errori?

[Antonio]

3) il passaggio a lighttpd (non nginx) è più problematico visto che ho tonnellate di rewrite da configurare e testare per questo ci sto andando con i piedi di piombo e non rapidamente.

Passando a nginx avresti un bel boost prestazionale e meno risorse usate sul nodo web.

Quali sono le mie domande: Come faccio a risolvere o almeno a capire da dove vengono i problemi relativi a mysql? e com'e' possibile che già a 200 siege mi segnali errori?

Leggi quanto ho scritto in precedenza:

Per il nodo database: devi vedere se hanno anche sistemato la configurazione di mysql, perché se quadruplichi pure cpu/ram ma non riconfiguri mysql il tutto è inutile.

Prova ad installare questo: http://www.hostingtalk.it/forum/gest...-di-mysql.html e dai una occhiata a quel che ti restituisce (e postacelo anche qui, visto che ci sei )

[RedFoxy]

si scusate ho dimenticato di dire che di modifiche ne hanno fatto, purtroppo non posso leggere il file però posso passarvi questo:

mysql> show variables;
+---------------------------------+----------------------------+
| Variable_name                   | Value                      |
+---------------------------------+----------------------------+
| auto_increment_increment        | 1                          | 
| auto_increment_offset           | 1                          | 
| automatic_sp_privileges         | ON                         | 
| back_log                        | 50                         | 
| basedir                         | /usr/                      | 
| binlog_cache_size               | 32768                      | 
| bulk_insert_buffer_size         | 8388608                    | 
| character_set_client            | latin1                     | 
| character_set_connection        | latin1                     | 
| character_set_database          | latin1                     | 
| character_set_filesystem        | binary                     | 
| character_set_results           | latin1                     | 
| character_set_server            | latin1                     | 
| character_set_system            | utf8                       | 
| character_sets_dir              | /usr/share/mysql/charsets/ | 
| collation_connection            | latin1_swedish_ci          | 
| collation_database              | latin1_swedish_ci          | 
| collation_server                | latin1_swedish_ci          | 
| completion_type                 | 0                          | 
| concurrent_insert               | 1                          | 
| connect_timeout                 | 5                          | 
| datadir                         | /home/mysql/1014/          | 
| date_format                     | %Y-%m-%d                   | 
| datetime_format                 | %Y-%m-%d %H:%i:%s          | 
| default_week_format             | 0                          | 
| delay_key_write                 | ON                         | 
| delayed_insert_limit            | 100                        | 
| delayed_insert_timeout          | 300                        | 
| delayed_queue_size              | 1000                       | 
| div_precision_increment         | 4                          | 
| keep_files_on_create            | OFF                        | 
| engine_condition_pushdown       | OFF                        | 
| expire_logs_days                | 10                         | 
| flush                           | OFF                        | 
| flush_time                      | 0                          | 
| ft_boolean_syntax               | + -><()~*:""&|             | 
| ft_max_word_len                 | 84                         | 
| ft_min_word_len                 | 3                          | 
| ft_query_expansion_limit        | 20                         | 
| ft_stopword_file                | (built-in)                 | 
| group_concat_max_len            | 1024                       | 
| have_archive                    | YES                        | 
| have_bdb                        | NO                         | 
| have_blackhole_engine           | YES                        | 
| have_compress                   | YES                        | 
| have_crypt                      | YES                        | 
| have_csv                        | YES                        | 
| have_dynamic_loading            | YES                        | 
| have_example_engine             | NO                         | 
| have_federated_engine           | YES                        | 
| have_geometry                   | YES                        | 
| have_innodb                     | YES                        | 
| have_isam                       | NO                         | 
| have_merge_engine               | YES                        | 
| have_ndbcluster                 | DISABLED                   | 
| have_openssl                    | DISABLED                   | 
| have_ssl                        | DISABLED                   | 
| have_query_cache                | YES                        | 
| have_raid                       | NO                         | 
| have_rtree_keys                 | YES                        | 
| have_symlink                    | YES                        | 
| hostname                        | xxx.xxx.seeweb.it        | 
| init_connect                    |                            | 
| init_file                       |                            | 
| init_slave                      |                            | 
| innodb_additional_mem_pool_size | 1048576                    | 
| innodb_autoextend_increment     | 8                          | 
| innodb_buffer_pool_awe_mem_mb   | 0                          | 
| innodb_buffer_pool_size         | 8388608                    | 
| innodb_checksums                | ON                         | 
| innodb_commit_concurrency       | 0                          | 
| innodb_concurrency_tickets      | 500                        | 
| innodb_data_file_path           | ibdata1:10M:autoextend     | 
| innodb_data_home_dir            |                            | 
| innodb_doublewrite              | ON                         | 
| innodb_fast_shutdown            | 1                          | 
| innodb_file_io_threads          | 4                          | 
| innodb_file_per_table           | OFF                        | 
| innodb_flush_log_at_trx_commit  | 1                          | 
| innodb_flush_method             |                            | 
| innodb_force_recovery           | 0                          | 
| innodb_lock_wait_timeout        | 50                         | 
| innodb_locks_unsafe_for_binlog  | OFF                        | 
| innodb_log_arch_dir             |                            | 
| innodb_log_archive              | OFF                        | 
| innodb_log_buffer_size          | 1048576                    | 
| innodb_log_file_size            | 5242880                    | 
| innodb_log_files_in_group       | 2                          | 
| innodb_log_group_home_dir       | ./                         | 
| innodb_max_dirty_pages_pct      | 90                         | 
| innodb_max_purge_lag            | 0                          | 
| innodb_mirrored_log_groups      | 1                          | 
| innodb_open_files               | 300                        | 
| innodb_rollback_on_timeout      | OFF                        | 
| innodb_support_xa               | ON                         | 
| innodb_sync_spin_loops          | 20                         | 
| innodb_table_locks              | ON                         | 
| innodb_thread_concurrency       | 8                          | 
| innodb_thread_sleep_delay       | 10000                      | 
| interactive_timeout             | 28800                      | 
| join_buffer_size                | 131072                     | 
| key_buffer_size                 | 16777216                   | 
| key_cache_age_threshold         | 300                        | 
| key_cache_block_size            | 1024                       | 
| key_cache_division_limit        | 100                        | 
| language                        | /usr/share/mysql/english/  | 
| large_files_support             | ON                         | 
| large_page_size                 | 0                          | 
| large_pages                     | OFF                        | 
| lc_time_names                   | en_US                      | 
| license                         | GPL                        | 
| local_infile                    | ON                         | 
| locked_in_memory                | OFF                        | 
| log                             | OFF                        | 
| log_bin                         | OFF                        | 
| log_bin_trust_function_creators | OFF                        | 
| log_error                       |                            | 
| log_queries_not_using_indexes   | OFF                        | 
| log_slave_updates               | OFF                        | 
| log_slow_queries                | OFF                        | 
| log_warnings                    | 1                          | 
| long_query_time                 | 10                         | 
| low_priority_updates            | OFF                        | 
| lower_case_file_system          | OFF                        | 
| lower_case_table_names          | 0                          | 
| max_allowed_packet              | 16776192                   | 
| max_binlog_cache_size           | 18446744073709551615       | 
| max_binlog_size                 | 104857600                  | 
| max_connect_errors              | 10                         | 
| max_connections                 | 500                        | 
| max_delayed_threads             | 20                         | 
| max_error_count                 | 64                         | 
| max_heap_table_size             | 16777216                   | 
| max_insert_delayed_threads      | 20                         | 
| max_join_size                   | 18446744073709551615       | 
| max_length_for_sort_data        | 1024                       | 
| max_prepared_stmt_count         | 16382                      | 
| max_relay_log_size              | 0                          | 
| max_seeks_for_key               | 18446744073709551615       | 
| max_sort_length                 | 1024                       | 
| max_sp_recursion_depth          | 0                          | 
| max_tmp_tables                  | 32                         | 
| max_user_connections            | 250                        | 
| max_write_lock_count            | 18446744073709551615       | 
| multi_range_count               | 256                        | 
| myisam_data_pointer_size        | 6                          | 
| myisam_max_sort_file_size       | 9223372036854775807        | 
| myisam_recover_options          | BACKUP                     | 
| myisam_repair_threads           | 1                          | 
| myisam_sort_buffer_size         | 8388608                    | 
| myisam_stats_method             | nulls_unequal              | 
| ndb_autoincrement_prefetch_sz   | 32                         | 
| ndb_force_send                  | ON                         | 
| ndb_use_exact_count             | ON                         | 
| ndb_use_transactions            | ON                         | 
| ndb_cache_check_time            | 0                          | 
| ndb_connectstring               |                            | 
| net_buffer_length               | 16384                      | 
| net_read_timeout                | 30                         | 
| net_retry_count                 | 10                         | 
| net_write_timeout               | 60                         | 
| new                             | OFF                        | 
| old_passwords                   | OFF                        | 
| open_files_limit                | 2558                       | 
| optimizer_prune_level           | 1                          | 
| optimizer_search_depth          | 62                         | 
| pid_file                        | /var/run/mysqld/1014.pid   | 
| port                            | 3306                       | 
| preload_buffer_size             | 32768                      | 
| profiling                       | OFF                        | 
| profiling_history_size          | 15                         | 
| protocol_version                | 10                         | 
| query_alloc_block_size          | 8192                       | 
| query_cache_limit               | 4194304                    | 
| query_cache_min_res_unit        | 4096                       | 
| query_cache_size                | 268435456                  | 
| query_cache_type                | ON                         | 
| query_cache_wlock_invalidate    | OFF                        | 
| query_prealloc_size             | 8192                       | 
| range_alloc_block_size          | 2048                       | 
| read_buffer_size                | 131072                     | 
| read_only                       | OFF                        | 
| read_rnd_buffer_size            | 262144                     | 
| relay_log_purge                 | ON                         | 
| relay_log_space_limit           | 0                          | 
| rpl_recovery_rank               | 0                          | 
| secure_auth                     | OFF                        | 
| secure_file_priv                |                            | 
| server_id                       | 0                          | 
| skip_external_locking           | ON                         | 
| skip_networking                 | OFF                        | 
| skip_show_database              | OFF                        | 
| slave_compressed_protocol       | OFF                        | 
| slave_load_tmpdir               | /tmp/                      | 
| slave_net_timeout               | 3600                       | 
| slave_skip_errors               | OFF                        | 
| slave_transaction_retries       | 10                         | 
| slow_launch_time                | 2                          | 
| socket                          | /var/run/mysqld/1014.sock  | 
| sort_buffer_size                | 2097144                    | 
| sql_big_selects                 | ON                         | 
| sql_mode                        |                            | 
| sql_notes                       | ON                         | 
| sql_warnings                    | OFF                        | 
| ssl_ca                          |                            | 
| ssl_capath                      |                            | 
| ssl_cert                        |                            | 
| ssl_cipher                      |                            | 
| ssl_key                         |                            | 
| storage_engine                  | MyISAM                     | 
| sync_binlog                     | 0                          | 
| sync_frm                        | ON                         | 
| system_time_zone                | CEST                       | 
| table_cache                     | 1024                       | 
| table_lock_wait_timeout         | 50                         | 
| table_type                      | MyISAM                     | 
| thread_cache_size               | 64                         | 
| thread_stack                    | 131072                     | 
| time_format                     | %H:%i:%s                   | 
| time_zone                       | SYSTEM                     | 
| timed_mutexes                   | OFF                        | 
| tmp_table_size                  | 33554432                   | 
| tmpdir                          | /tmp                       | 
| transaction_alloc_block_size    | 8192                       | 
| transaction_prealloc_size       | 4096                       | 
| tx_isolation                    | REPEATABLE-READ            | 
| updatable_views_with_limit      | YES                        | 
| version                         | 5.0.51a-24+lenny4          | 
| version_comment                 | (Debian)                   | 
| version_compile_machine         | x86_64                     | 
| version_compile_os              | debian-linux-gnu           | 
| wait_timeout                    | 28800                      | 
+---------------------------------+----------------------------+
232 rows in set (0.00 sec)