Spotweb SPK

[www1702]

Martijn, bedankt, heb het draaien.

Mvg WS.

[BakedPizza]

Pff, heel me verhaal kwijt door de irritante captcha..  Dan maar overnieuw;

Bedankt voor de moeite Martijn, heb een tijdje gehoopt dat Spotweb als package uitgebracht zou worden. En daar is die dan! 

Echter, na het volledig ophalen van alle items en voor de zekerheid een reboot, kost het mij letterlijk een paar volle minuten voordat SpotWeb één pagina heeft geladen. En dat geldt helaas voor alle clicks binnen SpotWeb. Het lijkt wel of er ergens een buffer volloopt (MySQL?). Enig idee hoe ik dit kan debuggen en/of oplossen? Zo is hij helaas niet bruikbaar.

//Edit: CPU blijft onder 5% en zeker nog 512MB RAM vrij.

//Edit2: Oplossing hier: http://www.synology-forum.nl/spotweb/spotweb-spk/msg77645/#msg77645

[Theet]

Perfect! Een package voor Spotweb... 

1) Na installatie haalt hij netjes de spots binnen, maar vanaf een maand oud... help 
Wat moet ik nakijken/wijzigen om de spots wel volledig op te halen?

Heb in de Synology planner het volgende toegevoegd:

Upgrade-db:

Code: [Selecteer]

/usr/bin/php
/volume1/web/spotweb/upgrade-db.php
en Retrieve:

Code: [Selecteer]

/usr/bin/php
/volume1/web/spotweb/retrieve.php
2) Ik heb geen idee of deze scripts daadwerkelijk uitgevoerd en goed worden, is
dit ergens te zien?

3) Last update: unknown
Volgens mij gaat bij mij de update niet goed, heb van alles geprobeerd, ook via Putty retrieve
uitgevoerd en database geupdate, maar het lukt me niet...

[BakedPizza]

Mijn installatie werkt wel, maar is nog steeds ontiegelijk traag. Blijkbaar ben de enige met dit probleem...?

Perfect! Een package voor Spotweb... 

1) Na installatie haalt hij netjes de spots binnen, maar vanaf een maand oud... help 
Wat moet ik nakijken/wijzigen om de spots wel volledig op te halen?

2) Ik heb geen idee of deze scripts daadwerkelijk uitgevoerd en goed worden, is
dit ergens te zien?

1) Als de door jou in Spotweb ingestelde newsserver maar een retentie heeft van 30 dagen (meestal het geval met de 'gratis' newsservers van internet providers) dan haalt hij ook niet meer op. Als je retentie wel hoger is kan je in de spotweb settings kijken of je de optie "Retention on spots (in days)" onder de "Retrieve" tab wel hoger ingesteld hebt. De settings zijn te vinden op de volgende pagina:

Code: [Selecteer]

http://JE-DOMEIN-OF-IP/spotweb/?page=editsettings
2) Ik heb hieronder afbeeldingen toegevoegd met een voorbeeld van een werkende planning. Als je zelf via SSH een retrieve uitvoert zie je ook wanneer de laatste synchronisatie was. Daarmee kan je in principe verifiëren of je planning wel werkt.

[Theet]

Dank voor de snelle reactie, ik heb de taakplanner hetzelfde ingesteld als in voorgaande post.

1) Ik heb de retentie op "0" staan zodat hij alles behoudt, tevens werk ik met een pay server met een retentie van > 365 dagen. Volgens mij moet hij dan gewoon alle posts, ook die van vandaag inladen, toch? Tot op heden zie ik spotst ouder dan 1 maand, geen spots van vandaag bijvoorbeeld...

2) Heb de planning wat aangepast, direct op "uitvoeren"  geklikt, het zou mooi zijn om te zien of hij er dan mee aan de slag gaat/is?

Ik heb overigens al langer dan een jaar Spotweb draaien, eerder via het IPKG package. Dit heeft altijd gewerkt. Nu heb ik het Spotweb spk geïnstalleerd omdat mijn versie niet meer up to date was. Heb voor installatie eerst de database en gebruikersnaam verwijdert in phpMyAdmin en daarna het package geïnstalleerd. De installatie en de uit te voeren stappen verliep zonder problemen.

[BakedPizza]

1) Ik heb de retentie op "0" staan zodat hij alles behoudt, tevens werk ik met een pay server met een retentie van > 365 dagen. Volgens mij moet hij dan gewoon alle posts, ook die van vandaag inladen, toch? Tot op heden zie ik spotst ouder dan 1 maand, geen spots van vandaag bijvoorbeeld...

2) Heb de planning wat aangepast, direct op "uitvoeren"  geklikt, het zou mooi zijn om te zien of hij er dan mee aan de slag gaat/is?

1) Oh oké, je zei eerder namelijk dat je ze vanaf 1 maand oud binnenhaalt, maar je bedoelde tot 1 maand oud..? In het geval van het laatste; dit heb ik kunnen oplossen door de retrieve.php file via SSH uit te voeren totdat de melding verscheen dat er geen nieuwe spots meer waren. Blijkbaar haalt hij de spots in etappes op (ik denk dat dit met het "retrieve interval" te maken heeft?). Na ongeveer 5x uitvoeren, wat overigens heel lang duurde, was het probleem weg en was ik up-to-date.

2) De twee opties die ik ken zijn: via SSH uitvoeren en dan krijg je een melding als hij al bezig is, of via phpmyadmin de volgende SQL-query uitvoeren:

Code: [Selecteer]

SHOW FULL PROCESSLIST;Er verschijnt dan namelijk een overzicht met gebruikers die momenteel verbonden zijn en daar staat spotweb tussen als de retrieve wordt uitgevoerd.

[Theet]

Dank je... heb zojuist het commando in de sql gestopt, zie echter nog geen user "spotweb" voorbij komen.

Wel heb ik opnieuw in de taakplanner "retrieve"  uitgevoerd en inderdaad lijkt het er nu op dat hij posts ophaald... nu tot 4 dagen geleden.

[Theet]

Heb gisteren de taakplanner ingesteld, enkele keren opnieuw retrieve uitgevoerd en nu heb ik alle posts. Het lijkt super te werken!

Zoals al eerder gezegd in dit topic, je moet een aantal keren retrieven voordat je alle posts binnen hebt.

Grootte van mijn database in phpMyAdmin na volledige update:
- spots = 323 MB
- cache = 6,4 MB
- spotsfull = 142,2 MB

In mijn vorige geïnstalleerde versie van spotweb was de cache maarliefst 1,8 GB, dat zijn heel andere waarden...

[BakedPizza]

Mooi dat het is opgelost. De waardes komen overeen met mijn installatie (mijn cache is zelfs maar 2.1 MB), echter heb ik ook een commentsxover tabel van 1.9 GB. Zou je mij kunnen vertellen of jou installatie wel snel reageert...? Hoe snel opent SpotWeb? En hoe snel reageert hij als je op een spot klikt?

[TonVH]

Poog voor een kennis Spotweb te installeren maar zit vast op het 2e Install scherm.

Spotwebtype wil ik op Public zetten (geen noodzaak e.e.a. te blokkeren) maar ongeacht wat ik type bij "username" hij blijft hij die weigeren.

[BakedPizza]

Ongelofelijk... Traagheid kunnen oplossen door de Apache log te activeren. En wat schets mijn verbazing?

Code: [Selecteer]

Error: Could not decode json-data for NZBGet method 'status'
En daardoor liep hij dus bij elke request 2 minuten vast; niet echt netjes. Maar goed, is nu eindelijk opgelost door de NZBGet integratie uit te schakelen. Ik ben weer happy.

//Edit: De bijgeleverde .htaccess werkte trouwens niet voor mij (niets te maken met het traag laden, alleen de totaal niet werkende api). Deze .htaccess werkt voor mij wel i.c.m. sickbeard, alleen nog steeds timeouts:

Code: [Selecteer]

<IfModule mod_rewrite.c>
RewriteEngine on
RewriteBase /spotweb/ 
RewriteCond %{REQUEST_URI} !api/ 
RewriteRule api/?$ index.php?page=newznabapi [QSA,L]
RewriteRule details/([^/]+) index.php?page=getspot&messageid=$1 [L]
</IfModule>

[Cage91]

Hey Martijn,

Ik wou je even bedanken voor dit stukje topwerk!

Is het mogelijk een filter toe te voegen voor HD films(mkv) met nederlandse ondertitel en in dezelfde filter nederlandse HD films (mkv) toestaan? Ik kom er niet helemaal uit.

Verder.... Thanks!

[Burner1977]

Hallo Martijn,

super package. Lekker makkelijk. Ik volgde eerst altijd de handleiding voor een manual install van Brickman. Wel had ik even de volgende vraag. Wat is nu de command voor het updaten van Spotweb zelf? Ik was namelijk bij de Spotweb die ik had geinstalleerd gewent om de volgende commando's uit te voeren:

cd /volume1/web/spotweb
git pull (aangezien dat git daar stond)

Ik heb nu git niet handmatig geïnstalleerd, maar ook met een spk vandaar de vraag.

Alvast bedankt

Burner1977

[Martijn85]

Git werk inderdaad niet met de SPK installatie. Wel over nagedacht maar als ik de git folder laat mee nemen wordt de SPK 15MB of groter dus heb er voor gekozen om deze niet mee te nemen.

Updates laat ik via de SPK binnenkomen.

Of je moet er voor kiezen om git zelf nog een keer toe te voegen.

[Burner1977]

Hallo Martijn,

bedankt voor je feedback. Wat versta je precies onder "updates laat ik via SPK binnenkomen". Is dit iets wat je mee hebt genomen in een script wat dagelijks loopt?
Ook had ik nog de vraag wat je precies in de taakplanner zet. Ik had het een en ander al geprobeerd, maar het blijkt de retrieve.php niet lekker op te starten. Heb je een voorbeeld voor mij.

Groetjes

Burner1977