Blog.Project13.pl » wget

(Almost) Automatically convert files into PDF

Ktoso — Mon, 16 Nov 2009 00:56:55 +0000

I’m learning Numerical Analysis right now and a friend of mine found some really nice PS files by dr Marian Bubek ( http://www.icsr.agh.edu.pl/~mownit/mownit.html ). I was really happy to see some *.ps but some people from my fellow students started complaining that they’d rather have pdf’s and not ghostscript files (who knows why they’d do..?). Anyways, they all had “manual” repetitious methods for converting the files – even uploading to somewebsite to have them converted over there “in the cloud”… I though of a slightly quicker and more efficient way, here it is, hope you’ll like it. Ah, there is One “non standard” requirement for this to work, you have to install cups-pdf :-)

wget http://www.icsr.agh.edu.pl/~mownit/mownit.html -r –level 1 -A.ps –cut-dirs 4

mv www.icsr.agh.edu.pl/* .
rm -rf www.icsr.agh.edu.pl/
for file in `dir -f *` ; do
lpr -P 'cups-PDF' $file;
echo "press enter when cups is done printing…" #yeah, i got lazy here, one could watch lpq for changes etc.
read oczekiwanie;
mv /home/ktoso/Pulpit/cups-pdf/template.pdf ./$file;
done;
# ________________
#< Happy hacking! >
# —————-
# \ ^__^
# \ (oo)\_______
# (__)\ )\/\
# ||—-w |
# || ||

Wget mastery – część 5

Ktoso — Mon, 17 Aug 2009 11:23:54 +0000

Tak, tak, w get dalej mi się nie znudził i dalej znajduję ciekawe zastosowania go w realnych życiowych sytuacjach! Tym razem sposób (obadany przez jizo) służący pobieraniu plików z rapidshare w przypadku posiadania konta premium. Podawanie hasła/loginu w celu dostania się do plików już pokazywałem, sprawa z rapidem ma się jednak troszkę inaczej, wykorzystamy ciasteczka, najpierw się “zalogujemy” wgetem, a potem korzystając z ciasteczek ustawionych przy tym logowaniu pobieramy pliki – rapid uzna że wget jest zalogowanym na konto premium użytkownikiem:

#karmisz go ciasteczkiem

wget –save-cookies ~/.cookies/rapidshare –post-data \\"login=USERNAME&password=PASSWORD\\" -O – https://ssl.rapidshare.com/cgi-bin/premiumzone.cgi > /dev/null
#i potem
wget -i lista -c –load-cookies ~/.cookies/rapidshare

Dodatkowo z wgeta tutaj korzystamy sobie troszkę cwaniej, zakładając że z rapida będziemy pobierać dużo plików. od razu wygodniej skorzystać z -i i adresów zapisanych w pliku lista (tak jak w moim rapgetfile.pl). Opcje z ciasteczkami są na tyle jasne że ich nie tłumaczę, wszystko widać… :-)

PS: Pamiętajcie o włączeniu opcji “Direct downloads, requested files are saved without redirection via RapidShare” na w swoim profilu premium po zalogowaniu się na rapidzie, inaczej powyższy sposób nie zadziała.

Wget mastery – część 3

Ktoso — Mon, 17 Aug 2009 11:22:00 +0000

Coś ostatnio masę okazji do szlifowania mojej znajomośłci wgeta i shella mam. Tym razem dano mi adres stronki na której fotograf umieścił kilka zdjęć z ślubu mojego kuzyna. Aby się dobrać do pliczków konieczne było jednak podawanie loginu i hasła, zatem dotychczasowe metoty nie działały jako że wpadały na stronę błędu 401 zamiast pliki obrazków. Okazało się że sam wget, bez dodatkowych narzędzi, potrafi sobie poradzić z taką sytuacją. Poniżej skrypt z którego skorzystałem do pobrania całej galerii, w zasadzie banalny, ale chodzi tu o użycie wgeta wraz z hasełkiem i loginem:

#!/bin/sh

for r in `seq 1 160`
do
wget "http://www.fotokracja.pl/galerie/prywatne/Iwona_i_Tomasz/zdjecia/$r.jpg" –user=LOGINTUTAJ –password=HASŁOTUTAJ
done

Najpierw ręcznie popatrzyłem na tą galerię i rozpoznałem że obrazki są zwyczajnie numerowane od 1 do 160, bez dziwactw więc jedna pętelka banalna załatwiła stworzenie wszystkich URLi… Login oraz hasło konieczne do uzyskania dostępu do tych plików przekazałem jak widać przy pomocy parametrów –user oraz –password. Podziękowania za wskazówkę jak tego dokonać lecą do użytkownika coderscity, Eightflower, który podsunął mi rozwiązanie problemu podając na forum:

wget –help | grep “password” && wget –help | grep “user”