Teraz jest 24 lis 2024 12:22:09




Utwórz nowy wątek Ten wątek jest zamknięty. Nie możesz w nim pisać ani edytować postów.  [ Posty: 242 ]  Przejdź na stronę Poprzednia strona  1 ... 7, 8, 9, 10, 11, 12, 13 ... 17  Następna strona
Polskie treści w calibre - komentarze 
Autor Wiadomość
Użytkownik
Avatar użytkownika

Dołączył(a): 09 cze 2011 14:29:58
Posty: 131
eCzytnik: Kindle 3 WiFi
Post Re: Polskie treści w calibre - komentarze
:oops:

_________________
No rest for the wicked. But there is a little... very little... hope.


21 lip 2011 17:45:51
Zobacz profil
Użytkownik

Dołączył(a): 22 lip 2011 15:38:04
Posty: 3
eCzytnik: Kindle 3G
Post Re: Polskie treści w calibre - komentarze
Przygotowałem takie coś dla nowyobywatel.pl - strony „Nowego Obywatela” - kwartalnika o tematyce społeczno-politycznej. Recipe powinien zasysać artykuły z trzech działów: "Aktualności", "Opinie" i "Nasze rozmowy".
Kod:
class NowyObywatel(BasicNewsRecipe):
   title          = u'NowyObywatel.pl'
   publisher = u'Stowarzyszenie „Obywatele Obywatelom”'
   description = u'Strona WWW kwartalnika „Nowy Obywatel”'
   language = 'pl'
   __author__ = u'Stowarzyszenie „Obywatele Obywatelom”'
   oldest_article = 7
   max_articles_per_feed = 100
   cover_url = 'http://nowyobywatel.pl/img/nowyobywatel.gif'

   feeds          = [(u'Aktualno\u015bci',
u'http://nowyobywatel.pl/?cat=3&feed=rss2'),
                         (u'Opinie',
u'http://nowyobywatel.pl/?cat=7&feed=rss2'),
                         (u'Nasze rozmowy',
u'http://nowyobywatel.pl/?cat=8&feed=rss2')
                        ]


Akurat w ciągu ostatnich 7 dni nie było żadnych artykułów w działach "Opinie" i "Nasze rozmowy", więc gdyby ktoś chciał sobie ściągnąć jakieś teksty z tych sekcji, musi zmienić oldest_article = 7 na np. 30...

Nie wiem, czy wszystko jest ok, czy coś można by zrobić lepiej?


Ostatnio edytowano 22 lip 2011 19:27:31 przez ps82, łącznie edytowano 1 raz



22 lip 2011 16:00:44
Zobacz profil
Użytkownik

Dołączył(a): 12 lip 2011 23:29:14
Posty: 26
Lokalizacja: WLKP
eCzytnik: Kindle 3 WiFi
Post Re: Polskie treści w calibre - komentarze
ps82 napisał(a):
Nie wiem, czy wszystko jest ok, czy coś można by zrobić lepiej?

popraw i wstaw w Code ... teraz OK
wieczorem to oblookam ... działa

_________________
Pozdrawiam {:-) M
.
nauka słówek
śmiech TO zdrowie
meczyki.TV


22 lip 2011 21:25:13
Zobacz profil ICQ WWW
Użytkownik

Dołączył(a): 16 lip 2011 14:21:10
Posty: 133
eCzytnik: Kindle 3
Post Re: Polskie treści w calibre - komentarze
Dziękuję za odpowiedzi w sprawie artykułów wielostronicowych. Niestety w tym przypadku wersja do druku nie pomoże, gdyż takowej nie ma (ok, jest ale dla osób opłacających abonament). Chodzi mi o stronę gry-online.pl, poniżej link do przykładowej, wielostronicowej zapowiedzi http://www.gry-online.pl/S022.asp?ID=7581. Analizując reguły w calibre znalazłem funkcję append_page ale jest ona dla mnie niezbyt zrozumiała i byłbym wdzięczny o wytłumaczenie jej działania. Poniższy kod opierałem na append_page z reguły pclab.pl i adventure gamers.

def append_page(self, soup, appendtag, position):
pager = soup.find(name='a',attrs={'class':'num_str_nex'})

if pager:
nexturl = pager['href']
soup2 = self.index_to_soup('http://www.gry-online.pl/' + nexturl)
pagetext = soup2.find(name='p', attrs={'class':'wtx1'})
pagetext.extract()
pos = len(appendtag.contents)
appendtag.insert(pos, pagetext)
pos = len(appendtag.contents)
self.append_page(soup2, appendtag)

Link do całej reguły: http://www.mediafire.com/?s1kdd22a9ah2542. Pozdrawiam.


24 lip 2011 11:49:15
Zobacz profil
Użytkownik

Dołączył(a): 12 lip 2011 23:29:14
Posty: 26
Lokalizacja: WLKP
eCzytnik: Kindle 3 WiFi
Post Re: Polskie treści w calibre - komentarze
chłopaki możecie sprawdzić u siebie recepte na rzeczpospolitą bo u mnie sciąga tylko 25 artykułów a nie tak jak mam ustawione 100
oldest_article = 1
max_articles_per_feed = 100
chodzi o to że w ciągu roboczego dnia jest więcej do pobrania - nie liczyłem dokładnie ale na pewno więcej niż 25 - a takie zachowanie wycina wiadomości
najlepiej to sprawdzić porównując z czytnikiem rss i tym co zapodało nam calibre

_________________
Pozdrawiam {:-) M
.
nauka słówek
śmiech TO zdrowie
meczyki.TV


26 lip 2011 16:42:33
Zobacz profil ICQ WWW
Użytkownik

Dołączył(a): 12 lip 2011 23:29:14
Posty: 26
Lokalizacja: WLKP
eCzytnik: Kindle 3 WiFi
Post Re: Polskie treści w calibre - komentarze
zauważyłem ten problem również w innych gazetkach - calibre pobiera tylko ostanie 25 news'ów - można to łatwo podejrzeć w spisie treści

czy u Was jest tak samo?

_________________
Pozdrawiam {:-) M
.
nauka słówek
śmiech TO zdrowie
meczyki.TV


02 sie 2011 12:09:39
Zobacz profil ICQ WWW
Admin

Dołączył(a): 13 cze 2008 14:47:02
Posty: 2836
Lokalizacja: Gdańsk
eCzytnik: kindle
Post Re: Polskie treści w calibre - komentarze
Drodzy czytelnicy rzepy :D

Macie max. 25 artykułów w kategorii, bo rssy rzepy nie zawierają więcej: http://rss.feedsportal.com/c/32536/f/482351/index.rss

W czytniku rss może być ich więcej, jeśli łączy się częściej niż raz w ciągu doby. A calibre zaczytuje kanał rss jednorazowo, bezpośrednio przed stworzeniem pliku.

_________________
Zgred - Rafał Ziemkiewicz napisał(a):
Dziś trzeba pisać o mieczach, czarach, toporach i wojowniczkach w blaszanych bikini, wszystko inne to już jest nisza w niszy. Albo o nastoletnich wampirach.
Porównywarka cen ebooków


02 sie 2011 12:18:47
Zobacz profil WWW
Użytkownik

Dołączył(a): 12 lip 2011 23:29:14
Posty: 26
Lokalizacja: WLKP
eCzytnik: Kindle 3 WiFi
Post Re: Polskie treści w calibre - komentarze
nie tylko rp.pl tak robi bbc en ma tak samo
w sumie nie spotkałem kanału który 'nadaje' więcej
więc ... w takim razie do czego jest to
Kod:
max_articles_per_feed = 100

_________________
Pozdrawiam {:-) M
.
nauka słówek
śmiech TO zdrowie
meczyki.TV


02 sie 2011 16:47:25
Zobacz profil ICQ WWW
Admin

Dołączył(a): 13 cze 2008 14:47:02
Posty: 2836
Lokalizacja: Gdańsk
eCzytnik: kindle
Post Re: Polskie treści w calibre - komentarze
na wszelki wypadek :)

_________________
Zgred - Rafał Ziemkiewicz napisał(a):
Dziś trzeba pisać o mieczach, czarach, toporach i wojowniczkach w blaszanych bikini, wszystko inne to już jest nisza w niszy. Albo o nastoletnich wampirach.
Porównywarka cen ebooków


02 sie 2011 20:11:14
Zobacz profil WWW
Użytkownik

Dołączył(a): 16 lip 2011 14:21:10
Posty: 133
eCzytnik: Kindle 3
Post Re: Polskie treści w calibre - komentarze
Przygotowałem kilka receptur. Nie dostrzegłem żadnych usterek, jeśli jednak takowe się znajdą proszę mnie o tym poinformować i postaram się je poprawić. Oto one:
Android.org.pl - http://www.mediafire.com/?dr4ca2myhex1dgm
Bash.org.pl - http://www.mediafire.com/?emh7aa5w8zyvfc0
Cd-action.pl - http://www.mediafire.com/?wi8f8zxkj81xbda
Dobreprogramy.pl - http://www.mediafire.com/?z85jih8p7k1auij
Filmweb.pl - http://www.mediafire.com/?h0l6ath2nb3v06p
Gram.pl - http://www.mediafire.com/?r51ss4r1psb9220
Niebezpiecznik.pl - http://www.mediafire.com/?223l3kagj225eb2
Popnauka.pl - http://www.mediafire.com/?fmfy9h0kbbna9z6

Enjoy;D


Ostatnio edytowano 18 sie 2011 17:08:31 przez fenuks, łącznie edytowano 1 raz



09 sie 2011 13:01:43
Zobacz profil
Admin
Avatar użytkownika

Dołączył(a): 11 lip 2007 19:38:54
Posty: 3266
Lokalizacja: Kraków
eCzytnik: eClicto, iPad, K3 WiFi, K4
Post Re: Polskie treści w calibre - komentarze
Czemu one są takie ubogie w informacje o samych recepturkach? Ani słowa o autorze, tytule, opisie, licencji... To można spokojnie dodać i one wtedy będą jeszcze ładniejsze :D

_________________
Cytuj:
Muad'Dib uczył się prędko, ponieważ najpierw przeszedł szkolenie jak się uczyć. A najpierwszą ze wszystkich otrzymał lekcję podstawowej wiary, że może się nauczyć. Szokuje odkrycie, jak wielu ludzi nie wierzy, że mogą się nauczyć, a o ile więcej uważa, że nauka jest trudna.


09 sie 2011 13:06:02
Zobacz profil WWW
Użytkownik

Dołączył(a): 16 lip 2011 14:21:10
Posty: 133
eCzytnik: Kindle 3
Post Re: Polskie treści w calibre - komentarze
To detale. Na razie chcę po prostu przetestować na cierpliwych użytkownikach forum czy nie mają jakichś karygodnych błędów, a jeśli nie to dodam brakujące informacje i zgłoszę receptury do calibre;P


09 sie 2011 15:26:53
Zobacz profil
Admin
Avatar użytkownika

Dołączył(a): 11 lip 2007 19:38:54
Posty: 3266
Lokalizacja: Kraków
eCzytnik: eClicto, iPad, K3 WiFi, K4
Post Re: Polskie treści w calibre - komentarze
Ach, chyba że tak. Myślałem, że to wersja finalna, stąd moje uwaga.

_________________
Cytuj:
Muad'Dib uczył się prędko, ponieważ najpierw przeszedł szkolenie jak się uczyć. A najpierwszą ze wszystkich otrzymał lekcję podstawowej wiary, że może się nauczyć. Szokuje odkrycie, jak wielu ludzi nie wierzy, że mogą się nauczyć, a o ile więcej uważa, że nauka jest trudna.


09 sie 2011 15:48:45
Zobacz profil WWW
Użytkownik

Dołączył(a): 14 sie 2011 17:02:41
Posty: 1
eCzytnik: Kindle
Post Re: Polskie treści w calibre - komentarze
Poprawiona recepta dla rp.pl

Kod:
from calibre.web.feeds.news import BasicNewsRecipe

class RzeczpospolitaRecipe(BasicNewsRecipe):
    __license__  = 'GPL v3'
    __author__ = u'kwetal and Tomasz Dlugosz'
    language = 'pl'
    version = 1

    title          = u'Rzeczpospolita OnLine'
    publisher = u'Presspublica Sp.'
    category = u'News'
    description = u'Newspaper'
    oldest_article = 1
    max_articles_per_feed = 100

    no_stylesheets = True
    remove_javascript = True
    encoding = 'utf-8'
    # Seems to work best, but YMMV
    simultaneous_downloads = 1

    feeds = []
    feeds.append(u'http://www.rp.pl/rss/2.html')
    feeds.append(u'http://www.rp.pl/rss/10.html')
    feeds.append(u'http://www.rp.pl/rss/11.html')
    feeds.append(u'http://www.rp.pl/rss/12.html')
    feeds.append(u'http://www.rp.pl/rss/4.html')
    feeds.append(u'http://www.rp.pl/rss/5.html')
    feeds.append(u'http://www.rp.pl/rss/6.html')
    feeds.append(u'http://www.rp.pl/rss/7.html')
    feeds.append(u'http://www.rp.pl/rss/8.html')

    keep_only_tags =[]
    keep_only_tags.append(dict(name = 'div', attrs = {'id' : 'story'}))

    remove_tags =[]
    remove_tags.append(dict(name = 'div', attrs = {'id' : 'socialTools'}))
    remove_tags.append(dict(name = 'div', attrs = {'class' : 'articleToolBoxTop'}))
    remove_tags.append(dict(name = 'div', attrs = {'class' : 'clr'}))
    remove_tags.append(dict(name = 'div', attrs = {'id' : 'recommendations'}))
    remove_tags.append(dict(name = 'div', attrs = {'class' : 'editorPicks'}))
    remove_tags.append(dict(name = 'div', attrs = {'id' : 'articleCopyrightText'}))
    remove_tags.append(dict(name = 'div', attrs = {'id' : 'articleCopyrightButton'}))
    remove_tags.append(dict(name = 'div', attrs = {'class' : 'articleToolBoxBottom'}))
    remove_tags.append(dict(name = 'div', attrs = {'class' : 'more'}))
    remove_tags.append(dict(name = 'div', attrs = {'class' : 'addRecommendation'}))

    extra_css = '''
                    body {font-family: verdana, arial, helvetica, geneva, sans-serif ;}
                    h1{text-align: left;}
                    h2{font-size: medium; font-weight: bold;}
                    p.lead {font-weight: bold; text-align: left;}
                    .authordate {font-size: small; color: #696969;}
                    .fot{font-size: x-small; color: #666666;}
                    .srodtytul {font-weight: bold;}
                    '''

    def skip_ad_pages(self, soup):
        if ('advertisement' in soup.find('title').string.lower()):
            href = soup.find('a').get('href')
            return self.index_to_soup(href, raw=True)
        else:
            return None

    def print_version(self, url):
        start, sep, rest = url.rpartition('/')
        forget, sep, index = rest.rpartition(',')

        return start + '/' + index + '?print=tak'

t3d: kod na forum owijamy w znaczniki [ code ]. Bez tego stracisz formatowanie i python się wyłoży. Poza tym diff byłby lepszy :D


14 sie 2011 20:28:18
Zobacz profil
SwiatCzytnikow.pl
Avatar użytkownika

Dołączył(a): 14 sie 2010 11:00:21
Posty: 1873
eCzytnik: kindle, onyx, nook, kobo, pb, ipad
Post Re: Polskie treści w calibre - komentarze
@t3d: z ciekawości, po co diff, skoro receptę można wkleić w całości? :-)

_________________
http://swiatczytnikow.pl (dawniej: Świat Kindle)
http://ebooki.swiatczytnikow.pl - (prawie) wszystkie polskie e-booki w jednym miejscu, czyli porównywarka ofert księgarni.


14 sie 2011 20:35:10
Zobacz profil WWW
Wyświetl posty nie starsze niż:  Sortuj wg  
Utwórz nowy wątek Ten wątek jest zamknięty. Nie możesz w nim pisać ani edytować postów.  [ Posty: 242 ]  Przejdź na stronę Poprzednia strona  1 ... 7, 8, 9, 10, 11, 12, 13 ... 17  Następna strona


Kto przegląda forum

Użytkownicy przeglądający to forum: Brak zalogowanych użytkowników i 0 gości


Nie możesz rozpoczynać nowych wątków
Nie możesz odpowiadać w wątkach
Nie możesz edytować swoich postów
Nie możesz usuwać swoich postów

Skocz do:  
cron