]> git.armaanb.net Git - lightcards.git/blob - lightcards/parse.py
Clean input better, only parse first two columns
[lightcards.git] / lightcards / parse.py
1 #!/usr/bin/env python
2 # Parse markdown table into tuple of lists
3 # Armaan Bhojwani 2021
4
5 import sys
6 from bs4 import BeautifulSoup
7 import markdown
8
9 from .deck import Card
10
11
12 def md2html(file):
13     """Use the markdown module to convert input to HTML"""
14     with open(file, "r", encoding="utf-8") as input_file:
15         return markdown.markdown(input_file.read(), extensions=['tables'])
16
17
18 def parse_html(html):
19     """Use BeautifulSoup to parse the HTML"""
20     def clean_text(inp):
21         return inp.get_text().rstrip()
22
23     soup = BeautifulSoup(html, 'html.parser')
24     outp = []
25
26     for x in soup.find_all("tr"):
27         outp.append(Card([clean_text(y) for y in x.find_all("td")[:2]]))
28
29     # Return a tuple of nested lists
30     return ([clean_text(x) for x in soup.find_all("th")][:2], outp[1:])
31
32
33 def main(file):
34     return parse_html(md2html(file))
35
36
37 if __name__ == "__main__":
38     print(main(sys.argv[1]))